The Cloudflare Blog
·
谷歌的AI优势：为何爬虫分离是实现公平互联网的唯一途径
内容提要
英国竞争与市场管理局（CMA）正在咨询谷歌的行为，旨在提升出版商对其内容使用的选择权和透明度。新规则希望确保出版商能有效控制其内容在生成性AI中的使用，防止谷歌滥用市场主导地位。尽管CMA提议的措施有积极意义，但仍未能解决出版商的根本问题，建议分离爬虫功能以增强控制权。
关键要点
-
英国竞争与市场管理局（CMA）正在咨询谷歌的行为，以提升出版商对其内容使用的选择权和透明度。
-
新规则旨在确保出版商能有效控制其内容在生成性AI中的使用，防止谷歌滥用市场主导地位。
-
CMA将谷歌指定为具有战略市场地位（SMS），允许针对数字市场进行有针对性的干预。
-
出版商面临的问题是无法有效选择是否允许谷歌使用其内容，导致竞争不公平。
-
谷歌的搜索爬虫（Googlebot）在获取互联网内容方面具有明显优势，影响了其他AI开发者的竞争能力。
-
CMA提出的出版商行为要求包括增加透明度和确保有效归属，但仍未能解决根本问题。
-
建议将谷歌的爬虫功能分离，以增强出版商对内容使用的控制权。
-
分离爬虫功能被认为是确保公平数字生态系统的有效解决方案，能够保护出版商的利益。
-
当前提案未能确保谷歌在内容访问方面与其他AI开发者处于同等条件，可能导致出版商的选择权减少。
-
Cloudflare承诺与CMA及其他合作伙伴进行进一步咨询，以推动有效的行为要求。
延伸解读
出版商的选择权与透明度
英国竞争与市场管理局（CMA）提出的新规则旨在提升出版商对其内容使用的选择权和透明度。然而，当前提案未能根本解决出版商面临的控制权不足问题。出版商仍需依赖谷歌的机制来管理内容使用，这可能导致他们在市场中的竞争力进一步削弱。
谷歌的市场主导地位
谷歌被认定为具有战略市场地位（SMS），使其在搜索和广告市场中占据主导地位。这种市场力量使得其他AI开发者难以与之竞争，尤其是在内容获取方面。谷歌的爬虫功能未分离，导致出版商在内容使用上处于不利地位，无法有效阻止其内容被用于生成性AI。
爬虫功能分离的必要性
建议将谷歌的爬虫功能分离，以确保出版商能够控制其内容的使用。这一措施被认为是实现公平数字生态系统的有效解决方案，能够保护出版商的利益，并促进市场竞争。若不采取此措施，出版商将继续面临谷歌的市场优势，难以实现公平竞争。
延伸问答
CMA对谷歌的行为咨询的目的是什么？
CMA的咨询旨在提升出版商对其内容使用的选择权和透明度，确保他们能有效控制内容在生成性AI中的使用。
谷歌被指定为战略市场地位（SMS）有什么影响？
被指定为SMS后，CMA可以对谷歌实施有针对性的干预措施，以改善数字市场的竞争状况。
出版商面临的主要问题是什么？
出版商无法有效选择是否允许谷歌使用其内容，导致竞争不公平。
CMA提出的出版商行为要求包括哪些内容？
CMA提出的要求包括增加透明度、确保有效归属以及赋予出版商对内容使用的控制权。
为什么建议将谷歌的爬虫功能分离？
分离爬虫功能可以增强出版商对内容使用的控制权，确保公平的数字生态系统。
谷歌的爬虫在获取内容方面的优势是什么？
谷歌的爬虫在获取互联网内容方面具有明显优势，访问的页面数量远超其他AI开发者的爬虫。
