The Verge
·
Cloudflare将默认阻止AI爬虫
💡
原文英文，约500词，阅读约需2分钟。
📝
内容提要
Cloudflare宣布默认阻止已知AI爬虫，以保护原创内容。新域名所有者可选择允许爬虫访问，并可实施“按爬取付费”计划，确保AI公司合法使用高质量内容。
🎯
关键要点
- Cloudflare宣布默认阻止已知AI爬虫，以保护原创内容。
- 新域名所有者可以选择允许AI爬虫访问，并可实施“按爬取付费”计划。
- “按爬取付费”计划允许出版商为AI爬虫设置访问内容的价格。
- Cloudflare早在2023年就开始帮助网站阻止AI爬虫，并允许网站阻止所有AI机器人。
- 多个主要出版商和在线平台支持Cloudflare的新AI爬虫限制。
- Cloudflare与AI公司合作，帮助验证爬虫并明确其目的。
- Cloudflare CEO表示，保护原创内容是互联网的重要使命。
❓
延伸问答
Cloudflare为什么要阻止AI爬虫？
Cloudflare阻止AI爬虫是为了保护原创内容，防止它们在没有许可或补偿的情况下访问内容。
新域名所有者如何处理AI爬虫？
新域名所有者可以选择允许AI爬虫访问，并可实施“按爬取付费”计划。
什么是“按爬取付费”计划？
“按爬取付费”计划允许出版商为AI爬虫设置访问内容的价格，AI公司可以选择注册或拒绝。
Cloudflare是如何帮助网站阻止AI爬虫的？
Cloudflare允许网站阻止所有AI爬虫，并通过比较已知AI爬虫列表来识别需要阻止的爬虫。
哪些出版商支持Cloudflare的新AI爬虫限制？
多个主要出版商和在线平台，如美联社、The Atlantic、Fortune、Stack Overflow和Quora，支持Cloudflare的新限制。
Cloudflare的CEO对保护原创内容有什么看法？
Cloudflare的CEO表示，保护原创内容是互联网的重要使命，AI爬虫在没有限制地抓取内容。
➡️
