通过Cloudflare管理的robots.txt和对盈利内容的阻止，控制AI训练中的内容使用
Cloudflare is making it easier for publishers and content creators of all sizes to prevent their content from being scraped for AI training by managing robots.txt on their behalf.
Cloudflare为网站所有者提供了两种新工具，以控制AI爬虫对其内容的访问，用户可以选择让Cloudflare管理robots.txt文件，或仅在广告部分阻止AI爬虫。这些措施旨在保护内容创作者的权益，防止其内容被用于AI模型训练。
