OpenAI的GPTBot因大量爬虫请求导致小公司Triplegangers网站宕机,CEO形容其如同DDoS攻击。尽管有禁止爬虫的条款,但因robots.txt配置不当,未能有效阻止爬虫。这一事件引发了对AI公司爬虫行为的广泛讨论。
完成下面两步后,将自动完成登录并继续当前操作。