蓝点网
·
美国CDN提供商Fastly发布25Q2威胁报告 报告显示80%的流量都来自AI爬虫而不是真人
内容提要
Fastly发布的2025Q2威胁报告显示，80%的流量来自AI爬虫，真正威胁在于推理阶段的即时查询，峰值可达每分钟39,000次请求，类似DDoS攻击。Meta、Google和OpenAI的爬虫流量占95%。
关键要点
-
Fastly发布的2025Q2威胁报告显示，80%的流量来自AI爬虫。
-
真正的威胁在于AI聊天机器人推理阶段的即时查询，峰值可达每分钟39,000次请求。
-
即时查询的请求数量远高于抓取训练数据的AI爬虫，后者平均每分钟产生1,000次请求。
-
如果网站没有采取技术手段限制并发，这些即时查询可能导致类似DDoS攻击的效果。
-
Meta、Google和OpenAI的爬虫流量占总流量的95%，其中Meta占52%。
-
OpenAI在即时抓取方面占据主导地位，其爬虫合计占即时抓取流量的98%。
-
北美网站90%的AI爬虫流量来自抓取数据的爬虫，而欧洲、中东和非洲地区59%的流量来自即时查询。
-
OpenAI的GPTBot覆盖范围广，覆盖率高达95%，而Meta则专注于深度索引。
延伸解读
AI爬虫流量的影响
Fastly的报告显示，AI爬虫流量的激增可能会对网站造成严重影响，尤其是在高峰期的即时查询请求。网站管理员需要关注流量来源，及时采取技术手段限制并发请求，以防止类似DDoS攻击的情况发生。
区域流量差异
报告指出，北美和欧洲、中东、非洲地区的AI爬虫流量构成存在显著差异。北美网站90%的流量来自抓取数据的爬虫，而欧洲等地区则有59%的流量来自即时查询。这种差异可能影响不同地区网站的防护策略和流量管理。
主要爬虫来源分析
Meta、Google和OpenAI的爬虫流量占总流量的95%，其中OpenAI在即时抓取方面占据主导地位。网站运营者应关注这些主要爬虫的行为，以便优化内容和提升网站的抗压能力。
延伸问答
Fastly的2025Q2威胁报告主要内容是什么？
报告显示80%的流量来自AI爬虫，真正的威胁在于推理阶段的即时查询，峰值可达每分钟39,000次请求。
AI爬虫在网站流量中占比如何？
AI爬虫流量占总流量的80%，其中Meta、Google和OpenAI的爬虫流量占95%。
即时查询对网站的影响是什么？
即时查询可能导致类似DDoS攻击的效果，造成网站服务器不堪重负，出现访问堵塞或无法访问。
哪个公司在即时抓取流量中占主导地位？
OpenAI在即时抓取流量中占据主导地位，其爬虫合计占即时抓取流量的98%。
北美和欧洲地区的AI爬虫流量有什么不同？
北美网站90%的AI爬虫流量来自抓取数据的爬虫，而欧洲、中东和非洲地区59%的流量来自即时查询。
Meta和OpenAI在爬虫流量中各占多少？
Meta占52%，Google占23%，OpenAI占20%。
