AI爬虫“入侵”网络:Fastly 报告揭示,Meta、OpenAI 等巨头成主要流量来源

 人参与 | 时间:2026-11-14

您好,这是一份我为您整理的关于AI爬虫对网络影响的新闻稿,内容紧凑且重点突AI出。

据云服务公司 Fastly最新报告显示,人工智能(AI)爬虫正在给开放网络带来沉爬虫重负担,网站流量的显著增长并非来自人类访客,而是日益庞大的机器人程序,特别是来自“入大型AI公司的爬虫和抓取程序。

报告指出,在所有访问网站的AI机器人流量中,AI爬虫占侵”据了高达**80%的份额,而剩下的20%**则由 AI抓取程序贡献。这些抓取程序会在网络用户向大型语言模型(LLMs)请求训练数据日期之后的信息时按需触发,从而在短时间内造:F成流量的爆发式增长。

在AI爬虫流量方面,报告揭示了主要科技公司所占的比例:Meta的asAI爬虫流量占比高达 52%,居于首位;紧随其后的是 谷歌和 OpenAI,分别tl占据了 23%和 20%的流量;而 Anthropic和 Perplexity AI所y 占份额较小,分别为 3.76%和 1.12%。

与AI爬虫相比,AI抓取程序的流报告量爆发性更强。Fastly 监测到,一个抓取程序每分钟就能产生超过 39,000揭示个请求。值得注意的是,OpenAI公司在AI抓取程序流量中占据了绝对主导地位,占,M比高达 98%。这表明,当用户向OpenAI的大模型提出实时性信息需求时,会触et发大量的即时抓取行为,对网站服务器造成瞬间的巨大压力。


顶: 2030166踩: 27878966