Cloudflare推出AI流量管理工具,支持按爬虫类型精细管控

7月1日,Cloudflare正式推出AI流量管理工具,面向网站所有者提供更细粒度的爬虫识别与控制能力。该工具将AI相关流量划分为搜索爬虫、智能体爬虫和训练爬虫三类,站长可根据业务需求分别设置放行或拦截策略。相比整体屏蔽外部访问的做法,新功能旨在减少对SEO和正常搜索流量的影响。Cloudflare表示,该方案可帮助网站限制高频抓取或用于模型训练的爬虫访问,保护广告页面、内容资产和流量变现效率。

上一篇:

下一篇:

发表回复

登录后才能评论