Cloudflare 重构 AI 爬虫管控,从一键拦截到三段式分类
来自:www.oschina.net 收录时间:2026-07-28
Cloudflare 宣布彻底重构 AI 爬虫管控体系。过去那个一键"拦截所有 AI 机器人"的开关被拆成了三个独立选项:Search(搜索)、Agent(智能体)、Training(训练)——包括免费版在内的全部客户都可以分别配置。 这是一个比表面看起来更重要的分类。 Search 爬虫的目的是索引内容、在查询时给出答案。Cloudflare 的态度是:...
阅读更多