📰 Cloudflare 细化网络爬虫屏蔽管理，将默认禁止 AI 代理与训练爬虫访问广告页面

IT之家 7 月 2 日消息，互联网基础服务企业 Cloudflare 当地时间 1 日宣布细化网络爬虫屏蔽管理，根据其行为对爬虫机器人赋予搜索、代理（智能体）、训练等一系列标签，并计划在 2026 年 9 月 15 日默认禁止 AI 代理与训练爬虫访问含广告的网页。

C

查看原文 → ^↗