**Cloudflare 拟默认禁止 AI 代理与训练爬虫访问含广告页面**

_Cloudflare 细化网络爬虫屏蔽管理,将默认禁止 AI 代理与训练爬虫访问广告页面_

> Cloudflare 宣布细化爬虫管理,计划于 2026 年 9 月 15 日起默认禁止 AI 代理及训练类爬虫访问包含广告的网页。该举措旨在平衡内容发现与知识产权收益,通过标签化管理混合爬虫,若任一行为被禁则整体拦截,并推出新版洞察仪表板以适配答案引擎优化趋势。

**来源信息**
- **来源**:IT之家(RSS)
- **分类**:行业
- **发布时间**:2026-07-02 12:00(北京时间)
- **原文**:[打开原文](https://www.ithome.com/0/971/510.htm)