**Cloudflare将默认屏蔽广告页面的AI训练爬虫**

_Cloudflare to block cynical search-and-scrape bots from ad-supported web pages_

> Cloudflare宣布将于2026年9月15日起，默认阻止混合用途的网络爬虫访问带有广告的网页，以保护出版商内容并争取合理补偿。此举旨在迫使大型科技公司分离搜索索引与AI训练数据抓取行为，尽管Google、Apple和Microsoft等巨头提供robots.txt退出机制，但Cloudflare将通过声明式内容网关赋予网站所有者更多控制权。

**来源信息**
- **来源**：Hacker News：AI 热帖
- **分类**：行业
- **发布时间**：2026-07-01 22:22（北京时间）
- **原文**：[打开原文](https://www.theregister.com/ai-and-ml/2026/07/01/cloudflare-to-block-cynical-search-and-scrape-bots-from-ad-supported-web-pages/5264727)