# Cloudflare 给 AI 公司下了最后通牒：9 月 15 日前把搜索爬虫和 AI 爬虫分开，否则默认屏蔽

> 原标题：Cloudflare’s new policy pushes AI companies to pay for publishers’ content

- 来源：TechCrunch · AI
- 发布时间：2026-07-01T17:48:37.000Z
- AX AI 日报：https://ai-daily.ax0x.ai/items/41815
- 原文：https://techcrunch.com/2026/07/01/cloudflares-new-policy-pushes-ai-companies-to-pay-for-publishers-content/

## 摘要

Cloudflare 宣布从 2026 年 9 月 15 日起，会在所有带广告的页面上默认屏蔽“混合用途”爬虫——也就是那些既给搜索引擎用、又给 AI 训练和 AI 代理（让模型进业务流程干活）用的爬虫。这个默认屏蔽会覆盖新客户、老客户新开的站点，以及所有免费用户。网站主可以手动改设置放行，但 Cloudflare 的默认态度很明确：要么把搜索抓取和 ...

## 推荐理由

Cloudflare 作为 CDN 巨头，这次不是发声明表个态，而是直接在基础设施层设了默认规则。我会先打个折，因为目前还只是政策宣布，实际执行和 AI 公司会不会乖乖掏钱还得看。但这条消息值得放出来：它把“AI 该不该为训练数据付费”这个老问题，从道德争论变成了一个可以一键开关的技术选项，而且给了明确的时间点。

## 锐评

Cloudflare 这次出手挺干脆，不再跟 AI 公司商量，而是直接改默认设置。从 2026 年 9 月 15 日起，所有带广告的页面都会默认屏蔽那些“混合用途”爬虫——就是既给搜索引擎用，又顺手把数据拿去训练模型或喂给 AI 代理（让模型进业务流程干活）的爬虫。新客户、老客户新开的站点和所有免费用户都会被这个默认规则覆盖，网站主可以手动放行，但门槛已经摆在那了。

这个动作的潜台词很清楚：想白嫖内容去训模型？先跟出版商谈好付费授权。不过正文没披露这个政策到底覆盖了多少网站，也没说 Cloudflare 自己会不会搞一套付费授权通道。这点先别太激动，因为如果只是堵住免费口子，却没有配套的交易机制，出版商未必能直接拿到钱。另外，AI 公司会不会换个爬虫标识绕过去，或者干脆不用 Cloudflare 的客户内容，也是未知数。