机器人跑了三十年，现在终于要查证件了

机器人三十年不查证件，为什么现在开始查了

Cloudflare 在 8 月 28 日上线了 BotBase for Operators，让爬虫团队能主动登记身份、走审核流程。这件事反常的地方在于：机器流量已经占到全网 57.4%，但过去三十年靠的只是一份自愿遵守的 robots.txt。旧规则能跑通，是因为三个前提：搜索引擎抓内容会送回流量、误伤机器人的代价很低、识别爬虫只看 User-Age...

推荐理由：这篇文章不是产品公关稿，而是把 BotBase 放进三十年机器人治理的框架里讲，解释了为什么现在必须从自愿遵守转向主动审核。观点有洞察，但属于行业分析而非硬新闻，所以分数落在 78 分这一档。没给更高是因为正文没有其他信源交叉验证，属于单篇深度解读。