跳到正文
Hacker News 首页

TIME 给 AI 爬虫看的是另一套网站,里面塞了人看不到的广告

TIME Is Serving AI Bots a Different Website, with Ads Built In

TIME 会根据来访者的身份返回不同页面。普通人用浏览器看到的是完整的杂志网页,但 ClaudeBot、PerplexityBot 和 OAI-SearchBot 这些 AI 爬虫拿到的是一份只有 13KB 的纯文本 Markdown,体积是原网页的 1/23。

推荐理由:TIME 对 ClaudeBot 等 AI 爬虫返回 13KB 的纯文本 Markdown,体积只有人类网页的 1/23,其中还夹带赞助内容,这条实测展示了同一网址按来访者身份分发不同版本的做法。

读原文 ↗导出 Markdown