TIME 为人工智能机器人提供了一个不同的网站，内置广告

GPT-5.6 Sol 使用的代币是 GPT-5.5 的两倍 在我的 Codex 工作流程中，GPT-5.6 Sol xhigh 现在每个会话使用的令牌数量是 GPT-5.5 xhigh 的两倍多。

对于法典… 《时代》杂志现在提供两个不同版本的网站。

人类得到了杂志。

人工智能爬虫会得到一个精简的降价副本，其中包含没有人会看到的广告。

我从同一台机器上一遍又一遍地获取了一篇普通的《时代周刊》健康文章《晨光习惯睡眠专家发誓》，每次只更改用户代理标头。

该标头是每个浏览器和机器人发送的字符串来说明它是什么。

TIME 阅读并决定返还哪些内容。

作为 Chrome，我得到了 200 OK、text/html 和 303,235 字节。

完整的页面、设计、图像、脚本。

与 Safari 一样，为 303KB。

与 Googlebot 一样，HTML 也同样为 303KB。

然后我就以助理爬虫的身份问了。

作为 ClaudeBot，我得到了 200 OK、文本/markdown 和 13,409 字节。

与 PerplexityBot 一样，逐字节相同。

与 OpenAI 的 OAI-SearchBot 一样，同样如此。

相同的 URL，相同的秒，大小的二分之一，以及完全不同的格式：没有 HTML，没有布局，只有语言模型可以处理的干净的 Markdown。

有几个机器人甚至没有意识到这一点。

OpenAI 用于训练和实时获取的代理 GPTBot 和 ChatGPT-User 返回了 406。

已阻止。

但为 ChatGPT 的搜索索引提供数据的 OAI-SearchBot 却被降价了。

所以这不是一个全面的机器人政策。

对于每个机器人来说，时间正在选择谁获得无读者版本。

Markdown 副本上的响应标头： 内容类型：文本/markdown；字符集=utf-8 缓存控制：无存储

🔗 原始来源

如果你要核对细节，可以再看原文： Hacker News AI原文链接