📰 报告称《时代》杂志为 AI 爬虫设计 Markdown 格式页面，内嵌广告内容

IT之家 8 月 6 日消息，科技媒体 vincentschmalbach 昨日（8 月 5 日）发布博文，报道称《时代》（TIME）针对当前网络环境，为普通人类读者和 AI 爬虫设计了不同的访问逻辑。

根据开发者文森特 · 施马尔巴赫（Vincent Schmalbach）测试，在访问《时代》杂志相同链接的文章后，面向人类读者会展示常规页面，而面向 AI 爬虫则提供单独、带有广告的版本。

面向 AI 爬虫的页面采用 Markdown 格式。相比普通网页中的图片、菜单和显示代码，Markdown 更便于基于文本的 AI 系统解析文章和链接。

施马尔巴赫测试通过更改 User-Agent（用于标识访问网站的浏

查看原文 → ^↗