**AI 爬虫回归纯文本时代:Chris Shiflett 呼吁回归 HTML 标准以应对 AI 搜索**

_Ready or Not, Here Comes AI, by Chris Shiflett_

> 文章作者 Chris Shiflett 指出,AI 爬虫(如 GPTBot)正重演 2004 年 Googlebot 的早期模式,即主要抓取纯文本 HTML 而非执行 JavaScript。他批评了现代开发者依赖 JavaScript 导致网站对 AI 不可见的现象,并强调为了被 AI 有效发现,网站必须回归构建标准、提供清晰的 HTML 结构,而非依赖复杂的动态渲染。

**来源信息**
- **来源**:Hacker News:AI 热帖
- **分类**:行业
- **发布时间**:2026-11-17 23:46(北京时间)
- **原文**:[打开原文](https://shiflett.org/blog/2026/ready-or-not-here-comes-ai)