实测:ChatGPT 爬虫开始渲染 JavaScript,同一 URL 两种页面
gaganghotra_ · x · 2026-11-13
SEO 从业者 aminfseo 每周监测 ChatGPT 抓取网页的方式,发现重大变化:ChatGPT 现在似乎有两条获取页面的通道——
- 旧通道 ChatGPT-User:实时抓取,不执行 JavaScript,客户端渲染的内容完全不可见;
- 新通道:来自其自有搜索索引的缓存页,由 OAI-SearchBot 爬取,至少部分经过了 JavaScript 渲染。
作者在一个重 JS 的商品列表页上实测:实时抓取只返回一个搜索框,而缓存副本却是完整的商品网格、筛选器、价格与商品数量——同一 URL,两个完全不同的页面。
日志数据也支持这一判断:OAI-SearchBot 请求 JS、CSS 和 API 文件的量持续上升,10 月是有记录以来最高的月份,11 月仍在继续。配图显示 10 月初两条爬虫的抓取量出现交叉:chatgpt-user 下降,oai-search(带 JS 渲染)上升。对做 SEO/AEO 的人来说,这意味着服务端渲染和缓存友好性重新变得关键。
「模型」频道最新
- 用户吐槽 GPT-6.1 Terra:总能把我气到,根本没法合作 — Angaisb_ · 2026-11-13
- 从业者实测:用户更爱用 GPT-5.6 Sol 而非新的 GPT-6 Sol — josh_bickett · 2026-11-13
- Fable 5.2 机器人基准实测:456 项任务整体成功率从 34% 升至 50% — GuanyaShi · 2026-11-13
- 博主让三大前沿模型用 computer use 在 Slides 里做报告,将公开投票比高下 — iruletheworldmo · 2026-11-13
- OpenAI 预告「Cyber at the Frontier」直播,将发布网络安全最新公告 — BLCNYY · 2026-11-13
- MIT 权重编程遭遇线性规划:1 分钟求解替代 8 小时试错,改动权重再少 8 倍 — CatAstro_Piyush · 2026-11-13