两天实测:AI 爬虫抓取一篇报道 135 次,助手实时调用 217 次
nikvassev · x · 2026-10-30
作者追踪了访问某客户媒体报道的机器人数据:两天内,来自 Amazon、Meta、Anthropic、OpenAI 的 AI 训练爬虫共抓取 135 次(Amazonbot 60 次最多,Meta-ExternalAgent 42 次,ClaudeBot 19 次);ChatGPT、Perplexity 等 AI 助手为回答用户问题实时抓取 217 次(OAI-SearchBot 70 次,Meta-WebIndexer 60 次,PerplexityBot 33 次);传统 SEO 爬虫另有 278 次抓取。结论:PR 报道正成为品牌进入 AI 训练数据和 AI 回答的信息来源,是 GEO/AEO 时代的入口。
「Infra」频道最新
- 开发者观察:A100 与 B300 跑同一 posttrained 模型输出竟不相同 — Kyrannio · 2026-10-30
- 小开发者租不到 GPU:Modal 上抢 8 张 B300 全凭运气 — Kyrannio · 2026-10-30
- SanDisk 财报电话会 8 大要点:FY27 产能约半数已被长约锁定 — tengyanAI · 2026-10-30
- 100 美元买 600 万 token:若成本再降千倍,2027 年或见 60 亿 — dfinke · 2026-10-30
- Mac 上并行跑多个 Codex 的防冲突与磁盘清理实践 — ComprehensiveShake76 · 2026-10-30
- 开发者吐槽租不到 2-8 张 B200:要么限 50 美元要么签 12 万企业合同 — Kyrannio · 2026-10-30