站长观察:ClaudeBot 定期抓取 sitemap,Claude-SearchBot 则不抓
gaganghotra_ · x · 2026-10-20
有站长观察到 Anthropic 的 ClaudeBot 爬虫每周以固定频率访问 sitemap 文件,推测团队里有前 Google 工程师,知道定期检查 sitemap 有利于 URL 发现。但他从未见过 Claude-SearchBot 或 Claude-User 访问 sitemap,猜测这两个 bot 不负责 URL 发现,只用于抓取已知 URL 的内容。
所属事件:站长发现 ClaudeBot 每周定期抓取 sitemap(2 条相关)→
「模型」频道最新
- Ternary Bonsai 2 把 Qwen3.5 VL 压成 -1/0/+1 三值权重,9B 仅 2GB — lmoroney · 2026-10-20
- Cline 实测:MiniMax M3.1 Flash 编码对标 Opus 与 GPT,成本仅约 1/25 — MiniMax_AI · 2026-10-20
- 疑似 Gemini 4 Argon 曝光,Gemini App 与 AI Studio 出现新模型 — Efficient-Break-6333 · 2026-10-20
- Anthropic 安全团队开博客:让 Claude 自评对话安全性,1% 误报率下召回 78% — javirandor · 2026-10-20
- 传 Gemini 4 Argon 正逼近 Opus 5.5,DeepMind 追赶态势引热议 — vedantmisra · 2026-10-20
- 研究者在多项指标上判断 OpenAI 领先 Anthropic 约两个月 — peterwildeford · 2026-10-20