GPTBot 24小时狂刷 312 万次拖垮服务器,站长改 robots.txt 解围
tsi_org · x · 2026-10-03
一位站长称 OpenAI 的爬虫在 24 小时内向其服务器发起超过 318 万次请求,导致服务器每 10 分钟崩溃一次。数据显示 GPTBot/1.0 命中 3,123,466 次,GPTBot/1.2 命中 58,746 次,另有零星 ChatGPT-User 和 OAI-SearchBot 请求。
解决办法很直接:在 robots.txt 中添加规则屏蔽这些爬虫后,虚假流量全部停止。作者提醒网站运营者检查并编辑 robots.txt,「不是所有流量都是好流量」。
「模型」频道最新
- Cloudflare 在 Hugging Face 开源 Jev 替代品,基于 Qwen 采用 Apache 2.0 — aniketmaurya · 2026-10-03
- Grok Bot 用量额度重置，网友庆祝周末畅玩 — mark_k · 2026-10-03
- Every 实测:GPT-6 Astra 强在写作,长任务仍输给 Anthropic Fable — every · 2026-10-03
- 实测打脸宣传：GPT 6.1 Sol 比上代慢 2.5 倍还更贵 — RexDouglass · 2026-10-03
- OpenAI 推出 GPT-6.1 Sol:价格仅为 Astra 五分之一,跑分反超 — dl_weekly · 2026-10-03
- Meta/Stanford 严格版评测:七个前沿模型写 CUDA kernel 无一跑赢 PyTorch — lmoroney · 2026-10-03