发帖上 HN 后,个人网站被 AI 爬虫流量挤爆
sammy0910 · hn · 2026-10-13
开发者 sammy0910 记录了一次亲身经历:把一条帖子发上 Hacker News 后,个人网站随即涌入大量 AI 爬虫流量。各家 AI 公司的爬虫几乎同时高频抓取页面,流量规模远超正常人类访客,给小型个人站点带来了明显的带宽与可用性压力。文章展示了访问日志中的爬虫来源分布,反映出当前 AI 数据抓取对普通站长造成的真实负担,是 AI 爬虫生态问题的又一实例。
「Infra」频道最新
- Claude 模型登陆 Google Cloud:Anthropic 托管版正式可用 — claudeai · 2026-10-23
- GLM-5.3-Flash 实现 1M token 上下文训练，较基线提升 64 倍 — AndrewLBeam · 2026-10-23
- GLM-5.3-Flash 在 SkyRL 训练上下文拉到 100 万 token，步速提升 2.1 倍 — AndrewLBeam · 2026-10-23
- Perplexity 联手 AMD 推便携 AI 主机，本地跑 27B 模型做实时研究 — AravSrinivas · 2026-10-23
- Liquid AI 发布 RIPL 推理引擎：端到端响应快至 50ms 内 — JosephJacks_ · 2026-10-23
- OpenJet 引擎宣称 Qwen3.8-27B 推理速度达 llama.cpp 1.9 倍 — JeremyCMorgan · 2026-10-23