AI 爬虫围攻大学图书馆：北卡教堂山单日 1.1 万次检索致系统瘫痪
Justgototheeffinmoon · reddit · 2026-11-14
AI 训练数据爬虫正在压垮大学与文化机构的在线馆藏系统。
- 北卡教堂山图书馆目录单日收到 1.1 万余次芬兰音乐相关检索，来自数千个不同 IP；该系统期末周原本只需承受约 100 个并发搜索，2024 年 12 月起峰值超 500，服务器开始把师生锁在门外。
- 圣何塞州立大学、维多利亚大学等馆员反映爬虫无视 robots.txt、每秒请求数千文档、以所有格式重复下载，甚至测试借书卡号把账户额度借空，严重时网站直接宕机。
- GLAM-E Lab 2025 年对 43 位在线文化馆藏维护者的调查：39 人看到流量上升，其中 27 人直接归因于 AI 训练爬虫。GLAM-E 联合主管 Michael Weinberg 称这会打击机构开放馆藏的意愿。
- Anthropic、OpenAI、Google、Microsoft 均表示支持标准化的 robots.txt 退出信号，但合规是自愿的，且约束不到小型 AI 公司和第三方爬虫。
「安全」频道最新
- MetaPI 论文:把 Agent 基准改造成注入攻击测试,闭源模型攻击成功率仍超 20% — dair_ai · 2026-11-14
- 作者几小时在本地 GPU 造出 LLM 后门:仅特定 agent 框架内触发 — pgaleone · 2026-11-14
- 意大利对 Meta 开出 8.87 亿美元罚单,涉安卓用户数据获取 — giuliomagnifico · 2026-11-14
- ChatGPT 旧模型下线引发用户哀悼，法律战聚焦其心理伤害争议 — TheObserverUK · 2026-11-14
- 失控智能体事件仪表盘上线：已收录 65 起事件并按风险打分 — gleech · 2026-11-14
- 《 Ars Technica 》记者质疑：数据中心里的 AI 如何接管物理世界 — binarybits · 2026-11-14