实测死互联网理论:建10亿网页供AI爬虫抓取

metehan777 · x · 2026-07-15

为了验证“死互联网理论”(即网络上大部分流量来自机器人),开发者搭建了约 10 亿个网页。\n\n此举旨在测试网络另一半的真实生态:当人类可能为使用 ChatGPT 付费时,站长却需要为每一次 AI 爬虫的访问支付服务器成本。该项目实时统计并展示了每一笔因机器人抓取而产生的费用。

所属事件:10亿网页实验揭示AI抓取成本(2 条相关)→

原文链接 →