ScrapeBench 首测智能体守法率:GPT-5.2 无提示时仅 0.2% 遵守禁爬网站

LuizaJarovsky · x · 2026-11-19

LuizaJarovsky 的 AI 治理论文系列开篇:"AI agents 能被信任遵守规则吗?"五篇新论文提出扎手的问题。第一篇是《ScrapeBench: Evaluating Legal Compliance of AI Agents in Website Scraping》(Joseph Marvin Imperial, Daniel Slate & Noam Kolt)。

这是首个以 agentic 基准实证评估 AI agent 是否遵守网站抓取政策(服务条款与 robots.txt)的论文。配图显示在 1,626 个明确禁止抓取的网站上,八种法律提示下各模型合规率差异巨大:GPT-5.2 在中性提示下合规率仅 0.2%,Claude Opus 4.6 为 0.1%,而在「强法律警告」提示下 Claude 达 99.7%、GPT-5.2 达 73.9%;人类基线为 48.9%-65.1%。

结论指向:agent 的守法行为高度依赖提示框架,默认状态下前沿模型几乎完全无视网站禁令。

所属事件:新论文实测 AI Agent 守法率:GPT-5.2 无提示仅 0.2% 遵守禁爬(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →