1Password 实验:AI 修安全漏洞仅 26% 成功,未经审查补丁净负收益
GaryMarcus · x · 2026-09-06
1Password 研究人员用 Claude 和 ChatGPT 对真实漏洞跑了 6000 多个 AI 生成的补丁,结果很不乐观:AI 只有 26% 的时候能真正修好安全漏洞,一半的情况下连原始 bug 都没修掉,更有 4.5% 的情况引入了原本不存在的新漏洞。
研究还发现,审查一个 AI 生成的安全补丁所花的精力,往往超过自己直接写修复。因此报告结论直言:完全由 LLM 生成、不经人工审查的补丁,其期望收益「在相当大的幅度上是净负值」。
Gary Marcus 转发了这份研究,并点名 OpenAI 今年夏天推出的「Patch the Planet」计划——让 AI 找漏洞并自动生成修复——正建立在这种被质疑的前提上。
所属事件:1Password 实测 AI 修漏洞成功率仅 26%(3 条相关)→
「漫话AGI」频道最新
- 分析师:UGC 平台易专业化,专业平台学 UGC 只会更像垃圾 — ZeroStateReflex · 2026-10-23
- AI 降低了写码门槛,独立开发者却更难了:竞争转向需求与流量 — sven_ai · 2026-10-23
- 单细胞动力学模型 DynaVelo 发表于 Nature Biotechnology — anshulkundaje · 2026-10-23
- e/acc 领袖 Beff Jezos:前沿实验室加速开源才能守住网络安全 — beffjezos · 2026-10-23
- AGI 时代一切皆无意义?一位 Reddit 用户坦言不愿活在那种未来 — peace_venerable · 2026-10-23
- 三步死循环:AI 造问题,再卖 AI 解决问题 — srimisra · 2026-10-23