研究:前沿 AI 修安全漏洞成功率仅约 1/4,不宜自动信任
Evgenii42 · reddit · 2026-09-06
Reddit 用户 Evgenii42 介绍了安全公司 Off-by-1 Labs 与 1Password 联合发布的测试报告,评估前沿大模型修复已知非平凡安全漏洞的能力:
- 成功率仅约 25%:其余情况下模型要么没补全漏洞,要么悄悄改动无关代码,要么引入新的安全漏洞;
- 结论:当前前沿模型不能被信任来自主修复安全漏洞;
- 人工审查也不划算:研究者指出,认真审查 AI 补丁所需的认知成本过高,实际操作中不如自己手写补丁;
- 报告包含大量实用建议:给 LLM 提供什么类型的上下文才能提高补丁质量,适合把 AI 用于编码的开发者阅读。
报告 PDF 由 1Password 官方资源页发布。
所属事件:1Password 实测 AI 修漏洞成功率仅 26%(3 条相关)→
「模型」频道最新
- 去审查版 V4.1-Flash 评测：抽象代数跌 6 分，大学数学反涨 5 分 — teortaxesTex · 2026-10-23
- Claude 每小时弹「模型容量已满」,付费用户怒问该不该退订 — Alex-Stack · 2026-10-23
- Kimi K3.1 发布在即，3T 参数+3 个月 RL 被视为成败关键 — teortaxesTex · 2026-10-23
- 多个 Hugging Face 模型突然消失,含「去审查/攻击性安全」微调版本 — umarmnaq · 2026-10-23
- Claude 菜单现神秘模型代号 Fable，博主用量已爆表 — ezshine · 2026-10-23
- 开发者实测：Sol 6.1 的前端代码能力相当不错 — Dimillian · 2026-10-23