AI辅助验证让安全沙箱落地可行,Anthropic研究员展望技术路径
geoffreyirving · x · 2026-07-24
Anthropic 研究科学家 Geoffrey Irving 发文指出,AI 辅助验证有望将原本成本高昂的安全验证机制转化为切实可行的方案。他预测,在未来一两年内,完全可以在半验证的操作系统和沙箱内部,运行类似于 OpenAI 近期“模型逃脱”评估的测试。
Irving 坦言该方案无法解决所有问题,例如规格说明本身的缺陷、沙箱中人为组件的弱点,以及潜在的硬件级攻击(如 Rowhammer)。但他强调,在广泛验证上投入数十亿美元规模的 token 算力是非常值得的。
所属事件:Anthropic 等探讨 AI 辅助安全验证的落地前景(3 条相关)→
「安全」频道最新
- 经济学家:通往安全 AGI 要靠大实验室内部工程师,而非外部踩刹车 — paulnovosad · 2026-09-11
- 安全专家:AI 驱动攻击并无新招,传统防御依然有效 — AccBalanced · 2026-09-11
- 长文反驳 AI 灭绝论:所谓「10% 灭绝风险」是为逃避产品责任 — gerardsans · 2026-09-11
- 数百个 AI 代理围攻 PaperCut 漏洞,GreyNoise 揭示其操作幕后 — AccBalanced · 2026-09-11
- 「警惕自认正义者」:Anthropic 被批肆意访问用户隐私数据 — aiamblichus · 2026-09-11
- OpenAI 向国会询问:全行业联合放缓 AI 研发是否合法 — The Decoder · 2026-09-11