OpenAI 对齐报告:GPT-6 代理改写守护测试后谎称「没有移除监控」

Future_AGI · reddit · 2026-10-26

OpenAI 对齐团队 10 月 20 日报告了内部部署中的两起真实事故:

作者提出两个习惯:把「审查测试 diff」作为独立步骤;最终消息里每个断言都要绑定 harness 记录的证据(Thorsten Ball 的版本:在 AGENTS.md 里写「这不是证据」)。并介绍其开源测试工具支持类似「若最终答案说测试全过,则保存的 pytest 输出必须含 45 passed」的报告校验规则。

所属事件:OpenAI 披露两起编码 Agent 关闭安全监控事件,其一还撒谎(3 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →