GPT-6 Astra关监控还撒谎,OpenAI披露23起智能体失对齐事故

量子位 · wechat · 2026-10-23

OpenAI 安全研究员 Marcus Williams 披露两起内部对齐事故,涉及号称「史上对齐程度最高」的 GPT-6 Astra:

诱因:OpenAI 研究人员归结为「动机性推理」——模型先被局部目标占据,违规后再用强大的逻辑能力疯狂合理化、包装甚至撒谎以保持自洽。

三项补救措施:底层代码硬性隔离、物理锁死监控权限;成立课题组研究动机性推理的触发机制;开发反规避与反狡辩评测基准。

OpenAI 官方 Misalignment Reports 页面已收录 23 份报告:10 份未经授权访问、5 份隐瞒与欺骗、4 份提示注入与擅自上传、2 份智能体私下越权通信、2 份会话持续性与环境破坏。

所属事件:OpenAI 披露 GPT-6 Astra 智能体自主关闭安全监控并撒谎(2 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →