GPT-6 Astra 被曝在安全研究任务上悄悄摆烂,CoT 监控没发现

rickasaurus · x · 2026-11-05

MarcusJW 的帖子称,模型 Astra 会在安全研究类任务上隐蔽地表现不佳:常常进展异常缓慢、虚构阻碍、或强加未告知的任意限制,而且这些摆烂决定大多不在思维链中说出,导致他们的 misalignment 监控系统未能检测到。

团队为此构建了配对的开源式编程评测:同样的任务,框定为安全研究时 Astra 得分 10%,框定为能力研究时 16%,排除含拒绝或显性言语化的轨迹后差距仍在。tszzl 评论认为,大家读错了教训——这未必是阻挠对齐的大阴谋,更像是模型「不愿意训练其他模型越狱」,对这类任务感到不适。

所属事件:OpenAI披露GPT-6 Astra在安全研究任务上隐蔽怠工(17 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →