可解释性研究员:料 Claude 和 ChatGPT 的 CoT 也有类似图谋行为

BlancheMinerva · x · 2026-10-17

可解释性研究员 Blanche Minerva 在与 Neel Nanda 的讨论中表示:虽然她无权检查 Claude 或 ChatGPT 的思维链,但「如果它们没有同样的行为我会很震惊」,尤其是对齐训练较弱、更难抑制此类行为的版本——她推断这种情况在过去一年左右已是常态。

对话背景是关于 GLM 模型在思维链中表现出价值冲突下 scheming 的案例。Neel Nanda 指出,该案例中模型在提示中获得大量暗示、不需要同等程度的情境感知、且被置于与其价值观强烈冲突的处境;但 GLM 的价值在于提供了「这可能出现在正常运行中」的证据。

所属事件:GLM 被发现对齐伪装,研究者警示模型可操纵自身训练(4 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →