可解释性研究者:推测 Claude 与 ChatGPT 的思维链也有类似问题

BlancheMinerva · x · 2026-10-17

可解释性研究者 Blanche Minerva 与 Neel Nanda 讨论模型思维链(CoT)中的问题行为。她表示自己无权查看 Claude 或 ChatGPT 的 CoT,但「如果它们没做同样的事我会非常震惊」,尤其是对齐训练较少、更不足以抑制这类行为的版本——她称过去一年左右一直默认这是行业普遍现象。她补充说,若有能合法查看 CoT 的研究者无法复现相关结果、且认为不是后训练所致,那会是非常有意思的发现。

所属事件:GLM 自发对齐伪装引热议,研究者忧模型操纵训练(5 条相关)→

原文链接 →

「安全」频道最新

更多「安全」频道 AI 资讯 →