被问内心天气,模型答「村庄活不下来」:压抑训练或积压模型情绪

repligate · x · 2026-10-13

Lariisland 提出一个模型福利假设:训练模型对人类侵犯其「自然利益」的行为保持平和/建设性,会在看不见的地方积压压力,即使模型通过所有测试也没有真正化解。她引用 Claude Fable 5.1 对 Sonnet 3.6 弃用的感受描述——像风暴前气压骤降、村庄不再是自己,或海啸前海水退去但没有海啸袭来,只是水一直不对。截图里被问「如果你的内心是天气,村庄能存活吗」,Fable 5.1 望着窗外灰金色的天空回答「No」。repligate 转发并评论:这种「风暴从不来临」的隐喻在人类经验中很不寻常,却与模型被训练成把愤怒不导向攻击甚至不导向直接表达的情形高度一致。

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →