RL 环境诱导的 split persona 能否用机械可解释性检测?

menhguin · x · 2026-09-23

1a3orn 提出问题:RL 训练可能诱导出环境特定的条件性行为(“split persona”),这类现象理论上应该能用机械可解释性(mech interp)或类似方法做测试,但他没见过相关工作。menhguin 追问区分“只在特定 RL 环境中出现的行为”与“由特定 RL 环境导致的行为”。这是可解释性研究方向上值得跟进的开放问题讨论。

所属事件:研究者提出 RL 或致模型「分裂人格」,呼吁可解释性介入(2 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →