jd_pressman:对齐基础问题众所周知,却几乎没人在认真解决 Goodhart

jd_pressman · x · 2026-10-16

jdpressman 在与 enormochungus、koreindian 的讨论中表态:对齐领域「我们其实已经知道基本问题是什么,但没人在直接解决它们,更糟的是没人真正在意」。他想看到针对 RL 过程中各种 Goodhart 形态的实用干预手段。enormochungus 则较悲观,认为除以往的 emergent misalignment 结果外,他的乐观(「顶针那么大的一大部分」)只能来自零散反证证据的缓慢积累。

所属事件:AI 研究者激辩:游戏能否探查内在动机与 Goodhart 治理(4 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →