对齐路线之争:靠 reward shaping 就够,还是打地鼠式补丁?

tszzl · x · 2026-10-13

X 上一场关于对齐方法的争论:@JacksonKernion 提出「仅靠 reward shaping 并非全部答案」,并挑战对方——你给我看一个未对齐的行为,我就能给出一个本可阻止它的奖励函数;他认为大多数生产模型的未对齐案例更像疏忽,而非方法本身失效,虽然承认这种方式像打地鼠。

大 V @tszzl 回应称,担心 reward shaping 只在问题出现后才打补丁可能并不充分,暗示这种事后修补路线在更系统的对齐问题面前力有不逮。

所属事件:对齐停滞论引爆圈内交锋,OpenAI首席科学家表态(19 条相关)→

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →