用 Kelly 目标做 RL 会「怕破产怕到毁灭自己」:终极末日算法

rosstaylor90 · x · 2026-10-27

Ross Taylor 分享一个反直觉的 RL 实现细节:如果直接用 Kelly 准则作为强化学习的目标函数,一旦智能体经历「破产/毁灭」事件,优势值为负无穷,优化过程会把整个神经网络摧毁掉。

他调侃道:这个目标函数「太讨厌毁灭了,宁可毁掉自己的神经网络也要确保它永远不再发生」——堪称终极的末日主义者(doomer)算法。对做 RL 目标函数设计的人来说,这是一个既好笑又有技术启发的细节。

所属事件:研究者称 RL 目标用 CRRA 而非 Kelly 可助对齐(3 条相关)→

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →