Jason Wei:沉迷 RL 一年后悟出的「on-policy 人生观」

paigeinsf · x · 2026-10-20

前 Google/OpenAI 研究员 Jason Wei 分享,过去一年沉浸在强化学习研究中,无意间让他领悟到一条重要的人生道理。

核心类比是 RL 中的「on-policy」原则:与其模仿他人的成功轨迹(模仿学习),不如亲自行动、从环境给出的奖励中学习。模仿学习只在起步阶段有用——帮你把通过率从零提升到非零;但一旦能走出合理的轨迹,就应该只用模型自己的轨迹来训练,因为模型的优势与人类不同。他举的公认例子是:教语言模型解数学应用题,RL 比直接对人类思维链做监督微调更有效。

他把这一逻辑迁移到生活:借鉴别人的路径只能让人达到「及格线」,真正的高回报要靠走自己的路、从自身经历的反馈中学习。

原文链接 →

「漫话AGI」频道最新

更多「漫话AGI」频道 AI 资讯 →