新RL框架Exploration-Distillation:突破LLM探索瓶颈,性能超DAPO

micahgoldblum · x · 2026-10-13

研究者 Micah Goldblum 宣布提出 Exploration-Distillation(ExpDis),一种强化学习框架,旨在解锁 LLM 在 RL 中的激进探索能力,并在性能上大幅超越 DAPO 等标准算法。

核心思路:原则上 LLM 能在 RL 过程中发现新事物,但现有算法难以做到。ExpDis 通过将探索者(explorer)与学生(student)隔离,避免探索者能力退化污染学生模型,从而在提升探索多样性的同时保持通用能力。

所属事件:NYU团队推出ExpDis:解耦探索与优化,性能超DAPO(6 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →