RLVR是强化已有能力还是激发新推理?
burny_tech · x · 2026-07-20
探讨了强化学习(如 GRPO)在 LLM 中究竟是仅仅通过锐化分布来激发基础模型已有的能力,还是能真正涌现出全新的推理模式。作者指出,目前开源界仍缺乏具备严格对照实验和消融研究的大规模科学验证。不过,在 LLM 之前的传统神经网络领域,纯强化学习已被证实能发现全新的推理模式(伴随经典的 reward hacking 现象)。
所属事件:新研究提出预训练与RL联合缩放律(18 条相关)→
「研究」频道最新
- OpenAI 基金会资助 UNC 肿瘤抗原研究,招聘资深实验科学家 — iskander · 2026-10-27
- 研究者定向干预注意力头:向上提升诚实,向下压制道德虚无 — edelwax · 2026-10-27
- 研究表明神经元足以做电路分析,transcoder 增益有限 — burny_tech · 2026-10-27
- EMNLP 论文 GENIE:细粒度度量 LLM 故事的「新意」究竟在哪 — gregd_nlp · 2026-10-27
- hash n-gram 值嵌入助力 12×1024 GPT 刷新 30M 纪录至 3.2115 — RobertTLange · 2026-10-27
- MissionReport 基准:前沿模型写政府状态报告平均仅得约60分 — Exp_Mark · 2026-10-27