MarODE 论文入选 TMLR:用 Markovian ODE 给 LLM 推理链打分
Tanmoy_Chak · x · 2026-10-08
IIIT 海得拉巴 lcs2lab 团队的论文《Markovian ODE-guided scoring can assess the quality of offline reasoning traces in language models》被 TMLR 接收,作者为 Arghodeep Nandi、Ojasva Saxena、Tanmoy Chakraborty。
- 问题:现有推理链评估方法偏机械,难以刻画人类视角的推理质量,且对各种退化推理泛化不佳;
- 方法:MarODE 是离线评估框架,将推理进展建模为 Markov 过程,用常微分方程刻画推理链的动态,从而高效给出质量分数;
- 评估:用人为构造的扰动和人类判断共同检验指标的 goodness 与 soundness;
- 结果:大规模评测中,MarODE 在 Somers' D 相关系数上比现有基线高出 250% 以上。
「研究」频道最新
- Sebastian Raschka 长文:从词袋到 Jev,文本分类模型演进全解析 — AxSaucedo · 2026-10-08
- Scott Aaronson:AI 公司已尝试用内部模型破解密码学协议 — skdh · 2026-10-08
- 研究者提出:长程任务进展有赖分层 RL 混合快慢折扣率 — jessi_cata · 2026-10-08
- 10 月 6 日数学大新闻解读:千年难题前的重大进展? — burny_tech · 2026-10-08
- Yukon 开放式自动科研平台:人机同场刷纪录,多项成绩超 Google Quantum AI — RexDouglass · 2026-10-08
- OpenAI 数学仓库更新:约 42% 顶线结果已 Lean 形式化,3 篇撤稿 — danintheory · 2026-10-08