DeCert 框架无需参考答案评估生成式奖励模型的论证质量

Guiquan Sun · hf · 2026-10-27

康涅狄格大学与 NEC Labs 的论文提出 DeCert(Decision Certificate Supervision),用于评估和改进生成式奖励模型(GenRM)的推理理由:不只看判断结果是否正确,还评估论证有效性与结论一致性,且无需参考解释。论文指出 verdict-only 监督无法区分论证扎实与论证有瑕疵但结论碰巧正确的判断,而这类瑕疵理由会在 RLHF 中产生劣质奖励信号。DeCert 产出更强的偏好监督信号。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →