LMSYS Arena上线AutoEval：基于奖励模型实现发布即评测

arena · x · 2026-08-06

LMSYS Arena 宣布在其排行榜中引入 AutoEval 机制，以解决人类投票积累耗时过长的问题。AutoEval 通过训练捕捉人类偏好的奖励模型（RM）来自动生成代理投票，能够在模型发布首日（Day-1）提供快速校准的评分反馈。当后续积累足够的人类真实投票后，系统会更新并验证这些分数，从而帮助社区更快地筛选出适用于真实任务的优秀模型。