EvalSeal 开源发布,为 LLM 评测提供可信度回执

开发者发布开源工具 EvalSeal v1.5.0,旨在解决大模型评测分数变化时无法判断原因的问题——究竟是模型进步、judge 变化、prompt 漂移还是评测本身噪声。该工具为评测提供可信度「回执」,帮助厘清评测结果的可信度;在演示的 20 例边界判定测试中,有 5 例出现判定翻转,凸显当前 LLM 评测体系的不稳定性。

2026-09-21 ~ 2026-09-21 · 2 条相关