检索前沿的悖论:真正 SOTA 的 retriever 会在现有榜单上「输」

bo_wangbo · x · 2026-11-19

有观点指出:判断你的 retriever 是否真正突破 SOTA 的标志,恰恰是它在很多现有 benchmark 上表现更差——因为它比现有的标注质量更好,评测标签反而成了拖累。这揭示了检索评测的一个结构性问题:榜单上限被历史标注质量锁死,越前沿的模型越容易「败给」过时的 ground truth。

所属事件:HF 工程师:真 SOTA 检索器反而会在旧基准上「输」(6 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →