Reranker存亡之争:新论文刷新BEIR与基准污染质疑

围绕「Reranker 已死」的争论持续发酵。有开发者引用 arXiv 论文 Querit-Reranker 反驳该说法,该论文提出以数据为中心的 label-free 适配方法,将 BEIR nDCG@10 从 54.11 提升至 59.28。与此同时,另一方批评业界存在基准污染:常见做法是在 BEIR 上训练又在 BEIR 上评测再宣称模型优秀,认为这种评测方式难以反映真实能力。

2026-10-09 ~ 2026-10-09 · 2 条相关

• Querit-Reranker 论文:BEIR nDCG@10 从 54.11 提至 59.28 — Jayyun98_dev · 2026-10-09
• 开发者批基准污染:别在 BEIR 上训练又拿它评测 — bo_wangbo · 2026-10-09