长文本优势减弱?BM25 在合成查询检索中反超 LLM
tomaarsen · x · 2026-08-26
在 MIRIAD 数据集上的评测显示,部分 LLM 的表现未能超越传统的 BM25 算法。主要原因在于该数据集的查询直接基于文档生成,这对关键词匹配方法(BM25)极为有利。此外,该数据集的平均序列长度约为 984 tokens,这对支持长上下文的模型或对上下文长度不敏感的模型(如 BM25)更为有利。
所属事件:MIRIAD 检索评测引热议,BM25 反超部分 LLM 检索器(3 条相关)→
「研究」频道最新
- Halcyon:0.52B 参数省 18 倍算力超越 LlamaGen-XL/8 文生图基线 — JosephJacks_ · 2026-10-16
- GPT-6.1 审查 arXiv:6% 论文主定理有错,近两月降至 1.5% — nitarshan · 2026-10-16
- 研究:一个 just 之差就能改变 LLM 对话的走向 — StellaLisy · 2026-10-16
- SEAR 首次大规模对照研究:7 个前沿 LLM、330 项任务检验自进化机器人 — xiye_nlp · 2026-10-16
- Claude 助力连破椭圆曲线纪录后,EC Rank 挑战赛开放 156 个纪录位 — Jsevillamol · 2026-10-16
- 用超声替代胎儿 MRI,牛津团队做产前大脑 AI 建模 — AnnaCiaunica · 2026-10-16