IBM LASAGNA 研究:RAG 各技术单独有效,组合后增益大幅缩水
ibm · hf · 2026-10-22
IBM 在 Hugging Face 发布 LASAGNA 研究,系统评估了组合式 RAG 流水线在不同语料规模下的表现。
- 核心发现:单技术隔离测试时的增益,无法可靠预测组合后的检索质量(NDCG@10)、忠实度或大语料表现
- 组合增益明显缩水:NDCG@10 预测 +47%、实际仅 +17%;忠实度预测 +28%、实际 +32%
- 损耗程度因指标而异;实验显示不同配置随语料从 5K 扩到 200K+ 文档时衰减曲线差异巨大(如 Speed 配置 R²=0.90 明显下滑,Max Reliable 仅 R²=0.30)
- 对工程实践的启示:不能靠单技术 benchmark 外推整条 RAG 流水线在大语料上的效果,需做组合级评测
所属事件:IBM LASAGNA 研究:RAG 各技术单独有效,组合后增益大幅缩水(2 条相关)→
「研究」频道最新
- 2016年D-NTM论文的NOP记忆单元与今日attention sink如出一辙 — caglarml · 2026-10-22
- NV-Segment-CT一次点击分割84个CT结构,单GPU仅10秒 — MaziyarPanahi · 2026-10-22
- OSVerify 审 11 篇 OpenAI 数学预印本,揪出 18 处问题 — james_y_zou · 2026-10-22
- EMNLP 2026 产业轨道公布:Bansal 谈智能体,Rieser 谈宪法对齐 — verena_rieser · 2026-10-22
- 顶会审稿人自省:「安全」的蟑螂论文最容易被接收 — plopesresearch · 2026-10-22
- 超参调优本身就是机器学习问题:从网格搜索到贝叶斯优化 — bravo_abad · 2026-10-22