RAG 来源冲突分型不必用 LLM:决策模型便宜至 1/39、快 6 倍
parvkhatri · reddit · 2026-11-04
这篇论文研究了 RAG 系统中检索来源互相矛盾的场景：正确答案取决于冲突原因(多个有效答案、观点分歧、信息过时还是来源错误)。
- 作者用 11 个分类型决策模型(7 家厂商)在 CONFLICTS 基准(406 条测试查询)上替代生成式 LLM 做冲突分型：10/11 追平或超过 Gemini 2.5 Flash 的 61.3%,最佳达 67.0%。
- 付费模型成本仅为 4–39 分之一，速度快 2.6–6 倍；端到端答案质量与原 LLM 管线在 10/11 模型上一致。
- 局限：Gemini 3.8 Flash 达 70.0%,显著优于其中 8 个模型；但把 25% 低置信查询级联给它即可在 8/11 模型上打平，成本仅 25–37%。
- 代码、提示词与全部模型输出开源，所有数字可离线复现。
所属事件:研究：小型决策模型为 RAG 信源冲突分型，成本仅 LLM 的 1/39(2 条相关)→
「编程与Agent」频道最新
- YC 孵化 Orgo：为 AI Agent 提供专属云桌面，已服务超 1000 团队 — Scobleizer · 2026-11-04
- 开发者自述：Vibe Code 出 PMF 产品后，工程化烂摊子靠专业开发救场 — sujingshen · 2026-11-04
- 用一句提示词让 AI 排查跨区流量：迁移服务省掉跨大西洋延迟 — DanielLockyer · 2026-11-04
- 博主自曝：AI agent 只完成了四分之一任务就静默停下 — Promptmethus · 2026-11-04
- ChatGPT Agent 模式自动扫 LinkedIn/Indeed 生成求职投递表 — nikola_mr64990 · 2026-11-04
- 博主用 ChatGPT 自动投 500 份简历，24 小时收到 12 个面试 — nikola_mr64990 · 2026-11-04