RAG系统扩展语料库导致答案波动，准确率却几乎不变
_reachsumit · x · 2026-08-25
论文发现，RAG系统在索引扩展后可能改变许多答案，即使准确率几乎不变。作者提出快照兼容性审计方法，通过减去同快照重复差异来估计额外答案波动。在400个问题的Natural Questions研究中，归一化精确和盲语义额外波动分别为6.44和10.25个百分点，而精确匹配准确率仅变化-1.50点。
所属事件:CMU研究：RAG系统索引更新会引发隐性答案漂移(2 条相关)→
「研究」频道最新
- AAAI 2027 审稿争议：论文无代码数据该拒稿吗？ — SimpleObvious4048 · 2026-08-25
- 新研究探究 LLM Agent 是否具备时间感知与预算意识 — maksym_andr · 2026-08-25
- SA-RSQ：多模态推荐系统的稀疏表示框架 — _reachsumit · 2026-08-25
- 重访 N2DCG：轮播推荐评估的实证重 formulation — _reachsumit · 2026-08-25
- RAG崩溃：检索到自生成内容时LLM答案趋同，79.6%模拟崩溃 — _reachsumit · 2026-08-25
- 生成式推荐新方法：语义子词分词提升物品建模 — _reachsumit · 2026-08-25