RAG系统扩展语料库导致答案波动，准确率却几乎不变
_reachsumit · x · 2026-08-25
论文发现，RAG系统在索引扩展后可能改变许多答案，即使准确率几乎不变。作者提出快照兼容性审计方法，通过减去同快照重复差异来估计额外答案波动。在400个问题的Natural Questions研究中，归一化精确和盲语义额外波动分别为6.44和10.25个百分点，而精确匹配准确率仅变化-1.50点。
所属事件:CMU研究：RAG系统索引更新会引发隐性答案漂移(2 条相关)→
「研究」频道最新
- 数据量决定智能边界：按数据排序后锯齿前沿变螺旋 — sebkrier · 2026-10-16
- Doc2Harness 基准：19 个前沿模型测编码 Agent，最高通过率仅 53% — _akhaliq · 2026-10-16
- 李飞飞团队开源 OpenWAM：统一世界-动作模型框架，让机器人视频预训练成大脑 — jiqizhixin · 2026-10-16
- NVIDIA TacitVLA：动作不读思维链，推理收益保留、延迟最高降 3.4 倍 — arankomatsuzaki · 2026-10-16
- Cohere Labs 世界模型公开课第 4 期：一文理清 DreamerV1-V4 架构演进 — Cohere_Labs · 2026-10-16
- GPT-6.1 审查 arXiv：6% 论文主定理有错，近两月降至 1.5% — nitarshan · 2026-10-16