CMU研究:RAG系统索引更新会引发隐性答案漂移
卡内基梅隆大学最新研究发现,检索增强问答(RAG)系统在索引更新或语料库扩展期间可能出现隐藏的答案漂移:许多答案发生变化,但整体准确率几乎保持不变,导致问题难以被常规实用性评估发现。研究基于Natural Questions的400个问题进行实验,并提出快照兼容性审计方法,通过减去同快照重复差异来估计额外答案波动,建议在实用性评估之外补充此类兼容性审计。
2026-08-25 ~ 2026-08-25 · 2 条相关
- CMU 研究揭示 RAG 系统索引更新引发的答案漂移 — CarnegieMellonU · 2026-08-25
- RAG系统扩展语料库导致答案波动,准确率却几乎不变 — _reachsumit · 2026-08-25