CMU研究:RAG系统索引更新会引发隐性答案漂移

卡内基梅隆大学最新研究发现,检索增强问答(RAG)系统在索引更新或语料库扩展期间可能出现隐藏的答案漂移:许多答案发生变化,但整体准确率几乎保持不变,导致问题难以被常规实用性评估发现。研究基于Natural Questions的400个问题进行实验,并提出快照兼容性审计方法,通过减去同快照重复差异来估计额外答案波动,建议在实用性评估之外补充此类兼容性审计。

2026-08-25 ~ 2026-08-25 · 2 条相关