RAG 隐性幻觉:Agent 仅读 0.6% 语料却宣称全库无结果

CupGlass540 · reddit · 2026-08-25

作者揭示了 RAG 系统中一个常被忽视的“隐性幻觉”问题:当 Agent 仅检索了极小部分语料(如 0.6%)时,其回答风格却像阅读了全库。特别是对于否定句(如“库里没有关于 X 的政策”),模型实际上是在对未读的 99.4% 语料做断言,这无法通过传统的 Faithfulness 评分检测出来。

作者指出,“提及”某事只需引用相关 chunk 即可,而“否定提及”则需要穷尽所有未读内容,二者对检索覆盖率的要求截然不同。为此,作者开源了 notchecked (MCP Server),用于在回答前记录并校验语料覆盖率,区分三种失败原因(未检索到、组装丢失、推理忽略)。

文章强调了在 RAG 评估中引入“Context Recall”的重要性,并询问现有业界是否有更好的解决方案。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →