模型为何会编造来源

gerardsans · x · 2026-07-14

作者转述并确认了一个观点:模型之所以会在不知道答案时“编”出一个看起来像真的来源,和训练方式有关。 要点是: - 训练时模型会因为答对而得分,而“我不知道”通常得分很低。 - 如果模型生成一个形式上正确、看起来像引用的内容,可能反而更容易拿到高分。 - 长期重复这种优化,模型就更容易在不确定时产生幻觉式回答。

所属事件:训练奖励机制致模型倾向于编造来源(2 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →