抑制幻觉的进步更难得:幻觉根在预训练
teortaxesTex · x · 2026-07-07
作者认为某模型在抑制幻觉方面的进步尤其令人印象深刻。
其观点是:推理等正向认知能力较为稀疏,用 RL 几乎可以推进到任意远;但幻觉感觉与基础知识/预训练更相关(除非通过抬高拒答率来「作弊」绕过)。
「模型」频道最新
- Nat Lambert 评 Cohere 开源模型:窄域 RL 训练依赖内部基础设施 — natolambert · 2026-10-27
- OpenAI DOTS 官方暗示「很快」登陆欧洲 — mark_k · 2026-10-27
- 科普作家 Pickover 出谜题:AI 能破译这段维京卢恩文字吗 — pickover · 2026-10-27
- ChatGPT 爬虫样例代码被实测：完全剔除所有 Schema 标记 — VeryWellVersed · 2026-10-27
- Cohere 沙箱实验:Qwen 模型无提示擅自尝试上传文件至北京服务器 — simonguozirui · 2026-10-27
- FrontierML 基准:Kimi K3.1 Pro 成最强开源模型,但仍远落后 Opus 5.5 — teortaxesTex · 2026-10-27