训练完的决策模型为何过度自信:号称 90% 把握实际只对 68%
helloiamleonie · x · 2026-11-06
Liquid AI 的 Leonie 在推文串中指出第二个问题:模型刚训练完往往过度自信——自称 90% 确信的判断实际正确率仅 68%,而置信分数正是这类决策模型有用性的关键,因此必须做置信度校准(附校准前后对比图:校准后号称 90% 实际正确 88%)。
所属事件:Liquid AI:温度缩放即可校准决策模型置信度(2 条相关)→
「模型」频道最新
- Grok Bot 周额度骤降引众怒,$300/月 SuperGrok 用户集体退订 — steipete · 2026-11-06
- Voice Arena 发布真实电话对话 ASR 基准,5 语言首榜出炉 — rohanpaul_ai · 2026-11-06
- 研究者吐槽:Opus 过度安全拦截,连已有报告的简单问题都触发 — DimitrisPapail · 2026-11-06
- 苹果 GSM-Symbolic 论文:只改名字数字,SOTA 模型数学成绩就大跌 — imjustnewatai · 2026-11-06
- 开发者用 Heretic 微调 Qwen3-4B,回复长度砍半的「惜字如金」模型 — -p-e-w- · 2026-11-06
- Robot RSI 概念走红:让机器人给机器人装环境,实测两大模型能否完成 — qinzytech · 2026-11-06