Drex 模型置信度经校准:标 93% 置信时准确率达 97%,可当信任旋钮用

rohanpaul_ai · x · 2026-11-06

Rohan Paul 指出 Drex 模型的置信度数字是「有意义的」：经校准后，模型说 70% 有把握时，实际正确率就在 70% 左右；Drex Max 在置信度 ≥93% 时，实际正确率达 97%。

这意味着置信度可以作为「信任旋钮」用于工程：软件可以对高置信度的输出自主执行，低置信度的转给人工审核——而普通聊天机器人写的「我比较确定」提供不了这种可量化信号。

配图校准曲线还显示：随机重排选项时只有 4.3% 的 Max 答案会翻转，且准确率几乎不变，翻转的答案多是模型自己已标记不确定的。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →