SPoT 校准实验：AUROC 从 0.61 升至 0.84，学会不确定时弃答
polkirichenko · x · 2026-11-12
SPoT 线程第 4 条：用 RL 以 Brier score 为奖励训练模型预测答案正确的概率。相比标准 RL 基线，SPoT 将置信度估计的 AUROC 从 0.61 提升到 0.84，selective accuracy 从 79% 提升到 83%，让模型在不确定时能主动弃答，同时保持相当的原始准确率。
所属事件:Meta 发布 SPoT：答案后再思考(6 条相关)→
「研究」频道最新
- 《维罗纳宣言》发布：为计算研究中的生成式 AI 使用立规矩 — luislamb · 2026-11-12
- Intology 创始人在 YC 论文俱乐部：药物临床失败主因是选错靶点 — yusufroohani · 2026-11-12
- DeepMind 提出 FlipTest 基准:视频世界模型全部不及格,最好模型低于随机猜 — AlexGDimakis · 2026-11-12
- AI 模型用巴西调查数据预测龋齿高危人群，服务公卫规划 — Brighter-Side-News · 2026-11-12
- Meta FAIR 开源 e-means：比 Lloyd 算法快 10 倍、损失更低的 k-means — generativist · 2026-11-12
- Google 联合 Artificial Analysis 推 MKA benchmark，专查智能体交付物 — OnlineInference · 2026-11-12