SPoT 意外收获:只在可解数学题上训练,也能识别域外不可答问题
polkirichenko · x · 2026-11-12
SPoT 线程第 5 条展示一个反直觉的泛化结果:尽管只在可回答的数学题上训练,SPoT 也提升了模型对不可回答问题的弃答能力,且能泛化到数学域之外(BBQ、MoralChoice、GPQA-D、MediQ 等域外 AUROC 明显提高)。
示例中,原始思维链硬凑出答案 9;而 post-thinking 能捕捉到错误假设(题目未给树木总数),识别问题不可答,并给原始答案打低置信度(0.1)。
所属事件:Meta 发布 SPoT:答案后再思考(6 条相关)→
「研究」频道最新
- Intology 创始人在 YC 论文俱乐部:药物临床失败主因是选错靶点 — yusufroohani · 2026-11-12
- DeepMind 提出 FlipTest 基准:视频世界模型全部不及格,最好模型低于随机猜 — AlexGDimakis · 2026-11-12
- AI 模型用巴西调查数据预测龋齿高危人群,服务公卫规划 — Brighter-Side-News · 2026-11-12
- Meta FAIR 开源 e-means:比 Lloyd 算法快 10 倍、损失更低的 k-means — generativist · 2026-11-12
- Google 联合 Artificial Analysis 推 MKA benchmark,专查智能体交付物 — OnlineInference · 2026-11-12
- ICLR 审稿「数学平凡」批评失效?AI 能证明一切改变评审标准 — nanjiang_cs · 2026-11-12