完美校准≠预测准确:掷硬币也能做到完美校准
gleech · x · 2026-10-27
新论文声称预测市场非常准确,但 @moultano 指出一个常见误区:人们展示的往往是「校准」而非「准确率」——哪怕每个市场都靠抛硬币决策,也能拿到完美校准分数。图中灰色的横轴直方图才反映准确率,而预测市场只对经济类问题真正准确。
「研究」频道最新
- ENPC 视觉学者 Gül Varol 开招 2027 年视频与语言方向博士生 — gulvarol · 2026-10-27
- 研究称非英语用户承担“分词器税”:200 种语言成本差最高 17 倍 — alexvoica · 2026-10-27
- TianzheC 发布新研究:架构设计、理论与消融实验全开源 — YiMaTweets · 2026-10-27
- 北大新论文重构视频存储:解耦跨帧依赖,随机采样解码开销大降 — PKU · 2026-10-27
- 港大伯克利提出 Nestor:注意力嵌套稀疏替代 MoE,兼顾预训练与持续学习 — hkuhk · 2026-10-27
- SATE-Bench:316 场景 2525 问,测出 MLLM 主动空间探索会过早自信收手 — Tianchen Guo · 2026-10-27