无需分箱即可高效估计模型校准误差的新方法
BlackHC · x · 2026-10-27
研究者提出一种无需分箱(binning)的校准误差估计方法。核心技巧是把校准误差写成模型在合适损失函数下的风险下降量:校准误差等于最优重校准带来的风险降幅,由此可直接得到校准误差的下界估计,并免费获得对模型过自信/欠自信的判断。
- 不需要构造 bins,避免了分箱带来的偏差与超参数选择
- 用最小化重校准后的风险之差来估计真实校准误差
- 配图展示了估计原理:真实校准误差与重校准估计值在风险轴上的对应关系
作者为 PotoSacho、Francis Bach 等人,属于校准/不确定性量化方向的技术进展。
「研究」频道最新
- 对模型而言,「经验教训」类论文可能比 2500 引用的图谱论文更有用 — owl_posting · 2026-10-27
- 24 小时廉价算力:adapter-LoRA 方案自称全面超越 Carbon-X DNA 模型 — danielmckinn0n · 2026-10-27
- 「我跑了两百万次回归」系列第二篇:海量回归的实证玩法 — paulnovosad · 2026-10-27
- 普林斯顿团队开源 PaperScorer,用微调 Qwen 预测论文录用率达 77.5% — IanArawjo · 2026-10-27
- 论文附带的子成果:宣称证明纯 Yang-Mills 理论存在性 — burny_tech · 2026-10-27
- Lex Fridman 对谈三位数学家:AI 数周攻克人类最难题目意味着什么 — lexfridman · 2026-10-27