马里兰团队开源 Pinocchio,为黑盒 API 模型估置信度
马里兰大学 Goldblum/Tom Goldstein 团队(由 Kevin David Hayes 主导)发布论文并开源模型与权重的 Pinocchio:一个仅 0.8B 参数的轻量模型,可为 GPT 等不返回 log-probability 的黑盒 API 大模型输出分配置校准的不确定性/置信度,AUROC 达 0.862。研究动机在于 Claude 等前沿模型缺乏不确定性估计,口头表达的置信度也不可靠。
2026-10-02 ~ 2026-10-02 · 3 条相关
- 给 LLM 输出装上校准置信度:轻量模型 Pinocchio 发布 — micahgoldblum · 2026-10-02
- Micah Goldblum 团队发布新论文,模型代码权重全部开源 — micahgoldblum · 2026-10-02
- Pinocchio 论文:黑盒 API 模型不确定性估计,0.8B 小模型达 0.862 AUROC — micahgoldblum · 2026-10-02