研究：VGGT 对自身失败知道的比它说出的多，线性探针 ROC-AUC 达 93.5%
zhenjun_zhao · x · 2026-10-28
Adityan Thirumani Srinivasan 与 David Nordström 研究前馈 3D 重建模型 VGGT 是否“知道自己不知道什么”——即模型内部是否编码了位姿预测失败的信息，尽管它不输出不确定性。
- 构建HARDMATCH 基准：1000 对刻意困难的图像对，VGGT 在其中 35% 上失败
- 对 VGGT 冻结特征做线性探针，预测位姿失败的 ROC-AUC 达 93.5%，远高于 VGGT 自身的点图置信度（79.7%）和用其全部输出训练的分类器（77.7%）
- 探针能捕获 VGGT 自己“很自信但错了”的样本，让下游系统可以弃权
- 无需重训练即可迁移到 PhotoTourism 与 ScanNet-1500 的旋转失败检测
- 该知识不在单图编码器中，而是在两视角融合层的中段突然出现；π³ 模型同样如此
结论：VGGT 对自身失败的了解远超其对外报告的内容。
「研究」频道最新
- YC 初创 Wondersearch 宣称不用 embedding 和向量库，检索效果持平 OpenAI — antoine_chaffin · 2026-10-28
- AAAI/ICLR 审稿人:约半数评审疑似 AI 生成,同行评审告急 — dsmirza · 2026-10-28
- Field–Golubitsky 映射混沌吸引子图鉴:每个圆盘自带 Dₙ 对称性 — S_Conradi · 2026-10-28
- Manifold AI 发布 WorldScape R²SI：机器人执行经验自动沉淀为技能改进 — jiqizhixin · 2026-10-28
- AXA 用 NVIDIA Earth-2 模拟千余个气旋季评估风暴风险 — NVIDIAAI · 2026-10-28
- 伦敦新 Physical AI 实验室 Machenta:看一次演示即可复现任务 — Ed__Johns · 2026-10-28