NeurIPS 2026 Oral:数值视觉思维链让定位 IoU 提升 12.2 点

jiqizhixin · x · 2026-11-11

NTU、中科大、新加坡国立大学与微软研究院合作的 Numerical Visual Chain-of-Thought(NV-CoT)入选 NeurIPS 2026 Oral,针对视觉推理中「先找准区域、再放大作答」这一薄弱环节。

方法核心:不再把边界框坐标当作词表 token 拼写输出,而是用一个轻量数值头直接预测连续坐标;监督训练采用反映空间误差的回归目标;强化学习部分从 Laplace 策略中采样连续坐标,用 GRPO 将其概率密度与文本 token 概率一起优化。

效果:在 Vis-CoT-363K 验证集上,定位 IoU 从 47.3 升至 59.5,提升 12.2 个点;该提升针对监督定位任务,而非整体问答准确率。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →