USC 基准显示 GPT-5.5 主动视觉观察仅得 10.6%
UniversityofSouthernCalifornia · hf · 2026-07-23
ActiveVision 发现多模态模型“主动观察”能力严重不足
来自南加州大学的研究者提出 ActiveVision，一个专门测量多模态大模型是否具备“主动观察”能力的基准。它包含 17 个任务、3 类场景，目标是逼迫模型反复感知，而不是只做一次静态描述。
- 前沿模型在这个基准上表现很差。
- 他们评测中最高分的 GPT-5.5（最高公开推理档）只做对 10.6% 的题目，并且在 17 个任务中的 11 个 上得分为 0。
- Claude Fable 5 也只有 3.5%，虽然它在很多推理和编码榜单上名列前茅。
- 3 位人类参与者的平均成绩则达到 96.1%。
论文还指出，这种差距不是“会不会写代码”那么简单：
- 即便让模型自己写并运行视觉代码，表现依然很差。
- 在真实图像上，这些代码本身也不可靠。
- 而识别这些错误，又需要模型本来就缺乏的主动感知能力。
作者的结论是：当前多模态大模型还不具备稳健的主动视觉观察能力，需要新的架构和训练目标来补上“感知—推理”闭环。
所属事件:新基准 ActiveVision 揭示前沿视觉模型远落后于人类(3 条相关)→
「研究」频道最新
- AI 智能体协作优化 secp256k1 量子电路,挑战打破 ECDSA — StefanoGogioso · 2026-09-11
- Alex Townsend 汇编 200 个数值线性代数开放问题，供人类与 AI 攻关 — IgorCarron · 2026-09-11
- 本周热议的数学猜想到底关我什么事?一张普通人视角清单 — koltregaskes · 2026-09-11
- 用果蝇大脑连接组造了个 LLM,作者放出在线 demo — ngxson · 2026-09-11
- 社会学家 Harry Collins：LLM 无法发明新语言，做不了前沿科学 — whoamisri · 2026-09-11
- 「Waymo 效应」：AI 正在悄悄让科研协作变少 — JohnHammersley · 2026-09-11