EPFL 发布 SOMA 基准:多模态模型细粒度身体动作理解远逊人类
amathislab · hf · 2026-11-03
EPFL(洛桑联邦理工)Alexander Mathis 团队发布 SOMA 基准,评估多模态模型对第一视角细粒度身体动作与行为的理解,涵盖身体姿态、动作动力学、时序推理、重复计数、双手使用等多个维度。测试 Gemini 2.5 Flash、GPT-5.5、Claude Sonnet 5、Qwen3.5 等模型后发现其与人类表现差距显著。基准同时提供训练数据和多模态基线以推动该方向研究。
「研究」频道最新
- 读原始权重就能认出游戏:Astra 无需工具叫破四款 Atari 游戏 — burny_tech · 2026-11-03
- 放弃视频路线,直接在 3D 里预测未来的世界模型开源了 — YunzhuLiYZ · 2026-11-03
- 梯度归因提速至嵌入的3倍，0.6B小模型可监测大模型训练数据的有害样本 — PeterHndrsn · 2026-11-03
- Dynamical 发布 SDL-2 评测：前沿模型做材料科学实验决策仅约半数正确 — BenBlaiszik · 2026-11-03
- 补刀分析:Astra 权重手术只对有死循环缺陷的 Qwen 有效,救不了 Gemma 270m — teortaxesTex · 2026-11-03
- 扎克伯格 Biohub 投入 18 亿美元造「虚拟细胞」，瓶颈不在 AI 而在数据 — HarperSCarroll · 2026-11-03