MBZUAI 开源世界模型 PAN 2:LLM 规划+29B 扩散生成，步准确率 75.1%
rohanpaul_ai · x · 2026-11-11
MBZUAI 基础模型研究院(IFM)发布 PAN 2,一个面向物理智能的开源基础世界模型，核心思路是「模拟式推理」：让 agent 在行动前先在想象中推演会发生什么。
架构上分工明确：
- 概念推理：由 LLM 推演会发生什么、何时发生、镜头如何移动，并以文本记录规划；
- 感知推理：一个从零训练的 29B 扩散模型(含语义/VAE 编码器与潜空间扩散骨干)把文本规划渲染成视频观察。
消融结果支撑了这一分工：去掉 LLM 后，多步任务崩塌，步准确率仅 8.7%,没有一个完整规划达成——因为正确的动作顺序规划正是 LLM 的职责。两者结合后，PAN 2 步准确率达 75.1%,34.0% 的规划可完整完成，在 IFM 测试的模型中居首。技术博客有更多细节。
所属事件:MBZUAI 开源 29B 参数世界模型 PAN 2，主打模拟式推理(2 条相关)→
「具身」频道最新
- Anthropic 称 Fable 5.2 显著提升机器人控制力,双臂任务胜专用系统 — DJiafei · 2026-11-11
- NVIDIA 发布 Alpamayo 2 Edge:首个 Thor 就绪的车载实时推理模型 — drmapavone · 2026-11-11
- RoboColosseum 现场实测 Fable 5.2,与对手模型正面对比 — DJiafei · 2026-11-11
- Oura 6.25 亿美元收购 AI 初创公司 Counsel Health — TechCrunch AI · 2026-11-11
- Shepherd Robotics 公开 Shepherd-0 机器人技能学习系统技术细节 — KlausCodes · 2026-11-11
- MacroHands 发布：第一视角视频 3D 手部追踪，立体版深度误差降至 13.1mm — eliebakouch · 2026-11-11