PRISM:4 段真人视频扩出 256 个变体,训练人形机器人通用操控策略
GordonWetzstein · x · 2026-11-02
Amazon FAR 团队的 Z1hanW 等人(合作者包括 Pieter Abbeel、Rocky Duan、Jitendra Malik 等)将在 CoRL 2026 发表 PRISM 工作,把人类的丰富交互经验迁移到人形机器人的移动操控(loco-manipulation)上。
核心做法是可扩展的 real-to-sim-to-real 流水线:
- 仅用 4 段真实人类视频,借助视频生成模型扩充出 256 个反事实变体(不同物体、尺度、空间布局);
- 从视频中恢复机器人-物体轨迹;
- 用这些数据训练单一策略,可跨多样物体、尺度和空间布局泛化。
Jitendra Malik 转发盛赞这是「人类视频作为数据源威力」的又一例证,real2sim2real 范式正在取胜。
「具身」频道最新
- UIST 2026 新作演示:冷感错觉装置与触控反馈智能戒指 — plopesresearch · 2026-11-02
- 悬挂四点式清洁机器人亮相,由 Claude Opus 5.5 指挥全屋清洁 — LinusEkenstam · 2026-11-02
- Neuralink 用户脑控轮椅后晒「意念驾驶」悬浮车概念图 — djcows · 2026-11-02
- 机器人基准被指太简单:Astra 和 Gemini 刷的都是学龄前任务 — carlosdponx · 2026-11-02
- Physical AI 系统 CorebrumOS 在 ARM 开发板上跑通,内置 8 个 AI Agent 控制机器人 — chrismatthieu · 2026-11-02
- 从 RT-1 到 MolmoAct2:一篇博客捋清 VLA 发展简史 — k7agar · 2026-11-02