RoboDawn:用 VLM 加离散指令闭环控制机器人,零样本胜 π0.5
Meng-Hao Guo · hf · 2026-09-22
研究者提出 RoboDawn,一套把机器人控制暴露给 agentic VLM 的人类直觉式接口:用平移、旋转、夹爪等少量离散指令,让 VLM 观察视觉状态、推理下一步动作、执行后再根据结果调整决策,实现闭环控制。配套的 in-context learning 方案用少量示例让 VLM 掌握接口用法与解题策略。- 在 RoboTwin 2.0 C2R 上零样本成功率 53.2%,一条示例后升到 73.6%,超过训练过基准数据的强基线 π0.5(46.0%),并创造 SOTA
- RoboDojo 上从 35.67%(零样本)升至 47.17%(单示例)
- 无需任务专属机器人训练,同一框架可迁移到真实 Franka 机械臂,完成积木入篮与堆叠
「具身」频道最新
- Runway 发布 27B MoE 世界行动模型 Praxis-1,Fast 版中位延迟仅 73ms — ChongZzZhang · 2026-11-12
- Dream-1 双臂机器人现场演示:一句指令叠好黄毛巾 — DJiafei · 2026-11-12
- 双板搭建测试:GPT-6 Astra 成功,Claude Fable 5.2 落败 — qinzytech · 2026-11-12
- 团队宣称造出智能手机价格的机器人,预售价外购更贵 — R4nsack · 2026-11-12
- CoRL 论文集证明:仿真训练已能产出顶尖真实机器人表现 — carlosdponx · 2026-11-12
- 机器人折毛巾现场翻车,机器人学家看完松了口气 — chris_j_paxton · 2026-11-12