NVIDIA VoLo 入选 CoRL 2026,VLM 当大脑编排机器人长程操作
erwincoumans · x · 2026-09-08
NVIDIA 与密歇根大学的 CoRL 2026 论文 VoLo 提出「物理编排」(Physical Orchestration)框架:让 VLM 作为机器人大脑,具备记忆与推理能力,负责规划、监控、失败检测与恢复,并把 VLA/WAM、视觉模型(如 SAM3)、抓放基元等异构能力当作可中断的工具来调度。
核心要点:
- 与虚拟 agent 不同,物理世界的决策、动作与工具调用时机不可暂停,这是该设定区别于普通 agent 的关键。
- 发布 RoboVoLo 高保真仿真基准:126 个任务,覆盖常识、记忆/状态追踪、复杂指代与世界知识,并提供任务级成功与失败模式诊断。
- 工作由 Chen Siyi 在 NVIDIA 实习期间完成,项目页、arXiv 与代码均已开放。
「具身」频道最新
- π0.5 实验：演示数从 10 增至 438，放球入碗成功率 7%→83% — stingning · 2026-10-27
- GPT-6 Astra 零微调操控灵巧手：500 试仅 26 次成功，成功率 5.2% — stingning · 2026-10-27
- 灵巧操作基准 HandsOn 发布:66 个人工核验任务配 1.8 万条人类示范 — stingning · 2026-10-27
- 灵巧操作基准 HandsOn:GPT-6 Astra 成功率仅 5.2%,三大失败模式曝光 — stingning · 2026-10-27
- DexPort：手持真机器手的 20 自由度灵巧手数据采集接口 — pabbeel · 2026-10-27
- ROS 社区迎来新项目负责人 ahcorde，规划 2027 版本 — ___Mufasaa · 2026-10-27