WorldLine:万小时视频训练动作驱动模拟器,策略成功率最高提升21.4个百分点
hongkongust · hf · 2026-09-30
WorldLine 是一个动作驱动的视觉模拟器,为机器人操作提供执行前的动作结果预测与策略评估。
- 核心思路:把可迁移的动力学学习与异构动作接地解耦,从 1 万多小时无动作标注机器人视频学操作动力学,再用 2000 多小时、十多种本体的动作轨迹做接地
- 采用图像空间动作表示作为跨本体的统一控制接口;多视角、含失败样本训练与关系正则提升交互敏感预测;少步蒸馏支持高效因果 rollout
- 在失败轨迹上,机器人区域 IoU 较最强基线提升 0.1626;在 RoboTwin 与 AgiBot 上以 74% 平均准确率预测轨迹成败
- 无需 RoboTwin 训练或适配,其 rollout 使任务成功率较直接策略执行最多提升 21.4 个百分点
「具身」频道最新
- XR 空间 3D 打印 App 更新:激光逐层绘制 Gcode 可远程操控拓竹 — Scobleizer · 2026-09-30
- 车主花 1000 美元装开源套件让特斯拉自动驾驶，引发安全担忧 — science · 2026-09-30
- 物理 AI 创业者社群征集:从灵巧手到机器人基础模型 — Sethwinterroth · 2026-09-30
- EVO-WAM 用自生成视频自验证训练,真实长程任务成功率20%升至76.7% — hitsz123 · 2026-09-30
- 浙大 PanoVLN：全景视觉语言导航成功率超 SOTA 11.9%，四足机器人实测 — ZhejiangUniversity · 2026-09-30
- 德国 Agile Robots 人形机器人每个工作日下线出货,已联手 DeepMind — CyberRobooo · 2026-09-30