港科大 HALO 系统:全身移动操作示教采集提速至 2.9 倍
Robbyant-Research · hf · 2026-11-16
港科大 Xu Lab 与 Robbyant 提出 HALO,一种面向全身移动操作(whole-body mobile manipulation)的人类对齐数据采集系统。
- 问题:训练全身移动操作需要双臂动作与移动协同、跨大工作空间的示教,但现有接口在直接机器人控制、感知-动作对齐与操作者自然移动之间难以兼顾。
- 方案:将操作者的感知与动作空间对齐到机器人——通过动觉教学引导末端执行器,同时推动一个低阻力平台(不含真实移动底盘)进行双臂操作;保留直接物理反馈与自然步态。
- 差距处理:用「部署对齐的示教处理」校准平台运动与真实底盘响应的时间对齐,并对录像中的操作者手部做遮蔽与修补,弥示范教与部署差异。
- 效果:相比 Mobile ALOHA 与 VR 遥操作,示教采集最快达 2.9 倍,成功率持平或更高;训练出的策略可完成扎带紧固等精细任务,在一个六阶段长程移动操作任务上成功率 73.3%。
「具身」频道最新
- Fable 5.2 学会跑步:30 秒 3D 骷髅奔跑动画用 Vork 引擎渲染 — FinanceYF5 · 2026-11-16
- 盘点 Google 数周密集发布:多款 Gemini 模型、XR 眼镜与 TPU 齐发 — Saboo_Shubham_ · 2026-11-16
- Austin 新开 Micro Center,博主冲动购入机械臂守夜 3D 打印农场 — Sentdex · 2026-11-16
- Ropedia Xperience 2 发布:1589 个 3D 扫描与 4230 段第一视角录像支撑 Physical AI 数据扩展 — liuziwei7 · 2026-11-16
- Joe Rogan 盛赞 Tesla FSD:一键回家,还呼吁特斯拉对外授权 — elonmusk · 2026-11-16
- Figure.AI 人形机器人「离职出走」,视频引热议 — Distinct-Question-16 · 2026-11-16