伯克利 Do as I Do:普通人类视频转灵巧机械手训练数据
chris_j_paxton · x · 2026-09-25
UC Berkeley 团队(含 Pieter Abbeel、Jitendra Malik 等)发布 Do as I Do 算法,将单目 RGB 人类视频重构并重定向为多指灵巧机械手的可执行动作序列,直接从日常第一/第三人称视频生成机器人操作数据。
- 从 egocentric/exocentric 野外视频中重建手-物体交互,再重定向到真实世界可执行的动作序列
- 在带真值的数据集和网络视频数据集上,手-物体交互估计与灵巧操作轨迹提取均超过此前 SOTA
- 实验覆盖 10 个真实世界动作、多种物体几何与抓取方式,并给出采集人类操作数据的实践指南
配套 RoboPapers 播客即将上线,作者团队将在节目中详细讨论。
所属事件:伯克利 Do as I Do:人类视频训练灵巧机械手(3 条相关)→
「具身」频道最新
- Runway 发布 27B MoE 世界行动模型 Praxis-1,Fast 版中位延迟仅 73ms — ChongZzZhang · 2026-11-12
- NVIDIA 开源自动驾驶模型 Alpamayo 2 Edge,合作方称边缘端提速逾 10 倍 — Course_Latter · 2026-11-12
- Dream-1 双臂机器人现场演示:一句指令叠好黄毛巾 — DJiafei · 2026-11-12
- 双板搭建测试:GPT-6 Astra 成功,Claude Fable 5.2 落败 — qinzytech · 2026-11-12
- 团队宣称造出智能手机价格的机器人,预售价外购更贵 — R4nsack · 2026-11-12
- CoRL 论文集证明:仿真训练已能产出顶尖真实机器人表现 — carlosdponx · 2026-11-12