英伟达开源机器人视频数据,打通实机-仿真-实机训练闭环
Scobleizer · x · 2026-08-22
英伟达发布 NVIDIA Isaac Video 开源项目,致力于打通机器人学习的“实机→仿真→实机”工作流。
该项目将真实世界的人类演示转化为仿真资产和训练数据,并允许将习得的策略部署回物理机器人。核心功能包括:
- 视频摄入:智能分割长视频并检索相关动作片段。
- 数据重建:重建手部/身体与物体的运动、深度、网格及 6-DoF 轨迹。
- 运动重定向:将人类动作映射至机器人实体,并在 Isaac Lab 中训练强化学习策略。
- 灵巧操作扩展:利用 CHORD(基于人类演示的接触力矩引导)扩展灵巧操作能力。
此外,项目还提供了包含 1,215 个任务的 121,500 个机器人 episodes 数据库,以加速机器人学习研究。
「具身」频道最新
- SEAR 首次大规模对照研究:7 个前沿 LLM、330 项任务检验自进化机器人 — xiye_nlp · 2026-10-16
- 播客对谈:海底机器人的 1500 米深水创业与蓝碳生意 — blakemenezes · 2026-10-16
- 索尼推出 5900 美元镀金 Walkman,主打 AI 音质增强 — Polymarket · 2026-10-16
- 比利时 ROBIB 机器人聚会 11 月 19 日回归,主题从 Elekto 到 Physical AI — MarwaEldiwiny · 2026-10-16
- VLX-Go 论文:多阶段训练让机器人跟踪目标人物抗干扰成功率大增 — omlab · 2026-10-16
- Ledger 发布 Atom 安全设备:AI Agent 操作须物理按键批准 — adamamcbride · 2026-10-16