手机视频1小时建物理孪生:Berkeley与NVIDIA开源RoboSimStudio
lukas_m_ziegler · x · 2026-10-24
UC Berkeley 与 NVIDIA Robotics 研究者基于 Newton 物理引擎构建的开源工具包 RoboSimStudio 展示了惊人演示:
- 输入只要一段手机视频:无需 CAD 模型、无需标定相机,AI agent 不到 1 小时即为机器人任务构建出物理仿真孪生
- 双臂任务实测:一条手臂持杆、另一条用海绵擦掉杆上记号笔痕迹。Claude 与 GPT-6 Astra 各自独立建仿真,其中一个 56 分钟完成
- Sim2real 闭环:真机跑动时发现实际杆的支架会移动(仿真中被建成了固定约束,导致海绵失接触),agent 自动回溯,把固定约束替换为自由刚体并修正仿真
- 所有物理参数都暴露为可拖动的滑块或 agent 可编辑项
这类「视频进、仿真出、真机验证、agent 自纠错」的流程被视为具身智能 sim2real 训练的潜在新范式。
「具身」频道最新
- Niantic Spatial CEO 首尔演讲:具身 AI 的 Sim2Real 基础设施 — ExtensionEcho3 · 2026-10-24
- Princeton等推出WorldOracle基准:动作驱动世界模型常幻构成功画面 — jiqizhixin · 2026-10-24
- Waymo 无人车已能独自完成 In-N-Out 得来速取餐 — FanaHOVA · 2026-10-24
- 商汤实测 GPT-6-Astra 具身智能,开源 27B 模型成本仅 1/50 — rohanpaul_ai · 2026-10-24
- 三星电视被曝内置人脸识别代码,可返回人脸边界框 — basedjensen · 2026-10-24
- 开源人形机器人 Asimov 1 第363天:测试新夹爪抓取能力 — freelerobot · 2026-10-24