NVIDIA Cosmos 3 发布:同一套后训练方案搞定机器人与自动驾驶实时世界模拟
liu_mingyu · x · 2026-10-22
NVIDIA 发布 Cosmos 系列更新,展示如何用同一套 post-training 方案把 Cosmos 3 变成实时流式交互世界模型,面向机器人和自动驾驶场景。
要点:
- Cosmos3-Nano-Sim-Bimanual:从相机导航与机器人动作预测视觉动态,用生成历史流式输出下一帧观测,支持四条机器人 rollout 与同步 3D 输入动作;在 AgiBot-World 和 AgiBot-GEAR 上的视频质量与参考帧 PSNR 均优于 DreamDojo 2B/14B。
- Cosmos3-Nano-Sim-Transfer:把深度图、分割、边缘或模糊视频转成精细 RGB 观测,可用语言控制外观,同时模拟器维持物理状态。
- 技术报告、模型卡与 GitHub 代码均已开放。
「具身」频道最新
- Kodiak Robotics 宣布数周内启动完全无人卡车上路,已为 IKEA 运货 — Scobleizer · 2026-10-22
- RAX 用冻结 LLM 靠探索驱动机器人:零示教超 π0.5 达 96.7%,成本仅 1/20 — du_yilun · 2026-10-22
- CMU 春季开人形机器人学习课,每队配真机且全套开源 — GuanyaShi · 2026-10-22
- 戴上 S1 数据手套玩魔方洗牌,机器人手技能数据采集新姿势 — Haoyu_Xiong_ · 2026-10-22
- Recursia 具身递归自我改进:LIBERO-Pro 零样本成功率大幅领先 — jiqizhixin · 2026-10-22
- 特斯拉加州 Optimus 工厂状态更新为「早期爬坡」,德州工厂在建 — BrettKrieger12 · 2026-10-22