GaP 用 Gemini Flash-Lite 合成机器人计算图,Spotlight 论文两篇 robotics 亮点
DynamicWebPaige · x · 2026-11-10
Google 的 DynamicWebPaige 在会议上推荐了两篇机器人方向工作。其一是 GaP(Graph-as-Policy,Spotlight S6):用 Gemini 3.1 Flash-Lite 同时充当编码 agent 和 VLM 骨干,自动合成并自优化可执行的计算图来驱动机器人任务——架构上由多 agent harness 生成含 ROS2、GraspGen 等技能节点的图,用 Isaac Sim 和 Newton 仿真自学习迭代精炼,再部署到边缘设备持续执行,涵盖取货、爆米花、洗衣服等 8 个 Variational Automation 基准任务(4 仿真 + 4 真实)。其二是用 SFT+RL 对 Gemini Robotics-ER 1.5 做「安全思考」后训练,让 Unitree G1 人形机器人实时识别物理危险并主动干预。
所属事件:CoRL 2026 观察:DeepMind 基础模型全面接入机器人控制回路(6 条相关)→
「具身」频道最新
- Newton:基于NVIDIA Warp的开源GPU加速物理仿真引擎 — ChongZzZhang · 2026-11-11
- 从量子到AI:Ge Yang 谈 CoRL 与机器人学习下一步 — EpisodeYang · 2026-11-11
- Newton-FBA 公开布料操作 Sim2Real,数分钟内实现真机迁移 — ChongZzZhang · 2026-11-11
- Perceptron 开源 EgoHome:亚秒级第一视角家务视频基准 — lukas_m_ziegler · 2026-11-11
- Claude称Fable 5.2机器人控制大幅提升,实机折纸箱却翻车 — _Stocko_ · 2026-11-11
- AI2 开源 ToyBlocks:用「任务相关保真度」评测机器人世界模型 — allen_ai · 2026-11-11