SuperMimic 单 GPU 3 小时训练人形追踪,胜 128 GPU 七天 SoTA

daibond_alpha · x · 2026-11-10

daibondalpha 发布的 SuperMimic 解析线程:在单块 GPU 上 3 小时训出超越基线(128 GPU 训练 7 天)的 SoTA 人形追踪策略。

核心秘诀是可微规划:通过学习到的动力学模型做 BPTT(沿想象轨迹反向传播路径梯度)来差异化预测回报,并用 terminal critic 进行 bootstrap。配图对比了 PPO「按采样动作加权优势」与 BPTT「对动作后果求导」两种策略更新方式:BPTT 把各环节局部敏感度沿想象的轨迹链式相乘,且动力学模型权重保持固定。

作者指出该估计器并不新鲜,与 SVG(Heess et al., 2015)的 pathwise value gradient 和 Dreamer v1 同源,关键是稳定且有效的梯度。

所属事件:SuperMimic 单 GPU 3 小时训练胜 128 GPU 七天基线(5 条相关)→

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →