SuperMimic 解析:50 Hz PD 控制让 BPTT 梯度不再爆炸

daibond_alpha · x · 2026-11-10

SuperMimic 解析线程第 3 部分,解释为什么学界曾抛弃 BPTT 路线以及现在为何可行:DreamerV2/V3 转向 REINFORCE 式梯度,机器人界收敛到 PPO。作者认为真正的变量是控制接口——50 Hz PD 位置控制在每步拉回误差,使 BPTT 梯度保持有界;在直接力矩控制下梯度会爆炸(归咎 MuJoCo)。

所属事件:SuperMimic 单 GPU 3 小时训练胜 128 GPU 七天基线(5 条相关)→

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →