伯克利 Ctrl-F 用三维力指令,G1 推踢到 20 kg

Ctrl-F: Force as an Interface for Humanoid Loco-Manipulation

Mengjie Zhao, Yuxin Chen, Yiyang Shao, Chuye Hong, Jiakang Chen, Koushil Sreenath, Masayoshi Tomizuka

cs.RO, cs.LG

2026-11-04

Ctrl-F 给跟踪加三维力指令,仿真 1.5 倍质量完成率仍超 90%,无力基线为 0,G1 推踢到 20 kg。

这篇在解决什么

通用跟踪知道身体该到哪,不知道该用多大力。参考只给位姿和速度,负载变了轨迹不改。HDMI、SceneBot、LessMimic 用物体轨迹、接触标签或距离场,记的是何时、何处碰上。同一段抬手,没有旋钮可以再用力。无力跟踪去抬 1.5-6 kg 的箱子,手掌打滑,成功数为 0。

方法

Ctrl-F 分两层,层间只传三维力,每个接触体一个。这篇是双手和一只脚,换任务不换接口。

底层吃参考、力指令和本体感觉,出关节目标。训练场景里没有物体。load mask 只标肢体此刻能不能出力,支撑脚关、手开,从动作里就能算,不用给交互打标。采样指令时施加等大反向的外力,贴住参考就必须自己把力打出来。没有东西可推,出力被收成「抗住干扰还得站住」。课程从 0 收到满量程,手腕 60 N,脚踝 30 N。

上层冻住底层。输入有双方参考和接触点,物体相对参考漂了就改推力。部署不读力传感器,不知质量,但要物体位姿。

解析老师给力的初值:对物体做 PD,经刚体动力学得到六维力和力矩,空中补重力、地面补摩擦,再用抓取矩阵分到各接触力。一个任务进这个式子,只剩抓取矩阵、这个通道能出的力、负载三项。老师看得到真实质量,不能上机,也不必准,错了交给强化学习离开。模仿按 DAgger 打在策略走到的状态上,权重随训练褪去,奖励只看物体跟上没有。质量在回合中也会变。

结果

基线是通用跟踪器 SONIC 的公开 G1 权重,同一批片段;消融只去掉力指令。

指令为 0、无外载时,受力肢体根对齐误差 2.96 cm,SONIC 为 5.89 cm,完成率 100% 对 80.2%。这些片段 Ctrl-F 训练过,SONIC 第一次见,构型也不同。这组数只说明力通道闲着时跟踪还在。同一外力只改指令,满载完成率约 75%,无指令、反向和 SONIC 不超过 30%,受力肢体误差大约到三倍。反向最差,策略顺着负载加力。

五类手任务有力指令时,完成率在扫过的质量上保持 90% 以上。无指令在标称处 43%,SONIC 31%,1.5 倍都是 0;这两条在半个标称也不到 90%。踢的 90% 线,有指令 2.05 倍,去掉指令 1.51 倍;扫在 3 倍外仍在线上,去掉指令 2.11 倍跌破。再重一样会失败。

回合中改质量,变号正确,策略不知质量,也读不到力。绳系指令 4.7-9.2 N/kg,交到物体 9.4-10.6,悬吊要 9.81。推拖 2-4 N/kg。举起加重 18.2、减重 12.9 N/kg,约 85-90% 是两掌向内挤,捏得更紧。回合内质量固定的策略,看到偏离也会改。

任务无指令只 BCCtrl-F
抬箱19.45/0%26.03/6%4.59/100%
绳提25.25/48%23.65/0%6.26/100%
绳持26.40/75%21.05/84%6.28/100%
推箱29.45/0%24.80/0%4.91/84%
拖箱32.05/19%5.33/100%6.95/100%

表内是物体误差(cm)和完成率。抬箱 BC 指令约 37 N,箱上约 8 N,模仿损失管指令,不管力交到物体没有。拖箱的力近乎恒定,BC 也能做完。只留强化学习时,交替负载容易一直出力或一直不出;全程有载时任务能过,指令和力学对不上。

G1 上物体位姿用 AprilTag。弹簧秤 10、20、30 N 读得 8.8、16.7、24.5 N。拖到 14 kg,20 kg 失败,SONIC 只拖空车。推箱空载和 20 kg,SONIC 都不动,Ctrl-F 速度差不多。抬 2 kg 为 9/10。踢空箱和 20 kg 都可以。拿 1 kg 并踢 8 kg 的车,序列做完。8 kg 再加 6 kg,速度保住;约两秒后把指令锁住就变慢。

为什么重要

同一段参考里单独规定力度,通用跟踪没有这个口。底层不看物体,不必另采交互数据;上机不要力传感器和质量。能用的是这个接口和反向力训练。手、脚、手脚复合各有一对控制器,新片段要重训。力把重载从做不成拉开到 1.5 倍标称还能做完,覆盖面仍然窄。

局限与存疑

实机位姿靠 AprilTag,标记丢了闭环就断。动作有限,新片段跟不上。论文写了这两条。

对 SONIC 的跟踪差,论文承认被见过的片段和不同构型放大。秤短 12-18%,夹着柔顺和力的方向,只能看量级。拖行对比里 SONIC 从空车起步,Ctrl-F 从 8 kg 起步。老师训练时读真实质量。「一小套模式就够」没有不够时的反例。完成率按存活步计,早停会好看些。20 kg 是最重试次,除抬箱 9/10 外,硬件多是少量试次。

术语

原文与代码

社区讨论

相关论文

全部论文解读