Ctrl-F: Force as an Interface for Humanoid Loco-Manipulation
Mengjie Zhao, Yuxin Chen, Yiyang Shao, Chuye Hong, Jiakang Chen, Koushil Sreenath, Masayoshi Tomizuka
cs.RO, cs.LG
2026-11-04
Ctrl-F 给跟踪加三维力指令,仿真 1.5 倍质量完成率仍超 90%,无力基线为 0,G1 推踢到 20 kg。
通用跟踪知道身体该到哪,不知道该用多大力。参考只给位姿和速度,负载变了轨迹不改。HDMI、SceneBot、LessMimic 用物体轨迹、接触标签或距离场,记的是何时、何处碰上。同一段抬手,没有旋钮可以再用力。无力跟踪去抬 1.5-6 kg 的箱子,手掌打滑,成功数为 0。
Ctrl-F 分两层,层间只传三维力,每个接触体一个。这篇是双手和一只脚,换任务不换接口。
底层吃参考、力指令和本体感觉,出关节目标。训练场景里没有物体。load mask 只标肢体此刻能不能出力,支撑脚关、手开,从动作里就能算,不用给交互打标。采样指令时施加等大反向的外力,贴住参考就必须自己把力打出来。没有东西可推,出力被收成「抗住干扰还得站住」。课程从 0 收到满量程,手腕 60 N,脚踝 30 N。
上层冻住底层。输入有双方参考和接触点,物体相对参考漂了就改推力。部署不读力传感器,不知质量,但要物体位姿。
解析老师给力的初值:对物体做 PD,经刚体动力学得到六维力和力矩,空中补重力、地面补摩擦,再用抓取矩阵分到各接触力。一个任务进这个式子,只剩抓取矩阵、这个通道能出的力、负载三项。老师看得到真实质量,不能上机,也不必准,错了交给强化学习离开。模仿按 DAgger 打在策略走到的状态上,权重随训练褪去,奖励只看物体跟上没有。质量在回合中也会变。
基线是通用跟踪器 SONIC 的公开 G1 权重,同一批片段;消融只去掉力指令。
指令为 0、无外载时,受力肢体根对齐误差 2.96 cm,SONIC 为 5.89 cm,完成率 100% 对 80.2%。这些片段 Ctrl-F 训练过,SONIC 第一次见,构型也不同。这组数只说明力通道闲着时跟踪还在。同一外力只改指令,满载完成率约 75%,无指令、反向和 SONIC 不超过 30%,受力肢体误差大约到三倍。反向最差,策略顺着负载加力。
五类手任务有力指令时,完成率在扫过的质量上保持 90% 以上。无指令在标称处 43%,SONIC 31%,1.5 倍都是 0;这两条在半个标称也不到 90%。踢的 90% 线,有指令 2.05 倍,去掉指令 1.51 倍;扫在 3 倍外仍在线上,去掉指令 2.11 倍跌破。再重一样会失败。
回合中改质量,变号正确,策略不知质量,也读不到力。绳系指令 4.7-9.2 N/kg,交到物体 9.4-10.6,悬吊要 9.81。推拖 2-4 N/kg。举起加重 18.2、减重 12.9 N/kg,约 85-90% 是两掌向内挤,捏得更紧。回合内质量固定的策略,看到偏离也会改。
| 任务 | 无指令 | 只 BC | Ctrl-F |
| 抬箱 | 19.45/0% | 26.03/6% | 4.59/100% |
| 绳提 | 25.25/48% | 23.65/0% | 6.26/100% |
| 绳持 | 26.40/75% | 21.05/84% | 6.28/100% |
| 推箱 | 29.45/0% | 24.80/0% | 4.91/84% |
| 拖箱 | 32.05/19% | 5.33/100% | 6.95/100% |
表内是物体误差(cm)和完成率。抬箱 BC 指令约 37 N,箱上约 8 N,模仿损失管指令,不管力交到物体没有。拖箱的力近乎恒定,BC 也能做完。只留强化学习时,交替负载容易一直出力或一直不出;全程有载时任务能过,指令和力学对不上。
G1 上物体位姿用 AprilTag。弹簧秤 10、20、30 N 读得 8.8、16.7、24.5 N。拖到 14 kg,20 kg 失败,SONIC 只拖空车。推箱空载和 20 kg,SONIC 都不动,Ctrl-F 速度差不多。抬 2 kg 为 9/10。踢空箱和 20 kg 都可以。拿 1 kg 并踢 8 kg 的车,序列做完。8 kg 再加 6 kg,速度保住;约两秒后把指令锁住就变慢。
同一段参考里单独规定力度,通用跟踪没有这个口。底层不看物体,不必另采交互数据;上机不要力传感器和质量。能用的是这个接口和反向力训练。手、脚、手脚复合各有一对控制器,新片段要重训。力把重载从做不成拉开到 1.5 倍标称还能做完,覆盖面仍然窄。
实机位姿靠 AprilTag,标记丢了闭环就断。动作有限,新片段跟不上。论文写了这两条。
对 SONIC 的跟踪差,论文承认被见过的片段和不同构型放大。秤短 12-18%,夹着柔顺和力的方向,只能看量级。拖行对比里 SONIC 从空车起步,Ctrl-F 从 8 kg 起步。老师训练时读真实质量。「一小套模式就够」没有不够时的反例。完成率按存活步计,早停会好看些。20 kg 是最重试次,除抬箱 9/10 外,硬件多是少量试次。