Rice/NVIDIA 提出 Sensorimotor Alignment:免训练预测机器人策略成功率
CSProfKGD · x · 2026-10-24
Rice 大学与 NVIDIA 研究者把「柏拉图表征假说」(PRH)延伸到机器人领域:视觉和语言是同一底层世界的两种投影,那机器人运动能否算第三种投影?
核心发现:
- 作者定义 Sensorimotor Alignment(S²),衡量模型视觉-语言表征与末端执行器运动轨迹结构的对齐程度;能力更强的具身模型,其感知表征与运动轨迹结构对齐更好。
- 跨 12 个视觉-语言-动作模型(VLA)实测,S² 与 SimplerEnv 任务成功率正相关(Pearson r = +0.717),且在仿真和真实环境、不同模型家族中均成立——可作为免训练的策略成功率预测器。
- 作者还用 S² 在表征层面解释了 VLA 和世界模型(WAM)中的若干此前未解现象。
论文、代码与 3 分钟视频均已公开。
「具身」频道最新
- 实测实锤:三星电视主动打开假麦克风,精确采音 5 秒 — ngxson · 2026-10-24
- 机器人模型刷榜为时过早:VLAs 评测成熟度远不及 LLM — paigeinsf · 2026-10-24
- Claude 一小时设计出载重 200 磅六足机器人,含零件清单 — _Stocko_ · 2026-10-24
- iPhone Duo 上手:手机笨重,展开却是完美 iPad Mini — firstadopter · 2026-10-24
- GTP:用生成式规划替代 RL,机器人操作任务在线学习更高效 — du_yilun · 2026-10-24
- HF 上线 OpenUSD,NVIDIA 同步免费放出 2500+ SimReady 3D 资产 — Promptmethus · 2026-10-24