伯克利研究员:机器人控制别只跑 VLA,harness 加工具调用更便宜可靠
rbhar90 · x · 2026-09-08
Berkeley/NVIDIA 研究者 letianfu 分享对多模态模型做机器人连续控制的观点:
- 用 harness 加工具调用(IK、SAM3 等)来benchmark多模态模型的机器人控制能力,比直接用模型端到端控制更便宜、更快、更可靠;某任务上模型得分从 40% 提升到 95%,输出 token 少 6.2 倍、成本低 2.3 倍。
- 自进化的 harness 和技能库会快速扩展这些模型的能力边界,VLA 和 WAM 都会成为技能库的一部分。
- 作者认为机器人及物理世界应用是多模态模型与智能体的下一个前沿,过去一年与 Ken Goldberg、Jim Fan、Yuke Zhu、Trevor Darrell 等人在 Berkeley 和 NVIDIA 合作探索该方向。
「具身」频道最新
- 最懂机器人的可形变仿真求解器 FBA 将并入 NVIDIA Newton — ChongZzZhang · 2026-10-26
- 用户用 Claude Code 拆解本田车机：发现 root 后门与静默装 APK — IndraVahan · 2026-10-26
- Temple 健康设备开启预售，用户质疑：未见实效前谁愿戴 — abhishekcode42 · 2026-10-26
- FLASH 仿真框架：单卡 RTX 5090 上分钟级学会布料折叠 — ChongZzZhang · 2026-10-26
- Luke Wroblewski 细节控：iPhone Duo 圆角复刻初代 iPhone — LukeW · 2026-10-26
- 人形机器人两年跑赢人类：半马破纪录、百米超博尔特 — ben_j_todd · 2026-10-26