MIT CSAIL 新记忆架构 Workspace Models 让机器人毫秒级学会复杂技能

rishabh16_ · x · 2026-11-12

MIT CSAIL 与卡内基梅隆大学 MLD 联合发布「Workspace Models」新方法,被 MIT CSAIL 官方新闻报道。

问题:机器人在家务、工厂等任务中频繁出错,核心原因是难以从历史观察中提取关键信息并实时行动;现有基于 VLM 的 agent 方案需在运行时搜索长帧历史,导致误差、高算力开销和反应迟钝。

做法:将历史压缩的 agentic 流水线重新设计——大型 VLM 改为离线推理,训练一个更小的「Workspace Model」模块。训练时用两个 VLM:一个看视频,另一个从图像中提取空间数据;观察历史被压缩为编码未来动作信息的「latent vectors」。

效果:机械臂等机器人可在线几毫秒内完成下一步规划,实时响应环境变化。

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →