港浙复三校联手 Lightspeed 推 HiSTEVE:VLA 智能体键鼠操控玩转 Minecraft
tencent · hf · 2026-10-26
香港大学、浙江大学、复旦大学与 Lightspeed Studios 联合发布 HiSTEVE 1.0,一个面向开放世界游戏的分层视觉-语言-动作(VLA)智能体(arXiv 2026-10-22)。
- 采用分层架构:长程规划与底层执行解耦,先由高层做任务规划,再落地为具体操作
- 直接使用原生键盘和鼠标控制(而非抽象 API),模拟真实人类玩家接口
- 在 Minecraft 中完成复杂开放式任务,验证了开放世界环境下的长时程执行能力
该工作展示了 VLA 智能体在人类原生操作接口上的可行性,对具身智能与游戏 AI 研究都有参考价值。
「具身」频道最新
- 机器人任务实测:Kimi K3.1 介于一流梯队,但成本高出 20 倍 — teortaxesTex · 2026-10-26
- CoRL 论文:VLA 机器人策略单步推理即可匹敌多步,动作生成提速 1.6~4.8 倍 — kaixhin · 2026-10-26
- 黑客逆向改造 Ray-Ban Meta 眼镜:AR 实时显示 3000+ Elo 国际象棋最优着法 — Vjeux · 2026-10-26
- 玩家用 Grok 和 Hermes Agent 给 StackChan 机器人加上读剧本技能 — alexcovo_eth · 2026-10-26
- 人形机器人 10 个名场面:前 Boston Dynamics 工程师造管家的机器人 — minchoi · 2026-10-26
- KAIST 人形机器人 v0.9 推 35 公斤举 20 公斤,收尾来段太空步 — minchoi · 2026-10-26