UrbanGround:复刻香港 3D 城市考倒 MLLM Agent,封路遵从率最低仅 10%
zhangzhuosheng · x · 2026-09-02
上海交大张倬胜团队等发布 UrbanGround,首个用全港 3D 地理数据构建的真实尺度城市沙盒,让多模态大模型 agent 以第一人称视角在物理受限的香港复刻体中闭环探索与导航。
主要发现:
- agent 在行人网络上的驻留率达 93.0–96.4%,但对封路信息的遵从率仅 10.0–46.7%
- 行人动态场景下,碰撞率高达 76.3–90.0%
- 模型在视觉识别与短程空间推理上具备原子能力,但「知道一次路怎么走」不够,过几个路口后仍会迷失;局部感知难以转化为可靠的空间行动
论文与代码均已公开,提供交互式地图导航与可重复的城市级测试。
所属事件:UrbanGround 用全港 3D 数据打造人机共用城市沙箱(2 条相关)→
「具身」频道最新
- Vision×机器人研究晚宴:合成数据、车载 GPU 与世界模型热议 — DynamicWebPaige · 2026-09-23
- 博主质疑 Optimus 行走视频是假 AI 视频,引机器人圈争议 — TechPreacher · 2026-09-23
- 两天造出原型机器人,已能自主绘制办公室地图 — IsaiahBallah · 2026-09-23
- Figure 人形机器人演示被指摆拍:任务未完成镜头即切换 — RexDouglass · 2026-09-23
- 马斯克：10年内至少10亿台人形机器人，20年或达千亿 — XFreeze · 2026-09-23
- VONDER AI眼镜预售299美元起：无摄像头无屏，可选ChatGPT/Claude/Gemini — Div_pradeep · 2026-09-23