MobileWorld 基准:手机 GUI 智能体均分仅约 52%

East-Muffin-6472 · reddit · 2026-08-19

论文 MobileWorld 提出评测手机端自主智能体的新基准,包含 201 个任务、约 20 个应用(通讯、消息、生产力等,系统应用占比不到 5%),并引入两条全新评测轴:

架构上采用 planner-executor:VLM planner 只看截图(不用无障碍树)输出自然语言动作,再由 grounding 模型转换为精确 (x,y) 坐标。

结果:最佳组合 Gemini-3-Pro + UI-Inst-7B 端到端均分约 52%,端到端 GUI 模型表现差得多,且失败集中在两条新评测轴的任务上——说明主动提问与工具调用仍是手机智能体的明显短板。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →