CMU 开源 cua-speedrun:为电脑操作 Agent 同时测速度与成本
卡内基梅隆大学团队(包括 Ruslan Salakhutdinov、Jing Yu Koh、Sean Welleck、Daniel Fried 等人)发布并开源 cua-speedrun,一个突破只看成功率的 computer-use agent 评测系统。它在统一环境中同时测量每项任务的完成耗时与模型调用成本。结果显示,在相同成功率下,不同 agent 的速度差距可达 4.4 倍,凸显了速度与成本作为关键评价维度的重要性。
2026-10-01 ~ 2026-10-02 · 3 条相关
- CMU 发布 cua-speedrun:同分下 computer-use agent 速度差距可达 4.4 倍 — arankomatsuzaki · 2026-10-01
- CMU 开源 cua-speedrun:为电脑操作 agent 计时算钱的评测系统 — wellecks · 2026-10-02
另有 1 条近重复转述:kohjingyu