CMU 开源 cua-speedrun:电脑操作 Agent 比拼速度与成本,GPT-6.1 Terra 最快最便宜
kohjingyu · x · 2026-11-04
卡内基梅隆团队(Pranjal Aggarwal、Sean Welleck、Ruslan Salakhutdinov 等)发布 cua-speedrun,一个不只记录成败、还计量任务耗时与模型调用成本的 computer-use agent 评测系统。所有排行在同一套 Modal 按秒计费虚拟机与统一 agent 接口上运行,覆盖 OSWorld、OSWorld 2.0、CUA-World、MyPCBench。初步测试结果:GPT-6.1-terra 最快且最便宜;Opus 5.5 成功率最高(最高分 85.1%,3050 秒、每任务 $15.17);GPT-6.1 Terra·Codex 以 487.6 秒成为最快、单任务最低 $0.362(得分 54.9%);Meta Muse Wonder 位列第三,仅次于 OpenAI 与 Anthropic 模型。
「模型」频道最新
- 博主放话:大家都低估了 Google 新模型,它已经回来了 — iruletheworldmo · 2026-11-04
- 博主称 OpenAI Astra 6.2 降价 60% 对标 Opus 5.5 — bindureddy · 2026-11-04
- Sarvam 发布 Prism,用贪吃蛇 demo 演示决策模型与 LLM 差异 — itsOmSarraf_ · 2026-11-04
- Aohan:推理快到让环境成为瓶颈,才算到位 — _arohan_ · 2026-11-04
- Cohere Model Vault 上线开放模型,Encrypted 版本连 Cohere 也看不到数据 — cohere · 2026-11-04
- Mistral Large 4 自曝架构翻车:注意力省 16 倍 KV cache,Agent 成绩却崩了 — _AndrewZhao · 2026-11-04