Artificial Analysis 编码代理榜上线:39 个模型/代理可横向比价
ArtificialAnlys · x · 2026-10-14
Artificial Analysis 公布编码代理基准的方法论与完整榜单页面。Coding Agent Index v1.5 由三个基准等权合成:DeepSWE v1.1(113 任务,Datacurve)、Terminal-Bench 4.0(66 任务,Laude Institute)、SWE-Atlas-QnA(124 任务,Scale AI),每任务取三次 pass@1 平均。页面同时提供每任务耗时、API 成本(按 token 计)与分基准得分,共覆盖 39 个模型/代理组合,并给出「最具吸引力象限」与 Pareto 前沿视图,可用于跨代理、跨模型、跨执行档位比较性价比。
「编程与Agent」频道最新
- Claude 自建测试工具,几分钟定位并修复 Vision Pro 闪烁 bug — nptacek · 2026-10-14
- Google Antigravity 新模型 Argon 上线,5x 订阅用户实测表现不佳 — waqasalibrand · 2026-10-14
- CMU 论文:4B 小模型自动改写 agent harness,反超 35B 老师 — irinarish · 2026-10-14
- Harness 不等于基础设施:沙箱与持久化该放哪一层 — blaizedsouza · 2026-10-14
- Anthropic 发布 Claude Managed Agents 沙箱安全加固指南 — brada · 2026-10-14
- 开发者用 Gemini 当架构师做出 Apple Watch 咖啡因追踪应用 — pythononrailz · 2026-10-14