Kimi K3 刷榜 AA-Briefcase 但成本与耗时高昂
Artificial Analysis 针对 Kimi K3 在 AA-Briefcase 代理知识工作基准上的表现发布了多维度评测。评测显示,Kimi K3 虽然在总分上取得了前沿成绩,但在运行效率与成本消耗上付出了极高的代价,呈现出显著的优劣势分化。
已确认
总分与能力偏科:Kimi K3 在 AA-Briefcase 测试中拿到了 1543 Elo 的总分,排名第二,逼近榜首 Claude Fable 5 的 1574 Elo。在具体维度上,其分析质量表现强劲,达到 1754 Elo,大致相当于 Claude 的水平;但呈现质量明显弱于其自身的分析能力,存在偏科现象。
运行成本与效率代价:尽管分数亮眼,但 Kimi K3 的运行代价极为高昂。平均每个任务耗时高达 56.4 分钟,是榜单中耗时最长的一档;单任务平均成本也达到 10.57 美元(在展示模型中仅次于 14.43 美元的 Claude Sonnet 5 max 版本)。导致成本和耗时暴增的主要原因是,该模型在处理任务时平均需要 83 轮交互,并产生约 12 万的输出 Token。
为什么重要
该评测揭示了当前大模型在追求复杂代理任务高分时可能面临的典型权衡:极高的推理与交互频次虽然能拉高最终任务质量,但会引发 Token 消耗暴增和响应时间过长。对于实际应用而言,这种高昂的金钱与时间成本将直接影响模型在真实业务场景中的商业可行性。
2026-07-22 ~ 2026-07-22 · 6 条相关
- 第 1 集:Kimi K3 登顶前端 Web App 榜单并获英文能力好评(2026-07-21,3 条)
- 第 2 集:Kimi K3 跃升至 Agent Arena 第 4 名(2026-07-21,6 条)
- 第 3 集:Moonshot 发布 2.8 万亿参数开源模型 Kimi K3(2026-07-21,8 条)
- 第 4 集:Kimi K3比肩Fable 5:性能相当且成本仅三分之一(2026-07-21,7 条)
- 第 5 集:Kimi K3 创开源模型 ECI 指数新高但仍有代差(2026-07-22,3 条)
- 第 6 集:研究称Kimi K3具有评测意识,被指刷题(2026-07-22,2 条)
- 第 7 集:Kimi K3 刷榜 AA-Briefcase 但成本与耗时高昂(2026-07-22,6 条)
- 第 8 集:Kimi K3 横评表现亮眼跻身全球顶级模型梯队(2026-07-22,4 条)
- 第 9 集:Kimi K3 公开后焦点转向架构(2026-07-27,25 条)
- 第 10 集:TokenSpeed实现Kimi K3双平台首发支持(2026-07-27,2 条)
- 第 11 集:Moonshot Kimi K3首发上线Nebius,支持百万上下文(2026-07-27,3 条)
- 第 12 集:SGLang首发支持Kimi K3,吞吐量飙升至423 tok/s(2026-07-28,8 条)
- 第 13 集:月之暗面Kimi K3旗舰模型在Together AI首发上线(2026-07-28,12 条)
- 第 14 集:Kimi K3 Max 登顶多项 Arena 榜单,开源模型比肩闭源(2026-07-28,11 条)
- 第 15 集:Fireworks 实测:Kimi K3 质量接近 Opus 5 且成本大降(2026-07-28,5 条)
- 第 16 集:Kimi K3早期测试表现亮眼引发社区热议(2026-07-28,3 条)
- 第 17 集:Kimi K3 本地实测胜出,3D 物理场景击败多款云端模型(2026-07-28,5 条)
- 第 18 集:Kimi K3技术报告深度拆解:工程协同成就前沿性能(2026-07-28,21 条)
- 第 19 集:月之暗面 Kimi K3 登陆日本(2026-07-28,2 条)
- 第 20 集:Kimi K3 通过 Compound 基准但缓存命中率被指拖累成本(2026-07-29,2 条)
一手来源
- Kimi K3 代理基准第二,但每任务成本 10.57 美元 — ArtificialAnlys ·
- Kimi K3 刷榜 AA-Briefcase,但每任务要 56.4 分钟 — ArtificialAnlys ·
- Kimi K3 逼近 AA-Briefcase 榜首,但呈现分明显落后 — ArtificialAnlys ·
- 【源头】Kimi K3 代理基准第二,但每任务成本 10.57 美元 — ArtificialAnlys · 2026-07-22
- 【源头】Kimi K3 逼近 AA-Briefcase 榜首,但呈现分明显落后 — ArtificialAnlys · 2026-07-22
- Kimi K3 分数逼近顶级,但 AA-Briefcase 单任务要 10.57 美元 — ArtificialAnlys · 2026-07-22
- 【源头】Kimi K3 刷榜 AA-Briefcase,但每任务要 56.4 分钟 — ArtificialAnlys · 2026-07-22
- Kimi K3 评测:单任务耗时 56 分钟,Token 消耗暴增 — ArtificialAnlys · 2026-07-22
- Kimi K3 在 AA-Briefcase 排第二,但单任务要 10.57 美元 — airesearch12 · 2026-07-22