Bug Hunt Bench 实测:Kimi K3.1 Pro 在 Claude Code 里跑分,成本差 2.9 倍
PawelHuryn · x · 2026-10-24
Pawel Huryn(The Product Compass 作者)上线 Bug Hunt Bench——一个盲评、每仓库单提示、用真实植入 bug 测试前沿编码模型的排行榜(105 个植入 bug)。他质疑 K3.1 Pro 发布帖为何用 Claude Code harness 跑编码基准,并指出自己此前测试中 Kimi K3 用 Moonshot 官方 CLI 的成本约为 Claude Code 的 2.9 倍。榜单支持按成本、时间、轮次对比,所有数据与注意事项开源在 GitHub。
「编程与Agent」频道最新
- 1979 论文断言形式验证难成气候,2026 预言它将像 fuzzing 一样普及 — danbri · 2026-10-24
- Scale AI 团队打造航空高保真模拟环境,测试AI智能体应对风暴 — menhguin · 2026-10-24
- 双 iPhone 并排跑 agent:分析师称手机已能替代电脑管任务 — BenBajarin · 2026-10-24
- HumanLayer 宣布开源:主张「软件工厂」必须开放可组合 — teropa · 2026-10-24
- macOS 27 终端内置免费本地 LLM:fm 命令一行上手,完全离线免 API Key — dr_cintas · 2026-10-24
- AWS 与伯克利让 Agent 用 Lean 证明代码优化等价,平均提速 1.85 倍 — xiuyu_l · 2026-10-24