GDPx 长程基准发布:GDPval 后继者,最强模型仅得 11.1%
japie06 · reddit · 2026-11-02
Reddit 用户分享新发布的 frontier 级长程任务基准 GDPx(GDPval 的后继者),评测大型生产代码库中的长程功能开发、调试与迁移,最好的模型得分也只有约 12%。
配图排行榜(软件工程域)显示:Gemini 4 Carbon 以 11.1% 居首($8.16/任务、282K 输出 token);Claude Opus 5.5、GPT 6.1 Sol、Gemini 4 Argon 并列 8.9%(每任务成本从 $2.57 到 $16.97 不等);GPT-6 Astra 6.7%,Claude Fable 5.1 4.4%,Muse Wonder Full 2.2%;DeepSeek 4.1 Flash、GPT-6 Luna、Grok 4.7、Kimi K3、Qwen 3.8 Max、GLM 5.3 等均为 0%。任务按各域预设评分方式打分,取 3 次尝试平均。
所属事件:SemiAnalysis 发布前沿级智能体基准 GDPx,最强模型仅得 12%(7 条相关)→
「模型」频道最新
- 美团 LongCat-2.5 发布:1.6T MoE 主打 Agent,被疑复刻 DeepSeek 架构 — teortaxesTex · 2026-11-02
- 问 Claude AI 公司最想让你失去什么,答案是你自己的算力 — alex_verem · 2026-11-02
- Codex 200 美元档能力重合度走高,Hermes 还值不值得用? — Foreign_Lead_3582 · 2026-11-02
- 实测压缩阈值省 16-23% 成本:GLM 5.3 价格仅 Grok 4.7 的 1/30 — yb2698 · 2026-11-02
- Codex 疑似送重置额度就触发容量报错,用户连番碰壁 — CtrlAltDwayne · 2026-11-02
- 博主预测:一年内 Opus 5.5 级模型算力成本将大幅下降 — teortaxesTex · 2026-11-02