Cognition:GPT-6 Astra 编码质量逼近 Fable 5,成本还低 64%
rohanpaul_ai · x · 2026-09-05
Cognition 宣布 GPT-6 Astra 将接入 Devin:在 FrontierCode 1.1 上得分距 Fable 5 仅 0.4 分,而 rollout 成本低 64%,并刷新其内部测试基准 SOTA。
FrontierCode 的特别之处在于衡量 AI 编码 agent 能否产出维护者真正会合并的 PR,而非止步于功能正确:与 36 个开源仓库的维护者共建 150 个任务,从正确性、回归安全、测试、范围、风格到代码库惯例加权评分,任何阻断项不达标直接计零分。METR 此前发现,SWE-bench Verified 上约一半通过自动测试的补丁实际不会被维护者合并——说明 FrontierCode 测的是「过 review 关」的代码质量。
所属事件:GPT-6 Astra 接入 Devin:性能逼近 Fable 5,成本低 64%(4 条相关)→
「编程与Agent」频道最新
- 开发者给自己造「Rork 技术成员」agent,目标 GTA 6 前全自动干活 — rudrank · 2026-10-21
- OpenAI Live API 实用技巧:后端 sideband 连接免代理管住语音会话 — pbbakkum · 2026-10-21
- OpenAI 多语言编程基准 MultiLangBench:PHP 拿下单项最高 91.3% — ricklamers · 2026-10-21
- UserProof 让 Claude Code 直播观看用户会话录像并给出转化优化建议 — doooyle · 2026-10-21
- dphnAI 分布式推理网络日供 320 亿 DeepSeek tokens,约为 Venice 日量 6% — Ronangmi · 2026-10-21
- Superconductor 推出 agent 选择器:一键检索 8 款编码 agent 并行对比 — sergeykarayev · 2026-10-21