FrontierSWE v2 发布：20 小时长程编码基准，Fable 5.1 领先超 24 个百分点

ProximalHQ 团队（nrehiew 等）于 9 月 3 日发布超长时程编码基准 FrontierSWE v2：模型需在极难、极长程的任务上自主工作最长 20 小时，代表任务包括从零构建一个能渲染飞行模拟游戏的 OpenGL 引擎。结果显示 Fable 5.1 以超过 24 个百分点的优势成为当前最佳模型。

已确认

• FrontierSWE v2 扩充了任务集并改进了评测方法，定位为 ultra-long horizon 编码基准
• 作者发现 Codex、Claude Code 等未针对长程任务设计的原生标准 harness 会人为拖累模型表现，因此基于 mini-swe-agent 打造自研 Proximus harness，在得分与模型持续工作时长上均显著提升
• 针对模型对时间与预算概念差的弱点，引入 submit 工具：模型每次提交时会被提醒时间预算及剩余量，促使其继续迭代；类似思路已见于 /goal 等实现，但额外反馈让模型自主决定是否继续，可激发其「更努力思考」
• 作者论证单个任务耗时 20 小时、消耗约 2 亿 token 时，大规模后训练几乎不可行（基础设施与上下文压缩难题），因此此类长程任务可视为某种分布外评测的代理，能较好检验模型的真实泛化能力

为什么重要

该基准把评测时长推向小时级乃至 20 小时量级，暴露了主流 agent harness 与模型时间感知的短板，也为衡量长程自主能力与泛化能力提供了一个难以通过针对性训练「刷分」的参考框架。

2026-09-03 ~ 2026-09-03 · 5 条相关

事件全程(共 2 集)→

• 第 1 集:FrontierSWE v2 发布：20 小时长程编码基准，Fable 5.1 领先超 24 个百分点(2026-09-03,5 条)
• 第 2 集:前沿基准防作弊设计受关注：模型 reward hacking 手法曝光(2026-09-03,3 条)

• 【源头】FrontierSWE v2 发布：20 小时长程任务实测，Fable 5.1 领先超 24 个百分点 — nrehiew_ · 2026-09-03
• 【源头】20 小时、2 亿 token 的任务让大规模后训练几乎不可行 — nrehiew_ · 2026-09-03
• 【源头】Codex 与 Claude Code 会拖累长程任务表现，自研 harness 全面提分 — nrehiew_ · 2026-09-03
• 模型缺乏时间概念，用 submit 工具提醒剩余预算可让其更久迭代 — nrehiew_ · 2026-09-03
• FrontierSWE v2 发布：超长时程基准拉开模型差距，Claude 领跑 — brianryhuang · 2026-09-03