新基准 TB-fn 揭秘：部分终端模型排名大幅下滑
abeirami · x · 2026-08-27
针对 Terminal Bench 2.1 排行榜头部模型的真实能力引发质疑，研究者推出了 TB-fn 基准。TB-fn 通过增加步骤、收紧要求或需要更复杂算法重新设计了相同的 89 个任务，并移除了捷径解。结果显示，在 TB-2.1 上聚集的模型在 TB-fn 上分布到了更多层级，GPT-5.6 Sol 和 Opus 5 保持领先，而其他模型性能显著下降。模型在 TB-fn 上的平均工作量增加了 38%。
所属事件:TB-fn 新基准重测终端模型，揭露刷榜嫌疑(6 条相关)→
「模型」频道最新
- Meta 发布 816B 开源模型 Muse Spark Open:42B 激活,两台 M5 Ultra Mac Studio 可本地跑 — op7418 · 2026-10-16
- Meta 开源 Muse Spark Open：816B 参数，两台 Mac Studio 即可本地运行 — op7418 · 2026-10-16
- 16 项任务实测机器人 LLM：GPT-6 Astra 成功率 17.2% 力压 Fable 5.1 — pabbeel · 2026-10-16
- Meta 开源 816B 多模态模型 Muse Spark，评论称仅次于 DeepSeek — bindureddy · 2026-10-16
- TRL 零时差支持 Muse Spark Open：64 张 H100 上 LoRA 微调 816B MoE — QGallouedec · 2026-10-16
- Muse Spark Open 评测配置曝光:与 GLM-5.3、Kimi K3、Qwen 对比时的推理参数全公开 — evijit · 2026-10-16