Meta 研究员承认:模型未针对 Codex 调优,将改进 harness 随机化

JoshPurtell · x · 2026-11-07

围绕 pi、CC、swe-mini 等模型的评测讨论中,用户指出「我们的模型从没为 Codex 调优过,换其他 harness(如 CC)效果会好得多」。Meta 的 soumithchintala 回应称将改进 harness 随机化以覆盖 Codex,并承认在泛化到前沿模型水平上还有很长的路要走,感谢社区反馈。JoshPurtell 表示正在为 pi、CC、swe-mini 跑 rollouts 验证。

所属事件:PyTorch 创始人承认评测 harness 随机化拖累模型成绩(3 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →