Surge 推出 sudo L7:用真实生产代码测模型的 Staff 级工程判断力
echen · x · 2026-10-14
Surge 发布新基准 sudo L7,专门衡量区分「能写代码」与「Staff 级工程师」的判断力:- 60 个真实任务,约 70% 取自企业私有授权的生产代码库——真正的软件工程发生在有多年历史包袱的仓库里:没人敢碰的遗留代码、历史意外固化为架构决策、以意外方式崩坏的依赖。- 任务由来自 Google、Meta、GitHub、NASA JPL 等公司的 staff/principal 工程师、前 CTO 编写,每个任务都源自对前沿模型真实失败案例的观察。- 每个任务按 8 个维度打分:功能正确性、工程手艺、实用判断、如实汇报、验证(边界与故障模式)、质疑有缺陷需求的思想伙伴能力、沟通、挫折后的坚持。
「编程与Agent」频道最新
- 谷歌实测:Argon 通宵跑 20 万行代码库,砍掉 40% 会话开销 — rseroter · 2026-10-14
- 90KB 的浏览器物理引擎:2 万刚体同帧模拟,与 Argon 用 Rust 从零写出 — LinusEkenstam · 2026-10-14
- 零库纯Python让Argon给自己合成声音:从音素到声道建模全流程 — fofrAI · 2026-10-14
- 马斯克转发:Grok Bot 组建采购小队,3 分钟搞定买菜 — elonmusk · 2026-10-14
- ESP32 玩 AI 智能硬件:15 个开源项目合集加 Meta Muse 手把手对接教程 — alexcovo_eth · 2026-10-14
- AI 贡献者激增:开源项目加 auto-research.md 提示词引发 PR 指数增长 — IgorCarron · 2026-10-14