生成器远超验证器：DeepSeek-Coder 抽样 250 次解 56% 的启示
le_james94 · x · 2026-09-16
作者花了三周学习 Stanford Online 的 CS 329A 课程（Azalia Mirhoseini 与 Aakanksha Chowdhery 主讲），发现贯穿全部课程的一个核心论点：生成器的能力已远远跑在验证器前面。
他用数据佐证：DeepSeek-Coder-V2-Instruct 在 SWE-bench Lite 上单次采样只解决 15.9% 的问题，但抽 250 个样本后解决率达 56%——前提是有测试套件告诉你哪个样本是对的。也就是说，「模型这堆答案的均值在变好，但你伸手从这堆里挑出正确答案的能力并没有同步提升」。
作者随后分节复盘了课程内容，核心都围绕生成与验证的鸿沟这一主线。
所属事件:3 周精读斯坦福 CS329A：生成器已跑赢验证器(9 条相关)→
「编程与Agent」频道最新
- 一个过期日期让 WhatsApp 回复 agent 静默罢工两天,19 条消息无人应答 — petrusenko_max · 2026-11-02
- 10倍工程师就是一个 SKILLS.md:六大工作流规则全公开 — mdancho84 · 2026-11-02
- 开发者自审 MCP 凭据代理:最大漏洞竟出在配置文件 — Relevant_Mousse_9117 · 2026-11-02
- AWS 开源 Strands Harness 宣称比 Claude Code 便宜 45%，搅动 harness 之争 — blaizedsouza · 2026-11-02
- 小米 MiMo 提出 CodeSpecWeave:用相互依赖规格合成任务训练编程智能体 — XiaomiMiMo · 2026-11-02
- Sketchy v0.1.6:图表输出比纯文本省 29% token — Nkgsporty · 2026-11-02