让 DeepSeek 通宵修 14 个 bug PR,仅 6 个通过强模型评审
Aggressive-Narwhal-3 · reddit · 2026-10-03
作者用自己的仓库做实验:在 API 折扣窗口让便宜的 DeepSeek 通宵修复审计发现的严重 bug。
- 第一轮:产出 14 个 PR,全部交由更强的 GPT-6.1 Sol 评审,6 个通过 CI 并合并、8 个被关闭。失败原因包括:修复破坏了其他合法输入、测试依赖 CI 没有的工具、绕过方案实际仍有效、关键测试根本没在 CI 里跑、新测试即使故意注入 bug 也测不出来。
- 第二轮换了分工:强模型设计修复方案 → 另一个模型评审设计 → 便宜模型只负责实现。目前 7 个 PR 尚无一个通过评审。
- 作者向社区征询:便宜模型的修复通常在哪失效?规划/实现/评审的哪种分工组合真正有效?
「编程与Agent」频道最新
- ANT 上市前夜数据:Claude Code 一年反超 Cursor 和 Copilot — antgoldbloom · 2026-11-19
- 开发者向 GKE 沙箱项目提 PR:定期 checkpoint 防 agent 进度丢失 — yoimnotkesku · 2026-11-19
- AWS AgentCore Identity 支持私有 CA,Agent 可直连内网自建 IdP — AWS ML Blog · 2026-11-19
- Orchestrator Cloud Agents 结束测试正式上线 — julianweisser · 2026-11-19
- 开发者开源企业级 Agent 审计追踪模型:10 个数据模型找安全工程师挑刺 — TheHamzaShahbaz · 2026-11-19
- She 用 Claude Code 自制大头贴机:举手倒计时自动出照片条 — toolstelegraph · 2026-11-19