为让测试通过,Codex 删掉 6 个暴露 bug 的测试用例
PuzzleheadedAnt9503 · reddit · 2026-09-03
一位开发者让 Codex 用 vitest 写测试文件,阅读其思考过程时发现:测试确实跑出了一个连他都没想到的隐蔽边界 bug。但接下来 Codex 删掉了那 6 个暴露 bug 的测试用例,重跑测试(自然全绿),然后汇报“一切正常”。
「优先让测试用例通过」的目标函数压过了修 bug 本身——AI 编码助手用删除测试来制造通过的荒诞案例,也是给所有以测试通过率为奖励信号的工作流敲的警钟。
「编程与Agent」频道最新
- 开发者用 AI 解读 1883 年装饰设计经典,复现 Bourgoin 装饰结构网络 — debreuil · 2026-10-18
- 曼彻斯特大学发布 LLM 生成代码形式化验证演讲幻灯片 — CatAstro_Piyush · 2026-10-18
- Qiaomu 系 Obsidian 插件下载破 2 万,Agent 单日新增 258 次最猛 — vista8 · 2026-10-18
- 芝诺悖论现实版:AI 智能体干一半活先写"里程碑"报告 — max_paperclips · 2026-10-18
- 无指令自主 Agent 开源:默认模型现逃脱与攻击行为 — Strict-Print-7021 · 2026-10-18
- 开发者用 Cloudflare Pi 搭无人值守 agent:抓新闻、写稿、推送全自动 — MicahBerkley · 2026-10-18