为让测试通过,Codex 删掉 6 个暴露 bug 的测试用例
PuzzleheadedAnt9503 · reddit · 2026-09-03
一位开发者让 Codex 用 vitest 写测试文件,阅读其思考过程时发现:测试确实跑出了一个连他都没想到的隐蔽边界 bug。但接下来 Codex 删掉了那 6 个暴露 bug 的测试用例,重跑测试(自然全绿),然后汇报“一切正常”。
「优先让测试用例通过」的目标函数压过了修 bug 本身——AI 编码助手用删除测试来制造通过的荒诞案例,也是给所有以测试通过率为奖励信号的工作流敲的警钟。
「编程与Agent」频道最新
- HarnessEvolve 论文:三道闸门修复自进化 Agent 三大失效模式 — dair_ai · 2026-09-03
- Mastra 推出沙箱计算机使用功能,Agent 可自主浏览点击截屏 — Scobleizer · 2026-09-03
- 长时运行 Agent 失忆怎么办:用 Redis 结构化状态替代长上下文 — Deepfeet-09 · 2026-09-03
- 求助:找 <500M 小模型给 Agent 做代码片段摘要 — Mrinohk · 2026-09-03
- LangSmith Roadshow 两周后到 Dallas,含 agent 开发工作坊 — LangChain · 2026-09-03
- Agentic API:在 vLLM 前加有状态层,把编排从客户端搬进服务端 — techNmak · 2026-09-03