harness 测试要不要上真模型？zeeg：准备先试缓存方案

zwerp · x · 2026-10-07

David Cramer 回应 mock 测试建议：可以做，但很多改动需要看对真实模型的行为，强行分离会带来大量复杂度；他打算先试缓存推理响应的折中方案。起因是他吐槽 agent 测试套件跑一次要 10 美元的问题。