智能体设计要做A/B测试

francoisfleuret · x · 2026-07-10

作者建议在构建 agentic systems 时，把每一个设计选择都当成一个可被 A/B 测试的假设来验证。实践上应一次只改一个变量，设计 10 到 20 个测试来比较不同假设，并使用盲测评审，同时把所有结果和经验记录在项目笔记里，方便后续回看。