Agent 提示词修改前先建测试集：7 步循环让每次改动可量化
petrusenko_max · x · 2026-10-29
作者提出一套适用于任意 agent 或 skill 的提示词迭代测试循环，核心思想是：别再「agent 犯蠢→加一行→看起来好了→宣布修复」，而是先建测试。
7 步流程：
- 收集失败案例：每个坏输出连同触发它的输入存入一个文件夹，这个文件夹就是你的测试套件
- 把「什么是好」写成脚本能跑的检查项（如「正文无链接」「少于 280 字符」）；需要人来判断的就不算检查项
- 加入 5-10 个已正常工作的案例，防止修复悄悄破坏已有功能
- 先给当前提示词打分，作为基线
- 每次只改一处：提示词、工具描述或模型，绝不同时改两个
- 全量重跑，只有分数上升且无回归才保留改动
- 生产环境出现新故障时，先把案例放进文件夹，再做修复
结论：提示词会被重写、模型会被替换，但失败案例文件夹始终告诉你真相。
「编程与Agent」频道最新
- 转发热议：自更新文档是可无限增长的「无限市场」 — handotdev · 2026-10-29
- vboykis 长谈 2026 年学 ML 路径：自学出身、不让 agent 跑完整闭环 — vboykis · 2026-10-29
- Coinbase 首届全球 AI 交易竞赛开赛，总奖金池 200 万美元 — MurrLincoln · 2026-10-29
- vboykis：agent 热心帮倒忙，一个环境变量错了一下午 — vboykis · 2026-10-29
- 从业者直言：AI 端到端剪视频纯属吹牛，逐帧控制仍不可替代 — juliey4 · 2026-10-29
- 一条 prompt 批量审计编辑 188 条视频，作者感叹像反电力般反 AI — yungcontent · 2026-10-29