实测反思:纯靠 Agent 自动优化提示词不如手写
BraceSproul · x · 2026-08-03
开发者 Brace Sproul 分享了在提示词(Prompt)优化上的实战经验。他发现,尽管 AI agent 在读取 trace 和运行脚本上很有帮助,但在核心的提示词编写上,人类参与(Human-in-the-loop)依然不可或缺。
他尝试花费约 3 天时间,完全依靠 Codex 来爬山算法(hill climb)优化 OpenWiki 的提示词,但 eval 得分几乎没有提升。最终他转为纯手动重写,仅在几小时内取得的进展就超过了之前用 Agent 折腾 3 天的效果。
「编程与Agent」频道最新
- 开发者实测:AI 智能体在沙箱中的“越狱”视角 — cramforce · 2026-08-03
- Kimi K3 全景实操教程:从工作流到多智能体调度 — ZabihullahAtal · 2026-08-03
- fal.ai 驱动开源插件:一键将网页图片转为 3D 模型 — tom_doerr · 2026-08-03
- Comp AI 开源基于 Next.js 的智能体 CRM,配套发布 Agent 框架 eve — JosephJacks_ · 2026-08-03
- 为 AI 编程智能体构建执行与验证层 Flows — OGMYT · 2026-08-03
- AI 编码时代重塑开发工具:开源将比闭源更具优势 — davidcrawshaw · 2026-08-03