实测反思:纯靠 Agent 自动优化提示词不如手写
BraceSproul · x · 2026-08-03
开发者 Brace Sproul 分享了在提示词(Prompt)优化上的实战经验。他发现,尽管 AI agent 在读取 trace 和运行脚本上很有帮助,但在核心的提示词编写上,人类参与(Human-in-the-loop)依然不可或缺。
他尝试花费约 3 天时间,完全依靠 Codex 来爬山算法(hill climb)优化 OpenWiki 的提示词,但 eval 得分几乎没有提升。最终他转为纯手动重写,仅在几小时内取得的进展就超过了之前用 Agent 折腾 3 天的效果。
「编程与Agent」频道最新
- Hybrid Reasoning Agents 论文:让 Agent 在潜空间思考、用文本行动 — _akhaliq · 2026-10-16
- 开发者用3台DGX Spark组本地集群跑GLM-5.3-Flash,配代理均衡日生175万token — Teknium · 2026-10-16
- 开发者分享给电脑上的 Agent 划权限:能读能写,发删买一律先问人 — No_Fan5310 · 2026-10-16
- 开发者用GPT写出unifi-simulator,让MikroTik交换机伪装进UniFi网络拓扑 — Pytlicek · 2026-10-16
- 斯坦福 45 分钟课拆解 Grok Bot:always-on agent 的 harness 工程 — Hesamation · 2026-10-16
- Opus 5.5 + Three.js 打造水波鱼群樱花互动场景,美到刷屏 — nikola_mr64990 · 2026-10-16