用数据集删规则测 prompt,找出真正有用的指令
_ScottCondron · x · 2026-07-22
这条在问:有没有一个库,能把 prompt 里的规则或条件一条条删掉做扰动,并在数据集上逐个评估效果。
目标很明确:自动去掉臃肿 prompt 里的“脂肪”,找出哪些约束真的有用。这个思路本质上是一套 prompt 优化工作流:
- 生成多个删减后的 prompt 变体
- 在数据集上跑评测
- 对比表现,找出多余指令
它更像是一个面向 agent 和工作流系统的提示词测试/优化工具想法。
所属事件:开发者探索用扰动法精简 Prompt(2 条相关)→
「编程与Agent」频道最新
- Langy 想把 Claude Code 式工程能力交给领域专家 — _rchaves_ · 2026-07-22
- Google 推出 Gemini 3.6 Flash 和 3.5 Flash-Lite 降成本提速 — Inside-Bus6555 · 2026-07-22
- 开源 Image SDK 把 8 家图像生成商统一成一个接口 — Ok_Window_2596 · 2026-07-22
- 生产 agent 反复翻车后,他总结出一事一 agent 最稳 — Deepfeet-09 · 2026-07-22
- Claude Code 的 VS Code 补丁让工具调用分组、diff 隐藏 — PawelHuryn · 2026-07-22
- Databricks 在数百万行代码库里实测模型和 Harness 选型 — xiaohu · 2026-07-22