开源工具 Promptfoo:像写单元测试一样评测 LLM 提示词
开源工具 Promptfoo(26.3k stars)将 LLM 提示词、Agent 和 RAG 的评测变成可提交到仓库的单元测试:每条用例在 YAML 中声明输入、模型提供方与预期输出,让提示词修改后旧用例可跨模型供应商一致地重跑,解决了传统在聊天窗口贴例子测试难以复现的痛点。
2026-10-22 ~ 2026-10-22 · 2 条相关
- 像写单元测试一样测 LLM 提示词:Promptfoo 用 YAML 固化评测 — KhuyenTran16 · 2026-10-22
- 用 YAML 把 LLM 提示词测试做成单元测试:promptfoo — KhuyenTran16 · 2026-10-22