开源工具 Promptfoo:像写单元测试一样评测 LLM 提示词

开源工具 Promptfoo(26.3k stars)将 LLM 提示词、Agent 和 RAG 的评测变成可提交到仓库的单元测试:每条用例在 YAML 中声明输入、模型提供方与预期输出,让提示词修改后旧用例可跨模型供应商一致地重跑,解决了传统在聊天窗口贴例子测试难以复现的痛点。

2026-10-22 ~ 2026-10-22 · 2 条相关