开源工具 llm-drift-bench 助开发者检测换模型后的输出差异

开发者发布开源 Python 工具 llm-drift-bench 0.1.0,帮助用户在更换大模型后排查输出问题。只需输入旧模型与新模型的两组已保存响应文件,工具即可自动比对并标记丢失的 JSON 字段、发生变化的数值以及文本差异,让迁移模型时可能出现的回归一目了然。该工具仅基于已保存的 JSON/文本运行,无需重新调用模型。

2026-11-13 ~ 2026-11-13 · 2 条相关