开源工具 llm-drift-bench：换模型前后对比输出，揪出丢失字段与数值变化
Worldly-Knowledge-90 · reddit · 2026-11-13
开发者发布 Python 工具 llm-drift-bench 0.1.0：输入旧模型和想尝试的新模型的两组响应文件，工具自动比对并标记缺失的 JSON 字段、变化的数值、文本差异等问题。它不评判哪个模型更聪明，只帮你看清切换模型（或换量化版本）时到底什么变了。
工具基于已保存的响应运行，无需 API key 或 GPU。作者正在为 0.2.0 收集真实案例，征集大家换模型时实际踩过的坑。
所属事件:开源工具 llm-drift-bench 助开发者检测换模型后的输出差异(2 条相关)→
「编程与Agent」频道最新
- YC 孵化 Reason 称编码性能持平前沿、成本降 20 倍 — Scobleizer · 2026-11-13
- Opus 5.5 搭记忆系统曝光：2770 条记忆、19 万链接可视化大脑 — RileyRalmuto · 2026-11-13
- 有人在火车上 vibe coding 出错误日志标注工具，手动标完 22/150 — sh_reya · 2026-11-13
- 开源 Claude Code skill：Opus 规划便宜模型施工，省最多 49% — Apprehensive_Sky5123 · 2026-11-13
- PoAPost 上线：给 AI 智能体建一个不可篡改的消息记录层 — adamamcbride · 2026-11-13
- 嫌 RealityCapture 无好用的 Linux 图形界面，研究者 vibe-code 出 GTK4 前端 — janusch_patas · 2026-11-13