温度 0 固定种子也复现不了:Ollama 提示词缓存竟改变模型输出

Full-Travel857 · reddit · 2026-11-07

一位开发者用本地 LLM 评测工具测试波兰语语法时发现:即使 temperature=0、seed=42,Ollama 是否复用 prompt cache 会导致输出不同。他随后做了控制实验:

作者不断言是 bug,但结论是:固定种子反复跑同一提示词,若不控制服务器状态,测的可能不是你以为的东西。他已为评测工具 AI Bóbr 0.8.1 加入受控测试模式(每次先卸载并校验、记录缓存统计),准备重跑 11 模型基准,并征集其他人的类似观察。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →