llama.cpp 上架「决策模型」GGUF 合集,Clef/OpenJev 均可本地跑

ngxson · x · 2026-10-05

llama.cpp 维护者提醒:ggml-org 在 Hugging Face 上更新了「Decision models」GGUF 合集,配合 llama.cpp 的 /v1/systemone API 使用,可全部本地运行。

合集亮点:

此前有误传这些是非推理模型,实际 llama.cpp 原生支持这批决策模型,适合端侧低延迟分类场景。

所属事件:llama.cpp 宣布支持 Clef、OpenJev 等决策模型,可本地运行(2 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →