llama.cpp v0.6.0 发布:Qwen4Exp 支持 MTP 投机解码

vexatious-big · reddit · 2026-10-06

llama.cpp 发布 v0.6.0,为 Qwen4Exp 带来 MTP(multi-token prediction)投机解码支持,并包含大量其他更新。GitHub release:ggml-org/llama.cpp v0.6.0。

所属事件:llama.cpp v0.6.0 发布:Qwen4Exp 投机解码与 Metal 性能提升(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →