Kimi K3 GGUF IQ1_S 上线,1bit 和 2bit 适配同步推进

victormustar · x · 2026-07-28

Hugging Face 上出现了 Kimi K3 的 GGUF IQ1S 版本,发布者同时在推进 2bit 修正 和 1bit 公开。

帖里还说明,要在 llama.cpp 里跑起来,仍然需要先修好并合并一个相关 PR;也就是说,模型量化文件已经在路上,但本地推理适配还卡在上游补丁。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →