Hermes 上线本地后端,一键运行 Unsloth GGUF 量化模型

danielhanchen · x · 2026-09-04

Unsloth 宣布其 GGUF 量化模型现可在 Hermes 中一键本地运行,danielhanchen(Unsloth 作者)确认 Hermes 已新增本地后端,支持 DeepSeek-V4-Flash、Qwen3.8-27B、3.6-35B-A3B 和 Qwen3.8-Flash-Next 的 Unsloth UD-Q4KXL 与 UD-Q4KM 量化版本。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →