BaseQuant V1 量化 Qwen3.8-27B,KL 散度比 Unsloth 低 17–34%

nightowlsleeping · reddit · 2026-10-23

Base Compute 发布了面向 agentic 场景的 Qwen3.8-27B 量化版本 BaseQuant V1,提供 10.93 / 16.41 / 20.82 GB 三档 GGUF。

在其留出测试集上,这些量化模型与 BF16 的 KL 散度比同尺寸的 Unsloth 量化低 15–34%,意味着更小的体积下更接近原始模型分布。团队邀请用户在日常负载中实测反馈。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →