Atomic 发布 14 个 DeepSeek V4 Flash 量化版,主推 128GB 机器

testingcatalog · x · 2026-08-04

Atomic 在 Hugging Face 上放出了 DeepSeek-V4-Flash 0731 的 14 种 GGUF 量化版本,从无损 BF16 到 1-bit 都有覆盖。

配图给出了 38 个 GGUF 量化方案的体积/质量对比:这是一个 284B 参数的 MoE 模型,且官方 checkpoint 已做过量化感知训练。作者明确推荐 AD-IQ2M 作为 128GB 硬件上的最佳测试版本,并称它与原版在 token 选择上的一致率达到 83.6%。

所属事件:Atomic 推出 14 种 DeepSeek V4 Flash 量化版本(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →