Unsloth 发布 MiniMax-M3.1-Flash 量化:2-bit 保留 91.5% 精度,150GB 内存可跑
danielhanchen · x · 2026-10-26
Unsloth 为 MiniMax-M3.1-Flash 推出 UD3 系列量化(GGUF),并跨多个领域测试确保量化效果。官方称 2-bit 量化版本可保留 91.5% 的 top-1 精度,体积缩小 45%,在 150GB 内存的机器上即可本地运行;UD-IQ1S 级别仍保留约 89.9% 的 top-1 精度。
默认配置下 MoE 层使用 NVFP4,其余层使用 BF16/MXFP8。Unsloth 称该模型是同尺寸最强开源模型之一,量化版可在 Unsloth Desktop 中直接使用。
「Infra」频道最新
- Anthropic S-1 披露:每 1 美元算力投入产出 2.08 美元营收 — AymericRoucher · 2026-10-26
- 500 万美元种子轮不够 DeepSeek 训一遍:没 GPU 的 AI 创业只剩三条路 — FinanceYF5 · 2026-10-26
- HBM 需求转向:低端推理砍单,Rubin 将全系 12-high HBM — BenBajarin · 2026-10-26
- CircuitHub 发布工厂级机器人 The Grid,美国产 PCB 提速两倍对标深圳 — garrytan · 2026-10-26
- Ubicloud 发文修复 vLLM 工具调用准确率问题 — petrusenko_max · 2026-10-26
- Meta 批准无投票权 C 类股,2026 年资本开支指引达 1350–1450 亿美元 — thione · 2026-10-26