Qwen3.8-27B 推出 3.7bpw 量化版,体积缩至 11.7GB
udmrzn · x · 2026-08-17
发布 Qwen3.8-27B-Ridge-3.7bpw 量化模型,将体积压缩至 11.7 GiB。该模型采用非平铺量化策略,状态张量保持 Q80,Gated-DeltaNet 混合器采用 Q4K,并保留了原生 MTP 和完整视觉塔。目前支持在 llama.cpp、Ollama 和 LM Studio 中运行。
「Infra」频道最新
- FT 称 AI 算力债券面临「达尔文时刻」,CoreWeave 债价暴跌 — firstadopter · 2026-10-16
- 手机当界面、家里服务器跑模型:一套本地 AI 双工作流 — EAccelerate_42 · 2026-10-16
- 「数据中心就是银行」:CoreWeave 风波引出算力监管类比 — arthurcolle · 2026-10-16
- DOT-MoE:用最优传输把稠密模型改造成稀疏 MoE — burkov · 2026-10-16
- 斯坦福 CS336:7B 模型权重仅 14GB,训练却要 84GB 起步 — stanfordnlp · 2026-10-16
- NVIDIA NVFP4 新压缩技巧:利用行内尺度相近性省 45-48% 存储且位精确 — TheZachMueller · 2026-10-16