DFlash2 草稿模型实测提速 17%,Q4 头仅 350MB 且支持视觉

returnity · reddit · 2026-10-31

作者在 Apple Silicon(M5 Max)上用 llama.cpp v0.8.0 实测了 Qwen3.8-Flash-Next 的 DFlash2 草稿模型,与 MTP 对比,平均提速 +17%(几何均值 75.1 → 87.9 tps)。

关键数据与结论:

作者已自行量化并发布了 GGUF。对本地部署用户是立即可用的免费升级。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →