Liquid AI 发布 DSpark 投机解码,LFM2.5-VL-3B 解码提速至 3 倍
helloiamleonie · x · 2026-09-24
Liquid AI 发布实验性 DSpark draft 模型 LFM2.5-VL-3B-DSpark,为视觉语言模型 LFM2.5-VL-3B 引入投机解码:由 279.5M 参数的轻量 drafter 提前提议多个 token,目标模型一次验证,输出不变而生成显著加速。性能数据(batch size 1、温度 0):MLX on M5 Max 解码最高提速 3.13 倍、端到端 2.62 倍;llama.cpp on M3 Ultra 解码 2.14 倍、端到端 1.77 倍;SGLang on H100 解码 2.66 倍、端到端 2.27 倍。greedy 解码下结果与目标模型完全一致。模型已在 Hugging Face 开源,配套 GGUF 版本,Apple silicon 上 block size 为 8。
所属事件:Liquid AI 推出 DSpark 投机解码,VL 模型提速超 3 倍(4 条相关)→
「Infra」频道最新
- Starlink 美国城市用户增速 73% 反超农村,上传速度提升 42% — XFreeze · 2026-11-11
- Cloudflare 采用未经实战的共识算法 QuePaxa,替代 Raft/Paxos 建 Meerkat — sull · 2026-11-11
- 用 AI 扫遍全美废弃商场,改造成数据中心的脑洞 — LinusEkenstam · 2026-11-11
- Anthropic S-1 曝 260 亿美元私募:七大供应商按 IPO 价入股 — demian_ai · 2026-11-11
- SpaceXSI 1.2GW 燃气电厂获密西西比州环保许可,为 Colossus II 供能 — XFreeze · 2026-11-11
- Anthropic 称用 AI 3 天完成 AMD GPU 移植,动摇 Nvidia CUDA 护城河 — The Decoder · 2026-11-11