Liquid AI 发布 DSpark 草稿模型,LFM2.5-VL-3B 推理最高提速 3.13 倍
helloiamleonie · x · 2026-09-25
Liquid AI 为视觉语言模型 LFM2.5-VL-3B 发布实验性 DSpark 草稿模型,引入投机解码:轻量 drafter 提前提出多个 token,目标模型一次前向验证,在不改变输出质量的前提下加速生成。
在六类视觉语言任务、batch size 1、temperature 0 的测试中:
- M5 Max 上 MLX:解码最高提速 3.13 倍,端到端 2.62 倍
- M3 Ultra 上 llama.cpp:解码最高 2.14 倍,端到端 1.77 倍
- H100 上 SGLang:解码最高 2.66 倍,端到端 2.27 倍
权重已在 Hugging Face 开放,MLX-VLM 生态实现 day-0 支持。
所属事件:Liquid AI 推出 DSpark 投机解码，VL 模型提速超 3 倍(4 条相关)→
「Infra」频道最新
- 微软 SC26 将揭秘 Maia 加速器:日服务数万亿 token 的数据流设计 — thoefler · 2026-11-12
- ClickHouse 收购 Xata 并发布 Managed Postgres,客户超 5000 家 — CShorten30 · 2026-11-12
- 2026 中期选举 41 项数据中心公投 40 项倒向反 AI 建设方 — Acceptable-Offer-518 · 2026-11-12
- KubeCon 前夕 Azure Day：AKS 单集群 65 节点跑 2.2 万个 Agent — davemccollough · 2026-11-12
- CoRL 会场同址开天然气论坛,主题直指 AI 数据中心供电 — carlosdponx · 2026-11-12
- a16z 播客：Mike Volpi 从 Cisco 70+ 并购经验谈 AI 基建周期 — a16z · 2026-11-12