腾讯开源 AngelSpec，推理加速最高可达 2.4 倍
teortaxesTex · x · 2026-07-29
腾讯开源了 AngelSpec，一个面向 speculative decoding drafter 的统一训练与部署框架，覆盖自回归 MTP drafting 和 block-parallel DFlash 系列。
- 官方同时放出了 训练代码、Hy3-A21B 的 MTP/DFly drafter 权重、论文、文档，以及 Hugging Face / ModelScope 资源。
- 在 Hy3-A21B 上，DFly 在并发 4 到 64 的测试中，端到端推理速度相对自回归解码提升 1.98–2.40 倍，吞吐比 DFlash 高 10.5–11.8%。
- 这条信息更偏向推理加速和训练/部署框架层面的基础设施，而不是单纯模型发布。
所属事件:腾讯混元开源全链路投机解码框架 AngelSpec(4 条相关)→
「Infra」频道最新
- Meta 发布 Muse Spark Open,vLLM 支撑训练期 RL 推理并首日适配 — colinmcnamara · 2026-10-16
- Meta Muse Spark 开源版需 493GB 内存，16GB 笔记本根本跑不动 — TejasKumar_ · 2026-10-16
- CoreWeave 三日暴跌 20%,信用市场定价五年内违约概率超 60% — kimmonismus · 2026-10-16
- MiniCPM-V 4.7 端侧跑出 17 tokens/s,iPad 仅需约 3GB 内存 — techNmak · 2026-10-16
- 中国推「代工厂级 token 工厂」,2026-28 行动计划押注 token 经济 — nordicinst · 2026-10-16
- Vercel Sandbox Drives 正式上线:亚秒挂载 TB 级数据 — cramforce · 2026-10-16