腾讯开源 AngelSpec，推理加速最高可达 2.4 倍
teortaxesTex · x · 2026-07-29
腾讯开源了 AngelSpec，一个面向 speculative decoding drafter 的统一训练与部署框架，覆盖自回归 MTP drafting 和 block-parallel DFlash 系列。
- 官方同时放出了 训练代码、Hy3-A21B 的 MTP/DFly drafter 权重、论文、文档，以及 Hugging Face / ModelScope 资源。
- 在 Hy3-A21B 上，DFly 在并发 4 到 64 的测试中，端到端推理速度相对自回归解码提升 1.98–2.40 倍，吞吐比 DFlash 高 10.5–11.8%。
- 这条信息更偏向推理加速和训练/部署框架层面的基础设施，而不是单纯模型发布。
所属事件:腾讯混元开源全链路投机解码框架 AngelSpec(2 条相关)→
「Infra」频道最新
- Colibri 推理器让 Kimi K3 GGUF 跑进工作站硬件 — Responsible_Fig_1271 · 2026-07-29
- ML 团队仍靠锁版本保住 torch 和 HF 复现性 — vboykis · 2026-07-29
- 曝黄仁勋向 Ilya 承诺 40 亿美元算力，今年或追加百亿 — iruletheworldmo · 2026-07-29
- AI 实验室正撞上算力瓶颈，下一次跃迁成本更高 — haider1 · 2026-07-29
- Kimi K3 被指月 API 支出超 2 万美元后更适合自建 — ZeYanjie · 2026-07-29
- AI 需求推高 Bloom 和 Seagate，Vertiv 的广泛组合却承压 — TiernanRayTech · 2026-07-29