腾讯 DSpine 草稿模型把 Qwen3.8-27B 投机解码提速至 3 倍

karminski3 · x · 2026-11-10

腾讯优图在 HuggingFace 放出 Qwen3.8-27B-DSpine-b16 草稿模型,将投机解码加速从传统 MTP 的约 1.6 倍提升到 3 倍,官方测试 805 tps(8 并发);从使用 FlashAttention 3 推断应为 Hopper 架构 GPU。

所属事件:腾讯 DSpine 投机解码让 Qwen3.8-27B 推理提速 3 倍(3 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →