EAGLE-4 投机解码框架开源,支持 SGLang 与 vLLM

testingcatalog · x · 2026-10-21

EAGLE-4 已在 GitHub 以 eagleharness 之名开源,通过引擎插件为 SGLang、vLLM 和 TokenSpeed 提供投机解码 draft 服务,官方定位是「一个灵活 draft 模型适配所有 batch size 与硬件」。

所属事件:EAGLE-4 投机解码开源,解码速度达 961.6 tokens/s(2 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →