Qwen3.8-27B 在 7900 XTX 上靠投机解码大幅提速

darc_knigh · reddit · 2026-11-01

Reddit 用户分享了一个 GitHub 项目 elpis-on-7900xtx:在 AMD RX 7900 XTX 上跑 Qwen3.8-27B 的提速配方。核心是 EXL3 量化加 DFlash2 投机解码,基于 exllamav3-rocm 实现,仓库提供完整 recipe、补丁和 benchmark,作者称速度提升非常可观,适合还在用这张卡跑 27B 模型的用户。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →