双 5090 跑 Qwen 3.8 27B:求高效推理引擎推荐

youcloudsofdoom · reddit · 2026-08-18

Reddit 用户寻求在双 RTX 5090 配置下运行 Qwen 3.8-27B 模型的最佳推理引擎推荐。用户希望利用 Q8/BF16 精度而非 NVFP4 以提升解码速度,目标是优化解码性能而非仅追求预填充速度。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →