散热被严重低估:MI50 跑 Qwen 风扇拉满从 6 t/s 提到 20 t/s

bigattichouse · reddit · 2026-11-07

作者实测本地推理时散热对速度影响巨大:MI50 显卡跑 Qwen Q6 量化模型,平时只有 6-8 tok/s;写脚本把全部风扇拉到 100% 转速后,立刻提升到约 12 tok/s;让机器充分降温后再跑推理,前 10 分钟左右能达到 17-20 tok/s,全程没有任何其他改动。

作者因此考虑上水冷加大散热排。结论很直接:本地部署时别忽视散热,GPU 温度降下来吞吐能翻数倍。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →