vLLM 在 AMD v620 显卡上运行 Qwen 的配置求助
Thin_Pollution8843 · reddit · 2026-08-15
一位用户在尝试使用 vLLM 在 AMD v620 显卡上运行 Qwen3.6-35B-int8 模型时遇到了性能瓶颈，目前只能达到 1.3–1.5 tok/s，且调试多日未果。帖子寻求社区分享可行的配置方案或优化建议。
「Infra」频道最新
- Meta 选择 MLX 做本地推理,Muse Spark Open 登陆 Mac Studio — awnihannun · 2026-10-16
- Hugging Face 开源印度语系预训练管线:2.8 万亿 token 数据 — Hugging Face Blog · 2026-10-16
- Artificial Analysis 首测 Vera Rubin NVL72:每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- Vera Rubin NVL72 实测：每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- 英伟达 Vera Rubin NVL72 首批实测：每兆瓦吞吐最高达 GB300 的 5.7 倍 — ArtificialAnlys · 2026-10-16
- Turing Post 盘点 2026 年 14 款开源 LLM 可观测性工具 — TheTuringPost · 2026-10-16