RDNA2 显卡跑本地 LLM:llama.cpp 之外还有什么选择

xpnrt · reddit · 2026-10-19

发帖者指出,社区里为 AMD GPU 做的本地 LLM 工具大多依赖 RDNA3 起才有的 WMMA 指令,RDNA2 用户经常遇到「能跑就跑、不能跑就没办法」的局面;图像/视频生成有时能用 Triton 绕过,但 LLM 侧缺少类似出路。他提到 STRATA 是少数提供 RDNA2 路径的项目(实测能跑 coder 模型),但只针对特定大模型、用途受限。他求问:Windows 上有没有 base llama.cpp 之外、对 RDNA2 性能更好的分支或应用。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →