预算 1800 美元跑本地大模型:5060Ti 用户求 GPU 升级方案

espece-de-bon · reddit · 2026-10-07

一位本地 LLM 用户在 Reddit 征求升级建议:预算约 1700-1800 美元,现有 5060 Ti 16GB + 96GB DDR5 内存 + 仅一条 PCIe 5.0 x16 的 ASRock X870 Pro 主板,主要跑 3bit 量化的 27B 级模型,用于写代码、分析 PDF 和地图图像。

三个候选方案:

作者还在研究 x8/x8 bifurcation 可行性,并计划用 Tailscale/Headscale 实现外出时远程访问本地模型。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →