M1 Max 64GB 跑本地 32B-120B 模型:吐槽 LM Studio 报错与选型难

Food4Lessy · reddit · 2026-10-21

作者过去 9 个月 99% 使用云端模型(Gemini、Claude、DeepSeek、Groq、Cerebras),现因处理敏感数据想回归本地部署。

此前 7B Llama 经 MLX 可达 45 token/s,但能力太弱;尝试 Qwen 32B 在 LM Studio 中报错。作者咨询 64GB M1 Max 上 32B-70B-120B 模型的最佳选择,用例涵盖研究分析、轻量编码、CAD/PCB、图像生成等。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →