M3 Max 本地实测:32K 任务后仍余 20GB 显存

mayfer · x · 2026-08-31

用户在 M3 Max (128GB) 上本地运行 Agent 进行了实测。结果显示,推理速度达到 70 tok/s,Prefill 约为 300 tok/s。在完成一个 32K token 的长任务后,系统仍有 20GB 内存可用,表明本地运行大上下文 Agent 在该硬件配置下具备良好的可行性。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →