M5 Ultra 跑 Qwen 3.8 Flash Next 预填充达 3100 tok/s

GabGarrett · x · 2026-09-22

mweinbach 让 astra 优化 Qwen 3.8 Flash Next 在 M5 Ultra 上的运行,目前预填充(prefill)速度已达约 3100 tok/s。GabGarrett 评论:虽然 Spark 粉丝忙着嘲弄 Ultra,但这块硬件可能被证明是性能怪兽。信号:新一代苹果芯片统一内存对本地大模型推理的吞吐表现值得期待。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →