lithos-metal 开源:M5 Max 上单用户峰值 200+ tokens/s 跑 Qwen3.8-27B

JiaZhihao · x · 2026-10-09

JiaZhihao 宣布开源 lithos-metal:为 Apple 芯片生成 Metal megakernels 的高性能推理引擎,结合分层 mixer megakernels、GPU 常驻生成控制与 DSpark 投机解码,在单台 M5 Max 上以每用户峰值 200+ tokens/s 的速度运行 Qwen3.8-27B。引擎支持本地 serving,一条命令即可接入任意 coding agent。代码与博客均已放出,Apache-2.0 协议。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →