Bonsai 2 2B 端侧模型登 iPhone:120 token/s,速度两倍于 Qwen 3.5 2B

cephaloform · x · 2026-10-16

新的 Bonsai 2 2B 模型在 iPhone 18 Pro 上达到最高 120 token/s 的生成速度。据发布者对比,其质量优于 4-bit 量化的 Qwen 3.5 2B,同时速度快一倍、内存占用几乎减半,展现了小模型端侧部署的最新水平。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →