Nativ本地推理实测:LFM2.5在M5 Max上预填充超1.1万tok/s

helloiamleonie · x · 2026-08-05

Nativ是一款开源的macOS本地AI推理应用,支持Apple Silicon,无需云端。最新版本v0.2.2已支持Liquid AI的LFM2.5-2.6B模型,专为agentic和coding工作流设计。在M5 Max(48GB)上,全bf16无量化,预填充速度达11,231 tok/s,解码约84 tok/s,128K上下文仅占用8.5GB内存,批量16时聚合解码476 tok/s。Nativ提供聊天、遥测、多模态支持,并集成MLX-VLM,可连接编码agent。

所属事件:LiquidAI发布LFM2.5模型实现Mac端高速推理(2 条相关)→

原文链接 →

「应用」频道最新

更多「应用」频道 AI 资讯 →