开源引擎 Locals 让 Apple Silicon 本地 LLM 提速最高 3 倍

SumitGup · x · 2026-10-22

@machinestein 发布开源项目 Locals:一个专为 Apple Silicon 打造的本地 LLM 推理引擎,官方称运行本地模型最高可快 3 倍,目标是让用户摆脱云服务、在本地跑前沿级模型。要点:- 可作为 Ollama、MLX-LM、llama.cpp 的即插即用替代,编码 agent 工具链可直接接入;- 底层是复杂度理论上的突破,为 DeltaNet 架构、语法约束解码、工具调用与结构化输出提供更快算法;- 已在 GitHub 开源。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →