开源推理服务器 Magnitude 让本地模型接入编码智能体

开源项目 Magnitude 推出一个用 TypeScript 编写的推理服务器,上线即获得约 1.6k 至 1755 个 GitHub 星标(单日再涨 130)。它能为用户的硬件自动匹配并运行最优的本地模型,让模型在现有设备上跑出最佳效果,并可一键接入用户已在使用的编码智能体,由作者 tomgreenwald 演示。

2026-09-03 ~ 2026-09-03 · 2 条相关