llama.cpp 让 llama-server 原生支持 stdio MCP 工具

solyarisoftware · x · 2026-07-27

llama.cpp 为 llama-server 加入原生 stdio MCP

这次更新把 llama-server 直接变成了一个轻量的 agent harness,适合本地 GGUF 模型接工具用:

实际效果就是把栈简化成:本地模型 + llama.cpp + 本地工具。作者强调,这仍然需要模型本身具备足够强的工具选择、指令跟随和多步推理能力,并举了 Qwen3.6-27B 或 35B 这类模型作为可能合适的选择。

所属事件:llama.cpp 全面支持 MCP 协议(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →