MCP 规范更新落地,基准测试显示模型仍高度依赖文档
craigsdennis · x · 2026-07-29
Cloudflare 被拿来当作 MCP 服务器的理想托管地,而这条帖子真正的重点是:新的 MCP 规范已经进入一个更成熟的阶段,包含 默认无状态、多轮次 elicitation、默认 CIMD 身份认证 等变化。
帖子同时引用了一个名为 mcpbench 的基准测试,专门衡量模型作为 MCP client / server 的表现。结果显示:
- 有文档 时,模型在客户端和服务端任务上的表现都明显提升,尤其是身份认证、会话生命周期、异步任务等能力。
- 没文档 时,很多能力几乎直接掉到很低,说明模型仍然非常依赖说明文档。
- 这组测试覆盖了 38 个 client 场景 / 516 次试验,以及 16 个 server 场景 / 228 次试验。
- 不同模型在各能力项上的差异很大,说明 MCP 的“规范落地”已经开始,但真实可用性仍强依赖工程配套。
所属事件:MCP 发布无状态核心规范,企业级扩展与安全升级(27 条相关)→
「编程与Agent」频道最新
- Marketo MCP Server 开源:用 MCP 管理 Marketo 表单的克隆与审批 — modelcontextprotocol · 2026-10-27
- SuperDocs 更名 Typebar:AI 文档编辑器接入 38 个 MCP 工具 — modelcontextprotocol · 2026-10-27
- 「设计正在变成游戏开发」:AI 让你自造工具、随需创作 — hewarsaber · 2026-10-27
- 用 Opus 5.5 逆向改造大疆无人机,手机端全程本地安防追踪 — alexcovo_eth · 2026-10-27
- 微软研究院:ForkPilot 让 Agent 决策回溯的算力开销最高降 59% — EliasEskin · 2026-10-27
- Cursor 发布 Agent SDK:Markdown 写提示词,TypeScript 定义工具 — soleio · 2026-10-27