博主本地免费跑出 Opus 级编码 agent，速度近 Opus 两倍
julianharris · x · 2026-09-11
Julian Harris 发布长文实测：2026 年 8 月起，本地 AI 编码达到「去年云端前沿模型」的水平。他声称已在本地以接近 2 倍 Claude Opus 的速度、零成本跑通 Opus 级别的编码 agent。
关键技术细节：
- 用 RDMA 在两台 MacBook 间做张量并行（各承担 50%），单台机器 SSD 流式加载时只有 15 t/s，双机并行提升到 25 t/s，且还有很大优化空间
- 实测发现上下文长度翻倍会让 qwen-3.8-27b 吞吐量腰斩，而 qwen-3.8-flash-next 受影响小得多
- 批评 Anthropic 在访问时段、限速和审查上频繁变动（如 5 小时窗口限制），认为这不是可持续的商业关系，这也是转向本地部署的动因
- 作者自研的 Ceetrix MCP 规范治理服务器，用于约束编码 agent 不偷懒、不糊弄
文章为作者手写长文，含多天实测踩坑记录。
所属事件:antirez 在 M5 Max 本地跑 DeepSeek v4.1 Flash，RDMA 双机达 25 tokens/s(5 条相关)→
「编程与Agent」频道最新
- Sierra Catalina 发布 Context Layer 提案：六步协议让用户掌控跨模型上下文 — sierracatalina · 2026-09-11
- Replit 与 Databricks 集成正式 GA,新增原生 Lakebase 数据库支持 — amasad · 2026-09-11
- Descript 无 agentic API 遭吐槽：剪辑全走自家 Underlord 且按 token 收费 — heyneighbor · 2026-09-11
- 开发者开源可电话拨入的语音 Agent demo，网页与手机都能用 — juberti · 2026-09-11
- Mobile Easy Use 开源:让编码 Agent 通过 MCP 调试真机 App — James_CSH · 2026-09-11
- Netlify 上线支持 Cursor Origin 仓库，一键部署可回滚 — thisiskp_ · 2026-09-11