下一个 AI 厂商锁定不在模型 API,而在模型的原生 harness
Arindam_1729 · x · 2026-11-11
起因是 OpenAI 的 Logan Kilpatrick 质问:为什么某次评测里只有自家的模型没在其原生 harness 下被测试?Arindam 由此展开:
- 如果模型得分高度依赖运行它的 harness,那 benchmark 测的就不再是模型本身,而是「模型 + 为其调优的工具、提示词与工作流」
- 每家实验室都在同时构建模型和使用模型的环境,两者共同迭代
- 但代价是迁移变难:把模型搬出其原生 harness,可能损失你付费买的那部分质量
结论:AI 的下一个厂商锁定不只是模型 API,而是模型最擅长的 harness 本身。
「编程与Agent」频道最新
- FluentCRM MCP Server 发布:在 Cursor/Claude 里用自然语言管营销自动化 — modelcontextprotocol · 2026-11-11
- Elvis Saravia:agent 正在吞并传统软件,还能用来给软件「瘦身」 — omarsar0 · 2026-11-11
- 用第三方推理服务跑编码 agent 等于交出机器 shell 权限 — TheZachMueller · 2026-11-11
- 用 Opus 5.5 打造飞行战斗沙盒:程序化地形+粒子音效 — willeastcott · 2026-11-11
- Next.js 16.5 构建提速 3.3 倍,某头部 AI 实验室实测 — cramforce · 2026-11-11
- Plurai 推出 Agent 仿真测试:让 agent 在数字孪生世界里先失败再修复 — PrajwalTomar_ · 2026-11-11