674 家 AI 工具厂商中 315 家禁止用户做基准测试

ZeroCool86 · reddit · 2026-10-20

一位运营 AI agent 工具评级站的开发者通读了 674 家厂商的服务条款，发现近一半限制基准测试或禁止用服务做竞品：107 家点名禁止 benchmark，69 家完全禁止，28 家要求发布结果须事先申请。其中 LangSmith 禁止公布其性能表现；Coinbase 禁止用其工具监测自身可用性；Apollo 和 ZoomInfo 的条款与 Oracle 1982 年那条几乎逐字相同，另有 24 家共用同一模板句。作者追述了 Oracle 条款的起源(1982 年 DeWitt 数据库基准测试)，并认为合理做法应像 Cursor 一样：只要公开测试细节、可复现即可发布。作者计划在 128GB 统一内存的 Minisforum 主机上实测各工具并公布结果，但若接受 API 密钥的许可本身就禁止测试，实测将无从谈起。