BenchGate 争议:Hamel Husain 与 Sarah Cat 论该不该点名批评基准缺陷

sarahcat21 · x · 2026-11-05

围绕 AI 圈近期的 BenchGate 争议,Hamel Husain 提出两层问题:一是基准制作者的初衷是好的、工作辛苦;二是用户盲目消费基准、给它们过高的权威,还有利益相关者包装推广放大了这一偏差。

sarahcat21 回应认为「盲目消费」确实有问题,但强调所有基准都有缺陷:应先私下向制作者反馈并帮助他们迭代修复,而不是一上来就公开点名羞辱——后者会立起「完美基准」的不可能标准,让大家只敢造新基准而不敢迭代改进现有的好基准。如果制作者拒不修复,再点名也不迟。