LlamaIndex CEO 论基准之道:持续维护胜过弃用

LlamaIndex CEO Jerry Liu 发长文阐述对 AI 基准测试的思维模型:基准是对高维能力空间的「点测量」实验,且发布后天然具有引力,周边生态易随之变形。针对刷榜争议,他认为正确应对不是弃用基准,而是引入更多、更稳健的基准。他还引用 Ryan Marten 的《Continuous Benchmarks》一文,主张基准不应是静态产物,而应像软件一样被持续维护,该观点在社区引发热议。

2026-09-08 ~ 2026-09-08 · 2 条相关