研究者质疑用 perplexity 设能力上限:tokenizer 粒度天然偏向 OpenAI

davidmanheim · x · 2026-11-23

研究者 David Manheim 针对「以 perplexity 作为跨实验室统一能力限制指标」的提议提出技术性质疑:Anthropic 使用更细粒度的 tokenizer,其 per-token perplexity 天然更低,因此任何基于 perplexity 的共享能力上限,实际上会让 OpenAI 走得更远——这是一个有偏的标准化基准。

这一观点被其本人再次引用强调,并附上了相关说明链接,属于实验室安全协议设计中被忽视的度量细节。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →