研究者质疑用 perplexity 设能力上限:tokenizer 粒度天然偏向 OpenAI
davidmanheim · x · 2026-11-23
研究者 David Manheim 针对「以 perplexity 作为跨实验室统一能力限制指标」的提议提出技术性质疑:Anthropic 使用更细粒度的 tokenizer,其 per-token perplexity 天然更低,因此任何基于 perplexity 的共享能力上限,实际上会让 OpenAI 走得更远——这是一个有偏的标准化基准。
这一观点被其本人再次引用强调,并附上了相关说明链接,属于实验室安全协议设计中被忽视的度量细节。
「模型」频道最新
- Google AI Studio 推出每月 API 抵扣券:Pro 10 美元、Ultra 最高 100 美元 — Mad-Dog-UA · 2026-11-23
- Google 提出注入 Bug 框架,让最优模型解题率从 95% 跌到 9% — omarsar0 · 2026-11-23
- OpenAI 图表泄露 GPT-6 Astra 与内部模型,Domingos 质疑数百亿美元收益 — pmddomingos · 2026-11-23
- Replit 多智能体提速 NumPy:32 个 Claude 达 18.9 倍 — amasad · 2026-11-23
- Cartesia H-Net 弃用分词器:动态字节分组带来最高 10 倍训练效率 — bycloud · 2026-11-23
- Gemini 4 Hydrogen 每百万输入 token 1.5 美元,智能指数 51 反超 Argon — dl_weekly · 2026-11-23