Boaz Barak 回应质疑:内部困惑度指标不可跨模型直接迁移

boazbaraktcs · x · 2026-11-23

Boaz Barak(哈佛教授、前 OpenAI)在 X 上回应对其团队博客中困惑度指标的批评,澄清两点:

这场争论源于该指标被提议作为限制进一步训练的通用标准,批评者(如 David Manheim)认为应改用 per-byte perplexity 来消除 tokenizer 差异带来的比较偏差。

所属事件:困惑度跨模型比较引争论,Boaz Barak回应tokenizer质疑(5 条相关)→

原文链接 →

「安全」频道最新

更多「安全」频道 AI 资讯 →