研究者批 OpenAI 晒困惑度数据系「阴招」:逼 Anthropic 接不公平对比
davidmanheim · x · 2026-11-23
David Manheim 指责 OpenAI 公布困惑度类数字的做法「狡猾且不诚实」:这相当于公开要求 Anthropic 交出同类数字,再让对方解释为何两套数字因 tokenizer 选择不同而不可比——而不是 OpenAI 自己提前说明该局限。他补充说,虽然通常愿意给尝试透明的人以善意推定,但 OpenAI 过往行为不配这种善意。背景是关于前沿实验室步速协议(pacing agreement)是否可用困惑度等指标统一的争论。
所属事件:研究者批 OpenAI 晒困惑度数据系「阴招」:逼 Anthropic 接不公平对比(2 条相关)→
「模型」频道最新
- 风险学者批 OpenAI:基准数据披露手法「 sneaky 且不诚实」 — davidmanheim · 2026-11-23
- Thinking Machines 发布 Inkling 2 Small:AA 智能指数得分 31 — _Hao_Zhu · 2026-11-23
- 曝 OpenAI 内部 loss ladder:0.68-0.7 区间将现何种能力未知 — tallmetommy · 2026-11-23
- 多位业内开发者盛赞 Gemini 4 Neon 写作水平远超同类 — gajesh · 2026-11-23
- 按 METR 数据外推:新模型任务时长可达 66 与 128 小时 — eliebakouch · 2026-11-23
- 200 美元 Google AI Ultra 订阅可独占 96GB Blackwell GPU 连跑 10 天 — kieranklaassen · 2026-11-23