基础模型 log 困惑度被指极强预测 Epoch 与 OpenAI 能力指标
stochasticchasm · x · 2026-11-23
一个关于「回到 2023」的推文讨论:有人感叹如今不再像 2023 年那样由 base model 困惑度决定一切;@eliebakouch 随后指出,base log perplexity 仍是 Epoch 与 OpenAI ECI 指标极强的预测因子并附图。原发者回应:这个点很好,相关性确实相当强。
所属事件:基础模型困惑度重成焦点,社区感叹回到 2023 年(2 条相关)→
「模型」频道最新
- Gemini 4 Hydrogen 每百万输入 token 1.5 美元,智能指数 51 反超 Argon — dl_weekly · 2026-11-23
- antirez 补充:认真用 AI 这個程序员最强工具,自己积累经验、与机器对话 — antirez · 2026-11-23
- Redis 作者 antirez:AI 已很擅长数学和编程,别再抱怨写不出好代码 — antirez · 2026-11-23
- 实测 Gemini 4 xhigh 花费约 2.8 倍,12 项要求通过数与 high 完全相同 — mhdfaran · 2026-11-23
- 预训练越高效,后训练 RL 越易失准:对齐「节奏」问题引热议 — dylan522p · 2026-11-23
- 曝 OpenAI 内部模型困惑度已破 0.76,GPT-6.2 疑解 Millennium 数学难题 — kimmonismus · 2026-11-23