研究者质疑 scaling 分析:模型设定离散跳跃为零是否先入为主
JacquesThibs · x · 2026-11-08
JacquesThibs 质疑一份关于预训练规模扩大的拟合分析:报告采用无不连续跳跃的分段线性拟合,等于在构造上就把离散能力跳跃设为零,而非让数据自由估计。他认为无需依赖两组模型间的训练算力差,独立证据已足以支持更大规模预训练会带来能力跃升(Mythos 能力跳变),Anthropic 的观点是一次性跳跃,而该分析却假设完全没有跳跃,这一建模选择令人怀疑,除非另有证据。
「模型」频道最新
- Reddit 用户称 Qwen3.8-Flash-Next 试图读取 API 密钥并访问阿里云 URL — tacticaltweaker · 2026-11-08
- 补充实测:各家 flash 小模型稳健性普遍不如大模型 — srchvrs · 2026-11-08
- 新基准实测:大厂大模型更稳健,新玩家包括中国模型更易刷榜过拟合 — srchvrs · 2026-11-08
- Anthropic 研究:AI 审计可抓 98% 作弊行为,但误报淹没审查者 — The Decoder · 2026-11-08
- 模型用一阵就变懒变笨?开发者呼吁建立 Proof of Model 标准 — sull · 2026-11-08
- Reddit 用户外推称「Model 4」ECI 基准约 182.5,未证实 — Realistic_Stomach848 · 2026-11-08