PostTrainBench 作者回应质疑:10 小时 GPU 限制导致模型只会刷榜蒸馏
maksym_andr · x · 2026-11-20
针对「后训练任务与 PostTrainBench 存在同样问题——模型只是在单一 benchmark 上爬山、最终从其他模型蒸馏」的批评,作者 maksymandr 回应称这本质是算力预算问题:作为学术实验室,PostTrainBench 只设了 10 小时 GPU 上限;任何前沿实验室或资源充足的机构(比如 Epoch AI)都可以把预算放大到数千 GPU 小时、同时设定多个 benchmark 目标,再看结果会怎样。
「研究」频道最新
- MIT 研究揭秘 LLM 内部物理直觉:模型表征可读可操控 — CatAstro_Piyush · 2026-11-20
- 团队称用 Codex 两个月搞定 35 个开放 Erdős 问题,含 Lean 验证 — IgorCarron · 2026-11-20
- ForgeSystem 论文提出按需定制软件的 AI 生产架构 — Div_pradeep · 2026-11-20
- Accord 开源:单相机加 IMU 实现在线稠密米制建图 — BE2R · 2026-11-20
- AltRA-Test:判断 LLM 能否替代人工标注只需约 100 条样本 — Technion · 2026-11-20
- TwinD 深度伪造检测泛化突破:AUROC 大幅领先现有检测器 — Andrii Yermakov · 2026-11-20