模型自发跑完机器学习实验,研究者感叹时代已变
teortaxesTex · x · 2026-11-16
teortaxesTex 感叹:现在向模型提问,它会主动去设计并运行一个机器学习实验,这仍让他感到震惊。
配图显示模型输出的实验分析相当扎实:作者用小规模幂律特征问题对比 SGD、Adam 与 Muon,发现优化器的收益只存在于瞬态阶段——病态问题(条件数 4096)上 Muon 初期领先 Adam 1.42.8 倍,进入噪声主导后优势消失甚至反转;并估算 AdamW 之上仍有约 24 倍理论空间,Muon 系已拿下 1.32 倍。
「模型」频道最新
- 日本 APEC 与会者 Claude 账号被封,Anthropic 风控误伤再惹议 — amos_gyamfi · 2026-11-16
- 7 个本地可跑的无审查小模型清单:最小仅 0.67GB — nevrekaraishwa2 · 2026-11-16
- 爆料式推测:Anthropic 或已备好更强模型,AI2 下一代 Astra 值得盯 — haider1 · 2026-11-16
- 编码 agent 用户晒额度耗尽截图:每周用量上限成最大痛点 — Spare-Ad-1024 · 2026-11-16
- 微软发布 MAI Base 2:80B 激活/2.8T 总参 MoE,预训练 FLOPs 效率超 DeepSeek-V4-Pro-Base 4-12 倍 — liuziwei7 · 2026-11-16
- 截图爆料:Claude Code 界面现 Opus 5.5 Medium 模型选项 — itsOmSarraf_ · 2026-11-16