14 位学者合著断言:深度学习的科学理论正在成形,可命名为「学习力学」
burny_tech · x · 2026-09-11
arXiv 论文《There Will Be a Scientific Theory of Deep Learning》(Jamie Simon 等 14 人)系统论证深度学习的科学理论正在涌现,即能刻画训练过程、隐藏表示、最终权重与性能的理论。
- 作者梳理五大研究方向:可解的理想化设定、可处理的极限情形、刻画宏观观测量的简单数学规律、解耦超参数的理论、跨系统的普适行为
- 共同特征:关注训练动力学、描述粗粒度聚合统计量、强调可证伪的定量预测
- 提出将这一新兴理论命名为「learning mechanics」(学习力学),类比力学对物理过程的理解
「研究」频道最新
- PARTS 框架:子任务级 RL 微调,双臂任务成功率 32%→61% — Sichang Su · 2026-09-22
- SiliconBench:评测九款 Apple Silicon 引擎的速度、内存与保真度 — PennState · 2026-09-22
- Engram 检索架构省不了全部参数,但可砍 40-50% HBM 需求 — bookwormengr · 2026-09-22
- 给 Agent 加本体层:GPT-5.5 在 DDR-Bench 暴涨 26.7 分 — omarsar0 · 2026-09-22
- PIBBSS 演讲:「发现 AI 耍计谋就停下」不是可靠的对齐方案 — JacquesThibs · 2026-09-22
- LLM WikiRace 基准:用维基百科竞速游戏测模型规划推理 — hbouammar · 2026-09-22