NeurIPS 2026 研讨会聚焦：能否有优化器击败 Adam？

aaron_defazio · x · 2026-08-27

第 18 届机器学习优化研讨会（OPT 2026）将于 NeurIPS 2026 期间在悉尼举行。本次会议特别鼓励提交关于“能否有优化器击败 Adam？前沿优化器”主题的论文。虽然 Adam 及其变体在过去十年占据主导地位，但 Muon、K-FAC 和 Shampoo 等新型非对角及二阶方法在大规模实践中展现出了潜力。会议旨在探讨在何种条件下这些方法能显著超越 Adam，以及相关的理论解释与实践限制。论文提交截止日期为 9 月 4 日（AOE）。