Reflection 发布开源模型 Beam:501B 总参数 23B 激活,训练用 AdamC 算法

andersonbcdefg · x · 2026-11-09

Reflection AI 官宣推出 Beam——一个高效的 agentic 开源模型,总参数 501B、激活 23B,主打前沿推理效率,在编码与 agentic 任务上推进西方开源前沿,完全从零端到端训练,完整权重将于本月内发布。

算法作者 aarondefazio 转发确认:Beam 使用了他的 AdamC 优化算法训练,该算法解决 LLM 长训练后期梯度范数快速上升的问题(arXiv:2506.02285);Thinking Machines 的博客也提到采用了该方法,说明 AdamC 正获得广泛使用。