Reflection 开源 501B 混合专家模型 Beam,vLLM 首日支持
woosuk_k · x · 2026-10-16
Reflection AI 发布开放权重模型 Reflection-Beam-1.0,采用 Apache 2.0 许可证,与 40+ 生态伙伴协作推出,已有 vLLM 的 Day-0 支持。
要点:
- 规格:总参数 501B,每 token 激活 23B,上下文窗口 100 万 token;结合混合注意力(hybrid attention)、Harmony 格式推理与工具调用
- 发布内容:BF16、FP8、NVFP4 权重及 DFlash2 草稿模型(drafter),权重与模型卡已上传 Hugging Face
- 开源训练工具:放出用于训练 Beam 的开源 harness「Mirror CLI」
- 强化学习:在 SkyRL 中提供 Day-0 RL 支持,包括 LoRA、BF16 全量微调与 MXFP8 RL,rollout 基于 vLLM
- 推理优化:vLLM 团队与 Reflection、Inferact 协作优化服务路径,从融合 kernel 到 DFlash
所属事件:Reflection AI 开源 Beam 1.0:501B MoE 支持 1M 上下文(24 条相关)→
「Infra」频道最新
- Zephon 接入 TorchTitan:换 GPU 数量重启训练仍保持全局 batch 完全一致 — PyTorch · 2026-10-17
- 黄仁勋:AI 从检索走向求解,算力需求将增长十亿倍 — rohanpaul_ai · 2026-10-17
- 旧金山将办算力交易市场:预审买家卖家现场签约束交易 — Scobleizer · 2026-10-17
- eigenrobot 欢迎数据中心落户:盼其止住连年两位数房产税涨幅 — eigenrobot · 2026-10-17
- 开发者吐槽 Claude 桌面版比本地跑 Qwen 3.8 Next 更耗电 — andrew_n_carr · 2026-10-17
- Cisco OCP 解读:机架仍是 scale-up 边界,Silicon One 对冲 NVIDIA — BenBajarin · 2026-10-17