欧盟开源模型 EUROPA 冲击万亿参数,单卡吞吐已优化 14 倍

mawcopolow · reddit · 2026-11-15

欧盟开源模型 EUROPA 正向近 1 万亿参数规模推进。附图(来自 MACCUS 基于 Domyn 11 月 12 日技术博客的数据)展示了其在 JUPITER 超算上的单 GPU 训练吞吐优化历程:从起点 90 tokens/s/GPU,经重计算与更长序列、激活值卸载到 CPU 内存、Muon 优化器计算上 GPU、专家权重 FP8 化、梯度 bf16、内存分配器修复、NCCL 通信调优等一系列手段,最终提升到 1293 tokens/s/GPU,约 14 倍。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →