德国 Aleph Alpha 开源 Kolibri:781 亿参数 MoE 仅激活 4.4%
petrusenko_max · x · 2026-10-04
德国 AI 公司 Aleph Alpha 的 Kolibri 模型以 Apache 2.0 许可开源发布。这是一个德英双语混合专家(MoE)模型:总参数 78.1B,每 token 仅激活 3.46B 参数(约 4.4%)。
模型从零训练,使用 24T token 语料(其中超过五分之一为德语),动用了部署在德国和芬兰的 768 块 NVIDIA B200 GPU,是欧洲主权 AI 路线的代表性开源动作。
所属事件:德国 Aleph Alpha 开源 Kolibri-1:78B 仅激活 3.46B(14 条相关)→
「模型」频道最新
- Reflection AI 发布首个开源模型 Beam,估值 250 亿美元 — WebAssemblyMan · 2026-10-06
- 曝 OpenAI 拟合并 Chat 与 Codex 额度,基础聊天限额引担忧 — Iwantthegreatest · 2026-10-06
- 微软页面被曝证实 GPT-6 系列采用 Looped Transformer — teortaxesTex · 2026-10-06
- 亚马逊提出ALoDLM:按token难度自适应分配循环深度 — amazon · 2026-10-06
- IFM研究循环语言模型定点特性:KV缓存缩小3倍不掉分 — IFM · 2026-10-06
- 澳洲开源决策模型 Matilda Jev:单卡推理仅 56.8ms,不做文本生成 — Med1_Ai · 2026-10-06