SupraBrain-50M 发布:融合线性递归与注意力机制
LH-Tech_AI · reddit · 2026-08-03
SupraLabs 发布了 50M 参数的混合架构语言模型 SupraBrain-50M。
- 架构特点:结合了 Gated DeltaNet 线性递归、滑动窗口注意力以及 Surprise-Gated 更新机制。
- 性能表现:官方宣称在仅使用 5B tokens 训练的情况下,性能接近使用 20B tokens 训练的基线版本。
「模型」频道最新
- 实测:Fable 模型语言能力媲美 GPT-4.5 — hrishioa · 2026-08-03
- 吐槽安全审查:问细胞常识被 Anthropic 封号 — mjdramstead · 2026-08-03
- 智谱 GLM-5.3 模型正式发布 — AIFlow_ML · 2026-08-03
- DeepSeek v4 flash 被曝出现推理死循环 — leocus4 · 2026-08-03
- 开发者探讨:非洲无需千亿大模型,500M-7B 本地模型更实用 — saheedniyi_02 · 2026-08-03
- 曝智谱 GLM5.3 即将发布,能力对标 K3 与 GPT5.6 — bdsqlsz · 2026-08-03