LLaDA 2.2 宣称 1.64 倍吞吐和原生 128K 上下文
omarsar0 · x · 2026-07-26
这条补充了 LLaDA 2.2 的工程侧优势。
- 它在吞吐上平均达到 Ling-2.6-flash 的 1.64×,再做 FP8 量化还能额外提升 18.6%。
- 模型支持原生 128K 上下文,并采用从 8K 逐步扩展到 128K 的训练策略。
- 由于是 MoE,每个 token 只激活一部分参数;再加上 Block Routing,长上下文推理的路由开销更可控。
所属事件:蚂蚁开源扩散大模型 LLaDA 2.2,主打智能体与自纠错(10 条相关)→
「模型」频道最新
- Arav Srinivas 称 GLM 被低估,700B 规模接近 Opus — AravSrinivas · 2026-07-28
- Kimi K3 复现 RLVR 研究结论且不乱下结论 — infoxiao · 2026-07-28
- Inference.net 推出流量镜像评测流程,先试 Kimi K3 再切换 — MatthewBerman · 2026-07-28
- Claude 被退订:ChatGPT/Codex 5.6、Sol、Kimi 3 都吃力 — sull · 2026-07-28
- GLM 5.5 被曝 8 月发布,主打长程智能体循环 — bindureddy · 2026-07-28
- Kimi K3 登陆日本,2.8 万亿参数开权重并给出低价推理 — DavidBennett__ · 2026-07-28