NVIDIA 发布 30B MoE 模型 Nemotron 3.5 Lightning，专为智能体打造
kuchaev · x · 2026-08-11
NVIDIA 发布了 Nemotron 3.5 Lightning，这是一个拥有 300 亿参数的混合 Mamba-Transformer MoE 模型，激活参数仅为 3B。
该模型专为“始终在线”的智能体设计，主打处理高吞吐量的专业任务，输出速度最高可达同级别模型的 4 倍。主要特点包括：
- 内置三种推测解码机制（MTP, DFlash, DSpark）
- 针对编码、工具调用和多轮对话的智能体场景进行了训练
- 支持最高 100 万 token 的上下文，提供 BF16 和 NVFP4 精度
- 可在 Jetson、DGX Spark、Hopper 和 Blackwell 等多种架构上运行
目前，推理框架 SGLang 已提供 Day 0 支持。
所属事件:NVIDIA发布Nemotron 3.5 Lightning与NeMo Switchyard路由库(55 条相关)→
「Infra」频道最新
- Phison CEO 称 CXMT 内存恐慌是“市场鬼故事”，明年的问题是缺料不缺单 — BenBajarin · 2026-10-16
- Ben Bajarin：算力未来是可互换的，超大规模厂商正为工作负载自由布局 — BenBajarin · 2026-10-16
- AirLLM 逐层加载：2.8 万亿参数模型宣称跑进 4GB 显存 — Aiden_Tech_Ai · 2026-10-16
- NVIDIA 发布 cuPotential，用 AI 智能体模拟半导体材料原子交互 — tomaszbednarz · 2026-10-16
- 8 核 CPU 跑 Q4 量化模型，10 分钟单次生成太阳系交互演示 — IntrepidMindExplorer · 2026-10-16
- TokenSpeed MLA 2 发布:Kimi K3 在 Vera Rubin 解码最快提速 3.44 倍 — zhyncs42 · 2026-10-16