NVIDIA发布Nemotron 3.5 Lightning与NeMo Switchyard路由库

NVIDIA于8月11日发布Nemotron 3.5 Lightning开源模型与NeMo Switchyard路由库,旨在为边缘到云端的AI智能体提供高效执行层。该模型采用混合Mamba-Transformer MoE架构,总参数30B(实测31.6B),激活参数仅3B(实测3.6B),支持1M上下文,实测输出速度达670 tokens/秒,在智能体编码任务上领先。模型权重已在Hugging Face开源,支持单GPU运行,NVFP4版本登顶趋势榜。NeMo Switchyard可根据请求信号、智能体状态、工具调用结果及模型能力、成本、延迟等维度动态路由,平衡大型前沿模型与高吞吐小型模型。

已确认

为什么重要

该发布瞄准AI智能体执行层痛点,通过超低激活参数MoE降低高频调用成本与延迟,配合Switchyard动态路由,提升复杂任务算力分配效率,推动全天候智能体落地。

2026-08-11 ~ 2026-08-13 · 55 条相关

事件全程(共 8 集)→

一手来源

另有 17 条近重复转述:NVIDIA Developer · MaziyarPanahi · nvidia · NVIDIAAI · baseten · baseten · kuchaev · tw_killian · dr_alphalyrae · baseten · ccerrato147 · solyarisoftware · ziqiao_ma · nvidia · willccbb · rohanpaul_ai · ctnzr