NVIDIA 发布 4GB 小模型 Nemotron-3.5-Bolt-E4B:基于 Gemma-4 优化本地语音助手与端侧 Agent

jacek2023 · reddit · 2026-10-24

NVIDIA 在 Hugging Face 发布小型语言模型 Nemotron-3.5-Bolt-E4B(4GB 版),从 Google Gemma-4-E4B-it 后训练而来,保留 Gemma 对话能力的同时强化多轮工具调用、指令遵循与输入 grounding,面向低内存、低首 token 延迟场景,适合快速本地语音/设备助手、交互式人设和嵌入式端侧界面,并为应用和相邻模型流水线留出余量。

配套提供 DFlash 投机解码起草模型、BF16 全精度版本,Gemini/unsloth 社区 GGUF 量化版也已上线,可商用。

所属事件:NVIDIA 开源 4GB 小模型 Nemotron 3.5 Bolt E4B(6 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →