NVIDIA 开源全双工语音模型 VoiceChat,支持边说边听与工具调用
chaumian · x · 2026-09-22
NVIDIA NemotronLabs 团队发布论文 VoiceChat,这是一个开放的全双工(full-duplex)语音到语音模型,最大亮点是在实时语音对话中支持工具调用能力。
与传统轮流说话的语音助手不同,全双工架构允许模型同时听和说,更接近人类自然对话体验;工具调用能力则让模型在纯语音交互中也能执行外部操作(如查信息、触发动作),是迈向实用语音 Agent 的关键一步。论文作者阵容庞大,包含多位 NVIDIA 语音方向核心研究员。
所属事件:NVIDIA 发布开源全双工语音模型 VoiceChat 支持工具调用(2 条相关)→
「多模态」频道最新
- NVIDIA 携手 ElevenLabs 扩张语音智能体,新增 15MW Blackwell 算力 — nvidia · 2026-11-12
- 博主实测 Seedream V5.5:数十人物复杂场景细节惊人 — mark_k · 2026-11-12
- Claude 疑似真能「听」视频发音,创作者实测发现反常识能力 — RileyRalmuto · 2026-11-12
- ComfyUI 技巧:用分层 PNG 画 inpaint 蒙版反复复用 — Deftroyy · 2026-11-12
- 视频生成角色一致性翻车:同一参考图外星人仍逐帧漂移 — fixxxer2606 · 2026-11-12
- 在 Claude 里调 Runway Fable 5.2:从想法到可吹的电子长笛 — tlakomy · 2026-11-12