Nuance Labs 发布全双工视听模型 Nuplex:回应时机与真人重合 89%
rohanpaul_ai · x · 2026-11-10
- Nuance Labs 发布 Nuplex 1.0——全双工(full-duplex)视听基础模型,及基于其打造的虚拟人 Emma(emma.nuancelabs.ai),附 Beta API,称经 18 个月研发。
- 回应时机:现有基准只测延迟,团队改用「真人何时接话」衡量——在 1785 个真实对话问题上,Nuplex 的插话时机与真人原对话重合 89%,次接近的系统仅 35%。图中 PersonaPlex/Moshi 等开源模型为压延迟基准而答得极快,GPT-Live/Gemini Live 更慢(或为避免打断,且含网络延迟)。
- 除语音外还强调视觉回应与注视作为话轮转换信号,主张面对面自然度而非跑分。
- 技术报告已公开,作者 rohanpaulai 转发了该报告。
所属事件:Nuance 发布全双工视听模型 Nuplex 与数字人 Emma(3 条相关)→
「多模态」频道最新
- Claude 3 Sonnet 设计深海古龟:呼吸驱动声光的变化艺术 — repligate · 2026-11-10
- 两人中一个是 AI:Nuance 虚拟人已难辨真假 — mark_k · 2026-11-10
- 用 Fable 5.2 + Claude Music Video skill 打造 AI 复古 MV「We Leave the Lights On」 — AIandDesign · 2026-11-10
- 让 Fable 5.2 尽力写一首交响乐,作者晒出成品 — imjustnewatai · 2026-11-10
- Matt Shumer 展示 Fable 5.2 用纯代码生成整部电影 — mattshumer_ · 2026-11-10
- 无需训练:Agent 只改 0.00017% 权重就把平面图片变成可走进的场景 — IgorCarron · 2026-11-10