清华开源音视频提声模型 Falcon,0.5M 参数实时看嘴型提取人声

清华团队开源并发布入选 NeurIPS 2026 的音频-视觉目标说话人提取模型 Falcon,可在多说话人嘈杂环境中通过「看嘴型」实时提取指定人物的声音,并接入腾讯会议、Zoom 等软件。与传统纯音频方案不同,该模型仅需约 0.5M 参数,参数量节省 91.9%,延迟降低 11 倍。团队同时配套开源了代码、Hugging Face 模型、在线 demo 及 RealSSA 基准。

2026-10-31 ~ 2026-10-31 · 2 条相关