阿里 TaoMate-HD:渐进分辨率自回归模型生成高清流式音视频

TaoLiveAIGC · hf · 2026-11-06

阿里集团 TaoLive-AIGC 团队与南京大学提出 TaoMate-HD,一个面向高清音视频流式生成的自回归模型,面向流式数字人场景:文本更新的同时持续输出语音并生成精细视频。

技术要点:每个短片段(chunk)先用两步去噪在低分辨率建立粗视频结构,最后一步细化到高分辨率,音频在同一路径中生成;各阶段将当前 chunk 的音视频预测传递给下一 chunk 的同阶段作为历史,跨文本更新保留历史以推断延续内容,避免语音重复或中断;并针对长时连贯输出做了并行部署优化。

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →