NVIDIA 推出 Audio2Face-3D,音频驱动高保真面部动画
tom_doerr · x · 2026-08-23
NVIDIA 发布了 Audio2Face-3D,这是一项能从音频源生成高保真 3D 面部动画的技术,支持预录制文件和实时流。
核心能力:
- 精准唇形同步:基于语音分析合成精确的下颚、舌头和眼睛运动。
- 情感推断:从语音语调中推断细腻的情感表达,并结合面部皮肤细微变形。
- 多种驱动方式:支持直接网格变形、关节变换或混合形状权重来驱动角色表演。
工具链:
该技术中心提供预训练模型、开发 SDK,以及用于 Autodesk Maya 和 Unreal Engine 5 的插件,并附带示例数据集。
「多模态」频道最新
- Kling 4.0 实测:单次生成 30 秒 1080p 长镜头与角色参考 — HeyZoyaKhan · 2026-10-15
- Kling 4.0 生成泰山率狼群军团出征,30 秒成片难辨真假 — HeyZoyaKhan · 2026-10-15
- Kling 4.0 主打「导演式」视频生成:编排动作、构建视觉世界 — alex_verem · 2026-10-15
- ElevenLabs MCP + Claude Motion:一句提示词给视频加动效,跳过 AE — CurieuxExplorer · 2026-10-15
- Google 演示:Gemini 内把学术 PDF 一键变彩色动画故事书 — CurieuxExplorer · 2026-10-15
- Magnific One 拍图 + Seedance 2.5 一条提示词,产出 15 秒完整广告片 — CurieuxExplorer · 2026-10-15