GAIA:零样本文字语音视频驱动人物带表情姿势可控的说话视频新技术

GAIA:零样本文字语音视频驱动人物带表情姿势可控的说话视频新技术

在数字技术不断创新的浪潮中,一项引领头像生成技术的重要突破终于来临。GAIA(Generative AI for Avatar)问世,标志着零样本语音驱动头像生成领域的新时代。这一技术革新的目标是从语音和单一肖像图像中合成自然的说话视频,彻底消除了以往依赖于启发式方法的局限性。

通过这项技术,可以实现声音驱动照片生成有表情动画的视频,还可通过参考视频驱动,甚至文字也可以驱动,还可以修改说话人的姿势。

800_auto

传统方法通常受到诸如基于变形的运动表示和3D可变模型等领域特定启发式方法的制约,从而限制了生成头像的自然度和多样性。然而...

点击查看剩余70%

{{collectdata}}

网友评论