快手团队开源的Live Portrait动态表情生成模型

什么是Live Portrait动态表情生成模型？

Live Portrait是一种动态表情生成模型，它能够通过视频驱动图片，生成动画效果。该模型能够有效地提取目标的表情动作和动作神态，并且在多个动态人物之间过渡平滑，不会产生突兀的边界效果。

Live Portrait的主要特点是什么？

• 高推理效率：模型的推理速度非常快，即使在较低配置的设备上也能流畅运行。
• 平滑过渡：在多个动态人物之间过渡平滑，不会产生突兀的边界效果。
• 唇形同步：可以通过有声视频合成唇形同步的数字人。

如何使用Live Portrait模型？

安装和配置

1. 打开整合包：确保本地GPU可用。



2. 点击示例文件：左侧是图片，右侧是驱动视频。



3. 点击生成：设备是4060laptop，推理速度非常快。

使用自己的图片

• 替换图片：可以换成自己的图片进行生成。
• 有声视频合成：可以通过有声视频来合成唇形同步的数字人。

保存生成的视频

• 视频保存位置：生成的视频保存在`animations`目录。
• 有声音版本：会同步生成一个有声音版本的视频。

个人感悟

我认为：Live Portrait模型的开源，不仅展示了快手团队在人工智能领域的深厚技术积累，也为广大开发者提供了一个强大的工具，使得动态表情生成变得更加简单和高效。这种技术的普及和应用，将极大地丰富数字内容创作的可能性，推动虚拟现实和增强现实技术的发展。