论坛风格切换切换到宽版
  • 1114阅读
  • 1回复

[AI相关]AI视频数字人,| VideoRetalking唇形模拟【整合包】 [复制链接]

上一主题 下一主题
离线海豚
 

发帖
14662
金钱
449534
威望
0
贡献值
1
简单,便捷,无人直播最佳方案!


VideoReTalking
基于音频的唇形同步,用于野外头戴式视频编辑




我们推出了 VideoReTalking,这是一种新系统,可根据输入音频编辑现实世界中头部说话视频的脸部,即使具有不同的情绪,也能生成高质量且口型同步的输出视频。我们的系统将这一目标分解为三个连续的任务:

(1) 具有规范表情的面部视频生成
(2) 音频驱动的口型同步和
(3) 用于提高照片真实感的面部增强。

给定一个头部说话的视频,我们首先使用表情编辑网络根据相同的表情模板修改每一帧的表情,从而产生具有规范表情的视频。然后将该视频与给定的音频一起输入到口型同步网络以生成口型同步视频。最后,我们通过身份感知面部增强网络和后处理来提高合成面部的照片真实感。我们对所有三个步骤都使用基于学习的方法,并且我们的所有模块都可以在顺序管道中处理,无需任何用户干预。


项目地址:
https://github.com/OpenTalker/video-retalking


整合包地址:
https://www.123pan.com/s/VzULVv-53sX.html

提取码:GLnZ
https://pan.baidu.com/s/1M44qrV8FGQBTMhmTXXWyzQ

提取码: wxqg


视频教程:
https://pan.huang1111.cn/s/8kk8TQ

评价一下你浏览此帖子的感受

精彩

感动

搞笑

开心

愤怒

无聊

灌水
我爱潜水!
离线szfjm

发帖
109
金钱
657
威望
0
贡献值
0
只看该作者 1 发表于: 04-17
谢谢分享~~~~~~~~~~~~
快速回复
限100 字节
 
上一个 下一个