当前位置: 主页 > AI教程 >

AI教程

如何用AI生成数字人视频?干货拉满!视频解说/直播带货统统拿捏

2024-07-02
Arjun
本站原创

你是否在网上看过很多AI数字人的解说视频,甚至是AI数字人在直播带货?或许你会好奇,这些AI数字人是如何制作生成的,今天,跟我一起,学习零基础入门AI数字人制作。最重要,我给你的这套方法,是利用本地AI推理,不需要借助网上那些问你要money的AI工具,完全免费哦!

首先,我们来看一下剪映的AI数字人:

·需要SVIP才能使用;

·1秒=8积分,1积分=0.08元,1分钟的数字人=480积分=0.38元

如果你想要向我本次教程一样,想用随意的AI数字人,需要使用订制数字人的服务,收费是:

·49元订制费,使用期限30天,到期后需要再支付49元

·生成后使用,仍然需要花费剪映的SVIP积分

因为AI数字人其与生俱的商业能力特性,他被广泛应用于教育、视频、直播带货等领域,所以你在市场上几乎不可能找到免费的AI数字人工具。像比较出名的Heygen、D-ID这些,已经不让白嫖了,而且费用昂贵,所以我们的思路改为使用开源的AI数字人项目,本地部署。

你不会部署也没关系,文章的末尾,我会给出本地一键安装包。那我们话不多说,教程正式开始。

一、数字人素材录制

1、数字人素材

这一步你可以使用云台/三脚架来稳固相机或者手机,然后人站在绿幕面前拍一段20~30秒,正在说话视频:

· 语速要适中;

· 适当的加入一些肢体动作,但动作幅度不要太大

下面是我已经准备的素材:

2、音频素材

声音的素材,你可以选择:

2-1、自己配音

2-2、利用剪映AI生成。

打开剪映,按照下图顺序操作。

接着切换到「朗读tab」,选择/试听,一个你喜欢的AI的声音,点击「开始朗读」

接着,按Ctrl+M,导出。

· 选择导出的路径和名称;

· 取消「视频导出」复选框;

· 勾选「音频导出」复选框,并把格式设置为.wav;

这样音频我们就搞定了。

二、Easy-Wav2Lip的安装与启动

接下来我们来使用AI生成数字人视频。

这里我选择的是——Easy-Wav2Lip,一款开源免费的AI数字人项目,它能够将照片或是视频中的人物唇形于音频自动匹配,生成视频。

首先,下载Easy-Wav2Lip.zip压缩包:https://pan.baidu.com/s/1PrfzDruv4vjF-jq2ttuSdQ?pwd=ai88

提取码:ai88 | 解压密码:www.ai8.net

双击启动目录下的「Start-WebUI.bat」,等待程序跑完,很快,直到看到这行命令。

接着在你的浏览器输入「http://127.0.0.1:7860」,打开WebUI。

使用起来很简单,左侧上传视频,右侧上传音频。

设置里面,将:

· 视频质量「Enhanced」

· Wav2Lip版本「Wav2Lip版本」,若你生成的视频出现牙齿缺失的情况,可尝试切换到Wav2Lip_GAN。

· 启用mask嘴部跟踪

设置完成后,点开始生成,Easy-Wav2Lip生成的还是很快的,15秒的视频,只花了1分多钟就生成好了。

三、后期处理

1、打开剪映,你用premiere、AE都可以,把你视频素材拖进去,再导入刚刚Easy-Wav2Lip生成的数字人素材,放到视频素材的上一层。

2、选择数字人的视频素材,在剪映中选择「画面 - 抠像 - 色度抠图」。

3、接着点吸管按钮,去戳视频中绿色的部分,接着调整参数,你也可以直接按照我的这个抠像数据来设置。

这样你的数字人就变成透明的素材,融合进视频中了

4、如果你没有剪映的SVIP,或者你觉得剪映抠出的人物效果不好,也可以使用AE来抠像。

将你的数字人视频拖入AE。

选择「Roto必刷工具」

在预览窗口,用roto笔刷,按照人物的,拖动出一道轨迹。

AE会自动创建人物的选区,如果选区没有涵盖完全人物的身体,你可以继续细化调整。

· 用鼠标滚轮,对预览窗格的视频进行缩放;

· 按住鼠标左键拖动鼠标,在没有覆盖到的,人物身体部分继续选区覆盖;

· 按住Alt+鼠标拖动,来减少,取消掉多余的选区。

调整好后,你可以继续调整roto笔刷的参数,调整抠像到最佳状态,我的roto笔刷数据参考。

接着按空格,让AE把整段素材渲染完,下图中绿色的进度条走完即可。

人像抠取完毕,AE可选的参数更加细致,抠出来的人像效果会比剪映的要好很多。

然后,依旧是按Ctrl+M导出。

· 设置视频输出的格式;

· 设置导出的路径。

视频的格式设置

按下图步骤进行,注意视频质量推荐1~3就够用,否则生成的视频非常大。

这样就搞定了一段背景是透明格式的数字人视频了。

5、接着回到剪映,添加AE中导出的数字人透明视频,放在背景视频素材的上方,接着为你的视频加上字幕,背景音乐,一段完全由AI生成的数字人解说视频就搞定了。

怎么样,你学会了吗?关注 ai8,我会每天分享一些奇趣好玩的 AI 工具给大家。