大家好,我是元峰,17 颗 AI 之心持有者。最近我们的万人大航海已经启航,作为本次数字人航线的教练,时刻关注数字人的一些新玩法。这不,这就有了。
玩 AI 数字伙伴们看过来,新玩法又来啦!这次的改变可真是大不同!记得几个月前我分享的那篇 的文章吗?那时候用的都是 Heygen 平台自带的公模数字人。伴随着几个月的发展,现在人们很快就对这种同质化内容不感兴趣了。
但现在,全新的玩法来了,你们最近在抖音或视频号上肯定刷到了这样的短视频带货账号。有一个俄罗斯美女,她的中文说得超级流利,还会分享她对中俄文化差异的独到见解。这种账号的吸粉速度简直惊人,短短几个月时间粉丝就能突破十万,有些甚至达到了几十万粉丝。
而这类账号就是用 AI 数字人来实现的,不仅能更贴近真实人类的互动方式,而且还能根据不同文化背景和特点,打造出独特的个性和风格。这不仅让内容更加丰富多彩,还能吸引更多的观众群体。

此外,这些账号还能实现精准的目标观众定位,通过数据分析了解观众喜好,然后提供更符合他们口味的内容和产品。这种方式不仅提高了观众的参与度,也大大增加了转化率。比如上面这个小姐姐就是卖俄罗斯的糖果,直播的时候是一个男的在讲解。



所以,如果你想要在这个快速变化的 AI 数字人世界中脱颖而出,现在就是最好的时机。
那么这类视频如何制作呢,下面实操走起!
Heygen 数字人克隆
用到的工具还是我们之前介绍过的 Heygen。官网:https://www.heygen.com/,每一个新用户都可以获得 1 积分(可做 1 分钟视频)

注册的过程可能会遇到在使用魔法以后也会出现区域限制的问题,不用担心,Adspower 这个指纹浏览器就可以解决这个问题。
软件下载地址:https://www.adspower.net/download,选择适合自己的电脑版本下载就可以。

做这类视频我们用的是真人数字人克隆功能,在 Heygen 里面叫 **Instant Avatar即时头像,**就是我们传统意义上讲的克隆功能。

我们看一下,上面图中,包括接下来的视频中的这个人 Joshua,就是 Heygen 的 CEO,他带领团队开发出了 Heygen 这个工具。下面这条视频,这就克隆的他自己来讲的内容。
首先介绍一下 Heygen 的这个页面中三种头像功能。

- Instant Avatar 即时头像: “你的数字孪生,在几分钟内即可得到”,这意味着我们可以快速创建一个自己的数字人,这在营销和销售中可能特别有用。

- Photo Avatar 照片头像: “用文本动画化你的照片以让我们将静态照片转换为开口讲话的形象。

- Studio Avatar 工作室头像: “工作室级别的头像”,提供工作室级别的头像质量,非常适合于那些在学习、教育和专业发展中寻求最高标准的用户。
如何开始克隆真人数字人
接下来的内容中,我将向大家展示如何在 HeyGen 平台上克隆你自己的数字人。这个过程简单易行,正如官方所讲,只需几个步骤,就可以拥有一个全新的数字人分身。
第一步:先进入 Instant Avatar 即时头像

首先,步入“Instant Avatar 即时头像”,然后会看到一个界面,会展示 Heygen CEO Joshua 的介绍视频,这个视频内容我们在前面已经看到过了,目的就是为了让你对即时头像功能有一个直观的认识。

第二步:录制视频说明
紧接着,你将进入录制视频的阶段。
我们建议你提交至少 2 分 30 秒的高清视频,在明亮且安静的环境中录制,确保你的面部清晰可见,目光直视镜头。请在讲话间隙短暂停顿,闭上嘴巴,这样有助于清晰捕捉你的语音和嘴型。同时,请确保你的手部位置低于胸部,以避免分散注意力。

注意:原始视频质量越高,最后克隆出来的数字人效果也会越好。下面是录制视频的说明:
推荐
- 提交至少 2 分钟时长的视频
- 采用高清摄像头拍摄
- 在明亮、安静的环境中进行录制
- 正视镜头
- 每句话间短暂停顿,并闭上嘴巴
- 使用并确保手部位置低于胸部 避免以下事项
- 对视频片段进行剪接或切割
- 讲话时不停顿
- 录制过程中改变姿势
- 背景噪音过大
- 脸部出现阴影或过度曝光
- 目光游移或东张西望
- 在胸部以上做手势
第三步:上传视频

接下来,是视频上传阶段。你可以选择直接上传已录制好的视频,或者现场录制。支持多种视频格式和分辨率,但确保文件大小不超过 2GB。
- 视频可横屏或竖屏拍摄
- 支持 mp4、mov 或 webm 格式
- 视频长度需控制在 2 到 5 分钟之间
- 视频分辨率从 360p 到 4K 不等
- 文件大小需小于 2GB
因为本次咱们做的是外国美女视频,所以不需要自己拍摄。直接去网络上面找一段干净的无字幕清晰视频即可。
这类视频一般是去 YouTube 或者 Twitter上面寻找。
这里我找了领英最受欢迎的声音,畅销书作家 Sandra Navidi 的一段视频作为演示的。

因为上面这段视频里面十个采访画面其中还有其他人,所以需要裁剪掉,最后只留下 Sandra Navidi 一个人的视频即可。

裁剪然后拼接为 2 分钟到 2 分半时长的视频即可。

视频准备好之后,我们进行上传即可。

第四步:授权视频(本项目的关键)

在视频上传后,需要录制一段同意声明。简单地读出免责声明,确认你授权 HeyGen 使用你的视频来创造和使用你的数字人分身。
我,元峰,特此声明,我授权 HeyGen 使用我的视频来创作 HeyGen Avatar 并在我的 HeyGen 帐户中使用它。 I, Metafeng, hereby declare that I authorize HeyGen to use the footage of me to build a HeyGen Avatar and use it in my HeyGen account.
如果克隆我们自己的形象,这时候我们自己录制就好了。但是这些我们从未见过的人,要让他们录制视频肯定是不现实的。所以,只能通过 AI 来合成了。 核心还是让这个美女说出上面这段授权内容:美女的形象+美女的声音+匹配的嘴型。
所以,我们需要先对美女进行声音克隆。
1)声音克隆:Elevenlabs
进入到 VoiceLab 标签,选择克隆声音。

选择 Instant Voice Cloning 即时声音克隆

但是使用此功能需要付费订阅才可以,还好门槛比较低,只需要 1 美元就可以。

这里支付可能需要需要虚拟信用卡。

订阅之后,我们可使用的字符有 4 万多,足够制作很多音频文件了。

接下来我们将提前准备好的外国美女音频上传进来,标签和描述填不填无所谓,然后提交即可。

很快就克隆好了,点击 Use。

把 Heygen 中要读的那段授权文案复制到 11Labs 当中。


语音生成之后下载到本地。
2)声音克隆:Openvoice
声音克隆还有一种方案是使用 Openvoice。
https://colab.research.google.com/github/metafeng/Binder/blob/master/openvoice.ipynb
Colab 是 Google 的在线 Python 环境,需要梯子🪜。


等待执行完之后,点击下方的链接进入操作页面。

然后文本提示部分输入要讲的文案,参考音频部分上传原始音频。

点击 Send 之后,几分钟声音就克隆完成了。

和刚刚刚 Elevenlabs 生成的效果对比,很明显 Elevenlabs 的要清晰一些,而且还原度也更高。
3)形象克隆:Video retalking
https://replicate.com/cjwbw/video-retalking?prediction=gr6m2ptbqyvxcbwdfrlq6j7gae

上传形象

上传声音

点击 Run,开跑大概 6 分钟左右。

如果出现类似下图中失败的情况,建议缩短视频时长。

好,折腾了这么半天,其实就是要这个视频。接下来我们上传到 Heygen 里面进行授权。

第五步:提交等待

最后一步,提交并等待。数字人克隆将开始,进度条达到 100% 时,代表克隆完成。

然后就可以在左边头像库中找到自己刚刚克隆的形象,声音也可以选择自己的。接下来使用方法和之前讲过的内容一模一样了,输入自己想要去讲的文案,让数字人开口讲出。

提交之后,下载原视频即可。

⚠️注意:因为目前 Heygen 增加了动态验证功能,以上方法已经失效。


现在在 Heygen 里面克隆形象,必须得本人亲自录制,因为增加了 【动态密码】,每次录制都会变化。 所以上面这种方法已经失效。(2023年2月1日)
不过没事,替代产品我也帮你找好了。
飞影数字人 | 对标 Heygen
https://flyworks.ai/login 国内环境就能访问。

120 元 30 分钟,合下来 4 块钱 1 分钟。

有形象克隆,声音克隆,关键还有邀请奖励,邀请码:CBsihpLqOWq(好友成功支付后,你和好友分别获得赠送积分),这个懂的都懂吧?
Heygen 前期都可以通过邀请来白嫖,后面就不行了,得花钱。

克隆也很简单,上传视频,勾选同意即可形象复刻,不需要其他的东西,懂了吗?

这是上传素材所需要的要求。

不过这个平台文本驱动声音内置的都是用的中国声音,做不出外国人讲中文的强调。所以还是要用 elevenlabs 克隆好声音再上传,这样效果会更真实。

上传完音频等待制作完成。

看看效果。
第六步:剪辑视频(剪映)
最终剪辑部分可以参考之前的文章,步骤基本一模一样。

可以点击下面👇【剪映成片制作】的标题查看。

<synced_reference src-block-id="O9JcdNgQMsj7NObqjfac4r0tn8e" src-token="CEGqd7uPpoNVVqxxGR9cdmaznBb"></synced_reference>
视频发布
前几天 OpenAI 发布了 GPT Store 的时候,我用这个方法制作了一条视频,虽然播放不多就 8000+,但是增加了 161 个关注,这类视频涨粉还是比较不错的。

这个视频号是新号,刚发第一个视频 1 小时后的数据,嘎嘎涨粉。评论区和私信一堆人要求给介绍对象,指不定还能带出来一条跨国相亲产业链,哈哈。



下面这是抖音的数据,也是新号第一条视频。


下面这是快手的数据,也是新号第一条视频。


这就是最近比较火的外国美女讲中文的视频的制作教程。当然,有了这个办法之后,我们不仅仅可以做文章开头介绍的俄罗斯美女,这时候你就可以做全球任何国家的美女了。讲对应国家的文化,带对应国家的特产产品都可以轻松变现。
另外也可以做这种节日祝福类的视频,最近临近春节,可以让外国人讲我们的中国文化,卖年货。
好了,以上就是本教程的所有内容了,如果有收获,请记得去星球帮元峰点个赞呀。