元峰AI笔记 · AI数字人

⚠️注意:因为目前 Heygen 增加了动态验证功能,以上方法已经失效。

<title火爆全网的外国美女讲中文是如何做的?</title

火爆全网的外国美女讲中文是如何做的?

大家好,我是元峰,17 颗 AI 之心持有者。最近我们的万人大航海已经启航,作为本次数字人航线的教练,时刻关注数字人的一些新玩法。这不,这就有了。

玩 AI 数字伙伴们看过来,新玩法又来啦!这次的改变可真是大不同!记得几个月前我分享的那篇 的文章吗?那时候用的都是 Heygen 平台自带的公模数字人。伴随着几个月的发展,现在人们很快就对这种同质化内容不感兴趣了。

但现在,全新的玩法来了,你们最近在抖音或视频号上肯定刷到了这样的短视频带货账号。有一个俄罗斯美女,她的中文说得超级流利,还会分享她对中俄文化差异的独到见解。这种账号的吸粉速度简直惊人,短短几个月时间粉丝就能突破十万,有些甚至达到了几十万粉丝。

而这类账号就是用 AI 数字人来实现的,不仅能更贴近真实人类的互动方式,而且还能根据不同文化背景和特点,打造出独特的个性和风格。这不仅让内容更加丰富多彩,还能吸引更多的观众群体。

图片展示了三位外国女性在抖音平台的账号信息。左侧账号“K”粉丝数9.22万,中间账号“热爱中国”粉丝数63.9万,右侧账号“依小青”粉丝数17.7万。三位账号均标注“在中国生活15年”,且有“同声传译”标识。中间账号还显示“105件作品”,右侧账号有“13天前发布”字样。图片与上文提到的外国美女讲中文的内容相关,直观呈现了这些账号的粉丝数量等信息。

此外,这些账号还能实现精准的目标观众定位,通过数据分析了解观众喜好,然后提供更符合他们口味的内容和产品。这种方式不仅提高了观众的参与度,也大大增加了转化率。比如上面这个小姐姐就是卖俄罗斯的糖果,直播的时候是一个男的在讲解。

图片展示的是一个外国美女账号的抖音主页界面。主页显示获赞71.9万、关注2人、粉丝10.3万。简介中提到日常分享生活感悟、爱说中文的俄罗斯女孩儿、感谢大家的喜爱,还分享俄罗斯正品好物。主页下方有商品橱窗,展示22件好物,如俄罗斯糖果、蜂蜜等。此外,还有直播动态,可查看历史记录。主页底部展示了部分视频缩略图,如“俄罗斯糖果”“俄罗斯蜂蜜”等。该图片与上文提到的通过数据分析了解观众喜好,提供符合他们口味内容的账号定位方式相呼应。

图片展示的是一个外国美女卖俄罗斯糖果的直播带货场景。画面中,一位外国女性主播身着黑色上衣,搭配红色围裙,正在介绍商品。背景为店铺环境,货架上摆放着多种商品。直播页面显示商品为“俄罗斯进口多种口味混合糖什锦糖果500g”,售价29.9元,已售10.3万。页面下方有“加入购物车”和“立即购买”按钮,还标注了7天无理由退货、运费险、食安险、极速退款等保障信息。该图片与上文提到的通过数据分析了解观众喜好,提供符合他们口味内容和产品的直播带货方式相呼应。

图片展示的是一个直播画面,画面中一只手拿着一个糖果,背景是五颜六色的糖果。画面右上角有“财源滚滚”字样,左上角有“关注”按钮。画面下方有“12 空空 来了”“12 空空 来了”等弹幕,还有“说点什么...”的输入框。右下角有“29.9 抢”的促销信息。该图片与上文提到的通过数据分析了解观众喜好,提供符合观众口味内容的直播方式相呼应,展示了直播中与观众互动及商品推广的场景。

所以,如果你想要在这个快速变化的 AI 数字人世界中脱颖而出,现在就是最好的时机。

那么这类视频如何制作呢,下面实操走起!

Heygen 数字人克隆

用到的工具还是我们之前介绍过的 Heygen。官网:https://www.heygen.com/每一个新用户都可以获得 1 积分(可做 1 分钟视频)

图片展示了HeyGen官网注册时遇到的问题及注册邀请。左侧文字介绍了HeyGen的便捷性、视频质量、模板多样性、视频生成速度及性价比。右侧显示注册失败提示“Unable to register. Please avoid VPN and try again.”,并有用户Robin James的评价,称其在内容创作中帮助生成AI角色,使整体过程更易接近。图片与上下文紧密相关,直观呈现了注册过程中可能遇到的障碍及用户对HeyGen的使用体验反馈。

注册的过程可能会遇到在使用魔法以后也会出现区域限制的问题,不用担心,Adspower 这个指纹浏览器就可以解决这个问题。

软件下载地址:https://www.adspower.net/download,选择适合自己的电脑版本下载就可以。

图片展示的是Adspower官网的下载软件页面。页面上方有“注册”和“下载软件”按钮,右侧有“ZH”标识。中间大标题为“下载软件”,下方说明可在Windows 7及以上版本等系统中运行。有Windows、macOS、Linux三个操作系统下载选项,其中Windows(64 bit)被蓝色框突出显示。页面右上角有红色箭头指向“下载软件”按钮。该图片与文档中介绍下载Adspower指纹浏览器以解决区域限制问题的内容相关,展示了下载软件的具体位置和选项。

做这类视频我们用的是真人数字人克隆功能,在 Heygen 里面叫 **Instant Avatar即时头像,**就是我们传统意义上讲的克隆功能。

图片展示的是Heygen数字人克隆的即时头像制作功能。画面左侧有“03即时头像制作 Instant Avatar”字样,下方说明“快速创建虚拟形象,仅用几分钟,拥有你的数字人分身,市场营销与销售的最佳选择”。右侧是一位穿着白色上衣的男性,背景模糊。该图片与文档中介绍Heygen数字人克隆功能的内容相关,直观呈现了即时头像制作这一功能。

我们看一下,上面图中,包括接下来的视频中的这个人 Joshua,就是 Heygen 的 CEO,他带领团队开发出了 Heygen 这个工具。下面这条视频,这就克隆的他自己来讲的内容。

首先介绍一下 Heygen 的这个页面中三种头像功能。

图片展示了Heygen平台的即时头像功能页面。页面左侧有导航栏,选中“Avatar”选项。右侧上方有“Instant Avatar”“Photo Avatar”“Studio Avatar”三个头像功能选项,其中“Instant Avatar”被红色框突出显示。下方是“Instant Avatar”生成的头像示例,有不同人物形象。该图片与上文介绍Heygen页面三种头像功能的内容相关,直观呈现了即时头像这一功能。

  1. Instant Avatar 即时头像: “你的数字孪生,在几分钟内即可得到”,这意味着我们可以快速创建一个自己的数字人,这在营销和销售中可能特别有用。

图片展示了Heygen平台的My Avatar页面,其中Instant Avatar功能下有9个头像。左侧是Sandra Navidi的头像,标注有“Free Revision”。中间和右侧均为Joshua HeyGen CEO的头像,分别标注有“Demo”和“Finetune”。该图片与上文介绍Heygen页面三种头像功能的内容相关,直观呈现了即时头像功能下可选择的数字人形象,帮助用户了解其创建的多样性。

  1. Photo Avatar 照片头像: “用文本动画化你的照片以让我们将静态照片转换为开口讲话的形象。

图片展示的是投资界传奇人物查理·芒格。他身着深色西装,佩戴红色领带,坐在椅子上,背景为书架。图片下方有文字“投资界传奇 查理·芒格 逝世,享年99岁”。该图片与文档中提及的查理·芒格视频相关,可能是用于介绍或纪念这位传奇人物,与文档中介绍查理·芒格的内容相呼应。

  1. Studio Avatar 工作室头像: “工作室级别的头像”,提供工作室级别的头像质量,非常适合于那些在学习、教育和专业发展中寻求最高标准的用户。

如何开始克隆真人数字人

接下来的内容中,我将向大家展示如何在 HeyGen 平台上克隆你自己的数字人。这个过程简单易行,正如官方所讲,只需几个步骤,就可以拥有一个全新的数字人分身。

第一步:先进入 Instant Avatar 即时头像

图片展示了在5分钟内创建即时头像的界面。画面中有一个红色框突出显示的“Instant Avatar”选项,旁边有一个指向该选项的红色箭头。界面左侧有导航栏,包括Home、Templates、Avatar等选项,当前选中“Avatar”。右侧展示了多个头像示例,其中“Instant Avatar”选项被红色框和箭头标识。该图片与文档中“第二步:录制视频说明”部分相关,用于指导用户在即时头像界面找到并选择“Instant Avatar”选项,以进入录制视频阶段。

首先,步入“Instant Avatar 即时头像”,然后会看到一个界面,会展示 Heygen CEO Joshua 的介绍视频,这个视频内容我们在前面已经看到过了,目的就是为了让你对即时头像功能有一个直观的认识。

图片展示了在5分钟内创建即时头像的介绍界面。上方标题为“在5分钟内创建您的即时头像 介绍”,下方有英文和中文介绍,英文为“Create Your Instant Avatar in 5 Minutes!”,中文为“5分钟内创建您的即时头像”。界面中有“Get Started for Free”按钮,以及“Create Instant Avatar 创建即时头像”选项。该图片与上下文紧密相关,是对即时头像创建流程中录制视频说明步骤前的介绍,帮助用户了解创建即时头像的便捷性。

第二步:录制视频说明

紧接着,你将进入录制视频的阶段。

我们建议你提交至少 2 分 30 秒的高清视频,在明亮且安静的环境中录制,确保你的面部清晰可见,目光直视镜头。请在讲话间隙短暂停顿,闭上嘴巴,这样有助于清晰捕捉你的语音和嘴型。同时,请确保你的手部位置低于胸部,以避免分散注意力。

图片展示了在5分钟内创建即时头像的录制视频说明。左侧为“录制视频说明”标题,右侧是详细说明,分为推荐和避免事项。推荐事项包括录制至少2分钟视频、使用专业或手机相机、良好光线和安静环境、正视镜头、每句话间短暂停顿闭嘴、手部位置低于胸部等。避免事项有视频剪接、讲话不停顿、改变姿势、背景噪音大、脸部阴影或曝光、目光游移、胸部以上手势等。该图与上下文关于录制视频开始克隆真人数字人的说明紧密相关。

注意:原始视频质量越高,最后克隆出来的数字人效果也会越好。下面是录制视频的说明:

推荐

  • 提交至少 2 分钟时长的视频
  • 采用高清摄像头拍摄
  • 在明亮、安静的环境中进行录制
  • 正视镜头
  • 每句话间短暂停顿,并闭上嘴巴
  • 使用并确保手部位置低于胸部 避免以下事项
  • 对视频片段进行剪接或切割
  • 讲话时不停顿
  • 录制过程中改变姿势
  • 背景噪音过大
  • 脸部出现阴影或过度曝光
  • 目光游移或东张西望
  • 在胸部以上做手势

第三步:上传视频

图片展示了在5分钟内创建即时头像的上传视频步骤。左侧为“上传视频”选项,有“Upload Footage”按钮及“Record with Video”按钮,下方有示例视频和“Learn more”链接。右侧为“录制视频”选项,有“Record with Video”按钮,下方有录制要求,如清晰可见面部、自然友好、安静环境、良好照明等。图片与上下文紧密相关,直观呈现了上传视频和录制视频两种方式,帮助用户了解视频上传的具体操作。

接下来,是视频上传阶段。你可以选择直接上传已录制好的视频,或者现场录制。支持多种视频格式和分辨率,但确保文件大小不超过 2GB。

  • 视频可横屏或竖屏拍摄
  • 支持 mp4、mov 或 webm 格式
  • 视频长度需控制在 2 到 5 分钟之间
  • 视频分辨率从 360p 到 4K 不等
  • 文件大小需小于 2GB

因为本次咱们做的是外国美女视频,所以不需要自己拍摄。直接去网络上面找一段干净的无字幕清晰视频即可。

这类视频一般是去 YouTube 或者 Twitter上面寻找。

这里我找了领英最受欢迎的声音,畅销书作家 Sandra Navidi 的一段视频作为演示的。

图片展示的是Sandra Navidi的Twitter主页。主页背景为她与美国标志性建筑自由女神像的合影,中间有“DIE DNA DER USA”字样。主页下方介绍她是BeyondGlobal首席执行官、德国+美国律师、顾问、电视评论员、演讲者、领英最受欢迎的声音、畅销书作家。主页还显示其加入时间为2009年4月,有244人关注,9,623人正在关注。该图片与文档中上传视频步骤相关,用于说明Sandra Navidi的身份背景。

因为上面这段视频里面十个采访画面其中还有其他人,所以需要裁剪掉,最后只留下 Sandra Navidi 一个人的视频即可。

图片展示的是Sandra Navidi原始视频画面,画面中Sandra Navidi身着黑色连衣裙,坐在白色椅子上,腿交叉,面带微笑看向右侧。右侧坐着一位男士,身着深色西装,双手交叉放在腿上。两人坐在一张金属网状圆桌旁,背景为浅色墙面,墙上挂着一幅描绘河流和船只的画作。此图与上下文关系紧密,是上传视频步骤中需裁剪掉的视频画面之一。

裁剪然后拼接为 2 分钟到 2 分半时长的视频即可。

图片展示的是视频编辑软件界面,画面中显示一位外国女性正在讲话。界面上方有“导入”“生成”“拼接”等功能选项。画面下方时间轴上,红色圈出部分显示“00:02:22.16”,表明当前视频播放时间为2分22秒。该图片与上文提到的视频裁剪和拼接步骤相关,用于说明视频编辑过程中对视频片段时长的查看与操作。

视频准备好之后,我们进行上传即可。

图片展示的是创建即时数字人平台的上传视频页面。画面中显示了一个视频预览窗口,视频中是一位女性。下方提示为获得更逼真的数字人,需确认视频符合要求,如面部始终可见、有停顿、直视镜头、环境安静等。有“Upload Again”和“My Footage Looks Good”按钮,以及“Learn More”链接。页面右上角有“Next”按钮,左上角有“Back”按钮。该图片与文档中上传视频步骤相关,用于指导用户上传符合要求的视频。

第四步:授权视频(本项目的关键)

图片展示的是HeyGen平台“在5分钟内创建您的即时头像”步骤中的“同意”页面。页面上方有“03”标识及标题。中间部分显示视频录制界面,有“Upload Consent Video | 记录声明”和“Record a Consent 记录声明”选项,下方有视频录制区域,底部有“Start Recording”按钮。页面右上角有“Previous”和“Next”按钮。该图片与上下文紧密相关,是克隆真人数字人流程中授权视频环节的展示,用户需在此录制同意声明视频。

在视频上传后,需要录制一段同意声明。简单地读出免责声明,确认你授权 HeyGen 使用你的视频来创造和使用你的数字人分身。

我,元峰,特此声明,我授权 HeyGen 使用我的视频来创作 HeyGen Avatar 并在我的 HeyGen 帐户中使用它。 I, Metafeng, hereby declare that I authorize HeyGen to use the footage of me to build a HeyGen Avatar and use it in my HeyGen account.

如果克隆我们自己的形象,这时候我们自己录制就好了。但是这些我们从未见过的人,要让他们录制视频肯定是不现实的。所以,只能通过 AI 来合成了。 核心还是让这个美女说出上面这段授权内容:美女的形象+美女的声音+匹配的嘴型。

所以,我们需要先对美女进行声音克隆。

1)声音克隆:Elevenlabs

官方链接:https://elevenlabs.io/

进入到 VoiceLab 标签,选择克隆声音。

图片展示了ElevenLabs网站的VoiceLab页面。页面上方有导航栏,如Speech Synthesis、Projects等。下方提示“还没有创建声音,请点击“Add Voice”创建你的第一个声音”。关键部分是页面中间的“Add Generator or Cloned Voice 添加生成器或克隆声音”按钮,该按钮被红色框突出显示。此图片与上下文关系紧密,上下文提到要对美女进行声音克隆,此图直观呈现了在ElevenLabs网站上进行声音克隆操作的入口位置。

选择 Instant Voice Cloning 即时声音克隆

图片展示了Elevenlabs网站中“VoiceLab”标签下“要创建的声音类型”选项界面。其中,“Instant Voice Cloning”(即时声音克隆)被红色框重点突出显示,其下方说明可从干净的样本录音中克隆声音,样本需包含1名说话者、时长超过1分钟且不含背景噪音。该图片与上下文紧密相关,上下文提到在Elevenlabs网站中选择“VoiceLab”标签,选择克隆声音,且需使用即时声音克隆功能,而此图直观呈现了该功能所在位置及使用条件。

但是使用此功能需要付费订阅才可以,还好门槛比较低,只需要 1 美元就可以。

图片展示了ElevenLabs的付费订阅套餐。其中Starter入门套餐原价5美元/月,现价1美元/月,包含每月36,864个字符、每月创建19个自定义声音等权益。该图片与上文提到的使用ElevenLabs即时声音克隆功能需付费订阅的内容相关,直观呈现了订阅价格及包含的权益,帮助用户了解付费订阅的详细情况。

这里支付可能需要需要虚拟信用卡。

图片展示的是WildCard支付服务界面。上方有“服务总览”“支付服务”“我的卡片”“交易明细”“通过支付”“ChatGPT 一键升级”“API 一键用”等选项。中间部分是WildCard支付服务介绍,包括OpenAI账号注册、ChatGPT一键升级、海外多变网络、OpenAI API调用等。下方有“ChatGPT Plus一键升级”“ChatGPT专用浏览器”“OpenAI API研发”“ChatGPT专用浏览器”等服务选项。该图片与上下文介绍的支付服务相关,展示了服务内容。

订阅之后,我们可使用的字符有 4 万多,足够制作很多音频文件了。

图片展示的是Heygen平台的订阅信息页面。页面显示已订阅stater版本,当前处于active状态。关键信息是“Characters used已使用字符”为6/46,666,即已使用字符数为6,剩余46,666个字符。此外,还显示下一个字符重置时间为31天,下一个发票时间为31天,下一个发票金额为$5。该图片与上下文关系紧密,上下文提到订阅Heygen后可使用4万多字符,此图直观呈现了已使用字符情况,帮助理解字符使用情况及剩余量。

接下来我们将提前准备好的外国美女音频上传进来,标签和描述填不填无所谓,然后提交即可。

图片展示的是11Labs平台编辑语音界面及文件选择窗口。左侧界面显示“Edit Voice编辑语音”,有“Name名称”输入框及“Click to upload a file or drag and drop点击上传文件或拖放”区域,下方有“Record Audio”录音按钮。右侧窗口为文件选择界面,显示“打开”按钮,有多个文件夹及文件选项,其中“SandraNavidi.mp3”被选中。该图片与上下文关系紧密,是上传外国美女音频至11Labs平台进行语音克隆操作的步骤说明。

很快就克隆好了,点击 Use。

图片展示的是VoiceLab平台界面,左侧有“添加生成式或克隆声音”按钮,右侧是“外国美女”克隆声音选项,其下方有“Use”按钮被红色框和箭头突出显示。该图片与文档中“如何开始克隆真人数字人”部分内容相关,是第四步“授权视频”操作的示例,说明在授权视频时,需将Heygen中要读的那段授权文案复制到11Labs中,语音生成后下载到本地,此图展示了在VoiceLab平台中使用克隆声音的操作步骤。

把 Heygen 中要读的那段授权文案复制到 11Labs 当中。

图片展示了HeyGen平台中创建即时数字人的授权视频上传界面。左侧界面有“Upload Consent Video”和“Record a Consent”选项,下方提示上传一段快速视频,阅读指定脚本,语言为英语。右侧界面是11Labs平台的语音合成设置,任务为文本转语音,下方有“Settings”设置区域,其中“Voice”下拉菜单被红色框标注,显示为“外国美女”,对应上文提到的HeyGen授权视频中需选择的语音类型。

图片展示的是HeyGen平台中授权视频的界面。界面中“Settings”设置栏下有“外国美女”选项,下方有“Voice Settings”和“Ewen Multilingual v2”下拉框。文本区域显示授权文案,内容为“1. SandraNavid, hereby declare that I authorize HeyGen to use the footage of me to build a HeyGen Avatar and use it in my HeyGen account.”底部有“Generate”生成按钮。图片右侧有红色箭头指向“下载”按钮,与上下文提到的“把Heygen中要读的那段授权文案复制到11Labs当中”及“语音生成之后下载到本地”相呼应。

语音生成之后下载到本地。

2)声音克隆:Openvoice

声音克隆还有一种方案是使用 Openvoice。

https://colab.research.google.com/github/metafeng/Binder/blob/master/openvoice.ipynb

Colab 是 Google 的在线 Python 环境,需要梯子🪜。

图片展示了在Colab中运行Openvoice.ipynb代码的操作界面。画面中突出显示了“点击运行”字样,旁边有一个红色箭头指向代码区域。代码部分包含多个命令,如git clone、pip install等,用于安装相关库和运行Openvoice_app.py脚本。该图片与上文提到的在Colab中运行Openvoice.ipynb代码的操作步骤相关,直观呈现了操作页面及关键步骤,帮助用户了解如何在Colab环境下进行相关操作。

图片展示的是Openvoice项目在Colab环境中的运行页面。页面底部红框内显示“Running on public URL: https://w0308560474846474846.gradio.live”,并有提示“点击此链接运行”。该图片与上文提到的“等待执行完之后,点击下方的链接进入操作页面”相呼应,是进行声音克隆操作时,获取并点击进入操作页面的指引,帮助用户完成后续步骤。

等待执行完之后,点击下方的链接进入操作页面。

图片展示的是OpenVoice操作页面,页面上方有MyShell和OpenVoice的标志,下方是对OpenVoice的介绍,提到这是一种多功能即时语音克隆方法,仅需一个参考音频剪辑,能克隆语音风格等,还支持多语言。结合上下文,在声音克隆步骤中,等待在Colab环境执行完相关操作后,点击链接进入此操作页面,在页面中文本提示部分输入要讲的文案,参考音频部分上传原始音频来进行声音克隆。

然后文本提示部分输入要讲的文案,参考音频部分上传原始音频。

图片展示了OpenVoice进行声音克隆操作的界面及步骤。左侧是输入界面,有“Text Prompt文本提示”“Style风格”“Reference Audio参考音频”等选项,下方有“Record from microphone”按钮。右侧是文件选择界面,显示了“SandraNavid”文件夹,其中“SandraNavid_01.mp3”被选中。图片中红色箭头指向“上传原始音频”处,表明操作步骤为点击上传原始音频文件。该图片与上下文介绍的OpenVoice声音克隆操作流程相关,直观呈现了上传音频文件的环节。

点击 Send 之后,几分钟声音就克隆完成了。

图片展示了OpenVoice平台的界面,用于声音克隆。界面中包含Text Prompt文本输入区域,示例文本为“今天天气好,我们一起去吃火锅吧。”下方有Style风格、Reference Audio参考音频、Use Microphone使用麦克风等设置选项,当前Style为default,默认,参考音频为“demo_speaker1.mp3”,使用麦克风选项为false。界面右上角显示“Get response successfully”(获取响应成功)。该图片与文档中介绍Openvoice声音克隆功能的内容相关,直观呈现了操作界面。

和刚刚刚 Elevenlabs 生成的效果对比,很明显 Elevenlabs 的要清晰一些,而且还原度也更高。

3)形象克隆:Video retalking

https://replicate.com/cjwbw/video-retalking?prediction=gr6m2ptbqyvxcbwdfrlq6j7gae

图片展示的是Video Retalking项目界面。左侧Input区域有“Form”“Node.js”等语言选项,下方“face*”文件框内显示一张带有美国国旗背景的女性面部图像。右侧Output区域上方有“Preview”“JSON”选项,下方是同样背景的女性面部图像,但面部表情与左侧图像不同。该图片与文档中“形象克隆:Video retalking”部分内容相关,用于说明上传形象后进行视频形象克隆的效果展示。

上传形象

图片展示了Video retalking平台的上传形象界面。左侧界面有“Input”区域,可选择不同编程语言,下方有“Drop a file or click to upload”区域,显示“PREVIEW - SANDRA NAVIDI”及一张外国女性照片。右侧是文件选择窗口,显示多个视频文件,其中“SandraNavidi.mp4”被红色箭头指向。该图片与文档中“上传形象”步骤相关,直观呈现了上传视频文件的操作界面及文件选择情况。

上传声音

图片展示的是Video retalking网站界面,用于上传声音进行形象克隆。界面上方有“Explore”等导航选项。左侧是“Input video file of a talking head”区域,下方有“Input audio file”区域,提示避免特殊符号。右侧是文件选择窗口,显示多个视频文件,其中“视频 - 一个.mp4”被红色箭头指向。该图片与上下文“上传声音”内容相关,直观呈现了上传声音操作的界面及文件选择情况。

点击 Run,开跑大概 6 分钟左右。

图片展示的是OpenVoice克隆真人数字人的界面。左侧Input区域有“Face”“File”“Audio”“HTTP”“Cog”“Docker”等选项,下方是上传视频的区域。右侧Output区域显示了克隆出的外国美女形象,其面部表情与输入视频中的人物相似,下方有“Download”“Share”“Report”按钮,右侧还有“下载”“预览视频”“删除视频”选项。该图片与文档中介绍Openvoice声音克隆步骤的内容相关,展示了克隆效果及操作选项。

如果出现类似下图中失败的情况,建议缩短视频时长。

图片展示的是Openvoice在声音克隆过程中出现的预测失败问题。上方显示“Prediction failed”及原因,可能是内存不足(exitcode -9)。下方是生成该结果的时长(13.26分钟),并有“Tweak it”“Share”“Report”按钮。最下方是详细的Traceback信息,指出在“runner.py”文件中“_predict”函数处发生FatalWorkerException错误。该图片与文档中声音克隆步骤相关,直观呈现了克隆过程中遇到的技术问题。

好,折腾了这么半天,其实就是要这个视频。接下来我们上传到 Heygen 里面进行授权。

图片展示的是Heygen网站中“Create Instant Avatar”页面的“Upload”环节。页面提示需上传一段按照给定脚本朗读的短视频,下方有一个正在播放的视频示例,视频中是一位女性在讲话。页面底部有“Upload Again”和“Submit”两个按钮,其中“Submit”按钮被红色箭头指向。该图片与上文提到的将授权视频上传到Heygen进行授权的内容相呼应,展示了上传授权视频的具体操作界面。

第五步:提交等待

图片展示的是在5分钟内创建即时头像的提交界面。画面中显示“Great job! Almost There”及“干得好!快放了!”字样,下方有头像名称、性别、模式等填写框,以及Hayvan Account Email等邮箱填写框。画面右下角有“Submit”提交按钮,旁边显示“Your Footage is Submitted”及“您的视频提交成功!”字样。该图片与上文提到的数字人克隆最后一步提交并等待的内容相关,直观呈现了提交界面及成功提交的提示。

最后一步,提交并等待。数字人克隆将开始,进度条达到 100% 时,代表克隆完成。

图片展示的是HeyGen平台的My Avatar页面,处于“Instant Avatar”选项下,显示了三位数字人形象。左侧是SandraNavidi,进度为4% Ready;中间和右侧均为Joshua HeyGen CEO,中间的数字人有“Demo”标识,右侧有“Demo Finetune”标识。该图片与文档中“最后一步:提交并等待”内容相关,直观呈现了提交后数字人克隆的进度及部分数字人形象,帮助用户了解克隆进展及结果。

然后就可以在左边头像库中找到自己刚刚克隆的形象,声音也可以选择自己的。接下来使用方法和之前讲过的内容一模一样了,输入自己想要去讲的文案,让数字人开口讲出。

图片展示的是HeyGen平台中数字人克隆界面。左侧有头像库,可选择“My Avatar”等不同头像。中间是视频预览区域,显示一位女性形象,下方有“Text Script”和“Audio Script”输入框,以及播放脚本按钮。右侧有“Speed”调节条,可调整语速。该图片与文档中“最后一步,提交并等待。数字人克隆将开始,进度条达到100%时,代表克隆完成”的内容相关,展示了克隆完成后在平台中的呈现状态。

提交之后,下载原视频即可。

图片展示的是HeyGen平台中视频页面。画面中显示一个外国女性形象,下方有视频播放进度条。右侧有“Download Original Video”选项,可下载原视频,下方还有“Edit as New”“Get Video ID”“Trash”等操作按钮。该图片与文档中“最后一步,提交并等待。数字人克隆将开始,进度条达到100%时,代表克隆完成。然后就可以在左边头像库中找到自己刚刚克隆的形象,声音也可以选择自己的。接下来使用方法和之前讲过的内容一模一样了,输入自己想要去讲的文案,让数字人开口讲出。提交之后,下载原视频即可”上下文对应,直观呈现了下载原视频的操作位置。

⚠️注意:因为目前 Heygen 增加了动态验证功能,以上方法已经失效。

图片展示的是HeyGen平台克隆形象时的录制界面。上方提示需录制一段视频,阅读指定脚本。下方有语言选择框,当前选中“中文”。脚本内容为“我,________,特此授权HeyGen使用我的影像资料来创建HeyGen平台上的HeyGen虚拟形象。(你将需要在最后读取一个简短的通行码。)”。画面中显示录制者面部被模糊处理,下方有摄像头和麦克风选择框,以及“Preview Script”按钮。该图片与文档中介绍HeyGen克隆形象需本人录制相关,展示了录制的具体操作界面。

图片展示的是HeyGen平台克隆形象时的录制界面。画面中显示录制时间为00:20,下方文字为“我,lisa,特此授权HeyGen使用我的影像资料来创建HeyGen平台上的HeyGen虚拟形象。出于安全目的,这是密码:EGYC”,其中“这是密码:EGYC”部分被红色框突出显示。该图片与文档中介绍HeyGen克隆形象需本人亲自录制,并增加动态密码的内容相关,直观呈现了录制时的授权及密码提示情况。

现在在 Heygen 里面克隆形象,必须得本人亲自录制,因为增加了 【动态密码】,每次录制都会变化。 所以上面这种方法已经失效。(2023年2月1日)

不过没事,替代产品我也帮你找好了。

飞影数字人 | 对标 Heygen

https://flyworks.ai/login 国内环境就能访问。

图片展示的是飞影数字人平台的登录界面。界面上方有“手机号登录”和“密码登录”两个选项,当前选中“手机号登录”。下方有输入框,分别提示“请输入11位手机号”和“请输入6位验证码”,并有“获取验证码”按钮。最下方有勾选框,提示“我已阅读并同意《用户协议》与《隐私条款》”,以及一个紫色的“登录”按钮。该图片与文档中介绍飞影数字人平台的内容相关,展示了其登录操作界面。

120 元 30 分钟,合下来 4 块钱 1 分钟。

图片展示了Heygen平台的订阅价格信息。左侧为单月订阅,价格120元/月,可获赠18000积分,免费复制数字分身,部分数字人免费,部分声音免费,有“立即支付”按钮。右侧为年度订阅,价格115元/月,同样可获赠18000积分,免费复制数字分身,部分数字人免费,部分声音免费,也有“立即支付”按钮。该图片与文档中介绍Heygen平台收费情况的内容相关,直观呈现了不同订阅周期的价格及权益。

有形象克隆,声音克隆,关键还有邀请奖励,邀请码:CBsihpLqOWq(好友成功支付后,你和好友分别获得赠送积分),这个懂的都懂吧?

Heygen 前期都可以通过邀请来白嫖,后面就不行了,得花钱。

图片展示的是HiFly平台的数字分身功能界面。左侧有“数字分身”“声音克隆”“视频微课”“作品管理”“我的邀请”“个人中心”等选项。右侧上方是“我的数字分身”区域,有“快速获取”按钮,下方显示一个女性形象。下方是“公共数字分身”区域,展示了四个不同场景下的女性形象,背景有红色装饰和“新年”字样。该图片与文档中介绍HiFly平台数字分身功能的内容相关,直观呈现了平台的数字分身操作及效果。

克隆也很简单,上传视频,勾选同意即可形象复刻,不需要其他的东西,懂了吗?

图片展示的是Heygen平台创建形象时上传视频的界面。界面上方有“上传视频”和“形象复刻”两个选项卡。中间区域显示视频名称为Lisa,下方有视频预览窗口,视频时长2分46秒。底部提示已使用中国话(北京口音),并有“重新上传”和“提交”按钮。该图片与上下文紧密相关,直观呈现了上传视频进行形象复刻的操作步骤和界面情况。

这是上传素材所需要的要求。

图片展示的是视频制作的相关要求。要求包括:不要使用多人视频;保证人脸宽度占整体宽度1/4以上;人脸不过于夸张且不出屏幕;面部特征清晰;上传视频分辨率在360p - 3840p间,建议720p或1080p;视频长度5秒 - 30分钟。下方还配有错误示例,分别是多张人脸、人脸手工、细节问题、检测不到人脸的图示。该图片与上文提到的上传音频等待制作完成相关,应是在说明制作视频时对上传视频的要求。

不过这个平台文本驱动声音内置的都是用的中国声音,做不出外国人讲中文的强调。所以还是要用 elevenlabs 克隆好声音再上传,这样效果会更真实。

图片展示的是Heygen平台创建视频的界面。左侧有“我的数字人分身”及多个分身头像,右侧上方有“高级选项”“生成生成”按钮。中间部分有“生成语音”按钮,下方是作品名称输入框、语音播放条和“重传上传”“提交”按钮。该图片与文档中上传音频制作视频的内容相关,直观呈现了上传音频后在Heygen平台进行下一步操作的界面情况。

上传完音频等待制作完成。

图片展示的是Heygen平台中视频demo生成界面。界面上方有“文本驱动”和“音频驱动”两个选项卡,当前选中“音频驱动”。中间显示“视频demo生成中!”及“新的数字人驱动视频预期会在5分钟左右生成完成,可在作品管理中查看”字样,下方有一个蓝色的“期待”按钮。该图片与文档中上传音频等待制作完成的内容相关,直观呈现了视频demo生成的当前状态。

看看效果。

第六步:剪辑视频(剪映)

最终剪辑部分可以参考之前的文章,步骤基本一模一样。

图片展示的是剪映软件界面,用于视频剪辑。画面中显示视频时长为1分20秒,有时间轴和剪辑轨道。左侧是视频预览窗口,显示外国美女讲中文的内容。右侧是视频信息栏,显示视频标题、时长、分辨率等信息。底部有多个剪辑工具和效果选项。该图片与文档中“第六步:剪辑视频(剪映)”的内容相关,是剪映成片制作的参考示例。

可以点击下面👇【剪映成片制作】的标题查看。

图片展示了剪映成片制作的步骤,其中“4)剪映成品制作”被红色框突出显示。画面右侧是剪映软件界面,左侧有数字人视频,右侧是数字人形象。该图片与上下文紧密相关,上下文提到最终剪辑部分可参考之前文章,步骤一模一样,并有“【剪映成片制作】”标题,此图直观呈现了剪映成品制作中导入数字人视频这一操作,辅助说明剪辑视频的具体操作流程。

<synced_reference src-block-id="O9JcdNgQMsj7NObqjfac4r0tn8e" src-token="CEGqd7uPpoNVVqxxGR9cdmaznBb"></synced_reference>

视频发布

前几天 OpenAI 发布了 GPT Store 的时候,我用这个方法制作了一条视频,虽然播放不多就 8000+,但是增加了 161 个关注,这类视频涨粉还是比较不错的。

图片展示的是一个视频号发布的视频在数据中心的播放、互动及分享数据。播放数据方面,播放量8086,完播率9.11%,平均播放时长17.22秒,完播率59.56%;互动数据包括91个点赞、105个收藏、19条评论、161个关注;分享数据有150次转发,0次设为铃声、状态及朋友圈封面。综合互动率为6.37%。该图片与上下文介绍的视频发布数据情况相关,直观呈现了视频发布1小时后的各项数据表现。

这个视频号是新号,刚发第一个视频 1 小时后的数据,嘎嘎涨粉。评论区和私信一堆人要求给介绍对象,指不定还能带出来一条跨国相亲产业链,哈哈。

图片展示的是抖音上一条新号发布的第一条视频。画面中是一位外国女性,她有着金色长发,穿着黑色条纹西装,佩戴着项链。视频下方有文字“这样才能找中国帅哥当老公”,并配有多个话题标签,如#俄罗斯 #中俄友谊 #俄罗斯姑娘等。视频点赞数为9020,评论数26,分享数409,获赞数73。该图片与上下文介绍的抖音新号发布第一条视频的数据相关,直观呈现了视频内容及互动数据。

图片展示的是抖音新号发布视频后的关注情况。上方显示点赞数786、评论数70、关注数150。下方列出8位关注者,包括陈福超、大力、赵学生、李俊、杰、马运安、行者、未来更好,每位关注者下方都有“谢谢”回复。该图片与上文提到的抖音数据及新号第一条视频发布后的情况相呼应,直观呈现了新号发布视频后的关注增长情况。

图片展示的是抖音新号发布第一条视频的评论区。评论区有70条评论,点赞数为786。评论内容多样,如“美女你说得没错,你就教教你那些姐吧!”“介绍两个我孩子好吗”“姑娘你说的对欢迎你们快来吧我们这小伙等着你们到来哪”等,还有的评论表达了对视频内容的认可。图片与上下文紧密相关,直观呈现了新号发布视频后的观众互动情况。

下面这是抖音的数据,也是新号第一条视频。

图片展示的是抖音新号第一条视频的评论区。评论区显示有52条评论,点赞数为431,收藏数为18,浏览量达1.1万。评论内容多样,有用户表示“过来慢慢就会了”,也有用户帮忙寻找俄罗斯姑娘,还有人建议用手机来译文译,甚至有人感谢并请求帮忙找俄罗斯老婆。这些评论反映了新号发布视频后,用户对其内容的多样反应。

图片展示的是抖音新号第一条视频的评论界面。上方显示评论52、赞431、收藏18、浏览1.1万。下方评论区有多个用户头像及昵称,如“省心”“满山红”等,部分用户头像为默认灰色圆形头像,部分有彩色图案。每个用户头像右侧有“回关”按钮,右侧还有“...”图标。该图片与上下文介绍抖音新号第一条视频数据的内容相关,直观呈现了视频的评论情况。

下面这是快手的数据,也是新号第一条视频。

图片展示的是快手平台上的一个外国美女讲中文视频。画面中,一位外国女性正对着镜头,背景为室内环境,墙上挂着画作。视频下方有评论区,显示“冰 戎”等人的评论内容。视频下方还标注了相关话题标签,如“俄罗斯姑娘”“找中国男盆友需要会中文吗”等。右下角显示该视频有1.4万浏览量,并有“上热门”按钮。该图片与文档中介绍外国美女讲中文视频制作教程的内容相关,展示了视频的实际呈现效果。

图片展示的是快手平台上的一个视频界面。视频中是一位外国女性,她穿着黑色上衣,背景为室内环境。下方评论区显示该视频点赞1769、收藏170、浏览1445。评论内容多为“有道理”“俄姑娘喜欢你、咋办”等,还有人询问“怎么联系你呀?”。该图片与文档中介绍外国美女讲中文视频制作教程的内容相关,展示了视频发布后的互动情况。

这就是最近比较火的外国美女讲中文的视频的制作教程。当然,有了这个办法之后,我们不仅仅可以做文章开头介绍的俄罗斯美女,这时候你就可以做全球任何国家的美女了。讲对应国家的文化,带对应国家的特产产品都可以轻松变现。

另外也可以做这种节日祝福类的视频,最近临近春节,可以让外国人讲我们的中国文化,卖年货。

好了,以上就是本教程的所有内容了,如果有收获,请记得去星球帮元峰点个赞呀。