HeyGen5.0来了! 上线实时数字人聊天和视频翻译功能(详细操作指南)
hi,同学们,我是赤辰,本期是我们第156期AI项目教程
家人们!AI真的发展太快了,之前给大家分享过Heygen的详细使用教程,短短6个月的时间内,Heygen又陆续上线了3款强大的功能,分别是视频翻译功能,数字人实时交互功能,AI语音克隆功能,均是最前沿的AI功能。
最近Heygen悄咪咪发布了其全新的5.0版本,这一版本整合了所有功能,为用户带来了更加便捷的体验。新版本在用户界面、视频编辑、实时聊天等方面都进行了全面的升级,以满足用户对于高效、智能的需求。许多粉丝私信让我出一期最新的Heygen操作指南,那么今天火速给大家安排!
本期文章篇幅较长,请耐心看完,必有收获!
1.注册账号
https://www.heygen.com
①点击链接,进入官网,在主页中点击“Get started for free”。
②在登录界面,以选择谷歌邮箱账号登录
进入官网主页后,在左侧栏目中可以看到Heygen有三大板块功能。
这三大功能分别为
接下来会对每个功能详细讲解。
一、Avatar Creation(数字人创作板块)
(1)Video Avatar(数字人创建)
点击“Video Avatar”后,能看到主页上方有三个数字人生成功能,分别:是:Instant Avatar(即时数字人分身)、Photo Avatar(图片开口说话数字人)、Studio Avatar(模版数字人)。
①Instant Avatar(即时数字人分身)
只需要5分钟,使用手机拍摄一段真人出镜的视频,上传至Heygen即可创造一个自己的虚拟分身。Instant Avatar功能内置的翻译工具,支持创建多语言内容。支持口型同步和多语言声音匹配,目前只有会员才能使用这项功能。
点击“Instant Avatar”,页面会调转至视频上传界面,上传视频后,进行实时人脸验证即可完成数字人分身。(目前这项功能可以用国产飞影或硅语替代,因此这项功能只做简单介绍,不做演示)
附:Heygen月会员价格截图,像了解更详细的权益内容,请自行登录官网进行查看。
即时数字人分身-案例视频展示
②Photo Avatar(图片开口说话数字人)
只需一张图片,就可以生成口播视频(面部表情动,身体外型满意动作变化)。
点击“Photo Avatar”,即可上传一张人物图片。
图片上传后,会在“My Avatar”中的“Photo Avatar”展示出来,鼠标移至文件右上角三个点,点击Edit Avatar进行基础编辑。
将视图模式改为“Original”原始尺寸,然后点击“Save as New”保持为最新即可。
系统会在“My Avatar”中的“Photo Avatar”重新创建一个原始尺寸的文件,鼠标点击这个文件。
鼠标移至Create with Al Studio,会弹出两种尺寸:竖版、横版,选择一个尺寸,点击创建视频。
进入编辑界面后,你可以点击画布上的图片,进行移动画面调整合适位置,接着点击导轨栏中的文本,左侧会自动切换为文本编辑框,你可以将文案复制黏贴进来,选择文本语言,当然你也可以上传提前录制好的音频,或者点击进行在线配音,最后点击右上角的“Submit”生成图片开口说话视频。
点击文本语言,系统就会弹出声音选择界面,选择年龄层,性别,语言种类,即可找到心仪的文本声音。
点击“Submit”提交后,系统会弹出积分消耗的界面,继续点击“Submit”提交生成。
生成好的视频,在Al Studio找到,可以点击文件右上角的下载按键。
图片开口说话数字人-案例视频展示
③Studio Avatar(模版数字人)
点击“Studio Avatar”,系统有133种自带人物模板,你可以选择一个与你外型相对比较符合的人物。(数字人模版部分是免费,绝大部分是付费会员才能使用,如左下角带有黄钻图标)
鼠标点击选择一个免费的美女数字人模版
鼠标移至Create with Al Studio,系统弹出两种尺寸:竖版、横版,选择一个尺寸,点击创建视频。
进入编辑界面后,鼠标可以点击画布上的数字人,可以移动到画布合适位置,提示系统左上角会弹出部分功能,其中包括换脸功能,点击换脸小图标,上传图片,选择上传后的脸,系统即可完成换脸功能。
接着点击导轨栏中的文本,左侧会自动切换为文本编辑框,你可以将文案复制黏贴进来,选择文本语言,当然你也可以上传提前录制好的音频,或者点击进行在线配音,最后点击右上角的“Submit”生成图片开口说话视频。
点击“Submit”提交后,系统会弹出积分消耗的界面,继续点击“Submit”提交生成。
生成好的视频,在Al Studio找到,可以点击文件右上角的下载按键。
模版数字人-案例视频展示
(2)Streaming Avatar(实时数字人聊天功能)
HEYGEN结合ChatGPT大语言对话式模型上线了这个实时数字人聊天功能,用户可以创建自己的实时视频聊天机器人,这一功能将为用户提供更多的互动方式,丰富了平台的应用场景。目前仍在测试版本。
点击“Streaming Avatar”,在界面中点击Select Avatar
选择一个数字人模版,当然你也可以即时克隆一个你自己的数字人分身。
点击 Knowledge Base,上传文本,基于GPT对话生成式模型,能快速实现虚拟人对话。
上传大量关于这个角色的对话文本内容,比如性格,说话风格等等,点击Use Default。
系统训练完后,你还可以分享给你身边的朋友,当然你也可以将这个API接入你的小程序软件中,完成一款专属的实时数字人聊天工具。
这个功能应该是最近比较炸裂的功能,基本可以让任何人都可以在线训练一个专属的实时聊天数字人。
(3)Al Voice(AI语音)
这个功能其实是集成第三方语音实现——语音克隆功能,点击Learn More
进入新的界面,点击“Try HeyGen For Free”,目前这个功能还没有完全搭建起来,因此还在测试阶段中,同样也是付费会员才能使用。
二、Video Creation(视频创作板块)
(1)Al Studio(AI视频)
这个功能其实是基于Video Avatar生成后的视频集合点,其实就是之前“My Videos”功能。
(2)Personalized Video(个性化视频)
这个功能可以理解为批量制作视频,导入联系人表单,上传一个视频,视频编辑,随即发送给你想要发送的人。(目前这个功能刚上线,需要付费用户才能使用,因此后续有测试跑通,再针对这个功能出详细的教程。)
三、Video Repurposing(视频转换功能)
(1)Video Translation(视频翻译)
这个工具,不仅仅能翻译视频,甚至还能模仿说话者的语调、调整口形。之前爆火的郭德纲说英文就是用这款工具制作的。之前有专门写过一篇文章介绍过这个功能,还没有看过的,可以点击回看:用这个AI,把视频翻译成30+种语言,丝滑程度,随时能把生意做到全世界!
点击Video Translation,上传需要翻译的视频文件,点击选择翻译语言,如果视频有多人对话,还得选择人数,最后点击“Translate this video!”。
视频翻译一般需要静等5-10分钟,在页面下方,可以查看生成后的文件,点击下载保存即可。
Heygen5.0版本无论是界面设计和功能整合,操作上确实更便捷了。这一升级将进一步巩固HeyGen在数字人领域的遥遥领先地位,为用户提供更加优质的服务,感兴趣的小伙伴赶紧去体验一下吧!
好了,今天的内容就到这。AI小红书商单全域分发训练营,AI俄罗斯克隆人带货训练营进行中,AI爆文写作变现也会长期进行,假如同学对更多AI案例感兴趣,学习更多AI技能和项目实战变现等等,可加入圈咨询。
ok,今天这个玩法大家觉得如何?若同学们觉得内容有趣有启发,记得点赞,在看,转发三连!
往期教程:
太绝了!用AI做合体神兽视频,在TikTok上23天时间涨粉20万,最新玩法教程!
2个月带货佣金3万+,AI数字人视频带货强劲玩法!(附工具合集)
10万+爆款,公众号“小绿书”上发AI美女图文,流量主收益新玩法!
END