查看原文
其他

最强实时同步表情的AI,完全迁移脸部动作——快手LivePortrait,又一款王炸!

赤辰 赤辰AI实操记
2024-10-08

同学们好,我是赤辰,全网最早专注写AI项目教程的博主,本期是我们第235期AI项目教程;所写的AI项目案例和教程均为赤辰团队全网原创首发,洗稿侵权必究!



家人们!快手这两个月在AI圈算是火力全开了!


可灵AI的文生视频和图生视频功能热度还在不断上涨,最近快手的视觉团队,推出了一个实时的脸部动作迁移的开源项目——LivePortrait,一经推出就在github上狂澜7.9K星标。



毋庸置疑!又一款火出海外的国产之光AI开源项目!当然!俺看中的还是它拥有短视频爆款制造机的巨大潜力,本期就来给小伙伴们讲讲LivePortrait的技术生成效果有多惊艳!



Live Portarit是一款最新的面部动画生成模型,可以将一段视频中的人物面部动作迁移到图像角色身上,能够精确控制眼睛的注视方向,和嘴唇的开合动作,效果非常精致自然


还可以处理多个人物肖像的无缝拼接,将不同的人物特征合并到一个视频中,确保在多个动态人物之间过度平滑,不会产生突兀的边界效果,可以说非常震撼。



看上面两个GIF动图,相信大家也有被惊讶到,如此生动有趣的AI视频效果,用它来做搞笑视频且不是妥妥涨粉神器。


基于它,用户可以准确控制一个角色眼睛、唇部、眉毛、甚至面部肌肉的运动,这将对影视/游戏/动画制作、换脸、数字人制作带来重要影响。


Huggingface 在线试玩:

https://huggingface.co/spaces/KwaiVGI/LivePortrait


ComfyUI 插件: 

https://github.com/kijai/ComfyUI-LivePortraitKJ


我们现在可以在Huggingface上免费体验Live Portarit,为自己喜欢的角色加上搞笑表情,包括小猫、小狗这类的图片也可以控制其表情。



由于Live Portarit是开源模型,所以ComfyUI也进行了跟进支持,安装 ComfyUI-LivePortraitKJ插件后,即可在本地免费使用 Live Portarit 的面部表情迁移功能。


这里也简单演示Huggingface上Live Portarit视频制作流程。


打开Huggingface链接,我们先上传一张静态图片,接着上传一个1:1尺寸的脸部动态表情视频。



比如我上传的是比伯的图片,动态视频选择系统自带的,点击Animate提交生成即可。



下方会显示生成的视频,以及对比效果。



来看看生成的效果视频,非常炸裂!


操作非常简单,那怎么用呢?搞笑视频、段子、绘声绘色的唱歌;都能实时同步!技术现在越来越强,流量就靠脑洞了~接下来,抓紧先用起来搞流量


OK,好了,今天的内容就到这里,感谢的小伙伴,赶紧去试试吧!我们也会陆续推出AI视频的更多教程和玩法!


同学们学会了没?学会了或有启发,别忘了给我点个赞,在看,转发,三连~爱大家!

新一期的“AI视频直播带货训练营”已经开营小红书商单全域分发训练营,AI克隆人带货训练营,AI爆款壁纸变现,进行中,假如同学对更多AI案例感兴趣,学习更多AI技能和项目实战变现等等,可加入圈咨询。

往期精彩教程:

用AI克隆“贾斯汀·比伯”翻唱《爱很简单》,爆款作品教程,奶奶看了都会

媲美阿里“EMO”!自定义对口型短视频工具Hedra,完全免费!(附教程)

牛逼!用AI做趣味英语速读卡片,起号40天,粉丝暴增10.3万+(附玩法教程)


END

继续滑动看下一个
赤辰AI实操记
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存