查看原文
其他

当AI来拍MV,画面简直流鼻血……

2018-01-15 二岳初 读芯术

科技时代,我们更加怀念温暖邂逅的时光

后台回复“想要”,得到近期有温度的推荐

大家好,今天的文章内容能听能看,而且非常嗨皮—— SONY CSL研究实验室发表了两首由AI编写的流行歌,Daddy’s Car是一首朗朗上口、曲调明媚,让人联想到披头士的歌曲。是不是很令人惊艳呢?


全文共2213字,预计阅读时长2分钟



身在美国的贾老板最近又成了话题人物。


你以为是那个乐*贾老板?NO!这个老板名叫贾斯汀·汀布莱克(Justin Timberlake)。


可能是AI的活力太强,开始进军娱乐界,这不,最近贾老板用AI技术拍了个MV。


这个MV随即引发了热议,就连lan Goodfellow等顶级AI学者,都在Twitter上频繁谈及贾老板和他的最新作品。



这究竟是一个怎样的MV呢?


在MV的片头,便交代了故事发生的时间北京:2028年,马来西亚的首都吉隆坡。


在大家翘首企盼的时候,贾老板上场了,但是和观众们打完招呼,他又退了出去。


咦?难道主角不是他?


在大家疑惑的目光中,一个机器人闪亮登场。



上来就给小姐姐献殷勤,帮忙搬箱子。



还能罚任意球!(是不是可以组成一个足球队,这样中国男足有望出线世界杯!)



旋转,跳跃,我闭着眼~



看这帅气的舞姿,是不是瞬间完爆贾老板?



这是在打醉拳,吐烟卷?果真风流倜傥还得数AI……



和小姐姐一起尬舞,完美合拍~


720°高速旋转。我是谁,我在哪……



能感受到我的心跳吗,我的心,在为你闪耀……


对面的朋友你们好吗



你以为表演就这种程度了?不不不,高潮马上就来了。



在众多性感五班的簇拥下,这个机器人把一名舞者放倒在台上,并且……打开了她的双腿……(贾老板那是什么表情……)



还有更劲爆的!



……此处为不可描述的动作


开车开得猝不及防……



最后,所有的舞伴围成圈躺在机器人的四周。红色的光束从机器人的心脏以及手腕处射向全场,震惊四座。


是不是动图已经不能满足大家了……  那我们来点视频……


https://v.qq.com/txp/iframe/player.html?vid=r0025p4rssi&width=500&height=375&auto=0

Justin Timberlake《Filthy》


其实贾老板的MV并不是全球第一个使用AI制作的,早在前段时间,李宇春的新专辑《今天雨,可是我们在一起》MV便采用了AI技术。


话不多说,先放个视频先睹为快!


https://v.qq.com/txp/iframe/player.html?vid=z00240s4nyh&width=500&height=375&auto=0

李宇春《今天雨,可是我们在一起》


在最新3D人脸面部表情捕捉技术的支持下,李宇春的这支最新MV将电子曲风的浪漫情歌与尖端科技的人工智能完美融合,优质音乐与突破性的科技创造出的前所未有的创新体验。



这支MV就算在普通人看来,都有不少惊艳的地方,首先是电子曲风的独特效果,使得李宇春的声音变得更有特色,声音进入大脑之后,能够给听众带来婉转回旋的效果。再来就是搭配着颇有表现力的MV,酷炫且张力十足,有一种不明觉厉的感觉,整体效果非常不错。



不少粉丝表示,去年英特尔为Lady gaga在格莱美颁奖典礼上提供的黑科技已经够厉害了,这次的人工智能MV则是完完全全的惊艳。


不过,外行人看热闹,内行人就得看门道了。李宇春这支酷炫MV的背后,是英特尔强大AI技术的展现,要换成别人来做,估计这事还成不了。


作为音乐人,李宇春想要在MV中把自己的内心世界、情绪等内容,过去想要做到这样是非常有难度的,因为普通的MV以特效、剧情、大场景做陪衬,并不能将音乐里更加深层次的含义表达出来。


不过,搞技术的团队总会找到解决办法——3D人脸面部表情捕捉技术。具体是如何做到的呢?


首先,由拍摄MV的导演选用不同的情绪场景去展现李宇春的内心世界,然后,英特尔运用这一技术来完整扫描李宇春的面部,且定位点数高达78个,来记录下每一个微小的细节。同时,这项技术可以即刻实现3D人脸重建,并且实时跟踪头部运动和面部表情变化。



到后期渲染的时候,只需要将这些情绪场景以特效的形式完美地贴合在李宇春的面部就可以了。于是就有了MV中,她脸上各种各样的效果,非常有趣,不会让人觉得突兀或者是不和谐,它们看起来就是像是天然结合。


这项技术其实还有一个非常厉害的地方,它能够节约不少的拍摄时间和工序。过去拍摄普通的MV,想要实现各种角度的拍摄与结合,需要使用到多个摄像机,并且设定各种方位进行拍摄,程序复杂,工作量大,耗时高。



而英特尔在做这件事情的时候,就没有使用追踪器,也不需要让摄像机保持特定的角度来进行拍摄。这种技术可以实现画面的无缝衔接,如此一来,不管是导演还是音乐人都能更加专注于画面的设计和创意的表达。


所以,在李宇春这支MV里面,大家才能看到她在情绪和内心世界的表达上变得非常丰富,而不再是像以前那样依靠舞蹈或者道具。英特尔的技术,让这项传统的工作变得不受任何限制。


 

 

虽然李宇春的这支MV仅仅只有4分钟,但是台上一分钟,台下十年功。


首先,专门订制和设计了多个深度学习网络模型,用于对图像进行智能分析和特征提取。然后是有针对性的创建和收集了数十万人脸照片来训练这些模型。这两个环节也就是大家所熟悉的机器学习。而整个MV的拍摄和后期渲染耗时六个月,最终得以将酷炫的特效呈现给大家。


当然,这个事情看起来工作量很大,但是对于AI技术来说,并没有那么复杂。将材料准备好,设置好深度学习网络模型,剩下地它们自己就能解决。



最后是一个简短的MV幕后视频。


https://v.qq.com/txp/iframe/player.html?vid=e05664xvujp&width=500&height=375&auto=0

读芯君开扒


人类似乎已经不能阻止AI的脚步了,前有AI三天创造金属黑音乐大跳钢管舞,后又参与惊艳MV的华丽创作,不得不说AI已经开始全面渗透娱乐行业了,技术手段的发展带来了娱乐体验的提升。


有句话这样说:娱乐是生产力发展的真正力量。而我们的娱乐相较于驾驶和其他,正在和已经交给了AI。技术是驱动娱乐产业发展的根本要素。从报纸到电视,从电脑到手机,从视频到直播……人工智能已经很大程度上改变了人们如何制作、如何分发、如何获得、如何体验和消费娱乐新闻资讯等内容。


在人工智能的热潮当中,全球的娱乐行业正在悄然发生着改变,一场大融合的序幕正在缓缓拉开。


留言 点赞 发个朋友圈

我们一起探讨AI落地的最后一公里


作者:二岳初

参考文献:

https://mp.weixin.qq.com/s/SezH8mt_l0UwQt2EwnjDaw

http://vr.sina.com.cn/news/js/2017-11-02/doc-ifynmzrs6181677.shtml


如需转载,请后台留言,遵守转载规范


推荐文章阅读


让我一次“架”个“构”

AI这么火,科技公司却争着开源,傻吗?

图灵测试,测的到底是什么?

不好意思,我随便“跳一跳”就破万了

AI水军的点评,认出来算我输

别考驾照了!无人车正在派送中

AI开发者们的江湖

无人车出了事故,谁负责?

多年来,我只坚持做到一件事:吃肉

考试季,AI又来辗压人类了

“AI奇点”是个什么鬼?

碉堡了!AI在发展过程中的BUG

国家宝藏+AI,老古董变身活宝

AI不懂艺术?分分钟让你“SHUT UP”

盘点!2017这些世界冠军惨遭无情吊打

表情机器人一笑,我特么就哭了

AI进了直播间,这画风666


长按识别二维码可添加关注

读芯君爱你


您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存