Sora再遇劲敌?Luma视频生成打造大片既视感,全网已刷屏!| AI评测
作者 | 麦飞
编辑 | 张洁
最近的视频生成领域真是换挡提速了。
最近发布且对标Sora的就有快手可灵、Vidu、视界一栗YiSu等多位玩家,日前美图版Sora也曝光了最新AI短片。
如今,又一匹黑马选手Luma前来炸街,火速推出了Dream Machine,让Sora的竞争者又添一名。
(Luma官方宣传视频)
“头号AI玩家”也在首发当日就兴冲冲地登上Dream Machine,准备领略一番,但奈何服务器负担太重被挤了出来。彼时大洋对岸可是深夜,Luma的热度不言自明。
不得不说免费的东西就是香,何况Luma这回还是真香。
(写实风)
(动画风)
(超现实)
总体上说Dream Machine的生成质量还不错,比较逼真地还原了北极熊的行走姿态。但它对雪地边缘的晕染还不够自然,并且试图以这种方式把脚印的问题蒙混过关。
接下来试试更复杂的提示。我试着让它生成一位衣袂飘飘的少女,附带要求周围的环境配合风进行运动。
提示:一个妙龄少女站在海边,穿着纱质白裙。海风吹来,浪花拍打着海岸,女孩的袖子和裙摆随风飘动。远景,亚洲人,披肩发,写实风格。
相比第一个任务,这次明显渲染规模更大,任务更多,但Dream Machine完成得依旧不错,基本实现了浪花碰撞、发丝波动等效果,并捕捉到了人物向大海喊话的镜头。
而且它还挺细心的,连人说话时颧骨处肌肉发力的细节也考虑到了。
不过,人物头上游走的布料还是有点混搭,一会儿像头纱,一会儿像肩上的丝带。可能是Dream Machine一次性有了两个灵感,但无法做出恰当的取舍。
我们继续丰富提示的描述,以测试Dream Machine是否能驾驭复杂的光影效果,比如类似王家卫式的伦勃朗光。
提示:夜晚的都市街头,一位身着西装的男士正漫步在繁华街区。街道两侧,一系列精致的橱窗展示着最新的时尚单品。柔和的灯光透过玻璃照射在商品之上,和远处的霓虹灯交相呼应。请据此展现都市街头的夜间光影。
从视频来看,Dream Machine对光影的驾驭还是值得肯定的,但是它在情节逻辑性上的表现直转急下了。具体来说,画面中的男主角不仅多次变脸,向他走来的服务员也能穿人而过,多少有点阴间。
“头号AI玩家”还注意到,不少X平台上的用户都赞扬Dream Machine的拍摄角度很专业,镜头模拟几乎达到电影级水准。因此,我们不妨也用它来模拟下摄像机的抖动效果,看它处理的如何。
提示:大雨过后,一个小孩子穿着凉鞋在公园的步道踩水。请在视频中加入轻微的手持抖动效果,就像随手记录的一样。
由于视频生成的过程很像抽盲盒,在点开视频之前我多少有点忐忑。不过点开以后就没事了,因为悬着的心终于死了。
视频中小孩子奔跑的速度,不禁让我想起电影《功夫》中周星驰和包租婆你追我赶的名场面。而且这个国外的小朋友,也轻松地掌握了失传已久的轻功水上漂。
对此我只能说,Luma在这个视频中展现的功力相当初学者。
图生视频
Luma比较差异化的地方是它支持图生视频,这也是它领先于可灵的地方。
在X上围观后,“头号AI玩家”发现Luma对图片续写的审美还不错,对图片原有场景和风格的保持度也挺好。于是我们抓紧上手试了试,看这个功能还能整出哪些活。
首先,我们喂给它一张经典表情包——张译吃面条。
(生成后)
最后,我们还可以用Dream Machine假装live图。这样一来就算是P过的图也可以有Live模式了,主打一个真假难辨。
各位或许在网上看到了不少用Dream Machine制作的长视频,这些视频背后的幕后推手,很多是AI创作者或电影制作人。
我们也把这段视频放出来,给大家感受一下。
UTA代表电影导演Dave Clark也是如此,他不仅在第一时间展示了一段1分31秒的视频,还大方揭秘,称作品只用到了图生视频功能。推文最后,Clark贴心地附上了Luma地址,邀请网友一同参与。
从公关的角度来看,Luma AI很聪明。
它提早邀请了多位知名KOL联合内测,并在KOL发布测试作品后积极转发,提升了Dream Machine的线上影响力。
不过,也不是所有人对Luma都买账。这里咱们就要书接上回,说到开头提过的利用率问题了。
X平台博主Abel Art在参与内测后也发布了相关视频,但他在另一篇推文中表示,自己为完成这条1分10秒的视频,一共花了两三天时间,大概迭代了633张图。如果刨开其中随机的150张图不算,这个视频也要消耗掉500张图左右。
为此,Abel Art自费了500美金开通Dream Machine的“Premier”版本,以获得能连续生成2000张图的权限。与之相比,下一档的“Pro”版本就只允许迭代400张了。
聪明的你如果做完了这道数学题,一定已经得出这个视频的成本共计125美金,也就是500美金的1/4。而Abel Art表示,这正好是租用一天电影镜头的价格。换个低情商的方式来说,Dream Machine费时费力。
然而让人惊讶的是,Luma居然连这一步都料到了。它甚至一早就在官网里诚恳表示:私密马赛用户酱,我们现阶段还不够好,出现以下四个问题请见谅。
a stylish woman walking down a Tokyo street filled with warm glowing neon and animated city signage, wearing a black leather jacket, a long red dress, black boots, and carrying a black purse, with sunglasses and red lipstick. The street is damp and reflective, creating a mirror effect of the colorful lights, with many pedestrians walking about.
(Dream Machine)
(可灵)
「头号AI玩家交流群」进群方式:添加微信“banggebangmei”并备注姓名+职业/公司+进群,欢迎玩家们来群里交流,一起探索见证AI的进化。
欢迎分享、点赞、在看
一起研究AI