拳打 OpenAI,脚踢斯坦福,中国力量,引领视频 AI 新风潮!
小伙伴们,我是清风,祝大家节日愉快哟!
端午节,最重要的是高考,我用GPT-4o做了高考数学卷、写了作文,结果冰火两重天
这两天最热的AI,是快手新推的“可灵”视频创作神器,开放申请了,直接和 Sora 叫板。开始以为是标题党,没想到效果不错!
刚融资8000万美元,有斯坦福背景的Pika生成效果,和可灵比起来就是个弟弟
下面这两个视频是可灵生成的
是不是很眼熟?妥妥的《角斗士》!
还有沙滩美女,是否想起速度与激情5 盖尔·加朵的某个镜头?
快手可灵不光在国内炸了锅,老外们也超激动,都抢着试手呢:
还有更酷的,硅谷大腕儿 Justine Moore姐,就是那个投过 Facebook、Airbnb 的投资大佬,特意做了个超实用的图解攻略,教老外们怎么搞定中文申请页面,真心接地气!
看过无数可灵生成的视频后,笔者认为:
快手可灵的视频生成效果已经全球第二,质量和美感上略输给 Sora,但已经与Sora处在同一个档次!远超第二梯队的 Pika(斯坦福创业团队)、Pixverse、即梦(字节跳动)、Runway、Krea、北大的Open Sora、清华vido
关键一点,“可灵”不是光说不练的假把式,现在普通老百姓也能上手玩了,只要申请就行,这点远远超过了画饼充饥的 Sora!
下面为你详细介绍:
什么是视频 AI?
视频 AI 是指利用人工智能技术生成视频。
用户输入文本、图片、音频、视频、摄像头实时拍摄,AI 则将上述内容自动转化为视频,实现自动化的视频创作过程
有哪些视频 AI?
在 2023 年,有 Pika、Pixverse、Runway,2024 年有清华 Vidu、字节跳动的即梦
但最有名的是 OpenAI 公司于 2024 年 2 月公开的 Sora,它采用了新的技术架构 Dit,效果远超同行,不客气的说,那就是降维打击
Sora 发布后,北京大学也推出了类似的项目,叫什么“Oppen Sora”,效果却不太理想。
OpenAI 的美女 CTO 米拉在接受某媒体采访时,现场演示Sora,并透露,Sora 最早会在 2024 年 8 月推出,最晚不会超过 2024 年底。目前,Sora 只面向一些导演、艺术家和电影工作室开放,普通用户想要体验很难。
而快手可灵模型就亲民多了!
快手可灵采用了与 Sora 相同的底层Dit技术架构,还使用了很多自研技术。它不仅能在几分钟内生成媲近似Sora 的短视频,关键是现在普通用户申请即可使用!
做好一个 AI,算法、数据、算力、使用(商业化)场景,缺一不可
快手可灵一个都不缺!
效果:将用户丰富的想象力转化为具体的画面,虚构真实的世界。。生成大幅度合理运动的视频,准确刻画复杂、大幅度的时空运动 速度:可灵平均生成时间仅需三分钟左右 时长:可生成长达 2 分钟的视频,帧率高达 30fps 质量:生成 1080p 分辨率的电影级视频,无论是宏大场景还是特写镜头,都能够生动呈现 场景:支持自由输出视频宽高比,满足不同场景的需求 数据;快手作为头部短视频头部公司,拥有丰富的视频资源,尤其符合国人审美
效果展示
1、吃播 AI 的扛把子
可灵啊,那可真是个吃货界的直播高手!
不管是啃汉堡
大口塞饺子
还是围炉涮火锅、吸溜着吃面条,就没有它不拿手的。简直是吃遍天下美食,无所不能吃!
2、Sora 对比
咱们来直接对比一下可灵和 Sora 的视频效果吧!
感觉主体的一致性和物理模拟差不多,美学差别很大
以下视频来自大神歸藏(guizang.ai)
第一段视频是无人机拍摄意大利海岸边的教堂
两个模型在镜头移动、光影效果、视频画质、细节刻画方面都表现不错,对提示词的理解能力也很强。不过,Sora 在建筑阴影和真实场景还原方面略胜一筹。
第二段视频是咖啡杯中的海盗船
Sora 生成的视频明显更加精致,海浪的运动也更加符合规律,细节方面也更真实,比如海盗标志和船帆飘摆的动作。
第三段视频是雪地中的猛犸象
可灵模型能够还原提示词中提到的太阳,并生成真实的阴影效果,但对猛犸象的刻画则显得不太真实。
网友集锦
下面视频来自 orange.ai
下面视频来自 B 站用户 卡尔的AI沃茨
总结:
说起来,快手的可灵在效果上虽然没完全赶上Sora那般精致美观,但也是稳稳站在了同一水平线,和后面的第二梯队拉开了不小差距。
可灵的速度绝对是个亮点,平均三分钟搞定一个视频生成任务,这背后是基于快手海量视频内容的训练。目前主打文本转视频,听说图像转视频也快安排上了。
网友们纷纷点赞,从发布到公测,可灵只用了短短48小时,这速度比SOra快多了。而且,它因为针对性地采用了亚洲人脸作为训练样本,对中国用户来说更加接地气。
尽管可灵还在完善中,但它的出现无疑给SOra加了把火,推动整个领域的前进。同时,它也提前让大伙儿尝鲜了AI视频生成的乐趣。
最棒的是,你现在就可以免费申请,亲自上手这个前沿小工具,感受一下科技的魅力!
— 完 —
点这里👇关注我,记得标星哦~