一键出片!CG神器Wonder Studio开放公测(附使用教程)
整理自 | 威猫设计、CG世界、今说新语
订、阅 | 010-86092062
今年3月份,AI创作神器Wonder Studio在世界范围内震惊了整个CG圈。
面对Wonder Studio利用AI对传统CG行业颠覆式的操作演示,有的人拍手称快,有的人眉头紧锁,有的人风轻云淡,对传统影视CG制作流程的短期不可替代性,自信满满。不管属于哪种态度,本文就为大家介绍一下Wonder Studio 到底是什么?
01/网站介绍
Wonder Studio是一个AI视频编辑技术,它可以自动地将CG角色动画、光照合成到实景中。它的原理是利用了神经网络和机器学习的方法,来检测视频中的演员的表演,并将其转换为CG角色的动作。它还可以根据视频的环境和光照条件,来调整CG角色的材质和阴影,使其与实景更加协调。
Wonder Studio的特点是它可以在浏览器中运行,不需要安装复杂的软件或使用昂贵的硬件。它也不需要联网或API密钥,只需要上传视频和CG模型,就可以生成结果。它还可以导出各种元素,如动作捕捉、角色通道、透明蒙版、干净画面、相机跟踪等,方便用户在其他软件中进行后期处理。
02/使用流程
首先用户在Wonder Studio中上传格式为MP4或MOV的,长达2分钟的剪辑预览视频。系统会自动检测每个剪辑,在不同剪辑间追踪演员,当在视频的参考帧中识别出需要被替换的演员后,用户可以自己选择一个3D角色来替换他们。
Wonder Studio内置了一系列预设的角色,主要是机器人和卡通形象,同时用户也可以通过Blender或Maya上传自己创建的角色。(格式为.blend或FBX)
※Wonder Studio支持的CG角色模型的多边形面数,需要控制在150万面以内。当然,这个量级的模型已经能够呈现非常精致和逼真的细节了。同时,这些角色模型可以进行面部形状的设定,通过调整面部形状键值来创建各种丰富的面部表情。
此外,还可以为角色设置多达10万根的独立发丝,这样就可以呈现出非常自然飘逸的头发效果。
角色创建完成后,Wonder Studio会用CG角色替换真人演员,将CG角色的动作和面部表情与原始演员的动作和面部表情进行匹配。导出干净背景板、遮挡轮廓遮罩 、动作捕捉数据以及最终视频。
除了简单地渲染最终生成的视频(最高可达4K分辨率)之外,Wonder Studio还可以导出生成视频过程中使用的各种数据:包括演员的干净背景板和Alpha遮罩(均以PNG图像序列形式导出)、FBX格式的动作捕捉数据、对于Blender用户来说,还包括完整的Blender场景文件。
03/特点及优势
简化和加速VFX制作流程
Wonder Studio最大的优势是它可以大大简化和加速VFX制作的流程,让用户不需要使用专业的摄影设备或动作捕捉系统,就可以创建逼真的CG角色。
系统会根据单摄像机镜头自动检测演员的表演,然后将表演转移到已选择的CG角色上,再自动对其添加动画、灯光和将其组合到真实场景。只需将CG角色模型上传到一个镜头或整个场景中,系统就会自动检测剪辑,并在整个镜头序列中追踪演员。
支持多个角色和风格化角色
在Wonder Studio中,使用者可以同时分配多个角色来创建科幻世界。它还可以让用户自由地选择和更换CG角色,甚至使用一些独特的风格化角色。它还可以让用户在不同的场景中重复使用同一个CG角色,节省成本和时间。
能够导出各层单独元素
正如使用流程中谈到,包括演员的干净背景板和Alpha遮罩(均以PNG图像序列形式导出)、FBX格式的动作捕捉数据、对于Blender用户来说,还包括完整的Blender场景文件。
运动捕捉
角色通道
Alpha遮罩
干净背景板
摄像机追踪
Blender文件
最终渲染
04/当前限制
但在测试中也发现目前WonderStudio在动作捕捉方面表现出色,但在其他一些方面还有提升空间。
除了上面我们提到的,对于3D角色的多边形数量上限和4K渲染分辨率的限制之外,Wonder Studio最大的技术限制是它目前还不支持角色与角色,或是角色与物体之间的互动,这就在一定程度上限制了它能够处理的镜头种类。
除此之外,Wonder Studio目前提供的遮挡支持也只是部分支持,所以当角色在镜头中被前景物体遮挡时,输出质量可能会下降。但是,对于视觉预览和对视效质量要求不高的项目,Wonder Studio已经是一个很有前景的解决方案了。
05/收费方式
Wonder Studio网站上目前提供以下几种订阅方案:
按年订阅每月费用
按月订阅每月费用
最后附上油管博主上传的Wonder Studio使用教程,感兴趣的朋友们可以去官网尝试一下。
推荐阅读
我知道你在看哟