【重磅】Runway发布自定义镜头控制,一共36种运镜模式!
如果说2022年是AIGC绘画元年,那么今年估计就是AIGC视频元年了,视频的生成效果越来越好,但是一直存在一个问题就是可控性的问题。视频这个领域一直没有一个类似controlnet的存在,在之前出现了pika这样的产品,可以通过图片+提示词的方式来控制画面的呈现,但是还不够。
昨天,Runway给他们的生成视频加上了四种不同的运镜功能,并且不同的运镜功能还可以相互叠加,所以一共有36种不同的玩法。Runway的这几种运镜的功能跟SD生成视频里的运镜功能非常类似了。
下图是SD Deforum 的视频运镜设置界面。试过SD生成动画的同学应该不陌生。基本上也是前后,上下左右和旋转,不过SD的生成路径是可以用参数精准控制的,并且还可以进行空间运镜,目前Runway的镜头运动还只能设置大致的方向。
接下来我会详细介绍这几种新功能的效果。
Custom camera control 自定义摄像头控制
在motion的下方添加了一个Custom camera control 按钮。目前还是beta功能。
点击后会有一个 Custom camera control 的操作栏。
在操作栏的上方添加了一个自定义摄像头控制,这个功能条目前主要有四种运镜模式和一个速度控制选项。
Speed 速度控制(1~10)
这里的速度可以不用选择运镜单独调节,也是跟motion一样一共可以调节从1~10的数值。这里测试了只选速度,不选择运镜的效果。
Speed = 1
Speed = 2
Speed = 3
这里需要注意:Speed单独设置运动的幅度并不大,但是如果Speed再加上任意的运镜选项后,运动的幅度都会增加很多。
这里大家可以对比下:Speed数值为3时加上水平运镜的效果
为了方便查看效果接下来的运镜速度都统一设置为 Speed=3
Horizontal 水平运镜(向左,向右)
向左运镜 + Speed3
向右运镜 + Speed3
Vertical 垂直运镜(向上,向下)
向上运镜 + Speed3
向下运镜 + Speed3
Zoom 推近推远(放大,缩小)
镜头推远缩小 + Speed3
镜头推近放大 + Speed3
Roll 旋转运镜(顺时针,逆时针)
逆时针旋转 + Speed3
顺时针旋转 + Speed3
运镜叠加玩法两种模式
这四种不同的运镜模式是可以互相叠加在一起玩的,这就演化出了非常多不同的运镜方式。不过水平和垂直运镜无法跟旋转运镜叠加在一起使用。旋转roll运镜只能跟zoom运镜叠加。
当你选择水平或者垂直运镜按钮后,roll运镜就会不可用,如下图:
Horizontal 水平运镜 + Vertical 垂直运镜
向左 + 向上 + Speed3
Horizontal 水平运镜 + Zoom 推近拉远
向左 + 拉远 + Speed3
Vertical 垂直运镜 + Zoom 推近推远
向上 + 推近 + Speed3
Roll 旋转运镜 + Zoom 推近推远
逆时针 + 推近 + Speed3
运镜叠加玩法三种模式
Horizontal 水平运镜 + Vertical 垂直运镜 + Zoom 推近推远
向右 + 向上 + 推远 + Speed3
最后
Runway作为AIGC视频方向的独角兽,接下来估计还会有更多的动作。毕竟这还是个beta版本。从人人都是插画师(文生图)到人人都是程序员(GPT4)终于到了人人都是导演(文生视频)的时代了。
AIGC视频相关文章