查看原文
其他

6DoF才是全景视频的未来

前沿科技新媒体 青亭网 2021-09-20

Esther| 撰文

自从2015年开始,VR就逐渐被跟多人开始所认知,尤其是在2016年性价比很高的VR盒子变得普及,越来越多的人开始熟悉360°全景视频这种新的观影形式。与此同时,YouTube等在线视频平台开始支持360°视频,你可以直接在网页浏览,也可以用VR设备来观看。

在VR技术的初期,全景视频是其主流内容。为满足VR用户的需求和日渐增多的应用场景,360°全景视频不管在硬件上还是拼接算法上都在不断得到优化,比如今年4月谷歌曾推出Jump Assembler,它可以使内容制作者更快、更方便地实现自动拼接。借助先进的计算机视觉算法和Google数据中心的计算能力,Jump Assembler可创建清晰、逼真的图像拼接,形成身临其境的360°3D视频。

今年10月,NVIDIA曾推出VRWorks SDK 2.0,其最多可将拼接360°全景视频的速度提高90%,而且还增加了对深度的感知和预测、手动调拼接缝、自定义拼接点等功能。

尽管360°全景拍摄技术在不断发展,它拍摄出的影像始终局限在3DoF,没办法体现出6DoF VR的魅力。很多人在抱怨全景视频里,由于观众只能转头、无法四处行走,就会破坏掉沉浸感。这是因为大多数现存相机都只是拍摄传统的视频,然后拼接成一个球体,像个IMAX环形影院一样把观众包裹起来而已。

想要拍摄6DoF全景视频并不容易,而所谓的”容积拍摄“(Volumetric Capture)将会是实现它的关键所在。容积拍摄法的原理是,镜头从不同角度进行记录,软件分析后,压缩并重塑完整的3D人类形象的全部视角,这样用户在VR中可以自己选择视角,观看体验将更为流畅。

6DoF容积视频将会是360°全景视频的下一阶段,越来越多的企业和领域开始接受这项技术。

世界最大6DoF VR工作室

Intel今年1月公开了用一年时间打造的Intel Studios沉浸式娱乐实验室,专注于研发6DoF容积式视频和高质量的VR/AR内容,这里也是全世界最大的沉浸式媒体工作室。根据Intel现场展示的西部枪战影片片段来看,他们拍摄的容积视频可以从任何角度去欣赏,包括任何时刻、任意角度的子弹时间画面,慢镜头等。同时,还能模拟出场景里面一匹马的视野画面。

Intel Studios最新室内图

Intel Studios工作始内有占地10000平方英尺(约929平米)、44英尺高(约13米,四层楼高)的网格球顶,里面采用了96个5K摄像头和绿幕,是专门用于拍摄容积视频的场地。

Intel将这些5K摄像头与True View技术结合,去定义镜头内的三维空间体积,并能拆分成成千上万个数据点,我们称之为“voxel”。voxel是volumetric加pixel的缩写,也就是三维像素的意思。

在这个拍摄场地中,音乐表演者、好莱坞导演甚至运动员都可以用6DoF全景视频讲述自己的故事。

Intel Studios服务器配置

为了渲染和存储这些大量的容积摄影内容,Intel Studios将其通过光纤电缆发送到8公里外的九十多台Intel服务器,这些服务器每10秒可处理1TB数据。Intel的这些服务器最多可存储10PB数据,相当于拍摄了133年时间的高清视频所占存储。

纪录片《#100humans》

此外,8i也是一家专注3D容积摄影方面的软件公司,他们的侧重点在与360°全息人像捕捉。2016年,该公司在圣丹斯电影节上播放其纪录片《#100humans》,反响热烈,该片主要以黑色为背景来突出角色。据悉,8i也使用了绿幕技术,但是规模比Intel Studios更小,只用了41个摄像头。

Jaunt 人像三位立体摄影技术

前不久,以开发360°全景视频和VR电影出名的Jaunt公司开发了一项可以制作AR人像的三维立体摄影技术。Jaunt先是使用6个英特尔RealSense深度摄像头拍摄了人体的立体图像,然后实时将拍摄到的图像组合成一个立体角色,再将角色上传/分享至移动设备中。

DepthKit是比较常用的一款容积摄影软件解决方案,它对硬件没有特别高的要求,搭配微软Kinect、Intel RealSense 等3D深度感知摄像头或者Windows电脑就可以,以交战区为主题的VR电影《Giant》就是用它拍摄的。

音乐家也留意到容积捕获法的影响,Maya Payne为歌曲Breathe Again制作的视频可以证明这一点。该视频由新西兰的realityvirtual.co制作,这是一家提供3D/VR摄影工作流方案的公司。

Facebook与RED合作的全景相机

2017年Facebook曾与OTOY合作,打造全景相机,支持6DoF视频录制,它可以在VR里让观众更加自由地移动头部,并且从不同的角度观看视频。此外,Facebook正在与专业相机制造商RED合作,共同开发专业级的高端VR相机,据悉,这套VR相机将可以录制6DoF视频,支持超高分辨率录制。

6DoF VR影片《7 Miracles》

前不久,青亭网曾报道过HTC Vive Studios曾推出的6DoF VR电影《7 Miracles》,它曾于今年获得英国雨舞影展VR短片奖项。据悉,该电影的拍摄采用了9颗摄像头的360°摄像机,它可以同时拍摄到每个角度,也就是说工作人员必须假扮成配角或者躲起来。

微软好莱坞动捕工作室

另外,今年8月微软也曾在好莱坞推出VR动捕工作室,该工作室内置了超过100个1200万像素的机器视觉相机,能够拍摄容积式视频,可应用到AR/VR应用中,包括电影、电视等。

在利用容积摄影技术拍摄3D全景电影方面,Intel表示目前也在制作两部好莱坞VR电影,将于2019年上映。

(END)


    推荐阅读    





 
每天五分钟,轻松了解前沿科技。    
         —— 青亭网  


: . Video Mini Program Like ,轻点两下取消赞 Wow ,轻点两下取消在看

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存