查看原文
其他

视觉固然惊魂,可别忘了,还有声音【虚拟现实的音频处理(视频上)】

2016-03-24 LocationSound同期录音网
导读

关于VR,大家讨论的最多的是分辨率、视场角、延迟率、交互方式等等。但常常忽略了另一个重要的VR体验:声音!



声音是VR体验中重要的因素,对用户的“沉浸感”可以起到关键的作用。同时,头盔设备HMD对位置追踪的支持也为实现声音的空间精确定位提供了可能性。


相对于传统的显示模式,VR中可以对环境中的声音进行空间定位(Spatialization), 即让用户感知各种声音的位置(包括远近、方向、运动等),并在用户转动头部时感觉到声音相对于耳部的变化。而之前需要用昂贵复杂的5.1、7.1声道设备才能体验的“环绕立体声”,在VR中只需一副耳机就能实现。

来自Oculus的声音设计师Tom Smurdon向我们描绘了在VR中声音如何给用户带来前所未有的体验:

在这个潜水艇内部的场景中,玩家可以听到发动机和空调的噪音从他们相应的位置传出;同时可以“感觉”到潜水艇外面水流的声音;还可以隐约听到头顶蒸汽管道中蒸汽发出的嘶嘶声。所有这些声音都有自己的三维位置和距离,用声音营造出身临其境的效果。

  接下来是一个生物体的例子。当场景中的暴龙向你逼近时,在传统的游戏中,玩家可以听到它所发出的声音,但都是从同一方位发出。


而在VR中,你可以分辨出暴龙的脚步声从它的脚上发出(甚至可以分辨左右脚);它的咆哮声从嘴部发出;甚至可以将咆哮区分为低频及高频,高频从嘴部发出,低频从胸腔发出!



下一个是名为“Vertigo”的新月湾(DK2之后的Oculus开发版代号)demo。在这个场景中,用户站在高塔顶部的一块踏板上,下面是万丈深渊。周围有三个风声的音源。其中两个较缓和,而第三个非常激烈的风声音源放置在踏板的边缘。当玩家将头探出踏板时,马上会感觉到强风吹过。这就营造了极为真实的高空体验。




相信通过这些场景的描述,大家已经可以理解声音在VR中可以起到怎样的作用。在VR内容的开发中,各种硬件资源的限制通常是开发者们最头痛的问题,而合理巧妙地运用声音来增强体验效果有时可以起到事半功倍的效果!


下面这段视频是Oculus的声音设计师Tom Smurdon在Oculus Connect上的演讲,是目前比较权威的对VR声音,3D音频介绍的一次演讲。

【Oculus声音设计师Tom Smurdon关于3D音频的演讲(上)】

https://v.qq.com/txp/iframe/player.html?vid=q0190pdki4a&width=500&height=375&auto=0

---------关于同期录音网---------

 

同期录音网是国内唯一一家针对影视录音信息的垂直门户网站。我们由多名专业的声音工作者组成,很多声音大师都是我们的顾问。我们以与广大声音爱好者,电影迷,专业的声音工作者共同学习为目的创建了“同期录音网”。希望大家关注我们的微信公众平台,并可以去我们的官方论坛一同分享录音中的经验,趣事。

 

我们的网址:www.locationsound.cn

一起创造美好的声音世界!

声音工作者和影视声音迷的家:

LocationSound.cn

同期录音网


长按二维码关注同期录音网

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存