听你所想——音效如何影响虚拟现实体验
据国外媒体报道,*录音棚工作室的音效制作大师艾弗·泰勒(Ivor Taylor)日前撰文阐述了虚拟现实音效的问题,并从人类大脑生理构造的角度解释了要想获得更好的音效和更好的虚拟现实体验,就必须将3D视频和音效有效结合。同时3D音效也只有与视觉相结合才能够完美呈现。现将原文编译如下:
作为一个充满激情的音效制作者,在谈及音效发展时,不得不说虚拟现实对音效产生了非常积极的影响,有越来越多的人开始关注音效。而在之前,我经常听到音效制作者自己都说:“音效毫无新意可言”。
但是,现在,不管你相信与否,随着3D音效以及人头录音技术的发展,音频产业正在成为充满创意的产业。
在一定程度上,音频产业的新机会已经炙手可热,不可避免地被到处使用。人们往往喜欢人头录音的效果,也希望得到这种效果,但他们根本不清楚这种音效的原理。例如现在汽车的静音效果非常好,曾经有一位客户要求制作汽车内部的3D音效,可是即便通过这种音效就真正能发现汽车的问题所在吗?
由于直接进入人耳,因此人头录音能够精确复制原始音频。最好的人头录音能够为用户带来惊人的沉浸感。但是没有相应的视觉刺激,人们就只能感知人头录音的脑后效果,也就是不存在清晰可辨的正面声常
那么这种音效制作的新技术对于虚拟现实来说到底意味着什么?我将从人脑的构造来详细解释这个技术问题。
人类的进化是大自然优胜劣汰的结果,而我们的眼睛和耳朵的进化也是自然选择的结果。在过去,当我们想到看电影的场景时,在我们头脑中就会出现一个人坐在礼堂里,面前是播放的电影画面。现在我们也可以想象一个体验虚拟现实的人,他在天文馆里四处走动,通过3D视觉和音效体验宇宙奇观。可悲的是,这两个例子对于解释音效技术来说都是无稽之谈。
在这个星球上,现存的每个人都是达尔文生物进化论自然选择的结果。我们的大脑以及相应的听觉和视觉,都已经为生存的目的进行了优化。想象一下,1000年前的一个人进入时间机器,被传送到2016年伦敦的特拉法加广常起初他会非常害怕,因为其获得的视觉和听觉都是前所未有的。他的大脑需要通过一段时间适应外界刺激。随着他们对现实的不断认知,他们发现自己会很快适应,因为大脑是一种具有自适应功能的机器。
在谈及3D音效时,人们往往忽略了它是虚拟现实整体系统一部分的事实。如果你能了解我们的大脑是如何工作的,你就会对此有深入理解。人类的视觉和声音是两个独立的感觉系统,两种感知会有次序地集中在人脑中加以处理完善。
自原始社会以来,人们生存面临的一个问题是,你不可能总能看到可以听到的东西。视觉是你需要去看的,但听觉却无处不在。我们经常会听到这样一个经典的骇人故事——“就在你身后!”
每一秒我们都在处理来自人耳的信息。我们的大脑得到这些信息,并判断声源是在我们的面前还是身后。如果我们同时得到视觉确认,譬如站在我们面前的人正在张嘴说话,那么大脑告诉我们的声音来自于面前。这并不是纯粹的视觉想象。人耳获得的声音被传送给人脑,人脑会潜意识地认为:“什么是我最好的猜测?如果我做一个坏的猜测可能会导致严重的错误后果。”人脑中往往以这种高风险的决策过程对所获取的视觉和听觉信息进行处理,其将听觉和视觉所提示的位置和方向进行整合,并通过概率和以前的经验作出最终的决策。
这样一来,单纯的3D音效就会出现问题。三维声场是真实存在的,但是我们的大脑会采用上述的“最好的猜测”进行分析处理。我们的大脑的确能感知3D音效的距离和高度,但却不能确定声音来自于面前或是脑后。如果面前没有相应的视觉刺激,大脑总会让我们感知声音是从脑后传来的。
那么这些诸如人耳录音、立体混响以及波场技术在虚拟现实中将如何发展?那么我的推测是,这些音效制作的新兴技术将逐步融入现有的“立体声”音效,与虚拟现实中的视觉信息相结合,为人们带来身临其境的全方位音效体验。
也许,就像我的父亲一样,起初只听单声道的声音,但最终学会了如何欣赏立体声。今后我们或许将继续训练我们的大脑,以适应一个完全不同的声音传送方式。如果这成为现实,这些音效制作的新技术将会有更大的影响力。
音频产业也将再度繁荣。(宁宇)
via:vrfocus