创建临场感的关键 Virtuleap联合创始人谈空间音频设计

　　2018年11月20日，XR从业者都意识到，空间音频设计是创建临场感的关键。Virtuleap联合创始人兼首席执行官阿米尔·波索格扎德(AMIR BOZORGZADEH)不久前参加了NYVR Expo，并再次深深意识到空间音频之于VR/AR的重要性。波索格扎德日前撰文强调了这一点，以下是映维网的具体整理：

　　乔治·卢卡斯曾经说过“声音占体验的一半”，而这句话获得了无数的认同。如果这是实施，这将对VR和AR设置的等式产生什么影响呢?

　　因为沉浸式世界是现实世界的创意模拟，声音和听觉函数发挥的作用远远超过我们的预期。

　　在我参加的NYVR Expo中，声音设计师与听力和听觉科学博士劳拉·辛诺特(Laura Sinnott)表示：“声音通常是事后之物。声音看不见。它是分子的振动，我们不能把它握在手中，它只是在时间上存在，并且是运动中物体的声波表达。”

　　确实，我们需要承认这样一个事实：对于成长于充斥着各类杂音的现代世界的我们，我们的大脑通过麻痹或关闭大部分频谱来进行应对和适应。一切都是为了精简我们的日常生活。

　　1. 听觉复兴

　　辛诺特最近向我解释了基础听觉对我们存在的重要性：它不仅是一种交流媒介，同时是我们情感幸福，认知的关键，同时与我们当前的现实相比，它与过去更具相关性，甚至对我们的生存也更为重要。她指出，音频是第一种在子宫中发育的感觉，其主要是与我们的本能中心相连。尽管它是一种我们已经失去了显著敏感性的感觉，但XR有可能帮助恢复它。

　　辛诺特表示：“听觉是最原始的感官之一。尽管晚于平衡系统，但它的进化很有可能早于视觉。无论是为网络设计沉浸式音频，还是设计传统的单声道无线广播，设计师都需要对声音的强大有一定的理解。”

　　即使这种主要感官器官在我们的集体意识中已经降级为扮演第二小提琴角色，对于上月充满了空间音频专家的NYVR Expo令我相信，XR可以重新为听觉的复兴打开一扇大门。在一个主题环节中，幻灯片上写着：“我们的眼睛只能看到我们面前的元素，但我们的耳朵可以把世界带到我们身边。”

　　2. 空间音频设计是关键

　　在尝试创建能够令我们大脑确信所处之地为真实世界的体验时，XR创作者很快就会认识到声音从来就不是二等公民。他们明白这一点。在上月一篇我非常推荐大家阅读的博文中，台湾配乐师与音频设计师张宥程写道：“如果没有合适的音频设计，叙事体验将失去其魅力，而世界也不会那么令人信服。”

　　延伸阅读：从声效、音乐、氛围、对话谈VR体验的音频设计经验与教训

　　如果空间音频不存在，或者更糟糕的是，在某种形式或形态上不匹配，这将会成比例地对临场感的质量产生影响。我们的身体本能和情感心智同样会参与至沉浸式内容，因此糟糕的空间音频设计可能不合适和令人感到不舒服，比如说伪劣的视频拼接。

　　3. 声音是核心体验层

　　事实上，空间音频是我们认知的基础层次，它对我们存储和回忆过去的能力有重大影响。

　　电影，电视，广告和新媒体作曲家兼多乐器演奏家杰夫·麦克帕登(Jeff McSpadden)说道：“正如‘体验之锥’图表所示，当你为体验添加音频时，学习留存率就会提高。视觉和声音的结合带来了进一步的提升(这就是为什么视频变得如此受欢迎的原因)，但当学习者沉浸在视觉和听觉之中时，就像大多数XR一样，这可以带来90%的学习留存。”

　　麦克帕登是沉浸式音频设计的先驱，同时是Composure和Prime8的首席执行官。前者是一家利用空间音频和交互式音频来减轻压力和提升幸福感的科技公司;后者则是一家专注于声音视觉项目的创意实验室。

　　他解释道：“对于Composure，我们正在研究交互式空间音频在当作为沉浸式体验焦点时的强大功能。我们的目标是创造定制的音乐体验，帮助减轻用户压力并促进积极情绪状态。有大量证据表明，被动地聆听音乐有助于控制压力，但当他们主动参与时，放松和集中注意力的效果将会增加。”

　　AR可穿戴设备同样有所帮助。麦克帕登描述了一种增强听觉体验，而非予以替换的解决方案。比如说17年3月宣布的Bose AR眼镜，他们同时完成了5000万美元的融资以培育一个相关的生态系统。

　　麦克帕登认为Bose的入局对每一个人都有好处，尤其是盲人。空间音频可以在培训，教育和娱乐等方面为其提供巨大的帮助。Bose AR眼镜可以成为加速增强音频成为我们日常生活一部分的垫脚石。

　　4. 扩展心理声学研究

　　XR同时可以作为科学和研究领域的延伸，帮助科学家更好地理解声学体验。正如辛诺特所描述的那样，当你移除物理空间并且没有物体反射声波时，环境将会发生什么情况呢?这时XR就可以派上用场。

　　剑桥大学和纽约市立大学的心理学家与音乐家大卫·格林伯格(David M. Greenberg)博士表示：“消声室改变了通常听到的声音的频率。XR技术能够控制音乐的频率和振动特性，从而真正改善声音和音乐。”

　　但无论是面向消费者的应用，企业实施还是心理声学研究，沉浸式设计将毫无疑问地提升我们对声音作用的理解，并同时提高我们对其价值和潜力的认识。