解读VR音频的未来

2017年以无数的方式推动了VR行业的发展,其中包括将音频视为VR经验中绝对关键的因素。

一些大型的VR片,如Gorillaz的Saturnz Barz(Spirit House)360视频或Lytro的Hallelujah经验集中在实验听觉体验。声音不仅仅是用来以渐进的方式推动听觉体验的提示 - 它可以完全改变VR冒险,甚至影响整个故事情节。

以下是创作者用声音推动信封的一些热门工作:

业界将会采用基于对象的音频进行各种体验。

正如360摄像机从一个点捕获整个3D场景一样,Ambisonics麦克风用于在给定时间表示360场景的音频快照。 Ambisonics信号非常适用于传送一般氛围,但是对于精确定位个人声音而言,它们可能不太完美,这是音频工程师在一段时间内恶化的缺点。

从今年初开始,更多的音频工程师开始使用基于对象的音频和场景音频的混合来创建更真实的聆听体验。基本上,基于对象的音频是指使用丰富的麦克风捕获的个人声音,而基于场景的音频是指使用Ambisonics麦克风捕获的声音的一般范围。在物理现实中,您会听到与您非常接近或重要的声音(基于对象的音频),而其他一切都被视为背景声音(基于场景的音频)。这只是一个时间问题,直到这种对象和场景音频的组合,而不是排他性的Ambisonics,将成为VR音频工作流程的行业标准。

利用基于对象的音频还可以为内容创作者提供更多的创意自由,因为它更容易在单个声音上操纵后期制作效果 - 将其视为一个单一的原始元素,而不是一个大而杂乱的声音。此外,基于对象的音频可以很好地适用于6DOF(六自由度)VR内容,而这些VR内容在受欢迎程度上迅速增长。

6DOF的内容就像一场游戏 - 角色在每个方向的空间内移动,并让该机构与环境中的对象进行交互。当角色做这些事情之一时,声音需要相应的改变。因为在游戏中精确定位声音和轻松反映变化的效果更好,基于对象的音频实际上已经在3D游戏引擎中使用了很长时间。随着更多的6DOF内容正在建立在游戏引擎上,似乎更多的音频工程师将被迫学习如何混合和掌握游戏引擎中的声音,而不是传统的数字音频工作站。

优质的VR内容将会出现,更多的玩家拥抱空间音频。

空间音频是提供逼真VR体验的关键。空间声源具有三维位置数据,使听众感觉到声音实际上来自于这些视觉位置。截至目前,YouTube和Facebook是目前唯一支持空间音频的知名播放器平台。

发布平台的这些限制阻碍了内容创作者在制作中完全拥抱空间音频。然而,随着声音的增加,渲染器或玩家最终将必须支持空间音频。当Vimeo在3月推出Vimeo 360以支持360内容时,大量的用户请求涉及到空间音频功能的需求,而官方帮助页面表示他们计划在不久的将来支持空间音频。较小的玩家和平台将遵循Facebook,YouTube和Vimeo制定的路径。随着VR内容质量的用户标准不断提高,空间音频的采用将会跟上进步。

由于许多原因使内容发布平台不采用空间音频,主要的原因之一是缺乏专用的VR音频格式以及兼容的渲染器。随着更加强调基于对象的音频,单独的Ambisonics将被逐步淘汰为未来的标准格式。

为了统一空间音频工作流程,GAO格式在今年年初推出,为VR音频提供卓越的声音定位和品质。 GAO由LA的空间音频公司G'Audio Lab开发,结合了对象和Ambisonics信号以及立体声信号。

“我们已经看到很多人看着我们的演示,从正常的立体声格式开始。当他们到达声音被空间化并以Ambisonics格式传送的部分时,他们通常会开始微笑。然后,当他们看高分部分时,很多人会不由自主地放出一点笑声,感到非常惊喜。“G'Audio实验室业务发展总监布鲁克林·奥尔奇(Brooklyn Earick)说。由于GAO配备了兼容的渲染器SDK,所以采用空间音频的平台比以往任何时候都更容易。

创作者将超越后期制作,创造新的聆听体验。

当将视觉与其对应的声音相匹配时,VR音频已经接近达到准确度。下一步将在后期制作(甚至更早)期间探索令人兴奋的新技术,以充分利用VR的全部可能性。

声音不仅仅是一个讲故事的提示,可用于鼓励VR用户朝某一方向前进。在一些新的用例中,如果需要,您实际上可以在相同的体验中听到某些声音。例如,以下记录的360视频可让用户比其他放置在周围的其他乐器更清楚地听到他们正在看的内容。

这种新一波的声音不仅仅是当前技术发展的一部分。在许多情况下,它将让位于革命性的新形式的娱乐。艺术家的虚拟画布水平360度,垂直360度,超出现实生活中舞台的物理尺寸。音乐家现在可以玩“虚拟的位置”,以及他们传统的音调,响度和时间考虑。他们还在学习如何利用人类的听觉来更深层次地影响这些经验。您在现实生活中已经体验到的一些心理声学原理可以在VR中利用,使每个体验在个人层面上有所不同。虽然在这个领域有很多要考虑的事项,但我们对此的集体知识仍在继续发展。

VR音频的进步将成为完善主流消费者体验的关键,并为开拓者提供驾驭创新体验所需的工具。这三个趋势将大大有助于实现这两个目标,并将有助于塑造未来几年的行业。

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。