什么是沉浸式音频?

什么是沉浸式音频? 什么是沉浸式音频?

沉浸式音频是目前音乐制作领域最热门的话题之一,你可能已经注意到它随处可见。无论您是在浏览 Netflix、亚马逊 HD、Apple Music 还是 Tidal,身临其境的音频类别都是最重要的。与 70 年代的 MiniDiscs 和 Quadrophonic 音效不同的是,我认为这项技术并不是一时的流行,而是将被全面接受。

就连豪华汽车品牌也在加大力度。特斯拉、宝马和梅赛德斯-奔驰等公司正在为他们的汽车配备沉浸式音响系统,将驾驶体验转变为远超基本立体声的体验。想象一下,当你在高速公路上巡航时,感觉就像坐在现场表演的中间。很酷吧?

现在,虽然整个沉浸式音频技术一开始可能听起来有点吓人,但它其实比看上去简单得多。而且,就像任何新技术一样,尽早上手的制作人和工程师将获得最大的收益。这也正是环球唱片公司和卡皮托尔唱片公司等大型唱片公司将其所有唱片重新混音成身临其境格式的原因。这清楚地表明,这里有钱可赚。

Billie Eilish、The Weeknd 和 Post Malone 等大牌艺术家也已经开始发布身临其境的混音作品。人们对它的兴趣与日俱增,虽然你需要了解一些技术标准,但规则仍然是开放的。这正是制作人和工程师的大好机会,他们可以发挥创意,帮助塑造这一领域的未来。

在本指南中,我将详细介绍什么是沉浸式音频、它是如何工作的,以及您如何将其转化为您专业技能中有利可图的一部分。

什么是沉浸式音频?

沉浸式音频的核心是创造一种听觉体验,让人感觉自然、立体,仿佛身临其境。其目标是用声音将听众包围,无论是现场音乐会中人群的嘶吼,电影中森林的微妙氛围,还是视频游戏环境中不断变化的动态。它旨在让音频感觉更加逼真,从而提升从音乐、电影到虚拟现实体验的一切效果。

沉浸式音频被广泛应用于各种平台。在 Netflix 或 Disney+ 等流媒体服务中,它增加了配乐和特效的深度,将观众拉入故事之中。在音乐方面,Tidal 和 Apple Music 等平台提供身临其境的混音效果,你可以听到乐器和人声在声场中的传播,这是立体声无法复制的。在游戏中,沉浸式音频被用来创建 360 度的声音环境,帮助玩家感知危险或方向,增加了一层额外的真实感。

要真正做到身临其境的音频效果,就必须了解人们是如何感知周围世界的。我们在全三维空间中体验声音。如果你闭上眼睛,站在房间中央,你仍然可以分辨出别人在哪里说话,距离有多远,甚至空间是大是小,而这一切都离不开视觉。这是因为我们的大脑和耳朵一起工作,通过声音为我们描绘了周围的环境。

当声音传入我们的耳朵时,我们的大脑会通过比较声音传入每只耳朵的时间上的微小差异,以及声音在环境中的反弹情况,来判断声音的来源。如果一辆汽车在你身后按喇叭,你想都不用想就知道它在你身后。你能分辨出它是来自左边还是右边,以及距离有多远。闭上眼睛,你甚至可以通过声音在建筑物或空地上的反射,想象出这是一条什么样的街道。这就是人类听觉如此身临其境的原因。

想做个实验吗?在安静的空间里闭上眼睛,让朋友在你周围走动,同时发出不同的声音(拍手、敲击地面、说话)。你会发现你的大脑无需视觉就能自动确定他们的位置。这个过程,也就是我们的 360 度听觉能力,正是沉浸式音频所利用的。

如果您想深入了解其背后的科学原理,《音频工程学会期刊》(Journal of Audio Engineering Society)发表了大量关于人类如何感知空间和身临其境的声音以及如何将其应用于音频制作的研究成果。

它是如何工作的?

那么,我们究竟该如何创建身临其境的音频呢?关键在于设置。身临其境音响系统使用横向(在你周围)和头顶放置的扬声器组合,将听众包围在一个三维声场中。想象一下,坐在房间中央,声音从左右两侧、上方、下方、前方、后方,无处不在。

沉浸式音频设置是多声道的,这意味着它们比一般的立体声甚至 5.1 环绕声系统需要更多的扬声器。与只在电视机两侧安装两个扬声器或在角落安装几个扬声器不同,您可以考虑在房间的各个角度安装满扬声器。声音通过多个声道传播,营造出完全身临其境的音效效果。例如,杜比全景声(Dolby Atmos)是领先的身临其境音频格式之一,可以使用多达 128 个独立音轨,发送到房间中多达 64 个不同的扬声器。

为了做到这一点,扬声器要小心地对准一个固定点,也就是所谓的 "聆听位置"。无论您是音频工程师、电影观众还是游戏玩家,都将坐在这个位置上。扬声器的具体位置和数量取决于您使用的格式。杜比全景声(Dolby Atmos)的家庭设置可能会在天花板上安装扬声器,而索尼 360 Reality Audio 等其他格式则更依赖于在听众周围布置专门的扬声器。在专业演播室中,这些扬声器通常会以精确的角度安装,以确保声音来自正确的位置。

沉浸式音频软件

然而,无论您有多少扬声器,也无论它们是如何排列的,软件都在做着大量繁重的工作。沉浸式音频系统使用软件模拟三维环境,将每个声音放置在与听者相关的正确位置。

安装软件后,必须根据房间情况对系统进行校准。在校准过程中,软件会计算出什么样的扬声器组合最能重现 3D 音效。它会分析房间的大小、扬声器的布局,甚至房间的材料(因为声音在木头和混凝土上的反弹不同)。校准后,系统就能准确知道使用哪种扬声器、音量和时间,从而营造出理想的身临其境的声音体验。

它还能生成主文件,主文件包含在不同系统上播放所需的所有解码信息。这一点很关键,因为与一切都已内置的立体声文件不同,沉浸式音频文件仍然需要根据播放环境进行解码。这有点像给别人一张蓝图,而不是一栋成品建筑。软件会根据现有的设置,找出如何实时 "构建 "音频体验。

这与传统的立体声混音完全不同。在立体声混音中,你只能使用两个声道:左声道和右声道。你可以在两个通道之间进行平移,但仅此而已。

另一方面,沉浸式音频可让您在 360 度的空间中定位声音。有了合适的软件,你就不再局限于两个扬声器,你可以创造一种体验,让音乐感觉就像在你周围和头顶上移动。

那么,消费者该如何体验呢?有几种方法可以帮助渲染器实现身临其境的音频效果。例如,Sonos Arc 等专业音箱或专为身临其境播放而设计的智能扬声器,可以重现身临其境的混音效果,而用户无需了解扬声器的摆放或校准。渲染器会在幕后进行艰苦的工作,分析音频文件,并找出如何在可用扬声器之间最佳地分配声音,以营造身临其境的感觉。你只需点击播放即可。

这使得普通听众也能享受到身临其境的音效,即使他们没有高级的多扬声器设置。

在音乐制作中使用沉浸式音频

说到音乐制作,我深信身临其境的音效将是下一件大事。想想 60 年代初从单声道到立体声的转变是多么具有纪念意义。这一转变永远地改变了人们体验音乐的方式。

现在,身临其境的音频技术正在将其提升到一个新的水平,让我们对如何聆听音轨有了更多的创造性控制。

好消息是,您不需要在价值百万美元的录音室里工作,也能制作出身临其境的混音效果。当然,大录音棚有其优势,但您也可以在家中就开始尝试身临其境的音频效果。你需要的只是合适的软件和一点诀窍。

例如,如果您使用 Pro Tools,就可以整合Dolby Atmos 渲染器来创建三维混音。通过该工具,您可以在三维空间的任意位置定位音轨元素。

Ableton 用户可以使用 Max for Live (M4L) 集成,因为它有一整套身临其境的混音工具。M4L 可让你访问定制的空间音频插件,这些插件可用于在三维空间中定位声音,对于已经深入电子音乐制作或声音设计的人来说,它具有超强的灵活性。

聆听沉浸式音频

如果你想亲身体验身临其境的音频效果,你需要两样东西:一个可以处理身临其境内容的应用程序或音源,以及一套支持它的扬声器或耳机。

幸运的是,如果你已经在苹果生态系统中,那你就很幸运了。AirPods Pro 或 AirPods Max 等设备可以处理沉浸式音频(大多数现代耳机也能达到这一效果)。Apple Music 上的空间音频就是一个很好的例子。

然而,当您想通过扬声器系统聆听身临其境的音频时,真正的挑战就来了。在基本层面上,您需要的不仅仅是标准的立体声设置。5.1 或 7.1 环绕声系统或许能帮您实现部分功能,但要真正体验身临其境的音频效果,您需要一个包含顶置扬声器或声霸的系统,以复制顶置音频体验。

杜比全景声DTS兼容的系统是很好的起点。

传统的环绕声大多停留在侧声道和后声道,而身临其境的音响系统则不同,它增加了至关重要的垂直元素,让声音感觉就像在你的头顶和脚下以及周围移动。这可能意味着要增加安装在天花板上的扬声器,或者投资购买一个声霸,通过从天花板上反弹声音来模拟头顶声音。如果您刚刚开始接触,我建议您暂时使用耳机。

沉浸式音频标准

沉浸式音频是一个包罗万象的术语。它并不指向一种特定的技术,而是涵盖了一系列旨在为您带来三维声音体验的系统。

这些格式之间有一些主要区别。

杜比全景声(Dolby Atmos)是这一领域的佼佼者。它是大多数人与 3D 音效联系在一起的标准,这是有道理的 - 它可以处理多达128 个独立音轨,每个音轨都可以放置在听众周围 3D 空间的任何地方。这样,无论是听音乐还是看电影,都能获得无比细腻的音频体验。

您可以在Amazon PrimeNetflixApple TVDisney+等流媒体平台上享受杜比全景声,它能为您带来电影和电视节目中的全环绕声体验。

不过,说到音乐,Apple Music是唯一支持 Dolby Atmos 的音频流媒体服务,这使它成为音乐爱好者的首选,因为他们想身临其境地体验最喜欢的曲目。

结论

身临其境的音频技术正在为我们体验声音开辟一个全新的世界。无论您是制作人、音乐家还是普通听众,现在就加入身临其境音频技术的行列都将获得巨大回报。这项技术的发展日新月异,那些及早开始探索的人将在创造新的环绕声方面遥遥领先,真正吸引人们的注意力。

那还等什么?

专业品质的母带处理,让你的歌曲在几秒钟内栩栩如生!