三星谷歌合作推出超越杜比全景声的新式沉浸音频格式

如今家用音响产品中,无论是电视机、家庭影院、回音壁或任何类型的音响系统宣传最多的功能,就是三维空间音频技术了,而杜比Atmos无疑是目前沉浸式音频标准的王者。

然而,三星刚刚与谷歌合作创建了 IAMF(沉浸式音频模型和格式),这是一个开源的空间音频标准,可能会成为杜比新的强有力竞争对手。

IAMF全称“Immersive Audio Model and Formats”,指沉浸式音频模型和格式。IAMF 是开源的,具有垂直声道、基于人工智能的场景分析以及根据聆听偏好灵活定制内容音频等功能。

该格式可用于流媒体、游戏、虚拟现实和音乐电台。与 AV1一样,采用免版税许可。

据介绍,尽管 3D 音频具有诸多优势,但是受限于技术,长久以来它一直难以被应用于家用音频设备中。三星研究院工程师 Hwang SungHee 表示,当前来自影音内容的 3D 音频信息无法被电视扬声器或条形音响(sound bar)等家用音频系统正确解读,导致最终呈现出来的音频体验有限。

为此,三星与谷歌合作开发出了一种音频解决方案。官方表示,IAMF 是开放媒体联盟采用的首个基于开放源码的音频技术标准,这意味着整个行业的企业或个人创作者都可采用这项技术并扩大使用范围。

三星称,若设备制造商可以读取 3D 音频数据,便可调整音频设备中的声音,从而通过家中的标准电视扬声器或音箱,也可以获得“身临其境”的音频体验。

IAMF 具备垂直音频、基于 AI 的场景分析及音频定制化三大特点。

工程师 Nam WooHyun 介绍称,该技术可以使声音越来越具有“多向性”,可让听众听到前方、后方、侧面、上方、下方的声音,例如观众可通过利用该技术的电视听到头顶传来的飞鸟声。“我希望用户能够获得身临其境的感觉,我还想继续这项研究,直到 3D 音频应用于三星的智能手机上。”

此外,IAMF 还可利用 AI 和深度学习技术对场景进行分析,可强调内容的重点部分 —— 如影视剧中部分场景的背景音乐、声效,或者人物对话。

至于音频定制化,IAMF 技术可让用户根据自己的喜好来自由调节音效,不论是场景音还是人物对话。官方展现了一种场景:在观看球赛时,用户可以选择更突出解说还是更突出现场声音。

三星的研究团队表示,目前正在努力将 IAMF 的应用扩展到"移动设备、元宇宙、视频游戏等"。

IAMF能否击败Dolby Atmos,你觉得呢?欢迎评论区留言。

开源媒体联盟 (AOMedia) 成立于 2015 年,旨在定义和 开发技术来满足市场对媒体开放标准的需求 压缩和传输。协会创始成员包括亚马逊、苹果、 思科、谷歌、英特尔、Meta、微软、Mozilla、Netflix、NVIDIA、三星 电子和腾讯。