我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术

智东西(公众号:zhidxcom)
文 | 翰阳

对于当下的VR体验,视频往往是人们最核心的关注对象,而音频在其中所扮演的角色却常常被忽视。

在今年的巴塞罗那世界移动大会(MWC)上,智东西(公众号:zhidxcom)与Fraunhofer IIS的相关负责人进行了短暂的交流,探讨了有关VR音频方面的内容。

我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术

对于不少人来说,Fraunhofer IIS并不是一个太熟悉的名字,而当我们提起三星的Gear VR和LG几天前刚刚推出的LG 360 VR时便无人不知无人不晓了。实际上,后两者所使用的正是Fraunhofer IIS的VR音频解决方案。

根据公开资料显示,Fraunhofer IIS隶属于位于德国的欧洲最大的应用型研究机构Fraunhofer Gesellschaft,是后者旗下67个研究院中负责音频及多媒体的部门,而其也是MP3技术和H.264视频编解码技术的主要发明者。

我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术

来自Faunhofer IIS技术人员的介绍,当下VR音频面临的主要挑战有4项:

1. 3D声音录制:需要富有经验的声音设计师和录音师;

2. VR后期制作:需要专业的VR混音工具;

3. VR设备上的流媒体内容:需要高效的音频编解码器来传输音频声道及音频对象,进而实现声音的精准定位;

4. 耳机上的还放技术:支持声像在上方或下方的定位,需要借助耳机和头部运动轨迹追踪技术。

对此,Faunhofer IIS给出的解决方案是:提供独立的3D声音捕捉装置,并通过专门的处理软件在虚拟空间中实现基础声道及声音对象的动态放置,经过HE-ACC和MPEC-H的音频传输后,最终借助Cingo技术实现在终端设备上的播放,包括头部追踪及在人和方位和距离对音频对象进行还放。对于后者,目前谷歌的Nexus 5及以上的智能手机产品和Nexus平板电脑产品也同三星和LG一道搭载了这一技术。

以下,为Fraunhofer IIS向智东西(公众号:zhidxcom)展示的其VR音频测试实验室:

我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术

而以下,则是其在美国阿斯彭举办的冬季极限运动项目中用于捕获3D声音的装置:

我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术

对于VR,我们经常将其形容为一个十亿百亿千亿的大市场。一方面,其开创了一个全新的品类、全新的体验、全新的可能;而另一方面,其也对众多细分领域的变革产生了巨大的推动力。

正如本文的主角Fraunhofer IIS,仅在VR音频一项,其便涉及了无数技术的演进和创新。在这之中,其带来的不仅是一种机会,更是一种壁垒甚至是行业标准的诞生。

对于国内的创业者来说,在纷纷上马、略显浮躁的“平台论”下,沉下心来择一而为,或许才不违创业一词的本意。毕竟,在成功之路上,鲜有捷径。

我们在MWC上聊的这家 给三星和LG的VR眼镜提供了音频技术