当画面越来越逼真时,声音也应该“虚拟现实”起来

夏普已经把8K分辨率(7680×4320)的电视成功商业化的时候,人们还是会对一个分辨率只有1080P(2160 x 1200)的设备欣喜若狂,因为后者是Oculus Rift,它提供的是传统显示器永远无法企及的“沉浸感”:一种被称为虚拟现实(VR)的前所未有的视觉体验。

实际上,就像现实中不只有画面,虚拟现实也不限于视觉,从数字娱乐的角度来看,听觉是仅次于视觉的重要感官体验。在声学领域,有人执着于“烧器材”、“煲机”,以获得极致的“高保真音乐”;但还有一群人,在做着像Oculus一样的工作:让声音立体起来,让你的耳朵也来体验虚拟现实。

下面是一段3D音效,你可以戴上耳机,闭上眼睛听一下:

这段音频里声音的远近,左、右方向的变化清晰可辨。有人描述过第一次听到3D音效的感受:觉得自己烧器材就是浮云。

它应用的是一种被称为人头录音(Dummy head recording)的技术,这项技术并不新鲜,简单来说,就是用模拟真人头部的假人充当录音设备,尽可能还原人听到声音的真实过程。

人头录音

人头录音 / YouTube

不过,你应该也发现了,3D音效虽然让声音立体了,但效果主要取决于前期制作,后期的使用中,它还是无法提供更符合真实的体验:比如,在现实中,面对音源,当你把头转向右边,左耳中的声音会更加清晰

是不是很像3D电影和虚拟现实画面的区别?

不过好消息是,现在已经有能提供更真实体验的产品了。

Ossic X是一款耳机,它在Kickstarter上筹到了270万美元,筹款额居音频类产品首位。如此受欢迎的原因是它能提供像虚拟现实一样沉浸式的3D音效。

Ossic X

Ossic X

Ossic X耳机的每个耳罩都有4个独立的发声单元,还有测量耳朵形状及追踪头部运动的传感器,3D音效算法、头部追踪和体型分析是它的核心科技。

戴上它,Ossic X就会自动检测使用者的头部大小和耳朵的形状,并判断出使用者在虚拟音场中的位置,在这个过程中,头部追踪也一直有效。这些数据会实时传输到耳机中,算法据此提供3D音效。

ossic-x-ear ossic-x-position

虽然现在预订要到2017年2月才开始发货,但Ossic X已经在很多场合举办过体验活动,有体验过的媒体也表示,“它比任何3D耳机的表现都好得多”

和虚拟现实配合使用,是不是听起来很让人期待,而这也是Ossic X想做的。

ossic-x-vr

Ossic X并不是唯一一个做沉浸式3D音效的产品,老牌的音频方案Waves威富思也在尝试解决这个问题。

近期,Waves发布了Nx技术,和人头录音类似,Nx技术的核心是用算法将传统录音中缺失的信息插入到信号中,以此来让大脑在聆听音乐时获得空间感。为了增强现场感,Nx技术还允许用户键入个人头部及耳朵的尺寸信息,算法可以根据这些信息进行实时调整。

这就和Ossic X做的事情很接近了,不过,Waves专注的是算法和解决方案,它的客户包括专业的音乐制作人、VR厂商等。对于这部分用户,它提供了一个叫Head Tracker 硬件(可以绑到任何耳机上,这个硬件集成了陀螺仪,然后电脑实时计算陀螺仪变化后声像的变化)配合软件一起使用,录音师就可以根据需求制作出自己所希望的声音效果。

现在,Waves还推出了消费者版本的NX软件,安装后,配合电脑上的摄像头,软件就能追踪你的头部移动,你就能在耳机中获得前所未有的体验。

现在,说起虚拟现实,我们关注得更多的还是画面,不过,相信随着它的普及,沉浸式的3D音效也会越来越被关注,甚至触觉、嗅觉、味觉也被拿出来讨论。只有到这个时候,我们体验到的才是真正的虚拟现实。

订阅更多文章