转载

当画面越来越逼真时,声音也应该“虚拟现实”起来

  当夏普已经把 8K 分辨率(7680×4320)的电视成功商业化的时候,人们还是会对一个分辨率只有 1080P(2160 x 1200)的设备欣喜若狂,因为后者是 Oculus Rift,它提供的是传统显示器永远无法企及的“沉浸感”:一种被称为虚拟现实(VR)的前所未有的视觉体验。

  实际上,就像现实中不只有画面,虚拟现实也不限于视觉,从数字娱乐的角度来看,听觉是仅次于视觉的重要感官体验。在声学领域,有人执着于“烧器材”、“煲机”,以获得极致的“高保真音乐”;但还有一群人,在做着像 Oculus 一样的工作:让声音立体起来,让你的耳朵也来体验虚拟现实。

  下面是一段 3D 音效,你可以戴上耳机,闭上眼睛听一下:

 

  这段音频里声音的远近,左、右方向的变化清晰可辨。有人描述过第一次听到 3D 音效的感受:觉得自己烧器材就是浮云。

  它应用的是一种被称为人头录音(Dummy head recording)的技术,这项技术并不新鲜,简单来说,就是用模拟真人头部的假人充当录音设备,尽可能还原人听到声音的真实过程。

当画面越来越逼真时,声音也应该“虚拟现实”起来

人头录音 / YouTube

  不过,你应该也发现了,3D 音效虽然让声音立体了,但效果主要取决于前期制作,后期的使用中,它还是无法提供更符合真实的体验:比如,在现实中,面对音源,当你把头转向右边,左耳中的声音会更加清晰

  是不是很像 3D 电影和虚拟现实画面的区别?

  不过好消息是,现在已经有能提供更真实体验的产品了。

  Ossic X 是一款耳机,它在 Kickstarter 上筹到了 270 万美元,筹款额居音频类产品首位。如此受欢迎的原因是它能提供像虚拟现实一样沉浸式的 3D 音效。

当画面越来越逼真时,声音也应该“虚拟现实”起来

Ossic X

  Ossic X 耳机的每个耳罩都有 4 个独立的发声单元,还有测量耳朵形状及追踪头部运动的传感器,3D 音效算法、头部追踪和体型分析是它的核心科技。

  戴上它,Ossic X 就会自动检测使用者的头部大小和耳朵的形状,并判断出使用者在虚拟音场中的位置,在这个过程中,头部追踪也一直有效。这些数据会实时传输到耳机中,算法据此提供 3D 音效。

当画面越来越逼真时,声音也应该“虚拟现实”起来当画面越来越逼真时,声音也应该“虚拟现实”起来

  虽然现在预订要到 2017 年 2 月才开始发货,但 Ossic X 已经在很多场合举办过体验活动,有体验过的媒体也表示,“它比任何 3D 耳机的表现都好得多”。

  和虚拟现实配合使用,是不是听起来很让人期待,而这也是 Ossic X 想做的。

当画面越来越逼真时,声音也应该“虚拟现实”起来

  Ossic X 并不是唯一一个做沉浸式 3D 音效的产品,老牌的音频方案 Waves 威富思也在尝试解决这个问题。

  近期,Waves 发布了 Nx 技术,和人头录音类似,Nx 技术的核心是用算法将传统录音中缺失的信息插入到信号中,以此来让大脑在聆听音乐时获得空间感。为了增强现场感,Nx 技术还允许用户键入个人头部及耳朵的尺寸信息,算法可以根据这些信息进行实时调整。

  这就和 Ossic X 做的事情很接近了,不过,Waves 专注的是算法和解决方案,它的客户包括专业的音乐制作人、VR 厂商等。对于这部分用户,它提供了一个叫 Head Tracker 硬件(可以绑到任何耳机上,这个硬件集成了陀螺仪,然后电脑实时计算陀螺仪变化后声像的变化)配合软件一起使用,录音师就可以根据需求制作出自己所希望的声音效果。

  现在,Waves 还推出了消费者版本的 NX 软件,安装后,配合电脑上的摄像头,软件就能追踪你的头部移动,你就能在耳机中获得前所未有的体验。

  现在,说起虚拟现实,我们关注得更多的还是画面,不过,相信随着它的普及,沉浸式的 3D 音效也会越来越被关注,甚至触觉、嗅觉、味觉也被拿出来讨论。只有到这个时候,我们体验到的才是真正的虚拟现实。

正文到此结束
Loading...