众所周知,VR 内容对行业的发展至关重要,因此众多创业公司都打起了 VR 内容制作设备的算盘,纷纷推出 VR 全景相机或者 VR 双目立体相机。然而,当越来越多的创业者都将目光投向 VR 相机领域的时候,也有一些创业者另辟蹊径,开始了 VR 音频方面的创业。比如赛宾科技、 时代拓灵 ,以及我们今天的主人公 CES Asia 2017 的“创新奖”获得者 森声科技 。
据了解,森声科技创始人张瑞博此前也在 VR 行业内从业多年,主要研究一种名叫 cube 空间的虚拟现实实现技术——即在一个封闭白墙的房间里,利用多个投影仪向四个墙面投射相关画面,从而为房间内的体验者带来身临其境的 VR 体验。众所周知,这种 VR 实现手段后来并没有成为主流,成为主流的是 VR 眼镜方案,但张瑞博认为 VR 眼镜方案技术含量并不高,而且竞争者太多,为此其开始的时候只要是做一些内容方面的项目。
直到他意识到声音也是 VR 中必不可少的一部分。“做大家都在做的东西,那就没多少意思,只有做大家都还没有意识到,但却至关重要的东西那才有商机。”而 VR 全景声便是张瑞博心目中的“没有被人意识到,但却至关重要”的东西。
张瑞博认为人们当时错误地估计了声音对于 VR 的重要性,他认为 VR 全景声对 VR 视频而言并不是锦上添花,而是必不或缺的基础模块。声音在现实生活中必不可少,在虚拟世界中同样也必不可少。现实生活中声音不仅包含了字面信息,更暗含有距离信息、方位信息等,张瑞博认为这些信息在 VR 中至关重要, 比如在 VR 电影内,可以利用声音引导观众看导演所希望他们看见的内容,从而让观众有机会完整地看完看全一个故事等 。
VR 音频与 3D 音频的区别?
说到 VR 音频,其与 3D 音频的差异往往让人傻傻分不清。
对比,张瑞博举例表示,3D 音频就是你通过手机听见一个人从你的右边跑过去,但不管你如何转头、改变视角,那人听起来都是从你右边跑过去的,“3D 音频”;而 VR 音频则是指人在改变视角的同时,声音源也不断改变方位,始终来源于声音发生的本来位置 。而在硬件方面,3D 音频只需要两个麦克风即可,VR 音频则至少需要 4 个麦克风。
可以说,3D 音频是 VR 音频的初级阶段。
3D 音频与 VR 音频全布局
目前,森声科技旗下主要有两款产品,一款是 2B 的 VR 全景声录音设备 Sound Pano,主打 VR 音频录制,另一款是 2C 的人头录音耳机 Lifelike,主打 3D 音频录制。
从外形上看 Sound Pano 就是一个圆柱体,通过自然 HRTF 采集,能同时录制 8 个方向 16 个音轨,实现 48K 采样率 24bit 专业无损数据采集,能精准捕捉声源的方位、距离与运动轨迹。具有精准的立体声场感知效果,能还原真实的声场关系。同时,在 Sound Pano 顶部还可以连接专业的全景相机,在拍摄 VR 视频的同时也能将 VR 音频同步录制。
据了解,在 VR 全景声录制方面,目前主要有两大技术流派,一是 FOA(First Order Ambisonic),这种方案最低只需要 4 个麦克风即可采集周围声场数据,硬件比较简单,技术主要集中在后期的软件处理方面。不过,由于谷歌之前已经开源了一套基于 FOA 的 Omnitone 方案。因此,在张瑞博看来,FOA 方案的全景声设备已经没有多少技术难点了,而且由于 FOA 方案比较容易实现小型化,其未来更大的可能性是被集成于 VR 相机内部,给单纯的全景声企业的机会并不多。
为此,森声科技选择了难度更大的第二条道路——QB(Quad Binaural)方案。据张瑞博介绍,QB 方案在硬件方面要比 FOA 方案更加复杂,其每个方向均采用双麦克风阵列,因此较 FOA 方案,其能额外收集到每个方向的声音衰减信息,即用户可以听得出来声音的远近,有一种更趋于真实的距离感。QB 方案的技术难点主要集中在硬件端,软件方面并不是核心技术点,而且目前没有谁开放相关技术。
而且,QB 方案由于要模拟人类的双耳效应,因此其直径、体积都不可能小型化,据了解,森声科技 QB 方案的 Sound Pano,其主体直径就有 25cm,主体高度也依版本的不同,分别达到了 12cm 和 18cm。张瑞博认为体积大除了能够带来音质上的提升以外,更重要的便是其使得 QB 方案的设备由于无法集成于普通的 VR 相机内,可以作为一个单独设备打入市场,市场前景巨大。
另外,森声科技目前便也推出了一款 3D 录音耳机——Lifelike,跟普通耳机类似,但它在耳塞部位还集成了两个麦克风,麦克风收集到两路音频信号之后,利用耳机线上的数字处理单元进行相关处理,最后再将处理好的数据接入到手机,从而避免了手机仍需下载专门处理软件的麻烦。未来,张瑞博表示还将推出更加针对 2C 的,面向现有的包括手机等移动设备的、能够提高用户听觉体验的产品。
关于销量,张瑞博表示他们的 VR 音频在的市场表现比较出人意料。“原本我以为 VR 音频由于太过早期,况且我们的 QB 方案太过专业,销量不会太好,做 B 端业务的目标最初也只是为了行业布局。但没想到的是,它在美国的反馈却非常好,我们在美国一直都有出货,而且偶尔会拿到 20 台、30 台的大单。”
据悉,森声科技已经完成了 Pre-A 轮融资,估值 5000 万,A 轮融资已经启动。张瑞博表示,QB 方案是他们核心技术所在地,目前已经在国内与美国申请了多项专利,“申请专利过程中,我们发现自己的专利布局算是非常早的,前面没有什么专利钳制”。另外,对于 Lifelike,张瑞博也表示,目前市场上缺乏 3D 录音耳机的方案企业,“没有方案商,耳机厂商便很难自己做出来。”