人类对外界最直接的感知来自视觉,我们通常说的「沉浸感」指的就是包括视觉在内的感官体验。如果想真正让人身临其境,声音也是不可忽视的。很多人在电影院、游戏中体验过「3D 音效」,但它对环境、设备都有很高的要求。最近腾讯推出一种 3D 音效算法,可以让你在普通耳机上也能感受 3D 音效。
我们用声音来感知位置靠的是双耳效应,声音大小、到达两只耳朵的时间等信息不一样,据此可以判断出声源的距离。腾讯音视频实验室用算法模拟了这些参数,在不依靠特殊硬件的基础上直接实现 3D 音效,我们需要的仅仅是一副普通的双声道耳机。
3D 音效算法的应用场景有很多,首先是看视频的体验。电影院中震撼的声音效果是靠特殊的环境和专业硬件实现的,但对于用户来说更方便的场景是在手机上观看。很多手机至今还使用单扬声器,即使戴了双声道耳机,很多声音的细节也会被模糊掉,人只能听到来自左中右三个方向的声音。利用 3D 音效可以模拟出立体声的效果,将视频中的各种声道还原到相应的位置,对于用户来说,在手机上也能体验影院般的听觉效果。
除了视频,3D 音效对游戏体验的提升更大。比如最近很火的吃鸡游戏,虽然枪声、脚步的 3D 效果可以用游戏引擎来实现,但玩家间的语音却无法体现位置,如果把 3D 音效算法应用到实时语音中,玩家就可以通过声音来判断敌人的位置,游戏的沉浸感也会更强。
想象一下,如果斗地主、麻将游戏中也加入 3D 音效,会不会更有现场感?
在 VR 体验中,视觉感受和现实脱节会带来眩晕感,平平的声音虽然不至于造成头晕,但也会影响整体体验。视觉的问题解决后,3D 音效的加入会让 VR 体验更真实。腾讯即将上线的一款 VR 游戏就会用到 3D 音效算法的技术。
用算法实现 3D 音效最重要的意义就是摆脱了硬件的限制。腾讯音视频实验室为很多直播、社交平台提供服务,距离 3D 音效算法落地用户应该也不会太远。
|