随着科技发展,手机已经成为大众观赏及信息传递最为快速和便捷的方式之一。如今手机普遍支持立体声的扩声方式。在不久之前,iPhone也推出了SPATIAL AUDIO的虚拟沉浸式音效。然而我们的疑问却是:如果没有多轨文件的代入或分轨编辑的过程,3D沉浸式的听感是否依然能获得好的效果?
KLANG作为双耳渲染的3D沉浸式整体解决方案,在线下实际应用中能作为个人监听系统使用,为广大乐手及调音师带来极大的便利;而在线上,KLANG作为双耳渲染也可支持将渲染后的效果通过网络传播给每一个带耳机的听众。但不管是线下还是线上,它都能发挥其独特的优势,为音乐工作者带来舒适的使用体验感及高质量的作品。
想要深入了解KLANG,首先我们需要清楚目前入耳式立体声的工作方式。一般来说,立体声的听感主要靠两大元素:响度和时间。
A 响 度
辨别一个声音的方向,通过响度来改变;从某个方位来的声音到达两个耳朵的响度不同,落差通过人脑神经来判断来源位置。
B 时 间
人类大脑思维会存在一定程度的“先入为主”,从同一个方向来源的声音,到达两个耳朵的时间会有所不同;然而,首先到达的声音会让大脑产生声音来源偏向。(这里不能以偏概全,具体可以参考哈斯效应,关于35ms前后问题,与响度也存在关系。)
因此,在乐手排练时,我们经常会听到“麻烦音响老师把我的乐器声音加大点”的要求,音量让乐器抢在前面——使得使用者想听的声音显得更清晰。这看似是一个简单快捷的解决办法,但这无疑会对乐手们耳朵造成一定程度的损伤,双耳得不到有效保护的同时还可能获得一个糟糕的听感。反观,KLANG的工作模式能给乐手们带来福音。得益于KLANG的3D沉浸式双耳渲染技术是基于这三大元素:响度、时间和音色。
人的耳朵都是有轮廓结构的,声音从不同方向传来,经过人体(主要是头部),双耳听感会有音色上的差异,不管是前后、左右、甚至上下偏向,耳朵都会进行渲染,这些均是双耳渲染非常重要的部分。KLANG为此做了多项实验及数据采集,如:前后方向的听感差别、360度旋转的区别以及声音来源高低变化的不同等等,这些数据结果都非常重要和宝贵。技术人员通过实验数据的分析、人体工程学、心理学等多次系统性的折中选择后,推出了KLANG的算法,为广大艺人、调音师和音乐工作者们带来舒适的工作模式与科学的听音习惯。
单纯从传统立体声入耳式监听的听感出发,一般会通过提高乐器响度来抢位置,使用者无法很好地同时兼顾听力和听感;而KLANG的双耳渲染3D入耳方案能完美解决听力保护的问题,重建舞台环境,同时更解决了长时间戴耳机带来的疲劳等问题。
KLANG系统
KLANG系统可分为三大部分,分别是处理核心、乐手个人控制系统以及传输协议,接下来给大家详细讲解一下:
A 处理核心
KLANG:konductor
KLANG:vokal
KLANG:DMI-KLANG
B 乐手个人控制系统
KLANG:kontroller
KLANG APP
C 传输协议
KLANG支持DANTE/MADI协议,并且DANTE可支持POE供电。
系统架构图
KLANG线下应用
KLANG为线下应用带来的好处是显而易见的,我们以伦敦管线乐团为例进一步进行解析。众所周知,该乐团演奏的古典音乐(MoS古典音乐)是经典舞蹈30周年活动里最受欢迎的节目之一,这场演出采用了VOKAL主机、12台KONTROLLER控制器和1台SD12-96的调音台。
所有乐队的信号拾音通过话筒进入调音台SD12,通过SD12的Direct Out输出走MADI信号至VOKAL主机,VOKAL主机通过POE供电交换机,走DANTE分别传送给每一台乐手的KONTROLLER。系统清晰明了,通过POE供电,KLANG KONTROLLER不需要额外增加电源线和信号线,仅需要耳机即可。由于全场采用IEM,加上现场乐器繁多,大家担心会出现听觉疲劳的情况发生。但神奇的是,乐手们纷纷表示即使带上耳机也毫无负担,沉浸式的声音体验让他们仿佛置身舞台之中。
其实,神奇的原因在于传统立体声模式下需要用增大音量来抢位置,但使用KLANG后,也许-6到-10dB的音量就能完美解决问题;换句话说,以往只能在双耳轴线上的听感,现在变成有具有空间感的立体听感。
另外,KLANG的每个分机控制器都有具备环境声音拾音的话筒:
在控制器以及主机控制软件上均可以调节环境声音进入的大小和位置信息:
控制器
主机控制软件
因此,在使用KLANG后的入耳式监听,能让乐手减少听觉疲劳,同时拥有重建舞台环境的舒适感。作为线下应用,KLANG的出现可以说是乐手们和调音师们的烦恼清洁剂。并且其操作及可视化都非常棒,人性化的界面让使用者快速上手,被称为是入耳式监听的完美解决方案。
KLANG线上应用
在线上使用中,KLANG同样也是音乐工作者的绝佳之选!由于它是基于双耳渲染的基础条件,这意味着处理后的任意一个点位的双耳听感可以通过信号转播至平台供平台的所有听众进行欣赏。
受到这2~3年疫情的影响,网络科技在飞速发展,网络平台直播也发展迅速,抖音、网易、B站、斗鱼等直播平台都具备这种条件,大众可便捷听赏,也会选择使用手机的方式来观赏。如今无论是院团(交响乐团、民乐团)也开始尝试增加这种非传统的表演形式;流行乐或摇滚乐的乐队就更喜闻乐见了,如LiveHouse、排练厅、直播间等场景都具备个人直播或团队直播环境。这时,KLANG通过双耳渲染,可以让广大群众通过手机佩戴上耳机进行3D沉浸式观赏。
Live House的系统示意图
一般作为团体演出听赏方式,它的点位基本会以调音师的调整为最后播出线路,而调音师则需要通过佩戴经过KLANG双耳渲染后的信号进行修饰。若具备DiGiCo数字调音台则更为便捷,DiGiCo与KLANG之间支持界面控制,信息交互的功能。我们以LiveHouse来举例,正常有吉他、BASS、鼓、键盘以及歌手,调音师在系统上算点位,系统图如上。
在以上系统架构基础上,若需要进行线上直播,如:斗鱼直播,调音师只需通过OBS进行推流(或其他推流软件),就已达到3D沉浸式双耳渲染的效果。直播推流也仅需几步,即可完美操作:
STEP 1
拾取舞台信号
通过话筒拾取舞台信号至调音台进行混音。(此处用多轨替代,通过UB-MADI送至调音台Quantum 225)
STEP 2
分轨至KLANG处理核心
通过调音台MADI/DANTE协议将舞台上的乐器及歌手等话筒信号Direct Out(处理前后可自选)分轨到KLANG处理核心KLANG:VOKAL / DMI-DANTE / KONDUCTOR。
STEP 3
稍作调整
调音师辅助乐队对个人监听进行调整并调整自身监听系统,以便播出。
STEP 4
返送至调音台
由于调音台与KLANG处理核心为双向传输(DANTE/MADI) ,因此我们可通过Routing路由将个人监听信号从KLANG处理核心返送至调音台,以便控台进行直播准备;同时也便于调音师对每个乐手的控制器都能进行监听及控制。(请注意:这里返推送给调音台的个人监听信号,已做双耳渲染,具备3D沉浸式的效果。)
STEP 5
输出信号接至声卡输入
若每个乐手想要独立进行推流,通过手机的方式也可以完成。只要有双通道拾音手机声卡,且手机的平台直播双通道植入即可。每个分机KONTROLLER均具备卡农输出及AUX IN输入。
所以说,KLANG既是线下3D沉浸式个人监听系统的绝佳之选,同时也是可兼顾线上双耳渲染的3D沉浸式播出的完美解决方案,是乐手、主播、平台导播等各位音乐创作者的不二之选!