在当初很多的线上实时互动场景中,咱们器重的不仅仅是互动体验,还要晋升沉迷感。而在很多场景中,仅凭空间音频技术,就能够带来如临其境的体验。空间音频技术的原理是怎么的呢?
看过咱们新一期的 RTC 科普视频,你就晓得了。
空间音频技术是以算法的形式将事实中的听感,在数字世界中重建了进去。既然是重建,那么要了解这个过程,就须要先理解,事实中,咱们是如何通过耳朵、大脑来要感知到一个声音在空间中的地位的。
要解决这个问题,咱们能够将判断声音地位的过程拆解一下,即:
● 如何判断声源与你程度方位
● 如何判断声源与你的垂直方位
● 如何判断声源与你的间隔
事实上,咱们是依附双耳间的音量差、时间差和音色差来判断声音的方位。因为双耳位于头部两侧,如果声音是来自右侧,那么它达到右耳的工夫绝对更短,这就行程了双耳时间差;声音在流传过程中,频率会衰减,那么双耳之间听到的音色也会不同。
在室内环境中,耳朵听到的声音包含直达声、晚期反射声、前期混响声。直达声就是字面意思,从声源间接传到耳朵的声音;晚期反射,则是通过室内墙面反射后传到耳朵的,相比直达声晚 50 – 80ms;在晚期反射之后达到的声音则是前期混响。就像刚刚所说,声音流传中会有衰减,所以声源与耳朵的间隔是可能被听进去的。通常来讲,声源与耳朵的间隔增加一倍,直达声的声压就会减小 50%,而晚期反射与前期混响的声压则不会受到这么显著的影响。咱们的大脑就会基于直达声与晚期反射 + 前期混响的声压比来判断声源的间隔。
在这期的科普视频中,咱们对以上原理都做了解说。为了让更多人能有画面感,便于设想声音流传的过程,咱们用“水”作为类比。不过,要再次揭示各位,水波的流传与声波在空气中的流传过程有很大差异,大家不要等同视之。
另外,咱们在视频里简要地解说了如何在虚拟现实(VR)中重建空间音频。其中提到的算法,咱们并没有深刻解说,如果你感兴趣, 能够查看咱们往期的文章 。
最初,如果大家还心愿理解哪些技术原理,欢送给咱们留言。