3.双耦合滤波器设计当滤波器的结构确定下来之后,我们要去设计滤波器系数了。设计过程我把它总结成了三步,第一步就是构建优化准则,第二步是求解滤波器的权系数——Wl和Wn,一步就是构建耦合机制。第一步就是构建优化准则。我觉得构建优化准则,应该是整个滤波器设计里面重要的一步,因为它决定了滤波器性能的上限。什么样的优化准则是一个好的优化准则呢?我觉得好的优化准则需要跟问题的物理特性有效匹配起来,所以在构建优化准则之前,我们先对非线性声学回声的特性进行分析,希望通过这种分析去挖掘非线性声学回声的一些物理特性。我们的分析是基于上面的函数,我们称它为短时相关度,它所表示的是两个信号,在一个短时的观测时间窗“T”这样一个尺度范围内的波形的相似程度,需要注意的是这个函数它是统计意义上的,因为我们对它进行了数学期望运算。同时在分子的一项我们还加了一个相位校正因子,目的是为了将这两路信号的初始相位对齐。基于前面构建的短时相关度函数,我们对大量声学回声数据进行分析,并挑选了几组比较典型的数据:绿色的曲线对应的是一组线性度非常好的回声数据。我们从这个数据上可以看到,在整个时间T的变化范围内,它的短时相关度都非常高。
声学回声的原理是什么?湖北录播声学回声分析
达到,接近于1。黄色曲线,对应的数据具有比较弱的非线性失真,所以在时间T变大了之后,短期相关度逐渐降低,趋于一个相对平稳的值。而红色曲线是我们选的一条具有强非线性失真的数据,为了对这三组数据进行有效对比,我们还给出了一条蓝色曲线,这条曲线是信号与噪声的短时相关度,它在整个时间T范围内都很小。通过这样一组曲线的对比,会得到两个结论,个结论就是我们构建的短时相关度函数,能够相对客观反映这个声学系统的线性度特征,线性度越好,这个值会越大。第二个结论:对于非线性失真很强的系统,其在短时观测窗内(如T<100ms)依然具有较强的相关度,这从红色的曲线可以看出来。也正是基于这样的特征,我们接下来就构建了一种新的误差函数,称之为“短时累积误差函数”。大家可以注意到我们在一个观测时间窗T内,对残差进行了累积。基于这样的误差函数,我们进一步构建了一种新的优化准则,称为“小平均短时累计误差准则”。我们希望通过优化准则的约束,得到的滤波器权系数能够满足两个特性,个特性是滤波器在统计意义上能够达到比较好,即全局比较好,因此我们在目标函数里加入了数学期望运算。同时。
湖北录播声学回声分析便于大家对双耦合声学回声消除算法有一个定性的认识。
WebRTCAEC算法中开辟了可存储250个block大缓冲区,每个block的长度PART_LEN=64个样本点,能够保存的1s的数据,这也是理论上的大延时能够估计的范围,够用了。我们用610ms延时的数据测试(启用大延时调整需要设置delay_agnostic_enabled=1):我们还是设置默认延时为240ms,刚开始还是调整了-60个block,随后大延时调整接入之后有调整了-88个block,一共调整(60+88)*4=592ms,之后线性滤波器固定index=4,表示剩余延时剩余16ms,符合预期。③线性滤波器延时估计是固定延时调整和大延时调整之后,滤波器对当前远近端延时的直接反馈。前两者调整不当会造成延时过小甚至非因果,或延时过大超出滤波器覆盖能力,导致无法收敛的回声。因此前两者在调整的过程中需要结合滤波器的能力,确保剩余延时在滤波器能够覆盖的范围之内,即使延时小范围抖动,线性部分也能自适应调整。总结与优化方向WebRTCAEC存在的问题:(1)线性部分收敛时间较慢,固定步长的NLMS算法对线性部分回声的估计欠佳;(2)线性部分滤波器阶数默认为32阶,默认覆盖延时132ms,对移动端延时较大设备支持不是很好,大延时检测部分介入较慢。
n)中的回声是扬声器播放远端参考x(n),又被麦克风采集到的形成的,也就意味着在近端数据还未采集进来之前,远端数据缓冲区中已经躺着N帧x(n)了,这个天然的延时可以约等于音频信号从准备渲染到被麦克风采集到的时间,不同设备这个延时是不等的。苹果设备延时较小,基本在120ms左右,Android设备普遍在200ms左右,低端机型上会有300ms左右甚至以上。(2)远近端非因果为什么会导致回声?从(1)中可以认为,正常情况下当前帧近端信号为了找到与之对齐的远端信号,必须在远端缓冲区沿着写指针向前查找。如果此时设备采集丢数据,远端数据会迅速消耗,导致新来的近端帧在向前查找时,已经找不到与之对齐的远端参考帧了,会导致后续各模块工作异常。如图10(a)表示正常延时情况,(b)表示非因果。WebRTCAEC中的延时调整策略关键而且复杂,涉及到固定延时调整,大延时检测,以及线性滤波器延时估计。三者的关系如下:①固定延时调整只会发生在开始AEC算法开始处理之前,而且调整一次。如会议盒子等固定的硬件设备延时基本是固定的,可以通过直接减去固定的延时的方法缩小延时估计范围,使之快速来到滤波器覆盖的延时范围之内。下面结合代码来看看固定延时的调整过程。
回声消除AEC(AcousticEchoCancellation)一般指的是声学回声消除,其主要用于抑制产品本身发出的声音。
这样有助于扩散或展开室内的声音,如图3所示。不要过多地填满泡沫材料,因为填满了的、“死寂”的房间对演奏来说是很不合适的,而保留一些反射声后能给声音加上“空间”和活泼的感觉。其他高频吸声体有睡袋、活动毯子、地毡毛毯、窗帘以及用细薄的棉布或粗麻布罩住的玻璃纤维等。如有可能,把这些材料与墙面之间留有数英寸的空间。这种间距会有助于吸收中低频率成分。有一种宽频段的吸声体,它是罩有细薄棉布或粗麻布的已压制好的(Owens-CorningType703,3lb/ft3)。首先在要进行录音的演奏者的前方或上方只安置一小部分吸声材料,每次只增加一些吸声体,直到所录得的声音满意时为止——通常覆盖总表面的50%~60%。吸声位置位于从混录位置方向观察为音箱的镜像位置上。吸声体置于音箱后面的墙上,也可把吸声板吊挂在混录位置与音箱之间半路中心的上方,用吊钩和线绳悬挂。另一种吸声体为位于传声器附近的安装的声学板。例如ModTrap及sERelexion滤波器。声学基本概念,你知多少?1.吸声声波通过某种介质或射到某介质表面时,声能减少并转换为其他能量的过程称为吸声。2.吸声的作用对同一个空间,改变室内声场的特性。吸声的主要作用是吸收室内的混响声,对直达声不起作用。
回声来自于非预期的泄露,一般分为电学回声和声学回声。湖北录播声学回声分析
非线性声学回声产生的原因。湖北录播声学回声分析
可以准确快速的进行底噪测试。下图TWS耳机中的左耳,在喇叭播放空声源时,喇叭端有略微的电流声底噪,右耳无此不良现场,通过指南测控的标准声学测试系统进行左右耳TWS声学测试,可以在底噪测试步骤中检测到,有底噪异常的左耳的一些频段能量值偏高,无底噪问题的右耳的表现就“平顺”很多。再结合与更多正常品的对比和设定合理的limits,可以快速准确的检查出耳机在各种状态下的底噪不良。耳机回声回声来自于非预期的泄露,一般分为电学回声和声学回声。前者一般由于麦克风和扬声器线路布局不合理的电路耦合造成,后者则是由于麦克风和扬声器的声学泄露耦合而成。对于回声不良的耳机来说,在通话时,耳机喇叭播放的声音信号通过麦克风又传回电话另一头的手机,从而让讲话者听到自己的声音。对于耳机来讲,主要是声学回声,表现为收发环路的隔离度不好,其根本原因就是耳机在装配时麦克风与喇叭的密封隔离没做好,导致通话时回声出现的不良体验。图中的耳机,在通话时,人耳会略微的感受到回声,也就是佩戴人讲话的声音又传递到了耳机本身的喇叭后播放出来,也有会在通话对方的手机端出现回声现像影响双方的通话质量。指南测控的标准声学测试系统,根据回声传输路径。湖北录播声学回声分析