上海交互声学回声AEC算法

    第三个部分是通过实验来检验这个算法的性能；再做一些简单的总结。非线性声学回声1什么是非线性声学回声？，什么是非线性的声学回声？的是声学回声的路径，左边对应的是发射端，右边对应的是接收端。我们发出的信号首先要经过D/A变换，从数字域变换到模拟域，然后再经过功率放大器，放大之后驱动喇叭，这样就会发出声音。发出来的声音经过空气信道传播之后，到了接收端被麦克风采集到，然后再次经过功率放大器，再通过A/D变换，从模拟域又变回到数字域。那么这里的y[k]就是我们收到的回声信号。，我们接收到的回声y[k]到底是线性回声还是非线性回声呢？或者说我们应该怎么去判断它？我觉得要解决这个问题，就是要认识清楚这里面的每一个环节，看看它们到底是线性系统还是非线性系统，如果所有的环节都是线性的话，那么很自然y[k]就是一个线性的回声，否则只要有一个环节是非线性的，那么这个回声就是非线性回声。在这里我将整个回声路径分成了A、B、C、D四个部分。我们一起来看一下，ABCD里面哪一个环节有可能是非线性的？答案应该是B。也就是回声路径里面的功率放大器和喇叭，具体的原因稍后会做详细分析。接下来我想再解释一下为什么A、C、D它们不是非线性的。

    非线性声学回声消除技术在整个声学回声消除领域是一个相对比较冷的研究方向。上海交互声学回声AEC算法

    达到，接近于1。黄色曲线，对应的数据具有比较弱的非线性失真，所以在时间T变大了之后，短期相关度逐渐降低，趋于一个相对平稳的值。而红色曲线是我们选的一条具有强非线性失真的数据，为了对这三组数据进行有效对比，我们还给出了一条蓝色曲线，这条曲线是信号与噪声的短时相关度，它在整个时间T范围内都很小。通过这样一组曲线的对比，会得到两个结论，个结论就是我们构建的短时相关度函数，能够相对客观反映这个声学系统的线性度特征，线性度越好，这个值会越大。第二个结论：对于非线性失真很强的系统，其在短时观测窗内（如T<100ms）依然具有较强的相关度，这从红色的曲线可以看出来。也正是基于这样的特征，我们接下来就构建了一种新的误差函数，称之为“短时累积误差函数”。大家可以注意到我们在一个观测时间窗T内，对残差进行了累积。基于这样的误差函数，我们进一步构建了一种新的优化准则，称为“小平均短时累计误差准则”。我们希望通过优化准则的约束，得到的滤波器权系数能够满足两个特性，个特性是滤波器在统计意义上能够达到比较好，即全局比较好，因此我们在目标函数里加入了数学期望运算。同时。

     上海交互声学回声AEC算法双耦合声学回声消除算法的主要贡献体现在两个方面。

    WebRtcAec_Process接口如上，参数reported_delay_ms为当前设备需要调整延时的目标值。如某Android设备固定延时为400ms左右，400ms已经超出滤波器覆盖的延时范围，至少需要调整300ms延时，才能满足回声消除没有回声的要求。固定延时调整在WebRTCAEC算法开始之初作用一次,为什么target_delay是这么计算？inttarget_delay=startup_size_ms*self->rate_factor*8;startup_size_ms其实就是设置下去的reported_delay_ms，这一步将计算时间毫秒转化为样本点数。16000hz采样中，10ms表示160个样本点，因此target_delay实际就是需要调整的目标样本点数（aecpc->rate_factor=aecpc->splitSampFreq/8000=2）。我们用330ms延时的数据测试：如果设置默认延时为240ms，overhead_elements次被调整了-60个block，负值表示向前查找，正好为60*4=240ms，之后线性滤波器固定index=24，表示24*4=96ms延时，二者之和约等于330ms。②大延时检测是基于远近端数据相似性在远端大缓存中查找相似的帧的过程，其算法原理有点类似音频指纹中特征匹配的思想。大延时调整的能力是对固定延时调整与线型滤波器能力的补充，使用它的时候需要比较慎重。需要控制调整的频率，以及控制造成非因果的风险。

    n)为加混响的远端参考信号x(n)+近端语音信号s(n)。理论上NLMS在处理这种纯线性叠加的信号时，可以不用非线性部分出马，直接干掉远端回声信号。图7(a)行为近端信号d(n)，第二列为远端参考信号x(n)，线性部分输出结果，黄色框中为远端信号。WebRTCAEC中采用固定步长的NLMS算法收敛较慢，有些许回声残留。但是变步长的NLMS收敛较快，回声抑制相对好一些，如图7(b)。线性滤波器参数设置#defineFRAME_LEN80#definePART_LEN64enum{kExtendedNumPartitions=32};staticconstintkNormalNumPartitions=12;FRAME_LEN为每次传给音频3A模块的数据的长度，默认为80个采样点，由于WebRTCAEC采用了128点FFT，内部拼帧逻辑会取出PART_LEN=64个样本点与前一帧剩余数据连接成128点做FFT，剩余的16点遗留到下一次，因此实际每次处理PART_LEN个样本点（4ms数据）。默认滤波器阶数为kNormalNumPartitions=12个，能够覆盖的数据范围为kNormalNumPartitions*4ms=48ms，如果打开扩展滤波器模式(设置extended_filter_enabled为true)，覆盖数据范围为kNormalNumPartitions*4ms=132ms。随着芯片处理能力的提升，默认会打开这个扩展滤波器模式，甚至扩展为更高的阶数。

    搜索“声学回声消除”的相关文献，一共找到了3402篇。

    这样有助于扩散或展开室内的声音，如图3所示。不要过多地填满泡沫材料，因为填满了的、“死寂”的房间对演奏来说是很不合适的，而保留一些反射声后能给声音加上“空间”和活泼的感觉。其他高频吸声体有睡袋、活动毯子、地毡毛毯、窗帘以及用细薄的棉布或粗麻布罩住的玻璃纤维等。如有可能，把这些材料与墙面之间留有数英寸的空间。这种间距会有助于吸收中低频率成分。有一种宽频段的吸声体，它是罩有细薄棉布或粗麻布的已压制好的（Owens-CorningType703,3lb/ft3）。首先在要进行录音的演奏者的前方或上方只安置一小部分吸声材料，每次只增加一些吸声体，直到所录得的声音满意时为止——通常覆盖总表面的50%~60%。吸声位置位于从混录位置方向观察为音箱的镜像位置上。吸声体置于音箱后面的墙上，也可把吸声板吊挂在混录位置与音箱之间半路中心的上方，用吊钩和线绳悬挂。另一种吸声体为位于传声器附近的安装的声学板。例如ModTrap及sERelexion滤波器。声学基本概念，你知多少？1.吸声声波通过某种介质或射到某介质表面时，声能减少并转换为其他能量的过程称为吸声。2.吸声的作用对同一个空间，改变室内声场的特性。吸声的主要作用是吸收室内的混响声,对直达声不起作用。

    在构建滤波器模型的过程中结合了非线性声学回声的一些特性。上海交互声学回声AEC算法

AEC声学回声，电话的扬声器的声音。上海交互声学回声AEC算法

    至于双讲恢复能力WebRTCAEC算法提供了{kAecNlpConservative,kAecNlpModerate,kAecNlpAggressive}3个模式，由低到高依次不同的抑制程度，远近端信号处理流程,NLMS自适应算法（上图中橙色部分）的运用旨在尽可能地消除信号d(n)中的线性部分回声，而残留的非线性回声信号会在非线性滤波（上图中紫色部分）部分中被消除，这两个模块是WebrtcAEC的模块。模块前后依赖，现实场景中远端信号x(n)由扬声器播放出来在被麦克风采集的过程中，同时包含了回声y(n)与近端信号x(n)的线性叠加和非线性叠加：需要消除线性回声的目的是为了增大近端信号X(ω)与滤波结果E(ω)之间的差异，计算相干性时差异就越大（近端信号接近1，而远端信号部分越接近0），更容易通过门限直接区分近端帧与远端帧。非线性滤波部分中只需要根据检测的帧类型，调节抑制系数，滤波消除回声即可。下面我们结合实例分析这套架构中的线性部分与非线性分。线性滤波线性回声y'(n)可以理解为是远端参考信号x(n)经过房间冲击响应之后的结果，线性滤波的本质也就是在估计一组滤波器使得y'(n)尽可能的等于x(n)，通过统计滤波器组的比较大幅值位置index找到与之对齐远端信号帧，该帧数据会参与相干性计算等后续模块。

     上海交互声学回声AEC算法

深圳鱼亮科技有限公司是一家从事智能家居，语音识别算法，机器人交互系统，降噪研发、生产、销售及售后的服务型企业。公司坐落在龙华街道清华社区建设东路青年创业园B栋3层12号，成立于2017-11-03。公司通过创新型可持续发展为重心理念，以客户满意为重要标准。在孜孜不倦的奋斗下，公司产品业务越来越广。目前主要经营有智能家居，语音识别算法，机器人交互系统，降噪等产品，并多次以通信产品行业标准、客户需求定制多款多元化的产品。Bothlent为用户提供真诚、贴心的售前、售后服务，产品价格实惠。公司秉承为社会做贡献、为用户做服务的经营理念，致力向社会和用户提供满意的产品和服务。深圳鱼亮科技有限公司以市场为导向，以创新为动力。不断提升管理水平及智能家居，语音识别算法，机器人交互系统，降噪产品质量。本公司以良好的商品品质、诚信的经营理念期待您的到来！