您好,欢迎访问

商机详情 -

江苏交互声学回声消除算法

来源: 发布时间:2023年07月14日

    AEC定义声学回声(AcousticEcho)电话的扬声器的声音(包括反射声),被麦克风拾取传送给远端,使得远端说话人又听到自己的声音,广义回声指的是设备喇叭和自身麦克风的耦合现象都称为回声。回声消除AEC(AcousticEchoCancellation)一般指的是声学回声消除,其主要用于抑制产品本身发出的声音,使得产品在播放音频时依然可以进行语音交互;随着秒新月异的科技发展,各项技术成果不断地应用在我们日益拓展的各领域需求当中,刷新着我们的生活和工作。地球村的崛起,不断以互联网、物联网等方式揭示着万物相连的关系。无论是飞机、高铁还是电话、网络,都成为托起地球新村时空纵横的重要载体。怎样拉近人与人之间的关系,如何建立起更行之有效的联络方式,提高远程协同工作、信息传达效率成为了一个重要命题。远程会议的出现在很大程度上为这种多极化办公互动提供了质量的平台保障,在借助互联网便捷的远程通信架构下,通讯数据安全,稳定可靠,很长一段时间广受用户青睐。然而美中不足的是,这样的(声音)系统仍逃不出的还是自然声学上的问题。有和业内朋友聊天中谈到,今后的扩声系统也许只保留两级传统装置了,那就是声电转换和电声转换的拾音和还原。

    便于大家对双耦合声学回声消除算法有一个定性的认识。江苏交互声学回声消除算法

江苏交互声学回声消除算法,声学回声

    我们还希望它在一个短时的观测时间窗的尺度里面也是比较好的,即局部比较好,所以在数学期望内部,我们又对误差进行了短时积分。这个优化准则跟传统的线性自适应滤波器是有本质区别的,因为传统的线性自适应滤波器基于小均方误差准则,它只是在统计意义上比较好,没有局部比较好约束。首先来求解这里的Wl,就是线性滤波器。主要求解方法是,假设Wn就是非线性滤波器是比较好解,把这个比较好解代入到前面的优化方程里,就会得到上面简化之后的优化目标函数。在这个地方,我们又做了一些先验假设,假设非线性的滤波器的一阶统计量和二阶统计量都等于0,我们就可以把上面的优化问题进一步简化,就得到我们非常熟悉的方程,就是Wiener-Hopf方程。这个结果告诉我们,线性滤波器的比较好解跟传统的自适应滤波器的比较好解是一致的,都是Wiener-Hopf方程的理论比较好解。所以我们就可以采用一些现有的比较成熟的算法,比如NLMS算法、RLS算法,对它进行迭代求解。这就是Wl的设计。接下来再看看Wn的设计。Wn的设计跟Wl的设计是类似的,也是需要将优化之后的线性滤波器,代入到开始的优化问题里,可以把前面的优化问题简化成下面的方程。接下来进行一系列的变量替换之后。

    江苏交互声学回声消除算法不上系统传递函数变化的速度,就会导致声学回声消除不理想。

江苏交互声学回声消除算法,声学回声

再结合与更多正常品的对比和设定合理的limits,可以快速准确的检查出耳机在各种状态下的底噪不良。耳机回声回声来自于非预期的泄露,一般分为电学回声和声学回声。前者一般由于麦克风和扬声器线路布局不合理的电路耦合造成,后者则是由于麦克风和扬声器的声学泄露耦合而成。对于回声不良的耳机来说,在通话时,耳机喇叭播放的声音信号通过麦克风又传回电话另一头的手机,从而让讲话者听到自己的声音。对于耳机来讲,主要是声学回声,表现为收发环路的隔离度不好,其根本原因就是耳机在装配时麦克风与喇叭的密封隔离没做好,导致通话时回声出现的不良体验。图中的耳机,在通话时,人耳会略微的感受到回声,也就是佩戴人讲话的声音又传递到了耳机本身的喇叭后播放出来,也有会在通话对方的手机端出现回声现像影响双方的通话质量。指南测控的标准声学测试系统,根据回声传输路径。

    反映到听感上就是回声(远端判断成近端)或丢字(近端判断为远端)。(2)计算近端信号d(n)与估计的回声信号e(n)的相干性,如图5(b),第二行为估计的回声信号e(n),第三行为二者相干性cohde,很明显近端的部分几乎全部逼近,WebRTC用比较严格的门限(>=)即可将区分绝大部分近端帧,且误判的概率比较小,WebRTC工程师设置如此严格的门限想必是宁可一部分双讲效果,也不愿意接受回声残留。从图5可以体会到,线性滤波之后可以进一步凸显远端参考信号x(n)与估计的回声信号e(n)的差异,从而提高远近端帧状态的判决的可靠性。存在的问题与改进理想情况下,远端信号从扬声器播放出来没有非线性失真,那么e(n)=s(n)+v(n),但实际情况下e(n)与d(n)很像,只是远端区域有一些幅度上的变化,说明WebRTCAEC线性部分在这个case中表现不佳,如图6(a)从频谱看低频段明显削弱,但中高频部分几乎没变。而利用变步长的双滤波器结构的结果会非常明显,如图6(b)所示无论是时域波形和频谱与近端信号x(n)都有很大差异,目前aec3和speex中都采用这种结构,可见WebRTCAEC中线性部分还有很大的优化空间。如何衡量改进的线性部分效果?这里我们对比了现有的固定步长的NLMS和变步长的NLMS。近端信号d。

    声学回声消除,其主要用于抑制产品本身发出的声音。

江苏交互声学回声消除算法,声学回声

    而正是这两级客观存在的物理声学现象,造就了我们所讨论的内容。在远程会议系统的终端(本地),为了实现多人互动、多人拾音等目的,系统声音免不了被放大还原,而在诸如此类的放大系统中,为本地音箱能够听到远端声音,并能把本地拾音信号传送到远端而互通。众所周知,话筒在拾取到放大后的音箱信号后,再次回授、无限循环而产生反馈现象,而系统在均衡声场后,该现象其实是可以得到明显改观的。但话筒的拾音灵敏度是不是可以无限大呢?不是,在足够电平条件下,它始终会因拾取到具有相干性频率相位关系的输入信号而建立起回授。上述啸叫现象并不是本文重点,但它为我们讨论接下来的话题提供了一个前提,那就是(同一个声场环境中)话筒和音箱无论怎么摆都无法做到完全的隔离,更别说空间声场条件有限的小中型会议室了。在一套有扩声、有拾音的远程会议系统中,为了防止信号回授,我们通常会有意识地将远端输入信号不再路由给远端输出。然而无法抗拒的是,本地话筒因拾取到远端传送至本地扩声的信号,仍可将声音重新传送至远端。这也是一种回授,明显的远程回授现象可使得系统发生自激震荡。通过一个简易的远程音频传输示意图。能帮助我们更容易地理解声音信号是怎样的流向。

     非线性声学回声消除的技术难点。江苏交互声学回声消除算法

什么是非线性声学回声,它产生的原理、研究现状以及技术难点等问题。江苏交互声学回声消除算法

WebRTCAEC算法中开辟了可存储250个block大缓冲区,每个block的长度PART_LEN=64个样本点,能够保存的1s的数据,这也是理论上的大延时能够估计的范围,够用了。我们用610ms延时的数据测试(启用大延时调整需要设置delay_agnostic_enabled=1):我们还是设置默认延时为240ms,刚开始还是调整了-60个block,随后大延时调整接入之后有调整了-88个block,一共调整(60+88)*4=592ms,之后线性滤波器固定index=4,表示剩余延时剩余16ms,符合预期。③线性滤波器延时估计是固定延时调整和大延时调整之后,滤波器对当前远近端延时的直接反馈。前两者调整不当会造成延时过小甚至非因果,或延时过大超出滤波器覆盖能力,导致无法收敛的回声。因此前两者在调整的过程中需要结合滤波器的能力,确保剩余延时在滤波器能够覆盖的范围之内,即使延时小范围抖动,线性部分也能自适应调整。总结与优化方向WebRTCAEC存在的问题:(1)线性部分收敛时间较慢,固定步长的NLMS算法对线性部分回声的估计欠佳;(2)线性部分滤波器阶数默认为32阶,默认覆盖延时132ms,对移动端延时较大设备支持不是很好,大延时检测部分介入较慢。江苏交互声学回声消除算法

深圳鱼亮科技有限公司成立于2017-11-03,同时启动了以Bothlent为主的智能家居,语音识别算法,机器人交互系统,降噪产业布局。业务涵盖了智能家居,语音识别算法,机器人交互系统,降噪等诸多领域,尤其智能家居,语音识别算法,机器人交互系统,降噪中具有强劲优势,完成了一大批具特色和时代特征的通信产品项目;同时在设计原创、科技创新、标准规范等方面推动行业发展。同时,企业针对用户,在智能家居,语音识别算法,机器人交互系统,降噪等几大领域,提供更多、更丰富的通信产品产品,进一步为全国更多单位和企业提供更具针对性的通信产品服务。深圳鱼亮科技始终保持在通信产品领域优先的前提下,不断优化业务结构。在智能家居,语音识别算法,机器人交互系统,降噪等领域承揽了一大批高精尖项目,积极为更多通信产品企业提供服务。