CN102164210A - 用于回声消除和回声抑制的系统和方法 - Google Patents

用于回声消除和回声抑制的系统和方法 Download PDF

Info

Publication number
CN102164210A
CN102164210A CN2011100932110A CN201110093211A CN102164210A CN 102164210 A CN102164210 A CN 102164210A CN 2011100932110 A CN2011100932110 A CN 2011100932110A CN 201110093211 A CN201110093211 A CN 201110093211A CN 102164210 A CN102164210 A CN 102164210A
Authority
CN
China
Prior art keywords
echo
observation window
signal
value
frequency subband
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011100932110A
Other languages
English (en)
Inventor
拉格纳·H·琼森
特劳斯蒂·索芒德森
亚尔·克纳
鲁有宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Conexant Systems LLC
Original Assignee
Conexant Systems LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conexant Systems LLC filed Critical Conexant Systems LLC
Publication of CN102164210A publication Critical patent/CN102164210A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/002Applications of echo suppressors or cancellers in telephonic connections

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Telephone Function (AREA)

Abstract

传统地,在双向通信系统中,回声消除利用线性自适应滤波器来消除回声。自适应速率通常是动态的并且随时间而变化。公开了新颖的自适应速率,其能够在存在背景噪声时、在双讲期间和在回声路径变化的情况下表现良好。此外,通过使用联合频时域处理执行的非线性处理,能够进一步抑制回声或残余回声。

Description

用于回声消除和回声抑制的系统和方法
技术领域
本发明一般地涉及双向通信系统,并且具体涉及双向通信系统中的回声的抑制和消除。
背景技术
在双向通信系统,例如电话系统中,回声是令人困扰和不希望有的。两种常见类型的回声是典型地由在中心局部署的混合电路中的阻抗不匹配导致的混合回声、以及其中扬声器产生的声音被麦克风拾取的声学回声。
图1示出典型电话系统中的回声,这里电话系统描述为基于陆上线路的或移动的。在电话102和电话112之间的通话期间,电话102发送信号104并接收信号106。此外,电话112的麦克风116拾取扬声器114产生的信号104,并将其叠加到信号106上。这被示出为声学回声118。扬声器114和麦克风116能够可替换地为另一类通信设备的一部分,例如附接到提供基于因特网协议的语音(VoIP)通信的个人计算机的外部扬声器和麦克风。
回声消除是通过产生回声的估计值(estimate)并将其从接收的信号中减去而从系统中去除回声的过程。图2示出能够用来进行回声消除的声学回声的模型。从电话112的方面来看,信号104是远端信号,信号106是近端信号。扬声器114向用户发送远端信号104,其作为声学回声反射回(echo back)麦克风116。回声消除器300包括回声近似器(approximator)304和减法器302。回声估计器304接收远端信号104并求叠加到信号106上的回声118的近似。从近端信号106中减去近似回声306从而产生近端信号308。如果回声近似器304准确地求出回声118的近似,那么从近端信号106中减去近似回声306将会产生近似于没有回声的声音信号202的信号308。
图2中的回声消除在图3示出的信号处理图中更详细描述。示出的信号是数字信号。回声e(n)被建模为将具有冲激响应s(k)的回声传输函数306应用到远端信号x(n)的结果,其通过加法器308与近端信号d(n)相加从而产生组合信号y(n)。通常,索引n是时间索引,其是离散时间变量,索引k是冲激响应的采样时间索引。具有冲激响应h(k)的自适应滤波器304求远端信号x(n)的回声的近似,其被示出为近似回声ê(n)。减法器302从信号y(n)中减去近似回声ê(n)以产生作为对近端信号d(n)的近似的信号z(n)。
数学上,在麦克风处的总接收信号是
y(n)=e(n)+d(n)    (1)
其中通过下式对回声进行建模: e ( n ) = Σ k = 0 L - 1 s * ( k ) x ( n - k ) - - - ( 2 )
,s(k)是L-1阶的有限冲激响应。回声消除器的输出,即电话发送到远端的信号通过下式给出
z(n)=y(n)-ê(n)    (3)
其中ê(n)是估计回声,且使用L-1阶的自适应线性滤波器近似得到,被给出为:
e ^ ( n ) = Σ k = 0 L - 1 h * ( n , k ) x ( n - k ) - - - ( 4 )
其中h(n,k)是自适应滤波器在时间采样n处的冲激响应。应当注意,由于滤波器是自适应的,其随时间而变化,因此如上所示冲激响应也是时间的函数。
回声消除器的输出也可表示为
z(n)=d(n)+ε(n)    (5)
其中ε(n)=e(n)-ê(n)是残余回声。由于期望信号输出信号z(n)是近端信号d(n),回声消除器的目标是尽可能多地减小残余回声。
自适应滤波器的一种自适应(adaptation)方式是最小化残余回声ε(n)的均方误差。一种称为最小均方(LMS)的自适应方法产生以下自适应公式:
h(n+1,k)=h(n,k)+μ(n)z*(n)x(n-k)    (6)
其中μ(n)是非负数,是自适应系数并且0≤k<L。尽管LMS通常获得最小值,但是由自适应系数定义的自适应速率(adaptation rate)并未被指明。恰当的自适应速率控制能够导致回声近似器向回声的快速收敛。
如果自适应系数随时间变化,自适应滤波器算法被称为可变步长最小均方(LMS)自适应滤波算法。其中最为著名的是正规化(normalized)LMS(NLMS)算法,其使用自适应系数:
μ ( n ) = μ LP xx L ( n ) - - - ( 7 ) ,
其中
Figure BSA00000473482600024
是近端信号x(n)在L个样本的窗上的短期能量,其中L是自适应滤波器(filter)。为了方便,用所述窗上的平均能量来表示短期能量。算术平均能量等于:
P xx L ( n ) = 1 L Σ l = 0 L - 1 | x ( n - l ) | 2 - - - ( 8 ) ,
其中μ是0和2之间的常数。NLMS自适应滤波算法对x(n)的缩放(scaling)不敏感,这使得更容易通过恰当选择自适应系数来控制其自适应速率。然而,NLMS自适应滤波算法在接收信号中存在背景噪声和双讲(double talk)时性能较差。
Hansler等(“Signal Channel Acoustic Echo Cancellation”,Chapter 3Adaptive Signal Processing,Springer,2003)通过下式求最优自适应系数的近似:
μ ( n ) = E { z ( n ) ϵ ( n ) } LP xx L ( n ) E { | z ( n ) | 2 - - - ( 9 ) ,
其中E(x)是x的期望值。Hansler公开了没有
Figure BSA00000473482600033
项的“NLMS”自适应系数。在本公开中加入
Figure BSA00000473482600034
项以保持一致。期望值需要了解信号的统计量,并且不适合变化的环境。例如,如果回声路径变化,期望值也可能变化。为了利用公式(9),自适应滤波器需要知道变化的统计量。
若干情形可能使得自适应更加困难,包括双讲、回声路径变化和背景噪声。双讲是当双方都在讲话时的情形,因此在远端和近端信号中都存在相当大的能量。回声路径变化可能出现在电话移动到另一个环境时。这相当于回声传输函数204的变化。为了处理背景噪声,典型的回声消除器估计背景噪声并根据存在的噪声量调整自适应速率(例如,当噪声低时较高的自适应,当噪声相对于信号电平高时较慢的自适应)。对于双讲,典型的回声消除器估计双讲时段并在双讲时段期间停止自适应。
线性自适应回声消除已经被成功地应用以便处理电子环境中的回声。声学回声具有由背景引入的附加的、经常是显著的伪信号(artifact),例如噪声,以及引起残余误差的动态回声路径。非线性处理(NLP)可以作为线性自适应滤波的附加或替代而使用。在传统系统中,NLP在单讲时段期间去除或抑制残余回声,并且它能够在该时段期间插入舒适噪声。通常,NLP在双讲时段期间不做任何事情。由于残余回声在单讲和双讲时段期间可能仍然相当大,因此需要NLP将回声抑制添加到线性回声消除。
NLP系统可以在为听众保持近端信号质量的同时,去除残余回声。NLP系统中使用的一种技术是中心削波(clipping)方法,用于去除处于中心削波阈值处或之下的低音量(volume)信号,包括残余回声。中心削波的缺点是处于阈值处或之下的近端信号也被去除,且高于中心削波阈值的残余回声可能仍然存在。另一种方法是舒适噪声插入,其去除或衰减线性回声消除器输出,并且当远端信号高于所述输出预定阈值时,和/或当所述输出低于近端信号不同的预定阈值时,任选地插入舒适噪声。当残余回声小且线性回声消除器收敛良好时,这种方法下的性能较好。然而,在大多数声学情况中,即使利用包括良好的双讲检测器的良好的线性回声消除器,残余回声也并不小。另一种已知方法(切换损耗(switched loss))在近端信号和远端信号都高时降低远端信号音量。通过这样做,有效减小回声以及啸叫的可能性。传统NLP的主要失败之处在于其不能在保持全双工通信的同时抑制残余回声。
在行业中需要一种改进的回声消除和/或抑制系统,其在存在背景噪声时、在双讲时段期间以及在回声路径变化期间表现良好,同时保持全双工通信。
发明内容
全双工回声消除和抑制系统解决了现有技术的缺陷。回声消除系统的一个实施例包括回声近似器,减法器和自适应系数生成器。回声近似器是自适应线性滤波器,并且其自适应由自适应系数生成器提供的自适应系数控制。自适应系数生成器生成近似于最优自适应系数的自适应系数。自适应生成器将估计函数(estimator function)的结果除以短期远端功率加上预定值以避免除以零。估计函数可以采取多种形式,但通常是升高到预定幂的、平均值的比率。该比率取输出信号与由回声近似器生成的近似回声的复共轭的乘积的平均值,并且将其除以输出信号幅度的平均值和所接收的信号功率的幅度的平均值的乘积,其中所接收的信号是混合了回声的近端信号。在一个实施例中,所述平均值是标准算术平均值。在另一个实施例中,所述平均值是均方根平均值。在另一个实施例中,所述平均值是平滑平均值(smooth average)。在另一个实施例中,所述平均值是平方幅度(magnitude squared)的平滑平均值的平方根。相应的方法利用上面描述的相同公式表示来生成回声消除器的自适应系数。
在回声抑制系统的一个实施例中,应用滤波器组(bank)到远端信号以将该信号分成频率子带,所述频率子带形成联合时频域信号。第二滤波器组将输入信号分成输入频率子带信号。输入信号可以是麦克风处的接收信号或者可以是线性回声消除系统的输出。与每个频率子带关联的是非线性处理单元,其使用远端信号对输入信号执行非线性处理以在每个子带的基础上抑制回声。
在另一个实施例中,在每个子带内还与线性回声消除器相关联以部分消除回声。在该实施例中,非线性处理单元抑制残余回声。
非线性处理单元的一个实施例利用中心削波来抑制回声。在另一个实施例中,利用了舒适噪声插入。在另一个实施例中,利用切换损耗。在另一个实施例中,通过由估计器单元确定的缩放因子衰减接收信号。在另一个实施例中,通过具有估计器单元确定的系数的线性滤波器处理接收信号。在另一个实施例中,估计器单元向回声消除器反馈估计值以改进(refine)回声消除器的自适应系数。
当查看下面附图和详细描述时,本公开的其他系统、方法、特征和优点对于本领域技术人员将是或将变得显而易见。意图是,所有这些附加系统、方法、特征和优点都包含在本描述中,在本公开的范围内,并由所附权利要求保护。
附图说明
参考以下附图能够更好地理解本公开的很多方面。附图中的组件不一定是按比例的,相反,重点被放在清楚地说明本公开的原理上。此外,在附图中,相似的标号在多个视图中指示相应的部分。
图1示出典型的电话系统;
图2示出典型的回声消除系统;
图3示出典型回声消除系统的信号处理图;
图4示出回声消除系统的示范性实施例;
图5示出利用使用合成回声的自适应系统的线性自适应回声消除器;
图6示出全双工子带非线性处理系统;
图7示出具有线性回声消除器的全双工子带非线性处理系统;
图8示出具有子带线性回声消除器的全双工子带非线性处理系统;
图9示出具有子带线性回声消除器的回声消除系统;
图10示出子带非线性处理单元的示范性实施例;
图11示出子带非线性处理单元的另一个实施例;
图12示出具有子带线性回声消除器的一个子带非线性处理单元的实施例;
图13示出具有子带线性回声消除器的一个子带非线性处理单元的另一个实施例;
图14示出包括混合电路的电话通信系统;
图15示出电话通信系统,其中回声消除器置于混合电路内或附接到混合电路;
图16示出另一个电话通信系统,其中回声消除器置于电话中。
具体实施方式
以下呈现本发明实施例的详细描述。尽管将结合这些图来描述本公开,但意图不是将其限于这里公开的一个或多个实施例。相反地,意图是覆盖所有包含在本公开的精神和范围内的所有替换、修改和等同物。
图4示出回声消除系统的示范性实施例。回声消除系统400包括回声近似器302和减法器304,其像先前描述的那样工作。具体地,回声近似器302生成近似回声,然后从麦克风116处的接收信号y(n)中减去该近似回声,并且产生消除了回声的输出信号z(n)。回声消除系统400还包括自适应系数生成器402,其能够使用接收信号y(n)、输出信号z(n)、远端信号x(n)和近似回声ê(n)来对于每个时间索引n生成自适应系数μ(n)。自适应系数能够与公式(6)一起使用来控制回声近似器302的自适应速率。
虚线框410表示环境产生的回声生成,其被建模为具有冲激响应s(k)的回声传输函数306和加法器308。这些元件不是回声消除系统的一部分,但示出电话的信号处理环境。
使得回声近似器、减法器和自适应系数生成器以软件、固件存在,或者或以硬件或其某种组合实现。一种这样的实现方式是作为在数字信号处理器(DSP)上执行的软件或固件,其中所描述的每个组件被实现为用于数字信号处理器的一组指令。在另一个实施例中,所述功能中的一些可实现为DSP上执行的软件或固件,并且利用应用专用逻辑来实现一些部分。
自适应系数生成器402求最优自适应系数的近似,所述最优自适应系数可被表示为
μ ( n ) = z * ( n ) ϵ ( n ) + z ( n ) ϵ * ( n ) 2 | z ( n ) | 2 LP xx L ( n ) = Re { z ( n ) ϵ * ( n ) } | z ( n ) | 2 LP xx L ( n ) - - - ( 10 )
其中||是绝对值的标准表示法(notation),Re{}是复数实部的标准表示法,*是复数的复共轭的标准表示法。
当所有信号都是实数时,则z*(n)=z(n)并且ε*(n)=ε(n),公式(10)变为
μ ( n ) = | z ( n ) ϵ ( n ) | | z ( n ) | 2 LP xx L ( n ) - - - ( 11 ) ,
公式(11)优于现有技术中的公式(9)。首先,公式(11)是最优自适应系数而公式(9)是对于最优自适应系数的近似。其次,公式(9)在存在背景噪声时、在双讲期间或在回声路径变化的情况下性能不好,而公式(10)和(11)在这些情形下是最优的。最后,公式(10)和(11)不需要任何信号的统计量,只使用任何信号的短期平均值。
不幸的是,残余回声ε(n)不是直接可获得的。在原理上,估计残余回声是个困难的问题。然而,通过使用观察窗上的平均值而不是给定时间处的值,可以使得公式(10)和(11)的自适应系数变得更易处理。因此公式(10)能够通过以下公式来估计
μ ( n ) = Re { P zϵ N ( n ) } P zz N ( n ) LP xx L ( n ) - - - ( 12 ) ,
其中是z(n)ε*(n)在给定时间段上的算术平均值,并且被定义为
P zϵ N ( n ) = 1 N Σ l = 0 N - 1 z ( n - l ) ϵ * ( n - l ) - - - ( 13 )
其中N是平滑观察窗的长度。公式(12)比公式(10)更便于使用,因为相比于对于每个时间点,更容易估计时间窗上的值,例如残余回声。此外,时间平均值的使用平滑了自适应系数,因此减轻了自适应滤波器的自适应中的突然改变,并且自适应滤波器保持平滑函数。
可以用一般的平均值来概况公式(12)以及公式(10)和(11)中的算术平均值。应当注意的是,本公开中使用的算子A{}和相关算子A1{}、A2{}意图是表达一般意义的平均值。在相同公式中,如果运算对象(operand)不同,算子A{}可以表达不同的平均值。例如,在相同公式中,A{a(n)}可以是a(n)在大小为M的观察窗上的算术平均值,A{b(n)}可以是b(n)在大小为N的观察窗上的均方根平均值。下标的使用用来指示:即使对相同的运算对象,两个平均值也是可能不同的类型,例如如果A{a(n)}在公式中出现两次,则意图是使用相同的平均值。然而,如果是A1{a(n)}和A2{a(n)},则它们不应被假设为相同的平均值。此外,取决于上下文和期望的实现方式,A{}可以从多种平均值中选择,所述多种平均值包括但不限于下面描述的算术平均值、均方根平均值、调和平均值、平滑平均值或它们的加权变体、以及其他不太常规的平均值,例如中值、最大值、或观察窗上的模(mode)。
为了本公开,方便的是引入以下表示法:
P ~ xy α ( n ) = αx ( n ) y * ( n ) + ( 1 - α ) P ~ xy α ( n - 1 ) - - - ( 14 )
以及
P ~ x α ( n ) = α | x ( n ) | + ( 1 - α ) P ~ x α ( n - 1 ) , - - - ( 15 )
其中0<α<1。公式(14)和(15)是平滑平均值,对于α的适当选择,其近似于算术平均值。典型地,α反比于N,
P ~ xy α ( n ) ≈ P xy N ( N ) - - - ( 16 )
在计算自适应系数时,与存储旧信号值相比,利用公式(14)以及公式(12)中给出的近似需要更少的存储器。不考虑该简化,
Figure BSA00000473482600084
可能还是难以估计。
期望的是自适应系数是对回声消除器可用的信号的函数,并且近似于公式(10)或(11)的最优自适应系数或公式(12)的时间平均自适应系数。对于回声消除器可容易取得的信号包括远端信号x(n)、麦克风处的接收信号y(n)、回声消除器输出信号z(n)以及近似回声ê(n)。这引出通过下式给出的自适应系数的通用形式:
μ ( n ) = f ( x , y , e ^ , z , n ) LP xx L ( n ) + Δ - - - ( 17 ) ,
在公式(17)中,可被推广为|x(n)|2的任何平均值,导致:
μ ( n ) = f ( x , y , e ^ , z , n ) LA { | x ( n ) | 2 } + Δ - - - - ( 18 )
值得注意的例子是当
Figure BSA00000473482600088
时。由于x(n)是作为(例如电话中的)扬声器产生的信号的远端信号,y(n)是麦克风接收的信号,ê(n)是回声消除器生成的近似回声,z(n)是回声消除器的输出,所有量对于回声消除器都可获得,因此公式(17)和(18)中的自适应系数能够完全确定。常数Δ是被设计为避免μ在远端信号中的无声时段期间(即当Pxx是0或接近0时)变大的小的数值(number)。本质上,常数Δ用于避免除以0。通常,期望将自适应系数保持在给定最大值μmax之下以保持对自适应的限制。为此,可以将限制函数(limiter function)Lμ(x)=max(μmax,min(U,x))应用于公式(17)和/或(18)的结果以保持自适应系数的值在0和μmax之间。在公式(17)和(18)中,f是估计函数,该估计函数是非负函数,其对抗背景噪声、双讲和回声路径变化是近似最优的,并且
Figure BSA00000473482600091
根据远端功率将该估计函数正规化。
这种估计量(estimator)的例子通过以下通用公式给出:
f ( x , y , e ^ , z , n ) = [ | A { z ( n ) e ^ * ( n ) } | 2 A { | z ( n ) | 2 } A { | y ( n ) | 2 } ] v - - - ( 19 )
其中v是非负值。如果v等于1/2,则估计量反比于输出功率。在高背景噪声或近端讲话时段期间,回声消除器的输出功率z(n)增大。根据公式(19),估计量响应于高背景噪声和双讲的时段,并且在这些时段期间自适应减慢。当回声路径变化时,交叉相关平均值|A{z(n)ê*(n)}|2增大,导致自适应滤波器更快适应回声路径的变化。
在一个实施例中,使用算术平均值,因此公式(19)变为:
f ( x , y , e ^ , z , n ) = [ | P z e ^ N 1 ( n ) | 2 P zz N 2 ( n ) P yy N 3 ( n ) ] v - - - ( 20 )
其中向公式(20)中的每个平均值给出了任意的观察窗大小。然而,能够使用相同的观察窗(即N1=N2=N3)。
在另一个实施例中,使用平滑平均值,因此公式(19)变为:
f ( x , y , e ^ , z , n ) = [ | P ~ z e ^ β 1 ( n ) | 2 P ~ zz β 2 ( n ) P ~ yy β 3 ( n ) ] v - - - ( 21 )
同样,向公式(21)中的每个平均值给出了任意观察窗大小。同样,能够使用相同的窗(即β1=β2=β3)。
在另一个实施例中,估计函数通过以下公式给出:
f ( x , y , e ^ , z , n ) = [ | A { z ( n ) e ^ * ( n ) } | A { | z ( n ) | } A { | y ( n ) | } ] 2 v - - - ( 22 )
除了在分母中代替|z(n)|2和|y(n)|2而使用|z(n)|和|y(n)|的平均值以外,公式(22)与公式(19)类似。实际上,公式(22)是公式(19)的一般化。具体地,如果在分母中使用均方根(RMS)平均值,则以及
Figure BSA00000473482600097
并且在分子中使用算术平均值,则公式(22)简化为公式(20)。如果使用|z(n)|2和|y(n)|2的平滑平均值的平方根,即
Figure BSA00000473482600102
则公式(22)简化为公式(21)。公式(23)给出了另一种可以使用的值得注意的平均值
A { | z ( n ) | } = 1 N Σ l = 0 N - 1 | z ( n - 1 ) | γ γ - - - ( 23 )
具体地,公式(23)的平均值在γ=1时变为|z(n)|的算术平均值,在γ=2时变为RMS平均值。此外,当γ=∞时,A{|z(n)|}=max{观察窗上的z(n)}。
也可以使用采用公式(23)的平滑平均值变体的其他实施例,具体地,
Figure BSA00000473482600104
其中,一般地:
P ~ x γ , α ( n ) = α | x ( n ) | γ + ( 1 - α ) P ~ x γ , α ( n - 1 ) - - - ( 24 )
在实施例中,当γ=1时,公式(22)变为:
f ( x , y , e ^ , z , n ) = [ | P ~ z e ^ β 1 ( n ) | P ~ z β 2 ( n ) P ~ y β 3 ( n ) ] 2 v - - - ( 25 )
因为平滑平均值能够通过使用|z(n)|和|y(n)|而不是|z(n)|2和|y(n)|2来更新,从而避免额外的乘法和平方根运算,因此公式(25)是在计算上更高效的估计函数。通过实验已经表明:即使在存在双讲、背景噪声和回声路径变化时,这些估计量也能够良好地工作,。
对于自适应系数,公式(10)和(11)的最优性能够通过最小化以下公式来获得:
Δh(n,k)=s(k)-h(n,k)    (26)
理想地,自适应滤波器的冲激响应h(n,k)和回声传输函数的冲激响应s(k)应当是相同的。然而,原则上它们不匹配。误差是二者之间的差值,并且通过公式(26)表征。
在代入自适应公式(6)后,公式(26)变为:
Δh(n+1,k)=Δh(n,k)-μ(n)z*(n)x(n-k)    (27)
为了最小化Δh,使用最小二乘方法,即成本函数
E Δh ( n ) = Σ k = 0 L - 1 | Δh ( n , k ) | 2 - - - ( 28 )
被最小化。通过将公式(27)代入公式(28)并展开该表达式,所述成本函数可重写为:
E Δh ( n + 1 ) = E Δh ( n ) - μ ( n ) z * ( n ) ϵ ( n ) - μ ( n ) z ( n ) ϵ * ( n ) + μ 2 ( n ) | z ( n ) | 2 Σ k = 0 L - 1 | x ( n - k ) | 2
(29)
对于自适应系数,通过在成本函数的导数中找出零来找出最优值。具体地,所述导数被表示为:
∂ ∂ μ E Δh ( n + 1 ) = - z * ( n ) ϵ ( n ) - z ( n ) ϵ * ( n ) + 2 μ ( n ) | z ( n ) | 2 LP xx L ( n ) - - - ( 30 )
通过将该导数设为零并对于μ(n)求解,找出公式(10)给出的最优自适应系数。
一个警告是,对于自适应滤波器的初始条件不能设为零,因为这将导致估计回声ê(n)为零,从而导致零估计函数值。此外,应当监视自适应系数以确保其不是零——例如,当自适应系数是零时用小的值代替它。
图5示出使用具有合成回声的自适应系统的线性自适应回声消除器的实施例。与自适应回声消除器400类似,回声消除器500包括回声近似器302、减法器304和自适应系数生成器402。线性自适应回声消除器500包括回声合成器502和加法器504,其混合合成回声
Figure BSA00000473482600112
和在麦克风接收的信号
Figure BSA00000473482600113
从而产生y(n)。信号
Figure BSA00000473482600114
和y(n)的命名法与参照图4描述的系统的命名法略有不同。具体地,在麦克风接收的信号标识为
Figure BSA00000473482600115
而不是y(n)。这是为了保留上面公开的自适应系数公式的表示法。合成回声
Figure BSA00000473482600116
是将具有L-1阶的冲激响应
Figure BSA00000473482600117
的传输函数应用到远端信号x(n)的产物,具体地:
e ‾ ( n ) = Σ k = 0 L - 1 s ‾ * ( k ) x ( n - k ) - - - ( 31 )
由于回声合成器的冲激响应已知,自适应滤波器系数可被初始化为合成回声的冲激响应,即
Figure BSA00000473482600119
这样,合成回声在最初被消除。叠加合成回声分量保证近似误差ê不总是零,因此避免自适应系数到达自适应系数总是零的状态。因为合成回声是人为产生的,冲激响应已知,所以线性自适应滤波器将消除合成回声。
在上面描述的实施例中,公开了线性自适应回声消除。除了线性自适应回声消除,还能够利用非线性处理来抑制从自适应回声消除系统残留的残余回声或者甚至完全抑制回声。先前的非线性处理系统是不理想的,导致电话表现为好像不停地在全双工和半双工操作之间切换一样。
图6示出全双工子带非线性处理系统。系统600接收远端信号x(n)和在麦克风接收的信号y(n),所述信号y(n)包括合并了任何回声的近端信号。在联合频时域环境中应用非线性处理。为了实现这一点,滤波器组602将远端信号分成M个频率子带,也就是说,每个信号xi(n)由远端信号的落入第i个频带的频率分量形成。同样,滤波器组604将信号y(n)细分成M个频率子带。非线性处理单元610包括M个子单元612a、612b到612m,其对每个子带分量执行非线性处理。非线性处理子单元在下文更详细地描述。最后,合成滤波器组620将每个频率子带的经滤波的输出信号zi(n)组合成组合输出信号z(n)。在一个实施例中,如Y.Lu和J.M.Morris,“Gabor Expansion for Adaptive Echo Cancellation”,IEEE Signal Processing Magazine,Vol.16,No.2,March,1999中描述的那样构造所述滤波器组。
图7示出替换实施例,其与图6中描述的非线性处理系统类似,除了线性回声消除是由回声估计器304和减法器302执行的。也可有自适应系数生成器,其为了清楚而并未示出。滤波器组702执行与滤波器组602相同的功能,滤波器组704将线性回声消除器的输出信号
Figure BSA00000473482600121
细分成M个频率子带分量非线性处理单元710包括M个子单元712a、712b到712m,其对每个子带分量执行非线性处理。最后,合成滤波器组720将每个频率子带的经滤波的输出信号zi(n)组合成组合输出信号z(n)。不同于非线性处理单元610,本实施例中的非线性处理单元710用于抑制残余回声而不是全部回声。通过非线性处理子单元对于每个频率子带执行所述非线性处理。
在一个实施例中,使用舒适噪声插入,使得如果远端信号比线性回声消除器的输出大预定阈值和/或该输出比在麦克风处接收的信号低不同的预定阈值,则去除该输出。更一般地,将舒适噪声插入表示为:
Figure BSA00000473482600123
其中dist{a(n),b(n)}是在时间索引n处两个序列a(n)和b(n)之间的距离的量度(measure),T1和T2是所述预定阈值,nci(n)是舒适噪声。在两个序列之间有许多有用的距离量度。一个有用的例子是当前信号值之间的距离(即,dist{a(n),b(n)}=|a(n)-b(n)|)。另一个有用的例子是取每个样本的最近的N个样本,并且应用如公式(33)和(34)中的矢量距离运算:
dist { a ( n ) , b ( n ) } = Σ l = 0 N - 1 | a ( n - l ) - b ( n - l ) | - - - ( 33 )
dist { a ( n ) , b ( n ) } = Σ l = 0 N - 1 | a ( n - 1 ) - b ( n - 1 ) | 2 . - - - ( 34 )
与传统的舒适噪声插入NLP方法不同,该舒适噪声插入基于每个频率子带执行。衰减项g1和g2典型地是在0到1之间并且包含0和1的预定数值。在一个实施例中,g1=0和g2=1对应于舒适噪声替换NLP方法,在该方法中,回声消除器的输出完全由舒适噪声替换。在另一个实施例中,当g1>0时,回声消除器的输出被衰减,但未被去除,并且对应于传统NLP中使用的“软”NLP方法。在另一个实施例中,对一些或所有频率子带nci(n)=0,即,代替舒适噪声,引入无声(silence)。
作为例子,如果远端用户相比于近端用户具有更低音高(pitch)的声音,他们都能讲话,但负责低频的非线性处理子单元可以替换所接收的麦克风信号,这是因为近端说话者的声音具有较高音高而不会受到影响。进一步,来自远端说话者的回声将被替换,因为回声通常会在相同的频率范围内。因此,残余回声被抑制,两个用户都能讲话。在没有子带NLP的情况下,在该双讲时段期间,任一个用户将被抑制或者残余回声将被允许保留。这种技术也可以应用在非线性处理单元610执行的NLP。
图8是基于子带的回声消除系统的另一个实施例。系统800与前面的实施例不同之处在于对于每个频率子带执行线性回声消除。滤波器组802将远端信号x(n)分成M个频率子带分量。滤波器组804将信号y(n)分成M个频率子带分量。线性回声消除器810包括回声近似器812a、812b到812m以及减法器814a、814b到814m,其每一个在它们各自的子带中执行线性回声消除。每一个也可包括自适应系数生成器(未示出)。非线性处理单元820包括M个子单元822a、822b到822m,其对每个子带分量执行非线性处理。最后,合成滤波器组830将每个频率子带的经滤波的输出信号zi(n)组合成组合输出信号z(n)。在每个子带中都是具有线性回声消除器和NLP回声抑制器的完整回声消除系统。
在另一个实施例中,使用中心削波(clipping),因此如果对于特定频率子带的、在麦克风接收的信号yi(n)低于中心削波阈值,该信号被简单去除。在数学上,这可以简单地表示为:
Figure BSA00000473482600132
其中T是预定阈值。在每个频率子带的基础上执行所述抑制,这允许以全双工设置操作。
在另一个实施例中,与合成滤波器组一起使用远端衰减,以便重新组合远端信号分量,所述远端信号分量可具有根据传统远端衰减NLP衰减的某些频率。
图9示出子带线性回声消除系统的另一个实施例。系统900与系统800类似,除了它不具有非线性处理单元820以外。因为每个子带凭借其自身能力而成为线性回声消除系统,所以可以对每个子带独立地应用上面导出的最优自适应系数,也就是,每个子带能够使用其自己的μi(n)。在每个子带中,在子带内能够进行某些在全频带环境(下面进一步描述)内不能进行的某些统计假设,因此更易于估计某些平均值,例如
Figure BSA00000473482600141
图10示出能够与系统600、700和/或800一起使用的子带非线性处理单元。子带非线性处理单元1000包括估计器单元1002,其接收被表示为xi(n)的远端信号的第i个子带分量以及在系统600的情况下被表示为yi(n)的所接收的信号的第i个子带分量、或者在系统700或800的情况下被表示为
Figure BSA00000473482600142
的线性回声消除器的输出的第i个子带分量。估计器单元1002计算权重wi(n),取决于使用哪个系统产生输出,权重wi(n)通过缩放器1004被施加到yi(n)或在数学上,
zi(n)=wi(n)yi(n)    (36)
z i ( n ) = w i ( n ) z ~ i ( n ) .
在本例子中,为简化的目的,用
Figure BSA00000473482600145
来表示子带非线性处理单元的输入,其在系统600中等于yi(n),并且在系统700或800中等于
Figure BSA00000473482600146
一种调整权重的自适应方法由如下公式控制:
wi(n)=f(μi(n))    (37)
其中
Figure BSA00000473482600147
其中Δi是避免当在时间窗上为零时出现除以零的情况的常数。函数f典型地是非负单调增加函数且f(1)=1。具体地,可以使用f(x)=xv,其中v是分数(fractional)值。例如,v可以选择为具有值1/2,因此但根据应用,也能使用其他v的值。函数
Figure BSA00000473482600151
将结果限制在0和1之间(包括0和1),更具体地:
关于平均值,
Figure BSA00000473482600153
Figure BSA00000473482600154
Figure BSA00000473482600155
在两个观察窗上的平均值,尽管这些平均值可以是在不同观察窗上的不同类型的平均值,但是常常将它们选择为在相同观察窗上的相同类型的平均值。此外,A1{|xi(n)|2}是|xi(n)|2在另一个观察窗上的平均值,该观察窗可以不同于用于
Figure BSA00000473482600156
的观察窗。数值K是产生qi(n,k)的最大值的数值。
量qi(n,k)通过下式给出:
q i ( n , k ) = | A { y ~ i ( n ) x ( n - k ) } A 2 { | x i ( n - k ) | 2 } | - - - ( 40 )
其中A2{|xi(n)|2}是| xi(n)|2在观察窗上的平均值。尽管典型地将相同类型的平均值用于A1{|xi(n)|2}和A2{| xi(n)|2},但是用于A1{| xi(n)|2}的观察窗典型地小于用于A2{|xi(n)|2}的观察窗。当使用算术平均值时,公式(3 8)和(40)变为
Figure BSA00000473482600158
q i ( n , k ) = | P y ~ i x i N 4 ( n , k ) P x i x i N 5 ( n - k ) | - - - ( 42 )
其中N1,N2,N3,N4和N5是观察窗大小并且
P xy N ( n , k ) = Σ l = 0 N - 1 x ( n - l ) y * ( n - l - k ) - - - ( 43 )
同样,如果使用平滑平均值,则公式(38)和(40)变为
Figure BSA000004734826001511
q i ( n , k ) = | P ~ y ~ i x i β 4 ( n , k ) P ~ x i x i β 5 ( n - k ) | - - - ( 45 )
其中β1,β2,β3,β4和β5反比于观察窗大小,并且
P ~ xy α ( n , k ) = ( 1 - α ) P ~ xy α ( n - 1 , k ) + α x i ( n ) y i * ( n - k ) - - - ( 46 )
公式(38)实际上是下面公式的近似
Figure BSA00000473482600161
因为ei(n)不是直接可获得的,必须估计A1{|ei(n)|2}。这里采用的方法找出在k的范围上最大化qi(n,k)的K,其中利用该最大值通过公式(48)确定A1{|ei(n)|2}:
A 1 { | e i ( n ) | 2 } ≈ q i * ( n , K ) A 1 { | x i ( n - K ) | 2 } - - - ( 48 )
通常,k的范围是小的数值,qi(n,k)的最大值可以通过暴力计算确定。可替换地,也可基于可用于暴力计算的资源来选择对于k选择的范围。因此,公式(37)的评估可被认为是首先估计A1{|ei(n)|2},即平均回声功率,使用公式(47),然后应用函数f。
图11示出能够与系统600、700和/或800一同使用的子带非线性处理单元的另一个实施例。子带非线性处理单元1100将处理扩展超出简单的权重而扩展为具有滤波器系数wi(n,k)的滤波器。估计器单元1102估计这些权重,滤波器1104将它们应用到信号根据所使用的系统,信号
Figure BSA00000473482600164
是yi或是输出信号通过下式定义:
z i ( n ) = Σ k = 0 K y ~ i ( n - k - N ) w i ( n , k ) - - - ( 49 ) .
图12示出诸如系统800中示出的回声消除器的回声消除器的一个子带的实施例。包括回声近似器1202和减法器1204的线性回声消除器被与非线性处理单元一同示出,所述非线性处理单元包括估计器单元1206和缩放器1208。除了估计器单元1206具有可用于确定所述权重的合成回声ê(n)以外,估计器单元1206与估计器单元1002类似地工作。缩放器1208将所述权重应用于消除了回声的信号yi(n)。在本实施例中,权重仍通过公式(37)自适应地确定。然而,ui(n)由公式(50)给出为:
其中
Figure BSA00000473482600168
Figure BSA00000473482600169
Figure BSA000004734826001610
在两个观察窗上的平均值,尽管这些平均值可以是不同观察窗上的不同类型的平均值,但是通常它们被选择为相同观察窗上的相同类型的平均值。此外,A1{|xi(n)|2}是|xi(n)|2在另一个观察窗上的平均值,该另一个观察窗可以不同于用于的观察窗。此外,qi(n)通过下式给出
q i ( n ) = | A { y i ( n ) e ^ i * ( n ) } | 2 A 2 { | x i ( n ) | 2 } A { | e ^ i ( n ) | 2 } - - - ( 51 ) ,
其中A2{|xi(n)|2}是|xi(n)|2在观察窗上的平均值。尽管典型地将相同类型的平均值用于A1{|xi(n)|2}和A2{|xi(n)|2},但是用于A1{|xi(n)|2}的观察窗典型地小于用于A2{|xi(n)|2}的观察窗。此外,
Figure BSA00000473482600172
Figure BSA00000473482600173
的平均值,并且A{|êi(n)|2}是|êi(n)|2每个在观察窗上的平均值,其可以与公式(50)和(51)中的其他平均值相同或不同。
当使用算术平均值时,公式(50)和(51)变为
Figure BSA00000473482600174
q i ( n ) = | P y i e ^ i N 4 ( n ) | 2 P x i x i N 5 ( n ) P e ^ i e ^ i N 6 ( n ) ) - - - ( 53 )
其中N1,N2,N3,N4,N5和N6是观察窗大小。
类似地,如果使用平滑平均值,则公式(50)和(51)变为
Figure BSA00000473482600176
q i ( n ) = | P ~ y i e ^ i β 4 ( n ) | 2 P ~ x i x i β 5 ( n ) P ~ e ^ i e ^ i β 6 ( n ) ) - - - ( 55 )
其中β1,β2,β3,β4,β5和β6反比于观察窗大小。
公式(50)也是近似。具体地,它是对下式的近似
其中A1i(n)|2}是残余回声在观察窗上的平均功率。通过使用下面的近似,
A { | ϵ i ( n ) | 2 } ≈ q i * ( n ) A 1 { | x i ( n ) | 2 } - - - ( 57 )
导出公式(50)。同样,确定权重的过程可被认为是首先求残余回声的平均功率的近似,然后使用公式(56),并应用函数f。
应当注意的是,近似(approximation)(48)和(57)的数学基础取决于简化以下假设:在特定子带中,信号具有白噪声特性,也就是它们的频率响应基本平坦。尽管这对于跨越所有频带的信号不成立,但是如果子带被选择得足够窄,则每个信号将近似地表现出白噪声特性。在特定子带的环境中使得估计这些量困难的一些交叉相关项可以被假设为零,以简化对回声和残余回声的估计。
因为在子带内现在能够估计回声功率和残余回声功率,所以对全时域信号不能容易地估计的量、以及基于残余回声或回声的其他平均值(例如
Figure BSA00000473482600181
或更一般的
Figure BSA00000473482600182
也能够在每个子带中更容易地估计,它们随后可以被提供给任何附接的线性回声消除器。
图13示出诸如系统800中示出的回声消除器的回声消除器的一个子带的另一个实施例。与非线性处理单元一同示出包括回声近似器1302、减法器1304和自适应系数生成器1310的线性回声消除器,非线性处理单元包括估计器单元1306和缩放器1308。估计器单元1306与估计器单元1206类似地工作,除了估计器单元1306能够向回声近似器1302提供信息以外,例如,估计器单元1306能够将对于
Figure BSA00000473482600183
Figure BSA00000473482600184
的近似提供给自适应系数生成器1310,其可用来调整用于回声估计器1302的自适应系数。
如同回声消除器400和500的具体实现方式一样,包括任何舒适噪声插入模块、中心削波模块、缩放器和/或估计器单元的回声消除/抑制系统600、700、800和900的各种组件能够以硬件实现,或者作为由诸如DSP的处理器执行的软件或固件指令实现。它也可以是软件或固件和专用电路的组合。
图14示出包括混合电路的电话通信系统。在电话中,回声也可由混合电路产生。在电话102和电话112之间的通话期间,电话102发送信号104并接收信号106。信号104和106通过至少一个混合电路1402,所述至少一个混合电路1402是电话网络的一部分。混合电路1402将信号104的一个版本反射回到信号106中,其被示为混合回声1404。多个回声源的存在导致上面描述的回声消除和抑制系统的若干替换实现方式。尽管在电话通信系统中示出回声消除/抑制,其中回声消除系统被包含到电话中以处理声学回声,但是上面描述的相同系统可用来处理电子混合回声或可处理两种类型的回声。
图15示出电话通信系统,其中回声消除器置于混合电路中或附接到混合电路。回声消除器1502被设计为去除由混合电路108引起的混合回声。这种方法的优点和缺点在于回声消除器仅处理由混合电路108引起的回声。因为只有一种类型的回声被处理,因此它更简单,但是它也留下了声学回声118。
图16示出电话通信系统,其中回声消除器置于电话中。在该例子中,从电话1602的方面看,信号104是近端信号,信号106是远端信号。不像电话102,电话1602中的回声消除器1604消除电话112导致的声学回声。它也可以消除混合回声。实际上,单个电话可以采用如这里示出的“入站(inbound)”回声消除器和“出站(outbound)”回声消除器,其中入站回声消除器处理远程电话和/或混合电路引起的回声,出站回声消除器处理本地声学回声。
应当强调的是,上面描述的实施例仅是可能地实现方式的示例。在不脱离本公开的原理的情况下,对上述实施例能够进行各种变形和修改。例如,尽管用电话通信系统来表述本公开,但这里公开的回声消除和抑制系统能够应用于任何双向通信系统,特别是任何出现声学回声的系统,具体地是具有麦克风和邻近扬声器的设备。作为例子,其可以应用到个人计算机中使用的通信软件或系统来驱动VoIP系统。在这里,所有这样的修改和变形都意欲被包括在本公开的范围中,并由所附权利要求保护。

Claims (33)

1.一种在双向通信系统中消除远端信号的回声的方法,包括:
通过将传输函数应用到远端信号以生成近似回声,来求所述回声的近似,所述传输函数具有冲激响应和阶;
从包括近端信号和回声的接收信号中减去所述近似回声以产生输出信号;
生成自适应系数;
通过基于自适应系数修改所述冲激响应来适配所述传输函数;
通过将估计函数生成的值除以远端信号在第一观察窗上的总能量与预定常数之和来生成所述自适应系数;
所述估计函数基于所述接收信号、所述输出信号、所述远端信号和/或所述近似回声来生成值。
2.如权利要求1所述的方法,其中:
所述总能量是|x(n)|2在第一观察窗上的平均值乘以传输函数的阶,其中所述平均值是算术平均值或平滑平均值,其中第一观察窗具有等于传输函数的阶的大小,并且其中x(n)是远端信号,n是采样时间索引。
3.如权利要求1所述的方法,进一步包括:
合成一合成回声;以及
将该合成回声加到所述接收信号上。
4.如权利要求1所述的方法,其中估计函数生成的值是被升高到预定幂的比率,该比率具有分母和分子,其中分子是z(n)ê*(n)在第二观察窗上的平均值的实部或绝对值,分母是|z(n)|在第三观察窗上的平均值和|y(n)|在第四观察窗上的平均值的乘积,其中z(n)是输出信号,ê*(n)是近似回声的复共轭,y(n)是所述接收信号,n是采样时间索引。
5.如权利要求4所述的方法,其中第二观察窗、第三观察窗和第四观察窗具有相同的大小。
6.如权利要求5所述的方法,其中z(n)ê*(n)的平均值是平滑平均值或算术平均值;
其中|z(n)|的平均值是|z(n)|的平滑平均值、|z(n)|2的平滑平均值的平方根、|z(n)|的算术平均值、或者|z(n)|的均方根平均值;并且
其中|y(n)|的平均值是|y(n)|的平滑平均值、|y(n)|2的平滑平均值的平方根、|y(n)|的算术平均值、或者|y(n)|的均方根平均值。
7.如权利要求1所述的方法,进一步包括:
将所述远端信号分成远端频率子带信号;
将所述接收信号分成接收频率子带信号;并且
从输出频率子带信号合成所述输出信号;
其中,求回声的近似、减去近似回声、生成自适应系数和适配传输函数的步骤是在至少一个子带上执行的。
8.一种回声消除系统,包括
回声近似器,可操作用于向远端信号应用具有冲激响应和阶的传输函数并且产生近似回声;
减法器,可操作用于从包括近端信号和远端信号的回声的接收信号中减去所述近似回声以产生输出信号;
用于生成自适应系数的装置;
其中基于自适应系数来修改传输函数的冲激响应。
9.如权利要求8所述的回声消除系统,其中,用于生成自适应系数的装置包括自适应系数生成器,其通过将估计函数生成的值除以远端信号在第一观察窗上的总能量和预定常数之和来生成自适应系数;
所述估计函数基于所述接收信号、所述输出信号、所述远端信号和/或所述近似回声来生成值。
10.如权利要求8所述的回声消除系统,进一步包括:
回声合成器,可操作用于从远端信号生成合成回声;以及
加法器,可操作用于将合成回声加到所述接收信号上。
11.如权利要求9所述的回声消除系统,其中估计函数生成的值是被升高到预定幂的比率,该比率具有分母和分子,其中分子是z(n)ê*(n)在第二观察窗上的平均值的实部或绝对值,分母是|z(n)|在第三观察窗上的平均值和|y(n)|在第四观察窗上的平均值的乘积,其中z(n)是输出信号,ê*(n)是近似回声的复共轭,y(n)是所述接收信号,n是采样时间索引。
12.如权利要求11所述的回声消除系统,其中z(n)ê*(n)的平均值是平滑平均值或算术平均值;
其中|z(n)|的平均值是|z(n)|的平滑平均值、|z(n)|2的平滑平均值的平方根、|z(n)|的算术平均值、或者|z(n)|的均方根平均值;
其中|y(n)|的平均值是|y(n)|的平滑平均值、|y(n)|2的平滑平均值的平方根、|y(n)|的算术平均值、或者|y(n)|的均方根平均值;并且
其中所述总能量是|x(n)|2在第一观察窗上的平均值乘以传输函数的阶,其中第一观察窗具有等于传输函数的阶的大小,并且其中所述平均值是算术平均值或平滑平均值。
13.一种回声抑制器,包括:
第一滤波器组,用于将远端信号分成多个远端频率子带信号;
第二滤波器组,用于将输入信号分成多个输入频率子带信号;
多个非线性处理单元,其中每个非线性处理单元接收所述多个远端频率子带信号之一和所述多个输入频率子带信号之一并产生回声被抑制的输出频率子带信号;以及
第三滤波器组,用于从所有输出频率子带信号合成一组合输出信号。
14.如权利要求13所述的回声抑制器,其中从线性回声消除信号接收所述输入信号。
15.如权利要求13所述的回声抑制器,其中每个非线性处理单元应用中心削波。
16.如权利要求13所述的回声抑制器,进一步包括多个线性回声消除系统,每个线性回声消除系统耦接到每个非线性处理单元,并且每个线性回声消除系统包括回声近似器和减法器,所述回声近似器可操作用于从远端频率子带信号求近似回声的近似,所述减法器可操作用于从输入频率子带信号减去所述近似回声。
17.如权利要求16所述的回声抑制器,其中每个非线性处理单元应用舒适噪声插入。
18.如权利要求16所述的回声抑制器,其中每个非线性处理单元包括估计器单元和缩放器,估计器单元可操作用于接收输入频率子带信号和远端频率子带信号,其中估计器确定要应用到输入频率子带信号的缩放因子,缩放器通过该缩放因子缩放输入频率子带信号。
19.如权利要求13所述的回声抑制器,其中每个非线性处理单元包括估计器单元和具有滤波器系数的滤波器,其中估计器确定所述滤波器系数,该滤波器被应用到输入频率子带信号。
20.如权利要求13所述的回声抑制器,其中每个非线性处理单元包括估计器单元和缩放器,估计器单元可操作用于接收输入频率子带信号、近似回声和远端频率子带信号,其中估计器确定要应用到输入频率子带信号的缩放因子,缩放器通过该缩放因子缩放输入频率子带信号。
21.一种在双向通信系统中进行回声抑制的方法,包括:
将远端信号分成对应于预定的一组频率子带的多个远端频率子带信号;
将输入信号分成多个输入频率子带信号;
对每个输入频率子带信号,使用来自所述多个远端频率子带信号的对应远端频率子带对该输入频率子带信号应用非线性处理,以产生回声被抑制的输出频率子带信号;以及
从输出频率子带信号合成一组合输出信号。
22.如权利要求21所述的方法,进一步包括:利用回声消除系统消除接收信号中的回声以产生所述输入信号。
23.如权利要求21所述的方法,其中应用非线性处理包括应用中心削波。
24.如权利要求21所述的方法,进一步包括:
对输入频率子带信号,从对应远端频率子带信号求近似回声的近似,并从输入频率子带信号中减去该近似回声。
25.如权利要求24所述的方法,其中应用非线性处理包括应用舒适噪声插入。
26.如权利要求21所述的方法,其中应用非线性处理包括:
确定缩放因子;以及
通过该缩放因子缩放输入频率子带信号。
27.如权利要求26所述的方法,其中确定缩放因子包括:
求输入频率子带信号中的回声的平均功率的近似;
计算
Figure FSA00000473482500041
以产生第一计算值,其中A{|ei(n)|2}是回声在第一观察窗上的平均功率,
Figure FSA00000473482500042
Figure FSA00000473482500043
在第二观察窗上的第一平均值,
Figure FSA00000473482500044
Figure FSA00000473482500045
在第三观察窗上的第二平均值,Δi是预定数值,
Figure FSA00000473482500046
是输入频率子带信号;
将第一计算值限制为0、1、或者0和1之间的数值,以及
向第一计算值应用单调增加函数以产生缩放因子。
28.如权利要求27所述的方法,其中
Figure FSA00000473482500051
29.如权利要求27所述的方法,求近似进一步包括:
确定在k的预定范围上产生qi(n,k)最大值的值K,其中k是整数;以及
将qi(n,K)和A1{|xi(n-K)|2}相乘以产生所述平均功率,其中
q i ( n , k ) = | A { y ~ i ( n ) x ( n ) } A 2 { | x i ( n - k ) | 2 } |
并且A1{|xi(n)|2}是|xi(n)|2在第四观察窗上的第一平均值,A2{|xi(n)|2}是|xi(n)|2在第五观察窗上的第二平均值,
Figure FSA00000473482500053
Figure FSA00000473482500054
在第六观察窗上的平均值。
30.如权利要求29所述的方法,其中
Figure FSA00000473482500055
Figure FSA00000473482500056
在第二观察窗上的算术平均值或
Figure FSA00000473482500057
在第二观察窗上的平滑平均值,
Figure FSA00000473482500058
Figure FSA00000473482500059
在第三观察窗上的算术平均值或
Figure FSA000004734825000510
在第三观察窗上的平滑平均值,
A1{|xi(n)|2}是|xi(n)|2在第四观察窗上的算术平均值或|xi(n)|2在第四观察窗上的平滑平均值,
A2{|xi(n)|2}是|xi(n)|2在第五观察窗上的算术平均值或|xi(n)|2在第五观察窗上的平滑平均值,以及
Figure FSA000004734825000511
Figure FSA000004734825000512
在第六观察窗上的算术平均值或
Figure FSA000004734825000513
在第六观察窗上的平滑平均值。
31.如权利要求24所述的方法,其中应用非线性处理包括:
确定缩放因子;以及
通过该缩放因子缩放输入频率子带信号;
所述确定缩放因子包括:
求输入频率子带信号中的残余回声的平均功率的近似;
计算
Figure FSA000004734825000514
以产生第一计算值,其中A{|εi(n)|2}是残余回声在第一观察窗上的平均功率,在第二观察窗上的第一平均值,
Figure FSA000004734825000518
在第三观察窗上的第二平均值,Δi是预定数值,是输入频率子带信号;
将第一计算值限制为0、1、或者0和1之间的数值;以及
向第一计算值应用单调增加函数以产生缩放因子。
32.如权利要求31所述的方法,求近似进一步包括:
将qi(n)和A1{|xi(n)|2}相乘以产生平均功率,其中
q i ( n ) = | A { y i ( n ) e ^ i * ( n ) } | 2 A 2 { | x i ( n ) | 2 } A { | e ^ i ( n ) | 2 }
以及A1{|xi(n)|2}是|xi(n)|2在第四观察窗上的第一平均值,A2{|xi(n)|2}是|xi(n)|2在第五观察窗上的第二平均值,
Figure FSA00000473482500062
Figure FSA00000473482500063
在第六观察窗上的平均值。
33.如权利要求32所述的方法,其中
Figure FSA00000473482500064
Figure FSA00000473482500065
在第二观察窗上的算术平均值或
Figure FSA00000473482500066
在第二观察窗上的平滑平均值,
Figure FSA00000473482500067
Figure FSA00000473482500068
在第三观察窗上的算术平均值或
Figure FSA00000473482500069
在第三观察窗上的平滑平均值,
A1{|xi(n)|2}是|xi(n)|2在第四观察窗上的算术平均值或|xi(n)|2在第四观察窗上的平滑平均值,
A2{|xi(n)|2}是|xi(n)|2在第五观察窗上的算术平均值或|xi(n)|2在第五观察窗上的平滑平均值,以及
Figure FSA000004734825000610
Figure FSA000004734825000611
在第六观察窗上的算术平均值或
Figure FSA000004734825000612
在第六观察窗上的平滑平均值。
CN2011100932110A 2010-01-08 2011-01-10 用于回声消除和回声抑制的系统和方法 Pending CN102164210A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/684,829 2010-01-08
US12/684,829 US8634569B2 (en) 2010-01-08 2010-01-08 Systems and methods for echo cancellation and echo suppression

Publications (1)

Publication Number Publication Date
CN102164210A true CN102164210A (zh) 2011-08-24

Family

ID=44258526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100932110A Pending CN102164210A (zh) 2010-01-08 2011-01-10 用于回声消除和回声抑制的系统和方法

Country Status (3)

Country Link
US (2) US8634569B2 (zh)
CN (1) CN102164210A (zh)
TW (1) TWI458332B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413384A (zh) * 2011-11-16 2012-04-11 杭州艾力特音频技术有限公司 一种回声消除双向语音对讲设备
CN104837092A (zh) * 2014-02-07 2015-08-12 亚德诺半导体集团 用于电声通信设备的回声消除方法和总成
CN105513596A (zh) * 2013-05-29 2016-04-20 华为技术有限公司 一种语音控制方法和控制设备
CN105794190A (zh) * 2013-12-12 2016-07-20 皇家飞利浦有限公司 回声消除
CN106534600A (zh) * 2016-11-24 2017-03-22 浪潮(苏州)金融技术服务有限公司 一种回声消除装置、方法及系统
CN108429994A (zh) * 2017-02-15 2018-08-21 阿里巴巴集团控股有限公司 音频识别、回声消除方法、装置及设备
CN110310653A (zh) * 2019-07-09 2019-10-08 杭州国芯科技股份有限公司 一种回声消除方法
WO2020168873A1 (zh) * 2019-02-22 2020-08-27 北京达佳互联信息技术有限公司 语音处理方法、装置、电子设备及存储介质
CN111756906A (zh) * 2020-06-24 2020-10-09 上海立可芯半导体科技有限公司 一种语音信号的回声抑制方法和装置
CN111970610A (zh) * 2020-08-26 2020-11-20 展讯通信(上海)有限公司 回声路径检测方法、音频信号处理方法及系统、存储介质、终端
CN112367594A (zh) * 2020-11-25 2021-02-12 厦门亿联网络技术股份有限公司 Aec调试方法、装置及计算机可读存储介质
US11059619B2 (en) 2017-08-25 2021-07-13 Toyo Seikan Co., Ltd. Bottle can and bottle can with cap
CN113347536A (zh) * 2021-05-20 2021-09-03 天津大学 基于线性预测与子带自适应滤波的声反馈抑制算法

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8254588B2 (en) * 2007-11-13 2012-08-28 Stmicroelectronics Asia Pacific Pte., Ltd. System and method for providing step size control for subband affine projection filters for echo cancellation applications
WO2012105880A1 (en) * 2011-02-03 2012-08-09 Telefonaktiebolaget L M Ericsson (Publ) Estimation and suppression of harmonic loudspeaker nonlinearities
US9065895B2 (en) * 2012-02-22 2015-06-23 Broadcom Corporation Non-linear echo cancellation
GB2510331A (en) 2012-12-21 2014-08-06 Microsoft Corp Echo suppression in an audio signal
GB2512022A (en) 2012-12-21 2014-09-24 Microsoft Corp Echo suppression
GB2509493A (en) 2012-12-21 2014-07-09 Microsoft Corp Suppressing Echo in a received audio signal by estimating the echo power in the received audio signal based on an FIR filter estimate
US9697847B2 (en) * 2013-03-14 2017-07-04 Semiconductor Components Industries, Llc Acoustic signal processing system capable of detecting double-talk and method
CN104050971A (zh) 2013-03-15 2014-09-17 杜比实验室特许公司 声学回声减轻装置和方法、音频处理装置和语音通信终端
CN104811567A (zh) * 2014-01-23 2015-07-29 杭州乐哈思智能科技有限公司 一种对voip系统双向双工免提语音进行声学回声消除的系统和方法
US9762742B2 (en) 2014-07-24 2017-09-12 Conexant Systems, Llc Robust acoustic echo cancellation for loosely paired devices based on semi-blind multichannel demixing
GB2527865B (en) * 2014-10-30 2016-12-14 Imagination Tech Ltd Controlling operational characteristics of an acoustic echo canceller
TWI550298B (zh) * 2015-03-09 2016-09-21 晨星半導體股份有限公司 回音辨別裝置與方法
US9565493B2 (en) 2015-04-30 2017-02-07 Shure Acquisition Holdings, Inc. Array microphone system and method of assembling the same
US9554207B2 (en) 2015-04-30 2017-01-24 Shure Acquisition Holdings, Inc. Offset cartridge microphones
WO2017053490A1 (en) * 2015-09-25 2017-03-30 Microsemi Semiconductor (U.S.) Inc. Acoustic echo path change detection apparatus and method
TWI579833B (zh) * 2016-06-22 2017-04-21 瑞昱半導體股份有限公司 信號處理裝置與信號處理方法
US10367948B2 (en) 2017-01-13 2019-07-30 Shure Acquisition Holdings, Inc. Post-mixing acoustic echo cancellation systems and methods
CN107958671B (zh) * 2017-11-22 2021-04-13 广州市六体智能科技有限公司 一种执法记录仪的回声消除装置
CN112335261B (zh) 2018-06-01 2023-07-18 舒尔获得控股公司 图案形成麦克风阵列
US11297423B2 (en) 2018-06-15 2022-04-05 Shure Acquisition Holdings, Inc. Endfire linear array microphone
US10567036B2 (en) * 2018-06-19 2020-02-18 Cisco Technology, Inc. Echo cancellation to alleviate timing varying channels
DE102018122438A1 (de) * 2018-09-13 2020-03-19 Harman Becker Automotive Systems Gmbh Akustische Echounterdrückung mit Raumänderungserfassung
US11310596B2 (en) 2018-09-20 2022-04-19 Shure Acquisition Holdings, Inc. Adjustable lobe shape for array microphones
US11558693B2 (en) 2019-03-21 2023-01-17 Shure Acquisition Holdings, Inc. Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition and voice activity detection functionality
US11303981B2 (en) 2019-03-21 2022-04-12 Shure Acquisition Holdings, Inc. Housings and associated design features for ceiling array microphones
US11438691B2 (en) 2019-03-21 2022-09-06 Shure Acquisition Holdings, Inc. Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition functionality
WO2020237206A1 (en) 2019-05-23 2020-11-26 Shure Acquisition Holdings, Inc. Steerable speaker array, system, and method for the same
WO2020243471A1 (en) 2019-05-31 2020-12-03 Shure Acquisition Holdings, Inc. Low latency automixer integrated with voice and noise activity detection
EP4018680A1 (en) 2019-08-23 2022-06-29 Shure Acquisition Holdings, Inc. Two-dimensional microphone array with improved directivity
US12028678B2 (en) 2019-11-01 2024-07-02 Shure Acquisition Holdings, Inc. Proximity microphone
US11552611B2 (en) 2020-02-07 2023-01-10 Shure Acquisition Holdings, Inc. System and method for automatic adjustment of reference gain
WO2021243368A2 (en) 2020-05-29 2021-12-02 Shure Acquisition Holdings, Inc. Transducer steering and configuration systems and methods using a local positioning system
JP2024505068A (ja) 2021-01-28 2024-02-02 シュアー アクイジッション ホールディングス インコーポレイテッド ハイブリッドオーディオビーム形成システム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5680450A (en) * 1995-02-24 1997-10-21 Ericsson Inc. Apparatus and method for canceling acoustic echoes including non-linear distortions in loudspeaker telephones
EP0843934B1 (en) * 1996-05-31 2007-11-14 Koninklijke Philips Electronics N.V. Arrangement for suppressing an interfering component of an input signal
US6301357B1 (en) * 1996-12-31 2001-10-09 Ericsson Inc. AC-center clipper for noise and echo suppression in a communications system
US6570985B1 (en) * 1998-01-09 2003-05-27 Ericsson Inc. Echo canceler adaptive filter optimization
US6434110B1 (en) * 1998-03-20 2002-08-13 Cirrus Logic, Inc. Full-duplex speakerphone circuit including a double-talk detector
ES2269137T3 (es) * 1999-05-25 2007-04-01 British Telecommunications Public Limited Company Cancelacion del eco acustico.
US7747002B1 (en) * 2000-03-15 2010-06-29 Broadcom Corporation Method and system for stereo echo cancellation for VoIP communication systems
JP3506138B2 (ja) * 2001-07-11 2004-03-15 ヤマハ株式会社 複数チャンネルエコーキャンセル方法、複数チャンネル音声伝送方法、ステレオエコーキャンセラ、ステレオ音声伝送装置および伝達関数演算装置
WO2003085645A1 (en) * 2002-04-10 2003-10-16 Koninklijke Philips Electronics N.V. Coding of stereo signals
JP3922997B2 (ja) * 2002-10-30 2007-05-30 沖電気工業株式会社 エコーキャンセラ
US6925176B2 (en) * 2003-06-27 2005-08-02 Nokia Corporation Method for enhancing the acoustic echo cancellation system using residual echo filter
US7352858B2 (en) * 2004-06-30 2008-04-01 Microsoft Corporation Multi-channel echo cancellation with round robin regularization
DE602005015426D1 (de) * 2005-05-04 2009-08-27 Harman Becker Automotive Sys System und Verfahren zur Intensivierung von Audiosignalen
DE602007005228D1 (de) * 2006-01-06 2010-04-22 Koninkl Philips Electronics Nv Akustischer echokompensator
EP1848243B1 (en) * 2006-04-18 2009-02-18 Harman/Becker Automotive Systems GmbH Multi-channel echo compensation system and method
US8396206B2 (en) * 2007-02-15 2013-03-12 Infineon Technologies Ag Multi-channel communication device and methods for reducing echoes by inserting a training sequence under a spectral mask
US7907977B2 (en) * 2007-10-02 2011-03-15 Agere Systems Inc. Echo canceller with correlation using pre-whitened data values received by downlink codec
JP5061853B2 (ja) * 2007-11-06 2012-10-31 沖電気工業株式会社 エコーキャンセラ及びエコーキャンセルプログラム
US9318094B2 (en) * 2011-06-03 2016-04-19 Cirrus Logic, Inc. Adaptive noise canceling architecture for a personal audio device

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413384A (zh) * 2011-11-16 2012-04-11 杭州艾力特音频技术有限公司 一种回声消除双向语音对讲设备
CN105513596B (zh) * 2013-05-29 2020-03-27 华为技术有限公司 一种语音控制方法和控制设备
CN105513596A (zh) * 2013-05-29 2016-04-20 华为技术有限公司 一种语音控制方法和控制设备
CN105794190A (zh) * 2013-12-12 2016-07-20 皇家飞利浦有限公司 回声消除
CN104837092A (zh) * 2014-02-07 2015-08-12 亚德诺半导体集团 用于电声通信设备的回声消除方法和总成
CN104837092B (zh) * 2014-02-07 2018-10-23 亚德诺半导体集团 用于电声通信设备的回声消除方法和总成
CN106534600A (zh) * 2016-11-24 2017-03-22 浪潮(苏州)金融技术服务有限公司 一种回声消除装置、方法及系统
CN108429994B (zh) * 2017-02-15 2020-10-09 阿里巴巴集团控股有限公司 音频识别、回声消除方法、装置及设备
CN108429994A (zh) * 2017-02-15 2018-08-21 阿里巴巴集团控股有限公司 音频识别、回声消除方法、装置及设备
US11059619B2 (en) 2017-08-25 2021-07-13 Toyo Seikan Co., Ltd. Bottle can and bottle can with cap
WO2020168873A1 (zh) * 2019-02-22 2020-08-27 北京达佳互联信息技术有限公司 语音处理方法、装置、电子设备及存储介质
US11587574B2 (en) 2019-02-22 2023-02-21 Beijing Dajia Internet Information Technology Co., Ltd. Voice processing method, apparatus, electronic device, and storage medium
CN110310653A (zh) * 2019-07-09 2019-10-08 杭州国芯科技股份有限公司 一种回声消除方法
CN111756906A (zh) * 2020-06-24 2020-10-09 上海立可芯半导体科技有限公司 一种语音信号的回声抑制方法和装置
CN111756906B (zh) * 2020-06-24 2021-07-23 上海立可芯半导体科技有限公司 一种语音信号的回声抑制方法、装置和计算机可读介质
CN111970610A (zh) * 2020-08-26 2020-11-20 展讯通信(上海)有限公司 回声路径检测方法、音频信号处理方法及系统、存储介质、终端
CN112367594A (zh) * 2020-11-25 2021-02-12 厦门亿联网络技术股份有限公司 Aec调试方法、装置及计算机可读存储介质
CN112367594B (zh) * 2020-11-25 2022-03-11 厦门亿联网络技术股份有限公司 Aec调试方法、装置及计算机可读存储介质
CN113347536A (zh) * 2021-05-20 2021-09-03 天津大学 基于线性预测与子带自适应滤波的声反馈抑制算法
CN113347536B (zh) * 2021-05-20 2023-05-26 天津大学 基于线性预测与子带自适应滤波的声反馈抑制算法

Also Published As

Publication number Publication date
US8634569B2 (en) 2014-01-21
TWI458332B (zh) 2014-10-21
TW201201564A (en) 2012-01-01
US20110170683A1 (en) 2011-07-14
US20140133649A1 (en) 2014-05-15
US9426279B2 (en) 2016-08-23

Similar Documents

Publication Publication Date Title
CN102164210A (zh) 用于回声消除和回声抑制的系统和方法
US8311234B2 (en) Echo canceller and communication audio processing apparatus
JP4975073B2 (ja) デジタル適応フィルタと同フィルタを用いたアコスティックエコーキャンセラ
US7684559B2 (en) Acoustic echo suppressor for hands-free speech communication
KR101017766B1 (ko) 핸드 프리 장치에서의 스펙트럼 도메인 비선형 반향 제거방법
CN1197263C (zh) 通过使用频域非线性处理抑制反射信号的方法和设备
US7062040B2 (en) Suppression of echo signals and the like
EP2845189B1 (en) A universal reconfigurable echo cancellation system
JP4954334B2 (ja) エコー抑制のためのフィルタ係数を演算する装置および方法
US5410595A (en) Apparatus and method for noise reduction for a full-duplex speakerphone or the like
US8867735B2 (en) Echo cancelling device, communication device, and echo cancelling method having the error signal generating circuit
EP2101480A2 (en) Echo canceller and echo cancelling method
CN105324981B (zh) 回波抑制的方法、设备、介质及装置
WO2011010960A1 (en) Device and method for controlling damping of residual echo
CN111524532B (zh) 回声抑制方法、装置、设备及存储介质
US6834108B1 (en) Method for improving acoustic noise attenuation in hand-free devices
TWI234941B (en) Echo canceler, article of manufacture, and method and system for canceling echo
JP2023519249A (ja) エコー残留抑制
JP3403549B2 (ja) エコーキャンセラ
JP3403655B2 (ja) サブバンド適応フィルタを用いた未知システムの同定方法および装置
RU2485607C2 (ru) Устройство и способ расчета коэффициентов фильтра эхоподавления
JPH07212278A (ja) 反響消去装置
JPH09307482A (ja) 反響消去装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110824