CN100477704C - 用于与自适应波束形成组合的回声抵消的方法和设备 - Google Patents
用于与自适应波束形成组合的回声抵消的方法和设备 Download PDFInfo
- Publication number
- CN100477704C CN100477704C CNB018014267A CN01801426A CN100477704C CN 100477704 C CN100477704 C CN 100477704C CN B018014267 A CNB018014267 A CN B018014267A CN 01801426 A CN01801426 A CN 01801426A CN 100477704 C CN100477704 C CN 100477704C
- Authority
- CN
- China
- Prior art keywords
- adaptive
- echo cancellation
- former
- audio processing
- processing equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
- Transducers For Ultrasonic Waves (AREA)
- Surgical Instruments (AREA)
Abstract
描述了一种方法,其中多个输入信号经受自适应波束形成和自适应回波抵消的组合处理过程,并且其中对每一个输入信号,它们各自的自适应回波抵消数据的处理历史被保存并与当前自适应波束形成数据相组合。因此,被描述的一个音频处理设备包括用于提供各个输入信号的至少一个并行声道,该声道与波束形成器通道串联连接,并且该设备包括一个自适应波束形成器和一个自适应回波抵消器分别用于实现自适应波束形成和自适应回波抵消,由此该自适应回波抵消器配备有存储装置,用于存储与每个输入信号相关的、各自的自适应回波抵消数据的处理历史以便与当前自适应波束形成数据相组合。波束形成器和回波抵消这两项技术可以组合起来以便减少计算的数量。
Description
技术领域
本发明涉及一种方法,其中多个输入信号经受自适应波束形成和自适应回波抵消的组合处理过程。
本发明也涉及一个音频处理设备,该设备包括用于提供各个输入信号的至少一个并行声道,所述声道与波束形成器通道串联连接,同时包括一个自适应波束形成器和一个用于实现自适应回波抵消的自适应回波抵消器;本发明还涉及一个通信设备,该设备存在于例如音频广播系统,音频和/或视频会议系统,例如在电话如移动电话系统中的语音增强,语音识别系统,发言者鉴权系统,语音编码器和诸如此类的系统中,该通信设备配备有这样的音频处理设备。
背景技术
这样一种方法和设备可以从:1997IEEE InternationalConference on Acoustics,Speech,and Signal Processing,Vol I,April21-24,1997,“Strategies for Combining Acoustic Echo Cancellationand Adaptive Beamforming Microphone Arrays”by WalterKellermann,pp 219-222,Munich,Germany(1997年关于声学、语音和信号处理的IEEE国际会议,第一卷,第219-222页,1997年4月21-24日,由德国慕尼黑,怀特.凯勒曼所著的“组合回声抵消和自适应波束形成的话筒阵列的策略”)中了解到。特别是描述了一个策略,其中一个普通的波束形成方法被分解成一个时不变阶段,后面跟随以一个时变阶段以便避免计算的复杂性并防止在一个回声抵消设备中发生一个时变的波束形成。这样已知的策略就受限于应用可能发生的情况。此外,它没有解决这样一个基本问题,即将回声抵消技术和自适应波束形成技术组合起来,从而使得这两项技术能够同时被应用并彼此独立,而不管它们涉及的不同适配时标。
发明内容
所以本发明的一个目的是提供这样一种将回波抵消和自适应波束形成组合起来的方法和设备,其中保留这两项技术的不同优点,并且尽管使用组合技术也将其中必要的计算减到一个可接受的级别。
另外按照本发明的方法其特征在于对每个输入的信号,它们各自的自适应回波抵消数据的处理历史被保存并与当前自适应波束形成数据相组合。
因此按照本发明的通信设备即音频处理设备其特征在于该自适应回波抵消器配备有存储装置,用于存储与每个输入信号相关的、各自的自适应回波抵消数据的处理历史以便与当前自适应波束形成数据相组合。
按照本发明的方法和设备的一个优点是通过分别存储每个输入信号的自适应回波抵消数据的处理历史并通过将这个数据与当前波束形成器数据组合起来,而使这些数据的组合使用显示出回波抵消处理过程增加的准确度。特别是波束形成器被更新的系数可用于为每个单独的输入信号精确地计算回波抵消数据,该系数的变化比自适应回声抵消滤波器最大的跟踪速度还要快。这样通常非常复杂并可能包含最多几千个系数的自适应回波抵消滤波器现在实现起来更容易,而必需的计算量被极大地减少了。
按照本发明的方法的一个实施方案其特征在于组合的自适应处理被设计成使得各个输入信号中的每个输入信号流经一个并行通道,该并行通道包含一个声道和一个波束形成器通道,随后并行通道中的信号被求和且之后被处理。因此该音频处理设备的特征在于该音频处理设备被设计成使得各个输入信号中的每个输入信号流经一个并行通道,该并行通道包含一个声道和一个波束形成器通道,随后并行通道中的信号被求和且之后被处理。有利地,一个用于实现自适应处理的自适应回波抵消器只需连到并行通道的求和结束处并连接在通往和来自通信线路远端的连接之间。有利地,不需要与单个输入通道的单独连接,从而节省了处理器容量。
按照本发明的方法的另一个实施方案其特征在于自适应波束形成涉及输入信号的滤波或加权。音频处理设备相应地也具有这样的特征。
当在波束形成器中所作的适配涉及滤波时,输入信号被例如用有限脉冲响应(FIR)滤波器或无限响应滤波器(IRF)滤波。在该情况下,可以说是一个滤波求和波束形成器(FSB),然而在其中一种特殊情况下,称为加权求和波束形成器(WSB),该滤波器被实增益或衰减所代替。
音频处理设备还有另一个实施方案其特征在于自适应回波抵消器包括一个变换域自适应滤波器,例如一个时域自适应滤波器(TDAF),或一个频域自适应滤波器(FDAF)。通常按它们计算的复杂性来说,FDAF是优选的,如果使用其输入的频谱归一化的话,FDAF会表现出更快速收敛的额外的优点。
按照本发明的音频处理设备的一个优选的实施方案其特征在于自适应回波抵消器包括第一部分,用于计算至少一个扬声器的输入频谱和一部分归一化的更新数据,以及第二部分,用于实现卷积并计算回波抵消系数的更新数据。在一个特定的实施方案中,如果波束形成器的输入信号的数量增加,那么尤其为节省大量计算,第二自适应回波抵消器部分包括一个自适应求和滤波器,该滤波器具有一个输入以接收波束形成器的滤波或加权系数,该求和滤波器包括存储装置,用于存储与每个输入信号相关的、各自的自适应回波抵消数据的处理历史以便与当前自适应波束形成数据相组合。
按照本发明的一个方面,提供了一种自适应回波抵消一个信号的方法,该信号从波束形成的多输入信号获得,其特征在于,用于自适应回波抵消的自适应滤波器系数是基于以下方式而确定的:在对应于该输入信号中每个输入信号的各自单独的处理通道中组合单个的处理历史和单个的当前自适应波束形成更新数据,该处理历史是对从一个扬声器到一个拾取相应输入信号的话筒的声道的模型化,以及该自适应波束形成更新数据可由新确定的自适应滤波器系数和当前自适应滤波器系数之间的差值与波束形成的波束形成系数的相乘而获得。
按照本发明的一个方面,提供了一种一种音频处理设备,包括:至少一个并行的音频通道,用于从话筒提供输入信号到一个所包括的波束形成器的波束形成器通道,以及一个自适应回波抵消装置,其耦合在该音频处理设备的远端连接之间,以便能够基本消除由自适应波束形成器输出的信号中的回波,该自适应回波抵消装置的特征在于,它还包括与每个输入信号相关的各自的存储装置,用于存储各自的单个处理历史,该处理历史对从扬声器到拾取各自的输入信号的话筒的声道模型化,以及该自适应回波抵消装置还包括与每个输入信号相关的各自的求和设备,用于对各自的处理历史和当前的自适应波束形成器更新数据求和,该自适应波束形成器更新数据可在从各自包括的乘法器的输出到各自的求和设备的输入的连接上接收,该乘法器被安排成使新确定的自适应滤波器系数和当前的自适应滤波器系数之间的差值与该自适应波束形成器的系数相乘。
按照本发明的一个方面,提供一种通信设备,包括一个如上所述的音频处理设备,该音频处理设备还包括至少一个扬声器,多个用于提供各自输入信号的话筒,所述的话筒被连接到该音频处理设备的波束形成器,和一个到该扬声器的输入,该输入被连接到该音频处理设备的自适应回波抵消装置。
附图说明
当前按照本发明的方法、音频处理和通信设备将参考附图结合它们额外的优点被进一步阐明,图中相同的参考数字指的是相似的部分。在附图中:
图-1示出按照本发明的一个音频处理设备的一个实施方案,该音频处理设备被装备有一个用于回声抵消的自适应装置和一个用于多个输入信号的波束形成的自适应装置;
图-2示意性示出代表一个频域自适应滤波器(FDAF)的一个预处理器部分和一个后处理器部分以实现在按照本发明的音频处理设备中应用的回声抵消器装置;以及
图-3示出在图-2设备中应用的一个自适应求和滤波器的一个自适应方案,其中回波抵消滤波器系数被存储并被更新。
具体实施方式
图-1示出一个通信设备形式的音频处理设备1,该设备包括到远端(未示出)和来自远端(未示出)的连接。来自远端的连接接收一个信号x(n)(n=...-1,0,1,...,n是采样索引)提供给来自设备1的一个扬声器2。设备1可以包含一个以上的扬声器2。设备1还包括一个并行安排的话筒3-1,3-2,3-S以提供S个输入信号z1(n),z2(n),...。zS(n)。这些输入信号被馈送给一个波束形成器4。该波束形成器4可能具有一个所谓的滤波求和波束形成器(FSB)的形式,那么它就具有滤波器脉冲响应f1,f2,...fS,或者具有一个加权求和波束形成器(WSB)的形式,该WSB是一个FSB,只是该FSB的滤波器被实增益或衰减w1,w2,...wS所代替。这些响应和增益可以连续不断地适配,也就是及时地改变。波束形成器4的一个适配控制用来控制这个适配过程。这样的波束形成器的适配能够用来例如聚焦于一个不同发言者的位置,正如从EP-A-0954850中知道的那样。适配也可以用来减少总的信噪比。在波束形成器4中被修改的信号在一个内部求和装置5中被相加从而得到输出信号z(n),之后该信号被馈送给一个外部求和设备6。
音频处理设备1还包括一个耦合在远端连接之间用于实现自适应回波抵消的自适应回波抵消装置或滤波器7。另外,来自自适应波束形成器4的瞬时或当前滤波器响应或增益/衰减被馈送给自适应回波抵消滤波器7以便使用。同样,远端输入信号x(n)被馈送给滤波器7。滤波器7在考虑当前波束形成器的系数的同时模型化具有声脉冲响应h1,h2,...hS的各个声道,这样滤波器7的一个输出信号y(n)就与输出信号z(n)的回波成分大概相等。求和设备6给远端提供一个实际上没有回声的输出信号。自适应滤波器7实现信号x(n)和它的模型化的脉冲响应模型h之间的卷积以便得到想要的信号y(n)。在本领域中已知很多算法可以计算并自适应地优化自适应滤波器7的滤波器系数h,由于需要几千个系数来实现自适应滤波器7,所以这些算法通常会很复杂。回波抵消滤波器7可以在任何合适的域中实现,特别是例如时域,或频域。如果设备1包含一个以上的扬声器那么就需要相应数量的滤波器7以便补偿那个数量的回波。
图-2示意性示出代表一个频域自适应滤波器(FDAF)的一个预处理器(上面)部分和一个后处理器(下面)部分以实现音频处理设备1中的自适应滤波器7。在预处理器中,示意性地示出扬声器的信号x(n)被串并变换(S/P)成包含B个采样的块。接下来形成一个排列,包括居先的M-B个以前的采样和这B个采样。之后对并行数据的最后M个采样执行一个实数快速傅立叶变换(FFT)从而得到由X指示的x(n)的复数谱。预处理器还包括一个归一化器用于计算由X*指示的X的复共轭谱以便最终以一种没被进一步阐述的方式得到由它的输入功率谱Pxx归一化的复数谱。这样归一化的这种特别算法在此示出了独立于输入功率的一种收敛行为。
后处理器(下面)部分将复数输入频谱X乘以频域FDAF的系数H并执行反FFT。IFFT结果中的前M-B个采样被丢弃,因为这些采样是被循环卷积误差所污染的。形成信号y(n)的剩下的B个采样被从形成信号z(n)的最新B个采样中减去以生成残余信号r(n)的B个采样,这些采样被反馈回后处理器。这个信号r(n)经并串变换(P/S)之后被送给远端。接下来反馈信号前面加适当的零,被变换(FFT)到频域并和归一化复数谱相乘以提供给FDAF系数一个更新的项。最后FDAF的系数在一个更新循环8中用这个更新项来更新。如果没有可编程的滤波器被使用,那么更新循环8就包含一个时域中的约束条件。该约束条件防止发生循环卷积误差。没有该约束条件则可省去每次升级的一个FFT和一个IFFT。见US 4903247,它在此被包含作为参考。
更新循环8包含一个自适应求和滤波器形式的构件9,该构件在图-3中被进一步阐明。波束形成器的系数,也就是说分别被波束形成器4持续不断地修改的增益、或脉冲响应、或它们的傅立叶变换:w1,w2,...wS,或f1,f2,...fS,或F1,F2,...FS被提供给自适应滤波器7,具体是提供给示于图-2中的构件9。构件9包含S个连续的循环10-1,...10-S,这样对于S个输入信号中的每一个信号,各个至少自适应的和/或被更新的自适应回波抵消系数的处理历史被存储在延时单元Z-1中以便在自适应回波抵消处理过程中使用。求和设备15和16提供求和的当前频域FDAF的系数H(k;lB),其中k是频带或分支(bin),K=0...M-1,具有M个频域自适应滤波器的系数,以及lB是迭代索引,该索引随每B个采样实例而增加一个单位。经FFT变换和被归一化的残余信号r(n)在求和设备Sm(见图-2)中更新被求和的当前系数并将新的自适应滤波器系数H(k;lB+1)提供给求和设备11以便与上面提到的求和的当前FDAF的系数相比较。在每单个循环10-1,...10-S中,这种比较的结果在乘法器12-1,...12-S中与μ1(k)F1(k;lB)...μ1FS(k;lB)相乘,其中μ1是步长。在求和设备13-1,...13-S中,对每个单独的信号累加该乘积。该结果以更新数据的形式在下一个迭代中被存储在存储/延时单元Z-1中。之后在乘法器14-1,...14-S中与F1(k;lB)...FS(k;lB)相乘并分别在上面提到的两个求和设备15和16中求和。总之,可以看出在这种情况下,保持最新的组合的波束形成器和回波抵消更新模型可以表示如下:
m=0,...S,其中S代表波束形成器的输入/话筒的总数量;k=0,1,...M-1,其中在第lB个迭代处有M个频域自适应滤波器系数,p代表涉及的波束形成器的输入以及;其中还有:lB是迭代索引,随每B个采样实例而增加一个单位;Hm(k;lB)是在从涉及的扬声器到话筒m(或波束形成器的输入m)的声音频域变换脉冲响应的第lB个迭代处第k个自适应滤波器的系数;
μ1是步长(在下文中将被阐明);
Fm(k;lB)是在第iB个迭代期间、在第k个频带内输入m的频域自适应波束形成器滤波器(增益/衰减)的系数;
H(k;lB+1)是在第iB个迭代期间,在第k个频带内对全部输入(从扬声器到波束形成器的输出)求和的更新频域变换脉冲响应。
FSB的一个较优值是:
导致对所有K来说μ1(k)=1,因为在按照EP-A-0954850的一个FSB的情况下,分母(大约)等于1。类似地在FSB的一个特殊情况下,也就是说它是WSB,则可以选择:
由于同样的原因,导致μ1=1。
虽然在上面描述的这些实施方案主要参考了优选的实施方案和最好的可能方式,应理解这些实施方案决不被解释成限制涉及设备的例子,因为落入附加的权利要求的范围内的不同修改、特点和特点的组合现在都在技术人员可达到的范围内。
上面的技术可以与一项实现多个扬声器的技术相结合,这样就存在与扬声器相同数量的构件9。立体声回波抵消器也能被提供。此外一个动态回波抑制器(DES)可以与设备1的远端输出相耦合以便提供额外的回波抑制。
Claims (11)
1.一种自适应回波抵消一个信号(z)的方法,该信号从波束形成的多输入信号(Z1,Z2,Zs)获得,其特征在于,用于自适应回波抵消的自适应滤波器系数是基于以下方式而确定的:在对应于该输入信号中每个输入信号的各自单独的处理通道中组合(13-1,13-S)单个的处理历史和单个的当前自适应波束形成更新数据,该处理历史对从一个扬声器(2)到一个拾取相应输入信号的话筒(3-1,3-2,3-s)的声道(h1,h2,hS)模型化,以及该自适应波束形成更新数据可由新确定的自适应滤波器系数和当前自适应滤波器系数之间的差值与波束形成的波束形成系数(F1,...,F5)的相乘(12-1,12-s)而获得。
2.如权利要求1中的自适应回波抵消一个信号(z)的方法,其中用于自适应回波抵消的自适应滤波器系数是通过对用于每个单独处理通道的项求和(15)而确定的,该用于每个单独处理通道的项是该单个处理历史被乘以(14-1,14-S)各自的波束形成系数(F1,...,F5)。
3.如权利要求1中的自适应回波抵消一个信号(z)的方法,其特征在于自适应波束形成涉及输入信号的滤波或加权。
4.一种音频处理设备(1),包括:
至少一个并行的音频通道,用于从话筒(3-1)提供输入信号到一个所包括的波束形成器(4)的波束形成器通道,以及
一个自适应回波抵消装置(7),其耦合在该音频处理设备(1)的远端连接之间,以便能够消除由自适应波束形成器(4)输出的信号(z)中的回波,
该自适应回波抵消装置(7)的特征在于,它还包括与每个输入信号相关的各自的存储装置(z-1),用于存储各自的单个处理历史,该处理历史对从扬声器(2)到拾取各自的输入信号的话筒(3-1,3-2,3-s)的声道(h1,h2,hS)模型化,以及
该自适应回波抵消装置(7)还包括与每个输入信号相关的各自的求和设备(13-1,13-S),用于对各自的处理历史和当前的自适应波束形成器更新数据求和,该自适应波束形成器更新数据可在从各自包括的乘法器(12-1,12-s)的输出到各自的求和设备(13-1,13-S)的输入的连接上接收,该乘法器(12-1,12-s)被安排成使新确定的自适应滤波器系数和当前的自适应滤波器系数之间的差值与该自适应波束形成器(4)的系数(F1,...,F5)相乘。
5.如权利要求4的音频处理设备(1),其中,还包括一个求和设备(15),它被安排成通过对所包括的乘法器(14-1,14-S)的输出求和而产生自适应滤波器系数,该乘法器还被安排成使单个的处理历史与自适应波束形成器(4)的各自系数(F1,...,F5)相乘。
6.如权利要求4的音频处理设备,其特征在于自适应波束形成器是一个滤波和/或加权的波束形成器。
7.如权利要求4的音频处理设备,其特征在于自适应回波抵消装置包括一个变换域自适应滤波器。
8.如权利要求4的音频处理设备,其特征在于自适应回波抵消装置包括一个频域自适应滤波器。
9.如权利要求8的音频处理设备,其特征在于自适应滤波器包括第一部分,用于计算至少一个扬声器的输入频谱和一部分归一化的更新数据,以及第二部分,用于实现卷积并计算回波抵消系数的更新数据。
10.如权利要求9的音频处理设备,其特征在于第二自适应回波抵消装置部分包括一个自适应求和滤波器,该滤波器具有一个输入以接收波束形成器的滤波或加权系数,该求和滤波器包括存储装置,用于存储与每个输入信号相关的、自适应回波抵消数据的单个处理历史以便与当前自适应波束形成数据相组合。
11.一种通信设备,包括一个如权利要求4-9其中之一的音频处理设备,该音频处理设备还包括至少一个扬声器(2),多个用于提供各自输入信号的话筒(3-1,3-2,3-S),所述的话筒被连接到该音频处理设备的波束形成器(4),和一个到该扬声器的输入,该输入被连接到该音频处理设备的自适应回波抵消装置(7)。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP00201881.0 | 2000-05-26 | ||
EP00201881 | 2000-05-26 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1451226A CN1451226A (zh) | 2003-10-22 |
CN100477704C true CN100477704C (zh) | 2009-04-08 |
Family
ID=8171566
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB018014267A Expired - Fee Related CN100477704C (zh) | 2000-05-26 | 2001-05-04 | 用于与自适应波束形成组合的回声抵消的方法和设备 |
Country Status (7)
Country | Link |
---|---|
US (1) | US7035415B2 (zh) |
EP (1) | EP1287672B1 (zh) |
JP (1) | JP2003535510A (zh) |
CN (1) | CN100477704C (zh) |
AT (1) | ATE370608T1 (zh) |
DE (1) | DE60129955D1 (zh) |
WO (1) | WO2001093554A2 (zh) |
Families Citing this family (125)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6961395B2 (en) * | 2001-11-16 | 2005-11-01 | Nortel Networks Limited | Time variant filter implementation |
GB2388001A (en) * | 2002-04-26 | 2003-10-29 | Mitel Knowledge Corp | Compensating for beamformer steering delay during handsfree speech recognition |
US7398209B2 (en) | 2002-06-03 | 2008-07-08 | Voicebox Technologies, Inc. | Systems and methods for responding to natural language speech utterance |
US7693720B2 (en) | 2002-07-15 | 2010-04-06 | Voicebox Technologies, Inc. | Mobile systems and methods for responding to natural language speech utterance |
US8073157B2 (en) * | 2003-08-27 | 2011-12-06 | Sony Computer Entertainment Inc. | Methods and apparatus for targeted sound detection and characterization |
US8947347B2 (en) * | 2003-08-27 | 2015-02-03 | Sony Computer Entertainment Inc. | Controlling actions in a video game unit |
US7783061B2 (en) * | 2003-08-27 | 2010-08-24 | Sony Computer Entertainment Inc. | Methods and apparatus for the targeted sound detection |
US7809145B2 (en) * | 2006-05-04 | 2010-10-05 | Sony Computer Entertainment Inc. | Ultra small microphone array |
US8160269B2 (en) | 2003-08-27 | 2012-04-17 | Sony Computer Entertainment Inc. | Methods and apparatuses for adjusting a listening area for capturing sounds |
US8233642B2 (en) | 2003-08-27 | 2012-07-31 | Sony Computer Entertainment Inc. | Methods and apparatuses for capturing an audio signal based on a location of the signal |
US8139793B2 (en) * | 2003-08-27 | 2012-03-20 | Sony Computer Entertainment Inc. | Methods and apparatus for capturing audio signals based on a visual image |
US9174119B2 (en) | 2002-07-27 | 2015-11-03 | Sony Computer Entertainement America, LLC | Controller for providing inputs to control execution of a program when inputs are combined |
US7803050B2 (en) | 2002-07-27 | 2010-09-28 | Sony Computer Entertainment Inc. | Tracking device with sound emitter for use in obtaining information for controlling game program execution |
US6868042B1 (en) * | 2002-08-08 | 2005-03-15 | The United States Of America As Represented By The Secretary Of The Navy | Data-based signal definition for frequency domain adaptive beamforming algorithms |
US6990193B2 (en) * | 2002-11-29 | 2006-01-24 | Mitel Knowledge Corporation | Method of acoustic echo cancellation in full-duplex hands free audio conferencing with spatial directivity |
JP3727927B2 (ja) * | 2003-02-10 | 2005-12-21 | 株式会社東芝 | 話者照合装置 |
EP1453348A1 (de) * | 2003-02-25 | 2004-09-01 | AKG Acoustics GmbH | Selbstkalibrierung von Arraymikrofonen |
US20070223732A1 (en) * | 2003-08-27 | 2007-09-27 | Mao Xiao D | Methods and apparatuses for adjusting a visual image based on an audio signal |
JP2005084253A (ja) * | 2003-09-05 | 2005-03-31 | Matsushita Electric Ind Co Ltd | 音響処理装置、方法、プログラム及び記憶媒体 |
ATE394017T1 (de) * | 2004-01-07 | 2008-05-15 | Koninkl Philips Electronics Nv | Audiosystem mit vorkehrungen zum filterkoeffizienten kopieren |
EP1633121B1 (en) * | 2004-09-03 | 2008-11-05 | Harman Becker Automotive Systems GmbH | Speech signal processing with combined adaptive noise reduction and adaptive echo compensation |
EP1722545B1 (en) * | 2005-05-09 | 2008-08-13 | Mitel Networks Corporation | A method and a system to reduce training time of an acoustic echo canceller in a full-duplex beamforming-based audio conferencing system |
US7640160B2 (en) * | 2005-08-05 | 2009-12-29 | Voicebox Technologies, Inc. | Systems and methods for responding to natural language speech utterance |
US7620549B2 (en) | 2005-08-10 | 2009-11-17 | Voicebox Technologies, Inc. | System and method of supporting adaptive misrecognition in conversational speech |
US7949529B2 (en) | 2005-08-29 | 2011-05-24 | Voicebox Technologies, Inc. | Mobile systems and methods of supporting natural language human-machine interactions |
EP1934971A4 (en) | 2005-08-31 | 2010-10-27 | Voicebox Technologies Inc | DYNAMIC LANGUAGE SCRIPTURE |
US20080273716A1 (en) * | 2005-09-27 | 2008-11-06 | Kosuke Saito | Feedback Sound Eliminating Apparatus |
US7970123B2 (en) * | 2005-10-20 | 2011-06-28 | Mitel Networks Corporation | Adaptive coupling equalization in beamforming-based communication systems |
KR101153579B1 (ko) * | 2006-05-08 | 2012-06-11 | 신꼬오덴끼가부시끼가이샤 | 자동차 차체의 진동을 저감하는 자동차용 제진장치 |
US7801319B2 (en) * | 2006-05-30 | 2010-09-21 | Sonitus Medical, Inc. | Methods and apparatus for processing audio signals |
US20120243714A9 (en) * | 2006-05-30 | 2012-09-27 | Sonitus Medical, Inc. | Microphone placement for oral applications |
US8291912B2 (en) * | 2006-08-22 | 2012-10-23 | Sonitus Medical, Inc. | Systems for manufacturing oral-based hearing aid appliances |
EP2064916B1 (en) * | 2006-09-08 | 2018-12-05 | SoundMed, LLC | Methods and apparatus for treating tinnitus |
US8073681B2 (en) | 2006-10-16 | 2011-12-06 | Voicebox Technologies, Inc. | System and method for a cooperative conversational voice user interface |
US7818176B2 (en) | 2007-02-06 | 2010-10-19 | Voicebox Technologies, Inc. | System and method for selecting and presenting advertisements based on natural language processing of voice-based input |
US8005238B2 (en) * | 2007-03-22 | 2011-08-23 | Microsoft Corporation | Robust adaptive beamforming with enhanced noise suppression |
US8005237B2 (en) * | 2007-05-17 | 2011-08-23 | Microsoft Corp. | Sensor array beamformer post-processor |
US8270638B2 (en) * | 2007-05-29 | 2012-09-18 | Sonitus Medical, Inc. | Systems and methods to provide communication, positioning and monitoring of user status |
JP5338040B2 (ja) * | 2007-06-04 | 2013-11-13 | ヤマハ株式会社 | 音声会議装置 |
US20080304677A1 (en) * | 2007-06-08 | 2008-12-11 | Sonitus Medical Inc. | System and method for noise cancellation with motion tracking capability |
US20090028352A1 (en) * | 2007-07-24 | 2009-01-29 | Petroff Michael L | Signal process for the derivation of improved dtm dynamic tinnitus mitigation sound |
US20120235632A9 (en) * | 2007-08-20 | 2012-09-20 | Sonitus Medical, Inc. | Intra-oral charging systems and methods |
US8433080B2 (en) * | 2007-08-22 | 2013-04-30 | Sonitus Medical, Inc. | Bone conduction hearing device with open-ear microphone |
US8224013B2 (en) | 2007-08-27 | 2012-07-17 | Sonitus Medical, Inc. | Headset systems and methods |
US7682303B2 (en) | 2007-10-02 | 2010-03-23 | Sonitus Medical, Inc. | Methods and apparatus for transmitting vibrations |
US20090105523A1 (en) * | 2007-10-18 | 2009-04-23 | Sonitus Medical, Inc. | Systems and methods for compliance monitoring |
US8795172B2 (en) * | 2007-12-07 | 2014-08-05 | Sonitus Medical, Inc. | Systems and methods to provide two-way communications |
US8140335B2 (en) | 2007-12-11 | 2012-03-20 | Voicebox Technologies, Inc. | System and method for providing a natural language voice user interface in an integrated voice navigation services environment |
US7974845B2 (en) | 2008-02-15 | 2011-07-05 | Sonitus Medical, Inc. | Stuttering treatment methods and apparatus |
US8270637B2 (en) * | 2008-02-15 | 2012-09-18 | Sonitus Medical, Inc. | Headset systems and methods |
US8023676B2 (en) | 2008-03-03 | 2011-09-20 | Sonitus Medical, Inc. | Systems and methods to provide communication and monitoring of user status |
US8150075B2 (en) | 2008-03-04 | 2012-04-03 | Sonitus Medical, Inc. | Dental bone conduction hearing appliance |
US20090226020A1 (en) | 2008-03-04 | 2009-09-10 | Sonitus Medical, Inc. | Dental bone conduction hearing appliance |
US20090270673A1 (en) * | 2008-04-25 | 2009-10-29 | Sonitus Medical, Inc. | Methods and systems for tinnitus treatment |
US8693698B2 (en) * | 2008-04-30 | 2014-04-08 | Qualcomm Incorporated | Method and apparatus to reduce non-linear distortion in mobile computing devices |
US9305548B2 (en) | 2008-05-27 | 2016-04-05 | Voicebox Technologies Corporation | System and method for an integrated, multi-modal, multi-device natural language voice services environment |
US8589161B2 (en) | 2008-05-27 | 2013-11-19 | Voicebox Technologies, Inc. | System and method for an integrated, multi-modal, multi-device natural language voice services environment |
CN103152498B (zh) * | 2008-06-11 | 2014-12-31 | 三菱电机株式会社 | 回声消除器 |
WO2010043998A1 (en) * | 2008-10-16 | 2010-04-22 | Nxp B.V. | Microphone system and method of operating the same |
KR101611602B1 (ko) * | 2008-12-22 | 2016-04-26 | 코닌클리케 필립스 엔.브이. | 원단 토커 신호와 조합된 신호 간의 음향 결합의 결정 |
US8401206B2 (en) * | 2009-01-15 | 2013-03-19 | Microsoft Corporation | Adaptive beamformer using a log domain optimization criterion |
US8326637B2 (en) | 2009-02-20 | 2012-12-04 | Voicebox Technologies, Inc. | System and method for processing multi-modal device interactions in a natural language voice services environment |
EP2222091B1 (en) * | 2009-02-23 | 2013-04-24 | Nuance Communications, Inc. | Method for determining a set of filter coefficients for an acoustic echo compensation means |
US8249862B1 (en) | 2009-04-15 | 2012-08-21 | Mediatek Inc. | Audio processing apparatuses |
JP5169986B2 (ja) * | 2009-05-13 | 2013-03-27 | 沖電気工業株式会社 | 電話装置、エコーキャンセラ及びエコーキャンセルプログラム |
BR112012007264A2 (pt) | 2009-10-02 | 2020-08-11 | Sonitus Medical Inc. | aparelho intraoral para transmissão de som |
WO2011059997A1 (en) | 2009-11-10 | 2011-05-19 | Voicebox Technologies, Inc. | System and method for providing a natural language content dedication service |
US9171541B2 (en) | 2009-11-10 | 2015-10-27 | Voicebox Technologies Corporation | System and method for hybrid processing in a natural language voice services environment |
US9215527B1 (en) | 2009-12-14 | 2015-12-15 | Cirrus Logic, Inc. | Multi-band integrated speech separating microphone array processor with adaptive beamforming |
GB2493327B (en) | 2011-07-05 | 2018-06-06 | Skype | Processing audio signals |
US9711127B2 (en) | 2011-09-19 | 2017-07-18 | Bitwave Pte Ltd. | Multi-sensor signal optimization for speech communication |
GB2495472B (en) * | 2011-09-30 | 2019-07-03 | Skype | Processing audio signals |
GB2495128B (en) | 2011-09-30 | 2018-04-04 | Skype | Processing signals |
GB2495131A (en) | 2011-09-30 | 2013-04-03 | Skype | A mobile device includes a received-signal beamformer that adapts to motion of the mobile device |
GB2495129B (en) | 2011-09-30 | 2017-07-19 | Skype | Processing signals |
CN102509552B (zh) * | 2011-10-21 | 2013-09-11 | 浙江大学 | 一种基于联合抑制的麦克风阵列语音增强方法 |
GB2496660B (en) | 2011-11-18 | 2014-06-04 | Skype | Processing audio signals |
US8879761B2 (en) | 2011-11-22 | 2014-11-04 | Apple Inc. | Orientation-based audio |
GB201120392D0 (en) | 2011-11-25 | 2012-01-11 | Skype Ltd | Processing signals |
US8903108B2 (en) | 2011-12-06 | 2014-12-02 | Apple Inc. | Near-field null and beamforming |
US9020163B2 (en) | 2011-12-06 | 2015-04-28 | Apple Inc. | Near-field null and beamforming |
GB2497343B (en) | 2011-12-08 | 2014-11-26 | Skype | Processing audio signals |
CN102543096B (zh) * | 2011-12-26 | 2014-08-13 | 上海聚力传媒技术有限公司 | 对媒体文件播放过程中场景噪声进行抑制的方法与装置 |
US9768829B2 (en) | 2012-05-11 | 2017-09-19 | Intel Deutschland Gmbh | Methods for processing audio signals and circuit arrangements therefor |
US20130329908A1 (en) * | 2012-06-08 | 2013-12-12 | Apple Inc. | Adjusting audio beamforming settings based on system state |
US8885815B1 (en) * | 2012-06-25 | 2014-11-11 | Rawles Llc | Null-forming techniques to improve acoustic echo cancellation |
US9232072B2 (en) | 2013-03-13 | 2016-01-05 | Google Inc. | Participant controlled spatial AEC |
US9813808B1 (en) | 2013-03-14 | 2017-11-07 | Amazon Technologies, Inc. | Adaptive directional audio enhancement and selection |
US9083782B2 (en) | 2013-05-08 | 2015-07-14 | Blackberry Limited | Dual beamform audio echo reduction |
WO2015041549A1 (en) * | 2013-09-17 | 2015-03-26 | Intel Corporation | Adaptive phase difference based noise reduction for automatic speech recognition (asr) |
US9516409B1 (en) | 2014-05-19 | 2016-12-06 | Apple Inc. | Echo cancellation and control for microphone beam patterns |
US20150371655A1 (en) * | 2014-06-19 | 2015-12-24 | Yang Gao | Acoustic Echo Preprocessing for Speech Enhancement |
US9613634B2 (en) * | 2014-06-19 | 2017-04-04 | Yang Gao | Control of acoustic echo canceller adaptive filter for speech enhancement |
US9898459B2 (en) | 2014-09-16 | 2018-02-20 | Voicebox Technologies Corporation | Integration of domain information into state transitions of a finite state transducer for natural language processing |
EP3195145A4 (en) | 2014-09-16 | 2018-01-24 | VoiceBox Technologies Corporation | Voice commerce |
EP3207467A4 (en) | 2014-10-15 | 2018-05-23 | VoiceBox Technologies Corporation | System and method for providing follow-up responses to prior natural language inputs of a user |
CN104392727A (zh) * | 2014-11-12 | 2015-03-04 | 华为技术有限公司 | 音频信号处理方法和相关装置 |
US10431214B2 (en) | 2014-11-26 | 2019-10-01 | Voicebox Technologies Corporation | System and method of determining a domain and/or an action related to a natural language input |
US10614799B2 (en) | 2014-11-26 | 2020-04-07 | Voicebox Technologies Corporation | System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance |
US9565493B2 (en) | 2015-04-30 | 2017-02-07 | Shure Acquisition Holdings, Inc. | Array microphone system and method of assembling the same |
US9554207B2 (en) | 2015-04-30 | 2017-01-24 | Shure Acquisition Holdings, Inc. | Offset cartridge microphones |
CN105427860B (zh) * | 2015-11-11 | 2019-09-03 | 百度在线网络技术(北京)有限公司 | 远场语音识别方法和装置 |
US9967081B2 (en) * | 2015-12-04 | 2018-05-08 | Hon Hai Precision Industry Co., Ltd. | System and method for beamforming wth automatic amplitude and phase error calibration |
US9659576B1 (en) | 2016-06-13 | 2017-05-23 | Biamp Systems Corporation | Beam forming and acoustic echo cancellation with mutual adaptation control |
US10331784B2 (en) | 2016-07-29 | 2019-06-25 | Voicebox Technologies Corporation | System and method of disambiguating natural language processing requests |
US10550849B2 (en) * | 2016-12-12 | 2020-02-04 | Garrett Transportation I Inc. | Turbocharger assembly |
CN110140360B (zh) * | 2017-01-03 | 2021-07-16 | 皇家飞利浦有限公司 | 使用波束形成的音频捕获的方法和装置 |
US10367948B2 (en) | 2017-01-13 | 2019-07-30 | Shure Acquisition Holdings, Inc. | Post-mixing acoustic echo cancellation systems and methods |
US10182290B2 (en) | 2017-02-23 | 2019-01-15 | Microsoft Technology Licensing, Llc | Covariance matrix estimation with acoustic imaging |
US10090000B1 (en) * | 2017-11-01 | 2018-10-02 | GM Global Technology Operations LLC | Efficient echo cancellation using transfer function estimation |
EP3804356A1 (en) | 2018-06-01 | 2021-04-14 | Shure Acquisition Holdings, Inc. | Pattern-forming microphone array |
US11297423B2 (en) | 2018-06-15 | 2022-04-05 | Shure Acquisition Holdings, Inc. | Endfire linear array microphone |
US10938994B2 (en) * | 2018-06-25 | 2021-03-02 | Cypress Semiconductor Corporation | Beamformer and acoustic echo canceller (AEC) system |
WO2020061353A1 (en) | 2018-09-20 | 2020-03-26 | Shure Acquisition Holdings, Inc. | Adjustable lobe shape for array microphones |
US11558693B2 (en) | 2019-03-21 | 2023-01-17 | Shure Acquisition Holdings, Inc. | Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition and voice activity detection functionality |
TW202044236A (zh) | 2019-03-21 | 2020-12-01 | 美商舒爾獲得控股公司 | 具有抑制功能的波束形成麥克風瓣之自動對焦、區域內自動對焦、及自動配置 |
EP3942842A1 (en) | 2019-03-21 | 2022-01-26 | Shure Acquisition Holdings, Inc. | Housings and associated design features for ceiling array microphones |
EP3973716A1 (en) | 2019-05-23 | 2022-03-30 | Shure Acquisition Holdings, Inc. | Steerable speaker array, system, and method for the same |
JP2022535229A (ja) | 2019-05-31 | 2022-08-05 | シュアー アクイジッション ホールディングス インコーポレイテッド | 音声およびノイズアクティビティ検出と統合された低レイテンシオートミキサー |
CN114467312A (zh) | 2019-08-23 | 2022-05-10 | 舒尔获得控股公司 | 具有改进方向性的二维麦克风阵列 |
US12028678B2 (en) | 2019-11-01 | 2024-07-02 | Shure Acquisition Holdings, Inc. | Proximity microphone |
US11552611B2 (en) | 2020-02-07 | 2023-01-10 | Shure Acquisition Holdings, Inc. | System and method for automatic adjustment of reference gain |
USD944776S1 (en) | 2020-05-05 | 2022-03-01 | Shure Acquisition Holdings, Inc. | Audio device |
WO2021243368A2 (en) | 2020-05-29 | 2021-12-02 | Shure Acquisition Holdings, Inc. | Transducer steering and configuration systems and methods using a local positioning system |
WO2022165007A1 (en) | 2021-01-28 | 2022-08-04 | Shure Acquisition Holdings, Inc. | Hybrid audio beamforming system |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5410595A (en) * | 1992-11-12 | 1995-04-25 | Motorola, Inc. | Apparatus and method for noise reduction for a full-duplex speakerphone or the like |
AU6841396A (en) * | 1995-08-21 | 1997-03-12 | Telefonaktiebolaget Lm Ericsson (Publ) | Echo cancelling using signal preprocessing in an acoustic environment |
US6535609B1 (en) * | 1997-06-03 | 2003-03-18 | Lear Automotive Dearborn, Inc. | Cabin communication system |
US6549627B1 (en) * | 1998-01-30 | 2003-04-15 | Telefonaktiebolaget Lm Ericsson | Generating calibration signals for an adaptive beamformer |
US6049607A (en) * | 1998-09-18 | 2000-04-11 | Lamar Signal Processing | Interference canceling method and apparatus |
-
2001
- 2001-05-04 EP EP01929622A patent/EP1287672B1/en not_active Expired - Lifetime
- 2001-05-04 WO PCT/EP2001/005091 patent/WO2001093554A2/en active IP Right Grant
- 2001-05-04 JP JP2001588218A patent/JP2003535510A/ja active Pending
- 2001-05-04 AT AT01929622T patent/ATE370608T1/de not_active IP Right Cessation
- 2001-05-04 CN CNB018014267A patent/CN100477704C/zh not_active Expired - Fee Related
- 2001-05-04 DE DE60129955T patent/DE60129955D1/de not_active Expired - Lifetime
- 2001-05-15 US US09/855,626 patent/US7035415B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US7035415B2 (en) | 2006-04-25 |
WO2001093554A2 (en) | 2001-12-06 |
EP1287672A2 (en) | 2003-03-05 |
DE60129955D1 (de) | 2007-09-27 |
US20020015500A1 (en) | 2002-02-07 |
ATE370608T1 (de) | 2007-09-15 |
EP1287672B1 (en) | 2007-08-15 |
CN1451226A (zh) | 2003-10-22 |
JP2003535510A (ja) | 2003-11-25 |
WO2001093554A3 (en) | 2002-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100477704C (zh) | 用于与自适应波束形成组合的回声抵消的方法和设备 | |
US8184801B1 (en) | Acoustic echo cancellation for time-varying microphone array beamsteering systems | |
CN100573668C (zh) | 用循环正则化作多通道回声的消除 | |
EP0615340B1 (en) | Low-delay subband adaptive filter | |
JP3654470B2 (ja) | サブバンド多チャネル音声通信会議用反響消去方法 | |
CN100534221C (zh) | 用于使用过采样滤波器组处理定向音频信号的方法和系统 | |
Simmer et al. | Post-filtering techniques | |
EP1848243B1 (en) | Multi-channel echo compensation system and method | |
US8879747B2 (en) | Adaptive filtering system | |
US5517435A (en) | Method of identifying an unknown system with a band-splitting adaptive filter and a device thereof | |
EP1184676B1 (en) | System and method for processing a signal being emitted from a target signal source into a noisy environment | |
US8788554B2 (en) | Sub-band adaptive FIR-filtering | |
CA2593183C (en) | Partitioned fast convolution in the time and frequency domain | |
JP3099870B2 (ja) | 音響エコーキャンセラ | |
JP3159176B2 (ja) | 帯域分割適応フィルタによる未知システム同定方法及び装置 | |
US20070005350A1 (en) | Sound signal processing method and apparatus | |
EP2222091A1 (en) | Method for determining a set of filter coefficients for an acoustic echo compensation means | |
Benesty et al. | Stereophonic acoustic echo cancellation using nonlinear transformations and comb filtering | |
JP2985675B2 (ja) | 帯域分割適応フィルタによる未知システム同定の方法及び装置 | |
Zhang et al. | Neural cascade architecture for multi-channel acoustic echo suppression | |
EP3671740B1 (en) | Method of compensating a processed audio signal | |
Petropulu et al. | Cepstrum based deconvolution for speech dereverberation | |
JPH08321796A (ja) | 音響エコーキャンセラ | |
JP2002261659A (ja) | 多チャネルエコーキャンセル方法、その装置、そのプログラム及び記録媒体 | |
CN114915875B (zh) | 一种可调波束形成方法、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20090408 Termination date: 20100504 |