CN103325379A - 用于声学回声控制的方法与装置 - Google Patents
用于声学回声控制的方法与装置 Download PDFInfo
- Publication number
- CN103325379A CN103325379A CN2012100808103A CN201210080810A CN103325379A CN 103325379 A CN103325379 A CN 103325379A CN 2012100808103 A CN2012100808103 A CN 2012100808103A CN 201210080810 A CN201210080810 A CN 201210080810A CN 103325379 A CN103325379 A CN 103325379A
- Authority
- CN
- China
- Prior art keywords
- signal
- frequency spectrum
- spectrum
- similarity
- microphone signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 82
- 238000001228 spectrum Methods 0.000 claims abstract description 196
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 239000013598 vector Substances 0.000 claims description 48
- 230000003595 spectral effect Effects 0.000 claims description 34
- 238000012545 processing Methods 0.000 claims description 19
- 238000004422 calculation algorithm Methods 0.000 claims description 10
- 230000005764 inhibitory process Effects 0.000 claims description 10
- 230000008447 perception Effects 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 2
- 238000004519 manufacturing process Methods 0.000 abstract description 7
- 230000006978 adaptation Effects 0.000 abstract description 2
- 230000008030 elimination Effects 0.000 abstract description 2
- 238000003379 elimination reaction Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 25
- 230000006870 function Effects 0.000 description 12
- 238000004590 computer program Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 238000005259 measurement Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000035508 accumulation Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 208000002161 echolalia Diseases 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005086 pumping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/12—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being prediction coefficients
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
描述了用于声学回声控制的方法与装置的实施方式。根据所述方法,进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声。计算麦克风信号的频谱与扬声器信号的频谱之间的谱相似度。如果谱相似度高于门限水平,则确定在麦克风信号中不存在双端发声。如果通过基于回声能量的双端发声检测或通过基于谱相似度的双端发声检测确定在麦克风信号中不存在双端发声,则使能自适应滤波器的自适应,自适应滤波器用于对麦克风信号应用声学回声消除或声学回声抑制。
Description
技术领域
本发明一般地涉及音频信号处理。更具体地,本发明的实施方式涉及声学回声控制。
背景技术
声学回声控制涉及消除或抑制从扬声器与麦克风之间的声学耦合产生的非期望回声信号。声学回声消除(acoustic echo cancellation,AEC)或声学回声抑制(acoustic echo suppression,AES)可以用于本目的。
AEC是一种通过自适应地识别回声路径脉冲响应和从麦克风信号中扣除回声信号的估计来完成回声消除的方法。AES是一种估计包含在麦克风信号中的回声信号的频谱,并且通过频谱修正来完成回声抑制的方法。
为了估计回声信号,自适应滤波器的系数是自适应地更新以识别回声路径响应。但是,在双端发声检测器(doubletalk detector,DTD)检测到双端发声(如果处于麦克风的近端处的讲话人在有回声时讲话)的情况下,通常,就估计声学回声路径而言,禁用自适应滤波器的自适应以防止近端信号对自适应滤波器具有负面影响。
发明内容
根据本发明的一种实施方式,提供了一种进行声学回声控制的方法。根据该方法,进行基于回声能量的双端发声检测以参考扬声器信号来确定在麦克风信号中是否存在双端发声。计算麦克风信号的频谱与扬声器信号的频谱之间的谱相似度。如果谱相似度高于门限水平,则确定在麦克风信号中不存在双端发声。如果通过基于回声能量的双端发声检测或通过基于谱相似度的双端发声检测确定在麦克风信号中不存在双端发声,则使能自适应滤波器的自适应,自适应滤波器用于对麦克风信号应用声学回声消除或声学回声抑制。
根据本发明的一种实施方式,提供了一种进行声学回声控制的装置。该装置包括第一双端发声检测器、第二双端发声检测器、回声处理单元以及控制器。第一双端发声检测器进行基于回声能量的双端发声检测,以参考扬声器信号确定在麦克风信号中是否存在双端发声。第二双端发声检测器计算麦克风信号的频谱与扬声器信号的频谱之间的谱相似度,如果谱相似度高于门限水平,则确定在麦克风信号中不存在双端发声。回声处理单元进行自适应滤波器的自适应,自适应滤波器用于对麦克风信号应用声学回声消除或声学回声抑制。如果通过基于回声能量的双端发声检测或通过基于谱相似度的双端发声检测确定在麦克风信号中不存在双端发声,则控制器使能自适应滤波器的自适应。
以下,参考附图来描述本发明的进一步的特征和优点,以及本发明的各种实施方式的结构与操作。需要注意的是本发明不限于本文中所描述的具体实施方式。本文中所提出的这些实施方式仅用于示例性目的。基于这里所包含的教示,另外的实施方式对相关领域的普通技术人员也是明显的。
附图说明
在附图的各图中,以示例性和非限制性的方式对本发明进行阐释,在附图中,类似的附图标记指代类似的元件,其中:
图1是示出了根据本发明实施方式的进行声学回声控制的示例性装置的框图;
图2是示出了根据本发明实施方式的进行声学回声控制的示例性方法的流程图;
图3是示出了根据本发明实施方式的进行声学回声控制的示例性装置的框图;
图4是示出了根据本发明实施方式的进行声学回声控制的示例性方法的流程图;
图5是示出了通过以传统方式使用传统DTD经AES后的输出的示意图;
图6是示出了根据公式(6)定义的相似度在BandNum=48、PeakNum=10以及α=0.5时在双端发声期间的相似度测量的示意图;
图7是示出了根据公式(6)定义的相似度在BandNum=48、PeakNum=10以及α=0.5时在回声路径变化期间的相似度测量示意图;
以及
图8是示出了用于实现本发明实施方式的示例性系统的框图。
具体实施方式
下面参考附图描述本发明实施方式。应注意,为清楚起见,在附图和描述中省略了关于本领域技术人员已知但是与本发明无关的组件和过程的陈述和描述。
本领域的技术人员可以理解,本发明的各方面可以被实施为系统、装置(例如蜂窝电话、便携媒体播放器、个人计算机、电视机顶盒、或数字录像机、或任意其它媒体播放器)、方法或计算机程序产品。因此,本发明的各方面可以采取以下形式:完全硬件实施方式、完全软件实施方式(包括固件、驻留软件、微代码等)或组合软件部分与硬件部分的实施方式,本文可以一般地称之为“电路”、“模块”或“系统”。此外,本发明的各方面可以采取体现为一个或更多个计算机可读介质的计算机程序产品的形式,该计算机可读介质上体现有计算机可读程序代码。
可以使用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质例如可以是(但不限于)电的、磁的、光的、电磁的、红外线的、或半导体的系统、设备或装置、或前述各项的任何适当的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括以下:有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储装置、磁存储装置、或前述各项的任何适当的组合。在本文语境中,计算机可读存储介质可以是任何含有或存储供指令执行系统、设备或装置使用的或与指令执行系统、设备或装置相联系的程序的有形介质。
计算机可读信号介质可以包括例如在基带中或作为载波的一部分传播的、其中带有计算机可读程序代码的数据信号。这样的传播信号可以采取任何适当的形式,包括但不限于电磁的、光的或其任何适当的组合。
计算机可读信号介质可以是不同于计算机可读存储介质的、能够传达、传播或传输供指令执行系统、设备或装置使用的或与指令执行系统、设备或装置相联系的程序的任何一种计算机可读介质。
体现在计算机可读介质中的程序代码可以采用任何适当的介质传输,包括但不限于无线、有线、光缆、射频等等、或上述各项的任何适当的组合。
用于执行本发明各方面的操作的计算机程序代码可以以一种或多种程序设计语言的任何组合来编写,所述程序设计语言包括面向对象的程序设计语言,诸如Java、Smalltalk、C++之类,还包括常规的过程式程序设计语言,诸如“C”程序设计语言或类似的程序设计语言。程序代码可以完全地在用户的计算机上执行、部分地在用户的计算机上执行、作为一个独立的软件包执行、部分在用户的计算机上并且部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在后一种情形中,远程计算机可以通过任何种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户的计算机,或者,可以(例如利用因特网服务提供商来通过因特网)连接到外部计算机。
以下参照按照本发明实施方式的方法、设备(系统)和计算机程序产品的流程图和/或框图来描述本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合都可以由计算机程序指令实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理设备的处理器以生产出一种机器,使得通过计算机或其它可编程数据处理装置执行的这些指令产生用于实现流程图和/或框图中的方框中规定的功能/操作的装置。
也可以把这些计算机程序指令存储在能够指引计算机或其它可编程数据处理设备以特定方式工作的计算机可读介质中,使得存储在计算机可读介质中的指令产生一个包括实现流程图和/或框图中的方框中规定的功能/操作的指令的制造品。
也可以把计算机程序指令加载到计算机、其它可编程数据处理设备或其它装置上,导致在计算机、其它可编程处理设备或其它装置上执行一系列操作步骤以产生计算机实现的过程,使得在计算机或其它可编程设备上执行的指令提供实现流程图和/或框图的方框中规定的功能/动作的过程。
图1是示出了根据本发明实施方式的进行声学回声控制的示例性装置100的框图。
如图1所示,装置100包含第一双端发声检测器101、第二双端发声检测器102、控制器103以及回声处理单元104。
在可以部署装置100的示例性情形中,扬声器根据通过通信链路接收或从本地源中再现的扬声器信号来输出声音,并且声音可以由麦克风捕获以产生麦克风信号。在这种情形下,麦克风信号可以包含扬声器信号的回声。装置100适于进行声学回声控制以消除或抑制麦克风信号中的回声。因此,扬声器信号也可以称作参考信号。
回声处理单元104被配置成进行自适应滤波器的自适应(图1中未示出),自适应滤波器用于对麦克风信号应用声学回声消除或声学回声抑制。自适应滤波器的自适应指的是估计回声路径响应并更新自适应滤波器的系数,以基于该估计跟踪回声路径的变化。
一般地,在声学回声控制中进行双端发声检测来禁用自适应滤波器的自适应,以使自适应滤波器在出现双端发声的情况下避免发散。在装置100中,第一双端发声检测器101被配置成进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声。
各种方法可以用于基于麦克风信号中的回声能量的双端发声检测。一般的做法是从激励、期望和/或误差信号中得到检测统计量η。然后将该检测统计量与门限比较,以确定是否可以宣称双端发声存在。用x(n),y(n)以及d(n)分别表示远端(扬声器)、近端(麦克风)以及估计的回声信号。
方法之一是比较帧n的估计残余回声功率和实际残差功率(分别表示为Re(n)和Ra(n)),如果满足下式,则可以宣称双端发声存在:
η=Ra(n)/Re(n)>C (1)
其中C是预定义的常量。也就是说,如果实际残差功率大于C乘以估计残余回声功率,则可以宣称双端发声存在。
Geigel检测器是另一种典型的方法。检测统计量η是远端信号水平与近端信号水平的比率。
η=max{|x(n)|,...,|x(n-N)|}/|y(n)| (2)
如果长度为N(典型地为回声路径的长度)的间隔上的最大的远端信号小于近端信号一个门限水平,则宣称双端发声存在。对于本检测的门限通常设置为接近于回声路径的回波损耗(echo return loss,ERL)的值。因此,如果近端讲话人是主动的,则近端信号水平将增加到足够将η降低到门限以下。
除了上述两种方法以外,通常也使用基于互相关的双端发声检测。闭环分析和开环分析是两个主要的基于相关的方法。在闭环分析中,互相关在麦克风信号与估计的回声信号之间。
在开环分析中,互相关在麦克风信号与最大地相关的激励信号之间。
第二双端发声检测器102被配置成:计算麦克风信号频谱与扬声器信号频谱之间的谱相似度,并且如果谱相似度高于门限水平THd,则确定在麦克风信号中不存在双端发声。否则,确定在麦克风信号中存在双端发声。
使用谱相似度的双端发声检测是基于以下观察。如果在回声参考信号的频谱与输入的麦克风信号的频谱之间存在一定水平的共同特征,则理应假定在信号中也存在一定量的共同性,因此,回声很可能出现在麦克风信号中,并且回声超过了本地声音或干扰噪声的能量。设计谱相似度以测量这种共同性。如果谱相似度高至一定程度,则确定在麦克风信号中没有双端发声存在。
麦克风信号与扬声器信号的频谱可以是能够通过频率分析得出的振幅谱、相位谱、功率谱或其它频谱,只要频谱能够反映不同信号之间的差异。一般地,频谱可以包括多个频带上或频率区间上的信号大小,并且可以表示为数据序列。用于测量数据序列之间的相似度的任何测量方法可以用于测量麦克风信号频谱与扬声器信号频谱之间的谱相似度。
门限水平THd可以基于对敏感性的要求与对双端发声检测的鲁棒性的要求之间的权衡而预先确定,或可以针对具体应用进行调整。
控制器103被配置成:如果第一双端发声检测器101确定在麦克风信号中不存在双端发声,或第二双端发声检测器102确定在麦克风信号中不存在双端发声,则使能自适应滤波器的自适应。如果第一双端发声检测器101和第二双端发声检测器102都确定在麦克风信号中存在双端发声,则禁用自适应滤波器的自适应。
在由第一双端发声检测器101进行的双端发声检测中,如果当前回声路径估计是不正确的,由于自适应滤波器的对于当前回声路径的缓慢收敛,则可能检测到虚假的双端发声。特别地,如果回声路径经历振幅突然增加并且当前回声路径估计未能跟踪此增加,麦克风信号中的回声能量的重要部分不被识别为回声能量,而因此被解释为干扰信号或本地信号的活动。例如,如果回声路径的振幅突然增加,则产生远大于C乘以估计残余回声功率Re(n)的实际残差功率Ra(n),即,Ra(n)/Re(n)>C。根据式(1),宣称虚假的双端发声存在。如果根据此虚假的双端发声而禁用自适应滤波器的自适应,则非期望地减慢自适应或中止自适应,并且AEC或AES系统可能保留回声路径的不正确估计,导致系统性能下降和/或出现高水平的非期望残余回声。
在上述回声路径的振幅突然增加的情况下,如果没有本地讲话,麦克风信号和扬声器信号可以具有相似的频谱,因为麦克风信号主要地包含扬声器信号的回声。因此,通过进行基于谱相似度的经由第二双端发声检测器的另一双端发声检测,并且仅在第一双端发声检测器101和第二双端发声检测器102都检测到双端发声时,才决定有双端发声存在,从而可以避免这样的虚假双端发声或显著地减少这样的虚假双端发声。由此,可以减小收敛时间或从回声路径的突然变化中恢复,或减小在初始化时或重启时的回声估计的误收敛。例如,本发明的实施方式可以用于减少对分离的初始化阶段的需要,或可以用于减少对在回声信号的开始或发声起始控制自适应滤波器的不同方法的需要。使用谱相似度的另一个优点在于以下事实:谱相似度不依赖于两个信号的能量的比率,因此避免了门限如表达式(1)中的常量C的确定。替代地,两个频谱之间的相似程度被用作宣称双端发声存在的参考。这使得其对于如陡峭的回声路径的振幅跳变的情况有用,在该情况下,基于回声能量的DTD无能为力。因此,将这两种方法结合的总体思想源于以下事实:基于回声能量的DTD在大多数情况下(对于非陡峭回声路径变化)是有效的,而基于谱相似度的DTD对于陡峭的回声路径变化是有效的。通过将两种策略结合而获得的最终结果因此是更加鲁棒的DTD检测器。
图2是示出了根据本发明实施方式进行声学回声控制的示例性方法200的流程图。
如图2所示,方法200从步骤201开始。在步骤203处,进行基于回声能量的双端发声检测以参考扬声器信号确定在麦克风信号中是否存在双端发声。
在步骤205处,计算麦克风信号的频谱与扬声器信号的频谱之间的谱相似度。在步骤207处,如果谱相似度高于门限水平THd,则确定在麦克风信号中不存在双端发声。否则,确定在麦克风信号中存在双端发声。
在步骤209处,确定在步骤203和207处是否检测到双端发声。如果在步骤203处确定在麦克风信号中不存在双端发声,或在步骤207处确定在麦克风信号中不存在双端发声,则在步骤211处使能自适应滤波器的自适应,自适应滤波器用于对麦克风信号应用声学回声消除或声学回声抑制。如果在步骤203和207处都检测到双端发声,则在步骤213处禁用自适应滤波器的自适应。方法200在步骤215处终止。
图3是示出了根据本发明实施方式的进行声学回声控制的示例性装置300的框图。
如图3所示,装置300包括第一双端发声检测器301、第二双端发声检测器302、控制器303以及回声处理单元304。
第一双端发声检测器301、控制器303以及回声处理单元304分别具有与第一双端发声检测器101、控制器103以及回声处理单元104的功能相同的功能,并且在下文中将不对其进行详描述。
第二双端发声检测器302被配置成:如果第一双端发声检测器301检测到双端发声,则计算麦克风信号的频谱与扬声器信号的频谱之间的谱相似度。在这种情况下,并且相应地,第二双端发声检测器302被配置成:如果谱相似度高于门限水平THd,则确定在麦克风信号中不存在双端发声。否则,确定在麦克风信号中存在双端发声。
图4是示出了根据本发明实施方式的进行声学回声控制的示例性方法400的流程图。
如图4所示,方法400从步骤401开始。在步骤403处,进行基于回声能量的双端发声检测以参考扬声器信号确定在麦克风信号中是否存在双端发声。
在步骤404处,确定在麦克风信号中是否检测到双端发声,如果是,则方法400进行至步骤405。如果否,则方法400进行至步骤411。
步骤405和407具有与步骤205和207的功能相同的功能,并且在下文中将不对其进行详描述。
在步骤409处,确定在步骤407处是否检测到双端发声。如果是,则方法400进行至步骤413,如果否,则方法400进行至步骤411。
步骤413和411具有与步骤213和211的功能相同的功能,并且在下文中将不对其进行详细的描述。方法400在步骤415处终止。
在装置100和300以及方法200和400的进一步实施方式中,可以平滑麦克风信号的频谱和扬声器信号的频谱来抑制随机扰动,以提高谱相似度的准确度。在一个示例中,设对于帧n的X(n)和D(n)分别为包含有扬声器信号的频谱和包含有麦克风信号的频谱的数据序列。频谱的平滑形式Xs(n)和Ds(n)可以通过以下公式计算:
Xs(n)=Xs(n-1)+α(X(n)-Xs(n-1)),Ds(n)=Ds(n-1)+α(D(n)-Ds(n-1)) (5)
其中,α表示在[0,1]的范围内的平滑因子。应当理解,也可以采用其它去除随机扰动的平滑算法。
可以看出,对于给出的两个不相关的话音如远端话音(参考话音)和近端话音(本地讲话人),可以假定在其各自频谱上的峰值位置通常展示出一定的非相似性。此假设是合理的,因为话音在频域通常是稀疏的。从而,可能使用峰值位置或分类区间的大小来反映频谱特征,并且使用该特征用于比较。
在装置100和300以及方法200和400的进一步实施方式中,将麦克风信号的频谱和扬声器信号的频谱计算为频谱向量,频谱向量包含表示相应信号在一组感知分离的频带上或一组频率区间上信号大小的元素。相应地,将谱相似度计算为频谱向量之间的相似度。以这种方式,峰值的大小和位置可以表征在向量中。因此,可以采用用于测量向量之间的相似度的各种方法来计算谱相似度。
在装置100和300以及方法200和400的进一步实施方式中,在将频谱表示成频谱向量的情况下,计算频谱时可以将频谱向量二值化。具体地,对于频谱向量中的每一个元素,如果由元素表示的信号大小在对应频谱中相对地高,则把第一值(如1)赋予元素,如果由元素表示的信号大小在对应频谱中相对地低,则把第二值(如0)赋予元素。
可以采用各种标准用于确定信号大小是相对地低或相对地高。在一个示例性方法中,可以设置门限。如果信号大小大于门限,则确定信号大小是相对地高,否则确定信号大小是相对地低。在另一示例性方法中,可以在频谱中找到信号大小的局部极值,然后确定所找到的信号大小为相对地高,而频谱中的其它信号大小为相对地低。在另一示例性方法中,可以在频谱中找到预定数量PeakNum的最大的信号大小,然后确定所找到的信号大小为相对地高,而频谱中的其他信号为相对地低。例如,假定PeakNum=3,频带数量(或频率区间)BandNum=6,Xs(n)=[20 10 5 1768 30]T以及Ds(n)=[10 0 30 86 51 64]T,对应的二值化向量IX和ID导出如下:
IX=[100011]T以及ID=[000111]T
在一个示例中,二值化向量IX和ID的谱相似度SIM可以计算为具有向量长度(BandNum)的归一化的点乘积,即,
图5是示出了通过以传统的方式使用传统的DTD经AES后的输出的示意图。从图5中可以看出,通过将经AES后的实际输出与理想输出相比较,可以看出自适应滤波器未能收敛。实际输出信号包含大量的回声话音。
图6是示出了根据公式(6)定义的相似度在BandNum=48、PeakNum=10以及α=0.5时在双端发声期间的相似度测量的示意图。从图6中可以看出,值SIM大部分时间低于50%。
图7是示出了根据公式(6)定义的相似度在BandNum=48、PeakNum=10以及α=0.5时在回声路径变化期间的相似度测量的示意图。从图7中可以看出,值SIM远高于图6中情况下的值SIM,并且大部分时间高于50%。
在装置100和300以及方法200和400的进一步的实施方式中,在频谱被表示为频谱向量X(n)和D(n)的情况下,谱相似度可以计算如下。对于频谱之一中的在该频谱如X(n)上的每一个相对地高的信号大小xi,计算索引i与频谱的另一个中的在该频谱如D(n)上的所有相对地高的信号大小的索引之间的最小差值min_diffi。计算所有所计算的最小索引差值的和以表示频谱向量X(n)与D(n)之间的距离。进一步的方法是在每个频谱中获取一组峰值或极值的索引,并且在每一组中找到恰当的索引配对以使得所有组中最接近的索引相互配对。这样的算法对于本领域的普通技术人员已知为“匹配算法”,并且使用更加连续的匹配函数来计算谱相似度的测量值,如此可以导致更加鲁棒的计算相似度。
举例说明,再次考虑以上示例,选择三个峰值,两组三个索引分别是[156]以及[456],恰当地匹配的索引之间的距离是3+0+0=3。在这种情况下,较低的数字表明较高的谱相似度。随着频带或频率区间的数量的增加,相比累积两组中出现的索引数字的首先建议的实施方式,此匹配高频谱值或极值的方法提供了更加连续的谱相似度估计。
在装置100和300以及方法200和400的进一步的实施方式中,谱相似度可以计算如下。计算麦克风信号和扬声器信号的频谱。然后,从频谱中分别提取出线性预测编码(linear predictive coding,LPC)系数的两个系数向量。将系数向量中的系数转换为线谱频率。从而,基于系数向量之间的距离计算谱相似度。以这种方式,能够通过比较信号的频谱包络来测量相似度。
在装置100和300的进一步的实施方式中,麦克风信号和扬声器信号可以使用基于线性预测编码(LPC)的方法如码激励线性预测编码(codeexcited linear prediction,CELP)来编码。在这种情况下,谱相似度可以计算如下。搜索码书以找到与扬声器信号的LPC系数对应的LPC条目、以及与麦克风信号的LPC系数对应的LPC条目。从码书中取得LPC条目之间的预计算的距离。基于所取得的距离计算谱相似度。
在有不止一个讲话人讲话的场景下,在麦克风信号中可以出现多种讲话人组合。例如,一个组合包含一个男性讲话人和一个女性讲话人,另一个组合包含两个男性讲话人或两个女性讲话人。不同的组合可以表现出不同的频谱特征,例如,不同频率区域中的不同大小。可以采取适合于不同组合的计算谱相似度的相应算法。
在装置100和300的进一步的实施方式中,可以包含识别单元。识别单元可以被配置成:识别扬声器信号和麦克风信号之一中的讲话人组合的类型。第二双端发声检测器被进一步配置成:选择为该类型配置的算法,以计算谱相似度。方法200和400的进一步的实施方式,可以包含识别扬声器信号和麦克风信号之一中的讲话人组合的类型的步骤。谱相似度的计算包含选择为该类型配置的算法以计算谱相似度。
在图8中,中央处理单元(CPU)801根据只读存储器(ROM)802中存储的程序或从存储部分808加载到随机访问存储器(RAM)803的程序执行各种处理。在RAM 803中,也根据需要存储当CPU 801执行各种处理等等时所需的数据。
CPU 801、ROM 802和RAM 803经由总线804彼此连接。输入/输出接口805也连接到总线804。
下列部件连接到输入/输出接口805:包括键盘、鼠标等等的输入部分806;包括例如阴极射线管(CRT)、液晶显示器(LCD)等等的显示器和扬声器等等的输出部分807;包括硬盘等等的存储部分808;和包括例如LAN卡、调制解调器等等的网络接口卡的通信部分809。通信部分809经由例如因特网的网络执行通信处理。
根据需要,驱动器810也连接到输入/输出接口805。例如磁盘、光盘、磁光盘、半导体存储器等等的可移除介质811根据需要被安装在驱动器810上,使得从中读出的计算机程序根据需要被安装到存储部分808。
在通过软件实现上述步骤和处理的情况下,从例如因特网的网络或例如可移除介质811的存储介质安装构成软件的程序。
本文中所用的术语仅仅是为了描述特定实施方式的目的,而非意图限定本发明。本文中所用的单数形式的“一”和“该”旨在也包括复数形式,除非上下文中明确地另行指出。还应理解,“包括”一词当在本说明书中使用时,说明存在所指出的特征、整体、步骤、操作、单元和/或组件,但是并不排除存在或增加一个或多个其它特征、整体、步骤、操作、单元和/或组件,以及/或者它们的组合。
以下权利要求中的对应结构、材料、操作以及所有功能性限定的装置或步骤的等同替换,旨在包括任何用于与在权利要求中具体指出的其它单元相组合地执行该功能的结构、材料或操作。对本发明进行的描述只是出于图解和描述的目的,而非用来对具有公开形式的本发明进行详细定义和限制。对于所属技术领域的普通技术人员而言,在不偏离本发明范围和精神的情况下,显然可以作出许多修改和变型。对实施方式的选择和说明,是为了最好地解释本发明的原理和实际应用,使所属技术领域的普通技术人员能够明了,本发明可以有适合所要的特定用途的具有各种改变的各种实施方式。
这里描述了下面的示例性实施方式(均用″EE″表示)。
EE 1.一种进行声学回声控制的方法,包括:
进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声;
计算所述麦克风信号的频谱与所述扬声器信号的频谱之间的谱相似度;
如果所述谱相似度高于门限水平,则确定在所述麦克风信号中不存在双端发声;以及
如果通过所述基于回声能量的双端发声检测或通过所述基于谱相似度的双端发声检测确定在所述麦克风信号中不存在双端发声,则使能自适应滤波器的自适应,所述自适应滤波器用于对所述麦克风信号应用声学回声消除或声学回声抑制。
EE 2.根据EE 1所述的方法,其中,所述频谱是功率谱。
EE 3.根据EE 1或2所述的方法,其中,所述频谱的所述计算包含平滑所述频谱以抑制随机扰动。
EE 4.根据EE 1或2所述的方法,其中,所述谱相似度的所述计算包括:
将每一个所述频谱计算为频谱向量,所述频谱向量包含表示相应信号在一组感知分离的频带上或一组频率区间上信号大小的元素;以及
将所述谱相似度计算为所述频谱向量之间的相似度。
EE 5.根据EE 4所述的方法,其中,所述频谱向量的所述计算包括:
对于所述频谱向量的每一个元素,如果由所述元素表示的所述信号大小在对应频谱中相对地高,则把第一值赋予所述元素,如果由所述元素表示的所述信号大小在对应频谱中相对地低,则把第二值赋予所述元素。
EE 6.根据EE 5所述的方法,其中,所述频谱向量的所述计算包括:
在所述频谱中找到预定数量的最大信号大小或信号大小的局部极值;以及
把所找到的信号大小确定为相对地高,而把所述频谱中的其它信号确定为相对地低。
EE 7.根据EE 4所述的方法,其中,所述元素是对应的所述信号大小,并且所述谱相似度的所述计算包括:
对于所述频谱之一中的在所述频谱中相对地大的每一个信号大小,计算所述信号大小与在所述频谱的另一个中相对地大的所有信号大小之间的最小差值;以及
基于所有所计算出的最小差值的和来计算所述谱相似度。
EE 8.根据EE 1或2所述的方法,其中,所述谱相似度的所述计算包括:
计算所述麦克风信号和所述扬声器信号的所述频谱;
从所述频谱中分别提取出线性预测编码系数的两个系数向量;
将所述系数向量中的所述线性预测编码系数转换为线谱频率;以及
基于所述系数向量之间的距离计算所述谱相似度。
EE 9.根据EE 1或2所述的方法,其中,使用基于线性预测编码的方法来编码所述麦克风信号与所述扬声器信号,并且所述谱相似度的所述计算包括:
搜索码书以找到与所述扬声器信号的所述线性预测编码系数对应的线性预测编码条目、以及与所述麦克风信号的线性预测编码系数对应的线性预测编码条目;
从所述码书中取得所述线性预测编码条目之间的预计算距离;以及
基于所述取得的距离计算所述谱相似度。
EE 10.根据EE 1或2所述的方法,还包括:
识别所述扬声器信号和所述麦克风信号之一中的讲话人组合的类型;以及
选择为所述类型配置的算法来计算所述谱相似度。
EE 11.根据EE 1或2所述的方法,其中,所述计算步骤和所述确定步骤仅在通过基于所述回声能量的双端发声检测确定存在双端发声的情况下进行。
EE 12.一种进行声学回声控制的装置,包括:
第一双端发声检测器,所述第一双端发声检测器被配置成:进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声;
第二双端发声检测器,所述第二双端发声检测器被配置成:计算所述麦克风信号的频谱与所述扬声器信号的频谱之间的谱相似度,并且如果所述谱相似度高于门限水平,则确定在所述麦克风信号中不存在双端发声;
回声处理单元,所述回声处理单元被配置成:进行自适应滤波器的自适应,所述自适应滤波器用于对所述麦克风信号应用声学回声消除或声学回声抑制;以及
控制器,所述控制器被配置成:如果通过所述基于回声能量的双端发声检测,或通过所述基于谱相似度的双端发声检测确定在所述麦克风信号中不存在双端发声,则使能所述自适应滤波器的所述自适应。
EE 13.根据EE 12所述的装置,其中,所述频谱是功率谱。
EE 14.根据EE 12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:平滑所述频谱以抑制随机扰动。
EE 15.根据EE 12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:
将每一个所述频谱计算为频谱向量,所述频谱向量包含表示相应信号在一组感知分离的频带上或一组频率区间上信号大小的元素;以及
将所述谱相似度计算为所述频谱向量之间的相似度。
EE 16.根据EE 15所述的装置,其中,所述第二双端发声检测器被进一步配置成:
对于所述频谱向量的每一个元素,如果由所述元素表示的所述信号大小在对应频谱中相对地高,则把第一值赋予所述元素,如果由所述元素表示的所述信号大小在对应频谱中相对地低,则把第二值赋予所述元素。
EE 17.根据EE 16所述的装置,其中,所述第二双端发声检测器被进一步配置成:
在所述频谱中找到预定数量的最大信号大小或信号大小的局部极值;以及
把所找到的信号大小确定相对地高,而把所述频谱中的其它信号确定为相对地低。
EE 18.根据EE 15所述的装置,其中,所述元素是对应的所述信号大小,并且所述第二双端发声检测器被进一步配置成:
对于所述频谱之一中的在所述频谱中相对地大的每一个信号大小,计算所述信号大小与在所述频谱的另一个中相对地大的所有信号大小之间的最小差值;以及
基于所有所计算出的最小差值的和来计算所述谱相似度。
EE 19.根据EE 12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:
计算所述麦克风信号和所述扬声器信号的所述频谱;
从所述频谱中分别提取出线性预测编码系数的两个系数向量;
将所述系数向量中的所述线性预测编码系数转换为线谱频率;以及
基于所述系数向量之间的距离计算所述谱相似度。
EE 20.根据EE 12或13所述的装置,其中,所述麦克风信号和所述扬声器信号使用基于线性预测编码的方法来编码,并且所述第二双端发声检测器被进一步配置成:
搜索码书以找到与所述扬声器信号的所述线性预测编码系数对应的线性预测编码条目、以及与所述麦克风信号的线性预测编码系数对应的线性预测编码条目;
从所述码书中取得所述线性预测编码条目之间的预计算距离;以及
基于所述取得的距离计算所述谱相似度。
EE 21.根据EE 12或13所述的装置,还包括:
识别单元,所述识别单元被配置成:识别所述扬声器信号和所述麦克风信号之一中的讲话人组合的类型;以及
所述第二双端发声检测器被进一步配置成:选择为所述类型配置的算法来计算所述谱相似度。
EE 22.根据EE 12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:仅在所述第一双端发声检测器确定存在有双端发声时才进行所述计算和所述确定。
EE 23.一种在其上记录有计算机程序指令的计算机可读介质,当由处理器执行所述计算机程序指令时,所述指令使处理器执行一种进行声学回声控制的方法,所述方法包括:
进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声;
计算所述麦克风信号的频谱与所述扬声器信号的频谱之间的谱相似度;
如果所述谱相似度高于门限水平,则确定在所述麦克风信号中不存在双端发声;以及
如果通过所述基于回声能量的双端发声检测或通过所述基于谱相似度的双端发声检测确定在所述麦克风信号中不存在双端发声,则使能自适应滤波器的自适应,所述自适应滤波器用于对所述麦克风信号应用声学回声消除或声学回声抑制。
Claims (22)
1.一种进行声学回声控制的方法,包括:
进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声;
计算所述麦克风信号的频谱与所述扬声器信号的频谱之间的谱相似度;
如果所述谱相似度高于门限水平,则确定在所述麦克风信号中不存在双端发声;以及
如果通过所述基于回声能量的双端发声检测或通过所述基于谱相似度的双端发声检测确定在所述麦克风信号中不存在双端发声,则使能自适应滤波器的自适应,所述自适应滤波器用于对所述麦克风信号应用声学回声消除或声学回声抑制。
2.根据权利要求1所述的方法,其中,所述频谱是功率谱。
3.根据权利要求1或2所述的方法,其中,所述频谱的所述计算包括:平滑所述频谱以抑制随机扰动。
4.根据权利要求1或2所述的方法,其中,所述谱相似度的所述计算包括:
将每一个所述频谱计算为频谱向量,所述频谱向量包含表示相应信号在一组感知分离的频带上或一组频率区间上信号大小的元素;以及
将所述谱相似度计算为所述频谱向量之间的相似度。
5.根据权利要求4所述的方法,其中,所述频谱向量的所述计算包括:
对于所述频谱向量的每一个元素,如果由所述元素表示的所述信号大小在对应频谱中相对地高,则把第一值赋予所述元素,如果由所述元素表示的所述信号大小在对应频谱中相对地低,则把第二值赋予所述元素。
6.根据权利要求5所述的方法,其中,所述频谱向量的所述计算包括:
在所述频谱中找到预定数量的最大信号大小或信号大小的局部极值;以及
把所找到的信号大小确定为相对地高,而把所述频谱中的其它信号确定为相对地低。
7.根据权利要求4所述的方法,其中,所述元素是对应的所述信号大小,并且所述谱相似度的所述计算包括:
对于所述频谱之一中的在所述频谱中相对地大的每一个信号大小,计算所述信号大小与在所述频谱的另一个中相对地大的所有信号大小之间的最小差值;以及
基于所有所计算出的最小差值的和来计算所述谱相似度。
8.根据权利要求1或2所述的方法,其中,所述谱相似度的所述计算包括:
计算所述麦克风信号和所述扬声器信号的所述频谱;
从所述频谱中分别提取出线性预测编码系数的两个系数向量;
将所述系数向量中的所述线性预测编码系数转换为线谱频率;以及
基于所述系数向量之间的距离计算所述谱相似度。
9.根据权利要求1或2所述的方法,其中,使用基于线性预测编码的方法来编码所述麦克风信号与所述扬声器信号,并且所述谱相似度的所述计算包括:
搜索码书以找到与所述扬声器信号的所述线性预测编码系数对应的线性预测编码条目、以及与所述麦克风信号的线性预测编码系数对应的线性预测编码条目;
从所述码书中取得所述线性预测编码条目之间的预计算距离;以及
基于所述取得的距离计算所述谱相似度。
10.根据权利要求1或2所述的方法,还包括:
识别所述扬声器信号和所述麦克风信号之一中的讲话人组合的类型;以及
选择为所述类型配置的算法来计算所述谱相似度。
11.根据权利要求1或2所述的方法,其中,所述计算步骤和所述确定步骤仅在通过基于所述回声能量的双端发声检测确定存在双端发声的情况下进行。
12.一种进行声学回声控制的装置,包括:
第一双端发声检测器,所述第一双端发声检测器被配置成:进行基于回声能量的双端发声检测,以参考扬声器信号来确定在麦克风信号中是否存在双端发声;
第二双端发声检测器,所述第二双端发声检测器被配置成:计算所述麦克风信号的频谱与所述扬声器信号的频谱之间的谱相似度,并且如果所述谱相似度高于门限水平,则确定在所述麦克风信号中不存在双端发声;
回声处理单元,所述回声处理单元被配置成:进行自适应滤波器的自适应,所述自适应滤波器用于对所述麦克风信号应用声学回声消除或声学回声抑制;以及
控制器,所述控制器被配置成:如果通过所述基于回声能量的双端发声检测或通过所述基于谱相似度的双端发声检测确定在所述麦克风信号中不存在双端发声,则使能所述自适应滤波器的所述自适应。
13.根据权利要求12所述的装置,其中,所述频谱是功率谱。
14.根据权利要求12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:平滑所述频谱以抑制随机扰动。
15.根据权利要求12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:
将每一个所述频谱计算为频谱向量,所述频谱向量包含表示相应信号在一组感知分离的频带上或一组频率区间上信号大小的元素;以及
将所述谱相似度计算为所述频谱向量之间的相似度。
16.根据权利要求15所述的装置,其中,所述第二双端发声检测器被进一步配置成:
对于所述频谱向量的每一个元素,如果由所述元素表示的所述信号大小在对应频谱中相对地高,则把第一值赋予所述元素,如果由所述元素表示的所述信号大小在对应频谱中相对地低,则把第二值赋予所述元素。
17.根据权利要求16所述的装置,其中,所述第二双端发声检测器被进一步配置成:
在所述频谱中找到预定数量的最大信号大小或信号大小的局部极值;以及
把所找到的信号大小确定为相对地高,而把所述频谱中的其它信号确定为相对地低。
18.根据权利要求15所述的装置,其中,所述元素是对应的所述信号大小,并且所述第二双端发声检测器被进一步配置成:
对于所述频谱之一中的在所述频谱中相对地大的每一个信号大小,计算所述信号大小与在所述频谱的另一个中相对地大的所有信号大小之间的最小差值;以及
基于所有所计算出的最小差值的和来计算所述谱相似度。
19.根据权利要求12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:
计算所述麦克风信号和所述扬声器信号的所述频谱;
从所述频谱中分别提取出线性预测编码系数的两个系数向量;
将所述系数向量中的所述线性预测编码系数转换为线谱频率;以及
基于所述系数向量之间的距离计算所述谱相似度。
20.根据权利要求12或13所述的装置,其中,所述麦克风信号和所述扬声器信号使用基于线性预测编码的方法来编码,并且所述第二双端发声检测器被进一步配置成:
搜索码书以找到与所述扬声器信号的所述线性预测编码系数对应的线性预测编码条目、以及与所述麦克风信号的线性预测编码系数对应的线性预测编码条目;
从所述码书中取得所述线性预测编码条目之间的预计算距离;以及
基于所述取得的距离计算所述谱相似度。
21.根据权利要求12或13的所述装置,还包括:
识别单元,所述识别单元被配置成:识别所述扬声器信号和所述麦克风信号之一中的讲话人组合的类型;以及
所述第二双端发声检测器被进一步配置成:选择为所述类型配置的算法来计算所述谱相似度。
22.根据权利要求12或13所述的装置,其中,所述第二双端发声检测器被进一步配置成:仅在所述第一双端发声检测器确定存在有双端发声时才进行所述计算和所述确定。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100808103A CN103325379A (zh) | 2012-03-23 | 2012-03-23 | 用于声学回声控制的方法与装置 |
PCT/US2013/033225 WO2013142647A1 (en) | 2012-03-23 | 2013-03-21 | Method and apparatus for acoustic echo control |
EP13714808.6A EP2828851B1 (en) | 2012-03-23 | 2013-03-21 | Method and apparatus for acoustic echo control |
US14/382,864 US9548063B2 (en) | 2012-03-23 | 2013-03-21 | Method and apparatus for acoustic echo control |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100808103A CN103325379A (zh) | 2012-03-23 | 2012-03-23 | 用于声学回声控制的方法与装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103325379A true CN103325379A (zh) | 2013-09-25 |
Family
ID=49194075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012100808103A Pending CN103325379A (zh) | 2012-03-23 | 2012-03-23 | 用于声学回声控制的方法与装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9548063B2 (zh) |
EP (1) | EP2828851B1 (zh) |
CN (1) | CN103325379A (zh) |
WO (1) | WO2013142647A1 (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104464752A (zh) * | 2014-12-24 | 2015-03-25 | 海能达通信股份有限公司 | 一种声反馈检测方法和装置 |
CN105100018A (zh) * | 2014-05-16 | 2015-11-25 | 阿尔卡特朗讯 | 一种用于确定paec方式的方法、装置和系统 |
CN105637860A (zh) * | 2013-10-21 | 2016-06-01 | 思科技术公司 | 针对自动化的说话者追踪系统的声学回声控制 |
CN105872275A (zh) * | 2016-03-22 | 2016-08-17 | Tcl集团股份有限公司 | 一种用于回声消除的语音信号时延估计方法及系统 |
CN106716529A (zh) * | 2014-09-12 | 2017-05-24 | 奥兰治 | 对数字音频信号中的前回声进行辨别和衰减 |
CN107770683A (zh) * | 2017-10-12 | 2018-03-06 | 北京小鱼在家科技有限公司 | 一种回声场景下音频采集状态的检测方法及装置 |
CN108076239A (zh) * | 2016-11-14 | 2018-05-25 | 深圳联友科技有限公司 | 一种改善ip电话回声的方法 |
CN108831497A (zh) * | 2018-05-22 | 2018-11-16 | 出门问问信息科技有限公司 | 一种回声压缩方法及装置、存储介质、电子设备 |
CN109273019A (zh) * | 2017-04-21 | 2019-01-25 | 豪威科技股份有限公司 | 用于回声抑制的双重通话检测的方法及回声抑制 |
CN109348072A (zh) * | 2018-08-30 | 2019-02-15 | 湖北工业大学 | 一种应用于回声抵消系统的双端通话检测方法 |
CN109524018A (zh) * | 2017-09-19 | 2019-03-26 | 华为技术有限公司 | 一种回声处理方法及设备 |
WO2020024508A1 (zh) * | 2018-08-01 | 2020-02-06 | 珠海格力电器股份有限公司 | 语音信息的获取方法及装置 |
CN111246035A (zh) * | 2020-01-09 | 2020-06-05 | 深圳震有科技股份有限公司 | 一种回声非线性处理的分级调整方法、终端及存储介质 |
CN111970410A (zh) * | 2020-08-26 | 2020-11-20 | 展讯通信(上海)有限公司 | 回声消除方法及装置、存储介质、终端 |
CN112292844A (zh) * | 2019-05-22 | 2021-01-29 | 深圳市汇顶科技股份有限公司 | 双端通话检测方法、双端通话检测装置以及回声消除系统 |
CN112285690A (zh) * | 2020-12-25 | 2021-01-29 | 四川写正智能科技有限公司 | 毫米雷达波测距传感装置 |
CN113382120A (zh) * | 2014-09-30 | 2021-09-10 | 想象技术有限公司 | 确定信号间相似性的方法、比较发生器和回波消除检测器 |
CN114650238A (zh) * | 2022-03-03 | 2022-06-21 | 随锐科技集团股份有限公司 | 用于检测通话状态的方法、装置、设备及可读存储介质 |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103561185B (zh) * | 2013-11-12 | 2015-08-12 | 沈阳工业大学 | 一种稀疏路径的回声消除方法 |
CN104410761B (zh) * | 2014-09-13 | 2016-03-02 | 西南交通大学 | 一种仿射投影符号子带凸组合自适应回声消除方法 |
CN104601837B (zh) * | 2014-12-22 | 2016-03-02 | 西南交通大学 | 一种鲁棒凸组合自适应电话回声消除方法 |
CN104506746B (zh) * | 2015-01-20 | 2016-03-02 | 西南交通大学 | 一种改进的凸组合解相关成比例自适应回声消除方法 |
CN106603877A (zh) * | 2015-10-16 | 2017-04-26 | 鸿合科技有限公司 | 协同会议语音采集方法及装置 |
US20170124448A1 (en) * | 2015-10-30 | 2017-05-04 | Northrop Grumman Systems Corporation | Concurrent uncertainty management system |
KR102549689B1 (ko) | 2015-12-24 | 2023-06-30 | 삼성전자 주식회사 | 전자 장치 및 전자 장치의 동작 제어 방법 |
KR101842777B1 (ko) * | 2016-07-26 | 2018-03-27 | 라인 가부시키가이샤 | 음질 개선 방법 및 시스템 |
US10264116B2 (en) | 2016-11-02 | 2019-04-16 | Nokia Technologies Oy | Virtual duplex operation |
CN110870211B (zh) | 2017-07-14 | 2021-10-15 | 杜比实验室特许公司 | 用于检测且补偿不准确回波预测的方法和系统 |
DK3481085T3 (da) * | 2017-11-01 | 2020-11-30 | Oticon As | Tilbagekoblingsdetektor og en høreanordning, der omfatter en tilbagekoblingsdetektor |
CN111161748B (zh) * | 2020-02-20 | 2022-09-23 | 百度在线网络技术(北京)有限公司 | 一种双讲状态检测方法、装置以及电子设备 |
CN113382119B (zh) * | 2020-02-25 | 2022-12-06 | 北京字节跳动网络技术有限公司 | 消除回声的方法、装置、可读介质和电子设备 |
CN113345459B (zh) * | 2021-07-16 | 2023-02-21 | 北京融讯科创技术有限公司 | 一种双讲状态的检测方法、装置、计算机设备及存储介质 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1243416C (zh) | 2000-03-27 | 2006-02-22 | 朗迅科技公司 | 用自适应判决门限来完成通话重叠检测的方法和装置 |
US20020041678A1 (en) | 2000-08-18 | 2002-04-11 | Filiz Basburg-Ertem | Method and apparatus for integrated echo cancellation and noise reduction for fixed subscriber terminals |
US20070160154A1 (en) * | 2005-03-28 | 2007-07-12 | Sukkar Rafid A | Method and apparatus for injecting comfort noise in a communications signal |
EP1715669A1 (en) | 2005-04-19 | 2006-10-25 | Ecole Polytechnique Federale De Lausanne (Epfl) | A method for removing echo in an audio signal |
US20070263851A1 (en) | 2006-04-19 | 2007-11-15 | Tellabs Operations, Inc. | Echo detection and delay estimation using a pattern recognition approach and cepstral correlation |
US7852792B2 (en) | 2006-09-19 | 2010-12-14 | Alcatel-Lucent Usa Inc. | Packet based echo cancellation and suppression |
US8126161B2 (en) | 2006-11-02 | 2012-02-28 | Hitachi, Ltd. | Acoustic echo canceller system |
US8103011B2 (en) * | 2007-01-31 | 2012-01-24 | Microsoft Corporation | Signal detection using multiple detectors |
US8036879B2 (en) | 2007-05-07 | 2011-10-11 | Qnx Software Systems Co. | Fast acoustic cancellation |
JP4916394B2 (ja) | 2007-07-03 | 2012-04-11 | 富士通株式会社 | エコー抑圧装置、エコー抑圧方法及びコンピュータプログラム |
DE102008039329A1 (de) | 2008-01-25 | 2009-07-30 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zur Berechnung von Steuerinformationen für ein Echounterdrückungsfilter und Vorrichtung und Verfahren zur Berechnung eines Verzögerungswerts |
DE102008039330A1 (de) | 2008-01-31 | 2009-08-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum Berechnen von Filterkoeffizienten zur Echounterdrückung |
US8503669B2 (en) | 2008-04-07 | 2013-08-06 | Sony Computer Entertainment Inc. | Integrated latency detection and echo cancellation |
US8144862B2 (en) | 2008-09-04 | 2012-03-27 | Alcatel Lucent | Method and apparatus for the detection and suppression of echo in packet based communication networks using frame energy estimation |
US8041028B2 (en) | 2008-09-25 | 2011-10-18 | Magor Communications Corporation | Double-talk detection |
US8983058B2 (en) | 2010-04-22 | 2015-03-17 | Telefonaktiebolaget L M Ericsson (Publ) | Echo canceller and a method thereof |
-
2012
- 2012-03-23 CN CN2012100808103A patent/CN103325379A/zh active Pending
-
2013
- 2013-03-21 US US14/382,864 patent/US9548063B2/en active Active
- 2013-03-21 WO PCT/US2013/033225 patent/WO2013142647A1/en active Application Filing
- 2013-03-21 EP EP13714808.6A patent/EP2828851B1/en active Active
Cited By (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105637860B (zh) * | 2013-10-21 | 2019-03-22 | 思科技术公司 | 针对自动化的说话者追踪系统的声学回声控制 |
CN105637860A (zh) * | 2013-10-21 | 2016-06-01 | 思科技术公司 | 针对自动化的说话者追踪系统的声学回声控制 |
CN105100018A (zh) * | 2014-05-16 | 2015-11-25 | 阿尔卡特朗讯 | 一种用于确定paec方式的方法、装置和系统 |
CN106716529A (zh) * | 2014-09-12 | 2017-05-24 | 奥兰治 | 对数字音频信号中的前回声进行辨别和衰减 |
CN106716529B (zh) * | 2014-09-12 | 2020-09-22 | 奥兰治 | 对数字音频信号中的前回声进行辨别和衰减 |
CN113382120A (zh) * | 2014-09-30 | 2021-09-10 | 想象技术有限公司 | 确定信号间相似性的方法、比较发生器和回波消除检测器 |
CN104464752B (zh) * | 2014-12-24 | 2018-03-16 | 海能达通信股份有限公司 | 一种声反馈检测方法和装置 |
CN104464752A (zh) * | 2014-12-24 | 2015-03-25 | 海能达通信股份有限公司 | 一种声反馈检测方法和装置 |
CN105872275A (zh) * | 2016-03-22 | 2016-08-17 | Tcl集团股份有限公司 | 一种用于回声消除的语音信号时延估计方法及系统 |
CN105872275B (zh) * | 2016-03-22 | 2019-10-11 | Tcl集团股份有限公司 | 一种用于回声消除的语音信号时延估计方法及系统 |
CN108076239A (zh) * | 2016-11-14 | 2018-05-25 | 深圳联友科技有限公司 | 一种改善ip电话回声的方法 |
CN109273019A (zh) * | 2017-04-21 | 2019-01-25 | 豪威科技股份有限公司 | 用于回声抑制的双重通话检测的方法及回声抑制 |
CN109524018A (zh) * | 2017-09-19 | 2019-03-26 | 华为技术有限公司 | 一种回声处理方法及设备 |
CN109524018B (zh) * | 2017-09-19 | 2022-06-10 | 华为技术有限公司 | 一种回声处理方法及设备 |
CN107770683B (zh) * | 2017-10-12 | 2019-10-11 | 北京小鱼在家科技有限公司 | 一种回声场景下音频采集状态的检测方法及装置 |
CN107770683A (zh) * | 2017-10-12 | 2018-03-06 | 北京小鱼在家科技有限公司 | 一种回声场景下音频采集状态的检测方法及装置 |
CN108831497A (zh) * | 2018-05-22 | 2018-11-16 | 出门问问信息科技有限公司 | 一种回声压缩方法及装置、存储介质、电子设备 |
CN108831497B (zh) * | 2018-05-22 | 2020-06-09 | 出门问问信息科技有限公司 | 一种回声压缩方法及装置、存储介质、电子设备 |
WO2020024508A1 (zh) * | 2018-08-01 | 2020-02-06 | 珠海格力电器股份有限公司 | 语音信息的获取方法及装置 |
CN109348072B (zh) * | 2018-08-30 | 2021-03-02 | 湖北工业大学 | 一种应用于回声抵消系统的双端通话检测方法 |
CN109348072A (zh) * | 2018-08-30 | 2019-02-15 | 湖北工业大学 | 一种应用于回声抵消系统的双端通话检测方法 |
CN112292844A (zh) * | 2019-05-22 | 2021-01-29 | 深圳市汇顶科技股份有限公司 | 双端通话检测方法、双端通话检测装置以及回声消除系统 |
CN112292844B (zh) * | 2019-05-22 | 2022-04-15 | 深圳市汇顶科技股份有限公司 | 双端通话检测方法、双端通话检测装置以及回声消除系统 |
US11349525B2 (en) | 2019-05-22 | 2022-05-31 | Shenzhen GOODIX Technology Co., Ltd. | Double talk detection method, double talk detection apparatus and echo cancellation system |
CN111246035A (zh) * | 2020-01-09 | 2020-06-05 | 深圳震有科技股份有限公司 | 一种回声非线性处理的分级调整方法、终端及存储介质 |
CN111970410A (zh) * | 2020-08-26 | 2020-11-20 | 展讯通信(上海)有限公司 | 回声消除方法及装置、存储介质、终端 |
CN112285690A (zh) * | 2020-12-25 | 2021-01-29 | 四川写正智能科技有限公司 | 毫米雷达波测距传感装置 |
CN114650238A (zh) * | 2022-03-03 | 2022-06-21 | 随锐科技集团股份有限公司 | 用于检测通话状态的方法、装置、设备及可读存储介质 |
CN114650238B (zh) * | 2022-03-03 | 2024-09-20 | 随锐科技集团股份有限公司 | 用于检测通话状态的方法、装置、设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP2828851B1 (en) | 2016-04-27 |
US9548063B2 (en) | 2017-01-17 |
US20150023514A1 (en) | 2015-01-22 |
WO2013142647A1 (en) | 2013-09-26 |
EP2828851A1 (en) | 2015-01-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103325379A (zh) | 用于声学回声控制的方法与装置 | |
US10154342B2 (en) | Spatial adaptation in multi-microphone sound capture | |
US10504539B2 (en) | Voice activity detection systems and methods | |
US11056130B2 (en) | Speech enhancement method and apparatus, device and storage medium | |
US11475907B2 (en) | Method and device of denoising voice signal | |
US11069366B2 (en) | Method and device for evaluating performance of speech enhancement algorithm, and computer-readable storage medium | |
US8898058B2 (en) | Systems, methods, and apparatus for voice activity detection | |
US9253568B2 (en) | Single-microphone wind noise suppression | |
CN103325386A (zh) | 用于信号传输控制的方法和系统 | |
CN104050971A (zh) | 声学回声减轻装置和方法、音频处理装置和语音通信终端 | |
US10755728B1 (en) | Multichannel noise cancellation using frequency domain spectrum masking | |
Borowicz et al. | Signal subspace approach for psychoacoustically motivated speech enhancement | |
JP6374120B2 (ja) | 発話の復元のためのシステムおよび方法 | |
CN111435462A (zh) | 训练神经网络的方法及系统 | |
CN110349598A (zh) | 一种低信噪比环境下的端点检测方法 | |
EP3574499B1 (en) | Methods and apparatus for asr with embedded noise reduction | |
Martín-Doñas et al. | Dual-channel DNN-based speech enhancement for smartphones | |
CN114302286A (zh) | 一种通话语音降噪方法、装置、设备及存储介质 | |
CN108053834B (zh) | 音频数据处理方法、装置、终端及系统 | |
WO2015084658A1 (en) | Systems and methods for enhancing an audio signal | |
CN103337245B (zh) | 基于子带信号的信噪比曲线的噪声抑制方法及装置 | |
CN112133324A (zh) | 通话状态检测方法、装置、计算机系统和介质 | |
WO2022068440A1 (zh) | 啸叫抑制方法、装置、计算机设备和存储介质 | |
US11270721B2 (en) | Systems and methods of pre-processing of speech signals for improved speech recognition | |
WO2021217750A1 (zh) | 消除语音交互中信道差异的方法及系统、电子设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130925 |