CN105027540A - 回波抑制 - Google Patents
回波抑制 Download PDFInfo
- Publication number
- CN105027540A CN105027540A CN201380066893.3A CN201380066893A CN105027540A CN 105027540 A CN105027540 A CN 105027540A CN 201380066893 A CN201380066893 A CN 201380066893A CN 105027540 A CN105027540 A CN 105027540A
- Authority
- CN
- China
- Prior art keywords
- echo
- audio signal
- power
- received audio
- received
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/002—Damping circuit arrangements for transducers, e.g. motional feedback circuits
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03H—IMPEDANCE NETWORKS, e.g. RESONANT CIRCUITS; RESONATORS
- H03H17/00—Networks using digital techniques
- H03H17/02—Frequency selective networks
- H03H17/0211—Frequency selective networks using specific transformation algorithms, e.g. WALSH functions, Fermat transforms, Mersenne transforms, polynomial transforms, Hilbert transforms
- H03H17/0213—Frequency domain filters using Fourier transforms
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03H—IMPEDANCE NETWORKS, e.g. RESONANT CIRCUITS; RESONATORS
- H03H17/00—Networks using digital techniques
- H03H17/02—Frequency selective networks
- H03H17/04—Recursive filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W52/00—Power management, e.g. TPC [Transmission Power Control], power saving or power classes
- H04W52/02—Power saving arrangements
- H04W52/0209—Power saving arrangements in terminal devices
- H04W52/0225—Power saving arrangements in terminal devices using monitoring of external events, e.g. the presence of a signal
- H04W52/0245—Power saving arrangements in terminal devices using monitoring of external events, e.g. the presence of a signal according to signal strength
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Abstract
提供了用于抑制回波的方法、用户设备和计算机程序产品。从扬声器输出音频信号。麦克风接收音频信号,其中所接收的音频信号包括从所述输出的音频信号导致的回波。基于所输出的音频信号和所接收的音频信号在时域中动态地调整有限脉冲响应滤波器估计,以模拟在所接收的音频信号中的回波的回波路径。至少一个功率响应从滤波器估计被确定并用于估计在所接收的音频信号中的回波的回波功率。所估计的回波功率用于将回波抑制应用于所接收的音频信号,由此抑制在所接收的音频信号中的回波。
Description
背景技术
设备可具有可用于从周围环境接收音频信号的音频输入装置。设备也可具有可用于将音频信号输出到周围环境的音频输出装置。例如,设备可具有用于输出音频信号的一个或多个扬声器和用于接收音频信号的一个或多个麦克风。从设备的(多个)扬声器输出的音频信号可能被接收为在由(多个)麦克风接收的音频信号中的“回波”。可以是这种情况:这个回波在所接收的音频信号中不是期望的。例如,设备可以是在通过网络与另一用户设备的通信事件(例如音频或视频呼叫)中使用的用户设备(例如移动电话、平板计算机、膝上型计算机、PC等)。呼叫的远端信号可从在用户设备处的扬声器输出,并可被接收为在由设备处的麦克风接收的音频信号中的回波。这样的回波可能干扰呼叫的用户,且呼叫的所感知的质量可能由于回波而减小。特别是,回波可引起对被预期由麦克风接收并传输到呼叫中的远端的近端音频信号的干扰。因此,可应用回波抵消和/或回波抑制到所接收的音频信号以由此抑制在所接收的音频信号中的回波。在所接收的音频信号中的回波的功率可根据用户设备的布置而改变。例如,用户设备可以是移动电话,且在那种情况下,与当移动电话不在“免提”模式中操作时比较,当移动电话在“免提”模式中操作时所接收的音频信号中的回波的功率通常将更高。
回波抵消(或“回波减去”)技术目的在于基于从扬声器输出的音频信号的认知来估计在麦克风处接收的音频信号中包括的回波信号。可接着从所接收的音频信号减去回波信号的估计,从而从所接收的音频信号移除回波中的至少一些。回波抑制用于将频率相关抑制应用于所接收的音频信号以由此抑制在所接收的音频信号中的回波。为了使回波抑制有效地被实施,回波抑制器需要具有在所接收的音频信号中的回波的功率的准确估计。
发明内容
这个发明内容被提供来介绍在详细描述中进一步描述的以简化的形式的概念的选择。这个发明内容并不旨在标识所主张的主题的关键特征或必要特征,它也不旨在被用于限制所主张的主题的范围。
提供了一种抑制在所接收的音频信号中的回波的方法。作为回波抑制的部分,使用从被调整为近似回波路径的脉冲响应的有限脉冲响应(FIR)滤波器确定的功率响应来确定回波的回波功率的估计。也就是说,基于所输出的音频信号和所接收的音频信号在时域中动态地调整有限脉冲响应滤波器估计 ,以由此模拟在所接收的音频信号中的回波的回波路径的脉冲响应。从滤波器估计确定至少一个功率响应。(多个)功率响应用于估计在所接收的音频信号中的回波的回波功率,且所估计的回波功率用于将回波抑制应用于所接收的音频信号,由此抑制在所接收的音频信号中的回波。
可在呼叫(例如实施互联网协议语音(VoIP)以在用户设备之间传输音频数据的呼叫)中使用该方法,在该情况下,所输出的音频信号可以是从呼叫的远端接收的远端信号,且所接收的信号包括因而产生的回波和用于传输到呼叫的远端的近端信号。
附图描述
图1示出根据一个或多个实施例的通信系统的示意性图示;
图2是根据一个或多个实施例的用户设备的示意性方框图;
图3是示出根据一个或多个实施例的用于在回波抑制中使用的用户设备的模块的功能图;以及
图4是根据一个或多个实施例的抑制回波的进程的流程图。
具体实施方式
为了使回波抑制被有效地实施,回波抑制器需要有在所接收的音频信号中的回波的功率的准确估计。如在本文所述的,可基于FIR滤波器使用功率响应来估计回波功率,该FIR滤波器被调整以近似在输出音频信号的扩音器和接收包括从所输出的音频信号导致的回波的音频信号的麦克风之间的回波路径的脉冲响应。
FIR滤波器可以只用于估计回波功率(通过确定FIR滤波器的功率响应并接着使用功率响应来估计回波功率),且不估计实际回波信号。这可能是有利的,因为与如果FIR滤波器用于估计实际回波信号比较,在用于估计回波功率时,对在FIR滤波器中的准确度的要求小得多。因此通过从FIR滤波器估计回波功率(而不是回波信号),回波抑制对在诸如在VoIP客户端中的播出(例如来自扬声器)和记录侧(例如在麦克风处)之间的时钟漂移、在回波路径中的非线性度和在回波路径中的变化之类的问题更加鲁棒。在本文描述的实施例中,使用包括相位信息的时域数据来调整FIR滤波器。
图1示出包括与第一用户设备104相关联的第一用户102(“用户A”)和与第二用户设备110相关联的第二用户108(“用户B”)的通信系统100。在其它实施例中,通信系统100可包括任何数量的用户和相关联的用户设备。用户设备104和110可通过网络106在通信系统100中进行通信,由此允许用户102和108通过网络106与彼此通信。图1所示的通信系统100是基于分组的通信系统,但也可使用其它类型的通信系统。网络106可以例如是互联网。用户设备104和110中的每个可以例如是移动电话、平板计算机、膝上型计算机、个人计算机(“PC”)(包括例如WindowsTM、Mac OSTM和LinuxTM PC)、游戏设备、电视机、个人数字助理(“PDA”)或能够连接到网络106的其它嵌入式设备。用户设备104布置成从用户设备104的用户102接收信息并将信息输出到用户设备104的用户102。用户设备104包括输出装置,例如显示器和扬声器。用户设备104还包括输入装置,例如键盘、触摸屏、用于接收音频信号的麦克风和/或用于捕获视频信号的图像的摄像机。用户设备104连接到网络106。
用户设备104执行由与通信系统100相关联的软件提供者提供的通信客户端的实例。通信客户端是在用户设备104中的本地处理器上执行的软件程序。客户端执行在用户设备104处要求的处理,以便使用户设备104通过通信系统100传输和接收数据。
用户设备110对应于用户设备104并在本地处理器上执行通信客户端,该通信客户端对应于在用户设备104处执行的通信客户端。在用户设备110处的客户端以在用户设备104处的客户端执行所要求的处理以允许用户102通过网络106进行通信的相同方式,执行要求的处理以允许用户108通过网络106进行通信。用户设备104和110是在通信系统100中的端点。图1为了清楚起见只示出两个用户(102和108)和两个用户设备(104和110),但多得多的用户和用户设备可包括在通信系统100中,并可通过通信系统100使用在相应的用户设备上执行的相应通信客户端进行通信。
图2图示用户设备104的详细视图,用于通过通信系统100进行通信的通信客户端实例206在该用户设备104上被执行。用户设备104包括下列设备所连接于的中央处理单元(“CPU”)或“处理模块”202:输出设备,例如可被实施为触摸屏的显示器208和用于输出音频信号的扬声器(或“扩音器”)210;输入设备,例如用于接收音频信号的麦克风212、用于接收图像数据的摄像机216和键盘218;用于存储数据的存储器214;以及网络接口220,例如用于与网络106通信的调制解调器。用户设备104可包括除了图2所示的那些元件以外的其他元件。显示器208、扬声器210、麦克风212、存储器214、摄像机216、键盘218和网络接口220可集成到用户设备104中,如图2所示。在替代的用户设备中,显示器208、扬声器210、麦克风212、存储器214、摄像机216、键盘218和网络接口220中的一个或多个可以不集成到用户设备104中,并可经由相应的接口连接到CPU 202。这样的接口的一个例子是USB接口。如果用户设备104经由网络接口220到网络106的连接是无线连接,则网络接口220可包括用于将信号无线地传输到网络106和从网络106无线地接收信号的天线。
图2还图示在CPU 202上执行的操作系统(“OS”)204。在OS 204的顶部上运行的是通信系统10的客户端实例206的软件。操作系统204管理计算机的硬件资源,并操纵经由网络接口220传输到网络106并且从网络106传输的数据。客户端206与操作系统204通信并通过通信系统管理连接。客户端206具有用于向用户102呈现信息并从用户104接收信息的客户端用户接口。以这种方式,客户端206执行所要求的处理以允许用户102通过通信系统100进行通信。
参考图3和4,现在描述抑制回波的方法。图3是示出回波抑制进程如何实施的用户设备104的一部分的功能图,且图4是抑制回波的进程的流程图。
如图3所示,用户设备104包括扬声器210、麦克风212、FIR滤波器模块302、功率估计模块304和回波抑制模块306。将从扬声器210输出的信号x(t)耦合到扬声器210的输入。应注意,在本文所述的实施例中,只有一个扬声器(由附图中的参考数字210指示),但在其它实施例中,可以存在待输出的信号所耦合到的多于一个扬声器(用于从其输出)。类似地,在本文所述的实施例中,只有一个麦克风(由附图中的参考数字212指示),但在其它实施例中,可以有从周围环境接收音频信号的多于一个麦克风。将从扬声器210输出的信号也耦合到FIR滤波器模块302的第一输入和功率估计模块304的第一输入。麦克风212的输出耦合到FIR滤波器模块302的第二输入和回波抑制模块306的第一输入。FIR滤波器模块302的输出耦合到功率估计模块304的第二输入。功率估计模块的输出耦合到回波抑制模块306的第二输入。回波抑制模块306的输出用于提供所接收的信号(回波抑制已被应用)以用于在用户设备104中进一步处理。
在步骤S402中,接收将从扬声器210输出的信号。例如,待输出的信号可以是在用户102和108之间通过通信系统100的呼叫期间在用户设备104处从用户设备110已接收的远端信号。如本领域中已知的,执行(例如由客户端206)要求在所接收的信号上执行的任何处理(例如使用语音编码译码器的解码、逆包化等),以得到适合于从扬声器210输出的信号x(t)。信号x(t)是数字信号。在数字域中执行在从扬声器201输出信号之前在用户设备104中的对信号的至少一些处理。如在本领域中已知的,在从扩音器210播出之前,将数模转换器(DAC)应用于数字信号x(t)。类似地,将模数转换器(ADC)应用于由麦克风212捕获的信号以得到数字信号x(t)。
在其它实施例中,待输出的信号可从除了在呼叫中在通信系统100上以外的某个地方接收到。例如,待输出的信号可能已存储在存储器214中,且步骤S402包括从存储器214检索信号。
在步骤S404中,从扬声器210输出音频信号x(t)。以这种方式,音频信号x(t)被输出给用户102。
在步骤S406中,麦克风212接收音频信号。如图3所示,所接收的音频信号可包括近端信号,其为期望信号或“主信号”。近端信号是用户102打算让麦克风212接收的信号。然而,所接收的音频信号还包括从在步骤S404中从扬声器210输出的音频信号导致的回波信号。所接收的音频信号还可包括噪声,例如背景噪声。因此,总的所接收的音频信号y(t)可由近端信号、回波和噪声的和给出。回波和噪声充当近端信号的干扰。
FIR滤波器模块302采用所输出的音频信号x(t)和所接收的音频信号y(t)作为输入。在步骤S408中,FIR滤波器模块302基于所输出的音频信号x(t)和所接收的音频信号y(t)在时域中动态调整RIR滤波器估计以模拟在所接收的音频信号y(t)中的回波的回波路径h(t)。“回波路径h(t)的脉冲响应”在本文也被称为“回波路径h(t)”。
为了相当线性的回波路径,回波路径h(t)例如根据方程来描述在所接收的音频信号中的回波如何与从扬声器210输出的音频信号x(t)有关,其中是在所接收的音频信号y(t)中的回波,Ntrue是由麦克风212接收的所输出的信号x(t)的样本的数量,且hn(t)是描述回波路径h(t)的权重。回波路径h(t)可在时间和频率两者上变化,并可在本文被称为h(t)或h(t,f)。回波路径h(t)可取决于(i)围绕扬声器210和麦克风212的当前环境条件(例如是否存在从扬声器210到麦克风212的音频信号的通路的任何物理障碍、空气压力、温度、风等),以及(ii)当信号被输出和/或接收时可改变信号的扬声器210和/或麦克风212的特性。
FIR滤波器模块302通过确定所输出的音频信号x(t)的当前值和有限数量(N)的以前值的加权和来模拟在所接收的音频信号中的回波的回波路径h(t)。FIR滤波器模块302因此实施具有有限长度(在时间上)的第N阶FIR滤波器,在该有限长度上它在确定回波路径的估计时考虑所输出的音频信号x(t)的值。以这种方式,FIR滤波器模块302动态地调整FIR滤波器估计。回波预测操作由下面的方程描述,该方程依据所输出的音频信号x(t)定义在所接收的音频信号y(t)中的回波:
。
因此,利用相应的N+1个权重,使用所输出的音频信号x(t)的N+1个样本。这组N+1权重在本文简单地被称为回波路径的估计。换句话说,回波路径的估计是具有N+1个值的矢量,其中FIR滤波器模块302实施第N阶FIR滤波器,考虑信号x(t)的N+1个值(例如N+1个帧)。
可认识到,当回波是所接收的音频信号的占优势部分时,即当时,更容易调整FIR滤波器估计。例如,在一些实施例中,可以是可能的是:检测近端信号的功率何时大于回波的功率(例如用户102何时讲话),同时这是不调整FIR估计的情况,但当近端信号的功率小于所接收的音频信号y(t)中的回波的功率时(当用户102不讲话时),调整FIR估计。
然而,即使回波不是所接收的音频信号的占优势部分,也可能调整FIR滤波器估计。
将FIR滤波器估计从FIR滤波器模块302传递到功率估计模块304。在步骤S410中,功率估计模块304从FIR滤波器估计确定至少一个功率响应。通过分析FIR滤波器估计来确定功率响应信息。功率响应(或“频率响应”)给出作为频率的函数的回波路径h(t)的功率响应的指示。
在步骤S412中,功率估计模块304基于在步骤S410中确定的所确定的(多个)功率响应并基于输入信号x(t)来估计在所接收的音频信号中的回波的回波功率。步骤S410和S412可以不包括估计在所接收的音频信号y(t)中的回波信号。回波功率被估计为时间和频率的函数。在回波抑制中,回波功率估计的相当低的准确度足以实现良好的回波抑制。根据本文所述的方法,可以用对问题较不敏感的方式计算功率响应。此外,可以用与实际回波路径将被估计的方式的不同方式估计功率响应。例如,可使用针对频率f的FIR滤波器的估计来计算针对该频率f的功率响应。替代地或附加地,针对频率f的FIR滤波器的估计可用于计算针对不同的频率ν的功率响应,其中ν≠ f。换句话说,该方法可包括使用针对除了它被应用的频率区以外的另一频率区计算的外推的回波路径功率响应。在这个意义上,基于FIR滤波器估计来计算功率响应,虽然一些外推可能被要求确定针对特定频率的功率响应。也就是说,针对某个频率区得到的FIR滤波器估计可用于计算针对另一频率区的预测(或外推的)功率响应估计,即用于估计回波功率的功率响应不一定是FIR滤波器的功率响应,但也可以是基于FIR滤波器计算的功率响应(例如针对不同的频率区)。
特别是,FIR滤波器估计具有在时域中的长度L。步骤S410包括将FIR滤波器估计分割成每个在长度L/P的时域中的多个(P)分区。将FIR滤波器估计的每个分区转化到频域中并且求平方以针对每个分区确定在频域中的相应的功率响应。因此可认识到,是分区p的频率响应。
步骤S412包括通过执行所输出的音频信号的相应的多个帧的功率的多个度量的加权和来估计在所接收的音频信号中的回波的回波功率,其中在该和中的权重由功率响应中的相应功率响应给出。
因此,对于帧k,在所接收的音频信号中的回波的回波功率的估计可根据下面的方程在步骤S412中被估计:
,
其中是帧k-p的扩音器信号的功率谱密度。帧索引k是时间的度量,且因此可被重写为时间而不是帧索引的函数,以给出回波功率的估计。注意,为了使上述方程是正确的,用于计算和的滤波器分区和扩音器信号的长度应被仔细地选择,以便最小化圆周卷积效应。这个选择被执行以确保h的分区和扩音器输入信号帧的长度与用于调整滤波器估计h的麦克风信号(并且针对其将估计回波功率)的长度恰当匹配。如果每个分区具有长度P,每个扩音器(X)帧长度是M,且每个麦克风信号帧长度是N,则能够避免圆周卷积效应的一般要求是N+P-1<M。虽然这个选择是优选的,但是不管该选择如何,本文所述的方法将起作用,因为圆周卷积效应在方法中被忽略。
以这种方式,将已使用扬声器和麦克风信号x(t)和y(t)被调整以近似VoIP客户端的时变回波路径h(t)的FIR滤波器估计用于确定功率响应,然后利用所输出的音频信号x(t)来使用该功率响应,以估计在时间t和频率f下的回波信号的功率。
回波功率的估计从功率估计模块304被输出并由回波抑制模块306接收。回波抑制模块306还从麦克风212接收音频信号y(t)。在步骤S412中,回波抑制模块306使用回波功率的估计来将回波抑制应用于所接收的音频信号y(t),从而抑制在所接收的音频信号中的回波。回波功率的估计是频率相关的,且由回波抑制模块306应用的抑制也是频率相关的。
回波抑制器的目的是将存在于(例如在VoIP客户端中)麦克风信号中的扩音器回波抑制到足够低的水平,使它在由麦克风212拾取的近端声音(非回波声音)存在时不是引人注目的/干扰的。为了能够选择回波抑制的恰当量,需要回波功率的良好估计(例如作为频率和时间的函数),且如上所述,这由功率估计模块304提供到回波抑制模块306。回波抑制模块306被设计成将随着时间和频率两者而改变的信号相关抑制应用于所接收的音频信号y(t)。回波抑制方法在本领域中是已知的。此外,可以用不同的方式实施由回波抑制模块306应用的回波抑制方法。因此,回波抑制方法的确切细节因此未在本文被详细描述。
回波抑制模块306输出具有已被抑制的回波的所接收的信号,用于在用户设备104处进一步处理。例如,从回波抑制模块306输出的信号可由客户端206处理(例如编码和包化)并接着在用户102和108之间的呼叫中通过网络106传输到用户设备110。附加或替代地,从回波抑制模块306输出的信号可由用户设备104用于其它目的,例如,信号可存储在存储器214中或用作对在用户设备104处执行的应用的输入。
因此在本文描述了通过分析在时域中已被调整的FIR滤波器以模拟在频带中的回波信号的功率而得到的功率响应信息用于计算和应用回波抑制效应/滤波器(例如由VoIP客户端206使用)的目的的用途。
在上面描述的方法中,回波抑制在VoIP系统中实施(例如所接收的音频信号可包括用户102的语音,用于在用户102和108之间在通信系统100上的呼叫期间传输到用户设备110)。然而,本文所述的回波抑制方法可应用在回波抑制将被应用于的任何适当的系统中。
在上面描述和在附图中示出的实施例中,回波抵消(或“回波减去”)不应用于所接收的音频信号y(t)。也就是说,在用户设备104中没有回波抵消模块,且回波抑制应用于所接收的音频信号y(t),而没有将回波抵消应用于所接收的音频信号y(t)的先前步骤。
然而在其它实施例中,回波抵消可由回波抵消模块应用于所接收的音频信号y(t)。特别是,由回波抑制模块306应用的回波抑制可在所接收的音频信号y(t)的处理中的回波抵消的下游(即之后)被应用。回波抵消模块将从所接收的音频信号减去回波信号的估计,但由于在回波信号的估计中的不准确性,残余回波将最可能保留在所接收的音频信号中。残余回波将接着由回波抑制模块306抑制。可以用与本文在其中没有应用回波抵消的实施例中所述的方式相同的方式应用这个回波抑制。如果回波减去被使用,则可在回波抑制中考虑它的效应。
可通过在用户设备104处执行计算机程序产品(例如客户端206)来实施本文所述的方法。也就是说,计算机程序产品可配置成抑制在所接收的音频信号y(t)中的回波,其中计算机程序产品体现在计算机可读存储介质上(例如存储在存储器214中),并配置成当在CPU 202上被执行时执行本文所述的方法中的任意方法的操作。
通常,可使用软件、固件、硬件(例如固定逻辑电路)或这些实施方式的组合来实施本文所述的功能中的任意(例如图3所示的功能模块和图4所示的功能步骤)。在图3和4中单独示出的模块和步骤可以被或可以不被实施为单独的模块或步骤。例如,回波抑制模块306可执行功率估计模块304的功能,使得除了回波抑制模块306以外,不要求单独的功率估计模块304。如本文使用的术语“模块”、“功能”、“部件”和“逻辑”通常代表软件、固件、硬件或其组合。在软件实施方式的情况下,模块、功能或逻辑代表当在处理器(例如一个或多个CPU)上被执行时执行规定任务的程序代码。程序代码可存储在一个或多个计算机可读存储器设备上。本文所述的技术的特征是平台无关的,意味着技术可在具有各种处理器的各种商业计算平台上实施。
例如,用户设备也可包括使用户设备的硬件执行操作(例如处理器块等)的实体(例如软件)。例如,用户设备可包括计算机可读介质,其可配置成维持使用户设备和更具体地用户设备的操作系统和相关软件执行操作的指令。因此,指令用来配置操作系统和相关硬件以执行操作,且以这种方式导致操作系统和相关硬件的转化以执行功能。指令可由计算机可读介质通过各种不同的配置提供到用户设备。
计算机可读介质的一个这样的配置是信号承载介质,且因此配置成例如经由网络将指令(例如作为载波)传输到计算设备。计算机可读介质也可被配置为计算机可读存储介质,且因此不是信号承载介质。计算机可读存储介质的例子包括随机存取存储器(RAM)、只读存储器(ROM)、光盘、闪存、硬盘存储器和可使用磁、光学和其它技术来存储指令和其它数据的其它存储器设备。
虽然用结构特征和/或方法行为特有的语言描述了主题,应理解,在所附权利要求中定义的主题不一定限于上面描述的特定的特征或行为。相反,上面描述的特定的特征或行为被公开作为实施权利要求的示例形式。
Claims (10)
1. 一种抑制回波的方法,所述方法包括:
输出音频信号;
接收音频信号,其中所接收的音频信号包括从所述输出的音频信号导致的回波;
基于所输出的音频信号和所接收的音频信号在时域中动态地调整有限脉冲响应滤波器估计 ,以模拟在所接收的音频信号中的回波的回波路径;
从所述滤波器估计确定至少一个功率响应;
使用所确定的至少一个功率响应来估计在所接收的音频信号中的所述回波的所述回波功率;以及
使用所估计的回波功率来将回波抑制应用于所接收的音频信号,由此抑制在所接收的音频信号中的所述回波。
2. 如权利要求1所述的方法,其中所述至少一个功率响应包括多个功率响应,且所述确定多个功率响应包括:
将所确定的滤波器估计分割成在时域中的多个P个分区;以及
将所述滤波器估计的所述分区中的每个进行转化并求平方以针对所述分区中的每个来确定在频域中的相应的功率响应。
3. 如权利要求2所述的方法,其中通过执行所输出的音频信号的相应多个帧的功率的多个度量的加权和,来估计在所接收的音频信号中的所述回波的所述回波功率,其中在所述和中的权重由所述功率响应中的相应功率响应给出。
4. 如权利要求3所述的方法,其中对于帧k,在所接收的音频信号中的所述回波的所述回波功率根据下面的方程来估计:
,
其中是帧k-p的所输出的信号的功率谱密度。
5. 如权利要求2到4中的任一项所述的方法,其中所述滤波器估计具有在时域中的长度L,且所述P个分区中的每个具有在时域中的长度L/P。
6. 如前述权利要求中的任一项所述的方法,其中应用于所接收的音频信号的所述回波抑制是随着时间和频率而改变的信号相关抑制。
7. 如任意前述权利要求所述的方法,其中所述方法在用于在通信事件中使用的用户设备处被执行,且其中所接收的音频信号包括用户的语音,以用于在所述通信事件中从所述用户设备传输。
8. 一种被配置为实施回波抑制的设备,所述设备包括:
音频输出装置,其配置成输出音频信号;
音频输入装置,其配置成接收音频信号,其中所接收的音频信号包括从所述输出的音频信号导致的回波;
滤波器估计模块,其配置成基于所输出的音频信号和所接收的音频信号在时域中动态地调整有限脉冲响应滤波器估计,以模拟在所接收的音频信号中的所述回波的回波路径;
功率估计模块,其配置成从所述滤波器估计确定至少一个功率响应,并使用所确定的至少一个功率响应来估计在所接收的音频信号中的所述回波的所述回波功率;以及
回波抑制模块,其配置成使用所估计的回波功率来将回波抑制应用于所接收的音频信号,由此抑制在所接收的音频信号中的所述回波。
9. 如权利要求8所述的设备,其中所述音频输出装置包括配置成输出所输出的音频信号的扬声器,且其中所述音频输入装置包括配置成接收所接收的音频信号的麦克风。
10. 一种配置成抑制在所接收的音频信号中的回波的计算机程序产品,所述计算机程序产品体现在计算机可读存储介质上并配置成当在处理器上被执行时执行权利要求1到7中的任一项的操作。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB1223241.9A GB2512022A (en) | 2012-12-21 | 2012-12-21 | Echo suppression |
GB1223241.9 | 2012-12-21 | ||
US13/784,715 US9167342B2 (en) | 2012-12-21 | 2013-03-04 | Echo suppression |
US13/784715 | 2013-03-04 | ||
PCT/US2013/077354 WO2014100793A1 (en) | 2012-12-21 | 2013-12-21 | Echo suppression |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105027540A true CN105027540A (zh) | 2015-11-04 |
CN105027540B CN105027540B (zh) | 2017-07-21 |
Family
ID=47682460
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380066893.3A Active CN105027540B (zh) | 2012-12-21 | 2013-12-21 | 回波抑制 |
Country Status (7)
Country | Link |
---|---|
US (1) | US9167342B2 (zh) |
EP (1) | EP2920949B1 (zh) |
JP (1) | JP6422885B2 (zh) |
KR (1) | KR102169993B1 (zh) |
CN (1) | CN105027540B (zh) |
GB (1) | GB2512022A (zh) |
WO (1) | WO2014100793A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109643553A (zh) * | 2016-06-08 | 2019-04-16 | 杜比实验室特许公司 | 使用稀疏预测滤波器集的调适的回波估计及管理 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2510331A (en) | 2012-12-21 | 2014-08-06 | Microsoft Corp | Echo suppression in an audio signal |
GB2509493A (en) | 2012-12-21 | 2014-07-09 | Microsoft Corp | Suppressing Echo in a received audio signal by estimating the echo power in the received audio signal based on an FIR filter estimate |
US9319532B2 (en) * | 2013-08-15 | 2016-04-19 | Cisco Technology, Inc. | Acoustic echo cancellation for audio system with bring your own devices (BYOD) |
US10816584B2 (en) * | 2017-12-04 | 2020-10-27 | Ets-Lindgren, Inc. | Spectrum extension edgeless gating for reduced time domain gating edge errors |
EP4199368A4 (en) | 2020-08-12 | 2024-01-03 | Auzdsp Co Ltd | ADAPTIVE DELAY DIVERSITY FILTER, ECHO COMPENSATION DEVICE AND METHOD USING THE SAME |
KR102218742B1 (ko) * | 2020-08-12 | 2021-02-22 | (주)오즈디에스피 | 적응형 지연 다이버시티 필터와, 이를 이용하는 에코 제거 장치 및 방법 |
CN113178203B (zh) * | 2021-04-23 | 2022-11-04 | 歌尔股份有限公司 | 一种回声消除方法、系统、音频设备及可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040057574A1 (en) * | 2002-09-20 | 2004-03-25 | Christof Faller | Suppression of echo signals and the like |
WO2004064365A1 (en) * | 2003-01-08 | 2004-07-29 | Philips Intellectual Property & Standards Gmbh | Device and method for suppressing echo, in particular in telephones |
US20080126461A1 (en) * | 2006-07-10 | 2008-05-29 | Markus Christoph | Signal processing system employing time and frequency domain partitioning |
JP2009021741A (ja) * | 2007-07-11 | 2009-01-29 | Yamaha Corp | エコーキャンセラ |
CN202340252U (zh) * | 2011-11-18 | 2012-07-18 | 镁思锑科技(杭州)有限公司 | 具有回声和噪声消除功能的矿用通信手机 |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE4328139A1 (de) * | 1993-08-21 | 1995-02-23 | Philips Patentverwaltung | Schaltungsanordnung zur Echoauslöschung |
US5473686A (en) * | 1994-02-01 | 1995-12-05 | Tandy Corporation | Echo cancellation apparatus |
SE511073C2 (sv) | 1997-09-10 | 1999-08-02 | Ericsson Telefon Ab L M | Sätt och anordning för ekoestimering och undertryckning i telefonsystem |
US6256383B1 (en) | 1997-11-07 | 2001-07-03 | Legerity, Inc. | IIR filter of adaptive balance circuit for long tail echo cancellation |
US6570985B1 (en) | 1998-01-09 | 2003-05-27 | Ericsson Inc. | Echo canceler adaptive filter optimization |
US7423983B1 (en) * | 1999-09-20 | 2008-09-09 | Broadcom Corporation | Voice and data exchange over a packet based network |
US6549587B1 (en) | 1999-09-20 | 2003-04-15 | Broadcom Corporation | Voice and data exchange over a packet based network with timing recovery |
JP3566158B2 (ja) | 1999-12-07 | 2004-09-15 | 三菱電機株式会社 | エコーキャンセラ装置 |
US7672447B1 (en) | 2000-06-01 | 2010-03-02 | Telefonaktiebolaget Lm Ericsson (Publ) | Frequency domain echo canceller |
US7046658B1 (en) | 2000-06-23 | 2006-05-16 | At & T Corp. | Method and system for customer selected direct dialed voice-over-internet protocol (VOIP) |
US7068780B1 (en) | 2000-08-30 | 2006-06-27 | Conexant, Inc. | Hybrid echo canceller |
JP4568439B2 (ja) | 2001-01-22 | 2010-10-27 | パナソニック株式会社 | エコー抑圧装置 |
US6785382B2 (en) * | 2001-02-12 | 2004-08-31 | Signalworks, Inc. | System and method for controlling a filter to enhance speakerphone performance |
EP1393461B1 (en) * | 2001-05-17 | 2006-07-19 | STMicroelectronics Asia Pacific Pte Ltd. | Echo canceller and a method of cancelling echo |
US6950842B2 (en) * | 2002-01-23 | 2005-09-27 | Analog Devices, Inc. | Echo canceller having an adaptive filter with a dynamically adjustable step size |
US6914978B2 (en) | 2002-08-16 | 2005-07-05 | Ambit Microsystems Corp. | Pulse dialing system for VoIP modem |
US7082123B2 (en) | 2002-08-21 | 2006-07-25 | Ambit Microsystems Corp. | Silent redial system for VoIP modem |
US7027591B2 (en) | 2002-10-16 | 2006-04-11 | Ericsson Inc. | Integrated noise cancellation and residual echo suppression |
US7162420B2 (en) * | 2002-12-10 | 2007-01-09 | Liberato Technologies, Llc | System and method for noise reduction having first and second adaptive filters |
US6947549B2 (en) | 2003-02-19 | 2005-09-20 | The Hong Kong Polytechnic University | Echo canceller |
US7099458B2 (en) * | 2003-12-12 | 2006-08-29 | Motorola, Inc. | Downlink activity and double talk probability detector and method for an echo canceler circuit |
WO2006040734A1 (en) | 2004-10-13 | 2006-04-20 | Koninklijke Philips Electronics N.V. | Echo cancellation |
US7894598B2 (en) * | 2004-12-14 | 2011-02-22 | Nuance Communications, Inc. | System for limiting receive audio |
JP2007235874A (ja) * | 2006-03-03 | 2007-09-13 | Sanyo Electric Co Ltd | エコー抑制装置及びエコー抑制方法 |
DE602006009770D1 (de) | 2006-05-08 | 2009-11-26 | Harman Becker Automotive Sys | Echoverringerung für zeitvariante Systeme |
US7983373B2 (en) * | 2007-02-07 | 2011-07-19 | Vintomie Networks B.V., Llc | Clock distribution for 10GBase-T analog front end |
US8374851B2 (en) | 2007-07-30 | 2013-02-12 | Texas Instruments Incorporated | Voice activity detector and method |
EP2048659B1 (en) | 2007-10-08 | 2011-08-17 | Harman Becker Automotive Systems GmbH | Gain and spectral shape adjustment in audio signal processing |
US8275139B2 (en) * | 2008-03-26 | 2012-09-25 | Ittiam Systems (P) Ltd. | Linear full duplex system and method for acoustic echo cancellation |
JP5125690B2 (ja) * | 2008-03-31 | 2013-01-23 | ヤマハ株式会社 | 音響エコー除去装置 |
US8634569B2 (en) | 2010-01-08 | 2014-01-21 | Conexant Systems, Inc. | Systems and methods for echo cancellation and echo suppression |
NO332437B1 (no) * | 2010-01-18 | 2012-09-17 | Cisco Systems Int Sarl | Apparat og fremgangsmate for a supprimere et akustisk ekko |
US9185233B2 (en) | 2010-05-25 | 2015-11-10 | Intel Deutschland Gmbh | Audio communication device and method using fixed echo cancellation filter coefficients |
BR112013016222B1 (pt) | 2011-02-03 | 2020-12-15 | Telefonaktiebolaget L M Ericsson (Publ) | Método de estimar a potência de eco, método de supressão de eco, estimador de potência de eco harmônico, cancelador de eco, e, equipamento de usuário |
US8804977B2 (en) | 2011-03-18 | 2014-08-12 | Dolby Laboratories Licensing Corporation | Nonlinear reference signal processing for echo suppression |
US9065895B2 (en) | 2012-02-22 | 2015-06-23 | Broadcom Corporation | Non-linear echo cancellation |
GB2509493A (en) | 2012-12-21 | 2014-07-09 | Microsoft Corp | Suppressing Echo in a received audio signal by estimating the echo power in the received audio signal based on an FIR filter estimate |
GB2510331A (en) | 2012-12-21 | 2014-08-06 | Microsoft Corp | Echo suppression in an audio signal |
-
2012
- 2012-12-21 GB GB1223241.9A patent/GB2512022A/en not_active Withdrawn
-
2013
- 2013-03-04 US US13/784,715 patent/US9167342B2/en active Active
- 2013-12-21 KR KR1020157016515A patent/KR102169993B1/ko active IP Right Grant
- 2013-12-21 WO PCT/US2013/077354 patent/WO2014100793A1/en active Application Filing
- 2013-12-21 EP EP13826690.3A patent/EP2920949B1/en active Active
- 2013-12-21 JP JP2015549851A patent/JP6422885B2/ja active Active
- 2013-12-21 CN CN201380066893.3A patent/CN105027540B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040057574A1 (en) * | 2002-09-20 | 2004-03-25 | Christof Faller | Suppression of echo signals and the like |
WO2004064365A1 (en) * | 2003-01-08 | 2004-07-29 | Philips Intellectual Property & Standards Gmbh | Device and method for suppressing echo, in particular in telephones |
US20080126461A1 (en) * | 2006-07-10 | 2008-05-29 | Markus Christoph | Signal processing system employing time and frequency domain partitioning |
JP2009021741A (ja) * | 2007-07-11 | 2009-01-29 | Yamaha Corp | エコーキャンセラ |
CN202340252U (zh) * | 2011-11-18 | 2012-07-18 | 镁思锑科技(杭州)有限公司 | 具有回声和噪声消除功能的矿用通信手机 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109643553A (zh) * | 2016-06-08 | 2019-04-16 | 杜比实验室特许公司 | 使用稀疏预测滤波器集的调适的回波估计及管理 |
CN109643553B (zh) * | 2016-06-08 | 2023-09-05 | 杜比实验室特许公司 | 使用稀疏预测滤波器集的调适的回波估计及管理 |
Also Published As
Publication number | Publication date |
---|---|
JP2016506673A (ja) | 2016-03-03 |
GB2512022A (en) | 2014-09-24 |
CN105027540B (zh) | 2017-07-21 |
WO2014100793A1 (en) | 2014-06-26 |
US9167342B2 (en) | 2015-10-20 |
US20140177858A1 (en) | 2014-06-26 |
KR20150096424A (ko) | 2015-08-24 |
JP6422885B2 (ja) | 2018-11-14 |
EP2920949B1 (en) | 2017-02-01 |
EP2920949A1 (en) | 2015-09-23 |
KR102169993B1 (ko) | 2020-10-26 |
GB201223241D0 (en) | 2013-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105027540A (zh) | 回波抑制 | |
CN107211063B (zh) | 非线性回波路径检测 | |
CN104969537B (zh) | 用于回声抑制的方法和装置 | |
KR102190833B1 (ko) | 에코 억제 | |
EP2982102B1 (en) | Echo removal | |
EP2987315B1 (en) | Echo removal | |
CN104871520A (zh) | 回波抑制 | |
CN105409191A (zh) | 回波去除 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |