CN107005763A - 用于非线性和时变回波消除的参考麦克风 - Google Patents
用于非线性和时变回波消除的参考麦克风 Download PDFInfo
- Publication number
- CN107005763A CN107005763A CN201580063355.8A CN201580063355A CN107005763A CN 107005763 A CN107005763 A CN 107005763A CN 201580063355 A CN201580063355 A CN 201580063355A CN 107005763 A CN107005763 A CN 107005763A
- Authority
- CN
- China
- Prior art keywords
- microphone
- echo
- signal
- loudspeaker
- field microphone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012546 transfer Methods 0.000 claims abstract description 25
- 230000011664 signaling Effects 0.000 claims abstract description 23
- 230000007613 environmental effect Effects 0.000 claims abstract description 12
- 238000000034 method Methods 0.000 claims description 35
- 230000004044 response Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 7
- 230000000694 effects Effects 0.000 claims description 7
- 230000006978 adaptation Effects 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 6
- 238000004891 communication Methods 0.000 claims description 3
- 238000002592 echocardiography Methods 0.000 claims description 3
- 230000009022 nonlinear effect Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 21
- 230000003044 adaptive effect Effects 0.000 description 10
- 201000010743 Lambert-Eaton myasthenic syndrome Diseases 0.000 description 7
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 7
- 239000000758 substrate Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000725 suspension Substances 0.000 description 3
- 241000209140 Triticum Species 0.000 description 2
- 235000021307 Triticum Nutrition 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 230000036039 immunity Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000013643 reference control Substances 0.000 description 1
- 230000003362 replicative effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 239000002918 waste heat Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R19/00—Electrostatic transducers
- H04R19/02—Loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R19/00—Electrostatic transducers
- H04R19/04—Microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
- H04R3/06—Circuits for transducers, loudspeakers or microphones for correcting frequency response of electrostatic transducers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2410/00—Microphones
- H04R2410/05—Noise reduction with a separate noise microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
- H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
- H04R2430/21—Direction finding using differential microphone array [DMA]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
- Circuit For Audible Band Transducer (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
Abstract
接收远端信号,该远端信号来自远端用户并在扬声器处被广播。确定用于回波传递函数的信号,并在如下信号之间选出该信号:远端信号或从紧邻扬声器设置的近场麦克风接收到的回波参考信号。相比于扬声器信号,近场麦克风以可忽略的能级感测从扬声器广播的远端信号,同时感测近端语音和环境噪音。至少部分地基于所选信号来确定回波传递函数,并且该回波传递函数代表扬声器和远场麦克风之间的声路径的特性,该远场麦克风与近场麦克风相比,设置在距扬声器更远的距离处。至少部分地基于回波传递函数来确定估计回波。从由远场麦克风接收到的信号中减去所估计的回波,该减去步骤有效于消除在从远端麦克风接收到的信号中存在的回波。
Description
相关申请的交叉引用
根据美国专利法律35U.S.C.§119(e),本申请要求于2014年11月25日提交的、名称为“Reference Microphone for Non-linear and time variant echo cancellation(用于非线性和时变回波消除的参考麦克风)”的美国临时申请No.62084221的权益,其全部内容通过引入而并入本文。
技术领域
本申请涉及声回波消除方法(acoustic echo canceling approach),例如用于移动电话的声回波消除方法。
背景技术
在双向远程通信系统中,声回波源于通过扬声器(loudspeaker)输出的、在通常被称为近端装置的相同装置上由麦克风捕获的信号。该捕获的结果是,在远程通信延迟后,会话另一侧的用户(远端用户)听见作为回波的自身声音。可证明的是,回波不利于进行自然会话,并且针对免提电话会话需要消除回波的方法。
免提电话装置有时使用全双工声回波消除(AEC:acoustic echo cancellation)算法,来消除回波语音并最大程度降低影响会话质量。可以在发送到扬声器的信号和通过麦克风捕获的信号之间建立纯线性相关性时,AEC算法最适用。
在目前的移动装置中,朝向便携式和更轻薄工业设计的驱动已使得这些装置内体积变得更小。声学性能在有效体积内受此约束。针对轻薄优雅的设计,需要使用更小、更薄的扬声器。因此,可以移动更少量的空气,导致声压级(SPL:sound pressure level)降低,尤其是在较低频率情况下。当初始设备制造商(OEM)设计出小规格扬声器时,所产生的扬声器无法实现预期SPL。音频系统工程师可以过驱动(overdrive)扬声器和功率放大器,以获得预期SPL。然而,对扬声器尺寸的约束通常导致非线性输出。
一般来说,扬声器振动在小和高振幅时表现不同。对振幅的依赖性是对系统中固有非线性的指示。过驱动扬声器同样通过扬声器振膜的过度振幅,来引起非线性失真(软限幅的结果)。该次级非线性效应是生成不在激发刺激物中的额外谱分量。它们通常是作为多个基频之间的谐波或互调失真的、所应用的基频的整数倍。同样利用谐波生成来过驱动小型扬声器,因为低频基频的谐波可以在心理声学上填充低频损耗,使得音频频谱下端声音比其更加饱满。
影响小型扬声器中非线性行为的一个因素是磁力因素Bl(x)。当磁场不均匀时,磁力因素是位移的函数。这在更小型扬声器中具有更大影响。另一因素是悬挂柔性(Compliance)Cms(x)或者相反地,悬挂刚度Kms(x)。这是悬挂的回复力作为距离的函数而增加。又一因素是机械阻力Rms(v)并且此因素取决于线圈的速度。机械阻力随任一方向中速度的递增而增加。
免提电话应用的回波路径中非线性的主要原因通常是扬声器。所有这些因素影响施加到振膜上的力,其进一步影响音圈的位移和速度。这是在这些因素之间互相作用的非线性反馈回路。Bl(x)和Kms(x)产生DC分量,而Rms(v)使得谐振时基频压缩。这些经由反馈人体影响总谐波失真(THD:Total Harmonic Distortion)和互调失真(IMD:InterModulation Distortio)。扬声器中主导的非线性可能显著影响输出信号。
过驱动超规格扬声器同样能够使扬声器失效,因为过度振幅可以使振膜摆动,并且因为扬声器音圈中的余热同样可以使扬声器失效。电子反馈补偿可以用于扬声器防护。扬声器防护技术测量音圈上的电流和电压,以估计温度和偏移,并且自适应地将这些限定在针对最高可能SPL和更佳可听性的最大程度以下。这提高了扬声器的寿命,同时提取最高性能。
扬声器防护技术采用自适应算法,以管理输出信号动力学,为了制约偏移(excursion),限制温度并最大程度降低THD,同时最大程度提高输出功率。相比于AEC使用的信号,扬声器输出在时间和频率方面不断变化。因此,扬声器信号输出电平可以与AEC算法通常使用作为回波参考信号的远端信号在时间上进行高度的去相关处理,即,即使在准稳态意义上,其也不再是时间恒定的。
小型扬声器用于移动音频,原因如下:通过市场营销和工业设计要求驱动的对尺寸的约束;用于扬声器声学(包括背体积)的小空间;用于携带的移动性和便利性的纤薄装置;制造商的经济性决策;以及在竞争相当激烈的市场中用料清单及成本的控制。
鉴于工程和市场决策,通常过驱动小型扬声器。这些扬声器需要满足使用时的目标SPL,并诱发低频基频的谐波失真,以增强低音感受,尤其是当低频在更小型扬声器中被衰减时。
用于AEC算法的扬声器非线性和扬声器防护算法的结果是,并未维持回波参考信号和实际扬声器输出之间的线性非时变关系。这可以导致较差的AEC性能。
存在若干与这种非线性系统标识有关的问题,并且先前算法不足以在线性条件下匹配AEC的性能。非线性AEC(NLAEC)算法的计算复杂性同样显著超过线性AEC算法。此外,过驱动用于导出这种使用情况的足够输出的小型扬声器的必要性,同样导致开发随时间变化的扬声器防护算法,其根据源自于扬声器的实时性能参数,动态地调节扬声器的驱动功率。这可以导致非线性的减少,但引起随时间变化的扬声器输出系统。这同样引发在AEC算法的收敛问题,这通常发生在扬声器防护算法之前导出的参考信号。
所有这些问题已经导致一些用户对先前方法的不满。
附图说明
为了更完整地理解本公开,应参照下述详细说明及附图,其中:
图1包括根据本发明的各种实施方式的、麦克风系统的框图;
图2包括根据本发明的各种实施方式的、声压级与距源的距离的曲线图;
图3包括根据本发明的各种实施方式的、声压级与全向对差动式麦克风的对数距离的关系的曲线图;
图4包括根据本发明的各种实施方式的、差动式麦克风的一示例的框图;
图5包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图;
图6包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图;
图7包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图。
本领域技术人员应当理解,附图中的元素是为了简单和明了而示出。还应当理解,可以以出现的特定顺序来对某些操作和/或步骤进行描述或者描写,但是本领域技术人员应能够理解对顺序的这种特殊性实际上是不需要的。还应该理解,本文中使用的术语和措辞具有与其各自相应的探究和研究领域相对应的这种术语和措辞的普通含义,除非本文中规定了其具有特定的含义。
具体实施方式
本方法提供了在诸如电话和移动无线装置(例如,移动电话或智能电话)这样的电子装置中的声回波消除。在一特定示例中,移动电话可以作为免提电话使用,并且来自扬声器的信号由装置上的麦克风捕获,并被回波反射回发出原声的人员。在诸如移动智能电话这样的特定消费者装置中,扬声器和功率放大器通常可以在其线性操作范围外驱动。
在这种情况下,对线性声回波消除(AEC)算法进行修改,以试图识别并消除回波的非线性分量。本方法解决了在非线性和时变条件下声回波消除的问题,并为线性非时变系统上运行的分量提供改进的性能和降低的AEC算法复杂性。
本文所呈现的方法涉及语音电话,并且更具体地涉及用于移动电话的声回波消除方法。然而,应当理解,本文所呈现的理念可以有效地用于声回波消除设置,其中,从扬声器输出的信号不再与通过回放应用播放的信号呈线性和时间恒定相关。
在若干此类实施方式中,接收到来自远端用户的远端信号并在扬声器处广播远端信号。确定用于估计回波传递函数的信号,在如下信号之间选出该信号:远端信号或从紧邻扬声器设置的近场麦克风接收到的回波参考信号。近场麦克风感测从扬声器广播的远端信号。至少部分地基于所选信号来确定回波传递函数,并且回波传递函数代表扬声器和远场麦克风之间的声路径的特性,该远场麦克风与近场麦克风相比设置在距扬声器更远的距离处。至少部分地基于回波传递函数来确定估计回波。从由远场麦克风接收到的信号中减去所估计的回波,并且减去步骤有效于消除在从远端麦克风接收到的信号中存在的回波。
在某些方面,近场麦克风是差动式麦克风。在其他方面,远端信号由功率放大器放大。
在某些示例中,将扬声器和近场麦克风设置成彼此相距在约5mm以内。在其他示例中,将近场麦克风、远场麦克风以及扬声器设置在单个平台处。在其他示例中,在相同声学环境中,将近场麦克风和扬声器设置在单个平台处,并且,将远场麦克风设置在另一平台中。
在某些方面,尽管差动式麦克风邻近扬声器,但是由于扬声器输出远端信号而导致的差压电平并没有使差动式麦克风超载。在其他方面,在差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的(insignificant)能量,允许回波传递函数估计处理呈线性处理。
在某些示例中,由于近端和噪音源距差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在差动式麦克风处可忽略。在其他方面,在差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理呈线性处理。
在某些示例中,来自线性回波传递函数估计的回波传递估计用于估计非线性回波路径,并从通过远场语音麦克风所捕获的麦克风信号中成功地减去非线性回波。在某些示例中,单个平台位于移动电话、膝上型计算机或平板计算机、家庭自动化设备或其他近端语音通信设备、或能够音频回放并响应于语音输入的设备。其他示例也是可能的。
在其他这些示例中,涉及一种装置,其包括:近场麦克风,该近场麦克风用于接收来自扬声器的声音,并产生回波参考信号;以及远场麦克风,该远场麦克风用于接收来自扬声器的声音。近场麦克风与扬声器紧邻布置。该装置包括:回波参考控制模块,该回波参考控制模块被配置为自适应地并动态地确定回波估计信号,以估计回波传递函数,从如下信号之间选出该信号:从近场麦克风接收到的回波参考信号和来自远端用户的远端信号,或这两个信号的组合。该装置还包括:自适应模块,该自适应模块被配置为至少部分地基于所选回波估计信号来确定回波传递函数,并且自适应模块还被配置为至少部分地基于回波传递函数来确定所估计的回波。该装置还包括:汇总器,该汇总器从通过远场麦克风产生的信号中减去所估计的回波,以产生回波消除信号。
现参照图1,描述了回波消除系统100的示例。系统100包括:扬声器-封闭-麦克风-系统(LEMS:loudspeaker-enclosure-microphone-system)102。LEMS 102包括:功率放大器104(放大输入信号)、扬声器106(向用户提供信号)、近场麦克风108(紧邻用作紧邻噪音消除麦克风装置的扬声器106)、以及远场麦克风110。扬声器106可以是任意类型的、将电信号转换成声能的扬声器或接收机。在一示例中,扬声器106是扬声器。在一示例中的麦克风108是下述差动式麦克风。
系统100还包括:回波参考控制模块120、控制逻辑122、自适应算法124、以及滤波器路径126。回波参考控制模块120的功能是:自适应地确定用于确定回波传递函数(回波参考来自麦克风108)的信号N{x(n)}或远端信号x(n)。这可以通过将回波参考信号与通过麦克风108拾取的回波信号进行比较,确定扬声器中非线性的数量来实现。控制逻辑122的功能是与回波参考控制模块120协同作业,以管理自适应算法124,从而在该过程中使用适当输入。自适应算法124的功能是估计回波传递函数。它可以是若干标准中的一个,并被证实是线性声回波消除算法。滤波器路径126的功能用于建模声回波路径,从而复制可以在声回波消除器中消除的真实回波。
如图1所示,将紧邻噪音消除麦克风装置108放置为邻近紧凑型移动设备中的扬声器106。"紧邻"是指小于约5mm的距离。其他距离也是可能的。紧邻扬声器106允许麦克风108拾取基准回波信号,同时对来自其他声源的信号具有免疫性。
麦克风108用作远端回波参考麦克风。因为扬声器106中的所有非线性均已考虑到,所以这允许回波参考相对于来自麦克风110的主麦克风回波信号呈线性关系。结合初始远端参考信号(通过例如回波消除器的当前可用实施方式中的软件,在内部提供的),这种信号源导致甚至在高度非线性驱动的扬声器系统中的优异AEC性能,算法复杂性的要点或许在移动系统中失效。远端参考将提供用于通过双端口麦克风拾取回波参考的远端语音活动检测触发器。这依次提供如通过如下等式给出的、提供给适当的线性声回波消除器算法的参考信号。当线性条件成立时,相反可以使用诸如NLMS、FD-NLMS、MDF或类似算法这样的最优算法。
在图1的双向远程通信系统中,声回波源于通过扬声器106输出的、在通常被称为近端的相同装置上由麦克风110所捕获的信号。该捕获的结果是,在远程通信延迟后,会话另一侧(远端)的用户听见作为回波的自身声音。可证明地是,回波不利于进行自然会话,并且免提电话会话需要消除回波的方法。一方面,系统100使用全双工声回波消除(AEC)算法(经由自适应算法124实施),来消除回波语音,以最大程度降低影响会话质量。可以在发送到扬声器106的信号和通过麦克风110捕获的信号之间建立纯线性相关性时,AEC算法最适用。
如图1所示,将来自远端的信号132在声学上通过扬声器106广播到用户聆听免提电话装置的房间中。此外,麦克风110捕获连同广播扬声器信号的回波和任何背景噪音的用户语音(近端语音)。扬声器106、房间(封闭)以及麦克风108和110都包括LEMS 102。假设LEMS 102呈线性,可以建模回波,作为远端信号x(n)和LEMS声响应h(n)的乘积,即
d(n)=h(n)*x(n) (1)
使用扬声器106和麦克风110的线性模型,将扬声器106和麦克风110之间的声路径及相关线性增益集中到房间的声响应或回波路径传递函数。因而,可以建模LEMS声响应h(n),作为有限脉冲响应(FIR)滤波器h(n)。然后,该回波是远端信号x(n)(表示为向量)的函数。
d(n)=h(n)Tx(n) (2)
AEC算法124的目标是从麦克风信号中去除回波信号d(n),从而远端用户无法对其进行察觉。这必须在近端话音信号s(n)不失真的情况下完成。AEC算法124的通用方法是自适应地估计从扬声器至麦克风的回波路径。然后将此估计应用于远端信号,以再生回波,从而可以从麦克风信号s(n)和汇总器129中减去。在环境噪音v(n)的情况下,这是复杂的。麦克风信号是回波、近端信号和噪音的总和。
y(n)=d(n)+s(n)+v(n)=h(n)Tx(n)+s(n)+v(n) (3)
驱动回波消除器,以通过自适应算法收敛于回波路径的有限脉冲响应横向滤波器估计所估计的回波可以写作所建模的回波路径与扬声器信号的函数。
将回波消除后的信号e(n)限定为误差信号,麦克风信号和估计回波之间的差值:
该问题可以通过使误差的适当函数最小化来解决。通常选择均方误差E{e2(n)},此标准具有单一全局极小值,只要系统维持其线性。这允许可以收敛于全局极小值的若干自适应方法。很多此类方法采用LMS(最小均方值)自适应算法的时间或频域变量。该算法也是公知的并且在此用作线性声回波消除的代表方法。LMS算法采用"最陡下降(steepestdecent)",来接近全局极小值。可以通过最小化均方误差并进行误差e(n)和输入x(n)之间的瞬时梯度估计,来导出滤波器路径估计的LMS更新等式。
这里,μ是学习速率因子。它可以示出为受限于输入自相关的最大本征值,并且算法的总收敛性受本征值扩展的制约。LMS算法对输入的功率敏感。这种依赖性通常通过使用输入功率x(n)Tx(n)来正常化更新分量来移除。
上述等式假设LEMS系统中的时间变化足够慢,使得自适应算法可以收敛于比声路径转换更迅捷的正确解决方案。这通常成立,只要没有超出针对自适应算法进行抽头(tapped)的点,来修改参考回波信号。
当前方法通过考虑扬声器响应的非线性,来线性化声回波问题。因此,可以采用通用的低复杂度线性AEC算法,来代替具有其相关问题的复杂非线性AEC算法。
更具体地,麦克风108用于拾取回波参考信号。扬声器106和回波参考麦克风108被配置为在邻近(极近场)处具有声端口。可以将这种回波参考麦克风设计成,对紧邻的音频信号敏感并且极大幅度地削弱远场信号。将这两个端口分开的示例距离可能小于约5mm。近端源通常是该距离的至少5至25倍以上,即25 mm到125 mm以上。有利地的是,一方面,当前方法线性地捕获扬声器106端口附近的音频,同时对近端目标信号和周围音频具有可忽略的灵敏度。这可以在一示例中通过使用麦克风108的差动式麦克风来实现。
可以理解的是,一般来说,可以使用由下述声学机构限定的、具有近场响应的麦克风作为回波参考信号的源。这种麦克风带有具有极高衰减敏感度的近场响应,作为从麦克风的渐增距离的函数。随距离急剧下降的响应允许使用麦克风,以准确地捕获扬声器的输出,同时将近端语音削弱到可忽略的电平。
如图2所示,声压级随距离反向下降。这由关系P×r=k表示,其中,r是距源的距离,P是源处的声压级而k是常数。如果将声压级转换成dB,则:
20log10|P(r)|=20log10k-20log10r
(7)
如图2所示,在一定距离ri;i=1,2,3,4处的压力Pri由k/ri给出。间隔恒定距离δ处的压力差可以表示为
如果δ<r1,则r1r2≈r1 2且r3r4≈r3 2,因此
实际声压级可以显著高于源附近的压力差,并且潜在地使全向麦克风负载过重,然而,压力差更小并且麦克风振膜和电路很容易设计为避免超载。此外,作为r2的函数的压力差的该反比关系的效应意味着在距声源较远距离处,压力差显著小于实际压力级。这示于图2。如果将压力差转换成dB,则:
20log10|Pd|=20log10kδ-40log10r
=20log10k+20log10δ-40log10r (8)
图3示出当以对数标度相对于距离进行绘制时,该差异是全向麦克风和差动式麦克风之间的声压级(以分贝计)(例如,可用于麦克风108的声压级)。该绘图示出相比于全向麦克风,差动式麦克风的敏感度下降。
采用具有差动式麦克风拾取(即,使麦克风108成为差动式麦克风)的方法,获得了与扬声器端口紧邻的扬声器信号的清楚和线性的拾取。然而,在免提电话配置中用户的语音在相当远的位置处,并且将以图3所示的更快速率(20log10δ-20log10r)降低。这里,第一项是常数且第二项表明,随着距源的距离,相比于全向麦克风的敏感度,差动式麦克风敏感度以更快速率显著降低。
这种配置相对于诸如用户的语音和近端环境噪音这样的近端信号并不敏感,并提供声回波消除的线性回波参考信号。因此,差动式麦克风一方面用于回波参考麦克风108。
存在可用于麦克风108的差动式麦克风的各种配置。现将描述一些此类示例。
现参照图4,描述了麦克风400的一示例。麦克风400是作为近场差动式麦克风的双端口麦克风。盖403设置在基底或基座401上,并具有穿过其延伸的第一端口402和第二端口404。MEMS装置406从端口接收声能,并将声能转换成电信号。在一示例中,垫片410包围麦克风400。垫片可以具有引导至端口402和404的通道412和414。此外,可以提供通过基底到端口404的通道416。垫片410包括与通道412和414连通的端口450和452。
可以理解的是,本文所述的MEMS装置包括通电的振膜和背板。声压使振膜移动,并且该移动产生针对背板的差动电压或差动电流。差动电压或差动电流代表所接收到的声能。
现参照图5,描述了麦克风500的另一示例。盖503设置在基底或基座501上并具有穿过其延伸的端口502。基座503中的通道507允许MEMS装置506下方的体积与盖503和MEMS装置506之间的体积之间的连通。MEMS装置506从端口502接收声能,并将该声能转换成电信号。在图5的示例中,单一端口使MEMS装置506内的振膜的两侧曝光。此配置可重复使用,用于精确地捕获回波参考信号。
现参照图6,描述了麦克风600的另一示例。盖603设置在基底或基座601上,并具有穿过其延伸的端口602。MEMS装置606从端口602接收声能并将该声能转换成电信号。在一示例中,垫片610包围麦克风600并具有双端口620和622,该双端口620和622通过通道624与盖603上的端口602连通。在另一示例中,当将端口602置于MEMS系统装置606(无基底或基座)下方时,垫片610具有引导至端口602的通道652和654。在图6所示的两个示例中,将具有两个声端口的垫片连接到全向麦克风的一个端口。针对这种垫片的、在麦克风端口处的压力是在垫片的两个端口处的压力差。
现参照图7,描述了麦克风700的另一示例。麦克风700包括:第一MEMS装置705和第二MEMS装置706,同时盖703设置在基底或基座701上。第一端口702延伸通过盖703,并且第二端口704延伸通过基座701。该配置操作单一端口MEMS并可用于正常语音捕获,而另一MEMS充当主要用于提供回波消除参考信号的双端口噪音消除结构。该配置还可以通过结合单端口MEMS和双端口MEMS的信号,来允许用于传输信号的更好环境噪音消除。
在此描述了本发明的优选实施方式,包括发明人已知的实施本发明的最佳方式。应当理解,所例示的实施方式仅仅是示例性的,而不应当理解为限制本发明的范围。
Claims (24)
1.一种方法,所述方法包括如下步骤:
接收来自远端用户的远端信号,并在扬声器处广播所述远端信号;
确定用于估计回波传递函数的信号,该信号在如下信号之间选出:所述远端信号或从紧邻所述扬声器设置的近场麦克风接收到的回波参考信号,所述近场麦克风感测从所述扬声器广播的所述远端信号;
至少部分地基于所选信号来确定回波传递函数,所述回波传递函数代表所述扬声器和远场麦克风之间的声路径的特性,所述远场麦克风与所述近场麦克风相比设置在距所述扬声器更远的距离处;
至少部分地基于所述回波传递函数来确定所估计的回波;
从自所述远场麦克风接收到的信号中减去所估计的回波,该减去的步骤有效于消除在从所述远端麦克风接收到的信号中存在的回波。
2.根据权利要求1所述的方法,其中,所述近场麦克风是差动式麦克风。
3.根据权利要求1所述的方法,其中,所述远端信号由功率放大器放大。
4.根据权利要求1所述的方法,其中,将所述扬声器和所述近场麦克风设置成彼此相距在约5mm以内。
5.根据权利要求1所述的方法,其中,将所述近场麦克风、所述远场麦克风以及所述扬声器设置在单个平台处。
6.根据权利要求1所述的方法,其中,在相同声学环境中,将所述近场麦克风和所述扬声器设置在单个平台处,并且将所述远场麦克风设置在另一平台中。
7.根据权利要求2所述的方法,其中,尽管所述差动式麦克风邻近所述扬声器,但是由于所述扬声器输出所述远端信号而导致的差压电平并没有使所述差动式麦克风超载。
8.根据权利要求7所述的方法,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,允许回波传递函数估计处理是线性处理。
9.根据权利要求2所述的方法,其中,由于近端和噪音源距所述差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在所述差动式麦克风处可忽略。
10.根据权利要求9所述的方法,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于所述近端话音信号和所述环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
11.根据权利要求10所述的方法,由此,来自所述线性回波传递函数估计的回波传递估计用于估计非线性回波路径,并从通过远场语音麦克风捕获的麦克风信号中成功地减去非线性回波。
12.根据权利要求5所述的方法,其中,所述单个平台位于蜂窝电话、膝上型计算机或平板计算机、家庭自动化设备或其他近端语音通信设备、或能够进行音频回放并响应于语音输入的设备处。
13.一种装置,所述装置包括:
近场麦克风,所述近场麦克风用于接收来自扬声器的声音,并产生回波参考信号;
远场麦克风,所述远场麦克风用于接收来自所述扬声器的声音;
其中,所述近场麦克风紧邻所述扬声器;
回波参考控制模块,所述回波参考控制模块被配置为自适应地并动态地确定回波估计信号,以估计回波传递函数,从如下信号之间选出该信号:从所述近场麦克风接收到的回波参考信号和来自远端用户的远端信号,或这两个信号的组合;
自适应模块,所述自适应模块被配置为至少部分地基于所选的回波估计信号来确定回波传递函数,并且所述自适应模块还被配置为至少部分地基于所述回波传递函数来确定所估计的回波;
汇总器,所述汇总器从通过所述远场麦克风产生的信号中减去所估计的回波,以产生回波消除信号。
14.根据权利要求13所述的装置,其中,所述近场麦克风是差动式麦克风。
15.根据权利要求13所述的装置,其中,所述远端信号由功率放大器放大。
16.根据权利要求13所述的装置,其中,将所述扬声器和所述近场麦克风设置成彼此相距在约5mm以内。
17.根据权利要求13所述的装置,其中,将所述近场麦克风、所述远场麦克风以及所述扬声器设置在单个平台处。
18.根据权利要求13所述的装置,其中,在相同声学环境中,将所述近场麦克风和所述扬声器设置在单个平台处,并且将所述远场麦克风设置在另一平台中。
19.根据权利要求13所述的装置,其中,尽管所述差动式麦克风邻近所述扬声器,但是由于所述扬声器输出所述远端信号而导致的差压电平并没有使所述差动式麦克风超载。
20.根据权利要求19所述的装置,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
21.根据权利要求13所述的装置,其中,由于近端和噪音源距所述差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在所述差动式麦克风处可忽略。
22.根据权利要求21所述的装置,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于所述近端话音信号和所述环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
23.根据权利要求22所述的装置,由此,来自所述线性回波传递函数估计的回波传递估计然后用于估计非线性回波路径,并从通过所述远场语音麦克风捕获的麦克风信号中成功地减去非线性回波。
24.根据权利要求17所述的装置,其中,所述单个平台位于蜂窝电话、膝上型计算机、平板计算机、家庭自动化设备或其他近端语音通信设备、或能够进行音频回放并响应于语音输入的设备处。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462084221P | 2014-11-25 | 2014-11-25 | |
US62/084,221 | 2014-11-25 | ||
PCT/US2015/061569 WO2016085758A1 (en) | 2014-11-25 | 2015-11-19 | Reference microphone for non-linear and time variant echo cancellation |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107005763A true CN107005763A (zh) | 2017-08-01 |
Family
ID=56011562
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580063355.8A Pending CN107005763A (zh) | 2014-11-25 | 2015-11-19 | 用于非线性和时变回波消除的参考麦克风 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9712915B2 (zh) |
CN (1) | CN107005763A (zh) |
DE (1) | DE112015005296T5 (zh) |
TW (1) | TW201633804A (zh) |
WO (1) | WO2016085758A1 (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108260051A (zh) * | 2018-01-15 | 2018-07-06 | 深圳前海黑鲸科技有限公司 | 语音遥控系统、便携式传输设备及智能设备 |
CN108932949A (zh) * | 2018-09-05 | 2018-12-04 | 科大讯飞股份有限公司 | 一种参考信号获取方法及装置 |
CN112803959A (zh) * | 2019-11-13 | 2021-05-14 | 瑞昱半导体股份有限公司 | 收发电路与应用于收发电路的信号处理方法 |
CN113178203A (zh) * | 2021-04-23 | 2021-07-27 | 歌尔股份有限公司 | 一种回声消除方法、系统、音频设备及可读存储介质 |
CN113949977A (zh) * | 2020-07-17 | 2022-01-18 | 通用微(深圳)科技有限公司 | 声音采集装置、声音处理设备及方法、装置、存储介质 |
WO2022017141A1 (zh) * | 2020-07-21 | 2022-01-27 | 华为技术有限公司 | 滤除回声的方法、电子设备和计算机可读存储介质 |
CN114175606A (zh) * | 2019-06-17 | 2022-03-11 | 伯斯有限公司 | 模块化回波消除单元 |
CN114245281A (zh) * | 2021-12-09 | 2022-03-25 | 深圳市音络科技有限公司 | 一种语音性能测试方法及系统 |
CN117935837A (zh) * | 2024-03-25 | 2024-04-26 | 中国空气动力研究与发展中心计算空气动力研究所 | 一种时域多声源定位及噪声处理方法 |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11540057B2 (en) | 2011-12-23 | 2022-12-27 | Shenzhen Shokz Co., Ltd. | Bone conduction speaker and compound vibration device thereof |
US11950055B2 (en) * | 2014-01-06 | 2024-04-02 | Shenzhen Shokz Co., Ltd. | Systems and methods for suppressing sound leakage |
US11974097B2 (en) | 2014-01-06 | 2024-04-30 | Shenzhen Shokz Co., Ltd. | Systems and methods for suppressing sound leakage |
US11832060B2 (en) | 2014-01-06 | 2023-11-28 | Shenzhen Shokz Co., Ltd. | Systems and methods for suppressing sound leakage |
US11368800B2 (en) | 2014-01-06 | 2022-06-21 | Shenzhen Shokz Co., Ltd. | Systems and methods for suppressing sound leakage |
US11805375B2 (en) | 2014-01-06 | 2023-10-31 | Shenzhen Shokz Co., Ltd. | Systems and methods for suppressing sound leakage |
US9607627B2 (en) * | 2015-02-05 | 2017-03-28 | Adobe Systems Incorporated | Sound enhancement through deverberation |
EP3099047A1 (en) * | 2015-05-28 | 2016-11-30 | Nxp B.V. | Echo controller |
DE112016003649T5 (de) * | 2015-08-10 | 2018-05-09 | Knowles Electronics, Llc | Vorrichtung mit mehreren MEMS-Motoren mit gemeinsamer Entlüftung |
TWI579833B (zh) * | 2016-06-22 | 2017-04-21 | 瑞昱半導體股份有限公司 | 信號處理裝置與信號處理方法 |
US10026391B2 (en) | 2016-10-24 | 2018-07-17 | Merry Electronics(Shenzhen) Co., Ltd. | Microphone device with two sounds receiving modules and sound collecting trough |
US11166098B2 (en) | 2017-01-20 | 2021-11-02 | Hewlett-Packard Development Company, L.P. | Acoustic input devices comprising acoustic ports and transducers |
EP3376778B8 (en) * | 2017-03-13 | 2020-08-12 | ams International AG | Microphone and method of testing a microphone |
US10109292B1 (en) * | 2017-06-03 | 2018-10-23 | Apple Inc. | Audio systems with active feedback acoustic echo cancellation |
US10468020B2 (en) * | 2017-06-06 | 2019-11-05 | Cypress Semiconductor Corporation | Systems and methods for removing interference for audio pattern recognition |
WO2019143759A1 (en) | 2018-01-18 | 2019-07-25 | Knowles Electronics, Llc | Data driven echo cancellation and suppression |
CN112637736B (zh) * | 2018-04-26 | 2022-05-03 | 深圳市韶音科技有限公司 | 耳机系统及其麦克风装置 |
US11509994B2 (en) * | 2018-04-26 | 2022-11-22 | Shenzhen Shokz Co., Ltd. | Vibration removal apparatus and method for dual-microphone earphones |
KR102021994B1 (ko) * | 2018-08-29 | 2019-09-17 | 주식회사 싸이언 | 음성 방송시스템 및 그 음성 방송시스템의 역 필터를 이용한 음성 잔향 및 룸 공진 제거 방법 |
CN109817235B (zh) * | 2018-12-12 | 2024-05-24 | 深圳市潮流网络技术有限公司 | 一种VoIP设备的回声消除方法 |
TWI757600B (zh) * | 2019-05-07 | 2022-03-11 | 宏碁股份有限公司 | 揚聲器調整方法與使用此方法的電子裝置 |
US11437004B2 (en) * | 2019-06-20 | 2022-09-06 | Bose Corporation | Audio performance with far field microphone |
CN110602327B (zh) | 2019-09-24 | 2021-06-25 | 腾讯科技(深圳)有限公司 | 语音通话方法、装置、电子设备及计算机可读存储介质 |
CN111683329B (zh) * | 2020-05-30 | 2022-02-08 | 北京声智科技有限公司 | 麦克风检测方法、装置、终端及存储介质 |
TWI730840B (zh) * | 2020-07-13 | 2021-06-11 | 瑞昱半導體股份有限公司 | 回音估計系統以及回音估計方法 |
CN113949976B (zh) * | 2020-07-17 | 2022-11-15 | 通用微(深圳)科技有限公司 | 声音采集装置、声音处理设备及方法、装置、存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1819608A (zh) * | 2006-03-13 | 2006-08-16 | 华南理工大学 | 基于simo信道盲辨识的多路回波消除系统 |
CN1822709A (zh) * | 2006-03-24 | 2006-08-23 | 北京中星微电子有限公司 | 一种麦克风回声消除系统 |
CN1826797A (zh) * | 2003-05-27 | 2006-08-30 | 皇家飞利浦电子股份有限公司 | 具有回波消除系统的扬声器-麦克风系统和回波消除方法 |
CN200983612Y (zh) * | 2006-03-13 | 2007-11-28 | 华南理工大学 | 基于simo信道盲辨识的多路回波消除系统 |
CN101719969A (zh) * | 2009-11-26 | 2010-06-02 | 美商威睿电通公司 | 判断双端对话的方法、系统以及消除回声的方法和系统 |
CN103796135A (zh) * | 2012-10-31 | 2014-05-14 | 马克西姆综合产品公司 | 具有回声消除的动态扬声器管理 |
US8811602B2 (en) * | 2011-06-30 | 2014-08-19 | Broadcom Corporation | Full duplex speakerphone design using acoustically compensated speaker distortion |
CN104041073A (zh) * | 2011-12-06 | 2014-09-10 | 苹果公司 | 近场零位与波束成形 |
Family Cites Families (79)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
NL8802516A (nl) * | 1988-10-13 | 1990-05-01 | Philips Nv | Hoorapparaat met rondzing onderdrukking. |
US5561737A (en) * | 1994-05-09 | 1996-10-01 | Lucent Technologies Inc. | Voice actuated switching system |
US6070140A (en) | 1995-06-05 | 2000-05-30 | Tran; Bao Q. | Speech recognizer |
US5822598A (en) | 1996-07-12 | 1998-10-13 | Ast Research, Inc. | Audio activity detection circuit to increase battery life in portable computers |
EP0867856B1 (fr) | 1997-03-25 | 2005-10-26 | Koninklijke Philips Electronics N.V. | "Méthode et dispositif de detection d'activité vocale" |
US6249757B1 (en) | 1999-02-16 | 2001-06-19 | 3Com Corporation | System for detecting voice activity |
US6397186B1 (en) | 1999-12-22 | 2002-05-28 | Ambush Interactive, Inc. | Hands-free, voice-operated remote control transmitter |
US6756700B2 (en) | 2002-03-13 | 2004-06-29 | Kye Systems Corp. | Sound-activated wake-up device for electronic input devices having a sleep-mode |
GB2405949A (en) | 2003-09-12 | 2005-03-16 | Canon Kk | Voice activated device with periodicity determination |
US7418392B1 (en) | 2003-09-25 | 2008-08-26 | Sensory, Inc. | System and method for controlling the operation of a device by voice commands |
US7643630B2 (en) * | 2004-06-25 | 2010-01-05 | Texas Instruments Incorporated | Echo suppression with increment/decrement, quick, and time-delay counter updating |
US20050285935A1 (en) | 2004-06-29 | 2005-12-29 | Octiv, Inc. | Personal conferencing node |
US20060074658A1 (en) | 2004-10-01 | 2006-04-06 | Siemens Information And Communication Mobile, Llc | Systems and methods for hands-free voice-activated devices |
US7508948B2 (en) | 2004-10-05 | 2009-03-24 | Audience, Inc. | Reverberation removal |
US8204252B1 (en) | 2006-10-10 | 2012-06-19 | Audience, Inc. | System and method for providing close microphone adaptive array processing |
US9185487B2 (en) | 2006-01-30 | 2015-11-10 | Audience, Inc. | System and method for providing noise suppression utilizing null processing noise subtraction |
US20160066087A1 (en) | 2006-01-30 | 2016-03-03 | Ludger Solbach | Joint noise suppression and acoustic echo cancellation |
US8194880B2 (en) | 2006-01-30 | 2012-06-05 | Audience, Inc. | System and method for utilizing omni-directional microphones for speech enhancement |
US8744844B2 (en) | 2007-07-06 | 2014-06-03 | Audience, Inc. | System and method for adaptive intelligent noise suppression |
US8949120B1 (en) | 2006-05-25 | 2015-02-03 | Audience, Inc. | Adaptive noise cancelation |
US8204253B1 (en) | 2008-06-30 | 2012-06-19 | Audience, Inc. | Self calibration of audio device |
US7957972B2 (en) | 2006-09-05 | 2011-06-07 | Fortemedia, Inc. | Voice recognition system and method thereof |
US8259926B1 (en) | 2007-02-23 | 2012-09-04 | Audience, Inc. | System and method for 2-channel and 3-channel acoustic echo cancellation |
US8189766B1 (en) | 2007-07-26 | 2012-05-29 | Audience, Inc. | System and method for blind subband acoustic echo cancellation postfiltering |
US8143620B1 (en) | 2007-12-21 | 2012-03-27 | Audience, Inc. | System and method for adaptive classification of audio sources |
US8194882B2 (en) | 2008-02-29 | 2012-06-05 | Audience, Inc. | System and method for providing single microphone noise suppression fallback |
US8355511B2 (en) | 2008-03-18 | 2013-01-15 | Audience, Inc. | System and method for envelope-based acoustic echo cancellation |
US8244528B2 (en) | 2008-04-25 | 2012-08-14 | Nokia Corporation | Method and apparatus for voice activity determination |
US8774423B1 (en) | 2008-06-30 | 2014-07-08 | Audience, Inc. | System and method for controlling adaptivity of signal modification using a phantom coefficient |
JP5228932B2 (ja) | 2009-01-16 | 2013-07-03 | 沖電気工業株式会社 | 音信号調整装置、プログラム及び方法、並びに、電話装置 |
US8472616B1 (en) | 2009-04-02 | 2013-06-25 | Audience, Inc. | Self calibration of envelope-based acoustic echo cancellation |
US8275148B2 (en) | 2009-07-28 | 2012-09-25 | Fortemedia, Inc. | Audio processing apparatus and method |
US8615392B1 (en) | 2009-12-02 | 2013-12-24 | Audience, Inc. | Systems and methods for producing an acoustic field having a target spatial pattern |
US8526628B1 (en) | 2009-12-14 | 2013-09-03 | Audience, Inc. | Low latency active noise cancellation system |
US8848935B1 (en) | 2009-12-14 | 2014-09-30 | Audience, Inc. | Low latency active noise cancellation system |
US8488805B1 (en) | 2009-12-29 | 2013-07-16 | Audience, Inc. | Providing background audio during telephonic communication |
US20110178800A1 (en) | 2010-01-19 | 2011-07-21 | Lloyd Watts | Distortion Measurement for Noise Suppression System |
US8718290B2 (en) | 2010-01-26 | 2014-05-06 | Audience, Inc. | Adaptive noise reduction using level cues |
US9008329B1 (en) | 2010-01-26 | 2015-04-14 | Audience, Inc. | Noise reduction using multi-feature cluster tracker |
US8204210B2 (en) * | 2010-02-09 | 2012-06-19 | Nxp B.V. | Method and system for nonlinear acoustic echo cancellation in hands-free telecommunication devices |
US8538035B2 (en) | 2010-04-29 | 2013-09-17 | Audience, Inc. | Multi-microphone robust noise suppression |
US8958572B1 (en) | 2010-04-19 | 2015-02-17 | Audience, Inc. | Adaptive noise cancellation for multi-microphone systems |
US8606571B1 (en) | 2010-04-19 | 2013-12-10 | Audience, Inc. | Spatial selectivity noise reduction tradeoff for multi-microphone systems |
US8473287B2 (en) | 2010-04-19 | 2013-06-25 | Audience, Inc. | Method for jointly optimizing noise reduction and voice quality in a mono or multi-microphone system |
US8781137B1 (en) | 2010-04-27 | 2014-07-15 | Audience, Inc. | Wind noise detection and suppression |
US8447596B2 (en) | 2010-07-12 | 2013-05-21 | Audience, Inc. | Monaural noise suppression based on computational auditory scene analysis |
US8761410B1 (en) | 2010-08-12 | 2014-06-24 | Audience, Inc. | Systems and methods for multi-channel dereverberation |
US8611552B1 (en) | 2010-08-25 | 2013-12-17 | Audience, Inc. | Direction-aware active noise cancellation system |
US8447045B1 (en) | 2010-09-07 | 2013-05-21 | Audience, Inc. | Multi-microphone active noise cancellation system |
US8682006B1 (en) | 2010-10-20 | 2014-03-25 | Audience, Inc. | Noise suppression based on null coherence |
CN102741918B (zh) | 2010-12-24 | 2014-11-19 | 华为技术有限公司 | 用于话音活动检测的方法和设备 |
US8606249B1 (en) | 2011-03-07 | 2013-12-10 | Audience, Inc. | Methods and systems for enhancing audio quality during teleconferencing |
US9007416B1 (en) | 2011-03-08 | 2015-04-14 | Audience, Inc. | Local social conference calling |
US8996381B2 (en) | 2011-09-27 | 2015-03-31 | Sensory, Incorporated | Background speech recognition assistant |
US8666751B2 (en) | 2011-11-17 | 2014-03-04 | Microsoft Corporation | Audio pattern matching for device activation |
US9020163B2 (en) | 2011-12-06 | 2015-04-28 | Apple Inc. | Near-field null and beamforming |
US8750526B1 (en) | 2012-01-04 | 2014-06-10 | Audience, Inc. | Dynamic bandwidth change detection for configuring audio processor |
US9197974B1 (en) | 2012-01-06 | 2015-11-24 | Audience, Inc. | Directional audio capture adaptation based on alternative sensory input |
US8737188B1 (en) | 2012-01-11 | 2014-05-27 | Audience, Inc. | Crosstalk cancellation systems and methods |
US9838810B2 (en) | 2012-02-27 | 2017-12-05 | Qualcomm Technologies International, Ltd. | Low power audio detection |
TWI474317B (zh) | 2012-07-06 | 2015-02-21 | Realtek Semiconductor Corp | 訊號處理裝置以及訊號處理方法 |
US20140105411A1 (en) | 2012-10-16 | 2014-04-17 | Peter Santos | Methods and systems for karaoke on a mobile device |
US20140112496A1 (en) | 2012-10-19 | 2014-04-24 | Carlo Murgia | Microphone placement for noise cancellation in vehicles |
US9704486B2 (en) | 2012-12-11 | 2017-07-11 | Amazon Technologies, Inc. | Speech recognition power management |
WO2014131054A2 (en) | 2013-02-25 | 2014-08-28 | Audience, Inc. | Dynamic audio perspective change during video playback |
US10395651B2 (en) | 2013-02-28 | 2019-08-27 | Sony Corporation | Device and method for activating with voice input |
US9349386B2 (en) | 2013-03-07 | 2016-05-24 | Analog Device Global | System and method for processor wake-up based on sensor data |
US9112984B2 (en) | 2013-03-12 | 2015-08-18 | Nuance Communications, Inc. | Methods and apparatus for detecting a voice command |
US9361885B2 (en) | 2013-03-12 | 2016-06-07 | Nuance Communications, Inc. | Methods and apparatus for detecting a voice command |
US11393461B2 (en) | 2013-03-12 | 2022-07-19 | Cerence Operating Company | Methods and apparatus for detecting a voice command |
US9703350B2 (en) | 2013-03-15 | 2017-07-11 | Maxim Integrated Products, Inc. | Always-on low-power keyword spotting |
US9083782B2 (en) | 2013-05-08 | 2015-07-14 | Blackberry Limited | Dual beamform audio echo reduction |
EP2801974A3 (en) | 2013-05-09 | 2015-02-18 | DSP Group Ltd. | Low power activation of a voice activated device |
US20140343949A1 (en) | 2013-05-17 | 2014-11-20 | Fortemedia, Inc. | Smart microphone device |
CN104519212B (zh) * | 2013-09-27 | 2017-06-20 | 华为技术有限公司 | 一种消除回声的方法及装置 |
US9245527B2 (en) | 2013-10-11 | 2016-01-26 | Apple Inc. | Speech recognition wake-up of a handheld portable electronic device |
US20150112690A1 (en) | 2013-10-22 | 2015-04-23 | Nvidia Corporation | Low power always-on voice trigger architecture |
US10079019B2 (en) | 2013-11-12 | 2018-09-18 | Apple Inc. | Always-on audio control for mobile device |
US9799330B2 (en) | 2014-08-28 | 2017-10-24 | Knowles Electronics, Llc | Multi-sourced noise suppression |
-
2015
- 2015-11-18 US US14/944,474 patent/US9712915B2/en active Active
- 2015-11-19 WO PCT/US2015/061569 patent/WO2016085758A1/en active Application Filing
- 2015-11-19 DE DE112015005296.8T patent/DE112015005296T5/de not_active Ceased
- 2015-11-19 CN CN201580063355.8A patent/CN107005763A/zh active Pending
- 2015-11-25 TW TW104139052A patent/TW201633804A/zh unknown
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1826797A (zh) * | 2003-05-27 | 2006-08-30 | 皇家飞利浦电子股份有限公司 | 具有回波消除系统的扬声器-麦克风系统和回波消除方法 |
CN1819608A (zh) * | 2006-03-13 | 2006-08-16 | 华南理工大学 | 基于simo信道盲辨识的多路回波消除系统 |
CN200983612Y (zh) * | 2006-03-13 | 2007-11-28 | 华南理工大学 | 基于simo信道盲辨识的多路回波消除系统 |
CN1822709A (zh) * | 2006-03-24 | 2006-08-23 | 北京中星微电子有限公司 | 一种麦克风回声消除系统 |
CN101719969A (zh) * | 2009-11-26 | 2010-06-02 | 美商威睿电通公司 | 判断双端对话的方法、系统以及消除回声的方法和系统 |
US8811602B2 (en) * | 2011-06-30 | 2014-08-19 | Broadcom Corporation | Full duplex speakerphone design using acoustically compensated speaker distortion |
CN104041073A (zh) * | 2011-12-06 | 2014-09-10 | 苹果公司 | 近场零位与波束成形 |
CN103796135A (zh) * | 2012-10-31 | 2014-05-14 | 马克西姆综合产品公司 | 具有回声消除的动态扬声器管理 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108260051A (zh) * | 2018-01-15 | 2018-07-06 | 深圳前海黑鲸科技有限公司 | 语音遥控系统、便携式传输设备及智能设备 |
CN108932949A (zh) * | 2018-09-05 | 2018-12-04 | 科大讯飞股份有限公司 | 一种参考信号获取方法及装置 |
CN114175606A (zh) * | 2019-06-17 | 2022-03-11 | 伯斯有限公司 | 模块化回波消除单元 |
CN114175606B (zh) * | 2019-06-17 | 2024-02-06 | 伯斯有限公司 | 模块化回波消除单元 |
CN112803959A (zh) * | 2019-11-13 | 2021-05-14 | 瑞昱半导体股份有限公司 | 收发电路与应用于收发电路的信号处理方法 |
CN112803959B (zh) * | 2019-11-13 | 2022-05-10 | 瑞昱半导体股份有限公司 | 收发电路与应用于收发电路的信号处理方法 |
CN113949977B (zh) * | 2020-07-17 | 2023-08-11 | 通用微(深圳)科技有限公司 | 声音采集装置、声音处理设备及方法、装置、存储介质 |
CN113949977A (zh) * | 2020-07-17 | 2022-01-18 | 通用微(深圳)科技有限公司 | 声音采集装置、声音处理设备及方法、装置、存储介质 |
WO2022017141A1 (zh) * | 2020-07-21 | 2022-01-27 | 华为技术有限公司 | 滤除回声的方法、电子设备和计算机可读存储介质 |
CN113178203A (zh) * | 2021-04-23 | 2021-07-27 | 歌尔股份有限公司 | 一种回声消除方法、系统、音频设备及可读存储介质 |
CN113178203B (zh) * | 2021-04-23 | 2022-11-04 | 歌尔股份有限公司 | 一种回声消除方法、系统、音频设备及可读存储介质 |
CN114245281A (zh) * | 2021-12-09 | 2022-03-25 | 深圳市音络科技有限公司 | 一种语音性能测试方法及系统 |
CN114245281B (zh) * | 2021-12-09 | 2024-03-19 | 深圳市音络科技有限公司 | 一种语音性能测试方法及系统 |
CN117935837A (zh) * | 2024-03-25 | 2024-04-26 | 中国空气动力研究与发展中心计算空气动力研究所 | 一种时域多声源定位及噪声处理方法 |
CN117935837B (zh) * | 2024-03-25 | 2024-05-24 | 中国空气动力研究与发展中心计算空气动力研究所 | 一种时域多声源定位及噪声处理方法 |
Also Published As
Publication number | Publication date |
---|---|
US20160150337A1 (en) | 2016-05-26 |
TW201633804A (zh) | 2016-09-16 |
DE112015005296T5 (de) | 2017-08-24 |
US9712915B2 (en) | 2017-07-18 |
WO2016085758A1 (en) | 2016-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107005763A (zh) | 用于非线性和时变回波消除的参考麦克风 | |
CN107636758B (zh) | 声学回声消除系统和方法 | |
KR102196012B1 (ko) | 트랜스듀서 상태의 검출에 기초하여 오디오 트랜스듀서의 성능을 향상시키는 방법들 및 시스템들 | |
EP3058563B1 (en) | Limiting active noise cancellation output | |
KR102292773B1 (ko) | 개인용 오디오 장치의 적어도 일부를 구현하기 위한 집적 회로 및 변환기의 부근에서의 주변 오디오 사운드들을 소거하기 위한 방법 | |
EP3081006B1 (en) | Systems and methods for providing adaptive playback equalization in an audio device | |
JP5394373B2 (ja) | オーディオ信号を処理する装置及び方法 | |
CN101853667B (zh) | 一种语音降噪装置 | |
US9344050B2 (en) | Dynamic speaker management with echo cancellation | |
CN104243732A (zh) | 振动传感器在回声消除中的使用 | |
US20140334620A1 (en) | Method for processing an audio signal and audio receiving circuit | |
CN105284126A (zh) | 包括自适应消噪系统的系数的动态偏置的自适应消噪系统及方法 | |
US20160300563A1 (en) | Active noise cancellation featuring secondary path estimation | |
CN108140380B (zh) | 具有部分地由固定响应滤波器提供的反馈响应的自适应消噪反馈控制器及方法 | |
CN108028983A (zh) | 基于换能器阻抗的非线性声学回声消除 | |
US20040001597A1 (en) | Audio communication system and method with improved acoustic characteristics | |
US10013966B2 (en) | Systems and methods for adaptive active noise cancellation for multiple-driver personal audio device | |
CN103796135B (zh) | 具有回声消除的动态扬声器管理 | |
US10540984B1 (en) | System and method for echo control using adaptive polynomial filters in a sub-band domain | |
WO2023070786A1 (zh) | 一种音频降噪方法及音频监控装置 | |
US20130329882A1 (en) | Half-Duplex Speakerphone Echo Canceler | |
Das et al. | A new cross correlation based double talk detection algorithm for nonlinear acoustic echo cancellation | |
US11700485B2 (en) | Differential audio data compensation | |
Dhull et al. | Performance variation of lms and its different variants | |
Kuech | Approaches to nonlinear acoustic echo cancellation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170801 |
|
WD01 | Invention patent application deemed withdrawn after publication |