CN107005763A - 用于非线性和时变回波消除的参考麦克风 - Google Patents

用于非线性和时变回波消除的参考麦克风 Download PDF

Info

Publication number
CN107005763A
CN107005763A CN201580063355.8A CN201580063355A CN107005763A CN 107005763 A CN107005763 A CN 107005763A CN 201580063355 A CN201580063355 A CN 201580063355A CN 107005763 A CN107005763 A CN 107005763A
Authority
CN
China
Prior art keywords
microphone
echo
signal
loudspeaker
field microphone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580063355.8A
Other languages
English (en)
Inventor
D·南迪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Knowles Electronics LLC
Original Assignee
Knowles Electronics LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Knowles Electronics LLC filed Critical Knowles Electronics LLC
Publication of CN107005763A publication Critical patent/CN107005763A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/02Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R19/00Electrostatic transducers
    • H04R19/02Loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R19/00Electrostatic transducers
    • H04R19/04Microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/04Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • H04R3/06Circuits for transducers, loudspeakers or microphones for correcting frequency response of electrostatic transducers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L2021/02082Noise filtering the noise being echo, reverberation of the speech
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/05Noise reduction with a separate noise microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H04R2430/21Direction finding using differential microphone array [DMA]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/11Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)

Abstract

接收远端信号,该远端信号来自远端用户并在扬声器处被广播。确定用于回波传递函数的信号,并在如下信号之间选出该信号:远端信号或从紧邻扬声器设置的近场麦克风接收到的回波参考信号。相比于扬声器信号,近场麦克风以可忽略的能级感测从扬声器广播的远端信号,同时感测近端语音和环境噪音。至少部分地基于所选信号来确定回波传递函数,并且该回波传递函数代表扬声器和远场麦克风之间的声路径的特性,该远场麦克风与近场麦克风相比,设置在距扬声器更远的距离处。至少部分地基于回波传递函数来确定估计回波。从由远场麦克风接收到的信号中减去所估计的回波,该减去步骤有效于消除在从远端麦克风接收到的信号中存在的回波。

Description

用于非线性和时变回波消除的参考麦克风
相关申请的交叉引用
根据美国专利法律35U.S.C.§119(e),本申请要求于2014年11月25日提交的、名称为“Reference Microphone for Non-linear and time variant echo cancellation(用于非线性和时变回波消除的参考麦克风)”的美国临时申请No.62084221的权益,其全部内容通过引入而并入本文。
技术领域
本申请涉及声回波消除方法(acoustic echo canceling approach),例如用于移动电话的声回波消除方法。
背景技术
在双向远程通信系统中,声回波源于通过扬声器(loudspeaker)输出的、在通常被称为近端装置的相同装置上由麦克风捕获的信号。该捕获的结果是,在远程通信延迟后,会话另一侧的用户(远端用户)听见作为回波的自身声音。可证明的是,回波不利于进行自然会话,并且针对免提电话会话需要消除回波的方法。
免提电话装置有时使用全双工声回波消除(AEC:acoustic echo cancellation)算法,来消除回波语音并最大程度降低影响会话质量。可以在发送到扬声器的信号和通过麦克风捕获的信号之间建立纯线性相关性时,AEC算法最适用。
在目前的移动装置中,朝向便携式和更轻薄工业设计的驱动已使得这些装置内体积变得更小。声学性能在有效体积内受此约束。针对轻薄优雅的设计,需要使用更小、更薄的扬声器。因此,可以移动更少量的空气,导致声压级(SPL:sound pressure level)降低,尤其是在较低频率情况下。当初始设备制造商(OEM)设计出小规格扬声器时,所产生的扬声器无法实现预期SPL。音频系统工程师可以过驱动(overdrive)扬声器和功率放大器,以获得预期SPL。然而,对扬声器尺寸的约束通常导致非线性输出。
一般来说,扬声器振动在小和高振幅时表现不同。对振幅的依赖性是对系统中固有非线性的指示。过驱动扬声器同样通过扬声器振膜的过度振幅,来引起非线性失真(软限幅的结果)。该次级非线性效应是生成不在激发刺激物中的额外谱分量。它们通常是作为多个基频之间的谐波或互调失真的、所应用的基频的整数倍。同样利用谐波生成来过驱动小型扬声器,因为低频基频的谐波可以在心理声学上填充低频损耗,使得音频频谱下端声音比其更加饱满。
影响小型扬声器中非线性行为的一个因素是磁力因素Bl(x)。当磁场不均匀时,磁力因素是位移的函数。这在更小型扬声器中具有更大影响。另一因素是悬挂柔性(Compliance)Cms(x)或者相反地,悬挂刚度Kms(x)。这是悬挂的回复力作为距离的函数而增加。又一因素是机械阻力Rms(v)并且此因素取决于线圈的速度。机械阻力随任一方向中速度的递增而增加。
免提电话应用的回波路径中非线性的主要原因通常是扬声器。所有这些因素影响施加到振膜上的力,其进一步影响音圈的位移和速度。这是在这些因素之间互相作用的非线性反馈回路。Bl(x)和Kms(x)产生DC分量,而Rms(v)使得谐振时基频压缩。这些经由反馈人体影响总谐波失真(THD:Total Harmonic Distortion)和互调失真(IMD:InterModulation Distortio)。扬声器中主导的非线性可能显著影响输出信号。
过驱动超规格扬声器同样能够使扬声器失效,因为过度振幅可以使振膜摆动,并且因为扬声器音圈中的余热同样可以使扬声器失效。电子反馈补偿可以用于扬声器防护。扬声器防护技术测量音圈上的电流和电压,以估计温度和偏移,并且自适应地将这些限定在针对最高可能SPL和更佳可听性的最大程度以下。这提高了扬声器的寿命,同时提取最高性能。
扬声器防护技术采用自适应算法,以管理输出信号动力学,为了制约偏移(excursion),限制温度并最大程度降低THD,同时最大程度提高输出功率。相比于AEC使用的信号,扬声器输出在时间和频率方面不断变化。因此,扬声器信号输出电平可以与AEC算法通常使用作为回波参考信号的远端信号在时间上进行高度的去相关处理,即,即使在准稳态意义上,其也不再是时间恒定的。
小型扬声器用于移动音频,原因如下:通过市场营销和工业设计要求驱动的对尺寸的约束;用于扬声器声学(包括背体积)的小空间;用于携带的移动性和便利性的纤薄装置;制造商的经济性决策;以及在竞争相当激烈的市场中用料清单及成本的控制。
鉴于工程和市场决策,通常过驱动小型扬声器。这些扬声器需要满足使用时的目标SPL,并诱发低频基频的谐波失真,以增强低音感受,尤其是当低频在更小型扬声器中被衰减时。
用于AEC算法的扬声器非线性和扬声器防护算法的结果是,并未维持回波参考信号和实际扬声器输出之间的线性非时变关系。这可以导致较差的AEC性能。
存在若干与这种非线性系统标识有关的问题,并且先前算法不足以在线性条件下匹配AEC的性能。非线性AEC(NLAEC)算法的计算复杂性同样显著超过线性AEC算法。此外,过驱动用于导出这种使用情况的足够输出的小型扬声器的必要性,同样导致开发随时间变化的扬声器防护算法,其根据源自于扬声器的实时性能参数,动态地调节扬声器的驱动功率。这可以导致非线性的减少,但引起随时间变化的扬声器输出系统。这同样引发在AEC算法的收敛问题,这通常发生在扬声器防护算法之前导出的参考信号。
所有这些问题已经导致一些用户对先前方法的不满。
附图说明
为了更完整地理解本公开,应参照下述详细说明及附图,其中:
图1包括根据本发明的各种实施方式的、麦克风系统的框图;
图2包括根据本发明的各种实施方式的、声压级与距源的距离的曲线图;
图3包括根据本发明的各种实施方式的、声压级与全向对差动式麦克风的对数距离的关系的曲线图;
图4包括根据本发明的各种实施方式的、差动式麦克风的一示例的框图;
图5包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图;
图6包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图;
图7包括根据本发明的各种实施方式的、差动式麦克风的另一示例的框图。
本领域技术人员应当理解,附图中的元素是为了简单和明了而示出。还应当理解,可以以出现的特定顺序来对某些操作和/或步骤进行描述或者描写,但是本领域技术人员应能够理解对顺序的这种特殊性实际上是不需要的。还应该理解,本文中使用的术语和措辞具有与其各自相应的探究和研究领域相对应的这种术语和措辞的普通含义,除非本文中规定了其具有特定的含义。
具体实施方式
本方法提供了在诸如电话和移动无线装置(例如,移动电话或智能电话)这样的电子装置中的声回波消除。在一特定示例中,移动电话可以作为免提电话使用,并且来自扬声器的信号由装置上的麦克风捕获,并被回波反射回发出原声的人员。在诸如移动智能电话这样的特定消费者装置中,扬声器和功率放大器通常可以在其线性操作范围外驱动。
在这种情况下,对线性声回波消除(AEC)算法进行修改,以试图识别并消除回波的非线性分量。本方法解决了在非线性和时变条件下声回波消除的问题,并为线性非时变系统上运行的分量提供改进的性能和降低的AEC算法复杂性。
本文所呈现的方法涉及语音电话,并且更具体地涉及用于移动电话的声回波消除方法。然而,应当理解,本文所呈现的理念可以有效地用于声回波消除设置,其中,从扬声器输出的信号不再与通过回放应用播放的信号呈线性和时间恒定相关。
在若干此类实施方式中,接收到来自远端用户的远端信号并在扬声器处广播远端信号。确定用于估计回波传递函数的信号,在如下信号之间选出该信号:远端信号或从紧邻扬声器设置的近场麦克风接收到的回波参考信号。近场麦克风感测从扬声器广播的远端信号。至少部分地基于所选信号来确定回波传递函数,并且回波传递函数代表扬声器和远场麦克风之间的声路径的特性,该远场麦克风与近场麦克风相比设置在距扬声器更远的距离处。至少部分地基于回波传递函数来确定估计回波。从由远场麦克风接收到的信号中减去所估计的回波,并且减去步骤有效于消除在从远端麦克风接收到的信号中存在的回波。
在某些方面,近场麦克风是差动式麦克风。在其他方面,远端信号由功率放大器放大。
在某些示例中,将扬声器和近场麦克风设置成彼此相距在约5mm以内。在其他示例中,将近场麦克风、远场麦克风以及扬声器设置在单个平台处。在其他示例中,在相同声学环境中,将近场麦克风和扬声器设置在单个平台处,并且,将远场麦克风设置在另一平台中。
在某些方面,尽管差动式麦克风邻近扬声器,但是由于扬声器输出远端信号而导致的差压电平并没有使差动式麦克风超载。在其他方面,在差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的(insignificant)能量,允许回波传递函数估计处理呈线性处理。
在某些示例中,由于近端和噪音源距差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在差动式麦克风处可忽略。在其他方面,在差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理呈线性处理。
在某些示例中,来自线性回波传递函数估计的回波传递估计用于估计非线性回波路径,并从通过远场语音麦克风所捕获的麦克风信号中成功地减去非线性回波。在某些示例中,单个平台位于移动电话、膝上型计算机或平板计算机、家庭自动化设备或其他近端语音通信设备、或能够音频回放并响应于语音输入的设备。其他示例也是可能的。
在其他这些示例中,涉及一种装置,其包括:近场麦克风,该近场麦克风用于接收来自扬声器的声音,并产生回波参考信号;以及远场麦克风,该远场麦克风用于接收来自扬声器的声音。近场麦克风与扬声器紧邻布置。该装置包括:回波参考控制模块,该回波参考控制模块被配置为自适应地并动态地确定回波估计信号,以估计回波传递函数,从如下信号之间选出该信号:从近场麦克风接收到的回波参考信号和来自远端用户的远端信号,或这两个信号的组合。该装置还包括:自适应模块,该自适应模块被配置为至少部分地基于所选回波估计信号来确定回波传递函数,并且自适应模块还被配置为至少部分地基于回波传递函数来确定所估计的回波。该装置还包括:汇总器,该汇总器从通过远场麦克风产生的信号中减去所估计的回波,以产生回波消除信号。
现参照图1,描述了回波消除系统100的示例。系统100包括:扬声器-封闭-麦克风-系统(LEMS:loudspeaker-enclosure-microphone-system)102。LEMS 102包括:功率放大器104(放大输入信号)、扬声器106(向用户提供信号)、近场麦克风108(紧邻用作紧邻噪音消除麦克风装置的扬声器106)、以及远场麦克风110。扬声器106可以是任意类型的、将电信号转换成声能的扬声器或接收机。在一示例中,扬声器106是扬声器。在一示例中的麦克风108是下述差动式麦克风。
系统100还包括:回波参考控制模块120、控制逻辑122、自适应算法124、以及滤波器路径126。回波参考控制模块120的功能是:自适应地确定用于确定回波传递函数(回波参考来自麦克风108)的信号N{x(n)}或远端信号x(n)。这可以通过将回波参考信号与通过麦克风108拾取的回波信号进行比较,确定扬声器中非线性的数量来实现。控制逻辑122的功能是与回波参考控制模块120协同作业,以管理自适应算法124,从而在该过程中使用适当输入。自适应算法124的功能是估计回波传递函数。它可以是若干标准中的一个,并被证实是线性声回波消除算法。滤波器路径126的功能用于建模声回波路径,从而复制可以在声回波消除器中消除的真实回波。
如图1所示,将紧邻噪音消除麦克风装置108放置为邻近紧凑型移动设备中的扬声器106。"紧邻"是指小于约5mm的距离。其他距离也是可能的。紧邻扬声器106允许麦克风108拾取基准回波信号,同时对来自其他声源的信号具有免疫性。
麦克风108用作远端回波参考麦克风。因为扬声器106中的所有非线性均已考虑到,所以这允许回波参考相对于来自麦克风110的主麦克风回波信号呈线性关系。结合初始远端参考信号(通过例如回波消除器的当前可用实施方式中的软件,在内部提供的),这种信号源导致甚至在高度非线性驱动的扬声器系统中的优异AEC性能,算法复杂性的要点或许在移动系统中失效。远端参考将提供用于通过双端口麦克风拾取回波参考的远端语音活动检测触发器。这依次提供如通过如下等式给出的、提供给适当的线性声回波消除器算法的参考信号。当线性条件成立时,相反可以使用诸如NLMS、FD-NLMS、MDF或类似算法这样的最优算法。
在图1的双向远程通信系统中,声回波源于通过扬声器106输出的、在通常被称为近端的相同装置上由麦克风110所捕获的信号。该捕获的结果是,在远程通信延迟后,会话另一侧(远端)的用户听见作为回波的自身声音。可证明地是,回波不利于进行自然会话,并且免提电话会话需要消除回波的方法。一方面,系统100使用全双工声回波消除(AEC)算法(经由自适应算法124实施),来消除回波语音,以最大程度降低影响会话质量。可以在发送到扬声器106的信号和通过麦克风110捕获的信号之间建立纯线性相关性时,AEC算法最适用。
如图1所示,将来自远端的信号132在声学上通过扬声器106广播到用户聆听免提电话装置的房间中。此外,麦克风110捕获连同广播扬声器信号的回波和任何背景噪音的用户语音(近端语音)。扬声器106、房间(封闭)以及麦克风108和110都包括LEMS 102。假设LEMS 102呈线性,可以建模回波,作为远端信号x(n)和LEMS声响应h(n)的乘积,即
d(n)=h(n)*x(n) (1)
使用扬声器106和麦克风110的线性模型,将扬声器106和麦克风110之间的声路径及相关线性增益集中到房间的声响应或回波路径传递函数。因而,可以建模LEMS声响应h(n),作为有限脉冲响应(FIR)滤波器h(n)。然后,该回波是远端信号x(n)(表示为向量)的函数。
d(n)=h(n)Tx(n) (2)
AEC算法124的目标是从麦克风信号中去除回波信号d(n),从而远端用户无法对其进行察觉。这必须在近端话音信号s(n)不失真的情况下完成。AEC算法124的通用方法是自适应地估计从扬声器至麦克风的回波路径。然后将此估计应用于远端信号,以再生回波,从而可以从麦克风信号s(n)和汇总器129中减去。在环境噪音v(n)的情况下,这是复杂的。麦克风信号是回波、近端信号和噪音的总和。
y(n)=d(n)+s(n)+v(n)=h(n)Tx(n)+s(n)+v(n) (3)
驱动回波消除器,以通过自适应算法收敛于回波路径的有限脉冲响应横向滤波器估计所估计的回波可以写作所建模的回波路径与扬声器信号的函数。
将回波消除后的信号e(n)限定为误差信号,麦克风信号和估计回波之间的差值:
该问题可以通过使误差的适当函数最小化来解决。通常选择均方误差E{e2(n)},此标准具有单一全局极小值,只要系统维持其线性。这允许可以收敛于全局极小值的若干自适应方法。很多此类方法采用LMS(最小均方值)自适应算法的时间或频域变量。该算法也是公知的并且在此用作线性声回波消除的代表方法。LMS算法采用"最陡下降(steepestdecent)",来接近全局极小值。可以通过最小化均方误差并进行误差e(n)和输入x(n)之间的瞬时梯度估计,来导出滤波器路径估计的LMS更新等式。
这里,μ是学习速率因子。它可以示出为受限于输入自相关的最大本征值,并且算法的总收敛性受本征值扩展的制约。LMS算法对输入的功率敏感。这种依赖性通常通过使用输入功率x(n)Tx(n)来正常化更新分量来移除。
上述等式假设LEMS系统中的时间变化足够慢,使得自适应算法可以收敛于比声路径转换更迅捷的正确解决方案。这通常成立,只要没有超出针对自适应算法进行抽头(tapped)的点,来修改参考回波信号。
当前方法通过考虑扬声器响应的非线性,来线性化声回波问题。因此,可以采用通用的低复杂度线性AEC算法,来代替具有其相关问题的复杂非线性AEC算法。
更具体地,麦克风108用于拾取回波参考信号。扬声器106和回波参考麦克风108被配置为在邻近(极近场)处具有声端口。可以将这种回波参考麦克风设计成,对紧邻的音频信号敏感并且极大幅度地削弱远场信号。将这两个端口分开的示例距离可能小于约5mm。近端源通常是该距离的至少5至25倍以上,即25 mm到125 mm以上。有利地的是,一方面,当前方法线性地捕获扬声器106端口附近的音频,同时对近端目标信号和周围音频具有可忽略的灵敏度。这可以在一示例中通过使用麦克风108的差动式麦克风来实现。
可以理解的是,一般来说,可以使用由下述声学机构限定的、具有近场响应的麦克风作为回波参考信号的源。这种麦克风带有具有极高衰减敏感度的近场响应,作为从麦克风的渐增距离的函数。随距离急剧下降的响应允许使用麦克风,以准确地捕获扬声器的输出,同时将近端语音削弱到可忽略的电平。
如图2所示,声压级随距离反向下降。这由关系P×r=k表示,其中,r是距源的距离,P是源处的声压级而k是常数。如果将声压级转换成dB,则:
20log10|P(r)|=20log10k-20log10r
(7)
如图2所示,在一定距离ri;i=1,2,3,4处的压力Pri由k/ri给出。间隔恒定距离δ处的压力差可以表示为
如果δ<r1,则r1r2≈r1 2且r3r4≈r3 2,因此
实际声压级可以显著高于源附近的压力差,并且潜在地使全向麦克风负载过重,然而,压力差更小并且麦克风振膜和电路很容易设计为避免超载。此外,作为r2的函数的压力差的该反比关系的效应意味着在距声源较远距离处,压力差显著小于实际压力级。这示于图2。如果将压力差转换成dB,则:
20log10|Pd|=20log10kδ-40log10r
=20log10k+20log10δ-40log10r (8)
图3示出当以对数标度相对于距离进行绘制时,该差异是全向麦克风和差动式麦克风之间的声压级(以分贝计)(例如,可用于麦克风108的声压级)。该绘图示出相比于全向麦克风,差动式麦克风的敏感度下降。
采用具有差动式麦克风拾取(即,使麦克风108成为差动式麦克风)的方法,获得了与扬声器端口紧邻的扬声器信号的清楚和线性的拾取。然而,在免提电话配置中用户的语音在相当远的位置处,并且将以图3所示的更快速率(20log10δ-20log10r)降低。这里,第一项是常数且第二项表明,随着距源的距离,相比于全向麦克风的敏感度,差动式麦克风敏感度以更快速率显著降低。
这种配置相对于诸如用户的语音和近端环境噪音这样的近端信号并不敏感,并提供声回波消除的线性回波参考信号。因此,差动式麦克风一方面用于回波参考麦克风108。
存在可用于麦克风108的差动式麦克风的各种配置。现将描述一些此类示例。
现参照图4,描述了麦克风400的一示例。麦克风400是作为近场差动式麦克风的双端口麦克风。盖403设置在基底或基座401上,并具有穿过其延伸的第一端口402和第二端口404。MEMS装置406从端口接收声能,并将声能转换成电信号。在一示例中,垫片410包围麦克风400。垫片可以具有引导至端口402和404的通道412和414。此外,可以提供通过基底到端口404的通道416。垫片410包括与通道412和414连通的端口450和452。
可以理解的是,本文所述的MEMS装置包括通电的振膜和背板。声压使振膜移动,并且该移动产生针对背板的差动电压或差动电流。差动电压或差动电流代表所接收到的声能。
现参照图5,描述了麦克风500的另一示例。盖503设置在基底或基座501上并具有穿过其延伸的端口502。基座503中的通道507允许MEMS装置506下方的体积与盖503和MEMS装置506之间的体积之间的连通。MEMS装置506从端口502接收声能,并将该声能转换成电信号。在图5的示例中,单一端口使MEMS装置506内的振膜的两侧曝光。此配置可重复使用,用于精确地捕获回波参考信号。
现参照图6,描述了麦克风600的另一示例。盖603设置在基底或基座601上,并具有穿过其延伸的端口602。MEMS装置606从端口602接收声能并将该声能转换成电信号。在一示例中,垫片610包围麦克风600并具有双端口620和622,该双端口620和622通过通道624与盖603上的端口602连通。在另一示例中,当将端口602置于MEMS系统装置606(无基底或基座)下方时,垫片610具有引导至端口602的通道652和654。在图6所示的两个示例中,将具有两个声端口的垫片连接到全向麦克风的一个端口。针对这种垫片的、在麦克风端口处的压力是在垫片的两个端口处的压力差。
现参照图7,描述了麦克风700的另一示例。麦克风700包括:第一MEMS装置705和第二MEMS装置706,同时盖703设置在基底或基座701上。第一端口702延伸通过盖703,并且第二端口704延伸通过基座701。该配置操作单一端口MEMS并可用于正常语音捕获,而另一MEMS充当主要用于提供回波消除参考信号的双端口噪音消除结构。该配置还可以通过结合单端口MEMS和双端口MEMS的信号,来允许用于传输信号的更好环境噪音消除。
在此描述了本发明的优选实施方式,包括发明人已知的实施本发明的最佳方式。应当理解,所例示的实施方式仅仅是示例性的,而不应当理解为限制本发明的范围。

Claims (24)

1.一种方法,所述方法包括如下步骤:
接收来自远端用户的远端信号,并在扬声器处广播所述远端信号;
确定用于估计回波传递函数的信号,该信号在如下信号之间选出:所述远端信号或从紧邻所述扬声器设置的近场麦克风接收到的回波参考信号,所述近场麦克风感测从所述扬声器广播的所述远端信号;
至少部分地基于所选信号来确定回波传递函数,所述回波传递函数代表所述扬声器和远场麦克风之间的声路径的特性,所述远场麦克风与所述近场麦克风相比设置在距所述扬声器更远的距离处;
至少部分地基于所述回波传递函数来确定所估计的回波;
从自所述远场麦克风接收到的信号中减去所估计的回波,该减去的步骤有效于消除在从所述远端麦克风接收到的信号中存在的回波。
2.根据权利要求1所述的方法,其中,所述近场麦克风是差动式麦克风。
3.根据权利要求1所述的方法,其中,所述远端信号由功率放大器放大。
4.根据权利要求1所述的方法,其中,将所述扬声器和所述近场麦克风设置成彼此相距在约5mm以内。
5.根据权利要求1所述的方法,其中,将所述近场麦克风、所述远场麦克风以及所述扬声器设置在单个平台处。
6.根据权利要求1所述的方法,其中,在相同声学环境中,将所述近场麦克风和所述扬声器设置在单个平台处,并且将所述远场麦克风设置在另一平台中。
7.根据权利要求2所述的方法,其中,尽管所述差动式麦克风邻近所述扬声器,但是由于所述扬声器输出所述远端信号而导致的差压电平并没有使所述差动式麦克风超载。
8.根据权利要求7所述的方法,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,允许回波传递函数估计处理是线性处理。
9.根据权利要求2所述的方法,其中,由于近端和噪音源距所述差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在所述差动式麦克风处可忽略。
10.根据权利要求9所述的方法,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于所述近端话音信号和所述环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
11.根据权利要求10所述的方法,由此,来自所述线性回波传递函数估计的回波传递估计用于估计非线性回波路径,并从通过远场语音麦克风捕获的麦克风信号中成功地减去非线性回波。
12.根据权利要求5所述的方法,其中,所述单个平台位于蜂窝电话、膝上型计算机或平板计算机、家庭自动化设备或其他近端语音通信设备、或能够进行音频回放并响应于语音输入的设备处。
13.一种装置,所述装置包括:
近场麦克风,所述近场麦克风用于接收来自扬声器的声音,并产生回波参考信号;
远场麦克风,所述远场麦克风用于接收来自所述扬声器的声音;
其中,所述近场麦克风紧邻所述扬声器;
回波参考控制模块,所述回波参考控制模块被配置为自适应地并动态地确定回波估计信号,以估计回波传递函数,从如下信号之间选出该信号:从所述近场麦克风接收到的回波参考信号和来自远端用户的远端信号,或这两个信号的组合;
自适应模块,所述自适应模块被配置为至少部分地基于所选的回波估计信号来确定回波传递函数,并且所述自适应模块还被配置为至少部分地基于所述回波传递函数来确定所估计的回波;
汇总器,所述汇总器从通过所述远场麦克风产生的信号中减去所估计的回波,以产生回波消除信号。
14.根据权利要求13所述的装置,其中,所述近场麦克风是差动式麦克风。
15.根据权利要求13所述的装置,其中,所述远端信号由功率放大器放大。
16.根据权利要求13所述的装置,其中,将所述扬声器和所述近场麦克风设置成彼此相距在约5mm以内。
17.根据权利要求13所述的装置,其中,将所述近场麦克风、所述远场麦克风以及所述扬声器设置在单个平台处。
18.根据权利要求13所述的装置,其中,在相同声学环境中,将所述近场麦克风和所述扬声器设置在单个平台处,并且将所述远场麦克风设置在另一平台中。
19.根据权利要求13所述的装置,其中,尽管所述差动式麦克风邻近所述扬声器,但是由于所述扬声器输出所述远端信号而导致的差压电平并没有使所述差动式麦克风超载。
20.根据权利要求19所述的装置,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于近端话音信号和环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
21.根据权利要求13所述的装置,其中,由于近端和噪音源距所述差动式麦克风的距离,由于近端话音信号和环境噪音而导致的差压电平在所述差动式麦克风处可忽略。
22.根据权利要求21所述的装置,其中,在所述差动式麦克风处拾取的信号是包括所有扬声器非线性效应的扬声器输出信号,并且由于所述近端话音信号和所述环境噪音而具有可忽略的能量,从而允许回波传递函数估计处理是线性处理。
23.根据权利要求22所述的装置,由此,来自所述线性回波传递函数估计的回波传递估计然后用于估计非线性回波路径,并从通过所述远场语音麦克风捕获的麦克风信号中成功地减去非线性回波。
24.根据权利要求17所述的装置,其中,所述单个平台位于蜂窝电话、膝上型计算机、平板计算机、家庭自动化设备或其他近端语音通信设备、或能够进行音频回放并响应于语音输入的设备处。
CN201580063355.8A 2014-11-25 2015-11-19 用于非线性和时变回波消除的参考麦克风 Pending CN107005763A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462084221P 2014-11-25 2014-11-25
US62/084,221 2014-11-25
PCT/US2015/061569 WO2016085758A1 (en) 2014-11-25 2015-11-19 Reference microphone for non-linear and time variant echo cancellation

Publications (1)

Publication Number Publication Date
CN107005763A true CN107005763A (zh) 2017-08-01

Family

ID=56011562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580063355.8A Pending CN107005763A (zh) 2014-11-25 2015-11-19 用于非线性和时变回波消除的参考麦克风

Country Status (5)

Country Link
US (1) US9712915B2 (zh)
CN (1) CN107005763A (zh)
DE (1) DE112015005296T5 (zh)
TW (1) TW201633804A (zh)
WO (1) WO2016085758A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108260051A (zh) * 2018-01-15 2018-07-06 深圳前海黑鲸科技有限公司 语音遥控系统、便携式传输设备及智能设备
CN108932949A (zh) * 2018-09-05 2018-12-04 科大讯飞股份有限公司 一种参考信号获取方法及装置
CN112803959A (zh) * 2019-11-13 2021-05-14 瑞昱半导体股份有限公司 收发电路与应用于收发电路的信号处理方法
CN113178203A (zh) * 2021-04-23 2021-07-27 歌尔股份有限公司 一种回声消除方法、系统、音频设备及可读存储介质
CN113949977A (zh) * 2020-07-17 2022-01-18 通用微(深圳)科技有限公司 声音采集装置、声音处理设备及方法、装置、存储介质
WO2022017141A1 (zh) * 2020-07-21 2022-01-27 华为技术有限公司 滤除回声的方法、电子设备和计算机可读存储介质
CN114175606A (zh) * 2019-06-17 2022-03-11 伯斯有限公司 模块化回波消除单元
CN114245281A (zh) * 2021-12-09 2022-03-25 深圳市音络科技有限公司 一种语音性能测试方法及系统
CN117935837A (zh) * 2024-03-25 2024-04-26 中国空气动力研究与发展中心计算空气动力研究所 一种时域多声源定位及噪声处理方法

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11540057B2 (en) 2011-12-23 2022-12-27 Shenzhen Shokz Co., Ltd. Bone conduction speaker and compound vibration device thereof
US11950055B2 (en) * 2014-01-06 2024-04-02 Shenzhen Shokz Co., Ltd. Systems and methods for suppressing sound leakage
US11974097B2 (en) 2014-01-06 2024-04-30 Shenzhen Shokz Co., Ltd. Systems and methods for suppressing sound leakage
US11832060B2 (en) 2014-01-06 2023-11-28 Shenzhen Shokz Co., Ltd. Systems and methods for suppressing sound leakage
US11368800B2 (en) 2014-01-06 2022-06-21 Shenzhen Shokz Co., Ltd. Systems and methods for suppressing sound leakage
US11805375B2 (en) 2014-01-06 2023-10-31 Shenzhen Shokz Co., Ltd. Systems and methods for suppressing sound leakage
US9607627B2 (en) * 2015-02-05 2017-03-28 Adobe Systems Incorporated Sound enhancement through deverberation
EP3099047A1 (en) * 2015-05-28 2016-11-30 Nxp B.V. Echo controller
DE112016003649T5 (de) * 2015-08-10 2018-05-09 Knowles Electronics, Llc Vorrichtung mit mehreren MEMS-Motoren mit gemeinsamer Entlüftung
TWI579833B (zh) * 2016-06-22 2017-04-21 瑞昱半導體股份有限公司 信號處理裝置與信號處理方法
US10026391B2 (en) 2016-10-24 2018-07-17 Merry Electronics(Shenzhen) Co., Ltd. Microphone device with two sounds receiving modules and sound collecting trough
US11166098B2 (en) 2017-01-20 2021-11-02 Hewlett-Packard Development Company, L.P. Acoustic input devices comprising acoustic ports and transducers
EP3376778B8 (en) * 2017-03-13 2020-08-12 ams International AG Microphone and method of testing a microphone
US10109292B1 (en) * 2017-06-03 2018-10-23 Apple Inc. Audio systems with active feedback acoustic echo cancellation
US10468020B2 (en) * 2017-06-06 2019-11-05 Cypress Semiconductor Corporation Systems and methods for removing interference for audio pattern recognition
WO2019143759A1 (en) 2018-01-18 2019-07-25 Knowles Electronics, Llc Data driven echo cancellation and suppression
CN112637736B (zh) * 2018-04-26 2022-05-03 深圳市韶音科技有限公司 耳机系统及其麦克风装置
US11509994B2 (en) * 2018-04-26 2022-11-22 Shenzhen Shokz Co., Ltd. Vibration removal apparatus and method for dual-microphone earphones
KR102021994B1 (ko) * 2018-08-29 2019-09-17 주식회사 싸이언 음성 방송시스템 및 그 음성 방송시스템의 역 필터를 이용한 음성 잔향 및 룸 공진 제거 방법
CN109817235B (zh) * 2018-12-12 2024-05-24 深圳市潮流网络技术有限公司 一种VoIP设备的回声消除方法
TWI757600B (zh) * 2019-05-07 2022-03-11 宏碁股份有限公司 揚聲器調整方法與使用此方法的電子裝置
US11437004B2 (en) * 2019-06-20 2022-09-06 Bose Corporation Audio performance with far field microphone
CN110602327B (zh) 2019-09-24 2021-06-25 腾讯科技(深圳)有限公司 语音通话方法、装置、电子设备及计算机可读存储介质
CN111683329B (zh) * 2020-05-30 2022-02-08 北京声智科技有限公司 麦克风检测方法、装置、终端及存储介质
TWI730840B (zh) * 2020-07-13 2021-06-11 瑞昱半導體股份有限公司 回音估計系統以及回音估計方法
CN113949976B (zh) * 2020-07-17 2022-11-15 通用微(深圳)科技有限公司 声音采集装置、声音处理设备及方法、装置、存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1819608A (zh) * 2006-03-13 2006-08-16 华南理工大学 基于simo信道盲辨识的多路回波消除系统
CN1822709A (zh) * 2006-03-24 2006-08-23 北京中星微电子有限公司 一种麦克风回声消除系统
CN1826797A (zh) * 2003-05-27 2006-08-30 皇家飞利浦电子股份有限公司 具有回波消除系统的扬声器-麦克风系统和回波消除方法
CN200983612Y (zh) * 2006-03-13 2007-11-28 华南理工大学 基于simo信道盲辨识的多路回波消除系统
CN101719969A (zh) * 2009-11-26 2010-06-02 美商威睿电通公司 判断双端对话的方法、系统以及消除回声的方法和系统
CN103796135A (zh) * 2012-10-31 2014-05-14 马克西姆综合产品公司 具有回声消除的动态扬声器管理
US8811602B2 (en) * 2011-06-30 2014-08-19 Broadcom Corporation Full duplex speakerphone design using acoustically compensated speaker distortion
CN104041073A (zh) * 2011-12-06 2014-09-10 苹果公司 近场零位与波束成形

Family Cites Families (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL8802516A (nl) * 1988-10-13 1990-05-01 Philips Nv Hoorapparaat met rondzing onderdrukking.
US5561737A (en) * 1994-05-09 1996-10-01 Lucent Technologies Inc. Voice actuated switching system
US6070140A (en) 1995-06-05 2000-05-30 Tran; Bao Q. Speech recognizer
US5822598A (en) 1996-07-12 1998-10-13 Ast Research, Inc. Audio activity detection circuit to increase battery life in portable computers
EP0867856B1 (fr) 1997-03-25 2005-10-26 Koninklijke Philips Electronics N.V. "Méthode et dispositif de detection d'activité vocale"
US6249757B1 (en) 1999-02-16 2001-06-19 3Com Corporation System for detecting voice activity
US6397186B1 (en) 1999-12-22 2002-05-28 Ambush Interactive, Inc. Hands-free, voice-operated remote control transmitter
US6756700B2 (en) 2002-03-13 2004-06-29 Kye Systems Corp. Sound-activated wake-up device for electronic input devices having a sleep-mode
GB2405949A (en) 2003-09-12 2005-03-16 Canon Kk Voice activated device with periodicity determination
US7418392B1 (en) 2003-09-25 2008-08-26 Sensory, Inc. System and method for controlling the operation of a device by voice commands
US7643630B2 (en) * 2004-06-25 2010-01-05 Texas Instruments Incorporated Echo suppression with increment/decrement, quick, and time-delay counter updating
US20050285935A1 (en) 2004-06-29 2005-12-29 Octiv, Inc. Personal conferencing node
US20060074658A1 (en) 2004-10-01 2006-04-06 Siemens Information And Communication Mobile, Llc Systems and methods for hands-free voice-activated devices
US7508948B2 (en) 2004-10-05 2009-03-24 Audience, Inc. Reverberation removal
US8204252B1 (en) 2006-10-10 2012-06-19 Audience, Inc. System and method for providing close microphone adaptive array processing
US9185487B2 (en) 2006-01-30 2015-11-10 Audience, Inc. System and method for providing noise suppression utilizing null processing noise subtraction
US20160066087A1 (en) 2006-01-30 2016-03-03 Ludger Solbach Joint noise suppression and acoustic echo cancellation
US8194880B2 (en) 2006-01-30 2012-06-05 Audience, Inc. System and method for utilizing omni-directional microphones for speech enhancement
US8744844B2 (en) 2007-07-06 2014-06-03 Audience, Inc. System and method for adaptive intelligent noise suppression
US8949120B1 (en) 2006-05-25 2015-02-03 Audience, Inc. Adaptive noise cancelation
US8204253B1 (en) 2008-06-30 2012-06-19 Audience, Inc. Self calibration of audio device
US7957972B2 (en) 2006-09-05 2011-06-07 Fortemedia, Inc. Voice recognition system and method thereof
US8259926B1 (en) 2007-02-23 2012-09-04 Audience, Inc. System and method for 2-channel and 3-channel acoustic echo cancellation
US8189766B1 (en) 2007-07-26 2012-05-29 Audience, Inc. System and method for blind subband acoustic echo cancellation postfiltering
US8143620B1 (en) 2007-12-21 2012-03-27 Audience, Inc. System and method for adaptive classification of audio sources
US8194882B2 (en) 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8355511B2 (en) 2008-03-18 2013-01-15 Audience, Inc. System and method for envelope-based acoustic echo cancellation
US8244528B2 (en) 2008-04-25 2012-08-14 Nokia Corporation Method and apparatus for voice activity determination
US8774423B1 (en) 2008-06-30 2014-07-08 Audience, Inc. System and method for controlling adaptivity of signal modification using a phantom coefficient
JP5228932B2 (ja) 2009-01-16 2013-07-03 沖電気工業株式会社 音信号調整装置、プログラム及び方法、並びに、電話装置
US8472616B1 (en) 2009-04-02 2013-06-25 Audience, Inc. Self calibration of envelope-based acoustic echo cancellation
US8275148B2 (en) 2009-07-28 2012-09-25 Fortemedia, Inc. Audio processing apparatus and method
US8615392B1 (en) 2009-12-02 2013-12-24 Audience, Inc. Systems and methods for producing an acoustic field having a target spatial pattern
US8526628B1 (en) 2009-12-14 2013-09-03 Audience, Inc. Low latency active noise cancellation system
US8848935B1 (en) 2009-12-14 2014-09-30 Audience, Inc. Low latency active noise cancellation system
US8488805B1 (en) 2009-12-29 2013-07-16 Audience, Inc. Providing background audio during telephonic communication
US20110178800A1 (en) 2010-01-19 2011-07-21 Lloyd Watts Distortion Measurement for Noise Suppression System
US8718290B2 (en) 2010-01-26 2014-05-06 Audience, Inc. Adaptive noise reduction using level cues
US9008329B1 (en) 2010-01-26 2015-04-14 Audience, Inc. Noise reduction using multi-feature cluster tracker
US8204210B2 (en) * 2010-02-09 2012-06-19 Nxp B.V. Method and system for nonlinear acoustic echo cancellation in hands-free telecommunication devices
US8538035B2 (en) 2010-04-29 2013-09-17 Audience, Inc. Multi-microphone robust noise suppression
US8958572B1 (en) 2010-04-19 2015-02-17 Audience, Inc. Adaptive noise cancellation for multi-microphone systems
US8606571B1 (en) 2010-04-19 2013-12-10 Audience, Inc. Spatial selectivity noise reduction tradeoff for multi-microphone systems
US8473287B2 (en) 2010-04-19 2013-06-25 Audience, Inc. Method for jointly optimizing noise reduction and voice quality in a mono or multi-microphone system
US8781137B1 (en) 2010-04-27 2014-07-15 Audience, Inc. Wind noise detection and suppression
US8447596B2 (en) 2010-07-12 2013-05-21 Audience, Inc. Monaural noise suppression based on computational auditory scene analysis
US8761410B1 (en) 2010-08-12 2014-06-24 Audience, Inc. Systems and methods for multi-channel dereverberation
US8611552B1 (en) 2010-08-25 2013-12-17 Audience, Inc. Direction-aware active noise cancellation system
US8447045B1 (en) 2010-09-07 2013-05-21 Audience, Inc. Multi-microphone active noise cancellation system
US8682006B1 (en) 2010-10-20 2014-03-25 Audience, Inc. Noise suppression based on null coherence
CN102741918B (zh) 2010-12-24 2014-11-19 华为技术有限公司 用于话音活动检测的方法和设备
US8606249B1 (en) 2011-03-07 2013-12-10 Audience, Inc. Methods and systems for enhancing audio quality during teleconferencing
US9007416B1 (en) 2011-03-08 2015-04-14 Audience, Inc. Local social conference calling
US8996381B2 (en) 2011-09-27 2015-03-31 Sensory, Incorporated Background speech recognition assistant
US8666751B2 (en) 2011-11-17 2014-03-04 Microsoft Corporation Audio pattern matching for device activation
US9020163B2 (en) 2011-12-06 2015-04-28 Apple Inc. Near-field null and beamforming
US8750526B1 (en) 2012-01-04 2014-06-10 Audience, Inc. Dynamic bandwidth change detection for configuring audio processor
US9197974B1 (en) 2012-01-06 2015-11-24 Audience, Inc. Directional audio capture adaptation based on alternative sensory input
US8737188B1 (en) 2012-01-11 2014-05-27 Audience, Inc. Crosstalk cancellation systems and methods
US9838810B2 (en) 2012-02-27 2017-12-05 Qualcomm Technologies International, Ltd. Low power audio detection
TWI474317B (zh) 2012-07-06 2015-02-21 Realtek Semiconductor Corp 訊號處理裝置以及訊號處理方法
US20140105411A1 (en) 2012-10-16 2014-04-17 Peter Santos Methods and systems for karaoke on a mobile device
US20140112496A1 (en) 2012-10-19 2014-04-24 Carlo Murgia Microphone placement for noise cancellation in vehicles
US9704486B2 (en) 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
WO2014131054A2 (en) 2013-02-25 2014-08-28 Audience, Inc. Dynamic audio perspective change during video playback
US10395651B2 (en) 2013-02-28 2019-08-27 Sony Corporation Device and method for activating with voice input
US9349386B2 (en) 2013-03-07 2016-05-24 Analog Device Global System and method for processor wake-up based on sensor data
US9112984B2 (en) 2013-03-12 2015-08-18 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
US9703350B2 (en) 2013-03-15 2017-07-11 Maxim Integrated Products, Inc. Always-on low-power keyword spotting
US9083782B2 (en) 2013-05-08 2015-07-14 Blackberry Limited Dual beamform audio echo reduction
EP2801974A3 (en) 2013-05-09 2015-02-18 DSP Group Ltd. Low power activation of a voice activated device
US20140343949A1 (en) 2013-05-17 2014-11-20 Fortemedia, Inc. Smart microphone device
CN104519212B (zh) * 2013-09-27 2017-06-20 华为技术有限公司 一种消除回声的方法及装置
US9245527B2 (en) 2013-10-11 2016-01-26 Apple Inc. Speech recognition wake-up of a handheld portable electronic device
US20150112690A1 (en) 2013-10-22 2015-04-23 Nvidia Corporation Low power always-on voice trigger architecture
US10079019B2 (en) 2013-11-12 2018-09-18 Apple Inc. Always-on audio control for mobile device
US9799330B2 (en) 2014-08-28 2017-10-24 Knowles Electronics, Llc Multi-sourced noise suppression

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1826797A (zh) * 2003-05-27 2006-08-30 皇家飞利浦电子股份有限公司 具有回波消除系统的扬声器-麦克风系统和回波消除方法
CN1819608A (zh) * 2006-03-13 2006-08-16 华南理工大学 基于simo信道盲辨识的多路回波消除系统
CN200983612Y (zh) * 2006-03-13 2007-11-28 华南理工大学 基于simo信道盲辨识的多路回波消除系统
CN1822709A (zh) * 2006-03-24 2006-08-23 北京中星微电子有限公司 一种麦克风回声消除系统
CN101719969A (zh) * 2009-11-26 2010-06-02 美商威睿电通公司 判断双端对话的方法、系统以及消除回声的方法和系统
US8811602B2 (en) * 2011-06-30 2014-08-19 Broadcom Corporation Full duplex speakerphone design using acoustically compensated speaker distortion
CN104041073A (zh) * 2011-12-06 2014-09-10 苹果公司 近场零位与波束成形
CN103796135A (zh) * 2012-10-31 2014-05-14 马克西姆综合产品公司 具有回声消除的动态扬声器管理

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108260051A (zh) * 2018-01-15 2018-07-06 深圳前海黑鲸科技有限公司 语音遥控系统、便携式传输设备及智能设备
CN108932949A (zh) * 2018-09-05 2018-12-04 科大讯飞股份有限公司 一种参考信号获取方法及装置
CN114175606A (zh) * 2019-06-17 2022-03-11 伯斯有限公司 模块化回波消除单元
CN114175606B (zh) * 2019-06-17 2024-02-06 伯斯有限公司 模块化回波消除单元
CN112803959A (zh) * 2019-11-13 2021-05-14 瑞昱半导体股份有限公司 收发电路与应用于收发电路的信号处理方法
CN112803959B (zh) * 2019-11-13 2022-05-10 瑞昱半导体股份有限公司 收发电路与应用于收发电路的信号处理方法
CN113949977B (zh) * 2020-07-17 2023-08-11 通用微(深圳)科技有限公司 声音采集装置、声音处理设备及方法、装置、存储介质
CN113949977A (zh) * 2020-07-17 2022-01-18 通用微(深圳)科技有限公司 声音采集装置、声音处理设备及方法、装置、存储介质
WO2022017141A1 (zh) * 2020-07-21 2022-01-27 华为技术有限公司 滤除回声的方法、电子设备和计算机可读存储介质
CN113178203A (zh) * 2021-04-23 2021-07-27 歌尔股份有限公司 一种回声消除方法、系统、音频设备及可读存储介质
CN113178203B (zh) * 2021-04-23 2022-11-04 歌尔股份有限公司 一种回声消除方法、系统、音频设备及可读存储介质
CN114245281A (zh) * 2021-12-09 2022-03-25 深圳市音络科技有限公司 一种语音性能测试方法及系统
CN114245281B (zh) * 2021-12-09 2024-03-19 深圳市音络科技有限公司 一种语音性能测试方法及系统
CN117935837A (zh) * 2024-03-25 2024-04-26 中国空气动力研究与发展中心计算空气动力研究所 一种时域多声源定位及噪声处理方法
CN117935837B (zh) * 2024-03-25 2024-05-24 中国空气动力研究与发展中心计算空气动力研究所 一种时域多声源定位及噪声处理方法

Also Published As

Publication number Publication date
US20160150337A1 (en) 2016-05-26
TW201633804A (zh) 2016-09-16
DE112015005296T5 (de) 2017-08-24
US9712915B2 (en) 2017-07-18
WO2016085758A1 (en) 2016-06-02

Similar Documents

Publication Publication Date Title
CN107005763A (zh) 用于非线性和时变回波消除的参考麦克风
CN107636758B (zh) 声学回声消除系统和方法
KR102196012B1 (ko) 트랜스듀서 상태의 검출에 기초하여 오디오 트랜스듀서의 성능을 향상시키는 방법들 및 시스템들
EP3058563B1 (en) Limiting active noise cancellation output
KR102292773B1 (ko) 개인용 오디오 장치의 적어도 일부를 구현하기 위한 집적 회로 및 변환기의 부근에서의 주변 오디오 사운드들을 소거하기 위한 방법
EP3081006B1 (en) Systems and methods for providing adaptive playback equalization in an audio device
JP5394373B2 (ja) オーディオ信号を処理する装置及び方法
CN101853667B (zh) 一种语音降噪装置
US9344050B2 (en) Dynamic speaker management with echo cancellation
CN104243732A (zh) 振动传感器在回声消除中的使用
US20140334620A1 (en) Method for processing an audio signal and audio receiving circuit
CN105284126A (zh) 包括自适应消噪系统的系数的动态偏置的自适应消噪系统及方法
US20160300563A1 (en) Active noise cancellation featuring secondary path estimation
CN108140380B (zh) 具有部分地由固定响应滤波器提供的反馈响应的自适应消噪反馈控制器及方法
CN108028983A (zh) 基于换能器阻抗的非线性声学回声消除
US20040001597A1 (en) Audio communication system and method with improved acoustic characteristics
US10013966B2 (en) Systems and methods for adaptive active noise cancellation for multiple-driver personal audio device
CN103796135B (zh) 具有回声消除的动态扬声器管理
US10540984B1 (en) System and method for echo control using adaptive polynomial filters in a sub-band domain
WO2023070786A1 (zh) 一种音频降噪方法及音频监控装置
US20130329882A1 (en) Half-Duplex Speakerphone Echo Canceler
Das et al. A new cross correlation based double talk detection algorithm for nonlinear acoustic echo cancellation
US11700485B2 (en) Differential audio data compensation
Dhull et al. Performance variation of lms and its different variants
Kuech Approaches to nonlinear acoustic echo cancellation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170801

WD01 Invention patent application deemed withdrawn after publication