CN105577961A - 增益控制器的自动调谐 - Google Patents
增益控制器的自动调谐 Download PDFInfo
- Publication number
- CN105577961A CN105577961A CN201510731976.0A CN201510731976A CN105577961A CN 105577961 A CN105577961 A CN 105577961A CN 201510731976 A CN201510731976 A CN 201510731976A CN 105577961 A CN105577961 A CN 105577961A
- Authority
- CN
- China
- Prior art keywords
- signal
- echo
- gain
- gain control
- control system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03G—CONTROL OF AMPLIFICATION
- H03G3/00—Gain control in amplifiers or frequency changers without distortion of the input signal
- H03G3/20—Automatic control
- H03G3/30—Automatic control in amplifiers having semiconductor devices
- H03G3/32—Automatic control in amplifiers having semiconductor devices the control being dependent upon ambient noise level or sound level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B3/00—Line transmission systems
- H04B3/02—Details
- H04B3/20—Reducing echo effects or singing; Opening or closing transmitting path; Conditioning for transmission in one direction or the other
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B3/00—Line transmission systems
- H04B3/02—Details
- H04B3/20—Reducing echo effects or singing; Opening or closing transmitting path; Conditioning for transmission in one direction or the other
- H04B3/23—Reducing echo effects or singing; Opening or closing transmitting path; Conditioning for transmission in one direction or the other using a replica of transmitted signal in the time domain, e.g. echo cancellers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/002—Applications of echo suppressors or cancellers in telephonic connections
Abstract
本申请涉及增益控制器的自动调谐。具体地,涉及一种将增益施加到远端信号的增益控制系统,该系统包括:信号识别器,其被配置为检测麦克风信号中的远端信号的回波;以及路径估计器,其被配置为估计所检测的回波的回波路径的特征,其中:信号识别器还被配置为检测来自麦克风信号的近端信号;且响应于检测到近端信号,该增益控制系统被配置为根据回波路径的所估计的特征,来调整施加到远端信号的增益。
Description
技术领域
本发明涉及一种用于控制施加于远端信号的增益的装置和方法。
背景技术
在电话通话(telephony)中,音频信号(例如,包括语音信号)在近端和远端之间进行传输。在近端处接收到的远端信号可以从扬声器输出。近端处的麦克风可以用于捕获要发送到远端的近端信号。当在近端处输出的至少一些远端信号被包括在传输回到远端的近端信号中的时候,发生“回波(echo)”。在这个意义上,回波可以被认为是远端信号的反射。
图1例示了示例场景,其示出正由远端麦克风捕获和由近端扬声器输出的信号。回波是近端处的扬声器和麦克风之间的声学耦合的结果;近端麦克风捕获来自除了近端扬声器的语音和任何近端背景噪声之外的其自身的扬声器的信号。结果是远端扬声器处的回波。回波消除是电话通话的重要特征。免提设备和电信会议特别需要能够适应于具有各种各样的声学特征的环境的回波消除。在这些示例中,因素的组合导致回波成为更大的问题。首先,从近端扬声器输出的远端信号处的音量通常足够响,这样远端信号是由近端麦克风捕获的信号的重要部分。其次,这些类型的布置中的扬声器和麦克风的实际布置会导致二者之间的良好声学耦合。
声学回波消除器通常合成来自远端语音信号的回波的估计。然后从麦克风信号中减去所估计的回波。该技术需要自适应信号处理,以产生足以有效地取消回波的准确信号。自适应滤波器通常用于对环境的声学脉冲响应进行建模。非线性处理器(NLP)通常紧接着自适应滤波器,用于消除任何残留回波。
回波消除器的性能取决于平台,尤其取决于音频接口、接口驱动器及相关硬件,前后的放大器(如果有的话),及麦克风和扬声器的特征。以足够回波消除在各种各样的平台上实现全双工语音通信富有挑战性。回波消除在高度非线性的平台上特别富有挑战性。为了消除在高度非线性平台中的回波而进行的处理可以是资源密集的,且在某些情况下,诸如在双端通话(doubletalk)时,导致连同回波的近端麦克风语音的消除,这导致例如在双端通话期间,远端处接收到的近端信号的质量的严重下降。
因此,需要一种在实施声学回波消除时提高近端信号的质量的方法。
发明内容
根据本公开的第一方面,提供了一种将增益施加到远端信号的增益控制系统,该系统包括:信号识别器,其被配置为检测麦克风信号中的远端信号的回波;和路径估计器,其被配置为估计所检测的回波的回波路径的特征,其中:信号识别器还被配置为检测来自麦克风信号的近端信号;且响应于检测到近端信号,增益控制系统被配置为根据回波路径的所估计的特征,来调整施加到远端信号的增益。
响应于检测到近端信号,该增益控制系统可以被配置为减少所施加的增益。
响应于检测缺少近端信号,该增益控制系统可以被配置为从所减少的增益增加所施加的增益。
增益可以以第一速率减少,并以第二速率速率,第一速率大于第二速率。
可以将所施加的增益增加到默认增益值。
路径估计器被配置为将检测到的回波信号与远端信号相关联,从而确定信号之间的相似性的度量。
可以根据相似性的度量来估计特征。
特征可以是回波路径的非线性程度。
可以减少增益,从而输出根据非线性程度而具有预定功率的远端信号。
特征可以是在回波路径中随时间延迟的变化。
可以在仅回波时段期间检测回波的存在。
可以在双端通话期间检测到近端信号。
该增益控制系统可以被配置为控制要通过扬声器输出的远端信号的量。
根据本公开的第二方面,提供了一种将增益施加到远端信号的方法,该方法包括如下步骤:检测麦克风信号中的远端信号的回波;估计所检测的回波的回波路径的特征;检测来自麦克风信号的近端信号;并且响应于检测到近端信号,根据回波路径的所估计的特征,来调整施加到远端信号的增益。
响应于检测到近端信号,可以减少所施加的增益。
响应于检测缺少近端信号,可以从所减少的增益增加所施加的增益。
增益可以以第一速率减少并以第二速率增加,第一速率大于第二速率。
可以将所施加的增益增加到默认增益值。
估计回波路径的特征的步骤可以包括如下步骤:将所检测的回波信号与远端信号进行相关,从而确定信号之间的相似性的度量。
可以根据相似性的度量来估计特征。
特征可以是回波路径的非线性程度。
可以减少增益,从而输出根据非线性程度而具有预定功率的远端信号。
特征可以是在回波路径中随时间的延迟的变化。
可以在仅回波时段期间检测回波。
可以在双端通话期间检测到近端信号。
可以将增益施加到远端信号,从而控制要由扬声器输出的远端信号的量。
根据本公开的第三方面,提供了一种用于生成上述增益控制系统的机器可读代码。
根据本公开的第四方面,提供了一种机器可读存储介质,在该机器可读存储介质上编码有用于生成上述增益控制系统的非暂时机器可读代码。
根据本公开的第五方面,提供了一种用于实施上述方法的机器可读代码。
根据本公开的第六方面,提供了一种机器可读存储介质,在该机器可读存储介质上编码有用于实施上述方法的非暂时机器可读代码。
附图说明
现在将参照附图示例性地描述本发明。在附图中:
图1示出电话通话中的近端和远端的示例;
图2示出包括声学回波消除器和增益控制系统的通信设备的架构;
图3示出示例性增益控制系统的架构;
图4示出用于调谐增益以优化近端信号的质量的示例性处理;
图5示出示例性信号识别符的架构;以及
图6示出增益调整的示例。
具体实施方式
麦克风信号中的信号能量的主要来源通常将是远端信号的回波;近端处不存在显著信号能量的其它来源。在此表示为“单方通话”。在其它时间,麦克风信号将包含独立于任何回波的显著信号能量。在许多情况下,这将归因于近端处的通话,且在此表示为“近端信号”。当然,信号能量可以归因于与通话不同的来源。具体地,这是在电信会议或免提操作期间的情况。因此,术语“近端信号”用于指代并非归因于回波的近端处产生的任何显著信号能量。有时,麦克风信号将包含回波信号和近端信号。在此表示为“双端通话”。麦克风信号还可以包含一些近端环境噪声。
图2示出包括扬声器21、麦克风22和声学回波消除器(AEC)23的通信设备20的示例。在替代布置(未示出)中,扬声器21和麦克风22可以位于设备20的外部,并经由适当的输出端口和输入端口连接到设备20。合适的通信设备20的示例包括:移动电话、智能电话、连线电话、膝上型计算机、平板计算机、电信会议设备等。通信设备20还可以包括:CPU、存储器、信号处理电路,诸如DSP和滤波器等(均未在图2中示出)。
AEC23被配置为从麦克风22接收麦克风信号。其还被配置为接收远端信号24。总的来说,AEC23被配置为处理来自远端的信号,以生成估计的回波信号。回波估计由自适应滤波器25生成,自适应滤波器25有效地试图在扬声器21(其输出远端信号)和麦克风22(其接收远端信号连同任何近端信号的回波)之间合成实际声学路径。因而,实际回波是麦克风信号的可能信号分量中的一个。
自适应滤波器25连续地对回波路径进行建模并从远端信号生成回波估计。然后由减法单元26从麦克风信号中减去回波估计。假定回波估计相对准确,这提供了用于到远端的传输的基本上无回波的信号。在单独回波区域中,在麦克风信号中存在不想要的声音,即,麦克风信号可以被认为仅包括来自远端的回波和一些不想要的声音,诸如噪音。在单独回波区域中,减去后剩余的任何信号假设表示合成回波中的错误,并且其被反馈回到自适应滤波器25,以更新其声学回波路径的模型。
图2所示的AEC还包括:回波抑制器27、非线性处理器28及双端通话检测器29。
双端通话检测器29检测双端通话的存在。它还可以检测仅近端信号的存在(即,无任何显著远端信号)。优选地,它被配置为基于当检测到近端语音时将停止远端语音,而导致自适应滤波器25的自适应,因为近端语音将导致用于估计麦克风信号中的回波的回波估计处理中的错误。在已经从麦克风信号中减去估计回波之后,回波抑制器27和非线性处理器28被配置为处理任何残留回波或噪音。残留回波可以是相当强的。例如,如果在近端语音时期期间,回波路径急剧变化,则通过自适应滤波器25追踪回波路径变化可以被双端通话检测器29抑制,可能导致强的残留回波。回波抑制器27根据估计回波,来削弱残留回波。非线性处理器28通过限幅,来消除任何剩余残留误差。
非线性处理器28通常被配置为在已从其中减去回波估计之后,移除留在麦克风信号中的低于阈值的任何信号能量。因此,该阈值确定在麦克风信号被传输到远端之前,非线性处理器28从麦克风信号中移除了多少能量。如果阈值低,则非线性处理器28仅有效地移除任何留存回波的残留,因为自适应滤波器25尚未很好地对回波路径进行建模。然而,如果阈值高,则非线性处理器28有效地阻止来自近端的任何信号。这意味着,控制阈值有效地控制通信设备20的操作的模式。当阈值低时,通信设备20通过允许信号在两个方向上行进,来在全双工模式下操作。当阈值高时,通信设备20通过允许信号仅在一个方向上行进(即,从远端至近端),来在半双工模式下有效地操作。因此,在双端通话期间,非线性处理器28有效地阻止回波和近端信号(例如,通话)。这可以导致在远端处接收到的近端信号的质量和阈值变化方面的问题,随着双端通话开始和停止,导致近端信号的截断。
通信设备20包括设置在远端信号24和扬声器21之间的路径中的增益控制系统200(其在图3中更详细地示出)。增益控制系统200将远端信号提供给扬声器21,并且可以控制由扬声器21输出的远端信号的功率(即,从而控制音量)。如图3所示,增益控制系统200包括:信号识别器201、路径估计器202、增益调谐器203和电平控制器204,其均可以以硬件,软件或其组合来实施。
远端信号由增益控制系统200接收并被提供给电平控制器204,电平控制器204控制由系统200输出且提供给扬声器的远端信号的功率电平。调谐器203向控制器204提供目标功率电平,该目标功率电平是由控制器204输出的信号的所需功率电平(例如,平均RMS电平)。控制器204将适当量的增益施加于所输入的远端信号,从而以所需目标功率电平来输出远端信号。
调谐器203可以在单方通话期间向控制器204提供默认目标功率电平。调谐器203能够在接收近端信号(其包括双端通话)期间,动态地调整目标功率电平(因此,施加于远端信号的增益),以帮助克服上述问题。调谐器203根据来自信号识别器201和路径估计器202的信息,来调整功率电平。信号识别器201帮助识别仅回波时段(其中,接收到了显著的远端信号,但是没有接收到显著的近端信号)、近端信号时段(其中,接收到了显著的近端信号,但是没有接收到显著的远端信号)和双端通话时段(其中,接收到了显著的远端和近端信号)。路径估计器202估计回波路径的非线性程度,如下文中进一步详细描述的。下文进一步描述了用于至少部分基于回波路径的非线性程度来调整目标功率电平。
图4是概述由增益控制系统200执行的处理,以调整目标功率电平并优化在远端设备处接收到的近端信号的质量的流程图。
在步骤301中,远端和麦克风信号由信号识别器201接收。在步骤302中,信号识别器201识别仅回波的麦克风信号,而没有任何显著的近端信号(诸如通话)的一个或多个时段。如参照图5在下文中更加详细描述的,通过将麦克风信号与远端信号的延迟版本进行比较,来识别出仅回波时段,并且如果差异小(例如,低于阈值),则识别出仅回波时段,然而如果差异大(例如,高于阈值),则这表明麦克风信号包括显著的非回波分量(例如,近端语音),因此,该时段不被识别为仅回波时段。在步骤303中,从仅回波时段中确定了回波路径的特征,诸如,其非线性或延迟变化。在步骤304中,基于回波路径的特征,来确定目标功率电平。目标功率电平可适用于在近端活动(例如,在双端通话时段期间)的时段期间由控制器204使用。然而,基于在仅回波时段期间(在步骤303中)可以最容易地确定的回波路径的特征,来确定目标功率电平。在步骤304中确定的目标功率电平可以不同于(例如,小于)在仅回波期间适合于由控制器204使用的默认目标功率电平。在步骤305中,当检测到近端信号或双端通话时,调谐器203向控制器204提供在步骤304中确定的目标功率电平。在步骤306中,当近端信号结束(并且在缺少近端信号时的任一时段期间)时,调谐器203向控制器204提供默认目标功率电平。
当存在近端信号时,使用该处理,远端信号的功率减少到取决于回波路径的特征(诸如平台的非线性)的电平,从而不由阻止近端信号的回波消除器的NLP降低近端信号的质量,特别在双端通话期间。下文进一步详细描述每个步骤。例如,当近端用户正在讲话时,减少施加于从近端扬声器输出的远端语音的增益,从而减少在麦克风信号中的回波。这意味着,减少了所施加的回波消除的量,使得减少了由回波消除所导致的近端信号的退化。因此,发送给远端的近端信号具有较高的质量。
图5示出根据一个示例性实施方式的信号识别器201。信号识别器包括回波延迟估计器401和信号检测器402。
回波延迟估计器401估计回波路径的延迟。优选地,在仅回波时段期间执行延迟的估计。广义地说,延迟估计器401将远端信号与麦克风信号的历史记录进行比较,以找到信号的匹配样本。回波路径延迟基于在匹配的麦克风信号和远端信号的历史记录之间的时差。
现在描述估计延迟路径的一种具体方法。延迟估计器401使用例如64点FFT,来将麦克风信号和远端信号的每帧转化为频域。针对每个频段,计算出短期平均值和长期平均值。通过短期平均值和长期平均值,针对麦克风和远端信号的每个频段估计出二进制频谱。如果短期平均值超过各自频段的长期平均值预定阈值,则频段的二进制频谱表示被指定为一,否则为零。
将远端二进制频谱的历史记录保存在例如存储器(未示出)中。历史记录可以是例如最近50帧的远端二进制频谱。将麦克风信号(例如,最近单方通话帧的)的二进制频谱与远端信号的每个历史二进制频谱相比较,以发现最佳匹配频谱。为了发现最佳匹配,使用每个二进制远端频谱的相应频段,来执行针对麦克风二进制频谱的每个频段的AND操作。确定每个所得二进制频谱的总和,且在总和之后产生最高值的远端二进制频谱被认为是最佳匹配。然后基于帧数和帧大小来估计延迟。
通常,所估计的延迟值在呼叫会话期间将近似恒定,且在整个会话期间可以轻微变化。因此,可以仅在会话开始时,首先实施延迟估计。基于平台是否有变化,例如,当移动用户切换到免提模式时,可以重新估计延迟。还可以定期地执行延迟估计。如果确定了会话期间延迟频繁变化,则平台可以被认为是高度非线性的,而无论是否由路径估计器202执行非线性估计。在这种情况下,延迟估计器401可以使调谐器203在诸如双端通话这样的近端信号时段期间,将目标功率电平设置为合适的电平。
信号检测器402检测仅回波时段、仅近端信号时段和双端通话时段。信号检测器402可以包括:自适应滤波器403(其可以是具有例如大约50个系数的短滤波长度的短自适应滤波器)和收敛检测器404。远端信号(其已经基于由延迟估计器401确定的延迟估计来补偿延迟),且麦克风信号被馈送到自适应滤波器403,该自适应滤波器403连续地调整其系数。在处理延迟补偿远端信号和麦克风信号的每帧之后,使用误差信号e(n)和麦克风信号d(n)之间的角度的余弦,来估计自适应滤波器的收敛,其中,n表示信号的采样号。误差信号e(n)由自适应滤波器403输出,并且是麦克风信号和所估计的远端信号之间的差异。残留回波和回波将是不相关的,因此它们之间的角度的余弦接近于零。但是,在双端通话期间,麦克风信号和误差信号之间的角度的余弦将远离零,这取决于近端与回波之比。
第l帧的麦克风信号d(n)上的误差信号e(n)的投影如下式所示:
其中,m表示帧大小。
如果Pem(l)<TH2,则表示麦克风信号的当前帧包括仅回波,否则它包括:近端信号和/或环境背景噪音。TH2是可以是根据实验估计的阈值。其它已知语音活动检测方法可以用于在近端语音和背景噪音之间进行区分。针对路径估计器202,识别出表示包含仅回波的麦克风信号的帧。
路径估计器202估计回波路径的非线性程度。回波路径可以被认为是从正被提供给扬声器到正从麦克风接收到的、由远端信号所采取的路径。因此,回波路径取决于近端平台的线性。测量非线性程度的一个方法是:通过交叉相关延迟补偿远端和麦克风信号的仅回波帧,来确定信号的相似程度。如果回波和远端信号之间的相关性高,则回波路径是高度线性的。如果相关性低,则回波路径中存在显著的非线性。交叉相关将提供针对线性平台用的清晰峰值和高度非线性平台用的随机分布
针对不包含近端语音的麦克风信号的帧(即,仅回波帧)来估计相关相似性。为了减少在确定回波和远端信号的相似程度时涉及的复杂性,在估计其相关性之前,远端信号和麦克风信号可以通过2进行分样(decimate)。
相关相似性可以是多个靠近峰值相关区域的相关系数的累积能量(例如,7个相关系数)与系数的总能量之间的比率。相关相似性可以如下估计:
a)确定近端和延迟补偿远端帧之间的交叉相关系数,Xcorr(l,i)(其中,l是第l帧,且i是帧l的相关相似性向量Xcorr的索引)。
b)确定每个系数Xcorr(l,i)的平方的总和的总能量,T(l)。
c)确定峰值系数及其邻近系数的平方的总和的峰值能量,D(l)。例如,如果系数的数量为7,则峰值之前的3个系数和峰值之后的3个系数及峰值用于确定D(l)。
d)通过D(l)除以T(l)来确定相关相似性系数。
为了补偿在延迟补偿中的任何容许误差,且为了更高的准确度,可以使用来自远端的存储历史的多个帧和麦克风信号帧,来另外完成相关测量。
所确定的相关相似性可以被量化为表1所示的示例预定范围中的一个。可以使用其它合适的范围。
表1
相似性系数范围 | 非线性 |
>0.9 | 低 |
0.75-0.9 | 平均 |
0.66-0.75 | 平均+ |
0.55-0.66 | 高 |
0.4-0.55 | 高+ |
0.3-0.4 | 非常高 |
<0.3 | 特别高 |
将平台的所确定的非线性提供给调谐器203,调谐器203在近端信号的存在期间,依靠非线性来调整控制器204的目标电平。调谐器203例如可以使用查询表,来确定依靠非线性所调整的目标电平。表2是该查询表的示例。可以使用其它适当值。
表2
因此,在本示例中,随着回波路径的非线性增加,在近端信号时段和双端通话时段期间,由控制器204使用的目标功率电平减少。这是因为当存在近端信号时,回波消除在适应于回波方面差,尤其是,如果回波路径是更加非线性的,则回波消除很差地执行。因此,对于高度非线性回波路径,由控制器204施加于远端信号的增益低,从而减少麦克风信号中的不可预见的回波的数量;然而,对于更多线性回波路径,由控制器204施加的增益可以更高。
除了相关相似性之外的度量可以用于确定非线性程度。例如,可以使用如上文提及的回波路径的延迟变化,且可以针对不同的变化程度来确定合适的目标电平。例如,如果几乎没有变化,则可以使用默认目标电平。如果变化较大,则可以使用-30db的目标电平。
在被提供给信号识别器201和路径估计器202之前,远端和麦克风信号可以被下采样。这可以帮助减少确定合适目标电平所需的处理的量。例如,可以在处理之前将信号采样为4kHz或更少。
图6是表示根据麦克风信号502,由调谐器203提供的目标电平501到控制器204如何调整的图。在麦克风未检测任何信号的时段503和仅回波时段504期间,目标电平501保持为默认电平505。出于说明的目的,当目标电平501是默认值时,目标电平501被示为略低于默认电平505而不是处于默认电平505。当在507处检测到近端信号509时(在这种情况下,在双端通话(DT)506期间)(例如,通过信号检测器402),目标电平减少到所调整的目标电平508,所调整的目标电平508根据非线性程度进行确定(如上所述)。如图6所示,目标电平可以从默认值逐渐地减少到调整值。目标电平减少的速率可以取决于默认值和调整值之间的差异。通常,默认值和调整值之间的较大差异将要求更快速率。一旦目标电平等于调整值,则它将维持直到双端通话结束或近端信号509的末端。如图中时段510所示,当双端通话结束且仅近端信号509存在时,目标电平保持在调整电平508。在近端信号末端处(如虚线511所示),目标电平从调整值增加到默认值。从调整值至默认值的目标电平的增加速率可以与减少目标值的速率相同或不同。优选地,如图6所示,增加速率慢于减少速率。例如,减少速率可以是约40dB/秒,且增加速率可以是约16dB/秒。如果增加速率快,则这有助于为用户提供逐渐增加在近端讲话者处的远端信号量,并避免音量的不适、突然增加。另选地,目标电平可以被到/从默认电平立即,而不是逐渐地调整。
如上所述,非线性平台可以导致回波消除器的问题,然后该问题导致远端处接收到的近端信号的质量下降。通过向控制器204提供更低的目标功率电平,对于高度非线性平台,在近端信号时段(其包括双端通话时段)期间,减少了施加于接收到的远端信号的增益。这导致由设备扬声器输出的远端信号量的减少。因此,高度削弱了非线性回波信号,因此由麦克风几乎没有或没有从回波中捡拾到能量,因此回波消除器的NLP能够保持其阈值为低电平,并避免必须实施高阈值,这将使近端信号劣化(如上所述)。因此,增益控制系统200能够有利地实现回波消除器的操作,同时独立于回波消除器。
图2、图3和图5(实际上,在此包括的所有块状装置图)所示的结构用于与装置中的一些功能块相对应。这仅是出于说明的目的。图2、图3和图5不旨在限定芯片上的硬件的不同部分之间或软件中不同程序、过程、或功能之间的严格划分。在某些实施方式中,可以在硬件中完全或部分地实施在此描述的部分或全部算法。在许多实施中,至少部分增益控制系统可以由在软件控制(例如,通信设备的CPU或DSP)之下动作的处理器来实施。任何这种软件被优选地存储在非暂时计算机可读介质,诸如,存储器(RAM、缓存、硬盘等)或其它存储装置(USB存储棒、CD、磁盘等)上。
申请人在此独立地公开了在此描述的每个单独特征以及两个或多个这种特征的任意组合,从而使得这样的特征或组合能够鉴于本领域技术人员的公知常识基于本说明书来整体实现,而不管这些特征或者特征组合是否解决在此所公开的任何问题,并且不对权利要求的范围造成限制。申请人指出,本发明的各方面可以由任何这样的单独特征或特征组合构成。鉴于以上描述,对于本领域技术人员将不言而喻的是,在本发明的范围内可以进行各种修改。
Claims (20)
1.一种将增益施加到远端信号的增益控制系统,该系统包括:
信号识别器,其被配置为检测麦克风信号中的所述远端信号的回波;以及
路径估计器,其被配置为估计所检测的回波的回波路径的特征,其中:
所述信号识别器还被配置为检测来自所述麦克风信号的近端信号;以及
响应于检测到所述近端信号,所述增益控制系统被配置为根据所述回波路径的所估计的特征,来调整施加到所述远端信号的所述增益。
2.根据权利要求1所述的增益控制系统,其中,响应于检测到所述近端信号,所述增益控制系统被配置为减少所施加的增益。
3.根据权利要求2所述的增益控制系统,其中,响应于检测到缺少所述近端信号,所述增益控制系统被配置为从所减少的增益增加所施加的增益。
4.根据权利要求3所述的增益控制系统,其中,所述增益以第一速率减少,并以第二速率增加,所述第一速率大于所述第二速率。
5.根据权利要求3或4所述的增益控制系统,其中,所施加的增益增加到默认增益值。
6.根据任一前述权利要求所述的增益控制系统,其中,所述路径估计器被配置为将所检测的回波信号与所述远端信号进行相关,从而确定所述信号之间的相似性的度量。
7.根据权利要求6所述的增益控制系统,其中,根据相似性的所述度量来估计所述特征。
8.根据任一前述权利要求所述的增益控制系统,其中,所述特征是所述回波路径的非线性程度。
9.根据权利要求8所述的增益控制系统,其中,减少所述增益,从而输出根据所述非线性程度而具有预定功率的远端信号。
10.根据任一前述权利要求所述的增益控制系统,其中,所述特征是在所述回波路径中随时间的延迟的变化。
11.根据任一前述权利要求所述的增益控制系统,其中,在仅回波时段期间检测所述回波的存在。
12.根据任一前述权利要求所述的增益控制系统,其中,在双端通话期间检测所述近端信号。
13.根据任一前述权利要求所述的增益控制系统,其中,所述增益控制系统被配置为控制要通过扬声器输出的所述远端信号的量。
14.一种将增益施加到远端信号的方法,该方法包括如下步骤:
检测麦克风信号中的所述远端信号的回波;
估计所检测的回波的回波路径的特征;
检测来自所述麦克风信号的近端信号;以及
响应于检测到所述近端信号,根据所述回波路径的所估计的特征,来调整施加到所述远端信号的所述增益。
15.根据权利要求14所述的方法,其中,响应于检测到所述近端信号,减少所施加的增益。
16.根据权利要求15所述的方法,所述方法还包括如下步骤:
响应于检测到所述近端信号的缺少,从所减少的增益增加所施加的增益。
17.根据权利要求14至16中的任一项所述的方法,其中,估计回波路径的特征的步骤包括如下步骤:
将所检测的回波信号与所述远端信号进行相关,从而确定所述信号之间的相似性的度量。
18.根据权利要求14至17中的任一项所述的方法,其中,所述特征是所述回波路径的非线性程度。
19.根据权利要求18所述的方法,其中,减少所述增益,从而输出根据所述非线性程度而具有预定功率的远端信号。
20.一种机器可读存储介质,在该机器可读存储介质上编码有用于实施根据权利要求14至19中任一项所述的方法的非暂时机器可读代码。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB1419477.3A GB2525947B (en) | 2014-10-31 | 2014-10-31 | Automatic tuning of a gain controller |
GB1419477.3 | 2014-10-31 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105577961A true CN105577961A (zh) | 2016-05-11 |
CN105577961B CN105577961B (zh) | 2020-06-05 |
Family
ID=52118560
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510731976.0A Active CN105577961B (zh) | 2014-10-31 | 2015-11-02 | 增益控制器的自动调谐 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10244121B2 (zh) |
JP (1) | JP6773403B2 (zh) |
CN (1) | CN105577961B (zh) |
DE (1) | DE102015116475A1 (zh) |
GB (1) | GB2525947B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107635082A (zh) * | 2016-07-18 | 2018-01-26 | 深圳市有信网络技术有限公司 | 一种双端发声端检测系统 |
CN109994104A (zh) * | 2019-01-14 | 2019-07-09 | 珠海慧联科技有限公司 | 一种自适应通话音量控制方法及装置 |
WO2020168873A1 (zh) * | 2019-02-22 | 2020-08-27 | 北京达佳互联信息技术有限公司 | 语音处理方法、装置、电子设备及存储介质 |
CN111798863A (zh) * | 2020-06-24 | 2020-10-20 | 北京梧桐车联科技有限责任公司 | 消除回声的方法、装置、电子设备及可读存储介质 |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2527865B (en) | 2014-10-30 | 2016-12-14 | Imagination Tech Ltd | Controlling operational characteristics of an acoustic echo canceller |
US9565493B2 (en) | 2015-04-30 | 2017-02-07 | Shure Acquisition Holdings, Inc. | Array microphone system and method of assembling the same |
US9554207B2 (en) | 2015-04-30 | 2017-01-24 | Shure Acquisition Holdings, Inc. | Offset cartridge microphones |
CN108781241B (zh) * | 2016-01-14 | 2019-11-08 | 美商楼氏电子有限公司 | 用于声学回声消除的装置和方法 |
CN105847611B (zh) * | 2016-03-21 | 2020-02-11 | 腾讯科技(深圳)有限公司 | 一种回声时延检测方法、回声消除芯片及终端设备 |
US10367948B2 (en) | 2017-01-13 | 2019-07-30 | Shure Acquisition Holdings, Inc. | Post-mixing acoustic echo cancellation systems and methods |
US11523212B2 (en) | 2018-06-01 | 2022-12-06 | Shure Acquisition Holdings, Inc. | Pattern-forming microphone array |
US11297423B2 (en) | 2018-06-15 | 2022-04-05 | Shure Acquisition Holdings, Inc. | Endfire linear array microphone |
CN112889296A (zh) | 2018-09-20 | 2021-06-01 | 舒尔获得控股公司 | 用于阵列麦克风的可调整的波瓣形状 |
EP3942842A1 (en) | 2019-03-21 | 2022-01-26 | Shure Acquisition Holdings, Inc. | Housings and associated design features for ceiling array microphones |
EP3942845A1 (en) | 2019-03-21 | 2022-01-26 | Shure Acquisition Holdings, Inc. | Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition functionality |
US11558693B2 (en) | 2019-03-21 | 2023-01-17 | Shure Acquisition Holdings, Inc. | Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition and voice activity detection functionality |
US10652654B1 (en) | 2019-04-04 | 2020-05-12 | Microsoft Technology Licensing, Llc | Dynamic device speaker tuning for echo control |
JP7196002B2 (ja) * | 2019-04-05 | 2022-12-26 | 株式会社トランストロン | エコー抑圧装置、エコー抑圧方法及びエコー抑圧プログラム |
EP3973716A1 (en) | 2019-05-23 | 2022-03-30 | Shure Acquisition Holdings, Inc. | Steerable speaker array, system, and method for the same |
JP2022535229A (ja) | 2019-05-31 | 2022-08-05 | シュアー アクイジッション ホールディングス インコーポレイテッド | 音声およびノイズアクティビティ検出と統合された低レイテンシオートミキサー |
CN114467312A (zh) | 2019-08-23 | 2022-05-10 | 舒尔获得控股公司 | 具有改进方向性的二维麦克风阵列 |
US11552611B2 (en) | 2020-02-07 | 2023-01-10 | Shure Acquisition Holdings, Inc. | System and method for automatic adjustment of reference gain |
EP3863271A1 (en) | 2020-02-07 | 2021-08-11 | TeamViewer Germany GmbH | Method and device for enhancing a full duplex communication system |
WO2021243368A2 (en) | 2020-05-29 | 2021-12-02 | Shure Acquisition Holdings, Inc. | Transducer steering and configuration systems and methods using a local positioning system |
KR102377900B1 (ko) * | 2020-12-02 | 2022-03-23 | 주식회사 텔레칩스 | 더블 토크 이득 제어 장치 및 그 방법 |
EP4285605A1 (en) | 2021-01-28 | 2023-12-06 | Shure Acquisition Holdings, Inc. | Hybrid audio beamforming system |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5353348A (en) * | 1993-05-14 | 1994-10-04 | Jrc International, Inc. | Double echo cancelling system |
CN1247663A (zh) * | 1996-12-31 | 2000-03-15 | 艾利森公司 | 用于通信系统中噪音和回声抑制的交流中心削波器 |
US8565415B2 (en) * | 2007-10-08 | 2013-10-22 | Nuance Communications, Inc. | Gain and spectral shape adjustment in audio signal processing |
CN103534942A (zh) * | 2011-05-20 | 2014-01-22 | 斯凯普公司 | 处理音频信号 |
Family Cites Families (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE401260C (de) * | 1923-11-26 | 1924-08-29 | Rudolf Hans Richter | Felderzeugende Induktionsspule fuer Personen-Kontrollapparate zum Nachweis mitgefuehrter Metalle |
GB2225517B (en) | 1988-11-26 | 1993-03-31 | Motorola Inc | Telephone circuits |
US5313498A (en) * | 1991-06-13 | 1994-05-17 | Nec Corporation | Method and arrangement of echo elimination in digital telecommunications system |
DE19611548A1 (de) * | 1996-03-23 | 1997-09-25 | Sel Alcatel Ag | Verfahren und Schaltungsanordnung zur Verbesserung der Übertragungseigenschaften einer echobehafteten Übertragungsstrecke in einem Telekommunikationsnetz |
US6434110B1 (en) | 1998-03-20 | 2002-08-13 | Cirrus Logic, Inc. | Full-duplex speakerphone circuit including a double-talk detector |
US7072465B1 (en) * | 1999-01-06 | 2006-07-04 | Agere Systems, Inc. | Adaptive filter for network echo cancellation |
US6381224B1 (en) | 1999-03-31 | 2002-04-30 | Motorola, Inc. | Method and apparatus for controlling a full-duplex communication system |
US7933295B2 (en) * | 1999-04-13 | 2011-04-26 | Broadcom Corporation | Cable modem with voice processing capability |
US7164659B2 (en) * | 1999-12-09 | 2007-01-16 | Broadcom Corporation | Adaptive gain control based on echo canceller performance information |
US6804203B1 (en) * | 2000-09-15 | 2004-10-12 | Mindspeed Technologies, Inc. | Double talk detector for echo cancellation in a speech communication system |
US7050545B2 (en) * | 2001-04-12 | 2006-05-23 | Tallabs Operations, Inc. | Methods and apparatus for echo cancellation using an adaptive lattice based non-linear processor |
JP3862545B2 (ja) * | 2001-10-22 | 2006-12-27 | 沖電気工業株式会社 | エコーキャンセラ |
US7599432B2 (en) * | 2003-12-08 | 2009-10-06 | Freescale Semiconductor, Inc. | Method and apparatus for dynamically inserting gain in an adaptive filter system |
CN101617363B (zh) * | 2007-02-21 | 2012-09-05 | 艾利森电话股份有限公司 | 双端话音检测器 |
US20080247535A1 (en) | 2007-04-09 | 2008-10-09 | Microsoft Corporation | Method and apparatus for mitigating impact of nonlinear effects on the quality of audio echo cancellation |
US20090067615A1 (en) * | 2007-09-11 | 2009-03-12 | Aspect Software, Inc. | Echo cancellation using gain control |
US8175871B2 (en) * | 2007-09-28 | 2012-05-08 | Qualcomm Incorporated | Apparatus and method of noise and echo reduction in multiple microphone audio systems |
US8275139B2 (en) * | 2008-03-26 | 2012-09-25 | Ittiam Systems (P) Ltd. | Linear full duplex system and method for acoustic echo cancellation |
JP5125690B2 (ja) * | 2008-03-31 | 2013-01-23 | ヤマハ株式会社 | 音響エコー除去装置 |
US8498407B2 (en) | 2008-12-02 | 2013-07-30 | Qualcomm Incorporated | Systems and methods for double-talk detection in acoustically harsh environments |
US8483398B2 (en) * | 2009-04-30 | 2013-07-09 | Hewlett-Packard Development Company, L.P. | Methods and systems for reducing acoustic echoes in multichannel communication systems by reducing the dimensionality of the space of impulse responses |
US8571231B2 (en) * | 2009-10-01 | 2013-10-29 | Qualcomm Incorporated | Suppressing noise in an audio signal |
JP5493817B2 (ja) * | 2009-12-17 | 2014-05-14 | 沖電気工業株式会社 | エコーキャンセラ |
RU2011103938A (ru) * | 2011-02-03 | 2012-08-10 | ЭлЭсАй Корпорейшн (US) | Управление акустическими эхо-сигналами на основе временной области |
US8644522B2 (en) * | 2011-03-31 | 2014-02-04 | Broadcom Corporation | Method and system for modeling external volume changes within an acoustic echo canceller |
GB2490927A (en) * | 2011-05-18 | 2012-11-21 | Zarlink Semiconductor Inc | Single controller for control of gain in two paths and for control of howling |
EP2538555B1 (en) * | 2011-06-22 | 2019-09-11 | Nxp B.V. | Control of a loudspeaker output |
US8811602B2 (en) | 2011-06-30 | 2014-08-19 | Broadcom Corporation | Full duplex speakerphone design using acoustically compensated speaker distortion |
US8718275B2 (en) | 2011-12-22 | 2014-05-06 | Google Inc. | Low complex and robust delay estimation |
US8774399B2 (en) * | 2011-12-27 | 2014-07-08 | Broadcom Corporation | System for reducing speakerphone echo |
US8923508B2 (en) * | 2012-06-07 | 2014-12-30 | Lsi Corporation | Half-duplex speakerphone echo canceler |
US9088336B2 (en) * | 2012-09-06 | 2015-07-21 | Imagination Technologies Limited | Systems and methods of echo and noise cancellation in voice communication |
US9818424B2 (en) * | 2013-05-06 | 2017-11-14 | Waves Audio Ltd. | Method and apparatus for suppression of unwanted audio signals |
DK2822263T3 (da) * | 2013-07-05 | 2019-06-17 | Sennheiser Communications As | Kommunikationsanordning med ekkoundertrykkelse |
US20170011753A1 (en) * | 2014-02-27 | 2017-01-12 | Nuance Communications, Inc. | Methods And Apparatus For Adaptive Gain Control In A Communication System |
JP6295722B2 (ja) * | 2014-02-28 | 2018-03-20 | 沖電気工業株式会社 | エコー抑圧装置、プログラム及び方法 |
GB2521881B (en) * | 2014-04-02 | 2016-02-10 | Imagination Tech Ltd | Auto-tuning of non-linear processor threshold |
GB2519392B (en) * | 2014-04-02 | 2016-02-24 | Imagination Tech Ltd | Auto-tuning of an acoustic echo canceller |
GB201406574D0 (en) * | 2014-04-11 | 2014-05-28 | Microsoft Corp | Audio Signal Processing |
US9589556B2 (en) * | 2014-06-19 | 2017-03-07 | Yang Gao | Energy adjustment of acoustic echo replica signal for speech enhancement |
GB2527865B (en) * | 2014-10-30 | 2016-12-14 | Imagination Tech Ltd | Controlling operational characteristics of an acoustic echo canceller |
US20160171988A1 (en) * | 2014-12-15 | 2016-06-16 | Wire Swiss Gmbh | Delay estimation for echo cancellation using ultrasonic markers |
GB201501791D0 (en) * | 2015-02-03 | 2015-03-18 | Microsoft Technology Licensing Llc | Non-linear echo path detection |
GB201518004D0 (en) * | 2015-10-12 | 2015-11-25 | Microsoft Technology Licensing Llc | Audio signal processing |
US9881632B1 (en) * | 2017-01-04 | 2018-01-30 | 2236008 Ontario Inc. | System and method for echo suppression for in-car communications |
-
2014
- 2014-10-31 GB GB1419477.3A patent/GB2525947B/en active Active
-
2015
- 2015-09-29 DE DE102015116475.2A patent/DE102015116475A1/de active Pending
- 2015-10-21 JP JP2015207528A patent/JP6773403B2/ja active Active
- 2015-10-30 US US14/928,205 patent/US10244121B2/en active Active
- 2015-11-02 CN CN201510731976.0A patent/CN105577961B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5353348A (en) * | 1993-05-14 | 1994-10-04 | Jrc International, Inc. | Double echo cancelling system |
CN1247663A (zh) * | 1996-12-31 | 2000-03-15 | 艾利森公司 | 用于通信系统中噪音和回声抑制的交流中心削波器 |
US8565415B2 (en) * | 2007-10-08 | 2013-10-22 | Nuance Communications, Inc. | Gain and spectral shape adjustment in audio signal processing |
CN103534942A (zh) * | 2011-05-20 | 2014-01-22 | 斯凯普公司 | 处理音频信号 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107635082A (zh) * | 2016-07-18 | 2018-01-26 | 深圳市有信网络技术有限公司 | 一种双端发声端检测系统 |
CN109994104A (zh) * | 2019-01-14 | 2019-07-09 | 珠海慧联科技有限公司 | 一种自适应通话音量控制方法及装置 |
CN109994104B (zh) * | 2019-01-14 | 2021-05-14 | 珠海慧联科技有限公司 | 一种自适应通话音量控制方法及装置 |
WO2020168873A1 (zh) * | 2019-02-22 | 2020-08-27 | 北京达佳互联信息技术有限公司 | 语音处理方法、装置、电子设备及存储介质 |
US11587574B2 (en) | 2019-02-22 | 2023-02-21 | Beijing Dajia Internet Information Technology Co., Ltd. | Voice processing method, apparatus, electronic device, and storage medium |
CN111798863A (zh) * | 2020-06-24 | 2020-10-20 | 北京梧桐车联科技有限责任公司 | 消除回声的方法、装置、电子设备及可读存储介质 |
CN111798863B (zh) * | 2020-06-24 | 2024-03-08 | 北京梧桐车联科技有限责任公司 | 消除回声的方法、装置、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
GB2525947A (en) | 2015-11-11 |
US20160127561A1 (en) | 2016-05-05 |
JP2016092822A (ja) | 2016-05-23 |
CN105577961B (zh) | 2020-06-05 |
JP6773403B2 (ja) | 2020-10-21 |
GB2525947B (en) | 2016-06-22 |
US10244121B2 (en) | 2019-03-26 |
GB201419477D0 (en) | 2014-12-17 |
DE102015116475A1 (de) | 2016-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105577961A (zh) | 增益控制器的自动调谐 | |
CN104980601B (zh) | 用于动态调谐回音消除器的增益控制系统及方法 | |
CN101964670B (zh) | 回声抑制方法及回声抑制设备 | |
CN106713570B (zh) | 一种回声消除方法和装置 | |
US8355511B2 (en) | System and method for envelope-based acoustic echo cancellation | |
US9800734B2 (en) | Echo cancellation | |
CN109716743B (zh) | 全双工语音通信系统和方法 | |
EP3058710B1 (en) | Detecting nonlinear amplitude processing | |
JP4568439B2 (ja) | エコー抑圧装置 | |
CN109273019B (zh) | 用于回声抑制的双重通话检测的方法及回声抑制 | |
US9343073B1 (en) | Robust noise suppression system in adverse echo conditions | |
US8160239B2 (en) | Echo canceller and speech processing apparatus | |
JPH09172396A (ja) | 音響結合の影響を除去するためのシステムおよび方法 | |
JP2009065699A (ja) | 音響エコーの相殺および抑制を実行する利得制御方法 | |
EP2700161B1 (en) | Processing audio signals | |
CN111742541B (zh) | 声学回波抵消方法、装置、存储介质 | |
US20150086006A1 (en) | Echo suppressor using past echo path characteristics for updating | |
CN106657700B (zh) | 一种能消除回声的免提通话装置及其控制方法 | |
JP2009105666A (ja) | 拡声通話装置 | |
US7711108B2 (en) | Fast echo canceller reconvergence after TDM slips and echo level changes | |
EP2380339B1 (en) | Determining an acoustic coupling between a far-end talker signal and a combined signal | |
CN111355855B (zh) | 回声处理方法、装置、设备及存储介质 | |
JP2023519249A (ja) | エコー残留抑制 | |
US7734035B2 (en) | Method and apparatus for soft-response echo suppression | |
KR100431965B1 (ko) | 시변 적응알고리즘이 적용된 음향반향 제거장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |