CN103327201B - 残留回声消除方法及系统 - Google Patents
残留回声消除方法及系统 Download PDFInfo
- Publication number
- CN103327201B CN103327201B CN201210073207.2A CN201210073207A CN103327201B CN 103327201 B CN103327201 B CN 103327201B CN 201210073207 A CN201210073207 A CN 201210073207A CN 103327201 B CN103327201 B CN 103327201B
- Authority
- CN
- China
- Prior art keywords
- residual echo
- echo signal
- residual
- signal
- win
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Telephone Function (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
Abstract
本发明涉及语音通信领域,公开了一种残留回声消除方法及系统。本发明中,采用汉明窗或布莱克曼窗等非矩形窗对残留回声信号进行加窗处理,可减小频谱泄漏,以提高线性预测的准确性,使残差信号更接近白噪声,从而更好地消除残留回声。进一步地,在对残留回声信号进行加窗处理时,可将本帧残留回声信号和上一帧的最后N个信号组合成当前需处理的残留回声信号,可进一步减小频谱泄漏。
Description
技术领域
本发明涉及语音通信领域,特别涉及残留回声消除方法及系统。
背景技术
在语音通信系统中,远端输入信号到达本地信号接收设备后,经过本地信号接收设备的处理到达听筒,在此过程中经常会产生回声。在回声消除中,会涉及4个处理模块,分别为自适应滤波模块,双端检测模块,残留回声消除模块以及噪声消除模块,其中残留回声消除模块和噪声消除模块可以统称为非线性处理部分,如图1所示。其中自适应滤波器主要用于跟踪回声反射的路径,估计出估计回声信号双端通话检测器用于控制自适应滤波器的更新,防止滤波器在双讲的时候继续更新导致滤波器发散;由于自适应滤波器长度及计算误差的原因,自适应滤波后总是会有残留回声,残留回声消除模块主要是处理自适应滤波处理之后的残留回声,得到残差信号,噪声消除模块进行噪声抑制。
现有的非线性回声处理方法有AR(自回归)模型白化语音,估计残留回声并替换等,采用AR模型进行残留回声消除的原理在于采用AR模型进行语音估计,由原信号和估计值的差作为噪声消除的输入,由于AR模型是自回归模型,那么它的输出将是白噪声输出,这时噪声消除器就能将AR模型的输出当作环境噪声给予很好的抑制。
AR模型白化语音,即线性预测处理过程如下:
其中,e(k)代表残留回声信号;ai(k)是LPC线性滤波器系数,可以采用Levinson-Durbin算法计算出来;P代表LPC滤波器阶数;ew(k)代表解相关后的残留信号,作为噪声消除器的输入。ew(k)信号会被噪声消除器当成是环境噪声信号抑制。
现有的技术方案采用AR模型进行白化残留回声处理,受到系统处理能力的限制,语音信号需要被截短后再进行处理,然而,对语音信号进行直接截短后必然会造成频谱泄漏,造成白化的效果不好,而这样的信号送入噪声抑制器的话,消除效果也会打折扣。
发明内容
本发明的目的在于提供一种残留回声消除方法及系统,采用非矩形窗对残留回声信号进行加窗处理,可减小频谱泄漏,以提高线性预测的准确性,使进行噪声消除时处理的残差信号更接近白噪声,从而更好地消除残留回声。
为解决上述技术问题,本发明的实施方式提供了一种残留回声消除方法,包含以下步骤:
采用非矩形窗对残留回声信号e(k)进行加窗处理,得到加窗后的残留回声信号ewin(k);
对所述ewin(k)进行线性预测编码LPC,得到残留回声信号估计值;
将所述ewin(k)与所述残留回声信号估计值相减后得到残差信号ew(k);
根据所述ew(k)对语音信号进行噪声消除。
本发明的实施方式还提供了一种残留回声消除系统,包含:
加窗模块,用于采用非矩形窗对残留回声信号e(k)进行加窗处理,输出加窗后的残留回声信号ewin(k);
编码模块,用于对所述加窗模块输出的ewin(k)进行线性预测编码LPC,得到残留回声信号估计值;
残差信号获取模块,用于将所述加窗模块输出ewin(k)与所述编码模块输出的残留回声信号估计值相减后得到残差信号ew(k);
噪声消除模块,用于根据所述残差信号获取模块输出的ew(k)对语音信号进行噪声消除。
本发明实施方式相对于现有技术而言,采用非矩形窗对残留回声信号进行了加窗处理,可减小频谱泄漏,以提高线性预测的准确性,使进行噪声消除时处理的残差信号更接近白噪声,从而更好地消除残留回声。
优选地,在对残留回声信号进行加窗处理时,采用汉明窗或布莱克曼窗,可进一步减小频谱泄漏,而且,由于汉明窗或布莱克曼窗已是现有的成熟技术,保证了本发明的可行性。
优选地,在对残留回声信号e(k)进行加窗处理时,可将本帧残留回声信号和上一帧的最后N个信号组合成所述e(k)。通过对残留回声信号进行重叠处理,可进一步减小频谱泄漏。
附图说明
图1是现有技术中声学回声消除的原理示意图;
图2是根据本发明第一实施方式的残留回声消除方法的流程图;
图3是将本帧残留回声信号的样点与上一帧残留回声信号的后N个样点进行拼接的示意图;
图4是原始残留回声信号的时域波形图和语谱图;
图5是采用直接截断白化处理得到的残差信号的时域波形图和语谱图;
图6是采用本发明的第二实施方式进行处理得到的残差信号的时域波形图和语谱图;
图7是根据本发明第三实施方式的残留回声消除系统的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的各实施方式进行详细的阐述。然而,本领域的普通技术人员可以理解,在本发明各实施方式中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请各权利要求所要求保护的技术方案。
本发明的第一实施方式涉及一种残留回声消除方法,其流程如图2所示。具体包括如下步骤:
步骤S201,采用非矩形窗对残留回声信号e(k)进行加窗处理,得到加窗后的残留回声信号ewin(k)。可用下式表示加窗过程:
ewin(k)=e(k)w(k)
其中,e(k)代表残留回声信号,w(k)代表窗函数,可以采用hamming(汉明窗),blackman(布莱克曼窗)等常见的非矩形窗窗函数。根据常见窗函数的性质,与直接截断相比,进行加窗后的信号能减小频谱泄露,减小边瓣的影响。
步骤S202,对所述ewin(k)进行线性预测编码LPC,得到残留回声信号估计值。残留回声信号估计值可用下式计算得到:
其中,ai(k)表示LPC滤波器系数,可采用Levinson-Durbin算法进行计算;P表示LPC滤波器阶数,本实施方式中可选择10阶。
步骤S203,将所述ewin(k)与所述残留回声信号估计值相减后得到残差信号ew(k),即:
步骤S204,根据所述ew(k)对语音信号进行噪声消除。
与现有技术相比,由于本实施方式对残留回声信号进行了加窗处理,加窗后的信号能减小频谱泄露,减小边瓣的影响,可提高线性预测编码中计算残留回声信号估计值的准确性,进一步使残留回声信号与其估计值相减后得到的残差信号更接近白噪声,从而在噪声消除中能更好地消除该残差信号,达到消除残留回声的目的。
本发明的第二实施方式涉及一种残留回声消除方法。第二实施方式在第一实施方式基础上做了进一步改进,其改进之处在于:在本发明第二实施方式中,在对残留回声信号e(k)进行加窗处理的步骤中,将本帧残留回声信号和上一帧的最后N个信号组合成所述e(k)。
图3为将本帧残留回声信号与上一帧后N个样点拼接在一起的示意图。本实施方式中的N可为40,也就是说,采用上一帧的后40个样点与本帧的160个样点拼接在一起构成当前需要处理的200个样点的残留回声信号。对残留回声信号进行重叠处理,可进一步减小频谱泄漏。
根据图4、图5、图6,可直观地发现本实施方式的有益效果,其中,图4为原始残留回声信号的时域波形图和语谱图;图5为采用直接截断白化处理得到的残差信号的时域波形图和语谱图;图6为采用本实施方式进行处理得到的残差信号的时域波形图和语谱图。可以明显看出,采用直接截断白化处理得到的残差信号的语音特性已经明显减小;而采用本实施方式进行处理得到的残差信号的语音特质更加少了,经过后续的噪声抑制处理后,基本可以消除干净。
需要说明的是,上面各种方法的步骤划分,只是为了描述清楚,实现时可以合并为一个步骤或者对某些步骤进行拆分,分解为多个步骤,只要包含相同的逻辑关系,都在本专利的保护范围内;对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计,但不改变其算法和流程的核心设计都在该专利的保护范围内。
本发明第三实施方式涉及一种残留回声消除系统,如图7所示,包含:
加窗模块,用于采用非矩形窗对残留回声信号e(k)进行加窗处理,输出加窗后的残留回声信号ewin(k);
编码模块,用于对所述加窗模块输出的ewin(k)进行线性预测编码LPC,得到残留回声信号估计值;
残差信号获取模块,用于将所述加窗模块输出ewin(k)与所述编码模块输出的残留回声信号估计值相减后得到残差信号ew(k);
噪声消除模块,用于根据所述残差信号获取模块输出的ew(k)对语音信号进行噪声消除。
不难发现,本实施方式为与第一实施方式相对应的系统实施例,本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效,为了减少重复,这里不再赘述。相应地,本实施方式中提到的相关技术细节也可应用在第一实施方式中。
值得一提的是,本实施方式中所涉及到的各模块均为逻辑模块,在实际应用中,一个逻辑单元可以是一个物理单元,也可以是一个物理单元的一部分,还可以以多个物理单元的组合实现。此外,为了突出本发明的创新部分,本实施方式中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入,但这并不表明本实施方式中不存在其它的单元。
本发明第四实施方式涉及一种残留回声消除系统。第四实施方式在第三实施方式基础上做了进一步改进,其改进之处在于:在本发明第四实施方式中,加窗模块处理的e(k),并非只是本帧残留回声信号,而是由本帧残留回声信号和上一帧的最后N个信号组成。后续处理与本发明第三实施方式的处理类似,在此不再赘述。
由于第二实施方式与本实施方式相互对应,因此本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效,在第二实施方式中所能达到的技术效果在本实施方式中也同样可以实现,为了减少重复,这里不再赘述。相应地,本实施方式中提到的相关技术细节也可应用在第二实施方式中。
本领域的普通技术人员可以理解,上述各实施方式是实现本发明的具体实施例,而在实际应用中,可以在形式上和细节上对其作各种改变,而不偏离本发明的精神和范围。
Claims (10)
1.一种残留回声消除方法,其特征在于,包含以下步骤:
采用非矩形窗对残留回声信号e(k)进行加窗处理,得到加窗后的残留回声信号ewin(k);
对所述ewin(k)进行线性预测编码LPC,得到残留回声信号估计值;
将所述ewin(k)与所述残留回声信号估计值相减后得到残差信号ew(k);
根据所述ew(k)对语音信号进行噪声消除。
2.根据权利要求1所述的残留回声消除方法,其特征在于,
所述非矩形窗为汉明窗或布莱克曼窗。
3.根据权利要求1所述的残留回声消除方法,其特征在于,在所述对残留回声信号e(k)进行加窗处理的步骤中,包含以下子步骤:
将本帧残留回声信号和上一帧的最后N个信号组合成所述e(k)。
4.根据权利要求3所述的残留回声消除方法,其特征在于,
所述N为40。
5.根据权利要求1至4中任一项所述的残留回声消除方法,其特征在于,通过以下公式对所述ewin(k)进行线性预测编码,得到所述残留回声信号估计值:
其中,ai(k)表示LPC滤波器系数,P表示LPC滤波器阶数。
6.根据权利要求5所述的残留回声消除方法,其特征在于,
所述P为10。
7.一种残留回声消除系统,其特征在于,包含:
加窗模块,用于采用非矩形窗对残留回声信号e(k)进行加窗处理,输出加窗后的残留回声信号ewin(k);
编码模块,用于对所述加窗模块输出的ewin(k)进行线性预测编码LPC,得到残留回声信号估计值;
残差信号获取模块,用于将所述加窗模块输出ewin(k)与所述编码模块输出的残留回声信号估计值相减后得到残差信号ew(k);
噪声消除模块,用于根据所述残差信号获取模块输出的ew(k)对语音信号进行噪声消除。
8.根据权利要求7所述的残留回声消除系统,其特征在于,所述非矩形窗为汉明窗或布莱克曼窗。
9.根据权利要求7所述的残留回声消除系统,其特征在于,
所述e(k)由本帧残留回声信号和上一帧的最后N个信号组成。
10.根据权利要求9所述的残留回声消除系统,其特征在于,
所述N为40。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210073207.2A CN103327201B (zh) | 2012-03-20 | 2012-03-20 | 残留回声消除方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210073207.2A CN103327201B (zh) | 2012-03-20 | 2012-03-20 | 残留回声消除方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103327201A CN103327201A (zh) | 2013-09-25 |
CN103327201B true CN103327201B (zh) | 2016-04-20 |
Family
ID=49195717
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210073207.2A Active CN103327201B (zh) | 2012-03-20 | 2012-03-20 | 残留回声消除方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103327201B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2519392B (en) * | 2014-04-02 | 2016-02-24 | Imagination Tech Ltd | Auto-tuning of an acoustic echo canceller |
CN106878575B (zh) * | 2017-02-24 | 2019-11-05 | 成都喜元网络科技有限公司 | 残留回声的估计方法及装置 |
CN106898359B (zh) * | 2017-03-24 | 2020-03-17 | 上海智臻智能网络科技股份有限公司 | 音频信号处理方法、系统、音频交互装置及计算机设备 |
CN107071197B (zh) * | 2017-05-16 | 2020-04-24 | 中山大学花都产业科技研究院 | 一种基于全相位多延迟分块频域的回音消除方法及系统 |
CN112787757A (zh) * | 2021-01-09 | 2021-05-11 | 鸣飞伟业技术有限公司 | 信息传输防返流装置 |
CN113286047B (zh) * | 2021-04-22 | 2023-02-21 | 维沃移动通信(杭州)有限公司 | 语音信号处理方法、装置及电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101080766A (zh) * | 2004-11-03 | 2007-11-28 | 声学技术公司 | 使用bark频带weiner滤波器和线性衰减的噪声降低和舒适噪声增益控制 |
CN101106405A (zh) * | 2006-07-12 | 2008-01-16 | 北京大学深圳研究生院 | 回声消除器、回声消除方法及其双端通话检测系统 |
CN101222555A (zh) * | 2008-01-25 | 2008-07-16 | 上海华平信息技术股份有限公司 | 改善音频通话质量的系统及方法 |
CN101228574A (zh) * | 2005-09-08 | 2008-07-23 | 北京阜国数字技术有限公司 | 一种控制前回声的编码和解码装置及方法 |
CN101271691A (zh) * | 2008-04-30 | 2008-09-24 | 北京中星微电子有限公司 | 一种时域噪声整形工具启动判决方法及装置 |
CN101820302A (zh) * | 2009-02-27 | 2010-09-01 | 比亚迪股份有限公司 | 一种回声消除装置和方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6718036B1 (en) * | 1999-12-15 | 2004-04-06 | Nortel Networks Limited | Linear predictive coding based acoustic echo cancellation |
-
2012
- 2012-03-20 CN CN201210073207.2A patent/CN103327201B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101080766A (zh) * | 2004-11-03 | 2007-11-28 | 声学技术公司 | 使用bark频带weiner滤波器和线性衰减的噪声降低和舒适噪声增益控制 |
CN101228574A (zh) * | 2005-09-08 | 2008-07-23 | 北京阜国数字技术有限公司 | 一种控制前回声的编码和解码装置及方法 |
CN101106405A (zh) * | 2006-07-12 | 2008-01-16 | 北京大学深圳研究生院 | 回声消除器、回声消除方法及其双端通话检测系统 |
CN101222555A (zh) * | 2008-01-25 | 2008-07-16 | 上海华平信息技术股份有限公司 | 改善音频通话质量的系统及方法 |
CN101271691A (zh) * | 2008-04-30 | 2008-09-24 | 北京中星微电子有限公司 | 一种时域噪声整形工具启动判决方法及装置 |
CN101820302A (zh) * | 2009-02-27 | 2010-09-01 | 比亚迪股份有限公司 | 一种回声消除装置和方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103327201A (zh) | 2013-09-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103327201B (zh) | 残留回声消除方法及系统 | |
EP2905778A1 (en) | Echo cancellation method and device | |
JP6431884B2 (ja) | シングルチャンネル音声残響除去方法及びその装置 | |
EP2327156B1 (en) | Method for determining updated filter coefficients of an adaptive filter adapted by an lms algorithm with pre-whitening | |
US9420390B2 (en) | Estimation and suppression of harmonic loudspeaker nonlinearities | |
EP2804177A2 (en) | Method for processing an audio signal and audio receiving circuit | |
CN111968658B (zh) | 语音信号的增强方法、装置、电子设备和存储介质 | |
CN103067628B (zh) | 残留回声抑制方法及其装置 | |
US8868416B2 (en) | Apparatus and method for cancelling echo in joint time domain and frequency domain | |
Avargel et al. | Modeling and identification of nonlinear systems in the short-time Fourier transform domain | |
US8385558B2 (en) | Echo presence determination in voice conversations | |
CN112017679B (zh) | 用于自适应滤波器系数更新的方法及装置、设备 | |
CN101083640A (zh) | 低复杂度的降噪方法 | |
KR20040030817A (ko) | 통신 시스템, 에코 제거 수단 및 에코 제거 방법 | |
KR20120094892A (ko) | 손상된 오디오 신호의 복구 | |
CN101820302B (zh) | 一种回声消除装置 | |
CN113808602A (zh) | 语音增强方法、模型训练方法以及相关设备 | |
CN102377454B (zh) | 一种回声消除的方法和装置 | |
CN111755020A (zh) | 一种立体声回声消除方法 | |
US20080219434A1 (en) | Method and apparatus for voice communication | |
CN202887704U (zh) | 一种单通道语音去混响装置 | |
TW200412728A (en) | Noise matching for echo cancellers | |
Wung et al. | Robust acoustic echo cancellation in the short-time fourier transform domain using adaptive crossband filters | |
US10999444B2 (en) | Acoustic echo cancellation device, acoustic echo cancellation method and non-transitory computer readable recording medium recording acoustic echo cancellation program | |
CN102117620A (zh) | 一种双滤波器传递滤波器系数的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20170420 Address after: 201206 Free Trade Zone, Shanghai, Ming Road, No. 1258, building fourth, room B412, level 3 Patentee after: Shanghai Li Ke Semiconductor Technology Co., Ltd. Address before: 201206 Pudong New Area Mingyue Road, Shanghai, No. 1258 Patentee before: Leadcore Technology Co., Ltd. |
|
TR01 | Transfer of patent right |