CN109509482A - 回声消除方法、回声消除装置、电子设备和可读介质 - Google Patents
回声消除方法、回声消除装置、电子设备和可读介质 Download PDFInfo
- Publication number
- CN109509482A CN109509482A CN201811519018.7A CN201811519018A CN109509482A CN 109509482 A CN109509482 A CN 109509482A CN 201811519018 A CN201811519018 A CN 201811519018A CN 109509482 A CN109509482 A CN 109509482A
- Authority
- CN
- China
- Prior art keywords
- echo
- signal
- frequency range
- low
- near end
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 238000012545 processing Methods 0.000 claims abstract description 84
- 230000007704 transition Effects 0.000 claims abstract description 67
- 230000011664 signaling Effects 0.000 claims abstract description 50
- 238000000354 decomposition reaction Methods 0.000 claims abstract description 21
- 230000008030 elimination Effects 0.000 claims description 18
- 238000003379 elimination reaction Methods 0.000 claims description 18
- 230000015572 biosynthetic process Effects 0.000 claims description 17
- 238000003786 synthesis reaction Methods 0.000 claims description 17
- 239000002131 composite material Substances 0.000 claims description 15
- 230000004044 response Effects 0.000 claims description 14
- 238000001914 filtration Methods 0.000 claims description 13
- 230000000694 effects Effects 0.000 abstract description 10
- 230000008569 process Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 9
- 238000005070 sampling Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 238000003672 processing method Methods 0.000 description 5
- 230000003044 adaptive effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 241000209140 Triticum Species 0.000 description 2
- 235000021307 Triticum Nutrition 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Telephone Function (AREA)
Abstract
本申请是关于一种回声消除方法、回声消除装置、电子设备和可读介质。所述回声消除方法包括：将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中，然后对过渡范围中的近端信号采用如下方法进行回声消除：根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，从而提高了过渡范围中近端信号的回声消除效果，解决了传统回声消除方法对回声消除的性能和质量无法兼顾的技术问题。
Description
技术领域
本申请属于回声消除的技术领域，尤其是回声消除方法、回声消除装置、电子设备和可读介质。
背景技术
语音通信中，若扬声器放出的远端通话者声音被麦克风采集到，那么扬声器和麦克风之间就构成了声学回路，这会使得远端通话者听到自己的回声，从而严重影响通话质量，因而，麦克风采集到的近端信号需要经过回声消除来消除掉扬声器发出声音。在回声消除领域，为了提高回声消除的处理性能(例如有收敛速度)，常常会采用子带回声消除结构，即，将近端信号和远端信号分别分解到多个子带里，然后分别在每个子带里应用回声消除算法，最后再将多个子带里经过回声消除后的信号合成为最终输出信号。
现有技术采用正交镜像滤波器(quandrature mirror filter，简称QMF)将信号分解到子带，在低频范围作自适应滤波处理和非线性处理(Non-linear processing，简称NLP)来消除残余回声，然后在高频范围只作基于低频NLP处理参数的NLP处理。这种处理方法的处理性能很好，不过因为过渡范围中混叠信号的影响，过渡范围这一区域的回声消除效果较差。目前针对过渡范围，一般采用超采样回声消除方法来有效提升过渡范围的回声消除效果，但是超采样处理和额外的雷射器会使回声消除的处理性能明显降低。
针对现有技术中的回声消除方法对回声消除的性能和质量无法兼顾的技术问题，目前缺乏有效的解决方案。
发明内容
为解决相关技术中存在的问题，本申请公开一种回声消除方法、回声消除装置、电子设备和可读介质。
根据本申请实施例的第一方面，提供一种回声消除方法，包括：
将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
在所述低频范围和所述高频范围，根据远端信号对近端信号进行回声消除，得到所述低频范围的第一信号和所述高频范围的第二信号；
在所述过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号；
将所述第一信号、所述第二信号和所述第三信号的合成信号，确定为经子带回声消除后的输出信号。
可选地，在所述低频范围，根据远端信号对近端信号进行回声消除，包括：
根据所述低频范围中的远端信号，对所述低频范围中的近端信号进行自适应滤波处理和非线性处理。
可选地，回声消除方法还包括：将所述低频范围中非线性处理的处理参数进行保存；
在所述高频范围，根据远端信号对近端信号进行回声消除，包括：基于所述处理参数，对所述高频范围中的近端信号进行非线性处理。
可选地，采用多项无限冲激响应分解滤波器组，将近端信号和远端信分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
采用多项无限冲激响应综合滤波器组，将所述第一信号、所述第二信号和所述第三信号合成为所述合成信号。
根据本发明实施例的第二方面，提供一种回声消除装置，包括：
分解单元，用于将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
第一处理单元，用于在所述低频范围和所述高频范围，根据远端信号对近端信号进行回声消除，得到所述低频范围的第一信号和所述高频范围的第二信号；
第二处理单元，用于在所述过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号；
合成单元，用于将所述第一信号、所述第二信号和所述第三信号的合成信号，确定为经子带回声消除后的输出信号。
可选地，所述第一处理单元用于：
根据所述低频范围中的远端信号，对所述低频范围中的近端信号进行自适应滤波处理和非线性处理。
可选地，回声消除装置还包括：保存单元，用于将所述低频范围非线性处理的处理参数进行保存；
所述第一处理单元，用于基于所述处理参数，对所述高频范围中的近端信号进行非线性处理。
可选地，所述分解单元，用于采用多项无限冲激响应分解滤波器组，将近端信号和远端信分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
所述合成单元，用于采用多项无限冲激响应综合滤波器组，将所述第一信号、所述第二信号和所述第三信号合成为所述合成信号。
根据本发明实施例的第三方面，提供一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行上述任意一项所述的回声消除方法。
根据本发明实施例的第四方面，提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令被执行时实现上述任一项所述的回声消除方法。
本申请的实施例提供的技术方案可以包括以下有益效果：
本发明实施例提供的回声消除方法，对过渡范围中的近端信号采用如下方法进行回声消除：根据过渡范围相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，从而提高了过渡范围中近端信号的回声消除效果，解决了传统回声消除方法对回声消除的性能和质量无法兼顾的技术问题。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
图1是回声消除的原理图；
图2是示例性子带回声消除的原理图；
图3是基于超采样处理方法进行子带回声消除的原理图；
图4是根据示例性实施例示出的回声消除方法的流程图；
图5是采用IIR分解滤波器组分解信号的原理图；
图6是采用IIR综合滤波器合成信号的原理图；
图7是根据一示例性实施例示出的一种回声消除装置的框图；
图8是根据一示例性实施例示出的一种电子设备的框图；
图9是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在回声消除领域，通过自适应滤波(adaptive filtering，简称AF)进行回声消除。图1所示为基于自适应滤波器的回声消除原理，参照图1，回声消除流程包括：
a)通过近端远端语音数据，确定通话中的听者和说者；
b)远端信号x(k)经过自适应滤波器(多采用有限冲激响应滤波器，即finiteImpulse Response滤波器,简称FIR滤波器)后就得到了近似于近端输入的数据d(k)，近端信号y(k)与d(k)相减后得到了去掉回声的近端信号e(k)。e(k)作为自适应最小均方(leastmean square，简称LMS)算法的输入，用于在远端用户为说者且近端用户为听者的情况下，更新FIR滤波器的系数，以影响远端信号x(k)的处理结果；
c)e(k)同时也会经过NLP后以舒适的噪声送给远端用户。
为了提高上述回声消除流程的处理性能，常常会采用子带回声消除结构，即，将近端信号和远端信号都分解到多个子带里，然后分别在每个子带里应用回声消除算法，最后再将多个子带里经过回声消除后的信号合成为最终输出信号。图2所示为两个子带情况下的一种子带回声消除结构的回声消除原理图，参照图2，子带回声消除流程包括：
a)远端信号x(n)通过Decimator(QMF分解滤波)分成两个子带x1'(n)和x2'(n)，近端信号y(n)通过Decimator分成两个子带y1'(n)和y2'(n)；
b)x1'(n)和y1'(n)经过AF得到e1'(n),x2'(n)和y2'(n)经过AF得到e2'(n)；
c)e1'(n)和e2'(n)通过Interpolator(QMF合成滤波)进行合成，得到了去掉回声的输入信号e(n)。
利用子带回声消除结构，现有技术中一种回声消除方法是基于正交镜像滤波器进行子带回声消除，包括：采用正交镜像滤波器将信号分解到子带，在低频范围作自适应滤波处理和非线性处理(Non-linear processing，简称NLP)来消除残余回声，然后在高频范围只作基于低频NLP处理参数的NLP处理。这种处理方法的处理性能很好，不过因为过渡范围里混叠信号的影响，过渡范围这一区域的回声消除效果较差。
针对过渡范围的上述问题，目前一般采用超采样回声消除方法来有效提升过渡范围的回声消除效果。基于超采样处理方法进行子带回声消除，原理如图3所示，该方法的子带回声消除流程，包括：
a)近端信号y(n)先进行两倍升采样，再通过合成滤波器H(z)，之后三倍抽取，获得两个等于原来75％采样率的子带信号d1(n)和d2(n)；
b)远端信号x(n)经过与近端信号y(n)的同样处理后，得到两个子带信号u1(n)和u2(n)；
c)u1(n)和d1(n)经过AF后得到去掉回声的子带信号s1(n)，u2(n)和d2(n)经过AF后得到去掉回声的子带信号s2(n)；
d)s1(n)和s2(n)进行先三倍升采样，再通过合成滤波器H(z)，之后2倍抽取，得到信号e1'(n)和e2'(n)；
e)e1'(n)和e2'(n)合成去掉回声的近端信号e(n)。上述各参数中的自变量k表示频率，而自变量n表示时间。
然而，超采样处理和额外的雷射器会使回声消除的处理性能明显降低。
综上所述，基于正交镜像滤波器进行子带回声消除，性能较好，但质量较差；基于超采样处理方法进行子带回声消除，质量较好，但性能较差，因而这两种方法都无法兼顾回声消除的性能和质量。基于此，本发明实施例提供了一种回声消除方法及回声消除装置，以解决传统回声消除方法对回声消除的性能和质量无法兼顾的技术问题。
图4是根据一示例性实施例示出的回声消除方法的流程图。具体包括以下步骤：
步骤S101，将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中。
需要说明的是，近端信号为麦克风采集到的近端通话者声音以及扬声器发出声音；远端信号是输入到扬声器的远端通话者声音。
步骤S102，在低频范围和高频范围，根据远端信号对近端信号进行回声消除，得到低频范围的第一信号和所述高频范围的第二信号。
该步骤的具体实施过程，即为根据被分解到低频范围中的远端信号，对被分解到低频范围中的近端信号进行回声消除处理，得到第一信号；根据被分解到高频范围中的远端信号，对被分解到高频范围中的近端信号进行回声消除处理，得到第二信号。
上述第一信号，即消除回声后的被分解到低频范围中的近端信号。
上述第二信号，即消除回声后的被分解到高频范围中的近端信号。
步骤S103，在过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号。
该步骤的具体实施过程，即为根据过渡范围相邻范围中的近端信号回声消除能量与远端信号能量比值，确定被分解到过渡范围中近端信号的回声能量，并从被分解到过渡范围中近端信号消除该回声能量，得到剩余信号；通过非线性处理消除剩余信号的残余回声，得到第三信号。
上述根据过渡范围相邻范围中的近端信号回声消除能量与远端信号能量比值，确定被分解到过渡范围中近端信号的回声能量，即，将过渡范围相邻范围作为过渡范围的参照，通过近端信号回声能量和远端信号能量成比例原理，来估计过渡范围中近端信号的回声能量。
步骤S104，将第一信号、第二信号和第三信号的合成信号，确定为经子带回声消除后的输出信号。
本发明实施例提供的回声消除方法，将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中，然后对过渡范围中的近端信号采用如下方法进行回声消除：根据过渡范围相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，从而提高了过渡范围中近端信号的回声消除效果，解决了传统回声消除方法对回声消除的性能和质量无法兼顾的技术问题。
上述回声消除方法，其各个步骤可分别对应采用如下实施方式：
步骤S101，采用多项无限冲激响应(Infinite Impulse Response，简称IIR)分解滤波器组，将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中。
上述采用IIR分解滤波器组分解信号的原理，可以参照图5。为了理解更容易，图5所示为将信号X(z)分解到Y0(z2)和Y1(z2)这两个子带信号的原理，其中，Hp0(z2)和Hp1(z2)为以π/2为镜像对称的正交镜像滤波器组，分解输入信号的具体步骤包括：
a)将信号X(z)通过Hp0(z2)和Hp1(z2)分成两个子信号X1(z)和X2(z)；
b)对两个子信号X1(z)和X2(z)进行2倍抽取，得到Y0(z2)和Y1(z2)这两个子带信号。
在将信号X(z)分解到M个子带的情况下，上述步骤a)使用M个滤波器组成的镜像滤波器组，上述步骤b)对M个子信号进行M倍抽取。
采用IIR分解滤波器组分解信号，减小了过渡范围的频率宽度。并且，IIR分解滤波器组的质量越高，过渡范围宽度越小。
本发明实施例，采用IIR分解滤波器组分解近端信号和远端信号，减小了信号分解后的过渡范围频率宽度，从而减小了过渡范围里回声消除效果对整个近端信号回声消除效果的影响。
步骤S102，在低频范围，根据远端信号对近端信号进行回声消除，采用基于正交镜像滤波器进行子带回声消除的回声消除方法。即，基于低频范围中的远端信号，对低频范围中的近端信号进行自适应滤波处理和非线性处理。
在高频范围，根据远端信号对近端信号进行回声消除，采用基于正交镜像滤波器进行子带回声消除的回声消除方法。即，将低频范围中非线性处理的处理参数进行保存；然后，基于高频范围中的远端信号，通过低频范围中非线性处理的处理参数，对高频范围中的近端信号进行非线性处理，来消除高频范围中近端信号里的回声。
在过渡范围的相邻范围为多个的情况下，步骤S103，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，则是根据过渡范围多个相邻范围里的近端信号回声消除能量总值与远端信号能量总值之间的比值，确定过渡范围里近端信号的回声能量，具体参照如下公式：
其中，z表示过渡范围相邻范围的信号，X(z)表示过渡范围相邻范围中的近端信号能量，Y(z)表示过渡范围相邻范围中的近端信号进行回声消除以后的剩余能量，reference(z)表示过渡范围相邻范围中的远端信号能量，∑表示对过渡范围的各相邻范围进行求和；d表示过渡范围的信号，reference(d)表示过渡范围中远端信号的能量，echo(d)表示估计的过渡范围中近端信号的回声能量。
需要强调的是，上述公式的任何等价变形都属于本发明实施例的保护范围，例如，表示以下关系的公式：根据过渡范围多个相邻范围中的近端信号回声消除能量均值与远端信号能量均值之间的比值，确定过渡范围中近端信号的回声能量，即如下公式：
其中，N表示过渡范围的相邻范围数量。
步骤S105，采用IIR综合滤波器组，将第一信号、第二信号和第三信号合成为合成信号。
上述采用IIR综合滤波器组合成信号的原理，可以参照图6。为了理解更容易，图6所示为将Y0(z2)和Y1(z2)这两个子带信号合成X'(z)的原理，合成信号的具体步骤包括：
a)将Y0(z2)和Y1(z2)这两个子带信号先进行上采样，然后通过范围通滤波器Gp0(z2)和Gp1(z2)之后获得需要的频范围Y0'(z2)和Y1'(z2)；
b)将Y0'(z2)和Y1'(z2)叠加，得到信号X'(z)。
在将M个子带信号合成X'(z)的情况下，上述步骤a)使用M个范围通滤波器。
本发明实施例，在正交镜像滤波器进行子带回声消除方法的基础上，利用过渡范围相邻范围中近端信号回声消除能量作为参考，通过相邻范围中近端信号回声消除量与远端信号能量比值确定过渡范围中近端信号的回声能量，然后将回声能量消除后的近端信号通过非线性处理进行了过渡范围中近端信号残余回声的消除，即，通过对过渡范围中近端信号回声消除方法的改进，使得过渡范围中回声消除效果得以提高，从而解决了正交镜像滤波器进行子带回声消除方法效果较差的技术问题，进而，解决了传统回声消除方法对回声消除的性能和质量无法兼顾的技术问题。
图7是根据一示例性实施例示出的回声消除装置的结构框图。参照图7，回声消除装置，包括：
分解单元100，用于将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中；
第一处理单元200，用于在低频范围和高频范围，根据远端信号对近端信号进行回声消除，得到低频范围的第一信号和高频范围的第二信号；
第二处理单元300，在过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号；
合成单元400，用于将第一信号、第二信号和第三信号的合成信号，确定为经子带回声消除后的输出信号。
在可选实施例中，第一处理单元用于：
根据低频范围中的远端信号，对低频范围中的近端信号进行自适应滤波处理和非线性处理。
在可选实施例中，回声消除装置还包括：保存单元，用于将低频范围中非线性处理的处理参数进行保存；
第一处理单元，用于基于处理参数，对高频范围中的近端信号进行非线性处理。
在可选实施例中，分解单元，用于采用多项无限冲激响应分解滤波器组，将近端信号和远端信分别按频率分解到低频范围、高频范围、以及低频范围和高频范围之间的过渡范围中；
合成单元，用于采用多项无限冲激响应综合滤波器组，将第一信号、第二信号和第三信号合成为合成信号。
图8是根据一示例性实施例示出的一种用于上述回声消除方法的电子设备1200的框图。例如，电子设备1200可以是计算机、唱歌机、数字广播终端等。
参照图8，电子设备1200可以包括以下一个或多个组件：处理组件1202，存储器1204，电力组件1206，多媒体组件1208，音频组件1210，输入/输出(I/O)的接口1212，传感器组件1214，以及通信组件1216。
处理组件1202通常控制电子设备1200的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1202可以包括一个或多个处理器1220来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1202可以包括一个或多个模块，便于处理组件1202和其他组件之间的交互。例如，处理组件1202可以包括多媒体模块，以方便多媒体组件1208和处理组件1202之间的交互。
存储器1204被配置为存储各种类型的数据以支持在设备1200的操作。这些数据的示例包括用于在电子设备1200上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件1206为电子设备1200的各种组件提供电力。电源组件1206可以包括电源管理系统，一个或多个电源，及其他与为电子设备1200生成、管理和分配电力相关联的组件。
多媒体组件1208包括在电子设备1200和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1208包括一个前置摄像头和/或后置摄像头。当设备1200处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1210被配置为输出和/或输入音频信号。例如，音频组件1210包括一个麦克风(MIC)，当电子设备1200处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1204或经由通信组件1216发送。在一些实施例中，音频组件1210还包括一个扬声器，用于输出音频信号。
I/O接口1212为处理组件1202和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启用按钮和锁定按钮。
传感器组件1214包括一个或多个传感器，用于为电子设备1200提供各个方面的状态评估。例如，传感器组件1214可以检测到设备1200的打开/关闭状态，组件的相对定位，例如组件为电子设备1200的显示器和小键盘，传感器组件1214还可以检测电子设备1200或电子设备1200一个组件的位置改变，用户与电子设备1200接触的存在或不存在，电子设备1200方位或加速/减速和电子设备1200的温度变化。传感器组件1214可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1214还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1214还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件1216被配置为便于电子设备1200和其他设备之间有线或无线方式的通信。电子设备1200可以接入基于通信标准的无线网络，如WiFi，运营商网络(如2G、3G、4G或5G)，或它们的组合。在一个示例性实施例中，通信组件1216经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，通信组件1216还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽范围(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，电子设备1200可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1204，上述指令可由电子设备1200的处理器1220执行以完成上述音效处理方法。例如，非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁范围、软盘和光数据存储设备等。
图9是根据一示例性实施例示出的一种用于上述音效处理方法的电子设备1300的框图。例如，电子设备1300可以被提供为一服务器。参照图9，电子设备1300包括处理组件1322，其进一步包括一个或多个处理器，以及由存储器1332所代表的存储器资源，用于存储可由处理组件1322的执行的指令，例如应用程序。存储器1332中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件1322被配置为执行指令，以执行上述回声消除方法。
电子设备1300还可以包括一个电源组件1326被配置为执行电子设备1300的电源管理，一个有线或无线网络接口1350被配置为将电子设备1300连接到网络，和一个输入输出(I/O)接口1358。电子设备1300可以操作基于存储在存储器1332的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求指出。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
Claims (10)
1.一种回声消除方法，其特征在于，包括：
将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
在所述低频范围和所述高频范围，根据远端信号对近端信号进行回声消除，得到所述低频范围的第一信号和所述高频范围的第二信号；
在所述过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号；
将所述第一信号、所述第二信号和所述第三信号的合成信号，确定为经子带回声消除后的输出信号。
2.根据权利要求1所述的回声消除方法，其特征在于，在所述低频范围，根据远端信号对近端信号进行回声消除，包括：
根据所述低频范围中的远端信号，对所述低频范围中的近端信号进行自适应滤波处理和非线性处理。
3.根据权利要求2所述的回声消除方法，其特征在于，还包括：将所述低频范围中非线性处理的处理参数进行保存；
在所述高频范围，根据远端信号对近端信号进行回声消除，包括：基于所述处理参数，对所述高频范围中的近端信号进行非线性处理。
4.根据权利要求1所述的回声消除方法，其特征在于，
采用多项无限冲激响应分解滤波器组，将近端信号和远端信分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
采用多项无限冲激响应综合滤波器组，将所述第一信号、所述第二信号和所述第三信号合成为所述合成信号。
5.一种回声消除装置，其特征在于，包括：
分解单元，用于将近端信号和远端信号分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
第一处理单元，用于在所述低频范围和所述高频范围，根据远端信号对近端信号进行回声消除，得到所述低频范围的第一信号和所述高频范围的第二信号；
第二处理单元，用于在所述过渡范围，根据相邻范围中的近端信号回声消除能量与远端信号能量比值确定回声能量，并对所述回声能量消除后的剩余信号进行非线性处理以消除残余回声，得到第三信号；
合成单元，用于将所述第一信号、所述第二信号和所述第三信号的合成信号，确定为经子带回声消除后的输出信号。
6.根据权利要求5所述的回声消除装置，其特征在于，所述第一处理单元用于：
根据所述低频范围中的远端信号，对所述低频范围中的近端信号进行自适应滤波处理和非线性处理。
7.根据权利要求6所述的回声消除装置，其特征在于，还包括：
保存单元，用于将所述低频范围中非线性处理的处理参数进行保存；
所述第一处理单元，用于基于所述处理参数，对所述高频范围中的近端信号进行非线性处理。
8.根据权利要求5所述的回声消除装置，其特征在于，
所述分解单元，用于采用多项无限冲激响应分解滤波器组，将近端信号和远端信分别按频率分解到低频范围、高频范围、以及所述低频范围和所述高频范围之间的过渡范围中；
所述合成单元，用于采用多项无限冲激响应综合滤波器组，将所述第一信号、所述第二信号和所述第三信号合成为所述合成信号。
9.一种电子设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行上述权利要求1-4任意一项所述的回声消除方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令被执行时实现如权利要求1至4任一项所述的回声消除方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811519018.7A CN109509482B (zh) | 2018-12-12 | 2018-12-12 | 回声消除方法、回声消除装置、电子设备和可读介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811519018.7A CN109509482B (zh) | 2018-12-12 | 2018-12-12 | 回声消除方法、回声消除装置、电子设备和可读介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109509482A true CN109509482A (zh) | 2019-03-22 |
| CN109509482B CN109509482B (zh) | 2022-03-25 |
Family
ID=65752255
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811519018.7A Active CN109509482B (zh) | 2018-12-12 | 2018-12-12 | 回声消除方法、回声消除装置、电子设备和可读介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109509482B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111246037A (zh) * | 2020-03-16 | 2020-06-05 | 北京字节跳动网络技术有限公司 | 一种回声消除方法、装置、终端设备及介质 |
| CN111355855A (zh) * | 2020-03-12 | 2020-06-30 | 紫光展锐(重庆)科技有限公司 | 回声处理方法、装置、设备及存储介质 |
| CN111917926A (zh) * | 2019-05-09 | 2020-11-10 | 上海触乐信息科技有限公司 | 一种通信终端中的回声消除方法、装置及终端设备 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130151241A1 (en) * | 2011-12-07 | 2013-06-13 | Samsung Electronics Co., Ltd. | Method of embedding digital information into audio signal machine-readable storage medium and communication terminal |
| CN103460613A (zh) * | 2011-04-14 | 2013-12-18 | 阿尔卡特朗讯公司 | 节省计算的用于宽带音频信号的回声消除器 |
| CN103700374A (zh) * | 2013-12-25 | 2014-04-02 | 宁波菊风系统软件有限公司 | 确定声学回声消除中系统延时的方法及声学回声消除方法 |
| CN104751854A (zh) * | 2013-12-26 | 2015-07-01 | 联芯科技有限公司 | 一种宽带声学回声消除方法及系统 |
| CN105096960A (zh) * | 2014-05-12 | 2015-11-25 | 阿尔卡特朗讯 | 实现宽带分组语音的基于分组的声学回声消除方法与设备 |
| CN106161820A (zh) * | 2015-04-16 | 2016-11-23 | 中国科学院声学研究所 | 一种用于立体声声学回声抵消的通道间去相关方法 |
| US9653060B1 (en) * | 2016-02-09 | 2017-05-16 | Amazon Technologies, Inc. | Hybrid reference signal for acoustic echo cancellation |
-
2018
- 2018-12-12 CN CN201811519018.7A patent/CN109509482B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103460613A (zh) * | 2011-04-14 | 2013-12-18 | 阿尔卡特朗讯公司 | 节省计算的用于宽带音频信号的回声消除器 |
| US20130151241A1 (en) * | 2011-12-07 | 2013-06-13 | Samsung Electronics Co., Ltd. | Method of embedding digital information into audio signal machine-readable storage medium and communication terminal |
| CN103700374A (zh) * | 2013-12-25 | 2014-04-02 | 宁波菊风系统软件有限公司 | 确定声学回声消除中系统延时的方法及声学回声消除方法 |
| CN104751854A (zh) * | 2013-12-26 | 2015-07-01 | 联芯科技有限公司 | 一种宽带声学回声消除方法及系统 |
| CN105096960A (zh) * | 2014-05-12 | 2015-11-25 | 阿尔卡特朗讯 | 实现宽带分组语音的基于分组的声学回声消除方法与设备 |
| CN106161820A (zh) * | 2015-04-16 | 2016-11-23 | 中国科学院声学研究所 | 一种用于立体声声学回声抵消的通道间去相关方法 |
| US9653060B1 (en) * | 2016-02-09 | 2017-05-16 | Amazon Technologies, Inc. | Hybrid reference signal for acoustic echo cancellation |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111917926A (zh) * | 2019-05-09 | 2020-11-10 | 上海触乐信息科技有限公司 | 一种通信终端中的回声消除方法、装置及终端设备 |
| CN111355855A (zh) * | 2020-03-12 | 2020-06-30 | 紫光展锐(重庆)科技有限公司 | 回声处理方法、装置、设备及存储介质 |
| CN111246037A (zh) * | 2020-03-16 | 2020-06-05 | 北京字节跳动网络技术有限公司 | 一种回声消除方法、装置、终端设备及介质 |
| CN111246037B (zh) * | 2020-03-16 | 2021-11-16 | 北京字节跳动网络技术有限公司 | 一种回声消除方法、装置、终端设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109509482B (zh) | 2022-03-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109862200A (zh) | 语音处理方法、装置、电子设备及存储介质 | |
| CN109509482A (zh) | 回声消除方法、回声消除装置、电子设备和可读介质 | |
| CN106210219B (zh) | 降噪方法及装置 | |
| US11315582B2 (en) | Method for recovering audio signals, terminal and storage medium | |
| CN109361828A (zh) | 一种回声消除方法、装置、电子设备及存储介质 | |
| CN107833579B (zh) | 噪声消除方法、装置及计算机可读存储介质 | |
| US20160182770A1 (en) | Display apparatus and echo cancellation method thereof | |
| JP7290749B2 (ja) | 音声通話方法並びにその、装置、電子機器及びコンピュータプログラム | |
| CN110138650A (zh) | 即时通讯的音质优化方法、装置及设备 | |
| CN111883164B (zh) | 模型训练方法、装置、电子设备及存储介质 | |
| CN110956975A (zh) | 回声消除方法及装置 | |
| CN111986693A (zh) | 音频信号的处理方法及装置、终端设备和存储介质 | |
| CN110010117B (zh) | 一种语音主动降噪的方法及装置 | |
| CN113362843B (zh) | 音频信号处理方法及装置 | |
| CN109451398B (zh) | 声反馈消除设备、声反馈消除方法、音频处理系统 | |
| CN114040285B (zh) | 耳机的前馈滤波器参数生成方法、设备、耳机及存储介质 | |
| CN106791245A (zh) | 确定滤波器系数的方法及装置 | |
| CN116705045B (zh) | 回声消除方法、装置、计算机设备和存储介质 | |
| CN111756906B (zh) | 一种语音信号的回声抑制方法、装置和计算机可读介质 | |
| CN113489855B (zh) | 声音处理方法、装置、电子设备和存储介质 | |
| CN112217948B (zh) | 语音通话的回声处理方法、装置、设备及存储介质 | |
| CN105162998B (zh) | 双音多频信号的去噪方法和装置 | |
| CN113345461A (zh) | 一种语音处理方法、装置和用于语音处理的装置 | |
| WO2022017424A1 (zh) | 主动降噪方法和装置以及音频播放设备 | |
| CN111294473A (zh) | 信号处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |