CN104464745A - 一种双通道语音增强系统及其方法 - Google Patents
一种双通道语音增强系统及其方法 Download PDFInfo
- Publication number
- CN104464745A CN104464745A CN201410785168.8A CN201410785168A CN104464745A CN 104464745 A CN104464745 A CN 104464745A CN 201410785168 A CN201410785168 A CN 201410785168A CN 104464745 A CN104464745 A CN 104464745A
- Authority
- CN
- China
- Prior art keywords
- speech
- signal
- double
- strengthens
- power spectrum
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Telephonic Communication Services (AREA)
Abstract
本发明涉及一种双通道语音增强系统及其方法,属于语音处理领域,该系统包括采集语音信息的语音输入端和语音处理器,语音输入端通过双通道采集近端目标语音信息,然后将采集到的语音信息进行时频分解、功率谱平滑、特征提取、衰减系数生成、信号重建等步骤进行语音增强处理后输送到接收语言信号的通讯设备终端。本发明中基于计算听觉场景分析的原理,采用两路送话器作为输入,在近端说话模式下,对强背景噪声的抑制具有良好的抑制和消除效果,整体降噪效果大大优于目前军用的“近讲压差式”送话器,可以有效的提高话音通讯时的信噪比,并保证较好的语音质量,解决了现有技术中军用送话器降噪效果差、影响通话质量的问题。
Description
技术领域
本发明属于语音处理领域,涉及语音增强方面,特别涉及一种双通道语音增强系统及其方法。
背景技术
装甲车、舰船、直升机等军用机械内的强背景噪声,会对话音通讯产生强烈的干扰,对于作战指挥、信息交互产生影响,进而影响作战效能。语音增强技术用于话音通讯,可以提高通话的质量。语音增强方法按输入通道(送话器)的个数可以分为单通道的语音增强和多通道的语音增强。单通道的语音增强方法主要有谱减法、维纳滤波法、最小均方误差法等,这类方法都是先估计带噪语音中的噪声幅度或能量,再将其从带噪语音谱中减去。这类方法对于平稳噪声(如白噪声)有一定的降噪效果,但是用于噪声为非平稳的环境时,则会对语音噪声严重的损伤。多通道的语音增强算法主要是波束形成技术,如延时相加、微分麦克、自适应波束形成等,这类算法一般比单通道算法的降噪效果要好,且对于各种类型的噪声都有效,但是也有一个明显的缺点,那就是具有明显的方向性,也就是说只对某些方向的噪声有效。
近年来,基于计算听觉场景分析(Computational Auditory Scene Analysis,CASA)的语音增强方法逐渐成为研究的一个热点。CASA是用计算机来模拟人耳的“听觉场景分析”能力,研究发现,人耳在异常嘈杂的环境下,如酒吧里,仍然可以听到自己感兴趣的声音,这说明人耳具有一种滤除噪声,保留目标语音的生理机制,如果能够模拟这种机制,就可以达到语音增强的目的。
目前的军用通讯耳机一般采用一路送话器,虽然在设计时,为了提高通话的质量,也会采用一定的结构和方法来提高输入话音的信噪比,但是提高的幅度并不大,强背景噪声对语音的干扰仍然十分明显。例如为歼击机地面保障人员通话配套装备而设计的A-18D1-2型头戴式抗噪声送受话器组,其送话器采用“近讲压差式”,降噪效果仅为8dB左右,相比于动辄高达100dB以上的环境噪声,降噪效果并不明显。
发明内容
为了克服现有技术中军用送话器降噪效果差不足,强背景噪声非常影响通话质量的问题,本发明提供一种双通道语音增强系统及其方法,本发明基于计算听觉场景分析的原理,采用两路送话器作为输入,在近端说话模式下,对强背景噪声的抑制针对装甲车、舰船、直升机等军用机械内的强背景噪声,都具有良好的抑制和消除效果,可以保证较高的语音质量。
本发明的技术方案是:一种双通道语音增强系统,该系统包括采集语音信息的语音输入端和语音处理器,语音处理器将接收语音输入端采集到的语音信息输送出去。所述语音输入端包括主语音输入端和从语音输入端,主语音输入端和从语音输入端分别连接语音处理器。所述语音输入端的主语音输入端和从语音输入端的安置位置不同。所述语音处理器包括数字滤波器。
一种双通道语音增强系统的方法,该方法步为:语音输入端通过双通道采集近端目标语音信息,然后将采集到的语音信息进行语音增强处理后输送到通讯设备终端。
所述语音增强处理步骤包括:步骤一、时频分解:双通道输入的信号定义为x1(n)和x2(n),对信号进行时频分解,分解后的信号以帧为单元划分为若干的时频单元X1,i(j)和X2,i(j),其中i为帧的编号,j=1,2,...,N为每一帧中单元编号,N为帧长。
步骤二、功率谱平滑:对步骤一中的每一时频单元求取功率谱,对功率谱进行平滑处理;所述步骤二中的功率谱平滑处理方法为:使用一阶递归公式对功率谱进行平滑处理,公式为:σk,i(j)=α|Xk,i(j)|2+(1-α)σk,i(j),k=1,2,式中σ1,i(j)和σ2,i(j)表示时频单元X1,i(j)和X2,i(j)对应的功率谱。
步骤三、特征提取:提取耳间强度差的信号特征值;所述步骤三中耳间强度差值是语音输入端中主语音输入端和从语音输入端之间的声音信号能量的差值。所述耳间强度差值的定义公式为:式中IID(i,j)表示耳间强度差值,σ1,i(j)和σ2,i(j)表示时频单元X1,i(j)和X2,i(j)对应的功率谱。
步骤四、衰减系数生成:将步骤三提取的耳间强度差值映射得到衰减系数,衰减系数乘以功率谱得到增强语音的新功率谱;所述步骤四中,获得耳间强度差值后,先判定差值信号中是否含有噪声。
步骤五、信号重建:时频分解的逆过程,得到的信号即为增强后的语音信号。
本发明有如下积极效果:本发明提出了一种双通道语音增强系统及其方法,本发明基于计算听觉场景分析的原理,采用两路送话器作为输入,在近端说话模式下,对强背景噪声的抑制针对装甲车、舰船、直升机等军用机械内的强背景噪声,都具有良好的抑制和消除效果,整体降噪效果大大优于目前军用的“近讲压差式”送话器,可以有效的提高话音通讯时的信噪比,并保证较好的语音质量。
附图说明
图1是本发明中双通道语音增强系统的结构示意图;
图2是本发明中双通道语音增强系统的方法的信号处理流程示意图。
具体实施方式
下面对照附图,通过对实施例的描述,本发明的具体实施方式如所涉及的各构件的形状、构造、各部分之间的相互位置及连接关系、各部分的作用及工作原理、制造工艺及操作使用方法等,作进一步详细的说明,以帮助本领域技术人员对本发明的发明构思、技术方案有更完整、准确和深入的理解。
一种双通道语音增强系统,其结构示意图如图1所示,该系统包括语音输入端和语音处理器,语音处理器连接语音输入端,系统对语音信号进行处理后,发送出去,本发明中选择通讯设备终端表示语音信号输送的接收端,语音处理器接收语音输入端采集的近端目标语音信息处理后,发送处理后的信息到通讯设备终端。
语音输入端包括主语音输入端和从语音输入端,主语音输入端和从语音输入端分别连接语音处理器,但主语音输入端和从语音输入端的安置位置不同,分别放置在目标语者的头部的不同位置,本文优选将主语音输入端放置在目标语者的嘴边,从语音输入端放置在目标语者的耳边或者头部的任何位置均可,语音输入端通常采用麦克风。系统中的语音处理器包括数字滤波器,处理器能够对采集到的语音信息进行增强处理,包括时频分解、功率谱平滑、信号特征提取、信号重建等达到增强语音信息的目的。
一种双通道语音增强系统的方法,该方法步为:语音输入端通过双通道采集近端目标语音信息,然后将采集到的语音信息进行语音增强处理后输送到通讯设备终端。
语音信号处理的流程示意图如图2所示,语音增强处理步骤包括:
步骤一、时频分解:双通道输入的信号定义为x1(n)和x2(n),对信号进行时频分解,分解后的信号以帧为单元划分为若干的时频单元X1,i(j)和X2,i(j),其中i为帧的编号,j=1,2,...,N为每一帧中单元编号,N为帧长;采用DTFT数字滤波器组可避免信号转换到频域后发生混叠。
步骤二、功率谱平滑:对步骤一中的每一时频单元σ1,i(j)和σ2,i(j)求取功率谱,对功率谱进行平滑处理,本发明中优选一阶递归公式对功率谱进行平滑处理,公式为:σk,i(j)=α|Xk,i(j)|2+(1-α)σk,i(j),k=1,2。本发明中对信号功率谱进行平滑处理可以一定程度上修正信号采样等信号处理流程中有可能出现的明显偏差。
步骤三、特征提取,即提取耳间强度差的信号特征值。本发明中提取的信号特征是“耳间强度差”(Interaural Intensity Difference,IID),在人耳的听觉场景分析理论中,IID指的是声音信号达到左右耳的强度间的差异,本发明中提取的IID特征值,指的则是主麦克风的声音信号能量和从麦克风的声音信号能量的差值,定义公式为:式中IID(i,j)表示耳间强度差值,σ1,i(j)和σ2,i(j)表示时频单元X1,i(j)和X2,i(j)对应的功率谱。步骤三中选择IID作为提取特征可以最大限度的辨别近端语音和远场噪声,有利于增强语言信号。
IID值是CASA理论中的重要特征,本发明的拓扑结构决定了近端目标语音信号的IID特征值会远远大于远场环境噪声的IID特征值。
步骤四、衰减系数生成:在获得IID特征后,可以根据IID的值来判定信号中是否含有噪声,并估计出信号中噪声成分占有多大的比例,根据声学掩蔽效应理论,在同一时间产生的两个声音,相对较弱的声音往往不被人耳所察觉,也即是说,强度相对较弱的声音会被强度相对较强的声音屏蔽。根据这一理论,本发明将提取的IID特征值映射为一个值在0~1之间的衰减系数ξ,将衰减系数ξ乘以功率谱得到增强语音的新功率谱,新功率谱的公式为:σk,i(j)′=ξ*σk,i(j),k=1,2式中σk,i(j)'表示增强后的新功率谱,σk,i(j)表示功率谱。
步骤五、信号重建即增强语音:时频分解的逆过程,得到的信号即为增强后的语音信号。信号重建过程是时频分解的逆过程,同样通过DTFT数字滤波器组实现,最后得到的信号即为增强后的语音信号。本发明是基于计算听觉场景分析的原理,采用两路送话器作为输入,在近端说话模式下,对强背景噪声的抑制都具有良好的抑制和消除效果,可以有效的提高话音通讯时的信噪比,并保证较好的语音质量。
上面结合附图对本发明进行了示例性描述,显然本发明具体实现并不受上述方式的限制,只要采用了本发明的方法构思和技术方案进行的各种非实质性的改进,或未经改进将本发明的构思和技术方案直接应用于其它场合的,均在本发明的保护范围之内。
Claims (10)
1.一种双通道语音增强系统,其特征在于,该系统包括采集语音信息的语音输入端和语音处理器,语音处理器将接收的语音输入端采集到的语音信息进行信号增强处理后输送出去。
2.根据权利要求1所述的双通道语音增强系统,其特征在于,所述语音输入端包括主语音输入端和从语音输入端,主语音输入端和从语音输入端分别连接语音处理器。
3.根据权利要求2所述的双通道语音增强系统,其特征在于,所述语音输入端的主语音输入端和从语音输入端的安置位置不同。
4.根据权利要求1所述的双通道语音增强系统,其特征在于,所述语音处理器包括数字滤波器。
5.一种双通道语音增强系统的方法,其特征在于,该方法步为:语音输入端通过双通道采集近端目标语音信息,然后将采集到的语音信息进行语音增强处理后输送到通讯设备终端。
6.根据权利要求5所述的双通道语音增强系统的方法,其特征在于,所述语音增强处理步骤包括:
步骤一、时频分解:双通道输入的信号定义为x1(n)和x2(n),对信号进行时频分解,分解后的信号以帧为单元划分为若干的时频单元X1,i(j)和X2,i(j),其中i为帧的编号,j=1,2,...,N为每一帧中单元编号,N为帧长;
步骤二、功率谱平滑:对步骤一中的每一时频单元求取功率谱,对功率谱进行平滑处理;
步骤三、特征提取:提取耳间强度差的信号特征值;
步骤四、衰减系数生成:将步骤三提取的耳间强度差值映射得到衰减系数,衰减系数乘以功率谱得到增强语音的新功率谱;
步骤五、信号重建:时频分解的逆过程,得到的信号即为增强后的语音信号。
7.根据权利要求6所述的双通道语音增强系统的方法,其特征在于,所述步骤二中的功率谱平滑处理方法为:使用一阶递归公式对功率谱进行平滑处理,公式为:σk,i(j)=α|Xk,i(j)|2+(1-α)σk,i(j),k=1,2,式中σ1,i(j)和σ2,i(j)表示时频单元X1,i(j)和X2,i(j)对应的功率谱。
8.根据权利要求6所述的双通道语音增强系统的方法,其特征在于,所述步骤三中耳间强度差值是语音输入端中主语音输入端和从语音输入端之间的声音信号能量的差值。
9.根据权利要求8所述的双通道语音增强系统的方法,其特征在于,所述耳间强度差值的定义公式为:式中IID(i,j)表示耳间强度差值,σ1,i(j)和σ2,i(j)表示时频单元X1,i(j)和X2,i(j)对应的功率谱。
10.根据权利要求6所述的双通道语音增强系统的方法,其特征在于,所述步骤四中,获得耳间强度差值后,先判定差值信号中是否含有噪声。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410785168.8A CN104464745A (zh) | 2014-12-17 | 2014-12-17 | 一种双通道语音增强系统及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410785168.8A CN104464745A (zh) | 2014-12-17 | 2014-12-17 | 一种双通道语音增强系统及其方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104464745A true CN104464745A (zh) | 2015-03-25 |
Family
ID=52910690
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410785168.8A Pending CN104464745A (zh) | 2014-12-17 | 2014-12-17 | 一种双通道语音增强系统及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104464745A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107331407A (zh) * | 2017-06-21 | 2017-11-07 | 深圳市泰衡诺科技有限公司 | 下行通话降噪方法及装置 |
CN109299489A (zh) * | 2017-12-13 | 2019-02-01 | 中航华东光电(上海)有限公司 | 一种利用语音交互获取个人化hrtf的标定方法 |
CN113921027A (zh) * | 2021-12-14 | 2022-01-11 | 北京清微智能信息技术有限公司 | 一种基于空间特征的语音增强方法、装置及电子设备 |
CN114757242A (zh) * | 2022-06-16 | 2022-07-15 | 中国空气动力研究与发展中心低速空气动力研究所 | 基于循环维纳滤波的直升机噪声增强方法以及检测方法 |
TWI818493B (zh) * | 2021-04-01 | 2023-10-11 | 大陸商深圳市韶音科技有限公司 | 語音增強方法、系統和裝置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6996524B2 (en) * | 2001-04-09 | 2006-02-07 | Koninklijke Philips Electronics N.V. | Speech enhancement device |
CN102157156A (zh) * | 2011-03-21 | 2011-08-17 | 清华大学 | 一种单通道语音增强的方法和系统 |
CN102456351A (zh) * | 2010-10-14 | 2012-05-16 | 清华大学 | 一种语音增强的系统 |
-
2014
- 2014-12-17 CN CN201410785168.8A patent/CN104464745A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6996524B2 (en) * | 2001-04-09 | 2006-02-07 | Koninklijke Philips Electronics N.V. | Speech enhancement device |
CN102456351A (zh) * | 2010-10-14 | 2012-05-16 | 清华大学 | 一种语音增强的系统 |
CN102157156A (zh) * | 2011-03-21 | 2011-08-17 | 清华大学 | 一种单通道语音增强的方法和系统 |
Non-Patent Citations (2)
Title |
---|
胡奎等: ""基于听觉场景分析的近讲语音增强算法"", 《清华大学学报(自然科学版)》 * |
董保帅等: ""近距离放置双传声器语音增强算法"", 《电声技术》 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107331407A (zh) * | 2017-06-21 | 2017-11-07 | 深圳市泰衡诺科技有限公司 | 下行通话降噪方法及装置 |
CN109299489A (zh) * | 2017-12-13 | 2019-02-01 | 中航华东光电(上海)有限公司 | 一种利用语音交互获取个人化hrtf的标定方法 |
TWI818493B (zh) * | 2021-04-01 | 2023-10-11 | 大陸商深圳市韶音科技有限公司 | 語音增強方法、系統和裝置 |
CN113921027A (zh) * | 2021-12-14 | 2022-01-11 | 北京清微智能信息技术有限公司 | 一种基于空间特征的语音增强方法、装置及电子设备 |
CN113921027B (zh) * | 2021-12-14 | 2022-04-29 | 北京清微智能信息技术有限公司 | 一种基于空间特征的语音增强方法、装置及电子设备 |
CN114757242A (zh) * | 2022-06-16 | 2022-07-15 | 中国空气动力研究与发展中心低速空气动力研究所 | 基于循环维纳滤波的直升机噪声增强方法以及检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9343056B1 (en) | Wind noise detection and suppression | |
CN110600050B (zh) | 基于深度神经网络的麦克风阵列语音增强方法及系统 | |
CN102164328B (zh) | 一种用于家庭环境的基于传声器阵列的音频输入系统 | |
CN103219012B (zh) | 一种基于声源距离的双麦克风噪声消除方法及装置 | |
CN104464745A (zh) | 一种双通道语音增强系统及其方法 | |
CN105872275B (zh) | 一种用于回声消除的语音信号时延估计方法及系统 | |
KR101422984B1 (ko) | 잔류 에코를 억제하는 방법 및 장치 | |
JP4543014B2 (ja) | 聴音装置 | |
CN110931031A (zh) | 一种融合骨振动传感器和麦克风信号的深度学习语音提取和降噪方法 | |
KR20130108063A (ko) | 다중 마이크로폰의 견고한 잡음 억제 | |
CN107316648A (zh) | 一种基于有色噪声的语音增强方法 | |
CN102456351A (zh) | 一种语音增强的系统 | |
CN106157964A (zh) | 一种确定回声消除中系统延时的方法 | |
CN104103277A (zh) | 一种基于时频掩膜的单声学矢量传感器目标语音增强方法 | |
CN106782497A (zh) | 一种基于便携式智能终端的智能语音降噪算法 | |
CN101964934A (zh) | 二元麦克风微阵列语音波束形成方法 | |
CN105390142A (zh) | 一种数字助听器语音噪声消除方法 | |
CN110310656A (zh) | 一种语音增强方法 | |
CN110992967A (zh) | 一种语音信号处理方法、装置、助听器及存储介质 | |
CN106328160B (zh) | 一种基于双麦克的降噪方法 | |
DE102012102882A1 (de) | Elektrische Vorrichtung und Verfahren zum Empfangen von Sprechstimmen-Signalen dafür | |
CN104867498A (zh) | 一种移动通讯终端及其语音增强方法和模块 | |
CN105957536B (zh) | 基于通道聚合度频域回声消除方法 | |
CN106658323A (zh) | 人工耳蜗及助听器的双麦克风降噪系统和方法 | |
Lezzoum et al. | Noise reduction of speech signals using time-varying and multi-band adaptive gain control for smart digital hearing protectors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150325 |
|
RJ01 | Rejection of invention patent application after publication |