CN105913854A - 语音信号级联处理方法和装置 - Google Patents
语音信号级联处理方法和装置 Download PDFInfo
- Publication number
- CN105913854A CN105913854A CN201610235392.9A CN201610235392A CN105913854A CN 105913854 A CN105913854 A CN 105913854A CN 201610235392 A CN201610235392 A CN 201610235392A CN 105913854 A CN105913854 A CN 105913854A
- Authority
- CN
- China
- Prior art keywords
- signal
- voice signal
- voice
- boostfiltering
- feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000000034 method Methods 0.000 claims abstract description 86
- 238000001914 filtration Methods 0.000 claims abstract description 35
- 238000012545 processing Methods 0.000 claims abstract description 26
- 230000002708 enhancing effect Effects 0.000 claims abstract description 21
- 230000008569 process Effects 0.000 claims description 66
- 238000012549 training Methods 0.000 claims description 56
- 238000005070 sampling Methods 0.000 claims description 21
- 230000005236 sound signal Effects 0.000 claims description 16
- 238000012935 Averaging Methods 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 8
- 230000015556 catabolic process Effects 0.000 claims description 7
- 238000006731 degradation reaction Methods 0.000 claims description 7
- 238000009432 framing Methods 0.000 claims description 7
- 238000004422 calculation algorithm Methods 0.000 claims description 4
- 238000013519 translation Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 17
- 238000001228 spectrum Methods 0.000 description 16
- 238000005728 strengthening Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012417 linear regression Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000014616 translation Effects 0.000 description 1
- 210000001260 vocal cord Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/26—Pre-filtering or post-filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0324—Details of processing therefor
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/90—Pitch determination of speech signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/06—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being correlation coefficients
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/09—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being zero crossing rates
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明涉及一种语音信号级联处理方法和装置。所述方法包括:获取语音信号;对所述语音信号进行特征识别;若所述语音信号为第一特征信号,则采用第一预增强滤波系数对第一特征信号进行预增强滤波,得到第一预增强语音信号;若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;输出第一预增强语音信号或第二预增强语音信号,以根据所述第一预增强语音信号或第二预增强语音信号进行级联编解码处理。上述语音信号级联处理方法和装置,将预增强语音进行级联编解码,提高了经过级联编解码后的语音信号的可懂度。
Description
技术领域
本发明涉及音频数据处理领域,特别是涉及一种语音信号级联处理方法和装置。
背景技术
随着VOIP(Voice over Internet Protocol,网络电话)业务的推广,不同网络间互融应用日趋增多,如经互联网的IP电话与经PSTN(Public SwitchedTelephone Network,公共交换电话网络)固定电话互通,IP电话与无线网络的手机互通。不同网络的语音采用的是不同的语音编解码,如无线GSM(GlobalSystem for Mobile Communication,全球移动通信系统)网络采用AMR-NB编码,固定电话采用G711编码,IP电话采用G729等编码,由于各网络终端支持的语音编码格式不一致,必然导致通话链路出现多次编解码过程,目的使级联编解码后不同网络终端可以互通语音对接,然而,当前所用语音编码绝大部分都是有损编码器,即每次编解码必然导致语音质量下降,级联编解码的次数越多语音质量下降越剧烈,结果导致语音双方听不清对方的说话内容,即语音可懂度下降。
发明内容
基于此,有必要针对传统的针对通话语音信号传输中信号损伤导致语音可懂度下降的问题,提供一种语音信号级联处理方法,能提高语音信号的可懂度。
此外,还有必要提供一种语音信号级联处理装置,能提高语音信号的可懂度。
一种语音信号级联处理方法,包括:
获取语音信号;
对所述语音信号进行特征识别;
若所述语音信号为第一特征信号,则采用第一预增强滤波系数对所述第一特征信号进行预增强滤波,得到第一预增强语音信号;若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;以及
输出所述第一预增强语音信号或第二预增强语音信号,以根据所述第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
一种语音信号级联处理装置,包括:
语音信号获取模块,用于获取语音信号;
识别模块,用于对所述语音信号进行特征识别;
第一信号增强模块,用于若所述语音信号为第一特征信号,则采用第一预增强滤波系数对所述第一特征信号进行预增强滤波,得到第一预增强语音信号;
第二信号增强模块,用于若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;以及
输出模块,用于输出所述第一预增强语音信号或第二预增强语音信号,以根据所述第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
上述语音信号级联处理方法和装置,通过对语音信号进行特征识别,对第一特征信号采用第一预增强滤波系数进行预增强滤波处理,对第二特征信号采用第二预增强滤波系数进行预增强滤波处理,将预增强语音进行级联编解码处理,接收方能更清楚听清语音信息,提高了经过级联编解码后的语音信号的可懂度,针对第一特征信号和第二特征信号分别采用对应的滤波系数进行增强滤波处理,针对性更强,滤波处理更加准确。
附图说明
图1为一个实施例中语音信号级联处理方法的应用环境示意图;
图2为一个实施例中终端的内部结构示意图;
图3A为一个实施例中经过级联编解码后第一特征信号的频率能量损伤示意图;
图3B为一个实施例中经过级联编解码后第二特征信号的频率能量损伤示意图;
图4为一个实施例中语音信号级联处理方法的流程图;
图5为根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数的具体流程图;
图6为一个实施例中获取该语音信号的基音周期;
图7为三电平削波处理原理示意图;
图8为一段语音的基音周期计算结果示意图;
图9为一个实施例中离线训练的预增强滤波系数对在线通话的语音输入信号进行增强的示意图;
图10为级联编解码后信号经过预增强后的级联编解码信号的示意图;
图11为未做增强的级联编解码的信号频谱与增强后的级联编解码的信号频谱的对比示意图;
图12为未做增强的级联编解码的信号频谱与增强后的级联编解码的信号频谱的中高频部分的对比示意图;
图13为一个实施例中语音信号级联处理装置的结构框图;
图14为另一个实施例中语音信号级联处理装置的结构框图;
图15为一个实施例中训练模块的内部结构示意图;
图16为另一个实施例中语音信号级联处理装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解,本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本发明的范围的情况下,可以将第一客户端称为第二客户端,且类似地,可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端,但其不是同一客户端。
图1为一个实施例中语音信号级联处理方法的应用环境示意图。如图1所示,该应用环境包括第一终端110、第一网络120、第二网络130和第二终端140。第一终端110接收语音信号,将语音信号经过第一网络120和第二网络130的编解码处理后,被第二终端140接收。第一终端110将语音对所述语音信号进行特征识别;若所述语音信号为第一特征信号,则采用第一预增强滤波系数对所述第一特征信号进行预增强滤波,得到第一预增强语音信号;以及若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;输出所述第一预增强语音信号或第二预增强语音信号,经过第一网络120和第二网络130进行级联编解码处理后得到预增强后的级联编解码信号,第二终端140接收到预增强后的级联编解码信号,接收到的信号可懂度高。第一终端110接收第二终端140发送的经过第二网络130、第一网络120的语音信号,同样对接收到的语音信号进行预增强滤波处理。
图2为一个实施例中终端的内部结构示意图。如图2所示,该终端包括通过系统总线连接的处理器、存储介质、内存、网络接口、声音采集装置和扬声器。其中,终端的存储介质存储有操作系统,还包括一种语音信号级联处理装置。该处理器用于提供计算和控制能力,支撑整个终端的运行,该处理器被用于执行一种语音信号级联处理方法,包括获取语音信号;对该语音信号进行特征识别;若该语音信号为第一特征信号,则采用第一预增强滤波系数对该第一特征信号进行预增强滤波,得到第一预增强语音信号;以及若该语音信号为第二特征信号,则采用第二预增强滤波系数对该第二特征信号进行预增强滤波,得到第二预增强语音信号;输出该第一预增强语音信号或第二预增强语音信号,以根据该第一预增强语音信号或第二预增强语音信号进行级联编解码处理。该终端可以是能进行网络通话的电话机、手机、平板电脑或者个人数字助理等。本领域技术人员可以理解,图2中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的终端的限定,具体的终端可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
因经过级联编解码后的语音信号,其中高频会明显的损伤,且第一特征信号和第二特征信号的语音可懂度在级联编解码后会有不同程度的而影响,因为影响语音可懂度的关键成分是语音信号的中高频能量信息,第一特征信号由于在其基频较低(一般在125Hz(赫兹)以内),主要能量成分集中在中低频(1000Hz以下),中高频(1000Hz以上)成分较少,第二特征信号的基频较高(一般在125Hz以上),中高频成分比第一特征信号要多,如图3A和图3B所示,经过级联编解码后第一特征信号和第二特征信号的频率能量均有损伤,由于第一特征信号中高频比例偏低,经过级联编解码后中高频能量更低,使第一特征信号的语音可懂度影响极大,导致收听方感觉听到的声音模糊难以听清楚说话内容,而第二特征信号虽然中高频也有损耗,但经过级联编码后中高频还有足够能量以达到较好的语音可懂度。从语音编解码原理来说,以语音听觉失真最小为准则的一种编解码模型CELP(Code Excited Linear Prediction,码激励线性预测编码)合成的语音为例,由于第一特征信号语音的频谱能量分布很不均衡,大部分能量集中在中低频,所以编码过程主要确保中低频失真最小,而占能量比例较小的中高频相对失真较大,相反,第二特征信号的频谱能量分布较为均衡,中高频也有较多成分,所以经过编解码后中高频成分能量损失相对不高。也就是,第一特征信号和第二特征信号在经过级联编解码后的可懂度下降表现是有明显差异的。图3A中曲实线为第一特征信号原始信号,虚线为经级联编解码后的信号。图3B中曲实线为第二特征信号原始信号,虚线为经级联编解码后的信号。图3A和图3B中横坐标为频率,纵坐标为能量,且为归一化后的能量值。归一化是基于第一特征信号或第二特征信号中最大峰值作为归一的。第一特征信号可为男声信号,第二特征信号可为女声信号。
图4为一个实施例中语音信号级联处理方法的流程图。如图4所示,一种语音信号级联处理方法,运行于图1的终端上,包括:
步骤402,获取语音信号。
本实施例中,语音信号为识别输入的原始语音信号中的语音信号。终端获取到经过级联编解码处理后的原始语音信号,识别出原始语音信号中的语音信号。级联编解码与原始语音信号经过的实际链路环节相关,例如支持G.729A的IP电话与GSM手机互通,则级联编解码可为G.729A编码+G.729解码+AMRNB编码+AMRNB解码。
语音可懂度是指听者听清楚和理解说话人的口头表述内容的程度。
步骤404,对该语音信号进行特征识别。
本实施例中,对该语音信号进行特征识别包括:获取语音信号的基音周期;判断该语音信号的基音周期是否大于预设周期值,若是,则该语音信号为第一特征信号,若否,则该语音信号为第二特征信号。
具体地,声带振动的频率称为基频,相应的周期称为基音周期。预设周期值可根据需要设定,如周期为60个样点。语音信号的基音周期大于60个样点,则该语音信号为第一特征信号,若小于或等于60个样点,则该语音信号为第二特征信号。
步骤406,若该语音信号为第一特征信号,则采用第一预增强滤波系数对该第一特征信号进行预增强滤波,得到第一预增强语音信号。
步骤408,若该语音信号为第二特征信号,则采用第二预增强滤波系数对该第二特征信号进行预增强滤波,得到第二预增强语音信号。
第一特征信号和第二特征信号可为不同频段范围内的语音信号。
步骤410,输出该第一预增强语音信号或第二预增强语音信号,以根据该第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
上述语音信号级联处理方法,通过对语音信号进行特征识别,对第一特征信号采用第一预增强滤波系数进行预增强滤波处理,对第二特征信号采用第二预增强滤波系数进行预增强滤波处理,将预增强语音进行级联编解码处理,接收方能更清楚听清语音信息,提高了经过级联编解码后的语音信号的可懂度,针对第一特征信号和第二特征信号分别采用对应的滤波系数进行增强滤波处理,针对性更强,滤波处理更加准确。
在一个实施例中,上述语音信号级联处理方法,在获取语音信号之前,还包括:获取输入的原始音频信号;检测该原始音频信号为语音信号或非语音信号;若该原始音频信号为语音信号,则获取语音信号;若该原始音频信号为非语音信号,则对该非语音信号进行高通滤波处理。
本实施例中,通过VAD判断样本语音信号为语音信号或非语音信号。
对非语音进行高通滤波处理,降低信号的噪声。
在一个实施例中,在该获取语音信号之前,该语音信号级联处理方法还包括:根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数。
本实施例中,男音频训练集中的训练样本可为录制或从网络上筛选得到的语音信号等。
如图5所示,在一个实施例中,该根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数的步骤包括:
步骤502,从音频训练集中获取样本语音信号,该样本语音信号为第一特征样本语音信号或第二特征样本语音信号。
本实施例中,预先建立音频训练集,音频训练集中包含多个第一特征样本语音信号和第二特征样本语音信号。音频训练集中的第一特征样本语音信号和第二特征样本语音信号独立存在。第一特征样本语音信号和第二特征样本语音信号为不同特征信号的样本语音信号。
在步骤502之后,还包括:判断该样本语音信号是否为语音信号,若是,则对样本语音信号进行模拟级联编解码处理,得到降级语音信号,若否,则重新从音频训练集中获取样本语音信号。
本实施例中,采用VAD(Voice Activity Detection,语音活跃度检测)判断样本语音信号是否为语音信号。VAD是一种语音检测算法,是基于能量、过零率和低噪估计等估算语音。
判断样本语音信号是否为语音信号的步骤包括(a1)至(a5):
(a1)接收连续语音,并从此连续语音中获取音框;
(a2)计算音框的能量,并根据这些能量取得能量门限值;
(a3)分别计算获取的音框的越零率,并根据这些越零率取得越零率门限值;
(a4)使用线性回归演绎法,并以(a2)中获取的能量及(a3)中获取的越零率作为线性回归演绎法的输入参数,用来判断每一音框是否为活动语音或非活动语音;
(a5)根据能量门限值及越零率门限值,自(a4)中的活动语音及非活动语音中取得活动语音起点及活动语音终点。
VAD检测方法可采用双门限检测法或基于自相关极大值的语音检测法。
双门限检测法的过程包括:
(b1)在开始阶段做预加重和分帧处理,将语音信号分成一帧一帧;
(b2)设置初始化参数,包括最大静音长度、短时能量的门限和短时过零率的门限;
(b3)判断当语音在静音段或过渡段时,如果语音信号的短时能量值大于短时能量的高门限,或者语音信号的短时过零率大于短时过零率的高门限,则确认进入语音段,如果短时能量的值大于短时能量的低门限或者过零率的值大于过零率的低门限,则语音处于过渡段,否则语音仍处于静音段;
(b4)当语音信号在语音段时,判断如果短时能量的低门限或短时过零率的值大于短时过零率的低门限,则语音信号仍然处于语音段;
(b5)如果静音长度小于设置的最大静音长度,则表明语音还尚未结束,还在语音段,如果语音的长度小于最小噪声长度,则认为语音太短,此时是噪声,同时判断语音处于静音段;否则语音进入结束段。
步骤504,对该样本语音信号进行模拟级联编解码处理,得到降级语音信号。
模拟级联编解码是指模拟原始语音信号经过的实际链路环节,例如支持G.729A的IP电话与GSM手机互通,则模拟级联编解码可为G.729A编码+G.729解码+AMRNB编码+AMRNB解码。对样本语音信号经过离线的级联编解码处理后得到降级语音信号。
步骤506,获取该降级语音信号与样本语音信号对应不同频点上的能量衰减值,将该能量衰减值作为频点能量补偿值。
具体地,将每个频点的样本语音信号所对应的能量值减去降级语音信号所对应的能量值得到对应频点的能量衰减值,该能量衰减值即为后续需要的该频点能量补偿值。
步骤508,对该音频训练集中的第一特征信号所对应的频点能量补偿值求平均得到第一特征信号在不同频点上的能量平均补偿值,以及对该音频训练集中的第二特征信号所对应的频点能量补偿值求平均得到第二特征信号在不同频点上的能量平均补偿值。
具体地,对音频训练集中第一特征信号所有的能量补偿值求平均得到第一特征信号在不同频点上的能量平均补偿值,对音频训练集中第二特征信号所有的能量补偿值求平均得到第二特征信号在不同频点上的能量平均补偿值。
步骤510,根据该第一特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第一预增强滤波系数,以及根据该第二特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第二预增强滤波系数。
本实施例中,基于第一特征信号在不同频点上的能量平均补偿值为目标,采用自适应滤波器拟合方式对第一特征信号的能量平均补偿值进行滤波拟合得到一组第一预增强滤波系数。基于第二特征信号在不同频点上的能量平均补偿值为目标,采用自适应滤波器拟合方式对第二特征信号的能量平均补偿值进行滤波拟合得到一组第二预增强滤波系数。
预增强滤波器可使用FIR(Finite Impulse Response,有限长单位冲激响应滤波器)滤波器:y[n]=a0*x[n]+a1*x[n-1]+…+am*x[n-m]。
FIR滤波器的预增强滤波系数a0~am可通过matlab的fir2函数进行计算求得,函数b=fir2(n,f,m)是用来设计多通带任意响应FIR滤波器,该滤波器的幅频特性由向量对f和m确定,f为归一化频率向量,m为对应频率点上的幅度,n为滤波器的阶数。本实施例中,将各频点的能量补偿值作为m,输入fir2函数从而计算得到b。
上述离线训练得到第一预增强滤波系数和第二预增强滤波系数,通过离线训练可以准确得到第一预增强滤波系数和第二预增强滤波系数,方便后续进行在线滤波处理得到增强后的语音信号,有效提高级联编解码后的语音信号的可懂度。
如图6所示,在一个实施例中,该获取该语音信号的基音周期包括:
步骤602,对该语音信号进行带通滤波。
本实施例中,对语音信号进行带通滤波可采用80Hz~1500Hz的滤波器进行滤波,也可采用60~1000Hz的带通滤波器进行滤波等,不限于此。也就是带通滤波的频率范围根据具体需求设置。
步骤604,将该带通滤波后的语音信号进行预加重处理。
本实施例中,预加重是指发送端对输入信号高频分量的提升。
步骤606,对该语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数。
本实施例中,矩形窗的窗长为第一采样点数,第一采样点数可为280点,第二采样点可为80点,第一采样点数和第二采样点数不限于此。80点对应的是10ms(毫秒)数据,采用80点平移,则是每帧都会引入10ms的新数据进行计算。
步骤608,对每帧信号进行三电平削波处理。
本实施例中,三电平削波处理,如设定正负阈值,如果样点值大于正阈值则输出1,如果样点值小于负阈值则输出-1,其余情况输出为0。
如图7所示,正阈值为C,负阈值为-C,若样点值超过正阈值C,则输出1,样点值小于负阈值-C,则输出-1,其余输出为0。
对每帧信号进行三电平削波处理得到t(i),其中,i取值范围为1~280。
步骤610,对每帧内采样点计算自相关值。
本实施例中,每帧内采样点计算自相关值为两个因子的积除以各自的开方根的乘积。计算自相关值的公式为:
其中,r(k)为自相关值,t(k+l-1)为对应的(k+l-1)的三电平削波处理的结果,k取值为20至160是常规的基音周期搜索范围,若对换为基频则为8000/20~8000/160,即50Hz~400Hz范围,即人声正常基频范围,k超出20~160可认为非人类正常声音基频范围,可不用计算,节省计算时间。
因k最大值为160,l的最大值为121,则t的最大范围为160+121-1=280,故三电平削波中i的最大值为280。
步骤612,以每帧中自相关值最大者所对应的序号作为每帧的基音周期。
本实施例中,通过计算每帧中自相关值,可得到每帧中自相关值最大者对应的序号,将该自相关最大者对应的序号作为每帧的基音周期。
在其他实施例中,步骤602和步骤604可以省略。
图8为一段语音的基音周期计算结果示意图。如图8所示,第一幅图中的横坐标为采样点的序号,纵坐标为采样点的样点值即采样点的幅值,可知采样点的样点值呈现变化,有的采样点的样点值大,有的采样点的样点值小。第二幅图中的横坐标为帧数,纵坐标为基音周期值,对于语音帧求取基音周期,非语音帧的基音周期默认为0。
下面结合具体的实施例描述上述语音信号级联处理方法。如图9所示,以第一特征信号为男声,第二特征信号为女声为例,上述语音信号级联处理方法包括离线训练部分和在线处理部分。离线训练部分包括:
(c1)从男女声训练集中获取样本语音信号。
(c2)vad判决样本语音信号是否为语音信号,若是,则执行步骤(c3),若否,则返回(c2)。
(c3)若为语音信号,则对样本语音信号进行模拟级联编解码处理,得到降级语音信号。
将样本语音信号经过实际链路环节所需要经过的多个编解码环节,例如支持G.729A的IP电话与GSM手机互通,则模拟级联编解码可为G.729A编码+G.729解码+AMRNB编码+AMRNB解码。对样本语音信号经过离线的级联编解码处理后得到降级语音信号。
(c4)计算各频点能量衰减值,即为能量补偿值。
具体地,将每个频点的样本语音信号所对应的能量值减去降级语音信号所对应的能量值得到对应频点的能量衰减值,该能量衰减值即为后续需要的该频点能量补偿值。
(c5)分别计算男声和女声的频点能量补偿值的平均值。
对该男女声训练集中的男声所对应的频点能量补偿值求平均得到男声在不同频点上的能量平均补偿值,以及对该男女声训练集中的女声所对应的频点能量补偿值求平均得到女声在不同频点上的能量平均补偿值。
(c6)计算男声预增强滤波系数和女声预增强滤波系数。
基于男声在不同频点上的能量平均补偿值为目标,采用自适应滤波器拟合方式对男声的能量平均补偿值进行滤波拟合得到一组男声预增强滤波系数。基于女声在不同频点上的能量平均补偿值为目标,采用自适应滤波器拟合方式对女声的能量平均补偿值进行滤波拟合得到一组女声预增强滤波系数。
在线处理部分包括:
(d1)语音信号输入。
(d2)vad检测是否为语音信号,若是,则执行步骤(d3),若否执行步骤(d4)。
(d3)判断语音信号为男声或女声,若为男声,执行步骤(d4),若为女声,执行步骤(d5)。
(d4)调用离线训练得到的男声预增强滤波系数对男声语音信号进行预增强滤波处理,得到增强后的语音信号。
(d5)调用离线训练得到的女声预增强滤波系数对女声语音信号进行预增强滤波处理,得到增强后的语音信号。
(d6)对非语音信号进行高通滤波处理,得到增强后语音。
上述语音可懂度提升方法,对非语音进行高通滤波处理,降低信号的噪声,通过识别出语音信号为男声信号或女声信号,对男声信号采用离线训练得到的男声预增强滤波系数进行预增强滤波处理,对女声信号采用离线训练得到的女声预增强滤波系数进行预增强滤波处理,针对男声信号和女声信号分别采用对应的滤波系数进行增强滤波处理,提高了语音信号的可懂度,因针对男声和女声分别处理,针对性更强,滤波处理更加准确。
图10为级联编解码后信号经过预增强后的级联编解码信号的示意图。如图10所示,第一幅图为原始信号,第二幅图为级联编解码后的信号,第三幅图为经预增强滤波处理后的级联编解码信号。由此可知,经过预增强后的级联编解码信号相比于级联编解码后信号能量更强,听起来更清晰可懂,提高了语音的可懂度。
图11为未做增强的级联编解码的信号频谱与增强后的级联编解码的信号频谱的对比示意图。如图11所示,曲线为未做增强处理的级联编解码的信号频谱,各点为增强后的级联编解码的信号频谱,横坐标为频率,纵坐标为绝对能量,做增强处理后的信号频谱强度增强,可懂度提升。
图12为未做增强的级联编解码的信号频谱与增强后的级联编解码的信号频谱的中高频部分的对比示意图。曲线为未做增强处理的级联编解码的信号频谱,各点为增强后的级联编解码的信号频谱,横坐标为频率,纵坐标为绝对能量,做增强处理后的信号频谱强度增强,中高频部分做了预增强处理后信号能量更强,提高了可懂度。
图13为一个实施例中语音信号级联处理装置的结构框图。如图13所示,一种语音信号级联处理装置,包括语音信号获取模块1302、识别模块1304、第一信号增强模块1306、第二信号增强模块1308和输出模块1310。其中:
语音信号获取模块1302用于获取语音信号。
识别模块1304用于对该语音信号进行特征识别。
第一信号增强模块1306用于若该语音信号为第一特征信号,则采用第一预增强滤波系数对该第一特征信号进行预增强滤波,得到第一预增强语音信号。
第二信号增强模块1308用于若该语音信号为第二特征信号,则采用第二预增强滤波系数对该第二特征信号进行预增强滤波,得到第二预增强语音信号。
输出模块1310用于输出该第一预增强语音信号或第二预增强语音信号,以根据该第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
上述语音信号级联处理装置,通过对语音信号进行特征识别,对第一特征信号采用第一预增强滤波系数进行预增强滤波处理,对第二特征信号采用第二预增强滤波系数进行预增强滤波处理,将预增强语音进行级联编解码处理,接收方能更清楚听清语音信息,提高了经过级联编解码后的语音信号的可懂度,针对第一特征信号和第二特征信号分别采用对应的滤波系数进行增强滤波处理,针对性更强,滤波处理更加准确。
图14为另一个实施例中语音信号级联处理装置的结构框图。如图14所示,一种语音信号级联处理装置,除了包括语音信号获取模块1302、识别模块1304、第一信号增强模块1306、第二信号增强模块1308和输出模块1310,还包括训练模块1312。
训练模块1312用于在该获取语音信号之前,根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数。
图15为一个实施例中训练模块的内部结构示意图。如图15所示,该训练模块1310包括选取单元1502、模拟级联编解码单元1504、能量补偿值获取单元1506、平均能量补偿值获取单元1508和滤波系数获取单元1510。
选取单元1502用于从音频训练集中获取样本语音信号,该样本语音信号为第一特征样本语音信号或第二特征样本语音信号。
模拟级联编解码单元1504用于对该样本语音信号进行模拟级联编解码处理,得到降级语音信号。
能量补偿值获取单元1506用于获取该降级语音信号与样本语音信号对应不同频点上的能量衰减值,将该能量衰减值作为频点能量补偿值。
平均能量补偿值获取单元1508用于对该音频训练集中的第一特征信号所对应的频点能量补偿值求平均得到第一特征信号在不同频点上的能量平均补偿值,以及对该音频训练集中的第二特征信号所对应的频点能量补偿值求平均得到第二特征信号在不同频点上的能量平均补偿值。
滤波系数获取单元1510用于根据该第一特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第一预增强滤波系数,以及根据该第二特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第二预增强滤波系数。
上述离线训练得到第一预增强滤波系数和第二预增强滤波系数,通过离线训练可以准确得到第一预增强滤波系数和第二预增强滤波系数,方便后续进行在线滤波处理得到增强后的语音信号,有效提高级联编解码后的语音信号的可懂度。
在一个实施例中,识别模块1304还用于获取该语音信号的基音周期;以及判断该语音信号的基音周期是否大于预设周期值,若是,则该语音信号为第一特征信号,若否,则该语音信号为第二特征信号。
进一步的,识别模块1304还用于对该语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数;对每帧信号进行三电平削波处理;对每帧内采样点计算自相关值;以及以每帧中自相关值最大者所对应的序号作为每帧的基音周期。
进一步的,识别模块1304还用于在该对该语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数之前,对该语音信号进行带通滤波,以及将该带通滤波后的语音信号进行预加重处理。
图16为另一个实施例中语音信号级联处理装置的结构框图。如图16所示,一种语音信号级联处理装置,除了包括语音信号获取模块1302、识别模块1304、第一信号增强模块1306、第二信号增强模块1308和输出模块1310,还包括原始信号获取模块1314、检测模块1316、滤波模块1318。
原始信号获取模块1314用于获取输入的原始音频信号。
检测模块1316用于检测该原始音频信号为语音信号或非语音信号。
该语音信号获取模块1302还用于若该原始音频信号为语音信号,获取语音信号。
滤波模块1318用于若该原始音频信号为非语音信号,则对该非语音信号进行高通滤波处理。
上述语音信号级联处理装置,对非语音进行高通滤波处理,降低信号的噪声,通过对语音信号进行特征识别,对第一特征信号采用第一预增强滤波系数进行预增强滤波处理,对第二特征信号采用第二预增强滤波系数进行预增强滤波处理,将预增强语音进行级联编解码处理,接收方能更清楚听清语音信息,提高了经过级联编解码后的语音信号的可懂度,针对第一特征信号和第二特征信号分别采用对应的滤波系数进行增强滤波处理,针对性更强,滤波处理更加准确。
在其他实施例中,一种语音信号级联处理装置,可包括语音信号获取模块1302、识别模块1304、第一信号增强模块1306、第二信号增强模块1308、输出模块1310、训练模块1312、原始信号获取模块1314、检测模块1316、滤波模块1318中所有可能的组合。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (12)
1.一种语音信号级联处理方法,包括:
获取语音信号;
对所述语音信号进行特征识别;
若所述语音信号为第一特征信号,则采用第一预增强滤波系数对所述第一特征信号进行预增强滤波,得到第一预增强语音信号;
若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;以及
输出所述第一预增强语音信号或第二预增强语音信号,以根据所述第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
2.根据权利要求1所述的方法,其特征在于,在所述获取语音信号之前,所述方法还包括:
根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数,包括:
从音频训练集中获取样本语音信号,所述样本语音信号为第一特征样本语音信号或第二特征样本语音信号;
对所述样本语音信号进行模拟级联编解码处理,得到降级语音信号;
获取所述降级语音信号与样本语音信号对应不同频点上的能量衰减值,将所述能量衰减值作为频点能量补偿值;
对所述音频训练集中的第一特征信号所对应的频点能量补偿值求平均得到第一特征信号在不同频点上的能量平均补偿值,以及对所述音频训练集中的第二特征信号所对应的频点能量补偿值求平均得到第二特征信号在不同频点上的能量平均补偿值;
根据所述第一特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第一预增强滤波系数,以及根据所述第二特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第二预增强滤波系数。
3.根据权利要求1所述的方法,其特征在于,所述对所述语音信号进行特征识别包括:
获取所述语音信号的基音周期;
判断所述语音信号的基音周期是否大于预设周期值,若是,则所述语音信号为第一特征信号,若否,则所述语音信号为第二特征信号。
4.根据权利要求3所述的方法,其特征在于,所述获取所述语音信号的基音周期包括:
对所述语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数;
对每帧信号进行三电平削波处理;
对每帧内采样点计算自相关值;
以每帧中自相关值最大者所对应的序号作为每帧的基音周期。
5.根据权利要求4所述的方法,其特征在于,在所述对所述语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数之前,所述获取所述语音信号的基音周期还包括:
对所述语音信号进行带通滤波;
将所述带通滤波后的语音信号进行预加重处理。
6.根据权利要求1所述的方法,其特征在于,在所述获取语音信号的步骤之前,所述方法还包括:
获取输入的原始音频信号;
检测所述原始音频信号为语音信号或非语音信号;
若所述原始音频信号为语音信号,则执行所述获取语音信号的步骤;
若所述原始音频信号为非语音信号,则对所述非语音信号进行高通滤波处理。
7.一种语音信号级联处理装置,其特征在于,包括:
语音信号获取模块,用于获取语音信号;
识别模块,用于对所述语音信号进行特征识别;
第一信号增强模块,用于若所述语音信号为第一特征信号,则采用第一预增强滤波系数对所述第一特征信号进行预增强滤波,得到第一预增强语音信号;
第二信号增强模块,用于若所述语音信号为第二特征信号,则采用第二预增强滤波系数对所述第二特征信号进行预增强滤波,得到第二预增强语音信号;以及
输出模块,用于输出所述第一预增强语音信号或第二预增强语音信号,以根据所述第一预增强语音信号或第二预增强语音信号进行级联编解码处理。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
训练模块,用于在所述获取语音信号之前,根据音频训练集中的训练样本进行离线训练得到第一预增强滤波系数和第二预增强滤波系数;
所述训练模块包括:
选取单元,用于从音频训练集中获取样本语音信号,所述样本语音信号为第一特征样本语音信号或第二特征样本语音信号;
模拟级联编解码单元,用于对所述样本语音信号进行模拟级联编解码处理,得到降级语音信号;
能量补偿值获取单元,用于获取所述降级语音信号与样本语音信号对应不同频点上的能量衰减值,将所述能量衰减值作为频点能量补偿值;
平均能量补偿值获取单元,用于对所述音频训练集中的第一特征信号所对应的频点能量补偿值求平均得到第一特征信号在不同频点上的能量平均补偿值,以及对所述音频训练集中的第二特征信号所对应的频点能量补偿值求平均得到第二特征信号在不同频点上的能量平均补偿值;
滤波系数获取单元,用于根据所述第一特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第一预增强滤波系数,以及根据所述第二特征信号在不同频点上的能量平均补偿值进行滤波拟合得到第二预增强滤波系数。
9.根据权利要求7所述的装置,其特征在于,所述识别模块还用于获取所述语音信号的基音周期;以及判断所述语音信号的基音周期是否大于预设周期值,若是,则所述语音信号为第一特征信号,若否,则所述语音信号为第二特征信号。
10.根据权利要求9所述的装置,其特征在于,所述识别模块还用于对所述语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数;
对每帧信号进行三电平削波处理;
对每帧内采样点计算自相关值;以及
以每帧中自相关值最大者所对应的序号作为每帧的基音周期。
11.根据权利要求10所述的装置,其特征在于,所述识别模块还用于在所述对所述语音信号以矩形窗进行平移分帧,每帧窗长第一采样点数,每帧平移第二采样点数之前,对所述语音信号进行带通滤波,以及将所述带通滤波后的语音信号进行预加重处理。
12.根据权利要求7所述的装置,其特征在于,所述装置还包括:
原始信号获取模块,用于获取输入的原始音频信号;
检测模块,用于检测所述原始音频信号为语音信号或非语音信号;
所述语音信号获取模块还用于若所述原始音频信号为语音信号,获取语音信号;
滤波模块,用于若所述原始音频信号为非语音信号,则对所述非语音信号进行高通滤波处理。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610235392.9A CN105913854B (zh) | 2016-04-15 | 2016-04-15 | 语音信号级联处理方法和装置 |
EP17781758.2A EP3444819B1 (en) | 2016-04-15 | 2017-03-14 | Voice signal cascade processing method and terminal, and computer readable storage medium |
PCT/CN2017/076653 WO2017177782A1 (zh) | 2016-04-15 | 2017-03-14 | 语音信号级联处理方法、终端和计算机可读存储介质 |
US16/001,736 US10832696B2 (en) | 2016-04-15 | 2018-06-06 | Speech signal cascade processing method, terminal, and computer-readable storage medium |
US17/076,656 US11605394B2 (en) | 2016-04-15 | 2020-10-21 | Speech signal cascade processing method, terminal, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610235392.9A CN105913854B (zh) | 2016-04-15 | 2016-04-15 | 语音信号级联处理方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105913854A true CN105913854A (zh) | 2016-08-31 |
CN105913854B CN105913854B (zh) | 2020-10-23 |
Family
ID=56747068
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610235392.9A Active CN105913854B (zh) | 2016-04-15 | 2016-04-15 | 语音信号级联处理方法和装置 |
Country Status (4)
Country | Link |
---|---|
US (2) | US10832696B2 (zh) |
EP (1) | EP3444819B1 (zh) |
CN (1) | CN105913854B (zh) |
WO (1) | WO2017177782A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017177782A1 (zh) * | 2016-04-15 | 2017-10-19 | 腾讯科技(深圳)有限公司 | 语音信号级联处理方法、终端和计算机可读存储介质 |
CN107731232A (zh) * | 2017-10-17 | 2018-02-23 | 深圳市沃特沃德股份有限公司 | 语音翻译方法和装置 |
CN110288977A (zh) * | 2019-06-29 | 2019-09-27 | 联想(北京)有限公司 | 一种数据处理方法、装置及电子设备 |
CN113409803A (zh) * | 2020-11-06 | 2021-09-17 | 腾讯科技(深圳)有限公司 | 语音信号处理方法、装置、存储介质及设备 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110401611B (zh) * | 2019-06-29 | 2021-12-07 | 西南电子技术研究所(中国电子科技集团公司第十研究所) | 快速检测cpfsk信号的方法 |
US11064297B2 (en) * | 2019-08-20 | 2021-07-13 | Lenovo (Singapore) Pte. Ltd. | Microphone position notification |
US11710492B2 (en) * | 2019-10-02 | 2023-07-25 | Qualcomm Incorporated | Speech encoding using a pre-encoded database |
US11823706B1 (en) * | 2019-10-14 | 2023-11-21 | Meta Platforms, Inc. | Voice activity detection in audio signal |
CN113160835A (zh) * | 2021-04-23 | 2021-07-23 | 河南牧原智能科技有限公司 | 一种猪只声音提取方法、装置、设备及可读存储介质 |
US11830514B2 (en) * | 2021-05-27 | 2023-11-28 | GM Global Technology Operations LLC | System and method for augmenting vehicle phone audio with background sounds |
CN113488071A (zh) * | 2021-07-16 | 2021-10-08 | 河南牧原智能科技有限公司 | 一种猪只咳嗽识别方法、装置、设备及可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060095256A1 (en) * | 2004-10-26 | 2006-05-04 | Rajeev Nongpiur | Adaptive filter pitch extraction |
CN1971711A (zh) * | 2005-06-28 | 2007-05-30 | 哈曼贝克自动系统-威美科公司 | 语音信号自适应增强系统 |
CN102779527A (zh) * | 2012-08-07 | 2012-11-14 | 无锡成电科大科技发展有限公司 | 基于窗函数共振峰增强的语音增强方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5012518A (en) * | 1989-07-26 | 1991-04-30 | Itt Corporation | Low-bit-rate speech coder using LPC data reduction processing |
US5657422A (en) * | 1994-01-28 | 1997-08-12 | Lucent Technologies Inc. | Voice activity detection driven noise remediator |
US6070137A (en) * | 1998-01-07 | 2000-05-30 | Ericsson Inc. | Integrated frequency-domain voice coding using an adaptive spectral enhancement filter |
EP0929065A3 (en) * | 1998-01-09 | 1999-12-22 | AT&T Corp. | A modular approach to speech enhancement with an application to speech coding |
US6104991A (en) * | 1998-02-27 | 2000-08-15 | Lucent Technologies, Inc. | Speech encoding and decoding system which modifies encoding and decoding characteristics based on an audio signal |
US7787640B2 (en) * | 2003-04-24 | 2010-08-31 | Massachusetts Institute Of Technology | System and method for spectral enhancement employing compression and expansion |
US8160877B1 (en) * | 2009-08-06 | 2012-04-17 | Narus, Inc. | Hierarchical real-time speaker recognition for biometric VoIP verification and targeting |
US8280726B2 (en) * | 2009-12-23 | 2012-10-02 | Qualcomm Incorporated | Gender detection in mobile phones |
US8831942B1 (en) * | 2010-03-19 | 2014-09-09 | Narus, Inc. | System and method for pitch based gender identification with suspicious speaker detection |
PT2795613T (pt) * | 2011-12-21 | 2018-01-16 | Huawei Tech Co Ltd | Deteção e codificação de diferencial de altura de som muito curto |
CN103413553B (zh) * | 2013-08-20 | 2016-03-09 | 腾讯科技(深圳)有限公司 | 音频编码方法、音频解码方法、编码端、解码端和系统 |
CN104269177B (zh) * | 2014-09-22 | 2017-11-07 | 联想(北京)有限公司 | 一种语音处理方法及电子设备 |
US9330684B1 (en) * | 2015-03-27 | 2016-05-03 | Continental Automotive Systems, Inc. | Real-time wind buffet noise detection |
CN105913854B (zh) * | 2016-04-15 | 2020-10-23 | 腾讯科技(深圳)有限公司 | 语音信号级联处理方法和装置 |
-
2016
- 2016-04-15 CN CN201610235392.9A patent/CN105913854B/zh active Active
-
2017
- 2017-03-14 WO PCT/CN2017/076653 patent/WO2017177782A1/zh active Application Filing
- 2017-03-14 EP EP17781758.2A patent/EP3444819B1/en active Active
-
2018
- 2018-06-06 US US16/001,736 patent/US10832696B2/en active Active
-
2020
- 2020-10-21 US US17/076,656 patent/US11605394B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060095256A1 (en) * | 2004-10-26 | 2006-05-04 | Rajeev Nongpiur | Adaptive filter pitch extraction |
CN1971711A (zh) * | 2005-06-28 | 2007-05-30 | 哈曼贝克自动系统-威美科公司 | 语音信号自适应增强系统 |
CN102779527A (zh) * | 2012-08-07 | 2012-11-14 | 无锡成电科大科技发展有限公司 | 基于窗函数共振峰增强的语音增强方法 |
Non-Patent Citations (1)
Title |
---|
马效敏等: "《自相关基频提取算法的MATLAB实现》", 《西北民族大学学报(自然科学版)》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017177782A1 (zh) * | 2016-04-15 | 2017-10-19 | 腾讯科技(深圳)有限公司 | 语音信号级联处理方法、终端和计算机可读存储介质 |
US10832696B2 (en) | 2016-04-15 | 2020-11-10 | Tencent Technology (Shenzhen) Company Limited | Speech signal cascade processing method, terminal, and computer-readable storage medium |
US11605394B2 (en) | 2016-04-15 | 2023-03-14 | Tencent Technology (Shenzhen) Company Limited | Speech signal cascade processing method, terminal, and computer-readable storage medium |
CN107731232A (zh) * | 2017-10-17 | 2018-02-23 | 深圳市沃特沃德股份有限公司 | 语音翻译方法和装置 |
CN110288977A (zh) * | 2019-06-29 | 2019-09-27 | 联想(北京)有限公司 | 一种数据处理方法、装置及电子设备 |
CN110288977B (zh) * | 2019-06-29 | 2022-05-31 | 联想(北京)有限公司 | 一种数据处理方法、装置及电子设备 |
CN113409803A (zh) * | 2020-11-06 | 2021-09-17 | 腾讯科技(深圳)有限公司 | 语音信号处理方法、装置、存储介质及设备 |
CN113409803B (zh) * | 2020-11-06 | 2024-01-23 | 腾讯科技(深圳)有限公司 | 语音信号处理方法、装置、存储介质及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105913854B (zh) | 2020-10-23 |
EP3444819A4 (en) | 2019-04-24 |
US10832696B2 (en) | 2020-11-10 |
EP3444819A1 (en) | 2019-02-20 |
EP3444819B1 (en) | 2021-08-11 |
US20210035596A1 (en) | 2021-02-04 |
WO2017177782A1 (zh) | 2017-10-19 |
US11605394B2 (en) | 2023-03-14 |
US20180286422A1 (en) | 2018-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105913854A (zh) | 语音信号级联处理方法和装置 | |
AU656787B2 (en) | Auditory model for parametrization of speech | |
CN1064772C (zh) | 语音活动性检测器 | |
EP2517202B1 (en) | Method and device for speech bandwidth extension | |
EP2491558B1 (en) | Determining an upperband signal from a narrowband signal | |
US7035797B2 (en) | Data-driven filtering of cepstral time trajectories for robust speech recognition | |
EP0993670B1 (en) | Method and apparatus for speech enhancement in a speech communication system | |
EP1892703B1 (en) | Method and system for providing an acoustic signal with extended bandwidth | |
EP1632935B1 (en) | Speech enhancement | |
JP2006079079A (ja) | 分散音声認識システム及びその方法 | |
CA2262787C (en) | Methods and devices for noise conditioning signals representative of audio information in compressed and digitized form | |
US9373342B2 (en) | System and method for speech enhancement on compressed speech | |
JP4050350B2 (ja) | 音声認識をする方法とシステム | |
KR100216018B1 (ko) | 배경음을 엔코딩 및 디코딩하는 방법 및 장치 | |
Loweimi et al. | Robust Source-Filter Separation of Speech Signal in the Phase Domain. | |
CN101557443B (zh) | 数字电话会议的桥路运算方法 | |
WO2020044362A2 (en) | Real-time pitch tracking by detection of glottal excitation epochs in speech signal using hilbert envelope | |
CN110933235B (zh) | 一种基于机器学习的智能呼叫系统中的噪声识别方法 | |
CN112270934B (zh) | 一种nvoc低速窄带声码器的语音数据处理方法 | |
CN113470652A (zh) | 一种基于工业互联网的语音识别及处理方法 | |
CN111048072A (zh) | 一种应用于电力企业的声纹识别方法 | |
GB2343822A (en) | Using LSP to alter frequency characteristics of speech | |
KR100667522B1 (ko) | Lpc 계수를 이용한 이동통신 단말기 음성인식 방법 | |
KR20030009517A (ko) | 위상-스미어링 및 위상-디스미어링 필터를 구비하는adpcm 스피치 코딩 시스템 | |
KR100446739B1 (ko) | 지연 피치 추출장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |