CN112201279B - 一种基音检测方法及装置 - Google Patents
一种基音检测方法及装置 Download PDFInfo
- Publication number
- CN112201279B CN112201279B CN202010907190.0A CN202010907190A CN112201279B CN 112201279 B CN112201279 B CN 112201279B CN 202010907190 A CN202010907190 A CN 202010907190A CN 112201279 B CN112201279 B CN 112201279B
- Authority
- CN
- China
- Prior art keywords
- voice data
- current frame
- function
- frame
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 86
- 238000000034 method Methods 0.000 claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 21
- 238000007781 pre-processing Methods 0.000 claims abstract description 9
- 230000006870 function Effects 0.000 claims description 102
- 238000005311 autocorrelation function Methods 0.000 claims description 65
- 238000010606 normalization Methods 0.000 claims description 13
- AILFSZXBRNLVHY-UHFFFAOYSA-N 2,5-Dimethyl-4-ethoxy-3(2H)-furanone Chemical compound CCOC1=C(C)OC(C)C1=O AILFSZXBRNLVHY-UHFFFAOYSA-N 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 4
- 238000012935 Averaging Methods 0.000 claims description 3
- 230000003044 adaptive effect Effects 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 2
- 238000009432 framing Methods 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000001755 vocal effect Effects 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000010219 correlation analysis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/90—Pitch determination of speech signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/06—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being correlation coefficients
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本公开涉及一种基音检测方法及装置。该方法包括如下步骤:获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理;分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线;根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期;根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效。该方法有效地抑制了共振峰的影响,在低信噪比环境下能有效检测到基音周期,更准确地定位基音周期的位置,从而提高了基音检测精度,并解决传统的时域基音检测方法准确度较差的问题。此外,在实际运用中能够较好地满足语音信号处理对基音检测的要求,从而提高了语音信号处理的性能。
Description
技术领域
本公开涉及一种基音检测方法,同时也涉及实现该方法的基音检测装置,属于语音信号处理技术领域。
背景技术
语音信号的基音周期是描述激励源的重要特征参数之一。准确的检测语音信号的基音周期对高质量的语音分析与合成、语音压缩编码、语音识别等具有重要意义。但是,由于声道的易变性及声道特征因人而异,而基音的范围又很宽,即使是同一个人在不同情态下发音的基音周期也不相同,加之基音周期还受到单次发音音调的影响,因而基音周期的精确检测实际是一件比较困难的事情。
基音周期检测方法主要有两类:时域法和频域法。由于时域法比较直观且运算量小,故在实际项目应用中通常选用时域法。现有的时域基音周期检测方法有两种:分别为ACF(Auto Correlation Function,自相关函数)方法和AMDF(Average MagnitudeDifference Function,平均幅度差函数)方法。
自相关函数方法是计算语音信号的自相关函数,通过ACF曲线在基音周期整数倍位置存在较大峰值来估计基音。从估计基音周期的角度来看,短时自相关函数所包含的信息许多是多余的,真正能反映基音周期性的只是少数几个峰,其余的大多数峰都是由于声道的谐振特性引起的。而通常情况下,基波分量往往不是最强的分量,丰富的谐波成分使语音信号的波形变得非常复杂,给基音检测带来了困难,经常发生基频估计结果为其实际基音频率的二次倍频或二次分频的情况。
平均幅度差函数方法是计算语音信号的平均幅度差函数,通过AMDF曲线在基音周期整数倍处出现谷值来估计基音。当语音信号的变化比较平缓时,ADMF方法进行基音周期估计可以得到较高的估计,即精度和可靠性,所需计算量比较小,但是当语音信号的幅度或频率变化较快时,即在语音环境较恶劣、信噪比较低时,基因检测结果的准确程度下降较快,难以让人满意。
发明内容
本公开所要解决的首要技术问题在于提供一种基音检测方法。
本公开所要解决的另一技术问题在于提供一种基音检测装置。
为了实现上述目的,本公开采用下述技术方案:
根据本公开实施例的第一方面,提供一种基音检测方法,包括如下步骤:
获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理;
分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线;
根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期;
根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效。
其中较优地,对所述语音采集装置实时采集的连续语音信号按照预设时间段进行分帧并分别进行编码,得到所述多帧语音数据。
其中较优地,对每一帧语音数据进行预处理包括采用自相关的自适应语音增强算法抑制语音信号中的高斯白噪声和采用线性相位低通滤波器滤除语音信号中的高次谐波分量。
其中较优地,分别计算经预处理的所述每一帧语音数据的基音检测核心函数的过程为:
分别计算语音信号的平均幅度差函数的倒数和短时自相关函数,并进行最大值归一化处理;
将经最大值归一化处理后的平均幅度函数的倒数和短时自相关函数,进行调和平均后的函数作为当前帧语音数据的基音检测核心函数。
其中较优地,所述语音信号s(n)的短时自相关函数为:
上式中,N为计算语音信号s(n)的短时自相关函数所需的样值点数,s(n+m)为当前帧语音数据的语音信号的样值点数,w(m)为当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数;
所述语音信号s(n)的平均幅度差函数为:
上式中,N为计算语音信号s(n)的平均幅度差函数所需的样值点数,s(n+m)为所述当前帧语音数据的语音信号的样值点数,w(m)为所述当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为所述当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为所述当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数。
其中较优地,所述当前帧语音数据的最大值归一化的语音信号的短时自相关函数为:
上式中,Rn(τ)为当前帧语音数据的语音信号的短时自相关函数,min(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最小值,max(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最大值;
所述当前帧语音数据的最大值归一化的语音信号的平均幅度差函数的倒数为:
上式中,Fn(τ)-1为当前帧语音数据的语音信号平均幅度差函数的倒数,min(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最小值,max(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最大值;
以当前帧语音数据最大值归一化的语音信号的平均幅度差函数ADMF(τ)的倒数与语音信号的短时自相关函数ACF(τ)取调和平均Kernel(τ)作为当前帧语音数据的基音检测核心函数,具体表示为:
其中较优地,根据所述当前帧语音数据的基音检测核心函数曲线,选取出满足最大值归一化处理后的平均幅度差函数的倒数和短时自相关函数数值最大时对应的样值点范围,并根据所述样值点范围确定出所述当前帧语音数据的语音信号的基音周期。
其中较优地,验证所述当前帧语音数据的基音检测是否有效时,分别将计算的当前帧语音数据与其相邻帧语音数据的基音周期的门限值和当前帧语音数据的基音周期阈值进行比较,当计算的所述当前帧语音数据与其相邻帧语音数据的基音周期的门限值大于所述当前帧语音数据的基音周期阈值时,认为所述当前帧语音数据的基音检测是有效的。
其中较优地,所述当前帧语音数据与其相邻帧语音数据的基音周期的门限值为:
上式中,A[i]、B[i]为前后两帧语音数据出现最大值归一化处理后的短时自相关函数和平均幅度差函数数值最大时对应的样值点范围,P为前后两帧语音数据基音周期。
根据本公开实施例的第二方面,提供一种基音检测装置,包括处理器和存储器,所述处理器读取所述存储器中的计算机程序或指令,用于执行以下操作:
获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理;
分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线;
根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期;
根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效。
本公开实施例提供的基音检测方法及装置主要是基于短时自相关函数方法和平均幅度差函数方法进行改进,有效地抑制了共振峰的影响,在低信噪比环境下能有效检测到基音周期,更准确地定位基音周期的位置,从而提高了基音检测精度,并解决传统的时域基音检测方法准确度较差的问题。此外,在实际运用中能够较好地满足语音信号处理对基音检测的要求,从而提高了语音信号处理的性能。
附图说明
图1为本公开实施例提供的基音检测方法的流程图;
图2为本发明实施例提供的基音检测装置的结构示意图。
具体实施方式
下面结合附图和具体实施例对本公开的技术内容做进一步的详细说明。
为了解决采用自相关函数方法估计语音信号的基音周期时出现的倍频或半频错误,以及采用平均幅度差函数方法估计语音信号的基音周期在语音信号的幅度或频率变化比较敏感时,基音检测精度明显下降的问题,如图1所示,本公开实施例提供了基音检测方法,包括:
步骤S1、获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理。
在进行IP语音会议的过程中,采用语音采集装置实时采集语音信号。由于语音信号是非稳态信号,其特征是随着时间变化的,但在一个很短的时间段内可以认为具有相对稳定的特征即短时平稳性。因此,语音信号具有短时相关性。这个时间段约为5ms-50ms。为了使其统计特性和频谱特性都是对短时段而言,需要对语音采集装置实时采集的连续语音信号按照预设时间段进行分帧并分别进行编码,得到多帧语音数据,每一帧语音数据都具有短时平稳性,从而便于对其进行短时相关分析。其中较佳地,优选对语音采集装置实时采集的连续的语音信号按照每20ms为一个时间段进行分帧。
获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码后得到预设时间段的语音信号,对该预设时间段的语音信号进行预处理包括采用自相关的自适应语音增强算法抑制语音信号中的高斯白噪声和采用线性相位低通滤波器滤除语音信号中的高次谐波分量,以尽可能地提取出纯净的原始语音信号。其中较佳地,优选采用通带为900Hz左右的线性相位低通滤波器滤除语音信号中的高次谐波分量,以减小语音信号中的高频信号干扰。需要强调的是,采用自相关的自适应语音增强算法抑制语音信号中的高斯白噪声为现有成熟技术,在此就不再赘述了。
其中,语音采集装置一般为进行IP语音会议时所使用的语音通话设备的声卡,如IP电话、手机中设置的声卡等。
步骤S2、分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线。
针对获取的当前帧语音数据进行解码和预处理得到的预设时间段的语音信号,分别计算语音信号基音检测核心函数的过程包括:
步骤S21、分别计算语音信号的平均幅度差函数的倒数和短时自相关函数。
由于语音信号的短时自相关函数采用的是对应样值点相乘,而语音信号的平均幅度差函数采用的是对应样值点相减,使得语音信号的短时自相关函数和平均幅度差函数的计算结果不在同一个数量级;因此,需要采用最大值归一化的方法将短时自相关函数方法和平均幅度差函数方法的计算值做归一化处理,避免因量级差别而造成语音信号的基音检测精度下降。
具体的说,语音信号s(n)的短时自相关函数为:
上式中,N为计算语音信号s(n)的短时自相关函数所需的样值点数,s(n+m)为当前帧语音数据的语音信号的样值点数,w(m)为当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数。
以当前帧语音数据的语音信号的样值点数为160为例,那么通过公式(1)计算出该160个样值点的语音信号往后平移τ个样值点后,进行乘积累加得到相应的短时自相关函数。
值得说明的是,清音信号没有周期性,它的短时自相关函数也没有周期性规律,因此没有明显的峰值出现,清音信号的短时自相关函数Rn(τ)会随着样值点τ的增大迅速衰减;浊音信号具有准周期性,它的短时自相关函数Rn(τ)具有与样值点τ相同的周期,短时自相关函数Rn(τ)在基音周期的整数倍位置上出现峰值。根据这个性质可以判断语音信号是清音还是浊音。
语音信号s(n)的平均幅度差函数为:
上式中,N为计算语音信号s(n)的平均幅度差函数所需的样值点数,s(n+m)为当前帧语音数据的语音信号的样值点数,w(m)为当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数。
以当前帧语音数据的语音信号的样值点数为160为例,那么通过公式(2)计算出该160个样值点的语音信号往后平移τ个样值点后,进行作差累加得到相应的平均幅度差函数。
语音信号的短时平均幅度差函数Fn(τ)与短时自相关函数一样,对周期性的浊音,语音信号的短时平均幅度差函数Fn(τ)也呈现与浊音语音周期一致的周期特性,不过不同的是语音信号的短时平均幅度差函数Fn(τ)在周期的各个整数点上具有谷值特性而不是峰值特性。
需要强调的是,在分别计算每一帧语音数据的语音信号的短时自相关函数和平均幅度差函数时均添加了加窗函数,避免引起很大的频谱泄露,使得语音信号的基音检测结果更准确。
因此,当前帧语音数据的最大值归一化的语音信号的短时自相关函数为:
上式中,Rn(τ)为当前帧语音数据的语音信号的短时自相关函数,min(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最小值,max(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最大值。
最大值归一化的语音信号的平均幅度差函数的倒数为:
上式中,Fn(τ)-1为当前帧语音数据的语音信号平均幅度差函数的倒数,min(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最小值,max(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最大值。
步骤S22、将经最大值归一化处理后的平均幅度函数的倒数和短时自相关函数,进行调和平均后的函数作为当前帧语音数据的基音检测核心函数。
以当前帧语音数据最大值归一化的语音信号的平均幅度差函数ADMF(τ)的倒数与语音信号的短时自相关函数ACF(τ)取调和平均Kernel(τ)作为当前帧语音数据的基音检测核心函数,具体表示为:并且,该当前帧语音数据的基音检测核心函数以曲线形式进行呈现。
由于短时自相关函数方法和平均幅度差函数方法两者具有独立且相似的统计特性,即语音信号的短时自相关函数在基音周期处表现为峰值(短时自相关函数方法计算最大值),而语音信号的的平均幅度差函数在基音周期处表现为谷值(平均幅度差函数方法计算最小值),此时为了同时平衡短时自相关函数和平均幅度差函数的计算结果,因此可以同时运用短时自相关函数方法和平均幅度差函数方法的特点,将经最大值归一化处理后的平均幅度函数的倒数和短时自相关函数,进行调和平均后的函数作为当前帧语音数据的基音检测核心函数,使得对应基音周期处出现更明显的峰值,从而提高基音检测的准确程度。
步骤S3、根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期。
根据当前帧语音数据的基音检测核心函数曲线,选取出满足最大值归一化处理后的平均幅度差函数的倒数和短时自相关函数数值最大时对应的样值点范围。因为由当前帧语音数据最大值归一化的语音信号的平均幅度差函数ADMF(τ)的倒数与语音信号的短时自相关函数ACF(τ)取调和平均Kernel(τ)的计算公式可知,只有语音信号的短时自相关函数ACF(τ)和语音信号的平均幅度差函数的倒数ADMF(τ)-1同时取最大值时,Kernel(τ)才具有最大值。由于每一帧语音数据不同的样值点范围对应相应的语音信号的基音周期,因此根据选取的样值点范围可以直接确定出当前帧语音数据的语音信号的基音周期。
步骤S4、根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效。
由于会持续计算获取的每一帧语音数据的基音周期,因此需要验证每一帧语音数据的基音检测是否有效。其验证过程为:分别将计算的当前帧语音数据与其相邻帧语音数据的基音周期的门限值和当前帧语音数据的基音周期阈值进行比较,以验证当前帧语音数据的基音检测是否有效。只有当计算的当前帧语音数据与其相邻帧语音数据的基音周期的门限值大于当前帧语音数据的基音周期阈值时,才认为当前帧语音数据的基音检测是有效的。其中,当前帧语音数据的基音周期阈值可根据实际应用场景而选择合适的经验值。
当前帧语音数据与其相邻帧语音数据的基音周期的门限值为:
上式中,A[i]、B[i]为前后两帧语音数据出现最大值归一化处理后的短时自相关函数和平均幅度差函数数值最大时对应的样值点范围,P为前后两帧语音数据基音周期。
此外,如图2所示,本公开实施例还提供一种基音检测装置,包括处理器32和存储器31,还可以根据实际需要进一步包括通信组件、传感器组件、电源组件、多媒体组件及输入/输出接口。其中,存储器、通信组件、传感器组件、电源组件、多媒体组件及输入/输出接口均与该处理器32连接。前已述及,存储器31可以是静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器等;处理器32可以是中央处理器(CPU)、图形处理器(GPU)、现场可编程逻辑门阵列(FPGA)、专用集成电路(ASIC)、数字信号处理(DSP)芯片等。其它通信组件、传感器组件、电源组件、多媒体组件等均可以采用现有智能手机中的通用部件实现,在此就不具体说明了。
另一方面,在基音检测装置中,处理器32读取存储器31中的计算机程序或指令,用于执行以下操作:
获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理。
分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线。
根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期。
根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效。
另外,本公开实施例还提供一种计算机可读存储介质,所述可读存储介质上存储有指令,当其在计算机上运行时,使得所述计算机执行如上述图1所述的基音检测方法,此处不再赘述其具体实现方式。
另外,本公开实施例还提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得所述计算机执行如上述图1所述的基音检测方法,此处不再赘述其具体实现方式。
本公开实施例提供的基音检测方法及装置主要是基于短时自相关函数方法和平均幅度差函数方法进行改进,有效地抑制了共振峰的影响,在低信噪比环境下能有效检测到基音周期,更准确地定位基音周期的位置,从而提高了基音检测精度,并解决传统的时域基音检测方法准确度较差的问题。此外,在实际运用中能够较好地满足语音信号处理对基音检测的要求,从而提高了语音信号处理的性能。
以上对本公开所提供的基音检测方法及装置进行了详细的说明。对本领域的一般技术人员而言,在不背离本公开实质内容的前提下对它所做的任何显而易见的改动,都将属于本公开专利权的保护范围。
Claims (5)
1.一种基音检测方法,其特征在于包括如下步骤:
获取语音采集装置发送的多帧语音数据,并对每一帧语音数据进行解码和预处理;
分别计算经预处理的每一帧语音数据的基音检测核心函数,得到相应的基音检测核心函数曲线;
根据每一帧语音数据的基音检测核心函数曲线,得到每一帧语音数据的基音周期;
根据当前帧语音数据的基音周期阈值,验证该帧语音数据的基音检测是否有效,
其中,分别计算经预处理的所述每一帧语音数据的基音检测核心函数的过程为:
分别计算语音信号的平均幅度差函数的倒数和短时自相关函数,并进行最大值归一化处理;
将经最大值归一化处理后的平均幅度函数的倒数和短时自相关函数,进行调和平均后的函数作为当前帧语音数据的基音检测核心函数,
所述语音信号s(n)的短时自相关函数为:
上式中,N为计算语音信号s(n)的短时自相关函数所需的样值点数,s(n+m)为当前帧语音数据的语音信号的样值点数,w(m)为当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数;
所述语音信号s(n)的平均幅度差函数为:
上式中,N为计算语音信号s(n)的平均幅度差函数所需的样值点数,s(n+m)为所述当前帧语音数据的语音信号的样值点数,w(m)为所述当前帧语音数据的语音信号的样值点对应的加窗函数,s(n+m+τ)为所述当前帧语音数据的语音信号延迟τ个样值点,w(m+τ)为所述当前帧语音数据的语音信号延迟τ个样值点对应的加窗函数;
所述当前帧语音数据的最大值归一化的语音信号的短时自相关函数为:
上式中,Rn(τ)为当前帧语音数据的语音信号的短时自相关函数,min(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最小值,max(Rn(τ))为语音信号的短时自相关函数Rn(τ)在当前帧语音数据内的最大值;
所述当前帧语音数据的最大值归一化的语音信号的平均幅度差函数的倒数为:
上式中,Fn(τ)-1为当前帧语音数据的语音信号平均幅度差函数的倒数,min(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最小值,max(Fn(τ)-1)为语音信号的平均幅度差函数的倒数Fn(τ)-1在当前帧语音数据内的最大值;
以当前帧语音数据最大值归一化的语音信号的平均幅度差函数ADMF(τ)的倒数与语音信号的短时自相关函数ACF(τ)取调和平均Kernel(τ)作为当前帧语音数据的基音检测核心函数,具体表示为:
其中,验证该帧语音数据的基音检测是否有效时,分别将计算的当前帧语音数据与其相邻帧语音数据的基音周期的门限值和当前帧语音数据的基音周期阈值进行比较,当计算的所述当前帧语音数据与其相邻帧语音数据的基音周期的门限值大于所述当前帧语音数据的基音周期阈值时,认为所述当前帧语音数据的基音检测是有效的,
所述当前帧语音数据与其相邻帧语音数据的基音周期的门限值为:
上式中,A[i]、B[i]为前后两帧语音数据出现最大值归一化处理后的短时自相关函数和平均幅度差函数数值最大时对应的样值点范围,P为前后两帧语音数据基音周期。
2.如权利要求1所述的基音检测方法,其特征在于:
对所述语音采集装置实时采集的连续语音信号按照预设时间段进行分帧并分别进行编码,得到所述多帧语音数据。
3.如权利要求1所述的基音检测方法,其特征在于:
对每一帧语音数据进行预处理包括采用自相关的自适应语音增强算法抑制语音信号中的高斯白噪声和采用线性相位低通滤波器滤除语音信号中的高次谐波分量。
4.如权利要求1所述的基音检测方法,其特征在于:
根据所述当前帧语音数据的基音检测核心函数曲线,选取出满足最大值归一化处理后的平均幅度差函数的倒数和短时自相关函数数值最大时对应的样值点范围,并根据所述样值点范围确定出所述当前帧语音数据的语音信号的基音周期。
5.一种基音检测装置,包括处理器和存储器,所述处理器读取所述存储器中的计算机程序或指令,用于实现权利要求1~4中任意一项所述的基音检测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010907190.0A CN112201279B (zh) | 2020-09-02 | 2020-09-02 | 一种基音检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010907190.0A CN112201279B (zh) | 2020-09-02 | 2020-09-02 | 一种基音检测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112201279A CN112201279A (zh) | 2021-01-08 |
CN112201279B true CN112201279B (zh) | 2024-03-29 |
Family
ID=74006375
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010907190.0A Active CN112201279B (zh) | 2020-09-02 | 2020-09-02 | 一种基音检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112201279B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113486964A (zh) * | 2021-07-13 | 2021-10-08 | 盛景智能科技(嘉兴)有限公司 | 语音活动检测方法、装置、电子设备和存储介质 |
CN116432007B (zh) * | 2023-06-13 | 2023-08-22 | 天津精仪精测科技有限公司 | 基于空域特征和机器学习的光纤预警模式识别方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108831504A (zh) * | 2018-06-13 | 2018-11-16 | 西安蜂语信息科技有限公司 | 基音周期的确定方法、装置、计算机设备和存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SG120121A1 (en) * | 2003-09-26 | 2006-03-28 | St Microelectronics Asia | Pitch detection of speech signals |
-
2020
- 2020-09-02 CN CN202010907190.0A patent/CN112201279B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108831504A (zh) * | 2018-06-13 | 2018-11-16 | 西安蜂语信息科技有限公司 | 基音周期的确定方法、装置、计算机设备和存储介质 |
Non-Patent Citations (3)
Title |
---|
一种改进的抗噪基音周期检测算法;李娟;张雪英;;太原理工大学学报(第02期);第115-118页 * |
加权短时自相关函数的基音周期估计算法;沈瑜;党建武;王阳萍;雷涛;;计算机工程与应用(第35期);第1-6、160页以及图1-图12 * |
基于ACF和AMDF的基音检测改进算法;李志军;尹霞;;电声技术(第01期);第50-52、55页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112201279A (zh) | 2021-01-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109767783B (zh) | 语音增强方法、装置、设备及存储介质 | |
CN106486131B (zh) | 一种语音去噪的方法及装置 | |
JP4440937B2 (ja) | 暗騒音存在時の音声を改善するための方法および装置 | |
Davis et al. | Statistical voice activity detection using low-variance spectrum estimation and an adaptive threshold | |
Tan et al. | Multi-band summary correlogram-based pitch detection for noisy speech | |
EP1973104B1 (en) | Method and apparatus for estimating noise by using harmonics of a voice signal | |
KR100713366B1 (ko) | 모폴로지를 이용한 오디오 신호의 피치 정보 추출 방법 및그 장치 | |
JP6272433B2 (ja) | ピッチ周期の正確性を検出するための方法および装置 | |
CN112201279B (zh) | 一种基音检测方法及装置 | |
Ding et al. | A DCT-based speech enhancement system with pitch synchronous analysis | |
Morales-Cordovilla et al. | Feature extraction based on pitch-synchronous averaging for robust speech recognition | |
CN115223583A (zh) | 一种语音增强方法、装置、设备及介质 | |
US20150162014A1 (en) | Systems and methods for enhancing an audio signal | |
Gerkmann et al. | Improved MMSE-based noise PSD tracking using temporal cepstrum smoothing | |
EP1635331A1 (en) | Method for estimating a signal to noise ratio | |
Zhao et al. | A New Pitch Estimation Method Based on AMDF. | |
Hasan et al. | A fundamental frequency extraction method based on windowless and normalized autocorrelation functions | |
Hasan et al. | An efficient pitch estimation method using windowless and normalized autocorrelation functions in noisy environments | |
CN114333880B (zh) | 一种信号处理方法、装置、设备及存储介质 | |
Hendriks et al. | Adaptive time segmentation of noisy speech for improved speech enhancement | |
Senthamizh Selvi | Speech Enhancement using Adaptive Filtering with Different Window Functions and Overlapping Sizes | |
Alabbasi et al. | Adaptive wavelet thresholding with robust hybrid features for text-independent speaker identification system | |
Mai et al. | Optimal Bayesian Speech Enhancement by Parametric Joint Detection and Estimation | |
Hu et al. | Single acoustic-channel speech enhancement based on glottal correlation using non-acoustic sensor. | |
Iwai et al. | Formant frequency estimation with windowless autocorrelation in the presence of noise |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |