CN103413557A - 语音信号带宽扩展的方法和装置 - Google Patents

语音信号带宽扩展的方法和装置 Download PDF

Info

Publication number
CN103413557A
CN103413557A CN2013102847709A CN201310284770A CN103413557A CN 103413557 A CN103413557 A CN 103413557A CN 2013102847709 A CN2013102847709 A CN 2013102847709A CN 201310284770 A CN201310284770 A CN 201310284770A CN 103413557 A CN103413557 A CN 103413557A
Authority
CN
China
Prior art keywords
frequency signal
signal
arrowband
broadband
codebook vectors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013102847709A
Other languages
English (en)
Other versions
CN103413557B (zh
Inventor
刘飞祥
高伟标
何文辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL New Technology Co Ltd
Original Assignee
Shenzhen TCL New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL New Technology Co Ltd filed Critical Shenzhen TCL New Technology Co Ltd
Priority to CN201310284770.9A priority Critical patent/CN103413557B/zh
Publication of CN103413557A publication Critical patent/CN103413557A/zh
Application granted granted Critical
Publication of CN103413557B publication Critical patent/CN103413557B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开了一种语音信号带宽扩展的方法和装置,其方法包括:将语音信号采样率转换处理,经滤波后得到高频信号和低频信号;对高频信号能量估计,获得高频信号能量值;当高频信号能量值大于预设能量阈值时,判定语音信号为宽带语音信号,对高频信号增益或衰减调整,将低频信号与调整后的高频信号叠加并输出;当高频信号能量值小于或等于预设能量阈值时,判定语音信号为窄带语音信号,对低频信号带宽扩展,获得带宽扩展高频分量,将低频信号与带宽扩展高频分量叠加并输出。本发明自适应的调整带宽扩展处理方式,对窄带语音信号进行带宽扩展处理,提高语音质量,对宽带语音信号直接输出,避免对宽带语音信号的错误扩展,进一步保证语音质量。

Description

语音信号带宽扩展的方法和装置
技术领域
本发明涉及到信号处理技术领域,特别涉及到语音信号带宽扩展的方法和装置。
背景技术
人类语音信号的频带带宽主要分布在50Hz~8kHz范围之间,但是在语音通信传输过程中,由于模拟信号传输的限制,语音带宽被限制在300Hz~3400Hz之间,被称为窄带语音信号。窄带语音信号由于缺少高频信息,语音的清晰度受到了一定的影响。随着语音通信技术的不断发展,宽带语音通信终端出现,可支持频率范围在50Hz~7000Hz的宽带语音信号,能输出更优质的通话质量。但由于传统的窄带语音信号仍然占主导地位,目前的通信网络是窄带语音信号与宽带语音信号共存的语音通信网络,当支持宽带语音信号的宽带语音通信终端接收到窄带语音信号时,无法输出宽带语音信号,起不到提高通话质量的作用。为了使宽带语音通信终端能够输出宽带语音信号,目前采用的语音带宽扩展方式是,由宽带语音通信终端根据输入的窄带语音信号来估计丢失的高频信号,再将估计的高频信号与窄带信号相加,得到宽带语音信号。但如果宽带语音通信终端接收到的是输入宽带语音信号时,终端不能根据信号特征进行自适应处理,仍然会对宽带语音信号进行语音带宽扩展处理,人工扩展带宽得到的高频信息在逼真度上不可能超过原始信号,既浪费计算能力,又会降低语音质量。
发明内容
本发明的主要目的为提供一种语音信号带宽扩展的方法和装置,可自适应的对语音带宽扩展处理进行调整。
本发明提出一种语音信号带宽扩展的方法,包括步骤:
将接收到的语音信号进行采样率转换处理,并经滤波后得到高频信号和低频信号;
对所述高频信号进行能量估计,获得所述高频信号的能量值;
当所述高频信号的能量值大于预设的能量阈值时,判定所述语音信号为宽带语音信号,对所述高频信号进行增益或衰减调整,并将所述低频信号与调整后的高频信号叠加,输出叠加后的语音信号;
当所述高频信号的能量值小于或等于预设的能量阈值时,判定所述语音信号为窄带语音信号,对所述低频信号进行带宽扩展,获得带宽扩展高频分量,并将所述低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
优选地,所述对低频信号进行带宽扩展,获得带宽扩展高频分量的步骤具体包括:
对所述低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
对所述窄带特征矢量进行码本映射处理,获得宽带特征矢量;
对所述宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
对所述低频信号进行宽带激励估计,获得宽带激励信号;
将所述宽带谱包络合成到所述宽带激励信号中,生成带宽扩展信号;
对所述带宽扩展信号进行高通滤波处理,获得所述带宽扩展高频分量。
优选地,所述对窄带特征矢量进行码本映射处理,获得宽带特征矢量的步骤具体包括:
在预先训练好的窄带码本中查找与所述窄带特征矢量之间误差距离最小的窄带码本矢量;
判断所述误差距离最小的窄带码本矢量与所述窄带特征矢量之间误差距离是否小于预设的误差阈值;
如果是,则将所述误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为所述宽带特征矢量;
如果否,则对所述窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
优选地,所述对窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量的步骤具体包括:
从所述窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个所述窄带码本矢量的长度均为N,与所述窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
当所述矩阵方程组有解时,获得所述矩阵方程组的解z1、z2、z3、……、zN
当所述矩阵方程组无解时,从所述窄带码本中获取一个新的窄带码本矢量,替换所述N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组;
根据所述矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
将获取的所述窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个所述宽带码本矢量的长度均为L;
根据所述加权系数和宽带码本矢量,确定所述宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
优选地,所述对高频信号进行能量估计,获得所述高频信号的能量值的步骤具体包括:
获取所述高频信号中各采样点的峰值;
确定所述高频信号的能量值
Figure BDA0000348083144
Figure BDA0000348083145
,其中fk为所述高频信号中第k个采样点的峰值,M为所述高频信号中采样点的总个数。
本发明还提出一种语音信号带宽扩展的装置,包括:
采样率转换模块,用于将接收到的语音信号进行采样率转换处理;
滤波模块,用于对采样率转换处理后的语音信号进行滤波处理,得到高频信号和低频信号;
能量估计模块,用于对所述高频信号进行能量估计,获得所述高频信号的能量值;
判断模块,用于判断所述高频信号的能量值是否大于预设的能量阈值;如果是,则判定所述语音信号为宽带语音信号;如果否,则判定所述语音信号为窄带语音信号;
均衡器模块,用于当所述判断模块判定所述高频信号的能量值大于预设的能量阈值时,对所述高频信号进行增益或衰减调整;
宽带扩展模块,用于当所述判断模块判定所述高频信号的能量值小于或等于预设的能量阈值时,对所述低频信号进行带宽扩展,获得带宽扩展高频分量;
叠加模块,用于当所述判断模块判定所述高频信号的能量值大于预设的能量阈值时,将所述低频信号与调整后的高频信号叠加,输出叠加后的语音信号;用于当所述判断模块判定所述高频信号的能量值小于或等于预设的能量阈值时,将所述低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
优选地,所述宽带扩展模块具体包括:
矢量量化单元,用于对所述低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
码本映射单元,用于对所述窄带特征矢量进行码本映射处理,获得宽带特征矢量;
谱包络估计单元,对所述宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
激励估计单元,用于对所述低频信号进行宽带激励估计,获得宽带激励信号;
合成单元,用于将所述宽带谱包络合成到所述宽带激励信号中,生成带宽扩展信号;
高通滤波单元,用于对所述带宽扩展信号进行高通滤波处理,获得所述带宽扩展高频分量。
优选地,所述码本映射单元具体用于:
在预先训练好的窄带码本中查找与所述窄带特征矢量之间误差距离最小的窄带码本矢量;
判断所述误差距离最小的窄带码本矢量与所述窄带特征矢量之间误差距离是否小于预设的误差阈值;
如果是,则将所述误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为所述宽带特征矢量;
如果否,则对所述窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
优选地,所述码本映射单元具体还用于:
从所述窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个所述窄带码本矢量的长度均为N,与所述窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
当所述矩阵方程组有解时,获得所述矩阵方程组的解z1、z2、z3、……、zN
当所述矩阵方程组无解时,从所述窄带码本中获取一个新的窄带码本矢量,替换所述N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组;
根据所述矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
将获取的所述窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个所述宽带码本矢量的长度均为L;
根据所述加权系数和宽带码本矢量,确定所述宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
优选地,所述能量估计模块具体用于:
获取所述高频信号中各采样点的峰值;
确定所述高频信号的能量值
Figure BDA0000348083149
Figure BDA00003480831410
,其中fk为所述高频信号中第k个采样点的峰值,M为所述高频信号中采样点的总个数。
本发明根据语音信号的高频能量特征,来判断当前接收到的语音信号的带宽范围,根据不同类别的语音信号采用不同的处理方式,对窄带语音信号进行带宽扩展处理,提高输出的语音质量,对宽带语音信号直接输出,避免了对宽带语音信号的错误扩展,进一步保证了输出的语音信号质量,实现了带宽扩展处理的自适应调整。
附图说明
图1为本发明语音信号带宽扩展的方法的第一实施例的流程图;
图2为本发明语音信号带宽扩展的方法的第二实施例的流程图;
图3为本发明语音信号带宽扩展的方法的第三实施例的流程图;
图4为本发明语音信号带宽扩展的方法的第四实施例的流程图;
图5为本发明语音信号带宽扩展的方法的第五实施例的流程图;
图6为本发明语音信号带宽扩展的装置的第一实施例的结构示意图;
图7为本发明语音信号带宽扩展的装置的第一实施例中各模块的结构连接图;
图8为本发明语音信号带宽扩展的装置的第二实施例的结构示意图;
图9为本发明语音信号带宽扩展的装置的第二实施例中宽带扩展模块的结构连接图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1为本发明语音信号带宽扩展的方法的第一实施例的流程图。本实施例提到的语音信号带宽扩展的方法,包括:
步骤S10,将接收到的语音信号进行采样率转换处理,并经滤波后得到高频信号和低频信号;
本实施例中,语音信号按帧输入,一帧的时间间隔在5毫秒至几十毫秒之间,可根据采样率和系统延迟要求来设定帧输入的时间间隔。将输入的语音信号进行采样率转换,以便于后续对语音信号进行能量估计,通常是将其采样率转换为16k Hz。为了对语音信号进行带宽扩展,可采用高通滤波器和低通滤波器,分别对采样率转换处理后的语音信号进行滤波处理,获得高频信号和低频信号。
步骤S20,对高频信号进行能量估计,获得高频信号的能量值;
本实施例还对语音信号的高频能量特性进行分析,可采用峰值计算或均方根计算高频信号的能量大小。根据高频信号的能量值,判断出语音信号是属于窄带语音信号还是属于宽带语音信号,只对窄带语音信号进行带宽扩展处理,对于宽带语音信号则直接输出,实现了带宽扩展处理的自适应调整。此外,还可以分别对高频信号进行音色调整和对低频信号进行带宽扩展之后,再对高频信号能量值进行判断,根据判断结果直接选择需要与低频信号进行叠加的一路输出,同样可以实现对带宽扩展处理的自适应调整。
步骤S30,当高频信号的能量值大于预设的能量阈值时,判定语音信号为宽带语音信号;
由于宽带语音信号的高频能量较大,当高频信号的能量值大于预设的能量阈值时,则说明该语音信号为宽带语音信号,则无需进行宽带扩展处理,可直接输出优质的语音信号。
步骤S40,对高频信号进行增益或衰减调整;
为了进一步提高语音效果,可采用均衡器对宽带语音信号的高频部分进行音色调整,以突出高频部分与其他频段的对比度,达到提高音效的目的。
步骤S50,将低频信号与调整后的高频信号叠加,输出叠加后的语音信号;
将低频信号与调整后的高频信号叠加,形成完整的宽带语音信号,由于输出的语音信号保留了原始输入的宽带语音信号中的高频信号,即保留了原始输入的宽带语音信号的优质音效,避免了因盲目扩展带宽而造成语音信号的质量和逼真度下降,且省略了宽带扩展的处理过程,提高了语音信号处理效率。
步骤S60,当高频信号的能量值小于或等于预设的能量阈值时,判定语音信号为窄带语音信号;
由于窄带语音信号的高频能量较小,当高频信号的能量值小于或等于预设的能量阈值时,则说明该语音信号为窄带语音信号,则可对其进行宽带扩展处理,使输出的语音信号为宽带语音信号,提高语音质量。
步骤S70,对低频信号进行带宽扩展,获得带宽扩展高频分量;
从窄带语音信号的低频部分估计丢失的高频部分,带宽扩展的方法有多种,传统的宽带扩展方法均可应用于本实施例中,在此不作赘述。
步骤S80,将低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
将低频信号与扩展带宽后的高频分量叠加,合成为完整的宽带语音信号,输出的语音信号质量得到了明显提高。
本实施例根据语音信号的高频能量特征,来判断当前接收到的语音信号的带宽范围,根据不同类别的语音信号采用不同的处理方式,对窄带语音信号进行带宽扩展处理,提高输出的语音质量,对宽带语音信号直接输出,避免了对宽带语音信号的错误扩展,进一步保证了输出的语音信号质量,实现了带宽扩展处理的自适应调整。
如图2所示,图2为本发明语音信号带宽扩展的方法的第二实施例的流程图。本实施例以图1所示实施例为基础,步骤S20具体包括:
步骤S21,获取高频信号中各采样点的峰值;
步骤S22,确定高频信号的能量值
Figure BDA00003480831411
,其中fk为高频信号中第k个采样点的峰值,M为高频信号中采样点的总个数。
本实施例采用峰值计算方法或均方根计算方法获得高频信号的能量值,根据获得的高频能量特性,来判断输入的语音信号的带宽范围,并根据带宽类型自适应的调整叠加到低频信号上的高频部分的处理方式,避免在输入的语音信号为宽带语音信号时盲目的进行带宽扩展处理而造成输出语音信号的失真,确保输出语音质量。
如图3所示,图3为本发明语音信号带宽扩展的方法的第三实施例的流程图。本实施例以图1所示实施例为基础,步骤S70具体包括:
步骤S71,对低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
步骤S72,对窄带特征矢量进行码本映射处理,获得宽带特征矢量;
步骤S73,对宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
步骤S74,对低频信号进行宽带激励估计,获得宽带激励信号;
步骤S75,将宽带谱包络合成到宽带激励信号中,生成带宽扩展信号;
步骤S76,对带宽扩展信号进行高通滤波处理,获得带宽扩展高频分量。
本实施例在判定输入的语音信号为窄带语音信号时,通过码本来完成从窄带语音信号到宽带语音信号高频分量的非线性映射,可采用传统的带宽扩展方式进行处理,以提高输出语音质量。码本映射的具体实施例将在后续实施例中详细说明。
如图4所示,图4为本发明语音信号带宽扩展的方法的第四实施例的流程图。本实施例以图3所示实施例为基础,步骤S72具体包括:
步骤S721,在预先训练好的窄带码本中查找与窄带特征矢量之间误差距离最小的窄带码本矢量;
步骤S722,判断误差距离最小的窄带码本矢量与窄带特征矢量之间误差距离是否小于预设的误差阈值;如果是,则执行步骤S723;如果否,则执行步骤S724;
步骤S723,将误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为宽带特征矢量;
步骤S724,对窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
本实施例考虑到加权的码本映射处理中,加权系数的选择是随机的,在某些情况下,产生的误差距离可能比直接选择距离最小的码本矢量所产生的误差距离还要大,这时就会导致更大的运算误差,引入杂音。为了避免上述情况,本实施例预设了误差阈值,在预先训练好的窄带码本中如果找到误差距离小于误差阈值的窄带码本矢量,则该窄带码本矢量即为最佳的窄带码本矢量,将其映射到预先训练好的宽带码本中,即可获得所需的宽带特征矢量。否则,采用加权的码本映射处理方式对窄带特征矢量进行处理。上述方式可以有效提高获得的宽带特征矢量的准确性,进而改善码本映射处理结果的准确性,提高输出的语音质量。
如图5所示,图5为本发明语音信号带宽扩展的方法的第五实施例的流程图。本实施例以图4所示实施例为基础,步骤S724具体包括:
步骤S7241,从窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个窄带码本矢量的长度均为N,与窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
步骤S7242,判断矩阵方程组是否有解;如果是,则执行步骤S7243;如果否,则执行步骤S7244;
步骤S7243,当矩阵方程组有解时,获得矩阵方程组的解z1、z2、z3、……、zN
步骤S7244,当矩阵方程组无解时,从窄带码本中获取一个新的窄带码本矢量,替换N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组,返回步骤S7242;
步骤S7245,根据矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
步骤S7246,将获取的窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个宽带码本矢量的长度均为L;
步骤S7247,根据加权系数和宽带码本矢量,确定宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
本实施例根据窄带特征矢量和窄带码本矢量,获得加权系数,该加权系数不再是随机选择的加权系数,在精确度上得到了大大提高,获得的宽带特征矢量的误差也得到了改善,有利于获得更加接近真实信号的宽带谱包络和带宽扩展高频分量,进而降低了输出的语音信号的失真率,提高了语音信号质量。
如图6所示,图6为本发明语音信号带宽扩展的装置的第一实施例的结构示意图。请一并参照图7,图7为本发明语音信号带宽扩展的装置的第一实施例中各模块的结构连接图。本实施例提到的语音信号带宽扩展的装置,包括:
采样率转换模块10,用于将接收到的语音信号进行采样率转换处理;
滤波模块20,用于对采样率转换处理后的语音信号进行滤波处理,得到高频信号和低频信号;
能量估计模块30,用于对高频信号进行能量估计,获得高频信号的能量值;
判断模块40,用于判断高频信号的能量值是否大于预设的能量阈值;如果是,则判定语音信号为宽带语音信号;如果否,则判定语音信号为窄带语音信号;
均衡器模块50,用于当判断模块40判定高频信号的能量值大于预设的能量阈值时,对高频信号进行增益或衰减调整;
宽带扩展模块60,用于当判断模块40判定高频信号的能量值小于或等于预设的能量阈值时,对低频信号进行带宽扩展,获得带宽扩展高频分量;
叠加模块70,用于当判断模块40判定高频信号的能量值大于预设的能量阈值时,将低频信号与调整后的高频信号叠加,输出叠加后的语音信号;用于当判断模块40判定高频信号的能量值小于或等于预设的能量阈值时,将低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
本实施例中,各模块连接可参照图7。语音信号按帧输入,一帧的时间间隔在5毫秒至几十毫秒之间,可根据采样率和系统延迟要求来设定帧输入的时间间隔。将输入的语音信号进行采样率转换,以便于后续对语音信号进行能量估计,通常是将其采样率转换为16k Hz。为了对语音信号进行带宽扩展,可采用高通滤波器21和低通滤波器22,分别对采样率转换处理后的语音信号进行滤波处理,获得高频信号和低频信号。本实施例还对语音信号的高频能量特性进行分析,可采用峰值计算或均方根计算高频信号的能量大小。根据高频信号的能量值,判断出语音信号是属于窄带语音信号还是属于宽带语音信号,只对窄带语音信号进行带宽扩展处理,对于宽带语音信号则直接输出,实现了带宽扩展处理的自适应调整。此外,还可以分别对高频信号进行音色调整和对低频信号进行带宽扩展之后,再对高频信号能量值进行判断,根据判断结果直接选择需要与低频信号进行叠加的一路输出,同样可以实现对带宽扩展处理的自适应调整。由于宽带语音信号的高频能量较大,当高频信号的能量值大于预设的能量阈值时,则说明该语音信号为宽带语音信号,则无需进行宽带扩展处理,可直接输出优质的语音信号。为了进一步提高语音效果,可采用均衡器对宽带语音信号的高频部分进行音色调整,以突出高频部分与其他频段的对比度,达到提高音效的目的。将低频信号与调整后的高频信号叠加,形成完整的宽带语音信号,由于输出的语音信号保留了原始输入的宽带语音信号中的高频信号,即保留了原始输入的宽带语音信号的优质音效,避免了因盲目扩展带宽而造成语音信号的质量和逼真度下降,且省略了宽带扩展的处理过程,提高了语音信号处理效率。由于窄带语音信号的高频能量较小,当高频信号的能量值小于或等于预设的能量阈值时,则说明该语音信号为窄带语音信号,则可对其进行宽带扩展处理,使输出的语音信号为宽带语音信号,提高语音质量。从窄带语音信号的低频部分估计丢失的高频部分,带宽扩展的方法有多种,传统的宽带扩展方法均可应用于本实施例中,在此不作赘述。将低频信号与扩展带宽后的高频分量叠加,合成为完整的宽带语音信号,输出的语音信号质量得到了明显提高。
本实施例根据语音信号的高频能量特征,来判断当前接收到的语音信号的带宽范围,根据不同类别的语音信号采用不同的处理方式,对窄带语音信号进行带宽扩展处理,提高输出的语音质量,对宽带语音信号直接输出,避免了对宽带语音信号的错误扩展,进一步保证了输出的语音信号质量,实现了带宽扩展处理的自适应调整。
本发明实施例中,能量估计模块30具体用于:
获取高频信号中各采样点的峰值;
确定高频信号的能量值
Figure BDA00003480831417
,其中fk为高频信号中第k个采样点的峰值,M为高频信号中采样点的总个数。
本实施例采用峰值计算方法或均方根计算方法获得高频信号的能量值,根据获得的高频能量特性,来判断输入的语音信号的带宽范围,并根据带宽类型自适应的调整叠加到低频信号上的高频部分的处理方式,避免在输入的语音信号为宽带语音信号时盲目的进行带宽扩展处理而造成输出语音信号的失真,确保输出语音质量。
如图8所示,图8为本发明语音信号带宽扩展的装置的第二实施例的结构示意图。请一并参照图9,图9为本发明语音信号带宽扩展的装置的第二实施例中宽带扩展模块的结构连接图。本实施例以图6所示实施例为基础,宽带扩展模块60具体包括:
矢量量化单元61,用于对低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
码本映射单元62,用于对窄带特征矢量进行码本映射处理,获得宽带特征矢量;
谱包络估计单元63,对宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
激励估计单元64,用于对低频信号进行宽带激励估计,获得宽带激励信号;
合成单元65,用于将宽带谱包络合成到宽带激励信号中,生成带宽扩展信号;
高通滤波单元66,用于对带宽扩展信号进行高通滤波处理,获得带宽扩展高频分量。
本实施例在判定输入的语音信号为窄带语音信号时,通过码本来完成从窄带语音信号到宽带语音信号高频分量的非线性映射,可采用传统的带宽扩展方式进行处理,以提高输出语音质量。码本映射的具体实施例将在后续实施例中详细说明。
本发明实施例中,码本映射单元62具体用于:
在预先训练好的窄带码本中查找与窄带特征矢量之间误差距离最小的窄带码本矢量;
判断误差距离最小的窄带码本矢量与窄带特征矢量之间误差距离是否小于预设的误差阈值;
如果是,则将误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为宽带特征矢量;
如果否,则对窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
本实施例考虑到加权的码本映射处理中,加权系数的选择是随机的,在某些情况下,产生的误差距离可能比直接选择距离最小的码本矢量所产生的误差距离还要大,这时就会导致更大的运算误差,引入杂音。为了避免上述情况,本实施例预设了误差阈值,在预先训练好的窄带码本中如果找到误差距离小于误差阈值的窄带码本矢量,则该窄带码本矢量即为最佳的窄带码本矢量,将其映射到预先训练好的宽带码本中,即可获得所需的宽带特征矢量。否则,采用加权的码本映射处理方式对窄带特征矢量进行处理。上述方式可以有效提高获得的宽带特征矢量的准确性,进而改善码本映射处理结果的准确性,提高输出的语音质量。
本发明实施例中,码本映射单元62具体还用于:
从窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个窄带码本矢量的长度均为N,与窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
当矩阵方程组有解时,获得矩阵方程组的解z1、z2、z3、……、zN
当矩阵方程组无解时,从窄带码本中获取一个新的窄带码本矢量,替换N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组;
根据矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
将获取的窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个宽带码本矢量的长度均为L;
根据加权系数和宽带码本矢量,确定宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
本实施例根据窄带特征矢量和窄带码本矢量,获得加权系数,该加权系数不再是随机选择的加权系数,在精确度上得到了大大提高,获得的宽带特征矢量的误差也得到了改善,有利于获得更加接近真实信号的宽带谱包络和带宽扩展高频分量,进而降低了输出的语音信号的失真率,提高了语音信号质量。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种语音信号带宽扩展的方法,其特征在于,包括步骤:
将接收到的语音信号进行采样率转换处理,并经滤波后得到高频信号和低频信号;
对所述高频信号进行能量估计,获得所述高频信号的能量值;
当所述高频信号的能量值大于预设的能量阈值时,判定所述语音信号为宽带语音信号,对所述高频信号进行增益或衰减调整,并将所述低频信号与调整后的高频信号叠加,输出叠加后的语音信号;
当所述高频信号的能量值小于或等于预设的能量阈值时,判定所述语音信号为窄带语音信号,对所述低频信号进行带宽扩展,获得带宽扩展高频分量,并将所述低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
2.根据权利要求1所述的语音信号带宽扩展的方法,其特征在于,所述对低频信号进行带宽扩展,获得带宽扩展高频分量的步骤具体包括:
对所述低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
对所述窄带特征矢量进行码本映射处理,获得宽带特征矢量;
对所述宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
对所述低频信号进行宽带激励估计,获得宽带激励信号;
将所述宽带谱包络合成到所述宽带激励信号中,生成带宽扩展信号;
对所述带宽扩展信号进行高通滤波处理,获得所述带宽扩展高频分量。
3.根据权利要求2所述的语音信号带宽扩展的方法,其特征在于,所述对窄带特征矢量进行码本映射处理,获得宽带特征矢量的步骤具体包括:
在预先训练好的窄带码本中查找与所述窄带特征矢量之间误差距离最小的窄带码本矢量;
判断所述误差距离最小的窄带码本矢量与所述窄带特征矢量之间误差距离是否小于预设的误差阈值;
如果是,则将所述误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为所述宽带特征矢量;
如果否,则对所述窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
4.根据权利要求3所述的语音信号带宽扩展的方法,其特征在于,所述对窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量的步骤具体包括:
从所述窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个所述窄带码本矢量的长度均为N,与所述窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
当所述矩阵方程组有解时,获得所述矩阵方程组的解z1、z2、z3、……、zN
当所述矩阵方程组无解时,从所述窄带码本中获取一个新的窄带码本矢量,替换所述N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组;
根据所述矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
将获取的所述窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个所述宽带码本矢量的长度均为L;
根据所述加权系数和宽带码本矢量,确定所述宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
5.根据权利要求1至4任一项所述的语音信号带宽扩展的方法,其特征在于,所述对高频信号进行能量估计,获得所述高频信号的能量值的步骤具体包括:
获取所述高频信号中各采样点的峰值;
确定所述高频信号的能量值
Figure FDA0000348083134
,其中fk为所述高频信号中第k个采样点的峰值,M为所述高频信号中采样点的总个数。
6.一种语音信号带宽扩展的装置,其特征在于,包括:
采样率转换模块,用于将接收到的语音信号进行采样率转换处理;
滤波模块,用于对采样率转换处理后的语音信号进行滤波处理,得到高频信号和低频信号;
能量估计模块,用于对所述高频信号进行能量估计,获得所述高频信号的能量值;
判断模块,用于判断所述高频信号的能量值是否大于预设的能量阈值;如果是,则判定所述语音信号为宽带语音信号;如果否,则判定所述语音信号为窄带语音信号;
均衡器模块,用于当所述判断模块判定所述高频信号的能量值大于预设的能量阈值时,对所述高频信号进行增益或衰减调整;
宽带扩展模块,用于当所述判断模块判定所述高频信号的能量值小于或等于预设的能量阈值时,对所述低频信号进行带宽扩展,获得带宽扩展高频分量;
叠加模块,用于当所述判断模块判定所述高频信号的能量值大于预设的能量阈值时,将所述低频信号与调整后的高频信号叠加,输出叠加后的语音信号;用于当所述判断模块判定所述高频信号的能量值小于或等于预设的能量阈值时,将所述低频信号与带宽扩展高频分量叠加,输出叠加后的语音信号。
7.根据权利要求6所述的语音信号带宽扩展的装置,其特征在于,所述宽带扩展模块具体包括:
矢量量化单元,用于对所述低频信号进行线性预测编码和线谱对计算,获得窄带特征矢量;
码本映射单元,用于对所述窄带特征矢量进行码本映射处理,获得宽带特征矢量;
谱包络估计单元,对所述宽带信号特征矢量进行谱包络估计,获得宽带谱包络;
激励估计单元,用于对所述低频信号进行宽带激励估计,获得宽带激励信号;
合成单元,用于将所述宽带谱包络合成到所述宽带激励信号中,生成带宽扩展信号;
高通滤波单元,用于对所述带宽扩展信号进行高通滤波处理,获得所述带宽扩展高频分量。
8.根据权利要求7所述的语音信号带宽扩展的装置,其特征在于,所述码本映射单元具体用于:
在预先训练好的窄带码本中查找与所述窄带特征矢量之间误差距离最小的窄带码本矢量;
判断所述误差距离最小的窄带码本矢量与所述窄带特征矢量之间误差距离是否小于预设的误差阈值;
如果是,则将所述误差距离最小的窄带码本矢量映射到预先训练好的宽带码本中,获得宽带码本矢量,作为所述宽带特征矢量;
如果否,则对所述窄带特征矢量进行加权的码本映射处理,获得宽带特征矢量。
9.根据权利要求8所述的语音信号带宽扩展的装置,其特征在于,所述码本映射单元具体还用于:
从所述窄带码本中获取N+1个窄带码本矢量a0、a1、a2、…、aN,每个所述窄带码本矢量的长度均为N,与所述窄带特征矢量x=[x1,x2,…,xN]共同组成矩阵方程组:
a 1 - a 0 a 2 - a 0 . . . a N - a 0 z 1 z 2 . . . z N = x
当所述矩阵方程组有解时,获得所述矩阵方程组的解z1、z2、z3、……、zN
当所述矩阵方程组无解时,从所述窄带码本中获取一个新的窄带码本矢量,替换所述N+1个窄带码本矢量中的一个窄带码本矢量,重新组成新的矩阵方程组;
根据所述矩阵方程组的解,确定加权系数:
[ ω 0 , ω 1 , ω 2 , . . . , ω N ] = [ - Σ i = 1 N z i , z 1 , z 2 , . . . , z N ]
将获取的所述窄带码本矢量a0、a1、a2、…、aN映射到预先训练好的宽带码本中,获得宽带码本矢量b0、b1、b2、…、bN,每个所述宽带码本矢量的长度均为L;
根据所述加权系数和宽带码本矢量,确定所述宽带特征矢量:
y = [ y 1 , y 2 , . . . , y L ] = Σ i = 0 N ω i b i
10.根据权利要求6至9任一项所述的语音信号带宽扩展的装置,其特征在于,所述能量估计模块具体用于:
获取所述高频信号中各采样点的峰值;
确定所述高频信号的能量值
Figure FDA0000348083139
Figure FDA00003480831310
,其中fk为所述高频信号中第k个采样点的峰值,M为所述高频信号中采样点的总个数。
CN201310284770.9A 2013-07-08 2013-07-08 语音信号带宽扩展的方法和装置 Active CN103413557B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310284770.9A CN103413557B (zh) 2013-07-08 2013-07-08 语音信号带宽扩展的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310284770.9A CN103413557B (zh) 2013-07-08 2013-07-08 语音信号带宽扩展的方法和装置

Publications (2)

Publication Number Publication Date
CN103413557A true CN103413557A (zh) 2013-11-27
CN103413557B CN103413557B (zh) 2017-03-15

Family

ID=49606560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310284770.9A Active CN103413557B (zh) 2013-07-08 2013-07-08 语音信号带宽扩展的方法和装置

Country Status (1)

Country Link
CN (1) CN103413557B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103700370A (zh) * 2013-12-04 2014-04-02 北京中科模识科技有限公司 一种广播电视语音识别系统方法及系统
CN107886966A (zh) * 2017-10-30 2018-04-06 捷开通讯(深圳)有限公司 终端及其优化语音命令的方法、存储装置
CN108156307A (zh) * 2016-12-02 2018-06-12 塞舌尔商元鼎音讯股份有限公司 语音处理的方法以及语音通讯装置
CN108198571A (zh) * 2017-12-21 2018-06-22 中国科学院声学研究所 一种基于自适应带宽判断的带宽扩展方法及系统
CN109147807A (zh) * 2018-06-05 2019-01-04 安克创新科技股份有限公司 一种基于深度学习的音域平衡方法、装置及系统
CN109688531A (zh) * 2017-10-18 2019-04-26 宏达国际电子股份有限公司 获取高音质音频变换信息的方法、电子装置及记录介质
CN112530454A (zh) * 2020-11-30 2021-03-19 厦门亿联网络技术股份有限公司 一种窄带语音信号检测方法、装置、系统和可读存储介质
WO2021052287A1 (zh) * 2019-09-18 2021-03-25 腾讯科技(深圳)有限公司 频带扩展方法、装置、电子设备及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030009327A1 (en) * 2001-04-23 2003-01-09 Mattias Nilsson Bandwidth extension of acoustic signals
US20070282599A1 (en) * 2006-06-03 2007-12-06 Choo Ki-Hyun Method and apparatus to encode and/or decode signal using bandwidth extension technology
CN101221757A (zh) * 2008-01-24 2008-07-16 中兴通讯股份有限公司 高频杂音处理方法及分析方法
CN101527138A (zh) * 2008-03-05 2009-09-09 华为技术有限公司 超宽带扩展编码、解码方法、编解码器及超宽带扩展系统
CN102543089A (zh) * 2012-01-17 2012-07-04 大连理工大学 一种窄带码流转换为宽带码流的转换装置及其转换方法
US20120239388A1 (en) * 2009-11-19 2012-09-20 Telefonaktiebolaget Lm Ericsson (Publ) Excitation signal bandwidth extension
US20130041673A1 (en) * 2010-04-16 2013-02-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus, method and computer program for generating a wideband signal using guided bandwidth extension and blind bandwidth extension

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030009327A1 (en) * 2001-04-23 2003-01-09 Mattias Nilsson Bandwidth extension of acoustic signals
US20070282599A1 (en) * 2006-06-03 2007-12-06 Choo Ki-Hyun Method and apparatus to encode and/or decode signal using bandwidth extension technology
CN101221757A (zh) * 2008-01-24 2008-07-16 中兴通讯股份有限公司 高频杂音处理方法及分析方法
CN101527138A (zh) * 2008-03-05 2009-09-09 华为技术有限公司 超宽带扩展编码、解码方法、编解码器及超宽带扩展系统
US20120239388A1 (en) * 2009-11-19 2012-09-20 Telefonaktiebolaget Lm Ericsson (Publ) Excitation signal bandwidth extension
US20130041673A1 (en) * 2010-04-16 2013-02-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus, method and computer program for generating a wideband signal using guided bandwidth extension and blind bandwidth extension
CN102543089A (zh) * 2012-01-17 2012-07-04 大连理工大学 一种窄带码流转换为宽带码流的转换装置及其转换方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
SIYUE CHEN ET AL.: "Artificial Bandwidth Extension of Telephony Speech by Data Hiding", 《2005 IEEE INTERNATIONAL SYMPOSIUM ON CIRCUITS AND SYSTEMS》 *
TENKASI RAMABADRAN ET AL.: "Artificial bandwidth extension of narrow-band speech signals via high-band energy estimation", 《SIGNAL PROCESSING CONFERENCE, 2008 16TH EUROPEAN》 *
唐金峰: "电话语音的频带扩展", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
薛梅 等: "基于码本映射的语音带宽扩展算法研究", 《电子设计工程》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103700370A (zh) * 2013-12-04 2014-04-02 北京中科模识科技有限公司 一种广播电视语音识别系统方法及系统
CN103700370B (zh) * 2013-12-04 2016-08-17 北京中科模识科技有限公司 一种广播电视语音识别系统方法及系统
CN108156307A (zh) * 2016-12-02 2018-06-12 塞舌尔商元鼎音讯股份有限公司 语音处理的方法以及语音通讯装置
CN108156307B (zh) * 2016-12-02 2020-09-08 塞舌尔商元鼎音讯股份有限公司 语音处理的方法以及语音通讯装置
CN109688531A (zh) * 2017-10-18 2019-04-26 宏达国际电子股份有限公司 获取高音质音频变换信息的方法、电子装置及记录介质
CN107886966A (zh) * 2017-10-30 2018-04-06 捷开通讯(深圳)有限公司 终端及其优化语音命令的方法、存储装置
CN108198571A (zh) * 2017-12-21 2018-06-22 中国科学院声学研究所 一种基于自适应带宽判断的带宽扩展方法及系统
CN109147807A (zh) * 2018-06-05 2019-01-04 安克创新科技股份有限公司 一种基于深度学习的音域平衡方法、装置及系统
WO2021052287A1 (zh) * 2019-09-18 2021-03-25 腾讯科技(深圳)有限公司 频带扩展方法、装置、电子设备及计算机可读存储介质
US11763829B2 (en) 2019-09-18 2023-09-19 Tencent Technology (Shenzhen) Company Limited Bandwidth extension method and apparatus, electronic device, and computer-readable storage medium
CN112530454A (zh) * 2020-11-30 2021-03-19 厦门亿联网络技术股份有限公司 一种窄带语音信号检测方法、装置、系统和可读存储介质

Also Published As

Publication number Publication date
CN103413557B (zh) 2017-03-15

Similar Documents

Publication Publication Date Title
CN103413557A (zh) 语音信号带宽扩展的方法和装置
CN107845389B (zh) 一种基于多分辨率听觉倒谱系数和深度卷积神经网络的语音增强方法
CN110867181B (zh) 基于scnn和tcnn联合估计的多目标语音增强方法
CA2800208C (en) A bandwidth extender
CN102652336B (zh) 声音信号复原装置以及声音信号复原方法
CN105741849A (zh) 数字助听器中融合相位估计与人耳听觉特性的语音增强方法
CN107316648A (zh) 一种基于有色噪声的语音增强方法
CN110931031A (zh) 一种融合骨振动传感器和麦克风信号的深度学习语音提取和降噪方法
KR20070000995A (ko) 고조파 신호의 주파수 확장 방법 및 시스템
CN103761974B (zh) 一种人工耳蜗
CN106572419A (zh) 一种立体声音效增强系统
CN108198571B (zh) 一种基于自适应带宽判断的带宽扩展方法及系统
CN106340303A (zh) 一种基于时间频率域的语音降噪方法
CN112634926B (zh) 一种基于卷积神经网络的短波信道语音抗衰落辅助增强方法
CN110136742A (zh) 执行噪声调制和增益调节的系统和方法
CN111899750B (zh) 联合耳蜗语音特征和跳变深层神经网络的语音增强算法
CN102118530B (zh) 一种回声消除的方法和装置
CN103093757B (zh) 一种窄带码流转换为宽带码流的转换方法
US8700391B1 (en) Low complexity bandwidth expansion of speech
US20100017207A1 (en) Method and device for ascertaining feature vectors from a signal
CN109215635B (zh) 用于语音清晰度增强的宽带语音频谱倾斜度特征参数重建方法
CN110931034A (zh) 一种送话拾音麦克风内置型耳机的拾音降噪方法
CN104751854A (zh) 一种宽带声学回声消除方法及系统
CN101826327B (zh) 一种基于时域掩蔽的瞬态判决方法及设备
CN113066483B (zh) 一种基于稀疏连续约束的生成对抗网络语音增强方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant