CN101542594A - 对高带信号进行帧错误隐藏的方法及装置 - Google Patents

Abstract

一种对高带信号进行帧错误隐藏的方法及装置，所述方法包括：计算高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

Description

对高带信号进行帧错误隐藏的方法及装置

技术领域

本发明涉及信号解码技术，具体涉及一种对高带信号进行帧错误隐藏的方法及装置。

背景技术

大多数传统的语音编解码器的语音信号带宽一般较低，只有少数语音编解码器是宽带的。由于近来网络技术的发展，网络传输速率越来越高，对宽带语音编解码器需求也越来越多，有的语音编解码器的带宽甚至达到超宽带(50Hz-14000Hz)和全带(20Hz-20000Hz)。

为了使新的宽带语音编解码器与传统的语音编解码能够兼容互通，有的语音编解码器分为多层。以下以包含两层的语音编解码器为例进行说明。

包含两层的语音编解码器的编码端首先通过一个分析正交镜像滤波器将输入信号分为高带信号和低带信号，低带信号输入到低带编码器中进行编码，高带输入信号输入到高带编码器中进行编码。获得的低带数据和高带数据通过码流复用编码器组合成码流，传送出去。低带信号是指信号范围处于信号带宽较低段的信号，高带信号是指信号范围处于信号带宽较高段的信号。例如输入信号带宽为50Hz-7000Hz，对应的低带信号带宽可以为50Hz-4000Hz，高带信号带宽可以为4000Hz-7000Hz。在解码端通过语音解码器进行解码，码流经过码流解复用分解成低带码流和高带码流，分别输入到低带解码器和高带解码器进行解码，得到低带信号和高带信号。低带信号和高带信号再经过合成正交镜像滤波器，可以合成最终输出的语音信号。

目前网络协议承载语音(VoIP，Voice over IP)应用和无线网络语音应用越来越广泛，语音的传输需要实时可靠的传送较小的数据包。当一个语音帧在传输过程中被丢弃时，通常没有时间重新传送丢弃的帧。同样的，当一个语音帧经过一段较长的路由而在需要播放时不能及时到达，则这个语音帧也失去了存在的意义，相当于一个丢失帧。因此在语音系统中，语音帧不能到达或者不能及时到达，都被认为是丢失帧。

如果对丢失的帧不进行处理，则语音就会出现断续的现象，大大影响语音质量。因此对于帧丢失的情况，需要进行帧错误隐藏处理，即对丢失的语音数据进行估计，用估计的数据替代丢失的数据，则可以在帧丢失环境中获得更好的语音质量。对于解码的时候分为高带信号和低带信号的语音编解码器，一般在帧错误隐藏的时候，也是分别对低带信号和高带信号进行帧错误隐藏，然后再将帧错误隐藏后得到的高带信号和低带信号输入到合成正交镜像滤波器，以合成最终输出的语音信号。

帧错误隐藏从方法上划分为插入、插值、再生等方法。

插入的帧错误隐藏方法包括拼接、静音替代、噪声替代和上帧重复等。

插值的帧错误隐藏方法包括波形替代、基音波形重复和时域波形修正等。

再生方法包括编码器参数插值、基于模型的再生方法等。基于模型的再生方法的音质和运算复杂度都是最高的，而上帧重复方法的音质较好，运算复杂度也不高。

因为低带信号对音质的影响高于高带信号对音质的影响，因此一般低带信号采用较高复杂度和较高音质的帧错误隐藏算法(例如，基音波形重复、时域波形修正、编码器参数插值和基于模型的再生方法)，高带信号可以采用较低复杂度和较低音质的帧错误隐藏算法，这样可以取得音质和复杂度之间的折衷。

现有技术的语音解码器中，对低带信号采用基音波形重复的帧错误隐藏，而对高带信号使用上帧重复并衰减的方法来进行帧错误隐藏。

基于上帧重复并衰减的方法得到的高带信号恢复公式为：

s_hb(n)＝s_hb(n-N)·α，n＝0，...，N-1

其中s_hb(n)，n＝0，...，N-1是当前丢失帧恢复后的高带信号，N为一帧包含的样点个数，衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.8，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。

在实现本发明的过程中，发明人发现该方法在信号具有较强周期性时不能很好的恢复高带信号。当低带信号和高带信号同时具有一致的周期性，用现有技术对高带信号进行帧错误隐藏时，破坏了高带信号原有的周期性，从而降低了语音解码器输出的语音信号的音质。

发明内容

本发明实施例提供一种对高带信号进行帧错误隐藏的方法，提高语音解码器输出的语音信号的音质。

本发明实施例还提供一种高带信号帧错误隐藏装置，提高语音解码器输出的语音信号的音质。

本发明实施例还提供一种语音解码器，提高语音解码器输出的语音信号的音质。

为达到上述目的，本发明实施例的技术方案是这样实现的：

一种对高带信号进行帧错误隐藏的方法，包括：

计算高带信号关于低带信号基音周期信息的周期性强度；

判断所述周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

一种高带信号帧错误隐藏装置，包括周期性强度计算模块、基音周期重复模块和上帧数据重复模块；

所述周期性强度计算模块，用于计算高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则将当前丢失帧的高带信号传输到所述基音周期重复模块；否则将当前丢失帧的高带信号传输到所述上帧数据重复模块；

所述基音周期重复模块，用于采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；

所述上帧数据重复模块，用于采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

一种语音解码器，包括：码流解复用模块、低带解码器、高带解码器、低带信号帧错误隐藏装置、高带信号帧错误隐藏装置和合成正交镜像滤波器；

所述码流解码复用模块，用于将输入的码流解复用分解为低带码流和高带码流；

所述低带解码器和高带解码器，分别用于将低带码流和高带码流进行解码后，得到低带信号和高带信号；

所述低带信号帧错误隐藏装置，用于对低带信号进行帧错误隐藏处理，得到低带信号的基音周期；

所述高带信号帧错误隐藏装置，用于计算高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；

所述合成正交镜像滤波器，用于将帧错误隐藏处理后的低带信号和高带信号合成最终输出的语音信号。

与现有技术相比，本发明实施例所提供的技术方案，计算高带信号关于低带信号基音周期信息的周期性强度；并判断高带信号关于低带信号基音周期信息的周期性强度是否大于或等于预先设置的阈值，是则判断其关于低带信号基音周期信息的周期性强，采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏，从而使得在高带信号周期性强时，不会破坏高带信号的周期性，避免了由于破坏高带信号的周期性而引起的语音信号音质降低的问题。当高带信号关于低带信号基音周期信息的周期性强度小于预先设置的阈值时，则判断高带信号关于低带信号基音周期信息的周期性较弱，采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏，从而避免了在高带信号周期性很弱时，避免了由于帧错误隐藏处理引入高频噪声而引起的语音信号音质降低的问题。可见，本发明实施例的对高带信号进行帧错误隐藏处理的技术方案，提高了语音解码器输出的语音信号的音质。

附图说明

图1为本发明实施例中语音信号解码器的结构图；

图2为本发明实施例中的对高带信号进行帧错误隐藏的方法流程图；

图3为本发明实施例中高带信号帧错误隐藏装置的结构图；

图4为本发明实施例中基音周期重复模块的结构图；

图5为本发明实施例中一种上帧数据重复模块的结构图；

图6为本发明实施例中另一种上帧数据重复模块的结构图。

具体实施方式

下面结合附图及具体实施例对本发明进行详细说明。

图1为本发明实施例中语音解码器的结构图。如图1所示，该语音解码器包括码流解复用模块、低带解码器、高带解码器、低带信号帧错误隐藏装置、高带信号帧错误隐藏装置和合成正交镜像滤波器。

码流解码复用模块将输入的码流解复用分解为低带码流和高带码流；低带码流和高带码流分别由低带解码器和高带解码器进行解码后，得到低带信号和高带信号，然后再分别经低带信号帧错误隐藏装置和高带信号帧错误隐藏装置的帧错误隐藏处理后，输入合成正交镜像滤波器，合成最终输出的语音信号。

本发明实施例中，低带信号帧错误隐藏装置对低带信号进行帧错误隐藏，所述低带信号帧错误隐藏装置向高带信号帧错误隐藏装置提供用于计算高带信号周期性强度的低带信号基音周期。

高带信号帧错误隐藏装置执行本发明实施例提供的对高带信号进行帧错误隐藏的方法，包括：计算得到高带信号关于低带信号基音周期信息的周期性强度；判断高带信号的周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

图2为本发明实施例中对高带信号进行帧错误隐藏的方法流程图，图3为本发明实施例中高带信号帧错误隐藏装置的结构图。以下结合图2和图3对本发明实施例提供的对高带信号进行帧错误隐藏的技术方案进行详细说明。

如图2所示，本发明实施例中的对高带信号进行帧错误隐藏的方法包括以下步骤：

步骤700，利用低带信号帧错误隐藏计算得到的低带信号基音周期，计算高带信号关于低带信号基音周期信息的周期性强度。

本步骤中，低带信号帧错误隐藏采用的是可以得到基音周期的帧错误隐藏方法，例如可以是基于基音波形重复方法、基于模型的再生方法或包括基音周期参数的基于编码器参数插值方法。其中，基于模型的再生方法例如可以是基于线性预测模型再生的帧错误隐藏方法。

本步骤中，高带信号帧错误隐藏装置首先利用低带信号帧错误隐藏计算得到低带信号基音周期t_lb，再用高带信号历史缓冲s_hb(n)计算高带信号关于t_lb的周期性强度r(t_lb)。

通常，衡量信号周期性强度的函数有自相关函数、归一化自相关函数等。

低带信号帧错误隐藏计算得到的基音周期值可以基于对低带信号计算自相关函数。自相关函数公式如下：

$r\left(i\right)=\underset{j=N}{\overset{-1}{\mathrm{\Σ}}}{s}_{\mathrm{lb}}\left(j\right)s_{\mathrm{lb}}(j-i),$ i＝min_pitch，...，max_pitch

其中，r(i)是关于i的自相关函数，s_lb(j)是低带语音信号。N是计算自相关函数的窗口长度，例如可以取一帧语音信号的样点数。min_pitch是基音周期搜索下限，max_pitch是基音周期搜索上限。则低带信号基音周期为：

$t_{\mathrm{lb}}=\arg \underset{i=\min \_\mathrm{pitch},\·\·\·,\max \_\mathrm{pitch}}{\max }r\left(i\right),$ 即t_lb为令r(i)最大的i值

采用自相关函数计算周期性强度的公式为：

$r\left(t_{\mathrm{lb}}\right)=\underset{n=0}{\overset{N}{\mathrm{\Σ}}}{s}_{\mathrm{hb}}\left(n\right)s_{\mathrm{hb}}(n-t_{\mathrm{lb}})$

其中，s_hb(n)，n＝-M，...，-1是高带信号的历史缓冲，M是高带信号历史缓冲中的样点个数，N为一个正整数常量，一般可以取一帧中高带信号的采样点数。

采用归一化自相关函数计算周期性强度的公式为：

$r_{\mathrm{nor}}\left(t_{\mathrm{lb}}\right)=\frac{\underset{n=0}{\overset{N-1}{\mathrm{\Σ}}}{s}_{\mathrm{hb}}\left(n\right)s_{\mathrm{hb}}(n-t_{\mathrm{lb}})}{\sqrt{\underset{n=0}{\overset{N-1}{\mathrm{\Σ}}}{s_{\mathrm{hb}}}^2\left(n\right)\underset{n=0}{\overset{79}{\mathrm{\Σ}}}{s_{\mathrm{hb}}}^2(n-t_{\mathrm{lb}})}}$

其中，N为一个正整数常量，一般可以取一帧中高带信号的采样点数。

参见图3，图3所示的高带信号帧错误隐藏装置包括周期性强度计算模块、基音周期重复模块和上帧数据重复模块，其中周期性强度计算模块执行本步骤，利用低带信号帧错误隐藏计算得到的低带信号基音周期，计算高带信号关于低带信号基音周期信息的周期性强度。

本步骤中，低带信号基音周期信息除了包括低带信号基音周期t_lb，还可以包括低带基音周期t_lb附近的数值。高带信号帧错误隐藏装置也可以首先利用低带信号帧错误隐藏计算得到低带信号基音周期t_lb。为了减少高带信号基音周期搜索的复杂度及提高高带信号基音周期的估计精度，进一步可以用低带基音周期t_lb区间，如[max(t_lb-m，pit_min)，min(t_lb+m，pit_max)]，对高带信号计算归一化自相关函数。用高带信号历史缓冲s_hb(n)计算高带信号关于[max(t_lb-m，pit_min)，min(t_lb+m，pit_max)]的周期性强度r(t_lb)。

$r_{\mathrm{nor}}\left(i\right)=\frac{\underset{n=0}{\overset{N-1}{\mathrm{\Σ}}}{s}_{\mathrm{hb}}\left(n\right)s_{\mathrm{hb}}(n-i)}{\sqrt{\underset{n=0}{\overset{N-1}{\mathrm{\Σ}}}{s_{\mathrm{hb}}}^2\left(n\right)\underset{n=0}{\overset{N-1}{\mathrm{\Σ}}}{s_{\mathrm{hb}}}^2(n-i)}}$ max(t_lb-m，pit_min)≤i≤min(t_lb+m，pit_max)

其中，m为搜索区间的半径，如可以取值为3或者其他小于等于3的数值，根据大量实验结果而定，m取值大，则结果更精确，但是算法复杂度也增大。在本实施例中，m取值为3。pit_min为最小基音周期，在本实施例中，pit_min＝16。pit_max为最大基音周期，在本实施例中，pit_max＝144。其他实施方式中，也可以是pit_min＝20，pit_max＝143，或者pit_min＝16，pit_max＝160，则高带基音周期t_hb为：

$t_{\mathrm{hb}}=\arg \underset{i=\max (t_{\mathrm{lb}}-m,\mathrm{pit}\_\min ),......,\min (t_{\mathrm{lb}}+m,\mathrm{pit}\_\max )}{\max }{r}_{\mathrm{nor}}\left(i\right)$

且对应的高带信号归一化自相关系数为：

$r_{\mathrm{nor}\_\max }=\underset{i=\max (t_{\mathrm{lb}}-m,\mathrm{pit}\_\min ),......,\min (t_{\mathrm{lb}}+m,\mathrm{pit}\_\max )}{\max }{r}_{\mathrm{nor}}\left(i\right),$

由此获得高带信号关于低带信号基音周期信息的周期性强度。

步骤701，判断高带信号关于低带信号基音周期信息的周期性强度是否大于或等于预先设置的阈值，是则执行步骤702：否则执行步骤703。

本步骤中，对于采用自相关函数计算周期性强度的方法，可以通过大量测试选取一个合适的阈值R，例如可以仿真采用本发明实施例中对高带信号进行帧错误隐藏方法的语音解码器，得到使用不同阈值时输出的语音信号，然后计算该语音信号的信噪比，将信噪比最大的语音信号对应的阈值作为本步骤选择的合适的阈值。或者可以根据经验值确定该阈值。如果r(t_tb)≥R，则判定高带信号历史缓冲s_hb(n)关于t_lb具有强周期性，否则关于t_lb不具有强周期性。

对于采用归一化自相关函数计算周期性强度的方法，阈值的取值范围是0到1之间的非负数。可以通过大量测试选取一个合适的阈值R_nor，例如0.7，具体步骤与采用自相关函数计算周期性强度时选取阈值的方法相同；也可以选择一个经验值。如果r_nor(t_tb)≥R_nor或者r_{nor_max}≥R_nor，则判定高带信号历史缓冲s_hb(n)关于低带信号基音周期信息具有强周期性，否则关于低带信号基音周期信息不具有强周期性。

图3所示的高带信号帧错误隐藏装置中，周期性强度计算模块在计算得到高带信号关于低带信号基音周期信息的周期性强度之后，判断该计算的高带信号关于低带信号基音周期信息的周期性强度是否大于或等于预先在其中设置的阈值，是则由基音周期重复模块进行后续处理，否则由上帧数据重复模块进行后续处理。

步骤702，采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

本步骤中，基音周期重复的方法可以是基于基音波形重复或基于模型的再生方法、或基于波形重复并衰减的方法。

本步骤中，例如，采用基于基音波形重复对高带信号进行帧错误隐藏时，采用下面的公式对当前丢失帧的高带信号进行恢复：

s_hb(n)＝s_hb(n-t_lb)，n＝0，...，N-1

其中，s_hb(n)，n＝0，...，N-1是当前丢失帧恢复后的高带信号，N为一帧包含的样点个数。s_hb(n)，n＝-M，...，-1是高带信号的历史缓冲，M是高带信号历史缓冲中的样点个数。

采用简单的重复周期性对高带信号进行帧错误隐藏，在大量连续丢帧时，得到的语音信号会产生具有过强周期性的信号。

有时为了提高效果，对恢复的信号乘以一个衰减系数α，此时，基音周期重复的方法还可以是采用基音波形重复并衰减的方法对当前丢失帧的高带信号进行帧错误隐藏得到的高带信号变为：

s_hb(n)＝s_hb(n-t_lb)·α，n＝0，...，N-1

其中，N为一帧包含的样点个数，衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.8，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。具体衰减系统确定的方法可以采用与确定阈值时相同的方法，在此不再赘述。

采用基音波形复制并衰减的方法对当前丢失帧的高带信号进行帧错误隐藏，再例如，当是以基于修正型离散余弦变换(MDCT，Modified DiscreteCosine Transform)的帧错误隐藏时，需要首先通过基音周期复制两帧信号s′_hb(n)：

s′_hb(n)＝s_hb(n-t_lb)，n＝0，...，2N-1

对信号s′_hb(n)加正弦窗w_tdac(n)并衰减，得到当前帧的反修正型离散余弦变换(IMDCT，Invert Modified Discrete Cosine Transform)系数的估算值d^cur(n)：

d^cur(n)＝w_tdac(n)s_hb(n)β，n＝0，...，2N-1

β为衰减因子，如可以取

d^cur(n)再与上一帧IMDCT系数d^pre(n)的后一帧进行叠加(OLA，Overlap-add)，并衰减得到当前帧的输出信号：

s_hb(n)＝(w_tdac(n+N)d^pre(n+N)+w_tdac(n)d^cur(n))α，n＝0，...，N-1

此时，上一帧IMDCT系数d^pre(n)的后一帧可以称为上一帧IMDCT系数d^pre(n)的后部分，衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如α＝0.8，也可以是一个根据连续丢包数自适应变化的变量，如α＝1-0.005×(n+1)，逐点加强衰减的程度，使输出的信号变的更为平滑。

图4所示本发明实施例中一种基音周期重复模块，包括：复制模块，根据基音周期对当前帧信号进行复制，衰减模块根据复制的帧信号加正弦窗并衰减得到当前帧的IMDCT系数的估算值，叠加运算模块将所述估算值与上一帧IMDCT系数的后一帧进行叠加并衰减。

本步骤中，采用基于线性预测模型再生方法对高带信号进行帧错误隐藏时，采用下面的公式，对高带残差信号e_hb(n)进行基音周期重复。

e_hb(n)＝e_hb(n-t_lb)，n＝0，...，N-1

其中，e_hb(n)，n＝0，...，N-1为当前丢失帧的高带残差信号，e_hb(n)，n＝-M，...，-1为高带信号的历史缓冲关于线性预测分析的残差。

然后利用上述高带残差信号，通过线性预测合成器合成当前丢失帧的高带信号，具体公式为：

$s_{\mathrm{hb}}\left(n\right)=e\left(n\right)-\underset{i=1}{\overset{8}{\mathrm{\Σ}}}{a}_i{s}_{\mathrm{hb}}(n-i),$ n＝0，...，N-1

有时为了提高主观效果，对恢复的信号要乘以一个衰减系数α，此时，采用基于线性预测模型再生的方法进行帧错误隐藏得到的高带信号变为：

$s_{\mathrm{hb}}\left(n\right)=(e\left(n\right)-\underset{i=1}{\overset{8}{\mathrm{\Σ}}}{a}_i{s}_{\mathrm{hb}}(n-i))\·\mathrm{\α},$ n＝0，...，N-1

其中，s_hb(n)，n＝0，...，N-1是当前丢失帧恢复后的高带信号，N为一帧包含的样点个数。s_hb(n)，n＝-M，...，-1是高带信号的历史缓冲，M是高带信号历史缓冲中的样点个数。衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.8，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。

图3所示的基音周期重复模块执行本步骤，采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏处理。该模块可以采用基于基音波形复制的方法实现对高带信号的帧错误隐藏处理，或者采用基于模型的再生方法，例如线性预测模型方法实现对高带信号的帧错误隐藏处理。

步骤703，采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

本步骤中，基于上帧数据重复的方法可以包括：基于上帧重复方法、基于上帧重复并衰减方法、基于编码器参数插值的方法。

图3所示的上帧数据重复模块执行本步骤，采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。具体的详细的算法，可以是采用基于上帧重复的方法、基于上帧重复并衰减的方法或基于编码器参数插值的方法执行本步骤。

例如，采用上帧重复并衰减的方法时，可以将当前丢失帧的上一帧的时域数据复制到当前丢失帧，并乘以一个衰减系数α，即可以采用下面的公式对当前信号进行恢复：

s_hb(n)＝s_hb(n-N)·α，n＝0，...，N-1

其中，N为一帧包含的样点个数，衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.8，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。

图5为本发明实施例中一种上帧数据重复模块的结构图，如图5所示，该上帧数据重复模块包括上帧高带信号复制模块和衰减模块，上帧高带信号复制模块将当前丢失帧的上一帧的高带信号复制到当前丢失帧，并将复制的帧输入到衰减模块，由衰减模块乘以衰减系数α后，得到帧错误隐藏处理后的高带信号。

如果高带解码器的算法是频域算法，采用基于上帧重复并衰减的方法对上帧从频率域数据恢复时域数据过程中的某些中间数据进行重复和衰减，可以为将当前丢失帧的上帧从频率域数据恢复时域数据时的中间数据作为当前丢失帧的相应中间数据，对所述相应中间数据进行衰减，然后再利用这些当前丢失帧的衰减后的中间数据合成当前丢失帧的时域数据，或者将上帧从频率域数据恢复时域数据时的中间数据衰减后作为当前丢失帧的相应中间数据，然后再利用这些中间数据合成当前丢失帧的时域数据。

例如，高带解码器是以基于修正型离散余弦变换(MDCT，ModifiedDiscrete Cosine Transform)的高带解码器时，可以采用重复和衰减上一帧的反修正型离散余弦变换系数(IMDCT，Invert Modified Discrete CosineTransform)来估算得到当前丢失帧的IMDCT系数，然后按照合成公式，将上一帧的IMDCT系数和当前丢失帧的IMDCT系数进行叠加(OLA，Overlap-Add)，得到当前丢失帧的时域数据。

估算当前丢失帧IMDCT系数可采用下面的公式：

d^cur(n)＝d^pre(n).α，n＝0，...，2N-1

其中，d^cur(n)为当前丢失帧的IMDCT系数，d^pre(n)为上一帧的IMDCT系数，N为一帧包含的样点个数，衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.8，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。

通过对IMDCT系数进行OLA获得当前丢失帧的时域数据：

s_hb(n)＝w_tdac(n+N)d^pre(n+N)+w_tdac(n)d^cur(n)，n＝0，...，N-1

其中，s_hb(n)为当前丢失帧的时域数据，w_tdac(n)是OLA合成时需要加的窗函数，例如汉明窗、正弦窗等。窗函数的确定方法与现有技术中计算s_hb(n)时确定窗函数的方法相同，在此不再赘述。

图6为本发明实施例中另一种上帧数据重复模块的结构图。如图6所示，该上帧数据重复模块包括上帧的IMDCT系数存储模块、衰减模块和叠加运算模块。其中，上帧的IMDCT系数存储模块，存储上帧从频率域数据恢复时域数据过程中的IMDCT系数，然后经衰减模块将该IMDCT系数衰减α后，得到当前丢失帧的IMDCT系数，将上帧的IMDCT系数与衰减后得到的当前丢失帧的IMDCT系数输入叠加运算模块进行叠加运算后，得到当前丢失帧经帧错误隐藏处理后的高带信号。

如果采用重复MDCT系数并衰减，而不是采用重复IMDCT系数并衰减，则需要对MDCT系数进行IMDCT变换来得到IMDCT系数，再对IMDCT衰减，并进行OLA来获得当前丢失帧的时域数据，这样就会增加IMDCT变换的计算量。因此本领域技术人员应该理解，直接重复上帧IMDCT系数并进行衰减，然后进行OLA操作来合成当前丢失帧的时域数据，可以减少计算量。

再例如高带解码器是以基于傅利叶变换(FFT，Fast Fourier Transform)的高带解码器时，可以采用重复和衰减上帧的反傅利叶变换系数(IFFT，Invert Fast Fourier Transform)来估算得到当前丢失帧的IFFT系数，再进行OLA，得到当前丢失帧的时域数据。

估算当前丢失帧IFFT系数可采用下面的公式

d^cur(n)＝d^pre(n).α，n＝0，...，M-1

其中，d^cur(n)为当前丢失帧的IFFT系数，d^pre(n)为上帧的IFFT系数，M为一帧需要的IFFT系数个数，一般M大于一帧的样点数N。衰减系数α取值范围是0到1之间的非负数。可以是一个常数，如0.875，也可以是一个根据连续丢包数自适应变化的变量。例如对于第一个丢失帧，乘以一个较大的衰减系数，如0.9，对于第二个及之后的连续丢失帧，乘以一个较小的衰减系数，如0.7。

对于当前丢失帧的前面M-N个样点，采用下面的OLA公式进行恢复

s_hb(n)＝w(n+N)d^pre(n+N)+w(n)d^cur(n)，n＝0，...，M-N-1

其中，s_hb(n)为当前丢失帧的时域数据，w(n)是OLA合成时需要加的窗函数，例如汉明窗、正弦窗等。

对于当前丢失帧的后面2N-M个样点，采用下面的公式恢复：

s_hb(n)＝d^cur(n)，n＝M-N，...，N-1

其中，M为一帧需要的IFFT系数个数，N为一帧的采样点数。

除两层的编解码器之外，有的语音解码器还可以分为包含核心层和增强层的多层解码器。核心编解码器就是一个传统的窄带或宽带编解码器，在核心层的基础上，扩展出一些增强层。这样其核心层就可以直接与对应的传统语音编解码器互通。有的增强层属于低带增强层，用于提高低带语音信号的音质。有的增强层属于高带增强层，用于将语音带宽进行扩展，例如将窄带信号扩展为宽带信号，或者将宽带信号扩展为超宽带信号，甚至可以将超宽带信号扩展为全带信号。但是无论是大于两层的语音解码器或是两层的语音解码器，都要在各自层的信号解码后，分别合并为低带信号和高带信号，并分别进行帧错误隐藏处理，然后再得到语音解码器输出的语音信号，因此，本发明实施例提供的对高带信号进行帧错误隐藏的技术方案，同样适用于包括核心层和增强层的多层解码器。

由以上所述可以看出，本发明实施例所提供的技术方案，计算高带信号关于低带信号基音周期信息的周期性强度；并判断高带信号关于低带信号基音周期信息的周期性强度是否大于预先设置的阈值，是则判断其周期性强，采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏，从而使得在高带信号周期性强时，避免了由于破坏高带信号的周期性而引起的语音信号音质降低的问题。

同时，本发明实施例中利用低带信号帧错误隐藏处理时得到有低带信号基音周期，计算关于高带信号关于低带信号基音周期信息的周期性强度，从而减小了专门设置周期性强度计算模块所需要的硬件开销。

当高带信号的周期性强度小于预先设置的阈值时，则判断高带信号的周期性较弱，采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏，从而避免了在高带信号周期性很弱时，避免了由于帧错误隐藏处理引入高频噪声而引起的语音信号音质降低的问题。可见，本发明实施例的对高带信号进行帧错误隐藏处理的技术方案，提高了语音解码器输出的语音信号的音质。

同时，本发明实施例提供的技术方案，当高带信号解码器的算法为频域算法时，可以利用上帧从频率数据恢复时域数据时的中间数据，进行当前丢失帧的高带信号的帧错误隐藏处理。当高带信号采用MDCT编码时，可以直接重复在解码是得到的IMDCT系数并进行衰减，然后进行叠加操作来恢复当前丢失帧的时域数据，从而相比重复MDCT系数的方法，减少了计算量。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过软件、硬件、或硬件以及软件来完成。本发明的实施例还可以包括一种计算机刻度存储介质，该计算机刻度存储介质用于承载或存储计算机可读或可执行的指令，或用于存储数据指令。所述的程序可以存储于一计算机可读取存储介质中，所述的存储介质，如：ROM/RAM、磁碟、光盘等。存储于该存储介质中的指令形成的程序在执行时，可以包括本发明任一方法实施例中的步骤。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。上述本发明实施例描述的“步骤”一词也不代表实施例执行方法的顺序。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (18)

1、一种对高带信号进行帧错误隐藏的方法，其特征在于，该方法包括：

计算高带信号关于低带信号基音周期信息的周期性强度；

判断所述周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

2、如权利要求1所述的方法，其特征在于，所述低带信号基音周期信息包括低带信号基音周期或低带信号基音周期区间，所述区间以低带信号基音周期减去m所得数值和最小基音周期比较的较大值为所述区间第一边界，以低带信号基音周期加上m所得数值和最大基音周期比较的较小值为所述区间第二边界，所述m小于等于3。

3、如权利要求1或2所述的方法，其特征在于，所述低带信号基音周期通过低带信号的帧错误隐藏处理得到。

4、如权利要求1所述的方法，其特征在于，所述计算高带信号关于低带信号基音周期信息的周期性强度为：利用当前丢失帧的高带信号的历史缓冲信号，通过自相关函数或采用归一化相关函数计算高带信号关于低带信号基音周期信息的周期性强度。

5、如权利要求1或4所述的方法，其特征在于，所述基于基音周期重复的方法为：基于基音波形重复方法、或基于波形重复并衰减的方法、或基于模型的再生方法。

6、如权利要求5所述的方法，其特征在于，所述基于基音波形重复并衰减的方法对当前丢失帧的高带信号进行帧错误隐藏包括：

根据基音周期对高带信号的历史缓冲信号进行复制并对所述复制的信号加正弦窗并衰减加窗信号得到当前帧的反修正型离散余弦变换IMDCT系数的估算值；

将所述估算值与上一帧IMDCT系数的后部分进行叠加并衰减。

7、如权利要求6所述的方法，其特征在于，所述估算值与上一帧IMDCT系数的后部分进行叠加并衰减时的衰减系数为：根据连续丢包数自适应变化的变量。

8、如权利要求1所述的方法，其特征在于，所述基于上帧数据重复的方法为：基于上帧重复方法、或基于上帧重复并衰减方法、或基于编码器参数插值方法。

9、如权利要求8所述的方法，其特征在于，所述采用基于上帧重复并衰减方法，对当前丢失帧的高带信号进行帧错误隐藏包括：

将当前丢失帧的上一帧的时域数据作为当前丢失帧的时域数据并进行衰减。

10、如权利要求8或9所述的方法，其特征在于，所述采用基于上帧重复并衰减方法，对当前丢失帧的高带信号进行帧错误隐藏包括：

将当前丢失帧的上帧从频率域数据恢复时域数据时的中间数据作为当前丢失帧的相应中间数据，对所述相应中间数据进行衰减，利用所述丢失帧衰减后的相应中间数据合成为当前丢失帧的时域数据；

或将当前丢失帧的上帧从频率域数据恢复时域数据时的中间数据衰减后作为当前丢失帧的相应中间数据，利用所述丢失帧的相应中间数据合成为当前丢失帧的时域数据。

11、如权利要求10所述的方法，其特征在于，所述中间数据为反修正离散余弦变换IMDCT系数时，所述利用当前丢失帧的相应中间数据合成为当前丢失帧的时域数据为：

将所述当前丢失帧的IMDCT系数和上帧的IMDCT系数进行叠加得到当前丢失帧的时域数据。

12、一种高带信号帧错误隐藏装置，其特征在于，该高带信号帧错误隐藏装置包括：周期性强度计算模块、基音周期重复模块和上帧数据重复模块；

所述周期性强度计算模块，用于计算高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则将当前丢失帧的高带信号传输到所述基音周期重复模块；否则将当前丢失帧的高带信号传输到所述上帧数据重复模块；

所述基音周期重复模块，用于采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；

所述上帧数据重复模块，用于采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

13、如权利要求12所述的高带信号帧错误隐藏装置，其特征在于，所述上帧数据重复模块包括：上帧高带信号复制模块和衰减模块；

所述上帧高带信号复制模块，用于将当前丢失帧的上帧的高带信号复制到当前丢失帧；

所述衰减模块，用于将所述上帧高带信号复制模块复制的上帧的高带信号乘以衰减系数后，得到帧错误隐藏处理后的高带信号。

14、如权利要求12所述的高带信号帧错误隐藏装置，其特征在于，所述上帧数据重复模块包括上帧的IMDCT系数存储模块、衰减模块和叠加运算模块，

所述上帧的IMDCT系数存储模块，用于存储上帧从频率域数据恢复时域数据过程中的反修正离散余弦变换系数IMDCT系数；

所述衰减模块，用于将所述上帧的IMDCT系数存储模块的IMDCT系数衰减，得到当前丢失帧的IMDCT系数；

所述叠加运算模块，用于将所述上帧的IMDCT系数存储模块的IMDCT系数和所述衰减模块得到的当前丢失帧的IMDCT系数进行叠加运算后，得到当前丢失帧的时域数据。

15、如权利要求12所述的高带信号帧错误隐藏装置，其特征在于，所述基音周期重复模块包括：复制模块，衰减模块和叠加运算模块；

所述复制模块，用于根据基音周期对当前帧信号进行复制；

所述衰减模块，用于对所述复制的信号加窗并衰减得到当前帧的IMDCT系数的估算值；

所述叠加运算模块，用于将所述估算值与上一帧IMDCT系数的后一部分进行叠加并衰减。

16、一种语音解码器，其特征在于，该语音解码器包括：码流解复用模块、低带解码器、高带解码器、低带信号帧错误隐藏装置、高带信号帧错误隐藏装置和合成正交镜像滤波器；

所述码流解码复用模块，用于将输入的码流解复用分解为低带码流和高带码流；

所述低带解码器和高带解码器，分别用于将所述低带码流和高带码流进行解码后，得到低带信号和高带信号；

所述低带信号帧错误隐藏装置，用于对低带信号进行帧错误隐藏处理，得到低带信号的基音周期；

所述高带信号帧错误隐藏装置，用于计算高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；否则采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；

所述合成正交镜像滤波器，用于将帧错误隐藏处理后的低带信号和高带信号合成最终输出的语音信号。

17、如权利要求16所述的语音解码器，其特征在于，所述高带信号帧错误隐藏装置包括：周期性强度计算模块、基音周期重复模块和上帧数据重复模块；

所述周期性强度计算模块，用于计算当前丢失帧的高带信号关于低带信号基音周期信息的周期性强度；判断所述周期性强度是否大于或等于预先设置的阈值，是则将当前丢失帧的高带信号传输到所述基音周期重复模块；否则将当前丢失帧的高带信号传输到所述上帧数据重复模块；

所述基音周期重复模块，用于采用基于基音周期重复的方法，对当前丢失帧的高带信号进行帧错误隐藏；

所述上帧数据重复模块，用于采用基于上帧数据重复的方法，对当前丢失帧的高带信号进行帧错误隐藏。

18、一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序代码，当所述计算机程序代码被一个计算机执行的时候，所述计算机程序代码可以使得所述计算机执行权利要求1至11项中任意一项的步骤。

Images