CN113571070B - Fd/lpd转换环境中的帧丢失管理 - Google Patents
Fd/lpd转换环境中的帧丢失管理 Download PDFInfo
- Publication number
- CN113571070B CN113571070B CN202110612907.3A CN202110612907A CN113571070B CN 113571070 B CN113571070 B CN 113571070B CN 202110612907 A CN202110612907 A CN 202110612907A CN 113571070 B CN113571070 B CN 113571070B
- Authority
- CN
- China
- Prior art keywords
- frame
- digital signal
- encoded
- predictive
- transform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000006243 chemical reaction Methods 0.000 title abstract description 13
- 238000000034 method Methods 0.000 claims abstract description 40
- 238000001514 detection method Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 2
- 230000007704 transition Effects 0.000 description 17
- 230000005284 excitation Effects 0.000 description 16
- 230000015572 biosynthetic process Effects 0.000 description 14
- 238000003786 synthesis reaction Methods 0.000 description 14
- 238000004422 calculation algorithm Methods 0.000 description 10
- 238000012952 Resampling Methods 0.000 description 9
- 238000012805 post-processing Methods 0.000 description 9
- 238000012937 correction Methods 0.000 description 7
- 239000002131 composite material Substances 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 230000003044 adaptive effect Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 5
- 239000011295 pitch Substances 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000001755 vocal effect Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005279 excitation period Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/022—Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明涉及FD/LPD转换环境中的帧丢失管理，具体涉及一种解码利用预测编码和变换编码所编码的数字信号的方法，所述方法包括下列步骤：预测解码通过一组预测编码参数所编码的数字信号的前一帧；检测编码数字信号当前帧的丢失；通过预测由编码前一帧的至少一个预测编码参数来生成取代当前帧的一帧；通过预测由编码前一帧的至少一个预测编码参数来生成数字信号的附加段；临时储存所述数字信号的附加段。
Description
本发明是国际申请PCT/FR2015/052075在2017年01月26日进入中国国家阶段的申请号201580041610.9、发明名称为FD/LPD转换环境中的帧丢失管理的分案申请。
技术领域
本发明涉及到编码/解码数字信号的领域，尤其是帧丢失的矫正。
背景技术
本发明可有利于应用于可包含语音与音乐交替或组合的声音的编码/解码。
为了有效地编码低速率的语音，推荐CELP（“码激励线性预测”）技术。为了有效地编码音乐，推荐变换编码技术。
CELP编码器是预测编码器。其目的是利用各种元素建立语音生成模型：以便建立声道模型的短期线性预测、在浊音期间建立声带振动模型的长期预测以及来源于固定码本（白噪声、代数激励）的激励，所述激励代表可能未建立模型的“创新”。
比如MPEG AAC、AAC-LD、AAC-ELD或ITU-T G.722.1附件C这样的变换编码器利用临界采样变换来压缩变换域中的信号。术语“临界采样变换”用来指代变换域中系数的数量与每个分析帧中的时域样本的数量相等的变换。
有效编码含有组合语音/音乐的信号的一个方案是在至少两个编码模式之间随着时间推移选择最佳技术：一个是CELP类型的，另一个是变换类型的。
例如，对于编解码器3GPP AMR-WB+和MPEG USAC（“统一语音音频编码”）就是这种情况。AMR-WB+和USAC的目标应用并不是互动而是与分配和存储服务相对应、对于算法延迟没有严格限制。
在2009年5月7-10日的第126届AES大会上， M. Neuendorf等人发表的文章《低速率统一语音和音频编码的一个新方案——MPEG RM0》描述了被称为RM0（参考模型0）的USAC编解码器的最初版本。该RM0编解码器可在多个编码模式之间交替变换：
• 对于语音信号：LPD（“线性预测域”）模式包括来自AMR-WB+编码的两个不同模式：
- ACELP模式
- 称为wLPT（“加权线性预测变换”）的TCX（“变换编码激励”）模式，利用MDCT变换（不同于利用FFT变换的AMR-WB+编解码器）。
• 对于音乐信号：通过利用1024个样本的MPEG AAC（“高级音频编码”）型的MDCT（“修正离散余弦变换”）所采用编码的FD（“频域”）模式。
在USAC编解码器中，LPD与FD模式之间的转换至关重要，以便确保在模式切换过程中没有误差的有效质量，已知每种模式（ACELP、TCX、FD）都具有特殊“标志”（就伪像而言），而且，FD和LPD模式是不同类型的——FD模式以信号域中的变换编码为基础，而LPD模式利用感知加权域中的线性预测编码，所述感知加权域具有待恰当管理的过滤存储器。在2009年5月7日-10日的第126届AES大会上， J. Lecomte等人发表的文章《基于LPC与非基于LPC音频编码之间转换的高效交错淡变窗口》详细说明了在USAC RM0编解码器的模式之间切换的管理。如该文章所述，主要困难在于从LPD模式转换到FD模式，反之亦然。我们在这只讨论从ACELP转换到FD的情况。
为了正确理解其功能，我们利用典型的实施例回顾一下MDCT变换编码的原理。
在该编码器中，通常把MDCT变换分为三个步骤，在MDCT编码之前，将信号分成M个样本的帧：
• 通过窗口加权信号，所述窗口在此是指长度为2M的“MDCT窗口”；
• 在时域中折叠（“时域混叠”），以形成长度为M的块；；
• 进行长度为M的DCT（“离散余弦变换”）变换。
把MDCT窗口分为四个相邻的部分，其相等长度为M/2，在此称为“四等分”。
把信号乘以分析窗口，然后进行时域混叠：将第一等分（窗口化的）折叠（换言之，时间反转并重叠）在第二等分上，将第四等分折叠在第三等分上。
更具体而言，按照下列方式进行一等分在另一等分上的时域混叠：将第一等分的第一个样本加到第二等分的最后一个样本上（或者从第二等分的最后一个样本减去第一等分的第一个样本），将第一等分的第二个样本加到第二等分的倒数第二个样本上（或者从减去第二等分的倒数第二个样本减去第一等分的第二个样本），以此类推，直到将第一等分的最后一个样本加到第二等分的第一个样本上（或者从第二等分的第一个样本减去第一等分的最后一个样本）。
通过四等分，我们因此得到重叠的两等分，其中每个样本都是待编码信号的两个样本的线性组合的结果。该线性组合引起时域混叠。
然后，在之后DCT变换（IV型），共同编码重叠的两个等分。对于下一帧，通过半个窗口（50%重叠）将前一帧的第三等分和第四等分转移到当前帧的第一等分和第二等分。在重叠之后，像前一帧一样，发送相同对的样本的第二个线性组合，但使用不同的加权。
在解码器中，在逆DCT变换之后，我们得到这些重叠信号的解码版本。两个连续帧包含相同等分的两次不同重叠的结果，意味着，对于每对样本而言，我们都得到两个线性组合的结果，所述线性组合的加权不同，但是已知的：因此解出方程组，即可得到输入信号的解码版本，而且，因此可以通过使用两个连续解码帧来消除时域混叠。
解上述方程组通常可通过撤销折叠、乘以适当选择的合成窗口、然后重叠相加共有部分得到隐式的解。如此重叠相加还确保两个连续解码帧之间的平稳过渡（没有因为量化误差所导致的间断），有效地用作交错淡变。当第一等分或第四等分的窗口对于每个样本而言都在零点时，我们可以在窗口的那部分得到没有时域混叠的MDCT变换。在这种情况下，平稳过渡不能通过MDCT变换来提供，而必须由其它方式提供，例如外部交错淡变。
应注意的是，尤其是涉及到DCT变换的定义，可有MDCT变换的不同实施方案，例如折叠待变换块的方式（例如，可以颠倒应用到左侧和右侧的折叠等分的标志，或者把第二等分和第三等分分别折叠到第一等分和第四等分上）等。这些不同的实施方案不改变MDCT分析合成的原理，所述MDCT分析合成通过窗口化、时域混叠、然后通过变换、最后通过窗口化、折叠和重叠相加来减少样本块。
要避免CELP编码与MDCT编码之间转换的伪像，据此通过引用并入本申请书的国际专利申请书WO2012/085451所提供的一种编码转换帧的方法。转换帧定义为通过转换所编码的当前帧，它是通过预测编码所编码的前一帧的后继。根据所述新方法，部分转换帧，例如，在以12.8kHz进行核心CELP编码的情况下的5ms的子帧，在以16kHz进行核心CELP编码的情况下分别为4ms的两个附加CELP帧，是通过预测编码来编码的，它比前一帧的预测编码有更多的限制。
受限的预测编码包括利用通过预测编码所编码的前一帧的稳定参数，例如，线性预测滤波器的系数，以及仅仅只适用于转换帧中的附加子帧几个最低参数的编码。
因为前一帧不能使用变换编码进行编码，所以就不可能消除在帧的第一部分中的时域混叠。上文引用的专利申请书WO2012/085451进一步提出矫正第一半个MDCT窗口，使得在正常折叠的第一等分中没有时域混叠。还提出在编码CELP帧与编码MDCT帧之间整合一部分重叠相加（也称为“交错淡变”），与此同时改变分析/合成窗口的系数。参阅所述专利申请书的图4e，虚线（交替的点和破折号）与MDCT编码的折叠线（顶图）相对应，并与MDCT解码的展开线（底图）相对应。在顶图中，粗线分隔开进入编码器的新样本的帧。当因此确定的新输入样本的帧完全有效时，便可以开始新MDCT帧的编码。需要注意的是，编码器中这些粗线并非与当前帧相对应，而是与每一帧的新进入样本的块相对应：当前帧实际上延迟5ms，与前瞻量相对应。在底图中，粗线分隔开在解码器输出端的解码帧。
在编码器中，转换窗口为零，直到折叠点。因此，折叠窗口左侧的系数与展开窗口的系数相同。CELP转换子帧（TR）的折叠点与末端之间的部分对应于正弦（一半）窗口。在解码器中，展开之后，将同一个窗口应用于信号。在MDCT帧的折叠点与开端之间的段中，窗口的系数对应于sin2类型的窗口。要实现解码CELP子帧与源于MDCT的信号之间的重叠相加，只要将余弦cos2类型的窗口应用于CELP子帧的重叠部分并将后者与MDCT帧相加即可。方法提供完全重构。
然而，编码音频信号帧会丢失在编码器与解码器之间的信道中。
现有的帧丢失矫正技术通常高度取决于所采用的编码类型。
在基于预测技术的语音编码的情况下，比如CELP，帧丢失矫正通常与语音模型相关联。例如，2003年7月版的ITU-T G.722.2标准提出由延长长期预测增益且同时使之减弱来代替丢失的数据包，并且延长代表LPC滤波器的A（z）系数的频率光谱线（ISF指“导抗谱频率”），同时使其趋向其各自平均值。还重复音高周期。用随机值填充固定码本的贡献。将这种方法应用到变换解码器或PCM解码器需要在解码器中进行CELP分析，这就会大大增加复杂性。还应注意的是，对于8kbit/s和12kbit/s的速率而言以及对于可与AMR-WB共同使用的解码速率而言，在ITU-T G.718标准中描述了CELP解码中帧丢失矫正的更多先进的方法。
在ITU-T G.711标准中描述了另一个解决方案，该解决方案描述了变换编码器，其中，在“附件I”部分中讨论的帧丢失矫正算法包括在已编码信号中找到音高周期，并通过在已编码信号与重复信号之间应用重叠相加而重复所述音高周期。如此重叠相加可消除音频伪像，但是在解码器中需要附加时间（与重叠相加的持续时间相对应）以便将其执行。
在变换编码的情况下，矫正帧丢失的常用技术是重复所收到的最后一帧。该技术可在各种标准化编码器/解码器（尤其是G.719、G.722.1和G.722.1C）得到实施。例如，在G.722.1解码器的情况下，MLT变换（“调制重叠变换”）相当于带有50%重叠和正弦窗口的MDCT变换，MLT变换确保丢失的最后一帧与重复帧之间足够缓慢的转换，以消除与帧的简单重复相关的伪像。
这种技术成本很低，但是其主要缺点是恰在帧丢失前的信号与重复信号之间不一致。这会导致相位不连续性，如果两帧之间重叠的持续时间较短，所述相位不连续性就会导致明显的音频伪像，尤其是在用于MLT变换的窗口是的低延迟窗口的这种情况。
在现有当前技术中，当帧丢失时，就在解码器中利用适当的PLC（数据包丢失隐藏）算法来生成替换帧。值得注意的是，通常数据包可含有多帧，所以术语PLC会引起歧义；本文以此来表示矫正当前丢失帧。例如，准确地收到并解码CELP帧之后，如果随后的帧丢失了，则采用以适合CELP编码的PLC为基础的替换帧，利用CELP编码器的存储器。准确地收到并解码MDCT帧之后，如果下一帧也丢失了，则生成以适合MDCT编码的PLC为基础的替换帧。
在CELP帧与MDCT帧之间转换的情况下，鉴于转换帧由CELP子帧（处于与前一CELP帧相同的采样频率）和MDCT帧构成的，所述MDCT帧包括消除“左侧”折叠的修改MDCT窗口，在这种情况下，则现有技术难以提供现存的解决方案。
在第一种情况下，已经准确收到并解码了前一CELP帧，当前转换帧已经丢失，而且下一帧是MDCT帧。在这种情况下，在接收CELP帧之后，PLC算法不知道丢失帧是转换帧，并因此生成替换CELP帧。因此，如前所述，就无法补偿下一MDCT帧的第一个折叠部分，而且无法用转换帧中包含的（随转换帧丢失了的）CELP子帧来填充两种类型编码器之间的时间。没有已知方案能解决这种情况。
在第二种情况下，已经准确地收到并解码了12.8kHZ的前一CELP帧，但16kHz的当前CELP帧已经丢失，而且下一帧是转换帧。于是，PLC算法就按照准确接收的最后一帧的频率来生成12.8kHz的CELP帧，而且转换CELP子帧（利用丢失 16kHz CELP帧的CELP参数作部分编码的）难以解码。
发明内容
本发明目的是改进这种现状。
为此目的，本发明第一方面涉及一种适用于解码利用预测编码和变换编码所编码的数字信号的方法，所述方法包括下列步骤：
- 前一帧数字信号的预测解码，所述数字信号是通过一组预测编码参数编码的；
- 检测编码数字信号当前帧的丢失；
- 通过预测，由编码前一帧的至少一个预测编码参数来生成当前帧的替换帧；
- 通过预测，由编码前一帧的至少一个预测编码参数来生成数字信号的附加段；
- 临时储存该数字信号的附加段。
因此，每当生成替换CELP帧时，数字信号的附加段都可供使用。前一帧的预测解码包含准确接收的CELP帧的预测解码或者通过适合CELP的PLC算法所生成的替换CELP帧。
该附加段使CELP编码与变换编码之间能够转换，即便在帧丢失的情况下，亦是如此。
实际上，在上述第一种情况下，可以通过附加段来实现到下一MDCT帧的转换。如下文所述，可将附加段加到下一MDCT帧，以便在包含未消除时域混叠的区域通过交错淡变来补偿该MDCT帧的第一个折叠部分。
在上述第二种情况下，通过利用附加段，就有可能实现转换帧的转换。如果不能解码转换CELP子帧（以16kHz编码的前一帧的CELP参数无效），则可以用附加段将其代替，如下文所述。
此外，关于帧丢失管理和转换的计算随着时间而展开。针对所生成的每个替换CELP帧来生成并存储附加段。因此，在检测到帧丢失时，就生成转换段，而无需等待转换的随后检测。因此，对于每个丢失帧都预期转换，由此避免了在收到并解码准确的新帧时必须管理“复杂性尖峰”。
在一个实施例中，方法进一步包括下列步骤：
- 接收包括至少有一段通过变换编码的下一帧编码数字信号；以及
- 解码下一帧，包括重叠相加数字信号的附加段和通过变换编码的段的子步骤。重叠相加子步骤使之有可能交错淡变输出信号。这种交错淡变减少了声音伪像（比如“自鸣噪声”）的出现并确保了信号能量的一致性。
在另一个实施例中，下一帧通过变换编码来实现完全编码，并且所丢失的当前帧是通过预测编码所编码的前一帧与通过变换编码所编码的下一帧之间的转换帧。
作为选择，前一帧由以第一频率运行的核心预测编码器通过预测编码进行编码。在这个变体中，下一帧是转换帧且包括由以第二频率运行的核心预测编码器通过预测编码所编码的至少一个子帧，其中所述第二频率与第一频率不同。为此目的，下一转换帧可包括指示所采用的核心预测编码的频率的一位。
因此，可以用转换帧的位流（比特流）来表示转换CELP子帧中使用的CELP编码（12.8或16kHz）的类型。本发明因此把系统化指示（一位）加入转换帧中，以便能够检测转换CELP子帧与前一CELP帧之间的CELP编码/解码的频率差。
在另一个实施例中，重叠相加可应用下列采用线性加权的公式给出：
其中：
r是代表生成的附加段长度的系数；
i是下一帧样本的时间，介于0与L/r之间；
L是下一帧的长度；
S（i）是添加之后下一帧的样本i的幅值；
B（i）是通过变换所解码的段的样本i的幅值；
T（i）是数字信号的附加段的样本i的幅值。
因此，重叠相加可利用线性组合以及易于执行的运算来进行。从而减少解码所需要的时间，同时减少用于这些计算的处理器的负载。作为选择，在不改变本发明原则的情况下，也可以执行其他形式的交错淡变。
在一个实施例中，通过预测来生成替换帧的步骤进一步包括更新解码器的内存储器，通过预测来生成数字信号的附加段的步骤可包括下列子步骤：
- 从解码器的存储器向临时存储器进行复制，在通过预测生成替换帧过程中更新所述解码器的存储器；
- 利用临时存储器来生成数字信号的附加段。
于是，对于附加段的生成，未更新解码器的内存储器。结果，在下一帧是CELP帧的情况下，附加信号段的生成不会影响下一帧的解码。
实际上，如果下一帧是CELP帧，解码器的内存储器必须与替换帧之后解码器的状态相对应。
在一个实施例中，通过预测来生成数字信号的附加段的步骤包括下列子步骤：
- 通过预测，由编码前一帧的至少一个预测编码参数来生成附加帧；
- 提取一段附加帧。
在这个实施例中，数字信号的附加段与第一半附加帧相对应。因此，进一步提高了方法的效率，因为用于生成的替换CELP帧所述临时计算数据可直接用于生成附加CELP帧。通常，存储临时计算数据的暂存器和高速缓冲存储器不必更新，使之能够重新利用这些数据来生成附加CELP帧。
本发明的第二方面提供一种计算机程序，在通过处理器执行指令的情况下，所述计算机程序包括用于执行根据本发明第一方面的方法的这些指令。
本发明的第三方面提供一种适用于利用预测编码和变换编码所编码的数字信号的解码器，所述解码器包括：
- 检测单元，用于检测数字信号当前帧的丢失；
- 预测解码器，包括处理器，设置所述处理器，以便执行下列操作：
* 前一帧通过一组预测编码参数编码的数字信号的预测解码；
* 通过预测，由编码前一帧的至少一个预测编码参数来生成当前帧的替换帧；
* 通过预测，由编码前一帧的至少一个预测编码参数来生成数字信号的附加段；
* 将数字信号的附加段临时存储于临时存储器。
在一个实施例中，根据本发明第三方面的解码器进一步包括变换解码器，所述变换编码器包括处理器，设置所述处理器，以便执行以下操作：
* 接收包含通过变换编码的至少一段的下一帧编码数字信号；以及，
* 解码下一帧，包括数字信号的附加段与通过变换编码的段之间重叠相加的子步骤。
通过编码器，本发明可包括插入一位转换帧，以提供关于用于编码转换子帧的CELP核心的信息。
附图说明
本发明的其它特征和优点将通过仔细阅读以下的详细说明及附图而显而易见，在附图中：
- 图1阐释了根据本发明一个实施例的音频解码器；
- 图2阐释了根据本发明一个实施例的音频解码器的CELP解码器，比如图1的音频解码器；
- 图3是图示说明了由根据本发明一个实施例如图1所示的音频解码器执行的解码方法的步骤；
- 图4展示了根据本发明一个实施例的计算装置。
具体实施方式
图1阐释了根据本发明一个实施例的音频解码器100。
未显示音频编码器结构。然而，由根据本发明的解码器所接收的数字编码音频信号可来自于适合编码CELP帧、MDCT帧以及CELP/MDCT转换帧形式的音频信号的编码器，比如专利申请书WO2012/085451所述的编码器。为此目的，通过变换所编码的转换帧可进一步包括通过预测编码所编码的段（例如，子帧）。编码器可进一步向转换帧加上一位，以便识别所采用的CELP核心的频率。提供CELP编码的示例，以阐释适合任何类型预测编码的说明。同样，提供MDCT编码的示例，以阐释适合任何类型的变换编码的说明。
解码器100包括用于接收数字编码音频信号的单元101。数字信号可以CELP帧、MDCT帧和CELP/MDCT转换帧的形式来编码。在本发明的变体中，在不改变本发明原则的情况下，除CELP和MDCT以外的其它形式也有可能，其它模式组合也有可能。此外，可以用另一种形式的预测编码来代替CELP编码，也可以用另一种形式的变换编码来代替MDCT编码。
解码器100进一步包括分类单元102，适合通常简单地通过读取位流并翻译从编码器收到的指示，以确定当前帧是否为CELP帧、MDCT帧或转换帧。根据当前帧的分类，可将帧传递到CELP解码器103或MDCT解码器104（或者，在转换帧的情况下，两者皆传递，把CELP转换子帧传递到下文所述的解码单元105）。此外，如果当前帧是准确接收的转换帧以及CELP编码可以至少两个频率（12.8和16kHz）产生，分类单元102则可以确定附加CELP子帧所使用的CELP编码类型——用从编码器输出的位速率表示该编码类型。
CELP解码器结构103的一个实例如图2所示。
可包括多路分解功能的接收单元201适合接收当前帧的CELP编码参数。这些参数可包括激励参数（例如，增益向量、固定码本向量、自适应码本向量），所述激励参数传递到能够产生激励的解码单元202。此外，例如，CELP编码参数可包含表示为LSF或ISF的LPC系数。可通过解码单元203来解码LPC系数，所述解码单元适合为LPC合成滤波器205提供LPC系数。
合成滤波器205由通过单元202所产生的激励所激励，并合成数字信号帧（或者通常为子帧），将其传递到去加重滤波器206（函数形式为1/(1-az-1)例如，其中a=0.68）。在去加重滤波器的输出端，CELP解码器103可包括低频后处理（低音后滤波器207），与ITU-TG.718标准中所述内容相类似。CELP解码器103进一步包括以输出频率（MDCT解码器104的输出频率）对合成信号进行重采样208以及输出接口209。在本发明的变体中，在重采样之前或之后，可对CELP合成执行额外的后处理。
此外，在编码之前将数字信号分为高频带和低频带的情况下，CELP解码器103可包括高频解码单元204，通过上文所述的单元202至208解码低频信号。CELP合成会涉及到更新CELP编码器的内部状态（或者更新内存储器），比如：
- 用于解码激励的状态；
- 合成滤波器205的存储器；
- 去加重滤波器206的存储器；
- 后处理存储器207；
- 重采样单元208的存储器。
参阅图1，解码器进一步包括帧丢失管理单元108和临时存储器107。
为了解码转换帧，解码器100进一步包括解码单元105，适用于接收CELP转换子帧以及从MDCT解码器104输出的变换编码的转换帧，从而通过所接收到的信号的重叠相加来解码转换帧。解码器100可进一步包括输出接口106。
根据本发明的解码器100的操作可参阅图3得到更好的理解，所述图3图示显示了根据本发明实施例的方法的步骤。
在步骤301中，数字编码音频信号的当前帧可由接收单元101从编码器接收或者不被其接收。音频信号的前一帧被视为准确接收并解码的帧或者替换帧。
在步骤302中，检测编码的当前帧是否丢失或者所述编码的当前帧是否被接收单元101所接收。
如果实际上已经收到了编码的当前帧，则分类单元102在步骤303中确定编码的当前帧是否为CELP帧。
如果编码的当前帧是CELP帧，该方法则包括由CELP解码器103对编码的CELP帧进行解码以及重采样的步骤304。可在步骤305中更新前述CELP解码器103的内存储器。在步骤306中，从解码器100输出已解码和重采样的信号。当前帧的激励参数和LPC系数可存储在存储器107中。
如果编码的当前帧不是CELP帧，则当前帧包括通过变换编码（MDCT帧或转换帧）所编码的至少一段。然后，步骤307检查编码的当前帧是否为MDCT帧。如果是这样，则在步骤308中，由MDCT解码器104解码当前帧，并且在步骤306中从解码器100输出解码信号。
然而，如果当前帧不是MDCT帧，则是在步骤309中解码的转换帧，该转换帧是通过解码CELP转换子帧和通过MDCT变换所编码的当前帧，以及通过重叠相加来自CELP解码器和MDCT解码器的信号所解码的，从而得到像在步骤306从解码器100输出的一样的数字信号。
如果当前子帧已经丢失，则在步骤310中确定所接收并编码的前一帧是否为CELP帧。如果不是这类情况，则在步骤311中，在帧丢失管理单元108中执行适合MDCT的PLC算法，生成可由MDCT解码器104解码的MDCT替换帧，从而得到数字输出信号。
如果最后准确接收到的一帧是CELP帧，则在步骤312中，通过帧丢失管理单元108和CELP解码器103执行适合CELP的PLC算法，从而生成替换CELP帧。
PLC算法可包括下列步骤：
- 通过LSF参数的内插估计以及基于以前一帧的LSF参数LPC滤波器，与此同时，在步骤313中，更新存储在存储器（例如，可为AR型或MA型）中的LSF预测量级；在《ISF估计和内插》的7.11.1.2段和ITU-T G.718标准《频谱包络隐藏、合成和更新》的7.11.1.7段中给出了在帧丢失的情况下针对ISF参数的情况执行LPC参数估计的示例。作为选择，在ITU-TG.722.2标准的附件I的1.5.2.3.3段中所述的估计也可以用于MA型量化的情况；
- 基于以前一帧的自适应增益和固定增益的激励的估计，并在步骤313中针对下一帧更新这些值。在《未来音高的推断》的7.11.1.3段、《激励周期部分的构成》的7.11.1.4段、《低延迟的脉冲波再同步》的7.11.1.15段、《激励随机部分的构成》的7.11.1.6段中描述了激励估计的示例。在每个子帧中通常由随机信号代替固定码本向量，而自适应码本采用推断的音高，而且前一帧的码本通常在所接收的最后一帧中按照信号等级衰减。作为选择，也可以采用ITU-T G.722.2标准的附件I中所述的激励估计；基于激励和更新的合成滤波器205并利用前一帧的合成存储器来合成信号，在步骤313中更新前一帧的合成存储器；
- 在步骤313中，通过利用去加重单元206以及通过更新去加重单元206的存储器对合成信号去加重；
- 视需要，后处理合成信号207，同时在步骤313中更新后处理存储器，——值得注意的是，可在帧丢失矫正过程中禁止后处理，因为它所采用的信息只是简单地推断而来，所用是不可靠的，在这种情况下，仍应该更新后处理存储器，以便对所接收的下一帧进行正常操作；
- 通过重采样单元208以输出频率对合成信号进行重采样，同时在步骤313中更新过滤存储器208。
更新内存储器能够无缝解码可能存在的通过CELP预测编码的下一帧。值得注意的是，在ITU-T G.718标准中，解码在矫正丢失帧之后所接收的帧时，还可以采用恢复和控制合成能量的技术（例如，第7.11.1.8条和第7.11.1.8.1条）。因为这方法不在本发明范畴之内，所以在此不予考虑。
在步骤314中，通过这种方式更新的存储器可以复制到临时存储器107。在步骤315中，从解码器输出解码替换CELP帧。
在步骤316中，根据本发明的方法通过预测利用适合CELP的PLC算法能够生成数字信号的附加段。步骤316可包括下列子步骤：
- 通过LSF参数的内插估计和基于上一CELP帧的LSF参数的LPC滤波器，而不更新存储在存储器中的LSF计量器。可以采用与上文所述的针对替换帧通过内插进行估计相同的方法（而不更新存储在存储器中的LSF量级）通过内插进行估计；
- 基于上一CELP帧的自适应增益和固定增益的激励的估计，而不针对下一帧更新这些值。可以利用针对替换帧所确定激励的相同方法（而不更新自适应增益和固定增益值）来确定激励；
- 基于激励以及重新计算的合成滤波器205，并利用前一帧的合成存储器来合成信号段（例如，半帧或子帧）；
- 利用去加重单元206对合成信号进行去加重；
- 视需要，利用后处理存储器207对合成信号进行后处理；
- 利用重采样存储器208，通过重采样单元208按照输出频率对合成信号进行重采样。
需要注意的是，对于这些步骤中的每个步骤而言，本发明都能够在执行这些步骤之前，在临时变量中存储每个步骤中改变的CELP解码的状态，从而在生成临时段后可以把预定状态存储到其存储值。
在步骤317中，将所生成的附加信号段存储在存储器107中。
在步骤318中，通过接收单元101接收下一帧数字信号。步骤319检查下一帧是否为MDCT帧或转换帧。
如果不是这样，下一帧则是CELP帧，并且在步骤320中通过CELP解码器103对其进行解码。在步骤316中所合成的附加段不予使用，而且可将其从存储器107中删除。
如果下一帧是MDCT帧或转换帧，则在步骤322中通过MDCT解码器104对其进行解码。并行地，在步骤323中通过管理单元108恢复存储在存储器107中的附加数字信号段，并将其发送到解码单元105。
如果下一帧是MDCT帧，则所得到的附加信号段使单元103能够在步骤324中执行重叠相加，从而准确地解码下一MDCT帧的第一部分。例如，在附加段是一半子帧的情况下，可以在重叠相加过程中把介于0至1之间的线性增益应用到第一半MDCT帧，把介于1至0之间的线性增益应用到附加信号段。没有该附加信号段的情况下，MDCT解码会因为量化误差而产生间断。
在下一帧是转换帧的情况下，我们按照下文可见的内容区分两种情况。切记，转换帧的解码不仅以当前帧分类为“转换帧”为基础，而且，在可能有多重CELP编码速率的情况下，还基于CELP编码（12.8 kHz或16kHz）类型的指示。因此：
- 如果由核心编码器按照第一频率（例如12.8kHz）编码上一CELP帧，由核心编码器按照第二频率（例如16kHz）编码转换CELP子帧，则转换子帧就无法解码，而且，附加信号段使解码单元105能够对通过步骤322的MDCT解码所产生的信号进行重叠相加。例如，在附加段是一半子帧的情况下，可以在重叠相加过程中把介于0至1之间的线性增益应用到第一半MDCT帧，把介于1至0之间的线性增益应用到附加信号段；
- 如果由核心编码器按照相同的频率来编码上一CELP帧和转换CELP子帧，则转换CELP子帧可以解码，并通过解码单元105将其用于数字信号的重叠相加，所述数字信号来自解码转换帧的MDCT解码器104。
附加信号段与解码MDCT帧的重叠相加可由下列公式给出：
其中：
- r是代表所生成的附加段长度的系数，长度等于L/r。关于r没有限制条件，可以选择r，以便附加信号段与编码转换MDCT帧之间充分重叠。例如，r可等于2；
- i是与下一帧样本相对应的时间，介于0与L/r之间；
- L是下一帧的长度（例如20ms）；
- S（i）是添加之后下一帧的样本i的幅值；
- B（i）是通过变换所解码的段样本i的幅值；
- T（i）是数字信号的附加段的样本i的幅值。
在步骤325中，解码器输出在重叠相加之后所得到的数字信号。
在丢失了上一CELP帧之后的当前帧的情况下，本发明还能够生成除了替换帧外的附加段。在某些情况下，尤其是在下一帧是CELP帧的情况下，不采用所述附加段。但是，计算不会导致任何额外的复杂性，因为重复使用前一帧的编码参数。相反，在下一帧是MDCT帧或者转换帧的情况下，其CELP子帧的核心频率与编码上一CELP帧所采用的核心频率不同，所生成并存储的附加信号段使之能够解码下一帧，这在现有技术的解决方案中是无法实现的。
图4展示了示例性计算装置400，所述计算装置可以与CELP编码器103和MDCT编码器104相结合。
装置400包括随机存取存储器404和处理器403，用于存储能够执行如上所述的方法步骤（通过CELP编码器103或者MDCT编码器104执行的）的指令。装置还包括大容量存储器405，用于存储在应用方法之后待保留的数据。装置400进一步包括输入接口401和输出接口406，分别用于接收数字信号帧和传输编码信号帧。
装置400可进一步包括数字信号处理器（DSP）402。
DSP402接收数字信号帧，从而用已知方式使这些帧格式化、解调并放大所述帧。
本发明不只限于上文作为示例所述的实施例；本发明扩展到其它变体。
上文，我们描述了一个实施例，其中，解码器是单独实体。当然，这种解码器可以嵌入任何类型的较大装置中，比如手机、计算机等。
此外，我们还描述了一个实施例，该实施例提出解码器的特殊结构。所提供所述结构仅出于说明性目的。还可以对元件进行不同的设置，而且，分配到这些元件的任务分布也可以有所不同。
Claims (8)
1.适用于解码数字信号的方法，所述数字信号是利用预测编码和变换编码所编码的，所述方法包括下列步骤：
通过一组预测编码参数所编码的前一帧数字信号的预测解码（304）；以及
在检测（302）编码数字信号当前帧的丢失之后，在接收当前帧后的下一帧之前，并因此无论下一帧是利用预测编码所编码的还是利用变换编码所编码的或是转换帧：
通过预测，由编码前一帧的至少一个预测编码参数来生成（312）当前帧的替换帧；
通过预测，由编码前一帧的至少一个预测编码参数来生成（316）数字信号的附加段；
临时储存（317）所述数字信号的附加段；以及
在接收（318）下一帧之后，如果下一帧是利用变换编码所编码的或是从预测编码到变换编码的转换帧，所述方法进一步包括解码（322, 323, 324）使用所述数字信号的附加段的所述下一帧，其中，编码数字信号的下一帧包括通过变换编码的至少一段，并且前一帧是由核心预测编码器以第一频率通过预测编码所编码的，以及，
其中，下一帧是包括由核心预测编码器以第二频率通过预测编码所编码的至少一个子帧的转换帧，且所述第二频率与第一频率不同。
2.根据权利要求1所述的方法，其特征在于，解码下一帧包括重叠相加数字信号的附加段和通过变换编码的所述至少一段的子步骤。
3.根据权利要求1所述的方法，其特征在于，所述下一帧包括表示所采用的核心预测编码的频率的一位。
4.根据前述权利要求中任一项所述的方法，其特征在于，通过预测来生成替换帧的步骤进一步包括更新（313）解码器的内存储器，以及，
其中，通过预测生成数字信号的附加段的步骤包括下列子步骤：
从解码器的存储器向临时存储器（107）进行复制（314），在通过预测生成替换帧的步骤中更新所述解码器的存储器；
利用临时存储器来生成（316）数字信号的附加段。
5.根据权利要求1所述的方法，其特征在于，通过预测生成数字信号的附加段的步骤包括下列子步骤：
通过预测，由编码前一帧的至少一个预测编码参数来生成附加帧；
提取附加帧的一段；以及，
其中，数字信号的附加段与第一半附加帧相对应。
6.非暂时性计算机可读介质，其包括存储在其上的计算机程序，所述计算机程序包括在通过处理器执行指令的情况下用于执行根据前述权利要求中任一项所述方法的这些指令。
7.适用于利用预测编码和变换编码所编码的数字信号的解码器，所述解码器包括：
检测单元（108），用于检测数字信号当前帧的丢失；
预测解码器（103），包括处理器，在检测当前帧的丢失之后，在接收当前帧后的下一帧之前，并因此无论下一帧是利用预测编码所编码的还是利用变换编码所编码的或是转换帧，设置处理器以便执行下列操作：
预测解码通过一组预测编码参数所编码的前一帧数字信号；
通过预测，由编码前一帧的至少一个预测编码参数来生成当前帧的替换帧；
通过预测，由编码前一帧的至少一个预测编码参数来生成数字信号的附加段；
将所述数字信号的附加段临时储存于临时存储器中；
在接收下一帧之后，如果下一帧是利用变换编码所编码的或是从预测编码到变换编码的转换帧，所述预测解码器进一步包括变换解码器，所述变换解码器包括处理器，设置处理器以解码使用所述数字信号的附加段的所述下一帧，所述编码数字信号的下一帧包括通过变换编码的至少一段，并且前一帧是由核心预测编码器以第一频率通过预测编码所编码的，以及，
其中，下一帧是包括由核心预测编码器以第二频率通过预测编码所编码的至少一个子帧的转换帧，且所述第二频率与第一频率不同。
8.根据权利要求7所述的解码器，其特征在于，所述解码器进一步包括解码单元，所述解码单元包括处理器且设置其以便在数字信号的附加段与通过变换编码的所述至少一段之间执行重叠相加。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110612907.3A CN113571070B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1457356A FR3024582A1 (fr) | 2014-07-29 | 2014-07-29 | Gestion de la perte de trame dans un contexte de transition fd/lpd |
| FR1457356 | 2014-07-29 | ||
| CN201580041610.9A CN106575505B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
| PCT/FR2015/052075 WO2016016567A1 (fr) | 2014-07-29 | 2015-07-27 | Gestion de la perte de trame dans un contexte de transition fd/lpd |
| CN202110612907.3A CN113571070B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201580041610.9A Division CN106575505B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113571070A CN113571070A (zh) | 2021-10-29 |
| CN113571070B true CN113571070B (zh) | 2023-09-29 |
Family
ID=51894139
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110612907.3A Active CN113571070B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
| CN201580041610.9A Active CN106575505B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201580041610.9A Active CN106575505B (zh) | 2014-07-29 | 2015-07-27 | Fd/lpd转换环境中的帧丢失管理 |
Country Status (8)
| Country | Link |
|---|---|
| US (2) | US10600424B2 (zh) |
| EP (1) | EP3175444B1 (zh) |
| JP (2) | JP6687599B2 (zh) |
| KR (1) | KR102386644B1 (zh) |
| CN (2) | CN113571070B (zh) |
| ES (1) | ES2676834T3 (zh) |
| FR (1) | FR3024582A1 (zh) |
| WO (1) | WO2016016567A1 (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2980794A1 (en) * | 2014-07-28 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder and decoder using a frequency domain processor and a time domain processor |
| EP2980795A1 (en) | 2014-07-28 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoding and decoding using a frequency domain processor, a time domain processor and a cross processor for initialization of the time domain processor |
| TWI602172B (zh) * | 2014-08-27 | 2017-10-11 | 弗勞恩霍夫爾協會 | 使用參數以加強隱蔽之用於編碼及解碼音訊內容的編碼器、解碼器及方法 |
| CN112967727A (zh) * | 2014-12-09 | 2021-06-15 | 杜比国际公司 | Mdct域错误掩盖 |
| KR101754702B1 (ko) * | 2015-09-03 | 2017-07-07 | 유신정밀공업 주식회사 | 밴드 스프링을 구비한 호스 클램프 |
| US11647241B2 (en) * | 2019-02-19 | 2023-05-09 | Sony Interactive Entertainment LLC | Error de-emphasis in live streaming |
| MX2021009635A (es) * | 2019-02-21 | 2021-09-08 | Ericsson Telefon Ab L M | Estimacion de la forma espectral a partir de coeficientes de mdct. |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101366079A (zh) * | 2006-08-15 | 2009-02-11 | 美国博通公司 | 用于子带预测编码的基于全带音频波形外插的包丢失隐藏 |
| EP2054876A2 (en) * | 2006-08-15 | 2009-05-06 | Broadcom Corporation | Packet loss concealment for sub-band predictive coding based on extrapolation of full-band audio waveform |
| CN101471073A (zh) * | 2007-12-27 | 2009-07-01 | 华为技术有限公司 | 一种基于频域的丢包补偿方法、装置和系统 |
| CN102177544A (zh) * | 2008-10-08 | 2011-09-07 | 法国电信 | 具有预测编码器的临界采样编码 |
| WO2012085451A1 (fr) * | 2010-12-23 | 2012-06-28 | France Telecom | Codage de son à bas retard alternant codage prédictif et codage par transformée |
| CN103109318A (zh) * | 2010-07-08 | 2013-05-15 | 弗兰霍菲尔运输应用研究公司 | 利用前向混迭消除技术的编码器 |
| CN103187066A (zh) * | 2012-01-03 | 2013-07-03 | 摩托罗拉移动有限责任公司 | 处理音频帧以在不同编解码器之间转变的方法和装置 |
| CN103703512A (zh) * | 2011-07-26 | 2014-04-02 | 摩托罗拉移动有限责任公司 | 用于音频编码和解码的方法和装置 |
Family Cites Families (61)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4969193A (en) * | 1985-08-29 | 1990-11-06 | Scott Instruments Corporation | Method and apparatus for generating a signal transformation and the use thereof in signal processing |
| US6006174A (en) * | 1990-10-03 | 1999-12-21 | Interdigital Technology Coporation | Multiple impulse excitation speech encoder and decoder |
| US5907822A (en) * | 1997-04-04 | 1999-05-25 | Lincom Corporation | Loss tolerant speech decoder for telecommunications |
| US6351730B2 (en) * | 1998-03-30 | 2002-02-26 | Lucent Technologies Inc. | Low-complexity, low-delay, scalable and embedded speech and audio coding with adaptive frame loss concealment |
| WO2000054512A1 (en) * | 1999-03-05 | 2000-09-14 | Kabushiki Kaisha Toshiba | Method and apparatus for coding moving picture image |
| US6952668B1 (en) * | 1999-04-19 | 2005-10-04 | At&T Corp. | Method and apparatus for performing packet loss or frame erasure concealment |
| JP2001169281A (ja) * | 1999-12-13 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 動画像符号化装置、および動画像符号化方法 |
| JP2003209845A (ja) * | 2002-01-11 | 2003-07-25 | Mitsubishi Electric Corp | 画像符号化集積回路 |
| US7536305B2 (en) * | 2002-09-04 | 2009-05-19 | Microsoft Corporation | Mixed lossless audio compression |
| JP4331928B2 (ja) | 2002-09-11 | 2009-09-16 | パナソニック株式会社 | 音声符号化装置、音声復号化装置、及びそれらの方法 |
| WO2004084182A1 (en) * | 2003-03-15 | 2004-09-30 | Mindspeed Technologies, Inc. | Decomposition of voiced speech for celp speech coding |
| US20040199276A1 (en) * | 2003-04-03 | 2004-10-07 | Wai-Leong Poon | Method and apparatus for audio synchronization |
| US7596488B2 (en) * | 2003-09-15 | 2009-09-29 | Microsoft Corporation | System and method for real-time jitter control and packet-loss concealment in an audio signal |
| JP4445328B2 (ja) * | 2004-05-24 | 2010-04-07 | パナソニック株式会社 | 音声・楽音復号化装置および音声・楽音復号化方法 |
| US20060088093A1 (en) * | 2004-10-26 | 2006-04-27 | Nokia Corporation | Packet loss compensation |
| US8634413B2 (en) * | 2004-12-30 | 2014-01-21 | Microsoft Corporation | Use of frame caching to improve packet loss recovery |
| US8155965B2 (en) * | 2005-03-11 | 2012-04-10 | Qualcomm Incorporated | Time warping frames inside the vocoder by modifying the residual |
| WO2006125342A1 (fr) * | 2005-05-25 | 2006-11-30 | Lin, Hui | Procede de compression d'information pour fichier audio numerique |
| FR2888699A1 (fr) * | 2005-07-13 | 2007-01-19 | France Telecom | Dispositif de codage/decodage hierachique |
| CN101310329A (zh) * | 2005-10-18 | 2008-11-19 | 诺基亚公司 | 用于重新同步分组音频流的方法和装置 |
| US8620644B2 (en) * | 2005-10-26 | 2013-12-31 | Qualcomm Incorporated | Encoder-assisted frame loss concealment techniques for audio coding |
| US7805297B2 (en) * | 2005-11-23 | 2010-09-28 | Broadcom Corporation | Classification-based frame loss concealment for audio signals |
| WO2007068610A1 (en) * | 2005-12-15 | 2007-06-21 | Thomson Licensing | Packet loss recovery method and device for voice over internet protocol |
| CN101512639B (zh) * | 2006-09-13 | 2012-03-14 | 艾利森电话股份有限公司 | 用于语音/音频发送器和接收器的方法和设备 |
| WO2008049221A1 (en) * | 2006-10-24 | 2008-05-02 | Voiceage Corporation | Method and device for coding transition frames in speech signals |
| CN101833954B (zh) * | 2007-06-14 | 2012-07-11 | 华为终端有限公司 | 一种实现丢包隐藏的方法和装置 |
| CN101325537B (zh) * | 2007-06-15 | 2012-04-04 | 华为技术有限公司 | 一种丢帧隐藏的方法和设备 |
| CN100524462C (zh) * | 2007-09-15 | 2009-08-05 | 华为技术有限公司 | 对高带信号进行帧错误隐藏的方法及装置 |
| CN101802906B (zh) * | 2007-09-21 | 2013-01-02 | 法国电信公司 | 传送误差隐藏的方法和装置、以及数字信号解码器 |
| US8527265B2 (en) * | 2007-10-22 | 2013-09-03 | Qualcomm Incorporated | Low-complexity encoding/decoding of quantized MDCT spectrum in scalable speech and audio codecs |
| CN101588341B (zh) * | 2008-05-22 | 2012-07-04 | 华为技术有限公司 | 一种丢帧隐藏的方法及装置 |
| WO2010000303A1 (en) * | 2008-06-30 | 2010-01-07 | Nokia Corporation | Speech decoder with error concealment |
| EP2311034B1 (en) * | 2008-07-11 | 2015-11-04 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder and decoder for encoding frames of sampled audio signals |
| KR101261677B1 (ko) * | 2008-07-14 | 2013-05-06 | 광운대학교 산학협력단 | 음성/음악 통합 신호의 부호화/복호화 장치 |
| US8463603B2 (en) * | 2008-09-06 | 2013-06-11 | Huawei Technologies Co., Ltd. | Spectral envelope coding of energy attack signal |
| AR075199A1 (es) * | 2009-01-28 | 2011-03-16 | Fraunhofer Ges Forschung | Codificador de audio decodificador de audio informacion de audio codificada metodos para la codificacion y decodificacion de una senal de audio y programa de computadora |
| US8457975B2 (en) * | 2009-01-28 | 2013-06-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Audio decoder, audio encoder, methods for decoding and encoding an audio signal and computer program |
| JP4977157B2 (ja) * | 2009-03-06 | 2012-07-18 | 株式会社エヌ・ティ・ティ・ドコモ | 音信号符号化方法、音信号復号方法、符号化装置、復号装置、音信号処理システム、音信号符号化プログラム、及び、音信号復号プログラム |
| US20110046761A1 (en) * | 2009-08-19 | 2011-02-24 | Paul Frederick Titchener | Recorded Media Enhancement Method |
| WO2011048117A1 (en) * | 2009-10-20 | 2011-04-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio signal encoder, audio signal decoder, method for encoding or decoding an audio signal using an aliasing-cancellation |
| US8442837B2 (en) * | 2009-12-31 | 2013-05-14 | Motorola Mobility Llc | Embedded speech and audio coding using a switchable model core |
| US8321216B2 (en) * | 2010-02-23 | 2012-11-27 | Broadcom Corporation | Time-warping of audio signals for packet loss concealment avoiding audible artifacts |
| US8428936B2 (en) * | 2010-03-05 | 2013-04-23 | Motorola Mobility Llc | Decoder for audio signal including generic audio and speech frames |
| US8423355B2 (en) * | 2010-03-05 | 2013-04-16 | Motorola Mobility Llc | Encoder for audio signal including generic audio and speech frames |
| CN103282958B (zh) * | 2010-10-15 | 2016-03-30 | 华为技术有限公司 | 信号分析器、信号分析方法、信号合成器、信号合成方法、变换器和反向变换器 |
| PL2676265T3 (pl) * | 2011-02-14 | 2019-09-30 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Urządzenie i sposób do kodowania sygnału audio z stosowaniem zrównanej części antycypacji |
| DE102011088519A1 (de) * | 2011-12-14 | 2013-06-20 | Metabowerke Gmbh | Stator für einen Elektromotor sowie Verfahren zur Herstellung eines Stators für einen Elektromotor |
| US9053699B2 (en) * | 2012-07-10 | 2015-06-09 | Google Technology Holdings LLC | Apparatus and method for audio frame loss recovery |
| US9123328B2 (en) * | 2012-09-26 | 2015-09-01 | Google Technology Holdings LLC | Apparatus and method for audio frame loss recovery |
| US9129600B2 (en) * | 2012-09-26 | 2015-09-08 | Google Technology Holdings LLC | Method and apparatus for encoding an audio signal |
| CN103714821A (zh) * | 2012-09-28 | 2014-04-09 | 杜比实验室特许公司 | 基于位置的混合域数据包丢失隐藏 |
| US9661340B2 (en) * | 2012-10-22 | 2017-05-23 | Microsoft Technology Licensing, Llc | Band separation filtering / inverse filtering for frame packing / unpacking higher resolution chroma sampling formats |
| CN103854649B (zh) * | 2012-11-29 | 2018-08-28 | 中兴通讯股份有限公司 | 一种变换域的丢帧补偿方法及装置 |
| BR112015018040B1 (pt) * | 2013-01-29 | 2022-01-18 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Ênfase de baixa frequência para codificação com base em lpc em domínio de frequência |
| JP6201043B2 (ja) * | 2013-06-21 | 2017-09-20 | フラウンホーファーゲゼルシャフト ツール フォルデルング デル アンゲヴァンテン フォルシユング エー．フアー． | エラー封じ込め中の切替音声符号化システムについての向上した信号フェードアウトのための装置及び方法 |
| CN103456307B (zh) * | 2013-09-18 | 2015-10-21 | 武汉大学 | 音频解码器中帧差错隐藏的谱代替方法及系统 |
| US10390034B2 (en) * | 2014-01-03 | 2019-08-20 | Microsoft Technology Licensing, Llc | Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area |
| WO2015131330A1 (en) * | 2014-03-04 | 2015-09-11 | Microsoft Technology Licensing, Llc | Encoding strategies for adaptive switching of color spaces, color sampling rates and/or bit depths |
| US20150264357A1 (en) * | 2014-03-11 | 2015-09-17 | Stmicroelectronics S.R.L. | Method and system for encoding digital images, corresponding apparatus and computer program product |
| CN105099949A (zh) * | 2014-04-16 | 2015-11-25 | 杜比实验室特许公司 | 基于对延迟抖动和对话动态的监视的抖动缓冲器控制 |
| EP2980797A1 (en) * | 2014-07-28 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio decoder, method and computer program using a zero-input-response to obtain a smooth transition |
-
2014
- 2014-07-29 FR FR1457356A patent/FR3024582A1/fr active Pending
-
2015
- 2015-07-27 WO PCT/FR2015/052075 patent/WO2016016567A1/fr active Application Filing
- 2015-07-27 JP JP2017504685A patent/JP6687599B2/ja active Active
- 2015-07-27 EP EP15757533.3A patent/EP3175444B1/fr active Active
- 2015-07-27 CN CN202110612907.3A patent/CN113571070B/zh active Active
- 2015-07-27 CN CN201580041610.9A patent/CN106575505B/zh active Active
- 2015-07-27 KR KR1020177005826A patent/KR102386644B1/ko active IP Right Grant
- 2015-07-27 ES ES15757533.3T patent/ES2676834T3/es active Active
- 2015-07-27 US US15/329,428 patent/US10600424B2/en active Active
-
2020
- 2020-02-05 US US16/782,539 patent/US11475901B2/en active Active
- 2020-02-13 JP JP2020022302A patent/JP7026711B2/ja active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101366079A (zh) * | 2006-08-15 | 2009-02-11 | 美国博通公司 | 用于子带预测编码的基于全带音频波形外插的包丢失隐藏 |
| EP2054876A2 (en) * | 2006-08-15 | 2009-05-06 | Broadcom Corporation | Packet loss concealment for sub-band predictive coding based on extrapolation of full-band audio waveform |
| CN101471073A (zh) * | 2007-12-27 | 2009-07-01 | 华为技术有限公司 | 一种基于频域的丢包补偿方法、装置和系统 |
| CN102177544A (zh) * | 2008-10-08 | 2011-09-07 | 法国电信 | 具有预测编码器的临界采样编码 |
| CN103109318A (zh) * | 2010-07-08 | 2013-05-15 | 弗兰霍菲尔运输应用研究公司 | 利用前向混迭消除技术的编码器 |
| WO2012085451A1 (fr) * | 2010-12-23 | 2012-06-28 | France Telecom | Codage de son à bas retard alternant codage prédictif et codage par transformée |
| CN103384900A (zh) * | 2010-12-23 | 2013-11-06 | 法国电信公司 | 在预测编码与变换编码之间交替的低延迟声音编码 |
| CN103703512A (zh) * | 2011-07-26 | 2014-04-02 | 摩托罗拉移动有限责任公司 | 用于音频编码和解码的方法和装置 |
| CN103187066A (zh) * | 2012-01-03 | 2013-07-03 | 摩托罗拉移动有限责任公司 | 处理音频帧以在不同编解码器之间转变的方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| 可分级视频编码中整帧丢失差错隐藏算法的研究;阎金;《计算机应用研究》;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106575505B (zh) | 2021-06-01 |
| EP3175444B1 (fr) | 2018-04-11 |
| US20170213561A1 (en) | 2017-07-27 |
| ES2676834T3 (es) | 2018-07-25 |
| CN113571070A (zh) | 2021-10-29 |
| CN106575505A (zh) | 2017-04-19 |
| FR3024582A1 (fr) | 2016-02-05 |
| JP7026711B2 (ja) | 2022-02-28 |
| JP2020091496A (ja) | 2020-06-11 |
| US10600424B2 (en) | 2020-03-24 |
| KR20170037661A (ko) | 2017-04-04 |
| KR102386644B1 (ko) | 2022-04-14 |
| WO2016016567A1 (fr) | 2016-02-04 |
| US20200175995A1 (en) | 2020-06-04 |
| JP6687599B2 (ja) | 2020-04-22 |
| US11475901B2 (en) | 2022-10-18 |
| EP3175444A1 (fr) | 2017-06-07 |
| JP2017523471A (ja) | 2017-08-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7488926B2 (ja) | フォワードエイリアシング消去を用いた符号化器 | |
| CN113571070B (zh) | Fd/lpd转换环境中的帧丢失管理 | |
| US9218817B2 (en) | Low-delay sound-encoding alternating between predictive encoding and transform encoding | |
| US9093066B2 (en) | Forward time-domain aliasing cancellation using linear-predictive filtering to cancel time reversed and zero input responses of adjacent frames | |
| KR20120063527A (ko) | 오디오 신호 인코더, 오디오 신호 디코더, 오디오 콘텐츠의 인코딩된 표현을 제공하는 방법, 오디오 콘텐츠의 디코딩된 표현을 제공하는 방법 및 낮은 지연 애플리케이션에 이용하는 컴퓨터 프로그램 | |
| EP2311032A1 (en) | Audio encoder and decoder for encoding and decoding audio samples | |
| US11158332B2 (en) | Determining a budget for LPD/FD transition frame encoding | |
| US9984696B2 (en) | Transition from a transform coding/decoding to a predictive coding/decoding | |
| EP3002751A1 (en) | Audio encoder and decoder for encoding and decoding audio samples |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |