CN101925950A - 音频编码器和解码器 - Google Patents

音频编码器和解码器 Download PDF

Info

Publication number
CN101925950A
CN101925950A CN2008801255814A CN200880125581A CN101925950A CN 101925950 A CN101925950 A CN 101925950A CN 2008801255814 A CN2008801255814 A CN 2008801255814A CN 200880125581 A CN200880125581 A CN 200880125581A CN 101925950 A CN101925950 A CN 101925950A
Authority
CN
China
Prior art keywords
signal
input signal
frame
transform
audio coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2008801255814A
Other languages
English (en)
Other versions
CN101925950B (zh
Inventor
A·比斯沃斯
H·普恩哈根
K·克约尔林
B·雷施
L·F·维勒莫斯
P·H·海德林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dolby International AB
Dolby Sweden AB
Original Assignee
Dolby International AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=39710955&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN101925950(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Dolby International AB filed Critical Dolby International AB
Publication of CN101925950A publication Critical patent/CN101925950A/zh
Application granted granted Critical
Publication of CN101925950B publication Critical patent/CN101925950B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/26Pre-filtering or post-filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • G10L19/035Scalar quantisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Stereo-Broadcasting Methods (AREA)
  • Analogue/Digital Conversion (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及音频编码器和解码器。本发明教示一种新型音频编码系统,其可以在低比特率下良好地编码通用音频和语音信号。本方面提出的音频编码系统包括:线性预测单元,其用于基于自适应滤波器对输入信号进行滤波;变换单元,其用于将滤波后的输入信号帧变换成变换域;量化单元,其用于量化变换域信号;长期预测单元,其用于基于滤波输入信号的先前片段的重构,确定滤波输入信号帧的估计;及变换域信号组合单元,其用于在变换域中组合长期预测估计与变换输入信号,以生成所述变换域信号。

Description

音频编码器和解码器
技术领域
本发明涉及音频信号的编码,具体而言,涉及对不仅限于语音、音乐或者其组合的任何音频信号的编码。
背景技术
在现有技术中,有专门设计为通过将编码基于信号的源模型,即,人的发音系统,来对语音信号进行编码的语音编码器。这些编码器不能处理诸如音乐或任何其他非语音信号之类的任意音频信号。另外,在现有技术中还有通常被称为音频编码器的音乐编码器,它们将编码基于人的听觉系统的构想,而不是基于信号的源模型。这些编码器可以很好地处理任意信号,但是对于低比特率的语音信号,专用的语音编码器提供了优良的音频质量。因此,到目前为止,还不存在用于编码任意音频信号的通用的编码结构,并且当以低比特率操作时,其既能作为针对语音的语音编码器又能作为针对音乐的音乐编码器。
因此,需要一种能改善音频质量和/或降低比特率的增强型音频编码器和解码器。
发明内容
本发明涉及以等同或优于为具体信号而特别定制的系统的质量水平,有效地编码任意音频信号。
本发明涉及音频编码-解码器算法,其包含线性预测编码(LPC)以及经LPC处理的信号进行操作的变换编码器部分两者。
本发明还涉及通过可变的帧尺寸(大小)来有效地利用音频编码器中的比特储存器(reservoir)。
本发明还涉及结合具有可变帧尺寸(size)的变换编码器进行长期预测的操作。
本发明还涉及一种用于编码音频信号并生成比特流的编码器;以及一种用于解码比特流并生成与输入音频信号在感知上无法区分的重构音频信号的解码器。
本发明提供一种音频编码系统,其基于变换编码器并包括来自语音编码器的基础预测模块和整形模块。本发明系统包括:线性预测单元,其用于基于自适应滤波器对输入信号进行滤波;变换单元,其用于将滤波后的输入信号帧变换成变换域;量化单元,其用于量化变换域信号;长期预测单元,其用于基于对滤波输入信号先前段的重构来估计滤波后输入信号的帧;以及变换域信号组合单元,其用于在变换域中组合长期预测估计与变换后的输入信号,以生成输入到量化单元的变换域信号。
该音频编码系统还可包括用于对滤波后输入信号的帧生成时间域重构的反量化和逆变换单元。此外,还可提供长期预测缓冲器,用来存储滤波后输入信号的先前帧的时间域重构。这些单元可布置在自量化单元至长期预测提取单元的反馈环路中,长期预测提取单元在长期预测缓冲器中搜索最佳匹配于滤波后输入信号的当前帧的重构片段(segment)。另外,还可提供长期预测增益估计单元,其调节从长期预测缓冲器选择的片段(段)的增益,以使得该片段最佳地匹配于当前帧。优选地,从变换域内的变换后输入信号中减去该长期预测估计。因此,可提供第二变换单元,用来将所选片段变换成变换域。该长期预测环路还可包括:在反量化之后和逆变换成时间域之前,在变换域中将长期预测估计添加到反馈信号。因此,可使用反向自适应长期预测方案,其在变换域中基于先前帧来预测滤波后输入信号的当前帧。为更加具有效率,如下文针对一些实例所提出的,可以不同的方式来进一步自适应该长期预测方案。
对输入信号进行滤波的自适应滤波器优选地是基于线性预测编码(LPC)分析,其包括产生白化输入信号的LPC滤波器。输入数据的当前帧的LPC参数可由现有技术中已知的算法来确定。LPC参数估计单元可为输入数据帧计算任何适合的LPC参数表达式,例如,多项式、转移函数、反射系数、线谱频率等。用于编码或其它处理的LPC参数表达式的具体类型取决于相应的要求。如本领域的技术人员所知,一些表达式相比于其它操作更加适于某些操作,因此优选用于实施这些操作。线性预测单元可以以第一固定帧长(例如,20毫秒)进行操作。线性预测滤波还可以以扭曲频率轴进行操作,以相对于其它频率选择性地加强某些频率范围,例如,低频。
应用于滤波后输入信号帧的变换优选地是以可变第二帧长进行操作的修正离散余弦变换(MDCT)。音频编码系统可包括窗体(window)序列控制单元,窗体(窗口)序列控制单元通过最小化整个输入信号块(包括数个帧)的编码成本函数(优选地是简化感知熵)的方式,为输入信号块确定用于重合MDCT窗体的帧长。因此,获得了将输入信号块分成具有相应第二帧长的MDCT窗体的最佳分段方式。由此,提出了一种变换域编码结构,其包括语音编码器元件,具有自适应长度的MDCT帧作为除LPC以外的所有处理的唯一基本单元。由于MDCT帧长可取很多不同的值,所以可找到最佳序列并且可避免帧尺寸突变,而这在仅应用小窗体尺寸和大窗体尺寸的现有技术中是普遍的。另外,一些在现有技术方法中用于在小窗体尺寸与大窗体尺寸之间过渡的具有陡沿(锋利的边)的过渡变换窗体没有必要。
优选地,接连MDCT窗体的长度至多以因子2变化,和/或MDCT窗体长度是二元值。更具体地,MDCT窗体长度可以是输入信号块的二元分割。因此,MDCT窗体序列就局限于通过少量比特就容易编码的预定序列。另外,窗体序列具有帧尺寸的平滑过渡,由此排除了帧尺寸的突变。
可提供用于对窗体序列内的MDCT窗体长度和窗体形状进行联合编码的窗体序列编码器。联合编码可去除冗余,并且需要较少的比特。当编码窗体序列的窗体长度和形状时,窗体序列编码器可考虑窗体尺寸限制,以省略可在解码器中重构的不必要信息(比特)。
窗体序列控制单元还可配置为:当搜索使得输入信号块的编码成本函数最小化的MDCT窗体长度序列时,可为窗体长度候选考虑由长期预测单元生成的长期预测估计。在该实施例中,当确定MDCT窗体长度从而使应用于编码的MDCT窗体序列得到改善时,长期预测环路关闭。此外,还可提供时间扭曲单元,用于通过根据时间扭曲曲线对滤波后输入信号进行再采样,从而均匀地对准滤波后信号帧中的音高组分(分量)。优选地,可确定时间扭曲曲线来均匀地对准帧内的音高组分(component)。因此,变换单元和/或长期预测单元可以以具有恒定音高的时间扭曲信号进行操作,从而改善信号分析的准确性。
该音频编码系统还可包括以可变速率、以递归方式编码线谱频率或由线性预测单元生成的其它适当LPC参数表达式,以存储和/或传输至解码器。根据一个实施例,提供线性预测内插单元,内插以对应于第一帧长的速率生成的线性预测参数,从而匹配于变换域信号的可变帧长。
根据本发明一个方面,音频编码系统可包括感知建模单元,该感知建模单元通过对为LPC帧由线性预测单元生成的LPC多项式进行啁啾和倾斜处理,从而修改自适应滤波器的特性。通过修改自适应滤波器特性而收到的感知模型可在本系统中用于多种目的。例如,可将其应用为量化或长期预测中的感知权重函数。
本发明的另一个独立方面涉及通过提供各独立的装置来编码输入信号的高频带组分,由此来扩展音频编码器的带宽。根据一个实施例,提供用于编码输入信号高频带组分的高频带编码器。优选地,高频带编码器是频谱频带复制(SBR)编码器。通过高频带编码器对高频带进行的独立编码允许在量化变换域信号时在量化单元中使用不同的量化步长,以便相比于输入信号中属于低频带的组分来编码变换域信号中属于高频带的组分。更具体地,量化器可应用高频带信号组分的较粗量化,其中高频带信号组分同样也是由高频带编码器进行编码,但这可降低比特率。
根据另一实施例,提供用于将输入信号分成低频带组分和高频带组分的分频单元。然后,通过高频带编码器编码高频带组分,并且将低频带组分输入至线性预测单元并由上文提出的变换编码器来进行编码。优选地,分频单元包括正交镜像滤波器组以及正交镜像滤波器合成单元,其配置为用于对将输入到线性预测单元的输入信号进行下采样。来自正交镜像滤波器组的信号可直接输入到高频带编码器。当高频带编码器是可由正交镜像滤波器组直接馈送信号的频谱频带复制编码器时,这尤其有用。另外,正交镜像滤波器组与正交镜像滤波器合成单元的组合可用作下频带组分的额外下采样器。
低频带与高频带之间的界限可以是可变的,且分频单元可动态地确定低频带与高频带之间的交越(crossover)频率。这允许(例如)基于输入信号性质和/或编码器带宽要求进行自适应频率分配。
根据另一个方面,音频编码系统可包括将高频带组分转换成低通信号的第二正交镜像滤波器合成单元。可通过基于变换的第二编码器(可能地,具有低解析度,即较大量化步长)来编码该经过下调制的高频范围。当高频带还由其它装置(例如,频谱频带复制编码器)进一步编码时,这尤其有用。那么,组合这两种方式来编码高频带可更为有效。
涵盖相同频率范围的不同信号表达式可通过信号表达式组合单元来组合,该表达式组合单元利用信号表达式中的相关性来降低必要的比特率。表达式组合单元还可生成指示信号表达式如何被组合的信令数据。该信令数据可存储或传输至解码器,以重构来自不同信号表达式的编码音频信号。
还可在长期预测单元中提供频谱带复制单元以将能量引入长期预测估计的高频组分中。这可用于改善长期预测的效率。
根据一个实施例,将具有左右输入信道的立体声信号输入至参数立体声单元,以计算包括输入信号单音表达式的立体声信号参数立体声表达式。然后,可将单音表达式输入至上文提出的LPC分析单元及后续的变换编码器。因此,获得了一种编码立体声信号的有效手段,其中基本上仅对单音表达式进行波形编码并且通过低比特率参数立体声表达式实现了立体声效果。
编码信号质量的进一步增强涉及使用谐波预测分析单元来预测频域/MDCT域中的谐波信号组分。
本发明另一独立的编码器特殊方面涉及处理可变帧尺寸的比特储存器。在能编码可变长度帧的音频编码系统中,是通过在各个帧之间分配可用比特的方式来控制比特储存器。鉴于个别帧以及限定尺寸的比特储存器存在合理的难度度量(measure),因此与所需恒定比特率的某一偏差可实现更好的总体质量,而不违背比特储存器尺寸所施加的缓冲器要求。本发明将使用比特储存器的概念扩展到以可变帧尺寸对通用音频编码解码器进行比特储存器控制。因此,音频编码系统可包括比特储存器控制单元,用于以基于帧长及帧的难度度量(测度)来确定许可用于编码滤波信号帧的比特数。优选地,比特储存器控制单元具有用于不同帧难度度量和/或不同帧尺寸的单独控制方程式。可归一化不同帧尺寸的难度度量,以使得可以更加容易地对它们进行比对。为控制可变速率编码器的比特分配,比特储存器控制单元优选地将许可的比特控制算法的允许下限设定为最大允许帧尺寸的平均比特数。
本发明还涉及这个方面:在变换编码器中量化MDCT线。不管编码器使用LPC分析还是使用长期预测,这个方面都适用。这种提出的量化策略是根据输入信号的特性(例如,变换帧尺寸)进行调整的。这表明,量化单元可基于变换单元所应用的帧尺寸来决定是通过基于模型的量化器,还是通过非基于模型的量化器来编码变换域信号。优选地,量化单元配置为通过基于模型的熵约束量化的方式、以小于阈值的帧尺寸来编码帧的变换域信号。该基于模型的量化可根据分类的参数进行调整。大尺寸帧可由(例如)标量量化器、通过(例如)AAC编码解码器中使用的(例如)基于Huffman的熵编码来量化。
本发明优选实施例的另一方面是在MDCT线的不同量化方法之间进行切换。通过对不同变换尺寸使用不同的量化策略,编码解码器可在MDCT域中进行所有的量化和编码,而无需具有与变换域编码解码器并联或串联运行的专用时间域语音编码器。本发明教示了,对于其中存在LTP增益的语音类信号,优选地使用短变换和基于模型的量化器对该信号进行编码。基于模型的量化器尤其适用于短变换,并且如稍后概述的,其给出时间域语音专用矢量量化器(VQ)的优势,而仍操作于MDCT域中,并且不要求输入信号是语音信号。换句话说,当基于模型的量化器与LTP结合用于短变换时,可保持专用时间域语音编码器VQ的效率,而同时又不丧失通用性并且不离开MDCT域。
另外,对于较为静止的音乐信号,优选地是使用相对较大尺寸的变换(这在音频编码解码器中普遍使用),以及能利用由大尺寸变换所区分稀疏谱线的优势的量化方案。因此,本发明教示了使用这类量化方案来进行长变换。
因此,根据帧尺寸来切换量化策略使得编码解码器通过简单地选择变换尺寸就能既保持专用语音编码解码器的性质,又能保持专用音频编码解码器的性质。这避免了现有技术系统中在低速率下力图将语音信号和音频信号处理得同样好的全部问题,这是因为这类系统都会不可避免地遇到有效组合时间域编码(语音编码器)与频域编码(音频编码器)的问题和困难。
根据本发明另一方面,量化使用自适应步长尺寸。优选地,变换域信号组分的量化步长尺寸是基于线性预测和/或长期预测参数来进行自适应的。量化步长尺寸还可配置为依据于频率。在本发明实施例中,量化步长尺寸是基于如下中的至少一个来确定:自适应滤波器的多项式、编码速率控制参数、长期预测增益值以及输入信号方差。
本发明另一方面涉及长期预测(LTP),更具体来说,涉及MDCT域中的长期预测、MDCT帧自适应LTP及MDCT加权的LTP搜索。无论变换编码器上游是否存在LPC分析,这些方面都适用。
根据一个实施例,长期预测单元包括用于确定滞后值的长期预测提取器,该滞后值指定了滤波信号中的最佳适合于滤波信号当前帧的重构片段。长期预测增益估计器可估计应用于滤波信号的所选片段信号的增益值。优选地,确定滞后值和增益值以便最小化与长期预测估计和变换输入信号在感知域内的差有关的失真准则。该失真准则可与长期预测估计和变换输入信号在感知域内的差有关。优选地,通过搜索感知域内的滞后值和增益值来最小化该失真准则。当最小化失真准则时,可将修改后的线性预测多项式应用为MDCT域均衡增益曲线。
长期预测单元可包括变换单元,用于将来自LTP缓冲器的片段的重构信号变换成变换域。为有效地实施MDCT变换,该变换优选地是IV型离散余弦变换。
当滞后值小于MDCT帧长时,可使用虚拟矢量来生成重构信号的扩展片段。虚拟矢量优选地由叠入-展开的迭代过程来生成,以精化(细化)重构信号的生成片段。因此,在长期预测的滞后搜索过程期间,就生成了重构信号的尚不存在的片段。
当变换单元以时间扭曲信号进行操作时,可基于时间扭曲曲线对长期预测缓冲器中的重构信号进行再采样。这使得时间扭曲LPT提取与时间扭曲MDCT相匹配。
根据一个实施例,可提供用于编码长期预测滞后值和增益值的可变速率编码器,以实现低比特率。此外,长期预测单元还可包括噪声矢量缓冲器和/或脉冲矢量缓冲器,以增强对于(例如)噪音信号或瞬态信号的预测准确性。
可提供用于对音高相关的信息(例如,长期预测参数、谐波预测参数及时间扭曲参数)进行联合编码的联合编码单元。联合编码还可通过利用这些参数内的相关性来降低必要的比特率。
本发明的另一方面涉及用于解码由上述编码器实施例所生成的比特流的音频解码器。该音频解码器包括:用于对输入比特流的帧进行反量化的反量化单元;用于对变换域信号进行逆变换的逆变换单元;用于确定反量化帧的估计的长期预测单元;用于在变换域内进行组合的变换域信号组合单元;用于生成变换域信号的长期预测估计和反量化帧;以及用于对逆变换的变换域信号进行滤波的线性预测单元。
另外,该解码器可包括上文关于编码器公开的许多方面。一般,解码器将镜像编码器的操作,尽管一些操作仅在编码器中实施,并且在解码器中没有对应的组件。因此,除非另有规定,否则关于编码器公开的内容被视为同样适用于解码器。
本发明的上述方面可实施为装置、设备、方法或在可编程器件上操作的计算机程序。本发明的方面还可实施为信号、数据结构和比特流。
因此,本申请会进一步公开音频编码方法和音频解码方法。示例性音频编码方法包括如下步骤:基于自适应滤波器对输入信号进行滤波;将滤波输入信号帧变换成变换域;量化变换域信号;基于滤波输入信号的先前片段的重构,估计滤波输入信号的帧;以及在变换域中,组合长期预测估计和变换输入信号,以生成变换域信号。
示例性音频解码方法包括如下步骤:去量化输入比特流的帧;对变换域信号进行逆变换;确定对去量化帧的估计;在变换域中,组合长期预测估计和去量化帧,以生成变换域信号;对逆变换的变换域信号进行滤波;以及输出重构后的音频信号。
这些只是本申请教导的优选的音频编码/解码方法和计算机程序的示例,并且本领域的技术人员可从下文关于示例性实施例的描述获得这些实例。
附图说明
现将参照附图,以说明性实例的方式,而非限定本发明范围或精神的方式描述本发明,其中:
图1显示根据本发明的编码器和解码器的一个优选实施例;
图2显示根据本发明的编码器和解码器的更详细的图示;
图3显示根据本发明的编码器的另一实施例;
图4显示根据本发明的编码器的一个优选实施例;
图5显示根据本发明的解码器的一个优选实施例;
图6显示根据本发明的MDCT线编码和解码的一个优选实施例;
图7显示本发明的结合SBR编码器的一个优选实施例;
图8显示立体声系统的一个优选实施例;
图9显示根据本发明的核心编码器与高频重构编码的更为复杂整合的一个优选实施例;
图10显示根据本发明的SBR编码与核心编码器的组合的一个优选实施例;
图11显示根据本发明的编码器和解码器的一个优选实施例、以及从一方传输到另一方的相关控制数据的一个实例;
图11a是根据本发明一个实施例的编码器的方面的另一图示;
图12显示根据本发明一个实施例的窗体序列以及LPC数据与MDCT数据之间相关性的实例;
图13显示根据本发明的缩放因子数据与LPC数据的组合;
图14显示根据本发明的将LPC多项式转换(translate)成MDCT增益曲线的一个优选实施例;
图15显示根据本发明的将恒定更新速率的LPC参数映射成自适应MDCT窗体序列数据的一个优选实施例;
图16显示根据本发明的基于变换尺寸和量化器类型对感知加权滤波器计算进行自适应的一个优选实施例。
图17显示根据本发明的取决于帧尺寸对量化器进行自适应的一个优选实施例;
图18显示根据本发明的取决于帧尺寸对量化器进行自适应的一个优选实施例;
图19显示根据本发明的根据LPC和LTP数据对量化步长尺寸进行自适应的一个优选实施例;
图19a显示如何借助Δ-自适应模块从LPC参数和LTP参数导出Δ-曲线;
图20显示根据本发明的利用随机偏移(offset)的基于模型量化器的一个优选实施例;
图21显示根据本发明的基于模型量化器的一个优选实施例;
图21a显示根据本发明的基于模型量化器的另一优选实施例;
图22显示根据本发明的在LTP环路中使用SBR模块的一个优选实施例;
图23a示意地显示根据本发明一个实施例的MDCT变换的相邻窗体。
图23b描述本发明的使用四个不同MDCT窗体形状的一个实施例;
图23c描述根据本发明一个实施例的窗体序列编码方法的一个实例;
图24显示根据本发明的MDCT域内的谐波预测的一个优选实施例;
图25显示根据本发明的LTP提取精化过程;
图25a显示MDCT自适应的LTP提取过程;
图25b显示初始的LTP提取信号的迭代精化;
图25c显示精化单元的一个可选实施方案;
图25d显示精化单元的另一可选实施方案;
图26显示根据本发明的组合用于谐波预测、LTP和时间扭曲的控制数据的一个优选实施例;
图27显示根据本发明的通过噪声和脉冲缓冲器扩展LTP搜索的一个优选实施例;
图28a显示比特储存器控制的基本概念;
图28b显示根据本发明的可变帧尺寸的比特储存器控制的概念;
图29显示根据本发明的以时间扭曲MDCT为背景的LTP搜索和应用;
图29a显示时间扭曲MDCT分析的效果;
图30显示根据本发明的在MDCT域和QMF域中的组合SBR。
具体实施方式
下文所述实施例仅为举例说明本发明关于音频编码器和解码器的原则。应理解的是,本文所述布置和细节的修改和变化对于本领域的技术人员很明显。因此,本发明意图在于仅由权利要求书的范围来限定,而不由通过描述和解释本文实施例而提出的具体细节来限定。相似的实施例组件由相似的附图标记来表示。
在图1中,显示了编码器101和解码器102。编码器101获取时间域输入信号并产生随后发送至解码器102的比特流103。解码器102基于接收的比特流103产生输出波形。该输出信号在心理声学上与原始输入信号相似。
图2中显示了编码器200和解码器210的一个优选实施例。编码器200中的输入信号通过LPC(线性预测编码)模块201,LPC模块201为具有第一帧长和对应线性预测参数的LPC帧生成白化残余信号。另外,增益归一化可包含在LPC模块201中。来自LPC的残余信号由以第二可变帧长进行操作的MDCT(修正离散余弦变换)模块202变换成频域。图2所示的编码器200中包括了LTP(长期预测)模块205。LTP将在本发明的另一实施例中进一步详述。MDCT线经过量化203并且也经过去量化204,以便给LTP缓冲器馈送供解码器210使用的解码输出的副本。由于量化失真,所以该副本被称为是相应输入信号的重构。图2下半部分中显示了解码器210。解码器210获取已量化的MDCT线,对其进行去量化211,添加来自LTP模块214的贡献,并进行逆MDCT变换212,之后是LPC合成滤波器213。
上述实施例的一个重要方面是:尽管LPC具有其自身的帧尺寸(在一个实施例中恒定)且LPC参数也经过编码,但MDCT帧是用于编码的唯一基础单元。该实施例由变换编码器开始,并引入来自语音编码器的基本预测和整形模块。如将在稍后讨论的,MDCT的帧尺寸是可变的,并且通过使得简化的感知熵成本函数最小化来确定整个块的最佳MDCT窗体序列,由此使可变帧尺寸与输入信号块自适应。这允许缩放,以保持最佳的时间/频率控制。此外,这种提出的统一结构避免了不同编码范例的切换组合或分层组合。
图3中更加详细地示意描述了编码器300的部分。从图2编码器中的LPC模块201输出的白化信号被输入至MDCT滤波器组302。任选地,MDCT分析可以是确保信号音高(如果该信号是周期性的,具有很好定义的音高)在MDCT变换窗体上保持恒定的时间扭曲MDCT分析。
图3中更加详细地描述了LTP模块310。LTP模块310包括保存着先前输出信号片段的重构时间域样本的LTP缓冲器311。LTP提取器312根据当前输入片段在LTP缓冲器311中找出最佳匹配的片段。在从当前正输入到量化器303的片段减去该增益值之前,增益单元313将适合的增益值应用到该片段。明显地,为了在量化之前进行减法运算,LTP提取器312同样将所选的信号片段变换到MDCT域。当组合先前重构的输入信号片段与变换的MDCT域输入帧时,LTP提取器312会搜索使感知域内的误差函数最小化的最佳增益值和滞后值。例如,来自LTP模块310的变换后的重构片段与变换输入帧(即,减法之后的残余信号)之间的均方误差(MSE)函数被优化。该优化可在感知域内实施,其中频率组分(即,MDCT线)根据其感知重要性进行加权。LTP模块310在MDCT帧单元中进行操作,并且,例如对于在量化模块303中的量化,编码器300一次考虑一个MDCT帧残余。可在感知域内实施滞后和增益搜索。任选地,LTP 10可以具有频率选择性,即根据频率对增益和/或滞后进行适应。图中显示了反量化单元304和逆MDCT单元306。稍后将解释MDCT可以时间扭曲。
图4中显示编码器400的另一实施例。除了图3以外,为清楚起见,图4中包含LPC分析401。图中显示用于将所选信号片段变换到MDCT域的DCT-IV变换414。另外,还显示了为LTP片段选择计算最小误差的数种方式。除了图4中所示的最小化残余信号(图4中表示为LTP2)以外,图4中还显示了在逆变换到存储在LTP缓冲器411中的重构时间域信号之前,最小化变换输入信号与反量化MDCT域信号之间的差(指示为LTP3)。该MSE函数的最小化会将LTP贡献引向变换输入信号与存储在LTP缓冲器411中的重构输入信号的最佳相似度(尽可能)。另一可选误差函数(指示为LTP 1)是基于这些信号在时间域内的差。在该情况下,最小化LPC滤波输入帧与在LTP缓冲器411中的对应时间域重构之间的MSE。有利地,基于MDCT帧尺寸来计算MSE,MDCT帧尺寸可能不同于LPC帧尺寸。另外,量化器和去量化器块由频谱编码块403和频谱解码块404(“Spec enc”和“Spec dec”)替代,如图6中所示,频谱编码块403和频谱解码块404可包含除量化以外的额外模块。同样,MDCT和逆MDCT可时间扭曲(WMDCT、IWMDCT)。
图5中显示了本发明所提出的解码器500。来自所接收比特流的频谱数据经过反量化511,并且添加由LTP提取器从LTP缓冲器515提供的LTP贡献。图中也显示了解码器500中的LTP提取器516和LTP增益单元517。这些合计的MDCT线由MDCT合成模块合成到时间域,且时间域信号由LPC合成滤波器513进行频谱整形。任选地,MDCT合成可以是时间扭曲的MDCT,和/或LPC合成滤波可以是频率扭曲。
频率扭曲的LPC是基于频率轴的非均匀采样,以便在确定LPC滤波器参数时允许对LPC误差贡献进行频率选择控制。虽然平常的LPC是基于在线性频率轴上最小化MSE以使得LPC多项式在频谱波峰区域内基本上准确,然而在确定LPC滤波器参数时,频率扭曲的LPC允许频率选择集中。例如,当以较高带宽(例如,16或24kHz的采样速率)进行操作时,扭曲频率轴允许将较低频带上的LPC多项式准确性集中直至4kHz。
图6中将更加详细地描述图4的频谱解码块403和频谱编码块404。图中显示在右边的频谱编码块603在一个实施例包括谐波预测分析模块610、TNS分析(时间噪声整形)模块611、之后是MDCT线的比例因子缩放模块612、以及最后是Enc线模块613中的线的量化和编码。显示于图中左边的解码器的频谱解码块604进行该逆过程,即,所接收的MDCT线在Dec线模块620进行去量化,且由比例因子(SCF)缩放模块621来取消缩放。下文将解释应用TNS合成622和谐波预测合成623。
图7中描述本发明的另一优选实施例。除了已描述的LPC 701、MDCT量化704和LTP 705以外,增加了QMF分析模块710和QMF合成模块711以及SBR(频谱频带复制)模块712。QMF(正交镜像滤波器)滤波器组具有某一数量的子带,在该具体实例中为64。复杂的QMF滤波器组允许对子带进行独立操控,并不会引入频域假像而高于在使用原型滤波器的情况下的假像拒斥水平。在该具体实例32中,然后将某一数量的较低(频率)子带合成到时间域,从而通过因子2形成下采样信号。如前所述,这就是输入到编码器模块的输入信号。使用QMF分析和合成模块作为再采样器,确保了LPC仅在减小后的带宽上操作,后续的变换编码器也在该带宽上进行编码。将较高32的子带发送至从高频带原始信号提取相关SBR参数的SBR编码器模块712。可选地,将输入信号供应至QMF分析模块,其进而连接至SBR编码器和下采样模块,如前所述下采样模块产生用于变换编码器模块的下采样信号。
SBR(频谱频带复制)提供了一种编码频谱中高频部分的有效方式。SBR通过音频信号的低频来再生成音频信号的高频、以及少量的附加控制信息。由于SBR方法能够减小核心编码器的带宽,并且SBR技术对频率范围进行编码所需的比特率显著少于波形编码器,所以通过降低分配给波形核心编码器的比特率可实现编码增益,同时保持全音频带宽。当然,通过降低核心编码器与SBR部分之间的交越(crossover)频率,这给出了几乎连续地降低总数据率的可能性。
通过对量化噪声进行整形,使其始终被信号所掩蔽,感知音频编码器可降低比特率。这会导致很低的信噪比,但只要保持量化噪声低于掩蔽曲线,这不会有太大影响。该量化所代表的失真是听不见的。然而,当以低比特率进行操作时,将超出掩蔽阈值,并且失真变得听得见。感知音频编码器能采用的一种方法是对该信号进行低通滤波,即,仅编码该频谱的部分,只因为没有足够的比特来编码信号的整个频率范围。SBR算法对于这种情况是非常有益的,因为SBR能够以低比特率实现全音频带宽。
SBR解码的概念包括如下几个方面:
·通过从低频带复制低通信号排除低频,来完成高频带再生成。
·将频谱包络信息从编码器发送到解码器,确保重构的高频带的粗频谱包络正确。
·还可将设计为补偿高频重构缺点的附加信息从编码器传输至解码器。
·另外的手段(例如,反向滤波、噪声和正弦添加,所有这些手段都由所传输的信息来引导)可补偿任何频带扩展方法的源自低频带与高频带之间存在的偶尔基本差异的缺点。
在图8中,通过如下方式,本发明的一个实施例扩展到立体声:添加两个用于左和右信道的QMF分析滤波器组820、821、以及称为参数立体声(PS)模块的旋转模块830,旋转模块830通过QMF域内的两个输入信号再生成了两个新的信号以及对应的旋转参数。这两个新的信号代表单缩混信号以及残余信号。可将它们视为左/右立体声信号的中/侧变换,其中中/侧立体声空间经过旋转,从而中信号(即,缩混信号)内的能量最大,且侧信号(即,残余信号)内的能量被最小化。作为一个具体实例,向左或向右展开45度的单音源将(以不同的电平)存在于左信道和右信道两个信道内。现有技术的波形音频编码器通常会选择独立地或作为中/侧表达式地编码左信道,或者会选择独立地或作为中/侧表达式地编码右信道。对于该具体示例,由于无论表达式如何展开的单音源都将存在于两个信道中,所以左/右表达式以及中/侧表达式都将不会是有益的。然而,如果中/侧表达式旋转45度,则展开的单音源将完全结束于旋转后的中信道(在此称其为缩混信号)中,且旋转后的侧信道将为零(在此称为残余信道)。这就提供了相对于普通左/右编码或中/侧编码的编码优势。
随后,可将代表结合所提取的参数的立体声信号的这两个新信号输入到(例如)图7中所示的QMF合成模块和SBR模块。对于低比特率,可低通滤波掉或完全略去该残余信号。该参数立体声解码器将用去相关版本的缩混信号取代略去的残余信号。当然,在此提出的立体声信号处理也可以与本发明其它实施例结合。
更加详细地,PS模块会比较对应时间/频率倾斜(tilt)的两个输入信号(左和右)。倾斜频带被设计为接近心理声学激励缩放,而同时片段的长度很好地匹配于双耳听觉系统的已知限制。基本上,每个时间/频率倾斜,提取代表在感知上最为重要的空间性质的三个参数:
(i)信道间级别差,其代表信道之间的级别差,这类似于混合控制台上的“声象移动器(pan pot)”。
(ii)信道间相位差(IPD),其代表信道之间的相位差。在频域中,该特征几乎可与信道间时间差(ITD)互换。该IPD可由附加整体相位差(OPD)扩大,描述左和右相位调节的分布。
(iii)信道间相关性(IC),其代表信道间的相关性或互关性。尽管第一两个参数与音源方向耦合,但第三个参数更多地与音源的空间扩散性相关联。
在参数提取之后,对输入信号进行缩混以形成单信号。可通过求和过程的普通方法来完成缩混,但优选地可通过包含时间对准和能量保存技术的更为先进的方法来避免缩混中潜在的相位消减。在解码器侧,提供有PS解码模块,该PS解码模块基本上包括对应编码器的逆过程,并基于PS参数来重构立体声输出信号。
图9中显示本发明的另一实施例。此处,输入信号再次由64-子带信道QMF模块920分析。此外,与图7中所示的系统相反,核心编码器覆盖范围与SBR编码器覆盖范围之间的界限是可变的。因此,该系统在模块911中合成为覆盖时间域信号的带宽所需同样多的子带,时间域信号随后由LPC、MDCT和LTP模块901进行编码。其余(频率较高)子带样本被输入至SBR编码器912。
除了早先的示例以外,还可将高频子带样本输入至QMF合成模块920,该QMF合成模块920将较高频率范围合成到低通信号,由此包含下调制高频范围。随后,附加的基于MDCT的编码器930来编码该信号。来自附加的基于MDCT的编码器930可在任选的组合单元940中与SBR编码器输出相组合。产生信令并将信令发送至解码器,该解码器指示哪一部分由SBR编码,哪一部分由基于MDCT的波形编码器编码。这使得能够从SBR编码到波形编码平滑过渡。此外,由于用单独的MDCT变换对信号进行编码,所以能够关于MDCT编码中用于较低频和较高频的变换尺寸进行自由地选择。
图10中显示另一实施例。输入信号被输入至QMF分析模块1010。对应于SBR范围的输出子带输入至SBR编码器1012。LPC分析和滤波是通过覆盖信号的全频范围的方式完成,并且是直接使用输入信号或者使用QMF合成模块1011产生的合成版本的QMF子带信号来完成。当与图8的立体声实施结合时,后者更为有用。LPC滤波信号输入至MDCT分析模块1002,来提供待编码的频谱线。在该本发明的这个实施例中,量化1003布置为使得SBR区域中发生显著较粗的量化(即,频率区域同样由SBR编码器覆盖),从而仅仅覆盖最强的频谱线。该信息被输入至组合单元1040,该组合单元1040在给定量化频谱和SBR编码数据的情况下向解码器提供信令,指示在SBR范围内针对不同的频率范围使用何种信号,即,SBR数据或波形编码数据。
图11中显示本发明编码系统的非常概括的图示。该示例性编码器获取输入信号并产生除其它数据外还包含以下数据的比特流:
●量化MDCT线;
●比例因子;
●LPC多项表达式;
●信号片段能量(例如,信号方差);
●窗体序列
●LTP数据;
根据该实施例的解码器读取所提供的比特流,并产生在心理声学上相似于原始信号的音频输出信号。
图11a是根据本发明一个实施例的编码器1100的各方面的另一图示。编码器1100包括LPC模块1101、MDCT模块1104、LTP模块1105(仅简化显示)、量化模块1103及用于将重构信号馈送回到LTP模块1105的反量化模块1104。此外,还提供了:音高(pitch)估计模块1150,其用于估计确定输入信号的音高;以及窗体序列确定模块1151,其用于确定较大输入信号块(例如,1秒)的最佳MDCT窗体序列。在该实施例中,是基于开路的方法来确定MDCT窗体序列,其中确定最小化编码成本函数(例如,简化感知熵)的MDCT窗体尺寸候选值序列。当搜索最佳MDCT窗体序列时,可选地,可考虑被窗体序列确定模块1151最小化的LTP模块1105对编码成本函数的贡献。优选地,为每一评估的窗体尺寸候选值,确定对对应于窗体尺寸候选值的MDCT帧的长期预测贡献,并且确定相应的编码成本。一般,短的MDCT帧尺寸更加适合于语音输入,而对于音频信号,优选为具有细化频谱解析度的长变换窗体。
感知权重或感知加权函数是基于LPC模块1101所计算的LPC参数来确定的,这在下文将更加详细地解释。将感知权重供应至两者都操作于MDCT域的LTP模块1105和量化模块1103,以根据其相应的感知重要性对频率组分(分量)的误差贡献或失真贡献进行加权。图11a还显示,哪些编码参数会优选地由稍后论述的适当编码方案传输至解码器。
接下来,将论述LPC和MDCT数据的共存、以及LPC在MDCT中的效果的仿真,两者都用于反作用及实际滤波省略。
根据一个实施例,LP模块对输入信号进行滤波,以去除信号的频谱形状,且LP模块随后的输出是频谱平信号。这对(例如)LTP的操作是有利的。然而,知晓原始信号在LP滤波之前是何种频谱形状对于对频谱平信号进行操作的编码解码器的其它部分是有益处的。由于编码器模块在滤波之后对频谱平信号的MDCT变换进行操作,所以本发明教示了通过将所使用的LP滤波器的转移函数(即,原始信号的频谱包络)映射成施加于频谱平信号MDCT表达式的频率点(bin)的增益曲线或均衡曲线,可以将原始信号在LP滤波以前的频谱形状重新施加于频谱平信号的MDCT表达式。相反地,LP模块可略去实际的滤波,并且仅对随后映射到可施加于信号的MDCT表达式的增益曲线的转移函数进行估计,因此不再需要输入信号的时间域滤波。
本发明实施例的一个突出方面是使用对LPC白化后的信号进行灵活窗体分段的方式来操作基于MDCT的变换编码器。这概括于图12中,其中给出了示例性的MDCT窗体序列以及LPC的窗体化。因此,如图清楚显示,LPC以恒定帧尺寸(例如,20ms)进行操作,而MDCT以可变窗体序列(例如,4至128ms)进行操作。这允许独立地选择LPC的最佳窗体长度以及MDCT的最佳窗体序列。
图12进一步显示以第一帧率生成的LPC数据(具体来说,LPC参数)与以第二可变速率生成的MDCT数据(具体来说,MDCT线)之间的关系。图中向下的箭头标志着内插于LPC帧(循环)之间以匹配于对应MDCT帧的LPC数据。例如,为MDCT窗体序列所确定的时间点内插LPC生成的感知加权函数。向上的箭头标志着用于MDCT线编码的精化数据(即,控制数据)。对于AAC帧,该数据通常是比例因子,且对于ECQ帧,该数据通常是方差修正数据等。虚线对实线代表在给定量化器的情况下对于MDCT线编码最重要的数据。向下的双箭头标志着编码谱线。
可利用共存于编码器中的LPC数据和MDCT数据,例如,以便通过将根据LPC参数所估计的感知掩蔽曲线进行考虑的方式来降低编码MDCT比例因子的比特要求。此外,可在确定量化失真时使用由LPC导出的感知加权。如图所示且如下文论述的,取决于所接收数据的帧尺寸(即,对应于MDCT帧尺寸或窗体尺寸),量化器以两种模式进行操作,并生成两种类型的帧(ECQ帧和AAC帧)。
图15显示将恒定速率的LPC数据映射成自适应MDCT窗体序列数据的一个优选实施例。LPC映射模块1500根据LPC更新率来接收LPC参数。另外,LPC映射模块1500接收MDCT窗体序列上的信息。然后,LPC映射模块1500生成LPC到MDCT的映射,例如,将基于LPC的心理声学数据映射成以可变MDCT帧率生成的相应MDCT帧。例如,LPC映射模块针对对应于MDCT帧的时间点内插LPC多项式或相关数据,以将其用作(例如)LTP模块或量化器中的感知权重。
现将参照图13论述基于LPC的感知模型的具体细节。在本发明一个实施例中,LPC模块1301自适应于通过使用16阶-16kHz采样率的信号的线性预测来产生白输出信号。例如,来自图2的LPC模块201的输出是LPC参数估计及滤波之后的残余。如图13左下部示意显示的,经估计的LPC多项式可通过带宽扩展因子进行啁啾,并且此外,在本发明的一个实施方案中,经估计的LPC多项式通过修改对应LPC多项式的第一反射系数而发生倾斜。啁啾通过将多项式的极点向内移动到单位圆内来扩展LPC转移函数中波峰的带宽,从而导致较“软”的波峰。倾斜使LPC转移函数较平坦,以平衡较低和较高频率的影响。这些修改是力图根据可供系统的编码器和解码器边使用的估计LPC参数来生成感知掩蔽曲线A′(z)。下文在图16中展示调整PC多项式的操控细节。
在本发明一个实施方案中,针对LPC残余的MDCT编码操作具有用于控制量化器解析度或量化步长尺寸(以及因此量化所引入的噪声)的比例因子。比例因子估计模块1360在原始输入信号上对这些比例因子进行估计。例如,这些比例因子是从根据原始信号估计的感知掩蔽阈值曲线推导出的。在一个实施例中,可使用单独的频率变换(可能具有不同的频率解析度)来确定掩蔽阈值曲线,但这并不总是必要的。可选地,可从变换模块所生成的MDCT线来估计掩蔽阈值曲线。图13的右下部分示意地显示由比例因子估计模块1360生成的比例因子,来用于对量化进行控制,以使得所引入的量化噪声局限于听不见的失真。
如果LPC滤波器连接在MDCT变换模块的上游,则白化信号被变换到MDCT域。由于该信号具有白频谱,所以由该信号来推导感知掩蔽曲线就不是很适合了。因此,当估计掩蔽阈值曲线和/或比例因子时,可使用生成用于补偿频谱白化的MDCT域均衡增益曲线。这是因为需要对具有原始信号绝对频谱性质的信号来估计比例因子,以正确地对掩蔽进行感知估计。
下文参照图14更加详细地论述由LPC多项式来计算MDCT域均衡增益曲线。
使用上文概述的方法,在编码器与解码器之间传输的数据包含当使用基于模型的量化器时可由它推导出相关感知信息和信号模型的LP多项式以及在变换编码解码器中普遍使用的比例因子。
更详细地,返回到图13,图中的LPC模块1301由输入信号来估计该信号的频谱包络A(z),并推导出该感知表达式A′(z)。另外,通过输入信号来估计通常在基于变换的感知音频编码解码器中使用的比例因子,或者如果在比例因子估计中考虑了LP滤波器的转移函数(如下文图14上下文中描述的),则可以对LP滤波器所产生的白信号来进行估计。然后,如下文概述的,在给定LP多项式的情况下,可在比例因子自适应模块1361中进行比例因子的自适应,以降低传输比例因子所需的比特率。
通常地,将比例因子传输至解码器,且LP多项式也是如此。现在,在比例因子和LP多项式两者都是由原始输入信号估计出的并且其与原始输入信号的绝对频谱性质都有一些相关性的情况下,所以本文提出对两者之间的Δ表达式进行编码,以去除在对它们进行单独传输情况下可能发生的冗余。根据一个实施例,如下地利用该相关性。由于LPC多项式在经过正确啁啾和倾斜时力图表达掩蔽阈值曲线,所以可组合这两个表达式,以使得变换编码器的传输比例因子表达所期望的比例因子与可从传输的LPC多项式推导出的比例因子之间的差。因此,图13中所示的比例因子自适应模块1361计算出由原始输入信号生成的期望比例因子与由LPC导出的比例因子之间的差。这个方面保留了既具备基于MDCT量化器的同时,仍有可能切换到基于模型的量化器的能力;基于MDCT的量化器具有如下的概念:在LPC结构内,普遍使用于变换编码器中的比例因子对LPC残余进行操作;而基于模型的量化器仅由线性预测数据导出量化步长尺寸。
图14显示将LPC多项式转换成MDCT增益曲线的一个优选实施例。如图2所显示的,MDCT对白化信号进行操作,该白化信号是由LPC滤波器1401白化的。为保留原始输入信号的频谱包络,通过MDCT增益曲线模块1470来计算MDCT增益曲线。对于MDCT变换中点所代表的频率,可通过估计LPC滤波器描述的频谱包络的幅值响应来获得MDCT域均衡增益曲线。然后,例如当计算图3所示的最小均方差信号时,或当为比例因子确定(如上参照图13所概述的)估计感知掩蔽曲线时,可将该增益曲线应用于MDCT数据。
图16显示基于变换尺寸和/或量化器的类型来对感知加权滤波器计算进行自适应的一个优选实施例。在图16中,LP多项式A(z)由LPC模块1601来估计。LPC参数修改模块1671接收LPC参数(例如,LPC多项式A(z)),并通过修改LPC参数来生成感知加权滤波器A′(z)。例如,扩展LPC多项式A(z)的带宽并/或使多项式倾斜。自适应啁啾和倾斜模块1672的输入参数是默认的啁啾值和倾斜值ρ和γ。ρ和γ在给出预定规则的情况下是基于所使用的变换尺寸和/或所使用的量化策略Q来修改的。修改后的啁啾参数和倾斜参数ρ′和γ′输入至LPC参数修改模块1671,从而将由A(z)表达的输入信号频谱包络转换成由A′(z)表达的感知掩蔽曲线。
下文中将解释以帧尺寸进行调整的量化策略、及以根据本发明一个实施例的分类参数进行调整的基于模型的量化。本发明的一个方面是针对不同的变换尺寸或帧尺寸,使用不同的量化策略。这显示于图17中,其中帧尺寸是作为使用基于模型的量化器还是使用非基于模型的量化器的选择参数来使用。须注意到,该量化方面独立于本发明公开的编码器/解码器的其它方面,并且同样可在其它编码解码器中应用。非基于模型的量化器的一个实例是在AAC音频编码标准中使用的基于Huffman表格的量化器。基于模型的量化器可以是使用算术编码的熵约束量化器(ECQ)。然而,也可在本发明实施例中使用其它的量化器。此外,在本发明的当前概述的实施例中,所选择的量化器会按照变换尺寸向解码器隐性发送信号。应清楚的是,也可使用其它的信令方式,例如,向解码器显性地发送关于针对具体帧尺寸使用何种量化策略的信息。
根据本发明的一个独立方面,提出了根据帧尺寸在不同量化策略之间进行切换,以在给出的特定帧尺寸的情况下能使用最佳的量化策略。作为一个实例,窗体序列可命令(dictate)针对信号的非常静止的单音音乐片段使用长变换。对于这种使用长变换的特定信号类型,使用能利用信号频谱中的“稀疏”特性(即,很好定义的离散音)的量化策略是非常有益的。
在AAC中与Huffman表格结合使用的量化方法以及同样在AAC中使用的频谱线的分组是非常有益的。然而,反过来,对于语音片段,窗体序列可在给出LTP编码增益的情况下命令(指示)使用短变换。对于该信号类型和变换尺寸,采用如下策略是有益的:不试图寻找或引入频谱中的稀疏性,而是保持宽带能量,其在给定LTP情况下保留原始输入信号的脉冲类特征。
图18给出了所述概念更为一般化的显示,其中将输入信号变换成MDCT域,随后由受到针对MDCT变换所使用的变换尺寸或帧尺寸控制的量化器进行量化。
根据本发明另一方面,量化步长尺寸是根据LPC和/或LTP数据进行自适应的。这允许取决于帧的难度来确定步长尺寸,并且允许控制分配用于对帧进行编码的比特数。图19中给出LPC和LTP数据可以如何控制基于模型的量化的示例。图19的上部分给出MDCT线的示意。下部分绘示了作为频率的函数的量化步长尺寸Δ。由该特定实例清楚的看出,量化步长尺寸随频率增大而增大,即,较高频率引起更多的量化失真。通过图19a中绘示的Δ自适应模块,由LPC和LTP参数来导出Δ曲线。此外,还可通过参照13解释的啁啾和/或倾斜,由预测多项式A(z)来导出Δ曲线。
如下等式给出了由LPC数据导出的优选感知加权函数:
P ( z ) = 1 - ( 1 - τ ) r 1 z - 1 A ( z / ρ )
其中A(z)是LPC多项式,τ是倾斜参数,ρ控制啁啾,且r1是由A(z)多项式计算出的第一反射系数。应注意的是,可对不同的表达式的分类重新计算A(z)多项式,以从多项式提取相关的信息。如果关注频谱的斜率,从而想应用倾斜来抵消频谱的斜率,则优选地可重新计算反射系数的多项式,这是因为第一反射系数代表频谱的斜率。
另外,Δ值可作为输入信号方差σ、LTP增益g以及由预测多项式导出的第一反射系数r1的函数进行自适应。例如,自适应可以基于如下等式:
            Δ′=Δ(1+r1(1-g2))
下文将概述根据本发明一个实施例的基于模型量化器的各方面。图20显示基于模型的量化器的其中一个方面。MDCT线输入至一个使用均匀标量量化器的量化器。另外,随机偏移输入至量化器,并且将随机偏移用作使间隔边界移位的量化间隔的偏移值。该提出的量化器提供矢量量化的优势的同时,还保持了标量量化器的可搜索性。量化器对一组不同的偏移值进行迭代操作,并计算这些偏移值的量化误差。将使得正处于量化的特定MDCT线的量化失真最小化的偏移值(或偏移值矢量)被用于量化。然后,将该偏移值与量化后的MDCT线一同传输至解码器。随机偏移的使用会在去量化后的解码信号中引入噪声填充,并且通过这样做,避免了量化频谱中的频谱缺陷(hole)。这对于低比特率来说尤其重要,在低比特率时,很多MDCT线都会被另外地量化成0值,其会在重构信号的频谱中导致听得见的缺陷。
图21示意性地显示根据本发明一个实施例的基于模型的MDCT线量化器(MBMLQ)。图21的上部分绘示MBMLQ编码器2100。MBMLQ编码器2100获取MDCT帧中的MDCT线或LTP残余的MDCT线(如果该系统中存在LTP)作为输入。MBMLQ使用MDCT线的统计模型,并且源码以逐MDCT帧为基础的方式被自适应为信号性质,产生到比特流的有效压缩。
可以将MDCT线的局部增益估计为MDCT线的RMS值,且可以在输入至MBMLQ编码器2100之前在增益归一化模块2120中归一化MDCT线。局部增益对MDCT线进行归一化,并且局部增益是对LP增益归一化的补充。而LP增益在较大的时间标度内自适应于信号水平的变化,局部增益在较小的时间标度内自适应于信号水平的变化,会改善瞬态声的品质和语音中的开始(on-sets)。局部增益通过固定速率或可变速率编码进行编码并传输至解码器。
可使用速率控制模块2110来控制编码MDCT帧所用的比特数。速率控制指数控制所使用的比特数。速率控制指数指向标称量化器步长尺寸的列表。该表格可以按照步长尺寸以降序来分类。
MBMLQ编码器以一组不同的速率控制指数运行,并且针对所述帧,使用产生的比特计数低于比特储存器控制所给出的许可比特数的速率控制指数。速率控制指数缓慢地改变,并且这可利用来降低搜索的复杂性并用来有效地编码指数。如果是在先前MDCT帧的指数的附近开始测试,则可减少被测的指数组。同样地,如果概率在该指数(例如,由32个步长尺寸的列表)的先前值的附近到达峰值,则可获得指数的有效熵编码,并且平均每MDCT帧使用2个比特来编码速率控制指数。
图21进一步示意地显示MBMLQ解码器2150,其中如果是在编码器2100中估计局部增益,则对MDCT帧进行增益再归一化。
图21a更加详细地示意显示基于模型的熵约束编码器2140。通过输入的MDCT线除以感知掩蔽曲线(优选地由LPC多项式导出)的值,对输入MDCT线进行感知加权,导致加权的MDCT线矢量y=(yi,...,yN)。后续编码的目的是向感知域内的MDCT线引入白量化噪声。在解码器中,应用感知加权的逆,导致遵循感知掩蔽曲线的量化噪声。
现在在量化器的背景下,将随机偏移论述为避免因粗量化而引起的频谱缺陷的方法。如图22中所概述的,避免频谱缺陷的另一方法是在LTP环路中并入SBR模块2212。
在图22中,SBR模块2212在MDCT域中操作,并由较低频再生成高频。与完整的编码器/解码器的SBR系统相反,LTP环路中的SBR模块不需要任何包络调节,这是因为整个操作都在频谱平坦的MDCT域中实施。在LTP环路中放置高频重构模块的优势是:在量化之前减去由高频再生成的信号且在量化之后再将其加上。因此,如果具备用于编码整个频率范围的比特,则量化器将编码该信号以便保留原始高频(因为SBR贡献在量化之前减去且在量化之后加上),且如果比特约束太过于严苛,则量化器将不能产生高频中的能量,且在输出时加上SBR再生成的高频作为“后退”,从而确保高频范围内的能量。
在本发明一个实施例中,LTP环路中的SBR模块是简单的复制(copy up)机制(即,将低频线复制到高频线)。在另一实施例中,使用了谐波高频再生成模块。应注意的是,对于谐波信号,优选的是产生与低带频谱谐波相关的高频频谱的SBR模块,因为量化之前从输入信号减去的高频可能与原始高频很一致并且因此降低了进入量化器的信号的能量,从而使得在给定的某一比特率要求的情况下的量化更容易进行。在第三实施例中,LTP环路中的SBR模块可取决于变换尺寸以及隐性地取决于信号的特性,自适应其再形成高频的方式。
本发明还包含新窗体序列编码格式。根据本发明一个实施例,如图23a、b、c所示,用于MDCT变换的窗体为二元尺寸,且各窗体的尺寸仅可以以因子2来变化。二元变换尺寸在16kHz采样率下为(例如)对应于4、8...、128ms的64、128...、2048样本。一般,我们提出了可变尺寸的窗体,其可呈现在最小窗体尺寸与最大尺寸之间的多个窗体尺寸。在一个序列中,接连的窗体尺寸仅可以以因子2来变化,使得窗体尺寸的序列平滑而不会发生突变变化。该实施例所限定的窗体序列(即,限于二元尺寸并且各窗体的尺寸仅允许以因子2来变化)具有数种优势。首先,不需要特定的开始窗体或停止窗体,即,不需要锐缘(锋利的边)窗体。这保持良好的时间解析度/频率解析度。第二,窗体序列编码变得很有效率,即,向解码器发送关于使用何种特定窗体序列的信号。根据一个实施例,发送关于序列中的下一窗体尺寸增大因子2还是减小因子2的信号仅需要一个比特。当然,在上述约束下,也可能存在其它的有效编码整个窗体尺寸序列的编码模式。最后,窗体序列将始终良好地适合于超帧结构。
当在实界系统中操作编码器时,超帧结构是有利的,其中需要传输某些解码器配置参数,以便能够起动解码器。该数据通常存储在比特流中的描述编码音频信号的标头字段中。为使比特率最小化,并非为每个编码数据帧都传输标头,尤其在本发明提出的系统中,其中MDCT帧尺寸可从非常小变化到非常大。因此,本发明提出将某一数量的MDCT帧一起分组到一个超帧内,其中是在超帧的开头传输标头数据。超帧通常在时间上限定为特定长度。因此,需注意的是要使得MDCT帧尺寸的变化适合于恒定长度、预限定的超帧长度。上述的本发明窗体序列确保了所选的窗体序列始终适合于超帧结构。
图23a显示由MDCT理论给出的对于MDCT变换的相邻窗体的优选兼容性要求。左边的窗体容纳变换尺寸L1,且右边的窗体容纳变换尺寸L2。窗体间的重合支撑于直径的时间间隔上或时间段(期间)D上。对于本发明一个实施例教示的MDCT变换,变换尺寸或可相等L1=L2,或变换尺寸相差因子2,L1=2L2或L2=2L1。图示绘示的是后种情形。此外,作为另一优选的约束,变换尺寸间隔的位置必须通过规则的等距超帧序列的二元分割来获得。即,变换间隔位置必须由从一个超帧间隔开始的一系列分离间隔一半来产生。即使当给出变换尺寸间隔时,仍留有某些选择重合直径D的自由度。根据本发明一个实施例,避免了直径D与邻近变换尺寸L1、L2相比小得非常多的情况,因为锐缘会导致所获得的MDCT变换的频率解析度很差。
图23b示意地显示本发明的使用4个不同MDCT窗体形状的一个实施例。这4个形状表示为如下:
LL:左长-右长重合;
LS:左长-右短重合:
SL:左短-右长重合;
SS:左短-右短重合。
所使用的MDCT窗体是这4个窗体类型的再缩放版本,其中是以等于2的幂为因子再缩放。图23b中时间轴上的刻度标记表示变换尺寸间隔,可以看出,长重合的直径等于变换尺寸,而短重合的直径为变换尺寸的一半。在实际的实施方案中,最大变换尺寸为最小变换尺寸的2N倍,其中N通常等于小于6的整数。此外,对于最小的变换尺寸,仅可考虑LL窗体。
图23c以实例方式描述根据本发明一个实施例的窗体序列编码方法。时间轴的标度被归一化到最小变换尺寸的单元。超帧尺寸为H=16个所述单元,并且超帧的左边缘限定时间标度的起始t=0。此外,为简单起见,假设所允许的最大变换尺寸为4=2N,其中N=2。变换尺寸间隔形成超帧间隔[0、16]的二元部分,间隔由如下7个间隔组成:[0、4]、[4、6]、[6、8]、[8、9]、[9、10]、[10、12]、[12、16],它们分别具有长度4、2、2、1、1、2、4。可以看出,这些长度遵循两个邻近之间的尺寸最多以因子2变化的条件。所有7个窗体都是再缩放图23b中4个基本形状中的一个而获得。
由于变换尺寸保持不变、增倍或减半,所以对那些变换尺寸进行递归编码的第一种方法是通过第三符号沿着窗体序列追踪这种选择。然而,这将导致变换尺寸的过度编码以及窗体形状的含糊描述。有时前者由于使用二元分割的要求而无法增倍变换尺寸。例如,在间隔[4,6]之后,在间隔[6,10](其并不是[0,16]的二元子间隔)中会造成增倍。后者—窗体形状的含糊描述在图23b的实例中仍然存在,这是因为相等尺寸的相邻间隔可共享长重合或共享短重合。这些重合要求可从MDCT理论中得知,且这些重合要求使得能够去假频(alias)滤波器组的消除性质。
另外,根据一个实施例的编码原则如下:对于每个窗体,最大化2个比特被如下定义:
如果变换尺寸大于左重合,b1=1,否则b1=0;
如果右重合小于变换尺寸,b2=1,否则b2=0
换个说法,比特矢量(b1,b2)与图23b的窗体类型的映射如下给出:
Figure BPA00001186230100291
然而,如果可从二元变换间隔的约束或从变换尺寸的限制来推出的一个比特,则不传输这个比特。
返回图23c的特定实例,4个单元的最左边的重合尺寸是通过先前超帧的最终状态或通过独立超帧情况下的绝对传输获得的当前超帧的初始状态。要考虑的第一个比特是最左边窗体的b1。由于间隔[0,4]的长度不大于4,所以该比特的值是0。然而,由于4是该实例考虑的最大变换尺寸,所以略去第一比特。这在第一窗体上方绘示为划叉的0。由于右边重合小于变换尺寸,所以该窗体的第二比特b2=1,如上所述,重合点t=4。接下来,间隔[4,6]在t=4附近具有等于重合的尺寸,因此第二窗体的第一比特是b1=0。t=6附近的重合不小于2,因此下一个比特是0。第三窗体的变换尺寸比特b1具有0值,但在这里较长变换的选择与二元结构不相一致,因此可由所述情形推出这个比特,因此不传输该比特并在图中划叉。该过程继续,直至在t=16处到达超帧的末端,其中短重合的比特是1。在中间处,由于没有使用最短变换尺寸的重合并且由于放大的错误位置,所以间隔上方[9,10]的三个比特被划叉。因此,全部未划叉的比特序列是01000100001011,但在使用编码器和解码器处获得的信息之后,其简化为用于编码7个窗体的9个比特100101011。
对于本领域的技术人员很明显,通过对这些纯描述性比特进行熵编码,可实现比特率的进一步降低。
图24中提出本发明编码器/解码器系统的附加特征。输入信号输入至MDCT分析模块,信号的MDCT表达式输入到谐波预测模块2400中。谐波预测是在给定参数滤波器的情况下沿着频率轴的滤波。在给定音高信息、增益信息以及相位信息的情况下,如果输入信号包含谐波系,则接着可由较低的线预测出较高(频率上)的MDCT线。谐波预测模块的控制参数是音高信息、增益和相位信息。
根据一个实施例,如图25中所概述,使用了MDCT域中的虚拟LTP矢量。图25绘示了包含的两个模块:LTP提取模块2512及LTP精化(refinement)模块2518。LTP的概念是将输出信号的先前片段用于当前片段或帧的解码。在给定最小化编码信号失真的迭代的情况下,使用哪个先前片段是由LTP提取模块2512决定。当在MDCT域中实施LTP时,本发明提供一种将MDCT帧的重合纳入考虑的新方法,即当选择LTP滞后时,使得将经过MDCT分析并且将在当前输出片段的解码过程中使用的先前输出信号的片段包括(由于重合)尚未产生的先前输出片段的部分。
该迭代过程例示如下:从LTP缓冲器开始,通过LTP提取模块2512实施信号的第一提取。第一提取的结果由精化模块2518精化,其目的是当所选的滞后T小于待编码帧的MDCT窗体的时间段时改善LTP信号的质量。首先参照图25a简短地概述对于时间滞后小于分析的帧来精化LTP贡献的迭代过程。在第一图表中,显示了LTP缓冲器中的所选片段,其中MDCT分析窗体超叠加。重合窗体的右边部分不包含可用数据:时间信号的虚线部分。迭代过程通过如下步骤:
1)如MDCT分析所通常进行的叠入重合部分;
2)展开重合部分(请注意,右边的部分起初不包含任何数据,而现在具有展开数据);
3)使窗体向右移位所选的LTP滞后;
4)叠入重合的部分并计算Δ;
5)求Δ与上部图表中的原始LTP片段的和。
该迭代过程优选地进行2至4次。
图25b中更加详细地绘示经MDCT自适应的LTP提取过程,其显示了由LTP提取模块执行的步骤:
a)对格式化的输入信号x(t)进行描述;仅在有限的时间间隔(该时间间隔或为LTP缓冲器的范围、或为当前MDCT帧窗体的范围或为由系统约束给出的某一其它间隔)内,输入信号是已知的。然而,对于操作的定义,假设输入信号是始终已知的。这是通过在间隔以外(信号是已知的)将信号设为0来实现的。
b)对输入信号执行的第一操作是使输入信号移位LTP滞后T;即,
x1(t)=x(t-T)。
c)下一个步骤是应用MDCT窗体w(t)。该窗体由时间段2r1的上升部分和时间段2r2的下降部分以及可能的二者间的恒定部分组成。示例性窗体由虚线图表绘示。窗体的上升部分和下降部分的支撑分别集中在镜像点t1和t2的附近。信号x1(t)逐个点地与窗体相乘得到:
x2(t)=w(t)·x1(t)
再次假设在已知范围[t1-r1,t2+r2]以外,窗体w(t)为0。
关于从x(t)到x2(t)的操作的另一等效观点是执行如下步骤:
( i ) x ~ 2 ( t ) = w ( t + T ) · x ( t )
( ii ) x 2 ( t ) - x ~ 2 ( t - T ) ;
其中步骤(i)相当于与支撑于(t1-r1-T,t2+r2-T)上窗体的窗体化,且步骤(ii)是使结果移位LTP滞后T。
d)将现在窗体化后的信号x2(t)叠入支撑于[t1,t2]上的信号,定义如下:
Figure BPA00001186230100323
对于该所示的实例,符号的值是对应于MDCT变换的既定实施方案的[ε1,ε2]=(-1,1),其它可能性为(1,-1)、(1,1)或(-1,-1)。
e)随后,将叠入的信号x3(t)展开成如下给出的支撑于间隔[t1-r1,t2+r2]上的信号:
Figure BPA00001186230100324
也可将从x2(t)到x4(t)的操作组合成一种操作:加上或减去间隔[t1-r1,t1+r1]和[t2-r2,t2+r2]上的信号部分的镜像图像。
f)最后,将信号x4(t)与MDCT窗体进行窗体化,以产生LTP提取操作的结果:
y(t)=w(t)·x4(t)
对于本技术领域的技术人员很明显,从x1(t)到y(t)的组合操作等效于跟随有MDCT合成的MDCT分析,且这实现了当前MDCT帧子空间的正交投影。
重要的是要注意,在没有重合的情况下,即r1=r2=0,由于d)至f)中操作的缘故,所以x2(t)什么也不会发生。那么,窗体化就由简单地提取间隔[t1,t2]内的信号x1(t)组成。在该情况下,LTP提取模块2512执行与现有技术的LTP提取器所完全的。
图25c显示初始的LTP提取的信号y1(t)的迭代精化。其由如下步骤组成:应用LTP提取操作达N-1次;及将结果添加到初始信号。如果S表示LTP提取操作,则迭代由如下公式定义:
ΔO=y1
Δk=S(Δk-1),k=1,...,N-1;
yk=yk-1k-1,k=2,...,N-1
如果LTP滞后T>max(2r1,2r2),则从图25b可看出,有使得ΔN=0的N。如果T>(r1+r2+t2-t1),则已经有Δ1=0,且可略去精化(细化)。在实际中,N的适合选择是介于2至4的范围。
在没有重合的情况下,即r1=r2=0,所述方法与现有技术方法中的虚拟矢量产生相一致。
图25d显示精化单元的可选实施方案,该精化单元实施如下的迭代:
yK=y1+S(yk-1),k=2...N
在两种实施方案中,来自迭代的最终输出都可写为:
y k = Σ k = 0 N - 1 S k y 1 = Σ k = 1 N S k x
其中x是LTP缓冲器信号。
根据本发明的一个实施例,以可变速率的方式编码LTP滞后和LTP增益。这是有利的,因为:由于对于静止周期信号的LTP效率,所以LTP滞后在有些长的片段上往往是相同的。因此,通过算术编码可对此加以利用,导致可变速率的LTP滞后和LTP增益编码。
类似地,本发明的一个实施例也利用了比特储存器和可变速率编码来进行LP参数的编码。另外,本发明还教示了递归LP编码。
如前文概述的,可使用设计用于改善谐波信号编码的技术。这些技术(例如)为谐波预测、LTP和时间扭曲。所有上述的工具都隐性地或显性地依赖于某种音高或音高相关的信息。在本发明一个实施例中,在给定存在独立性或相关性的情况下,可有效地编码这些不同技术需要的这种不同信息。这显示于图26中,其示意地显示组合单元2600,其用于组合音高以及音高相关的参数(例如,来自时间扭曲的LTP滞后和Δ音高),并且产生组合的音高信令。
如上概述,根据一个实施例的编码解码器可使用MDCT域中的LTP。为改善MDCT域中LTP的性能,可引入两个额外的LTP缓冲器2512、2513。如图27所示,当LTP提取器在LTP缓冲器2511中搜索最佳滞后时,该搜索中也同样包括噪声矢量和脉冲矢量。例如,在存储于LTP缓冲器中的先前片段的信号不适合的瞬变中,可将噪声和脉冲用作预测信号。因此,本发明提出了一种带有脉冲和噪声码本条目的增强型LTP。
本发明的另一方面是针对编码器中的可变帧尺寸来处理比特储存器。本发明教示了比特储存器控制单元。除了作为输入提供的难度度量以外,比特储存器控制单元还接收关于当前帧帧长度的信息。在比特储存器控制单元内使用的难度度量的一个实例是感知熵,或者是能谱的对数。比特储存器控制在其中帧长度可在一组不同帧长度上变化的系统中是重要的。如下文所概述,当计算用于待编码帧的许可比特数时,本发明提出的比特储存器控制单元考虑帧长度。
其中比特储存器限定为:缓冲器中的某一固定量的比特必须大于帧所允许用于给定比特率的平均比特数。如果帧为相同的尺寸,则帧的比特数可能没有变化。在按照实际帧所允许的比特数取出许可用于编码算法的比特之前,比特储存器控制始终观察着比特储存器的水平。因此,满比特储存器意味着比特储存器中可用的比特数等于比特储存器尺寸。在帧编码之后,将从缓冲器减去使用过的比特数,并且比特储存器通过添加表示恒定比特率的比特数而得到更新。因此,如果在编码帧之前比特储存器中的比特数等于每个帧的平均比特数,则存储器是空的。
图28a中绘示比特储存器控制的基本概念。编码器提供用于计算相比于先前帧编码实际帧的难度的手段。对于1.0的平均难度,许可的比特数取决于比特储存器中可用的比特数。根据给定的控制线,如果比特储存器很满,则将从比特储存器中取出多于对应于平均比特率的比特。在空比特储存器的情况下,与平均比特相比更少的比特将被用于编码帧。对于平均难度的较长帧序列,这种行为会让步于平均的比特储存器水平。对于较高难度的帧,控制线可向上移位,具有的效果是允许编码有难度的帧在相同比特储存器水平下使用更多的比特。相应地,对于编码容易的帧,只将图28a中的控制线从平均难度情况移位到容易的难度情况,用于帧的允许的比特数会更少。也可能存在除了简单地移位控制线的其它修改。例如,如图28a中所示,可取决于帧难度改变控制曲线的斜率。
当计算许可比特数时,必须遵守对于比特储存器下端的限制,以便不从缓冲器中取出比允许的比特更多的比特。包括计算图28a中所示控制线的许可比特的比特储存器控制方案仅仅是可能的比特储存器水平和难度度量与许可比特的关系的一个实例。此外,其它控制算法在比特储存器水平的下端普遍存在硬性限制,其防止比特储存器违反空比特储存器的制约,并且在上端也有限制,其中如果编码器要消耗过少数量的比特,则编码器将被迫写入填充比特。
对于能处理一组可变帧尺寸的控制机制,必须对该简单的控制算法进行自适应。必须归一化所使用的难度度量,以使得不同帧尺寸的难度值相兼容。对于每个帧尺寸,会有着许可比特的不同的允许范围,并且由于每个帧的平均比特数对于可变的帧尺寸是不同的,所以每个帧尺寸都具有带有其自身限制的其自身的控制等式。图28b中显示一个实例。对于固定帧尺寸情况的一种重要修改是控制算法的较低允许边界。在取出用于实际帧的比特之前,现在最大允许的帧尺寸的平均比特数是比特储存器水平的最低允许值,而不是对应于固定比特率情况的实际帧尺寸的平均比特数。这是固定帧尺寸的比特储存器控制的主要差别中的一个。该制约确保了随后具有最大可能帧尺寸的帧至少能使用该帧尺寸的平均比特数。
难度度量可按照AAC中的做法,基于(例如)由心理生理学模型的掩蔽阈值导出的感知熵(PE)计算,或者可选地,按照根据本发明一个实施例的编码器的ECQ部分中的做法,基于具有固定步长尺寸的量化的比特计数。可关于可变帧的尺寸来归一化这些值,这可通过简单地除以帧长度来实现,并且结果将是分别每个样本一个比特计数的PE。另一归一化步骤可相对于平均难度发生。出于该目的,可使用过去的帧上的移动平均值,导致对于难度大的帧难度值大于1.0,或对于难度容易的帧难度值小于1.0。在两通编码器的情况下或在大超前性的情况下,也可将未来帧的难度值用于考虑难度度量归一化。
图29概述在本发明提出的编码器和解码器的一个实施例中使用的扭曲MDCT域。如图所示,时间扭曲意指对时间标度进行再采样以实现恒定的音高。该图示的x轴显示具有变化音高的输入信号,且图示的y轴显示再采样后的恒定音高信号。可通过对当前片段使用音高检测算法并且估计片段内的音高演变来确定时间扭曲曲线。然后,使用音高演变信号,对片段中的信号进行再采样,由此生成扭曲曲线。由于确定音高演变仅需要音高差别而不需要绝对的音高信息,所以建立扭曲曲线的算法具有对于音高检测误差是鲁棒性的。
根据本发明一个方面,时间扭曲MDCT与LTP结合使用。在该情况下,LTP搜索是在编码器中的恒定音高片段域中完成。这对于包括数个音高脉冲(其由于音高变化而在MDCT帧中非等距地排列)的长MDCT帧尤其有用。因此,来自LTP缓冲器的恒定音高片段将不会适当地适合于多个音高脉冲上。根据一个实施例,基于当前MDCT帧的扭曲曲线,对LTP缓冲器中的所有片段进行再采样。此外在解码器中,在给出扭曲数据信息的情况下,将LTP缓冲器中的所选片段再采样到当前帧的扭曲数据。可将扭曲信息作为比特流的一部分传输到解码器。
图29的上部显示了窗体(即,LTP缓冲器中的片段)以及当前虚线帧的窗体。图29a中可看到扭曲MDCT分析的效果。展现在左边的是未扭曲分析的频率曲线。由于音高在窗体上变化,所以频率较高的谐波未得到适当地解析。图示的右边是同一信号的频率曲线,尽管利用时间扭曲MDCT分析进行分析。由于音高在分析窗体上恒定,所以较高的谐波得到了更好的解析。
图30中显示根据本发明一个实施例的另一分层式SBR重构方法。根据图7,编码器和解码器可实施为双率系统,其中以一半的采样率对核心编码器进行采样,且以原始采样率采样的高频由高频重构模块处理。假设原始采样率为32kHz,LPC滤波器以16kHz的采样频率进行操作,提供8kHz的白化信号。然而,在给定施加的比特率约束下,随后的核心编码器可能不能编码8kHz的带宽。本发明提供数种手段来处理这种情况。本发明的一个实施例在LPC下(即,基于LPC滤波信号)于MDCT域中应用高频重构,以提供8kHz的带宽。这概述于图30中,其中LPC覆盖了从0至8kHz的频率范围,且0到5kHz的范围由MDCT波形量化器来处理。从5到8kHz的频率范围由MDCT SBR算法来处理,且最后从8到16kHz的范围由QMFSBR算法处理。MDCT SBR是基于如上所述的基于QMF的SBR中使用的复制机制。然而,有利地还可使用其它方法,例如,根据变换尺寸自适应MDCT的SBR方法。
在本发明另一实施例中,取决于帧尺寸和信号性质,对LP频谱的上频率范围进行量化和编码。对于某些帧尺寸和信号,根据上述来编码频率范围,而对于其它变换尺寸,采用稀疏量化和噪声填充技术。
尽管已经参照本发明的特定实施例公开了上述内容,但应理解的是本发明概念并非限于所述的实施例。另一方面,本申请中提出的公开内容将使得本领域的技术人员能够理解并实施本发明。本领域的技术人员应理解,可作出各种修改,而不违背权利要求书排他性提出的本发明的精神和范围。

Claims (40)

1.一种音频编码系统,包括:
线性预测单元,其用于基于自适应性滤波器对输入信号进行滤波;
变换单元,其用于将滤波输入信号帧变换成变换域;
量化单元,其用于量化变换域信号;
长期预测单元,其用于基于所述滤波输入信号的先前片段的重构,确定所述滤波输入信号帧的估计;及
变换域信号组合单元,其用于在所述变换域中组合所述长期预测估计与所述变换输入信号,以生成所述变换域信号。
2.如权利要求1所述的音频编码系统,包括:
反量化和逆变换单元,其用于生成所述滤波输入信号帧的时间域重构;及
长期预测缓冲器,其用于存储所述滤波输入信号的先前帧的时间域重构。
3.如权利要求1或2所述的音频编码系统,其特征在于,
用于对所述输入信号进行滤波的所述自适应性滤波器是基于以第一帧长进行操作并产生白化输入信号的线性预测编码(LPC)分析,且
应用于所述滤波输入信号帧的变换是以可变第二帧长进行操作的修正离散余弦变换(MDCT)。
4.如权利要求3所述的音频编码系统,包括:
窗体序列控制单元,其用于通过最小化输入信号块的编码成本函数,所述编码成本函数优选为简化感知熵,以便为所述输入信号块确定用于重合MDCT窗体的第二帧长。
5.如权利要求4所述的音频编码系统,其特征在于,接连的MDCT窗体的长度至多以因子2改变。
6.如权利要求4或5所述的音频编码系统,其特征在于,所述MDCT窗体长度是所述输入信号块的二元分割。
7.如权利要求4至6中任一项所述的音频编码系统,其特征在于,所述窗体序列控制单元配置为:当搜索最小化所述输入信号块的所述编码成本函数的MDCT窗体长度序列时,考虑所述长期预测单元针对窗体长度候选所生成的长期预测估计。
8.如权利要求4至7中任一项所述的音频编码系统,包括用于对序列中的MDCT窗体长度和窗体形状进行联合编码的窗体序列编码器。
9.如权利要求8所述的音频编码系统,其特征在于,所述窗体序列编码器在对序列的窗体长度和形状进行编码时考虑窗体尺寸的约束。
10.如任一先前权利要求所述的音频编码系统,包括LPC编码器,其用于以可变速率对所述线性预测单元所生成的线谱频率进行递归编码。
11.如任一先前权利要求所述的音频编码系统,包括线性预测内插单元,用于内插以对应于所述第一帧长的速率生成的线性预测参数,以便匹配于以对应于所述第二帧长的速率生成的所述变换域信号的帧。
12.如任一先前权利要求所述的音频编码系统,包括感知建模单元,其通过对所述线性预测单元为LPC帧而生成的LPC多项式进行啁啾和/或倾斜来修改所述自适应性滤波器的特性。
13.如任一先前权利要求所述的音频编码系统,包括时间扭曲单元,其用于通过根据时间扭曲曲线对所述滤波输入信号进行再采样来均匀地对准所述滤波信号帧中的音高组分,其中所述变换单元和所述长期预测单元对时间扭曲信号进行操作。
14.如任一先前权利要求所述的音频编码系统,其特征在于,所述线性预测滤波在扭曲频率轴上进行操作。
15.如任一先前权利要求所述的音频编码系统,包括用于编码所述输入信号的高频带组分的高频带编码器,其中当量化所述变换域信号时,所述量化单元中用于编码所述变换域中信号组分属于所述高频带的组分的量化步骤不同于用于编码属于所述输入信号低频带的组分。
16.如权利要求1至14中任一项所述的音频编码系统,包括:
分频单元,其用于将所述输入信号分成低频带组分和高频带组分;及
高频带编码器,其用于编码所述高频带组分,其中所述低频带组分输入到所述线性预测单元。
17.如权利要求16所述的音频编码系统,其特征在于,所述分频单元包括配置为对所述输入信号进行下采样的正交镜像滤波器组及正交镜像滤波器合成单元。
18.如权利要求16或17所述的音频编码系统,其特征在于,所述低频带与所述高频带之间的边界是可变的,且所述分频单元基于输入信号性质和/或编码器带宽要求确定交越频率。
19.如权利要求16至18中任一项所述的音频编码系统,包括:
第二正交镜像滤波器合成单元,其将所述高频带组分转换成低通信号;及
第二基于变换的编码器,其用于编码所述低通信号。
20.如权利要求16至19中任一项所述的音频编码系统,包括信号表达式组合单元,其用于组合覆盖同一频率范围的不同信号表达式并且生成指示所述信号表达式的组合方式的信令数据。
21.如权利要求15至20中任一项所述的音频编码系统,其特征在于,所述高频带编码器是频谱频带复制编码器。
22.如任一先前权利要求所述的音频编码系统,其特征在于,所述长期预测单元包括用于将能量引入所述长期预测估计的高频组分的频谱频带复制单元。
23.如任一先前权利要求所述的音频编码系统,包括用于计算左输入信道和右输入信道的参数立体声表达式的参数立体声单元。
24.如任一先前权利要求所述的音频编码系统,包括用于由较低频率线预测较高频率MDCT线的谐波预测分析单元。
25.如任一先前权利要求所述的音频编码系统,其特征在于,所述量化单元基于输入信号特性决定是用基于模型的量化器还是用非基于模型的量化器来编码所述变换域信号。
26.如任一先前权利要求所述的音频编码系统,包括量化步长尺寸控制单元,其用于基于线性预测和长期预测参数来确定所述变换域信号的组分的量化步长尺寸。
27.如任一先前权利要求所述的音频编码系统,其特征在于,所述长期预测单元包括:
长期预测提取器,用于确定滞后值,指定所述滤波信号中的最佳适合于所述滤波信号当前帧的重构片段;及
长期预测增益估计器,其用于估计应用于所述滤波信号的所选片段的信号的增益值,
其中确定所述滞后值和所述增益值以最小化失真标准。
28.如权利要求27所述的音频编码系统,其特征在于,所述失真标准与对感知域中的所述变换输入信号的所述长期预测估计的差有关,所述失真标准是通过搜索所述感知域内的所述滞后值和所述增益值来最小化。
29.如权利要求27或28所述的音频编码系统,其特征在于,当最小化所述失真标准时,将所述感知建模单元生成的所述修正线性预测多项式应用为MDCT域均衡增益曲线。
30.如权利要求27至29中任一项所述的音频编码系统,其特征在于,所述长期预测单元包括将所述所选片段的重构信号变换成所述变换域,所述变换优选地是IV型离散余弦变换。
31.如权利要求27至30中任一项所述的音频编码系统,其特征在于,所述长期预测单元包括虚拟矢量生成器,用于在所述滞后值小于所述MDCT帧长时生成所述重构信号的扩展片段。
32.如权利要求31所述的音频编码系统,其特征在于,所述虚拟矢量生成器应用迭代的叠入-展开程序来细化所述重构信号的所述生成片段。
33.如权利要求27至32中任一项所述的音频编码系统,其特征在于,当所述变换单元对时间扭曲信号进行操作时,所述长期预测单元基于从所述时间扭曲单元接收的时间扭曲曲线,对所述重构滤波输入信号进行再采样。
34.如任一先前权利要求所述的音频编码系统,其特征在于,所述长期预测单元包括用于编码所述长期预测滞后和增益值的可变速率编码器。
35.如任一先前权利要求所述的音频编码系统,其特征在于,所述长期预测单元包括噪声矢量缓冲器和/或脉冲矢量缓冲器。
36.如任一先前权利要求所述的音频编码系统,包括联合编码单元,其用于对与音高有关的信息进行联合编码,例如,长期预测参数、谐波预测参数及时间扭曲参数。
37.一种音频解码器,包括:
去量化单元,其用于对输入比特流的帧进行去量化;
逆变换单元,其用于对变换域信号进行逆变换;
长期预测单元,其用于确定所述去量化帧的估计;
变换域信号组合单元,其用于在所述变换域中组合所述长期预测估计和所述去量化帧,以生成所述变换域信号;及
线性预测单元,其用于对所述逆变换的变换域信号进行滤波。
38.一种音频编码方法,包括如下步骤:
基于自适应性滤波器对输入信号进行滤波;
将所述滤波输入信号的帧变换成变换域;
对变换域信号进行量化;
基于所述滤波输入信号的先前片段的重构,估计所述滤波输入信号的帧;及
在所述变换域中,组合所述长期预测估计和所述变换输入信号,以生成所述变换域信号。
39.一种音频解码方法,包括如下步骤:
对输入比特流的帧进行去量化;
对变换域信号进行逆变换;
确定所述去量化帧的估计;
在所述变换域中,组合所述长期预测估计和所述去量化帧,以生成所述变换域信号;
对所述逆变换的变换域信号进行滤波;及
输出重构的音频信号。
40.一种用于致使可编程设备实施如权利要求38或39所述的音频编码方法的电脑程序。
CN2008801255814A 2008-01-04 2008-12-30 音频编码器和解码器 Active CN101925950B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
SE0800032.5 2008-01-04
SE0800032 2008-01-04
US5597508P 2008-05-24 2008-05-24
US61/055,975 2008-05-24
EP08009531A EP2077551B1 (en) 2008-01-04 2008-05-24 Audio encoder and decoder
EP08009531.8 2008-05-24
PCT/EP2008/011145 WO2009086919A1 (en) 2008-01-04 2008-12-30 Audio encoder and decoder

Publications (2)

Publication Number Publication Date
CN101925950A true CN101925950A (zh) 2010-12-22
CN101925950B CN101925950B (zh) 2013-10-02

Family

ID=39710955

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201310005503.3A Active CN103065637B (zh) 2008-01-04 2008-12-30 音频编码器和解码器
CN2008801255814A Active CN101925950B (zh) 2008-01-04 2008-12-30 音频编码器和解码器
CN2008801255392A Active CN101939781B (zh) 2008-01-04 2008-12-30 音频编码器和解码器

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201310005503.3A Active CN103065637B (zh) 2008-01-04 2008-12-30 音频编码器和解码器

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN2008801255392A Active CN101939781B (zh) 2008-01-04 2008-12-30 音频编码器和解码器

Country Status (14)

Country Link
US (4) US8484019B2 (zh)
EP (4) EP2077550B8 (zh)
JP (3) JP5356406B2 (zh)
KR (2) KR101202163B1 (zh)
CN (3) CN103065637B (zh)
AT (2) ATE500588T1 (zh)
AU (1) AU2008346515B2 (zh)
BR (1) BRPI0822236B1 (zh)
CA (4) CA2960862C (zh)
DE (1) DE602008005250D1 (zh)
ES (1) ES2677900T3 (zh)
MX (1) MX2010007326A (zh)
RU (3) RU2456682C2 (zh)
WO (2) WO2009086918A1 (zh)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102436819A (zh) * 2011-10-25 2012-05-02 杭州微纳科技有限公司 无线音频压缩、解压缩方法及音频编码器和音频解码器
CN103384901A (zh) * 2010-12-23 2013-11-06 法国电信 改进变换域中的滤波
CN104103276A (zh) * 2013-04-12 2014-10-15 北京天籁传音数字技术有限公司 一种声音编解码装置及其方法
CN104937661A (zh) * 2013-01-24 2015-09-23 谷歌公司 压缩多声道音频的重排和比特率分配
CN105723457A (zh) * 2013-11-15 2016-06-29 奥兰治 从变换编码/解码过渡到预测编码/解码
CN106068534A (zh) * 2014-03-07 2016-11-02 弗劳恩霍夫应用研究促进协会 用于信息编码的概念
CN107430863A (zh) * 2015-03-09 2017-12-01 弗劳恩霍夫应用研究促进协会 用于编码多声道信号的音频编码器及用于解码经编码的音频信号的音频解码器
CN108269586A (zh) * 2013-04-05 2018-07-10 杜比实验室特许公司 使用高级频谱延拓降低量化噪声的压扩装置和方法
CN109243475A (zh) * 2015-03-13 2019-01-18 杜比国际公司 解码在填充元素中具有增强频谱带复制元数据的音频位流
CN109328382A (zh) * 2016-06-22 2019-02-12 杜比国际公司 用于将数字音频信号从第一频域变换到第二频域的音频解码器及方法
CN109509483A (zh) * 2013-01-29 2019-03-22 弗劳恩霍夫应用研究促进协会 产生频率增强音频信号的译码器和产生编码信号的编码器
CN109935236A (zh) * 2013-04-05 2019-06-25 杜比国际公司 音频编码器和解码器
CN110010140A (zh) * 2013-04-05 2019-07-12 杜比国际公司 立体声音频编码器和解码器
CN110168637A (zh) * 2017-01-19 2019-08-23 高通股份有限公司 多个音频信号的译码
CN110415712A (zh) * 2014-06-27 2019-11-05 杜比国际公司 用于解码声音或声场的高阶高保真度立体声响复制(hoa)表示的方法
CN110444219A (zh) * 2014-07-28 2019-11-12 弗劳恩霍夫应用研究促进协会 选择第一编码演算法或第二编码演算法的装置与方法
CN110491402A (zh) * 2014-05-01 2019-11-22 日本电信电话株式会社 周期性综合包络序列生成装置、方法、程序、记录介质
CN110491399A (zh) * 2014-03-24 2019-11-22 日本电信电话株式会社 编码方法、编码装置、程序以及记录介质
CN110827841A (zh) * 2013-01-29 2020-02-21 弗劳恩霍夫应用研究促进协会 音频解码器
CN110910894A (zh) * 2013-10-18 2020-03-24 瑞典爱立信有限公司 谱峰位置的编码与解码
CN111630862A (zh) * 2017-12-15 2020-09-04 奥兰治 用于对表示全向视频的多视图视频序列进行编码和解码的方法和设备
CN111656442A (zh) * 2017-11-17 2020-09-11 弗劳恩霍夫应用研究促进协会 使用量化和熵编码来编码或解码定向音频编码参数的装置和方法
CN111670473A (zh) * 2017-12-19 2020-09-15 杜比国际公司 用于统一语音及音频解码基于qmf的谐波移调器改进的方法及设备
CN113129910A (zh) * 2019-12-31 2021-07-16 华为技术有限公司 音频信号的编解码方法和编解码装置
CN113436607A (zh) * 2021-06-12 2021-09-24 西安工业大学 一种快速语音克隆方法
CN113450810A (zh) * 2014-07-28 2021-09-28 弗劳恩霍夫应用研究促进协会 谐波滤波器工具的谐度依赖控制
CN113574596A (zh) * 2019-02-19 2021-10-29 公立大学法人秋田县立大学 音频信号编码方法、音频信号解码方法、程序、编码装置、音频系统及解码装置

Families Citing this family (137)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6934677B2 (en) * 2001-12-14 2005-08-23 Microsoft Corporation Quantization matrices based on critical band pattern information for digital audio wherein quantization bands differ from critical bands
US8326614B2 (en) * 2005-09-02 2012-12-04 Qnx Software Systems Limited Speech enhancement system
US7720677B2 (en) * 2005-11-03 2010-05-18 Coding Technologies Ab Time warped modified transform coding of audio signals
FR2912249A1 (fr) * 2007-02-02 2008-08-08 France Telecom Codage/decodage perfectionnes de signaux audionumeriques.
EP2077550B8 (en) * 2008-01-04 2012-03-14 Dolby International AB Audio encoder and decoder
WO2010005224A2 (en) * 2008-07-07 2010-01-14 Lg Electronics Inc. A method and an apparatus for processing an audio signal
WO2010003254A1 (en) * 2008-07-10 2010-01-14 Voiceage Corporation Multi-reference lpc filter quantization and inverse quantization device and method
JP5325293B2 (ja) 2008-07-11 2013-10-23 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 符号化されたオーディオ信号を復号化するための装置および方法
CN102089817B (zh) 2008-07-11 2013-01-09 弗劳恩霍夫应用研究促进协会 用于计算频谱包络数目的装置与方法
FR2938688A1 (fr) * 2008-11-18 2010-05-21 France Telecom Codage avec mise en forme du bruit dans un codeur hierarchique
CA2754671C (en) 2009-03-17 2017-01-10 Dolby International Ab Advanced stereo coding based on a combination of adaptively selectable left/right or mid/side stereo coding and of parametric stereo coding
WO2010115850A1 (en) * 2009-04-08 2010-10-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus, method and computer program for upmixing a downmix audio signal using a phase value smoothing
CO6440537A2 (es) * 2009-04-09 2012-05-15 Fraunhofer Ges Forschung Aparato y metodo para generar una señal de audio de sintesis y para codificar una señal de audio
KR20100115215A (ko) * 2009-04-17 2010-10-27 삼성전자주식회사 가변 비트율 오디오 부호화 및 복호화 장치 및 방법
US20100324913A1 (en) * 2009-06-18 2010-12-23 Jacek Piotr Stachurski Method and System for Block Adaptive Fractional-Bit Per Sample Encoding
JP5365363B2 (ja) * 2009-06-23 2013-12-11 ソニー株式会社 音響信号処理システム、音響信号復号装置、これらにおける処理方法およびプログラム
KR20110001130A (ko) * 2009-06-29 2011-01-06 삼성전자주식회사 가중 선형 예측 변환을 이용한 오디오 신호 부호화 및 복호화 장치 및 그 방법
JP5754899B2 (ja) 2009-10-07 2015-07-29 ソニー株式会社 復号装置および方法、並びにプログラム
MX2012004116A (es) * 2009-10-08 2012-05-22 Fraunhofer Ges Forschung Decodificador multimodo para señal de audio, codificador multimodo para señal de audio, metodo y programa de computacion que usan un modelado de ruido en base a linealidad-prediccion-codi ficacion.
EP2315358A1 (en) 2009-10-09 2011-04-27 Thomson Licensing Method and device for arithmetic encoding or arithmetic decoding
CA2778325C (en) * 2009-10-20 2015-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder, audio decoder, method for encoding an audio information, method for decoding an audio information and computer program using a region-dependent arithmetic coding mapping rule
US9117458B2 (en) 2009-11-12 2015-08-25 Lg Electronics Inc. Apparatus for processing an audio signal and method thereof
CN102081622B (zh) * 2009-11-30 2013-01-02 中国移动通信集团贵州有限公司 评估系统健康度的方法及系统健康度评估装置
UA101291C2 (ru) * 2009-12-16 2013-03-11 Долби Интернешнл Аб Сводка параметров последовательности бит sbr
BR122021008581B1 (pt) 2010-01-12 2022-08-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codificador de áudio, decodificador de áudio, método de codificação e informação de áudio, e método de decodificação de uma informação de áudio que utiliza uma tabela hash que descreve tanto valores de estado significativos como limites de intervalo
JP5850216B2 (ja) 2010-04-13 2016-02-03 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5609737B2 (ja) 2010-04-13 2014-10-22 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
US8886523B2 (en) * 2010-04-14 2014-11-11 Huawei Technologies Co., Ltd. Audio decoding based on audio class with control code for post-processing modes
JP5714002B2 (ja) * 2010-04-19 2015-05-07 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 符号化装置、復号装置、符号化方法及び復号方法
US12002476B2 (en) 2010-07-19 2024-06-04 Dolby International Ab Processing of audio signals during high frequency reconstruction
ES2644974T3 (es) 2010-07-19 2017-12-01 Dolby International Ab Procesamiento de señales de audio durante la reconstrucción de alta frecuencia
US9047875B2 (en) * 2010-07-19 2015-06-02 Futurewei Technologies, Inc. Spectrum flatness control for bandwidth extension
ES2937066T3 (es) * 2010-07-20 2023-03-23 Fraunhofer Ges Forschung Decodificador de audio, procedimiento y programa informático para decodificación de audio
JP6075743B2 (ja) 2010-08-03 2017-02-08 ソニー株式会社 信号処理装置および方法、並びにプログラム
US8762158B2 (en) * 2010-08-06 2014-06-24 Samsung Electronics Co., Ltd. Decoding method and decoding apparatus therefor
EP2609592B1 (en) * 2010-08-24 2014-11-05 Dolby International AB Concealment of intermittent mono reception of fm stereo radio receivers
WO2012037515A1 (en) 2010-09-17 2012-03-22 Xiph. Org. Methods and systems for adaptive time-frequency resolution in digital data coding
JP5707842B2 (ja) 2010-10-15 2015-04-30 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
DK3239979T3 (da) * 2010-10-25 2024-05-27 Voiceage Evs Llc Kodning af generiske audiosignaler ved lave bitrater og lav forsinkelse
CN102479514B (zh) * 2010-11-29 2014-02-19 华为终端有限公司 一种编码方法、解码方法、装置和系统
US8325073B2 (en) * 2010-11-30 2012-12-04 Qualcomm Incorporated Performing enhanced sigma-delta modulation
US8849053B2 (en) * 2011-01-14 2014-09-30 Sony Corporation Parametric loop filter
BR112013016350A2 (pt) * 2011-02-09 2018-06-19 Ericsson Telefon Ab L M codificação/decodificação eficaz de sinais de áudio
WO2012122299A1 (en) 2011-03-07 2012-09-13 Xiph. Org. Bit allocation and partitioning in gain-shape vector quantization for audio coding
WO2012122303A1 (en) 2011-03-07 2012-09-13 Xiph. Org Method and system for two-step spreading for tonal artifact avoidance in audio coding
WO2012122297A1 (en) * 2011-03-07 2012-09-13 Xiph. Org. Methods and systems for avoiding partial collapse in multi-block audio coding
US9536534B2 (en) 2011-04-20 2017-01-03 Panasonic Intellectual Property Corporation Of America Speech/audio encoding apparatus, speech/audio decoding apparatus, and methods thereof
CN102186083A (zh) * 2011-05-12 2011-09-14 北京数码视讯科技股份有限公司 量化处理方法及装置
EP2707875A4 (en) * 2011-05-13 2015-03-25 Samsung Electronics Co Ltd NOISE REDUCTION AND AUDIO CODING
EP2710588B1 (en) * 2011-05-19 2015-09-09 Dolby Laboratories Licensing Corporation Forensic detection of parametric audio coding schemes
RU2464649C1 (ru) 2011-06-01 2012-10-20 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ обработки звукового сигнала
LT3343781T (lt) * 2011-06-16 2022-03-10 Ge Video Compression, Llc Konteksto inicijavimas entropinio kodavimo metu
EP2727105B1 (en) 2011-06-30 2015-08-12 Telefonaktiebolaget LM Ericsson (PUBL) Transform audio codec and methods for encoding and decoding a time segment of an audio signal
JP5714172B2 (ja) * 2012-02-28 2015-05-07 日本電信電話株式会社 符号化装置、この方法、プログラムおよび記録媒体
KR101311527B1 (ko) * 2012-02-28 2013-09-25 전자부품연구원 영상처리장치 및 영상처리방법
WO2013129439A1 (ja) * 2012-02-28 2013-09-06 日本電信電話株式会社 符号化装置、この方法、プログラム及び記録媒体
WO2013142650A1 (en) 2012-03-23 2013-09-26 Dolby International Ab Enabling sampling rate diversity in a voice communication system
US9437204B2 (en) 2012-03-29 2016-09-06 Telefonaktiebolaget Lm Ericsson (Publ) Transform encoding/decoding of harmonic audio signals
EP2665208A1 (en) * 2012-05-14 2013-11-20 Thomson Licensing Method and apparatus for compressing and decompressing a Higher Order Ambisonics signal representation
EP2856776B1 (en) * 2012-05-29 2019-03-27 Nokia Technologies Oy Stereo audio signal encoder
KR20150032614A (ko) * 2012-06-04 2015-03-27 삼성전자주식회사 오디오 부호화방법 및 장치, 오디오 복호화방법 및 장치, 및 이를 채용하는 멀티미디어 기기
MY168806A (en) * 2012-06-28 2018-12-04 Fraunhofer Ges Forschung Linear prediction based audio coding using improved probability distribution estimation
CA2843226A1 (en) 2012-07-02 2014-01-09 Sony Corporation Decoding device, decoding method, encoding device, encoding method, and program
WO2014007095A1 (ja) * 2012-07-02 2014-01-09 ソニー株式会社 復号装置および方法、符号化装置および方法、並びにプログラム
MY176406A (en) * 2012-08-10 2020-08-06 Fraunhofer Ges Forschung Encoder, decoder, system and method employing a residual concept for parametric audio object coding
US9830920B2 (en) 2012-08-19 2017-11-28 The Regents Of The University Of California Method and apparatus for polyphonic audio signal prediction in coding and networking systems
US9406307B2 (en) * 2012-08-19 2016-08-02 The Regents Of The University Of California Method and apparatus for polyphonic audio signal prediction in coding and networking systems
WO2014068817A1 (ja) * 2012-10-31 2014-05-08 パナソニック株式会社 オーディオ信号符号化装置及びオーディオ信号復号装置
WO2014108393A1 (en) 2013-01-08 2014-07-17 Dolby International Ab Model based prediction in a critically sampled filterbank
MX346927B (es) 2013-01-29 2017-04-05 Fraunhofer Ges Forschung Énfasis de bajas frecuencias para codificación basada en lpc (codificación de predicción lineal) en el dominio de frecuencia.
PT3451334T (pt) 2013-01-29 2020-06-29 Fraunhofer Ges Forschung Conceito de preenchimento de ruído
ES2613651T3 (es) 2013-01-29 2017-05-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Cuantificación de señales de audio adaptativas por tonalidad de baja complejidad
US9842598B2 (en) * 2013-02-21 2017-12-12 Qualcomm Incorporated Systems and methods for mitigating potential frame instability
CN104981870B (zh) * 2013-02-22 2018-03-20 三菱电机株式会社 声音增强装置
JP6089878B2 (ja) 2013-03-28 2017-03-08 富士通株式会社 直交変換装置、直交変換方法及び直交変換用コンピュータプログラムならびにオーディオ復号装置
BR112015025009B1 (pt) 2013-04-05 2021-12-21 Dolby International Ab Unidades de quantização e quantização inversa, codificador e decodificador, métodos para quantizar e dequantizar
US10043528B2 (en) * 2013-04-05 2018-08-07 Dolby International Ab Audio encoder and decoder
RU2625444C2 (ru) 2013-04-05 2017-07-13 Долби Интернэшнл Аб Система обработки аудио
US20140327737A1 (en) 2013-05-01 2014-11-06 Raymond John Westwater Method and Apparatus to Perform Optimal Visually-Weighed Quantization of Time-Varying Visual Sequences in Transform Space
EP2830058A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Frequency-domain audio coding supporting transform length switching
EP2830065A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for decoding an encoded audio signal using a cross-over filter around a transition frequency
RU2639952C2 (ru) * 2013-08-28 2017-12-25 Долби Лабораторис Лайсэнзин Корпорейшн Гибридное усиление речи с кодированием формы сигнала и параметрическим кодированием
KR102231756B1 (ko) 2013-09-05 2021-03-30 마이클 안토니 스톤 오디오 신호의 부호화, 복호화 방법 및 장치
TWI579831B (zh) 2013-09-12 2017-04-21 杜比國際公司 用於參數量化的方法、用於量化的參數之解量化方法及其電腦可讀取的媒體、音頻編碼器、音頻解碼器及音頻系統
EP3048609A4 (en) 2013-09-19 2017-05-03 Sony Corporation Encoding device and method, decoding device and method, and program
FR3011408A1 (fr) * 2013-09-30 2015-04-03 Orange Re-echantillonnage d'un signal audio pour un codage/decodage a bas retard
WO2015071173A1 (en) * 2013-11-13 2015-05-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder for encoding an audio signal, audio transmission system and method for determining correction values
KR102251833B1 (ko) 2013-12-16 2021-05-13 삼성전자주식회사 오디오 신호의 부호화, 복호화 방법 및 장치
RU2667627C1 (ru) 2013-12-27 2018-09-21 Сони Корпорейшн Устройство и способ декодирования и программа
FR3017484A1 (fr) * 2014-02-07 2015-08-14 Orange Extension amelioree de bande de frequence dans un decodeur de signaux audiofrequences
CN110176241B (zh) * 2014-02-17 2023-10-31 三星电子株式会社 信号编码方法和设备以及信号解码方法和设备
CN103761969B (zh) * 2014-02-20 2016-09-14 武汉大学 基于高斯混合模型的感知域音频编码方法及系统
JP6289936B2 (ja) * 2014-02-26 2018-03-07 株式会社東芝 音源方向推定装置、音源方向推定方法およびプログラム
CN111370008B (zh) * 2014-02-28 2024-04-09 弗朗霍弗应用研究促进协会 解码装置、编码装置、解码方法、编码方法、终端装置、以及基站装置
ES2901749T3 (es) * 2014-04-24 2022-03-23 Nippon Telegraph & Telephone Método de descodificación, aparato de descodificación, programa y soporte de registro correspondientes
GB2526128A (en) * 2014-05-15 2015-11-18 Nokia Technologies Oy Audio codec mode selector
CN106228991B (zh) 2014-06-26 2019-08-20 华为技术有限公司 编解码方法、装置及系统
CN104077505A (zh) * 2014-07-16 2014-10-01 苏州博联科技有限公司 一种提高16Kbps码率音频数据压缩编码音质方法
EP3723086A1 (en) * 2014-07-25 2020-10-14 FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. Audio signal coding apparatus, audio signal decoding apparatus, audio signal coding method, and audio signal decoding method
EP2980801A1 (en) 2014-07-28 2016-02-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for estimating noise in an audio signal, noise estimator, audio encoder, audio decoder, and system for transmitting audio signals
WO2016017238A1 (ja) * 2014-07-28 2016-02-04 日本電信電話株式会社 符号化方法、装置、プログラム及び記録媒体
EP2980799A1 (en) * 2014-07-28 2016-02-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for processing an audio signal using a harmonic post-filter
FR3024581A1 (fr) * 2014-07-29 2016-02-05 Orange Determination d'un budget de codage d'une trame de transition lpd/fd
CN104269173B (zh) * 2014-09-30 2018-03-13 武汉大学深圳研究院 切换模式的音频带宽扩展装置与方法
KR102128330B1 (ko) 2014-11-24 2020-06-30 삼성전자주식회사 신호 처리 장치, 신호 복원 장치, 신호 처리 방법, 및 신호 복원 방법
US9659578B2 (en) * 2014-11-27 2017-05-23 Tata Consultancy Services Ltd. Computer implemented system and method for identifying significant speech frames within speech signals
WO2016162283A1 (en) * 2015-04-07 2016-10-13 Dolby International Ab Audio coding with range extension
EP3079151A1 (en) * 2015-04-09 2016-10-12 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder and method for encoding an audio signal
WO2016167215A1 (ja) * 2015-04-13 2016-10-20 日本電信電話株式会社 線形予測符号化装置、線形予測復号装置、これらの方法、プログラム及び記録媒体
EP3107096A1 (en) * 2015-06-16 2016-12-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Downscaled decoding
US10134412B2 (en) * 2015-09-03 2018-11-20 Shure Acquisition Holdings, Inc. Multiresolution coding and modulation system
US10573324B2 (en) 2016-02-24 2020-02-25 Dolby International Ab Method and system for bit reservoir control in case of varying metadata
FR3049084B1 (fr) * 2016-03-15 2022-11-11 Fraunhofer Ges Forschung Dispositif de codage pour le traitement d'un signal d'entree et dispositif de decodage pour le traitement d'un signal code
WO2017169890A1 (ja) * 2016-03-31 2017-10-05 ソニー株式会社 情報処理装置および方法
KR20190011742A (ko) * 2016-05-10 2019-02-07 이멀젼 서비시즈 엘엘씨 적응형 오디오 코덱 시스템, 방법, 장치 및 매체
KR102343639B1 (ko) * 2016-05-24 2021-12-28 소니그룹주식회사 압축 부호화 장치 및 방법, 복호 장치 및 방법, 그리고 프로그램
WO2018049279A1 (en) 2016-09-09 2018-03-15 Dts, Inc. System and method for long-term prediction in audio codecs
US10573326B2 (en) * 2017-04-05 2020-02-25 Qualcomm Incorporated Inter-channel bandwidth extension
US10734001B2 (en) * 2017-10-05 2020-08-04 Qualcomm Incorporated Encoding or decoding of audio signals
EP3483879A1 (en) 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Analysis/synthesis windowing function for modulated lapped transformation
WO2019091573A1 (en) * 2017-11-10 2019-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding and decoding an audio signal using downsampling or interpolation of scale parameters
US10565973B2 (en) * 2018-06-06 2020-02-18 Home Box Office, Inc. Audio waveform display using mapping function
US20210210108A1 (en) * 2018-06-21 2021-07-08 Sony Corporation Coding device, coding method, decoding device, decoding method, and program
SG11202012936VA (en) * 2018-07-04 2021-01-28 Fraunhofer Ges Forschung Multisignal audio coding using signal whitening as preprocessing
CN109215670B (zh) * 2018-09-21 2021-01-29 西安蜂语信息科技有限公司 音频数据的传输方法、装置、计算机设备和存储介质
JP7167335B2 (ja) * 2018-10-29 2022-11-08 ドルビー・インターナショナル・アーベー 生成モデルを用いたレート品質スケーラブル符号化のための方法及び装置
CN111383646B (zh) * 2018-12-28 2020-12-08 广州市百果园信息技术有限公司 一种语音信号变换方法、装置、设备和存储介质
US10645386B1 (en) 2019-01-03 2020-05-05 Sony Corporation Embedded codec circuitry for multiple reconstruction points based quantization
BR112021013720A2 (pt) * 2019-01-13 2021-09-21 Huawei Technologies Co., Ltd. Método implementado por computador para codificação de áudio, dispositivo eletrônico e meio legível por computador não transitório
WO2020253941A1 (en) * 2019-06-17 2020-12-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder with a signal-dependent number and precision control, audio decoder, and related methods and computer programs
CN110428841B (zh) * 2019-07-16 2021-09-28 河海大学 一种基于不定长均值的声纹动态特征提取方法
US11380343B2 (en) 2019-09-12 2022-07-05 Immersion Networks, Inc. Systems and methods for processing high frequency audio signal
CN113129913B (zh) * 2019-12-31 2024-05-03 华为技术有限公司 音频信号的编解码方法和编解码装置
CN112289327B (zh) * 2020-10-29 2024-06-14 北京百瑞互联技术股份有限公司 一种lc3音频编码器后置残差优化方法、装置和介质
CN115472171A (zh) * 2021-06-11 2022-12-13 华为技术有限公司 编解码方法、装置、设备、存储介质及计算机程序
CN114189410B (zh) * 2021-12-13 2024-05-17 深圳市日声数码科技有限公司 一种车载数码广播音频接收系统
CN115604614B (zh) * 2022-12-15 2023-03-31 成都海普迪科技有限公司 采用吊装麦克风进行本地扩声和远程互动的系统和方法

Family Cites Families (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5936280B2 (ja) * 1982-11-22 1984-09-03 日本電信電話株式会社 音声の適応変換符号化方式
JP2523286B2 (ja) * 1986-08-01 1996-08-07 日本電信電話株式会社 音声符号化及び復号化方法
SE469764B (sv) * 1992-01-27 1993-09-06 Ericsson Telefon Ab L M Saett att koda en samplad talsignalvektor
BE1007617A3 (nl) * 1993-10-11 1995-08-22 Philips Electronics Nv Transmissiesysteem met gebruik van verschillende codeerprincipes.
US5684920A (en) * 1994-03-17 1997-11-04 Nippon Telegraph And Telephone Acoustic signal transform coding method and decoding method having a high efficiency envelope flattening method therein
CA2121667A1 (en) * 1994-04-19 1995-10-20 Jean-Pierre Adoul Differential-transform-coded excitation for speech and audio coding
FR2729245B1 (fr) * 1995-01-06 1997-04-11 Lamblin Claude Procede de codage de parole a prediction lineaire et excitation par codes algebriques
US5754733A (en) * 1995-08-01 1998-05-19 Qualcomm Incorporated Method and apparatus for generating and encoding line spectral square roots
DE69620967T2 (de) * 1995-09-19 2002-11-07 At & T Corp Synthese von Sprachsignalen in Abwesenheit kodierter Parameter
US5790759A (en) * 1995-09-19 1998-08-04 Lucent Technologies Inc. Perceptual noise masking measure based on synthesis filter frequency response
JPH09127998A (ja) 1995-10-26 1997-05-16 Sony Corp 信号量子化方法及び信号符号化装置
TW321810B (zh) 1995-10-26 1997-12-01 Sony Co Ltd
JP3707153B2 (ja) * 1996-09-24 2005-10-19 ソニー株式会社 ベクトル量子化方法、音声符号化方法及び装置
FI114248B (fi) * 1997-03-14 2004-09-15 Nokia Corp Menetelmä ja laite audiokoodaukseen ja audiodekoodaukseen
JP3684751B2 (ja) * 1997-03-28 2005-08-17 ソニー株式会社 信号符号化方法及び装置
IL120788A (en) * 1997-05-06 2000-07-16 Audiocodes Ltd Systems and methods for encoding and decoding speech for lossy transmission networks
SE512719C2 (sv) * 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
JP3263347B2 (ja) * 1997-09-20 2002-03-04 松下電送システム株式会社 音声符号化装置及び音声符号化におけるピッチ予測方法
US6012025A (en) * 1998-01-28 2000-01-04 Nokia Mobile Phones Limited Audio coding method and apparatus using backward adaptive prediction
US6353808B1 (en) * 1998-10-22 2002-03-05 Sony Corporation Apparatus and method for encoding a signal as well as apparatus and method for decoding a signal
JP4281131B2 (ja) * 1998-10-22 2009-06-17 ソニー株式会社 信号符号化装置及び方法、並びに信号復号装置及び方法
SE9903553D0 (sv) * 1999-01-27 1999-10-01 Lars Liljeryd Enhancing percepptual performance of SBR and related coding methods by adaptive noise addition (ANA) and noise substitution limiting (NSL)
FI116992B (fi) * 1999-07-05 2006-04-28 Nokia Corp Menetelmät, järjestelmä ja laitteet audiosignaalin koodauksen ja siirron tehostamiseksi
JP2001142499A (ja) 1999-11-10 2001-05-25 Nec Corp 音声符号化装置ならびに音声復号化装置
US7058570B1 (en) * 2000-02-10 2006-06-06 Matsushita Electric Industrial Co., Ltd. Computer-implemented method and apparatus for audio data hiding
TW496010B (en) * 2000-03-23 2002-07-21 Sanyo Electric Co Solid high molcular type fuel battery
US20020040299A1 (en) * 2000-07-31 2002-04-04 Kenichi Makino Apparatus and method for performing orthogonal transform, apparatus and method for performing inverse orthogonal transform, apparatus and method for performing transform encoding, and apparatus and method for encoding data
SE0004163D0 (sv) * 2000-11-14 2000-11-14 Coding Technologies Sweden Ab Enhancing perceptual performance of high frequency reconstruction coding methods by adaptive filtering
SE0004187D0 (sv) * 2000-11-15 2000-11-15 Coding Technologies Sweden Ab Enhancing the performance of coding systems that use high frequency reconstruction methods
KR100378796B1 (ko) * 2001-04-03 2003-04-03 엘지전자 주식회사 디지탈 오디오 부호화기 및 복호화 방법
US6658383B2 (en) * 2001-06-26 2003-12-02 Microsoft Corporation Method for coding speech and music signals
US6879955B2 (en) * 2001-06-29 2005-04-12 Microsoft Corporation Signal modification based on continuous time warping for low bit rate CELP coding
KR100648760B1 (ko) * 2001-11-29 2006-11-23 코딩 테크놀러지스 에이비 고주파 재생 기술 향상을 위한 방법들 및 그를 수행하는 프로그램이 저장된 컴퓨터 프로그램 기록매체
US7460993B2 (en) * 2001-12-14 2008-12-02 Microsoft Corporation Adaptive window-size selection in transform coding
US20030215013A1 (en) * 2002-04-10 2003-11-20 Budnikov Dmitry N. Audio encoder with adaptive short window grouping
CN100370517C (zh) * 2002-07-16 2008-02-20 皇家飞利浦电子股份有限公司 一种对编码信号进行解码的方法
US7536305B2 (en) * 2002-09-04 2009-05-19 Microsoft Corporation Mixed lossless audio compression
JP4191503B2 (ja) * 2003-02-13 2008-12-03 日本電信電話株式会社 音声楽音信号符号化方法、復号化方法、符号化装置、復号化装置、符号化プログラム、および復号化プログラム
CN1458646A (zh) * 2003-04-21 2003-11-26 北京阜国数字技术有限公司 一种滤波参数矢量量化和结合量化模型预测的音频编码方法
EP1496500B1 (en) * 2003-07-09 2007-02-28 Samsung Electronics Co., Ltd. Bitrate scalable speech coding and decoding apparatus and method
BR122018007834B1 (pt) * 2003-10-30 2019-03-19 Koninklijke Philips Electronics N.V. Codificador e decodificador de áudio avançado de estéreo paramétrico combinado e de replicação de banda espectral, método de codificação avançada de áudio de estéreo paramétrico combinado e de replicação de banda espectral, sinal de áudio avançado codificado de estéreo paramétrico combinado e de replicação de banda espectral, método de decodificação avançada de áudio de estéreo paramétrico combinado e de replicação de banda espectral, e, meio de armazenamento legível por computador
DE102004009955B3 (de) 2004-03-01 2005-08-11 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Ermitteln einer Quantisierer-Schrittweite
CN1677491A (zh) * 2004-04-01 2005-10-05 北京宫羽数字技术有限责任公司 一种增强音频编解码装置及方法
EP1747554B1 (en) * 2004-05-17 2010-02-10 Nokia Corporation Audio encoding with different coding frame lengths
JP4533386B2 (ja) 2004-07-22 2010-09-01 富士通株式会社 オーディオ符号化装置及びオーディオ符号化方法
DE102005032724B4 (de) * 2005-07-13 2009-10-08 Siemens Ag Verfahren und Vorrichtung zur künstlichen Erweiterung der Bandbreite von Sprachsignalen
US7720677B2 (en) * 2005-11-03 2010-05-18 Coding Technologies Ab Time warped modified transform coding of audio signals
JP4950210B2 (ja) * 2005-11-04 2012-06-13 ノキア コーポレイション オーディオ圧縮
KR100647336B1 (ko) * 2005-11-08 2006-11-23 삼성전자주식회사 적응적 시간/주파수 기반 오디오 부호화/복호화 장치 및방법
JP4658853B2 (ja) 2006-04-13 2011-03-23 日本電信電話株式会社 適応ブロック長符号化装置、その方法、プログラム及び記録媒体
US7610195B2 (en) * 2006-06-01 2009-10-27 Nokia Corporation Decoding of predictively coded data using buffer adaptation
KR20070115637A (ko) * 2006-06-03 2007-12-06 삼성전자주식회사 대역폭 확장 부호화 및 복호화 방법 및 장치
EP3288027B1 (en) * 2006-10-25 2021-04-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating complex-valued audio subband values
KR101565919B1 (ko) * 2006-11-17 2015-11-05 삼성전자주식회사 고주파수 신호 부호화 및 복호화 방법 및 장치
BRPI0718738B1 (pt) * 2006-12-12 2023-05-16 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Codificador, decodificador e métodos para codificação e decodificação de segmentos de dados representando uma corrente de dados de domínio de tempo
US8630863B2 (en) * 2007-04-24 2014-01-14 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding audio/speech signal
KR101411901B1 (ko) * 2007-06-12 2014-06-26 삼성전자주식회사 오디오 신호의 부호화/복호화 방법 및 장치
EP2077550B8 (en) * 2008-01-04 2012-03-14 Dolby International AB Audio encoder and decoder
WO2010003254A1 (en) * 2008-07-10 2010-01-14 Voiceage Corporation Multi-reference lpc filter quantization and inverse quantization device and method
JP5325293B2 (ja) * 2008-07-11 2013-10-23 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 符号化されたオーディオ信号を復号化するための装置および方法
PL2146344T3 (pl) * 2008-07-17 2017-01-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Sposób kodowania/dekodowania sygnału audio obejmujący przełączalne obejście

Cited By (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103384901A (zh) * 2010-12-23 2013-11-06 法国电信 改进变换域中的滤波
CN103384901B (zh) * 2010-12-23 2016-08-10 法国电信 改进变换域中的滤波
CN102436819A (zh) * 2011-10-25 2012-05-02 杭州微纳科技有限公司 无线音频压缩、解压缩方法及音频编码器和音频解码器
CN102436819B (zh) * 2011-10-25 2013-02-13 杭州微纳科技有限公司 无线音频压缩、解压缩方法及音频编码器和音频解码器
CN104937661A (zh) * 2013-01-24 2015-09-23 谷歌公司 压缩多声道音频的重排和比特率分配
CN110827841B (zh) * 2013-01-29 2023-11-28 弗劳恩霍夫应用研究促进协会 音频解码器
CN109509483B (zh) * 2013-01-29 2023-11-14 弗劳恩霍夫应用研究促进协会 产生频率增强音频信号的译码器和产生编码信号的编码器
CN109509483A (zh) * 2013-01-29 2019-03-22 弗劳恩霍夫应用研究促进协会 产生频率增强音频信号的译码器和产生编码信号的编码器
CN110827841A (zh) * 2013-01-29 2020-02-21 弗劳恩霍夫应用研究促进协会 音频解码器
US11631417B2 (en) 2013-04-05 2023-04-18 Dolby International Ab Stereo audio encoder and decoder
CN110010140B (zh) * 2013-04-05 2023-04-18 杜比国际公司 立体声音频编码器和解码器
US11423923B2 (en) 2013-04-05 2022-08-23 Dolby Laboratories Licensing Corporation Companding system and method to reduce quantization noise using advanced spectral extension
CN109935236B (zh) * 2013-04-05 2023-05-30 杜比国际公司 音频编码器和解码器
CN108269586A (zh) * 2013-04-05 2018-07-10 杜比实验室特许公司 使用高级频谱延拓降低量化噪声的压扩装置和方法
US11676622B2 (en) 2013-04-05 2023-06-13 Dolby International Ab Method, apparatus and systems for audio decoding and encoding
CN109935236A (zh) * 2013-04-05 2019-06-25 杜比国际公司 音频编码器和解码器
CN110010140A (zh) * 2013-04-05 2019-07-12 杜比国际公司 立体声音频编码器和解码器
CN104103276B (zh) * 2013-04-12 2017-04-12 北京天籁传音数字技术有限公司 一种声音编解码装置及其方法
CN104103276A (zh) * 2013-04-12 2014-10-15 北京天籁传音数字技术有限公司 一种声音编解码装置及其方法
CN110910894A (zh) * 2013-10-18 2020-03-24 瑞典爱立信有限公司 谱峰位置的编码与解码
CN105723457B (zh) * 2013-11-15 2019-05-28 奥兰治 从变换编码/解码过渡到预测编码/解码
CN105723457A (zh) * 2013-11-15 2016-06-29 奥兰治 从变换编码/解码过渡到预测编码/解码
CN106068534B (zh) * 2014-03-07 2020-01-17 弗劳恩霍夫应用研究促进协会 用于信息编码的概念
CN106068534A (zh) * 2014-03-07 2016-11-02 弗劳恩霍夫应用研究促进协会 用于信息编码的概念
CN110491399A (zh) * 2014-03-24 2019-11-22 日本电信电话株式会社 编码方法、编码装置、程序以及记录介质
CN110491399B (zh) * 2014-03-24 2022-10-21 日本电信电话株式会社 编码方法、编码装置以及记录介质
CN110491402A (zh) * 2014-05-01 2019-11-22 日本电信电话株式会社 周期性综合包络序列生成装置、方法、程序、记录介质
CN110491402B (zh) * 2014-05-01 2022-10-21 日本电信电话株式会社 周期性综合包络序列生成装置、方法、记录介质
CN110415712A (zh) * 2014-06-27 2019-11-05 杜比国际公司 用于解码声音或声场的高阶高保真度立体声响复制(hoa)表示的方法
CN110415712B (zh) * 2014-06-27 2023-12-12 杜比国际公司 用于解码声音或声场的高阶高保真度立体声响复制(hoa)表示的方法
CN110444219B (zh) * 2014-07-28 2023-06-13 弗劳恩霍夫应用研究促进协会 选择第一编码演算法或第二编码演算法的装置与方法
CN113450810B (zh) * 2014-07-28 2024-04-09 弗劳恩霍夫应用研究促进协会 谐波滤波器工具的谐度依赖控制
CN110444219A (zh) * 2014-07-28 2019-11-12 弗劳恩霍夫应用研究促进协会 选择第一编码演算法或第二编码演算法的装置与方法
CN113450810A (zh) * 2014-07-28 2021-09-28 弗劳恩霍夫应用研究促进协会 谐波滤波器工具的谐度依赖控制
CN107430863B (zh) * 2015-03-09 2021-01-26 弗劳恩霍夫应用研究促进协会 用于编码的音频编码器及用于解码的音频解码器
US10777208B2 (en) 2015-03-09 2020-09-15 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
CN107430863A (zh) * 2015-03-09 2017-12-01 弗劳恩霍夫应用研究促进协会 用于编码多声道信号的音频编码器及用于解码经编码的音频信号的音频解码器
US11881225B2 (en) 2015-03-09 2024-01-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
US11107483B2 (en) 2015-03-09 2021-08-31 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
US11238874B2 (en) 2015-03-09 2022-02-01 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
US11741973B2 (en) 2015-03-09 2023-08-29 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
US11664038B2 (en) 2015-03-13 2023-05-30 Dolby International Ab Decoding audio bitstreams with enhanced spectral band replication metadata in at least one fill element
CN109243475A (zh) * 2015-03-13 2019-01-18 杜比国际公司 解码在填充元素中具有增强频谱带复制元数据的音频位流
CN109243475B (zh) * 2015-03-13 2022-12-20 杜比国际公司 解码在填充元素中具有增强频谱带复制元数据的音频位流
CN109328382A (zh) * 2016-06-22 2019-02-12 杜比国际公司 用于将数字音频信号从第一频域变换到第二频域的音频解码器及方法
CN109328382B (zh) * 2016-06-22 2023-06-16 杜比国际公司 用于将数字音频信号从第一频域变换到第二频域的音频解码器及方法
CN110168637B (zh) * 2017-01-19 2023-05-30 高通股份有限公司 多个音频信号的译码
CN110168637A (zh) * 2017-01-19 2019-08-23 高通股份有限公司 多个音频信号的译码
CN111656442A (zh) * 2017-11-17 2020-09-11 弗劳恩霍夫应用研究促进协会 使用量化和熵编码来编码或解码定向音频编码参数的装置和方法
US11783843B2 (en) 2017-11-17 2023-10-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding or decoding directional audio coding parameters using different time/frequency resolutions
CN111630862A (zh) * 2017-12-15 2020-09-04 奥兰治 用于对表示全向视频的多视图视频序列进行编码和解码的方法和设备
CN111630862B (zh) * 2017-12-15 2024-03-12 奥兰治 用于对表示全向视频的多视图视频序列进行编码和解码的方法和设备
CN111670473A (zh) * 2017-12-19 2020-09-15 杜比国际公司 用于统一语音及音频解码基于qmf的谐波移调器改进的方法及设备
CN113574596A (zh) * 2019-02-19 2021-10-29 公立大学法人秋田县立大学 音频信号编码方法、音频信号解码方法、程序、编码装置、音频系统及解码装置
CN113129910A (zh) * 2019-12-31 2021-07-16 华为技术有限公司 音频信号的编解码方法和编解码装置
CN113436607A (zh) * 2021-06-12 2021-09-24 西安工业大学 一种快速语音克隆方法
CN113436607B (zh) * 2021-06-12 2024-04-09 西安工业大学 一种快速语音克隆方法

Also Published As

Publication number Publication date
RU2562375C2 (ru) 2015-09-10
ATE518224T1 (de) 2011-08-15
US8494863B2 (en) 2013-07-23
JP5350393B2 (ja) 2013-11-27
JP2011509426A (ja) 2011-03-24
RU2456682C2 (ru) 2012-07-20
JP2011510335A (ja) 2011-03-31
EP2573765B1 (en) 2024-06-26
EP2573765A2 (en) 2013-03-27
RU2696292C2 (ru) 2019-08-01
CA2960862C (en) 2020-05-05
CN101939781B (zh) 2013-01-23
US20100286990A1 (en) 2010-11-11
JP5624192B2 (ja) 2014-11-12
EP2077550B1 (en) 2011-07-27
ES2677900T3 (es) 2018-08-07
CA2709974C (en) 2017-04-11
US8938387B2 (en) 2015-01-20
EP2235719B1 (en) 2018-05-30
CA3076068A1 (en) 2009-07-16
KR101202163B1 (ko) 2012-11-15
KR101196620B1 (ko) 2012-11-02
WO2009086919A1 (en) 2009-07-16
BRPI0822236B1 (pt) 2020-02-04
CA2960862A1 (en) 2009-07-16
EP2077551A1 (en) 2009-07-08
AU2008346515A1 (en) 2009-07-16
EP2573765A3 (en) 2017-05-31
EP2077550B8 (en) 2012-03-14
RU2015118725A (ru) 2016-12-10
AU2008346515B2 (en) 2012-04-12
CN101925950B (zh) 2013-10-02
US20130282382A1 (en) 2013-10-24
RU2010132643A (ru) 2012-02-10
ATE500588T1 (de) 2011-03-15
CN101939781A (zh) 2011-01-05
CN103065637B (zh) 2015-02-04
MX2010007326A (es) 2010-08-13
EP2077551B1 (en) 2011-03-02
US8924201B2 (en) 2014-12-30
BRPI0822236A2 (pt) 2015-06-30
CA2709974A1 (en) 2009-07-16
RU2012120850A (ru) 2013-12-10
US20130282383A1 (en) 2013-10-24
CA3190951A1 (en) 2009-07-16
CA3076068C (en) 2023-04-04
WO2009086918A1 (en) 2009-07-16
US8484019B2 (en) 2013-07-09
JP2014016625A (ja) 2014-01-30
KR20100105745A (ko) 2010-09-29
US20100286991A1 (en) 2010-11-11
JP5356406B2 (ja) 2013-12-04
EP2235719A1 (en) 2010-10-06
KR20100106564A (ko) 2010-10-01
CN103065637A (zh) 2013-04-24
DE602008005250D1 (de) 2011-04-14
RU2015118725A3 (zh) 2019-02-07
EP2077550A1 (en) 2009-07-08

Similar Documents

Publication Publication Date Title
CN101925950B (zh) 音频编码器和解码器
CN102089812B (zh) 用以使用混叠切换方案将音频信号编码/解码的装置与方法
CN101189662B (zh) 带多级码本和冗余编码的子带话音编解码器
CN102177426B (zh) 多分辨率切换音频编码/解码方案
CN101903945B (zh) 编码装置、解码装置以及编码方法
TWI405187B (zh) 可縮放語音及音訊編碼解碼器、包括可縮放語音及音訊編碼解碼器之處理器、及用於可縮放語音及音訊編碼解碼器之方法及機器可讀媒體
CN102089814B (zh) 对编码的音频信号进行解码的设备和方法
CN102460570B (zh) 用于对音频信号进行编码和解码的方法及设备
EP2212884B1 (en) An encoder
CN101484937B (zh) 使用缓冲器调节对已预测编码的数据进行解码
CN102099856A (zh) 具有可切换旁路的音频编码/解码方案
CN104025189B (zh) 编码语音信号的方法、解码语音信号的方法,及使用其的装置
MX2011000362A (es) Esquema de codificacion/decodificacion de audio a baja velocidad binaria y conmutadores en cascada.
CN103403799B (zh) 用于针对合成统一语音和音频编解码器(usac)处理音频信号和提供较高时间粒度的设备和方法
CN102968998A (zh) 使用mdct频谱的组合编码的可缩放的语音和音频编码
JP2009524100A (ja) 符号化/復号化装置及び方法
CN102282612A (zh) 叉积增强的谐波转置
CN103262161A (zh) 确定用于线性预测编码(lpc)系数量化的具有低复杂度的加权函数的设备和方法
CN101577605A (zh) 基于滤波器相似度的语音lpc隐藏和提取算法
CN103703512A (zh) 用于音频编码和解码的方法和装置
CN103229234A (zh) 音频编码装置、方法和程序以及音频解码装置、方法和程序
CN111968656A (zh) 信号编码方法和装置以及信号解码方法和装置
US20100280830A1 (en) Decoder
Xu et al. MBMS-GAN: Multi-Band Multi-Scale Adversarial Learning for Enhancement of Coded Speech at Very Low Rate
AU2020365140A1 (en) Methods and system for waveform coding of audio signals with a generative model

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant