CN101350199A - 音频编码器及音频编码方法 - Google Patents
音频编码器及音频编码方法 Download PDFInfo
- Publication number
- CN101350199A CN101350199A CNA2008101173430A CN200810117343A CN101350199A CN 101350199 A CN101350199 A CN 101350199A CN A2008101173430 A CNA2008101173430 A CN A2008101173430A CN 200810117343 A CN200810117343 A CN 200810117343A CN 101350199 A CN101350199 A CN 101350199A
- Authority
- CN
- China
- Prior art keywords
- cosine transform
- discrete cosine
- module
- frequency domain
- spectra data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000001228 spectrum Methods 0.000 claims abstract description 93
- 238000012545 processing Methods 0.000 claims abstract description 21
- 238000011002 quantification Methods 0.000 claims abstract description 15
- 230000000873 masking effect Effects 0.000 claims abstract description 12
- 230000005236 sound signal Effects 0.000 claims description 20
- 238000012937 correction Methods 0.000 claims description 12
- 238000007405 data analysis Methods 0.000 claims description 7
- 230000008447 perception Effects 0.000 claims description 2
- 150000001875 compounds Chemical class 0.000 abstract 7
- 238000006243 chemical reaction Methods 0.000 description 18
- 230000008569 process Effects 0.000 description 13
- 230000003595 spectral effect Effects 0.000 description 10
- 230000006835 compression Effects 0.000 description 9
- 238000007906 compression Methods 0.000 description 9
- 238000002592 echocardiography Methods 0.000 description 3
- 238000005538 encapsulation Methods 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 108010076504 Protein Sorting Signals Proteins 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010561 standard procedure Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明提供了一种音频编码器和音频编码方法,用于高级音频编码,其中该编码器包括顺序连接的谱处理模块、量化和比特分配模块,以及比特封装模块,其中,还包括:复修正离散余弦变换模块,用于对接收到的音频时域数据执行复修正离散余弦变换,生成复修正离散余弦变换频域谱数据;取实部操作模块,用于对所述复修正离散余弦变换模块输出的复修正离散余弦变换频域谱数据执行取实部操作,得到修正离散余弦变换频域谱数据,并发送给所述谱处理模块;心理声学模型模块,用于利用所述复修正离散余弦变换频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,并发送给所述量化和比特分配模块。本发明降低了运算复杂度,减小了内存需求量。
Description
技术领域
本发明涉及音频编码技术领域,特别是一种音频编码器及音频编码方法。
背景技术
AAC(Advanced Audio Coding,高级音频编码)采用通用的变换域音频编码器结构。
图1所示为对音频信号进行编码的常规音频编码器的框图,其中,图1示出了1S0/IEC 14496-3(表示与MPEG-4AAC相关联的标准技术)中推荐的设备,其中包括:
MDCT(Modified Discrete Cosine Transform,修正离散余弦变换)模块,用于对接收到的时域音频信号进行修正离散余弦变换,生成MDCT频域谱数据;
DFT(Discrete Flourier Transform,离散傅立叶变换)模块,用于对接收到的时域音频信号执行DFT处理,生成DFT频域谱数据;
谱处理模块,用于使用多种方法(诸如用于抑制预回声的时域噪声整形TNS,用于增强立体声信号压缩效率的联合立体声Joint Stereo、用于增强周期性信号压缩性能的长时预测LTP、用于增强噪声分量压缩效率的感知噪声替换PNS等)对MDCT频域谱数据进行处理,增强编码的效率;上述各种方法组件己经在MPEG-4AAC标准中有详细的定义;
心理声学模型模块,用于利用DFT频域谱数据分析音频信号的感知特性,确定所分析的音频信号的掩蔽阈值,即各频段内的最大允许量化噪声;
量化和比特分配模块,依据心理声学模型模块得到的各频段的掩蔽阈值信息,按照最优化比特分配原则,对谱处理模块输出的谱系数进行量化,且对谱系数的量化值和尺度因子(实际就是量化步长)进行huffman编码,在保证编码当前帧使用的比特数不超过可用比特数的前提条件下,尽可能使得(量化过程会引入量化噪声,谱处理过程中不会引入量化噪声)谱系数的量化噪声小于心理声学模型模块得到的最大允许量化噪声量;
比特封装模块,用于对量化和比特分配模块输出的信号和相关控制信息进行封装处理后输出AAC码流。该DFT模块的实现方式可以是如下方式:首先对输入时域音频信号进行加窗,而后分别进行一次2048点离散傅立叶变换和8次连续的256点离散傅立叶变换,然后将离散傅立叶变换得到的谱数据输出给心理声学模型模块进行后续处理。
当然,该DFT模块也可以采用其他的变换方式,将输入时域音频信号转换为频域信号。
发明人在实现本发明的过程中发现,现有技术至少存在以下问题,心理声学模型模块的分析对象为DFT模块输出的频域谱数据,而谱处理模块的处理对象为MDCT频域谱数据,这种对输入的时域音频信号分别进行DFT和MDCT两种变换,采用两套谱数据的AAC编码器实现方法由于需要进行两次变换处理,运算复杂度高,内存需求量大。
发明内容
本发明的目的是提供一种音频编码器及音频编码方法,降低运算复杂度,减小内存需求量。
为了实现上述目的,本发明实施例提供了一种音频编码器,用于高级音频编码,包括顺序连接的谱处理模块、量化和比特分配模块,以及比特封装模块,其中,还包括:
复修正离散余弦变换模块,用于对接收到的音频时域数据执行复修正离散余弦变换,生成复修正离散余弦变换频域谱数据;
取实部操作模块,用于对所述复修正离散余弦变换模块输出的复修正离散余弦变换频域谱数据执行取实部操作,得到修正离散余弦变换频域谱数据,并发送给所述谱处理模块;
心理声学模型模块,用于利用所述复修正离散余弦变换频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,并发送给所述量化和比特分配模块。
上述的音频编码器,其中:
所述心理声学模型模块还用于基于频域感知熵进行块类型判决,获取一判决结果;
所述复修正离散余弦变换模块输出块类型与所述判决结果相对应的复修正离散余弦变换频域谱数据到所述取实部操作模块。
上述的音频编码器,其中:所述量化和比特分配模块对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
为了实现上述目的,本发明实施例还提供了一种音频编码方法,用于高级音频编码,包括谱处理步骤、量化和比特分配步骤,以及比特封装步骤,其中,还包括:
变换步骤,对接收到的音频时域数据执行复修正离散余弦变换,生成复修正离散余弦变换频域谱数据;
取实部步骤,对所述变换步骤输出的复修正离散余弦变换频域谱数据执行取实部操作,得到修正离散余弦变换频域谱数据,作为所述谱处理步骤的输入数据;
心理声学处理步骤,利用所述复修正离散余弦变换频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,作为所述量化和比特分配步骤的其中一个输入数据。
上述的音频编码方法,其中:
所述变换步骤输出的复修正离散余弦变换频域谱数据为块类型与判决结果相对应的复修正离散余弦变换频域谱数据;
所述判决结果基于频域感知熵判决得到。
上述的音频编码方法,其中:所述量化和比特分配步骤中对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
本发明实施例具有以下的有益效果:
由于本发明实施例的方法,将CMDCT得到的频域谱数据作为心理声学模型模块的输入,同时将CMDCT得到的频域谱数据取实部得到的频域谱数据作为谱处理模块的输入,在整个处理过程中,仅仅进行一次变换,降低了运算复杂度高和内存需求量;
同时,由于CMDCT得到的频域谱数据取实部得到的频域谱数据为MDCT频域谱数据,因此谱处理,量化和比特分配等模块的处理对象与AAC规范一致,满足了规范的要求;
由于CMDCT频域谱数据与DFT频域谱数据相类似,也具有幅度和相位信息,因此,心理声学模型模块的处理过程与现有技术完全相同,只不过处理对象的区别,因此,对心理声学模型模块不需要作变动。
附图说明
图1为现有的AAC编码器的结构示意图;
图2为本发明实施例的AAC编码器的结构示意图;
图3为本发明实施例的CMDCT变换的处理示意图;
图4为本发明实施例的AAC编码方法的流程示意图。
具体实施方式
本发明实施例的编码器和编码方法中,考虑到音频时域数据执行CMDCT(Complex Modified Discrete Cosine Transform,复修正离散余弦变换)变换后得到的数据的实部与对音频时域数据执行MDCT变换后得到的数据相同,因此,本发明实施例的编码器和编码方法,对音频时域数据执行CMDCT变换,并对得到的数据执行取实部的操作,将操作结果发送给谱处理模块,而将对音频时域数据执行CMDCT变换得到的数据发送给心理声学模型模块进行处理,降低了编码器的实现复杂度。
本发明实施例的编码器如图2所示,包括:
CMDCT模块,用于对接收到的音频时域数据执行CMDCT变换,生成CMDCT频域谱数据;
取实部操作模块,用于对所述CMDCT频域谱数据执行取实部操作,得到MDCT频域谱数据;
谱处理模块,用于使用多种方法(诸如用于抑制预回声的时域噪声整形TNS,用于增强立体声信号压缩效率的联合立体声Joint Stereo、用于增强周期性信号压缩性能的长时预测LTP、用于增强噪声分量压缩效率的感知噪声替换PNS等)对MDCT频域谱数据进行处理,增强编码的效率;上述各种方法组件己经在MPEG-4AAC标准中有详细的定义;
心理声学模型模块,用于利用CMDCT频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,即各频段内的最大允许量化噪声;由于CMDCT频域谱数据与DFT频域谱数据相类似,也具有幅度和相位信息,因此,心理声学模型模块的处理过程与现有技术完全相同,只不过处理对象的区别。
量化和比特分配模块,依据心理声学模型模块得到的各频段的掩蔽阈值信息,按照最优化比特分配原则,对谱处理模块输出的谱系数进行量化,且对谱系数的量化值和尺度因子(实际就是量化步长)进行huffman编码,在保证编码当前帧使用的比特数不超过可用比特数的前提条件下,尽可能使得谱系数的量化噪声小于心理声学模型模块得到的最大允许量化噪声量;
;
比特封装模块,用于对量化和比特分配模块输出的信号进行封装处理后输出AAC码流。
所述量化和比特分配模块对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
本发明实施例的心理声学模型模块还包括:
块类型判决单元,基于频域感知熵进行块类型判决,获取一判决结果;
所述CMDCT模块根据块类型判决结果输出对应块类型的CMDCT频域谱数据到所述取实部操作模块。
下面对各模块的工作过程进行详细描述。
在本发明的具体实施例中,CMDCT模块同时进行两种变换,如:
对输入时域信号作一次2048点的CMDCT变换和8次连续的256点的CMDCT变换。
类似MDCT变换,CMDCT变换的输入数据存在50%的重叠,如图3所示,AAC一帧信号长度M固定为1024个样本点。
设当前帧序号为n+1,计算第n+1帧信号的CMDCT系数时,输入数据为第n帧和第n+1帧这两帧信号共2048个样本点,输出数据为M个CMDCT谱系数,其中,CMDCT的计算公式为:
其中:
x(n)为输入时域信号,n为时域信号序号;
2N为CMDCT窗长,长块时为2048,短块时为256;
CMDCT(k)为CMDCT频域谱数据,k为频域谱数据序号。
由于CMDCT频域谱数据为复数,而其实部正好等价为MDCT频域谱数据,因此对其执行取实部操作后可以得到MDCT频域谱数据,并将其作为谱处理模块的输入。
对于CMDCT的计算存在成熟的快速算法,一个N点CMDCT的运算复杂度与N/2点复FFT相当,其算法参见Rolf Gluth,“Regular FFT-RelatedTransform Kernels for DCT/DST-Based Polyphase Filter Banks”,ICASSP 1991,pp.2205-2208。
在此进行两种变换是为了选择更好的变换应用于后续的处理。
然后将得到的两套CMDCT频域谱数据发送给心理声学模型模块进行掩蔽阈值计算和窗长判决,心理声学模型模块基于频域感知熵进行块类型判决后,根据窗长判决信息选择一套CMDCT系数,并将选择结果返回给CMDCT模块。
本发明实施例的编码方法如图4所示,包括:
步骤41,对接收到的音频时域数据执行CMDCT变换,生成CMDCT频域谱数据;
步骤42,利用CMDCT频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,即各频段内的最大允许量化噪声;由于CMDCT频域谱数据与DFT频域谱数据相类似,也具有幅度和相位信息,因此,心理声学模型模块的处理过程与现有技术完全相同,只不过处理对象的区别。
步骤43,对CMDCT频域谱数据执行取实部操作,得到MDCT频域谱数据;
步骤44,谱处理步骤,用于使用多种方法(诸如用于抑制预回声的时域噪声整形TNS,用于增强立体声信号压缩效率的联合立体声Joint Stereo、用于增强周期性信号压缩性能的长时预测LTP、用于增强噪声分量压缩效率的感知噪声替换PNS等)对MDCT频域谱数据进行处理,增强编码的效率;上述各种方法组件己经在MPEG-4AAC标准中有详细的定义;
步骤45,量化和比特分配步骤,依据得到的各频段的掩蔽阈值信息,按照最优化比特分配原则,对谱处理步骤输出的谱系数进行量化,且对谱系数的量化值和尺度因子(实际就是量化步长)进行huffman编码在保证编码当前帧使用的比特数不超过可用比特数的前提条件下,尽可能使得谱处理模块输出的谱系数的量化噪声小于心理声学模型模块得到的最大允许量化噪声量;
步骤46,对量化和比特分配步骤输出的信号进行封装处理后输出AAC码流。
在本发明的具体实施例中,步骤45中对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
所述步骤42和43之间还包括:
基于频域感知熵进行块类型判决,获取一判决结果,所述步骤43中的CMDCT频域谱数据为与块类型判决结果对应块长的CMDCT频域谱数据。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (6)
1.一种音频编码器,用于高级音频编码,包括顺序连接的谱处理模块、量化和比特分配模块,以及比特封装模块,其特征在于,还包括:
复修正离散余弦变换模块,用于对接收到的音频时域数据执行复修正离散余弦变换,生成复修正离散余弦变换频域谱数据;
取实部操作模块,用于对所述复修正离散余弦变换模块输出的复修正离散余弦变换频域谱数据执行取实部操作,得到修正离散余弦变换频域谱数据,并发送给所述谱处理模块;
心理声学模型模块,用于利用所述复修正离散余弦变换频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,并发送给所述量化和比特分配模块。
2.根据权利要求1所述的音频编码器,其特征在于:
所述心理声学模型模块还用于基于频域感知熵进行块类型判决,获取一判决结果;
所述复修正离散余弦变换模块输出块类型与所述判决结果相对应的复修正离散余弦变换频域谱数据到所述取实部操作模块。
3.根据权利要求1或2所述的音频编码器,其特征在于,所述量化和比特分配模块对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
4.一种音频编码方法,用于高级音频编码,包括谱处理步骤、量化和比特分配步骤,以及比特封装步骤,其特征在于,还包括:
变换步骤,对接收到的音频时域数据执行复修正离散余弦变换,生成复修正离散余弦变换频域谱数据;
取实部步骤,对所述变换步骤输出的复修正离散余弦变换频域谱数据执行取实部操作,得到修正离散余弦变换频域谱数据,作为所述谱处理步骤的输入数据;
心理声学处理步骤,利用所述复修正离散余弦变换频域谱数据分析音频信号的感知特性,获取音频信号的掩蔽阈值,作为所述量化和比特分配步骤的其中一个输入数据。
5.根据权利要求4所述的音频编码方法,其特征在于:
所述变换步骤输出的复修正离散余弦变换频域谱数据为块类型与判决结果相对应的复修正离散余弦变换频域谱数据;
所述判决结果基于频域感知熵判决得到。
6.根据权利要求4或5所述的音频编码方法,其特征在于,所述量化和比特分配步骤中对所述修正离散余弦变换频域谱数据的量化值使用哈夫曼码表进行编码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2008101173430A CN101350199A (zh) | 2008-07-29 | 2008-07-29 | 音频编码器及音频编码方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2008101173430A CN101350199A (zh) | 2008-07-29 | 2008-07-29 | 音频编码器及音频编码方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101350199A true CN101350199A (zh) | 2009-01-21 |
Family
ID=40268956
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2008101173430A Pending CN101350199A (zh) | 2008-07-29 | 2008-07-29 | 音频编码器及音频编码方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101350199A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101552006B (zh) * | 2009-05-12 | 2011-12-28 | 武汉大学 | 加窗信号mdct域的能量及相位调整方法及其装置 |
CN102129861B (zh) * | 2010-01-15 | 2013-06-12 | 富士通株式会社 | 信号变换方法和系统 |
CN104011794A (zh) * | 2011-12-21 | 2014-08-27 | 杜比国际公司 | 具有并行架构的音频编码器 |
CN105210149A (zh) * | 2013-01-18 | 2015-12-30 | 弗劳恩霍夫应用研究促进协会 | 用于音频信号解码或编码的时域电平调整 |
CN107958670A (zh) * | 2012-11-13 | 2018-04-24 | 三星电子株式会社 | 用于确定编码模式的设备以及音频编码设备 |
CN112530444A (zh) * | 2019-09-18 | 2021-03-19 | 华为技术有限公司 | 音频编码方法和装置 |
-
2008
- 2008-07-29 CN CNA2008101173430A patent/CN101350199A/zh active Pending
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101552006B (zh) * | 2009-05-12 | 2011-12-28 | 武汉大学 | 加窗信号mdct域的能量及相位调整方法及其装置 |
CN102129861B (zh) * | 2010-01-15 | 2013-06-12 | 富士通株式会社 | 信号变换方法和系统 |
US9548061B2 (en) | 2011-11-30 | 2017-01-17 | Dolby International Ab | Audio encoder with parallel architecture |
CN104011794A (zh) * | 2011-12-21 | 2014-08-27 | 杜比国际公司 | 具有并行架构的音频编码器 |
CN104011794B (zh) * | 2011-12-21 | 2016-06-08 | 杜比国际公司 | 具有并行架构的音频编码器 |
CN107958670A (zh) * | 2012-11-13 | 2018-04-24 | 三星电子株式会社 | 用于确定编码模式的设备以及音频编码设备 |
CN107958670B (zh) * | 2012-11-13 | 2021-11-19 | 三星电子株式会社 | 用于确定编码模式的设备以及音频编码设备 |
CN105210149A (zh) * | 2013-01-18 | 2015-12-30 | 弗劳恩霍夫应用研究促进协会 | 用于音频信号解码或编码的时域电平调整 |
CN105210149B (zh) * | 2013-01-18 | 2019-08-30 | 弗劳恩霍夫应用研究促进协会 | 用于音频信号解码或编码的时域电平调整 |
CN112530444A (zh) * | 2019-09-18 | 2021-03-19 | 华为技术有限公司 | 音频编码方法和装置 |
CN112530444B (zh) * | 2019-09-18 | 2023-10-03 | 华为技术有限公司 | 音频编码方法和装置 |
US12057129B2 (en) | 2019-09-18 | 2024-08-06 | Huawei Technologies Co., Ltd. | Audio coding method and apparatus |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100454389C (zh) | 声音编码设备和声音编码方法 | |
CN1838238B (zh) | 一种用于增强信源解码器的设备 | |
JP4950210B2 (ja) | オーディオ圧縮 | |
US20070067166A1 (en) | Method and device of multi-resolution vector quantilization for audio encoding and decoding | |
US9536533B2 (en) | Linear prediction based audio coding using improved probability distribution estimation | |
CN101878504A (zh) | 使用时间分辨率能选择的低复杂性频谱分析/合成 | |
JP5241701B2 (ja) | 符号化装置および符号化方法 | |
RU2012147587A (ru) | Аудиокодер, аудиодекодер и связанные способы обработки многоканальных аудиосигналов с использованием комплексного предсказания | |
CN102144392A (zh) | 用于多信道编码和解码的方法及设备 | |
RU2013124065A (ru) | Кодирование обобщенных аудиосигналов на низких скоростях передачи битов и с низкой задержкой | |
CN101350199A (zh) | 音频编码器及音频编码方法 | |
US8825494B2 (en) | Computation apparatus and method, quantization apparatus and method, audio encoding apparatus and method, and program | |
WO2009125588A1 (ja) | 符号化装置および符号化方法 | |
US7426462B2 (en) | Fast codebook selection method in audio encoding | |
WO2005034081A2 (en) | A method for grouping short windows in audio encoding | |
US20150149161A1 (en) | Method and Arrangement for Scalable Low-Complexity Coding/Decoding | |
US8924202B2 (en) | Audio signal coding system and method using speech signal rotation prior to lattice vector quantization | |
CN103489450A (zh) | 基于时域混叠消除的无线音频压缩、解压缩方法及其设备 | |
EP3514791B1 (en) | Sample sequence converter, sample sequence converting method and program | |
KR20240066586A (ko) | 복소수 양자화를 이용하는 오디오 신호의 부호화 및 복호화 방법 및 장치 | |
CN104616657A (zh) | 高级音频编码系统 | |
Nielsen et al. | Waveform approximating residual audio coding with perceptual pre-and post-filtering |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20090121 |