CN111294782A - 一种加速编解码专用集成电路及方法 - Google Patents
一种加速编解码专用集成电路及方法 Download PDFInfo
- Publication number
- CN111294782A CN111294782A CN202010117764.4A CN202010117764A CN111294782A CN 111294782 A CN111294782 A CN 111294782A CN 202010117764 A CN202010117764 A CN 202010117764A CN 111294782 A CN111294782 A CN 111294782A
- Authority
- CN
- China
- Prior art keywords
- fourier transform
- accelerated
- audio data
- wfta
- hardware accelerator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000012545 processing Methods 0.000 claims abstract description 84
- 238000007781 pre-processing Methods 0.000 claims abstract description 51
- 238000012805 post-processing Methods 0.000 claims description 27
- 230000003595 spectral effect Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 abstract description 34
- 238000010295 mobile communication Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 14
- 238000003775 Density Functional Theory Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 11
- 238000005070 sampling Methods 0.000 description 9
- 238000005265 energy consumption Methods 0.000 description 4
- 101100325756 Arabidopsis thaliana BAM5 gene Proteins 0.000 description 3
- 102100031584 Cell division cycle-associated 7-like protein Human genes 0.000 description 3
- 101000777638 Homo sapiens Cell division cycle-associated 7-like protein Proteins 0.000 description 3
- 101150046378 RAM1 gene Proteins 0.000 description 3
- 101100476489 Rattus norvegicus Slc20a2 gene Proteins 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000000354 decomposition reaction Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 102100024044 Aprataxin Human genes 0.000 description 2
- 101100328887 Caenorhabditis elegans col-34 gene Proteins 0.000 description 2
- 101000757586 Homo sapiens Aprataxin Proteins 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000013475 authorization Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- -1 RAM3 Proteins 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000011065 in-situ storage Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0212—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using orthogonal transformation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/10—Pre-processing; Data cleansing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/18—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Computer Networks & Wireless Communication (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明公开了一种加速编解码专用集成电路及方法,属于移动通信蓝牙技术领域。本发明的加速编解码专用集成电路及方法包括:硬件加速器。其中硬件加速器包括预处理及前旋处理模块,其对数据进行预处理及前旋处理;离散傅里叶变换模块,其在加速的低延迟改进型离散余弦变换运算LD‑MDCT和/或加速的低延迟改进型离散余弦反变换运算LD‑IMDCT中进行多级离散傅里叶变换运算。本发明的加速编解码专用集成电路及方法由ASIC专用集成电路执行并且采用了具体的多级离散傅里叶变换,使该复杂运算由ASIC专用集成电路完成,加快运算速度,降低运算过程的功耗,使得蓝牙音频设备的功耗显著降低。
Description
技术领域
本发明涉及移动通信蓝牙技术领域,特别涉及一种加速编解码专用集成电路及方法。
背景技术
随着移动通信领域的不断发展,蓝牙技术的应用也越来越广,尤其在蓝牙音乐等蓝牙音频的应用方面,蓝牙音频技术也向着低功耗、高音质、高性能的方向发展。
目前主流的蓝牙音频编码器中,SBC(Sub-band coding,子带编码)编码技术出现最早,同时应用最为广泛,但传输效率低,同时因为蓝牙传输中间设备需要转码(压缩),所以同样规格的MP3文件在无线环境下要比有线环境损失更多细节,所以其传输音质一般。
AAC编码技术(高级音频编码技术)是由MPEG(动态图像专家组)联合众多厂商推出的音频标准,该技术可实现较好的音质,但因其编解码过程中运算复杂度较高,相应处理器的耗能也会提高,而且使用时需支付高昂的专利授权费用。APTX系列编码技术和LDAC编码技术,目前皆为私有技术,APTX和LDAC目前都有一定的市场,但因其私有性质以及使用时的授权费,影响技术的全面推广。
而后蓝牙国际联盟联合众多厂商推出LC3编解码技术。由于LC3编解码技术推出的初衷是要满足低功耗蓝牙领域的音频应用,所以对LC3编解码器的功耗要求非常严格。同时,在低功耗蓝牙领域,很多处理器的运算性能及存储资源非常有限,同时需要电池续航能力较强,基于蓝牙国际联盟的LC3标准规范,相关研究机构或者厂商可对其进行实现和优化,常见的可选方案有纯软件实现优化、软件硬件结合实现优化以及纯硬件实现优化,本发明将采用软件硬件结合的实现优化方式,使得优化后的LC3编解码技术性能更好,续航时间更长,并且开发时间较短,便于产品快速更新。
总之,在蓝牙音频技术发展过程中,随着用户在高音质方面的需求不断提高,高音质对应的数据处理量显著增大,导致蓝牙音频设备的功耗及数据处理负荷显著增加。因此,需要有一种技术,在确保高音质的同时,还能够降低蓝牙音频设备的处理负荷和功耗。
发明内容
本发明提供了一种加速编解码专用集成电路及方法,在确保高音质的同时,还能够使蓝牙音频设备的处理负荷和功耗降低。
在本发明的一方面中,本发明提供了一种加速编解码专用集成电路,其包括:硬件加速器,其用于在音频编码过程中对第一音频数据进行加速的低延迟改进型离散余弦变换运算LD-MDCT和/或在音频解码过程中对第二音频数据进行加速的低延迟改进型离散余弦反变换运算LD-IMDCT,硬件加速器包括预处理及前旋处理模块和离散傅里叶变换模块,其中,离散傅里叶变换模块,用于在加速的低延迟改进型离散余弦变换运算LD-MDCT中,对经由预处理及前旋处理模块进行第一预处理和前旋处理的第一音频数据进行多级离散傅里叶变换,和/或在加速的低延迟改进型离散余弦反变换运算LD-IMDCT中,对经由预处理及前旋处理模块进行第二预处理及前旋处理的第二音频数据进行多级离散傅里叶变换,多级离散傅里叶变换包括第一级离散傅里叶变换、第二级离散傅里叶变换以及第三级离散傅里叶变换,其中第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA,第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA、4点维诺格勒傅里叶变换WFTA、8点维诺格勒傅里叶变换WFTA、16点维诺格勒傅里叶变换WFTA以及32点维诺格勒傅里叶变换WFTA中的一者,第三级离散傅里叶变换为3点维诺格勒傅里叶变换WFTA和9点维诺格勒傅里叶变换WFTA中的一者。
在本发明的另一方面中,本发明提供了一种加速编解码专用集成电路的加速编解码方法,加速编解码专用集成电路包括硬件加速器,硬件加速器包括预处理及前旋处理模块、和离散傅里叶变换模块,加速编解码方法包括:由硬件加速器在音频编码过程中对第一音频数据进行加速的低延迟改进型离散余弦变换运算LD-MDCT,和/或在音频解码过程中对第二音频数据进行加速的低延迟改进型离散余弦反变换运算LD-IMDCT,其中,由离散傅里叶变换模块在加速的低延迟改进型离散余弦变换运算LD-MDCT中,对经由预处理及前旋处理模块进行第一预处理和前旋处理的第一音频数据进行多级离散傅里叶变换,和/或在加速的低延迟改进型离散余弦反变换运算LD-IMDCT中,对经由预处理及前旋处理模块进行第二预处理及前旋处理的第二音频数据进行多级离散傅里叶变换,多级离散傅里叶变换包括第一级离散傅里叶变换、第二级离散傅里叶变换以及第三级离散傅里叶变换,其中第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA,第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA、4点维诺格勒傅里叶变换WFTA、8点维诺格勒傅里叶变换WFTA、16点维诺格勒傅里叶变换WFTA、32点维诺格勒傅里叶变换WFTA中的一者,第三级离散傅里叶变换为3点维诺格勒傅里叶变换WFTA和9点维诺格勒傅里叶变换WFTA中的一者。
与现有技术中由CPU或DSP进行软件编程的方案相比,在本发明的加速编解码专用集成电路及其加速编解码方法中,低延迟改进型离散余弦变换运算LD-MDCT和/或低延迟改进型离散余弦反变换运算LD-IMDCT,由ASIC专用集成电路执行并且采用了具体的多级离散傅里叶变换,使该复杂运算由ASIC专用集成电路完成使多个运算同时进行加快运算速度,使得蓝牙音频设备的功耗显著降低,从而在确保高音质的同时,能够使蓝牙音频设备的处理负荷和功耗降低。
附图说明
图1是本发明的加速编解码器专用集成电路系统架构图A;
图2是LC3编解码器中编码与解码原理图;
图3是本发明的加速编解码器专用集成电路系统架构图B;
图4是本发明的加速编解码器专用集成电路中的硬件加速器框图;
图5是以8K采样率的40点DFT即WFTA5 x WFTA8为例,用二维图方式说明图4中灰色部分的离散傅里叶变换DFT的工作方式示意图;
图6是本发明的加速编解码器专用集成电路中内部RAM模块存储示意图;
图7是以7.5毫秒帧长,32k采样率的DFT为例,其运算框图的另外两种表示;
图8是本发明的加速编解码方法的一种具体实施方式的流程图;
图9是本发明的加速编解码专用集成电路的编码时序示意图;
图10是本发明的加速编解码专用集成电路的解码时序示意图。
具体实施方式
为了使本发明的上述特征和优点更加易懂,下面结合附图和具体实施方式对本发明做进一步详细说明。该详细说明仅仅是为了帮助理解本发明,本发明的保护范围不仅仅限于具体实施方式中的具体说明。
需要说明的是,本申请权利要求书和说明书中的术语“第一”、“第二”是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
在现有音频编解码技术的基础上,本发明的研究人员对音频编解码过程中的离散傅里叶变换运算采用多级离散傅里叶变换运算方法,采用专用集成电路ASIC,设计出一种加速编解码专用集成电路。
图1示出了本发明加速编解码专用集成电路的主要运算模块的架构图,在该具体实施方式中,本发明的加速编解码专用集成电路包括硬件加速器模块,该模块用于在音频编码过程中对第一音频数据进行加速的低延迟改进型离散余弦变换运算LD-MDCT和/或在音频解码过程中对第二音频数据进行加速的低延迟改进型离散余弦反变换运算LD-IMDCT。其中硬件加速器模块包含有预处理及前旋处理模块、离散傅里叶变换模块和后旋及后处理模块。如图2所示,在本发明的一个具体实例中低延迟改进型离散余弦变换运算LD-MDCT和低延迟改进型离散余弦反变换运算LD-IMDCT为图2中的灰色部分。
在本发明的一个具体实施方式中,预处理及前旋处理模块对低延迟改进型离散余弦变换运算LD-MDCT中的第一音频数据进行第一预处理和前旋处理,对低延迟改进型离散余弦反变换运算LD-IMDCT中的第二音频数据进行第二预处理和前旋处理。在该具体实施方式中,其中第一预处理为将长度为N的所述低延迟改进型离散余弦变换运算LD-MDCT序列长度转变为长度为N/2的DCT-IV运算序列,在进一步转化为N/4长度的离散傅里叶变换DFT数字序列,并将所述N/4长度的离散傅里叶变换DFT数字序列映射为复数序列;第二预处理为将第二音频数据序列映射为复数序列。通过预处理将原本较长的运算序列转变为较短的运算序列,降低傅里叶变换中的运算复杂度和运算量,加快运算速度,降低运算的能耗。
在本发明的一个具体实施方式中,离散傅里叶变换模块在加速的低延迟改进型离散余弦变换运算LD-MDCT中,对经由预处理及前旋处理模块进行第一预处理和前旋处理的第一音频数据进行多级离散傅里叶变换和/或在加速的低延迟改进型离散余弦反变换运算LD-IMDCT中,对经由预处理及前旋处理模块进行第二预处理及前旋处理的第二音频数据进行所述多级离散傅里叶变换。
在本发明的一个具体实施方式中,如图1所示,离散傅里叶变换模块包括第一级离散傅里叶变换即图3所示的第一级WFTA和第二级离散傅里叶变换即图3所示的第二级WFTA。其中第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA即图4所示的WFTA5,第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA即图4所示的WFTA2、4点维诺格勒傅里叶变换WFTA即图4所示的WFTA4、8点维诺格勒傅里叶变换WFTA即图4所示的WFTA8、16点维诺格勒傅里叶变换WFTA即图4所示的WFTA16以及32点维诺格勒傅里叶变换WFTA即图4所示的WFTA32中的一者。
在本发明的一个具体实施方式中,如图1所示,离散傅里叶变换模块还包括第三级离散傅里叶变换即图3所示的第三级WFTA,其中第三级离散傅里叶变换为3点维诺格勒傅里叶变换WFTA即图4所示的WFTA3,9点维诺格勒傅里叶变换WFTA即图4所示的WFTA9中的一者。其中多级离散傅里叶变换中的各级运算顺序可以调换。
通过多级离散傅里叶变换运算,将运算序列转换为小点数的维诺格勒傅里叶变换WFTA组合,使得傅里叶变换运算步骤减少,复杂度降低,运算速度加快,进而降低运算过程产生的能耗。
其中上文提到的多个小点数快速傅里叶变换为维诺格勒博士应用数论推导得出,并提出一种新的离散傅里叶变换计算方法即WFTA算法,WFTA算法的核心思想是将小点数的DFT转换为循环卷积,利用多项式理论使卷积运算具有尽可能少的乘法次数,同时加法次数几乎不变,使得傅里叶变换运算更加简单,其中2、3、4、5、7、8、9和16点的离散傅里叶变换DFT结果由维诺格勒博士应用数论推到得出,32点的快速傅里叶变换由WFTA4和WFTA8组成,运用库利-图基混合基算法进行运算得出。
在本发明的一个具体实施方式中,后旋及后处理模在加速的低延迟改进型离散余弦变换运算LD-MDCT中对经过多级离散傅里叶变换运算的第一音频数据进行后旋处理和第一后处理和/或在加速的低延迟改进型离散余弦反变换运算LD-IMDCT中对经过多级离散傅里叶变换运算的第二音频数据进行后旋处理和第二后处理。其中第一后处理为将经过后旋处理的所述第一音频数据输出,第二后处理为将经过后旋处理的所述第二音频数据重新构造并输出。
在本发明的一个具体实施方式中,为了方便理解,本发明的加速编解码专用集成电路及方法将10毫秒帧长和7.5毫秒帧长在不同采样率下的各部分运算长度及维诺格勒算法分解列出下表进行说明:
表1:10毫秒帧长配置及WFTA分解表
表2:7.5毫秒帧长配置及WFTA表
下面针对表1进行说明。在表1:10毫秒帧长配置及WFTA分解表中,LD-MDCT、DCT-IV及DFT各部分序列长度变化对应上文中的预处理及前旋处理模块中的预处理过程,即将序列长度为N的数据序列转变为N/4的运算数据序列。表1说明了WFTA分解的具体情况,并根据分解成的小点数乘积结果对多级离散傅里叶变换模块中的各个运算点数进行分配。如上文提到的第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA5,第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA2、4点维诺格勒傅里叶变换WFTA4、8点维诺格勒傅里叶变换WFTA8、16点维诺格勒傅里叶变换WFTA16以及32点维诺格勒傅里叶变换WFTA32中的一者,第三级离散傅里叶变换为3点维诺格勒傅里叶变换WFTA3和9点维诺格勒傅里叶变换WFTA9中的一者。
需说明的是,表1和表2中示出的分配方式只是一种优选的分配方式,但不排除有其他的分配方式。
当表1中示出的采样率确定之后,每帧样本数便会确定,后续便可使用本发明的加速编解码专用集成电路中的多级离散傅里叶模块对编解码过程中的傅里叶变换进行快速运算。
在本发明的一个具体实施方式中,为了更好的描述图4加速器框图中的离散傅里叶变换DFT运算工作方式,以8K采样率,40点DFT即WFTA5×WFTA8为例进行说明,其他依次类推。其中图5为二维图示说明,图5所示的可以进行原位运算,所以RAM1、RAM2、RAM3可以复用,它们在逻辑上是三个,实体上是一个,在本发明中可以使用一块15x16x4Byte的RAM来实现,如图6所示,其中(a)WFTA5×WFTA8:使用斜线部分的RAM;(b) WFTA5×WFTA8×WFTA3:使用斜线部分的RAM;(c) WFTA5×WFTA16×WFTA3: 使用斜线部分的RAM。在该具体实施例中,4Byte对应编解码器中的32bit精度,在实际的使用中,根据对音质或者精度的要求可以调整,例如5Byte对应编解码器中的40bit精度,6Byte的对应编解码器中当然48bit精度等。
在本发明的一个具体实施方式中,如图3所示,硬件加速器中还包括控制器和内部RAM模块。其中控制器模块具有对第一音频数据和/或第二音频数据的判断和控制硬件加速器运算流程的功能。内部RAM/FIFO模块主要起数据临时存储的作用。
在本发明的一个具体实施方式中,如图3所示,控制器模块包括寄存器,第二中断处理和DMA控制器。其中,蓝牙设备之间经过协议协商确认编解码器是音频编码过程,音频解码过程或者是音频编码加上音频解码过程。本地中央处理单元通过寄存器配置硬件加速器的处理工程为低延迟改进型离散余弦变换运算LD-MDCT还是低延迟改进型离散余弦反变换运损LD-IMDCT,进而确认输入的处理数据为第一音频数据还是第二音频数据。
在本发明的一个具体实施方式中,当寄存器判断处理数据为第一音频数据后,通过图4所示的多路开关1和多路开关4对预处理及前旋模块和后旋及后处理模块中的处理过程进行选择。其中当处理数据为第一音频数据即进行编码过程时,如图4所示多路开关1选择预处理及前旋模块中的第一预处理过程,多路开关4选择后旋及后处理模块中的第一后处理过程;当处理数据为第二音频数据即进行解码过程时,如图4所示多路开关1选择预处理及前旋模块中的第二预处理过程,多路开关4选择后旋及后处理模块中的第二后处理过程。
在本发明的一个具体实施方式中,寄存器还可以判断第一音频数据和/或第二音频数据的帧长和采样率等数据特性信息。如图4所示,寄存器根据不同的帧长和采样率,通过多路开关2对第二级离散傅里叶变换的计算单元进行选择,通过多路开关4对第三级离散傅里叶变换的计算单元进行选择,进行与第一音频数据和第二音频数据相对应的离散傅里叶变换运算。
在本发明的一个具体实施方式中,如图3所示的第二中断处理主要对图1和图3所示的离散傅里叶变换模块中的多级离散傅里叶变换运算进行控制。如图3和图4所示,当第一级离散傅里叶变换即第一级WFTA对第一音频数据和/或第二音频数据的快速傅里叶变换运算完成时,第二中断处理产生中断信号以表示第一级离散傅里叶变换运算的完成,同时第二级离散傅里叶变换即第二级WFTA配置并启动,进行第二级离散傅里叶变换运算。当第二级离散傅里叶变换即第二级WFTA对第一音频数据和/或第二音频数据的快速傅里叶变换运算完成时,第二中断处理产生中断信号以表示第二级离散傅里叶变换运算的完成,当需要进行第三级离散傅里叶变换运算时,则第三级离散傅里叶变换即第三级WFTA配置并启动,进行第三级离散傅里叶变换运算。因为每一级WFTA处理根据需要进行开启,从而避免了离散傅里叶变换模块中多级离散傅里叶变换同时开启造成的能源消耗,从而降低电路功耗。
在本发明的一个具体实施例中,如图3所示的DMA控制器完成数据搬移和重排功能。
在本发明的一个具体实施方式中,如图3所示硬件加速器包括内部RAM/FIFO模块,其中内部RAM模块包括RAM1、RAM2、RAM3以及RAM4。如图4所示,RAM1存储预处理及前旋模块处理后的数据,并将数据传输给第一级WFTA进行运算;RAM2存储第一级WFTA运算后的数据,并将数据传输给第二级WFTA进行运算;RAM3存储第二级WFTA运算后的数据,并将数据传输给第三级WFTA进行运算;RAM4存储第三级WFTA运算后的数据,并将数据传输到下一级。
在本发明的一个具体实施方式中,上文提到在多级离散傅里叶变换运算中,各级之间的运算顺序可以调换,在本发明的一个具体实例中,以7.5毫秒帧长,32k采样率的DFT为例,其运算可有6种组合,如图7展示其中的两种。
在本发明的一个具体实施方式中,本发明的加速编解码专用集成电路包括中央处理器,如图1或图3所示。中央处理器包括硬件加速器控制。其中硬件加速器控制向硬件加速器发出控制信号,控制信号控制硬件加速器进行配置和启动,以使硬件加速器进行加速的低延迟改进型离散余弦变换运算LD-MDCT和/或加速的低延迟改进型离散余弦反变换运算LD-IMDCT,中央处理器接收硬件加速器反馈的用于指示加速的低延迟改进型离散余弦变换运算LD-MDCT和/或所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT已经完成的指示信号。
在本发明的一个具体实施方式中,如图3所示,中央处理器CPU/DSP除硬件加速器控制外,还包括第一中断处理模块。第一中断处理在当硬件加速器处理一帧第一音频数据和/或第二音频数据结束时,其产生中断信号,表征一帧第一音频数据和/或第二音频数据在硬件加速器运算的完成,并且设置相应标志位。
在本发明的一个具体实施方式中,如图3所示中央处理器CPU/DSP还包括软件处理模块,该模块的功能概括为实现除低延迟改进型离散余弦变换运算LD-MDCT和/或低延迟改进型离散余弦反变换运算LD-IMDCT以外的软件处理。在编码过程中,当硬件加速器启动后,中央处理器CPU/DSP即开始对当前帧的第一音频数据进行重采样和LTPF处理;当硬件加速器处理一帧第一音频数据结束后,该软件处理模块查询第一中断模块的结束标志,对进行低延迟改进型离散余弦变换LD-MDCT运算的一帧第一音频数据进行后续编码工作。在音频解码处理过程中,在进行硬件加速器数据处理前该软件处理模块将会对第二音频数据进行处理,过程包括码流解析、噪声填充、全局增益、TNS解码和SNS解码,最后得到谱系数;在硬件加速器处理数据后,对运算后的第二音频数据LTPF处理、Scaling并输出。软件处理部分非本发明要点,此处仅对主要功能进行描述。
在本发明的一个具体实例中,第一音频数据为脉冲编码调制(PCM)数据,第二音频数据为频谱系数。
在本发明的一个具体实施方式中,如图8所示,本发明的加速编解码专用集成电路的加速编解码方法包括以下步骤:
步骤S801为中央处理器控制硬件加速器配置并启动步骤,在该步骤中中央处理器中的硬件加速器控制模块当硬件加速器接收到处理数据时,配置并启动硬件加速器;当第一级离散傅里叶变换运算结束时,硬件加速器控制模块配置并启动第二级离散傅里叶变换;需要进行第三级离散傅里叶变换运算时,硬件加速器控制模块在第二级离散傅里叶变换运算结束时,配置并启动第三级离散傅里叶变换。
步骤S802为预处理及前旋模块处理数据步骤,在该步骤中,预处理及前旋模块对编码过程中的第一音频数据进行第一预处理和前旋操作,对解码过程中的第二音频数据进行第二预处理和前旋操处理。如图4所示,多路开关1对第一预处理和第二预处理不同处理过程进行选择。当处理数据为第一音频数据时,如图3所示的寄存器配置多路开关1对第一音频数据进行第一预处理,当处理数据为第二音频数据时,如图3所示的寄存器配置多路开关1对第一音频数据进行第二预处理。
步骤S803为第一级离散傅里叶变换运算步骤,在该步骤中,硬件加速器中的离散傅里叶变换模块对经过预处理及前旋处理的数据信息进行第一级离散傅里叶变换运算。如图4所示,即进行5点维诺格勒傅里叶变换WFTA5运算。
步骤S804为第二级离散傅里叶变换运算步骤,在该步骤中,硬件加速器中的离散傅里叶变换模块对经过第一级离散傅里叶变换运算的数据信息进行第二级离散傅里叶变换运算,如图4所示,即进行2点维诺格勒傅里叶变换WFTA2运算、4点维诺格勒傅里叶变换WFTA4运算、8点维诺格勒傅里叶变换WFTA8运算、16点维诺格勒傅里叶变换WFTA16运算和32点维诺格勒傅里叶变换WFTA32运算中的一者。如图4所示,第二级离散傅里叶变换中的小点数快速傅里叶变换的选择通过多路开关2进行选择。其中多路开关2由图3所示的寄存器根据处理数据的帧长,采样率等数据特性配置多路开关2的选择。
步骤S805为第三级离散傅里叶变换运算步骤,在该步骤中,硬件加速器中的离散傅里叶变换模块对经过第二级离散傅里叶变换运算的数据信息进行第三级离散傅里叶变换运算,如图4所示,即进行3点维诺格勒傅里叶变换WFTA3运算和9点维诺格勒傅里叶变换WFTA9运算中的一者。如图4所示,第三级离散傅里叶变换中的小点数快速傅里叶变换的选择通过多路开关3进行选择。其中多路开关3由图3所示的寄存器根据处理数据的帧长,采样率等数据特性配置多路开关3的选择。此处需说明的是第三级离散傅里叶变换运算步骤不是必需步骤,根据具体处理数据的不同进行选择。
步骤S806为后旋及后处理模块处理数据步骤,在该步骤中,后旋及后处理模块对编码过程中的第一音频数据进行第一后处理和后旋操作,对解码过程中的第二音频数据进行第二后处理和后旋操作。如图4所示,多路开关4对第一后处理和第二后处理不同处理过程进行选择。当处理数据为第一音频数据时,如图3所示的寄存器配置多路开关4对第一音频数据进行第一后处理,当处理数据为第二音频数据时,如图3所示的寄存器配置多路开关4对第二音频数据进行第二后处理。
在本发明的一个具体实施方式中,为了对编解码电路的编解码流程有更清晰的理解,下面结合图9和图10对编解码时序图做简单说明。其中图9为本发明的加速编解码专用集成电路的编码时序图,其中:
1)帧信号:表明一帧第一音频数据即一帧PCM数据已经准备好;
2)硬件加速处理:硬件加速器处理一帧的数据,先配置再启动硬件加速器;
3)硬件结束中断:MDCT加速器产生中断指示一帧数据处理结束,中央处理器CPU/DSP会进入中断服务程序ISR进行处理并设置相应标志;
4)软件处理:
a) 在硬件加速器启动后,中央处理器CPU/DSP即开始重采样和LTPF的处理;
b) 查询MDCT的结束标志(通常此标志会在LTPF结束前设置),然后进行后续的编码操作。
图10为本发明的加速编解码专用集成电路的解码时序图,其中:
1)帧信号:表明一帧码流数据已经准备好;
2)软件预处理:主要包括码流解析、噪声填充、全局增益、TNS解码和SNS解码,最后得到谱系数即第二音频数据;
3)硬件加速处理:CPU/DSP配置并启动硬件加速器,然后由MDCT硬件加速器处理一帧数据;
4)硬件结束中断:MDCT加速器产生中断指示一帧数据处理结束,CPU/DSP会进入ISR进行处理并设置相关标志;
5)软件后处理:对MDCT输出的一帧数据做LTPF处理、Scaling并输出。
从图9及其说明中可以了解在编码时硬件加速器与软件处理可以并行,降低了CPU/DSP的主频要求,这使得软件集成更简单。
综合上文的描述,本发明的一种加速编解码专用集成电路及方法,在发明涉及的硬件加速器中,采用维诺格勒博士在1975年提出了一种新的DFT计算方法WFTA算法进行维诺格勒傅里叶变换运算。减少运算步骤,加快运算速度,同时采用专用集成电路ASIC电路的设计,降低音频编解码器的功耗,延长蓝牙设备的池寿命。另外本发明的加速编解码专用集成电路,在硬件加速器进行运算同时,软件处理部分可以同时运行,降低了CPU/DSP的主频要求,使得软件集成更简单。
Claims (13)
1.一种加速编解码专用集成电路,其特征在于,包括:
硬件加速器,其用于在音频编码过程中对第一音频数据进行加速的低延迟改进型离散余弦变换运算LD-MDCT和/或在音频解码过程中对第二音频数据进行加速的低延迟改进型离散余弦反变换运算LD-IMDCT,所述硬件加速器包括预处理及前旋处理模块和离散傅里叶变换模块,其中,
所述离散傅里叶变换模块,用于在所述加速的低延迟改进型离散余弦变换运算LD-MDCT中,对经由所述预处理及前旋处理模块进行第一预处理和前旋处理的所述第一音频数据进行多级离散傅里叶变换,和/或在所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT中,对经由所述预处理及前旋处理模块进行第二预处理及所述前旋处理的所述第二音频数据进行所述多级离散傅里叶变换,所述多级离散傅里叶变换包括第一级离散傅里叶变换和第二级离散傅里叶变换,所述第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA,所述第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA、4点维诺格勒傅里叶变换WFTA、8点维诺格勒傅里叶变换WFTA、16点维诺格勒傅里叶变换WFTA、32点维诺格勒傅里叶变换WFTA中的一者。
2.如权利要求1所述的加速编解码专用集成电路,其中,所述多级离散傅里叶变换还包括:
第三级离散傅里叶变换,其为3点维诺格勒傅里叶变换WFTA、9点维诺格勒傅里叶变换WFTA中的一者。
3.如权利要求1所述的加速编解码专用集成电路,其中,所述预处理及前旋处理模块在所述低延迟改进型离散余弦变换运算LD-MDCT中对所述第一音频数据采取的所述第一预处理为将长度为N的所述低延迟改进型离散余弦变换运算LD-MDCT长度转变为长度为N/2的DCT-IV运算序列,在进一步转化为N/4长度的离散傅里叶变换DFT数字序列,并将所述N/4长度的离散傅里叶变换DFT数字序列映射为复数序列;所述预处理及前旋处理模块在所述低延迟改进型离散余弦反变换运算LD-IMDCT中对所述第二音频数据采取的所述第二预处理为将第二音频数据序列映射为复数序列。
4.如权利要求1所述的加速编解码专用集成电路,其中,所述硬件加速器还包括:
后旋及后处理模块,用于在所述加速的低延迟改进型离散余弦变换运算LD-MDCT中对所述第一音频数据进行后旋处理和第一后处理,和/或在所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT中对所述第二音频数据进行所述后旋处理和第二后处理,所述第一后处理为将经过所述后旋处理的所述第一音频数据输出,所述第二后处理为将经过所述后旋处理的所述第二音频数据重新构造并输出。
5.如权利要求1所述的加速编解码专用集成电路,其中,所述加速编解码专用集成电路还包括:
中央处理器,其向所述硬件加速器发出控制信号,所述控制信号控制所述硬件加速器进行配置和启动,以使所述硬件加速器进行所述加速的低延迟改进型离散余弦变换运算LD-MDCT和/或所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT,所述中央处理器接收所述硬件加速器反馈的用于指示所述加速的低延迟改进型离散余弦变换运算LD-MDCT和/或所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT已经完成的指示信号。
6.如权利要求4所述的加速编解码专用集成电路,其中,所述中央处理器包括,
硬件加速器控制模块,其当所述硬件加速器接收到所述第一音频数据和/或所述第二音频数据时,生成所述控制信号。
7.如权利要求1所述的加速编解码专用集成电路,其中,
所述第一音频数据为脉冲编码调制(PCM)数据帧;并且所述第二音频数据为频谱系数帧。
8.一种加速编解码专用集成电路的加速编解码方法,所述加速编解码专用集成电路包括硬件加速器,所述硬件加速器包括预处理及前旋处理模块和离散傅里叶变换模块,其特征在于,所述加速编解码方法包括:
由所述硬件加速器在音频编码过程中对第一音频数据进行加速的低延迟改进型离散余弦变换运算LD-MDCT,和/或在音频解码过程中对第二音频数据进行加速的低延迟改进型离散余弦反变换运算LD-IMDCT,其中,
由所述离散傅里叶变换模块在所述加速的低延迟改进型离散余弦变换运算LD-MDCT中,对经由所述预处理及前旋处理模块进行第一预处理和前旋处理的所述第一音频数据进行多级离散傅里叶变换,和/或在所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT中,对经由所述预处理及前旋处理模块进行第二预处理及所述前旋处理的所述第二音频数据进行所述多级离散傅里叶变换,所述多级离散傅里叶变换包括第一级离散傅里叶变换和第二级离散傅里叶变换,所述第一级离散傅里叶变换为5点维诺格勒傅里叶变换WFTA,所述第二级离散傅里叶变换为2点维诺格勒傅里叶变换WFTA、4点维诺格勒傅里叶变换WFTA、8点维诺格勒傅里叶变换WFTA、16点维诺格勒傅里叶变换WFTA、32点维诺格勒傅里叶变换WFTA中的一者。
9.根据权利要求7所述的加速编解码方法,其中,所述多级离散傅里叶变换还包括:
第三级离散傅里叶变换,其为3点维诺格勒傅里叶变换WFTA、9点维诺格勒傅里叶变换WFTA中的一者。
10.根据权利要求7所述的加速编解码方法,其中,所述硬件加速器还包括后旋及后处理模块,所述加速编解码方法还包括:
由所述后旋及后处理模块在所述加速的低延迟改进型离散余弦变换运算LD-MDCT中对所述第一音频数据进行后旋处理和第一后处理,和/或在所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT中对所述第二音频数据进行所述后旋处理和第二后处理。
11.根据权利要求7所述的加速编解码方法,其中,所述加速编解码专用集成电路还包括中央处理器,所述加速编解码方法还包括:
由所述中央处理器向所述硬件加速器发出控制信号,所述控制信号控制所述硬件加速器进行配置和启动,以使所述硬件加速器进行所述加速的低延迟改进型离散余弦变换运算LD-MDCT和/或所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT,以及
由所述中央处理器接收所述硬件加速器反馈的用于指示所述加速的低延迟改进型离散余弦变换运算LD-MDCT和/或所述加速的低延迟改进型离散余弦反变换运算LD-IMDCT已经完成的指示信号。
12.根据权利要求10所述的加速编解码方法,其中,所述中央处理器包括硬件加速器控制模块,所述加速编解码方法还包括:
当所述硬件加速器接收到所述第一音频数据和/或所述第二音频数据时,由硬件加速器控制模块生成所述控制信号。
13.根据权利要求7所述的加速编解码方法,其中,
所述第一音频数据为脉冲编码调制(PCM)数据帧;并且所述第二音频数据为频谱系数帧。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010117764.4A CN111294782B (zh) | 2020-02-25 | 2020-02-25 | 一种加速编解码专用集成电路及方法 |
PCT/CN2020/142276 WO2021169601A1 (zh) | 2020-02-25 | 2020-12-31 | 一种加速编解码专用集成电路及方法 |
US17/802,151 US20230178088A1 (en) | 2020-02-25 | 2020-12-31 | Application-specific integrated circuit for accelerating encoding and decoding, and method therefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010117764.4A CN111294782B (zh) | 2020-02-25 | 2020-02-25 | 一种加速编解码专用集成电路及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111294782A true CN111294782A (zh) | 2020-06-16 |
CN111294782B CN111294782B (zh) | 2022-02-08 |
Family
ID=71024680
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010117764.4A Active CN111294782B (zh) | 2020-02-25 | 2020-02-25 | 一种加速编解码专用集成电路及方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230178088A1 (zh) |
CN (1) | CN111294782B (zh) |
WO (1) | WO2021169601A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112153787A (zh) * | 2020-09-23 | 2020-12-29 | 北京百瑞互联技术有限公司 | 一种根据lc3蓝牙音乐节奏律动彩灯的方法、装置及介质 |
WO2021169601A1 (zh) * | 2020-02-25 | 2021-09-02 | 北京百瑞互联技术有限公司 | 一种加速编解码专用集成电路及方法 |
CN116110409A (zh) * | 2023-04-10 | 2023-05-12 | 南京信息工程大学 | 一种ASIP架构的大容量并行Codec2声码器系统及编解码方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110071821A1 (en) * | 2007-06-15 | 2011-03-24 | Alon Konchitsky | Receiver intelligibility enhancement system |
US20140153575A1 (en) * | 2009-04-27 | 2014-06-05 | Lsi Corporation | Packet data processor in a communications processor architecture |
CN107610710A (zh) * | 2017-09-29 | 2018-01-19 | 武汉大学 | 一种面向多音频对象的音频编码及解码方法 |
CN108986787A (zh) * | 2017-05-31 | 2018-12-11 | 英特尔公司 | 使用神经网络加速器的特征提取 |
CN109360574A (zh) * | 2018-10-18 | 2019-02-19 | 恒玄科技(上海)有限公司 | 一种无线蓝牙系统改进的高级音频编码/解码方法及系统 |
CN110767243A (zh) * | 2019-11-04 | 2020-02-07 | 重庆百瑞互联电子技术有限公司 | 一种音频编码方法、装置及设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100546197C (zh) * | 2006-08-17 | 2009-09-30 | 上海交通大学 | 适用于多音频标准通用滤波器单元的vlsi实现方法 |
CN101540172B (zh) * | 2009-04-15 | 2012-02-22 | 炬力集成电路设计有限公司 | 一种音频数据的编解码系统及方法 |
CN111294782B (zh) * | 2020-02-25 | 2022-02-08 | 北京百瑞互联技术有限公司 | 一种加速编解码专用集成电路及方法 |
-
2020
- 2020-02-25 CN CN202010117764.4A patent/CN111294782B/zh active Active
- 2020-12-31 WO PCT/CN2020/142276 patent/WO2021169601A1/zh active Application Filing
- 2020-12-31 US US17/802,151 patent/US20230178088A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110071821A1 (en) * | 2007-06-15 | 2011-03-24 | Alon Konchitsky | Receiver intelligibility enhancement system |
US20140153575A1 (en) * | 2009-04-27 | 2014-06-05 | Lsi Corporation | Packet data processor in a communications processor architecture |
CN108986787A (zh) * | 2017-05-31 | 2018-12-11 | 英特尔公司 | 使用神经网络加速器的特征提取 |
CN107610710A (zh) * | 2017-09-29 | 2018-01-19 | 武汉大学 | 一种面向多音频对象的音频编码及解码方法 |
CN109360574A (zh) * | 2018-10-18 | 2019-02-19 | 恒玄科技(上海)有限公司 | 一种无线蓝牙系统改进的高级音频编码/解码方法及系统 |
CN110767243A (zh) * | 2019-11-04 | 2020-02-07 | 重庆百瑞互联电子技术有限公司 | 一种音频编码方法、装置及设备 |
Non-Patent Citations (3)
Title |
---|
VLADIMIR BRITANAK: "New fast algorithms for the low delay MDCT computation in the MPEG-4 AAC enhanced low delay audio coding standard", 《SIGNAL PROCESSING》 * |
何斌: "基于软硬件协同的AAC和AVS音频可重构解码器", 《语音技术》 * |
黄俊俏: "HE-AAC音频解码器FPGA原型芯片设计", 《信息科技辑》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021169601A1 (zh) * | 2020-02-25 | 2021-09-02 | 北京百瑞互联技术有限公司 | 一种加速编解码专用集成电路及方法 |
CN112153787A (zh) * | 2020-09-23 | 2020-12-29 | 北京百瑞互联技术有限公司 | 一种根据lc3蓝牙音乐节奏律动彩灯的方法、装置及介质 |
CN116110409A (zh) * | 2023-04-10 | 2023-05-12 | 南京信息工程大学 | 一种ASIP架构的大容量并行Codec2声码器系统及编解码方法 |
CN116110409B (zh) * | 2023-04-10 | 2023-06-20 | 南京信息工程大学 | 一种ASIP架构的大容量并行Codec2声码器系统及编解码方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021169601A1 (zh) | 2021-09-02 |
CN111294782B (zh) | 2022-02-08 |
US20230178088A1 (en) | 2023-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111294782B (zh) | 一种加速编解码专用集成电路及方法 | |
CN104011794A (zh) | 具有并行架构的音频编码器 | |
WO2006121101A1 (ja) | 音声符号化装置およびスペクトル変形方法 | |
CN112002341B (zh) | 语音信号的参数化表达、加密传输和重构的方法 | |
US8200730B2 (en) | Computing circuits and method for running an MPEG-2 AAC or MPEG-4 AAC audio decoding algorithm on programmable processors | |
US20100128818A1 (en) | Fft processor | |
CN107895580B (zh) | 一种音频信号的重建方法和装置 | |
CN110830654B (zh) | 一种播放语音消息的方法及设备 | |
Yang et al. | Design of a configurable fixed-point FFT processor | |
CN1770256A (zh) | 一种基于变换域的数字音频混合方法 | |
US8417753B2 (en) | Pipelined FFT circuit and transform method thereof | |
US7925213B2 (en) | Method and system for audio signal processing for Bluetooth wireless headsets using a hardware accelerator | |
KR101297085B1 (ko) | 가변 고속 푸리에 변환 장치 및 그 방법 | |
CN115878949A (zh) | 信号处理方法以及相关设备 | |
CN112597432A (zh) | 基于fft算法的复序列互相关在fpga上的加速实现方法及系统 | |
Tang | Design of a STFT hardware kernel for spectral Doppler processing in portable ulrasound systems | |
JP7381611B2 (ja) | センサ信号の処理方法及び処理装置 | |
Jamieson et al. | Analyzing a Low-bit rate Audio Codec-Codec2-on an FPGA | |
Cai et al. | Research on Low Delay Audio Convolution Algorithm Combining Mobile and Cloud | |
KR20210056277A (ko) | 고속 퓨리에 변환 방법 및 장치 | |
CN114880109B (zh) | 基于cpu-gpu异构架构的数据处理方法、设备以及存储介质 | |
JP2014503093A (ja) | 信号処理方法およびデバイス | |
CN117133307A (zh) | 低功耗单声道语音降噪方法、计算机装置及计算机可读存储介质 | |
CN117278047A (zh) | 一种数据处理方法、系统及存储介质 | |
JP3904719B2 (ja) | サブバンド合成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address | ||
CP03 | Change of name, title or address |
Address after: A1009, floor 9, block a, No. 9, Shangdi Third Street, Haidian District, Beijing 100085 Patentee after: Beijing Bairui Internet Technology Co.,Ltd. Address before: 7-1-1, building C, 7 / F, building 2-1, No.2, Shangdi Information Road, Haidian District, Beijing 100085 Patentee before: BARROT WIRELESS Co.,Ltd. |