CN1930608A - 生成等级参数的设备和方法及生成多通道表示的设备和方法 - Google Patents
生成等级参数的设备和方法及生成多通道表示的设备和方法 Download PDFInfo
- Publication number
- CN1930608A CN1930608A CNA2005800073514A CN200580007351A CN1930608A CN 1930608 A CN1930608 A CN 1930608A CN A2005800073514 A CNA2005800073514 A CN A2005800073514A CN 200580007351 A CN200580007351 A CN 200580007351A CN 1930608 A CN1930608 A CN 1930608A
- Authority
- CN
- China
- Prior art keywords
- parameter
- passage
- channel
- energy
- reconstruct
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000004590 computer program Methods 0.000 claims description 6
- 238000005303 weighing Methods 0.000 claims description 2
- 238000006711 Chan reduction reaction Methods 0.000 claims 4
- 230000001915 proofreading effect Effects 0.000 claims 2
- 239000011159 matrix material Substances 0.000 description 33
- 230000014509 gene expression Effects 0.000 description 16
- 239000010410 layer Substances 0.000 description 16
- 230000008859 change Effects 0.000 description 14
- 238000009826 distribution Methods 0.000 description 13
- 239000000203 mixture Substances 0.000 description 13
- 230000005540 biological transmission Effects 0.000 description 12
- 238000012986 modification Methods 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 230000005236 sound signal Effects 0.000 description 9
- 238000012937 correction Methods 0.000 description 7
- 238000011002 quantification Methods 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 230000011664 signaling Effects 0.000 description 6
- 239000012792 core layer Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000003860 storage Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 230000035807 sensation Effects 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000009792 diffusion process Methods 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000002592 echocardiography Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/032—Quantisation or dequantisation of spectral components
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/26—Pre-filtering or post-filtering
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/03—Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/03—Application of parametric coding in stereophonic audio systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- Algebra (AREA)
- Mathematical Optimization (AREA)
- Mathematical Analysis (AREA)
- Pure & Applied Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Stereophonic System (AREA)
- Stereo-Broadcasting Methods (AREA)
- Radio Relay Systems (AREA)
- Circuits Of Receivers In General (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
具有多个原始通道的多通道信号的参数表示包括参数集,当参数集与至少一个下混通道一起使用时,允许多通道重构。计算额外的等级参数(rM),使得由等级参数加权的至少一个下混通道的能量等于原始通道的能量之和。将额外的等级参数与参数集或者与下混通道一起发送到多通道重构器。用于生成多通道表示的设备在将下混信号输入到上混频器或者上混处理内之前,使用等级参数来校正(902)至少一个所传输的下混通道的能量。
Description
技术领域
本发明涉及使用空间参数对音频信号多通道表示进行编码。本发明公开了用于根据少于输出通道数的多个通道来估计和定义用来重建多通道信号的新方法。具体地讲,本发明旨在最小化多通道表示的比特率,并提供多通道信号的编码表示,使得能够对所有可能的通道配置容易地编码和解码数据。
背景技术
在PCT/SE02/01372“Efficient and scalable Parametric Stereo codingfor Low Bit rate Audio Coding Applications”中已经表明,可以根据给出立体声像的非常紧凑表示的单声道信号,来重建逼近原始立体声像的立体声像。基本原理是将输入信号划分为频带和时间段,估计通道间强度差(IID)和通道间相干性(ICC)。第一参数是特定频带中两个通道之间功率分布的测量,第二参数是特定频带中两个通道之间相关性的估计。在解码器一侧,通过根据IID数据在两个输出通道之间分配单声道信号,并且添加去相关信号以保留原始立体声通道的通道相关性,来根据单声道信号重建立体声像。
对于多通道(在此环境中,多通道意味着多于两个输出通道)的情况,必须考虑几个其他问题。存在数种多通道配置。最常见的是5.1配置(中央通道、正面左/右通道、环绕左/右通道、和LFE通道)。然而,还存在许多其他配置。根据完整的编码器/解码器系统的观点,希望系统对所有通道配置可以使用相同的参数集(例如,IID和ICC)或其子集。ITU-R BS.775定义了数种下混方案,能够根据给定的通道配置获得包括较少通道的通道配置。而不是总是要对所有通道解码和依赖下混,可能希望具有一种多通道表示,使得接收机能够在解码通道之前立即提取通道配置有关的参数。另外,根据可扩展或嵌入式编码的观点,希望固有地可扩展的参数集,其中,例如可以在位流中的增强层中存储与环绕通道相对应的数据。
与上面不同,还可能希望能够根据所处理的信号特性使用不同的参数定义,以便在参数化之间切换,这导致针对当前所处理信号段的最小比特率开销。
在本领域中,已知另一种使用和信号或下混信号以及额外参数侧面信息的多通道信号表示,称作双耳提示编码(binaural cue coding,BCC)。在“Binaural Cue Coding-Part 1:Psycho-Acoustic Fundamentalsand Design Principles”,IEEE Transactions on Speech and AudioProcessing,vol.11,No.6,November 2003,F.Baumgarte,C.Faller和“Binaural Cue Coding.Part 2:Schemes and Applications”,IEEETransactions on Speech and Audio Processing,vol.11,No.6,November2003,C.Faller&F.Baumgarte中描述了这种技术。
一般而言,双耳提示编码是一种根据一个下混音频通道和侧面信息进行多通道空间呈现的方法。BCC编码器要计算的且BCC解码器用于音频重构或音频呈现的数个参数包括通道间等级差、通道间时间差和通道间相干性参数。这些通道间提示是对空间像的感觉的确定因素。这些参数是针对原始多通道信号的时间样本块所给出的,并且还是频率选择性的,从而每个多通道信号样本块具有针对数个频带的数个提示。在一般的C播放通道情况下,在每个子带中考虑通道对,即,每个通道相对于参考通道之间的通道间等级差和通道间时间差。对于每个通道间等级差,将一个通道定义为参考通道。利用通道间等级差和通道间时间差,可以向所使用的播放设置的扬声器对中一对之间的任意方向呈现源。为了确定所呈现的源的宽度或扩散,对于所有音频通道,每个子带考虑一个参数就足够了。该参数是通道间相干性参数。通过修改子带信号使所有可能的通道对具有相同的通道间相干性参数,来控制所呈现的源的宽度。
在BCC编码中,确定参考通道1和任何其他通道之间的所有通道间等级差。例如,当确定中央通道为参考通道时,计算左通道和中央通道之间的第一通道间等级差、右通道和中央通道之间的第二通道间等级差、左环绕通道和中央通道之间的第三通道间等级差、和右环绕通道和中央通道之间的第四通道间等级差。这种情况描述了五通道方案。当五通道方案另外包括低频增强通道(也称作“重低音”通道)时,计算低频增强通道和作为信号参考通道的中央通道之间的第五通道间等级差。
当使用信号下混通道(也称作“单声道”通道)和诸如ICLD(通道间等级差)、ICTD(通道间时间差)和ICC(通道间相干性)之类所传送的提示重构原始多通道时,使用这些提示修改单声道信号的频谱系数。使用正实数执行等级修改,其中正实数确定每个频谱系数的等级修改。使用复数生成通道间时间差,其中复数的大小确定每个频谱系数的相位修改。另一函数确定相干性影响。通过首先计算参考通道的因子,来计算每个通道的等级修改的因子。计算参考通道的因子,使得对每个频率分区,所有通道的功率之和与和信号的功率相同。然后,根据参考通道的等级修改因子,使用各自的ICLD参数,计算其他通道的等级修改因子。
于是,为了执行BCC合成,要计算参考通道的等级修改因子。为了该计算,一个频带的所有ICLD参数都是必须的。然后,根据该信号通道的此等级修改,可以计算非参考通道的其他通道的等级修改因子。
这种方法的缺点在于,为了完美的重构,需要每一个通道间等级差。当存在易出错的传输通道时,这种要求甚至更成问题。所传输的通道间等级差之中的每个错误将导致重构多通道信号中的错误,因为需要用每个通道间等级差来计算多通道输出信号中的每一个。另外,当在传输期间丢失了通道间等级差时,不能进行重构,尽管这种通道间等级差例如仅仅对于左环绕通道或右环绕通道是必要的,但这些通道对于多通道重构没有那么重要,因为大部分信息包括在正面左通道(后文称作左通道)、正面右通道(后文称作右通道)或中央通道中。当在传输期间丢失了低频增强通道的通道间等级差时,情况变得更恶劣。在这种情况下,不可能进行多通道重构,或者只可能进行错误的多通道重构,尽管低频增强通道对于听众的收听舒适性不是决定性的。于是,单个通道间等级差中的错误蔓延为每个重构输出通道内的错误。
参数多通道表示的问题在于,通常,给出通道间等级差,例如,BCC编码中的ICLD,或者其他参数多通道表示中的平衡值,作为相对值,而不是绝对值。在BCC中,ICLD参数描述通道和参考通道之间的等级差。也可以给出平衡值,作为通道对中两个通道之间的比例。当重构多通道信号时,将这种等级差或平衡参数应用于基础通道,可以是单声道基础通道或具有两个基础通道的立体声基础通道信号。于是,例如在五或六个重构输出通道之间分配至少一个基础通道中所包括的能量。于是,重构输出通道中的绝对能量由通道间等级差或平衡参数以及接收机输入处的下混信号能量确定。
当接收机输入处的下混信号能量相对于编码器输出的下混信号变化时,将出现等级改变。在这种情况下,要强调的是,取决于所使用的参数化方案,当参数是频率选择性的时,这种等级变化不仅会导致重构信号的一般音量变化,而且还会导致严重的假象。因为输出通道在该特定频带中的频率分量具有太低或太高的等级,例如,当对下混信号的特定频带的操作多于频率刻度上别处的频带时,这种操作在重构输出信号中容易显现。
另外,时变等级操作也会导致重构输出信号的整体等级随时间变化,因此感觉到讨厌的假象。
虽然上面的情况集中在编码、传输和解码下混信号所导致的等级操作,但也可能出现其他等级偏差。由于被下混为一个或两个通道的不同通道之间的相位依赖性,可能出现这样的情况:单声道信号具有的能量不等于原始信号的能量和。因为通常在样本方面(sample-wise),即通过添加时间波形,执行下混,所以左信号和右信号之间例如180度的相位差将导致下混信号中两个通道的完全抵消,这将导致零能量,尽管两个信号肯定都具有一定的信号能量。虽然在通常情况下这种极端情况不太可能发生,但是仍将出现能量变化,因为所有信号当然并非完全不相关。这种变化也可以导致重构输出信号的音量波动,并且还将导致假象,因为重构输出信号的能量将不同于原始多通道信号的能量。
发明内容
本发明的目的是提供一种参数化概念,这导致具有改进输出质量的多通道重构。
该目的通过根据权利要求1所述的用于生成等级参数的设备、根据权利要求7所述的用于生成重构多通道表示的设备、根据权利要求9所述的用于生成等级参数的方法、根据权利要求10所述的用于生成重构多通道表示的方法、根据权利要求11所述的计算机程序或者根据权利要求12所述的参数表示来实现。
本发明基于如下发现:为了高质量重构,以及由于灵活的编码/传输和解码方案,与下混信号或多通道信号的参数表示一起发送额外的等级参数,从而多通道重构器可以使用该等级参数和等级差参数以及下混信号一起来重新生成多通道输出信号,该输出信号不会出现等级变化或频率选择性的、等级导致的假象。
根据本发明,如此计算等级参数,使得由等级参数加权(例如,相乘或相除)的至少一个下混通道的能量等于原始通道的能量和。
在一个实施例中,根据下混通道的能量和原始通道的能量和之比得到等级参数。在该实施例中,在编码器一侧计算下混通道和原始多通道信号之间的等级差,并且输入到数据流中作为等级校正因子,将等级校正因子视为额外的参数,这也是对于下混通道的样本块以及特定频带给出的。于是,对于存在通道间等级差和平衡参数的每个块和频带,加入了新的等级参数。
本发明还提供了灵活性,因为允许传输多通道信号的下混,这不同于参数所基于的下混。例如,当广播台不希望广播由多通道编码器所生成的下混信号,而是希望广播由音响工程师在音响工作室中生成的下混信号(这是基于人类的主观和创造性印象的下混)时,可能出现这种情况。尽管如此,广播台可能希望与此“主下混”结合还发送多通道参数。根据本发明,参数集和主下混之间的适配由等级参数提供,在这种情况下,等级参数是主下混和参数集所基于的参数下混之间的等级差。
本发明的优点在于:额外的等级参数提供了改进的输出质量和改进的灵活性,因为与一个下混信号有关的参数集也可以适配于不是在参数计算期间生成的另一下混。
为了比特率减小的目的,优选的是,应用新等级参数的Δ编码以及量化和熵编码。具体地讲,Δ编码将导致高编码增益,因为带与带之间或者时间块与时间块之间的变化将不会如此之高,从而获得相对小的差值,这在与随后的诸如Huffman编码器之类的熵编码结合使用时允许良好的编码增益。
在本发明的优选实施例中,使用多通道信号参数表示,其包括至少两个不同的平衡参数,平衡参数指示两个不同通道对之间的平衡。具体地讲,灵活性、可扩展性、错误鲁棒性、甚至比特率效率是由于作为第一平衡参数基础的第一通道对不同于作为第二平衡参数的第二通道对的结果,其中形成这些通道对的四个通道彼此都不同。
于是,优选的概念偏离了单个参考通道的概念,并且使用多平衡或超平衡的概念,这对于人类的声音印象更为直观和自然。具体地讲,第一和第二平衡参数之下的参数对可以包括原始通道、下混通道,或者优选地,输入通道之间的特定组合。
已经发现,根据作为第一通道的中央通道以及作为通道对的第二通道的左原始通道和右原始通道之和得到的平衡参数对于提供中央通道和左右通道之间的确切能量分配尤其有用。应该注意,在此环境中,这三个通道通常包括音频场景的大部分信息,其中特别是左右立体声定位不仅受到左和右之间平衡的影响,而且还受到中央与左和右之和之间平衡的影响。根据本发明的优选实施例,使用此平衡参数,来反映这种观察。
优选的是,当发送单个单声道下混信号时,已经发现,除了中央/左加上右平衡参数之外,左/右平衡参数、背面-左/背面-右平衡参数以及正面/背面平衡参数是比特率高效参数表示的最佳解,该最佳解是灵活的,具有错误鲁棒性,并且在较大程度无假象的。
在接收机一侧,与其中仅由所发送的信息来计算每个通道的BCC合成不同,优选的多通道表示还利用有关用来生成下混通道的下混方案的信息。于是,除了平衡参数之外,还使用现有技术系统中不使用的关于下混方案的信息来进行上混。因此,执行上混操作,使得形成针对平衡参数的通道对的重构多通道信号内的通道之间的平衡由平衡参数确定。
这一概念,即对不同平衡参数使用不同通道对,使得可以生成一些通道,而不需要每个所传输平衡参数的知识。特别是,不需要关于任何背面-左/背面-右平衡或者正面/背面平衡的任何知识,可以重构左、右和中央通道。从位流提取额外参数或者线接收器发送额外平衡参数允许重构一个或多个额外通道,这种效果允许非常精调的可扩展性。这与现有技术的单参考系统不同,在现有技术的单参考系统中,需要每个通道间电平差来重构所有重构输出通道的全部或仅仅其子组。
优选概念的灵活性还在于,平衡参数的选择能够适于特定的重构环境。例如,当五通道设置形成原始多通道信号设置,以及四通道设置形成重构多通道设置,即,仅具有单个环绕扬声器,例如位于听众身后时,正面-背面平衡参数允许计算组合环绕通道,而不需要关于左环绕通道和右环绕通道的任何知识。这与单参考通道系统不同,在单参考通道系统中,必须从数据流中提取针对左环绕通道的通道间等级差以及针对右环绕通道的通道间等级差。然后,必须计算左环绕通道和右环绕通道。最后,必须加上两个通道,以获得四通道再现配置的单个环绕扬声器通道。在更直观和更加面向用户的平衡参数表示中,不需要执行所有这些步骤,因为这种表示自动给予组合环绕通道,因为平衡参数表示不依赖单个参考通道,而是还允许使用原始通道的组合作为平衡参数通道对的通道。
本发明涉及音频信号的参数化多通道表示的问题。本发明提供了对多通道表示定义适当参数的有效方式,并且还提供了不必对所有通道解码就能提取代表所希望的通道配置的参数的能力。本发明还解决了对给定信号段选择最优参数配置以最小化编码给定信号段的空间参数所需比特率的问题。本发明还提出了在一般的多通道环境中如何应用先前仅适用于双通道情况的去相关方法。
在优选实施例中,本发明包括如下特征:
-在编码器一侧,将多通道信号下混为一个或两个通道表示;
-给定多通道信号,或者以灵活的方式或者以每帧为基础,定义表示多通道信号的参数,以便最小化比特率,或者以便使解码器能够提取位流等级上的通道配置;
-在解码器一侧,给定解码器当前所支持的通道配置,提取相关参数集;
-给定当前通道配置,创建所需数目的彼此去相关信号;
-给定从位流数据解码的参数集以及去相关信号,重建输出信号。
-多通道音频信号的参数化定义,从而无论通道配置如何,可以使用相同的参数或参数子集。
-多通道音频信号的参数化定义,从而可以在可扩展编码方案中使用参数,其中在可扩展流的不同层中传输参数集的子集。
-多通道音频信号的参数化定义,从而解码器输出信号的能量重构不受用来编码下混信号的底层音频编解码器的影响。
-在多通道音频信号的不同参数化之间切换,从而最小化编码参数化的比特率开销。
-多通道音频信号的参数化定义,其中包括表示下混信号的能量校正因子的参数。
-使用数个彼此去相关的去相关器来重建多通道信号。
-根据上混矩阵H重建多通道信号,上混矩阵H是根据所传输的参数集计算的。
附图说明
现在将参考附图描述本发明,这些描述仅作为示例而不是限制本发明的范围或精神,在附图中:
图1示出了本发明中使用的用于5.1通道配置的命名法;
图2示出了本发明优选实施例的可能编码器实施方式;
图3示出了本发明优选实施例的可能解码器实施方式;
图4示出了根据本发明的多通道信号的一种优选参数化;
图5示出了根据本发明的多通道信号的一种优选参数化;
图6示出了根据本发明的多通道信号的一种优选参数化;
图7示出了生成单个基础通道或两个基础通道的下混方案的示意设置;
图8示出了上混方案的示意表示,上混方案基于本发明的平衡参数和关于下混方案的信息;
图9a示意性地示出了根据本发明的编码器侧等级参数的确定;
图9b示意性地示出了根据本发明的解码器侧等级参数的使用;
图10a示出了可扩展位流,在该位流的不同层中,具有多通道参数化的不同部分;
图10b示出了可扩展性表,指示使用哪些平衡参数可以构建哪些通道,以及没有使用或计算哪些平衡参数和通道;以及
图11示出了根据本发明的上混矩阵的应用。
具体实施方式
下述实施例仅仅是对本发明的原理应用在音频信号的多通道表示方面的说明。应该理解,下面所述的布置和细节的修改和改变对本领域技术人员而言是显而易见的。因此,本发明仅由所附权利要求的范围限制,而非由此处作为对实施例的说明和解释而提出的具体细节来限制。
在下面概述如何参数化IID和ICC参数以及如何应用它们以重建音频信号多通道表示的本发明描述中,假设所有引用的信号都是滤波器组中的子带信号,或者相应通道的全部频率范围中一部分的某些其他频率选择性表示。因此,应该理解,本发明不限于具体滤波器组,并且在下面针对信号的子带表示的一个频带概述了本发明,并且相同操作适用于所有子带信号。
虽然平衡参数也称作“通道间强度差(IID)”参数,要强调的是,通道对之间的平衡参数不必是通道对的第一通道中的能量或强度与通道对中第二通道的能量或强度之比。一般而言,平衡参数指示通道对的两个通道之间声音源的定位。虽然这种定位通常由能量/等级/强度差给出,但是可以使用信号的其他特性,例如两个通道的功率测量或者通道的时间或频率包络等。
在图1中,示出了5.1通道配置的不同通道,其中a(t)101表示左环绕通道,b(t)102表示左前通道,c(t)103表示中央通道,d(t)104表示右前通道,e(t)105表示右环绕通道,f(t)106表示LFE(低频效果)通道。
假设将期望算符定义为:
于是,上述通道的能量可以根据如下等式定义(这里以左环绕通道为示例):
A=E[a2(t)]
五个通道在编码器一侧下混为双通道表示或单通道表示。这可以以多种方式来进行,并且一种常用方式是根据如下等式定义的ITU下混:
5.1到双通道下混:
ld(t)=αb(t)+βa(t)+γc(t)+δf(t)
rd(t)=αd(t)+βe(t)+γc(t)+δf(t)
和5.1到单通道下混:
常数α、β、γ和δ的常用值是
α=1,
及δ=0。
IDD参数定义为两个任意选择的通道或者通道加权组的能量比。给定5.1通道配置的上述通道的能量,可以定义多个IDD参数集合。
图7示出了使用上述等式来计算基于单个的通道m或优选的两个基于立体声的通道ld和rd的一般下混频器700。一般而言,下混频器使用特定的下混信息。在线性下混的优选实施例中,该下混信息包括加权因子α、β、γ和δ。在本领域中已知,可以使用更多或更少的常数或非常数加权因子。
在ITU推荐的下混中,将α设置为1,β和γ设置为相等,并且等于0.5的平方根,并且将δ设置为0。一般而言,因子α可以在1.5和0.5之间变化。另外,因子β和γ可以彼此不同,并且在0和1之间变化。对低频增强通道f(t)同样如此。该通道的因子δ可以在0和1之间变化。另外,左下混和右下混的因子不必彼此相等。当考虑非自动下混(例如,由音响工程师执行)时,这是显而易见。音响工程师更注重执行创造性下混而非由任何数学规则所指导的下混。实际上,音响工程师由其自身的创造性感觉来引导。当这种“创造性”下混由特定参数集来记录时,根据本发明将由图8所示的本发明上混频器来使用,该上混频器不仅由参数来指导,而且还由关于下混方案的额外信息来指导。
当如图7所示执行了线性下混时,加权参数是上混频器要使用的关于下混方案的优选信息。然而,当存在信号方案中所使用的其他信息时,上混频器也可以使用该其他信息作为关于下混方案的信息。例如,这种其他信息可以是特定的矩阵元素或特定因子或上混矩阵的矩阵元素内的函数,例如如图11所示。
给定图1所示的5.1通道配置并观察其他通道配置如何涉及5.1通道配置:对于三通道的情况,其中环绕通道不可用,即,根据上面的标记,B、C和D可用。对于四通道配置,B、C和D可用,并且表示单个环绕通道的A和E的组合也可用,或者在此环境中更一般地称作背面通道。
本发明使用适用于所有这些通道的IID参数,即5.1通道配置的四通道子集具有描述5.1通道的IID参数集内的相应子集。
下面的IID参数集解决此问题:
显而易见,r1参数对应于左下混通道和右通道下混之间的能量比。r2参数对应于中央通道和左右前通道之间的能量比。r3参数对应于三个正面通道和两个环绕通道之间的能量比。r4参数对应于两个环绕通道之间的能量比。r5参数对应于LFE通道和所有其他通道之间的能量比。
在图4中,示出了上述能量比。不同的输出通道由101至105表示,并且与图1中相同,因此这里不再赘述。扬声器设置分为左半部和右半部,其中中央通道103是两个半部的一部分。左半边和右半边之间的能量比就是称作r1的参数。这在图4中由r1下的实线表示。另外,中央通道103与左右前通道102和103之间的能量分配由r2表示。最后,整个前面通道设置(102、103和104)与背面通道(101和105)之间的能量分配在图5中由r3参数旁的箭头表示。
给定上面的参数化以及所传送的单个下混通道的能量:
重构通道的能量可以表示为:
因此,M信号的能量可以分配到重构通道中,导致重构通道具有与原始通道相同的能量。
图8中示出了上面优选的上混方案。根据F、A、E、C、B和D的等式,显而易见,上混频器要使用的关于下混方案的信息是加权因子α、β、γ和δ,它们用于在如此加权或未加权的通道加在一起或者彼此相减以达到一定数目的下混通道(少于原始通道数)之前对原始通道进行加权。于是,根据图8可知,根据本发明,重构通道的能量不仅由从编码器侧向解码器侧发送的平衡参数确定,而且还由下混因子α、β、γ和δ确定。
在考虑图8时可知,为了计算左和右能量B和D,在等式内使用已经计算的通道能量F、A、E、C。然而,这并不一定意味着顺序上混方案。实际上,为了获得完全并行的上混方案(例如使用具有特定上混矩阵元素的特定上混矩阵来执行),将A、C、E和F的等式插入到B和D的等式中。于是,可知重构通道能量仅由平衡参数、下混通道以及关于下混方案的信息(例如,下混因子)确定。
给定上述IID参数,可知定义可以用于多种通道配置的IID参数的参数集的问题已经解决,这在下面是显而易见。作为示例,观察三通道配置(即,根据一个可用通道重建三个前面的通道),可知,r3、r4和r5参数是无用的,因为A、E和F通道不存在。还可知,参数r1和r2足以根据下混的单个通道来重建三个通道,因为r1描述左和右前通道之间的能量比,r2描述中央通道与左和右前通道之间的能量比。
在更一般的情况下,容易得知,如上定义的IID参数(r1...r5)适用于根据m个通道重建n个通道的所有子集,其中m<n≤6。观察图4,可知:
-对于根据1个通道重建2个通道的系统,根据r1参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建3个通道的系统,根据r1和r2参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建4个通道的系统,根据r1、r2和r3参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建5个通道的系统,根据r1、r2、r3和r4参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建5.1通道的系统,根据r1、r2、r3、r4和r5参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据2个通道重建5.1通道的系统,根据r2、r3、r4和r5参数,获得了保留通道之间正确的能量比的足够信息。
图10b中的表示出了上述可扩展性特征。图10a中所示出的、稍后将解释的可扩展位流还可以适用于图10b中的表,以获得比图10a所示出的好得多的可扩展性。
特别是,优选的概念有利之处在于,可以根据单个平衡参数r1,容易地重构左右通道,而不需要任何其他平衡参数的知识或提取。为此,在图8中的B、D的等式中,简单地将通道A、C、F和E设置为零。
作为另一种选择,当仅考虑平衡参数r2时,重构通道一方面是中央通道和低频通道(当该通道没有设置为零时)之间的和,另一方面是左右通道之间的和。于是,仅使用单个参数,一方面可以重构中央通道,另一方面可以重构单声道信号。该特征可能已经对简单的3通道表示有用,其中例如通过均分根据左和右之和得到左和右信号,并且中央与左和右之和之间的能量就是由平衡参数r2确定。
在这种环境中,平衡参数r1或r2处于较低的扩展(scaling)层。
至于图10b的表中的第二项,这一项指示如何仅使用两个平衡参数而不是所有5个平衡参数来生成3个通道B、D及C和F之和,这些参数r1和r2之一可能已经处于比位于较低扩展层中的参数r1或r2高的扩展层中。
当考虑图8中的等式时可知,为计算C,将非提取参数r5和另一非提取参数r3设置为0。另外,将未使用的通道A、E、F也设置为0,从而可以计算3个通道B、D以及中央通道C和低频增强通道F之间的组合。
当要上混4通道表示时,仅从参数数据流中提取参数r1、r2和r3就足够了。在这种环境中,r3可以处于其他参数r1或r2的下一较高扩展层中。4通道配置尤其适用于与本发明的超级平衡参数表示相结合,因为如稍后参考图6所述,一方面根据正面通道的组合,另一方面根据背面通道,已经得到第三平衡参数r3。这是由于参数r3是正面-背面平衡参数,它是根据具有背面通道A和E的组合作为第一通道以及左通道B、右通道E和中央通道C的组合作为正面通道的通道对得到的。
于是,自动获得两个环绕通道的组合通道能量,而不需要任何进一步的单独计算和后继组合,与单个参考通道设置中的情况一样。
当要从单个通道重建5个通道时,进一步的平衡参数r4是必要的。该参数r4可以处于下一较高扩展层中。
当要执行5.1重构时,需要每个平衡参数。于是,必须将包括下一平衡参数r5的下一较高扩展层发送到接收机,并且由接收机评估。
然而,使用根据通道扩展数来扩展IID参数的相同方法,上述IID参数可以扩展为覆盖通道数大于5.1配置的通道配置s。因此,本发明不限于上述示例。
现在观察通道配置为5.1通道配置的情况,这是最常用的情况。另外,假设根据两个通道重建5.1通道。针对该情况,可以通过以如下参数替换参数r3和r4来定义不同的参数集:
参数q3和q4表示正面和背面左通道之间的能量比、以及正面和背面右通道之间的能量比。可以设想数种其他参数化。
在图5中使修改的参数化形象化。不是用一个参数描述正面和背面通道之间的能量分配(如图4中r3所示)以及用参数描述左环绕通道和右环绕通道之间的能量分配(如图4中r4所示),而是使用参数q3和q4描述左前通道102和左环绕通道101之间的能量比、以及右前通道104和右环绕通道105之间的能量比。
本发明优选的是可以使用多个参数集来表示多通道信号。本发明的附加特征在于,可以根据所使用的参数的量化类型,选择不同的参数化。
例如,由于高比特率的约束而使用参数化的粗量化的系统,应该使用在上混处理期间不会使错误加大的参数化。
观察在根据一个通道重建5.1通道的系统中针对重构能量的上述表达式中两个:
很显然,由于M、A、C和F参数的极小的量化效果,相减可以导致B和D能量的大变化。
根据本发明,应该使用对参数的量化不那么敏感的不同参数化。因此,如果使用粗量化,则如上定义的r1参数:
可以由根据如下等式定义的替代定义来代替:
这样,能够得到如下的重构能量等式:
而A、E、C和F的重构能量等式仍然与上面相同。很显然,根据量化的观点,这种参数化代表了更好地调节的系统。
在图6中示出了如上面说明的能量比。不同的输出通道由101至105表示,并且与图1中相同,因此这里不再赘述。扬声器设置分为正面部分和背面部分。整个正面通道设置(102、103和104)与背面通道(101和105)之间的能量分配由图6中r3参数所指示的箭头表示。
本发明的另一显著的重要特征是当观察如下参数化时
根据量化的观点,这不仅是更好地调节的系统。上述参数化还具有这样的优点:得到用来重构三个正面通道的参数,而不会影响环绕通道。可以设想描述中央通道和所有其他通道之间的关系的参数r2。然而,这也具有缺点:环绕通道将包括在描述正面通道的参数的估计中。
应该记住,在本发明中,所描述的参数化也可以应用于通道之间相关性或相干性的测量,显而易见,在r2的计算中包括背面通道可以对成功地准确重建正面通道产生重大的负面影响。
例如,可以想象在所有正面通道中具有相同信号,并且在背面通道中具有完全非相关信号的情况。如果频繁使用背面通道来重建原始声音的环境信息,这是不常见的。
如果相对于所有其他通道来描述中央通道,中央通道和所有其他通道之和之间的相关性测量将非常低,因为背面通道完全不相关。对于估计正面左/右通道与背面左/右通道之间的相关性的参数同样如此。
因此,得到了可以正确重构能量的参数化,但是不包括所有正面通道相同(即,强相关)的信息。该参数化不包括左和右前通道与背面通道去相关以及中央通道也与背面通道去相关的信息。然而,所有正面通道相同的事实不是从这种参数化得到的。
利用本发明所教导的如下参数化克服此问题
因为背面通道不包括在解码器侧用来重建正面通道的参数的估计中。
根据本发明,中央通道103与左前通道102和右前通道103之间的能量分配由r2指示。左环绕通道101和右环绕通道105之间的能量分配由r4指示。最后,左前通道102和右前通道104之间的能量分配由r1给出。很显然,除了r1之外所有参数与图4所示相同,此处r1对应于左前扬声器和右前扬声器之间的能量分配,而非整个左侧与整个右侧之间的能量分配。为了完整起见,还给出了描述中央通道103和lfe通道106之间的能量分配的参数r5。
图6示出了本发明的优选参数化实施例的概述。第一平衡参数r1(由实线指示)构成前左/前右平衡参数。第二平衡参数r2是中左-右平衡参数。第三平衡参数r3构成正面/背面平衡参数。第四平衡参数r4构成左后/右后平衡参数。最后,第五平衡参数r5构成中央/lfe平衡参数。
图4示出了相关情形。图4中实线所示出的下混左/右平衡情况下的第一平衡参数r1可以由原始前左/前右平衡参数代替,其中原始前左/前右平衡参数在作为底层通道对的通道B和D之间定义。在图4中由虚线r1示出了这一情况,并且对应于图5和图6中的实线r1。
在双基础通道的情况下,参数r3和r4,即正面/背面平衡参数和背面左/右平衡参数右两个单侧正面/背面参数代替。第一单侧正面/背面参数q3也可以视为第一平衡参数,它是根据由左环绕通道A和左通道B构成的通道对得到的。第二单侧正面/背面参数是参数q4,它也可以视为第二参数,它基于由右通道D和右环绕通道E构成的第二通道对。此外,两个通道对彼此独立。对于中央/左-右平衡参数r2也是如此,中央/左-右平衡参数r2具有中央通道C作为第一通道以及左和右通道B和D之和作为第二通道。
根据本发明,下面定义另一种非常适用于根据一个或两个通道重建5.1通道的系统的粗量化的参数化。
对于一到5.1通道:
对于二到5.1通道:
很显然,上述参数化包括的参数多于根据严格的理论观点来正确重新分配所传输信号的能量以重构信号所需的参数。然而,这种参数化对于量化误差非常不敏感。
针对双基通道设置的上述参数集利用多个参考通道。然而,与图6中的参数配置不同,图7中的参数集仅仅依赖于下混通道而非原始通道作为参考通道。根据完全不同的通道对得到平衡参数q1、q3和q4。
虽然已经描述了多个本发明的实施例,其中用于得到平衡参数的通道对仅包括原始通道(图4、图5、图6)或包括原始通道以及下混通道(图4、图5)或者仅依赖于下混通道作为参考通道(如图7中下部所示),优选的是,图2的环绕数据编码器206中包括的参数生成器可操作来仅使用原始通道或原始通道的组合,而针对非平衡参数所基于的通道对中通道的基础通道或基础通道的组合。这是由于不能完全保证单个基础通道或两个立体声基础通道在它们从环绕编码器发送到环绕解码器期间不出现能量改变。这种下混通道或单个下混通道的能量变化可以是由在低比特率条件下工作的音频编码器205(图2)或音频解码器302(图3)引起的。这种情况可以导致对单声道下混通道或立体声下混通道的能量的操作,这种操作可能在左和右立体声下混通道之间不同,或者甚至可以是频率选择性和时间选择性的。
为了确保针对这种能量变化的完全安全,根据本发明,对每个下混通道的每一块和频带发送额外的等级信息。当平衡参数基于原始信号而非下混信号时,对于每个频带单个校正因子就足够了,因为任何能量校正将不会影响原始通道之间的平衡情况。即使当不传送额外的等级信息时,任何下混通道能量变化也不会导致声音源在音频像中的定位失真,而是只会导致一般的音量变化,这不像由于平衡条件改变而引起的声音源迁移那样使人烦恼。
重要的是要注意,如上所述,需要小心使(信号通道的)能量M是能量B、D、A、E、C和F之和。并不总是这样的,因为下混到一个通道中的不同通道间存在相位依赖。能量校正因子可以作为额外参数rM发送,并且解码器侧接收到的下混信号能量如此定义:
在图9中示出了根据本发明的额外参数rM的应用。在901中,在将下混输入信号发送到701~705的上混模块之前,利用rM参数修改下混输入信号。这与图7中相同,因此不再赘述。本领域技术人员可知,上面单通道下混示例的参数rM可以扩展为每个下混通道一个参数,因此不限于单个下混通道。
图9a示出了本发明的等级参数计算器900,而图9b示出了本发明的等级校正器902。图9a示出了编码器侧的情况,图9b示出了相应的解码器侧情况。等级参数或“额外”参数rM是给出特定能量比的校正因子。为了对此进行解释,假设如下的示例性场景。对于特定的原始多通道信号,一方面存在“主下混”,另一方面存在“参数下混”。例如,音响工程师已经在音响工作室中根据主观质量印象生成了主下混。另外,特定的音频存储介质也包括参数下混,参数下混例如由图2的环绕编码器203执行。参数下混包括一个基础通道或两个基础通道,这些基础通道形成了使用平衡参数集或者原始多通道信号的任何其他参数表示来进行多通道重构的基础。
例如,可以是这样的情况,广播台不希望从发射机向接收机发送参数下混而是发送主下混。另外,为了将主下混升级为多通道表示,广播台还发送原始多通道信号的参数表示。因为(一个块和一个频带中的)能量可以(并且通常会)在主下混和参数下混之间改变,在块900中生成相对等级参数rM,并且发送到接收机作为附加参数。根据主下混和参数下混得到等级参数,并且优选的是,等级参数是主下混和参数下混的一个块和一个频带内的能量之比。
通常,等级参数计算为原始通道的能量(Eorig)和与下混通道的能量之比,其中该下混通道可以是参数下混(EPD)或主下混(EMD)或者任何其他下混信号。通常,使用从编码器向解码器发送的具体下混信号的能量。
图9b示出了在解码器侧的等级参数使用的实施方式。等级参数以及下混信号输入到等级校正器模块902中。等级校正器根据等级参数,校正单基通道或多基通道。因为附加参数rM是相对值,所以将此相对值乘以相应基础通道的能量。
虽然图9a和9b示出了将等级校正应用于下混通道的情况,但是等级参数也可以集成在上混矩阵中。为此,图8中的等式中每次出现的M由项“rMM”代替。
研究根据2个通道重建5.1通道的情况,进行如下观察。
如果本发明与图2和图3中205和302所示的底层编解码器一起使用,需要做出更多的考虑。观察前面定义的IID参数,其中r1如下定义
该参数在解码器侧是隐式可用的,因为系统是根据2个通道重建5.1通道,假如所传输的两个通道是环绕通道的立体声下混。
然而,在比特率约束下工作的音频编解码器可以修改频谱分布,从而解码器侧测量的L和R能量不同于它们在编码器侧的值。根据本发明,同样对于根据两个通道重构5.1通道的情况,对重构通道能量分布的这种影响通过传输如下参数而消失
如果提供信令装置,编码器可以使用不同参数集来编码当前信号段,并且选择对于所处理的特定信号段给出最低开销的IID参数集。右前通道和背面通道之间的能量等级类似,正面和背面左通道之间的能量等级类似,但是可能与右前和背面通道中的等级明显不同。给定参数的Δ编码和随后的熵编码,使用参数q3和q4而非r3和r4可以更有效。对于具有不同特性的另一个信号段,不同的参数集可以给出较低的比特率开销。给定信号段的特性,本发明允许在不同参数表示之间自由切换,以便最小化当前编码信号段的比特率开销。在IID参数的不同参数化之间切换,以便获得最低的可能比特率开销,以及提供信令装置以指示当前使用何种参数化的能力是本发明的本质特征。
另外,参数的Δ编码可以在频率方向或者时间方向中进行,并进行不同参数之间的Δ编码。根据本发明,如果提供指示所使用的特定Δ编码的信令装置,参数可以相对于任何其他参数来进行Δ编码。
对任何编码方案感兴趣的特征是进行可扩展编码的能力。这意味着可以将编码位流分为多个不同的层。核心层是可自解码的,并且可以解码较高层以增强解码核心层信号。对于不同的环境,可用层的数目可以改变,但是只要核心层可用,解码器可以产生输出样本。如上所述,使用r1至r5参数对多通道编码进行参数化,使它们自身非常适于可扩展编码。因此,可以在增强层中存储例如两个环绕通道(A和E)的数据(即参数r3和r4),并且在核心层中存储与正面通道相对应的参数,由参数r1和r2表示。
在图10中示出了根据本发明的可扩展位流实施方式。位流层由1001和1002表示,其中1001是保持波形编码下混信号和重建正面通道(102、103和104)所需的参数r1和r2的核心层。1002所表示的增强层保持用于重建背面通道(101和105)的参数。
本发明的另一个重要方面是在多通道配置中使用去相关器。在文献PCT/SE02/01372中针对一到二通道的情况描述了使用去相关器的概念。然而,当将此理论扩展到两个以上的通道时,出现了多个问题,本发明解决了这些问题。
初等数学表明,为了从N个信号得到M个彼此去相关的信号,需要M-N个去相关器,其中所有不同的去相关器是根据公共输入信号创建彼此正交的输出信号的函数。去相关器通常是全通或近全通滤波器,给定输入x(t),产生输出y(t),其中E[|y|2]=E[|x|2],并且几乎消除了互相关E[yx*]。好的去相关器设计还涉及到进一步的感觉标准,设计方法的一些示例可以是当向去相关信号加入原始信号时,最小化梳状滤波器特性,以及最小化在瞬态信号处有时太长的冲激响应的效果。某些现有技术的去相关器利用人工混响器来去相关。现有技术还包括例如通过修改复子带样本的相位来进行分数延迟,以获得较高的回响密度,因此获得更大的时间扩散。
本发明提出了如下方法:修改基于混响的去相关器,以便实现根据公共输入信号创建彼此去相关的输出信号的多个去相关器。如果两个去相关器在相同输入的情况下的输出y1(t)和y2(t)消除或几乎消除了互相关,则这两个去相关器彼此去相关。假设输入是平稳白噪声,那么冲激响应h1和h2必须正交,因为E[h1h2 *]消除或几乎消除。可以以多种方式构建对集彼此去相关的去相关器。进行这种修改的一种有效方式是改变相位旋转因子q,这是分数延迟的一部分。
本发明规定相位旋转因子可以是全通滤波器中延迟线的一部分,或者就是整个分数延迟。在后一种情况下,该方法不限于全通或混响之类的滤波器,而是也可以应用于例如包括分数延迟部分的简单延迟。去相关器中的全通滤波器链路在Z域中可以如下描述:
其中,q是复值相位旋转因子(|q|=1),m是样本中延迟线长度,并且a是滤波器系数。由于稳定性原因,滤波器吸收的大小应该限制于|a|<1。然而,通过使用可选的滤波器系数a′=-a,定义了新的混响器,其具有相同的混响衰落特性,但是输出与未修改的混响器的输出显著不相关。另外,相位旋转因子q的修改可以通过例如添加恒定相位偏移
来进行。常数C可以用作恒定相位偏移,或者可以进行缩放,使其对应于其所应用的所有频带的恒定时间偏移。相位偏移常数C也可以是对所有频带不同的随机值。
根据本发明,通过向如下大小为(m+p)×1个信号的列向量应用大小为n×(m+p)的上混矩阵H,来执行从m个通道生成n个通道的操作
其中,m是m个被下混且编码的信号,并且s中的p个信号被两两彼此去相关,并且与m中的所有信号去相关。这些去相关信号是由去相关器根据m中的信号产生的。然后n个重构信号a′、b′...包含在如下列向量中
x′=Hy
图11中示出了上述操作,其中去相关信号由去相关器1102、1103和1104创建。上混矩阵H由1101给出,其对向量y进行操作,给出输出信号x′。
设R=E[xx*]是原始信号向量的相关矩阵,R′=E[x′x′*]是重构信号的相关矩阵。此处以及下文中,对于具有复数项的矩阵或向量X,X*表示X的伴随矩阵、复共轭转置。
R的对角线包含能量值A、B、C...,并且可以根据如上定义的能量配额,解码为总能量等级。因为R*=R,所以只有n(n-1)/2个不同的离对角线互相关值,包含要通过调整上混矩阵H来全部或部分重构的信息。全相关结构的重构对应于R′=R的情况。正确的能量等级的重构仅对应于R′和R在它们的对角线上相同的情况。
在从m=1个通道得到n个通道的情况下,全相关结构的重构通过使用p=n-1个彼此去相关的去相关器、满足如下条件的上混矩阵H来实现:
其中M是单个所传输信号的能量。因为R是半正定的,这种解的存在是公知的。此外,对于H的设计留下了n(n-1)/2的自由度,它们在本发明中用来获得上混矩阵的进一步希望的特性。中心设计标准是H对所传输的相关性数据的依赖性应该是平滑的。
参数化上混矩阵的一种方便方式是H=UDV,其中U和V是正交矩阵,并且D是对角矩阵。可以选择D的绝对值的平方等于R/M的特征值。忽略V并对特征值进行排序,使最大的值应用于第一坐标,将使输出中去相关信号的总体能量最小化。正交矩阵U处于由n(n-1)/2个旋转角度来参数化的实状态。以这些角度和D的n个对角线值的形式发送相关性数据,将立即给出所希望的H的平滑依赖性。然而,因为必须将能量数据变换为特征值,所以这种方法牺牲了可扩展性。
本发明所教导的第二方法包括:通过根据R=GR0G定义归一化相关矩阵R0,来从R中的相关性部分分离能量部分,其中G是对角矩阵,对角线值等于R的对角线项的平方根,即,
并且R0在对角线上为1。设H0是正交上混矩阵,其定义在等能量的完全非相关信号情况下优选的归一化上混。这种优选上混矩阵的示例有
然后由
定义上混,其中矩阵S是SS*=R0的解。选择此解对R0中归一化的互相关值的依赖性是连续的,从而S在R0=I情况下等于单位矩阵I。
将n个通道分为较少通道的组,这是一种重构局部互相关结构的方便方式。根据本发明,对于从1个通道重构5.1通道的情况,尤其有利的分组方式是{a,e},{c},{b,d},{f},其中对组{c},{f}不应用去相关,并且通过对相同的下混/去相关对进行上混来产生组{a,e},{b,d}。对于这两个子系统,在完全不相关情况下优选的归一化上混可以分别选择为
于是,将只发送和重构总共15个互相关中的两个,即,通道{a,e}和{b,d}之间的互相关。在上面使用的术语中,这是针对n=6,m=1且p=1情况的设计示例。上混矩阵H大小为6×2,在第3行和第6行的第二列中的两项为零,对应于输出c′和f′。
本发明所教导的用于合并去相关信号的第三种方法是更为简单的观点:每个输出通道具有不同的去相关器,导致去相关信号sa,sb,...。然后,形成重构信号如下:
etc...
参数a,b,...控制输出通道a′,b′,...中出现的去相关信号的数量。以这些角度的形式发送相关性数据。容易计算所得到的例如通道a′和b′之间的归一化互相关等于乘积cosacosb。因为成对的互相关的数目为n(n-1)/2,并且存在n个去相关器,所以如果n>3,一般不能用这种方法来匹配给定的相关性结果,但是其优点是这是一种非常简单且稳定的解码方法,并且直接控制每个输出通道中去相关信号的产生量。这使得去相关信号的混合能够基于结合了例如通道对的能量等级差的感觉标准。
对于从m>1个通道重构n个通道的情况,不再假设相关矩阵Ry=E[yy*]是对角矩阵,并且在将R′=HRyH*匹配到目标R时必须考虑这一点。因为Ry具有块矩阵结构,所以可以简化,
其中,Rm=E[mm*]且Rs=E[ss*]。另外,假设彼此去相关的去相关器,矩阵Rs是对角矩阵。应该指出,这还在重构正确能量方面影响上混设计。在解码器中计算解,或者从编码器发送关于下混信号的相关性结构Rm的信息。
对于从2个通道重构5.1通道的情况,上混的优选方法是:
其中,s1是根据m1=ld的去相关得到的,s2是根据m2=rd的去相关得到的。
此处,将组{a,b}和{d,e}视为分离的1→2通道系统,其中考虑对的互相关。对于通道c和f,如下调整权重
本发明可以以硬件芯片和DSP的形式实现,对于各种系统,对于模拟或数字信号的存储或传输,可以使用任意编解码器。图2和图3示出了本发明的可能实施方式。在该示例中,示出了以六个输入信号工作的系统(5.1通道配置)。在图2中,在编码器侧,将各个通道的模拟输入信号转换为数字信号201,并且对每个通道使用滤波器组进行分析202。滤波器组的输出送入环绕编码器203,环绕编码器203包括参数生成器,其执行下混,创建一个或两个有音频编码器205编码的通道。另外,根据本发明,提取诸如IID和ICC参数之类的环绕参数,并且根据本发明,提取204描述时间频率网格以及使用了哪种参数化的控制数据。根据本发明,对所提取的参数206进行编码,或者在不同的参数化之间进行切换,或者以可扩展方式安排参数。环绕参数207、控制信号和编码下混信号208复用209为串行位流。
在图3中示出了一种典型的解码器实施方式,即,用于生成多通道重构的设备。在此,假设音频解码器输出频域表示的信号,例如,来自QMF合成滤波器组之前的MPEG-4高效AAC解码器的输出。对串行位流进行解复用301,并且将编码环绕数据送入环绕数据解码器303,并且将下混编码通道送入音频解码器302,在该示例中,音频解码器302是MPEG-4高效AAC解码器。环绕数据解码器对环绕数据进行解码,并且将其送入环绕解码器305,环绕解码器305包括上混频器,上混频器根据解码的下混通道和环绕数据及控制信号,重建六个通道。将来自环绕解码器的输出合成306到时域信号,随后DAC 307将时域信号转换为模拟信号。
虽然主要参考平衡参数的生成和使用描述了本发明,但是应该强调,优选的是,为得到平衡参数,对通道对的相同分组也可以用来计算通道间相干性参数或者这些双通道对之间的“宽度”参数。另外,使用与平衡参数计算相同的通道对,也可以得到通道间时间差或一种“相位提示”。在接收机一侧,这些参数可以用作平衡参数的补充或者替代,以生成多通道重构。作为另一种选择,除了由其他参考通道所确定的其他通道间等级差之外,还可以使用通道间相干性参数或者甚至通道间时间差。然而,由于结合图10a和图10b所讨论的本发明的可扩展性特征,优选的是,对所有参数使用相同的通道对,从而在可扩展位流中,每个扩展层包括用于重构输出通道的子组的所有参数,它们可以由相应扩展层生成,如图10b的表中倒数第二列所示。当仅计算并向解码器发送了各个通道对之间的相干性参数或时间差参数时,本发明是有用的。在这种情况下,当执行多通道重构时,等级参数已经在解码器处以供使用。
依据本发明方法的特定实施要求,本发明的方法可以通过硬件或软件来实现。可以使用数字存储介质,具体地讲,存储有电子可读控制信号的盘或CD来实施,其与可编程计算机系统协作,从而执行本发明的方法。因此,一般而言,本发明是计算机程序产品,在机器可读载体上存储了程序代码,当该计算机程序产品在计算机上运行时,所述程序代码可操作来执行本发明的方法。因此,换句话说,本发明的方法是具有程序代码的计算机程序,在该计算机程序在计算机上运行时,程序代码执行本发明中的至少一种方法。
Claims (13)
1.一种设备,用于生成多通道信号的参数表示中的等级参数,其中多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述设备包括:
等级参数计算器(900),用于计算等级参数(rM),以使由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和的方式计算所述等级参数;和
输出接口,用于生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道。
2.根据权利要求1所述的设备,其中所述等级参数计算器(900)计算原始通道的能量之和与所述至少一个下混通道的能量之比的量度作为所述等级参数。
3.根据前述任何一项权利要求所述的设备,其中所述参数表示包括所述至少一个下混通道的多个频带中每一个频带的参数集,
其中所述等级参数计算器(900)计算每个频带的等级参数。
4.根据前述任何一项权利要求所述的设备,其中所述参数表述包括所述至少一个下混通道的时间段序列中时间段的参数集,和
其中所述等级参数计算器(900)计算所述至少一个下混通道的时间段序列中每个时间段的等级参数。
5.根据前述任何一项权利要求所述的设备,其中所述输出接口生成可扩展数据流,所述可扩展数据流在较低扩展层中包括所述参数集的第一参数子组,所述第一参数子组允许重构输出通道的第一子组。
所述可扩展数据流在较高扩展层中包括所述参数集的第二参数子组,所述第二参数子组与所述第一子组一起允许重构输出通道的第二子组,和
其中所述输出接口将所述等级参数输入到所述较低扩展层。
6.根据前述任何一项权利要求所述的设备,还包括参数生成器,所述参数生成器生成左/右平衡参数作为第一平衡参数,生成中央平衡参数作为第二平衡参数,生成正面/背面平衡参数作为第三参数,生成左后/右后平衡参数作为第四平衡参数,生成低频增强平衡参数作为第五平衡参数。
7.一种设备,用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,对所述等级参数进行计算,使得由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和,所述设备包括:
等级校正器(902),用于使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用参数集中的参数进行上混来得到校正的多通道重构。
8.根据权利要求7所述的设备,其中所述等级参数是通道的能量之比,其中所述等级校正器(902)使用所述等级参数对所述至少一个下混通道加权。
9.一种方法,用于生成多通道信号的参数表示中的等级参数,所述多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述方法包括:
计算(900)等级参数(rM),对以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数;和
生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道。
10.一种方法,用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数,所述方法包括:
使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用所述参数集中的参数进行上混来得到校正的多通道重构。
11.一种计算机程序,具有机器可读指令,用于在计算机上运行时执行根据权利要求9或10所述的方法。
12.一种具有参数集的参数表示,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,以使由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和的方式计算等级参数。
13.根据权利要求12所述的参数表示,用于在输入到根据权利要求7所述的设备时控制多通道重构。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
SE0400998-1 | 2004-04-16 | ||
SE04009981 | 2004-04-16 | ||
SE0400998A SE0400998D0 (sv) | 2004-04-16 | 2004-04-16 | Method for representing multi-channel audio signals |
PCT/EP2005/003848 WO2005101370A1 (en) | 2004-04-16 | 2005-04-12 | Apparatus and method for generating a level parameter and apparatus and method for generating a multi-channel representation |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1930608A true CN1930608A (zh) | 2007-03-14 |
CN1930608B CN1930608B (zh) | 2010-05-05 |
Family
ID=32294334
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010183360.1A Active CN101860784B (zh) | 2004-04-16 | 2005-04-12 | 多声道音频信号表示方法 |
CN201110097029.2A Active CN102157155B (zh) | 2004-04-16 | 2005-04-12 | 多声道音频信号表示方法 |
CN2005800073514A Active CN1930608B (zh) | 2004-04-16 | 2005-04-12 | 生成等级参数的设备和方法及生成多通道表示的设备和方法 |
CN2005800186599A Active CN1965351B (zh) | 2004-04-16 | 2005-04-12 | 用于产生/重建多声道表示的方法和设备 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010183360.1A Active CN101860784B (zh) | 2004-04-16 | 2005-04-12 | 多声道音频信号表示方法 |
CN201110097029.2A Active CN102157155B (zh) | 2004-04-16 | 2005-04-12 | 多声道音频信号表示方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2005800186599A Active CN1965351B (zh) | 2004-04-16 | 2005-04-12 | 用于产生/重建多声道表示的方法和设备 |
Country Status (13)
Country | Link |
---|---|
US (23) | US8223976B2 (zh) |
EP (2) | EP1735775B8 (zh) |
JP (4) | JP4603037B2 (zh) |
KR (2) | KR100848365B1 (zh) |
CN (4) | CN101860784B (zh) |
AT (2) | ATE376240T1 (zh) |
DE (2) | DE602005002942T2 (zh) |
ES (2) | ES2294703T3 (zh) |
HK (3) | HK1093594A1 (zh) |
PL (2) | PL1735775T3 (zh) |
SE (1) | SE0400998D0 (zh) |
TW (1) | TWI334736B (zh) |
WO (2) | WO2005101371A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102217330A (zh) * | 2008-11-11 | 2011-10-12 | 无线电技术研究学院有限公司 | 用于产生向下兼容的音频格式的方法 |
CN102859590A (zh) * | 2010-02-24 | 2013-01-02 | 弗劳恩霍夫应用研究促进协会 | 产生增强下混频信号的装置、产生增强下混频信号的方法以及计算机程序 |
CN103636235A (zh) * | 2011-07-01 | 2014-03-12 | 杜比实验室特许公司 | 扬声器阵列的均衡 |
CN103890841A (zh) * | 2011-11-01 | 2014-06-25 | 皇家飞利浦有限公司 | 音频对象编码和解码 |
Families Citing this family (156)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2002220286A1 (en) * | 2000-12-19 | 2002-07-01 | Azoteq (Pty) Ltd. | Method of and apparatus for transferring data |
SE0400998D0 (sv) | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Method for representing multi-channel audio signals |
RU2391714C2 (ru) * | 2004-07-14 | 2010-06-10 | Конинклейке Филипс Электроникс Н.В. | Преобразование аудиоканалов |
TWI393120B (zh) * | 2004-08-25 | 2013-04-11 | Dolby Lab Licensing Corp | 用於音訊信號編碼及解碼之方法和系統、音訊信號編碼器、音訊信號解碼器、攜帶有位元流之電腦可讀取媒體、及儲存於電腦可讀取媒體上的電腦程式 |
SE0402649D0 (sv) | 2004-11-02 | 2004-11-02 | Coding Tech Ab | Advanced methods of creating orthogonal signals |
SE0402650D0 (sv) * | 2004-11-02 | 2004-11-02 | Coding Tech Ab | Improved parametric stereo compatible coding of spatial audio |
US7787631B2 (en) * | 2004-11-30 | 2010-08-31 | Agere Systems Inc. | Parametric coding of spatial audio with cues based on transmitted channels |
EP1691348A1 (en) * | 2005-02-14 | 2006-08-16 | Ecole Polytechnique Federale De Lausanne | Parametric joint-coding of audio sources |
KR101346120B1 (ko) * | 2005-03-30 | 2014-01-02 | 코닌클리케 필립스 엔.브이. | 오디오 인코딩 및 디코딩 |
BRPI0608945C8 (pt) | 2005-03-30 | 2020-12-22 | Coding Tech Ab | codificador de áudio de multi-canal, decodificador de áudio de multi-canal, método de codificar n sinais de áudio em m sinais de áudio e dados paramétricos associados, método de decodificar k sinais de áudio e dados paramétricos associados, método de transmitir e receber um sinal de áudio de multi-canal codificado, mídia de armazenamento legível por computador, e, sistema de transmissão |
ES2347274T3 (es) * | 2005-03-30 | 2010-10-27 | Koninklijke Philips Electronics N.V. | Codificacion de audio multicanal ajustable a escala. |
US7961890B2 (en) * | 2005-04-15 | 2011-06-14 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. | Multi-channel hierarchical audio coding with compact side information |
JP4988716B2 (ja) | 2005-05-26 | 2012-08-01 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号のデコーディング方法及び装置 |
US8577686B2 (en) | 2005-05-26 | 2013-11-05 | Lg Electronics Inc. | Method and apparatus for decoding an audio signal |
US8270439B2 (en) * | 2005-07-08 | 2012-09-18 | Activevideo Networks, Inc. | Video game system using pre-encoded digital audio mixing |
US8626503B2 (en) * | 2005-07-14 | 2014-01-07 | Erik Gosuinus Petrus Schuijers | Audio encoding and decoding |
US8074248B2 (en) | 2005-07-26 | 2011-12-06 | Activevideo Networks, Inc. | System and method for providing video content associated with a source image to a television in a communication network |
EP1921606B1 (en) * | 2005-09-02 | 2011-10-19 | Panasonic Corporation | Energy shaping device and energy shaping method |
KR101165640B1 (ko) | 2005-10-20 | 2012-07-17 | 엘지전자 주식회사 | 오디오 신호의 디코딩 및 인코딩 방법 및 그 장치 |
CN1993002B (zh) * | 2005-12-28 | 2010-06-16 | 雅马哈株式会社 | 声像定位设备 |
KR101218776B1 (ko) * | 2006-01-11 | 2013-01-18 | 삼성전자주식회사 | 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체 |
KR100803212B1 (ko) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | 스케일러블 채널 복호화 방법 및 장치 |
KR20080086548A (ko) | 2006-01-19 | 2008-09-25 | 엘지전자 주식회사 | 미디어 신호 처리 방법 및 장치 |
EP2629292B1 (en) * | 2006-02-03 | 2016-06-29 | Electronics and Telecommunications Research Institute | Method and apparatus for control of randering multiobject or multichannel audio signal using spatial cue |
EP1984913A4 (en) | 2006-02-07 | 2011-01-12 | Lg Electronics Inc | DEVICE AND METHOD FOR CODING / DECODING A SIGNAL |
KR100773560B1 (ko) | 2006-03-06 | 2007-11-05 | 삼성전자주식회사 | 스테레오 신호 생성 방법 및 장치 |
KR100773562B1 (ko) * | 2006-03-06 | 2007-11-07 | 삼성전자주식회사 | 스테레오 신호 생성 방법 및 장치 |
PL1994526T3 (pl) * | 2006-03-13 | 2010-03-31 | France Telecom | Połączona synteza i uprzestrzennienie dźwięków |
US8370138B2 (en) * | 2006-03-17 | 2013-02-05 | Panasonic Corporation | Scalable encoding device and scalable encoding method including quality improvement of a decoded signal |
US7965848B2 (en) * | 2006-03-29 | 2011-06-21 | Dolby International Ab | Reduced number of channels decoding |
US8619998B2 (en) * | 2006-08-07 | 2013-12-31 | Creative Technology Ltd | Spatial audio enhancement processing method and apparatus |
EP2410523B1 (en) * | 2006-07-04 | 2013-01-30 | Electronics and Telecommunications Research Institute | Apparatus for restoring multi-channel audio signal using an MPEG surround decoder |
ATE542216T1 (de) | 2006-07-07 | 2012-02-15 | Fraunhofer Ges Forschung | Vorrichtung und verfahren zum kombinieren mehrerer parametrisch kodierter audioquellen |
FR2903562A1 (fr) * | 2006-07-07 | 2008-01-11 | France Telecom | Spatialisation binaurale de donnees sonores encodees en compression. |
KR100763920B1 (ko) | 2006-08-09 | 2007-10-05 | 삼성전자주식회사 | 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2채널의 바이노럴 신호로 복호화하는 방법 및 장치 |
WO2008032255A2 (en) * | 2006-09-14 | 2008-03-20 | Koninklijke Philips Electronics N.V. | Sweet spot manipulation for a multi-channel signal |
JP4946305B2 (ja) * | 2006-09-22 | 2012-06-06 | ソニー株式会社 | 音響再生システム、音響再生装置および音響再生方法 |
US8364497B2 (en) | 2006-09-29 | 2013-01-29 | Electronics And Telecommunications Research Institute | Apparatus and method for coding and decoding multi-object audio signal with various channel |
JP5936805B2 (ja) * | 2006-09-29 | 2016-06-22 | アビニティ・システムズ・ベスローテン・フェンノートシャップAvinity Systems B.V. | パラレルユーザセッションをストリーミングするための方法、システム、およびコンピュータソフトウェア |
JP5232789B2 (ja) | 2006-09-29 | 2013-07-10 | エルジー エレクトロニクス インコーポレイティド | オブジェクトベースオーディオ信号をエンコーディング及びデコーディングする方法並びにその装置 |
KR101120909B1 (ko) * | 2006-10-16 | 2012-02-27 | 프라운호퍼-게젤샤프트 츄어 푀르더룽 데어 안게반텐 포르슝에.파우. | 멀티 채널 파라미터 변환 장치, 방법 및 컴퓨터로 판독가능한 매체 |
ATE503245T1 (de) * | 2006-10-16 | 2011-04-15 | Dolby Sweden Ab | Erweiterte codierung und parameterrepräsentation einer mehrkanaligen heruntergemischten objektcodierung |
KR101111520B1 (ko) | 2006-12-07 | 2012-05-24 | 엘지전자 주식회사 | 오디오 처리 방법 및 장치 |
EP2116051A2 (en) * | 2007-01-12 | 2009-11-11 | ActiveVideo Networks, Inc. | Mpeg objects and systems and methods for using mpeg objects |
US9826197B2 (en) | 2007-01-12 | 2017-11-21 | Activevideo Networks, Inc. | Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device |
JP2010518452A (ja) * | 2007-02-13 | 2010-05-27 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号の処理方法及び装置 |
CN101636917B (zh) | 2007-03-16 | 2013-07-24 | Lg电子株式会社 | 用于处理音频信号的方法和装置 |
US8612237B2 (en) * | 2007-04-04 | 2013-12-17 | Apple Inc. | Method and apparatus for determining audio spatial quality |
ES2593822T3 (es) * | 2007-06-08 | 2016-12-13 | Lg Electronics Inc. | Método y aparato para procesar una señal de audio |
US20090037459A1 (en) * | 2007-08-03 | 2009-02-05 | Theobald Dietmar C | Annotation data handlers for data stream processing |
US8295494B2 (en) | 2007-08-13 | 2012-10-23 | Lg Electronics Inc. | Enhancing audio with remixing capability |
KR101464977B1 (ko) * | 2007-10-01 | 2014-11-25 | 삼성전자주식회사 | 메모리 관리 방법, 및 멀티 채널 데이터의 복호화 방법 및장치 |
GB2467247B (en) * | 2007-10-04 | 2012-02-29 | Creative Tech Ltd | Phase-amplitude 3-D stereo encoder and decoder |
DE102007048973B4 (de) | 2007-10-12 | 2010-11-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals mit einer Sprachsignalverarbeitung |
RU2473139C2 (ru) * | 2007-10-16 | 2013-01-20 | Панасоник Корпорэйшн | Устройство объединения потоков, модуль и способ декодирования |
KR101505831B1 (ko) * | 2007-10-30 | 2015-03-26 | 삼성전자주식회사 | 멀티 채널 신호의 부호화/복호화 방법 및 장치 |
WO2009068087A1 (en) * | 2007-11-27 | 2009-06-04 | Nokia Corporation | Multichannel audio coding |
JP5015266B2 (ja) * | 2007-11-30 | 2012-08-29 | パイオニア株式会社 | センターチャンネル定位装置 |
EP2083585B1 (en) | 2008-01-23 | 2010-09-15 | LG Electronics Inc. | A method and an apparatus for processing an audio signal |
WO2009093866A2 (en) | 2008-01-23 | 2009-07-30 | Lg Electronics Inc. | A method and an apparatus for processing an audio signal |
KR101452722B1 (ko) * | 2008-02-19 | 2014-10-23 | 삼성전자주식회사 | 신호 부호화 및 복호화 방법 및 장치 |
CN102027535A (zh) * | 2008-04-11 | 2011-04-20 | 诺基亚公司 | 信号处理 |
KR101381513B1 (ko) | 2008-07-14 | 2014-04-07 | 광운대학교 산학협력단 | 음성/음악 통합 신호의 부호화/복호화 장치 |
US8639368B2 (en) * | 2008-07-15 | 2014-01-28 | Lg Electronics Inc. | Method and an apparatus for processing an audio signal |
TWI496479B (zh) | 2008-09-03 | 2015-08-11 | Dolby Lab Licensing Corp | 增進多聲道之再生 |
EP2175670A1 (en) * | 2008-10-07 | 2010-04-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Binaural rendering of a multi-channel audio signal |
CN102177542B (zh) | 2008-10-10 | 2013-01-09 | 艾利森电话股份有限公司 | 能量保留多通道音频编码 |
CN102272830B (zh) | 2009-01-13 | 2013-04-03 | 松下电器产业株式会社 | 音响信号解码装置及平衡调整方法 |
AU2015246158B2 (en) * | 2009-03-17 | 2017-10-26 | Dolby International Ab | Advanced stereo coding based on a combination of adaptively selectable left/right or mid/side stereo coding and of parametric stereo coding. |
GB2470059A (en) * | 2009-05-08 | 2010-11-10 | Nokia Corp | Multi-channel audio processing using an inter-channel prediction model to form an inter-channel parameter |
CN101556799B (zh) * | 2009-05-14 | 2013-08-28 | 华为技术有限公司 | 一种音频解码方法和音频解码器 |
US20120072207A1 (en) * | 2009-06-02 | 2012-03-22 | Panasonic Corporation | Down-mixing device, encoder, and method therefor |
US20100322446A1 (en) * | 2009-06-17 | 2010-12-23 | Med-El Elektromedizinische Geraete Gmbh | Spatial Audio Object Coding (SAOC) Decoder and Postprocessor for Hearing Aids |
US9393412B2 (en) | 2009-06-17 | 2016-07-19 | Med-El Elektromedizinische Geraete Gmbh | Multi-channel object-oriented audio bitstream processor for cochlear implants |
US20100324915A1 (en) * | 2009-06-23 | 2010-12-23 | Electronic And Telecommunications Research Institute | Encoding and decoding apparatuses for high quality multi-channel audio codec |
US8194862B2 (en) * | 2009-07-31 | 2012-06-05 | Activevideo Networks, Inc. | Video game system with mixing of independent pre-encoded digital audio bitstreams |
JP2011066868A (ja) * | 2009-08-18 | 2011-03-31 | Victor Co Of Japan Ltd | オーディオ信号符号化方法、符号化装置、復号化方法及び復号化装置 |
US8786852B2 (en) | 2009-12-02 | 2014-07-22 | Lawrence Livermore National Security, Llc | Nanoscale array structures suitable for surface enhanced raman scattering and methods related thereto |
TWI444989B (zh) * | 2010-01-22 | 2014-07-11 | Dolby Lab Licensing Corp | 針對改良多通道上混使用多通道解相關之技術 |
JP5604933B2 (ja) * | 2010-03-30 | 2014-10-15 | 富士通株式会社 | ダウンミクス装置およびダウンミクス方法 |
DE102010015630B3 (de) * | 2010-04-20 | 2011-06-01 | Institut für Rundfunktechnik GmbH | Verfahren zum Erzeugen eines abwärtskompatiblen Tonformates |
CN102314882B (zh) * | 2010-06-30 | 2012-10-17 | 华为技术有限公司 | 声音信号通道间延时估计的方法及装置 |
EP2586025A4 (en) * | 2010-07-20 | 2015-03-11 | Huawei Tech Co Ltd | A tone signal |
US8908874B2 (en) * | 2010-09-08 | 2014-12-09 | Dts, Inc. | Spatial audio encoding and reproduction |
KR101697550B1 (ko) * | 2010-09-16 | 2017-02-02 | 삼성전자주식회사 | 멀티채널 오디오 대역폭 확장 장치 및 방법 |
EP2628306B1 (en) | 2010-10-14 | 2017-11-22 | ActiveVideo Networks, Inc. | Streaming digital video between video devices using a cable television system |
US9530421B2 (en) | 2011-03-16 | 2016-12-27 | Dts, Inc. | Encoding and reproduction of three dimensional audio soundtracks |
WO2012138660A2 (en) | 2011-04-07 | 2012-10-11 | Activevideo Networks, Inc. | Reduction of latency in video distribution networks using adaptive bit rates |
TWI450266B (zh) * | 2011-04-19 | 2014-08-21 | Hon Hai Prec Ind Co Ltd | 電子裝置及音頻資料的解碼方法 |
EP2523472A1 (en) | 2011-05-13 | 2012-11-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method and computer program for generating a stereo output signal for providing additional output channels |
EP2530956A1 (en) * | 2011-06-01 | 2012-12-05 | Tom Van Achte | Method for generating a surround audio signal from a mono/stereo audio signal |
RU2617553C2 (ru) | 2011-07-01 | 2017-04-25 | Долби Лабораторис Лайсэнзин Корпорейшн | Система и способ для генерирования, кодирования и представления данных адаптивного звукового сигнала |
KR101842257B1 (ko) * | 2011-09-14 | 2018-05-15 | 삼성전자주식회사 | 신호 처리 방법, 그에 따른 엔코딩 장치, 및 그에 따른 디코딩 장치 |
JP5505395B2 (ja) * | 2011-10-28 | 2014-05-28 | ヤマハ株式会社 | 音響処理装置 |
CN103188595B (zh) * | 2011-12-31 | 2015-05-27 | 展讯通信(上海)有限公司 | 处理多声道音频信号的方法和系统 |
EP2815582B1 (en) | 2012-01-09 | 2019-09-04 | ActiveVideo Networks, Inc. | Rendering of an interactive lean-backward user interface on a television |
CN103220058A (zh) * | 2012-01-20 | 2013-07-24 | 旭扬半导体股份有限公司 | 音频数据与视觉数据同步装置及其方法 |
US9436929B2 (en) * | 2012-01-24 | 2016-09-06 | Verizon Patent And Licensing Inc. | Collaborative event playlist systems and methods |
ITTO20120067A1 (it) | 2012-01-26 | 2013-07-27 | Inst Rundfunktechnik Gmbh | Method and apparatus for conversion of a multi-channel audio signal into a two-channel audio signal. |
US9395304B2 (en) | 2012-03-01 | 2016-07-19 | Lawrence Livermore National Security, Llc | Nanoscale structures on optical fiber for surface enhanced Raman scattering and methods related thereto |
US9800945B2 (en) | 2012-04-03 | 2017-10-24 | Activevideo Networks, Inc. | Class-based intelligent multiplexing over unmanaged networks |
US9123084B2 (en) | 2012-04-12 | 2015-09-01 | Activevideo Networks, Inc. | Graphical application integration with MPEG objects |
WO2014126684A1 (en) * | 2013-02-14 | 2014-08-21 | Dolby Laboratories Licensing Corporation | Time-varying filters for generating decorrelation signals |
US9830917B2 (en) | 2013-02-14 | 2017-11-28 | Dolby Laboratories Licensing Corporation | Methods for audio signal transient detection and decorrelation control |
TWI618050B (zh) | 2013-02-14 | 2018-03-11 | 杜比實驗室特許公司 | 用於音訊處理系統中之訊號去相關的方法及設備 |
WO2014126689A1 (en) * | 2013-02-14 | 2014-08-21 | Dolby Laboratories Licensing Corporation | Methods for controlling the inter-channel coherence of upmixed audio signals |
TWI618051B (zh) | 2013-02-14 | 2018-03-11 | 杜比實驗室特許公司 | 用於利用估計之空間參數的音頻訊號增強的音頻訊號處理方法及裝置 |
US9093064B2 (en) | 2013-03-11 | 2015-07-28 | The Nielsen Company (Us), Llc | Down-mixing compensation for audio watermarking |
WO2014145921A1 (en) | 2013-03-15 | 2014-09-18 | Activevideo Networks, Inc. | A multiple-mode system and method for providing user selectable video content |
ES2934646T3 (es) | 2013-04-05 | 2023-02-23 | Dolby Int Ab | Sistema de procesamiento de audio |
EP2989631A4 (en) * | 2013-04-26 | 2016-12-21 | Nokia Technologies Oy | AUDIO SIGNAL ENCODER |
EP2973551B1 (en) | 2013-05-24 | 2017-05-03 | Dolby International AB | Reconstruction of audio scenes from a downmix |
IL296208B2 (en) | 2013-05-24 | 2023-09-01 | Dolby Int Ab | Encoding audio scenes |
WO2014191793A1 (en) * | 2013-05-28 | 2014-12-04 | Nokia Corporation | Audio signal encoder |
US9219922B2 (en) | 2013-06-06 | 2015-12-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
US9294785B2 (en) | 2013-06-06 | 2016-03-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
EP3005712A1 (en) | 2013-06-06 | 2016-04-13 | ActiveVideo Networks, Inc. | Overlay rendering of user interface onto source video |
US9386558B2 (en) * | 2013-06-27 | 2016-07-05 | Microsoft Technology Licensing, Llc | Radio channel utilization |
JP6242489B2 (ja) * | 2013-07-29 | 2017-12-06 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 脱相関器における過渡信号についての時間的アーチファクトを軽減するシステムおよび方法 |
CN103413553B (zh) | 2013-08-20 | 2016-03-09 | 腾讯科技(深圳)有限公司 | 音频编码方法、音频解码方法、编码端、解码端和系统 |
CN109903776B (zh) | 2013-09-12 | 2024-03-01 | 杜比实验室特许公司 | 用于各种回放环境的动态范围控制 |
WO2015036350A1 (en) | 2013-09-12 | 2015-03-19 | Dolby International Ab | Audio decoding system and audio encoding system |
WO2015038522A1 (en) | 2013-09-12 | 2015-03-19 | Dolby Laboratories Licensing Corporation | Loudness adjustment for downmixed audio content |
CN111179956B (zh) * | 2013-10-21 | 2023-08-11 | 杜比国际公司 | 音频信号的参数化重构 |
US9848272B2 (en) | 2013-10-21 | 2017-12-19 | Dolby International Ab | Decorrelator structure for parametric reconstruction of audio signals |
EP2866227A1 (en) | 2013-10-22 | 2015-04-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Method for decoding and encoding a downmix matrix, method for presenting audio content, encoder and decoder for a downmix matrix, audio encoder and audio decoder |
US9391575B1 (en) * | 2013-12-13 | 2016-07-12 | Amazon Technologies, Inc. | Adaptive loudness control |
EP3081014A4 (en) * | 2013-12-13 | 2017-08-09 | Ambidio, Inc. | Apparatus and method for sound stage enhancement |
CN106104684A (zh) | 2014-01-13 | 2016-11-09 | 诺基亚技术有限公司 | 多通道音频信号分类器 |
US9779739B2 (en) | 2014-03-20 | 2017-10-03 | Dts, Inc. | Residual encoding in an object-based audio system |
US9788029B2 (en) | 2014-04-25 | 2017-10-10 | Activevideo Networks, Inc. | Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks |
EP2980789A1 (en) * | 2014-07-30 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for enhancing an audio signal, sound enhancing system |
US10140996B2 (en) | 2014-10-10 | 2018-11-27 | Qualcomm Incorporated | Signaling layers for scalable coding of higher order ambisonic audio data |
US9984693B2 (en) * | 2014-10-10 | 2018-05-29 | Qualcomm Incorporated | Signaling channels for scalable coding of higher order ambisonic audio data |
US20190307849A1 (en) | 2015-05-29 | 2019-10-10 | Armo Biosciences, Inc. | Methods of using interleukin-10 for treating diseases and disorders |
RU2764287C1 (ru) | 2015-09-25 | 2022-01-17 | Войсэйдж Корпорейшн | Способ и система для кодирования левого и правого каналов стереофонического звукового сигнала с выбором между моделями двух и четырех подкадров в зависимости от битового бюджета |
EP3369257B1 (en) * | 2015-10-27 | 2021-08-18 | Ambidio, Inc. | Apparatus and method for sound stage enhancement |
ES2834083T3 (es) | 2016-11-08 | 2021-06-16 | Fraunhofer Ges Forschung | Aparato y método para la mezcla descendente o mezcla ascendente de una señal multicanal usando compensación de fase |
US10979844B2 (en) * | 2017-03-08 | 2021-04-13 | Dts, Inc. | Distributed audio virtualization systems |
CN108665902B (zh) | 2017-03-31 | 2020-12-01 | 华为技术有限公司 | 多声道信号的编解码方法和编解码器 |
CN109215667B (zh) | 2017-06-29 | 2020-12-22 | 华为技术有限公司 | 时延估计方法及装置 |
EP3422738A1 (en) * | 2017-06-29 | 2019-01-02 | Nxp B.V. | Audio processor for vehicle comprising two modes of operation depending on rear seat occupation |
ES2965741T3 (es) * | 2017-07-28 | 2024-04-16 | Fraunhofer Ges Forschung | Aparato para codificar o decodificar una señal multicanal codificada mediante una señal de relleno generada por un filtro de banda ancha |
US10535357B2 (en) | 2017-10-05 | 2020-01-14 | Qualcomm Incorporated | Encoding or decoding of audio signals |
GB201718341D0 (en) | 2017-11-06 | 2017-12-20 | Nokia Technologies Oy | Determination of targeted spatial audio parameters and associated spatial audio playback |
GB2572650A (en) | 2018-04-06 | 2019-10-09 | Nokia Technologies Oy | Spatial audio parameters and associated spatial audio playback |
GB2574239A (en) * | 2018-05-31 | 2019-12-04 | Nokia Technologies Oy | Signalling of spatial audio parameters |
GB2574667A (en) * | 2018-06-15 | 2019-12-18 | Nokia Technologies Oy | Spatial audio capture, transmission and reproduction |
GB2580057A (en) * | 2018-12-20 | 2020-07-15 | Nokia Technologies Oy | Apparatus, methods and computer programs for controlling noise reduction |
FR3101741A1 (fr) * | 2019-10-02 | 2021-04-09 | Orange | Détermination de corrections à appliquer à un signal audio multicanal, codage et décodage associés |
KR20210060253A (ko) | 2019-11-18 | 2021-05-26 | 삼성전자주식회사 | 메모리 컨트롤러, 메모리 시스템 및 이의 동작 방법 |
EP4243015A4 (en) | 2021-01-27 | 2024-04-17 | Samsung Electronics Co., Ltd. | AUDIO PROCESSING APPARATUS AND METHOD |
US11451919B2 (en) * | 2021-02-19 | 2022-09-20 | Boomcloud 360, Inc. | All-pass network system for colorless decorrelation with constraints |
EP4320615A1 (en) * | 2021-04-06 | 2024-02-14 | Dolby International AB | Encoding of envelope information of an audio downmix signal |
CN113301329B (zh) * | 2021-05-21 | 2022-08-05 | 康佳集团股份有限公司 | 基于图像识别的电视声场校正方法、装置及显示设备 |
CN116962955A (zh) * | 2022-04-15 | 2023-10-27 | 华为技术有限公司 | 多通道的混音方法、设备及介质 |
Family Cites Families (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5091945A (en) * | 1989-09-28 | 1992-02-25 | At&T Bell Laboratories | Source dependent channel coding with error protection |
DE69210689T2 (de) * | 1991-01-08 | 1996-11-21 | Dolby Lab Licensing Corp | Kodierer/dekodierer für mehrdimensionale schallfelder |
US5291557A (en) * | 1992-10-13 | 1994-03-01 | Dolby Laboratories Licensing Corporation | Adaptive rematrixing of matrixed audio signals |
DE4409368A1 (de) * | 1994-03-18 | 1995-09-21 | Fraunhofer Ges Forschung | Verfahren zum Codieren mehrerer Audiosignale |
EP0688113A2 (en) * | 1994-06-13 | 1995-12-20 | Sony Corporation | Method and apparatus for encoding and decoding digital audio signals and apparatus for recording digital audio |
JP3397001B2 (ja) * | 1994-06-13 | 2003-04-14 | ソニー株式会社 | 符号化方法及び装置、復号化装置、並びに記録媒体 |
US6029129A (en) * | 1996-05-24 | 2000-02-22 | Narrative Communications Corporation | Quantizing audio data using amplitude histogram |
US6741965B1 (en) * | 1997-04-10 | 2004-05-25 | Sony Corporation | Differential stereo using two coding techniques |
US5890125A (en) | 1997-07-16 | 1999-03-30 | Dolby Laboratories Licensing Corporation | Method and apparatus for encoding and decoding multiple audio channels at low bit rates using adaptive selection of encoding method |
US6437944B2 (en) | 1997-10-20 | 2002-08-20 | Fujitsu Limited | Head slider supporting device, disk device and suspension |
US6122619A (en) | 1998-06-17 | 2000-09-19 | Lsi Logic Corporation | Audio decoder with programmable downmixing of MPEG/AC-3 and method therefor |
US6322189B1 (en) | 1999-01-13 | 2001-11-27 | Hewlett-Packard Company | Multiple printhead apparatus with temperature control and method |
US6578074B1 (en) | 1999-06-25 | 2003-06-10 | Mediaone Group, Inc. | Provisioning server enhancement |
JP2001100792A (ja) * | 1999-09-28 | 2001-04-13 | Sanyo Electric Co Ltd | 符号化方法、符号化装置およびそれを備える通信システム |
JP4424566B2 (ja) | 1999-10-26 | 2010-03-03 | ザ・インクテック株式会社 | アルカリ可溶性接着剤 |
JP2002175097A (ja) * | 2000-12-06 | 2002-06-21 | Yamaha Corp | 音声信号のエンコード/圧縮装置およびデコード/伸長装置 |
JP3951690B2 (ja) * | 2000-12-14 | 2007-08-01 | ソニー株式会社 | 符号化装置および方法、並びに記録媒体 |
US7292901B2 (en) * | 2002-06-24 | 2007-11-06 | Agere Systems Inc. | Hybrid multi-channel/cue coding/decoding of audio signals |
US7583805B2 (en) | 2004-02-12 | 2009-09-01 | Agere Systems Inc. | Late reverberation-based synthesis of auditory scenes |
SE0202159D0 (sv) * | 2001-07-10 | 2002-07-09 | Coding Technologies Sweden Ab | Efficientand scalable parametric stereo coding for low bitrate applications |
TW569551B (en) | 2001-09-25 | 2004-01-01 | Roger Wallace Dressler | Method and apparatus for multichannel logic matrix decoding |
GB0124580D0 (en) | 2001-10-12 | 2001-12-05 | Univ Reading | New composition |
CN1288624C (zh) | 2001-11-23 | 2006-12-06 | 皇家飞利浦电子股份有限公司 | 感觉噪声替换的方法和装置 |
US6890125B1 (en) | 2002-01-30 | 2005-05-10 | Calder Brothers Corporation | Adjustable screed system |
JP2005519550A (ja) | 2002-03-07 | 2005-06-30 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ユーザ制御のマルチチャネル・オーディオ変換システム |
ATE459957T1 (de) * | 2002-04-10 | 2010-03-15 | Koninkl Philips Electronics Nv | Kodierung und dekodierung für mehrkanalige signale |
AU2003219426A1 (en) * | 2002-04-22 | 2003-11-03 | Koninklijke Philips Electronics N.V. | pARAMETRIC REPRESENTATION OF SPATIAL AUDIO |
WO2003090207A1 (en) * | 2002-04-22 | 2003-10-30 | Koninklijke Philips Electronics N.V. | Parametric multi-channel audio representation |
DE60311794T2 (de) * | 2002-04-22 | 2007-10-31 | Koninklijke Philips Electronics N.V. | Signalsynthese |
EP2879299B1 (en) * | 2002-05-03 | 2017-07-26 | Harman International Industries, Incorporated | Multi-channel downmixing device |
DE60317203T2 (de) * | 2002-07-12 | 2008-08-07 | Koninklijke Philips Electronics N.V. | Audio-kodierung |
CN1671292A (zh) | 2002-07-23 | 2005-09-21 | 嘉吉有限公司 | 处理谷物和黍类的方法 |
KR20040043743A (ko) * | 2002-11-19 | 2004-05-27 | 주식회사 디지털앤디지털 | 멀티채널 검색장치와 방법 |
EP1668925A4 (en) | 2003-09-10 | 2007-04-25 | A D I Video Technologies Ltd | DEVICE, SYSTEM AND METHOD FOR MULTI-CHANNEL PROCESSING |
US7447317B2 (en) * | 2003-10-02 | 2008-11-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V | Compatible multi-channel coding/decoding by weighting the downmix channel |
US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
US20050169846A1 (en) | 2004-01-31 | 2005-08-04 | Bart Kennington | Enhancement of fragrance release from candles |
US7805313B2 (en) * | 2004-03-04 | 2010-09-28 | Agere Systems Inc. | Frequency-based coding of channels in parametric multi-channel coding systems |
SE0400998D0 (sv) * | 2004-04-16 | 2004-04-16 | Cooding Technologies Sweden Ab | Method for representing multi-channel audio signals |
US7508947B2 (en) * | 2004-08-03 | 2009-03-24 | Dolby Laboratories Licensing Corporation | Method for combining audio signals using auditory scene analysis |
US7961890B2 (en) | 2005-04-15 | 2011-06-14 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. | Multi-channel hierarchical audio coding with compact side information |
JP2007096002A (ja) * | 2005-09-29 | 2007-04-12 | Matsushita Electric Ind Co Ltd | 半導体装置の製造方法および半導体装置 |
KR20080086548A (ko) * | 2006-01-19 | 2008-09-25 | 엘지전자 주식회사 | 미디어 신호 처리 방법 및 장치 |
JP2008003007A (ja) * | 2006-06-23 | 2008-01-10 | Fujitsu Ltd | 個体認識方法及び装置、個体認識範囲調整方法、及びプログラム |
JP5228305B2 (ja) | 2006-09-08 | 2013-07-03 | ソニー株式会社 | 表示装置、表示方法 |
KR101120909B1 (ko) | 2006-10-16 | 2012-02-27 | 프라운호퍼-게젤샤프트 츄어 푀르더룽 데어 안게반텐 포르슝에.파우. | 멀티 채널 파라미터 변환 장치, 방법 및 컴퓨터로 판독가능한 매체 |
JP5260665B2 (ja) | 2007-10-17 | 2013-08-14 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | ダウンミックスを用いたオーディオコーディング |
JP5428564B2 (ja) | 2009-06-18 | 2014-02-26 | 東洋紡株式会社 | 車両内装材用部材およびそれを用いた車両用内装材 |
-
2004
- 2004-04-16 SE SE0400998A patent/SE0400998D0/xx unknown
-
2005
- 2005-04-12 WO PCT/EP2005/003849 patent/WO2005101371A1/en active IP Right Grant
- 2005-04-12 AT AT05735201T patent/ATE376240T1/de not_active IP Right Cessation
- 2005-04-12 JP JP2007507735A patent/JP4603037B2/ja active Active
- 2005-04-12 DE DE602005002942T patent/DE602005002942T2/de active Active
- 2005-04-12 EP EP05735201A patent/EP1735775B8/en active Active
- 2005-04-12 PL PL05735201T patent/PL1735775T3/pl unknown
- 2005-04-12 CN CN201010183360.1A patent/CN101860784B/zh active Active
- 2005-04-12 ES ES05735201T patent/ES2294703T3/es active Active
- 2005-04-12 KR KR1020067021198A patent/KR100848365B1/ko active IP Right Grant
- 2005-04-12 CN CN201110097029.2A patent/CN102157155B/zh active Active
- 2005-04-12 ES ES05743164T patent/ES2293578T3/es active Active
- 2005-04-12 PL PL05743164T patent/PL1695338T3/pl unknown
- 2005-04-12 KR KR1020067017536A patent/KR100848367B1/ko active IP Right Grant
- 2005-04-12 WO PCT/EP2005/003848 patent/WO2005101370A1/en active IP Right Grant
- 2005-04-12 CN CN2005800073514A patent/CN1930608B/zh active Active
- 2005-04-12 EP EP05743164A patent/EP1695338B1/en active Active
- 2005-04-12 AT AT05743164T patent/ATE373301T1/de not_active IP Right Cessation
- 2005-04-12 DE DE602005002451T patent/DE602005002451T2/de active Active
- 2005-04-12 CN CN2005800186599A patent/CN1965351B/zh active Active
- 2005-04-12 JP JP2007505521A patent/JP4589962B2/ja active Active
- 2005-08-09 TW TW094126936A patent/TWI334736B/zh active
-
2006
- 2006-09-08 US US11/517,900 patent/US8223976B2/en active Active
- 2006-10-16 US US11/549,963 patent/US7986789B2/en active Active
-
2007
- 2007-01-10 HK HK07100363A patent/HK1093594A1/xx unknown
-
2010
- 2010-08-09 JP JP2010178268A patent/JP5185337B2/ja active Active
- 2010-08-19 JP JP2010183775A patent/JP5185340B2/ja active Active
- 2010-08-31 US US12/872,507 patent/US8693696B2/en active Active
- 2010-09-15 US US12/882,894 patent/US8538031B2/en active Active
- 2010-11-11 HK HK10110525.1A patent/HK1144043A1/zh unknown
-
2012
- 2012-02-02 HK HK12100944.3A patent/HK1163911A1/zh unknown
-
2013
- 2013-04-19 US US13/866,947 patent/US10015597B2/en active Active
-
2014
- 2014-01-16 US US14/157,117 patent/US9743185B2/en active Active
-
2016
- 2016-03-22 US US15/077,798 patent/US9635462B2/en active Active
- 2016-03-24 US US15/079,653 patent/US9621990B2/en active Active
-
2017
- 2017-02-07 US US15/426,867 patent/US10271142B2/en active Active
- 2017-04-26 US US15/498,401 patent/US9972328B2/en active Active
- 2017-04-26 US US15/498,384 patent/US10244321B2/en active Active
- 2017-04-26 US US15/498,407 patent/US9972329B2/en active Active
- 2017-04-26 US US15/498,362 patent/US10250984B2/en active Active
- 2017-04-26 US US15/498,376 patent/US10244320B2/en active Active
- 2017-04-26 US US15/498,350 patent/US10244319B2/en active Active
- 2017-04-26 US US15/498,413 patent/US10440474B2/en active Active
- 2017-04-26 US US15/498,393 patent/US10129645B2/en active Active
- 2017-04-26 US US15/498,389 patent/US10250985B2/en active Active
- 2017-04-26 US US15/498,417 patent/US9972330B2/en active Active
-
2019
- 2019-06-27 US US16/454,250 patent/US10499155B2/en active Active
- 2019-09-26 US US16/584,655 patent/US10623860B2/en active Active
-
2020
- 2020-04-13 US US16/846,828 patent/US11184709B2/en active Active
-
2021
- 2021-11-22 US US17/532,962 patent/US11647333B2/en active Active
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102217330A (zh) * | 2008-11-11 | 2011-10-12 | 无线电技术研究学院有限公司 | 用于产生向下兼容的音频格式的方法 |
CN102217330B (zh) * | 2008-11-11 | 2014-04-09 | 无线电技术研究学院有限公司 | 用于产生向下兼容的音频格式的方法 |
CN102859590A (zh) * | 2010-02-24 | 2013-01-02 | 弗劳恩霍夫应用研究促进协会 | 产生增强下混频信号的装置、产生增强下混频信号的方法以及计算机程序 |
US9357305B2 (en) | 2010-02-24 | 2016-05-31 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus for generating an enhanced downmix signal, method for generating an enhanced downmix signal and computer program |
CN103636235A (zh) * | 2011-07-01 | 2014-03-12 | 杜比实验室特许公司 | 扬声器阵列的均衡 |
CN103636235B (zh) * | 2011-07-01 | 2017-02-15 | 杜比实验室特许公司 | 用于扬声器阵列的均衡和/或低音管理的方法和装置 |
CN103890841A (zh) * | 2011-11-01 | 2014-06-25 | 皇家飞利浦有限公司 | 音频对象编码和解码 |
US9966080B2 (en) | 2011-11-01 | 2018-05-08 | Koninklijke Philips N.V. | Audio object encoding and decoding |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1930608A (zh) | 生成等级参数的设备和方法及生成多通道表示的设备和方法 | |
CN1126265C (zh) | 可伸缩的立体声音频编码/解码方法和装置 | |
RU2618383C2 (ru) | Кодирование и декодирование аудиообъектов | |
RU2558612C2 (ru) | Декодер аудиосигнала, способ декодирования аудиосигнала и компьютерная программа с использованием ступеней каскадной обработки аудиообъектов | |
TWI328405B (en) | Multi-channel synthesizer, encoder for processing a multi-channel input signal, method of generating at least three output channels and method of processing a multi-channel input signal | |
Herre et al. | MPEG spatial audio object coding—the ISO/MPEG standard for efficient coding of interactive audio scenes | |
CN1233163C (zh) | 多声道数字音频信号的压缩编码和解码设备及其方法 | |
CN1910655A (zh) | 构造多通道输出信号或生成下混信号的设备和方法 | |
CN101036183A (zh) | 立体声兼容的多声道音频编码 | |
TWI395204B (zh) | 一種使用下混合的音頻編碼的音頻解碼器、音頻物件編碼器、多音頻物件編碼方法、用於對多音頻物件信號進行解碼的方法,以及執行這些方法的具有程式碼的程式 | |
US7966191B2 (en) | Method and apparatus for generating a number of output audio channels | |
CN1748443A (zh) | 多声道音频扩展支持 | |
JP6289613B2 (ja) | オブジェクト特有時間/周波数分解能を使用する混合信号からのオーディオオブジェクト分離 | |
CN1655651A (zh) | 基于后期混响的听觉场景 | |
CN1993733A (zh) | 用于空间音频参数的有效编码的能量相关量化 | |
CN101031959A (zh) | 带有压缩侧面信息的多声道分级音频编码 | |
CN101044550A (zh) | 产生编码多通道信号的设备和方法、对编码多通道信号进行解码的设备和方法 | |
CN1860527A (zh) | 一种处理具有离散值序列的信号的设备和方法 | |
Breebaart et al. | Spatial audio object coding (SAOC)-the upcoming MPEG standard on parametric object based audio coding | |
CN104704557B (zh) | 用于在空间音频对象编码中适配音频信息的设备和方法 | |
CN104756186B (zh) | 用于使用多声道下混合/上混合情况的参数化概念的多实例空间音频对象编码的解码器及方法 | |
JP6686015B2 (ja) | オーディオ信号のパラメトリック混合 | |
Rödén et al. | A study of the MPEG Surround quality versus bit-rate curve | |
CN1783726A (zh) | 用于从音频数据码流中解码重建多声道音频信号的解码器 | |
Annadana et al. | New Enhancements to Immersive Sound Field Rendition (ISR) System |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C56 | Change in the name or address of the patentee |
Owner name: DOLBY INTERNATIONAL CO., LTD. Free format text: FORMER NAME: CODING TECHNOLOGIES AB |
|
CP03 | Change of name, title or address |
Address after: Amsterdam Patentee after: Dolby International AB Address before: Stockholm Patentee before: Coding Technologies AB |