CN1930608B - 生成等级参数的设备和方法及生成多通道表示的设备和方法 - Google Patents

生成等级参数的设备和方法及生成多通道表示的设备和方法 Download PDF

Info

Publication number
CN1930608B
CN1930608B CN2005800073514A CN200580007351A CN1930608B CN 1930608 B CN1930608 B CN 1930608B CN 2005800073514 A CN2005800073514 A CN 2005800073514A CN 200580007351 A CN200580007351 A CN 200580007351A CN 1930608 B CN1930608 B CN 1930608B
Authority
CN
China
Prior art keywords
parameter
passage
channel
energy
reconstruct
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2005800073514A
Other languages
English (en)
Other versions
CN1930608A (zh
Inventor
海科·普尔哈根
拉尔斯·维尔莫斯
约纳斯·恩德格拉德
约纳斯·勒登
克里斯托弗·薛林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dolby International AB
Original Assignee
Coding Technologies Sweden AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Coding Technologies Sweden AB filed Critical Coding Technologies Sweden AB
Publication of CN1930608A publication Critical patent/CN1930608A/zh
Application granted granted Critical
Publication of CN1930608B publication Critical patent/CN1930608B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0204Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032Quantisation or dequantisation of spectral components
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/167Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/26Pre-filtering or post-filtering
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S5/00Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03Application of parametric coding in stereophonic audio systems

Abstract

具有多个原始通道的多通道信号的参数表示包括参数集,当参数集与至少一个下混通道一起使用时,允许多通道重构。计算额外的等级参数(rM),使得由等级参数加权的至少一个下混通道的能量等于原始通道的能量之和。将额外的等级参数与参数集或者与下混通道一起发送到多通道重构器。用于生成多通道表示的设备在将下混信号输入到上混频器或者上混处理内之前,使用等级参数来校正(902)至少一个所传输的下混通道的能量。

Description

生成等级参数的设备和方法及生成多通道表示的设备和方法
技术领域
本发明涉及使用空间参数对音频信号多通道表示进行编码。本发明公开了用于根据少于输出通道数的多个通道来估计和定义用来重建多通道信号的新方法。具体地讲,本发明旨在最小化多通道表示的比特率,并提供多通道信号的编码表示,使得能够对所有可能的通道配置容易地编码和解码数据。
背景技术
在PCT/SE02/01372“Efficient and scalable Parametric Stereo codingfor Low Bit rate Audio Coding Applications”中已经表明,可以根据给出立体声像的非常紧凑表示的单声道信号,来重建逼近原始立体声像的立体声像。基本原理是将输入信号划分为频带和时间段,估计通道间强度差(IID)和通道间相干性(ICC)。第一参数是特定频带中两个通道之间功率分布的测量,第二参数是特定频带中两个通道之间相关性的估计。在解码器一侧,通过根据IID数据在两个输出通道之间分配单声道信号,并且添加去相关信号以保留原始立体声通道的通道相关性,来根据单声道信号重建立体声像。
对于多通道(在此环境中,多通道意味着多于两个输出通道)的情况,必须考虑几个其他问题。存在数种多通道配置。最常见的是5.1配置(中央通道、正面左/右通道、环绕左/右通道、和LFE通道)。然而,还存在许多其他配置。根据完整的编码器/解码器系统的观点,希望系统对所有通道配置可以使用相同的参数集(例如,IID和ICC)或其子集。ITU-R BS.775定义了数种下混方案,能够根据给定的通道配置获得包括较少通道的通道配置。而不是总是要对所有通道解码和依赖下混,可能希望具有一种多通道表示,使得接收机能够在解码通道之前立即提取通道配置有关的参数。另外,根据可扩展或嵌入式编码的观点,希望固有地可扩展的参数集,其中,例如可以在位流中的增强层中存储与环绕通道相对应的数据。
与上面不同,还可能希望能够根据所处理的信号特性使用不同的参数定义,以便在参数化之间切换,这导致针对当前所处理信号段的最小比特率开销。
在本领域中,已知另一种使用和信号或下混信号以及额外参数侧面信息的多通道信号表示,称作双耳提示编码(binaural cue coding,BCC)。在“Binaural Cue Coding-Part 1:Psycho-Acoustic Fundamentalsand Design Principles”,IEEE Transactions on Speech and AudioProcessing,vol.11,No.6,November 2003,F.Baumgarte,C.Faller和“Binaural Cue Coding.Part 2:Schemes and Applications”,IEEETransactions on Speech and Audio Processing,vol.11,No.6,November2003,C.Faller & F.Baumgarte中描述了这种技术。
一般而言,双耳提示编码是一种根据一个下混音频通道和侧面信息进行多通道空间呈现的方法.BCC编码器要计算的且BCC解码器用于音频重构或音频呈现的数个参数包括通道间等级差、通道间时间差和通道间相干性参数.这些通道间提示是对空间像的感觉的确定因素.这些参数是针对原始多通道信号的时间样本块所给出的,并且还是频率选择性的,从而每个多通道信号样本块具有针对数个频带的数个提示.在一般的C播放通道情况下,在每个子带中考虑通道对,即,每个通道相对于参考通道之间的通道间等级差和通道间时间差.对于每个通道间等级差,将一个通道定义为参考通道.利用通道间等级差和通道间时间差,可以向所使用的播放设置的扬声器对中一对之间的任意方向呈现源.为了确定所呈现的源的宽度或扩散,对于所有音频通道,每个子带考虑一个参数就足够了.该参数是通道间相干性参数.通过修改子带信号使所有可能的通道对具有相同的通道间相干性参数,来控制所呈现的源的宽度.
在BCC编码中,确定参考通道1和任何其他通道之间的所有通道间等级差。例如,当确定中央通道为参考通道时,计算左通道和中央通道之间的第一通道间等级差、右通道和中央通道之间的第二通道间等级差、左环绕通道和中央通道之间的第三通道间等级差、和右环绕通道和中央通道之间的第四通道间等级差。这种情况描述了五通道方案。当五通道方案另外包括低频增强通道(也称作“重低音”通道)时,计算低频增强通道和作为信号参考通道的中央通道之间的第五通道间等级差。
当使用信号下混通道(也称作“单声道”通道)和诸如ICLD(通道间等级差)、ICTD(通道间时间差)和ICC(通道间相干性)之类所传送的提示重构原始多通道时,使用这些提示修改单声道信号的频谱系数。使用正实数执行等级修改,其中正实数确定每个频谱系数的等级修改。使用复数生成通道间时间差,其中复数的大小确定每个频谱系数的相位修改。另一函数确定相干性影响。通过首先计算参考通道的因子,来计算每个通道的等级修改的因子。计算参考通道的因子,使得对每个频率分区,所有通道的功率之和与和信号的功率相同。然后,根据参考通道的等级修改因子,使用各自的ICLD参数,计算其他通道的等级修改因子。
于是,为了执行BCC合成,要计算参考通道的等级修改因子。为了该计算,一个频带的所有ICLD参数都是必须的。然后,根据该信号通道的此等级修改,可以计算非参考通道的其他通道的等级修改因子。
这种方法的缺点在于,为了完美的重构,需要每一个通道间等级差。当存在易出错的传输通道时,这种要求甚至更成问题。所传输的通道间等级差之中的每个错误将导致重构多通道信号中的错误,因为需要用每个通道间等级差来计算多通道输出信号中的每一个。另外,当在传输期间丢失了通道间等级差时,不能进行重构,尽管这种通道间等级差例如仅仅对于左环绕通道或右环绕通道是必要的,但这些通道对于多通道重构没有那么重要,因为大部分信息包括在正面左通道(后文称作左通道)、正面右通道(后文称作右通道)或中央通道中。当在传输期间丢失了低频增强通道的通道间等级差时,情况变得更恶劣。在这种情况下,不可能进行多通道重构,或者只可能进行错误的多通道重构,尽管低频增强通道对于听众的收听舒适性不是决定性的。于是,单个通道间等级差中的错误蔓延为每个重构输出通道内的错误。
参数多通道表示的问题在于,通常,给出通道间等级差,例如,BCC编码中的ICLD,或者其他参数多通道表示中的平衡值,作为相对值,而不是绝对值.在BCC中,ICLD参数描述通道和参考通道之间的等级差.也可以给出平衡值,作为通道对中两个通道之间的比例.当重构多通道信号时,将这种等级差或平衡参数应用于基础通道,可以是单声道基础通道或具有两个基础通道的立体声基础通道信号.于是,例如在五或六个重构输出通道之间分配至少一个基础通道中所包括的能量.于是,重构输出通道中的绝对能量由通道间等级差或平衡参数以及接收机输入处的下混信号能量确定.
当接收机输入处的下混信号能量相对于编码器输出的下混信号变化时,将出现等级改变。在这种情况下,要强调的是,取决于所使用的参数化方案,当参数是频率选择性的时,这种等级变化不仅会导致重构信号的一般音量变化,而且还会导致严重的假象。因为输出通道在该特定频带中的频率分量具有太低或太高的等级,例如,当对下混信号的特定频带的操作多于频率刻度上别处的频带时,这种操作在重构输出信号中容易显现。
另外,时变等级操作也会导致重构输出信号的整体等级随时间变化,因此感觉到讨厌的假象。
虽然上面的情况集中在编码、传输和解码下混信号所导致的等级操作,但也可能出现其他等级偏差。由于被下混为一个或两个通道的不同通道之间的相位依赖性,可能出现这样的情况:单声道信号具有的能量不等于原始信号的能量和。因为通常在样本方面(sample-wise),即通过添加时间波形,执行下混,所以左信号和右信号之间例如180度的相位差将导致下混信号中两个通道的完全抵消,这将导致零能量,尽管两个信号肯定都具有一定的信号能量。虽然在通常情况下这种极端情况不太可能发生,但是仍将出现能量变化,因为所有信号当然并非完全不相关。这种变化也可以导致重构输出信号的音量波动,并且还将导致假象,因为重构输出信号的能量将不同于原始多通道信号的能量。
发明内容
本发明的目的是提供一种参数化概念,这导致具有改进输出质量的多通道重构。
该目的通过提供下列技术方案来实现的。
根据本发明的一个方面,提供一种用于在多通道信号的参数表示中生成等级参数的设备,其中所述多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述设备包括:等级参数计算器,用于计算等级参数(rM),以使由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和的方式计算所述等级参数;和输出接口,用于生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道。
根据本发明的另一个方面,提供一种用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示的设备,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,对所述等级参数进行计算,使得由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和,所述设备包括:等级校正器,用于使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用参数集中的参数进行上混来得到校正的多通道重构。
根据本发明的再一个方面,提供一种用于在多通道信号的参数表示中生成等级参数的方法,所述多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述方法包括:计算等级参数(rM),对以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数;和生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道.
根据本发明的再一个方面,提供一种用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示的方法,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数,所述方法包括:使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用所述参数集中的参数进行上混来得到校正的多通道重构。
本发明基于如下发现:为了高质量重构,以及由于灵活的编码/传输和解码方案,与下混信号或多通道信号的参数表示一起发送额外的等级参数,从而多通道重构器可以使用该等级参数和等级差参数以及下混信号一起来重新生成多通道输出信号,该输出信号不会出现等级变化或频率选择性的、等级导致的假象。
根据本发明,如此计算等级参数,使得由等级参数加权(例如,相乘或相除)的至少一个下混通道的能量等于原始通道的能量和。
在一个实施例中,根据下混通道的能量和原始通道的能量和之比得到等级参数。在该实施例中,在编码器一侧计算下混通道和原始多通道信号之间的等级差,并且输入到数据流中作为等级校正因子,将等级校正因子视为额外的参数,这也是对于下混通道的样本块以及特定频带给出的。于是,对于存在通道间等级差和平衡参数的每个块和频带,加入了新的等级参数。
本发明还提供了灵活性,因为允许传输多通道信号的下混,这不同于参数所基于的下混。例如,当广播台不希望广播由多通道编码器所生成的下混信号,而是希望广播由音响工程师在音响工作室中生成的下混信号(这是基于人类的主观和创造性印象的下混)时,可能出现这种情况。尽管如此,广播台可能希望与此“主下混”结合还发送多通道参数。根据本发明,参数集和主下混之间的适配由等级参数提供,在这种情况下,等级参数是主下混和参数集所基于的参数下混之间的等级差。
本发明的优点在于:额外的等级参数提供了改进的输出质量和改进的灵活性,因为与一个下混信号有关的参数集也可以适配于不是在参数计算期间生成的另一下混。
为了比特率减小的目的,优选的是,应用新等级参数的Δ编码以及量化和熵编码。具体地讲,Δ编码将导致高编码增益,因为带与带之间或者时间块与时间块之间的变化将不会如此之高,从而获得相对小的差值,这在与随后的诸如Huffman编码器之类的熵编码结合使用时允许良好的编码增益。
在本发明的优选实施例中,使用多通道信号参数表示,其包括至少两个不同的平衡参数,平衡参数指示两个不同通道对之间的平衡。具体地讲,灵活性、可扩展性、错误鲁棒性、甚至比特率效率是由于作为第一平衡参数基础的第一通道对不同于作为第二平衡参数的第二通道对的结果,其中形成这些通道对的四个通道彼此都不同。
于是,优选的概念偏离了单个参考通道的概念,并且使用多平衡或超平衡的概念,这对于人类的声音印象更为直观和自然。具体地讲,第一和第二平衡参数之下的参数对可以包括原始通道、下混通道,或者优选地,输入通道之间的特定组合。
已经发现,根据作为第一通道的中央通道以及作为通道对的第二通道的左原始通道和右原始通道之和得到的平衡参数对于提供中央通道和左右通道之间的确切能量分配尤其有用.应该注意,在此环境中,这三个通道通常包括音频场景的大部分信息,其中特别是左右立体声定位不仅受到左和右之间平衡的影响,而且还受到中央与左和右之和之间平衡的影响.根据本发明的优选实施例,使用此平衡参数,来反映这种观察.
优选的是,当发送单个单声道下混信号时,已经发现,除了中央/左加上右平衡参数之外,左/右平衡参数、背面-左/背面-右平衡参数以及正面/背面平衡参数是比特率高效参数表示的最佳解,该最佳解是灵活的,具有错误鲁棒性,并且在较大程度无假象的。
在接收机一侧,与其中仅由所发送的信息来计算每个通道的BCC合成不同,优选的多通道表示还利用有关用来生成下混通道的下混方案的信息。于是,除了平衡参数之外,还使用现有技术系统中不使用的关于下混方案的信息来进行上混。因此,执行上混操作,使得形成针对平衡参数的通道对的重构多通道信号内的通道之间的平衡由平衡参数确定。
这一概念,即对不同平衡参数使用不同通道对,使得可以生成一些通道,而不需要每个所传输平衡参数的知识。特别是,不需要关于任何背面-左/背面-右平衡或者正面/背面平衡的任何知识,可以重构左、右和中央通道。从位流提取额外参数或者线接收器发送额外平衡参数允许重构一个或多个额外通道,这种效果允许非常精调的可扩展性。这与现有技术的单参考系统不同,在现有技术的单参考系统中,需要每个通道间电平差来重构所有重构输出通道的全部或仅仅其子组。
优选概念的灵活性还在于,平衡参数的选择能够适于特定的重构环境。例如,当五通道设置形成原始多通道信号设置,以及四通道设置形成重构多通道设置,即,仅具有单个环绕扬声器,例如位于听众身后时,正面-背面平衡参数允许计算组合环绕通道,而不需要关于左环绕通道和右环绕通道的任何知识。这与单参考通道系统不同,在单参考通道系统中,必须从数据流中提取针对左环绕通道的通道间等级差以及针对右环绕通道的通道间等级差。然后,必须计算左环绕通道和右环绕通道。最后,必须加上两个通道,以获得四通道再现配置的单个环绕扬声器通道。在更直观和更加面向用户的平衡参数表示中,不需要执行所有这些步骤,因为这种表示自动给予组合环绕通道,因为平衡参数表示不依赖单个参考通道,而是还允许使用原始通道的组合作为平衡参数通道对的通道。
本发明涉及音频信号的参数化多通道表示的问题。本发明提供了对多通道表示定义适当参数的有效方式,并且还提供了不必对所有通道解码就能提取代表所希望的通道配置的参数的能力。本发明还解决了对给定信号段选择最优参数配置以最小化编码给定信号段的空间参数所需比特率的问题。本发明还提出了在一般的多通道环境中如何应用先前仅适用于双通道情况的去相关方法。
在优选实施例中,本发明包括如下特征:
-在编码器一侧,将多通道信号下混为一个或两个通道表示;
-给定多通道信号,或者以灵活的方式或者以每帧为基础,定义表示多通道信号的参数,以便最小化比特率,或者以便使解码器能够提取位流等级上的通道配置;
-在解码器一侧,给定解码器当前所支持的通道配置,提取相关参数集;
-给定当前通道配置,创建所需数目的彼此去相关信号;
-给定从位流数据解码的参数集以及去相关信号,重建输出信号。
-多通道音频信号的参数化定义,从而无论通道配置如何,可以使用相同的参数或参数子集.
-多通道音频信号的参数化定义,从而可以在可扩展编码方案中使用参数,其中在可扩展流的不同层中传输参数集的子集。
-多通道音频信号的参数化定义,从而解码器输出信号的能量重构不受用来编码下混信号的底层音频编解码器的影响。
-在多通道音频信号的不同参数化之间切换,从而最小化编码参数化的比特率开销。
-多通道音频信号的参数化定义,其中包括表示下混信号的能量校正因子的参数。
-使用数个彼此去相关的去相关器来重建多通道信号。
-根据上混矩阵H重建多通道信号,上混矩阵H是根据所传输 的参数集计算的。
附图说明
现在将参考附图描述本发明,这些描述仅作为示例而不是限制本发明的范围或精神,在附图中:
图1示出了本发明中使用的用于5.1通道配置的命名法;
图2示出了本发明优选实施例的可能编码器实施方式;
图3示出了本发明优选实施例的可能解码器实施方式;
图4示出了根据本发明的多通道信号的一种优选参数化;
图5示出了根据本发明的多通道信号的一种优选参数化;
图6示出了根据本发明的多通道信号的一种优选参数化;
图7示出了生成单个基础通道或两个基础通道的下混方案的示意设置;
图8示出了上混方案的示意表示,上混方案基于本发明的平衡参数和关于下混方案的信息;
图9a示意性地示出了根据本发明的编码器侧等级参数的确定;
图9b示意性地示出了根据本发明的解码器侧等级参数的使用;
图10a示出了可扩展位流,在该位流的不同层中,具有多通道参数化的不同部分;
图10b示出了可扩展性表,指示使用哪些平衡参数可以构建哪些通道,以及没有使用或计算哪些平衡参数和通道;以及
图11示出了根据本发明的上混矩阵的应用。
具体实施方式
下述实施例仅仅是对本发明的原理应用在音频信号的多通道表示方面的说明。应该理解,下面所述的布置和细节的修改和改变对本领域技术人员而言是显而易见的。因此,本发明仅由所附权利要求的范围限制,而非由此处作为对实施例的说明和解释而提出的具体细节来限制。
在下面概述如何参数化IID和ICC参数以及如何应用它们以重建音频信号多通道表示的本发明描述中,假设所有引用的信号都是滤波器组中的子带信号,或者相应通道的全部频率范围中一部分的某些其他频率选择性表示.因此,应该理解,本发明不限于具体滤波器组,并且在下面针对信号的子带表示的一个频带概述了本发明,并且相同操作适用于所有子带信号.
虽然平衡参数也称作“通道间强度差(IID)”参数,要强调的是,通道对之间的平衡参数不必是通道对的第一通道中的能量或强度与通道对中第二通道的能量或强度之比。一般而言,平衡参数指示通道对的两个通道之间声音源的定位。虽然这种定位通常由能量/等级/强度差给出,但是可以使用信号的其他特性,例如两个通道的功率测量或者通道的时间或频率包络等。
在图1中,示出了5.1通道配置的不同通道,其中a(t)101表示左环绕通道,b(t)102表示左前通道,c(t)103表示中央通道,d(t)104表示右前通道,e(t)105表示右环绕通道,f(t)106表示LFE(低频效果)通道。
假设将期望算符定义为:
E [ f ( x ) ] = 1 T ∫ 0 T f ( x ( t ) ) dt
于是,上述通道的能量可以根据如下等式定义(这里以左环绕通道为示例):
A=E[a2(t)]
五个通道在编码器一侧下混为双通道表示或单通道表示。这可以以多种方式来进行,并且一种常用方式是根据如下等式定义的ITU下混:
5.1到双通道下混:
ld(t)=αb(t)+βa(t)+γc(t)+δf(t)
rd(t)=αd(t)+βe(t)+γc(t)+δf(t)
和5.1到单通道下混:
m d ( t ) = 1 2 ( l d ( t ) + r d ( t ) )
常数α、β、γ和δ的常用值是
α=1,
Figure G2005800073514D00103
及δ=0。
IDD参数定义为两个任意选择的通道或者通道加权组的能量比。给定5.1通道配置的上述通道的能量,可以定义多个IDD参数集合。
图7示出了使用上述等式来计算基于单个的通道m或优选的两个基于立体声的通道ld和rd的一般下混频器700。一般而言,下混频器使用特定的下混信息。在线性下混的优选实施例中,该下混信息包括加权因子α、β、γ和δ。在本领域中已知,可以使用更多或更少的常数或非常数加权因子。
在ITU推荐的下混中,将α设置为1,β和γ设置为相等,并且等于0.5的平方根,并且将δ设置为0。一般而言,因子α可以在1.5和0.5之间变化。另外,因子β和γ可以彼此不同,并且在0和1之间变化。对低频增强通道f(t)同样如此。该通道的因子δ可以在0和1之间变化。另外,左下混和右下混的因子不必彼此相等。当考虑非自动下混(例如,由音响工程师执行)时,这是显而易见。音响工程师更注重执行创造性下混而非由任何数学规则所指导的下混。实际上,音响工程师由其自身的创造性感觉来引导。当这种“创造性”下混由特定参数集来记录时,根据本发明将由图8所示的本发明上混频器来使用,该上混频器不仅由参数来指导,而且还由关于下混方案的额外信息来指导。
当如图7所示执行了线性下混时,加权参数是上混频器要使用的关于下混方案的优选信息。然而,当存在信号方案中所使用的其他信息时,上混频器也可以使用该其他信息作为关于下混方案的信息。例如,这种其他信息可以是特定的矩阵元素或特定因子或上混矩阵的矩阵元素内的函数,例如如图11所示。
给定图1所示的5.1通道配置并观察其他通道配置如何涉及5.1通道配置:对于三通道的情况,其中环绕通道不可用,即,根据上面的标记,B、C和D可用。对于四通道配置,B、C和D可用,并且表示单个环绕通道的A和E的组合也可用,或者在此环境中更一般地称作背面通道。
本发明使用适用于所有这些通道的IID参数,即5.1通道配置的四通道子集具有描述5.1通道的IID参数集内的相应子集。
下面的IID参数集解决此问题:
r 1 = L R = α 2 B + β 2 A + γ 2 C + δ 2 F α 2 D + β 2 E + γ 2 C + δ 2 F
r 2 = γ 2 2 C α 2 ( B + D )
r 3 = β 2 ( A + E ) α 2 ( B + D ) + γ 2 2 C
r 4 = β 2 A β 2 E = A E
r 5 = δ 2 2 F α 2 ( B + D ) + β 2 ( A + E ) + γ 2 2 C
显而易见,r1参数对应于左下混通道和右通道下混之间的能量比。r2参数对应于中央通道和左右前通道之间的能量比。r3参数对应于三个正面通道和两个环绕通道之间的能量比。r4参数对应于两个环绕通道之间的能量比。r5参数对应于LFE通道和所有其他通道之间的能量比。
在图4中,示出了上述能量比。不同的输出通道由101至105表示,并且与图1中相同,因此这里不再赘述。扬声器设置分为左半部和右半部,其中中央通道103是两个半部的一部分。左半边和右半边之间的能量比就是称作r1的参数。这在图4中由r1下的实线表示。另外,中央通道103与左右前通道102和103之间的能量分配由r2表示。最后,整个前面通道设置(102、103和104)与背面通道(101和105)之间的能量分配在图5中由r3参数旁的箭头表示。
给定上面的参数化以及所传送的单个下混通道的能量:
M = 1 2 ( α 2 ( B + D ) + β 2 ( A + E ) + 2 γ 2 C + 2 δ 2 F )
重构通道的能量可以表示为:
F = 1 2 γ 2 r 2 1 + r 5 2 M
A = 1 β 2 r 4 1 + r 4 r 3 1 + r 3 1 1 + r 5 2 M
E = 1 β 2 1 1 + r 4 r 3 1 + r 3 1 1 + r 5 2 M
C = 1 2 γ 2 r 2 1 + r 2 1 1 + r 3 1 1 + r 5 2 M
B = 1 α 2 ( 2 r 1 1 + r 1 M - β 2 A - γ 2 C - δ 2 F )
D = 1 α 2 ( 2 1 1 + r 1 M - β 2 E - γ 2 C - δ 2 F )
因此,M信号的能量可以分配到重构通道中,导致重构通道具有与原始通道相同的能量。
图8中示出了上面优选的上混方案。根据F、A、E、C、B和D的等式,显而易见,上混频器要使用的关于下混方案的信息是加权因子α、β、γ和δ,它们用于在如此加权或未加权的通道加在一起或者彼此相减以达到一定数目的下混通道(少于原始通道数)之前对原始通道进行加权。于是,根据图8可知,根据本发明,重构通道的能量不仅由从编码器侧向解码器侧发送的平衡参数确定,而且还由下混因子α、β、γ和δ确定。
在考虑图8时可知,为了计算左和右能量B和D,在等式内使用已经计算的通道能量F、A、E、C。然而,这并不一定意味着顺序上混方案。实际上,为了获得完全并行的上混方案(例如使用具有特定上混矩阵元素的特定上混矩阵来执行),将A、C、E和F的等式插入到B和D的等式中。于是,可知重构通道能量仅由平衡参数、下混通道以及关于下混方案的信息(例如,下混因子)确定。
给定上述IID参数,可知定义可以用于多种通道配置的IID参数的参数集的问题已经解决,这在下面是显而易见。作为示例,观察三通道配置(即,根据一个可用通道重建三个前面的通道),可知,r3、r4和r5参数是无用的,因为A、E和F通道不存在。还可知,参数r1和r2足以根据下混的单个通道来重建三个通道,因为r1描述左和右前通道之间的能量比,r2描述中央通道与左和右前通道之间的能量比。
在更一般的情况下,容易得知,如上定义的IID参数(r1...r5)适用于根据m个通道重建n个通道的所有子集,其中m<n≤6。观察图4,可知:
-对于根据1个通道重建2个通道的系统,根据r1参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建3个通道的系统,根据r1和r2参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建4个通道的系统,根据r1、r2和r3参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建5个通道的系统,根据r1、r2、r3和r4参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据1个通道重建5.1通道的系统,根据r1、r2、r3、r4和r5参数,获得了保留通道之间正确的能量比的足够信息;
-对于根据2个通道重建5.1通道的系统,根据r2、r3、r4和r5参数,获得了保留通道之间正确的能量比的足够信息。
图10b中的表示出了上述可扩展性特征。图10a中所示出的、稍后将解释的可扩展位流还可以适用于图10b中的表,以获得比图10a所示出的好得多的可扩展性。
特别是,优选的概念有利之处在于,可以根据单个平衡参数r1,容易地重构左右通道,而不需要任何其他平衡参数的知识或提取。为此,在图8中的B、D的等式中,简单地将通道A、C、F和E设置为零。
作为另一种选择,当仅考虑平衡参数r2时,重构通道一方面是中央通道和低频通道(当该通道没有设置为零时)之间的和,另一方面是左右通道之间的和。于是,仅使用单个参数,一方面可以重构中央通道,另一方面可以重构单声道信号。该特征可能已经对简单的3通道表示有用,其中例如通过均分根据左和右之和得到左和右信号,并且中央与左和右之和之间的能量就是由平衡参数r2确定。
在这种环境中,平衡参数r1或r2处于较低的扩展(scaling)层。
至于图10b的表中的第二项,这一项指示如何仅使用两个平衡参数而不是所有5个平衡参数来生成3个通道B、D及C和F之和,这些参数r1和r2之一可能已经处于比位于较低扩展层中的参数r1或r2高的扩展层中。
当考虑图8中的等式时可知,为计算C,将非提取参数r5和另一非提取参数r3设置为0。另外,将未使用的通道A、E、F也设置为0,从而可以计算3个通道B、D以及中央通道C和低频增强通道F之间的组合。
当要上混4通道表示时,仅从参数数据流中提取参数r1、r2和r3就足够了。在这种环境中,r3可以处于其他参数r1或r2的下一较高扩展层中。4通道配置尤其适用于与本发明的超级平衡参数表示相结合,因为如稍后参考图6所述,一方面根据正面通道的组合,另一方面根据背面通道,已经得到第三平衡参数r3。这是由于参数r3是正面-背面平衡参数,它是根据具有背面通道A和E的组合作为第一通道以及左通道B、右通道E和中央通道C的组合作为正面通道的通道对得到的。
于是,自动获得两个环绕通道的组合通道能量,而不需要任何进一步的单独计算和后继组合,与单个参考通道设置中的情况一样。
当要从单个通道重建5个通道时,进一步的平衡参数r4是必要的。该参数r4可以处于下一较高扩展层中。
当要执行5.1重构时,需要每个平衡参数。于是,必须将包括下一平衡参数r5的下一较高扩展层发送到接收机,并且由接收机评估。
然而,使用根据通道扩展数来扩展IID参数的相同方法,上述IID参数可以扩展为覆盖通道数大于5.1配置的通道配置s。因此,本发明不限于上述示例。
现在观察通道配置为5.1通道配置的情况,这是最常用的情况。另外,假设根据两个通道重建5.1通道。针对该情况,可以通过以如下参数替换参数r3和r4来定义不同的参数集:
q 3 = β 2 A α 2 B
q 4 = β 2 E α 2 D
参数q3和q4表示正面和背面左通道之间的能量比、以及正面和背面右通道之间的能量比。可以设想数种其他参数化。
在图5中使修改的参数化形象化。不是用一个参数描述正面和背面通道之间的能量分配(如图4中r3所示)以及用参数描述左环绕通道和右环绕通道之间的能量分配(如图4中r4所示),而是使用参数q3和q4描述左前通道102和左环绕通道101之间的能量比、以及右前通道104和右环绕通道105之间的能量比。
本发明优选的是可以使用多个参数集来表示多通道信号。本发明的附加特征在于,可以根据所使用的参数的量化类型,选择不同的参数化。
例如,由于高比特率的约束而使用参数化的粗量化的系统,应该使用在上混处理期间不会使错误加大的参数化。
观察在根据一个通道重建5.1通道的系统中针对重构能量的上述表达式中两个:
B = 1 α 2 ( 2 r 1 1 + r 1 M - β 2 A - γ 2 C - δ 2 F )
D = 1 α 2 ( 2 1 1 + r 1 M - β 2 E - γ 2 C - δ 2 F )
很显然,由于M、A、C和F参数的极小的量化效果,相减可以导致B和D能量的大变化。
根据本发明,应该使用对参数的量化不那么敏感的不同参数化。因此,如果使用粗量化,则如上定义的r1参数:
r 1 = L R = α 2 B + β 2 A + γ 2 C + δ 2 F α 2 D + β 2 E + γ 2 C + δ 2 F
可以由根据如下等式定义的替代定义来代替:
r 1 = B D
这样,能够得到如下的重构能量等式:
B = 1 α 2 r 1 1 + r 1 1 1 + r 2 1 1 + r 3 1 1 + r 5 2 M
D = 1 α 2 1 1 + r 1 1 1 + r 2 1 1 + r 3 1 1 + r 5 2 M
而A、E、C和F的重构能量等式仍然与上面相同。很显然,根据量化的观点,这种参数化代表了更好地调节的系统。
在图6中示出了如上面说明的能量比。不同的输出通道由101至105表示,并且与图1中相同,因此这里不再赘述。扬声器设置分为正面部分和背面部分。整个正面通道设置(102、103和104)与背面通道(101和105)之间的能量分配由图6中r3参数所指示的箭头表示。
本发明的另一显著的重要特征是当观察如下参数化时
r 2 = γ 2 2 C α 2 ( B + D )
r 1 = B D
根据量化的观点,这不仅是更好地调节的系统.上述参数化还具有这样的优点:得到用来重构三个正面通道的参数,而不会影响环绕通道.可以设想描述中央通道和所有其他通道之间的关系的参数r2。然而,这也具有缺点:环绕通道将包括在描述正面通道的参数的估计中。
应该记住,在本发明中,所描述的参数化也可以应用于通道之间相关性或相干性的测量,显而易见,在r2的计算中包括背面通道可以对成功地准确重建正面通道产生重大的负面影响。
例如,可以想象在所有正面通道中具有相同信号,并且在背面通道中具有完全非相关信号的情况。如果频繁使用背面通道来重建原始声音的环境信息,这是不常见的。
如果相对于所有其他通道来描述中央通道,中央通道和所有其他通道之和之间的相关性测量将非常低,因为背面通道完全不相关。对于估计正面左/右通道与背面左/右通道之间的相关性的参数同样如此。
因此,得到了可以正确重构能量的参数化,但是不包括所有正面通道相同(即,强相关)的信息。该参数化不包括左和右前通道与背面通道去相关以及中央通道也与背面通道去相关的信息。然而,所有正面通道相同的事实不是从这种参数化得到的。
利用本发明所教导的如下参数化克服此问题
r 2 = γ 2 2 C α 2 ( B + D )
r 1 = B D
因为背面通道不包括在解码器侧用来重建正面通道的参数的估计中。
根据本发明,中央通道103与左前通道102和右前通道103之间的能量分配由r2指示。左环绕通道101和右环绕通道105之间的能量分配由r4指示。最后,左前通道102和右前通道104之间的能量分配由r1给出。很显然,除了r1之外所有参数与图4所示相同,此处r1对应于左前扬声器和右前扬声器之间的能量分配,而非整个左侧与整个右侧之间的能量分配。为了完整起见,还给出了描述中央通道103和lfe通道106之间的能量分配的参数r5。
图6示出了本发明的优选参数化实施例的概述。第一平衡参数r1(由实线指示)构成前左/前右平衡参数。第二平衡参数r2是中左-右平衡参数。第三平衡参数r3构成正面/背面平衡参数。第四平衡参数r4构成左后/右后平衡参数。最后,第五平衡参数r5构成中央/lfe平衡参数。
图4示出了相关情形。图4中实线所示出的下混左/右平衡情况下的第一平衡参数r1可以由原始前左/前右平衡参数代替,其中原始前左/前右平衡参数在作为底层通道对的通道B和D之间定义。在图4中由虚线r1示出了这一情况,并且对应于图5和图6中的实线r1
在双基础通道的情况下,参数r3和r4,即正面/背面平衡参数和背面左/右平衡参数右两个单侧正面/背面参数代替。第一单侧正面/背面参数q3也可以视为第一平衡参数,它是根据由左环绕通道A和左通道B构成的通道对得到的。第二单侧正面/背面参数是参数q4,它也可以视为第二参数,它基于由右通道D和右环绕通道E构成的第二通道对。此外,两个通道对彼此独立。对于中央/左-右平衡参数r2也是如此,中央/左-右平衡参数r2具有中央通道C作为第一通道以及左和右通道B和D之和作为第二通道。
根据本发明,下面定义另一种非常适用于根据一个或两个通道重建5.1通道的系统的粗量化的参数化。
对于一到5.1通道:
q 1 = β 2 A M , q 2 = α 2 B M , q 3 = γ 2 C M , q 4 = α 2 D M , q 2 = β 2 E M q 5 = δ 2 F M
对于二到5.1通道:
q 1 = β 2 A L , q 2 = α 2 B L , q 3 = γ 2 C M , q 4 = α 2 D R , q 2 = β 2 E R q 5 = δ 2 F M
很显然,上述参数化包括的参数多于根据严格的理论观点来正确重新分配所传输信号的能量以重构信号所需的参数。然而,这种参数化对于量化误差非常不敏感。
针对双基通道设置的上述参数集利用多个参考通道。然而,与图6中的参数配置不同,图7中的参数集仅仅依赖于下混通道而非原始通道作为参考通道。根据完全不同的通道对得到平衡参数q1、q3和q4
虽然已经描述了多个本发明的实施例,其中用于得到平衡参数的通道对仅包括原始通道(图4、图5、图6)或包括原始通道以及下混通道(图4、图5)或者仅依赖于下混通道作为参考通道(如图7中下部所示),优选的是,图2的环绕数据编码器206中包括的参数生成器可操作来仅使用原始通道或原始通道的组合,而针对非平衡参数所基于的通道对中通道的基础通道或基础通道的组合。这是由于不能完全保证单个基础通道或两个立体声基础通道在它们从环绕编码器发送到环绕解码器期间不出现能量改变。这种下混通道或单个下混通道的能量变化可以是由在低比特率条件下工作的音频编码器205(图2)或音频解码器302(图3)引起的。这种情况可以导致对单声道下混通道或立体声下混通道的能量的操作,这种操作可能在左和右立体声下混通道之间不同,或者甚至可以是频率选择性和时间选择性的。
为了确保针对这种能量变化的完全安全,根据本发明,对每个下混通道的每一块和频带发送额外的等级信息。当平衡参数基于原始信号而非下混信号时,对于每个频带单个校正因子就足够了,因为任何能量校正将不会影响原始通道之间的平衡情况。即使当不传送额外的等级信息时,任何下混通道能量变化也不会导致声音源在音频像中的定位失真,而是只会导致一般的音量变化,这不像由于平衡条件改变而引起的声音源迁移那样使人烦恼。
重要的是要注意,如上所述,需要小心使(信号通道的)能量M是能量B、D、A、E、C和F之和。并不总是这样的,因为下混到一个通道中的不同通道间存在相位依赖。能量校正因子可以作为额外参数rM发送,并且解码器侧接收到的下混信号能量如此定义:
r M M = 1 2 ( α 2 ( B + D ) + β 2 ( A + E ) + 2 γ 2 C + 2 δ 2 F ) .
在图9中示出了根据本发明的额外参数rM的应用。在901中,在将下混输入信号发送到701~705的上混模块之前,利用rM参数修改下混输入信号。这与图7中相同,因此不再赘述。本领域技术人员可知,上面单通道下混示例的参数rM可以扩展为每个下混通道一个参数,因此不限于单个下混通道。
图9a示出了本发明的等级参数计算器900,而图9b示出了本发明的等级校正器902.图9a示出了编码器侧的情况,图9b示出了相应的解码器侧情况.等级参数或“额外”参数rM是给出特定能量比的校正因子。为了对此进行解释,假设如下的示例性场景。对于特定的原始多通道信号,一方面存在“主下混”,另一方面存在“参数下混”。例如,音响工程师已经在音响工作室中根据主观质量印象生成了主下混。另外,特定的音频存储介质也包括参数下混,参数下混例如由图2的环绕编码器203执行。参数下混包括一个基础通道或两个基础通道,这些基础通道形成了使用平衡参数集或者原始多通道信号的任何其他参数表示来进行多通道重构的基础。
例如,可以是这样的情况,广播台不希望从发射机向接收机发送参数下混而是发送主下混。另外,为了将主下混升级为多通道表示,广播台还发送原始多通道信号的参数表示。因为(一个块和一个频带中的)能量可以(并且通常会)在主下混和参数下混之间改变,在块900中生成相对等级参数rM,并且发送到接收机作为附加参数。根据主下混和参数下混得到等级参数,并且优选的是,等级参数是主下混和参数下混的一个块和一个频带内的能量之比。
通常,等级参数计算为原始通道的能量(Eorig)和与下混通道的能量之比,其中该下混通道可以是参数下混(EPD)或主下混(EMD)或者任何其他下混信号。通常,使用从编码器向解码器发送的具体下混信号的能量。
图9b示出了在解码器侧的等级参数使用的实施方式。等级参数以及下混信号输入到等级校正器模块902中。等级校正器根据等级参数,校正单基通道或多基通道。因为附加参数rM是相对值,所以将此相对值乘以相应基础通道的能量。
虽然图9a和9b示出了将等级校正应用于下混通道的情况,但是等级参数也可以集成在上混矩阵中。为此,图8中的等式中每次出现的M由项“rM M”代替。
研究根据2个通道重建5.1通道的情况,进行如下观察。
如果本发明与图2和图3中205和302所示的底层编解码器一起使用,需要做出更多的考虑。观察前面定义的IID参数,其中r1如下定义
r 1 = L R = α 2 B + β 2 A + γ 2 C + δ 2 F α 2 D + β 2 E + γ 2 C + δ 2 F
该参数在解码器侧是隐式可用的,因为系统是根据2个通道重建5.1通道,假如所传输的两个通道是环绕通道的立体声下混。
然而,在比特率约束下工作的音频编解码器可以修改频谱分布,从而解码器侧测量的L和R能量不同于它们在编码器侧的值。根据本发明,同样对于根据两个通道重构5.1通道的情况,对重构通道能量分布的这种影响通过传输如下参数而消失
r 1 = B D .
如果提供信令装置,编码器可以使用不同参数集来编码当前信号段,并且选择对于所处理的特定信号段给出最低开销的IID参数集。右前通道和背面通道之间的能量等级类似,正面和背面左通道之间的能量等级类似,但是可能与右前和背面通道中的等级明显不同。给定参数的Δ编码和随后的熵编码,使用参数q3和q4而非r3和r4可以更有效.对于具有不同特性的另一个信号段,不同的参数集可以给出较低的比特率开销.给定信号段的特性,本发明允许在不同参数表示之间自由切换,以便最小化当前编码信号段的比特率开销.在IID参数的不同参数化之间切换,以便获得最低的可能比特率开销,以及提供信令装置以指示当前使用何种参数化的能力是本发明的本质特征.
另外,参数的Δ编码可以在频率方向或者时间方向中进行,并进行不同参数之间的Δ编码。根据本发明,如果提供指示所使用的特定Δ编码的信令装置,参数可以相对于任何其他参数来进行Δ编码。
对任何编码方案感兴趣的特征是进行可扩展编码的能力。这意味着可以将编码位流分为多个不同的层。核心层是可自解码的,并且可以解码较高层以增强解码核心层信号。对于不同的环境,可用层的数目可以改变,但是只要核心层可用,解码器可以产生输出样本。如上所述,使用r1至r5参数对多通道编码进行参数化,使它们自身非常适于可扩展编码。因此,可以在增强层中存储例如两个环绕通道(A和E)的数据(即参数r3和r4),并且在核心层中存储与正面通道相对应的参数,由参数r1和r2表示。
在图10中示出了根据本发明的可扩展位流实施方式。位流层由1001和1002表示,其中1001是保持波形编码下混信号和重建正面通道(102、103和104)所需的参数r1和r2的核心层。1002所表示的增强层保持用于重建背面通道(101和105)的参数。
本发明的另一个重要方面是在多通道配置中使用去相关器。在文献PCT/SE02/01372中针对一到二通道的情况描述了使用去相关器的概念。然而,当将此理论扩展到两个以上的通道时,出现了多个问题,本发明解决了这些问题。
初等数学表明,为了从N个信号得到M个彼此去相关的信号,需要M-N个去相关器,其中所有不同的去相关器是根据公共输入信号创建彼此正交的输出信号的函数。去相关器通常是全通或近全通滤波器,给定输入x(t),产生输出y(t),其中E[|y|2]=E[|x|2],并且几乎消除了互相关E[yx*]。好的去相关器设计还涉及到进一步的感觉标准,设计方法的一些示例可以是当向去相关信号加入原始信号时,最小化梳状滤波器特性,以及最小化在瞬态信号处有时太长的冲激响应的效果。某些现有技术的去相关器利用人工混响器来去相关。现有技术还包括例如通过修改复子带样本的相位来进行分数延迟,以获得较高的回响密度,因此获得更大的时间扩散。
本发明提出了如下方法:修改基于混响的去相关器,以便实现根据公共输入信号创建彼此去相关的输出信号的多个去相关器。如果两个去相关器在相同输入的情况下的输出y1(t)和y2(t)消除或几乎消除了互相关,则这两个去相关器彼此去相关。假设输入是平稳白噪声,那么冲激响应h1和h2必须正交,因为E[h1h2 *]消除或几乎消除。可以以多种方式构建对集彼此去相关的去相关器。进行这种修改的一种有效方式是改变相位旋转因子q,这是分数延迟的一部分。
本发明规定相位旋转因子可以是全通滤波器中延迟线的一部分,或者就是整个分数延迟。在后一种情况下,该方法不限于全通或混响之类的滤波器,而是也可以应用于例如包括分数延迟部分的简单延迟。去相关器中的全通滤波器链路在Z域中可以如下描述:
H ( z ) = qz - m - a 1 - aq z - m
其中,q是复值相位旋转因子(|q|=1),m是样本中延迟线长度,并且a是滤波器系数.由于稳定性原因,滤波器吸收的大小应该限制于|a|<1.然而,通过使用可选的滤波器系数a′=-a,定义了新的混响器,其具有相同的混响衰落特性,但是输出与未修改的混响器的输出显著不相关.另外,相位旋转因子q的修改可以通过例如添加恒定相位偏移q′=qejC来进行。常数C可以用作恒定相位偏移,或者可以进行缩放,使其对应于其所应用的所有频带的恒定时间偏移。相位偏移常数C也可以是对所有频带不同的随机值。
根据本发明,通过向如下大小为(m+p)×1个信号的列向量应用大小为n×(m+p)的上混矩阵H,来执行从m个通道生成n个通道的操作
y = m s
其中,m是m个被下混且编码的信号,并且s中的p个信号被两两彼此去相关,并且与m中的所有信号去相关。这些去相关信号是由去相关器根据m中的信号产生的。然后n个重构信号a′、b′...包含在如下列向量中
x′=Hy
图11中示出了上述操作,其中去相关信号由去相关器1102、1103和1104创建。上混矩阵H由1101给出,其对向量y进行操作,给出输出信号x′。
设R=E[xx*]是原始信号向量的相关矩阵,R′=E[x′x′*]是重构信号的相关矩阵。此处以及下文中,对于具有复数项的矩阵或向量X,X*表示X的伴随矩阵、复共轭转置。
R的对角线包含能量值A、B、C...,并且可以根据如上定义的能量配额,解码为总能量等级。因为R*=R,所以只有n(n-1)/2个不同的离对角线互相关值,包含要通过调整上混矩阵H来全部或部分重构的信息。全相关结构的重构对应于R′=R的情况。正确的能量等级的重构仅对应于R′和R在它们的对角线上相同的情况。
在从m=1个通道得到n个通道的情况下,全相关结构的重构通过使用p=n-1个彼此去相关的去相关器、满足如下条件的上混矩阵H来实现:
HH * = 1 M R
其中M是单个所传输信号的能量。因为R是半正定的,这种解的存在是公知的。此外,对于H的设计留下了n(n-1)/2的自由度,它们在本发明中用来获得上混矩阵的进一步希望的特性。中心设计标准是H对所传输的相关性数据的依赖性应该是平滑的。
参数化上混矩阵的一种方便方式是H=UDV,其中U和V是正交矩阵,并且D是对角矩阵。可以选择D的绝对值的平方等于R/M的特征值。忽略V并对特征值进行排序,使最大的值应用于第一坐标,将使输出中去相关信号的总体能量最小化。正交矩阵U处于由n(n-1)/2个旋转角度来参数化的实状态。以这些角度和D的n个对角线值的形式发送相关性数据,将立即给出所希望的H的平滑依赖性。然而,因为必须将能量数据变换为特征值,所以这种方法牺牲了可扩展性。
本发明所教导的第二方法包括:通过根据R=GR0G定义归一化相关矩阵R0,来从R中的相关性部分分离能量部分,其中G是对角矩阵,对角线值等于R的对角线项的平方根,即,
Figure G2005800073514D00251
并且R0在对角线上为1。设H0是正交上混矩阵,其定义在等能量的完全非相关信号情况下优选的归一化上混。这种优选上混矩阵的示例有
1 2 1 - 1 1 1 , 1 2 1 1 2 1 1 - 2 2 - 2 0 , 1 2 1 1 1 1 1 1 - 1 - 1 1 - 1 - 1 1 1 - 1 1 - 1 .
然后由
Figure G2005800073514D00255
定义上混,其中矩阵S是SS*=R0的解。选择此解对R0中归一化的互相关值的依赖性是连续的,从而S在R0=I情况下等于单位矩阵I。
将n个通道分为较少通道的组,这是一种重构局部互相关结构的方便方式。根据本发明,对于从1个通道重构5.1通道的情况,尤其有利的分组方式是{a,e},{c},{b,d},{f},其中对组{c},{f}不应用去相关,并且通过对相同的下混/去相关对进行上混来产生组{a,e},{b,d}。对于这两个子系统,在完全不相关情况下优选的归一化上混可以分别选择为
1 2 1 - 1 1 1 , 1 2 1 1 1 - 1 ,
于是,将只发送和重构总共15个互相关中的两个,即,通道{a,e}和{b,d}之间的互相关。在上面使用的术语中,这是针对n=6,m=1且p=1情况的设计示例。上混矩阵H大小为6×2,在第3行和第6行的第二列中的两项为零,对应于输出c′和f′。
本发明所教导的用于合并去相关信号的第三种方法是更为简单的观点:每个输出通道具有不同的去相关器,导致去相关信号sa,sb,...。然后,形成重构信号如下:
Figure G2005800073514D00261
Figure G2005800073514D00262
etc...
参数控制输出通道a′,b′,...中出现的去相关信号的数量。以这些角度的形式发送相关性数据。容易计算所得到的例如通道a′和b′之间的归一化互相关等于乘积因为成对的互相关的数目为n(n-1)/2,并且存在n个去相关器,所以如果n>3,一般不能用这种方法来匹配给定的相关性结果,但是其优点是这是一种非常简单且稳定的解码方法,并且直接控制每个输出通道中去相关信号的产生量。这使得去相关信号的混合能够基于结合了例如通道对的能量等级差的感觉标准。
对于从m>1个通道重构n个通道的情况,不再假设相关矩阵Ry=E[yy*]是对角矩阵,并且在将R′=HRyH*匹配到目标R时必须考虑这一点。因为Ry具有块矩阵结构,所以可以简化,
R y = R m 0 0 R s ,
其中,Rm=E[mm*]且Rs=E[ss*]。另外,假设彼此去相关的去相关器,矩阵Rs是对角矩阵。应该指出,这还在重构正确能量方面影响上混设计。在解码器中计算解,或者从编码器发送关于下混信号的相关性结构Rm的信息。
对于从2个通道重构5.1通道的情况,上混的优选方法是:
a ′ b ′ c ′ d ′ e ′ f ′ = h 11 0 h 13 0 h 21 0 h 23 0 h 31 h 32 0 0 0 h 42 0 h 44 0 h 52 0 h 54 h 61 h 62 0 0 · m 1 m 2 s 1 s 2 ,
其中,s1是根据m1=ld的去相关得到的,s2是根据m2=rd的去相关得到的。
此处,将组{a,b}和{d,e}视为分离的1→2通道系统,其中考虑对的互相关。对于通道c和f,如下调整权重
E[|h31m1+h32m2|2]=C,
E[|h61m1+h62m2|2]=F.
本发明可以以硬件芯片和DSP的形式实现,对于各种系统,对于模拟或数字信号的存储或传输,可以使用任意编解码器。图2和图3示出了本发明的可能实施方式。在该示例中,示出了以六个输入信号工作的系统(5.1通道配置)。在图2中,在编码器侧,将各个通道的模拟输入信号转换为数字信号201,并且对每个通道使用滤波器组进行分析202。滤波器组的输出送入环绕编码器203,环绕编码器203包括参数生成器,其执行下混,创建一个或两个有音频编码器205编码的通道。另外,根据本发明,提取诸如IID和ICC参数之类的环绕参数,并且根据本发明,提取204描述时间频率网格以及使用了哪种参数化的控制数据。根据本发明,对所提取的参数206进行编码,或者在不同的参数化之间进行切换,或者以可扩展方式安排参数。环绕参数207、控制信号和编码下混信号208复用209为串行位流。
在图3中示出了一种典型的解码器实施方式,即,用于生成多通道重构的设备。在此,假设音频解码器输出频域表示的信号,例如,来自QMF合成滤波器组之前的MPEG-4高效AAC解码器的输出。对串行位流进行解复用301,并且将编码环绕数据送入环绕数据解码器303,并且将下混编码通道送入音频解码器302,在该示例中,音频解码器302是MPEG-4高效AAC解码器。环绕数据解码器对环绕数据进行解码,并且将其送入环绕解码器305,环绕解码器305包括上混频器,上混频器根据解码的下混通道和环绕数据及控制信号,重建六个通道。将来自环绕解码器的输出合成306到时域信号,随后DAC 307将时域信号转换为模拟信号。
虽然主要参考平衡参数的生成和使用描述了本发明,但是应该强调,优选的是,为得到平衡参数,对通道对的相同分组也可以用来计算通道间相干性参数或者这些双通道对之间的“宽度”参数.另外,使用与平衡参数计算相同的通道对,也可以得到通道间时间差或一种“相位提示”.在接收机一侧,这些参数可以用作平衡参数的补充或者替代,以生成多通道重构.作为另一种选择,除了由其他参考通道所确定的其他通道间等级差之外,还可以使用通道间相干性参数或者甚至通道间时间差.然而,由于结合图10a和图10b所讨论的本发明的可扩展性特征,优选的是,对所有参数使用相同的通道对,从而在可扩展位流中,每个扩展层包括用于重构输出通道的子组的所有参数,它们可以由相应扩展层生成,如图10b的表中倒数第二列所示.当仅计算并向解码器发送了各个通道对之间的相干性参数或时间差参数时,本发明是有用的.在这种情况下,当执行多通道重构时,等级参数已经在解码器处以供使用.
依据本发明方法的特定实施要求,本发明的方法可以通过硬件或软件来实现。可以使用数字存储介质,具体地讲,存储有电子可读控制信号的盘或CD来实施,其与可编程计算机系统协作,从而执行本发明的方法。因此,一般而言,本发明是计算机程序产品,在机器可读载体上存储了程序代码,当该计算机程序产品在计算机上运行时,所述程序代码可操作来执行本发明的方法。因此,换句话说,本发明的方法是具有程序代码的计算机程序,在该计算机程序在计算机上运行时,程序代码执行本发明中的至少一种方法。

Claims (10)

1.一种用于在多通道信号的参数表示中生成等级参数的设备,其中所述多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述设备包括:
等级参数计算器(900),用于计算等级参数(rM),以使由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和的方式计算所述等级参数;和
输出接口,用于生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道。
2.根据权利要求1所述的设备,其中所述等级参数计算器(900)计算原始通道的能量之和与所述至少一个下混通道的能量之比的量度作为所述等级参数。
3.根据权利要求1或2所述的设备,其中所述参数表示包括所述至少一个下混通道的多个频带中每一个频带的参数集,
其中所述等级参数计算器(900)计算每个频带的等级参数。
4.根据权利要求1或2所述的设备,其中所述参数表述包括所述至少一个下混通道的时间段序列中时间段的参数集,和
其中所述等级参数计算器(900)计算所述至少一个下混通道的时间段序列中每个时间段的等级参数。
5.根据权利要求1或2所述的设备,其中所述输出接口生成可扩展数据流,所述可扩展数据流在较低扩展层中包括所述参数集的第一参数子组,所述第一参数子组允许重构输出通道的第一子组,
所述可扩展数据流在较高扩展层中包括所述参数集的第二参数子组,所述第二参数子组与所述第一子组一起允许重构输出通道的第二子组,和
其中所述输出接口将所述等级参数输入到所述较低扩展层。
6.根据权利要求1或2所述的设备,还包括参数生成器,所述参数生成器生成左/右平衡参数作为第一平衡参数,生成中央平衡参数作为第二平衡参数,生成正面/背面平衡参数作为第三参数,生成左后/右后平衡参数作为第四平衡参数,生成低频增强平衡参数作为第五平衡参数。
7.一种用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示的设备,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,对所述等级参数进行计算,使得由所述等级参数加权的所述至少一个下混通道的能量等于原始通道的能量之和,所述设备包括:
等级校正器(902),用于使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用参数集中的参数进行上混来得到校正的多通道重构。
8.根据权利要求7所述的设备,其中所述等级参数是通道的能量之比,其中所述等级校正器(902)使用所述等级参数对所述至少一个下混通道加权。
9.一种用于在多通道信号的参数表示中生成等级参数的方法,所述多通道信号具有多个原始通道,所述参数表示包括参数集,当所述参数集与至少一个下混通道一起使用时,允许多通道重构,所述方法包括:
计算(900)等级参数(rM),对以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数;和
生成输出数据,所述输出数据包括所述等级参数和所述参数集,或者所述等级参数和所述至少一个下混通道。
10.一种用于使用具有参数集的参数表示,生成原始多通道信号的重构多通道表示的方法,所述原始多通道信号具有至少三个原始通道,所述参数集当与至少一个下混通道一起使用时,允许多通道重构,所述参数表示包括等级参数,以使由所述等级参数加权的所述至少一个下混通道的能量等于所述原始通道的能量之和的方式计算所述等级参数,所述方法包括:
使用所述等级参数对所述至少一个下混通道应用等级校正,从而通过使用所述参数集中的参数进行上混来得到校正的多通道重构。
CN2005800073514A 2004-04-16 2005-04-12 生成等级参数的设备和方法及生成多通道表示的设备和方法 Active CN1930608B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
SE0400998A SE0400998D0 (sv) 2004-04-16 2004-04-16 Method for representing multi-channel audio signals
SE04009981 2004-04-16
SE0400998-1 2004-04-16
PCT/EP2005/003848 WO2005101370A1 (en) 2004-04-16 2005-04-12 Apparatus and method for generating a level parameter and apparatus and method for generating a multi-channel representation

Publications (2)

Publication Number Publication Date
CN1930608A CN1930608A (zh) 2007-03-14
CN1930608B true CN1930608B (zh) 2010-05-05

Family

ID=32294334

Family Applications (4)

Application Number Title Priority Date Filing Date
CN2005800186599A Active CN1965351B (zh) 2004-04-16 2005-04-12 用于产生/重建多声道表示的方法和设备
CN2005800073514A Active CN1930608B (zh) 2004-04-16 2005-04-12 生成等级参数的设备和方法及生成多通道表示的设备和方法
CN201110097029.2A Active CN102157155B (zh) 2004-04-16 2005-04-12 多声道音频信号表示方法
CN201010183360.1A Active CN101860784B (zh) 2004-04-16 2005-04-12 多声道音频信号表示方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN2005800186599A Active CN1965351B (zh) 2004-04-16 2005-04-12 用于产生/重建多声道表示的方法和设备

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201110097029.2A Active CN102157155B (zh) 2004-04-16 2005-04-12 多声道音频信号表示方法
CN201010183360.1A Active CN101860784B (zh) 2004-04-16 2005-04-12 多声道音频信号表示方法

Country Status (13)

Country Link
US (24) US8223976B2 (zh)
EP (2) EP1695338B1 (zh)
JP (4) JP4589962B2 (zh)
KR (2) KR100848367B1 (zh)
CN (4) CN1965351B (zh)
AT (2) ATE376240T1 (zh)
DE (2) DE602005002942T2 (zh)
ES (2) ES2293578T3 (zh)
HK (3) HK1093594A1 (zh)
PL (2) PL1735775T3 (zh)
SE (1) SE0400998D0 (zh)
TW (1) TWI334736B (zh)
WO (2) WO2005101370A1 (zh)

Families Citing this family (158)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE368913T1 (de) * 2000-12-19 2007-08-15 Azoteq Pty Ltd Verfahren und vorrichtung zum datentransfer
SE0400998D0 (sv) 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
EP1769491B1 (en) * 2004-07-14 2009-09-30 Koninklijke Philips Electronics N.V. Audio channel conversion
TWI497485B (zh) * 2004-08-25 2015-08-21 Dolby Lab Licensing Corp 用以重塑經合成輸出音訊信號之時域包絡以更接近輸入音訊信號之時域包絡的方法
SE0402649D0 (sv) * 2004-11-02 2004-11-02 Coding Tech Ab Advanced methods of creating orthogonal signals
SE0402650D0 (sv) * 2004-11-02 2004-11-02 Coding Tech Ab Improved parametric stereo compatible coding of spatial audio
US7787631B2 (en) * 2004-11-30 2010-08-31 Agere Systems Inc. Parametric coding of spatial audio with cues based on transmitted channels
EP1691348A1 (en) * 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
JP4610650B2 (ja) 2005-03-30 2011-01-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 多チャンネルオーディオ符号化
ES2313646T3 (es) * 2005-03-30 2009-03-01 Koninklijke Philips Electronics N.V. Codificacion y descodificacion de audio.
KR101315077B1 (ko) * 2005-03-30 2013-10-08 코닌클리케 필립스 일렉트로닉스 엔.브이. 멀티-채널 오디오 데이터를 인코딩 및 디코딩하기 위한 방법, 및 인코더들 및 디코더들
US7961890B2 (en) * 2005-04-15 2011-06-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Multi-channel hierarchical audio coding with compact side information
WO2006126843A2 (en) 2005-05-26 2006-11-30 Lg Electronics Inc. Method and apparatus for decoding audio signal
JP4988717B2 (ja) 2005-05-26 2012-08-01 エルジー エレクトロニクス インコーポレイティド オーディオ信号のデコーディング方法及び装置
US8270439B2 (en) * 2005-07-08 2012-09-18 Activevideo Networks, Inc. Video game system using pre-encoded digital audio mixing
US8626503B2 (en) * 2005-07-14 2014-01-07 Erik Gosuinus Petrus Schuijers Audio encoding and decoding
US8074248B2 (en) 2005-07-26 2011-12-06 Activevideo Networks, Inc. System and method for providing video content associated with a source image to a television in a communication network
WO2007026821A1 (ja) * 2005-09-02 2007-03-08 Matsushita Electric Industrial Co., Ltd. エネルギー整形装置及びエネルギー整形方法
KR100866885B1 (ko) 2005-10-20 2008-11-04 엘지전자 주식회사 멀티채널 오디오 신호의 부호화 및 복호화 방법과 그 장치
US7929709B2 (en) * 2005-12-28 2011-04-19 Yamaha Corporation Sound image localization apparatus
KR100803212B1 (ko) 2006-01-11 2008-02-14 삼성전자주식회사 스케일러블 채널 복호화 방법 및 장치
KR101218776B1 (ko) * 2006-01-11 2013-01-18 삼성전자주식회사 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체
ES2446245T3 (es) 2006-01-19 2014-03-06 Lg Electronics Inc. Método y aparato para procesar una señal de medios
KR101294022B1 (ko) * 2006-02-03 2013-08-08 한국전자통신연구원 공간큐를 이용한 다객체 또는 다채널 오디오 신호의 랜더링제어 방법 및 그 장치
WO2007091845A1 (en) 2006-02-07 2007-08-16 Lg Electronics Inc. Apparatus and method for encoding/decoding signal
KR100773560B1 (ko) 2006-03-06 2007-11-05 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
KR100773562B1 (ko) 2006-03-06 2007-11-07 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
JP5051782B2 (ja) * 2006-03-13 2012-10-17 フランス・テレコム 音声合成と空間化との結合方法
WO2007119368A1 (ja) * 2006-03-17 2007-10-25 Matsushita Electric Industrial Co., Ltd. スケーラブル符号化装置およびスケーラブル符号化方法
US7965848B2 (en) * 2006-03-29 2011-06-21 Dolby International Ab Reduced number of channels decoding
US8619998B2 (en) * 2006-08-07 2013-12-31 Creative Technology Ltd Spatial audio enhancement processing method and apparatus
CN102394063B (zh) * 2006-07-04 2013-03-20 韩国电子通信研究院 运动图像专家组环绕解码器和恢复多通道音频信号的方法
FR2903562A1 (fr) * 2006-07-07 2008-01-11 France Telecom Spatialisation binaurale de donnees sonores encodees en compression.
JP5134623B2 (ja) 2006-07-07 2013-01-30 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 複数のパラメータ的に符号化された音源を合成するための概念
KR100763920B1 (ko) 2006-08-09 2007-10-05 삼성전자주식회사 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2채널의 바이노럴 신호로 복호화하는 방법 및 장치
EP2070392A2 (en) * 2006-09-14 2009-06-17 Koninklijke Philips Electronics N.V. Sweet spot manipulation for a multi-channel signal
JP4946305B2 (ja) * 2006-09-22 2012-06-06 ソニー株式会社 音響再生システム、音響再生装置および音響再生方法
EP2477414A3 (en) * 2006-09-29 2014-03-05 Avinity Systems B.V. Method for assembling a video stream, system and computer software
WO2008039043A1 (en) 2006-09-29 2008-04-03 Lg Electronics Inc. Methods and apparatuses for encoding and decoding object-based audio signals
WO2008039038A1 (en) 2006-09-29 2008-04-03 Electronics And Telecommunications Research Institute Apparatus and method for coding and decoding multi-object audio signal with various channel
AU2007312597B2 (en) * 2006-10-16 2011-04-14 Dolby International Ab Apparatus and method for multi -channel parameter transformation
CN103400583B (zh) * 2006-10-16 2016-01-20 杜比国际公司 多声道下混对象编码的增强编码和参数表示
BRPI0719884B1 (pt) 2006-12-07 2020-10-27 Lg Eletronics Inc método, aparelho e mídia legível por computador para decodificar um sinal de áudio
US9826197B2 (en) 2007-01-12 2017-11-21 Activevideo Networks, Inc. Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device
WO2008088741A2 (en) 2007-01-12 2008-07-24 Ictv, Inc. Interactive encoded content system including object models for viewing on a remote device
WO2008100067A1 (en) * 2007-02-13 2008-08-21 Lg Electronics Inc. A method and an apparatus for processing an audio signal
WO2008114982A1 (en) 2007-03-16 2008-09-25 Lg Electronics Inc. A method and an apparatus for processing an audio signal
US8612237B2 (en) * 2007-04-04 2013-12-17 Apple Inc. Method and apparatus for determining audio spatial quality
JP5291096B2 (ja) * 2007-06-08 2013-09-18 エルジー エレクトロニクス インコーポレイティド オーディオ信号処理方法及び装置
US8806324B2 (en) * 2007-08-03 2014-08-12 Sap Ag Annotation data filtering of computer files
US8295494B2 (en) 2007-08-13 2012-10-23 Lg Electronics Inc. Enhancing audio with remixing capability
KR101464977B1 (ko) * 2007-10-01 2014-11-25 삼성전자주식회사 메모리 관리 방법, 및 멀티 채널 데이터의 복호화 방법 및장치
GB2467247B (en) * 2007-10-04 2012-02-29 Creative Tech Ltd Phase-amplitude 3-D stereo encoder and decoder
DE102007048973B4 (de) 2007-10-12 2010-11-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals mit einer Sprachsignalverarbeitung
CN101578655B (zh) * 2007-10-16 2013-06-05 松下电器产业株式会社 流合成装置、解码装置、方法
KR101505831B1 (ko) * 2007-10-30 2015-03-26 삼성전자주식회사 멀티 채널 신호의 부호화/복호화 방법 및 장치
WO2009068087A1 (en) * 2007-11-27 2009-06-04 Nokia Corporation Multichannel audio coding
WO2009069228A1 (ja) * 2007-11-30 2009-06-04 Pioneer Corporation センターチャンネル定位装置
US8615316B2 (en) 2008-01-23 2013-12-24 Lg Electronics Inc. Method and an apparatus for processing an audio signal
US8615088B2 (en) 2008-01-23 2013-12-24 Lg Electronics Inc. Method and an apparatus for processing an audio signal using preset matrix for controlling gain or panning
KR101452722B1 (ko) * 2008-02-19 2014-10-23 삼성전자주식회사 신호 부호화 및 복호화 방법 및 장치
CN102027535A (zh) * 2008-04-11 2011-04-20 诺基亚公司 信号处理
KR101381513B1 (ko) 2008-07-14 2014-04-07 광운대학교 산학협력단 음성/음악 통합 신호의 부호화/복호화 장치
US8639368B2 (en) * 2008-07-15 2014-01-28 Lg Electronics Inc. Method and an apparatus for processing an audio signal
TWI559786B (zh) 2008-09-03 2016-11-21 杜比實驗室特許公司 增進多聲道之再生
EP2175670A1 (en) * 2008-10-07 2010-04-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Binaural rendering of a multi-channel audio signal
JP5608660B2 (ja) 2008-10-10 2014-10-15 テレフオンアクチーボラゲット エル エム エリクソン(パブル) エネルギ保存型マルチチャネルオーディオ符号化
DE102008056704B4 (de) * 2008-11-11 2010-11-04 Institut für Rundfunktechnik GmbH Verfahren zum Erzeugen eines abwärtskompatiblen Tonformates
WO2010082471A1 (ja) 2009-01-13 2010-07-22 パナソニック株式会社 音響信号復号装置及びバランス調整方法
AU2015246158B2 (en) * 2009-03-17 2017-10-26 Dolby International Ab Advanced stereo coding based on a combination of adaptively selectable left/right or mid/side stereo coding and of parametric stereo coding.
GB2470059A (en) * 2009-05-08 2010-11-10 Nokia Corp Multi-channel audio processing using an inter-channel prediction model to form an inter-channel parameter
CN101556799B (zh) * 2009-05-14 2013-08-28 华为技术有限公司 一种音频解码方法和音频解码器
EP2439736A1 (en) * 2009-06-02 2012-04-11 Panasonic Corporation Down-mixing device, encoder, and method therefor
WO2010148169A1 (en) * 2009-06-17 2010-12-23 Med-El Elektromedizinische Geraete Gmbh Spatial audio object coding (saoc) decoder and postprocessor for hearing aids
US9393412B2 (en) 2009-06-17 2016-07-19 Med-El Elektromedizinische Geraete Gmbh Multi-channel object-oriented audio bitstream processor for cochlear implants
US20100324915A1 (en) * 2009-06-23 2010-12-23 Electronic And Telecommunications Research Institute Encoding and decoding apparatuses for high quality multi-channel audio codec
US8194862B2 (en) * 2009-07-31 2012-06-05 Activevideo Networks, Inc. Video game system with mixing of independent pre-encoded digital audio bitstreams
JP2011066868A (ja) * 2009-08-18 2011-03-31 Victor Co Of Japan Ltd オーディオ信号符号化方法、符号化装置、復号化方法及び復号化装置
US8786852B2 (en) 2009-12-02 2014-07-22 Lawrence Livermore National Security, Llc Nanoscale array structures suitable for surface enhanced raman scattering and methods related thereto
TWI444989B (zh) * 2010-01-22 2014-07-11 Dolby Lab Licensing Corp 針對改良多通道上混使用多通道解相關之技術
KR101410575B1 (ko) 2010-02-24 2014-06-23 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 강화 다운믹스 신호를 생성하는 장치, 강화 다운믹스 신호를 생성하는 방법 및 컴퓨터 프로그램
JP5604933B2 (ja) * 2010-03-30 2014-10-15 富士通株式会社 ダウンミクス装置およびダウンミクス方法
DE102010015630B3 (de) * 2010-04-20 2011-06-01 Institut für Rundfunktechnik GmbH Verfahren zum Erzeugen eines abwärtskompatiblen Tonformates
CN102314882B (zh) * 2010-06-30 2012-10-17 华为技术有限公司 声音信号通道间延时估计的方法及装置
EP2586025A4 (en) * 2010-07-20 2015-03-11 Huawei Tech Co Ltd A tone signal
US8908874B2 (en) * 2010-09-08 2014-12-09 Dts, Inc. Spatial audio encoding and reproduction
KR101697550B1 (ko) * 2010-09-16 2017-02-02 삼성전자주식회사 멀티채널 오디오 대역폭 확장 장치 및 방법
CA2814070A1 (en) 2010-10-14 2012-04-19 Activevideo Networks, Inc. Streaming digital video between video devices using a cable television system
US9530421B2 (en) 2011-03-16 2016-12-27 Dts, Inc. Encoding and reproduction of three dimensional audio soundtracks
EP2695388B1 (en) 2011-04-07 2017-06-07 ActiveVideo Networks, Inc. Reduction of latency in video distribution networks using adaptive bit rates
TWI450266B (zh) * 2011-04-19 2014-08-21 Hon Hai Prec Ind Co Ltd 電子裝置及音頻資料的解碼方法
EP2523472A1 (en) 2011-05-13 2012-11-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method and computer program for generating a stereo output signal for providing additional output channels
EP2530956A1 (en) * 2011-06-01 2012-12-05 Tom Van Achte Method for generating a surround audio signal from a mono/stereo audio signal
US9118999B2 (en) * 2011-07-01 2015-08-25 Dolby Laboratories Licensing Corporation Equalization of speaker arrays
KR101845226B1 (ko) 2011-07-01 2018-05-18 돌비 레버러토리즈 라이쎈싱 코오포레이션 적응형 오디오 신호 생성, 코딩 및 렌더링을 위한 시스템 및 방법
KR101842257B1 (ko) * 2011-09-14 2018-05-15 삼성전자주식회사 신호 처리 방법, 그에 따른 엔코딩 장치, 및 그에 따른 디코딩 장치
JP5505395B2 (ja) * 2011-10-28 2014-05-28 ヤマハ株式会社 音響処理装置
RU2618383C2 (ru) 2011-11-01 2017-05-03 Конинклейке Филипс Н.В. Кодирование и декодирование аудиообъектов
CN103188595B (zh) * 2011-12-31 2015-05-27 展讯通信(上海)有限公司 处理多声道音频信号的方法和系统
WO2013106390A1 (en) 2012-01-09 2013-07-18 Activevideo Networks, Inc. Rendering of an interactive lean-backward user interface on a television
CN103220058A (zh) * 2012-01-20 2013-07-24 旭扬半导体股份有限公司 音频数据与视觉数据同步装置及其方法
US9436929B2 (en) * 2012-01-24 2016-09-06 Verizon Patent And Licensing Inc. Collaborative event playlist systems and methods
ITTO20120067A1 (it) 2012-01-26 2013-07-27 Inst Rundfunktechnik Gmbh Method and apparatus for conversion of a multi-channel audio signal into a two-channel audio signal.
US9395304B2 (en) 2012-03-01 2016-07-19 Lawrence Livermore National Security, Llc Nanoscale structures on optical fiber for surface enhanced Raman scattering and methods related thereto
US9800945B2 (en) 2012-04-03 2017-10-24 Activevideo Networks, Inc. Class-based intelligent multiplexing over unmanaged networks
US9123084B2 (en) 2012-04-12 2015-09-01 Activevideo Networks, Inc. Graphical application integration with MPEG objects
US20150371646A1 (en) * 2013-02-14 2015-12-24 Dolby Laboratories Licensing Corporation Time-Varying Filters for Generating Decorrelation Signals
EP2956935B1 (en) * 2013-02-14 2017-01-04 Dolby Laboratories Licensing Corporation Controlling the inter-channel coherence of upmixed audio signals
TWI618051B (zh) 2013-02-14 2018-03-11 杜比實驗室特許公司 用於利用估計之空間參數的音頻訊號增強的音頻訊號處理方法及裝置
US9830917B2 (en) 2013-02-14 2017-11-28 Dolby Laboratories Licensing Corporation Methods for audio signal transient detection and decorrelation control
TWI618050B (zh) 2013-02-14 2018-03-11 杜比實驗室特許公司 用於音訊處理系統中之訊號去相關的方法及設備
US9093064B2 (en) 2013-03-11 2015-07-28 The Nielsen Company (Us), Llc Down-mixing compensation for audio watermarking
WO2014145921A1 (en) 2013-03-15 2014-09-18 Activevideo Networks, Inc. A multiple-mode system and method for providing user selectable video content
CN109509478B (zh) 2013-04-05 2023-09-05 杜比国际公司 音频处理装置
US9659569B2 (en) 2013-04-26 2017-05-23 Nokia Technologies Oy Audio signal encoder
WO2014187989A2 (en) 2013-05-24 2014-11-27 Dolby International Ab Reconstruction of audio scenes from a downmix
MY178342A (en) 2013-05-24 2020-10-08 Dolby Int Ab Coding of audio scenes
US20160111100A1 (en) * 2013-05-28 2016-04-21 Nokia Technologies Oy Audio signal encoder
US9219922B2 (en) 2013-06-06 2015-12-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9326047B2 (en) 2013-06-06 2016-04-26 Activevideo Networks, Inc. Overlay rendering of user interface onto source video
US9294785B2 (en) 2013-06-06 2016-03-22 Activevideo Networks, Inc. System and method for exploiting scene graph information in construction of an encoded video sequence
US9386558B2 (en) * 2013-06-27 2016-07-05 Microsoft Technology Licensing, Llc Radio channel utilization
CN105408955B (zh) * 2013-07-29 2019-11-05 杜比实验室特许公司 用于降低去相关器电路中瞬态信号的时间伪差的系统和方法
CN103413553B (zh) 2013-08-20 2016-03-09 腾讯科技(深圳)有限公司 音频编码方法、音频解码方法、编码端、解码端和系统
CN110675884B (zh) * 2013-09-12 2023-08-08 杜比实验室特许公司 用于下混合音频内容的响度调整
CN117767898A (zh) 2013-09-12 2024-03-26 杜比实验室特许公司 用于各种回放环境的动态范围控制
CN105531761B (zh) 2013-09-12 2019-04-30 杜比国际公司 音频解码系统和音频编码系统
KR102244379B1 (ko) * 2013-10-21 2021-04-26 돌비 인터네셔널 에이비 오디오 신호들의 파라메트릭 재구성
SG11201602628TA (en) 2013-10-21 2016-05-30 Dolby Int Ab Decorrelator structure for parametric reconstruction of audio signals
EP2866227A1 (en) 2013-10-22 2015-04-29 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method for decoding and encoding a downmix matrix, method for presenting audio content, encoder and decoder for a downmix matrix, audio encoder and audio decoder
EP3081014A4 (en) * 2013-12-13 2017-08-09 Ambidio, Inc. Apparatus and method for sound stage enhancement
US9391575B1 (en) * 2013-12-13 2016-07-12 Amazon Technologies, Inc. Adaptive loudness control
RU2648632C2 (ru) 2014-01-13 2018-03-26 Нокиа Текнолоджиз Ой Классификатор многоканального звукового сигнала
US9779739B2 (en) 2014-03-20 2017-10-03 Dts, Inc. Residual encoding in an object-based audio system
US9788029B2 (en) 2014-04-25 2017-10-10 Activevideo Networks, Inc. Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks
EP2980789A1 (en) * 2014-07-30 2016-02-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for enhancing an audio signal, sound enhancing system
US9984693B2 (en) * 2014-10-10 2018-05-29 Qualcomm Incorporated Signaling channels for scalable coding of higher order ambisonic audio data
US10140996B2 (en) 2014-10-10 2018-11-27 Qualcomm Incorporated Signaling layers for scalable coding of higher order ambisonic audio data
CA2986774A1 (en) 2015-05-29 2016-12-08 Armo Biosciences, Inc. Methods of using interleukin-10 for treating diseases and disorders
MY188370A (en) 2015-09-25 2021-12-06 Voiceage Corp Method and system for decoding left and right channels of a stereo sound signal
AU2015413301B2 (en) * 2015-10-27 2021-04-15 Ambidio, Inc. Apparatus and method for sound stage enhancement
AU2017357453B2 (en) * 2016-11-08 2021-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding or decoding a multichannel signal using a side gain and a residual gain
US10979844B2 (en) * 2017-03-08 2021-04-13 Dts, Inc. Distributed audio virtualization systems
CN108665902B (zh) 2017-03-31 2020-12-01 华为技术有限公司 多声道信号的编解码方法和编解码器
EP3422738A1 (en) * 2017-06-29 2019-01-02 Nxp B.V. Audio processor for vehicle comprising two modes of operation depending on rear seat occupation
CN109215667B (zh) 2017-06-29 2020-12-22 华为技术有限公司 时延估计方法及装置
WO2019020757A2 (en) 2017-07-28 2019-01-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. APPARATUS FOR ENCODING OR DECODING A MULTI-CHANNEL SIGNAL ENCODED USING A FILLING SIGNAL GENERATED BY A BROADBAND FILTER
US10535357B2 (en) 2017-10-05 2020-01-14 Qualcomm Incorporated Encoding or decoding of audio signals
GB201718341D0 (en) * 2017-11-06 2017-12-20 Nokia Technologies Oy Determination of targeted spatial audio parameters and associated spatial audio playback
GB2572650A (en) 2018-04-06 2019-10-09 Nokia Technologies Oy Spatial audio parameters and associated spatial audio playback
GB2574239A (en) 2018-05-31 2019-12-04 Nokia Technologies Oy Signalling of spatial audio parameters
GB2574667A (en) * 2018-06-15 2019-12-18 Nokia Technologies Oy Spatial audio capture, transmission and reproduction
FR3101741A1 (fr) * 2019-10-02 2021-04-09 Orange Détermination de corrections à appliquer à un signal audio multicanal, codage et décodage associés
KR20210060253A (ko) 2019-11-18 2021-05-26 삼성전자주식회사 메모리 컨트롤러, 메모리 시스템 및 이의 동작 방법
US11451919B2 (en) 2021-02-19 2022-09-20 Boomcloud 360, Inc. All-pass network system for colorless decorrelation with constraints
EP4320615A1 (en) * 2021-04-06 2024-02-14 Dolby International AB Encoding of envelope information of an audio downmix signal
CN113301329B (zh) * 2021-05-21 2022-08-05 康佳集团股份有限公司 基于图像识别的电视声场校正方法、装置及显示设备
CN116962955A (zh) * 2022-04-15 2023-10-27 华为技术有限公司 多通道的混音方法、设备及介质

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5091945A (en) * 1989-09-28 1992-02-25 At&T Bell Laboratories Source dependent channel coding with error protection
KR100228688B1 (ko) * 1991-01-08 1999-11-01 쥬더 에드 에이. 다차원 음장용 인코우더/디코우더
US5291557A (en) * 1992-10-13 1994-03-01 Dolby Laboratories Licensing Corporation Adaptive rematrixing of matrixed audio signals
DE4409368A1 (de) * 1994-03-18 1995-09-21 Fraunhofer Ges Forschung Verfahren zum Codieren mehrerer Audiosignale
JP3397001B2 (ja) * 1994-06-13 2003-04-14 ソニー株式会社 符号化方法及び装置、復号化装置、並びに記録媒体
EP0688113A2 (en) * 1994-06-13 1995-12-20 Sony Corporation Method and apparatus for encoding and decoding digital audio signals and apparatus for recording digital audio
US6029129A (en) * 1996-05-24 2000-02-22 Narrative Communications Corporation Quantizing audio data using amplitude histogram
CN1205842C (zh) * 1997-04-10 2005-06-08 索尼株式会社 编码方法和装置、解码方法和装置
US5890125A (en) 1997-07-16 1999-03-30 Dolby Laboratories Licensing Corporation Method and apparatus for encoding and decoding multiple audio channels at low bit rates using adaptive selection of encoding method
US6437944B2 (en) 1997-10-20 2002-08-20 Fujitsu Limited Head slider supporting device, disk device and suspension
US6122619A (en) 1998-06-17 2000-09-19 Lsi Logic Corporation Audio decoder with programmable downmixing of MPEG/AC-3 and method therefor
US6322189B1 (en) 1999-01-13 2001-11-27 Hewlett-Packard Company Multiple printhead apparatus with temperature control and method
US6578074B1 (en) 1999-06-25 2003-06-10 Mediaone Group, Inc. Provisioning server enhancement
JP2001100792A (ja) * 1999-09-28 2001-04-13 Sanyo Electric Co Ltd 符号化方法、符号化装置およびそれを備える通信システム
JP4424566B2 (ja) 1999-10-26 2010-03-03 ザ・インクテック株式会社 アルカリ可溶性接着剤
JP2002175097A (ja) * 2000-12-06 2002-06-21 Yamaha Corp 音声信号のエンコード/圧縮装置およびデコード/伸長装置
JP3951690B2 (ja) * 2000-12-14 2007-08-01 ソニー株式会社 符号化装置および方法、並びに記録媒体
US7292901B2 (en) * 2002-06-24 2007-11-06 Agere Systems Inc. Hybrid multi-channel/cue coding/decoding of audio signals
US7583805B2 (en) 2004-02-12 2009-09-01 Agere Systems Inc. Late reverberation-based synthesis of auditory scenes
SE0202159D0 (sv) * 2001-07-10 2002-07-09 Coding Technologies Sweden Ab Efficientand scalable parametric stereo coding for low bitrate applications
TW569551B (en) 2001-09-25 2004-01-01 Roger Wallace Dressler Method and apparatus for multichannel logic matrix decoding
GB0124580D0 (en) 2001-10-12 2001-12-05 Univ Reading New composition
EP1451809A1 (en) 2001-11-23 2004-09-01 Koninklijke Philips Electronics N.V. Perceptual noise substitution
US6890125B1 (en) 2002-01-30 2005-05-10 Calder Brothers Corporation Adjustable screed system
AU2003202773A1 (en) 2002-03-07 2003-09-16 Koninklijke Philips Electronics N.V. User controlled multi-channel audio conversion system
BRPI0308691B1 (pt) * 2002-04-10 2018-06-19 Koninklijke Philips N.V. “Métodos para codificar um sinal de canal múltiplo e para decodificar informação de sinal de canal múltiplo, e arranjos para codificar e decodificar um sinal de canal múltiplo”
DE60311794T2 (de) * 2002-04-22 2007-10-31 Koninklijke Philips Electronics N.V. Signalsynthese
US8340302B2 (en) * 2002-04-22 2012-12-25 Koninklijke Philips Electronics N.V. Parametric representation of spatial audio
WO2003090207A1 (en) * 2002-04-22 2003-10-30 Koninklijke Philips Electronics N.V. Parametric multi-channel audio representation
JP4187719B2 (ja) * 2002-05-03 2008-11-26 ハーマン インターナショナル インダストリーズ インコーポレイテッド マルチチャネル・ダウンミキシング装置
RU2363116C2 (ru) * 2002-07-12 2009-07-27 Конинклейке Филипс Электроникс Н.В. Аудиокодирование
AU2003259213A1 (en) 2002-07-23 2004-02-09 Cargill, Incorporated Process for treating corn and millets
KR20040043743A (ko) * 2002-11-19 2004-05-27 주식회사 디지털앤디지털 멀티채널 검색장치와 방법
EP1668925A4 (en) 2003-09-10 2007-04-25 A D I Video Technologies Ltd DEVICE, SYSTEM AND METHOD FOR MULTI-CHANNEL PROCESSING
US7447317B2 (en) * 2003-10-02 2008-11-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V Compatible multi-channel coding/decoding by weighting the downmix channel
US7394903B2 (en) * 2004-01-20 2008-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
US20050169846A1 (en) 2004-01-31 2005-08-04 Bart Kennington Enhancement of fragrance release from candles
US7805313B2 (en) * 2004-03-04 2010-09-28 Agere Systems Inc. Frequency-based coding of channels in parametric multi-channel coding systems
SE0400998D0 (sv) * 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
US7508947B2 (en) * 2004-08-03 2009-03-24 Dolby Laboratories Licensing Corporation Method for combining audio signals using auditory scene analysis
US7961890B2 (en) 2005-04-15 2011-06-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Multi-channel hierarchical audio coding with compact side information
JP2007096002A (ja) * 2005-09-29 2007-04-12 Matsushita Electric Ind Co Ltd 半導体装置の製造方法および半導体装置
ES2446245T3 (es) * 2006-01-19 2014-03-06 Lg Electronics Inc. Método y aparato para procesar una señal de medios
JP2008003007A (ja) * 2006-06-23 2008-01-10 Fujitsu Ltd 個体認識方法及び装置、個体認識範囲調整方法、及びプログラム
JP5228305B2 (ja) 2006-09-08 2013-07-03 ソニー株式会社 表示装置、表示方法
AU2007312597B2 (en) 2006-10-16 2011-04-14 Dolby International Ab Apparatus and method for multi -channel parameter transformation
JP5883561B2 (ja) 2007-10-17 2016-03-15 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ アップミックスを使用した音声符号器
JP5428564B2 (ja) 2009-06-18 2014-02-26 東洋紡株式会社 車両内装材用部材およびそれを用いた車両用内装材

Also Published As

Publication number Publication date
US20070258607A1 (en) 2007-11-08
CN1930608A (zh) 2007-03-14
KR100848365B1 (ko) 2008-07-24
US10244319B2 (en) 2019-03-26
US10250984B2 (en) 2019-04-02
US20160203822A1 (en) 2016-07-14
JP4589962B2 (ja) 2010-12-01
SE0400998D0 (sv) 2004-04-16
KR100848367B1 (ko) 2008-07-24
DE602005002942T2 (de) 2008-07-24
DE602005002451T2 (de) 2008-06-12
PL1695338T3 (pl) 2008-02-29
US9635462B2 (en) 2017-04-25
US20180054676A9 (en) 2018-02-22
ATE376240T1 (de) 2007-11-15
US20190320263A1 (en) 2019-10-17
US20170229128A1 (en) 2017-08-10
US20170229126A1 (en) 2017-08-10
CN1965351B (zh) 2011-05-11
US20170229132A1 (en) 2017-08-10
US20070002971A1 (en) 2007-01-04
US10244321B2 (en) 2019-03-26
EP1735775B8 (en) 2008-11-19
US10440474B2 (en) 2019-10-08
JP2007532960A (ja) 2007-11-15
ES2294703T3 (es) 2008-04-01
US20170229130A1 (en) 2017-08-10
TW200637415A (en) 2006-10-16
ES2293578T3 (es) 2008-03-16
CN102157155A (zh) 2011-08-17
US10271142B2 (en) 2019-04-23
JP5185340B2 (ja) 2013-04-17
US20200304913A1 (en) 2020-09-24
US10623860B2 (en) 2020-04-14
EP1695338B1 (en) 2007-09-12
HK1093594A1 (en) 2007-03-02
US8538031B2 (en) 2013-09-17
US7986789B2 (en) 2011-07-26
PL1735775T3 (pl) 2009-04-30
US20220159379A1 (en) 2022-05-19
DE602005002942D1 (de) 2007-11-29
JP2007531027A (ja) 2007-11-01
US9743185B2 (en) 2017-08-22
US20170229131A1 (en) 2017-08-10
US8693696B2 (en) 2014-04-08
KR20070001226A (ko) 2007-01-03
US10499155B2 (en) 2019-12-03
WO2005101370A1 (en) 2005-10-27
US20170238112A1 (en) 2017-08-17
US9972329B2 (en) 2018-05-15
US10244320B2 (en) 2019-03-26
CN101860784A (zh) 2010-10-13
US20140236604A1 (en) 2014-08-21
US9972330B2 (en) 2018-05-15
US20200021915A1 (en) 2020-01-16
DE602005002451D1 (de) 2007-10-25
US20230345176A1 (en) 2023-10-26
US20170229129A1 (en) 2017-08-10
EP1735775A1 (en) 2006-12-27
EP1735775B1 (en) 2007-10-17
US20160203823A1 (en) 2016-07-14
US9621990B2 (en) 2017-04-11
US20170229127A1 (en) 2017-08-10
JP2011030228A (ja) 2011-02-10
HK1144043A1 (zh) 2011-01-21
US11647333B2 (en) 2023-05-09
TWI334736B (en) 2010-12-11
US10250985B2 (en) 2019-04-02
US20110002470A1 (en) 2011-01-06
US10129645B2 (en) 2018-11-13
WO2005101371A1 (en) 2005-10-27
HK1163911A1 (zh) 2012-09-14
JP2011018060A (ja) 2011-01-27
US20170236523A1 (en) 2017-08-17
US20130236021A1 (en) 2013-09-12
US10015597B2 (en) 2018-07-03
US20170238113A1 (en) 2017-08-17
US20170148450A1 (en) 2017-05-25
ATE373301T1 (de) 2007-09-15
JP4603037B2 (ja) 2010-12-22
CN101860784B (zh) 2016-02-17
KR20070001162A (ko) 2007-01-03
US9972328B2 (en) 2018-05-15
JP5185337B2 (ja) 2013-04-17
US11184709B2 (en) 2021-11-23
US8223976B2 (en) 2012-07-17
EP1695338A1 (en) 2006-08-30
CN102157155B (zh) 2014-07-02
US20110075848A1 (en) 2011-03-31
CN1965351A (zh) 2007-05-16

Similar Documents

Publication Publication Date Title
CN1930608B (zh) 生成等级参数的设备和方法及生成多通道表示的设备和方法
CN101821799B (zh) 使用上混合的音频编码
CN101248483B (zh) 多声道音频信号的生成
CN101401152B (zh) 通过多通道音频信号的主分量分析进行编码的设备和方法
CN103400583A (zh) 多声道下混对象编码的增强编码和参数表示
CN105917406A (zh) 音频信号的参数化重构
CN105378832A (zh) 利用对象特定时间/频率分辨率从混合信号分离音频对象
Annadana et al. New Enhancements to Immersive Sound Field Rendition (ISR) System

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: DOLBY INTERNATIONAL CO., LTD.

Free format text: FORMER NAME: CODING TECHNOLOGIES AB

CP03 Change of name, title or address

Address after: Amsterdam

Patentee after: Dolby International AB

Address before: Stockholm

Patentee before: Coding Technologies AB