CN109887517A - 对音频场景进行解码的方法、解码器及计算机可读介质 - Google Patents

对音频场景进行解码的方法、解码器及计算机可读介质 Download PDF

Info

Publication number
CN109887517A
CN109887517A CN201910040308.1A CN201910040308A CN109887517A CN 109887517 A CN109887517 A CN 109887517A CN 201910040308 A CN201910040308 A CN 201910040308A CN 109887517 A CN109887517 A CN 109887517A
Authority
CN
China
Prior art keywords
matrix
under
audio
mixed signal
audio object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910040308.1A
Other languages
English (en)
Other versions
CN109887517B (zh
Inventor
海科·普尔哈根
拉尔斯·维尔默斯
利夫·约纳什·萨穆埃尔松
托尼·希尔沃宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dolby International AB
Original Assignee
Dolby International AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dolby International AB filed Critical Dolby International AB
Priority to CN201910040308.1A priority Critical patent/CN109887517B/zh
Publication of CN109887517A publication Critical patent/CN109887517A/zh
Application granted granted Critical
Publication of CN109887517B publication Critical patent/CN109887517B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03—Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03—Application of parametric coding in stereophonic audio systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/07—Synergistic effects of band splitting and sub-band processing

Abstract

本公开涉及对音频场景进行解码的方法、解码器及计算机可读介质。示例实施例提供了编码方法和解码方法，以及相关的编码器和解码器，以对至少包括一个或更多个音频对象(106a)的音频场景进行编码和解码。编码器(108、110)生成包括下混信号(112)和边信息的比特流(116)，边信息包括能使得够在解码器(120)中重构一个或更多个音频对象(106a)的重构矩阵的各个矩阵元素(114)。

Description

对音频场景进行解码的方法、解码器及计算机可读介质
本申请是申请日为2014年5月23日、申请号为“201480030011.2”、发明名称为“对音频场景的编码”的发明专利申请的分案申请。
相关申请的交叉引用
本申请要求于2013年5月24日提交的美国临时专利申请第61/827,246号的优先权，通过引用将该申请整体地合并到本文中。
技术领域
本文所公开的发明总体上涉及音频编码和解码领域。特别地，本发明涉及对包括音频对象的音频场景的编码和解码。
背景技术
存在用于参数空间音频编码的音频编码系统。例如，MPEG Surround描述了一种用于多声道音频的参数空间编码的系统。MPEG SAOC(空间音频对象编码)描述了一种用于音频对象的参数编码的系统。
在编码器侧，这些系统通常将声道/对象下混成下混，下混通常为单声道(一个声道)或立体声(两个声道)下混，并且提取通过如电平差和互相关来描述声道/对象的性质的边信息。然后对下混和边信息进行编码并且将其发送解码器侧。在解码器侧，在边信息的参数的控制下根据下混来重构即近似估计声道/对象。
这些系统的缺点在于重构通常在数学上是复杂的并且经常需要依赖于对由作为边信息发送的参数未明确描述的音频内容的性质的假设。这种假设例如可以是：除非发送了互相关参数，否则声道/对象被认为是不相关的；或者以特定方式生成声道/对象的下混。此外，当下混的声道的数目增加时，数学复杂度和对额外的假设的需要会显著增加。
此外，在应用在解码器侧的处理的算法细节中内在地反映出所需要的假设。这意味着在解码器侧必须包括相当多的智能。这是个缺点，因为当解码器被设置在例如很难或甚至不可能升级的消费者装置中时，很难升级和改进算法。
发明内容
本公开内容的一方面提供了一种用于对音频场景进行解码的方法，该方法包括：接收包括用于确定M个下混信号和重构矩阵的信息的比特流；生成重构矩阵；以及使用重构矩阵根据M个下混信号重构N个音频对象，其中，重构发生在频域中，其中，将重构矩阵的矩阵元素作为线性组合中的系数应用于至少M个下混信号，并且其中，矩阵元素基于N个音频对象。
本公开内容的另一方面提供了一种对音频场景进行解码的解码器，包括与存储器相关联的处理器和硬件中的至少之一，存储器被配置成实现：接收器，其接收包括用于确定M个下混信号和重构矩阵的信息的比特流；重构矩阵生成器，其生成重构矩阵；以及重构器，其使用重构矩阵根据M个下混信号重构N个音频对象，其中，重构发生在频域中，其中，将重构矩阵的矩阵元素作为线性组合中的系数应用于至少M个下混信号，并且其中，矩阵元素基于N个音频对象。
本公开内容的又一方面提供了一种包括计算机代码指令的非暂态计算机可读介质，计算机代码指令适于执行以下方法：接收包括用于确定M个下混信号和重构矩阵的信息的比特流；生成重构矩阵；以及使用重构矩阵根据M个下混信号来重构N个音频对象，其中，重构发生在频域中，其中，将重构矩阵的矩阵元素作为线性组合中的系数应用于至少M个下混信号，并且其中，矩阵元素基于N个音频对象。
附图说明
在下文中，将参考附图并且更加详细地描述示例实施例，其中：
图1是根据示例实施例的音频编码/解码系统的示意图；
图2是根据示例实施例的具有遗留解码器的音频编码/解码系统的示意图；
图3是根据示例实施例的音频编码/解码系统的编码侧的示意图；
图4是根据示例实施例的编码方法的流程图；
图5是根据示例实施例的编码器的示意图；
图6是根据示例实施例的音频编码/解码系统的解码器侧的示意图；
图7是根据示例实施例的解码方法的流程图；
图8是根据示例实施例的音频编码/解码系统的解码器侧的示意图；以及
图9是在根据示例实施例的音频编码/解码系统的解码器侧执行的时频变换的示意图。
所有附图都是示意性的，并且一般仅示出为阐明本发明所必须的部分，而可以省略或仅暗示其它部分。除非另有说明，否则相同附图标记在不同附图中的指示相同部件。
具体实施方式
考虑到上述内容，目的是提供编码器和解码器，以及提供音频对象的较不复杂的且更灵活的重构的相关方法。
I.概述——编码器
根据第一方面，示例实施例提出了编码方法、编码器以及用于编码的计算机程序产品。所提出的方法、编码器和计算机程序产品一般可以具有相同特征和优势。
根据示例实施例，提供了一种对至少包括N个音频对象的音频场景的时频块进行编码的方法。该方法包括：接收N个音频对象；基于至少N个音频对象生成M个下混信号；用矩阵元素生成重构矩阵，重构矩阵使得能够根据M个下混信号重构至少N个音频对象；以及生成包括M个下混信号以及重构矩阵的矩阵元素中的至少一些矩阵元素的比特流。
音频对象的数目N可以等于或大于1。下混信号的数目M可以等于或大于1。
通过该方法，从而生成了比特流，该比特流包括作为边信息的重构矩阵的矩阵元素中的至少一些矩阵元素以及M个下混信号。通过将重构矩阵的各个矩阵元素包括在比特流中，在解码器侧需要非常少的智能。例如，在解码器侧不需要基于所传输的对象参数和额外的假设对重构矩阵进行复杂计算。因此，显著降低了解码器侧的数学复杂度。此外，因为该方法的复杂度不依赖于所使用的下混信号的数目，所以与现有技术方法相比，增加了关于下混信号的数目的灵活性。
如本文中所使用的，音频场景一般指如下三维音频环境：其包括与可以被呈现以在音频系统上回放的三维空间中的位置相关联的音频单元。
如本文中所使用的，音频对象指音频场景的单元。音频对象通常包括音频信号以及诸如对象在三位空间中的位置的附加信息。附加信息通常被用于在给定的回放系统上最优地呈现音频对象。
如本文中所使用的，下混信号指是作为至少N个音频对象的组合的信号。诸如音床声道(将在下文中描述)的音频场景的其它信号也可以被组合到下混信号中。例如，M个下混信号可以对应于对给定扬声器配置，例如标准5.1配置的音频场景的呈现。在本文中由M表示的下混信号的数目通常(但不必须地)少于音频对象和音床声道的数目之和，这解释了为什么M个下混信号称为下混。
音频编码/解码系统通常例如通过将适合的滤波器组应用于输入音频信号而将时频空间划分成时频块。时频块的一般意思是对应于时间间隔和频率子带的时频空间的一部分。时间间隔可以通常对应于用在音频编码/解码系统中的时间帧的持续时间。频率子带可以通常对应于由用在编码/解码系统中的滤波器组所定义的一个或若干相邻频率子带。在频率子带对应于由滤波器组定义的若干相邻频率子带的情形下，这允许在音频信号的解码过程中存在不均匀的频率子带，例如，更宽的频率子带用于音频信号的较高频率。在音频编码/解码系统对整个频率范围进行操作的宽波段的情形下，时频块的频率子带可以对应于整个频率范围。上述方法公开了用于在一个这样的时频块期间对音频场景进行编码的编码步骤。然而，要理解的是，可以针对音频编码/解码系统的每个时频块重复该方法。并且，还要理解的是，可以同时对若干时频块进行编码。通常，相邻的时频块可以在时间和/或频率上稍稍重叠。例如，时间上的重叠可以相当于重构矩阵的元素在时间上，即从一个时间间隔到下一个时间间隔的线性插值。然而，本公开内容的目标在于编码/解码系统的其它部件，而相邻的时频块之间的时间和/或频率上的任何重叠留给本领域技术人员去实现。
根据示例实施例，使用第一格式将M个下混信号布置在比特流的第一字段中，并且使用第二格式将矩阵元素布置在比特流的第二字段中，从而允许仅支持第一格式的解码器解码和回放第一字段中的M个下混信号并且丢弃第二子段中的矩阵元素。这样做的优势在于比特流中的M个下混信号与不用于实现音频对象重构的遗留解码器后向兼容。换言之，遗留解码器仍然可以例如通过将每个下混信号映射到解码器的声道输出来解码和回放比特流的M个下混信号。
根据示例实施例，该方法还可以包括步骤：接收对应于N个音频对象中的每个音频对象的位置数据，其中，基于位置数据生成M个下混信号。位置数据通常将每个音频对象与三位空间中的位置相关联。音频对象的位置可以随时间而变化。通过在对音频对象进行下混时使用位置数据，将通过以下方式将音频对象混合到M个下混信号中：例如如果在具有M个输出声道的系统上听M个下混信号，则音频对象听起来就像它们近似地位于其各自的位置。这例如在M个下混信号要与遗留解码器后向兼容的情况下是有利的。
根据示例实施例，重构矩阵的矩阵元素是时变的和频变的。换言之，重构矩阵的矩阵元素可以对于不同的时频块而不同。以这样的方式，实现了音频对象的重构的极好的灵活性。
根据示例实施例，音频场景还包括多个音床声道。这例如在音频内容除了包括音频对象以外还包括音床声道的影院音频应用中是常见的。在这种情形下，可以基于至少N个音频对象和多个音床声道生成M个下混信号。音床声道的一般意思是对应于三维空间中的固定位置的音频信号。例如，音床声道可以对应于音频编码/解码系统的输出声道之一。这样，音床声道可以被解释为具有三维空间中与音频编码/解码系统的输出扬声器之一的位置相同的相关位置。因此，音床声道可以与仅指示相应输出扬声器的位置的标签相关联。
当音频场景包括音床声道时，重构矩阵可以包括使得能够根据M个下混信号重构音床声道的矩阵元素。
在某些情况下，音频场景可以包括大量的对象。为了降低表现音频场景所需要的复杂度和数据量，可以通过减少音频对象的数量来简化音频场景。因此，如果音频场景初始包括K个音频对象，其中K>N，则该方法还可以包括步骤：接收K个音频对象，并且通过将K个音频对象聚类成N个聚类并将每个聚类用一个音频对象表示，来将K个音频对象减少到N个音频对象。
为了简化场景，该方法还可以包括步骤：接收对应于K个音频对象中的每个音频对象的位置数据，其中，将K个对象聚类成N个聚类基于由K个音频对象的位置数据所给出的K个对象之间的位置距离。例如，三维空间中位置彼此靠近的音频对象可以被聚类在一起。
如上所述，该方法的示例实施例在所使用的下混信号的数目方面是灵活的。具体地，当存在多于两个下混信号时，即当M大于二时，可以有利地使用该方法。例如，可以使用对应于常规的5.1或7.1音频设置的五个或七个下混信号。这么做是有利的，因为与现有技术系统相反，无论使用的下混信号的数目为多少，所提出的编码原则的数学复杂度保持相同。
为了能够进一步改进N个音频对象的重构，该方法还可以包括：根据N个音频对象形成L个辅助信号；将矩阵元素包括在使得能够根据M个下混信号和L个辅助信号来重构至少N个音频对象的重构矩阵中；以及将L个辅助信号包括在比特流中。因此，辅助信号充当帮助信号，其例如可以捕获很难根据下混信号重构的音频对象的方面。辅助信号还可以基于音床声道。辅助信号的数目可以等于或大于1。
根据一个示例实施例，辅助信号可以对应于特别重要的音频对象，诸如表示对话的音频对象。因此，L个辅助信号中的至少之一可以与N个音频对象之一相同。这使得与必须仅根据M个下混声道进行重构的情况相比以更高质量呈现重要的对象。实际上，音频内容提供者可能已经优先化和/或标注了音频对象中的一些音频对象作为优选地单独作为辅助对象而被包括的音频对象。此外，这使得呈现之前对这些对象的修改/处理较不容易发生伪影。作为比特率和质量之间的折中，也可以发送两个或更多个音频对象的混合以作为辅助信号。换言之，L个辅助信号中的至少之一可以被形成为N个音频对象中的至少两个音频对象的组合。
根据一个示例实施例，辅助信号表示在生成M个下混信号的过程中丢失的音频对象的信号维度，该丢失例如由于独立对象的数目通常多于下混声道的数目，或者由于两个对象所关联的位置使得该两个对象被混合到同一下混信号中。后一种情形的示例是两个对象仅在纵向上分离而在投影到水平平面上时共享同一位置的情况，这意味着该两个对象通常将被呈现成标准5.1环绕扬声器设置的相同下混声道，在标准5.1环绕扬声器设置中所有的扬声器都在同一水平平面上。具体地，M个下混信号跨信号空间中的超平面。通过形成M个下混信号的线性组合，仅可以重构位于超平面中的音频信号。为了改进重构，可以包括不位于超平面中的辅助信号，从而也能够重构不位于超平面中的信号。换言之，根据示例实施例，多个辅助信号中的至少之一不位于被M个下混信号所跨的超平面中。例如，多个辅助信号中的至少之一可以与被M个下混信号所跨的超平面正交。
根据示例实施例，提供了一种包括当在具有处理能力的装置上运行时适于执行第一方面的任何方法的计算机代码指令的计算机可读介质。
根据示例实施例，提供了一种对至少包括N个音频对象的音频场景的时频块进行编码的编码器，该编码器包括：接收部件，被配置成接收N个音频对象；下混生成部件，被配置成接收来自接收部件的N个音频对象并且基于至少N个音频对象生成M个下混信号；分析部件，被配置成用矩阵元素生成重构矩阵，重构矩阵使得能够根据M个下混信号重构至少N个音频对象；以及比特流生成部件，被配置成接收来自下混生成部件的M个下混信号以及来自分析部件的重构矩阵，并且生成包括M个下混信号和重构矩阵的矩阵元素中的至少一些矩阵元素的比特流。
Ⅱ.概述——解码器
根据第二方面，示例实施例提出了解码方法、解码装置和用于解码的计算机程序产品。所提出的方法、装置和计算机程序产品一般可以具有相同特征和优势。
与在上述编码器的概述中呈现的特征和设置有关的优势可以一般对解码器的相应特征和设置有效。
根据示例实施例，提供了一种对至少包括N个音频对象的音频场景的时频块进行解码的方法，该方法包括步骤：接收包括M个下混信号和重构矩阵的矩阵元素中的至少一些矩阵元素的比特流；使用矩阵元素生成重构矩阵；以及使用重构矩阵根据M个下混信号重构N个音频对象。
根据示例实施例，使用第一格式将M个下混信号布置在比特流的第一字段中，并且使用第二格式将矩阵元素布置在比特流的第二子段中，从而允许仅支持第一格式的解码器解码和回放第一字段中的M个下混信号并且丢弃第二子段中的矩阵元素。
根据示例实施例，重构矩阵的矩阵元素是时变的和频变的。
根据示例实施例，音频场景还包括多个音床声道，该方法还包括使用重构矩阵根据M个下混信号来重构音床声道。
根据示例实施例，下混信号的数目M大于2。
根据示例实施例，该方法还包括：接收由N个音频对象形成的L个辅助信号；使用重构矩阵根据M个下混信号和L个辅助信号重构N个音频对象，其中，重构矩阵包括使得能够根据M个下混信号和L个辅助信号重构至少N个音频对象的矩阵元素。
根据示例实施例，L个辅助信号的至少之一与N个音频对象之一相同。
根据示例实施例，L个辅助信号的至少之一是N个音频对象的组合。
根据示例实施例，M个下混信号跨超平面，并且其中多个辅助信号的至少之一不位于被M下混信号所跨的超平面中。
根据示例实施例，不位于超平面中的多个辅助信号的至少之一正交于被M个下混信号所跨的超平面。
如上所述，音频编码/解码系统通常在频域中工作。因此，音频编码/解码系统使用滤波器组执行音频信号的时频变换。可以使用不同类型的时频变换。例如，可以关于第一频域来表示M个下混信号并且可以关于第二频域来表示重构矩阵。为了减少解码器的计算负担，以聪明的方式选择第一频域和第二频域是有利的。例如，第一频域和第二频域可以被选择成相同的频域，诸如改进离散余弦变换(MDCF)域。以这种方式，可以避免在解码器中将M个下混信号从第一频域变换到时域然后变换到第二频域。可替选地，能够通过以下方式选择第一频域和第二频域：可以共同实现从第一频域到第二频域的变换，使得在第一频域与第二频域之间没有必要通过时域。
该方法还可以包括接收对应于N个音频对象的位置数据，并且使用位置数据呈现N个音频对象以创建至少一个输出音频声道。以这种方式，基于重构的N个音频对象在三维空间中的位置将其映射到音频编码器/解码器系统的输出声道上。
优选地在频域中执行呈现。为了减少解码器的计算负担，优选地以聪明的方式关于重构音频对象的频域来选择呈现的频域。例如，如果关于对应于第二滤波器组的第二频域表示重构矩阵，并且在对应于第三滤波器组的第三频域中执行呈现，则优选地将第二滤波器组和第三滤波器组选择成至少部分地为相同的滤波器组。例如，第二滤波器组和第三滤波器组可以包括正交镜像滤波器(QMF)域。可替选地，第二频域和第三频域可以包括MDCT滤波器组。根据示例实施例，第三滤波器组可以由一系列滤波器组组成，诸如QMF滤波器组，后接奈奎斯特滤波器组。如果这样，则序列的滤波器组中至少之一(序列的第一滤波器组)与第二滤波器组相同。以这种方式，可以说第二滤波器组和第三滤波器组至少部分地为相同的滤波器组。
根据示例实施例，提供了包括当在具有处理能力的装置上运行时适于执行第二方面的任一方法的计算机代码指令的计算机可读介质。
根据示例实施例，提供了一种对至少包括N个音频对象的音频场景的时频块进行解码的解码器，该解码器包括：接收部件，被配置成接收包括M个下混信号和重构矩阵的矩阵元素中的至少一些矩阵元素的比特流；重构矩阵生成部件，被配置成接收来自接收部件的矩阵元素，并且基于矩阵元素生成重构矩阵；以及重构部件，被配置成接收来自重构矩阵生成部件的重构矩阵，并且使用重构矩阵根据M个下混信号重构N个音频对象。
Ⅲ.示例实施例
图1图示出对音频场景102进行编码/解码的编码/解码系统100。编码/解码系统100包括编码器108、比特流生成部件110、比特流解码部件118、解码器120以及呈现器122。
音频场景102由一个或更多个音频对象106a(诸如N个音频对象)即音频信号来表示。音频场景102还可以包括一个或更多个音床声道106b，即直接对应于呈现器122的输出声道之一的信号。音频场景102还由包括位置信息104的元数据来表示。在呈现音频场景102时例如由呈现器122使用位置信息104。位置信息104可以将音频对象106a以及可能还有音床声道106b与三维空间中的空间位置关联起来以作为时间的函数。元数据还可以包括对于呈现音频场景102有用的其它类型的数据。
系统100的编码部分包括编码器108和比特流生成部件110。编码器108接收音频对象106a、音床声道106b(如果存在)，以及包括位置信息104的元数据。基于此，编码器108生成一个或更多个下混信号112，诸如M个下混信号。举例来说，下混信号112可以对应于5.1音频系统的声道[Lf Rf Cf Ls Rs LFE]。(“L”代表左，“R”代表右，“C”代表中央，“f”代表前，“s”代表环绕，并且“LFE”代表低频效果)。
编码器108还生成边信息。边信息包括重构矩阵。重构矩阵包括使得能够根据下混信号112重构至少音频对象106a的矩阵元素114。重构矩阵还可以使得能够重构音床声道106b。
编码器108将M个下混信号112以及矩阵元素114中的至少一些矩阵元素传输到比特流生成部件110。比特流生成部件110通过执行量化和编码来生成包括M个下混信号112和矩阵元素114中的至少一些矩阵元素的比特流116。比特流生成部件110还接收包括位置信息104的元数据，以包括在比特流116中。
系统的解码部分包括比特流解码部件118和解码器120。比特流解码部件118接收比特流116，并且执行解码和去量化(dequantization)以提取M个下混信号112和包括重构矩阵的至少一些矩阵元素114的边信息。M个下混信号112和矩阵元素114随后被输入到解码器120，解码器120基于下混信号112和矩阵元素114生成N个音频对象106a以及很可能还有音床声道106b的重构106'。因此，N个音频对象的重构106'是N个音频对象106a以及很可能还有音床声道106b的近似。
举例来说，如果下混信号112对应于5.1配置的声道[Lf Rf Cf Ls Rs LFE]，则解码器120可以仅使用全波段声道[Lf Rf Cf Ls Rs]来重构对象106'，从而忽略LFE。这同样适用于其它声道配置。可以将下混112的LFE声道(基本未修改)发送到呈现器122。
重构的音频对象106'以及位置信息104随后被输入到呈现器122。基于重构的音频对象106'和位置信息104，呈现器122呈现具有适合于在期望的扬声器或耳机配置上回放的格式的输出信号124。典型的输出格式是标准5.1环绕设置(3个前扬声器、2个环绕扬声器以及1个低频效果(LFE)扬声器)或者7.1+4设置(3个前扬声器、4个环绕扬声器、1个LFE扬声器以及4个高架扬声器)。
在一些实施例中，原始音频场景可以包括大量的音频对象。对大量的音频对象进行处理的代价是高计算复杂度。并且，要嵌入到比特流116中的边信息量(位置信息104和重构矩阵元素114)取决于音频对象的数目。通常，边信息量随音频对象的数目线性地增长。因此，为了节省计算复杂度和/或为了降低对音频场景进行编码所需要的比特率，在编码之前减少音频对象的数目是有利的。为此，音频编码器/解码器系统100还可以包括设置在编码器108上游的场景简化模块(未示出)。场景简化模块将原始音频对象以及很可能还有音床声道作为输入，并且执行处理以输出音频对象106a。场景简化模块通过执行聚类而将原始音频对象的数目例如K减少到音频对象106a的更合适的数目N。更确切地，场景简化模块将K个原始音频对象以及很可能还有音床声道组织成N个聚类。通常，基于K个原始音频对象/音床声道在音频场景中的空间接近度来定义聚类。为了确定空间接近度，场景简化模块可以将原始音频对象/音床声道的位置信息作为输入。当场景简化模块已经形成了N个聚类时，其继续执行以将每个聚类用一个音频对象代表。例如，代表聚类的音频对象可以被形成为形成聚类的一部分的音频对象/音床声道之和。更具体地，可以添加音频对象/音床声道的音频内容以生成代表性音频对象的音频内容。此外，可以对聚类中音频对象/音床声道的位置取平均，以给出代表性音频对象的位置。场景简化模块将代表性音频对象的位置包括在位置数据104中。此外，场景简化模块输出构成图1的N个音频对象106a的代表性音频对象。
可以使用第一格式将M个下混信号112布置在比特流116的第一字段中。可以使用第二格式将矩阵元素114布置在比特流116的第二字段中。以这种方式，仅支持第一格式的解码器能够解码和回放第一字段中的M个下混信号112，并且丢弃第二字段中的矩阵元素114。
图1的音频编码器/解码器系统100支持第一格式和第二格式。更确切地，解码器120被配置成解译第一格式和第二格式，这意味着其能够基于M个下混信号112和矩阵元素114来重构对象106'。
图2图示出音频编码器/解码器系统200。系统200的编码部分108、110对应于图1的编码部分。然而，音频编码器/解码器系统200的解码部分与图1的音频编码器/解码器系统100的解码部分不同。音频编码器/解码器系统200包括支持第一格式但不支持第二格式的遗留解码器230。因此，音频编码器/解码器系统200的遗留解码器230不能够重构音频对象/音床声道106a到106b。然而，因为遗留解码器230支持第一格式，所以其仍可以对M个下混信号112进行解码以生成输出224，输出224是适合于通过相应的多声道扬声器设置实现直接回放的基于声道的表示，诸如5.1表示。下混信号的这个性质称为后向兼容，后向兼容意味着不支持第二格式，即不能够解译包括矩阵元素114的边信息的遗留解码器也可以解码和回放M个下混信号112。
现在将参考图3和图4的流程图更详细地描述音频编码/解码系统100的编码器侧的操作。
图4更详细地图示出图1的编码器108和比特流生成部件110。编码器108具有接收部件(未示出)、下混生成部件318和分析部件328。
在步骤E02中，编码器108的接收部件接收N个音频对象106a和音床声道106b(如果存在)。编码器108还可以接收位置数据104。使用向量标记，N个音频对象可以由向量S＝[S1S2...SN]T表示，并且音床声道由向量B表示。N个音频对象和音床声道可以一起由向量A＝[BT ST]T表示。
在步骤E04中，下混生成部件318根据N个音频对象106a和音床声道106b(如果存在)生成M个下混信号112。使用向量标记，M个下混信号可以由包括M个下混信号的向量D＝[Dl D2...DM]T表示。一般多个信号的下混是信号的组合，诸如信号的线性组合。举例来说，M个下混信号可以对应于特定的扬声器配置，诸如5.1扬声器配置中的扬声器[Lf Rf Cf LsRs LFE]的配置。
下混生成部件318在生成M个下混信号时可以使用位置信息104，使得基于各对象在三维空间中的位置将这些对象组合成不同的下混信号。当M个下混信号本身如同上述示例中那样对应于特定扬声器配置时，这是特别相关的。举例来说，下混生成部件318可以基于位置信息得出表示矩阵Pd(对应于应用在图1的呈现器122中的表示矩阵)，并且使用该表示矩阵根据D＝pd*[BT ST]T生成下混。
N个音频对象106a和音床声道106b(如果存在)也被输入到分析部件328。分析部件328通常对输入音频信号106a、106b的时频块进行操作。为此，可以将N个音频对象106a和音床声道106b馈送过对输入音频信号106a、106b执行时间到频率变换的滤波器组，即QMF组。特别地，滤波器组338与多个频率子带相关联。时频块的频率分辨率对应于这些频率子带中的一个或更多个。时频块的频率分辨率可以是不均匀的，即其可以对频率变化。例如，低频率分辨率可以用于高频，这意味着高频范围内的时频块可以对应于由滤波器组338定义的若干频率子带。
在步骤E06中，分析部件328生成在本文中由R1表示的重构矩阵。生成的重构矩阵由多个矩阵元素组成。重构的矩阵R1使得能够在解码器中根据M个下混信号112重构(近似)N个音频对象106a以及很可能还有音床声道106b。
分析部件328可以采取不同的方法来生成重构矩阵。例如，可以使用将N个音频对象106a/音床声道106b以及M个下混信号112作为输入的最小均方误差(MMSE)预测方法。可以将该方法描述成旨在得出能够最小化重构的音频对象/音床声道的均方误差的重构矩阵的方法。特别地，该方法使用候选重构矩阵来重构N个音频对象/音床声道，并且关于均方误差将音频对象/音床声道与输入音频对象106a/音床声道106b进行比较。将最小化均方误差的候选重构矩阵选作重构矩阵，并且其矩阵元素114是分析部件328的输出。
MMSE方法需要对N个音频对象106a/音床声道106b以及M个下混信号112的相关矩阵和协方差矩阵进行估计。根据上述方法，基于N个音频对象106a/音床声道106b和M个下混信号112来测量这些相关矩阵和协方差矩阵。在替选的基于模型的方法中，分析部件328将位置数据104而不是M个下混信号112作为输入。通过做出某些假设，例如假设N个音频对象互不相关，并且使用该假设并结合应用在下混生成部件318中的下混规则，分析部件328可以计算出执行上述MMSE方法所需要的所需相关矩阵和协方差矩阵。
重构矩阵的元素114和M个下混信号112随后输入到比特流生成部件110。在步骤E108中，比特流生成部件110对M个下混信号112和重构矩阵的至少一些矩阵元素114进行量化和编码，并且将它们布置在比特流116中。特别地，比特流生成部件110可以使用第一格式将M个下混信号112布置在比特流116的第一字段中。此外，比特流生成部件110可以使用第二格式将矩阵元素114布置在比特流116的第二字段中。如前面参考图2所描述的，这允许仅支持第一格式的遗留解码器解码和回放M个下混信号112并且丢弃第二字段中的矩阵元素114。
图5图示出编码器108的替选实施例。与图3中示出的编码器相比，图5的编码器508还使得一个或更多个辅助信号能够被包括在比特流116中。为此，编码器508包括辅助信号生成部件548。辅助信号生成部件548接收音频对象106a/音床声道106b，并且基于音频对象106a/音床声道106b生成一个或更多个辅助信号512。辅助信号生成部件548例如可以生成辅助信号512以作为音频对象106a/音床声道106b的组合。用向量C＝[CI C2...CL]T来表示辅助信号，辅助信号可以被生成为C＝Q*[BT ST]T，其中，Q为可以是时变和频变的矩阵。这包括辅助信号等于音频对象中的一个或更多个音频对象的情形以及辅助信号是音频对象的线性组合的情形。例如，辅助信号可以代表一个特别重要的对象，诸如对话。
辅助信号512的作用是改善解码器中音频对象106a/音床声道106b的重构。更具体地，在解码器侧，可以基于M个下混信号112以及L个辅助信号512来重构音频对象106a/音床声道106b。因此，重构矩阵将包括能够根据M个下混信号112以及L个辅助信号重构音频对象/音床声道的矩阵元素114。
因此，L个辅助信号512可以被输入到分析部件328，使得在生成重构矩阵时考虑到L个辅助信号512。分析部件328也可以将控制信号发送至辅助信号生成部件548。例如，分析部件328可以控制哪些音频对象/音床声道包括在辅助信号中以及它们是如何被包括的。特别地，分析部件328可以控制Q矩阵的选择。该控制例如可以基于上述MMSE方法，使得可以选择辅助信号以使得重构的音频对象/音床声道与音频对象106a/音床声道106b尽可能地接近。
现在将参考图6和图7的流程图更加详细地描述音频编码/解码系统100的解码器侧的操作。
图6更具体地图示出图1的比特流解码部件118和解码器120。解码器120包括重构矩阵生成部件622和重构部件624。
在步骤D02中，比特流解码部件118接收比特流116。比特流解码部件118对比特流116中的信息进行解码和去量化，以提取M个下混信号112以及重构矩阵中的至少一些矩阵元素114。
重构矩阵生成部件622接收矩阵元素114并且在步骤D04中继续进行以生成重构矩阵614。重构矩阵生成部件622通过将矩阵元素114布置在矩阵中的适当位置来生成重构矩阵614。如果没有接收到重构矩阵的全部矩阵元素，重构矩阵生成部件622例如可以插入零来代替缺少的元素。
重构矩阵614和M个下混信号随后被输入到重构部件624。重构部件624随后在步骤D06中重构N个音频对象，并且如果可以，重构音床声道。换言之，重构部件624生成N个音频对象106a/音床声道106b的近似106'。
举例来说，M个下混信号可以对应于特定的扬声器配置，诸如5.1扬声器配置中的扬声器[Lf Rf Cf Ls Rs LFE]的配置。如果这样，重构部件624可以使得对象106'的重构仅基于对应于扬声器配置的全波段声道的下混信号。如上文所解释的，带限信号(低频LFE信号)可以基本未修改地被发送到呈现器。
重构部件624通常在频域中工作。更确切地，重构部件624对输入信号的各个时频块进行操作。因此，在输入到重构部件624之前，M个下混信号112通常经受时间到频率变换623。时间到频率变换623通常与在编码器侧应用的变换338相同或相似。例如，时间到频率变换623可以是QMF变换。
为了重构音频对象/音床声道106'，重构部件624应用矩阵操作。更具体地，使用先前引入的标记，重构部件624可以将音频对象/音床声道的近似A'生成为A'＝R1*D。重构矩阵R1可以根据时间和频率变化。因此，重构矩阵在由重构部件624处理的不同的时频块之间可以不同。
在从解码器120输出之前，重构的音频对象/音床声道106'通常被变换回时域625。
图8图示出当比特流116额外地包括辅助信号时的情况。与图7的实施例相比，比特流解码部件118现在额外地对来自比特流116的一个或更多个辅助信号512进行解码。辅助信号512被输入到重构部件624，辅助信号512在重构部件624处被包括在音频对象/音床声道的重构中。更具体地，重构部件624通过应用矩阵运算A'＝R1*[DT CT]T生成音频对象/音床声道。
图9图示出在图1的音频编码/解码系统100的解码器侧使用的不同的时频变换。比特流解码部件118接收比特流116。解码和去量化部件918对比特流116进行解码和去量化，以提取位置信息104、M个下混信号112和重构矩阵的矩阵元素114。
在该阶段，通常在第一频域中表示M个下混信号112，第一频域对应于在本文中由T/FC和F/TC表示以分别用于从时域到第一频域的变换和从第一频域到时域的变换的第一组时频滤波器组。通常，对应于第一频域的滤波器组可以实现重叠窗变换，诸如MDCT和反MDCT。比特流解码部件118可以包括通过使用滤波器组F/TC将M个下混信号112变换到时域的变换部件901。
解码器120，尤其是重构部件624通常关于第二频域处理信号。第二频域对应于在本文中由T/FU和F/TU表示的分别用于从时域到第二频域的变换和从第二频域到时域的变换的第二组时频滤波器组。因此，解码器120可以包括通过使用滤波器组T/FU将在时域中表示的M个下混信号112变换到第二频域的变换部件903。当重构部件624已经通过在第二频域中执行处理而基于M个下混信号重构对象106'时，变换部件905可以通过使用滤波器组F/TU将重构对象106’变换回时域。
呈现器122通常关于第三频域处理信号。第三频域对应于在本文中由T/FR和F/TR表示的分别用于从时域到第三频域的变换以及从第三频域到时域的变换的第三组时频滤波器组。因此，呈现器122可以包括通过使用滤波器组T/FR将重构的音频对象106'从时域变换到第三频域的变换部件907。当呈现器122通过呈现部件922已经呈现输出声道124时，可以由变换部件909通过使用滤波器组F/TR将输出声道变换到时域。
从以上描述显而易见，音频编码/解码系统的解码器侧包括许多时频变换步骤。然而，如果以一定方式选择第一频域、第二频域和第三频域，则时频变换步骤中的一些步骤会变得冗余。
例如，可以将第一频域、第二频域和第三频域中的一些选择成为一样的，或者可以共同地实现为从一个频域直接到另一频域而不通过它们之间的时域。后者的一个示例是以下情形：第二频域和第三频域的不同仅在于呈现器122中的变换部件907除了使用两个变换部件905和907共同的QMF滤波器组以外还使用奈奎斯特滤波器组以提高低频处的频率分辨率。在这种情形下，可以以奈奎斯特滤波器组的形式共同实现变换部件905和907，从而节省计算复杂度。
在另一示例中，第二频域和第三频域是相同的。例如，第二频域和第三频域可以都是QMF频域。在这种情形下，变换部件905和907是冗余的并且可以被去除，从而节省计算复杂度。
根据另一示例，第一频域和第二频域可以是相同的。例如，第一频域和第二频域可以都是MDCT域。在这种情形下，可以去除第一变换部件901和第二变换部件903，从而节省计算复杂度。
等同物、扩展、替选方案以及其它
本领域技术人员在研究以上描述之后将会明白本公开内容的其它实施例。虽然本说明书和附图公开了实施例和示例，但本公开内容不限于这些具体示例。在不偏离由所附权利要求所定义的本公开内容的范围的情况下可以做出许多修改和变形。在权利要求中出现的任何附图标记不被理解为限制它们的范围。
另外，根据对附图、公开内容和所附权利要求的研究，本领域技术人员在实践本公开内容时可以理解并实现对所公开的实施例的变型。在权利要求书中，词语“包括”不排除其它元件或步骤，并且不定冠词“一”不排除复数形式。在相互不同的从属权利要求中引述某些措施的事实不指示不可以使用这些措施的组合来获利。
在上文中公开的系统和方法可以实现为软件、固件、硬件或者它们的组合。在硬件实现中，以上描述中提到的功能单元之间的任务划分不一定对应于实体单元的划分；相反地，一个物理部件可以具有多个功能，并且可以由若干物理部件共同执行一个任务。某些部件或全部部件可以被实现为由数字信号处理器或微处理器执行的软件，或者可以被实现为硬件或专用集成电路。这样的软件可以分布在可以包括计算机存储介质(或非暂态介质)和通信介质(或暂态介质)的计算机可读介质上。如为本领域技术人员所熟知的，术语计算机存储介质包括以任何方法或用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的技术实现的易失性介质和非易失性介质，可移除介质和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪速存储器或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光盘存储装置、磁盒、磁带、磁盘存储器或其它磁存储装置、或者可用于存储期望信息并且可被计算机访问的任何其它介质。此外，技术人员熟知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或诸如载波的调制数据信号中的其它数据，或者其它传输机制，并且包括任何信息传输介质。
本公开内容还包括以下方案。
(1)一种对至少包括N个音频对象的音频场景的时频块进行编码的方法，所述方法包括：
接收所述N个音频对象；
基于至少所述N个音频对象生成M个下混信号；
用矩阵元素生成重构矩阵，所述重构矩阵使得能够根据所述M个下混信号重构至少所述N个音频对象；以及
生成比特流，所述比特流包括所述M个下混信号和所述重构矩阵的所述矩阵元素中的至少一些矩阵元素。
(2)根据方案(1)所述的方法，其中，使用第一格式将所述M个下混信号布置在所述比特流的第一字段中，并且使用第二格式将所述矩阵元素布置在所述比特流的第二字段中，从而允许仅支持所述第一格式的解码器解码和重放所述第一字段中的所述M个下混信号，并且丢弃所述第二字段中的所述矩阵元素。
(3)根据前述方案中的任一方案所述的方法，还包括步骤：接收对应于所述N个音频对象中的每个音频对象的位置数据，其中，基于所述位置数据生成所述M个下混信号。
(4)根据前述方案中的任一方案所述的方法，其中，所述重构矩阵的所述矩阵元素是时变的和频变的。
(5)根据前述方案中的任一方案所述的方法，其中，所述音频场景还包括多个音床声道，其中，基于至少所述N个音频对象和所述多个音床声道生成所述M个下混信号。
(6)根据方案(5)所述的方法，其中，所述重构矩阵包括使得能够根据所述M个下混信号重构所述音床声道的矩阵元素。
(7)根据前述方案中的任一方案所述的方法，其中，所述音频场景初始包括K个音频对象，其中K>N，所述方法还包括步骤：接收所述K个音频对象，并且通过将所述K个音频对象聚类成N个聚类并将每个聚类用一个音频对象代表，来将所述K个音频对象减少到所述N个音频对象。
(8)根据方案(7)所述的方法，还包括步骤：接收对应于所述K个音频对象中的每个音频对象的位置数据，其中，将所述K个对象聚类成N个聚类基于由所述K个音频对象的所述位置数据给出的所述K个对象之间的位置距离。
(9)根据前述方案中的任一方案所述的方法，其中，下混信号的所述数目M大于2。
(10)根据前述方案中的任一方案所述的方法，还包括：
由所述N个音频对象形成L个辅助信号；
将使得能够根据所述M个下混信号和所述L个辅助信号重构至少所述N个音频对象的矩阵元素包括在所述重构矩阵中；以及
将所述L个辅助信号包括在所述比特流中。
(11)根据方案(10)所述的方法，其中，所述L个辅助信号的至少之一与所述N个音频对象之一相同。
(12)根据方案(10)至(11)中的任一方案所述的方法，其中，所述L个辅助信号的至少之一被形成为所述N个音频对象中的至少两个音频对象的组合。
(13)根据方案(10)至(12)中的任一方案所述的方法，其中，所述M个下混信号跨超平面，并且其中，所述多个辅助信号的至少之一不位于被所述M个下混信号所跨的所述超平面中。
(14)根据方案(13)所述的方法，其中，所述多个辅助信号中的所述至少之一与被所述M个下混信号所跨的所述超平面正交。
(15)一种计算机可读介质，其包括当在具有处理能力的装置上运行时适于执行根据方案(1)至(14)中的任一方案所述的方法的计算机代码指令。
(16)一种对至少包括N个音频对象的音频场景的时频块进行编码的编码器，所述编码器包括：
接收部件，其被配置成接收所述N个音频对象；
下混生成部件，其被配置成接收来自所述接收部件的所述N个音频对象，以及基于至少所述N个音频对象生成M个下混信号；
分析部件，其被配置成用矩阵元素生成重构矩阵，所述重构矩阵使得能够根据所述M个下混信号重构至少所述N个音频对象；以及
比特流生成部件，其被配置成接收来自所述下混生成部件的所述M个下混信号和来自所述分析部件的所述重构矩阵，以及生成包括所述M个下混信号和所述重构矩阵的所述矩阵元素中的至少一些矩阵元素的比特流。
(17)一种对至少包括N个音频对象的音频场景的时频块进行解码的方法，所述方法包括步骤：
接收包括M个下混信号和重构矩阵的至少一些矩阵元素的比特流；
使用所述矩阵元素生成所述重构矩阵；以及
使用所述重构矩阵根据所述M个下混信号重构所述N个音频对象。
(18)根据方案(17)所述的方法，其中，所述M个下混信号被使用第一格式布置在所述比特流的第一字段中，并且所述矩阵元素被使用第二格式布置在所述比特流的第二字段中，从而允许仅支持所述第一格式的解码器解码和重放所述第一字段中的所述M个下混信号，并且丢弃所述第二字段中的所述矩阵元素。
(19)根据方案(17)至(18)中的任一方案所述的方法，其中，所述重构矩阵的所述矩阵元素是时变的和频变的。
(20)根据方案(17)至(19)中的任一方案所述的方法，其中，所述音频场景还包括多个音床声道，所述方法还包括使用所述重构矩阵根据所述M个下混信号重构所述音床声道。
(21)根据方案(17)至(20)中的任一方案所述的方法，其中，下混信号的数目M大于2。
(22)根据方案(17)至(21)中的任一方案所述的方法，还包括：
接收由所述N个音频对象形成的L个辅助信号；
使用所述重构矩阵根据所述M个下混信号和所述L个辅助信号重构所述N个音频对象，其中，所述重构矩阵包括使得能够根据所述M个下混信号和所述L个辅助信号重构至少所述N个音频对象的矩阵元素。
(23)根据方案(22)所述的方法，其中，所述L个辅助信号的至少之一与所述N个音频对象之一相同。
(24)根据方案(22)至(23)中的任一方案所述的方法，其中，所述L个辅助信号的至少之一是所述N个音频对象的组合。
(25)根据方案(22)至(24)中的任一方案所述的方法，其中，所述M个下混信号跨超平面，并且其中，所述多个辅助信号的至少之一不位于被所述M个下混信号所跨的所述超平面中。
(26)根据方案(25)所述的方法，其中，不位于所述超平面中的所述多个辅助信号中的所述至少之一与被所述M个下混信号所跨的所述超平面正交。
(27)根据方案(17)至(26)中的任一方案所述的方法，其中，关于第一频域表示所述M个下混信号，并且其中，关于第二频域表示所述重构矩阵，所述第一频域和所述第二频域是相同的频域。
(28)根据方案(27)所述的方法，其中，所述第一频域和所述第二频域是改进离散余弦变换(MDCT)域。
(29)根据方案(17)至(28)中的任一方案所述的方法，还包括：接收对应于所述N个音频对象的位置数据，以及
使用所述位置数据呈现所述N个音频对象以创建至少一个输出音频声道。
(30)根据方案(29)所述的方法，其中，关于对应于第二滤波器组的第二频域表示所述重构矩阵，并且在对应于第三滤波器组的第三频域中执行所述呈现，其中，所述第二滤波器组和所述第三滤波器组是至少部分地相同的滤波器组。
(31)根据方案(30)所述的方法，其中，所述第二滤波器组和所述第三滤波器组包括正交镜像滤波器(QMF)滤波器组。
(32)一种计算机可读介质，其包括当在具有处理能力的装置上运行时适于执行根据方案17至31中的任一方案所述的方法的计算机代码指令。
(33)一种对至少包括N个音频对象的音频场景的时频块进行解码的解码器，所述解码器包括：
接收部件，其被配置成接收包括M个下混信号和重构矩阵的矩阵元素中的至少一些矩阵元素的比特流；
重构矩阵生成部件，其被配置成接收来自所述接收部件的所述矩阵元素，并且基于所述矩阵元素生成所述重构矩阵；以及重构部件，其被配置成接收来自所述重构矩阵生成部件的所述重构矩阵，并且使用所述重构矩阵根据所述M个下混信号重构所述N个音频对象。

Claims (15)

1.一种用于对音频场景进行解码的方法，所述方法包括：
接收包括用于确定M个下混信号和重构矩阵的信息的比特流；
生成所述重构矩阵；以及
使用所述重构矩阵根据所述M个下混信号重构N个音频对象，其中，所述重构发生在频域中，
其中，将所述重构矩阵的矩阵元素作为线性组合中的系数应用于所述至少M个下混信号，并且其中，所述矩阵元素基于所述N个音频对象。
2.根据权利要求1所述的方法，其中，使用第一格式将所述M个下混信号布置在所述比特流的第一字段中，并且使用第二格式将所述矩阵元素布置在所述比特流的第二字段中，从而允许仅支持所述第一格式的解码器解码和回放所述第一字段中的所述M个下混信号，并且丢弃所述第二字段中的所述矩阵元素。
3.根据权利要求1所述的方法，其中，所述音频场景还包括多个音床声道，所述方法还包括使用所述重构矩阵根据所述M个下混信号重构所述音床声道，其中，所述N个音频对象和所述音床声道的近似被获得为至少所述M个下混信号的线性组合，所述重构矩阵的所述矩阵元素作为所述线性组合中的系数。
4.根据权利要求1所述的方法，还包括：
接收由所述N个音频对象形成的L个辅助信号；
使用所述重构矩阵根据所述M个下混信号和所述L个辅助信号重构所述N个音频对象，其中，至少所述N个音频对象的近似被获得为所述M个下混信号和所述L个辅助信号的线性组合，所述重构矩阵的所述矩阵元素作为所述线性组合中的系数。
5.根据权利要求1所述的方法，其中，所述M个下混信号跨超平面，并且其中，所述多个辅助信号的至少之一不位于被所述M个下混信号所跨的所述超平面中。
6.根据权利要求5所述的方法，其中，所述多个辅助信号中的不位于所述超平面中的所述至少之一与被所述M个下混信号所跨的所述超平面正交。
7.根据权利要求1所述的方法，还包括：
接收对应于所述N个音频对象的位置数据，以及
使用所述位置数据呈现所述N个音频对象以创建至少一个输出音频声道。
8.一种对音频场景进行解码的解码器，包括与存储器相关联的处理器和硬件中的至少之一，所述存储器被配置成实现：
接收器，其接收包括用于确定M个下混信号和重构矩阵的信息的比特流；
重构矩阵生成器，其生成所述重构矩阵；以及
重构器，其使用所述重构矩阵根据所述M个下混信号重构N个音频对象，其中，所述重构发生在频域中，
其中，将所述重构矩阵的矩阵元素作为线性组合中的系数应用于所述至少M个下混信号，并且其中，所述矩阵元素基于所述N个音频对象。
9.根据权利要求8所述的设备，其中，使用第一格式将所述M个下混信号布置在所述比特流的第一字段中，并且使用第二格式将所述矩阵元素布置在所述比特流的第二字段中，从而允许仅支持所述第一格式的解码器解码和回放所述第一字段中的所述M个下混信号，并且丢弃所述第二字段中的所述矩阵元素。
10.根据权利要求8所述的设备，其中，所述音频场景还包括多个音床声道，其中，所述重构器还被配置成使用所述重构矩阵根据所述M个下混信号重构所述音床声道，并且其中，所述N个音频对象和所述音床声道的近似被获得为至少所述M个下混信号的线性组合，其中，所述重构矩阵的所述矩阵元素作为所述线性组合中的系数。
11.根据权利要求8所述的设备，其中，所述接收器还被配置成接收由所述N个音频对象形成的L个辅助信号，并且其中，所述重构器还被配置成使用所述重构矩阵根据所述M个下混信号和所述L个辅助信号重构所述N个音频对象，其中，至少所述N个音频对象的近似被获得为所述M个下混信号和所述L个辅助信号的线性组合，其中，所述重构矩阵的所述矩阵元素作为所述线性组合中的系数。
12.根据权利要求8所述的设备，其中，所述M个下混信号跨超平面，并且其中，所述多个辅助信号的至少之一不位于被所述M个下混信号所跨的所述超平面中。
13.根据权利要求12所述的设备，其中，所述多个辅助信号中的不位于所述超平面中的所述至少之一与被所述M个下混信号所跨的所述超平面正交。
14.根据权利要求8所述的设备，其中，所述接收器还被配置成接收对应于所述N个音频对象的位置数据，并且还包括呈现器，所述呈现器用于使用所述位置数据呈现所述N个音频对象以创建至少一个输出音频声道。
15.一种包括计算机代码指令的非暂态计算机可读介质，所述计算机代码指令适于执行以下方法：
接收包括用于确定M个下混信号和重构矩阵的信息的比特流；
生成所述重构矩阵；以及
使用所述重构矩阵根据所述M个下混信号来重构N个音频对象，其中，所述重构发生在频域中，
其中，将所述重构矩阵的矩阵元素作为线性组合中的系数应用于所述至少M个下混信号，并且其中，所述矩阵元素基于所述N个音频对象。
CN201910040308.1A 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质 Active CN109887517B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910040308.1A CN109887517B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361827246P 2013-05-24 2013-05-24
US61/827,246 2013-05-24
CN201480030011.2A CN105247611B (zh) 2013-05-24 2014-05-23 对音频场景的编码
CN201910040308.1A CN109887517B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质
PCT/EP2014/060727 WO2014187986A1 (en) 2013-05-24 2014-05-23 Coding of audio scenes

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201480030011.2A Division CN105247611B (zh) 2013-05-24 2014-05-23 对音频场景的编码

Publications (2)

Publication Number Publication Date
CN109887517A true CN109887517A (zh) 2019-06-14
CN109887517B CN109887517B (zh) 2023-05-23

Family

ID=50884378

Family Applications (7)

Application Number Title Priority Date Filing Date
CN201910040307.7A Active CN109887516B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、音频解码器以及介质
CN202310958335.3A Pending CN117059107A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、装置及计算机可读介质
CN202310952901.XA Pending CN116935865A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法以及计算机可读介质
CN201910040308.1A Active CN109887517B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质
CN202310953620.6A Pending CN117012210A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、装置及计算机可读介质
CN201480030011.2A Active CN105247611B (zh) 2013-05-24 2014-05-23 对音频场景的编码
CN201910040892.0A Active CN110085239B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN201910040307.7A Active CN109887516B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、音频解码器以及介质
CN202310958335.3A Pending CN117059107A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、装置及计算机可读介质
CN202310952901.XA Pending CN116935865A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法以及计算机可读介质

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202310953620.6A Pending CN117012210A (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、装置及计算机可读介质
CN201480030011.2A Active CN105247611B (zh) 2013-05-24 2014-05-23 对音频场景的编码
CN201910040892.0A Active CN110085239B (zh) 2013-05-24 2014-05-23 对音频场景进行解码的方法、解码器及计算机可读介质

Country Status (19)

Country Link
US (9) US10026408B2 (zh)
EP (1) EP3005355B1 (zh)
KR (1) KR101761569B1 (zh)
CN (7) CN109887516B (zh)
AU (1) AU2014270299B2 (zh)
BR (2) BR112015029132B1 (zh)
CA (5) CA2910755C (zh)
DK (1) DK3005355T3 (zh)
ES (1) ES2636808T3 (zh)
HK (1) HK1218589A1 (zh)
HU (1) HUE033428T2 (zh)
IL (8) IL296208B2 (zh)
MX (1) MX349394B (zh)
MY (1) MY178342A (zh)
PL (1) PL3005355T3 (zh)
RU (1) RU2608847C1 (zh)
SG (1) SG11201508841UA (zh)
UA (1) UA113692C2 (zh)
WO (1) WO2014187986A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4120246A1 (en) * 2010-04-09 2023-01-18 Dolby International AB Stereo coding using either a prediction mode or a non-prediction mode
EP3005356B1 (en) 2013-05-24 2017-08-09 Dolby International AB Efficient coding of audio scenes comprising audio objects
ES2624668T3 (es) 2013-05-24 2017-07-17 Dolby International Ab Codificación y descodificación de objetos de audio
CN105229731B (zh) 2013-05-24 2017-03-15 杜比国际公司 根据下混的音频场景的重构
UA113692C2 (xx) 2013-05-24 2017-02-27 Кодування звукових сцен
KR102033304B1 (ko) 2013-05-24 2019-10-17 돌비 인터네셔널 에이비 오디오 오브젝트들을 포함한 오디오 장면들의 효율적 코딩
CN105432098B (zh) 2013-07-30 2017-08-29 杜比国际公司 针对任意扬声器布局的音频对象的平移
WO2015150384A1 (en) 2014-04-01 2015-10-08 Dolby International Ab Efficient coding of audio scenes comprising audio objects
BR112017006325B1 (pt) 2014-10-02 2023-12-26 Dolby International Ab Método de decodificação e decodificador para o realce de diálogo
US9854375B2 (en) * 2015-12-01 2017-12-26 Qualcomm Incorporated Selection of coded next generation audio data for transport
US10861467B2 (en) 2017-03-01 2020-12-08 Dolby Laboratories Licensing Corporation Audio processing in adaptive intermediate spatial format
JP7092047B2 (ja) * 2019-01-17 2022-06-28 日本電信電話株式会社 符号化復号方法、復号方法、これらの装置及びプログラム
US11514921B2 (en) * 2019-09-26 2022-11-29 Apple Inc. Audio return channel data loopback
CN111009257B (zh) * 2019-12-17 2022-12-27 北京小米智能科技有限公司 一种音频信号处理方法、装置、终端及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050074127A1 (en) * 2003-10-02 2005-04-07 Jurgen Herre Compatible multi-channel coding/decoding
WO2008046530A2 (en) * 2006-10-16 2008-04-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for multi -channel parameter transformation
US20090240505A1 (en) * 2006-03-29 2009-09-24 Koninklijke Philips Electronics N.V. Audio decoding
WO2010143907A2 (ko) * 2009-06-10 2010-12-16 한국전자통신연구원 다객체 오디오 신호를 부호화하는 방법 및 부호화 장치, 복호화 방법 및 복호화 장치, 그리고 트랜스코딩 방법 및 트랜스코더
WO2011061174A1 (en) * 2009-11-20 2011-05-26 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for providing an upmix signal representation on the basis of the downmix signal representation, apparatus for providing a bitstream representing a multi-channel audio signal, methods, computer programs and bitstream representing a multi-channel audio signal using a linear combination parameter
US20120213376A1 (en) * 2007-10-17 2012-08-23 Fraunhofer-Gesellschaft zur Foerderung der angewanten Forschung e.V Audio decoder, audio object encoder, method for decoding a multi-audio-object signal, multi-audio-object encoding method, and non-transitory computer-readable medium therefor
CN102667919A (zh) * 2009-09-29 2012-09-12 弗兰霍菲尔运输应用研究公司 音频信号解码器和编码器、提供上混和下混信号表示型态的方法、计算机程序及使用共用对象间相关参数值的位流
US20120230497A1 (en) * 2011-03-09 2012-09-13 Srs Labs, Inc. System for dynamically creating and rendering audio objects
CN102687198A (zh) * 2009-12-07 2012-09-19 杜比实验室特许公司 使用自适应混合变换的多声道音频编码比特流的解码
WO2012138819A2 (en) * 2011-04-08 2012-10-11 Dolby Laboratories Licensing Corporation Audio encoding method and system for generating a unified bitstream decodable by decoders implementing different decoding protocols

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU1332U1 (ru) 1993-11-25 1995-12-16 Магаданское государственное геологическое предприятие "Новая техника" Гидромонитор
US5845249A (en) * 1996-05-03 1998-12-01 Lsi Logic Corporation Microarchitecture of audio core for an MPEG-2 and AC-3 decoder
US7567675B2 (en) 2002-06-21 2009-07-28 Audyssey Laboratories, Inc. System and method for automatic multiple listener room acoustic correction with low filter orders
US7502743B2 (en) * 2002-09-04 2009-03-10 Microsoft Corporation Multi-channel audio encoding and decoding with multi-channel transform selection
US7299190B2 (en) * 2002-09-04 2007-11-20 Microsoft Corporation Quantization and inverse quantization for audio
DE10344638A1 (de) 2003-08-04 2005-03-10 Fraunhofer Ges Forschung Vorrichtung und Verfahren zum Erzeugen, Speichern oder Bearbeiten einer Audiodarstellung einer Audioszene
FR2862799B1 (fr) * 2003-11-26 2006-02-24 Inst Nat Rech Inf Automat Dispositif et methode perfectionnes de spatialisation du son
US7394903B2 (en) * 2004-01-20 2008-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
SE0400997D0 (sv) 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Efficient coding of multi-channel audio
SE0400998D0 (sv) 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
GB2415639B (en) 2004-06-29 2008-09-17 Sony Comp Entertainment Europe Control of data processing
EP1768107B1 (en) 2004-07-02 2016-03-09 Panasonic Intellectual Property Corporation of America Audio signal decoding device
JP4828906B2 (ja) 2004-10-06 2011-11-30 三星電子株式会社 デジタルオーディオ放送でのビデオサービスの提供及び受信方法、並びにその装置
RU2406164C2 (ru) * 2006-02-07 2010-12-10 ЭлДжи ЭЛЕКТРОНИКС ИНК. Устройство и способ для кодирования/декодирования сигнала
ATE532350T1 (de) 2006-03-24 2011-11-15 Dolby Sweden Ab Erzeugung räumlicher heruntermischungen aus parametrischen darstellungen mehrkanaliger signale
US8379868B2 (en) 2006-05-17 2013-02-19 Creative Technology Ltd Spatial audio coding based on universal spatial cues
BRPI0716854B1 (pt) 2006-09-18 2020-09-15 Koninklijke Philips N.V. Codificador para codificar objetos de áudio, decodificador para decodificar objetos de áudio, centro distribuidor de teleconferência, e método para decodificar sinais de áudio
KR100917843B1 (ko) 2006-09-29 2009-09-18 한국전자통신연구원 다양한 채널로 구성된 다객체 오디오 신호의 부호화 및복호화 장치 및 방법
PL2299734T3 (pl) 2006-10-13 2013-05-31 Auro Tech Sposób i koder do łączenia zestawów danych cyfrowych, sposób dekodowania i dekoder do takich połączonych zestawów danych cyfrowych oraz nośnik zapisu do przechowywania takiego połączonego zestawu danych cyfrowych
KR101012259B1 (ko) * 2006-10-16 2011-02-08 돌비 스웨덴 에이비 멀티채널 다운믹스된 객체 코딩의 개선된 코딩 및 파라미터 표현
JP5209637B2 (ja) 2006-12-07 2013-06-12 エルジー エレクトロニクス インコーポレイティド オーディオ処理方法及び装置
EP2595150A3 (en) * 2006-12-27 2013-11-13 Electronics and Telecommunications Research Institute Apparatus for coding multi-object audio signals
WO2008100098A1 (en) 2007-02-14 2008-08-21 Lg Electronics Inc. Methods and apparatuses for encoding and decoding object-based audio signals
KR20080082917A (ko) 2007-03-09 2008-09-12 엘지전자 주식회사 오디오 신호 처리 방법 및 이의 장치
CN101675472B (zh) 2007-03-09 2012-06-20 Lg电子株式会社 用于处理音频信号的方法和装置
JP5133401B2 (ja) 2007-04-26 2013-01-30 ドルビー・インターナショナル・アクチボラゲット 出力信号の合成装置及び合成方法
KR101566025B1 (ko) 2007-10-22 2015-11-05 한국전자통신연구원 다객체 오디오 부호화 및 복호화 방법과 그 장치
US20100284549A1 (en) 2008-01-01 2010-11-11 Hyen-O Oh method and an apparatus for processing an audio signal
WO2009093866A2 (en) 2008-01-23 2009-07-30 Lg Electronics Inc. A method and an apparatus for processing an audio signal
DE102008009024A1 (de) 2008-02-14 2009-08-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum synchronisieren von Mehrkanalerweiterungsdaten mit einem Audiosignal und zum Verarbeiten des Audiosignals
DE102008009025A1 (de) 2008-02-14 2009-08-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Berechnen eines Fingerabdrucks eines Audiosignals, Vorrichtung und Verfahren zum Synchronisieren und Vorrichtung und Verfahren zum Charakterisieren eines Testaudiosignals
KR101461685B1 (ko) * 2008-03-31 2014-11-19 한국전자통신연구원 다객체 오디오 신호의 부가정보 비트스트림 생성 방법 및 장치
JP5249408B2 (ja) 2008-04-16 2013-07-31 エルジー エレクトロニクス インコーポレイティド オーディオ信号の処理方法及び装置
KR101061129B1 (ko) 2008-04-24 2011-08-31 엘지전자 주식회사 오디오 신호의 처리 방법 및 이의 장치
KR101171314B1 (ko) 2008-07-15 2012-08-10 엘지전자 주식회사 오디오 신호의 처리 방법 및 이의 장치
EP2146522A1 (en) 2008-07-17 2010-01-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating audio output signals using object based metadata
MX2011011399A (es) 2008-10-17 2012-06-27 Univ Friedrich Alexander Er Aparato para suministrar uno o más parámetros ajustados para un suministro de una representación de señal de mezcla ascendente sobre la base de una representación de señal de mezcla descendete, decodificador de señal de audio, transcodificador de señal de audio, codificador de señal de audio, flujo de bits de audio, método y programa de computación que utiliza información paramétrica relacionada con el objeto.
US8139773B2 (en) 2009-01-28 2012-03-20 Lg Electronics Inc. Method and an apparatus for decoding an audio signal
CN103489449B (zh) 2009-06-24 2017-04-12 弗劳恩霍夫应用研究促进协会 音频信号译码器、提供上混信号表示型态的方法
EP2461321B1 (en) 2009-07-31 2018-05-16 Panasonic Intellectual Property Management Co., Ltd. Coding device and decoding device
KR101805212B1 (ko) 2009-08-14 2017-12-05 디티에스 엘엘씨 객체-지향 오디오 스트리밍 시스템
US9432790B2 (en) 2009-10-05 2016-08-30 Microsoft Technology Licensing, Llc Real-time sound propagation for dynamic sources
BR122021008665B1 (pt) 2009-10-16 2022-01-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Mecanismo e método para fornecer um ou mais parâmetros ajustados para a provisão de uma representação de sinal upmix com base em uma representação de sinal downmix e uma informação lateral paramétrica associada com a representação de sinal downmix, usando um valor médio
ES2529219T3 (es) 2009-10-20 2015-02-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Aparato para proporcionar una representación de señal de mezcla ascendente sobre la base de la representación de una señal de mezcla descendente, aparato para proporcionar un flujo de bits que representa una señal de audio de canales múltiples, métodos, programa de computación y un flujo de bits que utiliza una señalización de control de distorsión
TWI443646B (zh) 2010-02-18 2014-07-01 Dolby Lab Licensing Corp 音訊解碼器及使用有效降混之解碼方法
EP4120246A1 (en) 2010-04-09 2023-01-18 Dolby International AB Stereo coding using either a prediction mode or a non-prediction mode
DE102010030534A1 (de) * 2010-06-25 2011-12-29 Iosono Gmbh Vorrichtung zum Veränderung einer Audio-Szene und Vorrichtung zum Erzeugen einer Richtungsfunktion
US20120076204A1 (en) 2010-09-23 2012-03-29 Qualcomm Incorporated Method and apparatus for scalable multimedia broadcast using a multi-carrier communication system
GB2485979A (en) 2010-11-26 2012-06-06 Univ Surrey Spatial audio coding
KR101227932B1 (ko) 2011-01-14 2013-01-30 전자부품연구원 다채널 멀티트랙 오디오 시스템 및 오디오 처리 방법
JP2012151663A (ja) 2011-01-19 2012-08-09 Toshiba Corp 立体音響生成装置及び立体音響生成方法
US9530421B2 (en) 2011-03-16 2016-12-27 Dts, Inc. Encoding and reproduction of three dimensional audio soundtracks
US9966080B2 (en) * 2011-11-01 2018-05-08 Koninklijke Philips N.V. Audio object encoding and decoding
EP2829083B1 (en) 2012-03-23 2016-08-10 Dolby Laboratories Licensing Corporation System and method of speaker cluster design and rendering
US9761229B2 (en) * 2012-07-20 2017-09-12 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for audio object clustering
US9479886B2 (en) 2012-07-20 2016-10-25 Qualcomm Incorporated Scalable downmix design with feedback for object-based surround codec
CN104520924B (zh) 2012-08-07 2017-06-23 杜比实验室特许公司 指示游戏音频内容的基于对象的音频的编码和呈现
WO2014099285A1 (en) 2012-12-21 2014-06-26 Dolby Laboratories Licensing Corporation Object clustering for rendering object-based audio content based on perceptual criteria
RU2665214C1 (ru) 2013-04-05 2018-08-28 Долби Интернэшнл Аб Стереофонический кодер и декодер аудиосигналов
RS1332U (en) 2013-04-24 2013-08-30 Tomislav Stanojević FULL SOUND ENVIRONMENT SYSTEM WITH FLOOR SPEAKERS
UA113692C2 (xx) 2013-05-24 2017-02-27 Кодування звукових сцен
CN105229731B (zh) 2013-05-24 2017-03-15 杜比国际公司 根据下混的音频场景的重构
KR102384348B1 (ko) 2013-05-24 2022-04-08 돌비 인터네셔널 에이비 오디오 인코더 및 디코더

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050074127A1 (en) * 2003-10-02 2005-04-07 Jurgen Herre Compatible multi-channel coding/decoding
US20090240505A1 (en) * 2006-03-29 2009-09-24 Koninklijke Philips Electronics N.V. Audio decoding
WO2008046530A2 (en) * 2006-10-16 2008-04-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for multi -channel parameter transformation
US20120213376A1 (en) * 2007-10-17 2012-08-23 Fraunhofer-Gesellschaft zur Foerderung der angewanten Forschung e.V Audio decoder, audio object encoder, method for decoding a multi-audio-object signal, multi-audio-object encoding method, and non-transitory computer-readable medium therefor
WO2010143907A2 (ko) * 2009-06-10 2010-12-16 한국전자통신연구원 다객체 오디오 신호를 부호화하는 방법 및 부호화 장치, 복호화 방법 및 복호화 장치, 그리고 트랜스코딩 방법 및 트랜스코더
CN102667919A (zh) * 2009-09-29 2012-09-12 弗兰霍菲尔运输应用研究公司 音频信号解码器和编码器、提供上混和下混信号表示型态的方法、计算机程序及使用共用对象间相关参数值的位流
WO2011061174A1 (en) * 2009-11-20 2011-05-26 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for providing an upmix signal representation on the basis of the downmix signal representation, apparatus for providing a bitstream representing a multi-channel audio signal, methods, computer programs and bitstream representing a multi-channel audio signal using a linear combination parameter
CN102687198A (zh) * 2009-12-07 2012-09-19 杜比实验室特许公司 使用自适应混合变换的多声道音频编码比特流的解码
US20120230497A1 (en) * 2011-03-09 2012-09-13 Srs Labs, Inc. System for dynamically creating and rendering audio objects
WO2012138819A2 (en) * 2011-04-08 2012-10-11 Dolby Laboratories Licensing Corporation Audio encoding method and system for generating a unified bitstream decodable by decoders implementing different decoding protocols

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
BIN CHENG: "A Spatial Squeezing approach to Ambisonic audio compression", 《2008 IEEE INTERNATIONAL CONFERENCE ON ACOUSTICS, SPEECH AND SIGNAL PROCESSING》 *
卫飞宇: "基于MIPS嵌入式系统的AC3音频解码处理", 《中国优秀硕士学位论文全文数据库》 *

Also Published As

Publication number Publication date
BR122020017152B1 (pt) 2022-07-26
BR112015029132B1 (pt) 2022-05-03
IL290275A (en) 2022-04-01
CA2910755A1 (en) 2014-11-27
US20200020345A1 (en) 2020-01-16
US10026408B2 (en) 2018-07-17
US10468041B2 (en) 2019-11-05
IL265896A (en) 2019-06-30
IL278377B (en) 2021-08-31
US20210012781A1 (en) 2021-01-14
MX2015015988A (es) 2016-04-13
US20160125888A1 (en) 2016-05-05
US11682403B2 (en) 2023-06-20
US20220310102A1 (en) 2022-09-29
US10347261B2 (en) 2019-07-09
CN109887517B (zh) 2023-05-23
HUE033428T2 (en) 2017-11-28
SG11201508841UA (en) 2015-12-30
US10468039B2 (en) 2019-11-05
US20190295557A1 (en) 2019-09-26
CA3211308A1 (en) 2014-11-27
CA3123374A1 (en) 2014-11-27
IL296208B2 (en) 2023-09-01
CA3017077A1 (en) 2014-11-27
IL284586A (en) 2021-08-31
US20190295558A1 (en) 2019-09-26
IL296208A (en) 2022-11-01
IL290275B2 (en) 2023-02-01
PL3005355T3 (pl) 2017-11-30
IL302328B1 (en) 2024-01-01
KR20150136136A (ko) 2015-12-04
EP3005355B1 (en) 2017-07-19
CN110085239A (zh) 2019-08-02
CN105247611A (zh) 2016-01-13
US20230290363A1 (en) 2023-09-14
UA113692C2 (xx) 2017-02-27
IL242264B (en) 2019-06-30
IL302328A (en) 2023-06-01
IL290275B (en) 2022-10-01
IL284586B (en) 2022-04-01
CN109887516A (zh) 2019-06-14
US20180301156A1 (en) 2018-10-18
MX349394B (es) 2017-07-26
KR101761569B1 (ko) 2017-07-27
MY178342A (en) 2020-10-08
US11315577B2 (en) 2022-04-26
HK1218589A1 (zh) 2017-02-24
IL309130A (en) 2024-02-01
CA3211326A1 (en) 2014-11-27
CN117059107A (zh) 2023-11-14
RU2608847C1 (ru) 2017-01-25
US10726853B2 (en) 2020-07-28
US20190251976A1 (en) 2019-08-15
CN116935865A (zh) 2023-10-24
ES2636808T3 (es) 2017-10-09
US10468040B2 (en) 2019-11-05
CN105247611B (zh) 2019-02-15
CA3017077C (en) 2021-08-17
CN109887516B (zh) 2023-10-20
CN110085239B (zh) 2023-08-04
CA2910755C (en) 2018-11-20
CN117012210A (zh) 2023-11-07
AU2014270299B2 (en) 2017-08-10
WO2014187986A1 (en) 2014-11-27
EP3005355A1 (en) 2016-04-13
AU2014270299A1 (en) 2015-11-12
CA3123374C (en) 2024-01-02
DK3005355T3 (en) 2017-09-25
BR112015029132A2 (pt) 2017-07-25
IL296208B1 (en) 2023-05-01

Similar Documents

Publication Publication Date Title
CN105247611B (zh) 对音频场景的编码
CN107112020A (zh) 音频信号的参数化混合

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40008854

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant