CN1577577A - 构造用于混合的音频流的方法和装置以及信息存储介质 - Google Patents

Abstract

一种包含音频混合信息的信息存储介质，其包括多个包含音频数据的音频通道分量，混合信息用于混合音频通道分量和将被添加的附加通道分量。因此，可以使用装置和/或方法混合来自不同音频流的不同通道分量和再现音频流。

Description

构造用于混合的音频流的方法和装置以及信息存储介质

本发明要求于2003年7月12日在韩国知识产权局提交的韩国专利申请第2003-47535号和于2003年7月15日在韩国知识产权局提交的韩国专利申请第2003-48427号的利益，该申请公布于此以资参考。

                        技术领域

本发明涉及音频混合，尤其涉及用于构造能将从多个通道中分别得到的多个音频数据组合的音频流的方法和装置及其信息存储介质。

                        背景技术

图1是调节安装在个人电脑(PC)或类似的装置上的音频播放器的音量的传统的用户界面的示意性示图。用户可使用如图1所示的音量控制界面调节音频播放器的音量。当用户通过使用键盘和鼠标升高或降低音量按钮100调节音频播放器的音量时，对从多个音频流通道中分别获得的音频数据进行音频混合。然而，音频混合是由音频播放器任意确定的，而不管音频流通道的数目和类型如何。

例如，当再现包含从两个通道中获得的音频数据的音频流时，来自第一通道的第一音频数据和来自第二通道的第二音频数据的输出电平在音频播放器中是预定的。因此，第一和第二音频数据的输出电平被调整为当前输出电平并且具有调整的输出电平的第一和第二音频数据被混合。

然而，上述任意的音频混合具有一些问题。将来自两个分离的通道的第一音频数据和第二音频数据如内容提供者期望的那样以期望的输出电平混合是极其困难的。这是因为用于调整音频数据的输出电平的系数在安装于PC中的音频播放器中是预定的。因此，几乎不可能在音频混合中适当地反映内容提供者的意图。

还有，一旦音频混合方法相对于音频内容如歌词或电影剧本是确定的，将维持混合方法直到其再现完成。即，不可能动态改变对音频内容进行的音频混合方法。因此，不能对任何音频内容或特性进行适应。

另外，当将一种类型的音频内容的通道分量和另一类型的音频内容的通道分量混合时，只有同种类型的通道分量的可以混合。换句话说，即使内容提供者想提供通过将来自不同通道的音频数据混合得到的音频内容，也不可能再现这些音频内容。尤其是，如果一种类型的音频内容包含多通道数据和另一类型的音频内容包含双通道数据，在不改变双通道数据的通道格式的情况下，将双通道数据和多通道数据的环绕分量混合是困难的。例如，对于内容提供者将MP3音乐调整至期望的输出电平，以及将MP3音乐和包含在DVD-视频中的环绕的多通道的通道音频数据混合是困难的。

                        发明内容

根据本发明的一方面，提供了一种用于构造能将来自不同类型的音频流的音频通道分量组合音频流的方法和装置，以及存储音频混合信息的信息存储介质。

根据本发明的一方面，提供了一种信息存储介质，包括：多个音频通道分量，每个包含相应音频数据；和混合信息，用来混合将被添加的附加通道分量和音频通道分量。

根据本发明的另一方面，混合信息包括其中记录了关于附加的通道分量的信息的字段，且可在字段中设置预定的虚(dummy)值。

根据本发明的另一方面，提供了一种信息存储介质，包括：多个音频通道分量，包含音频数据；和音频流，包含至少一个提供备用空间以记录预定的音频数据的零(null)通道分量。

根据本发明的一方面，包含在零通道分量中的音频数据包括混合信息，当包含在零通道分量中的音频数据和来自多个音频通道中的至少一个的通道分量混合时参考该混合信息。

根据本发明的另一方面，提供了一种装置，包括：主多路分解器，用于将包括包含音频数据的多个主音频通道的主音频流和至少一个提供空间以存储预定音频数据的零通道多路分解，并在音频通道中输出多路分解的音频流；辅多路分解器，用于将包括至少一个包含音频数据的辅音频通道的辅音频流多路分解，该音频数据将存储在零通道中，并在辅音频通道中输出多路分解的音频流；映射器，该映射器使用从辅多路分解器输出的至少一个辅音频通道之一代替从主多路分解器输出的至少一个零通道之一；和多路复用器，多路复用从映射器输出的辅音频通道和从主多路分解器中输出的主音频通道并输出组合的音频流。

本发明的一方面，该装置包括：解码器，将组合的音频流解码；和混合器，基于混合信息将通过解码器解码的音频通道混合。

根据本发明的另一方面，提供了一种装置，包括：解码器，用于将具有形成具有预定格式的音频流的多个主音频通道和将要和多个主音频通道之一混合的辅音频通道的组合音频流解码；和混合器，用于基于混合信息将来自辅音频通道的音频数据和主音频通道混合。

根据本发明的又一方面，提供了一种构造音频流的方法，包括：创建至少一个主音频通道分量；和通过将用来把创建的主音频通道分量和将要添加的附加的通道分量混合的混合信息打包来构造音频流。

根据本发明的一方面，构造音频流包括创建混合信息以包括用于记录关于附加的通道分量的信息的字段，或者包括混合信息以包括用于记录关于附加的通道分量的信息的字段，该信息将字段设置为预定的虚值。

根据本发明的另一方面，提供了一种构造音频流的方法，包括：创建至少一个主音频通道；和创建主音频流，该主音频流包含创建的主音频通道分量和至少一个零通道分量。

根据本发明的一方面，该方法包括：创建至少一个辅音频通道分量；和通过交换零通道分量和创建的辅音频通道分量来创建组合的音频流。

根据本发明的另一方面，提供了一种构造音频流的方法，包括：创建至少一个主音频通道分量；创建至少一个辅音频通道分量；和创建具有创建的主音频分量和辅音频通道分量的组合音频流。

发明的其他方面和/或优点将在下面的描述中提出一部分，另外的部分，通过描述将是显而易见的，或通过实施发明来了解。

                        附图说明

通过下面组合附图对实施例进行的描述，本发明的这些和/或其他方面和优点将会变得清楚和更加易于理解，其中：

图1是用于调节安装于个人电脑(PC)或类似的设备中的音频播放器的音量的传统的用户界面的示意性示图；

图2是根据本发明实施例用于构造音频流的装置的框图；

图3是根据本发明的另一实施例用于构造音频流的装置的框图；

图4A是根据本发明实施例的主音频流的示意性示图；

图4B是根据本发明另一实施例的主音频流的示意性示图；

图4C是根据本发明又一实施例的主音频流的示意性示图；

图4D是根据本发明另一实施例的主音频流的示意性示图；

图4E是根据本发明又一实施例的主音频流的示意性示图；

图5是根据本发明实施例的辅音频流的示意性示图；

图6A是根据本发明实施例的组合音频流的示意性示图；

图6B是根据本发明的另一实施例的组合音频流的示意性示图；

图7是再现图6A和6B中所示的组合音频流的图3的装置的另一实施例的框图；

图8A和8B是其中建有用于构造音频流的装置的系统的例子的示意性示图和框图；

图9表示根据本发明实施例的混合信息的数据结构；

图10A表示根据本发明实施例的包含图9中的混合信息的混合表；

图10B表示根据本发明的另一实施例的包含图9中的混合信息的混合表；

图11是表示根据本发明实施例的动态混合的参考图。

                        具体实施方式

将参照附图详细说明本发明的实施例，其例子列举在附图中，其中相同的标号始终表示相同的部件。下面参照附图描述实施例以解释本发明。

为了更好的理解本发明的实施例，首先简要解释“混合”。混合可以理解为下述至少之一：(i)调整组成音频流的多个通道分量的至少一个通道分量的输出电平；(ii)调整组成音频流的多个通道分量的至少一个通道分量的输出电平，并将调整的通道分量和剩余的通道分量中的至少一个通道分量组合；和(iii)将组成音频流的多个通道分量中的至少两种通道分量组合，并将组合的结果输出到扬声器。另外，混合方法(i)至(iii)适用于组成多个音频流的多个通道分量的至少一个通道分量。此外，根据本发明实施例通过参考“混合”包含动态混合。

音频流是以预定格式产生的以能够对音频的完整片断，如歌曲或音乐的一段，进行评估的音频数据的单元。即，音频流是能独立的再现并包含至少一个通道分量的音频数据。这里，通道分量表示包含在通道中的音频数据。

图2是根据本发明实施例的用于构造音频流的装置1的框图。参照图2，装置1包括主多路分解器11、辅多路分解器12、映射器13、和多路复用器14。该装置接收主音频流和辅音频流并产生组合音频流。

主多路分解器11接收和多路分解主音频流并输出多个音频通道分量。主音频流是以信息格式(也就是允许添加组成另一音频流的多个通道分量中的至少一个通道分量的可扩展格式)产生的音频流。在图2中，实线表示从主音频流获得的音频通道分量，虚线表示可以被添加到存在的通道分量的通道分量。如下文将要描述的，虚线表示在主音频流具有至少一个被添加通道分量的零通道分量的情况下的零通道分量。

辅多路分解器12接收和多路分解辅音频流并输出多个辅音频通道分量。在此实施例中，辅音频流不包括零通道分量。然而，应该理解的是辅音频流可能包括零通道分量。

主多路分解器11和辅多路分解器12之所以如此命名是因为它们分别将主音频流和辅音频流多路分解。因此，一定不能将它们理解为主装置和辅装置。

映射器13将从主多路分解器11输出的可被添加到现有分量中的至少一个通道分量换为从辅多路分解器12输出的至少一个辅音频通道分量。换句话说，映射器13将包含在辅音频通道中的音频数据插入主音频流中。在主音频流具有零通道的情况下，映射器13将包含在辅音频通道中的音频数据插入到零通道，从而将零通道分量换为辅音频通道分量。在交换过程中，映射器13可将包含在辅音频通道中的音频数据重新格式化为预定的格式，例如将包含于主音频通道的音频数据格式化后的格式，并将重新格式化的音频数据插入到零通道。

多路复用器14将与从映射器13输出的零通道分量交换的辅音频通道分量和从主多路分解器11输出的主音频通道分量多路复用，并输出组合音频流作为多路复用的结果。在这种情况下，多路复用器14可能将混合信息插入到组合音频流中。然而，如果再现装置包含混合信息，则本发明的所有方面均不需将混合信息插入到组合音频流中。

组合音频流是包括完成预定格式的多个主音频通道分量和将与主音频通道分量混合的辅音频通道分量的独立的音频流。这里，完成预定的格式表明准备了所有以预定的格式要求的数据。例如，当准备了以Dolby AC3格式指定的所有5-通道分量时，则完成了预定的格式。然而，应该理解的是，也可以使用其他格式，如DVD-视频、MPEG、Dolby PROLOGIC、MP、WINDOWSMEDIA等。

图3是根据本发明另一实施例的用于再现音频流2的装置的框图。参照图3，该用于再现音频流2的装置包括：解码器21和混合器22，以再现组合音频流。解码器21将组合音频流解码并输出多个解码的主音频通道分量和至少一个辅音频通道分量。混合器22将至少一个辅音频通道分量和多个主音频通道分量之一混合。这里，混合是根据预定的混合方法进行或基于将在下文更详细地描述的混合信息进行。如果有多于一类的混合信息，混合22进行动态混合，这不同于在仅一种组合音频流上进行的仅一种类型的混合。将在下文更详细地描述动态混合。

由于不同格式的音频通道分量以不同的速度被解码，从解码器21输出的解码的音频通道分量的数量可能不同。为了解决这个问题，混合器22可包括缓冲器(未表示)或一些可在混合前适当地缓冲音频数据的类似的存储装置。

图4A和4B表示主音频流的实施例。在此例子中，主音频流将用5个通道描述。然而，通道的数目不受限制并且可根据格式的类型而改变。例如，可以使用6或8通道的环绕声通道。

参照图4A，主音频流具有5个不同的主音频通道L，C，R，LS，和RS。这里，五种不同的主音频通道L，C，R，LS，和RS分别表示左通道、中通道、右通道、左环绕通道、和右环绕通道。主音频通道L，R，和C提供稳定的虚拟声源，主音频通道LS和RS提供三维的(3D)的真实声源。

在此实施例中，混合信息记录在主音频流的首标中。混合信息能使主音频流扩展。换句话说，混合信息使将另一音频流的预定的通道分量插入主音频流，从而扩展主音频流成为可能。混合信息是允许把将在随后添加的预定的通道分量和存在的主音频流的主音频通道分量混合的信息。混合信息的详细的数据结构将在后面描述。

参照图4B，主音频流具有参照图4A所解释的五个不同的主音频通道L，C，R，LS，和RS，和另外两个零通道。这两个零通道提供用于包含预定的音频数据的空间。在此实施例中，零通道不包含数据。

参照图4C，主音频流具有参照图4B所解释的五个不同的主音频通道和两个零通道。然而，这两个零通道包含没有意义的零数据如0字符串或音频数据。作为零数据的音频数据的再现提供附加音频。然而，即使零音频数据没有再现，主音频流的质量不会受到很大的影响。同时，即使仅从主音频通道之一获得的音频数据没有再现，主音频流的质量也会恶化。

参照图4D，主音频流也具有参照图4B所解释的五个不同的主音频通道和两个零通道。然而，混合信息还被记录在图4D的主音频流的首标中。如前面提到的，混合信息能把将在随后添加的预定的通道分量和存在的主音频流的主音频通道分量混合。

参照图4E，主音频流具有参照图4C所解释的五个不同的主音频通道和两个零通道。然而，混合信息也被记录在图4E的主音频流的首标中。如上所述，混合信息能把将在随后添加的预定的通道分量和存在的主音频流的主音频通道分量混合。

图5是根据本发明另一实施例的辅音频流的示意性示图。参照图5，辅音频流是具有左和右通道L’和R’的音频流。即，辅音频流包含从两个通道获得的音频数据。所示的辅音频流(也就是两通道音频流)能再现在左和右方向回声的声音。这里，因为其通道分量被插入到主音频流中，辅音频流的是为了方便而命名的。即，辅音频流是在没有主音频流的情况下可以独立再现的音频流。用于辅音频流的通道的总数目不限于2个，可以根据格式的类型而改变。而且，辅音频通道不必为左和右，而是可以为单通道，如中通道或亚低音通道，或对前和后或左和右通道的辅输入。

图6A和6B表示根据本发明优选实施例的组合音频流。图6A的组合音频流是图4A至4E所示的主音频流和图5的辅音频流的组合。更具体地讲，组合音频流是通过将从两个辅音频通道L’和R’输出的通道分量插入到主音频流中得到的。如果主音频流具有两个零通道，则组合音频流可通过用来自通道L’和R’的辅通道分量替换来自零通道的零通道分量获得。

音频流发生器可不使用装置直接构造上述格式的组合音频流。在此实施例中，组合音频流是小数量的数字数据并且可通过将主音频通道分量和辅音频通道分量混合得到，或可能仅包括主音频通道分量而不包括辅音频通道分量。

图6B的组合音频流与图6A的相同，但是在首标中还包括混合信息。当主音频流分量与辅音频通道分量混合时参考混合信息。根据本发明的方面混合信息也可能通过再现装置生成并被插入到组合音频流的首标中，或可能根据音频流发生器的意图生成并被插入到组合音频流的首标中。这里，用于再现音频流2的装置按照用户的期望生成混合信息。

图7是用于再现图6A或6B的组合音频流的装置的框图，该装置是图3所示装置的另一实施例。与图3中的相同的部件将用相同标号表示，并且将省略参照图3所描述的他们的结构或功能。

图7中的装置根据本发明实施例解码组合音频流，并且基于记录在组合音频流的首标中的混合信息来混合解码的结果。图7中的装置包括解码器21和混合器22。

解码器21解码从包含于组合音频流的五个主音频通道输出的音频数据和从2个辅音频通道输出的音频数据，并且在通道中输出解码后的数据。另外，解码器21从组合音频流的首标中读取混合信息，并且将该信息提供给混合器22。如果必要的话，那么解码器21基于混合信息来解码音频数据。然而，解码器21在本发明的所有方面不需要使用混合信息。

混合器22包括将从解码器21输出的音频数据的电平放大的放大器221至227和包括组合来自至少两个通道的音频数据的加法器228和229。虽然指定加法器228和229作为例子，但是没有限制加法器的数目。如果必要的话，混合器22包括更多加法器，用于组合来自在图4中没有显示的通道的音频数据，从而与L、R、C通道的音频数据或在图4中显示的除LS、RS通道之外的通道的音频数据而不与在图4中显示的LS、RS通道混合。

基于混合信息，混合器22使用放大器221至223以将来自从解码器21输入的通道L、R、和C的音频数据的输出电平乘以混合系数1，并且使用放大器224和225以将来自通道LS和RS的音频数据的输出电平乘以混合系数0.5。同样地，基于混合信息，混合器22使用放大器226和227以将来自从解码器21输入的辅通道L′和R′的音频数据的输出电平乘以混合系数0.5。接下来，混合器22使用加法器228和229将来自具有调整后的输出电平的辅通道L′、R′的音频数据和来自通道LS和RS的音频数据组合。即，来自辅音频流的辅通道L′和R′的音频数据分别与来自主音频流的通道LS和RS的音频数据相组合。该组合的结果经由通道LS和RS输出。因此，混合器22经由五个通道L、R、C、LS、和RS来输出最终音频数据。

图8A和8B是安装了用于构造和/或再现音频流的装置的系统的示意性示图和方框图。与图2和图3中的相同的部件用相同的标号表示，并且将省略参照图2和图3所描述的它们的结构或者功能。

参照图8A和图8B，该系统包括音频播放器100和放大器200。经能够传输数字数据的传输线400连接音频播放器100和放大器200。例如，传输线400可以是索尼菲利普数字接口(SPDI)连接器。虽然在图8中显示的是音频播放器100，但是应该明白：也可以使用音频/视频播放器，或者计算机或者便携音乐装置如MP3播放器。此外，应该明白：在音频播放器100和放大器200之间的传输可以是无线的，并且不限于任何特殊类型的传输线。

图2中的装置1和盘驱动器安装在音频播放器100中。该盘驱动器从装入盘驱动器中的盘类的信息存储介质300中读取根据本发明的主音频流。另外，音频播放器100包括在其中存储了辅音频流的存储单元110。该存储介质110可以是硬盘或者存储器。在放大器200中安装了用于再现图3中的音频流2的装置。该信息存储介质可以是例如CD-R、CD-ROM、DVD、蓝光(Bluray)盘、先进光盘(AOD)和/或存储器如闪速存储器。可选择的是，应该明白：可以通过网络如互联网、LAN.WLAN等来接收音频流。

将记录在盘类的信息存储介质300中的主音频流提供给主多路分解器11，并且将存储在存储单元110中的辅音频流提供给辅多路分解器12。多路复用器14经传输线400将组合音频流传输到放大器200。如前面所提到的，放大器200将组合音频流解码并且混合解码的结果。

为了一起再现包含在不同音频流中的通道分量，传统系统将这些通道分量解码，将解码的结果转换成模拟信号，并且使用预定的混合方法将模拟信号混合。通过混合得到的信号也是模拟信号。然而，通常，连接播放器和放大器的传输线的容量对于传输模拟信号形式的音频数据是不足的。因此，经常需要将模拟信号编码(即，压缩，和传输)。为了对模拟信号编码，该播放器还包括编码器。然而，根据本发明实施例的组合音频流是不用编码器就能够经传输线400被传输到放大器200的数字数据流。应该明白：虽然不需要编码器，但是本发明的实施例可以使用编码器。

此外，在传统系统中，仅仅使用最终输出的模拟信号来确定将被混合的输出音频数据和被混合的音频数据的电平的通道类型是困难的。此外，不可能跟踪构成输出模拟信号的通道分量。因此，一旦组合通道分量以形成模拟信号，则不可能基于每个通道使用音频数据(例如，从各个通道分量中提取音频数据)。然而，根据本发明的实施例，在混合主音频流和辅助音频流之前产生组合音频流，并且因此，用户能够根据他或她的期望来混合主音频流和辅助音频流。此外，由于该组合音频流是包含主音频流、辅音频流、和混合信息的数字数据，所以用户不仅能够从各个通道分量中提取音频数据，也能够基于每个通道利用该音频数据。

图9显示了根据本发明实施例的混合信息的数据结构。图9中的混合信息包括混合通道信息和混合系数信息。具体地讲，该混合通道信息指定包含在组合音频流中的哪些通道分量将要被混合。该混合系数信息指定确定要被混合的音频数据的输出电平的混合系数。该混合信息可以仅包括混合通道信息和混合系数信息中的一个。

此外，该混合信息可以包括编码信息，用来指定用于组合音频流的辅音频通道的格式。该混合信息还包括同步信息，用来指定需要再现与来自主音频通道的音频数据同相的来自辅助音频通道的音频数据的再现时间。如果已经为再现装置提供了用于来自辅助音频通道的音频数据的编码信息和/或同步信息，那么这样的信息可以不包括在混合信息中。

该混合信息还可以包括缓冲信息。因为在不同的时间将这些音频通道分量解码，所以该缓冲信息被用来在混合处理之前控制提供的音频通道分量的不同格式的数量。例如，该缓冲信息指定了缓冲器的大小。

根据本发明优选实施例，图10A和图10B显示了的包含图9中的混合信息的混合表。图10A中的混合表与图4A中的主音频流相关。混合表是考虑到将被添加的音频通道分量和存在的主音频通道分量的混合而制作的。该混合表表示存在的主音频通道分量的标识符，并且包括将在其中记录将被添加的音频通道分量的标识符的字段。在此实施例中，所有存在的主音频通道分量的标识符初始设置为00，但是它们随将要插入到主音频通道分量的音频通道的标识符被重新设置。

作为混合目标的通道分量的标识符全部设置为00，但是当音频通道被插入主音频通道分量中时，它们也随将被混合的通道分量的标识符被重新设置。

另外，该混合表包括：用于记录指定用来控制通道分量的输出电平的混合系数的混合系数信息的字段、用于记录指定音频通道的格式的编码信息的字段、和用于记录指定音频通道分量的再现时间的同步信息的字段。同样地，这些标识符也被设置为00，但是当将音频通道插入到主音频通道分量中时，它们能够由发生器、装置、或者用户重新设置。这里，值‘00’是不限制数据长度的虚值，但是表示了在其中记录了附加信息的字段的存在。

也能够将图4D和图4E中的主音频流的混合表构造成与图10中的混合表一样。然而，图4D和图4E中的主音频流还包括用将被添加的辅通道分量替换的零通道。因此，主音频流的标识符没有设置为00而是被记录为关于零通道分量的信息。

图10B中的混合表与图6A和图6B中的组合音频流相关。该混合表包括用于指定输入到混合器22和将被混合的的音频通道分量(即，主和辅音频通道分量)的标识符的混合通道信息，并且包括用于指定用来控制通道分量的输出电平的混合系数的混合信息。另外，该混合表包括用于指定各个音频通道的格式的编码信息和用于指定辅音频通道分量的再现时间的同步信息。

根据图10B中的混合表，从主通道L、R、和C中获得的音频数据的输出电平被乘以混合系数1，并且从通道LS和RS中获得的音频数据的输出电平被乘以混合系数0.5。即，来自通道LS和RS的音频数据的输出电平被减半，并且将调整后的音频数据与来自辅通道L′和R′的音频数据组合。同时，来自辅通道L′和R′的音频数据的输出电平被乘以混合系数0.5。即，来自辅通道L′和R′的音频数据的输出电平也被减少一半，并且将调整后的音频数据与来自通道LS和RS的音频数据组合。

另外，图10B中的混合表显示：以AC3格式制作主音频通道分量，以MP3格式制作辅音频通道分量，并且辅音频通道分量的再现开始于再现时间300。

图11是显示根据本发明实施例的动态混合的参考图。图11中的参考图显示了当包含在组合音频流或辅音频流中的辅音频通道L′和R′与包含在组合音频流或主音频通道中的主通道分量一起再现时，对包含于视频的音频数据执行的动态混合。在这种情况下，当再现从辅音频通道L′和R′输出的通道分量时，使用固定的混合系数经常不提供高质量的音频经验。例如，当电影与电影制作者的解说一起放映时这可能适用。如果该解说以相同的电平再现于安静的场景和嘈杂的战争场景，那么该输出电平可能太高而不能匹配安静场景的气氛或者在嘈杂的战争场景中太低。为了解决这个问题，建议：内容提供者提供多个混合表，其中列出用于适当地调整音频数据的输出电平以匹配电影中的各个场景气氛的混合系数。如果混合表的数目超过一个，那么也应该提供参考时间信息。当在图3或图8B中所示的再现装置的混合器22应该参考多个混合表时，该参考时间信息及时指定情况。混合器22通过调整由参考时间信息指示的不同的音频数据的输出电平来进行动态混合，其中，该输出电平被乘以在多个混合表中列出的不同的混合系数。

同样，建议制作多个混合表，从而能够使用不同的混合通道信息、格式、和再现时间信息执行动态混合。

如上所述，根据本发明的方面，可以混合从不同的音频流输出的不同类型的通道分量，并且将它们再现成音频流。另外，也可以对多通道分量执行动态混合，因此适应音频内容及其特性的变化并且因此更适当地再现音频数据。此外，根据本发明的方面的组合音频流是能够被容易地基于每个通道传输并被重新使用的数字数据。

虽然以音频数据的形式进行描述，但是应该明白：一个或更多通道可以是用于再现的非音频数据，如与音频数据一起再现的文本、程序、菜单、图像或视频。

构造根据本发明实施例的音频流的方法可以作为由计算机执行的程序来实现。本领域的计算机程序员能够容易地得出组成程序的代码和代码段。另外，该程序被存储在计算机可读介质中，并由计算机读取和执行以实现该方法。该计算机可读介质可以是磁记录介质、光学记录介质、或者载波介质。

尽管显示和描述了本发明某些实施例，但本领域的技术人员应该理解，在不脱离由所附权利要求及其等同物所限定的本发明的原理和精神的情况下，可以在这些实施例中做出改变。

Claims (42)

1、一种用于记录和/或再现装置的信息存储介质，包括：

多个音频通道分量，各包含相应的音频数据；和

混合信息，由该装置使用，以混合将要添加的附加通道分量和音频通道分量。

2、如权利要求1所述的信息存储介质，其中，混合信息包括其中记录关于附加通道分量的信息的字段。

3、如权利要求2所述的信息存储介质，其中，在字段中设置预定的虚值。

4、如权利要求1所述的信息存储介质，其中，混合信息包括下列信息中的至少一种：混合通道信息，用于向装置指定将由装置混合的音频通道分量和附加通道分量；混合系数信息，用于向装置指定音频通道分量和附加通道分量的输出电平；编码信息，用于指定将由装置混合的音频通道分量和附加通道分量的格式；和同步信息，用于向装置指定将由装置混合的音频通道分量和附加通道分量的再现时间。

5、一种用于记录和/或再现装置的信息存储介质，包括：

多个音频通道分量，包括音频数据；和

音频流，包括至少一个提供用于记录预定音频数据的备用空间的零通道分量和该装置的多个音频通道分量。

6、如权利要求5所述的信息存储介质，其中，零通道分量未被占用，以便在那里存储预定音频数据。

7、如权利要求5所述的信息存储介质，其中，零通道分量由零数据填充。

8、如权利要求5所述的信息存储介质，其中，多个音频通道包括完成具有预定格式音频流的所有通道。

9、如权利要求5所述的信息存储介质，其中，可由装置记录在零通道分量中的预定音频数据还包括当由该装置将包含在零通道分量中的预定音频数据和来自多个音频通道分量的至少一个的通道分量混合时该装置参考的混合信息。

10、如权利要求9所述的信息存储介质，其中，混合信息包括混合通道信息，用于向装置指定将被混合的通道分量的通道。

11、如权利要求9所述的信息存储介质，其中，混合信息还包括混合系数信息，用于向装置指定将被混合的通道分量的输出电平。

12、如权利要求9所述的信息存储介质，其中，混合信息还包括编码信息，用于由装置参考，以将记录在零通道中的音频数据解码。

13、如权利要求9所述的信息存储介质，其中，混合信息还包括同步信息，用于向装置指定包含在零通道中的预定音频数据的再现时间。

14、如权利要求9所述的信息存储介质，其中，混合信息记录于音频流的首标中。

15、如权利要求5所述的信息存储介质，还包括具有至少一个音频通道的辅音频流，该音频通道包括将被记录在零通道中的音频数据。

16、一种装置，包括：

主多路分解器，用于将包括多个具有音频数据的主音频通道和至少一个提供空间以存储预定音频数据的零通道的主音频流多路分解，并在主通道中输出多路分解的音频流；

辅多路分解器，用于将包括至少一个具有将被存储在零通道中的音频数据的辅音频通道的辅音频流多路分解，并在辅通道中输出多路分解的音频流；

映射器，用于用从辅多路分解器输出的至少一个辅音频通道之一替换从主多路分解器输出的至少一个零通道之一；和

多路复用器，用于将从映射器输出的至少一个辅音频通道和从主多路分解器输出的主音频通道多路复用，并输出组合音频流。

17、如权利要求16所述的装置，其中，零通道分量未被占用，以存储预定音频数据。

18、如权利要求16所述的装置，其中，零通道由零数据填充。

19、如权利要求16所述的装置，其中，多路复用器输出组合音频流，该音频流包含用于混合包含在至少一个辅通道中并将被存储在零通道中的音频数据的混合信息，和从多个音频通道中的至少一个通道输出的音频数据。

20、如权利要求19所述的装置，其中，混合信息包括混合通道信息，用于指定将被混合的通道。

21、如权利要求19所述的装置，其中，混合信息还包括混合系数信息，用于指定将被混合的通道的输出电平。

22、如权利要求19所述的装置，其中，混合信息包括用于将包含在至少一个辅通道中并将被存储在零通道中的音频数据解码的解码信息，和用于指定音频数据的再现时间的同步信息中的至少一个。

23、如权利要求19所述的装置，还包括：

解码器，用于将组合音频流解码为分离的音频通道；和

混合器，用于基于混合信息混合由解码器解码的分离的音频通道。

24、一种装置，包括：

解码器，用于将组合音频流解码，该组合音频流具有形成具有预定格式的音频流的多个主音频通道和将与多个主音频通道之一混合的辅音频通道；和

混合器，用于基于混合信息将来自辅音频通道和主音频通道的音频数据混合。

25、如权利要求24所述的装置，其中，混合器基于记录在组合音频流的首标中的混合信息混合音频数据。

26、如权利要求24所述的装置，其中，解码器基于存储在混合信息中的解码信息和再现时间信息，将包含在辅音频通道中的音频数据解码。

27、如权利要求24所述的装置，其中，混合器基于包含混合通道信息和混合系数信息的混合信息，将来自辅音频通道和主音频通道的音频数据混合。

28、一种构造音频流的方法，包括：

创建至少一个主音频通道分量；和

通过将混合信息打包来构造音频流，该混合信息用于混合创建的主音频通道分量和将被添加的附加通道分量。

29、如权利要求28所述的方法，其中，构造音频流的步骤还包括创建混合信息，以包括用于记录关于附加通道分量的信息的字段。

30、如权利要求29所述的方法，其中，构造音频流的步骤还包括创建混合信息，以包括用于记录关于附加通道分量的信息的字段，该信息将字段设置为预定的虚值。

31、一种构造音频流的方法，包括：

创建至少一个主音频通道；和

创建具有创建的主音频通道分量和至少一个零通道分量的主音频流。

32、如权利要求31所述的方法，还包括：

创建至少一个辅音频通道分量；和

通过交换零通道分量和创建的辅音频通道分量来创建组合音频流。

33、一种构造音频流的方法，包括：

创建至少一个主音频通道分量；

创建至少一个辅音频通道分量；和

创建具有创建的主音频通道分量和辅音频通道分量的组合音频流。

34、一种数字混合器系统，包括：

第一多路分解器，用于将具有多个主通道的主数字流和具有至少一个辅通道的辅数字流多路分解；

映射器，用于将多个主通道的至少一个和至少一个辅通道交换；和

多路复用器，用于将剩余的多个主通道和被交换的辅音频通道多路复用，以创建组合的流。

35、如权利要求34所述的系统，其中，第一多路分解器包括：

主多路分解器，用于将主数字流多路分解为多个主通道；和

辅多路分解器，用于将辅数字流多路分解为至少一个辅通道。

36、如权利要求34所述的系统，其中，多路复用器将用于再现的混合信息插入到组合的流的首标中。

37、如权利要求36所述的系统，其中，混合信息包括混合通道信息，用于指定将被混合的至少一个辅通道和主通道。

38、如权利要求37所述的系统，其中，混合信息还包括混合系数信息，用于指定将在再现过程中使用的主通道和至少一个辅通道的输出电平。

39、如权利要求36所述的系统，其中，混合信息包括同步信息，用于指定再现过程中的至少一个辅通道的再现时间。

40、一种数字混合音频的方法，包括：

将具有多个主音频通道的主数字音频流和具有至少一个辅音频通道的辅数字音频流多路分解；

将多个主音频通道的至少一个和至少一个辅音频通道交换；

将剩余的多个主音频通道和被交换的辅音频通道多路复用，以创建组合音频流；

存储用于指定在再现过程中使用的主音频通道和至少一个辅音频通道的输出电平的混合信息，和用于指定再现过程中的至少一个辅音频通道的再现时间的同步信息；

将组合音频流解码为与主音频通道和至少一个辅通道对应的多个再现音频通道；和

选择解码的多个音频通道中的至少两个，并根据混合信息将被选择的解码的音频通道混合。

41、一种生成组合音频流的方法，包括：

接收至少两个音频输入流，至少两个音频输入流的第一个包括五通道环绕声音频流，至少两个音频输入流的第二个包括两通道辅音频流；

将来自至少两个音频输入流的第一个的五个通道中的至少一个和来自至少两个音频输入流的第二个的辅音频通道中的至少一个交换；

生成混合信息，所述信息用于指定来自至少两个音频输入流的第一个的五个通道的剩余通道和至少一个被交换的辅音频通道的输出电平；和

基于来自至少两个音频输入流的第一个的五个通道的剩余通道和至少一个被交换的辅音频通道以及混合信息，来产生组合音频流。

42、一种用于记录和/或再现装置的信息载波信号，该载波信号包括：

多个音频流，各包括相应的音频通道分量；和

混合信息，由该装置使用，以由该装置混合将被添加的附加通道分量和被选择的音频通道分量。

Images