CN102415101B - 广播发射机、广播接收机及其3d视频数据处理方法 - Google Patents

Abstract

公开了一种广播发射机、广播接收机和3D视频数据处理方法。3D视频数据处理方法包括：对3D视频数据进行格式化(S9010)；对所格式化的3D视频数据进行编码(S9020)；生成具有3D格式信息的系统信息(S9030)，3D格式信息包括与3D视频数据格式化有关的信息以及与编码有关的信息；以及发送包括3D视频数据和系统信息的广播信号(S9040)。3D视频数据处理方法包括：接收包括3D视频数据和系统信息的广播信号；通过解析系统信息来获得3D图像格式信息；对3D视频数据进行解码；根据3D图像格式信息来扫描所解码的3D视频数据，并对所扫描的视频数据进行格式化。

Description

广播发射机、广播接收机及其3D视频数据处理方法

技术领域

本发明涉及一种用于处理广播信号的装置和方法，更具体地涉及一种广播发射机、广播接收机及其3D视频数据处理方法，其可以在3D广播系统发送多个视频流时处理视频数据。

背景技术

通常，三维(3D)图像(或立体图像)使用立体视觉原理向用户的眼睛提供立体效果。人类通过其彼此间隔大约65mm的眼睛之间的距离所造成的双目视差来感知远近，使得3D图像能够使右眼和左眼分别观看相关联的平面图像，从而产生了立体效果和透视效果。

上面提到的3D图像显示方法可以分为立体方案、体积方案、全息方案等。在使用立体方案的情况下，3D图像显示方法提供将由左眼观看的左视点图像以及将由右眼观看的右视点图像，使得通过偏振眼镜(polarization glasses)或显示设备，用户的左眼观察看左视点图像并且用户的右眼观看右视点图像，从而产生对3D图像效果的识别。

发明内容

技术问题

相应地，本发明针对一种广播发射机、广播接收机以及3D视频数据处理方法，其基本上消除了由相关技术的限制和缺点引起的一个或多个问题。

本发明的目的是提供一种广播发射机、广播接收机以及3D视频数据处理方法，其在3D广播系统发送用于立体显示的两个视频流时发送并接收3D视频数据，并使用该广播发射机和该广播接收机来处理该3D视频数据，从而向用户提供更有效的以及更方便的广播环境。

技术方案

可以通过提供一种三维(3D)视频数据处理方法来实现本发明的目的，所述方法包括：由视频格式化器对3D视频数据进行格式化；由编码器对经过格式化的3D视频数据进行编码；由系统信息处理器生成具有3D图像格式信息的系统信息，所述3D图像格式信息包括关于3D视频数据格式化的信息以及关于编码的信息；以及由发送单元发送包括所述3D视频数据和所述系统信息的广播信号。

在本发明的另一方面中，本文提供了一种三维(3D)视频数据处理方法，所述方法包括：由接收单元接收包括3D视频数据和系统信息的广播信号；由系统信息处理器通过解析所述系统信息来获得3D图像格式信息；由解码器对所述3D视频数据进行解码；由输出格式化器根据所述3D图像格式信息来扫描所解码的3D视频数据，并对所扫描的视频数据进行格式化并输出。

有益效果

根据本发明的实施例，广播接收机可以处理3D视频数据，使得在3D广播服务中反映3D广播服务提供商所期望的3D效果。

此外，本发明的实施例可以在最小化对传统2D广播服务的影响的同时，有效地提供3D广播服务。

附图说明

所包括的附图用于提供对本发明的进一步理解，附图示出了本发明的实施例，并且与说明书一起用于解释本发明的原理。

在附图中：

图1是示出了根据本发明单个视频流格式的立体图像复用格式的概念图。

图2示出了根据本发明的一个实施例在使用上下方案对立体图像进行复用时的图像形成方法。

图3示出了根据本发明的一个实施例在使用并排方案对立体图像进行复用时的图像形成方法。

图4示出了根据本发明的一个实施例包括立体格式信息的地面虚拟频道表(TVCT)的语法结构。

图5示出了根据本发明的一个实施例包括在TVCT中的立体格式描述符的语法结构。

图6示出了根据本发明的一个实施例包括立体格式信息的节目映射表(PMT)的语法结构。

图7示出了根据本发明的一个实施例包括在PMT中的立体格式描述符的语法结构。

图8是示出了根据本发明的一个实施例的广播发射机的框图。

图9是示出了根据本发明的一个实施例的广播发射机的用于处理3D视频数据的方法的流程图。

图10是示出了根据本发明的一个实施例的广播接收机的框图。

图11是示出了根据本发明的一个实施例的广播接收机的用于处理3D视频数据的方法的流程图。

图12是示出了根据本发明的一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的广播接收机的框图。

图13是示出了根据本发明的一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法的概念图。

图14是示出了根据本发明的一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法的概念图。

图15是示出了根据本发明的另一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法的概念图。

图16是示出了根据本发明的一个实施例用于使用梅花采样来处理3D视频数据的方法的概念图。

图17是示出了根据本发明的一个实施例使用3D图像格式信息来转换所接收的图像的复用格式然后输出转换的结果的广播接收机的框图。

图18示出了根据本发明的一个实施例在广播接收机中使用的视频数据处理方法，其使用3D图像格式信息来转换所接收的图像的复用格式，然后输出转换的结果。

具体实施方式

现在将详细参考本发明的优选实施例，在附图中示出了优选实施例中的例子。下文参考附图给出的详细描述旨在解释本发明的示例性实施例，而不是示出根据本发明可以实现的仅有的实施例。

在描述本发明之前，应当注意的是，本发明中公开的大部分术语是在考虑本发明的功能时定义的，并且与本领域公知的通用术语相对应，并且可以根据本领域技术人员的意图、通常实践或新技术的引入不同地确定。在一些情况中，申请人根据需要已经选择了几个术语，并且在下文中将在本发明的后续描述中公开这几个术语。因此，优选的是，将基于申请人所定义的术语在本发明中的意义来理解这些术语。

3D图像显示方法包括考虑两个视点的立体成像方案以及考虑三个或更多个视点的多视点成像方案。相反，相关技术中示出的单视点图像方案也可以被称为单像管图像方案(monoscopic image scheme)。

立体成像方案被设计为使用在左侧照相机和右侧照相机捕获同一目标对象时所获得的一对右视点图像和左视点图像，其中，该左侧照相机和右侧照相机彼此间隔开预定的距离。多视点成像方案使用间隔开预定距离或角度的三个或更多个照相机所捕获的三个或更多个图像。虽然下面的描述使用立体成像方案作为例子公开了本发明的实施例，但是本发明的发明构思也可以应用与多视点成像方案。为了便于描述以及更好地理解本发明，术语“有立体感的”也可以根据需要称为“立体的”。

可以根据包括运动图像专家组(MPEG)方案的各种方法来压缩并编码立体图像或多视点图像，并将其发送到目的地。

例如，可以根据H.264/高级视频编码(AVC)方案来压缩并编码立体图像或多视点图像，并将其发送。在这种情况中，接收系统可以按照H.264/AVC编码方案的反序来解码所接收的图像，使得其能够获得3D图像。

此外，可以将立体图像的左视点图像和右视点图像中的一个或多视点图像中的一个分配给基层图像，而可以将剩余的一个分配给扩展层图像。可以使用与单像管成像方法相同的方法来对基层图像进行编码。在与扩展层图像相关联的过程中，可以只对基层图像和扩展层图像之间的关系的信息进行编码和发送。可以使用JPEG、MPEG-2、MPEG-4或H.264/AVC方案作为用于基层图像的示例性压缩编码方案。为了便于描述，可以在本发明的一个实施例中示例性地使用H.264/AVC方案。在本发明的一个实施例中，可以将用于上层或高层图像的压缩编码方案设置成H.264/多视点视频编码(MVC)方案。

传统的地面DTV发送/接收标准是基于2D视频内容的。因此，为了提供3D TV广播内容，必须另外定义3D视频内容的发送/接收标准。广播接收机根据增加的发送/接收标准来接收广播信号，并适当地处理所接收的广播信号，使得其可以支持3D广播服务。

在下文中将使用高级电视系统委员会(ATSC)标准作为例子来描述根据本发明实施例的传统DTV发送/接收标准。

ATSC系统将用于处理广播内容的特定信息包括在系统信息中，并发送所生成的包括特定信息的系统信息。例如，系统信息可以被称为服务信息。系统信息包括频道信息、节目信息、事件信息等。ATSC标准将前面提到的系统信息包括在节目特定信息/节目和系统信息协议(PSI/PSIP)中，并且可以发送并接收所生成的包括系统信息的PSI/PSIP。但是，本发明的范围和精神并不限于上面提到的例子。如果假定存在能够以表的格式来发送系统信息的协议，那么本发明的范围和精神也可以应用于其它例子，而不管系统信息的名称。

公开PSI只是为了解释的目的以及更好地理解本发明。PSI可以包括节目关联表(PAT)、节目映射表(PMT)等。

PAT与PID为‘0’的分组所发送的特定信息相对应。PMT发送节目标识号、传输流分组(在该传输流分组中发送组成节目的视频和音频数据的各个比特流)的分组标识符(PID)信息以及发送PCT的PID信息。此外，在对从PAT获得的PMT进行解析的情况下，可以获得与节目的组成要素之间的相互关系有关的信息。

PSIP可以包括例如虚拟频道表(VCT)、系统时间表(STT)、分级区域表(RRT)、扩展文本表(ETT)、直接频道变化表(DCCT)、直接频道变化选择码表(DCCSCT)、事件信息表(EIT)、主指南表(MGT)等。

VCT发送与虚拟频道有关的信息(例如，用于选择频道的频道信息)以及与用于接收音频和/或视频数据的分组标识符(PID)有关的信息。也就是说，当解析VCT时，可以知道频道名称、频道号以及频道中所承载的广播节目的音频和视频数据的PID。STT发送当前日期和时间信息，并且RRT发送与针对节目分级级别的区域以及审议会有关的信息。ETT发送与频道和广播节目有关的附加描述，并且EIT发送与虚拟频道的事件有关的信息。DCCT/DCCSCT发送与自动频道变化有关的信息，并且MGT发送PSIP中包含的各个表的版本信息和PID信息。

对于立体显示而言，3D广播系统可以将左视点图像和右视点图像复用成一个视频流，并发送所生成的视频流。在这种情况下，所生成的视频流可以被称为具有中间格式的立体视频数据或立体视频信号。为了接收在广播频道上将左视点视频数据和右视点视频数据进行复用的立体视频信号并有效地显示所接收的立体视频信号，传统系统标准(例如PSIP)需要执行相应的3D广播服务的信号传输。

在将两视点视频数据中的每一个(即，第一视点视频数据和第二视点视频数据中的每一个)从两视点视频数据的空间分辨率的角度降低到半分辨率视频数据，并且发射机将第一视点视频数据的第一半分辨率视频数据和第二视点视频数据的第二半分辨率视频数据集中在一个视频数据中的情况下，两个半分辨率视频数据的容量可能比一个全分辨率视频数据的容量更大。因此，在将左视点视频数据和右视点视频数据进行混合以有效地压缩数据时，3D广播系统可以反转左视点视频数据或右视点视频数据，使得其可以配置两视点视频数据。因此，为了允许广播接收机有效地处理这种视频数据，在发送上面提到的视频数据时需要执行与视频数据配置有关的信息的信号传输。

两种传输格式可以用于立体图像，即，单个视频流格式和多个视频流格式(也称作多视频流格式)。单个视频流格式方案将两个视点的两个视频数据复用成一个视频流，并发送复用的结果。单个视频流格式方案将视频数据发送到一个视频流，使得其优势在于降低了提供3D广播服务所需要的额外带宽。多视频流格式方案将多个视频数据发送到多个视频流。多视频流格式方案可以发送高容量的数据，而增加了所使用的带宽，使得其优势在于其可以显示高质量的视频数据。

图1的例示了根据本发明单个视频流格式的立体图像复用格式的概念图；

存在多种单个视频流格式，例如，图1(a)中所示的并排格式，图1(b)中所示的上下格式，图1(c)中所示的交错格式，图1(d)中所示的帧连续格式，图1(e)中所示的棋盘格式，图1(f)中所示的浮雕格式等。

根据图1(a)所示的并排格式，在水平方向上对左图像数据(也称为左视点数据)和右图像数据(也称为右视点数据)中的每一个进行1/2下采样，所采样的左图像数据位于显示画面的左侧，而所采样的右图像数据位于显示屏的右侧，使得形成单个立体图像。根据图1(b)所示的上下格式，在垂直方向上对左图像数据和右图像数据中的每一个进行1/2下采样，所采样的左图像数据位于显示画面的上方，而所采样的右图像数据位于显示画面的下方，使得形成单个立体图像。根据图1(c)中所示的交错格式，在水平方向上对左图像数据和右图像数据中的每一个进行1/2下采样，并且每隔一行交替地布置所采样的左图像数据的像素和所采样的右图像数据的像素，使得形成由两个图像组成的一个立体图像。此外，在垂直方向上对左图像数据和右图像数据中的每一个进行1/2下采样，并且每隔一行交替地布置所采样的左图像数据的像素和所采样的右图像数据的像素，使得形成由两个图像组成的一个立体图像。根据图1(d)所示的帧连续格式，在一个视频流中，在时间上交替地布置左图像数据和右图像数据，使得形成立体图像。根据图1(e)所示的棋盘格式，在垂直和水平方向上对左图像数据和右图像数据进行1/2次采样，使得在垂直和水平方向上交替地布置左图像数据和右图像数据，从而使得将两个图像集成到一个图像中。根据图1(f)中所示的浮雕格式，使用互补的色彩对比度来形成图像，以实现立体效果。

为了有效地对使用上面提到的方案的视频数据进行解复用，并处理所解复用的视频数据，接收系统需要发送与上面提到的复用格式有关的信息。

在图1中，当使用并排方案或上下方案来发送视频数据时，发送两个视频图像(每个视频图像都进行了1/2下采样)，使得两个视频图像中的每一个都具有1/2的分辨率。然而，在发送两个半分辨率图像时的视频数据容量可能比在发送一个全分辨率图像时的视频数据容量更大。例如，当以使用参考图像和后续图像之间的差或关系的方式来根据参考图像编码视频数据时，可以增加视频压缩率。在这种情况下，如果两个半分辨率视频数据的总压缩率小于一个全分辨率视频数据的压缩率时，发送两个半分辨率图像的视频数据容量可能大于发送一个全分辨率图像时的视频数据容量。为了提高发送系统发送数据时的数据压缩率，两个图像中的一个图像可以在垂直方向上反转或可以在水平方向上进行镜像。

图2示出了根据本发明一个实施例在使用上下方案对立体图像进行复用时的图像形成方法。

在每个图像2010、2020或2030的情况下，左图像位于顶部，而右图像位于底部。在每个图像2040、2050或2060的情况下，左图像位于底部，而右图像位于顶部。

在图像2010中，正常地确定左图像和右图像的方向(正常取向)。在图像2020中，位于顶部的左图像是反转的。在图像2030中，位于底部的右图像是反转的。在图像2040中，右图像和左图像是正常取向。在图像2050中，位于底部的左图像是反转的。在图像2060中，位于底部的右图像是反转的。

图3示出了根据本发明一个实施例在使用并排方案对立体图像进行复用时的图像形成方法。

在每个图像3010、3020或3030的情况中，左图像位于左侧，而右图像位于右侧。在每个图像3040、3050或3060的情况下，左图像位于右侧，而右图像位于左侧。

在图像3010中，正常地确定左图像和右图像的方向(正常取向)。在图像3020中，位于左侧的左图像是镜像的。在图像3030中，位于右侧的右图像是镜像的。在图像3040中，右图像和左图像是正常取向。在图像3050中，位于右侧的左图像是镜像的。在图像3060中，位于左侧的右图像是镜像的。

图2中所示的图像反转以及图3中所示的图像镜像可以导致数据压缩率的不同。例如，假定在一个画面图像中差分地压缩参考像素的邻居像素数据。一对立体图像基本上是在相同画面图像上产生3D效果的图像对，使得一个图像的位置信息可能类似于另一个图像的位置信息的概率很高。也就是说，在正常取向的图像2010、2040、3010、3040中，在左图像和右图像之间的连接部分处出现全新的图像信息，并且在该连接部分微分值可能变化得很大。然而，在反转的图像2020、2030、2050和2060中，如图像2030和2050中所示的，左图像的底部连接到右图像的底部，或者如图像2020和2060中所示的，左图像的顶部连接到右图像的顶部，使得可以在左图像和右图像之间的连接部分中降低编码数据的数量。在镜像图像3020、3030、3050和3060中，如图像3030和3050中所示的，左图像的右侧连接到右图像的右侧，或者如图像3020和3060中所示的，左图像的左侧连接到右图像的左侧，在左图像和右图像之间的连接部分处连续地出现数据的相似性，使得可以降低编码数据的数量。

为了允许接收系统接收并有效地处理3D视频流或3D视频数据，需要向接收系统发送与上面提到的复用格式有关的信息。此外，如果如上文所描述的，图像是反转的或镜像的，则需要向接收系统发送与反转或镜像操作有关的信息。下文中，为了便于描述，可以将上文提到的信息定义为表或描述符。

可以将3D图像格式信息作为描述符包含在PSIP的VCT中或PSI的PMT中。下文将详细描述3D图像格式信息以及用于发送3D图像格式信息的方法。

图4示出了根据本发明一个实施例包括立体格式信息的地面虚拟频道表(TVCT)的语法结构。图4中所示的TVCT中所包含的各个字段的详细描述如下。

‘table_id’字段是8比特无符号整数字段，其指示表部分的类型。

‘section_syntax_indicator’字段是一比特字段，针对‘terrestrial_virtual_channel_table_section()’应当被设置为‘1’。

‘private_indicator’字段是一比特字段，应当被设置为‘1’。

‘section_length’字段是12比特字段，其中前两个比特应当被设置为‘00’，并且该字段指定在‘section_length’字段之后立即开始并包括CRC的部分的字节数量。

‘transport_stream_id’字段指示16比特的MPEG-2传输流(TS)的ID。

‘transport_stream_id’字段将地面虚拟频道表(TVCT)与可以在不同PTC中进行广播的其它内容区别开。

‘version_number’字段用作5比特字段，指示虚拟频道表(VCT)的版本号。

‘current_next_indicator’字段是一比特的指示符。在‘current_next_indicator’字段被设置为‘1’的情况中，这表示所发送的虚拟频道表(BCT)当前是可应用的。当‘current_next_indicator’字段的比特被设置为‘0’时，这表示所发送的表还不可应用并且应当是将变得有效的下一表。

‘section_number’字段是8比特字段，其给出了该部分的号。

‘last_section_number’字段用作8比特字段，其指定了完整的地面虚拟频道表(TVCT)的最后一部分(即，具有最大section_number值的部分)的号。

‘protocol_version’字段用作8比特无符号整数字段，用于在将来允许该表类型承载可以与当前协议中定义的参数进行不同构造的参数。

‘num_channels_in_section’字段用作8比特字段，其指定该VCT部分中的虚拟频道的数量。

‘short_name’字段可以指示虚拟频道的名称，该名称表示为一到七个16比特码值的序列，其中该16比特码值根据unicode字符数据的UTF-16标准进行解释。

‘major_channel_number’字段指示10比特的号，该号表示与‘for’循环的该次迭代中正在定义的虚拟频道相关联的‘主’频道号。

‘minor_channel_number’字段指示‘0’到‘999’的范围中的10比特的号，以表示‘次’或‘子’频道号。该‘minor_channel_number’字段与‘major_channel_number’字段一起可以指示两部分频道号，其中‘minor_channel_number’字段表示号的第二部分或右侧部分。

‘modulation_mode’字段包括8比特无符号整数，该字段可以指示针对与虚拟频道相关联的所发送的载波的调制模式。

‘carrier_frequency’字段可以指示所允许的载波频率。

‘channel_TSID’字段是0x0000到0xFFFF范围内的16比特无符号整数字段。

‘channel_TSID’字段表示虚拟频道所标注的与承载MPEG-2节目的传输流(TS)相关联的MPEG-2传输流(TS)ID。

‘program_number’字段包括16比特无符号整数，其将这里正在定义的虚拟频道与MPEG-2节目关联和TS节目映射表相关联。

‘ETM_location’字段用作2比特字段，其指定扩展文本消息(ETM)的存在以及位置。

‘access_controlled’字段指示1比特的布尔标志。当设置‘access_controlled’字段的布尔标志时，这表示可以对访问与虚拟频道相关联的事件进行控制。

‘hidden’字段指示1比特的布尔标志。当设置‘hidden’字段的布尔标志时，这表示虚拟频道不是由用户通过直接登录虚拟频道号来访问的。

‘hide_guide’字段指示布尔标志。当针对隐藏频道，‘hide_guide’字段的布尔标志被设置为‘0’时，这表示在EPG显示中可以出现虚拟频道和虚拟频道事件。

‘service_type’字段是6比特的枚举类型字段，其应当标识虚拟息道中所承载的服务的类型。

‘source_id’字段包括16比特无符号整数，其标识与虚拟频道相关联的节目编排源。

‘descriptors_length’字段可以指示虚拟频道的描述符的总长度(以字节为单位)。

‘descriptor()’字段可以包括被确定将适合于descriptor()’字段的零个或多个描述符。

‘additional_descriptors_length’字段可以指示VCT描述符列表的总长度(以字节为单位)。

‘CRC_32’字段是32比特的字段，其包含CRC值，CRC值确保在处理整个地面虚拟频道表(TVCT)部分之后，ISO/IEC 138181“MPEG-2Systems”[8]的附录A中定义的解码器中的寄存器的零输出。

‘service_type’字段4010还可以指示从相应频道提供的广播服务是3D广播服务。根据一个实施例，如果‘service_ ype’字段4010具有字段值0x12，则可以识别出相应的虚拟频道提供3D广播节目(包括音频流、视频流以及用于显示3D立体图像的附加视频流)。

描述符字段4020包括立体格式信息，下文将参考附图来描述该字段的详细描述。

图5示出了根据本发明一个实施例包括在TVCT中的立体格式描述符的语法结构。

number_elements字段指示构成相应虚拟频道的视频要素的数量。广播接收机接收该立体格式描述符，并对随后的字段进行解析的次数可以等于构成相应虚拟频道的视频要素的数量。

elementary_PID字段指示相应视频要素的分组标识符(PID)。立体格式描述符可以定义与各自具有elementary_PID字段的PID的视频要素有关的后续信息。广播接收机可以从立体格式描述符获得具有相应PID的视频要素的3D视频显示信息。

stereo_composition_type字段可以指示立体图像的复用格式。接收系统解析stereo_composition_type字段，使得其可以确定使用了多种格式(即，并排格式、上下格式、交错格式、帧连续格式、棋盘格式和浮雕格式)中的哪种格式来发送相应的3D图像。

LR_first_flag字段可以指示在复用立体图像时顶部的最左像素是左图像还是右图像。根据本发明一个实施例，如果左图像位于顶部的左侧，则可以给LR_first_flag字段赋予值0。如果右图像位于顶部的左侧，则可以给LR_first_flag字段赋予值1。例如，接收系统可以通过stereo_composition_type字段识别出使用并排复用格式来接收所接收到的3D图像。如果LR_first_flag字段被设置为值0，则可以识别出一个帧的左半图像与左图像相对应，右半图像与右图像相对应。

LR_output_flag字段可以针对只输出立体图像中的一个图像以与2D广播接收机兼容的应用指示推荐的输出视点。根据本发明一个实施例，在显示2D图像时，如果字段值被设置为值0，则可以显示左图像，并且如果字段值被设置为值1，则可以显示右图像。虽然可以通过用户的设置来忽视LR_output_flag字段，但是在不存在针对输出图像的用户输入信号的情况下，LR_first_flag字段可以指示用于2D显示的缺省视点图像。例如，如果LR_output_flag字段具有值1，则就没有向接收系统输入另一用户设置或另一用户输入信号而言，接收系统将右图像用作2D输出图像。

left_flipping_flag字段和right_flipping_flag字段分别指示左图像扫描方向和右图像扫描方向。发送系统可以反向扫描左图像或右图像，并在考虑压缩效率的情况下编码所扫描的左图像或右图像。

发送系统可以以前面在图2和图3中描述的上下格式或并排格式来发送立体图像。在上下格式的情况中，一个图像在垂直方向进行反转。在并排格式的情况下，一个图像在水平方向上进行镜像。以这种方式，如果实现了图像的垂直反转或水平镜像，则接收系统解析left_flipping_flag字段和right_flipping_flag字段，使得其可以识别出扫描方向。根据本发明一个实施例，如果left_flipping_flag字段和right_flipping_flag字段中的每一个都被设置为值0，则这表示左图像的像素和右图像的像素是按照原始扫描方向布置的。如果left_flipping_flag字段和right_flipping_flag字段中的每一个都被设置为值1，则这表示左图像的像素和右图像的像素是按照原始扫描方向的相反方向布置的。

如上文所描述的，上下格式的扫描方向是垂直反转的方向，而并排格式的扫描方向是水平反转的方向。根据接收系统的实现例子，在除了上下格式和并排格式以外的剩余复用格式中，忽视left_flipping_flag字段和right_flipping_flag字段。即，接收系统解析stereo_composition_type字段，以确定复用格式。如果复用格式是上下格式或并排格式，则接收系统通过解析left_flipping_flag字段和right_flipping_flag字段来确定扫描方向。在除了上下格式和并排格式以外的剩余复用格式中，接收系统可以忽视left_flipping_flag字段和right_flipping_flag字段。在根据本发明另一实施例的另一系统的情况下，也可以在除了上下格式和并排格式以外的剩余复用格式中，以反向布置图像。在这种情况下，可以使用left_flipping_flag字段和right_flipping_flag字段来确定扫描方向。

sampling_flag字段可以指示在发送系统中是否执行了采样。在本发明的一个实施例中，发送系统可以在水平或垂直方向上对数据执行1/2下采样(即，1/2抽取)，并可以以与棋盘格式相同的方式使用梅花滤波器来对角地执行1/2下采样(梅花采样或梅花滤波)。例如，如果sampling_flag字段具有值1，则这表示发送系统已经在水平或垂直方向上执行了1/2下采样。如果sampling_flag字段具有值0，则这表示发送系统已经使用梅花滤波器执行了下采样。如果sampling_flag字段具有值0，则接收系统可以使用梅花滤波的反向处理来恢复图像。

例如，假设立体格式描述符的各个字段被设置为如下：

stereo_composition_type＝‘并排’，LR_first_flag＝‘1’，left_flippiing_flag＝‘1’，并且right_flipping_flag＝‘0’，则以并排格式复用视频流，使得可以识别出右图像位于左侧而且左图像是镜像的。因此，在显示视频数据之前，接收系统反向进行扫描，并根据反向扫描的结果来构造输出图像。如果sampling_flag字段被设置为1(sampling_flag＝1)，则这表示执行了梅花采样。接收系统执行梅花相反采样，以执行适当的格式化操作，并构造输出图像。

如果用户希望以2D模式来观看图像，或者显示设备不支持3D显示，则广播接收机可以将LR_output_flag字段中规定的预定视点的图像作为缺省图像进行显示。在这种情况中，显示设备可以不显示其它视点的图像，并忽略它们。在这种情况下，广播接收机可以通过参考left_flipping_flag字段和right_flipping_flag字段来反向扫描图像。

图6示出了根据本发明一个实施例包括立体格式信息的节目映射表(PMT)的语法结构。图6中所示的PMT中所包含的各个字段的详细描述如下。

‘table_id’字段是‘TS_program_map_section’字段中的8比特字段，其应当始终被设置为‘0x02’。

‘section_syntax_indicator’字段是1比特字段，其应当被设置为‘1’。

‘section_length’字段是12比特字段，其中前两个比特应当被设置为‘00’，并且该字段指定在‘section_length’字段之后立即开始并包括CRC的部分的字节数量。

‘program_number’字段是16比特字段，其指定可应用‘program_map_PID’的节目。

‘version_number’字段是5比特字段，其指示‘TS_program_map_section’字段的版本号。

‘current_next_indicator’字段是1比特字段。当‘current_next_indicator’字段被设置为‘1’时，这表示所发送的‘TS_program_map_section’字段当前可应用。当‘current_next_indicator’字段被设置为‘0’时，这表示所发送的‘TS_program_map_section’字段还不可应用，并且应当是将变得有效的下一‘TS_program_map_section’字段。

‘section_number’字段包括应当为‘0x00’的8比特字段的值。

‘last_section_number’字段包括应当为‘0x00’的8比特字段的值。

‘PCR_PID’字段是13比特字段，其指示传输流(TS)分组的PID，该传输流分组应当包含对‘program_number’字段指定的节目有效的PCR字段。在没有PCR与针对私有流的节目定义相关联的情况中，则该字段可以取值‘0x1FFF’。

‘program_info_length’字段是12比特字段，其前两个比特应当为‘00’。

‘program_info_length’字段指定紧接着‘program_info_length’字段的描述符的字节数量。

‘stream_type’字段是8比特字段，其指定所具有的PID的值是由‘elementary_PID’字段指定的分组内所承载的基本流或有效载荷的类型。

‘elementary_PID’字段是13比特字段，其指定承载相关联的基本流或有效载荷的传输流(TS)分组的PID。

‘ES_info_length’字段是12比特字段，其前两个比特应当为‘00’。‘ES_info_length’字段可以指定紧接着‘ES_info_length’字段的、相关联的基本流的描述符的字节数量。

‘CRC 32’字段是包含CRC值的32比特字段，该CRC值在处理整个传输流节目映射部分之后给出附录B中所定义的解码器中的寄存器的零输出。

描述符字段6010包括与构成立体图像的视频流有关的信息，并且描述符字段6010的详细描述如下。

图7示出了根据本发明一个实施例在PMT中包括的立体格式描述符的语法结构。

图7中所示的立体格式描述符与图5中的类似，因此本文省略了相同字段的详细描述。然而，在PMT的情况下，与图5不同的是，与每个视频要素有关的stream_type字段和elementary_PID字段包含在PMT中，其详细描述与图5中的相同，因此本文将省略对这些内容的描述。

图8的方框图示出了根据本发明一个实施例的广播发射机。

参考图8，广播发射机包括3D图像预处理器8010、视频格式化器8020、3D视频编码器8030、系统信息(SI)处理器8040、TS复用器(TS MUX)8050以及发送单元8060。3D图像预处理器8010执行3D图像的图像处理。视频格式化器8020通过处理3D图像来格式化3D视频数据或3D视频流。视频编码器8030根据MPEG-2方案等来对3D视频数据进行编码。SI处理器8040生成系统信息。TS复用器8050执行对视频数据和系统信息的复用。发送单元8060发送所复用的广播信号。根据本发明的实施例，发送单元8060还可以包括VSB编码器8070和调制器8080。下文将参考附图来描述广播发射机的各个组成部件的操作。

图9的流程图示出了根据本发明一个实施例广播发射机的用于处理3D视频数据的方法。

首先，3D图像预处理器对若干镜头所捕获的3D图像执行必要的处理，使得其输出多个3D图像或视频数据。在本发明的一个实施例中，当使用立体方案提供3D广播服务时，3D图像预处理器输出两视点图像或两视点视频数据。

在步骤S9010，广播发射机使用视频格式化器来格式化立体视频。在本发明的一个实施例中，广播发射机根据复用格式来调整立体视频数据的大小，并对大小被调整的视频数据进行复用，使得其输出一个视频流。对立体视频数据的视频格式化可以包括发送3D广播信号所需要的各种图像处理功能(例如，大小调整、抽取、内插、复用等)。

在步骤S9020，广播发射机可以使用3D视频编码器来对立体视频数据进行编码。广播发射机可以使用各种编码类型(即，JPEG、MPEG-2、MPEG-4、H.264/AVC、H.264/AVC等)中的任何一个来对立体视频数据进行编码。

广播发射机可以使用SI处理器来生成包括3D图像格式信息的系统信息。3D图像格式信息用于发射机格式化立体视频数据。3D图像格式信息可以包括接收机处理并输出立体视频数据所需要的信息。在本发明的一个实施例中，3D图像格式信息可以包括3D视频数据的复用格式、响应于复用格式左图像和右图像的位置和扫描方向、响应于复用格式的采样信息等。例如，3D图像格式信息可以包含在来自系统信息的PSI/PSIP中。更详细地，3D图像格式信息可以包含在PSI的PMT中，并且还可以包含在PSIP的VCT中。

在步骤S9040，广播发射机使用TS复用器来对3D视频编码器所编码的立体视频数据和从SI处理器生成的系统信息进行复用，并通过发送单元发送所复用的视频数据。

图10的方框图示出了根据本发明一个实施例的广播接收机。

参考图10，广播接收机包括接收单元10010、TS复用器(TS Demux)10020、SI处理器10030、3D视频解码器10040和输出格式化器10050。接收单元10010接收广播信号。TS复用器10020从广播信号中提取视频数据、提取包括诸如系统信息等的数据流、并输出所提取出的视频数据和数据流。SI处理器10030解析系统信息。3D视频解码器10040对3D视频数据进行解码。输出格式化器10050格式化所解码的3D视频数据，并输出所格式化的3D视频数据。根据本发明的一个实施例，接收单元10010还可以包括调谐器&解调器10060和VSB解码器10070。下文将参考附图来描述广播接收机的各个组成要素的操作。

图11的流程图示出了根据本发明一个实施例广播接收机的用于处理3D视频数据的方法。

参考图11，在步骤S11010，广播接收机接收包括立体视频数据和系统信息的广播信号。

在步骤S11020，广播接收机使用SI处理器来解析包含在广播信号中的系统信息，使得广播接收机获得3D图像格式信息。在本发明的一个实施例中，广播接收机使用SI处理器来解析广播信号中的PSI的PMT或广播信号中的PSIP的VCT，使得广播接收机可以获得3D图像格式信息。3D图像格式信息包括广播接收机的解码器和输出格式化器执行3D视频数据处理时所需要的信息。

在一个实施例中，3D图像格式信息可以包括3D视频数据的复用格式、响应于复用格式左图像和右图像的位置和扫描方向、响应于复用格式的采样信息等。

在步骤S11030，广播接收机使用3D视频解码器来对立体视频数据进行解码。在这种情况中，广播接收机可以使用所获得的3D图像格式信息来对立体视频数据进行解码。

在步骤S11040，广播接收机使用输出格式化器来格式化所解码的立体视频数据，并输出所格式化的视频数据。对立体视频数据的格式化可以包括使用3D图像格式信息来处理所接收的立体视频数据的操作。此外，在所接收的立体视频数据的复用格式与显示设备所支持的复用格式不同的情况中，或者在使用不同的视频数据输出格式(2D输出或3D输出)的情况下，广播接收机可以执行必要的图像处理。

接下来，下文将描述在广播接收机中使用的用于格式化立体视频数据的操作。

首先，下文将描述在通过TVCT获得3D图像格式信息的情况中或者在通过PMT获得3D图像格式信息的情况中广播接收机的操作。

(1)在通过TVCT接收3D图像格式信息的情况

广播接收机可以使用TVCT的service_type字段来确定在相应的虚拟频道上是否提供3D广播服务。在提供3D广播服务的情况中，广播接收机使用3D图像格式信息(立体格式描述符)接收3D立体视频数据的elementary_PID信息，并接收/提取与PID信息相对应的3D视频数据。通过3D图像格式信息，广播接收机识别出与3D视频数据有关的各种信息，即，立体图像配置信息、左/右布置信息、左/右优先输出信息、左/右反向扫描信息、大小调整信息等。

a)如果用户以2D模式观看视频数据，则广播接收机对3D视频数据进行解码，广播接收机只提取与LR_output_flag字段所指示的预定视点相对应的视频数据，对所提取出的视频数据执行内插/大小调整处理等，并将处理的结果输出到显示设备。

b)如果用于以3D模式观看视频数据，则广播接收机对3D视频数据进行解码，并使用3D图像格式信息来控制显示输出。在这种情况中，广播接收机根据显示设备的类型来对视频数据执行大小调整、整形、3D格式转换等，并因此输出立体图像。

(2)在通过PMT接收3D图像格式信息的情况

广播接收机识别PMT的stream_type信息以及与每个基本流相对应的3D图像格式信息(立体格式描述符)的存在或不存在。在这种情况中，广播接收机可以通过识别3D图像格式信息的存在或不存在来确定相应的节目是否提供3D广播服务。如果相应的节目提供3D广播服务，则广播接收机获得与3D视频数据相对应的PID，并接收/提取与PID相对应的3D视频数据。

通过3D图像格式信息，广播接收机可以获得与3D视频数据有关的各种信息，即，立体图像配置信息、左/右布置信息、左/右优先输出信息、左/右反向扫描信息、大小调整信息等。广播接收机使用program_number字段来执行所获得的信息与从TVCT提供的信息之间的映射(广播接收机可以识别出虚拟频道中的哪一个用于发送相应的节目)。

a)如果用户以2D模式观看视频数据，则广播接收机对3D视频数据进行解码，广播接收机只提取与LR_output_flag字段所指示的预定视点相对应的视频数据，对所提取出的视频数据执行内插/大小调整处理等，并将处理的结果输出到显示设备。

b)如果用户以3D模式观看视频数据，则广播接收机对3D视频数据进行解码，并使用3D图像格式信息来控制显示输出。在这种情况中，广播接收机根据显示设备的类型来对视频数据执行大小调整、整形、3D格式转换等，并因此输出立体图像。

(3)在所接收的3D视频数据的复用格式与显示设备所支持的复用格式不同的情况

所接收的3D视频数据的复用格式可能与显示设备所支持的复用格式不同。

在一个实施例中，所接收的3D视频数据具有并排格式，而显示设备的显示类型可能只支持棋盘格式。在这种情况中，广播接收机使用3D图像格式信息对通过输出格式化器所接收的3D视频流进行解码和采样，将所解码的结果转换成棋盘输出信号，并输出棋盘输出信号。

在另一实施例中，广播接收机可以通过使用输出格式化器根据显示容量/类型信息来执行大小调整和格式化，以输出空间复用格式(并排、上下、行交错等)的视频数据，或者可以通过使用输出格式化器根据显示容量/类型信息来执行大小调整和格式化，以输出时间复用格式(帧连续、场连续等)的视频数据。此外，为了实现显示设备所支持的帧速率之间的一致性，广播接收机还可以执行帧速率转换。

图12的方框图示出了根据本发明一个实施例用于使用3D图像格式信息来以2D图像的形式来显示所接收的3D视频数据的广播接收机。

参考图12，广播接收机可以通过使用具有3D图像信息的左图像和右图像中的一个，从3D视频数据重构2D视频图像，在该3D视频数据中左图像和右图像混合成了一个帧。

从图12的左侧可以看到，根据stereo_composition_type字段的值识别出3D视频数据的复用格式是可能的。换句话说，广播接收机对系统信息进行解析。如果stereo_composition_type字段被设置为值0，则广播接收机可以识别出上下格式。如果stereo_composition_type字段被设置为值1，则广播接收机可以识别出并排格式。如果stereo_composition_type字段被设置为值2，则广播接收机可以识别出水平交错的格式。如果stereo_composition_type字段被设置为值3，则广播接收机可以识别出垂直交错的格式。如果stereo_composition_type字段被设置为值4，则广播接收机可以识别出棋盘格式。

在图12的右侧示出了广播接收机的输出格式化器的示意图。在一个实施例中，广播接收机的输出格式化器可以包括调整器12010、整形器12020、存储器(DDR)12030和格式化器12040。

调整器12010对所接收的图像执行大小调整和内插。例如，调整器12010可以根据所接收的图像格式和输出图像格式来对所接收的图像执行大小调整和梅花反转采样。在大小调整期间，可以根据分辨率和图像大小使用各种比率(例如，1/2大小调整、双倍(2/1大小调整))来调整所接收的图像的大小。整形器12020从所接收的图像中提取左/右图像，并将所提取出的左/右图像存储在存储器12030中，或者提取从存储器12030中读出的图像。如果存储在存储器12030中的一个图像的映射与输出图像的映射不同，则整形器12020读出存储在存储器中的图像，并将读出的图像映射到输出图像。存储器12030存储所接收的图像，或缓冲所接收的图像并输出所缓冲的图像结果。格式化器12040根据将要显示的图像的格式来执行图像格式的转换。例如，格式化器12040可以将上下格式的图像转换成交错格式。

图13至图15示出了根据本发明一个实施例用于以2D图像的形式来显示所接收的3D视频数据的方法。

图13是示出了根据本发明一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法的概念图。

图13示出了在立体格式描述符的各个字段被设置为如下时广播接收机的操作：LR_first_flag＝0，LR_output_flag＝0，Left_flipping_flag＝0，Right_flipping_flag＝0，以及Sampling_flag＝1。根据给各个字段赋予的值，如果LR _irst_flag字段被设置为值0，则这表示顶部的左图像是左图像。如果LR_output_flag字段被设置为值0，则在显示2D图像时广播接收机输出左图像。Left_flipping_flag字段和Right_flipping_flag字段中的每一个都被设置为值0。因此，没有必要对图像执行反向扫描。如果Sampling_flag字段被设置为值1，则这表示不存在梅花采样，并且在水平或垂直方向上执行1/2大小调整(例如，抽取)。

当接收到上下格式的图像13010(stereo_composition_type＝0)时，整形器提取将要显示的顶部的左图像，并将所提取出的图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在上下格式的图像中，输出图像的映射与存储器中存储的图像的映射相同，使得不需要根据需要执行额外的映射。调整器对顶部图像执行内插或垂直2/1大小调整，使得其输出全屏的左图像。当显示2D图像时，广播接收机不需要转换图像的复用格式，使得格式转换器可以忽略从调整器接收的图像。

当接收到并排格式的图像13020(stereo_composition_type＝1)时，整形器提取将要显示的顶部的左图像，并将所提取出的图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在并排格式的图像的情况下，输出图像的映射与存储器中存储的图像的映射相同，使得不需要根据需要执行额外的映射。调整器对左图像执行内插或水平2/1大小调整，使得其输出全屏的左图像。当显示2D图像时，广播接收机不需要转换图像的复用格式，使得格式转换器可以忽略从调整器接收的图像。

在接收到水平交错格式的图像13030(stereo_composition_type＝2)时，整形器提取将要显示的左图像，并将所提取出的左图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在水平交错格式的图像的情况中，虽然以交错格式显示输出图像，但是可以将输出图像存储在存储器中而不必在交错的像素之间布置空像素，以增加存储效率。在这种情况中，当整形器从存储器读出图像并输出所读出的图像时，整形器执行到交错图像的映射，使得其将所映射的结果输出到调整器。调整器对交错格式的图像执行内插或2/1大小调整，使得其输出全屏图像。

在接收到垂直交错格式的图像13040(stereo_composition_type＝3)时，整形器提取将要显示的左图像，并将所提取出的左图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在垂直交错格式的图像的情况中，虽然以交错格式显示输出图像，但是可以将输出图像存储在存储器中而不必在交错的像素之间布置空像素，以增加存储效率。在这种情况中，当整形器从存储器读出图像并输出所读出的图像时，整形器执行到交错图像的映射，使得其将所映射的结果输出到调整器。调整器对交错格式的图像执行内插或2/1大小调整，使得其输出全屏图像。

在接收到棋盘格式的图像13050(stereo_composition_type＝4)时，整形器提取将要显示的左图像，并将所提取出的左图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在棋盘格式的图像的情况中，虽然以交错格式显示输出图像，但是可以将输出图像存储在存储器中而不必在交错的像素之间布置空像素，以增加存储效率。在这种情况中，当整形器从存储器读出图像并输出所读出的图像时，整形器执行到交错图像的映射，使得其将所映射的结果输出到调整器。调整器对交错格式的图像执行内插或2/1大小调整，使得其输出全屏图像。

图14的示意图示出了根据本发明一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法。

图14示出了在立体格式描述符的各个字段被设置为如下时广播接收机的操作：

LR_first_flag＝0，LR_output_flag＝0，Left_flipping_flag＝1，Right_flipping_flag＝0，以及Sampling_flag＝1。根据给各个字段赋予的值，如果LR_first_flag字段被设置为值0，则这表示顶部的左图像是左图像。如果LR_output_flag字段被设置为值0，则在显示2D图像时广播接收机输出左图像。Left_flipping_flag字段被设置为1，使得需要对左图像执行反向扫描。如果Right_flipping_flag字段被设置为值0并且显示2D图像，则将显示左图像，使得可以根据接收系统在前向方向扫描或不扫描右图像。如果Sampling_flag字段被设置为值1，则这表示不存在梅花采样，并且在水平或垂直方向上执行1/2大小调整(例如，抽取)。

当接收到上下格式的图像14010(stereo_composition_type＝0)时，整形器提取将要显示的顶部的左图像，并将所提取出的图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在这种情况中，Left_flipping_flag字段被设置为值1，使得在读取以及存储左图像时反向扫描左图像。调整器对顶部的图像执行垂直2/1大小调整，使得其输出全屏的左图像。当显示2D图像时，广播接收机不需要转换图像的复用格式，使得格式转换器可以忽略从调整器接收的图像。

当接收到并排格式的图像14020(stereo_composition_type＝1)时，整形器提取将要显示的顶部的左图像，并将所提取出的图像存储在存储器中，从存储器中读出所存储的图像，并输出所读出的图像。在这种情况中，Left_flipping_flag字段被设置为值1，使得在读取以及存储左图像时反向扫描左图像。调整器对左图像执行水平2/1大小调整，使得其输出全屏的左图像。

在图14中，在水平交错格式14030、垂直交错格式14040、棋盘格式14050的情况中，广播接收机可以忽略Left_flipping_flag字段和Right_flipping_falg字段，并根据系统实现的例子来执行数据处理。因此，以与图13中所示的水平交错格式13030、垂直交错格式13040和棋盘格式13050相同的方式来进行视频数据处理，为了便于描述本文将省略其详细描述。然而，根据系统实现实施例，使用Left_flipping_flag字段和Right_flipping_falg字段来确定是否与复用格式不同地反向扫描图像。

图15的示意图示出了根据本发明另一个实施例用于使用3D图像格式信息以2D图像的形式来显示所接收的3D视频数据的方法。

图15示出了在立体格式描述符的各个字段被设置为如下时广播接收机的操作：

LR_first_flag＝0，LR_output_flag＝0，Left_flipping_flag＝0，Right_flipping_flag＝0，以及Sampling_flag＝1。根据给各个字段赋予的值，如果LR_first_flag字段被设置为值0，则这表示顶部的左图像是左图像。如果LR_output_flag字段被设置为值0，则在显示2D图像时广播接收机输出左图像。Left_flipping_flag字段被设置为值0，使得没有必要对左图像执行反向扫描。如果Sampling_flag字段被设置为值1，则这表示存在梅花采样。

接收机接收上下格式的图像15010或并排格式的图像15020，并且整形器读取左图像并将其存储在存储器中。在这种情况中，如果整形器读出存储器中存储的图像，则所读出的图像与垂直被调整1/2大小的图像或水平被调整1/2大小的图像不同，而是以棋盘格式进行配置的。因此，在整形器从存储器读出左图像的情况中，其执行梅花采样的棋盘格式图像的映射，并输出所映射的结果。调整器接收棋盘格式的图像，并执行梅花反转采样，使得其可以输出全屏的左图像。

图16的示意图示出了根据本发明一个实施例用于使用梅花采样来处理3D视频数据的方法。

在图16中，上面的图示出了在发射机的编码器侧执行的图像处理，而下面的图示出了在接收机的解码器侧执行的其它图像处理。

首先，广播发射机在全屏左图像16010和全屏右图像16020上执行梅花采样，以发送并排格式的图像，并获得采样后的左图像16030和采样后的右图像16040。广播发射机在采样后的左图像1630和采样后的右图像16040中的每一个上执行像素移位，使得其获得大小被调整1/2的左图像16050和大小被调整1/2的右图像16060。将大小被调整的图像16050和16060集成到一个画面图像中，使得广播发射机获得将要发送的并排格式的图像16070。在图16中示出了并排格式的例子。虽然广播发射机在梅花采样的图像上执行水平像素移位以获得并排格式的图像，但是广播发射机可以根据需要在梅花采样的图像上执行垂直像素移位以获得上下格式的图像。

之后，广播接收机接收上下格式的图像16080。由于3D图像格式信息的sampling_flag字段被设置为值0，所以可以识别出已经执行了梅花采样。因此，当广播接收机扫描上下格式的图像16080并对所扫描的图像执行像素采样时，广播接收机输出图像16090和16100，图像16090和16100中的每一个是以梅花采样的图像的形式进行配置的。在内插期间，广播接收机执行梅花反转采样，使得其可以获得全屏左图像16110和全屏右图像。

图17和图18示出了用于使用3D图像格式信息将所接收的图像的复用格式转换成另一复用格式的方法。

图17的方框图示出了根据本发明一个实施例使用3D图像格式信息转换所接收的图像的复用格式，然后输出转换后的结果的广播接收机。

在图17中，为了便于描述以及更好地理解本发明，本文将省略与图12中的部件相同的部件。

在图12所示的实施例中，显示2D图像(即，组成一个视点图像的帧)，因而格式化器显示所接收的图像而不进行任何改变。相反，在图17所示的实施例中，格式化器处理所接收的3D视频数据，并将所处理的视频数据转换成显示设备或广播接收机中规定的图像输出格式。

图18示出了根据本发明一个实施例在广播接收机中使用的视频数据处理方法，该方法使用3D图像格式信息转换所接收的图像的复用格式，然后输出转换后的结果。

首先，下面的实施例涉及所接收的3D图像的复用格式与并排格式相对应并且输出格式为水平交错格式的示例性情况。3D图像格式信息的各个字段被设置为如下：

LR_first_flag＝0，LR_output_flag＝0，stereo_composition_type＝1，Left_flipping_flag＝0，Right_flipping_flag＝0，以及Sampling_flag＝0。

调整器对所接收的并排格式的图像18010执行垂直1/2大小调整，并输出大小调整后的结果。整形器将输出图像存储在存储器中，使用上下格式执行图像扫描，并输出所扫描的结果。调整器对所接收的上下格式的图像执行水平2/1大小调整，并且格式化器将所接收的全屏上下格式的图像转换成水平交错的格式，并输出转换结果。

接下来，下面的实施例涉及所接收的3D图像的复用格式与并排格式相对应并且输出格式为棋盘格式的示例性情况。3D图像格式信息的各个字段被设置为如下：

LR_first_flag＝0，LR_output_flag＝0，stereo_composition_type＝1，Left_flipping_flag＝0，Right_flipping_flag＝0，以及Sampling_flag＝0。

在棋盘格式的图像的情况中，如果广播接收机以与并排格式的图像或上下格式的图像中相同的方式接收大小被调整1/2的图像18020，则广播接收机必须只将所接收的图像的格式转换成另一格式。换句话说，广播接收机并不使用调整器和整形器对所接收的并排格式的图像18020执行额外的图像处理，并控制格式化器只转换复用格式并输出转换后的结果。在另一实施例中，广播接收机从所接收的并排格式的图像中读出左图像和右图像，并执行与所读出的左图像和所读出的右图像中的每一个有关的2/1大小调整。广播接收机可以使用棋盘格式在全屏左图像和全屏右图像中的每一个上执行1/2下采样，并将两个图像(即，全屏左图像和全屏右图像)彼此混合。

最后，下面的实施例涉及所接收的3D图像的复用格式与棋盘格式相对应并且输出格式为水平交错格式的示例性情况。3D图像格式信息的各个字段被设置为如下：

LR_first_flag＝0，LR_output_flag＝0，stereo_composition_type＝4，Left_flipping_flag＝0，Right_flipping_flag＝0，以及Sampling_flag＝0。

在接收棋盘格式的图像18030的情况中，整形器扫描图像，将所扫描的图像整形为水平1/2大小的上下格式的图像，存储并输出整形后生成的图像。调整器对1/2大小的上下格式的图像执行水平2/1大小调整，并因而输出全屏上下格式的图像。格式化器将全屏上下格式转换成另一格式，并因而输出水平交错格式的图像。

本发明公开的方法可以以可由各种计算机装置执行的程序命令的形式来实现，并记录在计算机可读记录介质上。计算机可读记录介质可以单独地或组合地包括程序命令、数据文件、数据结构等。介质上记录的程序命令可以是特别为本发明设计和配置的命令或者是对计算机软件领域的技术人员已知并可用的命令。计算机可读记录介质的例子包括磁介质(例如硬盘、软盘和磁带)、光介质(例如压缩光盘只读存储器(CD-ROM)和数字多功能光盘(DVD))、磁光介质(例如可移动光盘)以及特别配置以存储并执行程序命令的硬件设备(例如ROM、随机存取存储器(RAM)和闪存)。程序命令的例子包括计算机可以使用解释器来执行的高级语言代码等以及机器语言代码(例如编译器所产生的那些代码)。上面陈述的硬件设备可以被配置为作为一个或多个软件模块进行操作，以执行本发明的操作，反之，一个或多个软件模块也可以由硬件设备实现。

虽然已经结合有限的实施例和附图描述了本发明，但是本发明并不限于此。本领域技术人员将清楚的是，根据本描述各种修改、增加和替换也是可能的。因此，本发明的范围并不限于示例性实施例的描述，而应当由所附权利要求及其等同物来确定。

本发明的最佳实施方式

已经以用于执行本发明的最佳方式描述了各个实施例。

工业应用

根据上面的描述，很明显的是，可以将本发明的实施例全部或部分地应用到数字广播系统。

广播接收机可以处理3D视频数据，使得在3D广播服务中反映3D广播服务提供商所希望的3D效果。广播接收机可以在最小化对传统2D广播服务的影响的同时有效地提供3D广播服务。

对于本领域技术人员显而易见的是，在不脱离本发明精神或范围的情况下，可以在本发明中进行各种修改和改变。因此，本发明旨在涵盖落入所附权利要求及其等同物的范围内的对本发明的修改和改变。

Claims (20)

1.一种三维（3D）视频数据处理方法，所述方法包括以下步骤：

由视频格式化器对3D视频数据进行格式化；

由编码器对经过格式化的3D视频数据进行编码；

由系统信息处理器生成具有3D图像格式信息的系统信息，所述3D图像格式信息包括关于所述3D视频数据的信息；以及

由发送单元发送包括所述3D视频数据和所述系统信息的广播信号，

其中，所述3D图像格式信息包括指示是否反向扫描左图像或右图像的信息。

2.根据权利要求1所述的3D视频数据处理方法，其中，所述3D图像格式信息位于包含在所述系统信息中的节目映射表（PMT）或地面虚拟频道表（TVCT）中。

3.根据权利要求2所述的3D视频数据处理方法，其中，所述3D图像格式信息用于对所述3D视频数据进行格式化和解码，并且所述3D图像格式信息包括3D图像复用格式信息、以及与用于对所述3D图像进行格式化的采样方案有关的信息。

4.根据权利要求2所述的3D视频数据处理方法，其中，所述3D图像格式信息包括指示特定图像是左图像还是右图像的信息。

5.根据权利要求2所述的3D视频数据处理方法，其中，所述3D图像格式信息包括指示所述左图像和所述右图像中至少哪一个图像被用于二维（2D）视频服务的信息。

6.一种广播发射机，所述广播发射机包括：

视频格式化器，其对3D视频数据进行格式化；

编码器，其对经过格式化的3D视频数据进行编码；

系统信息处理器，其生成具有3D图像格式信息的系统信息，所述3D图像格式信息包括关于所述3D视频数据的信息；以及

发送单元，其发送包括所述3D视频数据和所述系统信息的广播信号，

其中，所述3D图像格式信息包括指示是否反向扫描左图像或右图像的信息。

7.根据权利要求6所述的广播发射机，其中，所述3D图像格式信息位于包含在所述系统信息中的节目映射表（PMT）或地面虚拟频道表（TVCT）中。

8.根据权利要求7所述的广播发射机，其中，所述3D图像格式信息用于对所述3D视频数据进行格式化和解码，并且所述3D图像格式信息包括3D图像复用格式信息、以及与用于对所述3D图像进行格式化的采样方案有关的信息。

9.根据权利要求7所述的广播发射机，其中，所述3D图像格式信息包括指示特定图像是左图像还是右图像的信息。

10.根据权利要求7所述的广播发射机，其中，所述3D图像格式信息包括指示所述左图像和所述右图像中至少哪一个图像被用于二维（2D）视频服务的信息。

11.一种三维（3D）视频数据处理方法，所述方法包括以下步骤：

由接收单元接收包括3D视频数据和系统信息的广播信号；

由系统信息处理器通过解析所述系统信息来获得3D图像格式信息，所述3D图像格式信息包括关于所述3D视频数据的信息；

由解码器对所述3D视频数据进行解码；

由输出格式化器根据所述3D图像格式信息来扫描所解码的3D视频数据，并对所扫描的视频数据进行格式化，其中，所述3D图像格式信息包括指示是否反向扫描左图像或右图像的信息。

12.根据权利要求11所述的3D视频数据处理方法，其中，所述3D图像格式信息位于包含在所述系统信息中的节目映射表（PMT）或地面虚拟频道表（TVCT）中。

13.根据权利要求12所述的3D视频数据处理方法，其中，对所述3D视频数据进行格式化的步骤包括：

由整形器扫描所述左图像和所述右图像中的至少一个，并对所扫描的图像进行整形；

由调整器来调整所述左图像和所述右图像中的至少一个的大小；以及

由格式化器根据用于显示所述左图像和所述右图像的复用格式来对所述左图像和所述右图像进行格式化。

14.根据权利要求12所述的3D视频数据处理方法，其中，所述3D图像格式信息包括指示特定图像是左图像还是右图像的信息。

15.根据权利要求12所述的3D视频数据处理方法，其中，所述3D图像格式信息包括指示所述左图像和所述右图像中至少哪一个图像被用于二维（2D）视频服务的信息。

16.一种广播接收机，所述广播接收机包括：

接收单元，其接收包括3D视频数据和系统信息的广播信号；

系统信息处理器，其通过解析所述系统信息来获得3D图像格式信息，所述3D图像格式信息包括关于所述3D视频数据的信息；

解码器，其对所述3D视频数据进行解码；

输出格式化器，其根据所述3D图像格式信息来扫描所解码的3D视频数据，并对所扫描的视频数据进行格式化，其中，所述3D图像格式信息包括指示是否反向扫描左图像或右图像的信息。

17.根据权利要求16所述的广播接收机，其中，所述3D图像格式信息位于包含在所述系统信息中的节目映射表（PMT）或地面虚拟频道表（TVCT）中。

18.根据权利要求17所述的广播接收机，其中，所述输出格式化器包括：

整形器，其整形所述左图像和所述右图像中的至少一个，并对所扫描的图像进行整形；

调整器，其调整所述左图像和所述右图像中的至少一个的大小；以及

格式化器，其根据用于显示所述左图像和所述右图像的复用格式来对所述左图像和所述右图像进行格式化。

19.根据权利要求17所述的广播接收机，其中，所述3D图像格式信息包括指示特定图像是左图像还是右图像的信息。

20.根据权利要求17所述的广播接收机，其中，所述3D图像格式信息包括指示所述左图像和所述右图像中至少哪一个图像被用于二维（2D）视频服务的信息。