CN102835047A

CN102835047A - 使用关于多视点视频流的链接信息发送数字广播流的方法和设备以及接收数字广播流的方法和设备

Info

Publication number: CN102835047A
Application number: CN201180016428XA
Authority: CN
Inventors: 金容台; 李栽准; 张庸硕; 郑吉洙; 朴洪奭
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2010-01-28
Filing date: 2011-01-28
Publication date: 2012-12-19
Anticipated expiration: 2031-01-28
Also published as: US20140015927A1; KR101694821B1; US9055280B2; WO2011093677A3; US20110181694A1; JP5775884B2; EP2517386A4; WO2011093677A2; MX2012008818A; KR20110088332A; EP2517386A2; JP2013518506A; CN102835047B

Abstract

提供了一种数字广播流发送方法。所述发送方法包括：产生针对多条视频信息的多个基本流(ES)，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个；通过将所述多个ES与链接信息进行复用来产生至少一个传输流(TS)，其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；经由至少一个信道发送产生的所述至少一个TS。

Description

使用关于多视点视频流的链接信息发送数字广播流的方法和设备以及接收数字广播流的方法和设备

技术领域

与示例性实施例一致的设备和方法涉及用于提供二维(2D)内容或三维(3D)内容的数字数据发送和接收。

背景技术

在基于运动图像专家组(MPEG)传输(TS)的数字广播方法中，发送终端将未压缩的视频数据和未压缩的音频流插入各个基本流(ES)中，对每个ES进行复用以产生TS，并经由信道发送TS。

TS包括与ES一起的节目说明信息(PSI)。PSI典型地包括节目关联表(以下，称为PAT信息)和节目映射表(以下，称为PMT信息)。提供单个节目信息的PMT信息描述用于每个ES的包标识符(PID)，PAT信息描述用于每个PMT信息的PID。

接收终端经由信道接收TS，并通过与在发送终端中执行的处理相反的处理来从TS提取ES。由显示装置恢复和再现包含在ES中的数字内容。

发明内容

技术问题

提供了根据示例性实施例的能够提供3D视频服务的数字广播流发送设备和方法以及能够提供3D视频服务的数字广播流接收设备和方法。

技术方案

根据示例性实施例的一方面，提供了一种用于提供3D视频服务的数字广播流发送方法，所述方法包括：产生针对多条视频信息的多个ES，所述多条视频信息包括以下项中的至少一个：关于3D视频的基本视点视频的信息、关于与基本视点视频对应的附加视点视频的信息以及具有与3D视频的视点不同的视点的2D视频；通过将所述多个TS与用于标识与所述多条视频信息中的每一条链接的至少一条视频信息的链接信息进行复用来产生至少一个TS；经由至少一个信道发送产生的所述至少一个TS。

有益效果

本发明可在保持与使用基于运动图像专家组(MPEG)的TS的数字广播系统的兼容性的同时提供3D视频的数字内容服务和2D视频的数字内容服务。

由于PMT信息包括关于单个视频ES的信息，因此发送终端将用于标识相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息，从而接收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信息再现关联项视频数据。

另外，由于经由PMT信息不仅发送和接收链接信息，还发送和接收关于在2D视频再现方法和3D视频再现方法之间转换的信息以及关于3D视频特性的附加信息，因此本发明可在保持与用于2D内容服务的数字广播系统的兼容性的同时，平滑地提供3D视频的数字内容服务。

不需要新产生PSI或用于PSI的TS，多条视频信息和附加信息(诸如，3D视频流描述符)之间的链接信息可被包括在PMT信息或PAT信息中。另外，附加信息可被包括在保留字段中而不需要将包标识符(PID)添加到PMT信息。

附图说明

图1是根据示例性实施例的数字广播流发送设备的框图；

图2是根据示例性实施例的数字广播流接收设备的框图；

图3是根据示例性实施例的用于2D内容服务的数字TV发送系统的框图；

图4是根据示例性实施例的用于2D内容服务的数字TV接收系统的框图；

图5示出根据第一示例性实施例的经由多个信道发送和接收多个视频流的信道频带的分布的示例；

图6是根据图5中示出的第一示例性实施例的经由多个信道发送包括链接信息的3D视频流的数字广播流发送设备的框图；

图7示出根据第二示例性实施例的能够经由单个信道发送和接收针对3D视频流和2D视频流的多个TS的信道频带的分布的示例；

图8是根据图7中示出的第二示例性实施例的经由单个信道发送具有链接信息的多个TS的数字广播流发送设备的框图；

图9是根据第三示例性实施例的经由单个信道发送包括3D视频流和2D视频流的单个TS的数字广播流发送设备的框图；

图10是根据第四示例性实施例的经由与多个传输网络系统对应的多个信道接收多个TS的数字广播流接收设备的框图；

图11示出根据第五示例性实施例的信道频带分布的示例，在该信道频带中，能够经由多个信道发送和接收针对3D视频的基本视点视频流的多个TS并且能够经由单个信道发送和接收针对于3D视频的附加视点视频流的单个TS；

图12示出根据示例性实施例的能够经由单个信道发送和接收用于多视点视频流的多个TS的信道频带的分布的示例；

图13示出根据示例性实施例的使用了针对3D复合格式的按比例缩减方法的示例；

图14、图15、图16、图17和图18是根据示例性实施例的数字广播流接收设备的再现单元的示意图；

图19是根据示例性实施例的能够提供3D视频服务的数字广播流发送方法的流程图；

图20是根据示例性实施例的能够提供3D视频服务的数字广播流接收方法的流程图。

具体实施方式

最佳模式

根据示例性实施例的一方面，提供了一种用于提供3D视频服务的数字广播流发送方法，所述方法包括：产生针对多条视频信息的多个ES，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个；通过将所述多个ES与链接信息进行复用来产生至少一个TS，其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；经由至少一个信道发送产生的所述至少一个TS。

产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个TS，发送所述至少一个TS的步骤可包括：经由不同的信道发送所述至少一个多节目传输流。

产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个TS，发送所述至少一个TS的步骤可包括经由单个信道发送所述至少一个TS。

产生所述至少一个TS的步骤可包括对ES进行复用以产生单个TS，发送所述至少一个TS的步骤可包括经由单个信道发送所述单个个TS。

根据另一示例性实施例的一方面，提供了一种提供3D视频服务的数字广播流接收方法，所述方法包括：经由至少一个信道接收针对多条视频信息的至少一个TS，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个；对接收的所述至少一个TS进行解复用以从所述至少一个TS提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个ES；对提取的所述至少一个ES进行解码以基于链接信息再现通过解码而恢复的3D视频和2D视频中的至少一个。

接收的步骤可包括：通过对所述至少一个信道中的每个信道进行解码并从所述至少一个信道中的每个信道接收单个TS来接收至少一个TS，提取的步骤可包括：通过对所述至少一个多节目TS中的每一个进行解复用来提取至少一个ES。

接收的步骤可包括：通过对所述至少一个信道中的一个信道进行解码来经由所述信道接收多个TS，提取的步骤可包括：通过对所述至少一个TS中的每一个进行解复用来提取所述至少一个ES。

接收的步骤还可包括：通过对所述至少一个信道中的一个信道进行解码来接收该信道的TS，提取的步骤可包括：通过对传输流进行解复用来提取所述至少一个ES。

链接信息可包括链接标识符和链接描述符，链接标识符表示在至少一个TS中包括的多条视频信息中是否存在相互链接的多条视频信息，链接描述符包括关于在至少一个TS中包括的多条视频信息中相互链接的多条视频信息之间的链接的信息。

链接标识符可被包括在针对所述至少一个TS的节目关联表中。

链接描述符可被包括在针对相互链接的多条视频信息的ES的节目映射表中。

包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符可被包括在针对当前视频信息的节目映射表中。

根据另一示例性实施例的一方面，提供了一种用于提供3D视频服务的数字广播流发送设备，所述设备包括：ES产生单元，产生针对多条视频信息的多个ES，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个；TS产生单元，通过将产生的所述多个ES与链接信息进行复用来产生至少一个TS，其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；发送单元，经由至少一个信道发送产生的所述至少一个TS。

根据另一示例性实施例的一方面，提供了一种提供3D视频服务的数字广播流接收设备，所述设备包括：TS接收单元，经由至少一个信道接收针对多条视频信息的至少一个TS，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个；ES提取单元，对接收的所述至少一个TS进行解复用以从所述至少一个TS提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个ES；再现单元，以基于链接信息所表示的链接，再现通过对提取的所述至少一个ES进行解码而恢复的3D视频数据和2D视频数据中的至少一个。

根据另一示例性实施例的一方面，提供了一种其上记录有上述的用于提供3D视频服务的数字广播流发送方法的程序的计算机可读记录介质。

根据另一示例性实施例的一方面，提供了一种其上记录有上述的用于提供3D视频服务的数字广播流接收方法的程序的计算机可读记录介质。

本发明的模式

以下，将参照附图更完整地描述示例性实施例。应理解，当诸如“中的至少一个”的表述出现在列出的元件之后时，其修饰列出的全部元件而不是修饰列出的单个元件。此外，在此使用的“单元”可被实施为硬件组件和/或由计算机或硬件处理器执行的软件组件。

现在将参照图1到图20详细描述根据示例性实施例的能够提供3D视频服务的数字广播流发送设备和方法以及能够提供3D视频服务的数字广播流接收设备和方法。

图1是根据示例性实施例的数字广播流发送设备100的框图。

参照图1，数字广播流发送设备100包括基本流(ES)产生单元110、传输流(TS)产生单元120和发送单元130。

ES产生单元110产生针对多条视频信息的多个ES，所述多条视频信息包括以下项中的至少一个：关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息以及二维(2D)视频。

可针对单条视频信息产生单个ES。3D视频可以是单个基本视点视频和与单个基本视点视频相应的单个附加视点视频的组合(诸如，立体视频)，或者是单个基本视点视频和与单个基本视点视频相应的多个附加视点视频的组合。

关于附加视点视频的信息表示与基本视点视频相应的附加视点视频，因此可以是附加视点视频数据本身，或者是与基本视点视频数据相关的深度信息、视差信息等中的至少一个。

2D视频可以不是3D视频的一个视点的视频而是具有与3D视频的视点分离的视点的2D视频。

TS产生单元120接收由ES产生单元110产生的多个ES。TS产生单元120将多条视频信息之间的链接信息与多个ES进行复用，以产生针对多个ES的至少一个TS。发送单元130经由至少一个信道发送所述至少一个TS。

链接信息包括用于指示与多条视频信息中的每一条相关联的至少一条视频信息的标识符。

TS产生单元120可通过对多个ES中的每一个进行复用来产生至少一个TS，发送单元130可经由不同的信道发送所述至少一个TS。

TS产生单元120可通过单独地复用多个ES来产生至少一个TS，发送单元130可经由单个信道发送所述至少一个TS。

TS产生单元120可通过对多个ES进行利用来产生单个TS，发送单元130可经由单个信道发送所述单个TS。

现在将详细描述TS产生单元120的操作。

TS产生单元120可单独地将ES打包以产生打包的基本流(PES)包，并复用包括PES包和链接信息的节目映射表(以下，称为PMT信息)，以产生单节目传输流(SP TS)。TS产生单元120可通过复用视频ES、音频ES、附加数据等来产生SP TS。可针对每个SP产生PMT信息。

TS产生单元120可通过将至少一个SP TS与节目关联表(以下，称为PAT信息)进行复用来产生多节目传输流(MP TS)。

在这种情况下，可通过将SP TS复用到若干组中来产生不大于SP TS的总数的多个MP TS。

现在将描述第一到第五示例性实施例，其中，TS产生单元120和发送单元130经由不同的ES、不同的TS或不同的信道发送多条视频信息。

根据第一示例性实施例，TS产生单元120可通过单独地复用至少一个ES来产生至少一个SP TS，并通过单独地复用至少一个SP TS来产生至少一个MP TS。根据第一示例性实施例，发送单元130可经由基于相同传输网络系统的多个信道分别发送由根据第一示例性实施例的TS产生单元120产生的至少一个MP TS。

根据第二示例性实施例，TS产生单元120可通过单独地复用至少一个ES来产生至少一个SP TS，并通过将所述至少一个SP TS复用在一起来产生单个MP TS。根据第二示例性实施例，发送单元130可经由单个信道发送由根据第二示例性实施例的TS产生单元120产生的单个MP TS。

根据第三示例性实施例，TS产生单元120可通过将至少一个ES复用在一起来产生单个SP TS，并通过复用单个SP TS来产生单个MP TS。根据第三示例性实施例，发送单元130可经由单个信道发送由根据第三示例性实施例的TS产生单元120产生的单个MP TS。

根据第四示例性实施例，TS产生单元120可像第一示例性实施例一样从至少一个ES产生至少一个SP TS和至少一个MP TS。然而，与第一示例性实施例不同，根据第四示例性实施例的发送单元130可经由基于各个类型的传输网络系统的多个信道分别发送至少一个MP TS。

根据第五示例性实施例，TS产生单元120可单独地复用至少一个ES中的针对至少一个基本视点视频的ES以产生针对至少一个基本视点视频的至少一个SP TS。根据第五示例性实施例，TS产生单元120可单独地复用针对至少一个基本视点视频的至少一个SP TS以产生至少一个基本视点MP TS。

另外，根据第五示例性实施例，TS产生单元120可单独地复用针对与至少一个基本视点视频相应的至少一个附加视点视频的ES，以产生针对至少一个附加视点视频的至少一个SP TS。根据第五示例性实施例，TS产生单元120可将针对至少一个附加视点视频的至少一个SP TS复用在一起以产生单个的附加视点MP TS。

根据第五示例性实施例，发送单元130可经由不同的信道分别发送由根据第五示例性实施例的TS产生单元120产生的至少一个基本视点MP TS和单个附加视点MP TS。

参照回到图1，TS产生单元120可通过将多条视频信息之间的链接信息插入节目说明信息(PSI)来将链接信息包括在至少一个TS中。

链接信息可被分类为链接标识符和链接描述符。

链接标识符指示在至少一个TS中包括的多条视频信息中是否存在关联的多条视频信息。TS产生单元120可将链接标识符包括在关于至少一个TS的PAT信息中。在这种情况下，链接标识符可指示由PAT信息标识的多条PMT信息是否彼此链接。

链接描述符可包括与至少一个TS中所包括的多条视频信息中存在的关联的多条视频信息之间的链接有关的信息。TS产生单元120可将链接描述符插入PMT信息的描述符区。

TS产生单元120不仅可将链接信息插入PMT信息，还可将用于表示当前ES是否是针对3D视频的3D视频认证描述符插入PMT信息。例如，包括3D视频信息开始信息的3D视频开始描述符和包括3D视频的格式标识符信息的3D视频注册描述符中的至少一个可被插入关于当前ES的PMT信息，其中，所述3D视频信息开始信息表示关于3D视频的附加信息开始被插入的位置。

以下将参照表1更详细地描述链接描述符，以下将参照表4、表5和表6更详细地描述链接描述符，并且以下将参照表2和表3更详细地描述3D视频认证描述符。

TS产生单元120不仅可将链接信息插入针对当前视频信息的PMT信息，还可将包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符插入该PMT信息。

3D视频流描述符可包括关于针对当前视频流发生的2D/3D再现模式的转换的信息。

3D视频流描述符可包括用于单独(例如，针对小孩和成人)设置视点信息的关于3D视频的视点的信息。

以下将参照表7到表16更详细地描述3D视频流描述符。

因此，图1的数字广播流发送设备100可将3D视频信息插入不同的信道、不同的TS或不同的ES以发送3D视频信息。对于关联的多条视频信息，可设置用于标识它们的相对的多条视频信息已经被插入的位置的链接信息。链接信息可被插入针对关联的多条视频信息的TS的PMT信息并被发送。

图2是根据示例性实施例的数字广播流接收设备200的框图。

参照图2，数字广播流接收设备200包括TS接收单元210、ES提取单元220和再现单元230。

TS接收单元210经由至少一个信道接收包括多条视频信息的至少一个TS。接收的至少一个TS可包括以下项中的至少一个：关于3D视频的基本视点视频的信息、关于与基本视点视频对应的附加视点视频的信息以及2D视频。2D视频可以是视点与3D视频的视点不同的视频信息。关于与基本视点视频对应的附加视点视频的信息可以是附加视点视频数据本身，或者可以是使附加视点视频数据可基于基本视点视频数据被恢复的视差信息和深度信息中的至少一个。

ES提取单元220从TS接收单元210接收至少一个TS，并将TS解复用以从TS提取针对多条视频信息的至少一个ES。ES提取单元220还从解复用的TS提取多条视频信息之间的链接信息。

TS接收单元210可经由至少一个信道接收MP TS。可经由每个信道接收单个MP TS。

TS接收单元210可通过单独地对多个信道进行解码并从每个信道接收单个TS来接收多个TS。ES提取单元220可通过单独地对多个MP TS进行解复用来提取多个ES。

TS接收单元210可通过对单个信道进行解码来接收多个TS，ES提取单元220可通过对多个TS进行解复用来提取多个ES。

TS接收单元210可通过对单个信道进行解码来接收单个TS，ES提取单元220可通过对单个TS进行解复用来提取多个ES。

现在将更详细地描述ES提取单元220的操作。

ES提取单元220可对MP TS进行解复用以从解复用的MP TS提取至少一个SP TS以及PAT信息。ES提取单元220可对每个SP TS进行解复用以提取PES包和PMT信息。

PMT信息可包括关于包括在至少一个SP TS中的多个ES之间的链接的链接信息。PES包可被解包为ES。

每个ES可包括针对3D视频的基本视点视频信息、针对3D视频的附加视点视频信息、基本视点视频信息和附加视点视频信息的3D复合格式或2D视频信息。ES提取单元220还可从解复用的SP TS提取音频ES。

由于单个MP TS可被解复用为至少一个SP TS，因此可提取不少于多个MP TS的SP TS。

TS接收单元210和ES提取单元220分别接收分别由TS产生单元120产生并由发送单元130发送的TS，并对TS解复用。因此，根据上述的第一到第五示例性实施例的TS接收单元210接收至少一个TS和ES提取单元220从TS提取ES的操作如下。

根据第一示例性实施例，TS接收单元210可通过单独地对至少一个信道进行解码并从每个信道接收单个MP TS来接收至少一个MP TS。根据第一示例性实施例，ES提取单元220可单独地对至少一个MP TS进行解复用以从每个MP TS提取单个SP TS，并对每个SP TS进行解复用以从每个MP TS提取单个ES。因此，根据第一示例性实施例的TS接收单元210和ES提取单元220可最终从针对至少一个信道接收的至少一个TS提取针对3D视频信息或2D视频信息的ES。

根据第二示例性实施例，TS接收单元210可对单个信道进行解码以提取单个MP TS。根据第二示例性实施例，ES提取单元220可对单个MP TS进行解复用以提取至少一个SP TS，并单独地对所述至少一个SP TS进行解复用以提取至少一个ES。因此，根据第二示例性实施例的TS接收单元210和ES提取单元220可经由单个信道提取至少一个SP TS，因此可提取针对3D视频信息或2D视频信息的ES。

根据第三示例性实施例，TS接收单元210可对单个信道进行解码以提取单个MP TS。根据第三示例性实施例，ES提取单元220可对单个MP TS进行解复用以提取单个SP TS，并对单个SP TS进行解复用以提取至少一个ES。因此，根据第三示例性实施例的TS接收单元210和ES提取单元220可最终经由单个信道提取包括3D视频信息或2D视频信息的至少一个ES。

根据第四示例性实施例，与第一示例性实施例相反，TS接收单元210可单独地对基于各个类型的传输网络系统的信道进行解码，并接收针对每个信道的单个MP TS，从而接收至少一个MP TS。根据第四示例性实施例，ES提取单元220可单独地对至少一个MP TS进行解复用以从至少一个MP TS中的每一个提取单个SP TS，并对每个SP TS进行解复用以从每个SP TS提取单个ES。因此，根据第四示例性实施例的TS接收单元210和ES提取单元220可最终从分别经由基于各个类型的传输网络类型的多个信道接收的TS提取针对3D视频信息或2D视频信息的ES。

根据第五示例性实施例，TS接收单元210可对多个信道进行解码以从所述多个信道中的至少一个接收针对3D视频的至少一个基本视点MP TS，并从所述多个信道之一接收针对3D视频的单个附加视点MP TS。

根据第五示例性实施例，ES提取单元220可单独地对至少一个基本视点MP TS进行解复用以提取至少一个基本视点SP TS，并单独地对至少一个基本视点SP TS进行解复用以提取至少一个基本视点ES。根据第五示例性实施例，ES提取单元220还可对单个附加视点MP TS进行解复用以提取至少一个附加视点SP TS，并单独地对所述至少一个附加视点SP TS进行解复用以提取至少一个附加视点ES。

因此，根据第五示例性实施例的TS接收单元210和ES提取单元220可最终经由多个信道提取针对3D视频信息或2D视频信息的多个ES。

参照回到图2，从ES提取单元220提取的链接信息包括用于指示与多条视频信息中的每一条关联的至少一条视频信息的标识符。再现单元230可使用链接信息搜索与预定视频数据相应的其它视频数据，并在保持它们之间的链接的同时再现视频数据。

ES提取单元220可从TS的PSI提取多条视频信息之间的链接信息。链接信息可包括链接标识符和链接描述符。ES提取单元220可从TS的PAT信息提取链接信息的链接标识符。在这种情况下，链接标识符可表示由PAT信息标识的多条PMT信息是否彼此链接。ES提取单元220可从PMT信息的描述符区提取链接信息的描述符。

ES提取单元220不仅可从PMT信息提取链接信息，还可从PMT信息提取3D视频认证描述符。可从被提取作为3D认证描述符的3D视频开始描述符和3D视频注册描述符中的至少一个来检查在当前ES中是否包括3D视频信息。

以下将参照表1更详细地描述链接标识符，以下将参照表4、表5和表6更详细地描述链接描述符，以下将参照表2和表3更详细地描述3D视频认证描述符。

ES提取单元220不仅可从针对当前视频信息的PMT信息提取链接信息，还可从针对当前视频信息的PMT信息提取3D视频流描述符。ES提取单元220可从3D视频流描述符提取与针对当前视频流发生的2D/3D再现模式的转换相关的信息、用于单独(例如，针对小孩和成人)设置视点信息的与3D视频的视点相关的信息以及其它信息。以下将参照表7到表16更详细地描述3D视频流描述符。

再现单元230对由ES提取单元220提取的至少一个ES进行解码以恢复3D视频数据或2D视频数据。再现单元230可考虑由链接信息表示的链接来再现恢复的3D视频数据和恢复的2D视频数据中的至少一个。

例如，如果再现单元230从ES提取单元220接收针对3D视频的基本视点视频信息的ES和针对3D视频的附加视点视频信息的ES，则再现单元230可从这些ES恢复3D视频的基本视点视频数据和附加视点视频数据。具体地，再现单元230可基于链接信息搜索并恢复基本视点视频数据和附加视点视频数据，并可按照能够被3D显示装置再现的3D再现格式来转换并再现基本视点视频数据和附加视点视频数据。

如果再现单元230从ES提取单元220接收了针对2D视频信息的ES和针对附加视点视频的视差信息或深度信息的ES，则再现单元230可从ES恢复基本视点视频数据和附加视点视频数据。具体地，再现单元230可基于链接信息搜索与2D视频数据相应的视差信息或深度信息以恢复附加视点视频数据，并可将附加视点视频数据转换为能够被3D显示装置再现的3D再现格式并再现附加视点视频数据。

另外，可将针对3D复合格式的3D视频的ES和针对2D视频的ES输入到再现单元230。再现单元230可基于链接信息将3D复合格式的视频信息恢复为3D视频数据，并可将3D视频数据转换为均可被3D显示装置再现的基本视点视频数据和附加视点视频数据。由于再现单元230还可恢复3D视频数据，再现单元230可选择性地再现基本视点视频数据、附加视点视频数据和2D视频数据。

如果关联的针对2D视频的ES被输入再现单元230，则再现单元230可基于链接信息恢复相应的2D视频数据的项，并选择性地、独立地再现2D视频数据项。再现单元230可在画中画(PIP)模式中选择性地根据链接信息再现相应的2D视频数据项。

数字广播流接收设备200的ES提取单元220可通过使用链接信息检测经由不同信道、不同的SP TS或不同的ES发送的关联的多条视频信息，以仅提取关联的ES。数字广播流接收设备200的再现单元230可根据链接信息识别与用户选择的SP视频流关联的不同视频流的存在，并可再现关联的视频流。

数字广播流发送设备100和数字广播流接收设备200可在保持与使用基于运动图像专家组(MPEG)的TS的数字广播系统的兼容性的同时，提供3D视频的数字内容服务和2D视频的数字内容服务。

由于PMT信息包括关于单个视频ES的信息，因此发送终端将用于标识相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息，因此接收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信息再现关联项视频数据。

另外，由于不仅链接信息经由PMT信息被发送和接收而且关于2D视频再现方法和3D视频再现方法之间的转换的信息以及关于3D视频特性的附加信息也经由PMT信息被发送和接收，因此数字广播流发送设备100和数字广播流接收设备200可在保持与用于2D内容服务的数字广播系统的兼容性的同时平稳地提供3D视频的数字内容服务。

不需要新产生PSI或用于PSI的TS，多条视频信息之间的链接信息和诸如3D视频流描述符的附加信息可被包括在PMT信息或PAT信息中。另外，附加信息可被包括在保留字段中，而不需要将包标识符(PID)添加到PMT信息。

图3是根据示例性实施例的用于2D内容服务的数字TV发送系统300的框图。

参照图3，数字TV发送系统300通过使用单节目编码器310来产生包括单个视频ES和单个音频ES的SP TS，并通过使用复用器(MUX)380对由多个单节目编码器产生的至少一个SP TS进行复用以产生并发送MP TS。

单节目编码器310包括视频编码器320、音频编码器330、打包器340和350以及复用器(MUX)360。

视频编码器320和音频编码器330分别对未压缩的视频数据和未压缩的音频数据进行编码以分别产生和输出视频ES和音频ES。单节目编码器310的打包器340和350分别对视频ES和音频ES进行打包，并将PES头分别插入打包的视频ES和打包的音频ES，以分别产生视频PES包和音频PES包。

MUX 360对视频PES包、音频PES包和各种附加数据进行复用以产生第一单节目传输流SP TS1。PMT信息可与视频PES包和音频PES包复用，并被包括在单节目传输流SP TS1中。PMT信息被插入每个单节目传输流并描述每个ES或附加数据的PID。

MUX 380将多个单节目传输流SP TS1、SP TS2、...与PAT信息复用以产生多节目传输流MP TS。

由PSI以及节目和系统信息协议(PSIP)产生器370产生PMT信息和PAT信息。

多节目传输流(MP TS)可包括PAT信息和PSIP。PAT信息描述关于包括在多节目传输流中的单节目传输流的PMT信息的PID。

图4是根据示例性实施例的用于2D内容服务的数字TV接收系统400的框图。

数字TV接收系统400接收数字广播流，并从数字广播流中提取视频数据、音频数据和附加数据。

数字TV(DTV)调谐器410被调谐到根据观看者输入的物理信道选择信号选择的信道的波频率，以选择性地提取经由与波频率相应的波接收的信号。信道解码器和解调器420从信道信号提取多节目传输流MP TS。多节目传输流MP TS被解复用器(DEMUX)430解复用为多个单节目传输流SP TS1、SPTS2、...和PSIP。

单节目解码器440对观看者输入的节目选择信号选择的第一单节目传输流SP TS1进行解码。单节目解码器440进行与单节目编码器310相反的操作。从第一单节目传输流SP TS1恢复视频PES包、音频PES包和附加数据。解包器460和465分别将视频PES和音频PES恢复为ES，然后视频解码器470和音频解码器475分别将ES恢复为视频数据和音频数据。显示处理器480可将视频数据转换为可显示的格式。

时钟恢复和音频/视频(AV)同步装置490可通过使用从第一单节目传输流SP TS1提取的节目时钟参考(PCR)信息和时间戳信息来将视频数据再现时间与音频数据再现时间同步。

节目指南数据库445可接收观看者输入的节目选择信号，通过将节目选择信号与从多节目传输流MP TS提取的PSIP进行比较来搜索与观看者输入的节目选择信号相应的信道和节目，并随后将信道选择输入信号发送到数字TV调谐器410，并将节目选择输入信号发送到DEMUX 430。节目指南数据库445还可将同屏显示信息发送到显示处理器480并支持同屏显示操作。

现在将参照图5到图11描述各种示例性实施例，其中，数字广播流发送设备100和数字广播流接收设备200通过多个信道或多个ES发送和接收3D视频信息、链接信息和3D附加信息，从而在与用于提供2D内容服务的基于MPEG-TS的数字广播系统保持兼容性的同时提供3D数字广播服务。

以下，视频流可以是用于视频信息(诸如视频数据、视差信息、深度信息等)和作为在不同阶段执行的转换的结果的ES、PES包、单节目传输流和多节目传输流的通项(general term)。

在以下参照图5到图11描述的示例性实施例中，为了便于解释，包括左视点视频和右视点视频的立体视频流被发送和接收。然而，数字广播流发送设备100和数字广播流接收设备200也可应用于多视点视频流，所述多视点视频流均包括参考视点和至少一个附加视点，如图12的示例性实施例。

图5示出根据上述第一示例性实施例的信道频带500的分布的示例，在信道频带500中，可经由多个信道发送和接收多个视频流。

在信道频带500中，频带被分配给多个信道中的每一个。例如，信道频带500包括用于信道6的频带510、用于信道7的频带520、用于信道8的频带530、用于信道9的频带540和用于信道10的频带550。

可通过用于信道6的频带510和用于信道8的频带530分别发送和接收针对左视点视频信息的TS和针对右视点视频信息的TS以作为第一立体视频。在这种情况下，可针对信道6和信道8设置指示立体视频的多个视频之间的关联存在(即，指示多个视频被立体链接)的链接信息。可在信道、TS或ES之间设置链接信息。

可通过用于信道7的频带520和用于信道10的频带520分别发送和接收针对左视点视频信息的TS和针对右视点视频信息的TS以作为第二立体视频。在这种情况下，可针对信道7和信道10设置指示立体视频的多个视频之间的关联存在(即，指示多个视频被立体链接)的链接信息。

因此，在根据第一示例性实施例的将立体视频流分配到多个信道的方法中，分别经由不同的信道发送针对左视点视频的TS和针对右视点视频的TS。

图6是根据以上参照图5描述的第一示例性实施例的经由多个信道发送具有链接信息的3D视频流的数字广播流发送设备600的框图。

数字广播流发送设备600对应于根据图5的第一示例性实施例构建的数字广播流发送设备100的框图。数字广播流发送设备600的单节目编码器610、630和650以及MUX 620、640和660的操作与根据第一示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作对应。数字广播流发送设备600的信道编码器和调制器625、645和665以及DTV发送器670的操作与根据第一示例性实施例执行的数字广播流发送设备100的发送单元130的操作对应。

单节目编码器610、630和650可分别接收左视点视频序列Left Seq.、2D视频序列2D Seq.和右视点视频序列Right Seq.，以分别产生和输出第一单节目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3。

MUX 620可对针对左视点视频序列的第一单节目传输流SP TS1进行复用以产生第一多节目传输流MP TS1。类似地，MUX 640和660可分别对针对2D视频序列的第二单节目传输流SP TS2和针对右视点视频序列的第三单节目传输流SP TS3进行复用，以分别产生第二多节目传输流MP TS2和第三多节目传输流MP TS3。

信道编码器和调制器625可根据信道6(或信道7)对第一多节目传输流MP TS1进行编码和调制。信道编码器和调制器665可根据信道8(或信道10)对第三多节目传输流MP TS3进行编码和调制。信道编码器和调制器645可根据信道9对第二多节目传输流MP TS2进行编码和调制。

DTV发送器670可发送分配到多个信道的广播视频流。因此，根据第一示例性实施例的数字广播流发送设备600和数字广播流发送设备100可从立体视频的左视点视频和右视点视频中的每一个以及2D视频产生单节目传输流和多节目传输流，并分别经由多个信道发送单节目传输流和多节目传输流。

用于左视点视频的单节目编码器610可设置用于将右视点视频标识为与左视点视频相应的链接信息615。用于右视点视频的单节目编码器650可设置用于将左视点视频标识为与右视点视频相应的链接信息655。如果存在与2D视频关联的视频，则用于2D视频的单节目编码器630可设置用于标识关联的视频的链接信息635。可将每个链接信息插入单节目传输流的PMT信息。

根据第一示例性实施例，数字广播流接收设备200可选择性地接收经由不同信道发送的针对立体视频的左视点视频的TS、针对立体视频的右视点视频的TS和针对2D视频的TS，并恢复期望的TS的视频数据。

根据第一示例性实施例，数字广播流接收设备200的ES提取单元220可提取链接信息。根据第一示例性实施例的再现单元230可通过使用链接信息识别与左视点视频序列相应的右视点视频序列，并因此执行3D再现。ES提取单元220还可在搜索与第一单节目传输流相应的第三单节目传输流时使用链接信息，以分别从第一单节目传输流和第三单节目传输流提取ES。

图7示出根据上述的第二示例性实施例的信道频带700的分布的示例，在信道频带700中，可经由单个信道发送和接收针对3D视频流和2D视频流的多个TS。

信道频带700包括用于信道8的频带710、用于频道9的频带720和用于频道10的频带730。

可通过用于信道8的频带710发送和接收针对左视点视频信息的TS 740和针对右视点视频信息的TS 760以作为立体视频。在这种情况下，可在针对左视点视频信息的ES和针对右视点视频信息的ES之间设置指示立体视频的多个视频之间的关联存在(即，指示多个视频被立体链接)的链接信息，或可在针对左视点视频信息的SP TS和针对右视点视频信息的SP TS之间设置链接信息。

可通过用于信道8的频带710发送和接收用于普通2D视频的TS 750和另一TS 770。

因此，在根据第二示例性实施例的将立体视频流分配给多个信道的方法中，经由单个信道发送和接收针对左视点视频的TS和针对右视点视频的TS。

图8是根据以上参照图7描述的第二示例性实施例的经由单个信道发送具有链接信息的多个TS的数字广播流发送设备800的框图。

数字广播流发送设备800与根据第二示例性实施例构建的数字广播流发送设备100的框图对应。换而言之，数字广播发送设备800的单节目编码器810、820和830以及MUX 840的操作对应于根据第二示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作。数字广播发送设备800的信道编码器和调制器850以及DTV发送器860的操作对应于根据第二示例性实施例执行的数字广播流发送设备100的发送单元130的操作。

单节目编码器810、820和830可分别接收左视点视频序列Left Seq.、2D视频序列2D Seq.和右视点视频序列Right Seq.，以分别产生和输出第一单节目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3。

MUX 840可对第一单节目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3进行复用，以产生多节目传输流MP TS。换而言之，可将针对左视点视频序列的第一单节目传输流SP TS1、针对于2D视频序列的第二单节目传输流SP TS2和针对右视点视频序列的第三单节目传输流SPTS3复用在一起以产生单个多节目传输流MP TS。

信道编码器和调制器850可根据信道8对多节目传输流MP TS进行编码和调制。DTV发送器860可发送分配给信道8的广播视频流。因此，根据第二示例性实施例的数字广播流发送设备800和数字广播流发送设备100可将针对立体视频的左视点视频、立体视频的右视点视频和2D视频中的每一个的单节目传输流复用为单个多节目传输流，并经由单个信道发送所述单个多节目传输流。

用于左视点视频的单节目编码器810可设置用于将右视点视频标识为与左视点视频对应的链接信息815，并可将链接信息815插入第一单节目传输流SP TS1的PMT信息。用于右视点视频的单节目编码器830可设置用于将左视点视频标识为与右视点视频对应的链接信息835，并可将链接信息835插入第三单节目传输流SP TS3的PMT信息。如果存在与2D视频关联的视频，则用于2D视频的单节目编码器820可设置用于标识关联的视频的链接信息825，并可将链接信息825插入第二单节目传输流SP TS2的PMT信息。

根据第二示例性实施例的单节目编码器810、820和830可符合各个数字数据通信系统。例如，先进电视系统委员会(ATSC)地面广播通信方法支持高级残余边带(E-VSB)技术。在VSB技术中，可按照与MPEG技术不同的方式构建TS。例如，由于根据示例性实施例的链接信息被插入将被发送的TS，因此可按照MPEG传输流的形式发送基本视点视频流，并可按照E-VSB传输流的形式发送附加视点视频流。

根据第二示例性实施例的单节目编码器810、820和830可符合各个视频编码系统。由于根据示例性实施例的链接信息被插入TS的PMT信息，因此可根据MPEG-2视频编码方法对基本视点视频进行编码，并根据MPEG高级视频编码(AVC)/H.264编码方法对附加视点视频进行编码。

根据第二示例性实施例，数字广播流接收设备200可接收经由单个信道发送的、针对立体视频的左视点视频、立体视频的右视点视频和2D视频的单个多节目传输流，将单个多节目传输流解复用为针对左视点视频的单节目传输流、针对右视点视频的单节目传输流和针对2D视频的单节目传输流，并从所述单节目传输流提取至少一个，从而恢复期望的视频序列数据。

根据第二示例性实施例，数字广播流接收设备200的ES提取单元220可提取链接信息。根据第二示例性实施例的再现单元230可通过使用链接信息识别与左视点视频序列对应的右视点视频序列，并因此执行3D再现。ES提取单元220还可在搜索与第一单节目传输流对应的第三单节目传输流并分别从第一单节目传输流和第三单节目传输流提取ES时使用链接信息。

图9是根据上述第三示例性实施例的经由单个信道发送包括3D视频流和2D视频流的单个TS的数字广播流发送设备900的框图。

数字广播流发送设备900与根据第三示例性实施例构建的数字广播流发送设备100的框图对应。换而言之，数字广播发送设备900的单节目编码器910以及MUX 980的操作对应于根据第三示例性实施例执行的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作。数字广播发送设备900的信道编码器和调制器990以及DTV发送器995的操作对应于根据第三示例性实施例执行的数字广播流发送设备100的发送单元130的操作。

单节目编码器910可接收左视点视频、右视点视频和2D视频，并通过使用视频编码器920、930和940来分别产生第一视频基本流Video ES1、第二视频基本流Video ES2和第三视频基本流Video ES3。第一视频基本流VideoES1、第二视频基本流Video ES2和第三视频基本流Video ES3分别被打包器925、935和945打包为第一视频PES包Video PES1、第二视频PES包VideoPES2和第三视频PES包Video PES3。

单节目编码器910可接收音频，通过使用音频编码器950将音频转换为音频基本流Audio ES，并通过使用打包器955将音频基本流Audio ES转换为音频PES包Audio PES。

单节目编码器910的MUX 960可将第一视频PES包、第二视频PES包和第三视频PES包以及音频PES包复用为第一单节目传输流SP TS1。单节目编码器910还可接收由PSI和PSIP产生器970产生的PMT信息以及各种附加数据DATA，并通过使用MUX 960将PMT信息和附加数据DATA与第一视频PES包、第二视频PES包和第三视频PES包以及音频PES包复用在一起，从而使PMT信息和附加数据DATA被插入第一单节目传输流SP TS1。第一单节目传输流SP TS1可随后被输出。

3D视频数据和其它2D视频数据中的至少一个可与PMT信息被复用到第二单节目传输流SP TS2。PSI和PSIP产生器970可产生包括PMT信息的PID的PAT信息和关于各种节目和系统信息的PSIP，其中，所述PMT信息包括在第一单节目传输流SP TS1和第二单节目传输流SP TS2中。MUX 980可将第一单节目传输流SP TS1和第二单节目传输流SP TS2、PAT信息以及PSIP复用为单个多节目传输流MP TS。

信道编码器和调制器990可根据信道对多节目传输流MP TS进行编码和调制。DTV发送器995可发送分配给信道的广播视频流。因此，根据第三示例性实施例的数字广播流发送设备900和数字广播流发送设备100可将针对所有的立体视频的左视点视频、立体视频的右视点视频和2D视频的ES复用为单个单节目传输流，并经由单个信道发送所述单个多节目传输流。

单节目编码器910可将用于将彼此对应的左视点视频或右视点视频标识为立体视频的多个视频(即，指示多个视频被立体链接)的链接信息分别设置到第一视频PES包或第二视频PES包，并可将立体链接信息插入第一单节目传输流SP TS1的PMT信息。

根据第三示例性实施例的单节目编码器910可根据独立的数字数据通信方法产生TS。例如，可按照MPEG传输流的形式产生第一单节目传输流SPTS1，可按照E-VSB传输流的形式发送第二单节目传输流SP TS2，并可将链接信息插入第一单节目传输流SP TS1的PMT信息和第二单节目传输流SPTS2的PMT信息中的每一个。根据第三示例性实施例的视频编码器920和930可符合独立的视频编码方法。例如，可根据MPEG-2视频编码方法对基本视点视频进行编码，可根据MPEG AVC/H.264视频编码方法对附加视点视频进行编码，并可将链接信息插入第一单节目传输流SP TS1的PMT信息和第二单节目传输流SP TS2的PMT信息中的每一个。

根据第三示例性实施例，数字广播流接收设备200可提取经由单个信道发送的、针对立体视频的左视点视频、立体视频的右视点视频、2D视频以及音频的单个多节目传输流，对所述单个多节目传输流进行解复用，从而选择和提取期望的单节目传输流。另外，根据第三示例性实施例的数字广播流接收设备200可从提取的单节目传输流选择和提取针对立体视频的左视点视频的视频ES、针对立体视频的右视点视频的视频ES和针对2D视频的视频ES，从而恢复期望的视频数据。

根据第三示例性实施例，数字广播流接收设备200的ES提取单元220可提取链接信息。根据第三示例性实施例的再现单元230可通过使用链接信息来识别与左视点视频数据对应的右视点视频数据，并因此可准确地再现3D视频。ES提取单元220还可在搜索和提取与第一视频ES对应的第二视频ES时使用链接信息。

图10是根据上述的第四示例性实施例的经由基于多个传输网络系统的多个信道接收多个TS的数字广播流接收设备1000的框图。

根据第四示例性实施例，数字广播流发送设备1000经由基于各个传输网络系统(例如，地面系统1010、卫星TV系统1012、有线TV系统1014、互联网协议电视(IPTV)系统1016等)的不同信道接收针对左视点视频的TS和针对右视点视频的TS。

数字广播流接收设备1000对应于根据第四示例性实施例构建的数字广播接收设备200的框图。换而言之，数字广播流接收设备1000的地面数字调谐器1020或卫星数字调谐器1060以及信道解码器和解调器1030和1070的操作可对应于根据第四示例性实施例执行的数字广播流接收设备200的TS接收单元210的操作，数字广播流接收设备1000的TS DEMUX 1040和1080以及单节目解码器1050和1090的操作可对应于根据第四示例性实施例执行的数字广播流接收设备200的ES提取单元220的操作。

数字广播流接收设备1000可以是数字TV接收系统。数字广播流接收设备1000可经由与地面系统1010、卫星TV系统1012、有线TV系统1014和IPTV系统1016对应的多个信道接收广播流。

地面数字调谐器1020以及信道解码器和解调器1030被调谐到地面信道以提取经由地面波接收的多节目传输流。在这种情况下，可经由地面信道接收针对立体视频的左视点视频的TS。

卫星数字调谐器1060以及信道解码器和解调器1070被调谐到卫星信道以提取经由卫星波接收的多节目传输流。在这种情况下，可经由卫星信道接收针对立体视频的右视点视频的TS。

TS DEMUX 1040和1080可将多节目传输流解复用为多个单节目传输流。单节目解码器1050和1090可分别将单节目传输流恢复为左视点视频和右视点视频。

在这种情况下，经由地面信道接收和提取的针对左视点视频的单节目传输流可包括关于构成立体图像的其余视点的右视点视频的链接信息1055。在这种情况下，左视点视频的链接信息可包括指示经由卫星信道接收的右视点视频的信道、TS或ES的标识符。

经由卫星信道接收和提取的针对右视点视频的单节目传输流可包括关于左视点视频的链接信息1095。右视点视频的链接信息可包括指示经由地面信道接收的左视点视频的信道、TS或ES的标识符。

数字广播流接收设备1000可通过使用用于再现3D视频的链接信息来检测分别经由地面信道和卫星信道接收的左视点视频和右视点视频，从而提供3D视频广播服务。

图11示出根据上述的第五示例性实施例的信道频带1100的分布的示例，在信道频带1100中，可经由多个信道发送和接收针对3D视频的左视点视频的多个TS，并可经由单个信道发送和接收针对3D视频的右视点视频的TS。

信道频带1100包括用于信道8的频带1110、用于信道9的频带1120和用于频道10的频带1130。

根据第五示例性实施例，第一立体视频的左视点视频Left Video 1和第二立体视频的左视点视频Left Video 2分别被分配给用于信道9的频带1120和用于信道10的频带1130。可通过用于信道8的频带1110发送和接收针对第一立体视频的右视点视频Right Video 1的TS 1140和针对第二立体视频的右视点视频Right Video 2的TS 1150。

在这种情况下，可在第一立体视频的左视点视频Left Video 1和右视点视频Right Video 1的信道(视频流)之间以及第二立体视频的左视点视频LeftVideo 2和右视点视频Right Video 2的信道(视频流)之间设置链接信息，该链接信息指示在立体视频的多个视频之间存在关联，即，指示多个视频被立体链接。

虽然在图11中没有示出，但是如果另一左视点视频被分配给另一信道，则可经由用于信道8的频带1110发送针对另一右视点视频的TS 1160。如果信道频带1100足够大，则还可发送针对其它数据的TS 1170。

因此，根据第五示例性实施例的数字广播流发送设备100可对针对至少一个左视点视频的ES进行复用以产生针对所述至少一个左视点视频的至少一个单节目传输流，并从所述至少一个单节目传输流产生至少一个左视点多节目传输流。根据第五示例性实施例的数字广播流发送设备100还可对针对与所述至少一个左视点视频对应的至少一个右视点视频的ES进行复用以产生针对所述至少一个右视点视频的至少一个单节目传输流，并从所述至少一个单节目传输流产生单个右视点多节目传输流。因此，根据第五示例性实施例的数字广播流发送设备100可经由不同的信道发送至少一个左视点多节目传输流和单个右视点多节目传输流。

根据第五示例性实施例的数字广播流接收设备200可对多个信道进行解码以从所述多个信道中的至少一个接收3D视频的左视点多节目传输流，并从所述多个信道之一接收3D视频的右视点多节目传输流。根据第五示例性实施例的数字广播流接收设备200可单独地对至少一个左视点多节目传输流进行解复用以提取至少一个左视点单节目传输流，并可对所述至少一个左视点单节目传输流进行解复用以提取至少一个左视点基本流。根据第五示例性实施例的ES提取单元220可对单个右视点多节目传输流进行解复用以提取至少一个右视点单节目传输流，并单独地对所述至少一个右视点单节目传输流进行解复用以提取至少一个右视点基本流。

因此，根据第五示例性实施例的数字广播流接收设备200可经由多个信道提取针对3D视频信息或2D视频信息的多个ES。另外，根据第五示例性实施例的数字广播流接收设备200可通过使用链接信息来三维地再现相互关联的立体视频。

以上参照图5到图11关于3D视频的立体视频描述了数字广播流发送设备100和数字广播流接收设备200的第一到第五示例性实施例。然而，应理解，另外的示例性实施例不限于立体图像。例如，3D视频可以是包括至少三个视点视频的多视点视频。

根据上述的第一到第五示例性实施例，可经由至少一个信道和至少一个TS发送或接收相互关联的多个视频流。

根据第二和第三示例性实施例，可经由单个信道发送或接收相互关联的左视点视频流和右视点视频流。例如，提出了这样的情况：实施第二或第三示例性实施例以保持与现有技术2D数字地面广播系统的兼容性。当2D数字地面广播系统以第一比特率在19.38Mbps附近的频带内发送和接收单个视频流时，2D数字地面广播系统可以以低于第一比特率的第二比特率发送和接收基本视点视频流，并以剩余的比特率发送附加视点视频流，以便实现第二或第三示例性实施例。

根据第二和第三示例性实施例，经由单个信道发送和接收基本视点视频信息和附加视点视频信息，因此可以在不使用附加信道的情况下实现与现有广播系统的兼容性。当使用高压缩能力编码和解码方法来压缩视频数据时，最小化了由于基本视点视频流的压缩造成的数据损失，并且可经由单个信道与附加视点视频信息一起发送和接收基本视点视频流。

根据第一、第四和第五示例性实施例，可经由多个信道发送和接收基本视点视频流和附加视点视频流。例如，如果实施第一、第四和第五示例性实施例以允许保持与现有技术2D数字地面广播系统的兼容性，则可经由现有信道发送基本视点视频流，并可经由附加信道发送附加视点视频流。

根据第一、第四和第五示例性实施例，经由不同的信道发送和接收基本视点视频信息和附加视点视频信息，因此，如果第一、第四和第五示例性实施例在逐个信道的基础上与现有技术广播系统兼容，则可在不使显示的图像的质量降级的情况下提供多视点数字内容广播服务。

图12示出根据示例性实施例的信道频带1200的分布的示例，在信道频带1200中，可经由单个信道发送和接收针对多视点视频流的多个TS。

信道频带1200包括用于信道8的频带1210和用于信道9的频带1220等。

根据本示例性实施例，可通过用于信道8的频带1210发送和接收针对多视点视频的第一视点视频信息Video 1的TS 1230、针对多视点视频的第二视点视频信息Video 2的TS 1240、针对多视点视频的第三视点视频信息Video 3的TS 1250、针对多视点视频的第四视点视频信息Video 4的TS 1260和针对多视点视频的第五视点视频信息Video 5的TS 1270。

如果第三视点视频信息Video 3是主视点视频，则可设置链接信息“3dlinked”，用于表示在第一视点视频信息Video 1、第二视点视频信息Video 2、第四视点视频信息Video 4和第五视点视频信息Video 5中的每一个与第三视点视频信息Video 3之间存在的链接。

根据本示例性实施例的用于实现多视点视频服务的数字广播流发送设备100可将构成多视点视频的多个视点的视频的ES分别转换为单节目传输流，将针对各个视点的单节目传输流复用为单个多节目传输流，并经由单个信道发送单个多节目传输流。以下，多个视点的多个视频被称为多个视点视频。

根据本示例性实施例的用于实现多视点视频服务的数字广播流接收设备200可对单个信道进行解码以提取单个多节目传输流，并可对单个多节目传输流进行解复用以提取针对多个视点视频的各个单节目传输流。多个视点视频构成一个多视点视频，可从针对所述多个视点视频的单节目传输流提取针对所述多个视点视频的各个ES。因此，根据本示例性实施例的数字广播流接收设备200可最终经由单个信道提取所述多个视点视频的单节目传输流和所述多个视点视频的ES，并因此再现恢复的多个视点视频。

由于根据图1的示例性实施例的数字广播流发送设备100经由不同的信道、TS或ES发送相互关联的多条视频信息，因此根据图2的示例性实施例的数字广播流接收设备200可检查已经通过哪个信道、TS或ES接收了与提取的视频信息关联的视频信息。为此，根据图1的示例性实施例的数字广播流发送设备100和根据图2的示例性实施例的数字广播流接收设备200使用表示3D视频(诸如立体视频或多视点视频)之间的关联的链接信息。

由于根据图1的示例性实施例的数字广播流发送设备100将相互关联的多条3D视频信息转换为发送格式，并以该发送格式发送相互关联的多条3D视频信息，因此根据图2的示例性实施例的数字广播流接收设备200可确定3D视频的特征以便正确地将相互关联的多条3D视频信息恢复为3D再现格式，并以该3D再现格式再现相互关联的多条3D视频信息。因此，根据图1的示例性实施例的数字广播流发送设备100和根据图2的示例性实施例的数字广播流接收设备200使用用于表示3D视频信息的存在或不存在的3D视频开始描述符或3D视频注册描述符以及3D视频流描述符，以准确的恢复和再现3D视频信息。

现在将参照表1到表18来描述示例性实施例，其中，图1的数字广播流发送设备100和图2的数字广播流接收设备200通过使用PSI发送和接收链接信息、3D视频开始描述符或3D视频注册描述符以及3D视频流描述符。

根据示例性实施例的链接信息可包括链接标识符和链接描述符，其中，链接标识符表示在TS中包括的多条视频信息中是否存在关联的多条视频信息，链接描述符用于标识与每条视频信息关联的视频信息的ES、TS或信道。

图1的数字广播流发送设备100的TS产生单元120可将根据示例性实施例的链接标识符插入PAT信息。图2的数字广播流接收设备200的ES提取单元220检查从TS提取的PAT信息中所包括的链接标识符，并预测包括在TS中的多条PMT信息之间的链接。相互关联的多条PMT信息包括定义多条视频信息之间的链接的链接描述符。

例如，可针对PAT信息内的每个PMT信息另外设置包括链接标识符的参数“linked_indicator”。如果当前PMT信息的参数“linked_indicator”是000，则PAT信息所指示的至少一条相对PMT信息中没有PMT信息与当前PMT信息关联。另一方面，如果当前PMT信息的参数“linked_indicator”是001到111中的一个，则PAT信息所指示的至少一条相对PMT信息中包括具有与当前PMT信息相同的值的参数“linked_indicator”的PMT信息与当前PMT信息关联。换而言之，包括具有相同值的参数“linked_indicator”的多条PMT信息均可包括定义它们之间的链接的链接描述符。

图1的数字广播流发送设备100的TS产生单元120可将根据示例性实施例的链接描述符插入PMT信息。可针对每个视频信息设置链接描述符。图2的数字广播流接收设备200的ES提取单元220可检查从单节目传输流提取的PMT信息中包括的链接描述符，并确定与包括在单节目传输流中的视频信息对应的相对视频信息的位置。因此，图2的设置广播流接收设备200可检测相互关联的多条视频信息，并从相互关联的多条视频信息恢复多条视频信息。

表1显示了PMT信息的参数“program_stream_map()”的语法的示例。根据示例性实施例的链接描述符包括在参数“linked_descriptor”中。参数“linked_descriptor”可包括在作为以下参数“elementary_stream_info_length”的描述符区的参数“descriptor()”中，参数“elementary_stream_info_length”包括在参数“program_stream_map()”中。

表1

图1的数字广播流发送设备100的TS产生单元120可将根据示例性实施例的3D视频开始描述符或3D视频注册描述符插入PMT作为3D视频认证信息。图2的数字广播流接收设备200的ES提取单元220可检查从单节目传输流提取的PMT信息中包括的3D视频开始描述符或3D视频注册描述符，并预测针对单节目传输流的ES的视频信息是否是关于3D视频的信息。另外，如果基于3D视频开始描述符或3D视频注册描述符确定在PMT信息中包括3D视频流描述符，则ES提取单元220可从PMT信息提取3D视频流描述符并从ES提取3D视频信息。

用于设置3D视频开始描述符的参数“3d_start_descriptor”或用于设置3D视频注册描述符的参数“3d_registration_descriptor”可包括在参数“descriptor()”中，参数“descriptor()”是包括在表1的PMT中的参数“program_stream_info_length”之后的描述符区。

表2示出表示3D视频开始描述符的参数“3d_start_descriptor”的语法的示例。

表2

语法
	3dd_start_descriptor(){
descriptor_tag
	descriptor_length
threed_info_start_code
	}

在MPEG TS的描述符区中，用户定义的描述符可被插入具有64～255之间的值的参数“descriptor_tag”。例如，图1的数字广播流发送设备100的TS产生单元120可将表示3D视频开始描述符的参数“3d_start_descriptor”插入具有值为0xF0的参数“descriptor_tag”的描述符区。

参数“descriptor_length”表示在参数“descriptor_length”之后的字节的数量。可设置ASCII码“3DAV”作为参数“threed_info_start_code”的值，从而使3D视频信息包括在单节目传输流中，并且使3D视频流描述符包括在PMT信息中。

表3示出表示3D视频注册描述符的参数“3d_registration_descriptor”的语法的示例。

表3

语法
	3d_registration_descriptor(){
descriptor_tag
	descriptor_length
format_identifier
	for(i＝0；i＜N；i++){
private_data_byte
	}
}

可将ASCII码“3DAV”设置为参数“format_identifier”的值，从而参数“format_identifier”表示3D视频格式数据包括在单节目传输流中，并且3D视频流描述符包括在PMT中。

表4示出表示链接描述符的参数“linking_descriptor”的语法的示例。

语法
	linking_descriptor(){
descriptor_tag
	descriptor_length
linking_priority
	distribution_indicator_flag
channel_indicator_flag
	pmt_indicator_flag
simulcast_flag
	Reserved
if(distribution_indicator_flag){
	linked_distribution_method
}
	if(channel_indicator_flag){
linked_ts_id
	linked_channel
}
	if(pmt_indicator_flag){
linked_pmt_pid
	Reserved
}
	linked_stream_PID
if(simulcast_flag){
	linked_service_indification_time
}
	Reserved
}

参数“linking_priority”表示链接优先级信息，链接优先级信息指示多个视频流之间的链接以及关联的视频流之间的优先级是存在还是不存在。定义当前视频流和与当前视频流关联的相对视频流之间的链接的参数“linking_prority”的值的示例性实施例基于表5。

表5

如果参数“linking_priority”的值是00，则两个视频流彼此没有链接。

如果参数“linking_priority”的值是01，则两个视频流彼此平等地链接而没有优先级。在这种情况下，当两个视频流被独立地编码从而如第一示例性实施例具有平等关系时，对于每个信道，参数“linking_priority”的值可被设置为01。

当立体视频的参考视点和附加视点是准确的时候，参数“linking_priority”的值可被设置为10或11。当参数“linking_priority”的值是10时，当前视频流具有比相对视频流更高的优先级。当参数“linking_priority”的值是11时，当前视频流具有比相对视频流更低的优先级。换而言之，当当前视频流包括参考视点的视频信息时，参数“linking_priority”的值可被设置为10。当当前视频流包括附加视点的视频信息时，参数“linking_priority”的值可被设置为11。

参数“distribution_indicator_flag”表示相同传输网络方法信息，其指示是否使用相同的传输网络方法发送和接收相互关联的视频流。

例如，当参数“distribution_indicator_flag”的值为0时，可指示使用相同的传输网络方法发送和接收相互关联的视频流。当参数“distribution_indicator_flag”的值为1时，可指示使用不同的传输网络方法发送和接收相互关联的视频流。

参数“channel_indicator_flag”表示相同信道信息，其指示是否经由相同的信道发送相互关联的多条视频信息。

例如，当参数“channel_indicator_flag”的值为0时，可指示使用相同的信道发送相互关联的视频流。当参数“channel_indicator_flag”的值为1时，可指示使用不同的信道发送相互关联的视频流。在如上参照图7、图8和图9描述的经由单个信道发送彼此链接的左视点视频信息和右视点视频信息的第二和第三示例性实施例中，参数“channel_indicator_flag”的值可被设置为0。在其它示例性实施例中，参数“channel_indicator_flag”的值可被设置为1。

参数“pmt_indicator_flag”表示相同单节目传输流信息，其表示在相同的单节目传输流内是否存在相互关联的视频流。

例如，当参数“pmt_indicator_flag”的值为0时，可指示在相同的单节目传输流内存在相互关联的视频流，诸如ES、PES等。当参数“pmt_indicator_flag”的值为1时，可指示相互关联的视频流(诸如ES、PES等)分别存在于不同的单节目传输流内。在以上参照图9描述的彼此链接的左视点视频信息和右视点视频信息包括在一个单节目中的第三示例性实施例中，参数“pmt_indicator_flag”的值可被设置为0。在其它示例性实施例中，参数“pmt_indicator_flag”的值可被设置为1。

参数“simulcast_flag”表示相同视点信息，其表示是否存在相同视点的相互关联的视频流。

例如，当参数“simulcast_flag”的值为0时，可指示相互关联的视频流作为相同视点的视频信息而存在。当参数“simulcast_flag”的值为1时，可指示在相同的时间点不存在相互关联的视频流，而数据可在稍后被提供。

参数“linked_distribution_method”表示链接视频传输网络方法信息，其表示发送相对视频流所通过的信道的传输网络方法。当表示相同传输网络方法的参数“linked_distribution_method”的值为1时，可设置链接视频传输网络方法信息以定义用于相对视频流的传输网络方法。表6示出了链接视频传输网络方法信息的示例。

表6

linked_distribution_method	Description
		0x00	地面广播
0x01	卫星广播

0x02	有线广播
		0x03	IPTV广播
0x04～0xFF	保留

参数“linked_ts_id”表示链接TS PID信息，其指示包括相互关联的视频流的多节目TS的PID。

参数“linked_channel”表示链接视频信道信息，其表示相互关联的多个视频流中的相对视频流被发送和接收所通过的信道。当表示相同信道信息的参数“channel_indicator_flag”的值为1时，可设置链接视频信道信息。

在卫星广播、地面广播和有线广播中，频率信息可被提供作为链接视频信道信息。在IPTV广播中，统一资源定位符(URL)信息可被提供作为链接视频信道信息。

参数“linked_pmt_pid”表示链接视频PID信息，其指示发送相对视频流所通过的单节目传输流的PMT的PID。当表示相同的单节目传输流信息的参数“linked_pmt_pid”的值为1时，可定义链接视频包标识符信息。

参数“linked_stream_PID”表示链接视频流PID信息，其指示相互关联的视频流中的相对视频流的PID。

参数“linked_service_identification_time”表示链接视频服务标识时间信息，其表示何时提供相互关联的视频流中的相对视频流的节目。例如，链接视频服务标识时间信息可按照月、日、小时和分钟为单位指示何时提供链接的节目。

图1的数字广播流发送设备100可将用于标识相互关联的视频流的存在和位置的链接信息(诸如链接描述符、链接标识符等)与所述相互关联的视频流一起发送。图2的数字广播流接收设备200可从接收的TS提取链接信息和视频流，并且还可根据链接信息提取相互关联的视频流，从而正确地再现3D视频。

在未链接的视频流之间使用链接描述符的示例如下。当表示链接优先级信息的参数“lining_priority”的值为00时，由于用于标识与当前视频流链接的相对视频流的信息没有被定义，因此参数“distribution_indicator_flag”、“channel_indicator_flag”和“pmt_indicator_flag”的值被设置为0。参数“linked_stream_PID”的值可被设置为针对3D视频的附加视点视频的视频信息而新定义的PID值。

根据示例性实施例的PMT信息可包括表示提供TS的服务提供者信息或广播站信息的参数“linked_network_id”。在基于数字视频广播(DVB)方法的数据广播系统中，使用参数“transport_stream_id”标识TS，并使用参数“original_network_id”标识服务提供者信息或广播站信息。因此，插入TS的节目可被安全地彼此区分。相应地，当图2的数字广播流接收设备200采用DVB方法时，可使用参数“linked_network_id”而不是参数“linked_channel”来准确地确定立体链接信息。参数“linked_channel”的值表示与当前TS关联的相对视频信息的信道，并且可根据广播方法或广播系统的类型而变化。

根据示例性实施例的链接描述符不限于表4中示出的链接描述符，并可根据链接描述符被扩展为包括多视点图像或用于预定目的的情况而适当地改变。

到目前为止描述的链接信息可针对每个视频信息被设置。然而，在未使用关于从附加视点到参考视点的链接的链接信息的情况下，包括可根据用户输入由用户选择的单节目的情况下，系统环境、通信环境等被固定为仅仅是参考视点，可使用仅针对基本视点视频信息设置链接信息的单向链接信息。

图1的数字广播流发送设备100的TS产生单元120可将当前视频流的3D视频流描述符插入当前视频流的PMT信息。图2的数字广播流接收设备200的ES提取单元220可从当前视频流的PMT信息提取3D视频流描述符。3D视频流描述符包括在图2的数字广播流接收设备200的再现单元230执行3D渲染时使用的附加信息，从而准确地恢复和再现当前视频流的视频数据。

表7示出包括根据示例性实施例的3D视频流描述符的参数“3d_video_stream_descriptor”。

表7

语法
	3d_video_stream_descriptor(){
descriptor_tag
	descriptor_length
3d_video_property
	linked_stream_coding_mode
full_image_size_indicator
	if(3d_video_property＝＝0x0f){

3d_composite_format
	is_left_first
}
	if(full_image_size_indicator＝＝0){
additional_view_image_size
	scaling_method
scaling_order
	}
if(3d_video_property＝＝3D){
	Is_Main
picture_display_order
	view_info
}
	else if(3d_video_property＝＝2D_Multi){
view_index
	}
es_icon_indicator
	transition_indicator
transition_time_stamp
	transition_message
Reserved
	}

参数“3d_video_property”表示3D视频属性信息，其表示当3D视频被构建时当前视频流的视频属性。

可参照以下的表8定义根据示例性实施例的3D视频属性信息。

表8

3d_video_property	描述
		0x00	左视频
0x01	右视频
		0x02	2D视频

0x03	深度
		0x04	视差
0x05	3D_DOT
		0x06	2D_Multi
0x07-0x0e	保留
		0x0f	3d_composite_format

当当前视频流的参数“3d_video_property”的值为0x00时，当前视频流是立体视频的左视点视频。当当前视频流的参数“3d_video_property”的值为0x01时，当前视频流是立体视频的右视点视频。

当当前视频流的参数“3d_video_property”的值为0x02时，当前视频流是2D视频。当当前视频流的参数“3d_video_property”的值为0x03或0x04时，当前视频流分别是用于立体视频的左视点视频的附加视点视频的深度信息或差距信息。

如果用2D视频信息和深度信息构建立体视频，则包括2D视频信息的视频流的参数“3d_video_property”的值可被设置为0x02，包括深度信息的视频流的参数“3d_video_proptery”的值可被设置为0x03。

当当前视频流的参数“3d_video_proptery”的值为0x05时，3D视频是基于3D点方法或随机点立体图方法的图像。当当前视频流的参数“3d_video_proptery”的值为0x06时，当前视频流是针对多视点视频的多个2D视频流。

当当前视频流的参数“3d_video_proptery”的值为0x0f时，当前视频流是通过将左视点图像和右视点图像构成单个帧而获得的3D复合格式(诸如按照并排格式或按照顶部和底部格式)的视频流。

在表8中没有定义的其它字段可保留作为保留字段。可根据用户需要在保留字段中设置新视频属性的视频格式。例如，可根据需要将3D复合格式以及深度信息和差距信息的组合的视频格式分配到保留字段。

参数“linked_stream_code_mode”表示链接视频编码方法信息，其表示在相互关联的多条视频信息之间的压缩编码方法。参照表9设置根据示例性实施例的链接视频编码方法信息。

表9

linked_stream_coding_mode

描述

000	独立编码
		001	可分级编码
010	差分图像编码
		011～111	保留

当参数“linked_stream_coding_mode”的值是000时，两个相互关联的视频数据的项被独立地编码。在这种情况下，图1的数字广播流发送设备100可通过分别使用两个独立的视频编码器来压缩两个视频数据项，并按照两个视频流的形式发送这两个视频数据项。图2的数字广播流接收设备200可接收两个视频流并通过使用两个独立的视频解码器来从这两个视频流中的每一个恢复视频数据。

当参数“linked_stream_coding_mode”的值为001时，使用可分级编码方法来对相互关联的视频数据项进行编码。当参数“linked_stream_coding_mode”的值为010时，左视点图像和右视点图像之间的差分图像被编码为附加视点视频信息。

参数“full_image_size_indicator”表示尺寸指示符信息，其指示当前视频流是否以原始视频信息的原始尺寸发送视频信息。例如，尺寸指示符信息可表示当前视频流的视频数据相对于原始视频数据的原始尺寸的比率。当参数“full_image_size_indicator”的值为0时，当前视频数据的尺寸与原始视频数据的完全尺寸不同。当参数“full_image_size_indicator”的值为1时，当前视频数据的尺寸与原始视频数据的完全尺寸相同。

某些偏振类型的显示装置将图像的垂直分辨率减半并显示具有减半的垂直分辨率的图像。即使在以全分辨率接收3D视频数据时，偏振类型的显示装置将3D视频数据的垂直分辨率减半并显示具有减半的垂直分辨率的图像。由于全分辨率的基本视点视频数据和全分辨率的附加视点视频数据不需要被提供给这些显示装置，因此在传输数据量和数据处理速率方面提供通过将垂直分辨率减半而获得的半尺寸视频数据是有效的。

考虑与用于2D内容服务的广播系统的兼容性，以全分辨率发送基本视点视频，因为附加视点视频在3D视频再现期间被使用因此以半尺寸发送和接收附加视点视频，从而有效地发送和接收视频流。另外，可按照1/2或1/4尺寸而不是全尺寸发送和接收深度信息和视差信息。

在3D复合格式的并排格式中，复合帧的尺寸是帧的原始尺寸，构成复合帧的左视点帧和右视点帧的尺寸可被减少到一半的尺寸。因此，在这种情况下，参数“full_image_size_indicator”的值不是1。如果左视点帧和右视点帧中的每一个都被创建为具有原始帧的全尺寸从而3D复合格式帧的尺寸是原始帧的尺寸的两倍，则参数“full_image_size_indicator”的值可被设置为1。

当当前视频流的3D视频属性信息是3D复合格式时，即，当参数“3d_video_property”的值表示“3d_compostie_format”时，参数“3d_composte_format”和参数“is_left_first”可被设置为如下。

参数“3d_composote_format”表示3D复合格式信息，其表示通过构成与左视点视频和右视点视频对应的图像来构建3D复合格式图像的方法。3D复合格式信息对应于如表10中的3D复合格式的类型。

表10

当当前视频流的参数“3d_composite_format”的值为0x00时，当前视频数据的3D复合格式是并排格式。类似地，当当前视频流的参数“3d_composite_format”的值为0x01、0x02、0x03、0x04、0x05或0x06时，当前视频数据的3D复合格式分别为顶部和底部格式、垂直线交错格式、水平线交错格式、帧顺序格式、场顺序格式或棋盘格式。

并排格式是这样的图像格式：其中，分别对应于3D复合格式图像的左区域和右区域的左视点图像和右视点图像被并排地排列。顶部和底部格式是这样的图像格式：其中，分别对应于3D复合格式图像的上区域和下区域的左视点图像和右视点图像被排列。

垂直线交错格式是这样的图像格式：其中，分别对应于3D复合格式图像的奇数垂直线和偶数垂直线的左视点图像和右视点图像被排列。水平线交错格式是这样的图像格式：其中，分别对应于分别对应于3D复合格式图像的奇数水平线和偶数水平线的左视点图像和右视点图像被排列。

帧顺序格式是这样的图像格式，其中，分别对应于3D复合格式图像的奇数帧和偶数帧的左视点图像和右视点图像被排列。场顺序格式是这样的图像格式，其中，分别对应于3D复合格式图像的奇数场和偶数场的左视点图像和右视点图像被排列。

棋盘格式是这样的图像格式，其中，分别对应于3D复合格式图像的水平方向上的像素和垂直方向上的像素的左视点图像和右视点图像以像素为单位被交替地排列。

参数“is_left_first”表示格式排列顺序信息，其表示3D复合格式图像的左视点图像和右视点图像被排列的顺序。参数“is_left_first”可表示哪个区域是当前视频流的3D复合格式图像的左视点图像以及哪个区域是其右视点图像。参照表11，根据示例性实施例的格式排列顺序信息与3D复合格式信息链接，从而3D复合格式图像的左视点图像和右视点图像的位置可被设置如下。

表11

当参数“is_left_first”的值为0时，左视频数据被排列在并排格式图像的左区域、顶部和底部格式图像的上区域、垂直线交错格式图像的奇数线、水平线交错格式图像的奇数线、帧顺序格式图像的奇数帧、场顺序格式图像的奇数场和棋盘格式图像的奇数像素中。因此，右视点视频数据被排列在与每个3D复合格式图像的排列左视点视频数据的区域相对的区域中。

当参数“is_left_first”的值为1时，右视点视频数据和左视点视频数据按照与参数“is_left_first”的值为0时的排列方式相对的方式被排列。

当当前视频流的尺寸指示符信息表示左视点视频信息和右视点视频信息以从原始左视点视频信息和右视点视频信息的全尺寸减小的尺寸被发送时，即，当参数“full_image_size_indicator”的值为0时，参数“additional_view_image_size”、参数“scaling_method”和参数“scaling_order”可被设置为如下。

参数“additional_view_image_size”包括附加视点图像尺寸信息，其表示当前视频流的附加视点视频信息的图像尺寸相对于原始图像尺寸被放大或缩小的比率。可参照表12将根据示例性实施例的附加视点视频信息设置为如下。

表12

additional_view_image_size	描述
		0x00	水平减半
0x01	垂直减半
		0x02	四分之一大小
0x03～0x0f	保留

当参数“additional_view_image_size”的值为0x00时，其表示在水平方向上将附加视点视频信息的图像尺寸减半的方法。该方法是能够在用于在水平方向上将输入视频数据减半并再现减半的结果的3D显示装置(包括视差栅格(parallax barrier)显示装置)中被有效地使用的附加视点图像缩减方法。

当参数“additional_view_image_size”的值为0x01时，其表示垂直方向上将附加视点视频信息的图像尺寸减半的方法。该附加视点图像缩减方法可在用于在垂直方向上将图像的分辨率减半并再现减半的结果的显示装置(包括在以3D视频的水平线为单位改变偏振角度的同时执行再现的显示装置)中被有效地使用。

当参数“additional_view_image_size”的值为0x02时，其表示分别在垂直方向和水平方向上将图像尺寸减半，从而将图像尺寸减少到整体的1/4的方法。这种附加视点图像缩减方法可在深度信息或视差信息而不是视频数据中被使用以减少损失并增加压缩效率。

参数“scaling_method”表示按比例缩减方法信息，其表示按比例缩减3D复合格式图像的左视点图像和右视点图像的方法。3D复合格式按比例缩减针对多个视点中的每个视点的帧的视频数据，从而使单个帧包括针对多个视点的多条数据。可使用多种按比例缩减方法中的任意一种来执行按比例缩减。然而，由于在压缩之前发生的预处理过程中执行按比例缩减方法，因此如果在视频解码期间根据与按比例缩减方法不对应的按比例放大方法来恢复图像尺寸，则在恢复的图像上会产生伪影(artifacts)。现在将参照图13描述在图像按比例缩减和图像恢复期间会产生伪影的示例。

图13示出根据示例性实施例的使用了针对3D复合格式的按比例缩减方法的示例。

例如，只有原始图像1310的线1312、1314、1316和1318中的偶数线1314和1318被下采样并排列在顶部和底部格式图像的上区域1320中。换而言之，顶部和底部格式图像的上区域1320的线1322和1324与原始图像1310的偶数线1314和1318相同。

然而，如果顶部和底部格式图像的线1322和1324被排列在恢复的图像1330的奇数线1332和1336的位置而不是在恢复的图像1330的偶数线1334和1338的位置，则在图像解码期间执行的按比例放大操作过程中，在恢复的图像1330的所有像素中会发生垂直方向上的一像素不匹配。如果左视点图像和右视点图像以一个像素为单位而彼此不匹配，则会在3D视频中发生最大两个像素为单位的不匹配。

因此，为了实现3D视频的准确恢复，图1的数字广播流发生设备和图2的数字广播流接收设备200可发送和接收针对3D复合格式的按比例缩减方法。根据示例性实施例的按比例缩减方法信息可被设置为如表13中的参数“scaling_method”。

表13

scaling_method	描述
		0x00	采样方法
0x01	平均方法
		0x02～0x03	保留

当参数“scaling_method”的值为0x00时，当前3D复合格式可包括已经根据采样方法被按比例缩减的左视点图像信息和右视点图像信息，其中，在所述采样方法中，选择并提取每两个连续线中的一个。

当参数“scaling_method”的值为0x01时，当前3D复合格式可包括已经对原始左视点图像和原始右视点图像中的每一个的两条连续线进行按比例缩减的、具有单条线的左视点图像信息和右视点图像信息，其中，通过将两条连续线替换为对两条连续线执行的算术运算的结果来执行按比例缩减。形成具有按比例缩减的左视点图像和按比例缩减的右视点图像的3D复合格式的代表性方法是平均方法，其中，在所述平均方法中，两条连续线的像素之间的平均值被确定为单条线的像素值。

参数“scaling_order”表示按比例缩减采样顺序信息，其表示根据采样方法按比例缩减的3D复合格式的采样顺序。当表示按比例缩减采样顺序信息的参数“scaling_method”的值为0x00时，其表示左视点图像和右视点图像的奇数线和偶数线中的哪些线被采样以构成3D复合格式。在表14中示出了根据示例性实施例的使用按比例缩减采样顺序信息的示例。

表14

scaling_order	左视点	右视点
			0x00	奇数线	偶数线
0x01	偶数线	奇数线
			0x02	奇数线	偶数线
0x03	偶数线	奇数线

当参数“scaling_order”的值为0x00时，左视点图像的奇数线被采样并且右视点图像的偶数线被采样以构建3D复合格式图像。类似地，当参数“scaling_order”的值为0x01时，左视点图像的偶数线被采样并且右视点图像的奇数线被采样以构建3D复合格式图像。当参数“scaling_order”的值为0x02时，左视点图像的奇数线和右视点图像的偶数线被采样以构建3D复合格式图像。当参数“scaling_order”的值为0x03时，左视点图像的偶数线和右视点图像的奇数线被采样以构建3D复合格式图像。

以下，当当前视频流的视频属性信息表示3D视频数据时，即，当参数“3d_video_property”是“左视频”或“右视频”时，设置参数“Is_Main”、参数“picture_dispaly_order”和参数“view_info”。

参数“Is_Main”表示基本视点指示符信息，其表示当前视频流是否为基本视点视频流。例如，当表示当前视频流的视频属性信息的参数“3d_video_property”为“左视频”时，参数“Is_Main”可如表15被设置。

表15

Is_Main	描述
		0x0	子视频
0x1	主视频

也就是说，当参数“Is_Main”的值为0时，左视点视频数据被设置为是子视频。当参数“Is_Main”的值为1时，左视点视频数据被设置为是主视频。

参数“picture_display_order”表示显示顺序信息，其表示左视点和右视点的ES被显示的顺序。

参数“view_info”表示3D视频视点相关信息，其中，如果当前视频流是3D视频，则视点信息针对小孩和成人被不同地设置。考虑到小孩和成人在双眼差异方面不相同的事实，可针对小孩和成人不同地设置视点相关信息，诸如深度和视差。例如，针对成人的图像是具有相对较大的双眼视差的图像，针对小孩的图像是具有相对较小的双眼视差的图像。由于参数“view_info”的使用，可对针对成人的图像和针对小孩的图像进行区分，并且还可根据3D显示装置的屏幕尺寸执行选择性的3D再现。参数“view_info”可被使用，从而如果3D显示装置的屏幕尺寸相对较大，则具有相对较小双眼视差的3D图像被再现，如果3D显示装置的屏幕尺寸相对较小，则具有相对较大的双眼视差的3D图像被再现。当考虑这种情况制作3D视频内容时，无论3D显示器的尺寸如何，立体效果可被不均匀地提供给观看者。

参数“view_index”表示视频索引信息，如果当前视频流与多个2D视频(每个2D视频均包括多个视点)中的一个2D视频相关，则其指示当前视频流的多个视点中的当前视点。换而言之，如果表示当前视频流的视频属性信息的参数“3d_video_property”是“2D_Multi”，则可设置参数“view_index”。当包括多个2D视频的服务被接收时可使用参数“2D_Multi”。在这种情况下，参数“view_index”可用于彼此区分2D运动图像。

参数“es_icon_indicator”表示3D视频服务通知指示符，其指示来自内容提供者的3D服务相关图标的提供。3D视频服务的通知的指示可通过3D视频服务通知指示符被插入内容而不与机顶盒或TV重叠。

图1的数字广播流发送设备100和图2的数字广播流接收设备200可发送和接收与当前视频流中的2D或3D再现模式的转换相关联的信息。以下，再现模式转换指示符、再现模式转换时间信息等可被设置为与再现模式转换相关联的信息。

参数“transition_indicator”包括再现模式转换指示符，其指示在当前PMT信息之后的PMT信息中是否设置了与当前PMT信息中设置的2D/3D视频再现模式不同的2D/3D视频再现模式。再现模式转换指示符指示当在后续PMT信息和当前PMT信息中设置了不同的多条再现模式信息时，再现模式转换已经发生。

参数“transisition_time_stamp”表示再现模式转换时间信息，其以显示时间戳(PTS)为单位表示再现模式转换发生的时间。再现模式转换时间信息可被设置为时间的绝对长度，或者被设置为从预定的参考时间点开始的相对时间长度。

参数“transisition_message”包括用于向观看者通知再现模式转换的各种消息信息，诸如文本、图像、音频等。例如，参数“transistion_message”包括再现模式转换消息的尺寸信息和消息信息，再现模式转换信息可通过使用重复与消息尺寸参数的值对应的次数的for语句被表示为8比特字符串。

根据示例性实施例的3D视频流描述符不限于表7中示出的语法，并可在3D视频扩展到多视点图像或用于预定目的时被适当地改变。

图1的数字广播流发送设备100的TS产生单元120可将用于准确区分多个多视点视频流的多视点视频流描述符插入当前视频流的PMT信息。图2的数字广播流接收设备200的ES提取单元220可从当前视频流的PMT信息提取多视点视频流描述符。多视点视频流描述符包括由图2的数字广播流接收设备200的再现单元230使用以准确地恢复和再现多视点视频流的附加信息。

根据示例性实施例的多视点视频流描述符可如表16被设置。

表16

语法
	multiview_video_stream_descriptor(){
descriptor_tag
	descriptor_length
number_of_views
	mv_numbering

}

参数“number_of_views”表示关于多视点视频流的视点数量的信息。

参数“mv_numbering”表示多视点视频流的视频索引信息。例如，参数“mv_numbering”的值可被设置为从针对最左边的视点视频流的0开始，向最左边的视点视频流的右边每个视频流加1。最左边视点视频流的参数“mv_numbering”的值可被设置为0，最左边视点视频流的参数“mv_numbering”的值可被设置为通过从参数“number_of_views”的值减去1而获得的值。

可从参数“linking_descriptor”的参数“linking_priority”预测多视点视频流中的基本视点视频流的位置。基本视点视频流的参数“linking_priority”的值可被设置为10，其它视点视频流的参数“linking_priority”的值可都被设置为11。

通过参照前述的链接描述符和3D视频流描述符，图1的数字广播流发送设备100可如表17设置与基本视点视频流对应的左视点视频流的部分链接描述符和3D视频流描述符，并可如表18设置与附加视点视频流对应的右视点视频流的部分链接描述符和3D视频流描述符。

表17

语法	值
		linking_priority	10
3d_video_property	0000
		linked_stream_coding_mode	000
full_image_size_indicator	1

表18

语法	值
		linking_priority	11
3d_video_property	0001
		linked_stream_coding_mode	000
full_image_size_indicator	1

如果图2的数字广播流接收设备200提取如表17设置的针对第一视频流的链接描述符和3D视频流描述符，则由于第一视频流的链接优先级信息是“linking_priority＝＝10”并且第一视频流的3D属性信息是“3d_ideo_property＝＝0000”，因此可确定第一视频流是参考视点的左视点视频流，其具有比与第一视频流关联的相对视频流更高的优先级。

如果图2的数字广播流接收设备200提取如表18设置的针对第二视频流的链接描述符和3D视频流描述符，则由于第二视频流的链接优先级信息是“linking_priority＝＝11”并且第二视频流的3D属性信息是“3d_video_property＝＝0001”，因此可确定第二视频流是附加视点的右视点视频流，其具有比与第二视频流关联的相对视频流更低的优先级。

根据第一视频流和第二视频流的参数“linked_stream_coding_mode”的值为000，图2的数字广播流接收设备200可确定第一视频流和第二视频流已根据与用于对相对视频流编码的编码方法独立的编码方法被编码，根据参数“full_image_size_indicator”的值为1，可确定保持了原始图像尺寸。

图14、图15、图16、图17和图18是根据示例性实施例的数字广播流接收设备的再现单元的示意图。现在将参照图14到图18描述图2的数字广播流接收设备200的再现单元230从视频流恢复和再现3D或2D视频数据的方法。

根据再现单元230的第一示例性实施例1400，可通过流解码器1410和1420分别恢复左视点视频数据1415和右视点视频数据1425。左视点视频数据1415和右视点视频数据1425可被转换为能够被3D格式化器或渲染器1430再现为3D视频的3D再现格式。3D再现格式的信号可被3D显示装置1440再现。

根据再现单元230的第二示例性实施例1500，可通过流解码器1510和1520分别恢复2D视频数据1515和深度/视差视频1525。2D视频数据1515和深度/视差视频1525可被3D渲染器1530转换为3D再现格式。3D再现格式的信号可被3D显示装置1540再现。

根据再现单元230的第三示例性实施例1600，可通过流解码器1610和1620分别恢复2D视频数据1615和3D复合视频1625。3D复合视频1625被3D格式化器1630转换为3D再现格式。2D视频数据1615和3D再现格式的信号可基于用户输入或自动再现模式转换算法经过再现模式转换处理1640，并随后可被3D显示装置1650选择性地再现。

根据再现单元230的第四示例性实施例1700，可通过流解码器1710和1720分别恢复主2D视频数据1715和子2D视频数据1725。主2D视频数据1715和子2D视频数据1725可基于用户输入或主/子视频选择算法经过视频转换处理1730，并随后可被2D显示装置1740选择性地再现。

根据再现单元230的第五示例性实施例1800，可通过流解码器1810和1820分别恢复主2D视频数据1815和子2D视频数据1825。可通过2D显示装置1830以PIP模式再现主2D视频数据1815和子2D视频数据1825。换而言之，主2D视频数据1815可被再现在2D显示装置1830的屏幕1840上以整体地覆盖屏幕1840，子2D视频数据1825可被再现在2D显示装置1830的部分屏幕1850上。

主2D视频和子2D视频不是用于实现3D内容的立体效果的视频，但可以是相互关联的内容的视频。例如，主视点的2D视频可包含棒球比赛场景的内容，子视点的2D视频可包含棒球比赛的附加信息的内容，诸如看台场景、当前投手的投球姿势的分析信息、当前投手的平均击球信息等。

在这种情况下，图1的数字广播流发送设备100可设置和发送针对主2D视频和子2D视频的链接信息和3D视频流信息，图2的数字广播流接收设备200可通过使用链接信息和3D视频流信息恢复彼此链接的主2D视频和子2D视频，并选择性地再现主2D视频和子2D视频，或以PIP模式再现主2D视频和子2D视频。因此，用户可以在以主视点持续观看棒球比赛的同时以子视点观看关于棒球比赛的各种信息。

针对提供3D视频和2D视频的数据流，图1的数字广播流发送设备100发送并且图2的数字广播流接收设备200接收数据流的相互关联的视频流之间的链接信息，从而在保证与用于2D内容服务的数字广播系统的兼容性的同时实现3D数字视频内容广播系统。

图1的数字广播流发送设备100和图2的数字广播流接收设备200通过在保证与诸如数字视频盘(DVD)的介质的兼容性的同时提供2D数字内容和3D数字内容，来提供不被时间和地点打断的3D运动图像服务。

图19是根据示例性实施例的能够提供3D视频服务的数字广播流发送方法的流程图。

在操作1910，产生针对多条视频信息的多个ES，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个。

在操作1920，多条视频信息之间的链接信息和多个ES被复用以产生至少一个TS。

在操作1930，经由至少一个信道发送至少一个TS。

在操作2010，经由至少一个信道接收至少一个TS。所述至少一个TS可包括多条视频信息，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中的至少一个。

在操作2020，至少一个接收的TS被解复用以从TS提取多条视频信息之间的链接信息以及针对所述多条视频信息的至少一个ES。

在操作2030，考虑链接信息表示的链接，通过对提取的至少一个ES进行解码而恢复的3D视频数据和2D视频数据中的至少一个被再现。

图19的数字广播流发送方法和图20的数字广播流接收方法可分别通过计算机程序交互被执行。通过如此，如上参照图1、图2、图5-图12和图14-图18描述的根据示例性实施例执行的数字广播流发送设备100和数字广播流接收设备200的操作可被实现。

示例性实施例可被编写为计算机程序并可在使用计算机可读记录介质执行程序的通用数字计算机中实现。计算机可读记录介质的示例包括磁存储介质(例如，ROM、软盘、硬盘等)和光学记录介质(例如，CD-ROM或DVD)。另外，设备100、200、300、400、600、800、900和1000中的一个或多个单元可包括执行存储在计算机可读介质中的计算机程序的处理器或微处理器。

虽然以上已经具体地示出和描述了示例性实施例，但是本领域的普通技术人员应理解，在不脱离权利要求限定的本发明构思的精神和范围的情况下，可在形式和细节上对其进行各种改变。

Claims

1.一种提供三维(3D)视频服务的数字广播流发送方法，所述方法包括：

产生针对多条视频信息的多个基本流，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个；

通过将产生的所述多个基本流与链接信息进行复用来产生至少一个传输流，其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；

经由至少一个信道发送产生的所述至少一个传输流。

2.如权利要求1所述的数字广播流发送方法，其中：

产生所述至少一个传输流的步骤包括：单独地对产生的所述多个基本流中的每一个进行复用以产生多个单节目传输流；单独地对产生的所述多个单节目传输流中的每一个进行复用以产生多个多节目传输流；

发送产生的所述至少一个传输流的步骤包括：经由不同的信道发送产生的所述多个多节目传输流。

3.如权利要求1所述的数字广播流发送方法，其中，产生所述至少一个传输流的步骤包括：

单独地对产生的所述多个基本流中的每一个进行复用以产生多个单节目传输流；对产生的所述多个单节目传输流进行复用以产生单个多节目传输流；

发送产生的所述至少一个传输流的步骤包括：经由单个信道发送产生的所述单个多节目传输流。

4.如权利要求1所述的数字广播流发送方法，其中：

产生所述至少一个传输流的步骤包括：

对产生的所述多个基本流中的针对至少一个基本视点视频的每个基本视点基本流进行复用，以产生针对所述至少一个基本视点视频的至少一个基本视点单节目传输流，并对产生的所述至少一个基本视点单节目传输流中的每一个进行复用以产生针对所述至少一个基本视点视频的至少一个基本视点多节目传输流；

对产生的所述多个基本流中的、针对关于对应于所述至少一个基本视点视频的至少一个附加视点视频的信息的附加视点基本流进行复用，以产生针对所述至少一个附加视点视频的单个附加视点单节目传输流，并对产生的所述单个附加视点单节目传输流进行复用以产生针对所述至少一个附加视点视频的单个附加视点多节目传输流；

发送产生的所述至少一个传输流的步骤包括：经由不同的信道发送产生的所述至少一个基本视点多节目传输流和产生的所述单个附加视点多节目传输流。

5.如权利要求1所述的数字广播流发送方法，其中，链接信息包括链接标识符和链接描述符之一，所述链接标识符和链接描述符之一表示在产生的所述至少一个传输流中包括的多条视频信息中是否存在相互链接的多条视频信息，

其中，链接标识符被插入所述至少一个传输流的节目关联表，并且表示这样的信息：该信息指示由节目关联表标识的相互链接的多条视频信息的节目映射表是否彼此链接，

其中，链接描述符被插入产生的针对互相链接的多个视频信息的多个基本流的节目映射表。

6.一种提供三维(3D)视频服务的数字广播流接收方法，所述方法包括：

经由至少一个信道接收针对多条视频信息的至少一个传输流，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个；

对接收的所述至少一个传输流进行解复用以从所述至少一个传输流提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个基本流；

对提取的所述至少一个基本流进行解码以基于提取的链接信息再现通过解码恢复的3D视频和2D视频中的至少一个。

7.如权利要求6所述的数字广播流接收方法，其中：

接收的步骤包括：通过对所述至少一个信道中的每个信道进行解码并从所述至少一个信道中的每个信道接收单个多节目传输流来接收至少一个多节目传输流；

提取的步骤包括：

通过对接收的所述至少一个多节目传输流中的每一个进行解复用，并从解复用的所述至少一个多节目传输流中的每一个提取单个单节目传输流，来提取至少一个单节目传输流；

通过对提取的所述至少一个单节目传输流中的每一个进行解复用，并从解复用的所述至少一个单节目传输流中的每一个提取单个基本流，来提取所述至少一个基本流。

8.如权利要求6所述的数字广播流接收方法，其中：

接收的步骤包括：通过对所述至少一个信道中的一个信道进行解码来经由该信道接收多节目传输流；

提取的步骤包括：

通过对接收的多节目传输流进行解复用来提取至少一个单节目传输流；

9.如权利要求6所述的数字广播流接收方法，其中：

提取的步骤包括：

通过对接收的多节目传输流进行解复用来提取单节目传输流；

通过对提取的单节目传输流进行解复用来提取所述至少一个基本流。

10.如权利要求6所述的数字广播流接收方法，其中：

接收的步骤包括：通过对所述至少一个信道中的每一个信道进行解码，并经由所述至少一个信道中的每个信道接收至少一个基本视点多节目传输流和单个附加视点多节目传输流中的单个多节目传输流，来接收针对基本视点视频的至少一个基本视点多节目传输流和针对附加视点视频的单个附加视点多节目传输流；

提取步骤包括：

通过将接收的所述至少一个基本视点多节目传输流中的每一个解复用为单个单节目传输流，来从接收的所述至少一个基本视点多节目传输流提取至少一个基本视点单节目传输流，并通过将提取的所述至少一个基本视点单节目传输流中的每一个进行解复用为一个基本视点基本流，来提取至少一个基本视点单节目传输流；

从接收的单个附加视点多节目传输流提取至少一个附加视点单节目传输流，并通过将提取的所述至少一个附加视点单节目传输流中的每一个解复用为一个附加视点基本流，来从提取的所述至少一个附加视点单节目传输流提取至少一个附加视点基本流。

11.如权利要求6所述的数字广播流接收方法，其中，链接信息包括链接标识符和链接描述符之一，所述链接标识符和链接描述符之一表示在接收的所述至少一个传输流中包括的多条视频信息中是否存在相互链接的多条视频信息，

其中，链接标识符从所述至少一个传输流的节目关联表被提取，并且表示这样的信息：该信息指示由节目关联表标识的相互链接的多条视频信息的节目映射表是否彼此链接，其中，链接描述符从针对相互链接的多条视频信息的所述至少一个基本流的节目映射表被提取。

12.一种其上记录有用于权利要求1的数字广播流发送方法的程序的计算机可读记录介质。

13.一种其上记录有用于权利要求6的数字广播流接收方法的程序的计算机可读记录介质。

14.一种提供三维(3D)视频服务的数字广播流发送设备，所述设备包括：

基本流产生单元，产生针对多条视频信息的多个基本流，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个；

传输流产生单元，通过将产生的所述多个基本流与链接信息进行复用来产生至少一个传输流，其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；

发送单元，经由至少一个信道发送产生的所述至少一个传输流。

15.一种提供三维(3D)视频服务的数字广播流接收设备，所述设备包括：

传输流接收单元，经由至少一个信道接收针对多条视频信息的至少一个传输流，所述多条视频信息包括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的二维(2D)视频中的至少一个；

基本流提取单元，对接收的所述至少一个传输流进行解复用以从所述至少一个传输流提取用于标识与所述多条视频信息链接的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个基本流；

再现单元，基于链接信息所表示的链接，再现通过对提取的所述至少一个基本流进行解码而恢复的3D视频数据和2D视频数据中的至少一个。