CN103081498A - 数字接收器和用于在数字接收器中处理3d内容的方法 - Google Patents
数字接收器和用于在数字接收器中处理3d内容的方法 Download PDFInfo
- Publication number
- CN103081498A CN103081498A CN2011800424056A CN201180042405A CN103081498A CN 103081498 A CN103081498 A CN 103081498A CN 2011800424056 A CN2011800424056 A CN 2011800424056A CN 201180042405 A CN201180042405 A CN 201180042405A CN 103081498 A CN103081498 A CN 103081498A
- Authority
- CN
- China
- Prior art keywords
- service
- pip
- information
- channel
- expansion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/189—Recording image signals; Reproducing recorded image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Library & Information Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
根据本发明,一种处理3D视频数据的数字接收器包括:接收单元,用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;解复用器,用于分别从所述第一广播信号和所述第二广播信号中解复用3D服务数据和信令数据;控制单元,用于基于经解复用的第一信令数据来获取与接收所述第二广播信号的频道相关的信息,以控制所述第二广播信号的接收,并且基于所述第二信令数据而控制接收到的第二广播信号,使得在该第二广播信号中的3D服务数据被输出到显示画面的预定点;解码器,用于解码所述3D服务数据的每一个数据;格式化器,根据所述显示画面的输出格式来格式化经解码的3D服务数据的每一个数据;和显示单元,用于将经格式化的3D服务数据的每一个数据显示在画面上。根据本发明的处理3D视频数据的数字接收器的另一个示例包括:接收单元,用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;解复用器,用于分别从所述第一广播信号和所述第二广播信号中解复用3D服务数据和信令数据;控制单元,用于基于经解复用的第一信令数据而控制接收到的第二广播信号,使得第二广播信号被转换为3D扩展服务数据并且在显示画面的预定点处显示。解码器,用于解码所述3D服务数据的每一个数据;格式化器,根据所述显示画面的输出格式来格式化经解码的3D服务数据的每一个数据;和显示单元,用于将经格式化的3D服务数据的每一个数据显示在画面上。
Description
技术领域
本发明涉及数字接收器,更具体地,涉及处理三维内容的数字接收器和方法。
背景技术
随着三维电视(3DTV)的引入,3D图像内容通过数字广播的传输以及基于存储介质的三维(3D)图像内容的分配已经被激发。
一般地,三维图像利用立体视觉原理提供了立体视觉效果。人通过双目视差(即,基于在两眼之间的大约65mm的距离的视差)感觉立体效果。因此,基于与左眼和右眼相关的平面图,3D图像可以提供立体视觉效果和透视效果。
3D图像显示方法可以包括立体视觉类型显示方法、体积类型显示方法、全息摄影类型显示方法。在立体视觉类型显示方法中,提供了左眼看的左视图和右眼看的右视图,并且通过使用偏光眼镜或显示装置,用户分别通过左眼和右眼来看左视图和右视图,以感受3D图像效果。
同时,如上所述,3D内容的左视图和右视图被传输到数字接收器,该数字接收器正确地将3D内容的左视图和右视图处理为3D图像。因此,需要用来处理3D内容的信令信息。
而且,与传统的数字接收器相比,数字接收器需要更高的硬件水平和处理能力来接收和处理3D内容。
然而,针对3D内容,数字接收器仍然不支持或处理对于2D内容可用的服务,导致用户的不便。
发明内容
技术问题
鉴于以上问题做出了本发明,并且本发明的目的是即使在3D环境中也支持在2D环境中被支持的服务。
本发明的另一个目的是提供除了与3D服务相关的主要服务之外,能够正确地处理PIP或预览服务的设备和方法。
本发明的另一个目的是定义和提供与3D PIP或预览服务相关的信令数据。
本发明的又一个目的是将3D PIP或预览服务应用于使用与3D PIP或预览服务相关的信息的内容指南。
技术方案
公开了根据本发明的数字接收器和用于在数字接收器中处理3D视频数据的方法。
根据本发明的处理3D视频数据的数字接收器的示例包括:接收单元,所述接收单元用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;解复用器,所述解复用器用于从所述第一广播信号和所述第二广播信号中解复用3D服务数据和所述信令数据;控制器,所述控制器用于基于经解复用的第一信令数据来获取与接收所述第二广播信号的频道相关的信息,以控制所述第二广播信号的接收,并且控制基于所述第二信令数据而接收到的所述第二广播信号中的所述3D服务数据被输出到显示画面的预定位置;解码器,所述解码器用于解码所述3D服务数据;格式化器,所述格式化器根据所述显示画面的输出格式来格式化经解码的3D服务数据;以及,显示单元,所述显示单元用于将经格式化的3D服务数据输出到所述显示画面。
根据本发明的处理3D视频数据的数字接收器的示例包括:接收单元,所述接收单元用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;解复用器,所述解复用器用于从所述第一广播信号和所述第二广播信号中解复用3D服务数据和所述信令数据;控制器,所述控制器用来基于经解复用的第一信令数据而控制接收到的第二广播信号转换为3D扩展服务并且输出到显示画面的预定位置;解码器,所述解码器用于解码所述3D服务数据;格式化器,所述格式化器根据所述显示画面的输出格式来格式化经解码的3D服务数据;以及,显示单元,所述显示单元用于将经格式化的3D服务数据输出到所述显示画面。
根据本发明的在数字接收器中处理3D视频数据的方法的示例包括:通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号;基于所述第一信令数据而通过第二频道来接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;基于所述第二信令数据而解码3D服务数据;以及,将经解码的第一3D服务数据和经解码的第二3D服务数据输出到显示画面的预定区域。
根据本发明的在数字接收器中处理3D视频数据的方法的示例包括:通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号;通过第二频道来接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;从所述第一广播信号和所述第二广播信号中解析3D服务数据和所述信令数据;基于所述第一信令数据而将所述第二3D服务数据转换为3D扩展服务;解码所述3D服务数据;以及,将经解码的3D服务数据输出到显示画面的预定区域。
所述第一3D服务可以是3D基本服务或3D扩展服务,所述第二3D服务可以是根据所述第一3D服务的类型决定的3D扩展服务或3D基本服务,以及,所述3D扩展服务可以是3D PIP服务和/或3D预览服务。
所述第一信令数据可以包括用来标识通过相应虚拟频道发送的所述第一3D服务是所述3D基本服务或所述3D扩展服务的信息。
如果所述第一3D服务是所述3D基本服务,则所述第一信令数据可以包括连接信息,以标识链接到所述3D基本服务的所述3D扩展服务是否存在并且接收所述3D扩展服务。
如果所述第一3D服务是所述3D基本服务,则所述第一信令数据可以包括连接信息,以标识包括链接到所述3D基本服务的所述3D扩展服务的所有关联的服务是否存在并且接收各个关联的服务。
如果所述第一3D服务是所述3D扩展服务,则所述第一信令数据可以包括连接信息,以标识链接到所述3D扩展服务的所述3D基本服务是否存在并且接收所述3D基本服务。
所述第一信令数据可以包括从以下信息中选择的至少一个信息:与从所述扩展服务所处的深度平面到所述显示画面的距离相关的信息,与从所述扩展服务的边缘所处的深度平面到所述显示画面的距离相关的信息,和指示由所述扩展服务的边界隔开的边缘的厚度的信息,从而将所述3D扩展服务输出到所述显示画面。
所述第一信令数据可以包括与所述扩展服务的大小相关的信息和/或与所述扩展服务的深度对称性相关的信息,从而将所述3D扩展服务输出到所述显示画面,所述与所述扩展服务的大小相关的信息可以包括与所述扩展服务的高度和宽度相关的信息和/或与所述扩展服务的分辨率相关的信息,并且,所述与所述扩展服务的深度对称性相关的信息可以包括与所述扩展服务的深度范围相关的信息和/或与所述扩展服务的最大深度值和最小深度值相关的信息。
有利效果
本发明具有下面的效果。
首先,本发明具有即使在3D环境中也支持在2D环境中支持的服务的效果。
其次,本发明具有信令,适当地处理,并且向用户提供3D PIP或预览服务的效果。
最后,本发明具有将3D PIP或预览服务应用到内容指南的效果,由此改善在3D服务方面的方便性并且实现3D服务的容易使用。
附图说明
图1示出基本服务和画中画服务信号输出画面的示例的图;
图2是例示根据本发明的耦合和输出三维(3D)基本服务和3D PIP服务的示例的图;
图3是例示根据本发明的耦合和输出3D基本服务和3D PIP服务的另一个示例的图;
图4是例示根据本发明的地面虚拟频道表(TVCT)的配置的示例的图;
图5是例示根据本发明的service_type字段的定义的示例的图;
图6是例示根据本发明的extended_service_descriptor的配置的示例的图;
图7是例示图6的extended_service_type字段的示例的图;
图8是例示根据本发明的service_linkage_descriptor的配置的示例的图;
图9是例示图8的linked_service_type字段的示例的图;
图10是例示根据本发明的base_service_descriptor的配置的示例的图;
图11是例示根据本发明的虚拟频道的配置的示例的图;
图12是例示根据本发明的3D_PIP_display_option_descriptor的配置的示例的图;
图13是例示根据本发明的3D_PIP_implementation_descriptor的配置的示例的图;
图14是例示图13的PIP_resolution_mode字段的示例的图;
图15是例示根据本发明的PIP显示参数的示例的图;
图16是例示根据本发明的PIP显示参数的另一个示例的图;
图17是例示根据本发明的PIP深度相关参数的示例的图;
图18是例示根据本发明的用于3D PIP实现的参数的示例的图;
图19是例示根据本发明的服务描述表(Service Description Table(SDT))段的示例的图;
图20是例示根据本发明的service_type字段的配置的示例的图;
图21是例示根据本发明的component_descriptor的配置的示例的图;
图22是例示图21的stream_content字段和component_type字段的配置的示例的图;
图23是例示根据本发明的3D_PIP_video_descriptor的配置的示例的图;
图24是例示根据本发明的用来处理3D信号的数字接收器的构造的示例的图;
图25是例示根据本发明的3D基本服务和3D PIP服务信令的示例的图;
图26是例示根据本发明使用3D信令信息来输出立体视频信号的示例的流程图;
图27是例示根据本发明的相应的3D基本服务事件和3D PIP服务事件信令的示例的图;
图28是例示根据本发明的IPTV服务搜索过程的图;
图29是例示根据本发明的IPTV服务SI表和其组件之间的关系的图;
图30是例示根据本发明的SourceReferenceType XML模式的示例的图;
图31是例示根据本发明的SourceType XML模式的示例的图;
图32是例示根据本发明的TypeOfSourceType XML模式结构的示例的图;
图33是例示根据本发明的PIPDisplayOptionFor3DType XML模式结构的示例的图;
图34是例示根据本发明的PIPDisplayOptionFor3DType XML模式结构的另一个示例的图;
图35是例示根据本发明的IpSourceDefinitionType XML模式结构的示例的图;
图36是例示根据本发明的RfSourceDefinitionType XML模式结构的示例的图;
图37是例示根据本发明的PIPImplementationFor3DType XML模式结构的示例的图;
图38是例示根据本发明的PIPImplementationFor3DType XML模式结构的另一个示例的图;
图39是例示根据本发明的IpSourceDefinitionType XML模式结构的另一个示例的图;
图40是例示根据本发明的SI XML模式结构的示例的图;
图41是例示根据本发明的用来处理3D服务的数字接收器的另一个示例的图;以及
图42是例示根据本发明的用来处理3D服务的数字接收器的又一个示例的图。
具体实施方式
现在将详细地参考本公开的实施方式,其示例在附图中示出。这里应该注意的是,这些实施方式仅是用于示例性目的,并且本发明的保护范围不限制于此。
在本说明书中使用的术语是考虑到功能而选择的一般术语,并且目前被广泛地使用。然而,如此的术语可以根据本发明所属领域的技术人员的意图、习惯或新技术的出现而改变。在具体的情形中,一些术语可以由本申请的申请人来选择。在该情形中,如此的术语的意义将在本说明书的相应段落中描述。因此,应该注意的是,在本说明书中使用的术语应该基于术语的实际意义和本发明的公开来理解,而不是术语的简单的词典定义。
三维(3D)图像处理方法可以包括考虑两个视点的立体视觉图像处理方法和考虑三个或更多个视点的多视点图像处理方法。另一方面,传统的单视点图像处理方法可以被称为单视场图像处理方法。
在立体视觉图像处理方法中,通过彼此分离预定距离的左相机和右相机对同一被摄体拍摄,并且拍摄到的左视图图像和右视图图像被用作图像对。另一方面,在多视点图像处理方法中,利用具有预定距离或角度的三个或更多个相机拍摄的图像被使用。下文中,为了本发明的容易理解和描述的方便,立体视觉图像处理方法将被作为示例来描述。然而,本发明不限制于此。本发明可以应用于多视点图像处理方法。
立体视觉图像处理方法可以包括并排类型图像处理方法、上下类型图像处理方法和棋盘类型图像处理方法。例如,在并排类型图像处理方法中,左视图图像和右视图图像在水平方向上被1/2下采样,一个采样图像位于左区域并且另一个采样图像位于右区域,由此构造一个立体图像。例如,在上下类型图像处理方法中,左视图图像和右视图图像在垂直方向上被1/2下采样,一个采样图像位于上区域并且另一个采样图像位于下区域,由此构造一个立体图像。在棋盘类型图像处理方法中,左视图图像和右视图图像被1/2下采样以在垂直方向和水平方向上交错,从而利用左视图图像和右视图图像构造立体视觉图像。然而,在本说明书中描述的根据本发明的立体视觉图像处理方法不限于上述示例。
同时,二维(2D)内容和3D内容可以共存。因此,在3D内容的传输期间考虑在3D内容和2D内容之间的兼容性是必要的。例如,不支持3D服务的数字接收器可能接收到3D信号并且将该3D信号处理为2D服务。另一方面,支持3D服务的数字接收器可能接收到3D信号并且提供3D服务。然而,支持3D服务的数字接收器可以根据环境提供2D服务。
在近来的数字环境中,已经进行了很多研究以支持3D服务。数字发送器或接收器提供与2D内容相关的所有服务。然而,数字发送器或接收器没有正确地提供与3D内容相关的所有服务。例如,数字发送器或接收器提供与2D内容相关的扩展服务,诸如画中画(PIP)服务或预览服务。然而,数字发送器或接收器没有正确地提供与3D内容相关的扩展服务,诸如PIP服务或预览服务。因此,在数字发送器或接收器中需要与和3D内容相关的如此扩展服务有关的信令信息。在下文中,将描述根据本发明的提供3D扩展服务的各种方法和执行该方法的数字接收器。
与根据本发明的3D扩展服务的提供相关,有必要考虑各种条件。PIP服务将作为扩展服务的示例来进行描述。在2D内容的情形中,仅画面的大小可以被缩放,从而容易地提供PIP服务。另一方面,在3D内容的情形中,不能简单地通过缩放画面的大小来正确地提供PIP服务。这是因为,在3D内容的情形中,仅考虑扩展服务是不足够的,并且,如果没有正确地考虑在基本服务和扩展服务之间的关系,可能引起用户的迷惑,与2D内容有所不同。
在下文中,将参考附图,考虑到以上问题,详细地描述根据本发明的提供3D扩展服务的多个实施方式。
除了3D基本服务之外,在本说明书中使用的“3D扩展服务”是用来在画面上提供与字幕数据不同的另外的3D视频数据的另外的或扩展的服务。3D扩展服务可以包括3D PIP服务和3D预览服务。然而,本发明不限制于此。
图1示出基本服务和PIP服务信号输出画面的示例的图。
参考图1,在数字接收器的画面上提供的节目A10表示主要图像服务,在提供了节目A10的画面的预定区域上提供的节目B20表示PIP图像服务。
节目A10和节目B20可以通过数字接收器的不同(虚拟)频道的调谐来接收和提供。
图2是例示根据本发明的耦合和输出3D基本服务和3D PIP服务的示例的图,图3是例示根据本发明的耦合和输出3D基本服务和3D PIP服务的另一个示例的图。
假设图1示出了在2D PIP服务被耦合到2D基本服务的状态中,2D基本服务被输出到的画面的示例。为了配置上述画面,与图1中所示的用于2D基本服务的画面的大小相比,数字接收器可以缩放(即,减小)用于2D PIP服务的画面的大小。
另一方面,图2和图3示出了与图1中的2D服务不同的3D服务。为了耦合和输出3D基本服务和3D PIP服务,必须考虑3D内容的基本特征,使得数字接收器正确地处理3D内容并且向用户提供3D服务。
图2示出了其中3D基本服务和3D PIP服务具有半分辨率的情形。另一方面,图3示出了其中3D基本服务和3D PIP服务具有全分辨率的情形。
参考图2和图3,PIP服务从根本上说是3D服务,因此,数字接收器必须获取如在图2的(a)和图3的(a)中所示的左视图PIP数据30和50(左视图数据)以及如在图2的(b)和图3的(b)中所示的右视图PIP数据40和60(右视图数据),以提供3D PIP服务。
然而,数字接收器难以仅通过获取左视图PIP数据和右视图PIP数据来正确地耦合和输出3D基本服务和3D PIP服务。这是因为,基本服务是3D服务,并且因此,必须考虑在3D基本服务和3D PIP服务之间的关系。例如,如果针对被以预定深度提供在画面上的3D基本服务,数字接收器以与3D基本服务相同的深度来提供3D PIP服务,则PIP服务的效果可能是没有意义的,或者3D基本服务可能是相当难辨认的。换句话说,为了数字接收器能够正确地处理3D服务,必须实现3D PIP服务的信令以及3D基本服务的信令,与2D服务不同。
在下文中,将定义和描述数字发送器或接收器提供3D基本服务和3D扩展服务所必需的各种信令数据。
在传统的数字广播环境中,主要考虑2D服务,没有正确地限定与用于3D服务的编码解码器相关的信息。因此,数字发送器或接收器难以处理3D服务。
例如,在3D PIP服务被用作3D扩展服务的示例的情形中,必须限定PIP画面所处的深度平面的位置(即,具有朝向观看者侧的偏置深度的PIP画面),用于获取3DPIP图像的方法和PIP边界样式。
在根据本发明提供3D扩展服务时,可以提供元数据,使得3D扩展服务被提供作为附加流或像3D基本服务一样的基本流,或者被实现为扩展服务,并且如此的扩展服务可以利用元数据来提供。
在前一情形中,存在用来提供扩展服务的附加流,并且因此,以形状形式配置的3D PIP流的信令以及3D基本流的信令是必要的。例如,3D电视(3DTV)接收3D PIP服务通过附加的虚拟频道来发送的信息说明,并且通过使用该信息的相应虚拟频道的调谐来接收PIP流。在本发明中,在通过不同虚拟频道的3D服务和3D PIP/预览服务之间的关系被以信号的方式发送,以接收综合服务(存在用于识别连接到不同的虚拟频道的3D PIP服务的方法)。
在后一情形中,作为用于3D PIP实现的元数据,例如显示大小转换信息是必要的。这可能对于应用到例如各种画面大小PIP、预览、缩略图等是必要的。
同时,PIP边界样式可以是例如与PIP画面的边界宽度、PIP边缘的效果等相关的信息。
换句话说,广播站可以以信号的方式发送用于3D PIP/预览服务的附加虚拟频道的PIP流/预览流,或者接收器可以通过从广播站发送的转换参数将3D图像转换为用于PIP/预览输出的小画面,并且以适当深度输出图像。
本发明提供广播信令方法,该方法对于在3D图像频道的观看期间以PIP形式观看来自另一个广播站的3D图像是必要的。用来获取和显示小的3D输出画面的功能可以应用到PIP。另外,该功能可以应用到其中以高级电子节目指南(EPG)类型菜单输出预览画面的情形中或者其中在记录的3D图像的观看期间显示缩略图的情形中,使得观看者移动到期望的位置。
本发明涉及用于从标准大小的3D图像生成小的3D画面的方法。在目前的数字电视(DTV)中,不存在用来实现小图像的广播信令。然而,在3D图像中,与2D图像不一样,存在基于显示大小而改变的参数。在其中这些参数被以信号的方式而发送给元数据的情形中,接收器可以通过元数据来输出具有期望大小的3D图像。
根据以上描述清楚的是,本发明提出了一种用于在3D TV中处理与3D PIP视频广播服务相关的信令信息的方法。具体地,本发明提出了用于在3D TV中利用相应的信令信息来接收PIP广播服务以及控制立体PIP显示的方法。
另外,利用本发明,可以通过独立且分离的逻辑频道(虚拟频道)来单独地发送3D和3D PIP服务。而且,3D服务以及当以PIP形式观看3D服务时可用的元数据可以在没有传输附加的3D PIP流的情况下被以信号的方式发送,从而正确地配置3DPIP。因此,在3D画面的观看期间,用户可以使用该方法来观看另一个频道的3D画面或在菜单中执行3D预览。
换句话说,在使用3D服务和3D PIP/预览服务的过程中,当发送独立的PIP流时,接收器可以清楚地识别在两个服务之间的对应关系,以核对3D服务和相应的3DPIP服务是否存在,并且当用户请求对PIP/预览画面的改变时,对应是可能的。而且,即使在其中如此的附加PIP流不存在的情形中,3D服务也可以被正确地改变为PIP/预览服务,并且可以利用用于PIP的附加元数据来输出PIP/预览服务。
在下文中,将参考附图详细地描述其中在单独的流中发送3D扩展服务的情形。
与本发明相关地,用于3D广播服务的服务数据是基于高级电视系统委员会(ATSC)系统的。因此,用于服务数据的信令数据也可以被定义为PSI/PSIP。具体地,为了本发明的容易理解以及为了描述的方便,作为PSI/PSIP信息的示例,将描述节目关联表(PAT)、节目映射表(PMT)、虚拟频道表(VCT)和事件信息表(EIT)。然而,除了上述表之外,在PSI/PSIP中的各个表也可以被使用。
图4是例示根据本发明的地面虚拟频道表(TVCT)的配置的示例的图。
TVCT段被提供以从大体上提供虚拟频道的属性信息。与本发明相关地,TVCT段可以被用来标识3D PIP服务以及3D基本服务。
具体地,根据本发明,为了标识3D PIP服务,在TVCT段中,用来标识相应频道的服务类型的service_type字段被使用。例如,如下文将描述的,在本发明中,可从service_type字段的值来标识相应频道的服务类型是否是3D扩展(PIP)服务。
在下文中,将参考图4更加详细地描述构成TVCT段的各个字段。
table_id字段指示表段的类型。例如,在其中相应表段是配置TVCT表的表段的情形中,该字段可以具有0xC8的值。section_syntax_indicator字段由1位构成并且具有固定值1。private_indicator字段被设置为1。section_length字段由12位构成并且开始的两位为00。该段到在该字段之后的CRC字段的长度通过字节来表示。transport_stream_id由16位构成并且指示MPEG-2传输流(TS)ID。该TVCT可以通过该字段与另外的TVCT区分。version_number字段指示表段的版本。只要当版本改变,该version_number字段增加一,并且当版本值达到31时,下一个版本值变为0。current_next_indicator字段由1位构成。当VCT当前可应用时,该字段被设置为1。如果该字段的值被设置为0,则这表示该字段不可应用并且下一个字段是有效的。section_number字段指示构成TVCT表的段的编号。last_section_number字段指示构成TVCT表的最后一段。protocol_version字段用来在将来允许与按照当前的协议定义的表类型不同的表类型。在当前的协议中,仅0是有效的值。除了0以外的值将用于针对在结构上不同的表的随后的版本。
num_channels_in_section字段指示在VCT段中定义的虚拟频道的数目。在下文中,与相应频道相关的信息将通过在num_channels_in_section字段中定义的虚拟频道的数目以循环的形式来限定。以循环的形式针对相应频道定义的字段如下。
short_name字段指示虚拟频道的名称。
major_channel_number字段指示以“for(循环)”重复句子中按照相应顺序限定的虚拟频道的主频道编号。每一个虚拟频道包括多个部分,诸如主频道编号和次频道编号。主频道编号与次频道编号一起用作用户寻找相应虚拟频道的参考编号。minor_channel_number字段具有0到999的值。次频道编号与主频道编号一起用作两方频道编号。
modulation_mode字段指示与相应虚拟频道相关的传送载波的调制模式。
carrier_frequency字段可以指示载波频率。channel_TSID字段具有0x0000到0xFFFF的值该频道是与用于传送通过该虚拟频道所指的MPEG-2节目的TS相关的MPEG-2TSID。
program_number字段将在TVCT中定义的虚拟频道与MPEG-2的节目协会表(PAT)和节目映射表(PMT)相关联。
ETM_location字段指示扩展文本消息(ETM)的存在和位置。
access_controlled字段是标记字段。如果该字段是1,则可指示与相应虚拟频道相关联的事件被访问控制。如果该字段是0,则可指示访问没有被限制。
hidden字段是标记字段。如果该字段是1,则即使用户直接输入相应的编号,访问也不被允许。当用户执行频道预览,隐蔽的虚拟频道被跳过,表现得如同没有被定义一样。
hide_guide字段是标记字段。如果针对隐蔽的频道,该字段被设置为1,则虚拟频道和其事件可以被显示在EPG显示上。如果隐蔽的位没有被设置,则该字段被忽略。因此,不管hide_guide字段的状态如何,非隐蔽的频道和其事件被显示在EPG显示上。
service_type字段指示由相应虚拟频道发送的服务的类型。具体地,如之前所述,service_type字段可以用来标识由相应频道提供的服务的类型是否是3D扩展服务。例如,图5是例示根据本发明的service_type字段的定义的示例的图。参考图5,如果该字段的值为0x13,则可以指示3D(基本)服务,如果该字段的值为0x14,则可以指示3D扩展服务。
利用该字段的值可以更加详细地定义3D扩展服务。例如,如果该字段的值为0x14,则可以指示是3D扩展服务的示例的3D PIP服务,如果该字段的值为0x15,则可以指示是3D扩展服务的另一个示例的3D预览服务。
source_id字段标识与虚拟频道相关联的节目制作源。源可以是视频、文本、数据或音频节目制作中的一个。source_id字段具有预留值0。从0x0001到0x0FFF,source_id字段在用于发送VCT的TS内具有唯一值。并且,source_id字段在区域水平内具有从0x1000到0xFFFF的唯一值。
descriptors_length字段指示针对相应虚拟频道的随后的描述符的字节的长度。
描述符不必包括在descriptor()中,或者一个或更多个描述符可以包括在descriptor()中。如在下文中将描述的,根据本发明,该descriptor()字段可以包括与3D扩展服务相关地,不同地定义的描述符。
additional_descriptors_length字段指示随后的VCT描述符列表的字节的总长度。
CRC_32字段指示如下的循环冗余检验(CRC)值,即,通过该值,在解码器内的寄存器具有零输出。
同时,在本发明中,下面的描述符中的至少一个描述符可以被包括作为TVCT表段的描述符。其中包括和定义的各个描述符的种类可以例如根据相应频道的服务类型是3D基本频道或3D PIP频道而改变。
例如,如果相应频道的服务类型是3D基本频道,则指示3D PIP服务是否存在和连接信息的描述符可以以描述符的形式被定义和包括。另一方面,如果相应频道的服务类型是3D PIP频道,则指示与3D基本服务相关的连接信息的描述符可以以描述符的形式被定义和包括。在上面,与深度和边缘相关的信息可以以关于3D PIP服务的描述符的形式来定义。
在下文中,将参考附图更加详细地描述根据本发明的被定义以在TVCT表段中提供3D PIP服务的各个描述符。
可利用以被包括在3D广播频道(与基本服务相关地)中的方式来发送的Extended_Service_descriptor(或service_linkage_descriptor)来知道关于相应VC的3DPIP视频版本(扩展的或关联的服务)通过哪一个频道来发送。另一方面,可利用以被包括在3D PIP频道中的方式来发送的Base_Service_descriptor(或service_linkage_descriptor)来知道关于相应3D PIP虚拟频道的相应3D视频版本(基本服务)通过哪一个频道来发送。
在3D图像中,当与2D图像相比地产生3D图像时,诸如目标画面大小和观看距离这样的观看环境因素被适当地考虑。因此,如果小画面被显示在画面中,即,如果诸如PIP图像、预览图像或缩略图图像这样的图像被输出,则如在传统的2D图像中一样简单地子采样全画面图像以生成小画面是不容易的。因此,可以使用附加的流以仅输出PIP画面,或者,将大的3D画面转换为小的3D画面所必需的元数据可能需要被另外地如下定义。
在本说明书中,扩展服务是与基本服务相对应的概念。在本发明中,扩展服务的意思不是附加视频流的全画面3D图像而是PIP图像3D画面。
而且,本发明涉及用于获取与包括扩展服务视频流和基本服务视频流的3D画面输出相关的信令数据和解码3D视频流的方法。如此的关联的服务可以被认为是基本服务和扩展服务的概念。可选地,可以考虑同时提供所有类型的关联的服务的列表的另一方法。为此,可以使用服务关联描述(Service Linkage descriptor)。
图6是例示根据本发明的extended_service_descriptor的配置的示例的图。
例如,图6的extended_service_descriptor定义了关于通过在TVCT表段的循环中的service_type字段来定义的虚拟频道的扩展服务。例如,如果虚拟频道是2D原有频道,则可以指示作为扩展服务的与该2D原有频道相对应的3D频道(服务)。另一方面,如果虚拟频道是3D频道,则可以指示作为扩展服务的3D PIP频道(服务)。在后一情形中,与和上述PIP服务不同的深度范围相关的信息是必要的,并且因此,3D预览频道(服务)可以被另外地指示。
下面将参考图6更加详细地描述根据本发明的构成extended_service_descriptor的各个字段。
descriptor_tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是extended_service_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
number_extended_channels字段指示扩展频道的编号,并且可以通过扩展频道的指示的编号来提供与在循环结构中扩展的频道相关的信息,如在下文中将描述的。
在下文中,将描述由与number_extended_channels字段关联的循环结构定义的各个字段。
extended_service_type字段指示通过相应扩展频道提供的扩展服务的类型。在图7中示出了extended_service_type的示例。图7是例示图6的extended_service_type字段的示例的图。例如,如之前所述,如果该字段的值是0x00,则可以指示相应扩展服务的类型是3D服务,如果该字段的值是0x01,则可以指示相应扩展服务是3DPIP服务,如果该字段的值是0x02,则可以指示相应扩展服务是3D预览服务。
同时,与扩展服务相关的虚拟频道信息可以参考在TVCT表段中的提供频道信息的字段。例如,如在图6中所示,ext_major_channel_number、ext_minor_channel_number、ext_source_id、ext_channel_TSID和ext_program_number字段可以被定义用于扩展服务,如在TVCT表段中定义的major_channel_number、minor_channel_number、source_id、channel_TSID和program_number字段一样。
ext_major_channel_number字段和ext_minor_channel_number字段分别指示用于提供扩展服务的主频道编号和次频道编号。
source_id字段标识与扩展频道相关联的节目制作源。
ext_channel_TSID字段指示关于传输由扩展服务所指的MPEG-2节目的TS的TSID。
ext_program_number字段将与扩展服务相关联地定义的虚拟频道与MPEG-2的节目协会表(PAT)和节目映射表(PMT)相关联。
如果extended_service_descriptor作为在根据本发明的TVCT表段中的描述符而存在,则数字接收器可以使用该描述符来识别扩展频道的信息。如果相应频道是3D基本频道,则提供3D PIP或3D预览服务的频道可以通过该描述符来定义。另一方面,如果相应频道是提供3D PIP或3D预览服务的频道,则3D基本频道可以通过该描述符来定义。
图8是例示根据本发明的service_linkage_descriptor的配置的示例的图。
参考图8,service_linkage_descriptor可以提供与和在TVCT表段的循环中定义的虚拟频道关联的其它虚拟频道相关的信息。
图8中的service_linkage_descriptor可以代替图7中的extended_service_descriptor或者与其共存。
换句话说,当考虑提供与以该形式关联的服务列表相关的信息时,可以通过图8中所示的service_linkage_descriptor来提供与具体虚拟频道相关联的所有类型的频道信息。service_linkage_descriptor和extended_service_descriptor彼此的不同之处在于,extended_service_descriptor提供与附加地从基本服务扩展的服务相关的信息,而service_linkage_descriptor可以通过任何一个服务来提供在关联的服务之间的关系。
在下文中,将参考图8更加详细地描述构成service_linkage_descriptor的各个字段。
descriptor_tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是service_linkage_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
number_linked_channels字段指示与在TVCT表段的循环中定义的虚拟频道关联的其它虚拟频道的编号,并且可以使用循环结构来定义提供与通过相应编号关联的虚拟频道相关的信息的字段。
在下文中,将描述在循环结构中的各个字段。
linked_service_type字段指示由相应的关联频道提供的关联服务的类型。例如,图9是例示图8的linked_service_type字段的示例的图。参考图9,如果该字段的值是0x00,则可以指示与TVCT表段的相应频道关联的服务是2D服务,如果该字段的值是0x01,则可以指示相应的关联服务是2D PIP服务,如果该字段的值是0x02,则可以指示相应的关联服务是3D服务,如果该字段的值是0x03,则可以指示相应的关联服务是3D PIP服务,如果该字段的值是0x04,则可以指示相应的关联服务是3D预览服务。
同时,与关联服务相关的虚拟频道信息可以参考在TVCT表段中的提供频道信息的字段。例如,如在图8中所示,linked_major_channel_number、linked_minor_channel_number、linked_source_id、linked_channel_TSID和linked_program_number字段可以被定义用于扩展服务,如在TVCT表段中定义的major_channel_number、minor_channel_number、source_id、channel_TSID和program_number字段一样。
linked_major_channel_number字段和linked_minor_channel_number字段分别指示相应的关联频道的主频道编号和次频道编号。
linked_source_id字段标识与相应的关联频道相关联的节目制作源。
linked_channel_TSID字段指示关于传输由相应的关联频道所指的MPEG-2节目的TS的TSID。
linked_program_number字段将与相应的关联频道相关地定义的虚拟频道与MPEG-2的节目协会表(PAT)和节目映射表(PMT)相关联。
图10是例示根据本发明的base_service_descriptor的配置的示例的图。
参考图10,如果3D PIP服务通过在TVCT表段的循环中的相应虚拟频道来提供,则base_service_descriptor提供与该3D PIP服务对应于哪一个基本频道相关的信息。
为了通知在上面的扩展服务中的基本服务,可以如在图10中所示地定义和使用base_service_descriptor。
参考图10,如果base_service_descriptor存在于扩展服务的TVCT表段中,则该描述符提供与和相应的扩展服务相关联的基本服务相关的频道信息。如果3D PIP频道通过该描述符提供3D频道信息,则也可以意味着与3D基本服务相关的信息的提供。
与能够接收扩展服务的基本服务的虚拟频道相关的major_channel_number、minor_channel_number、source_id、channel_TSID和program_number信息对应于base_major_channel_number、base_minor_channel_number、base_source_id、base_channel_TSID和base_program_number。
在下文中,将参考图10更加详细地描述构成base_service_descriptor的各个字段。
descriptor_tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是base_service_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
base_major_channel_number字段和base_minor_channel_number字段分别指示用于提供相应基本频道的主频道编号和次频道编号。
base_source_id字段标识与相应基本频道相关联的节目制作源。
base_channel_TSID字段指示关于传输由相应的基本频道所指的MPEG-2节目的TS的TSID。
base_program_number字段将与相应基本频道相关地定义的虚拟频道与MPEG-2的节目协会表(PAT)和节目映射表(PMT)相关联。
图11是例示根据本发明的虚拟频道的配置的示例的图。
图11示出根据本发明的虚拟频道的配置的示例。附图的上部1110示出了提供基本节目,即,普通3D节目(例如,全分辨率)的虚拟频道A,附图的下部1120示出了提供3D PIP节目的虚拟频道B。
用于在虚拟频道A和B(3D频道和3D PIP频道)中包括的视频和音频基本流ES的包识别符(PID)以信号的方式发送。
只要服务标识如在图6到图10中所示地在描述符中被定义,就必须定义对于提供根据本发明的扩展服务所必要的信息。
在下文中,将定义该信息。稍后将参考图12到图15更加详细地描述根据本发明的描述符。
图12是例示根据本发明的3D_PIP_display_option_descriptor的配置的示例的图。
图12示出用来定义例如当输出3D PIP服务时要考虑的显示选项的3D_PIP_display_option_descriptor。
descriptor tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是3D_PIP_display_option_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
3D_PIP_display_option_descriptor定义当数字接收器在画面上提供3D PIP时所必要的信息。如此的信息可以包括PIP所处的深度平面的位置、PIP边界所处的深度平面的位置、PIP边界的厚度和PIP边界样式。
在下文中,将参考图12更加详细地描述在3D_PIP_display_option_descriptor中包括的各个字段。
PIP_offset_depth字段指示从PIP所处的深度平面到数字接收器的画面的距离。该字段的值可以用于例如其中PIP流另外地存在和提供的情形以及其中普通3D视频流被转换为PIP画面的情形。即,该字段的值通过调节数字接收器来设置。
PIP_boundary_offset_depth字段指示从PIP边缘所处的深度平面到数字接收器的画面的距离。该字段的值还可以用于如在上述PIP_offset_depth字段中一样的其中PIP画面被显示的所有情形。
PIP_boundary_thickness字段指示在PIP边界处显示的边缘的厚度。
数字发送器可以定义或提供图12的3D_PIP_display_option_descriptor,并且数字接收器可以解析该描述符,从而该描述符被用来输出PIP服务。
图13是例示根据本发明的3D_PIP_implementation_descriptor的配置的示例的图。
图13还定义了根据本发明的对于数字接收器实现3D PIP服务所必要的信息(即,元数据)。具体地,在其中3D PIP服务没有另外地存在的情形中,该描述符可以包括用来从普通3D服务来配置3D PIP的各种信息。换句话说,由于带宽限制,可能难以对于每一物理频道都另外地提供3D PIP流。在该情形中,关于在确保适当的3D效果的同时,现有3D基本服务如何改变以被作为PIP而输出的信令可以被提供,使得数字接收器有效地输出PIP画面,而不提供另外的3D PIP流。和图12一起或者与图12分开地,该描述符定义并提供用于3D PIP服务的各种信息。
参考图12,如果3D_PIP_implementation_descriptor通过depth_min和depth_max提供深度范围,则数字接收器可以将提供的3D服务的深度值重映射和转换为提供的范围。在其中提供的3D服务的深度范围被给定的情形中,depth_range_scaling_factor可以被提供以减少位数,而不是提供depth_min和depth_max的绝对值。可以采用各种重映射方法。
descriptor_tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是3D_PIP_implementation_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
num_of_recommended_modes字段指示多个PIP转换大小和深度范围可以针对每一个模式而被发送,并且可以通过num_of_recommended_modes的值来知道模式的数目。
根据由num_of_recommended_modes字段定义的被推荐的模式,各种信息可以被定义在循环结构中。
priority_bit字段指示当数字接收器接收3D基本服务、将3D基本服务转换为3DPIP并且输出3D PIP时所推荐的输出模式的优先级。
PIP_size_type字段指示3D PIP大小类型。在其中该字段的值是0的情形中,PIP_width和PIP_height被发送。另一方面,在其中该字段的值是1的情形中,PIP的水平轴线和垂直轴线长度利用PIP_resolution_mode来指示。
PIP_width和PIP_height字段分别指示PIP画面的水平轴线长度和垂直轴线长度。定义的长度单元例如可以是像素单元。
PIP_resolution_mode字段指示作为准则的PIP的广泛使用的水平轴线长度和垂直轴线长度的组合。图14是例示图13的PIP_resolution_mode字段的示例的图。
例如,参考图13和图14,如果PIP_resolution_mode字段的值是0x00,则可以指示以[像素×像素]为单元的PIP分辨率为360×240,如果PIP_resolution_mode字段的值是0x01,则可以指示PIP分辨率为240×160,如果PIP_resolution_mode字段的值是0x02,则可以指示PIP分辨率为180×120,如果PIP_resolution_mode字段的值是0x03,则可以指示PIP分辨率为120×80。
PIP_depth_symmetric字段指示PIP深度值是否是对称的。如果该字段的值是0,则正的视差深度范围和负的视差深度范围彼此不同。即,PIP深度值是非对称的。因此,必须提供用于正的视差深度范围和负的视差深度范围的深度范围值,使得深度范围值被数字接收器正确地处理。深度范围值可以使用PIP_depth_min字段和PIP_depth_max字段来定义。同时,如果PIP_depth_symmetric字段的值是1,则正的视差深度范围和负的视差深度范围彼此对称。因此,定义和发送可应用于正的视差深度范围和负的视差深度范围的仅一个PIP_depth_range值是足够的。例如,如果差异范围是在X和+Y之间并且X=Y,则是对称范围。
PIP_depth_min字段和PIP_depth_max字段指示到PIP画面的主要视频或3D视频输出的深度范围。
PIP_depth_max字段指示在3D视频中表示的深度当中的离用户最远的深度。该值可以表示为深度,并且可以是表示双目视差的差异值。
PIP_depth_min字段指示在由3D视频输出的深度当中的与用户最接近的深度。按照相同的方式,该字段的深度可以表示为差异值。如果深度表示为差异的概念,则PIP_depth_min值例如可以大于PIP_depth_max值。
如果基于具有深度0的平面,前一平面的深度范围和下一平面的深度范围具有相同的值,则PIP_depth_range字段指示该值。
PIP_Horizontal_position字段和PIP_vertical_position字段可以确定在数字接收器中提供PIP的显示画面的区域。该字段信息可以是与基于与在发送方的显示画面上提供的基本服务的关系而确定的最佳区域相关的位置信息。如果该信息与在数字接收器中预设的PIP信息冲突,则数字接收器可以忽略该字段信息,或者,因为当提供PIP时,与基本服务的关系被考虑,所以该字段信息可以具有优先级,并且可以相应地配置和提供PIP画面。而且,除了该描述符之外,该字段信息还可以在被包括在图12的描述符中的同时被提供。
在下文中,将更加详细地描述与图12到图14相关的各个参数。
图15是例示根据本发明的PIP显示参数的示例的图。
参考图15,数字接收器可以使用图12到图14的显示参数来提供3D PIP服务。
在显示画面1510的预定位置处设置的PIP区域1520的大小可以参考PIP_width字段和PIP_height字段。
而且,根据PIP_offset_depth字段,距离显示画面1510,PIP画面1540被设置在PIP_depth_max1530和PIP_depth_min1550之间
图16是例示根据本发明的PIP显示参数的另一个示例的图。
参考图16,设置在显示画面1610上的PIP区域1620的位置可以参考PIP_Horizontal_position字段和PIP_vertical_position字段来确定。
为了在提供PIP服务时配置PIP区域,数字接收器可以提供通过参考图16的PIP_Horizontal_position字段和PIP_vertical_position字段而获得的位置信息,并且通过参考图15的PIP_width字段和PIP_height字段而以各个位置和大小来配置PIP画面并且将PIP画面提供在显示画面上。
同时,如在图16中所示,可以参考PIP_boundary_depth字段和PIP_boundary_thickness字段来配置在相应位置处的PIP画面。
图17是例示根据本发明的PIP深度相关参数的示例的图,图18是例示根据本发明的用于3D PIP实现的参数的示例的图。
图17具体地例示了PIP深度相关参数。从观看者侧到画面侧,深度增加。
同时,图18示出了在PIP分辨率大小和PIP深度范围之间的关系。PIP分辨率大小和PIP深度范围可以在对称模式中和在非对称模式中具有不同的值。
例如,如果PIP分辨率大小为360×240,则PIP深度范围在对称模式中可以是-30到+30,在非对称模式中可以是-10到+50。如果PIP分辨率大小为360×240,则PIP深度范围在对称模式中可以是-30到+30,在非对称模式中可以是-10到+50。如果PIP分辨率大小为240×160,则PIP深度范围在对称模式中可以是-23到+23,在非对称模式中可以是-7到+45。如果PIP分辨率大小为180×120,则PIP深度范围在对称模式中可以是-15到+15,在非对称模式中可以是-4到+40。如果PIP分辨率大小为150×100,则PIP深度范围在对称模式中可以是-13到+13,在非对称模式中可以是-1到+35。如果PIP分辨率大小为120×80,则PIP深度范围在对称模式中可以是-12到+12,在非对称模式中可以是+2到+30。在上面,前者是PIP_depth_min值,后者是PIP_depth_max值。
上述描述与例如ATSC方法相关。另一方面,定义可以与在DVB方法中稍微不同。在下文中,将更加详细地描述DVB方法。然而,将省略与上面已经给出的特征相同的特征的详细描述。
图19是例示根据本发明的服务描述表(Service Description Table(SDT))段的示例的图。
参考图19,当配置用于PIP的附加频道时,服务描述符通过服务类型来通知3DPIP0服务。同时,如果基本服务与PIP流一起发送,则与用于提供与PIP流相关的信息的3D PIP视频组件相关的信息被包括。图19示出了根据本发明的实施方式的SDT。SDT描述在DVB方法中在具体的传输流中包括的服务。
在下文中,将参考图19更加详细地描述构成SDT表段的各个字段。
table_id字段是用来标识表的标识符。例如,table_id字段的具体值指示该段属于服务描述表。section_syntax_indicator字段是1位的字段并且被设置为1。section_length字段的开始两位被设置为00。在该字段之后指示包括CRC的段的字节数目。transport_stream_id字段用作辨别传输流(TS)的标记。version_number字段指示sub_table的版本号。当sub_table的版本号改变时,version_number字段的数字增加1。当sub_table当前可应用时,current_next_indicator字段的值被设置为1。如果该字段的值被设置为0,则这表示该字段还不可应用,并且下一个字段是有效的。section_number字段指示段的编号。第一段具有0x00的值,并且针对具有相同table_id、相同transport_stream_id和相同original_network_id的每一段,该值增加1。last_section_number字段指示相应sub_table的最后一段的编号(即,最大的段编号),这是该段的一部分。original_network_id字段是用于标识传输系统的network_id的标记。
该SDT表段描述多个服务。各个服务利用下面的字段来以信号的方式发送。
service_id字段定义如下的标识符,即,该标识符用作辨别在TS中包括的服务的标记。该字段可以具有与例如program_map_section的program_number相同的值。
如果EIT_schedule_flag字段被设置为1,则指示关于相应服务的EIT调度信息被包括在当前的TS中。另一方面,如果该字段的值为0,则指示EIT调度信息没有被包括在当前的TS中。
如果EIT_present_following_flag字段被设置为1,则指示关于相应服务的EIT_present_following信息被包括在当前的TS中。另一方面,如果该字段的值为0,则指示EIT当前/随后(present/following)没有被包括在当前的TS中。
running_status字段指示服务的状态。
如果free_CA_mode字段被设置为0,则指示相应服务的所有基本流没有被加扰。另一方面,如果free_CA_mode字段被设置为1,则指示一个或更多个流被条件访问(CA)系统所控制。
descriptors_loop_length字段指示随后的描述符的字节的总长度。
CRC_32字段指示如下的CRC值,即,通过该值,在解码器内的寄存器具有零输出。
根据本发明的实施方式,可以在descriptors_loop_length字段之后的描述符区域中,通过在DVB SI的服务描述符中包括的service_type字段来指示该服务是3D广播服务。
图20是例示根据本发明的service_type字段的配置的示例的图。
图20的service_type字段在service_descriptor中定义,该service_descriptor在被包括在例如图19的SDT表段中的同时被发送。
特别地,如果图20的PIP流作为附加PIP流而被发送,则3D PIP服务可以在service_type字段中被定义,从而以信号的方式来发送。
如果图20的service_type字段的值为0x01,则可以指示数字电视服务。另一方面,如果图20的service_type字段的值为0x06,则可以指示镶嵌服务(mosaic service)。具体地,与本发明相关地,如果service_type字段的值为0x11,则可以指示帧兼容3DTV服务。另一方面,如果service_type字段的值为0x12,则可以指示3D PIP服务。在该情形中,3D PIP服务发送包括音频、视频和相关的3D元数据的3D PIP电视节目制作。
参考图20,可以考虑在基本服务和PIP服务之间的关联以及与现有接收器的较低的兼容性来配置服务。
基本服务和PIP服务被分别定义和使用。在该情形中,用于PIP服务的服务类型可以使用在本发明中提出的新的值。在两个服务之间的关联可以通过关联描述符来实现,这将在下文中描述。可以在没有配置附加服务的情况下配置单个服务。在该情形中,stream_content值和component_type值可以被分配给用于PIP的基本流(ES)。结果,现有的接收器不能识别它,并且忽略了它,从而现有的接收器使用用于基本服务的流没有困难地提供了服务。支持PIP服务的接收器可以识别如此的附加PIP流以提供PIP服务。
图21是例示根据本发明的component_descriptor的配置的示例的图,图22是例示图21的stream_content字段和component_type字段的配置的示例的图。
在DVB中,在如下的状态中执行信令,即,在该状态中,图21的component_descriptor被添加到SDT表段的描述符循环,以指示构成服务的每一个基本流(ES)的类型。在本发明中,可以定义用来辨别用于3D PIP服务的3D PIP视频的stream_content和component_type。
首先,图21示出了根据本发明的组件描述符(component descriptor)。
在下文中,将参考图21描述根据本发明的构成component_descriptor的各个字段。
descriptor_tag字段是用于标识相应描述符的字段,并且可以具有指示相应描述符是component_descriptor的值。
descriptor_length字段提供与相应描述符的长度相关的信息。
stream_content字段指示在流中包括的视频、音频或数据的类型。
component_type字段指示视频、音频或数据组件的类型。
component_tag字段是具有与流标识符描述符的component_tag相同的值的字段。
ISO 639-2[3]_language_code字段标识在该描述符中包括的文本描述符的语言或组件的语言。
text_char字段标识组件流的文本描述符。
该描述符可以被包括在DVB方法的SDT表段中和/或事件信息表(EIT)段中。
接着,将参考图22详细地描述根据本发明的stream_content和component_type。
stream_component指示流的类型。在MPEG-2视频的情形中,stream_component被定义为0x01。在DVB字幕的情形中,stream_component被定义为0x03。在H.264视频的情形中,stream_component被定义为0x05。
在该流中的组件类型定义了帧兼容3D视频和3D PIP视频。具体地,帧兼容3D视频是与3D基本服务相对应的视频组件流,并且与3D PIP视频相对应的组件类型可以被另外地定义。
例如,如果stream_content的值是0x01并且component_type的值是0x13,则可以指示用于3D立体视频的3D PIP视频流以MPEG-2来编码,并且每一秒显示24帧。
而且,如果stream_content的值是0x01并且component_type的值是0x14,则可以指示用于3D立体视频的3D PIP视频流以MPEG-2来编码,并且每一秒显示30帧。
另一方面,如果stream_content的值是0x05并且component_type的值是0x13,则可以指示用于3D立体视频的3D PIP视频流以AVC/H.264来编码,并且每一秒显示25帧。
而且,如果stream_content的值是0x05并且component_type的值是0x14,则可以指示用于3D立体视频的3D PIP视频流以AVC/H.264来编码,并且每一秒显示30帧。
图23是例示根据本发明的3D_PIP_video_descriptor的配置的示例的图。
参考图23,3D_PIP_video_descriptor_SDT位于在SDT表段中的descriptors_loop_length字段之后的描述符的位置,并且包括与3D PIP基本流相关的信息。
component_tag被用来指示在PMT的ES_loop上的基本流(ES)和组件描述符之间的关联关系。在stream_identifier_descriptor中的component_tag字段可以具有与PMT的ES_loop描述符相同的值,以指示在SDT中的component_descriptor和3D_PIP_video_descriptor_SDT之间的关联关系。
而且,通过在3D_complenentary_video_descriptor_SDT中的循环,元素具有多条信息。描述符可以被配置为仅包括与元素相关的信息,而没有循环。在该情形中,多个3D_complenentary_video_descriptor_SDT描述符被包括在SDT的描述符循环中,以提供与多个元素相关的信息。
图20的3D_PIP_video_descriptor_SDT可以按照如下来使用。
首先,如果PIP被配置为独立的服务,则3D_PIP_video_descriptor_SDT可以包括在该独立的PIP的SDT中,以标识PIP流。如果steam_content和component_type没有另外地分配用于PIP,则3D_PIP_video_descriptor_SDT可以用来标识PIP流。
接着,如果基本服务在PIP流被包括在该基本服务的状态中被发送,则3D_PIP_video_descriptor_SDT可以被添加到SDT以在用于该基本服务的流和该PIP流之间区分。
图12到图14的3D_Display_Option_descriptor和/或3D_implementation_descriptor也可以被用来通过DVB传输提供PIP服务。下面的流程图示出了接收器使用为在DVB中的PIP所添加的服务类型和流标识信息以及这些描述符,通过附加PIP流来提供PIP服务的操作序列,
图24是例示根据本发明的用来处理3D信号的数字接收器的构造的示例的图。
根据本发明的实施方式的数字接收器可以包括:用来处理通过主频道发送的3D服务的第一调谐器和解调器102、第一VSB解码器104、第一TP解复用器(TP demux)106、第一系统信息(SI)处理器108和第一3D视频解码器110。而且,根据本发明的实施方式的数字接收器可以包括:用来处理通过副频道发送的3D服务的第二调谐器和解调器122、第二VSB解码器124、第二TP解复用器126、第二系统信息(SI)处理器128和第二3D视频解码器130。通过主频道提供的3D服务可以是3D基本服务,通过副频道提供的3D服务可以是3D PIP服务。另一方面,通过主频道提供的3D服务可以是3D PIP服务,通过副频道提供的3D服务可以是3D基本服务。而且,各个视频解码器可以包括基本服务解码器和/或根据相应服务的扩展服务解码器。
图24的数字接收器大体上包括多个调谐器和基于其的部件。然而,多个调谐器之一只有当例如扩展服务被发送时才被激活。
下文中,为了本发明的容易理解和描述的方便,多个调谐器将被作为示例来描述。然而,数字接收器可以包括单个调谐器。
在下文中,将参考图24来描述数字接收器的各个结构块。
第一调谐器和解调器102和/或VSB解码器104接收并解码包括服务数据和以信号的方式来发送该服务数据的信令数据的数字广播信号。根据广播模式,VSB解码器104可以是OFDM解码器。
解复用器(TP demux)106通过PID过滤来从数字广播信号中解复用视频数据、音频数据和信令数据,并且将经解复用的数据发送到相应的部件。例如,经解复用的视频数据被发送到视频解码器110,并且经解复用的信令数据被发送到系统信息处理器108。
系统信息处理器108解析接收到的信令数据并且将经解析的信令数据发送到视频解码器110和/或控制器。此时,系统信息处理器108可以在其内部或外部构造数据库,以暂时地存储经解析的信令数据。
3D视频解码器110基于从控制器或系统信息处理器108发送的信令数据来执行解码。对于3D基本服务,经解复用并发送的3D视频数据通过基本服务视频解码器来解码。另一方面,对于3D扩展服务,经解复用并发送的3D视频数据通过扩展服务视频解码器来解码。3D视频解码器110的基本服务解码器112可以用作左视图图像数据解码器142,3D视频解码器110的扩展服务解码器114可以用作右视图图像数据解码器144。
是经解码的数据的左视图图像数据和右视图图像数据分别由左视图图像数据解码器142和右视图图像数据解码器144处理,并且通过输出格式化器150输出作为3D视频。从信令信息处理器108发送的信令信息可以在该过程中被使用。
如上所述地执行处理从主频道发送的3D服务的过程。在该情形中,3D服务可以是基本服务。
另一方面,扩展服务可以通过副频道来发送。
在该情形中,如在图24中所示,可以按照与上述相同的方式来执行处理通过副频道发送的扩展服务的过程。
根据本发明,在该情形中,PIP缩放器132基于上述信令信息对由3D视频解码器130解码的3D PIP服务进行缩放。
经缩放的3D PIP数据的左视图PIP数据被发送到左视图图像数据解码器142,经缩放的3D PIP数据的右视图PIP数据被发送到右视图图像数据解码器144。
左视图图像数据解码器142将通过主频道发送的3D基本服务的左视图图像数据与构成通过副频道发送的3D PIP服务的3D PIP左视图图像数据混合,并且将混合后的数据发送到输出格式化器150。按照相同的方式,右视图图像数据解码器144将通过主频道发送的3D基本服务的右视图图像数据与构成通过副频道发送的3D PIP服务的3D PIP右视图图像数据混合,并且将混合后的数据发送到输出格式化器150。
基于显示单元的输出频率,输出格式化器150通过针对3D服务的处理来输出3D视频数据。输出格式化器150可以基于信令信息来执行视频数据处理,诸如,改变大小、视频格式化和帧速率转换。
与过滤器的类型相关的信息可以包括在改变大小信息中。在该情形中,和与过滤器类型相对应的过滤器属性相关的信息可以被存储在输出格式化器150或存储介质(未示出)中。
与本发明相关地,数字接收器可以参考与格式相关的信令信息和用于在3D虚拟频道中的3D服务提供的3D视频帧的配置信息。这可以等同地应用于3D频道和3DPIP频道。
而且,在上面的描述中,作为示例,图24的数字接收器处理PIP。该配置不仅限于PIP流处理。在数字接收器中,该配置可以用于在EPG画面上的预览或频道浏览,从而同时在一个画面上输出多个频道,便于频道选择。
可以按以下执行在数字接收器中选择和输出PIP频道的过程。
例如,如果附加3D PIP流提供频道存在,并且在相应的3D基本频道中提供PIP频道连接信息,则数字接收器可以使用在TVCT表段中的用于3D频道的另外的描述符,以信号的方式来发送与虚拟频道相关的信息,其中,用于该频道的3D PIP流通过该信息来发送。
而且,如果数字接收器对发送3D PIP服务的虚拟频道标志,则数字接收器可以使用用于相应频道的Extended_Service_Descriptor(或service_linkage_descriptor)。即,在3D频道和3D PIP频道之间的连接信息可以通过用于3D频道的描述符来获取。
例如,假设用户正在观看频道7-1并且希望以PIP的形式观看频道6-1的视频。
数字接收器使用第二调谐器来接收通过频道6-1接收的3DTV广播信号。
此时,数字接收器读取与频道6-1相对应的TVCT表段中的Extended_Service_Descriptor(或service_linkage_descriptor),并且使用包括在其中的信息来检查与接收PIP流的频道相关的信息。
假设用于频道6-1的PIP频道是频道6-2,则数字接收器解析与频道6-2相关的TVCT并且检查在PIP流中包括的视频基本流(视频ES)的PID值。而且,数字接收器解析3D_PIP_display_option_descriptor,并且基于经解析的信息而检查与在PIP实现期间的深度偏置和边界处理相关的信息。
数字接收器通过第二调谐器解码检查的视频基本流。之后,数字接收器根据检查的PIP_depth_offset和boundary_style来配置和输出PIP画面。
当用户希望在全画面上观看以3D PIP的形式提供的频道6-1时,数字接收器将通过频道6-1接收的视频流输出到全画面,使得用户在全画面上观看3D视频。
同时,如果附加3D PIP流提供频道存在,并且相应的3D基本频道的连接信息被提供在3D PIP频道中,则数字接收器可以利用与在TVCT表段中的3D PIP频道上的3D PIP流相关的信息来执行信令。具体地,数字接收器可以连接到具有3D PIPservice_type的频道以直接地接收3D PIP流。
例如,假设用户正在观看频道7-1并且希望以PIP的形式观看频道6-1。
数字接收器解析对与频道6-x相对应的频道标志的TVCT表段,并且从中检查service_type为3D PIP频道的虚拟频道。
数字接收器从(6-2)中检查提供用于频道6-1的3D PIP服务的频道编号。
数字接收器使用第二调谐器来接收通过频道6-2接收的3DTV广播信号。
数字接收器解析为相应频道用于TVCT表段,并且从中获取具有3D PIPservice_type的频道信息。数字接收器获取并/或(暂时地)存储3D PIP频道的3DPIP_display_option_descriptor和/或Base_Service_descriptor(或者service_linkage_descriptor或Extended_Service_descriptor)。
此时,假设PIP频道是频道6-2,则数字接收器为使用第二调谐器通过频道6-2接收的3D PIP广播信号的基本A/V流执行PID过滤,并且/或者解码视频/音频基本流。
数字接收器参考PIP_depth_offset和boundary_style在正被观看的频道7-1的画面上配置和输出频道6-2的PIP画面。
当用户希望在全画面上观看以3D PIP的形式观看的频道6-2时,数字接收器通过Base_Service_descriptor的基本服务信息(或者service_linkage_descriptor和/或extended_service_descriptor)来接收相应的3D频道。
此时,根据本发明,3D频道到PIP的连接或PIP到3D频道的连接是可能的。
而且,根据本发明,如果3D频道提供3D PIP实现信息,并且附加PIP流不存在,则数字接收器可以解码在3D频道TVCT表段中的包括用来将该频道输出到PIP的信息的描述符,并且基于该信息转换并输出用于PIP的3D基本服务的视频内容。
例如,假设用户正在观看频道7-1并且希望以PIP的形式在当前的窗口上观看频道6-1的画面(提供与到3D PIP的转换相关的信息)。
数字接收器使用第二调谐器来接收通过频道6-1接收的3DTV广播信号,并且获取和/或存储与频道6-1相对应的在TVCT表段中的3D_PIP_Display_descriptor和/或3D_PIP_implementation_descriptor信息。
数字接收器转换从频道6-1接收的3DTV视频流,以便于实时的PIP。此时,数字接收器可以执行视频大小转换和/或用于转换的深度调节。
数字接收器可以根据PIP_depth_offset和boundary_style在正被观看的频道7-1的画面上配置和输出获取的3D PIP画面。
当用户希望在全画面上观看以3D PIP的形式观看的频道6-1时,数字接收器可以将频道6-1在没有转换为PIP的情况下输出到全画面。
以上描述是基于将附加PIP流配置为独立的虚拟频道并且对在基本服务频道和PIP频道之间的关系进行标志的方法。在本发明中,可以提出在PIP流被包括在基本服务的虚拟频道中的状态下提供该PIP流的另一个方法。另外,可以考虑另外地将stream_type分配给用于PIP的流以在用于PIP的流和基本服务的基本流(ES)之间区分或者使用被分配了0x06的值的专用数据的方法。
而且,3D_PIP_Display_Option_Descriptor可以被添加到属于PMT的ES循环的PIP视频流的descriptor_loop,从而提供与PIP的输出选项相关的附加的信息。数字接收器可以确定该描述符是否存在,从而识别相应的ES是用于PIP的流。
另一方面,如果3D PIP流和基本流通过虚拟频道来发送,则数字接收器执行下面的操作。
首先,假设用户正在观看频道7-1并且希望以PIP的形式观看频道6-1的视频。
数字接收器使用第二调谐器来接收通过频道6-1接收的3DTV广播信号。
如果其stream_type是3D PIP的基本流(ES)存在于与频道6-1相应的PMT中,则数字接收器可以识别这是用于PIP的视频基本流。如果具有0x06的值的该stream_type用于PIP流,则数字接收器检查其stream_type为0x06的每一个流的descriptor_loop,以确定是否存在3D_display_option_descritpor。具有该描述符的基本流(ES)可以被确定为PIP流。
此时,数字接收器可以利用属于用于PIP的视频基本流的3D_PIP_Display_option_descriptor来检查与在PIP实现期间的depth_offset(深度偏置)和边界处理相关的信息。
而且,数字接收器可以通过第二调谐器解码经检查的视频基本流,并且根据PIP_depth_offset和boundary_style配置和输出PIP画面。
而且,如果在DVB方法中PIP服务被配置为附加流,则数字接收器执行下面的操作。
数字接收器可以使用SDT的service_descriptor和service_type字段来识别在相应的服务中是否提供了3D_PIP_service。在该情形中,链接到基本服务的PIP服务的存在可以通过Linkage_descriptor等来标志。可选地,支持PIP的接收器可以通过在将相同的service_type用作立体3DTV服务的同时检查为3D PIP所分配的3D_PIP_video_descriptor或流的存在,来识别3D PIP服务正在被提供。该流检查方法可以包括检查stream_type或component_type的方法。
为了输出用于相应服务的PIP流,数字接收器使用3D_PIP_video_descriptor来接收与PIP视频组件相关的component_tag信息(Component_tag_PIP)。
数字接收器解析在SDT中包括的3D_PIP_Display_option_descriptor,以检查与depth_offset和边界处理相关的信息。
数字接收器发现具有其值与SDT的service_id字段的值相一致的program_number字段的PMT并且解析该PMT。
数字接收器从PMT的基本流中发现如下的一个流,即,该流的ES_descriptor循环的stream_identifier_descriptor的component_tag字段的值为Component_tag_PIP,并且接收3D_PIP_video_component的elementary_PID信息(PID_PIP)。
数字接收器解码与该PID_PIP相对应的3D PIP视频信号。
数字接收器根据PIP_depth_offset和boundary_style来配置和输出PIP画面。
以上描述是基于数字接收器使用component_tag来从SDT表段的3D_PIP_video_descriptor中获取PIP视频流的PID的过程的。在该过程中,如之前所述,PMT的每一个ES的流类型可以被检查,或者流的组件类型可以通过SDT表段的component_descriptor来检查,以识别相应的流。仅当属于相应流类型的一个流存在时,这才是可用的。
与本发明相关地,数字接收器可以通过SDT表段来识别3D视频流,并且通过在PMT中包括的描述符来接收与各个3D视频流相关的详细信息。后一种情形可以通过SEI消息来了解。
数字接收器使用SDT的服务描述符的service_type字段来识别相应的频道是否提供3DTV服务。可选地,数字接收器可以检查用于3D服务的流是否包括在通过SDT的component_descriptor来标志的基本流(ES)的组件中,以检查是否提供3DTV服务。
数字接收器可以使用与通过SDT的component_descriptor来标志的stream_content字段和component_type字段相关的信息来识别相应的基本流(ES)是3D视频和/或3D PIP服务。
数字接收器发现具有其值与SDT的service_id字段的值相一致的program_number字段的PMT并且解析该PMT。
图25是例示根据本发明的3D基本服务和3D PIP服务信令的示例的图。
图25示出了根据本发明的其中使用linkage_descriptor来标志相应的3D基本服务和相应的3D PIP服务的实施方式。在该实施方式中,假设3D基本服务和3D PIP服务作为不同的服务而存在。
参考图25,PAT定义了相应节目的program_number值和PMT_PID。数字接收器基于该program_number值和PMT_PID来提取和解析PMT。
与3D基本服务相关地,如果program_number为2并且相应节目的stream_type为0x02,则PMT可以指示音频基本流,并且该音频基本流的PID为0x111。另一方面,如果program_number为2并且相应节目的stream_type为0xbc,则PMT可以指示视频基本流,并且该视频基本流的PID为0x112。该3D基本服务通过频道2来发送。
与3D PIP服务相关地,如果program_number为3并且相应节目的stream_type为0xbd,则PMT可以指示用于3D扩展服务(诸如,3D PIP服务)的视频基本流。在该情形中,PMT可以指示视频基本流的PID为0x113。该3D扩展服务通过频道3来发送。
总之,数字接收器不仅通过PAT和PMT识别相应的服务,而且还提取和处理用于相应服务的音频和/或视频基本流。
在上面,SDT可以通过service_id来与PMT的program_number映射,从而对相应的服务的类型进行标志。例如,PMT可以通过program_number和stream_type映射与一个服务(即,3D基本服务或3D PIP服务)相关的音频和/或视频基本流,并且根据SDT值来检查基本流的组合是否是3D基本服务或3D PIP服务。
如果SDT的service_id为2,则它可以对应于PMT的program_number2,并且在SDT中的service_descriptor可以将service_type定义为0x11(帧兼容的3D),以标志它为3D服务。另一方面,如果service_id为2,并且通过linkage_descriptor,linkage_type为0x05,则这可以指示它是service_replacement_service,并且3D PIP可以通过private_data()和replacement_type(0x03)来指示,从而对与service_id2相对应的3D服务的存在和处理进行标志。如果service_id为3,则service_descriptor可以将service_type定义为0x12,从而以相同的方式标志它为3D PIP服务。
与该情形相关地,在replacement_type和服务之间的关系被定义为如在表1中所示,以识别替换服务的类型。
[表1]
Replacement_type | 替换服务的类型 |
0x00 | HD联播 |
0x01 | SVC |
0x02 | 3D立体 |
0x03 | 3D PIP |
0x04-0xff | 预留使用 |
如果replacement_type字段的值为0x00,则替换服务的类型为HD联播。如果replacement_type字段的值为0x01,则替换服务的类型为SVC。如果replacement_type字段的值为0x02,则替换服务的类型为3D立体。如果replacement_type字段的值为0x04,则替换服务的类型为3D PIP。
图26是例示根据本发明使用3D信令信息来输出立体视频信号的示例的流程图。
解复用器过滤并且解析来自接收到的数字广播信号的SDT段。如之前所述,解复用器通过PID过滤来过滤SDT段。此时,PID可以被设置为例如0x0011,并且解复用器可以过滤具有相应的PID的TS包,以解析具有table_id=0x42的段数据(S102)。
信令信息处理器获取并存储在经解析的SDT中的服务循环中的服务描述符当中的与具有3D服务类型的服务相关的信息。此时,信令信息处理器获取并存储与3D服务相关的PMT信息(S104)。
信令信息处理器获取并存储在经解析的SDT中的服务循环中的与具有3D PIP服务类型的服务相关的信息。即,信令信息处理器获取并存储与3D PIP服务相关的PMT信息(S106)。
信令信息处理器从信令信息中解析linkage_descriptor,并且检查与使用经解析的linkage_descriptor的信息来链接的3D基本服务id相关的信息(S108)。在该情形中,数字接收器可以通过诸如EPG这样的广播指南来显示3D PIP服务的可用性。
信令信息处理器使用与3D PIP服务相关的PMT信息来检查与3D PIP视频流相关的PID信息(S110)。
数字接收器允许设置观看模式,即,全画面观看模式或PIP观看模式(S112)。
根据观看模式来执行下面的两个操作。首先,将描述其中全画面观看模式被设置的情形。
数字接收器选择提供3D基本服务的service id(S114)。此时,service id的service_type可以例如是3DTV。
数字接收器过滤用于基本A/V流的PID,并且解码视频/音频基本流(S116)。
控制器使用3D_Service_Descriptor信息来控制由输出格式化器解码的3D视频数据,从而在全画面上输出(S118)。
接着,将描述其中3D PIP观看模式被设置的情形。
数字接收器选择提供3D PIP视频的service_id(S120)。具有该service_id的频道的service_type字段的值可以指示例如3D PIP频道。
控制器控制解复用器和解码器过滤用于基本A/V流(即,3D PIP流)的PID,并且解码视频/音频基本流(S122)。
控制器使用通过3D_PIP_Display_option_descriptor获取的depth_offset和边界信息来设置PIP显示输出(S124)。
控制器输出经解码的3D PIP视频数据(S126)。
图27是例示根据本发明的相应的3D基本服务事件和3D PIP服务事件信令的示例的图。
参考图27,在3D基本服务事件和3D PIP服务事件之间的链接信息使用例如linkage descriptor来彼此相对应。此时,3D基本服务事件和3D PIP服务事件可以作为不同服务的事件而存在。
在图27中,除了EIT被使用以代替PMT之外,该示例的基本关系与在图25的PAT、PMT和SDT之间的关系相同。
参考图25和图27,EIT使用service_id链接到PMT的每一个节目。EIT也包括linkage_descriptor。因此,EIT通过在linkage_descriptor中的linkage_type和service_id来识别event_linkage,并且通过其中的target_event_id来标志与事件相关的信息。
这可以指示3D基本服务的目标事件的id为0x01,并且,在其中参考表1,target_event_type字段的值为0x03的情形中,这可以指示3D PIP服务事件。target_event_type字段的值例如可以按照表1中相同的方式来定义。在该情形中,仅项名称是不同。
可选地,EIT可以通过service_id和event_id链接到PMT,以直接地识别3D PIP服务事件。图28是例示根据本发明的IPTV服务搜索过程的图。图28是例示根据本发明的实施方式的在IPTV中的3D服务获取过程的图。
IPTV终端功能(ITF)为推/拉模式,其中,用于服务提供商发现(Service ProviderDiscovery)的信息从服务提供商接收。服务提供商发现是提供IPTV的服务提供商发现提供与其服务相关的信息的服务器的过程。例如,服务提供商发现如下地提供用于每一服务提供商的服务提供服务器。即,接收器如下地发现与服务发现(SD)服务器相关的信息(SP发现信息)被接收的地址列表。
在实施方式中,接收器从自动或人工地预设的地址接收服务提供商(SP)发现信息。此时,接收器可以从在ITF中预设的地址接收相应的信息,或者用户可以人工地设置具体地址,使得接收器接收用户所期望的SP发现信息。
在另一个实施方式中,接收器可以基于DHCP来执行SP发现。即,接收器可以使用DHCP选项来获得SP发现信息。
在又一个实施方式中,接收器可以基于DNS SRV来执行SP发现。即,接收器可以通过使用DNS SRV机制的询问来获得SP发现信息。
接收器访问具有使用以上方法获取的地址的服务器,以接收包括服务提供商发现记录的信息,该服务提供商发现记录包括对于服务提供商(SP)的服务发现必要的信息。接收器通过该包括服务提供商发现记录的信息来执行服务搜索过程。与服务提供商发现相关的数据可以以推模式或以拉模式来提供。
接收器基于SP发现记录的信息而访问服务提供商访问地址(例如,被指定为SPAttachmentLocator的地址)的SP附加服务器,以执行ITF登记过程(服务附加过程)。此时,从ITF传送到服务器的信息可以以例如ITFRegistrationInputType记录的形式发送,并且ITF可以以HTTP GET方法的查询条件的形式来提供该信息,从而执行服务附加。
在实施方式中,接收器可以选择性地访问被指定为SPAuthenticationLocator的SP的认证服务服务器以执行另外的认证过程,并且然后执行服务附加。在该情形中,接收器可以按照与服务附加的情形相似的形式来发送ITF信息,从而执行认证。
接收器可以以提供信息表(ProvisioningInfoTable)的形式来从服务提供商接收数据。该过程可以被省略。
接收器将该接收器的ID和位置信息包括于在ITFRegistrationInputType记录的服务附加过程期间将被发送到服务器的数据中。服务附加服务器可以基于由接收器提供的信息来指定通过接收器预订的服务。服务附加服务器可以提供服务信息可获取地址,该服务信息将以基于其的提供信息表的形式由接收器来接收。例如,该地址可以用作主SI表(MasterSI Table)的访问信息。该方法具有为每一个订户配置和提供定制的服务的效果。
接收器可以基于从服务提供商接收到的信息来接收虚拟频道映射表、虚拟频道描述表和/或源表。
虚拟频道映射表提供管理与虚拟频道映射相关的版本和访问信息的主SI表记录以及分组形式的服务列表。虚拟频道描述表包括每一个频道的详细信息。源表包括用于访问实际服务的访问信息。虚拟频道映射表、虚拟频道描述表和源表可以被分类为服务信息。如此的服务信息可以进一步包括以上描述符的信息。然而,在该情形中,信息的形式可以被改变以适合于IPTV的服务信息方案。
图29是例示根据本发明的IPTV服务SI表和其组件之间的关系的图。
图29是示出根据本发明的实施方式的用于IPTV的服务信息(SI)表的结构的图。
图29示出了服务提供商发现、附加元数据组件和服务发现元数据组件以及它们之间的关系。接收器可以根据由在图29中的箭头所指示的过程来处理接收到的数据。
服务提供商信息(ServiceProviderInfo)包括SP描述信息、认证位置信息和附加位置信息,其中,SP描述信息是与服务提供商相关的信息,认证位置信息是与提供和认证有关的信息的位置相关的信息,附加位置信息是与附加位置相关的信息。
接收器可以使用认证位置信息来执行与服务提供商相关的认证。
接收器可以使用在附加位置信息中包括的信息来访问能够接收提供信息(ProvisioningInfo)的服务器。提供信息可以包括主SI表位置、可用频道、订购的频道、紧急报警系统(EAS)位置和/或电子节目指南(EPG)数据位置,其中,主SI表位置包括能够接收主SI表的服务器地址,可用频道包括与能够被提供给观看者的频道相关的信息,订购的频道包括与订购的频道相关的信息,EAS位置包括与紧急报警相关的信息,EPG数据位置包括与EPG相关的位置信息。特别地,接收器可以使用主SI表位置来访问能够接收主SI表的地址。
主SI表记录包括能够接收虚拟频道映射的位置信息和虚拟频道映射的版本信息。
虚拟频道映射通过虚拟频道映射标识符来唯一地标识,并且虚拟频道映射版本具有虚拟频道映射的版本信息。如果按照从主SI表开始的箭头方向连接的所有表中的一个表被改变,则如此的改变导致相应表的版本号的增加和所有高级别表(包括主SI表)的版本号的增加。因此,通过监视主SI表,在所有SI表中的改变可以被立即检查。例如,如果源表改变,则如此的改变增加了源表的版本,即源版本(SourceVersion)。而且,该改变导致了包括对源表的参考的虚拟频道描述表的改变。如此,在低级别表中的改变引起了高级别表的改变,并且最终改变了主SI表。
仅一个主SI表可以为服务提供商而存在。然而,如果对于每一个区域或订户(或订户组)服务的配置是不同的,则配置另外的主SI表记录是有效的,从而为每一单元提供定制化的服务。在该情形中,可以通过执行服务附加步骤使用主SI表来提供适用于订户的区域和预订信息的服务。
主SI表记录提供虚拟频道映射的列表。虚拟频道映射可以通过虚拟频道映射标识符来标识。每一个虚拟频道映射表可以具有一个或更多个虚拟频道,并且指定可以获取与虚拟频道相关的详细信息的位置。虚拟频道描述位置(VirtualChannelDescriptionLocation)用来指定包括频道的详细信息的虚拟频道描述表的位置。
虚拟频道描述表包括虚拟频道的详细信息,并且可以访问能够将相应信息提供到虚拟频道映射的虚拟频道描述位置的位置。
虚拟频道服务ID(VirtualChannelServiceID)被包括在虚拟频道描述表中,并且用来标识与虚拟频道描述相对应的服务。接收器可以通过该虚拟频道服务ID找到虚拟频道描述表。如果接收器使用组播模式接收多个虚拟频道描述表,则接收器找到由特定的虚拟频道服务ID标识的虚拟频道描述表,同时加入相应的流,以连续地接收表。
在单播模式的情形中,接收器可以将虚拟频道服务ID作为参数而发送,从而仅接收期望的虚拟频道描述表。
源表提供对访问实际服务所必要的访问信息(例如,IP地址、端口、AV编解码器、传输协议等)和/或用于每一服务的源信息。因为一个源可以用于多个虚拟频道服务,所以单独地为每一个服务提供源信息可以是有效的。
主SI表、虚拟频道映射表、虚拟频道描述表和源表通过四个分离的流来逻辑地传送。可以不受限制地使用推模式或拉模式。
然而,主SI表可以以组播模式来发送以便于版本管理,并且接收器可以连续地接收传输主SI表的流,以监视版本改变。
图30是例示根据本发明的SourceReferenceType XML模式的示例的图。
图30是示出根据本发明的实施方式的SourceReferenceType的XML模式的图。
根据本发明的实施方式的SourceReferenceType的XML模式是参考包括虚拟频道服务的介质源信息的源元素的结构。
SourceReferenceType包括SourceId、SourceVersion和/或SourceLocator信息。
SourceId是所指的源元素的标识符。
SourceVersion是所指的源元素的版本。
SourceLocator提供能够接收到包括源元素的源表的位置。在实施方式中,如果DefaultSourceLocator(默认SourceLocator)和该元素是同时存在的,则该元素覆盖默认值。
图31是例示根据本发明的SourceType XML模式的示例的图。
图31是示出根据本发明的实施方式的SourceType的XML模式的图。
在实施方式中,根据本发明的SourceType的XML模式包括对于获取虚拟频道服务的介质源所必要的信息。
SourceType包括SourceId、SourceVersion、TypeOfSource、IpSourceDefinition和/或RfSourceDefinition信息。
SourceId是所指的源元素的标识符。在实施方式中,该标识符唯一地标识该源元素是必要的。
SourceVersion是所指的源元素的版本。在实施方式中,当源元素的内容改变时,其值应该增加。
TypeOfSource是指示相应的源的特性的值。将参考图32来描述该值的具体示例。
在实施方式中,Barker(巴克)频道是用于广告或公共信息的频道。当观看相应的频道没有被授权并且结果不可能观看相应的频道时,执行对该频道的自动选择,使得该频道用来推广频道并且引入对相应频道的预订。
IpSourceDefinition提供通过IP网络传输的介质源的访问信息。在实施方式中,IpSourceDefinition可以指示组播IP地址、传输协议和/或各种参数。
RfSourceDefinition可以提供通过有线TV网络传输的介质源的访问信息。
图32是例示根据本发明的TypeOfSourceType XML模式结构的示例的图。
图32是示出根据本发明的实施方式的TypeOfSourceType XML模式的图,其中该TypeOfSourceType XML模式被扩展为对与用于3D PIP服务的视频图像相关的信息进行标志。
在图32中,定义了指示相应的源的特性的TypeOfSource值。可以基于该值来指示根据本发明的HD、SD、PIP、SdBarker、HdBarker、PipBarker、3D HD、3D SD和3D PIP。在上面,Barker(巴克)频道是用于广告或公共信息的频道。当观看相应的频道没有被授权并且结果不可能观看相应的频道时,执行对该频道的自动选择,使得该频道用来推广频道并且引入对相应频道的预订。
图33是例示根据本发明的PIPDisplayOptionFor3DType XML模式结构的一个示例的图,图34是例示根据本发明的PIPDisplayOptionFor3DType XML模式结构的另一个示例的图。
图33和图34例示了根据本发明的用于3D PIP显示的选项值的类型和元素。
在PIPDisplayOptionFor3DType XML模式结构中,例如,如之前所述,例示了三个元素。
图33和图34的每一个元素的定义和属性可以例如等于图12的字段值。即,图33和图34以XML模式的形式来定义图12。
图35是例示根据本发明的IpSourceDefinitionType XML模式结构的示例的图。
例如,在IpSourceDefinition Type值中,图35以XML模式的形式配置了根据本发明的PIPDisplayOptionFor3DType值。
IpSourceDefinition Type包括MediaStream元素、RateMode元素、ScteSourceId元素、MpegProgramNumber元素、VideoEncoding元素、AudioEncoding元素(codec元素)、FecProfile元素和PIPDisplayOptionFor元素。
MediaStream元素包括关于该源的媒体流的IP组播会话描述。MediaStream元素包括asBandwidth属性。asBandwidth属性的单位可以表示为千比特/秒。asBandwidth属性的解释是最大的比特率。
RateMode元素包括节目制作源速率类型。例如,RateMode元素可以包括恒定比特率(CBR)或可变比特率(VBR)。
ScteSourceId元素可以包括MPEG-2TS的源ID。
MpegProgramNumber元素可以包括MPEG节目编号。
VideoEncoding元素指示媒体源的视频编码格式。
AudioEncoding元素可以指示用于以在互联网号码分配当局(IANA)登记的音频MIME类型的形式的节目制作源的音频编码的描述。
如果可行的话,FecProfile元素指示IP FEC属性。
在图33和图34中所示的元素被包括作为在IpSourceDefinition Type中的PIPDisplayOptionFor元素的子元素。
在上面,codec元素可以定义3D PIP服务以及3D基本服务。
图36是例示根据本发明的RfSourceDefinitionType XML模式结构的示例的图。
图36例示RfSourceDefinitionType XML模式结构。与图35中相同的每一个元素的定义和内容的详细描述将被省略。
在图36中,RfSourceDefinitionType根据其特性包括FrequencyInKHz元素、Modulation元素、RfProfile元素和DvbTripleId元素。
FrequencyInKHz元素指示以KHz计数的源的RF频率。与调制类型无关,这指示中心频率。
Modulation元素指示RF调制类型。例如,可以指示NTSC、QAM-64、QAM-256或8-VSB等
RfProfile元素可以指示基本流类型。例如,可以指示SCTE、ATSC或DVB等
DvbTripleId元素指示关于广播流的DVB三联体(triplet)标识符。
图37是例示根据本发明的PIPImplementationFor3DType XML模式结构的示例的图,图38是例示根据本发明的PIPImplementationFor3DType XML模式结构的另一个示例的图,图39是例示根据本发明的IpSourceDefinitionType XML模式结构的另一个示例的图。
图37和图38提供了用于3D PIP实现的信息。例如,图37和图38可以是图13的XML模式结构。因此,将省略每一个子元素的定义和内容的详细描述。
图39例示了其中图37和图38的模式结构被附加地包括在图35的IpSourceDefinitionType中的情形。
图40是例示根据本发明的SIXML模式结构的示例的图。
SI信息可以包括服务的属性和服务信息。
SI信息可以包括Name信息、Description信息、service description location信息、content genre信息、country availability信息、replacement service信息、mosaic description信息、announcement support信息、PIPDisplayOptionFor3D信息和IPImplementationFor3D信息。
Name信息可以以文本的形式指示用户已知的服务名称。
Description信息可以指示服务的文本描述。
ServiceDescriptionLocation信息可以指示用于BCG discovery元素的BCG记录的标识符,该BCG discovery元素用于传送规定信息(provision information)。
ContentGenre信息可以指示服务的(主要)类型。
CountryAvailability信息可以指示能够或不能够被提供服务的国家的列表。
ReplacementService信息可以指示在SI记录所指的服务不能被提供的情况下,与另一个服务的连接的详细内容。
MosaicDescription信息可以指示被显示为镶嵌流(mosaic stream)的服务或服务包的详细内容。
AnnouncementSupport信息可以指示服务所支持的声明。而且,AnnouncementSupport信息可以指示与声明位置相关的链接信息。
PIPDisplayOptionFor3D信息和IPImplementationFor3D信息与上述相同,并且因此,将省略其详细描述。
根据本发明的实施方式,在DVB IPTV系统中,每一个IPTV服务以IPService为单元表示在服务发现和选择(DVB SD&S)中。其中,SI元素提供与服务相关的附加的详细信息。该信息几乎同样地提供在DSV SI上的SDT中包括的内容。为了对其进行扩展,如以下所述地,另外地提供与3D PIP显示相关的信息。
即使在DVB IPTV系统中,可以按照与之前所述的方式相同的方式,在以MPEG2TS的形式的TS中配置DSV SI信息,并且通过IP网络发送DSV SI信息,从而按照与在现有的DVB广播中相同的方式来使用DSV SI信息。
图41是例示根据本发明的用来处理3D服务的数字接收器的另一个示例的图。
图41是示出根据本发明的实施方式的IPTV接收器的图。
根据本发明的实施方式的IPTV接收器包括网络接口41010、TPC/IP管理器41020、服务控制管理器41030、服务传送管理器41040、内容DB41050、PVR管理器41060、服务发现管理器41070、元数据管理器41080、SI&元数据DB41090、PSI&(PSIP和/或DVB-SI)解码器41100、解复用器(DEMUX)41110、音频和视频解码器41120、本地TV应用管理器41130、和/或A/V和OSD显示器41140。
网络接口41010用来发送/接收IPTV包。网络接口41010在物理层和/或数据链路层操作。
TPC/IP管理器41020负责发送端到端的包。即,TPC/IP管理器41020用来管理包从源到目的地的传输。TPC/IP管理器41020用来将IPTV包分发和发送到合适的管理器。
服务控制管理器41030用来选择和控制服务。服务控制管理器41030可以用来管理会话。例如,服务控制管理器41030可以使用互联网组管理协议(IGMP)或RTSP来选择实时广播服务。例如,服务控制管理器41030可以使用RTSP来选择视频点播(VOD)内容。例如,如果使用IP多媒体子系统(IMS),则服务控制管理器41030可以使用会话发起协议(SIP)通过IMS网关来执行会话初始化和/或管理。为了控制按需传输以及通过TV广播或音频广播的传输,使用RTSP协议。针对实时媒体流,RTSP协议使用连续的TCP连接并且支持窍门模式控制。
服务传送管理器41040参与实时流化和/或控制内容下载。服务传送管理器41040从内容DB41050中检索内容,便于将来的使用。服务传送管理器41040可以将实时传输协议(RTP)/RTP控制协议(RTCP)与MPEG-2传输流(TS)一起使用。在该情形汇中,MPEG-2包使用RTP来封装。服务传送管理器41040解析RTP包并且将经解析的包发送到解复用器41110。服务传送管理器41040可以使用RTCP来发送网络接收的反馈。MPEG-2传输包可以使用用户数据报协议(UDP)来直接地发送,而不用RTP。为了内容下载,服务传送管理器41040可以将超文本传输协议(HTTP)或单向文件传输协议(FLUTE)用作传输协议。服务传送管理器41040可以用来处理发送3D视频构成信息的流。即,如果上述3D视频构成信息通过流来发送,则它可以由服务传送管理器41040来处理。
内容DB41050是用于从实时媒体TV记录的内容或由内容下载系统发送的内容的数据库。
PVR管理器41060用来记录和再生实时的流内容。PVR管理器41060收集对于记录的内容所必要的所有元数据以及用于更好的用户环境的另外的信息。例如,可以包括缩略图图像或索引。
服务发现管理器41070通过双向IP网络来搜索IPTV服务。服务发现管理器41070提供与可选择的服务相关的所有信息。
元数据管理器41080管理元数据的处理。
SI&元数据DB41090链接到元数据DB以管理元数据。
PSI&(PSIP和/或DVB-SI)解码器41100是PSI控制模式。可以包括PSIP或DVB-SI以及PSI。在下面,PSI被用作包括它们的概念。PSI&(PSIP和/或DVB-SI)解码器41100设置用于PSI表的PID,并且将设置的PID发送到解复用器41110。PSI&(PSIP和/或DVB-SI)解码器41100解码从解复用器41110发送的PSI专用段。解码的结果被用来设置音频和视频PID,该音频和视频PID被用来解复用输入的TP。
解复用器41110从输入的传输包(TP)中解复用音频、视频和PSI表。解复用器41110由PSI&(PSIP和/或DVB-SI)解码器41100控制,以解复用PSI表。解复用器41110生成PSI表段并且将生成的PSI表段输出到PSI&(PSIP和/或DVB-SI)解码器41100。另外,解复用器41110被控制为解复用A/V TP。
音频和视频解码器41120可以解码视频和/或音频基本流包。音频和视频解码器41120包括音频解码器和/或视频解码器。音频解码器解码音频基本流包。视频解码器解码视频基本流包。
本地TV应用管理器41130包括UI管理器41140和/或服务管理器41135。本地TV应用管理器41130支持在TV屏幕上的图形用户界面。本地TV应用管理器41130可以接收来自遥控器或前面板的用户键。本地TV应用管理器41130可以管理TV系统的状态。本地TV应用管理器41130可以用来配置3D OSD并且控制其输出。
UI管理器41140可以控制用户界面显示在TV屏幕上。
服务管理器41135用来控制与服务相关的管理器。例如,服务管理器41135可以控制服务控制管理器41030、服务传送管理器41040、IG-OITF客户端、服务发现管理器41070和元数据管理器41080。服务管理器41135处理与3D PIP显示相关的信息以控制3D视频图像的显示。
A/V和OSD显示器41150接收音频数据和视频数据,以控制视频数据的显示和音频数据的再生。A/V和OSD显示器41150可以基于3D PIP信息来执行视频数据处理,诸如,通过过滤实现的改变大小、视频格式化和帧速率转换。A/V和OSD显示器41150控制OSD的输出。在3D服务的情形中,A/V和OSD显示器41150可以用作3D输出格式化器,以接收左视图图像和右视图图像并且将接收到的左视图图像和右视图图像输出作为立体视频。在该过程期间,3D OSD可以与该视频结合地输出。而且,A/V和OSD显示器41150可以用作用于3D PIP服务的PIP缩放器。
图42是例示根据本发明的用来处理3D服务的数字接收器的又一个示例的图。
图42是示出根据本发明的实施方式的IPTV接收器的功能块的图。
根据本发明的实施方式的IPTV接收器的功能块可以包括线缆调制解调器/DSL调制解调器42010、以太网NIC42020、IP网络协议栈42030、XML语法分析器42040、文件处理器42050、EPG处理器42060、SI处理器42070、存储单元42080、SI解码器42090、EPG解码器42100、ITF操作控制器42110、频道服务管理器42120、应用管理器42130、解复用器42140、SI语法分析器42150、音频/视频解码器42160和/或显示模块42170。
在本发明中主要操控的模块由粗线表示。实线箭头表示数据路径,并且虚线箭头表示控制信号路径。各个功能块的详细描述如下所述。
线缆调制解调器/DSL调制解调器42010解调制通过在物理层的ITF和IP网络之间连接的接口和物理介质传输的信号,并且恢复数字信号。
以太网NIC42020是将通过物理接口发送的信号恢复为IP数据的模块。
IP网络协议栈42030是基于IP协议栈来处理每一层的模块。
XML语法分析器42040是解析为接收到的IP数据之一的XML文档的模块。
文件处理器42050是处理接收到的IP数据中的通过FLUTE以文件的形式接收到的数据的模块。
EPG处理器42060是如下的模块,该模块处理在接收到的文件类型数据中的与IPTV EPG数据相对应的一部分,并且将与IPTV EPG数据相对应的所述一部分存储在存储单元中。
SI处理器42070是如下的模块,该模块处理在接收到的文件类型数据中的与IPTVSI数据相对应的一部分,并且将与IPTV SI数据相对应的所述一部分存储在存储单元中。
存储单元42080是用来存储诸如必须要被存储的SI和EPG这样的数据的存储单元。
SI解码器42090是如下的装置,即,如果频道映射信息是必要的,则从存储单元42080中读取SI数据和对其进行分析,以恢复必要的信息。
EPG解码器42100是如下的装置,即,如果EPG信息是必要的,则从存储单元42080中读取EPG数据和对其进行分析,以恢复必要的信息。
ITF操作控制器42110是用于控制ITF的操作(诸如,频道改变、EPG显示等)的主控制单元。
频道服务管理器42120是接收用户输入并且管理诸如频道改变这样的操作的模块。
应用管理器42130是接收用户输入并且管理诸如EPG显示这样的应用服务的模块。
解复用器42140是如下的模块,该模块从接收到的IP数据报中提取MPEG-2传输流数据,并且根据PID将MPEG-2传输流数据发送到相应的模块。
SI语法分析器42150是如下的模块,该模块提取并解析PSI/PSIP数据,该PSI/PSIP数据包括用于访问节目元素的信息,诸如在接收到的IP数据报中的MPEG-2传输流的各个数据(音频/视频等)的PID信息。
音频/视频解码器42160是如下的模块,该模块解码接收到的音频和视频数据,并且将解码后的音频和视频数据发送到显示模块。
显示模块42170组合和处理接收到的A/V信号和OSD信号,并且将处理后的A/V信号和OSD信号输出到屏幕和扬声器。显示模块42170可以根据与3D PIP显示相关的信息而将3D PIP与2D/3D基本服务一起输出。显示模块42170可以基于3D PIP信息来执行视频数据处理,诸如,通过过滤实现的改变大小、视频格式化和帧速率转换。而且,在3D视频的情形中,显示模块42170用来执行在L视图图像和R视图图像之间的分离并且通过格式化器输出3D图像。而且,显示模块42170可以用来处理OSD,从而利用与3D深度相关的信息来将OSD与3D图像一起显示。
本发明的模式
已经结合实现本发明的最佳模式来描述了多个实施方式。
根据本发明,即使在3D环境中也可以支持在2D环境中所支持的服务,从而标志和适当地处理3D PIP或预览服务以及将3D PIP或预览服务提供给用户,并且将3DPIP或预览服务应用于内容指南,由此提高3D服务的便利性和实现3D服务的容易使用。
根据本发明的方法可以以程序指令的形式来实现,该程序指令可由各种计算装置来执行并且写在计算机可读介质中。计算机可读介质可以包括计算机指令、数据文件和数据结构或者其组合。在介质中记录的程序指令可以被特别地设计和配置用于本发明,或者对于计算机软件领域的技术人员而言是公知的。计算机可读介质的示例可以包括:磁介质,诸如硬盘、软盘和磁带;光学介质,诸如只读光盘(CD-ROM)和数字多用盘(DVD);磁光介质,诸如软式光盘;和硬件装置,诸如只读存储器(ROM)、随机存取存储器(RAM)和闪存,它们被特别地构造为存储和执行程序指令。程序指令的示例可以包括:可由计算机使用解释器来执行的高级语言代码以及由编译器生成的机器语言代码。硬件装置可以被构造为用作执行本发明的操作的一个或更多个软件模块,或者反之亦然。
本领域技术人员将清楚的是,在不脱离本发明的精神和范围的情况下,在本发明中可以进行各种修改和改变。因此,本发明意图覆盖本发明的修改和改变,只要它们落入随附权利要求和它们的等价物的范围内即可。
工业应用
本发明涉及处理3D视频内容的方法和数字接收器。本发明可广泛地用于数字和通信领域。因此,本发明具有工业应用性。
Claims (18)
1.一种处理3D视频数据的数字接收器,所述数字接收器包括:
接收单元,所述接收单元用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;
解复用器,所述解复用器用于从所述第一广播信号和所述第二广播信号中解复用3D服务数据和所述信令数据;
控制器,所述控制器用于基于经解复用的第一信令数据来获取与接收所述第二广播信号的频道相关的信息,以控制所述第二广播信号的接收,并且基于所述第二信令数据而控制接收到的所述第二广播信号中的所述3D服务数据被输出到显示画面的预定位置;
解码器,所述解码器用于解码所述3D服务数据;
格式化器,所述格式化器用于根据所述显示画面的输出格式来格式化经解码的3D服务数据;以及
显示单元,所述显示单元用于将经格式化的3D服务数据输出到所述显示画面。
2.根据权利要求1所述的数字接收器,其中,所述第一3D服务是3D基本服务或3D扩展服务,所述第二3D服务是根据所述第一3D服务的类型决定的3D扩展服务或3D基本服务,并且所述3D扩展服务是3D PIP服务和/或3D预览服务。
3.根据权利要求2所述的数字接收器,其中,所述第一信令数据包括用来标识通过相应虚拟频道发送的所述第一3D服务是否是所述3D基本服务或所述3D扩展服务的信息。
4.根据权利要求3所述的数字接收器,其中,如果所述第一3D服务是所述3D基本服务,则所述第一信令数据包括连接信息,以标识链接到所述3D基本服务的所述3D扩展服务是否存在并且接收所述3D扩展服务。
5.根据权利要求3或4所述的数字接收器,其中,如果所述第一3D服务是所述3D基本服务,则所述第一信令数据包括连接信息,以标识包括链接到所述3D基本服务的所述3D扩展服务的所有关联的服务是否存在并且接收各个关联的服务。
6.根据权利要求3所述的数字接收器,其中,如果所述第一3D服务是所述3D扩展服务,则所述第一信令数据包括连接信息,以标识链接到所述3D扩展服务的所述3D基本服务是否存在并且接收所述3D基本服务。
7.根据权利要求6所述的数字接收器,其中,所述第一信令数据包括从以下信息中选择的至少一个信息:与从所述扩展服务所处的深度平面到所述显示画面的距离相关的信息,与从所述扩展服务的边缘所处的深度平面到所述显示画面的距离相关的信息,和指示由所述扩展服务的边界隔开的边缘的厚度的信息,从而将所述3D扩展服务输出到所述显示画面。
8.根据权利要求6或7所述的数字接收器,其中:
所述第一信令数据包括与所述扩展服务的大小相关的信息和/或与所述扩展服务的深度对称性相关的信息,从而将所述3D扩展服务输出到所述显示画面,
所述与所述扩展服务的大小相关的信息包括与所述扩展服务的高度和宽度相关的信息和/或与所述扩展服务的分辨率相关的信息,并且
所述与所述扩展服务的深度对称性相关的信息包括与所述扩展服务的深度范围相关的信息和/或与所述扩展服务的最大深度值和最小深度值相关的信息。
9.一种处理3D视频数据的数字接收器,所述数字接收器包括:
接收单元,所述接收单元用于通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号,并且通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;
解复用器,所述解复用器用于从所述第一广播信号和所述第二广播信号中解复用3D服务数据和所述信令数据;
控制器,所述控制器用来基于经解复用的第一信令数据而控制接收到的第二广播信号转换为3D扩展服务并且输出到显示画面的预定位置;
解码器,所述解码器用于解码所述3D服务数据;
格式化器,所述格式化器根据所述显示画面的输出格式来格式化经解码的3D服务数据;以及
显示单元,所述显示单元用于将经格式化的3D服务数据输出到所述显示画面。
10.一种在数字接收器中处理3D视频数据的方法,所述方法包括以下步骤:
通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号;
基于所述第一信令数据而通过第二频道来接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;
基于所述第二信令数据而解码3D服务数据;以及
将经解码的第一3D服务数据和经解码的第二3D服务数据输出到显示画面的预定区域。
11.根据权利要求10所述的方法,其中,所述第一3D服务是3D基本服务或3D扩展服务,所述第二3D服务是根据所述第一3D服务的类型决定的3D扩展服务或3D基本服务,并且所述3D扩展服务是3D PIP服务和/或3D预览服务。
12.根据权利要求11所述的方法,其中,所述第一信令数据包括用来标识通过相应虚拟频道发送的所述第一3D服务是否是所述3D基本服务或所述3D扩展服务的信息。
13.根据权利要求12所述的方法,其中,如果所述第一3D服务是所述3D基本服务,则所述第一信令数据包括连接信息,以标识链接到所述3D基本服务的所述3D扩展服务是否存在并且接收所述3D扩展服务。
14.根据权利要求12或13所述的方法,其中,如果所述第一3D服务是所述3D基本服务,则所述第一信令数据包括连接信息,以标识包括链接到所述3D基本服务的所述3D扩展服务的所有关联的服务是否存在并且接收各个关联的服务。
15.根据权利要求12所述的方法,其中,如果所述第一3D服务是所述3D扩展服务,则所述第一信令数据包括连接信息,以标识链接到所述3D扩展服务的所述3D基本服务是否存在并且接收所述3D基本服务。
16.根据权利要求15所述的方法,其中,所述第一信令数据包括从以下信息中选择的至少一个信息:与从所述扩展服务所处的深度平面到所述显示画面的距离相关的信息,与从所述扩展服务的边缘所处的深度平面到所述显示画面的距离相关的信息,和指示由所述扩展服务的边界隔开的边缘的厚度的信息,从而将所述3D扩展服务输出到所述显示画面。
17.根据权利要求15或16所述的方法,其中:
所述第一信令数据包括与所述扩展服务的大小相关的信息和/或与所述扩展服务的深度对称性相关的信息,从而将所述3D扩展服务输出到所述显示画面,
所述与所述扩展服务的大小相关的信息包括与所述扩展服务的高度和宽度相关的信息和/或与所述扩展服务的分辨率相关的信息,并且
所述与所述扩展服务的深度对称性相关的信息包括与所述扩展服务的深度范围相关的信息和/或与所述扩展服务的最大深度值和最小深度值相关的信息。
18.一种在数字接收器中处理3D视频数据的方法,所述方法包括以下步骤:
通过第一频道接收包括第一3D服务和用于所述第一3D服务的第一信令数据的第一广播信号;
通过第二频道接收包括与所述第一3D服务相关的第二3D服务和用于所述第二3D服务的第二信令数据的第二广播信号;
从所述第一广播信号和所述第二广播信号中解析3D服务数据和所述信令数据;
基于所述第一信令数据将第二3D服务数据转换为3D扩展服务;
解码所述3D服务数据;以及
将经解码的3D服务数据输出到显示画面的预定区域。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US37937410P | 2010-09-01 | 2010-09-01 | |
US61/379,374 | 2010-09-01 | ||
PCT/KR2011/006494 WO2012030177A2 (ko) | 2010-09-01 | 2011-09-01 | 디지털 수신기 및 디지털 수신기에서의 3d 컨텐트 처리 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103081498A true CN103081498A (zh) | 2013-05-01 |
CN103081498B CN103081498B (zh) | 2017-05-17 |
Family
ID=45773404
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201180042405.6A Expired - Fee Related CN103081498B (zh) | 2010-09-01 | 2011-09-01 | 数字接收器和用于在数字接收器中处理3d内容的方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9386295B2 (zh) |
EP (1) | EP2613551B1 (zh) |
KR (1) | KR101853665B1 (zh) |
CN (1) | CN103081498B (zh) |
CA (1) | CA2809143C (zh) |
WO (1) | WO2012030177A2 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105075253A (zh) * | 2014-02-21 | 2015-11-18 | Lg电子株式会社 | 用于处理3维广播信号的方法和设备 |
CN106791795A (zh) * | 2017-01-03 | 2017-05-31 | 京东方科技集团股份有限公司 | 3d视频流的发送方法及发送装置、接收方法及接收装置 |
CN107534794A (zh) * | 2015-04-23 | 2018-01-02 | Lg 电子株式会社 | 发送广播信号的装置、接收广播信号的装置、发送广播信号的方法和接收广播信号的方法 |
CN111556342A (zh) * | 2014-06-30 | 2020-08-18 | Lg 电子株式会社 | 用于接收广播信号的装置与方法 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130300823A1 (en) * | 2012-05-10 | 2013-11-14 | Jiun-Sian Chu | Stereo effect enhancement systems and methods |
US9716904B2 (en) * | 2012-05-17 | 2017-07-25 | Ericsson Ab | Video content presentation override control systems, methods and devices |
CN106105236A (zh) | 2014-02-21 | 2016-11-09 | Lg 电子株式会社 | 广播信号发射设备和广播信号接收设备 |
KR102262086B1 (ko) * | 2014-05-28 | 2021-06-09 | 삼성전자 주식회사 | 이미지 처리 방법 및 장치 |
KR101812186B1 (ko) * | 2014-09-25 | 2017-12-26 | 엘지전자 주식회사 | 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 |
GB2548346B (en) * | 2016-03-11 | 2020-11-18 | Sony Interactive Entertainment Europe Ltd | Image processing method and apparatus |
CN112040287A (zh) * | 2020-08-31 | 2020-12-04 | 聚好看科技股份有限公司 | 显示设备及视频播放方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1578430A (zh) * | 2003-06-26 | 2005-02-09 | 三星电子株式会社 | 显示双屏的方法和装置 |
CN1764257A (zh) * | 2004-10-18 | 2006-04-26 | 三星电子株式会社 | 有线卡固件升级时再现图像的画中画图像再现装置及方法 |
CN1774937A (zh) * | 2003-04-17 | 2006-05-17 | 夏普株式会社 | 三维图像生成装置、三维图像再现装置、三维图像处理装置、三维图像处理程序及记录该程序的记录介质 |
CN101155281A (zh) * | 2006-09-25 | 2008-04-02 | 三星电子株式会社 | 具有数字广播接收能力的移动终端和画中画显示控制方法 |
US20100157025A1 (en) * | 2008-12-02 | 2010-06-24 | Lg Electronics Inc. | 3D caption display method and 3D display apparatus for implementing the same |
CA2748510A1 (en) * | 2008-12-30 | 2010-07-08 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3d image integration service, and digital broadcast receiving device using the same |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5900916A (en) * | 1996-12-30 | 1999-05-04 | Mitsubishi Consumer Electronics America, Inc. | Apparatus for control of images from multiple sources |
EP1292133A1 (en) * | 2001-09-06 | 2003-03-12 | Koninklijke Philips Electronics N.V. | Multi-picture display |
JP2004274125A (ja) | 2003-03-05 | 2004-09-30 | Sony Corp | 画像処理装置および方法 |
KR100747598B1 (ko) * | 2005-12-09 | 2007-08-08 | 한국전자통신연구원 | 디지털방송 기반의 3차원 입체영상 송수신 시스템 및 그방법 |
KR101379337B1 (ko) * | 2007-12-04 | 2014-03-31 | 삼성전자주식회사 | 삼차원적 pip 영상을 제공하는 영상기기 및 이를 적용한영상표시방법 |
US20110256561A1 (en) | 2008-12-24 | 2011-10-20 | The University Of Tokyo | Liver disease marker, method and apparatus for measuring the same, and method for assaying pharmaceutical preparation |
CA2749583C (en) | 2009-02-01 | 2016-01-12 | Lg Electronics Inc. | Broadcast receiver and 3d video data processing method |
KR101611263B1 (ko) * | 2009-11-12 | 2016-04-11 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
KR20110053160A (ko) * | 2009-11-13 | 2011-05-19 | 삼성전자주식회사 | 비디오 부가 재생 정보의 3차원 깊이감 조절을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치 |
KR20110058035A (ko) * | 2009-11-25 | 2011-06-01 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
EP2334088A1 (en) * | 2009-12-14 | 2011-06-15 | Koninklijke Philips Electronics N.V. | Generating a 3D video signal |
US20110149040A1 (en) * | 2009-12-17 | 2011-06-23 | Ilya Klebanov | Method and system for interlacing 3d video |
KR101638536B1 (ko) * | 2009-12-29 | 2016-07-11 | 엘지전자 주식회사 | 영상표시장치 및 그 제어방법 |
-
2011
- 2011-09-01 WO PCT/KR2011/006494 patent/WO2012030177A2/ko active Application Filing
- 2011-09-01 KR KR1020137001712A patent/KR101853665B1/ko active IP Right Grant
- 2011-09-01 CN CN201180042405.6A patent/CN103081498B/zh not_active Expired - Fee Related
- 2011-09-01 CA CA2809143A patent/CA2809143C/en not_active Expired - Fee Related
- 2011-09-01 EP EP11822152.2A patent/EP2613551B1/en not_active Not-in-force
- 2011-09-01 US US13/819,958 patent/US9386295B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1774937A (zh) * | 2003-04-17 | 2006-05-17 | 夏普株式会社 | 三维图像生成装置、三维图像再现装置、三维图像处理装置、三维图像处理程序及记录该程序的记录介质 |
CN1578430A (zh) * | 2003-06-26 | 2005-02-09 | 三星电子株式会社 | 显示双屏的方法和装置 |
CN1764257A (zh) * | 2004-10-18 | 2006-04-26 | 三星电子株式会社 | 有线卡固件升级时再现图像的画中画图像再现装置及方法 |
CN101155281A (zh) * | 2006-09-25 | 2008-04-02 | 三星电子株式会社 | 具有数字广播接收能力的移动终端和画中画显示控制方法 |
US20100157025A1 (en) * | 2008-12-02 | 2010-06-24 | Lg Electronics Inc. | 3D caption display method and 3D display apparatus for implementing the same |
CA2748510A1 (en) * | 2008-12-30 | 2010-07-08 | Lg Electronics Inc. | Digital broadcast receiving method providing two-dimensional image and 3d image integration service, and digital broadcast receiving device using the same |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105075253A (zh) * | 2014-02-21 | 2015-11-18 | Lg电子株式会社 | 用于处理3维广播信号的方法和设备 |
CN111556342A (zh) * | 2014-06-30 | 2020-08-18 | Lg 电子株式会社 | 用于接收广播信号的装置与方法 |
US11617007B2 (en) | 2014-06-30 | 2023-03-28 | Lg Electronics Inc. | Broadcast receiving device, method of operating broadcast receiving device, linking device for linking to broadcast receiving device, and method of operating linking device |
CN107534794A (zh) * | 2015-04-23 | 2018-01-02 | Lg 电子株式会社 | 发送广播信号的装置、接收广播信号的装置、发送广播信号的方法和接收广播信号的方法 |
CN106791795A (zh) * | 2017-01-03 | 2017-05-31 | 京东方科技集团股份有限公司 | 3d视频流的发送方法及发送装置、接收方法及接收装置 |
Also Published As
Publication number | Publication date |
---|---|
CA2809143C (en) | 2017-07-04 |
EP2613551A2 (en) | 2013-07-10 |
WO2012030177A3 (ko) | 2012-05-31 |
US20130155186A1 (en) | 2013-06-20 |
KR101853665B1 (ko) | 2018-05-02 |
CA2809143A1 (en) | 2012-03-08 |
US9386295B2 (en) | 2016-07-05 |
EP2613551B1 (en) | 2017-04-26 |
WO2012030177A2 (ko) | 2012-03-08 |
EP2613551A4 (en) | 2014-06-11 |
KR20130096223A (ko) | 2013-08-29 |
CN103081498B (zh) | 2017-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10091486B2 (en) | Apparatus and method for transmitting and receiving digital broadcasting signal | |
CN103081498B (zh) | 数字接收器和用于在数字接收器中处理3d内容的方法 | |
US9338431B2 (en) | Method and apparatus for processing a broadcast signal for 3D broadcast service | |
CN102972039B (zh) | 处理图像的设备及处理图像的方法 | |
KR101875615B1 (ko) | 삼차원 디스플레이를 위한 디지털 방송 신호를 처리하는 방법 및 장치 | |
US20140118490A1 (en) | Digital broadcast receiving method providing two-dimensional image and 3d image integration service, and digital broadcast receiving device using the same | |
US9549228B2 (en) | Broadcast signal processing method and device for 3-dimensional (3D) broadcasting service | |
KR101844227B1 (ko) | 방송 수신기 및 3d 비디오 데이터 처리 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170517 Termination date: 20210901 |
|
CF01 | Termination of patent right due to non-payment of annual fee |