CN102415100B - 广播接收机及其3d视频数据处理方法 - Google Patents

广播接收机及其3d视频数据处理方法 Download PDF

Info

Publication number
CN102415100B
CN102415100B CN201080018328.6A CN201080018328A CN102415100B CN 102415100 B CN102415100 B CN 102415100B CN 201080018328 A CN201080018328 A CN 201080018328A CN 102415100 B CN102415100 B CN 102415100B
Authority
CN
China
Prior art keywords
video data
information
complementary
video
complementary video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080018328.6A
Other languages
English (en)
Other versions
CN102415100A (zh
Inventor
N·楠哈库马尔
徐琮烈
崔昇钟
任振奭
梁正烋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Priority to CN201510005202.XA priority Critical patent/CN104486612B/zh
Publication of CN102415100A publication Critical patent/CN102415100A/zh
Application granted granted Critical
Publication of CN102415100B publication Critical patent/CN102415100B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H04N21/42615—Internal components of the client ; Characteristics thereof for processing the incoming bitstream involving specific demultiplexing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明披露了一种广播接收机及其3D视频数据处理方法。根据本发明的一个实施例的广播接收机的3D视频数据处理方法包括：通过接收单元接收包括3D视频数据和3D互补视频信息的广播信号，其中所述3D视频数据包括半分辨率基视频数据和用于配置全分辨率图像的互补视频数据；通过3D视频信息处理单元解析3D互补视频信息；通过基视频解码器解码所述半分辨率基视频数据；通过互补视频解码器解码用于配置全分辨率图像的所述互补视频数据；以及通过输出格式器使用所述3D互补视频信息来对所述基视频数据和所述互补视频数据进行组合和格式化，从而输出全分辨率3D图像。

Description

广播接收机及其3D视频数据处理方法
技术领域
本发明涉及用于处理广播信号的设备和方法，尤其涉及3D广播系统中处理全分辨率视频数据的广播接收机及其3D视频数据处理方法。
背景技术
通常，三维(3D)图像(或立体感图像)通过使用人双眼的立体视觉的原理提供立体效果。人(或个体)通过双眼之间的视差来感测空间感，换言之，以大约65毫米(mm)的距离相间隔的个体双眼所引起的双眼视差来感测空间感。因此，3D图像可以通过提供图像启用以及与待观看的左眼和右眼都有关的平面图像来提供立体效果和空间感。
用于显示诸如3D图像的方法包括立体感方法、容积方法、全息方法等。在立体感方法的情况下，提供了左眼待观看的左视图图像和右眼待观看的右视图图像，并且左眼和右眼各自分别通过偏光眼镜或通过显示装置观看左视图图像和右视图图像，从而使得观看者能够获得3D效果。
发明内容
技术问题
设计解决问题的本发明的一个目的是：通过当3D广播系统发送用于立体感显示的视频流时发送和接收3D视频数据的信息、以及通过使用该信息以处理3D视频数据，来向用户提供更便捷且有效的广播环境。
问题的解决方案
为了获得本发明的目的，根据本发明的一个实施例的广播接收机的3D视频数据处理方法包括：通过接收单元接收包括3D视频数据和3D互补视频信息的广播信号，其中所述3D视频数据包括半分辨率基视频数据和用于配置全分辨率图像的互补视频数据；通过3D视频信息处理单元解析所述3D互补视频信息；通过基视频解码器解码所述半分辨率基视频数据；通过互补视频解码器解码用于配置全分辨率图像的所述互补视频数据；以及通过输出格式器使用所述3D互补视频信息对所述基视频数据和所述互补视频数据进行组合和格式化，从而输出全分辨率3D图像。
另外，根据本发明的一个实施例的广播接收机包括：接收单元，用于接收包括3D视频数据和3D互补视频信息的广播信号，其中所述3D视频数据包括半分辨率基视频数据和用于配置全分辨率图像的互补视频数据；3D视频信息处理单元，用于解析所述3D互补视频信息；基视频解码器，用于解码所述半分辨率基视频数据；互补视频解码器，用于解码用于配置全分辨率图像的所述互补视频数据；以及输出格式器，用于使用所述3D互补视频信息对所述基视频数据和所述互补视频数据进行组合和格式化，从而输出全分辨率3D图像。
本发明的有益效果
根据本发明，在提供3D广播业务时，接收机可以处理所接收的3D视频数据，使得可以反映出在所述3D广播业务的生产时想要的3D效果。
根据本发明，可以提供全分辨率3D广播业务，同时最小化对传统2D广播业务和半分辨率3D广播业务的影响。
附图说明
图1示出了根据本发明的一个实施例的各种图像格式的立体感图像复用格式。
图2示出了根据本发明的一个实施例的3D广播业务的概念示图。
图3图示了示出根据本发明的一个实施例的提供全分辨率3D广播业务的方法的概念框图。
图4图示了根据本发明的一个实施例的提供3D广播业务的方法。
图5图示了根据本发明的另一实施例的提供3D广播业务的方法。
图6图示了根据本发明的另一实施例的提供3D广播业务的方法。
图7图示了根据本发明的另一实施例的提供3D广播业务的方法。
图8图示了根据本发明的一个实施例的包括3D互补视频信息的TVCT的语法结构。
图9图示了根据本发明的一个实施例的包括在TVCT中的3D互补视频描述符的语法结构。
图10图示了根据本发明的一个实施例的包括在3D互补视频信息中的complementary_type字段的字段值的图像配置方法。
图11图示了根据本发明的一个实施例的包括3D互补视频信息的PMT的语法结构。
图12图示了根据本发明的一个实施例的包括在PMT中的3D互补视频描述符的语法结构。
图13图示了根据本发明的一个实施例的包括3D互补视频信息的视频ES的画面扩展和用户数据的语法结构。
图14图示了根据本发明的一个实施例的当3D互补视频信息被包括在视频ES的SEI(补充增强信息)消息中并被发送时的语法结构。
图15图示了根据本发明的一个实施例的在互补视频ES中包括并发送的3D互补视频信息的语法结构。
图16图示了根据本发明的一个实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
图17图示了根据本发明的另一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
图18图示了根据本发明的又一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
图19图示了根据本发明的又一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
图20图示了根据本发明的一个实施例的广播接收机。
图21图示了示出根据本发明的一个实施例的广播接收机的3D视频数据处理方法的流程图。
具体实施方式
将参考附图和附图中给出的细节来详细描述本发明的优选实施例。然而，本发明将不仅限于本文描述的优选实施例。
尽管本发明中使用的术语选自通常已知和使用的术语，但是本领域任何一个技术人员可以根据惯例以他或她的判断力或者由于新技术的出现而改变本发明的说明书中提到的一些术语。另外，在一些情况下，申请人可以以他或她的判断力选择本发明的说明书中提到的一些术语。而且，在这些情况下，在本文呈现的说明书的相关部分描述了具体的含义。因此，需要不是仅通过本文所使用术语的单纯命名而是通过各术语内在的实际含义并且也基于本发明的说明书的整体内容来理解本发明的说明书中所使用的术语。
3D图像展示方法包括考虑两个透视角(或视点)的立体感图像方法，以及考虑三个或更多透视角(或视点)的多视图图像方法。相反，相关技术的单视图图像类型可以称为单视场方法。
立体感图像方法使用通过用左侧相机和右侧相机拍摄相同对象所获得的一左/右图像对，其中两个相机彼此相距预定距离。多视图图像使用通过至少三个不同的相机拍摄而获得的一组至少三幅图像，至少三个不同的相机彼此相距预定距离或者以不同角度布置。在下文，尽管将根据本发明的一个实施例描述立体感方法，但是本发明的思想也可以应用于多视图方法。另外，在下文，术语立体感也可以缩写为立体。
立体感图像或多视图图像可以以MPEG(运动图像专家组)格式或者通过使用多种方法压缩编码，从而被发送。
例如，立体感图像或多视图图像可以通过使用H.264/AVC(高级视频编码)方法压缩编码，从而被发送。此处，接收系统对接收的图像进行作为H.264/AVC方法的逆处理的解码处理，从而获得3D图像。
此外，立体感图像的左视图图像或右视图图像中的任一个或者多视图图像中的任一个图像可以被分配为基层图像，并且剩余图像可以分配为增强层图像。其后，可以通过使用编码单视场图像的相同方法编码基层图像。而且，在增强层的图像中，可以仅对基层图像和增强层图像之间的相关信息进行编码。随后，可以发送处理后的图像。用于基层图像的压缩编码方法的示例可以包括JPEG、MPEG-1、MPEG-2、MPEG-4和H.264/AVC。并且，在本发明的此实施例中，采用了H.264/AVC方法。此外，根据本发明的实施例，采用H.264/SVC(可扩展视频编码)或MVC(多视图视频编码)方法用于增强层图像的压缩编码处理。
用于地面波(或陆地)DTV发送和接收的传统标准基于2D视频内容。于是，为了服务于3D TV广播内容，应当另外定义用于3D TV广播内容的发送和接收标准。接收机可以根据增加的发送和接收标准接收广播信号，以便正确地处理接收的信号，从而支持3D广播业务。
在本发明的说明书中，根据本发明的实施例，将使用ATSC(高级电视系统委员会)标准来描述传统DTV发送和接收标准。
在ATSC系统的情况下，用于处理广播内容的信息可以包括在系统信息中，从而被发送。
例如，系统信息可以称为业务信息。例如，在本文中，系统信息可以包括频道信息、节目信息、事件信息等。在ATSC标准方法的情况下，系统信息可以通过被包括在PSI/PSIP(节目专用信息/节目和系统信息协议)中来发送和接收。然而，本发明将不仅限于该示例。并且，在以表格式发送系统信息的协议的情况下，无论其术语(或名称)如何，都可以将该协议应用于本发明。
根据本发明的一个实施例，PSI表可以包括PAT(节目关联表)和PMT(节目映射表)。
PAT对应于通过具有PID为“0”的数据包来发送的特定信息。对于每个节目，PAT可以发送对应PMT的PID信息。PMT发送传输流(TS)包的PID信息，在该PID信息中发送配置对应节目的视频和音频数据的各个位序列和节目识别号，并且PMT还发送其中发送PCR的PID信息。随后，通过解析从PAT获得的PMT，还可以获得配置对应节目的元素之间的相关信息。
根据本发明的一个实施例，PSIP表可以包括VCT(虚拟频道表)、STT(系统时间表)、RRT(分级区域表)、ETT(扩展文本表)、DCCT(直接频道变化表)、DDCSCT(直接频道变化选择代码表)、EIT(事件信息表)和MGT(主指南表)。
VCT可以发送有关虚拟频道的信息，诸如用于选择频道的频道信息和用于接收音频和/或视频数据的例如PID(包标识符)的信息。更具体地说，在解析VCT时，可以获得通过该频道连同频道名称和频道号一起携带的广播节目的音频/视频数据的PID。STT可以发送有关当前数据和定时信息的信息，而RRT可以发送有关用于节目分级的咨询机构和区域的信息。ETT可以发送特定频道和广播节目的额外说明，并且EIT可以发送有关虚拟频道事件的信息。DCCT/DCCSCT可以发送与自动(或直接)频道变化关联的信息，而MGT可以发送PSIP内每个表的PID信息和版本。
立体感图像的发送格式包括单视频流格式和多视频流格式。单视频流格式对应于将两个透视角的视频数据复用到单个视频流中并且发送该单个视频流的方法。这里，由于视频数据被发送到一个视频流，鉴于用于提供3D广播业务额外所必须的带宽不宽，所以单视频流格式是有利的。多视频流格式对应于将多个视频数据发送到多个视频流的方法。这里，尽管对带宽的使用增加，但是由于可以发送高容量数据，鉴于可以显示高画面质量的视频数据，所以多视频流格式是有利的。
图1示出了根据本发明的一个实施例的多种图像格式的立体感图像复用格式。
3D广播业务的图像格式包括(a)中示出的并排格式、(b)中示出的上下格式、(c)中示出的交织格式、(d)中示出的帧顺序格式、(e)中示出的棋盘格式以及(f)中示出的立体格式。
(a)中所示的并排格式对应于这样一种格式，其中在水平方向上对左图像和右图像进行1/2下采样。这里，其中一个采样图像定位在左侧，而另一个采样图像定位在右侧，从而产生单个立体感图像。(b)中所示的上下格式对应于这样一种格式，其中在垂直方向上对左图像和右图像进行1/2下采样。这里，其中一个采样图像定位在上侧，而另一个采样图像定位在下侧，从而产生单个立体感图像。(c)中所示的交织格式对应于这样一种格式，其中在水平方向上对左图像和右图像进行1/2下采样，使得可以逐行轮换两个图像，从而产生单个立体感图像，或者其中在垂直方向上对左图像和右图像进行1/2下采样，使得可以逐行轮换两个图像，从而产生单个立体感图像。(d)中所示的帧顺序格式对应于这样一种格式，其中左图像和右图像按时间轮换并配置在单个视频流中。(e)中所示的棋盘格式对应于这样一种格式，其中对左图像和右图像进行1/2下采样使得在水平和垂直方向的每个方向上可以轮换左图像和右图像，从而将两个图像配置成单个图像。(f)中所示的立体格式对应于这样一种配置图像的格式，其使得该图像可以使用互补色对比来呈现立体效果。
当前的数字广播通过使用有限系统资源提供了广播业务。数字广播环境的系统资源包括传输带宽、处理能力等。特别地，在频率分配(或部署)中可以使用的带宽有限。在这种数字广播环境中，在提供3D广播业务时，对应的3D广播业务还将使用在数字广播环境中使用的有限资源。
根据本发明的一个实施例，在采用立体感图像方案的3D广播业务的情况下，应当发送左视图图像和右视图图像。因此，难以使用传统数字广播的带宽以高分辨率发送两个图像。例如，在使用数字广播的带宽发送全分辨率视频数据时，难以使用相同带宽发送两组全分辨率视频数据。因此，正在提出一种发送两组半分辨率视频数据的方法。
然而，需要提供全分辨率3D广播业务，以便满足用户对高画面质量的需求。然而，即使当全分辨率3D广播业务正在提供时，全分辨率3D广播业务应当与传统半分辨率3D广播业务兼容。
图2示出了根据本发明的一个实施例的3D广播业务的概念示图。
根据图2的实施例，提供全分辨率图像的3D广播业务(2010)在下文可以称为3D业务2.0或3D业务Spec-B。提供半分辨率图像的3D广播业务(2020)在下文可以称为3D业务1.0或3D业务Spec-A。
3D业务1.0(2020)可以服务于半分辨率左图像和半分辨率右图像。由于提供全分辨率图像的3D业务2.0(2010)应当与3D业务1.0(2020)兼容，所以不用重新发送全分辨率图像，可以采用保持3D业务1.0(2020)的图像传送并且为提供全分辨率图像而提供差分数据或者额外数据的方法。更具体地说，如图2所示，可通过将3D业务2.0的互补视频元素(2030)添加到3D业务1.0(2020)的半分辨率视频元素来提供全分辨率3D广播业务(2010)。最终，可支持3D业务1.0的广播接收机可以通过接收和处理3D业务1.0(2020)的数据提供半分辨率图像，而可支持3D业务2.0的广播接收机可以通过接收和处理3D业务1.0(2020)的数据和3D业务2.0的互补数据提供全分辨率图像。
图3图示了示出根据本发明的一个实施例的提供全分辨率3D广播业务的方法的概念框图。
在本发明中，可提供全分辨率3D图像的广播接收机(3030)以及可以支持半分辨率3D图像的数字广播接收机(3040)可以均被提供。
提供3D广播业务的广播系统可以通过基层(3020)发送半分辨率3D视频数据并且可以通过增强层(3010)发送用于提供全分辨率3D图像的额外的半分辨率3D视频数据。
可以支持半分辨率3D图像的数字广播接收机(3040)可以通过接收和处理基层(3020)的视频数据来提供半分辨率3D图像。另外，可以提供全分辨率3D图像的数字广播接收机(3030)可以通过接收和处理基层(3020)的视频数据和增强层(3010)的视频数据来提供全分辨率3D图像。
下文，为了简洁起见，基层的视频数据或视频分量可以分别称为基视频数据或基视频分量，而增强层的视频数据或视频分量可以分别称为互补视频数据或互补视频分量。
图4图示了根据本发明的一个实施例的提供3D广播业务的方法。
参考图4，3D业务Spec-A(4010)指示3D视频数据通过基层发送，而根据图3的实施例，以半分辨率上下图像格式提供该3D视频数据。
3D业务Spec-B(4020)通过增强层发送用于各透视角的图像的互补数据。接收系统接收发送的互补数据。而且，相对于从3D业务Spec-A(4010)发送的3D视频数据，对接收的互补数据进行附加处理，从而使得接收系统能够提供全分辨率立体感图像。
图5图示了根据本发明的另一实施例的提供3D广播业务的方法。
根据本发明的一个实施例，3D业务Spec-A(5010)对应于上下图像格式以及可以包括空间半分辨率和时间全分辨率的3D视频数据。根据本发明的另一实施例，3D业务Spec-A(5010)的视频数据可以在接收系统中进行插值，以便以空间全分辨率和时间半分辨率来提供。3D业务Spec-B(5020)的接收系统可以另外处理互补信息，以便提供空间和时间全分辨率图像。
在时间半分辨率和空间全分辨率的定义中，由于系统资源的限制，可以发送的视频数据的大小或数量(或可发送视频数据)可能受到限制。视频数据可以包括帧单元图像。这里，取决于可发送视频数据的大小，在可以按时间定位的帧单元图像之间的距离也可以随同图像的分辨率受到限制。例如，由于预定带宽的限制，如果一组可发送视频数据为空间半分辨率和时间全分辨率，并且当在相同带宽限制内正发送空间全分辨率图像时，只可以发送时间半分辨率(例如，时间全分辨率情况下的帧距的距离的两倍)视频数据。
根据接收系统中的分辨率来处理视频数据的方法的多种实施方式可能是可行的。
3D业务Spec-A(5010)的接收系统可以对接收图像(Lb或Rb)执行插值，以便提供接近全分辨率的图像(Lb′或Rb′)(图5的左下侧的图)。
3D业务Spec-B(5020)的接收系统可以使用在基层中接收的视频数据以及增强层中接收的视频数据。接收系统可以对基层的接收图像(Lb或Rb)和增强层的接收图像(Le或Re)的水平行进行交织和组合，从而提供全分辨率图像(Lf或Rf)。另外，接收系统可以对基层的接收图像(Lb或Rb)执行低通滤波并且可以对增强层的接收图像(Le或Re)执行高通滤波，从而组合两个图像并且重构全分辨率图像(Lf或Rf)。另外，接收系统可以对基层的接收图像(Lb或Rb)执行插值并且用互补信息图像(Le或Re)来补充插值后的全分辨率(接近全分辨率)图像(Lb′或Rb′)，从而提供全分辨率图像(Lf或Rf)(图5的右下侧的示图)。
图6图示了根据本发明的另一实施例的提供3D广播业务的方法。
根据本发明的一个实施例，3D业务Spec-A(6010)对应于并排图像格式并且可以包括空间半分辨率和时间全分辨率3D视频数据。根据本发明的另一实施例，3D业务Spec-A(6010)的视频数据可以在接收系统中进行插值，以便以空间全分辨率和时间半分辨率来提供。3D业务Spec-B(6020)的接收系统可以另外处理互补信息，以便提供空间和时间全分辨率图像。
在图6的情况下，除了图像格式对应于并排图像格式的事实之外，图6的剩余描述与图5的描述相同。因此，为了简洁将省略本发明的重复描述。然而，参考图6，在交织基层的接收图像(Lb或Rb)和增强层的接收图像(Le或Re)的情况下，3D业务Spec-B(6020)的接收系统可以交织和组合垂直行，从而提供全分辨率图像。
图7图示了根据本发明的另一实施例的提供3D广播业务的方法。
根据本发明的一个实施例，3D业务Spec-A(7010)对应于帧顺序图像格式并且可以包括空间全分辨率和时间半分辨率3D视频数据。根据本发明的另一实施例，3D业务Spec-A(7010)的视频数据可以在接收系统中进行格式转换，以便以空间半分辨率和时间全分辨率来提供。3D业务Spec-B(7020)的接收系统可以另外处理互补信息，以便提供空间和时间全分辨率图像。
根据本发明的实施例，3D业务Spec-A(7010)的接收系统可以对接收图像(Lb或Rb)执行抽选，从而产生(或生成)上下格式或并排格式的半分辨率图像(Lb′或Rb′)。此处，在执行抽选时，接收系统以上下格式或并排格式获得半分辨率图像(Lb′或Rb′)。此处，在执行抽选时，接收系统通过帧速率转换获得进行了时间扩展(例如，倍增)的一对半分辨率图像，从而能够提供空间和时间全分辨率图像。
根据另一实施例，3D业务Spec-B(7020)的接收系统将通过增强层接收的图像(Le或Le)分别插入在通过基层接收的各相继图像(Lb或Rb)之间，从而能够提供空间和时间全分辨率图像。
如上所述，为了提供高分辨率的3D广播业务，应当针对当前提供的分辨率的3D广播业务来提供互补视频数据，并且伴随互补视频数据，还需要发送/接收和处理用于互补视频数据的信令信息。
下文，将具体描述发送互补视频数据和有关这种互补视频数据的信息的方法。根据本发明的一个实施例，互补视频数据可以使用H.264/SVC(可扩展视频编码)或MVC(多视图视频编码)方法作为分层图像压缩编码方法。而且，此处，可以通过增强层发送互补视频数据。
发送的有关互补视频数据的信令信息可以称为3D互补视频信息。根据本发明的实施例可以以描述符或表的形式提供3D互补视频信息，其中3D互补视频信息可以称为3D互补视频描述符或3D互补视频表。
根据本发明的实施例，3D互补视频信息可以包括在PSIP中，该PSIP从ATSC广播系统被发送，并且尤其可以包括在PSIP的TVCT(或VCT)中，从而被发送。另外，3D互补视频信息可以包括在PSI中，该PSI从ATSC广播系统中发送，并且特别地可以包括在PSI的PMT中。此外，3D互补视频信息可以包括在互补视频信息中并且特别地可以包括在互补视频ES(基本流)的报头信息中，从而被发送。
下文，将具体描述发送3D互补视频信息的方法。
首先，现在将具体描述使用TVCT发送3D互补视频信息的方法。
图8图示了根据本发明的一个实施例的包括3D互补视频信息的TVCT的语法结构。
以下将描述图8的TVCT中包括的字段。
‘table_id’字段为指示表区段的类型的8位无符号整数字段。
‘section_syntax_indicator’字段为对于‘terrestrial_virtual_channel_table_section()’字段将设置为‘1’的1位字段。
‘private_indicator’字段为将设置为‘1’的1位字段。
‘section_length’字段为前2位将被设置为‘00’的12位字段，并且指定该区段紧接‘section_length’字段开始且包括CRC的字节数。
‘transport_stream_id’字段指示16位MPEG-2传输流(TS)ID。‘transport_stream_id’字段将陆地虚拟频道表(TVCT)与可能在不同的PTC中广播的其他表区分开。
作为5位字段的‘version_number’字段指示虚拟频道表(VCT)的版本号。
‘current_next_indicator’字段是1位指示符。在‘current_next_indicator’字段设置为‘1’时，这表明发送的虚拟频道表(VCT)当前可用。在‘current_next_indicator’字段的位设置为‘0’时，这表明发送的表还不可用并且下一个表将变得有效。
‘section_number’字段为给出该区段的编号的8位字段。
作为8位字段的‘last_section_number’字段规定了整个陆地虚拟频道表(TVCT)的最后区段(即，具有最高section_number值的区段)的编号。
作为8位无符号整数字段的‘protocol_version’字段用于允许表类型将来携带可能与当前协议中定义的那些参数在结构上不同的参数。
作为8位字段的‘num_channels_in_section’字段规定了该VCT区段中的虚拟频道数量。
‘short_name’字段可以指示虚拟频道的名称，表示为根据单个码字符数据的UTF-16标准解释的1至7个16位码值的序列。
‘major_channel_number’字段指示10位数，其表示与‘for’循环的此迭代中定义的虚拟频道相关联的‘主’频道号。
‘minor_channel_number’字段指示从‘0’到‘999’的范围内的10位数，以便表示‘次’或‘子’频道号。该‘minor_channel_number’字段连同‘major_channel_number’字段可以指示两部分频道号，其中minor_channel_number代表该号码的第二或右侧部分。
包括8位无符号整数的‘modulation_mode’字段可以指示用于与虚拟频道相关联的发送载波的调制模式。
‘carrier_frequency’字段可以指示允许的载波频率。
‘channel_TSID’字段为从0x0000到0xFFFF的范围内的16位无符号整数字段。‘channel_TSID’字段代表与携带虚拟频道所引用的MPEG-2节目的传输流(TS)相关联的MPEG-2传输流(TS)ID。
‘program_number’字段包括16位无符号整数，其将这里定义的虚拟频道与MPEG-2节目联合体和TS节目映射表关联起来。
作为2位字段的‘ETM_location’字段指定了扩展文本消息(ETM)的存在和位置。
‘access_controlled’字段指示1位布尔标志。在设置‘access_controlled’字段的布尔标志时，这表明可以控制对与虚拟频道相关联的事件的访问。
‘hidden’字段指示1位布尔标志。在设置了‘hidden’字段的布尔标志时，这表明用户通过虚拟频道号的直接输入无法访问虚拟频道。
‘hide_guide’字段指示布尔标志。在针对隐藏频道将‘hide_guide’字段的布尔标志设置为零‘0’时，这表明虚拟频道和虚拟频道事件可以出现在EPG显示中。
‘service_type’字段为6位枚举类型字段，其将识别在虚拟频道中携带的业务类型。
‘source_id’字段包括16位无符号整数，其识别与虚拟频道相关联的节目安排源。
‘descriptors_length’字段可以指示用于虚拟频道的描述符的(字节)总长度。
‘descriptor()’字段可以包括被确定适应于‘descriptor()’字段的0或更多个描述符。
‘additional_descriptors_length’字段可以指示VCT描述符列表的总长度(以字节计)。
‘CRC_32’字段为包含CRC值的32位字段，其确保在处理整个陆地虚拟频道表(TVCT)区段之后在ISO/IEC 138181“MPEG-2系统”[8]的附录A中定义的解码器中的寄存器的0输出。
在从对应频道提供的广播业务为3D业务2.0时，service_type字段(8010)对应于指示该信息的字段。例如，在service_type字段(8010)的字段值为0x13时，这表明从对应的虚拟频道正提供3D广播节目(用于显示3D立体感图像的音频、视频和互补视频数据)。
描述符字段(8020)包括3D互补视频信息并且下文将参考附图具体描述。
图9图示了根据本发明的一个实施例的包括在TVCT中的3D互补视频描述符的语法结构。
以下将描述图9的3D互补视频描述符中包括的字段。
Number_elements字段指示配置相应虚拟频道的视频元素的数量。广播接收机可以接收3DTV业务位置描述符，以便解析在numbers_elements字段以下的字段中包括的信息作为次数，该数值对应于配置相应虚拟频道的视频元素数量。
Complementary_type字段指示配置互补视频数据或互补视频流的方法。在正输出全分辨率图像时，接收系统使用该字段的信息将基视频数据和互补视频数据重新配置(或重构)成全分辨率图像。
Naive_subsampling_flag字段指示在配置基视频分量和互补视频分量时是否正执行子采样或者是否正执行低通滤波和高通滤波。例如，在naive_subsampling_flag字段的字段值等于1时，这表明正执行子采样。而且，在该字段值等于0时，这表明正执行低通滤波和高通滤波。
Codec_type字段指示对互补视频分量进行编码或压缩所使用的视频编解码器的类型。例如，取决于codec_type字段的字段值，可以指示编码方案例如MPEG-2，AVC/H.264，SVC扩展等。
Horizontal_size字段、vertical_size字段和frame_rate大小字段分别指示互补视频分量的水平大小、垂直大小和帧速率。这里，水平大小和垂直大小可以指示空间分辨率，而帧速率可以指示时间分辨率。例如，在complementary_type字段的字段值等于0x0004时，互补视频分量的空间/时间分辨率都可以变成全分辨率。
Interpolation_filter_available_flag字段指示在针对基视频分量执行插值时是否正使用额外的定制滤波器。此处，根据本发明的一个实施例，用于实现滤波器的诸如滤波器系数的信息可以包括在用于TVCT或PMT中的互补视频分量的描述符循环中，并且可以以描述符格式来提供。而且，根据本发明的另一实施例，这种信息可以包括在视频元素内的报头信息或消息信息中，由此被提供。
在用于配置互补视频信息的左视图的视频数据和右视图的视频数据中，left_image_first_flag字段指示两个视频数据中哪个先发生(或生成)。根据本发明的一个实施例，在首先接收对应于左视图的视频数据时，left_image_first_flag字段的字段值可以设置为1。
Complementary_first_flag字段指示在配置全分辨率图像过程期间组合基视频分量和互补视频分量的顺序。根据本发明的一个实施例，在对应于基视频分量的视频数据位于对应于互补视频分量的视频数据之前时，complementary_first_flag字段的字段值可以设置为1。
图10图示了根据本发明的一个实施例的按照包括在3D互补视频信息中的complementary_type字段的字段值的图像配置方法。
图9中包括的complementary_type字段指示配置互补视频数据或互补视频流的方法。而且，接收系统使用该字段的信息，以将基视频数据和互补视频数据重新配置(或重构)成全分辨率图像。在本文中，根据本发明的一个实施例，可以如图10所示不同地执行根据complementary_type字段的字段值的全分辨率图像的重新配置(或重构)。
1)在complementary_type字段的字段值等于0时：
Complementary_type字段指示互补视频数据进行行交织并且载有用于互补行的视频数据。
互补视频数据可以包括用于偶数行或奇数行的视频数据，其可以被添加到基视频数据从而配置全分辨率图像。用于偶数行或奇数行的视频数据可以根据基视频数据的复用格式水平或垂直地行交织，由此被生成(或产生)。根据本发明的一个实施例，在基视频数据对应于并排格式时，可以执行垂直行交织，而在基视频数据对应于上下格式时，可以执行水平行交织。
2)在complementary_type字段的字段值等于1时：
Complementary_type字段指示互补视频数据进行像素交织并且载有有关每行的被轮换(或改变)的图像透视角的顺序信息。这里，顺序信息对应于有关用于重新配置全分辨率图像的像素的信息。
互补视频数据可以以像素为单位进行交织，以便以棋盘格式发送。在此情况下，可以在单行内以像素为单位(或逐像素地)轮换左图像的像素和右图像的像素。另外，为了正常恢复全分辨率图像，需要接收系统发送有关轮换顺序的这种信息。在此情况下，对于正被重新配置(或重构)的全分辨率图像的第一像素中包括的视频数据，complementary_first_flag字段指示包括在第一像素中的视频数据对应于哪个透视角或层。
3)在complementary_type字段的字段值等于2时：
Complementary_type字段指示互补视频数据为帧交织的并且包括重新配置(或重构)全分辨率图像的互补帧。
根据本发明的本实施例，全分辨率的含义表示时间分辨率。在此情况下，互补视频数据可以包括以帧为单位(或逐帧)交织的图像数据并且也可以包括逐帧(或帧顺序)的视频数据。Complementary_first_flag字段可以通知接收系统通过互补视频分量接收的视频帧位于通过基视频分量接收的视频帧之前还是位于之后。
4)在complementary_type字段的字段值等于3时：
Complementary_type字段指示互补视频数据为场交织的并且包括重新配置(或重构)全分辨率图像的互补帧。
根据本发明的本实施例，全分辨率的含义表示时间分辨率。在此情况下，互补视频数据可以包括以场为单位(或逐场)交织的图像数据并且也可以包括逐场的视频数据。Complementary_first_tlag字段可以通知接收系统通过互补视频分量接收的视频场对应于用于全分辨率图像的偶数场还是奇数场。
5)在complementary_type字段的字段值等于4时：
Complementary_type字段可以指示互补视频数据包括重新配置(或重构)全分辨率图像的残余或增量数据。
根据本发明的本实施例，无论基视频分量的立体复用格式如何，互补视频分量包括重新配置(或重构)全分辨率图像的残余或增量数据。在此情况下，在组合互补视频数据和基视频数据之前，接收系统可以对基视频数据执行插值或倍增。
随后，将具体描述使用PMT发送3D互补视频信息的方法。
图11图示了根据本发明的一个实施例的包括3D互补视频信息的PMT的语法结构。
以下将描述图11的PMT中包括的字段。
‘table_id’字段为8位字段，其在‘TS_program_map_section’字段中将总是设置为‘0x02’。
‘section_syntax_indicator’字段为将设置为‘1’的1位字段。
‘section_length’字段为前2位将被设置为‘00’的12位字段，以及指定该区段紧接‘section_length’字段开始且包括CRC的字节数。
‘program_number’字段为16位字段，其指定可应用‘program_map_PID’字段的节目。
‘version_number’字段是5位字段，其指示了‘TS_program_map_section’字段的版本号。
‘current_next_indicator’为1位字段。在‘current_next_indicator’字段的位设置为‘1’时，这表明发送的‘TS_program_map_section’字段当前可用。在‘current_next_indicator’字段的位设置为‘0’时，这表明发送的‘TS_program_map_section’字段还不可用并且下一个‘TS_program_map_section’字段将变得有效。
‘section_number’字段包括将为‘0x00’的8位字段的值。
‘last_section_number’字段包括将为‘0x00’的8位字段的值。
‘PCR_PID’字段为13位字段，其指示将包含对‘program_number’字段所规定的节目来说有效的PCR字段的传输流(TS)包的PID。在没有PCR与私有流的节目定义相关联的情况下，则该字段将取值‘0x1FFF’。
‘program_info_length’字段为12位字段，其前2位将为‘00’。‘program_info_length’字段指定紧随着‘program_info_length’字段之后的描述符的字节数。
‘stream_type’字段为8位字段，其指定在包中载有的基本流或有效载荷的类型，所述包具有其值由‘elementary_PID’字段指定的PID。另外，‘stream_type’字段可以指示对应的视频元素的编码类型。作为示范编码类型，可以使用JPEG、MPEG-2、MPEG-4、H.264/AVC、H.264/SVC或者H.264/MVC方案。
‘elementary_PID’字段为13位字段，其指定载有相关联的基本流或有效载荷的传输流(TS)包的PID。该PID可以用作主要视频数据或次要视频数据的PID。
‘ES_info_length’字段为12位字段，其前2位将为‘00’。‘ES_info_length’字段可以指定紧接着‘ES_info_length’字段之后的相关基本流的描述符的字节数。
‘CRC_32’字段为包含CRC值的32位字段，CRC值给出在处理整个传输流节目映射区段之后在附录B中定义的解码器中的寄存器的0输出。
描述符字段(11010)包括3D互补视频信息并且下文将参考附图具体描述。
图12图示了根据本发明的一个实施例的包括在PMT中的3D互补视频描述符的语法结构。
图12的3D互补视频信息类似于图9的3D互补视频信息。并且，因此，为了简洁起见，将省略对相同字段的具体描述。然而，在PMT的情况下，不同于图9所示的3D互补视频信息，有关视频元素的诸如elementary_PID的信息包括在PMT中。而且，该字段的描述与参考图9对相同字段所做的具体描述相同。另外，可以用包括在PMT中的stream_type字段代替codec_type字段。而且，在此情况下，可以从图12的3D互补视频描述符中省略该字段。
随后，将具体描述通过包括在互补视频数据中的互补视频ES发送3D互补视频信息的方法。
图13图示了根据本发明的一个实施例的包括3D互补视频信息的视频ES的画面扩展和用户数据的语法结构。
根据本发明的一个实施例，ATSC电信系统可以将3D互补视频信息包括在视频ES的报头信息中而非PISP层中，并且可以发送对应信息。更具体地说，3D互补视频信息(complementary_video_info()；13030)可以包括在互补视频ES中以用于发送，并且通过在视频解码器中解析对应信息，接收系统可以获得控制显示输出所需要的信息。
根据本发明的一个实施例，在使用MPEG-2视频编码方案对互补视频数据编码时，3D互补视频信息可以包括在画面扩展和用户数据的user_data()(13010)中从而被发送。可以在画面报头和画面编码扩展之后接收画面扩展和用户数据，从而进行解码。
在图13的实施例中，user_data_start_code字段的字段值固定为0x0000 01B2。
User_data_identifier(或者ATSC_identifier)字段的字段值对应于32位编码，赋值为0x4741 3934。
User_data_type_code字段指示ATSC用户数据(13020)的数据类型并且可以具有8位的字段值。根据本发明的一个实施例，通过使用0x10的值，该字段可以指示包括有3D互补视频信息(13030)。
图14图示了根据本发明的一个实施例的在视频ES的SEI(补充增强信息)消息中包括并发送3D互补视频信息时的语法结构。
在图14所示的实施例中，在H.264(或者AVC)视频数据和MVC扩展视频数据的情况下，互补信息可以发送到SEI(补充增强信息)区域，并且user_data_registered_itu_t_t35()可以用来通过user_identifier和user_structure()发送3D互补视频信息。
在图14所示的实施例中，在将互补视频数据编码成AVC/H.264时，图13中所示的ATSC_user_data()可以定位于用于从相应视频流发送3D互补视频信息的SEI语法(user_identifier＝0x4741 3934)的user_structure()中。
图15图示了根据本发明的一个实施例的在互补视频ES中包括并发送的3D互补视频信息的语法结构。
图15的3D互补视频信息(Complementary_video_info())类似于图9的3D互补视频信息。并且，因此，为了简洁起见，将省略对相同字段的具体描述。
下文将具体描述使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
图16图示了根据本发明的一个实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
在图16的实施例中，以上下格式接收基视频数据的图像，其中左图像定位在上侧，而其中右图像定位在下侧。在3D互补视频信息的情况下，complementary_type字段的字段值指示为‘0x0000’，naive_subsampling_flag字段的字段值指示为‘1’，left_image_frst_flag字段的字段值指示为‘1’，而complementary_first_flag字段的字段值指示为‘0’。更具体地说，3D互补视频信息指示用行交织来处理互补视频数据，在执行子采样时不执行低通滤波和高通滤波，首先展现对应于左视图的视频数据，以及对应于基视频的视频数据位于对应于互补视频的视频数据之前。
取决于3D互补视频信息，接收系统从上下格式的基视频帧(16010)提取左图像部分(Lb1～Lb5)，从互补视频帧(16020)提取左图像部分(Lc1～Lc5)，并且逐行重新配置(或者重构)所提取的视频数据，从而获得全分辨率左图像(16030)。类似地，取决于3D互补视频信息，接收系统从上下格式的基视频帧(16010)提取右图像部分(Rb1～Rb5)，从互补视频帧(16020)提取右图像部分(Rc1～Rc5)，并且逐行重新配置(或者重构)所提取的视频数据，从而获得全分辨率右图像(16040)。
接收系统可以通过帧顺序方案显示所获得的全分辨率左图像(16030)和右图像(16040)。在此情况下，由于以帧为单位从一个帧(16010)生成两个帧(16030，16040)，所以时间全分辨率显示变得可行。
图17图示了根据本发明的另一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
在图17的实施例中，以上下格式接收基视频数据的图像，其中左图像定位在上侧，而其中右图像定位在下侧。在3D互补视频信息的情况下，complementary_type字段的字段值指示为‘0x0000’，naive_subsampling_flag字段的字段值指示为‘0’，left_image_frst_flag字段的字段值指示为‘1’，而complementary_frst_flag字段的字段值指示为‘0’。更具体地说，3D互补视频信息指示用行交织来处理互补视频数据，在执行子采样时必须执行低通滤波和高通滤波，首先展现对应于左视图的视频数据，以及对应于基视频的视频数据位于对应于互补视频的视频数据之前。
首先，取决于3D互补视频信息，接收系统对基视频帧执行低通滤波，从而获得经过滤波的基视频帧(Lb1’～Lb5’和Rb1’～Rb5’)。而且，接收系统对互补视频帧执行高通滤波，从而获得经过滤波的互补视频帧(Lc1’～Lc5’和Rc1’～Rc5’)。
取决于3D互补视频信息，接收系统从上下格式的基视频帧提取经过低通滤波的左图像部分(Lb1’～Lb5’)并且从互补视频帧提取经过低通滤波的左图像数据(Lc1’～Lc5’)。下文，接收系统逐行重新配置(或重构)所提取的视频数据，从而获得全分辨率左图像(1030)。类似地，取决于3D互补视频信息，接收系统从上下格式的基视频帧提取经过低通滤波的右图像部分(Rb1’～Rb5’)并且从互补视频帧提取经过低通滤波的右图像数据(Rc1’～Rc5’)。随后，接收系统逐行重新配置(或重构)所提取的视频数据，从而获得全分辨率右图像(17040)。
接收系统可以通过帧顺序方案显示所获得的全分辨率左图像(17030)和右图像(17040)。在此情况下，由于以帧为单位从一个帧(17010)生成两个帧(17030，17040)，所以时间全分辨率显示变得可行。
图18图示了根据本发明的又一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
在图18的实施例中，以上下格式接收基视频数据的图像，其中左图像定位在上侧，而其中右图像定位在下侧。在3D互补视频信息的情况下，complementary_type字段的字段值指示为‘0x0004’naive_subsampling_flag字段的字段值指示为‘1’，left_image_first_flag字段的字段值指示为‘1’，而complementary_first_flag字段的字段值指示为‘0’。更具体地说，3D互补视频信息指示互补视频数据包括相对于基视频数据(0x0004)的残余视频数据，在执行子采样时不执行低通滤波和高通滤波，首先展现对应于左视图的视频数据，以及对应于基视频的视频数据位于对应于互补视频的视频数据之前。
接收系统对首先接收的基视频帧(18010)执行逐行插值，从而获得空间倍增的视频帧(18040)。此后，接收系统将插值的行(Li1，Li2，...，Ri5)与互补视频帧(18020)的残余数据行(Lc1～Lc10和Rc1～Rc10)结合。随后，通过借助基视频帧的行逐行地定位结合的行，获得全分辨率左图像(18050)和右图像(18060)。根据本发明的一个实施例，在左图像的情况下，插值的基视频帧(18040)的行Li1与互补视频帧(18020)的行Lc1和Lc2的数据相结合，从而获得全分辨率图像(18050)的行图像Lc1。随后，通过使用将该行图像Lc1定位在行图像Lb1和Lb2之间的方法，可以获得全分辨率左图像(18050)。
接收系统可以通过帧顺序方案显示所获得的全分辨率左图像(18050)和右图像(18060)。在此情况下，由于以帧为单位从一个帧(18010)生成两个帧(17050，17060)，所以时间全分辨率显示变得可行。
图19图示了根据本发明的又一实施例的使用从3D视频业务Spec-B接收的基视频数据、互补视频数据和3D互补视频信息来提供全分辨率图像的方法。
在图18的实施例中，以棋盘格式接收基视频数据的图像，其中左图像定位在左端部分的最上像素中。在3D互补视频信息的情况下，complementary_type字段的字段值指示为‘0x0001’，naive_subsampling_flag字段的字段值指示为‘1’，left_image_first_flag字段的字段值指示为‘1’，而complementary_first_flag字段的字段值指示为‘0’。更具体地说，3D互补视频信息指示互补视频数据包括互补视频图像相对于基视频图像的行轮换顺序(0x0001)，在执行子采样时不执行低通滤波和高通滤波，首先展现对应于左视图的视频数据，以及对应于基视频的视频数据位于对应于互补视频的视频数据之前。
接收系统通过使用3D互补视频信息、针对每个行根据相应顺序对齐包括在接收的基视频帧(19010)中的左视图的像素和右视图的像素并且对齐包括在接收的互补视频帧(19020)中的左视图的像素和右视图的像素。由此，可以获得全分辨率的左图像(19030)和右图像(19040)。另外，根据本发明的一个实施例，接收系统以并排格式或上下格式重新配置(或重构)接收的基视频帧(19010)和互补视频帧(19020)。随后，接收系统根据3D互补视频信息对齐重新配置的视频帧，从而获得全分辨率的左图像(19030)和右图像(19040)。
接收系统可以通过帧顺序方案显示所获得的全分辨率的左图像(19030)和右图像(19040)。在此情况下，由于以帧为单位从一个帧(19010)生成两个帧(19030，19040)，所以时间全分辨率显示变得可行。
按照本发明的上述实施例，可以根据不同的实施例执行接收系统通过组合基视频分量和互补视频分量获得全分辨率视频分量的操作。
根据本发明的一个实施例，在基视频分量称为B时，在互补视频分量称为C时，以及在全分辨率视频分量称为F时，以下的操作场景可能是可用的。
情况1：F＝B+C
情况2：F＝B’+C
情况3：F＝B’+C’
这里，B′和C′分别对应于借助插值/滤波进行处理的B和C。
情况1对应于以下示例，其中naive_subsampling_flag字段的字段值等于‘1’。因此，该情况对应于以下实施例，其中交织并对齐两个子采样的视频分量。
情况2对应于以下示例，其中B借助插值/滤波处理后与C组合，从而得到F。这里，C可以对应于残余/增量数据格式。(特别地，在使用SVC编码方案时，可以执行这种组合形式。)
情况3对应于以下示例，其中naive_subsampling_flag字段的字段值等于‘0’。因此，该情况对应于以下实施例，其中借助插值/滤波处理B和C两者并且其中将B′与C′组合，从而得到F。
图20图示了根据本发明的一个实施例的广播接收机。
广播接收机包括接收广播信号的接收单元(20010)、基于接收的广播信号的PID对数据进行分类以及提取数据的TP解复用器(20020)、解析和处理系统信息的SI处理器(20030)、解码视频数据的视频解码器(20040)以及对经过解码的视频数据进行格式化的输出格式器(20050)。根据本发明的实施例，接收单元(20010)可以进一步包括调谐器和解调器(20060)以及VSB解码器(20070)。而且，视频解码器(20040)可以进一步包括解码基视频ES的基视频解码器(20080)和解码互补视频ES的互补视频解码器(20090)。
根据本发明的一个实施例，在包括在PMT或VCT中时，3D互补视频信息可以在接收机的SI处理器(20030)中处理，而在包括在视频ES中时，3D互补视频信息可以在视频解码器(20040)中处理。在处理3D互补视频信息方面，SI处理器(20030)和视频解码器(20040)可以称为3D互补视频信息处理单元。
下文将参考附图更具体描述广播接收机的每个组件的操作。
图21图示了示出根据本发明的一个实施例的广播接收机的3D视频数据处理方法的流程图。
广播接收机通过使用接收单元接收包括3D视频数据和3D互补视频信息的广播信号(S21010)。根据本发明的一个实施例，3D视频数据可以包括支持半分辨率图像的基视频数据、添加到基视频数据的用于配置全分辨率图像的互补视频数据以及用于提取和解码基视频数据和互补视频数据的3D互补视频信息，从而组合和格式化处理的数据。
广播接收机使用3D互补视频处理单元来解析包括在广播信号中的3D互补视频信息(S21020)。
如图8到图15所述，3D互补视频信息可以包括在TVCT或PMT的系统信息中，或者可以包括在互补视频数据中所包括的互补视频ES的报头信息中。3D互补视频信息可以包括以下的至少一种：指示互补视频数据的配置类型的类型信息(complementary_type)、指示在子采样期间是否执行滤波的子采样信息(naive_subsmapling_flag)、指示用于编码互补视频数据的视频编解码器的类型的编解码器类型信息(codec_type)、水平大小信息(horizontal_size)、垂直大小信息(vertical_size)、帧速率信息(frame_rate)、用于实现在插值过程中使用的滤波器的滤波器信息(interpolation_filter_available_flag)、指示首先显示哪个透视角的图像的透视信息(left_image_flag_flag)、以及指示基视频数据和互补视频数据的组合顺序的顺序信息(complementary_first_flag)。
广播接收机使用解码器解码半分辨率基视频数据(S21030)。可以通过包括在解码器中的基视频解码器来解码基视频数据。
根据本发明的一个实施例，可以基于PID通过TP解复用器对基视频数据和互补视频数据进行分类，从而输出到解码器。同样，基视频数据和互补视频数据可以作为3D视频数据输出到解码器，并且解码器可以基于视频ES的报头信息对基视频数据和互补视频数据进行分类，从而解码分类的视频数据。
广播接收机使用解码器解码用于配置全分辨率图像的互补视频数据(S21040)。可以通过包括在互补视频解码器中的解码器来解码互补视频数据。
广播接收机使用3D互补视频信息数据，以从输出格式器组合和格式化基视频数据和互补视频数据，从而输出全分辨率3D图像(S21050)。
可以基于基视频数据的复用格式和互补视频数据的类型使用多种方法来执行在广播接收机中组合和格式化全分辨率3D图像的过程。也可以如图4-图7和图16到图19所述执行这种组合和格式化操作。全分辨率3D图像可以输出作为空间全分辨率3D图像，并且也可以以时间上为半分辨率图像速率的两倍的帧速率来实现，从而输出作为全分辨率图像。
在下文中，将参考在3D互补视频信息包括在TVCT中时、在3D互补视频信息被包括在PMT中时以及在3D互补视频信息包括在视频ES的报头信息中时更具体地描述广播接收机的操作。
对于以下呈现的具体描述，在正提供半分辨率3DTV广播业务的情况下，假定通过TVCT、PMT和视频ES中至少一个来发送有关半分辨率3D广播业务和相应视频数据(基视频数据)的信息。因此，广播接收机可以使用与基视频数据相关联的stream_type信息或者使用独立描述符来确定有关基视频数据的信息，并且这种信息也可以称为3D基视频信息。
(1)在TVCT中接收3D互补视频信息时
广播接收机使用TVCT的service_type字段确定全分辨率3DTV广播业务是否正由相应虚拟频道提供。
当正提供全分辨率3DTV广播业务时，广播接收机首先使用3D基视频信息从而获得与基视频数据或者基视频分量相对应的elementary_PID信息(PID_B)。随后，广播接收机使用3D互补视频信息从而获得与互补视频数据或者互补视频分量相对应的elementary_PID信息(PID_C)。
广播接收机解码对应于PID_B的基视频分量并且解码对应于PID_C的互补视频分量。
广播接收机使用包括在3D互补视频信息(或者3D互补视频描述符)中的complementary_type字段、naive_subsmapling_flag字段、codec_type字段、horizontal_size字段、vertical_size字段、frame_rate字段、interpolation_filter_available_flag字段、left_image_flag_flag字段以及complementary_first_flag字段中的至少一个，以便组合基视频数据和互补视频数据，从而获得全分辨率的左图像和右图像。
广播接收机输出获得的左图像和右图像用于显示，从而给用户提供全分辨率3D图像。
(2)在PMT中接收3D互补视频信息时
在由PMT发送的ES中，广播接收机确定对应于半分辨率视频数据的数据流的存在。广播接收机使用3D基视频信息，以确认对应的ES(PID_B)包括具有其中复用的半分辨率左图像和右图像的视频数据。
在通过PMT发送的ES中，广播接收机确定对应于互补视频数据的流的数据流的存在。广播接收机可以使用3D互补视频信息从而执行确定处理，或者可以使用stream_type字段从而证实对应的ES(PID_C)包括用于配置全分辨率图像的互补视频数据。
广播接收机使用program_number字段以执行与通过TVCT提供的信息的映射，并且广播接收机确定正通过哪个虚拟频道提供该节目。
广播接收机解码对应于PID_B的基视频分量并且解码对应于PID_C的互补视频分量。
广播接收机使用包括在3D互补视频信息(或者3D互补视频描述符)中的complementary_type字段、naive_subsmapling_flag字段、codec_type字段、horizontal_size字段、vertical_size字段、frame_rate字段、interpolation_filter_available_flag字段、left_image_flag_flag字段以及complementary_first_flag字段的至少一个，以便组合基视频数据和互补视频数据，从而获得全分辨率的左图像和右图像。
广播接收机输出获得的左图像和右图像用于显示，从而给用户提供全分辨率3D图像。
(3)视频ES的报头信息(或者SEI消息)
在PMT发送的ES中，广播接收机确定对应于半分辨率视频数据的数据流的存在。广播接收机使用3D基视频信息从而肯定对应的ES(PID_B)包括其中复用有半分辨率的左图像和右图像的视频数据。
在PMT发送的ES中，广播接收机确定对应于互补视频数据的流的数据流的存在。广播接收机可以确定3D互补视频信息的存在(或出现)，或者可以使用stream_type字段从而确认对应的ES(PID_C)包括用于配置全分辨率图像的互补视频数据。
广播接收机解码对应于PID_B的基视频分量。并且，广播接收机解码对应于PID_C的互补视频分量。此处，互补视频分量的ES针对画面扩展和用户数据或画面/序列来检测和解析包括在SEI消息中的3D互补视频信息(complementary_video_info)。
广播接收机使用包括在3D互补视频信息(或者3D互补视频描述符)中的complementary_type字段、codec_type字段、naive_subsmapling_flag字段、horizontal_size字段、vertical_size字段、frame_rate字段、interpolation_filter_available_flag字段、left_image_flag_flag字段以及complementary_first_flag字段的至少一个，以便组合基视频数据和互补视频数据，从而获得全分辨率的左图像和右图像。
广播接收机输出获得的左图像和右图像用于显示，从而给用户提供全分辨率3D图像。
根据本发明的方法发明可以以各种计算机装置都能执行的程序命令格式来实现，从而在计算机可读介质中记录(或写入)。计算机可读介质可以包括单独或结合的程序命令、数据文件、数据结构等。写入介质中的程序命令可以专门设计和配置用于本发明，或者可向计算机软件领域的任意一个技术人员披露，以便被使用。计算机可读介质的示例可以包括：诸如硬盘、软盘和磁带的磁媒体，诸如CD-ROM和DVD的光媒体，诸如软光盘的磁光媒体，以及专门设计用于存储和执行程序命令的诸如ROM、RAM和闪速存储器的硬件。程序命令的示例可以包括编译器创建的机器语言代码，以及可以使用解释器执行的高级语言代码。上述硬件装置可以配置成以用于执行本发明的操作的至少一个或多个软件模块来操作，并且也可以反转此配置。
如上所述，尽管已经参考有限实施例和附图描述了本发明，但是对本领域技术人员来说明显的是，在不脱离本发明的精神或范围的情况下，可以在本发明中做出各种修改和变型。因此，本发明意在覆盖落入所附权利要求及其等同物的范围内的本发明的修改和变型。
本发明的实施方式
如上所述，已经以用于实现本发明的最佳实施方式描述了相关细节。
工业适用性
如上所述，本发明可以整体或部分地应用于数字广播系统。

Claims (10)

1.一种广播接收机的3D视频数据处理方法，该方法包括： 
通过接收单元接收3D视频数据和3D互补视频信息，所述3D视频数据对应于经由基层的用于3D内容的半分辨率视频数据和经由增强层的用于配置所述3D内容的全分辨率图像的互补视频数据，所述3D互补视频信息是关于所述互补视频数据的信令信息，其中，所述3D互补视频信息包括指示在配置全分辨率图像过程期间所述互补视频数据的配置类型的类型信息和指示在配置全分辨率图像过程期间所述半分辨率视频数据和所述互补视频数据的组合顺序的顺序信息； 
通过3D视频信息处理单元解析所述3D互补视频信息； 
通过基视频解码器解码所述半分辨率视频数据； 
通过互补视频解码器解码用于配置全分辨率图像的所述互补视频数据；以及 
通过输出格式器使用所述类型信息和所述顺序信息来对所述半分辨率视频数据和所述互补视频数据进行组合和格式化，从而输出全分辨率3D图像。 
2.根据权利要求1所述的方法，其中，所述3D互补视频信息包括在PMT或TVCT中。 
3.根据权利要求1所述的方法，其中，所述3D互补视频信息包括在所述互补视频数据的视频ES的报头信息中。 
4.根据权利要求1所述的方法，其中，所述3D互补视频信息包括以下中的至少一项：指示在子采样期间是否执行滤波的子采样信息、指示用于编码所述互补视频数据的视频编解码器的类型的编解码器类型信息、水平大小信息、垂直大小信息、帧速率信息、用于实现在插值过程中使用的滤波器的滤波器信息、以及指示首先显示哪个透视角的图像的透视信息。
5.根据权利要求1所述的方法，其中，所述全分辨率图像为时间和空间上的全分辨率。 
6.一种广播接收机，该广播接收机包括： 
接收单元，其接收3D视频数据和3D互补视频信息，所述3D视频数据对应于经由基层的用于3D内容的半分辨率视频数据和经由增强层的用于配置所述3D内容的全分辨率图像的互补视频数据，所述3D互补视频信息是关于所述互补视频数据的 信令信息，其中，所述3D互补视频信息包括指示在配置全分辨率图像过程期间所述互补视频数据的配置类型的类型信息和指示在配置全分辨率图像过程期间所述半分辨率视频数据和所述互补视频数据的组合顺序的顺序信息； 
3D视频信息处理单元,其解析所述3D互补视频信息； 
基视频解码器，其解码所述半分辨率视频数据； 
互补视频解码器，其解码用于配置全分辨率图像的所述互补视频数据；以及 
输出格式器，其使用所述类型信息和所述顺序信息来对所述半分辨率视频数据和所述互补视频数据进行组合和格式化，从而输出全分辨率3D图像。 
7.根据权利要求6所述的广播接收机，其中，所述3D互补视频信息包括在PMT或TVCT中。 
8.根据权利要求6所述的广播接收机，其中，所述3D互补视频信息包括在所述互补视频数据的视频ES的报头信息中。 
9.根据权利要求6所述的广播接收机，其中，所述3D互补视频信息包括以下中的至少一项：指示在子采样期间是否执行滤波的子采样信息、指示用于编码所述互补视频数据的视频编解码器的类型的编解码器类型信息、水平大小信息、垂直大小信息、帧速率信息、用于实现在插值过程期间使用的滤波器的滤波器信息、以及指示首先显示哪个透视角的图像的透视信息。 
10.根据权利要求6所述的广播接收机，其中，所述全分辨率图像为时间和空间上的全分辨率。 
CN201080018328.6A 2009-04-27 2010-03-19 广播接收机及其3d视频数据处理方法 Expired - Fee Related CN102415100B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510005202.XA CN104486612B (zh) 2009-04-27 2010-03-19 用于广播发射机的3d视频数据处理方法及广播接收机

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US17319609P 2009-04-27 2009-04-27
US61/173,196 2009-04-27
US17358809P 2009-04-28 2009-04-28
US61/173,588 2009-04-28
US17971009P 2009-05-19 2009-05-19
US61/179,710 2009-05-19
PCT/KR2010/001710 WO2010126227A2 (en) 2009-04-27 2010-03-19 Broadcast receiver and 3d video data processing method thereof

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201510005202.XA Division CN104486612B (zh) 2009-04-27 2010-03-19 用于广播发射机的3d视频数据处理方法及广播接收机

Publications (2)

Publication Number Publication Date
CN102415100A CN102415100A (zh) 2012-04-11
CN102415100B true CN102415100B (zh) 2015-02-04

Family

ID=43032643

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510005202.XA Expired - Fee Related CN104486612B (zh) 2009-04-27 2010-03-19 用于广播发射机的3d视频数据处理方法及广播接收机
CN201080018328.6A Expired - Fee Related CN102415100B (zh) 2009-04-27 2010-03-19 广播接收机及其3d视频数据处理方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201510005202.XA Expired - Fee Related CN104486612B (zh) 2009-04-27 2010-03-19 用于广播发射机的3d视频数据处理方法及广播接收机

Country Status (7)

Country Link
US (2) US8773505B2 (zh)
EP (2) EP2930927A1 (zh)
KR (1) KR101676310B1 (zh)
CN (2) CN104486612B (zh)
BR (1) BRPI1007613A2 (zh)
CA (1) CA2758903C (zh)
WO (1) WO2010126227A2 (zh)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5482254B2 (ja) * 2009-11-05 2014-05-07 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
JP2011248323A (ja) * 2010-04-30 2011-12-08 Canon Inc 画像処理装置及びその制御方法
US9049426B2 (en) * 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
US8619852B2 (en) * 2010-07-21 2013-12-31 Dolby Laboratories Licensing Corporation Systems and methods for multi-layered frame-compatible video delivery
FR2965444B1 (fr) 2010-09-24 2012-10-05 St Microelectronics Grenoble 2 Transmission de video 3d sur une infrastructure de transport historique
KR101910192B1 (ko) * 2010-11-12 2018-10-22 한국전자통신연구원 3ｄｔｖ 서비스에서의 영상 압축 규격 결정 방법 및 장치
KR20120072256A (ko) * 2010-12-23 2012-07-03 한국전자통신연구원 Ｍｂｍｓ 방송 서비스 수신 시스템 및 그 방법
CN103416070B (zh) * 2011-03-07 2016-10-12 Lg电子株式会社 发送/接收数字广播信号的方法和装置
KR101770262B1 (ko) * 2011-03-16 2017-08-22 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US20140140415A1 (en) * 2011-05-19 2014-05-22 Lg Electronics Inc. Video stream transmitting device, video stream receiving device, video stream transmitting method, and video stream receiving method
US11496760B2 (en) 2011-07-22 2022-11-08 Qualcomm Incorporated Slice header prediction for depth maps in three-dimensional video codecs
US9521418B2 (en) 2011-07-22 2016-12-13 Qualcomm Incorporated Slice header three-dimensional video extension for slice header prediction
EP2739052A4 (en) * 2011-07-26 2015-01-21 Lg Electronics Inc VIDEO STREAM TRANSMITTING APPARATUS, VIDEO STREAM RECEIVING APPARATUS, VIDEO STREAM TRANSMITTING METHOD, AND VIDEO STREAM RECEIVING METHOD
US9288505B2 (en) 2011-08-11 2016-03-15 Qualcomm Incorporated Three-dimensional video with asymmetric spatial resolution
CN103814572B (zh) 2011-09-16 2017-02-22 杜比实验室特许公司 帧兼容的全分辨率立体3d压缩和解压缩
US20130070051A1 (en) * 2011-09-20 2013-03-21 Cheng-Tsai Ho Video encoding method and apparatus for encoding video data inputs including at least one three-dimensional anaglyph video, and related video decoding method and apparatus
TWI595770B (zh) * 2011-09-29 2017-08-11 杜比實驗室特許公司 具有對稱圖像解析度與品質之圖框相容全解析度立體三維視訊傳達技術
US9485503B2 (en) 2011-11-18 2016-11-01 Qualcomm Incorporated Inside view motion prediction among texture and depth view components
CN102595164A (zh) * 2012-02-27 2012-07-18 中兴通讯股份有限公司 一种视频图像发送方法、装置及系统
JP6073477B2 (ja) 2012-08-10 2017-02-01 エルジー エレクトロニクス インコーポレイティド 信号送受信装置および信号送受信方法
CN104683790A (zh) * 2012-09-25 2015-06-03 青岛海信电器股份有限公司 一种图像处理方法及显示装置
US9860515B2 (en) * 2012-12-11 2018-01-02 Electronics And Telecommunications Research Institute Apparatus and method for 3D content broadcasting with boundary information
CN102984483B (zh) * 2012-12-18 2016-08-03 上海晨思电子科技有限公司 一种三维用户界面显示系统及方法
US9537779B2 (en) * 2013-10-11 2017-01-03 Huawei Technologies Co., Ltd. System and method for real-time traffic delivery
CN104157007B (zh) * 2014-03-03 2018-02-27 腾讯科技（北京）有限公司 视频处理的方法及装置
EP4262213A1 (en) * 2015-02-27 2023-10-18 Sony Group Corporation Transmitting device, transmitting method, receiving device and receiving method
US10966591B2 (en) * 2015-08-06 2021-04-06 Sony Olympus Medical Solutions Inc. Medical signal processing device, medical display device, and medical observation system involving appending color gamut identification information to the picture signal resulting from conversion

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5083851A (en) * 1989-09-06 1992-01-28 Macdonald Dettwiler And Associates Ltd. Full resolution sterescopic display
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
CN1551636A (zh) * 1997-06-05 2004-12-01 用于编码双向预测视频对象面的方法及其解码装置
CN1613263A (zh) * 2001-11-21 2005-05-04 韩国电子通信研究院 3d立体/多视图视频处理系统及其方法
CN1926576A (zh) * 2004-02-27 2007-03-07 Td视觉有限公司 用于数字编码3d立体视频图像的方法和系统
CN1954606A (zh) * 2004-05-21 2007-04-25 韩国电子通信研究院 通过使用三维立体视频附加数据来发送/接收三维立体数字广播信号的装置和方法
CN102484729A (zh) * 2009-04-07 2012-05-30 Lg电子株式会社 广播发送器、广播接收器及其3d视频数据处理方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
GB9916819D0 (en) * 1999-07-20 1999-09-22 Telemedia Systems Ltd Method of and apparatus for digital data storage
WO2003102868A2 (en) * 2002-05-29 2003-12-11 Pixonics, Inc. Classifying image areas of a video signal
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
US20060015919A1 (en) * 2004-07-13 2006-01-19 Nokia Corporation System and method for transferring video information
KR101277355B1 (ko) * 2004-10-13 2013-06-20 톰슨 라이센싱 복잡도 스케일러블 비디오 인코딩 및 디코딩을 위한 방법및 장치
KR100679020B1 (ko) * 2004-10-21 2007-02-06 삼성전자주식회사 디지털 케이블 방송에서의 서비스 정보 선처리 방법 및 장치
KR100735218B1 (ko) * 2004-12-14 2007-07-03 삼성전자주식회사 디지털 방송수신기의 방송정보 표시장치 및 방법
KR100732961B1 (ko) 2005-04-01 2007-06-27 경희대학교 산학협력단 다시점 영상의 스케일러블 부호화, 복호화 방법 및 장치
US7929560B2 (en) * 2005-07-15 2011-04-19 Panasonic Corporation Packet transmitting apparatus
MY159176A (en) * 2005-10-19 2016-12-30 Thomson Licensing Multi-view video coding using scalable video coding
KR100818933B1 (ko) * 2005-12-02 2008-04-04 한국전자통신연구원 디지털방송 기반 ３차원 컨텐츠 서비스 제공 방법
KR100747598B1 (ko) * 2005-12-09 2007-08-08 한국전자통신연구원 디지털방송 기반의 3차원 입체영상 송수신 시스템 및 그방법
US8693538B2 (en) * 2006-03-03 2014-04-08 Vidyo, Inc. System and method for providing error resilience, random access and rate control in scalable video communications
CN101627634B (zh) * 2006-10-16 2014-01-01 诺基亚公司 用于将可并行解码片用于多视点视频编码的系统和方法
KR101362941B1 (ko) * 2006-11-01 2014-02-17 한국전자통신연구원 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치
WO2008054100A1 (en) * 2006-11-01 2008-05-08 Electronics And Telecommunications Research Institute Method and apparatus for decoding metadata used for playing stereoscopic contents
KR100958653B1 (ko) * 2007-08-07 2010-05-20 한국전자통신연구원 디지털 방송 송수신 장치 및 방법
KR101390810B1 (ko) * 2007-10-04 2014-05-26 삼성전자주식회사 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치
WO2010014973A1 (en) * 2008-08-01 2010-02-04 Real D Method and apparatus to mark and identify stereoscopic video frames
US9124870B2 (en) * 2008-08-20 2015-09-01 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method providing on screen display applied thereto
US20100177162A1 (en) * 2009-01-15 2010-07-15 Charles Macfarlane Method and system for enabling 3d video and image processing using one full resolution video stream and one lower resolution video stream
US8289998B2 (en) * 2009-02-13 2012-10-16 Samsung Electronics Co., Ltd. Method and apparatus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream
EP2420068A4 (en) * 2009-04-13 2012-08-08 Reald Inc ENCRYPTION, DECOMPOSITION AND DISTRIBUTION OF STEREOSCOPIC VIDEO CONTENT WITH REINFORCED RESOLUTION

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5083851A (en) * 1989-09-06 1992-01-28 Macdonald Dettwiler And Associates Ltd. Full resolution sterescopic display
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
CN1551636A (zh) * 1997-06-05 2004-12-01 用于编码双向预测视频对象面的方法及其解码装置
CN1613263A (zh) * 2001-11-21 2005-05-04 韩国电子通信研究院 3d立体/多视图视频处理系统及其方法
CN101188779A (zh) * 2001-11-21 2008-05-28 韩国电子通信研究院 解码多路复用的视频分组流的方法
CN1926576A (zh) * 2004-02-27 2007-03-07 Td视觉有限公司 用于数字编码3d立体视频图像的方法和系统
CN1954606A (zh) * 2004-05-21 2007-04-25 韩国电子通信研究院 通过使用三维立体视频附加数据来发送/接收三维立体数字广播信号的装置和方法
CN102484729A (zh) * 2009-04-07 2012-05-30 Lg电子株式会社 广播发送器、广播接收器及其3d视频数据处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Seh-Chan Oh,et al.Scalable Video Coding for Vision Based Subway Platform Monitoring System.《SICE-ICASE International Joint Conference 2006》.2006, *

Also Published As

Publication number Publication date
BRPI1007613A2 (pt) 2016-02-16
EP2930927A1 (en) 2015-10-14
WO2010126227A2 (en) 2010-11-04
CN102415100A (zh) 2012-04-11
US20140285622A1 (en) 2014-09-25
US8773505B2 (en) 2014-07-08
CA2758903A1 (en) 2010-11-04
KR101676310B1 (ko) 2016-11-16
CA2758903C (en) 2016-10-11
US20120033041A1 (en) 2012-02-09
EP2425631B1 (en) 2015-05-20
EP2425631A2 (en) 2012-03-07
KR20120026026A (ko) 2012-03-16
EP2425631A4 (en) 2013-05-01
WO2010126227A3 (en) 2010-12-23
CN104486612B (zh) 2016-11-30
CN104486612A (zh) 2015-04-01

Similar Documents

Publication Publication Date Title
CN102415100B (zh) 广播接收机及其3d视频数据处理方法
US10129525B2 (en) Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
US9712803B2 (en) Receiving system and method of processing data
CA2760100C (en) Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
CN102388620B (zh) 广播接收机和三维视频数据处理方法
CN102577403B (zh) 广播接收机及其3d视频数据处理方法
CA2808395C (en) Method for providing 3d video data in a 3dtv
US20130002819A1 (en) Receiving system and method of processing data
EP3110159B1 (en) Broadcast signal transmitting device and broadcast signal receiving device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150204

Termination date: 20190319