CN104541508A - 收发用于3d图像的图像分量的方法和装置 - Google Patents

收发用于3d图像的图像分量的方法和装置 Download PDF

Info

Publication number
CN104541508A
CN104541508A CN201380042553.7A CN201380042553A CN104541508A CN 104541508 A CN104541508 A CN 104541508A CN 201380042553 A CN201380042553 A CN 201380042553A CN 104541508 A CN104541508 A CN 104541508A
Authority
CN
China
Prior art keywords
view
information
view component
component
texture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380042553.7A
Other languages
English (en)
Inventor
崔智铉
徐琮烈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104541508A publication Critical patent/CN104541508A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/005—Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

根据本发明的一个实施方式的用于发送3D图像的图像分量的方法包括：生成一个或更多个纹理图像分量和一个或更多个深度图图像分量的步骤；生成包括3D层信息元素的SEI(补充增强信息)消息的步骤，该3D层信息元素用于用信号通知涉及所述一个或更多个纹理图像分量与所述一个或更多个深度图图像分量之间的编码的层信息；生成包括所述SEI消息的NAL单元的步骤，该SEI消息包括所述包含所述3D层信息元素；以及生成包括所述一个或更多个纹理图像分量、所述一个或更多个深度图图像分量和所述NAL单元在内的广播信号的步骤。

Description

收发用于3D图像的图像分量的方法和装置
技术领域
本发明涉及用于提供3D(3维；3-Dimensional)广播服务的方法和装置。更具体地，本发明涉及一种用于对3D图像渲染所需要的纹理图像分量和深度图图像分量进行解码的方法和装置。
背景技术
随着3维电视(3DTV，3-Dimensional Television)的供应已变得普通，除3维(3D)内容经由存储媒体的供应之外，3D图像内容经由数字广播的传输也正变得活跃。
通常，3D图像通过使用两只人眼的立体(stereo)视图的原理来提供3D效果。由于两眼之间的视差，换句话说，由于由人类的眼睛之间的大约65mm的距离所引起的双目视差(binocular parallax)，人能够感测深度感知，并且因此，3D图像提供使得用户的左眼和右眼中的每个能够观看到相应的平坦图像的视图，从而提供3D效果和深度感知。
这样的3D图像显示方法包括立体(stereoscopic)法、体积((volumetric))法、全息(holographic)法等等。在立体方法情况下，提供了将由左眼观看的左视图(leftview；)图像和将由右眼观看的右视图(right view)图像，并且通过使得左眼和右眼中的每个能够通过偏振眼镜或显示装置它本身来分别观看左视图图像和右视图图像，观看者可以感知3D图像(或视图)效果。
此外，在家而不是在电影院观看3D内容的情况下，观看者的位置(或地点)可以经常改变(或变化)。然而，当前的3DTV接收器仅当在固定视点或位置(或地点)处观看3D内容时提供适当的3D效果，并且因此，在用户的站立点中，可能发生问题，因为需要视图在有限位置(或地点)中观看所对应的3D内容。
发明内容
技术目的
为了解决以上描述的问题，将由本发明实现的技术目的涉及使得观看者能够自由地选择想要的视点并且在相应地体验到适当的3D效果的同时消费3D内容。更具体地，将由本发明实现的技术目的涉及提供适当的广播信令结构，使得接收器也许能生成(或创建)与各个视点相应的虚拟3D图像，所述各个视点可以取决于观看者而变化。
技术解决方案
根据本发明的示例性实施方式，一种用于发送3D视图的视图分量的方法包括：生成一个或更多个纹理视图分量和一个或更多个深度图视图分量的步骤；生成包括被构造成用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息的3D层次信息元素的SEI消息的步骤；生成包括包含所述3D层次信息元素的所述SEI消息((Supplemental Enhancement Information，补充增强信息)的NAL单元的步骤；以及生成包括所述一个或更多个纹理视图分量、所述一个或更多个深度图视图分量和所述NAL单元的广播信号的步骤。
优选地，所述3D层次信息元素包括标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量的层次视图类型信息。
优选地，所述3D层次信息元素还包括指示所述特定视图分量的视点的层次视图标识符信息。
优选地，所述3D层次信息元素还包括指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量的嵌入层次视图数量信息。
优选地，所述3D层次信息元素还包括标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是深度图视图分量的嵌入层次视图类型信息，以及指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引的编码优先级索引信息。
优选地，用于发送3D视图的视图分量的方法还包括：生成包括被构造成用信号通知与通过使用随机接入点的视图分量恢复有关的信息的GVR信息元素的SEI消息的步骤；以及生成包括包含所述GVR信息元素的SEI消息的NAL单元的步骤。
优选地，所述GVR信息元素包括指示特定接入单元(access unit)是否对应于GVR随机接入点的GVR标识信息、指示在按时间先后在当前时间点的视图分量之前的视图分量不存在的情况下在应用了GVR的视图分量当中不能随着解码被处理的视图分量的数量的3D扩展视图数量信息、以及标识不能随着解码被处理的视图分量的视图标识信息。
优选地，用于发送3D视图的视图分量的方法包括：生成包括被构造成用信号通知所述纹理视图分量与所述深度图视图分量之间的关联的3D视图依赖信息元素的SEI消息的步骤；以及生成包括包含所述3D视图依赖信息元素的SEI消息的NAL单元的步骤。
优选地，所述3D视图依赖信息元素包括指示包括所述3D视图依赖信息元素的所述SEI消息是否提供关于包括在3D内容中的所有视图分量的信息的信息。
根据本发明的示例性实施方式，一种用于3D视图的视图分量接收装置包括：调谐器，该调谐器被构造成接收包括一个或更多个纹理视图分量、一个或更多个深度图视图分量和NAL单元的广播信号；解复用器，该解复用器被构造成解析包括包含3D层次信息元素的SEI(Supplemental Enhancement Information，补充增强信息)消息的所述NAL单元，所述3D层次信息元素被构造成从所述广播信号用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息；以及视图分量解码器，该视图分量解码器被构造成通过使用包括在所述SEI消息中的所述3D层次信息元素来对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码。
优选地，所述3D层次信息元素包括标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量的层次视图类型信息。
优选地，所述3D层次信息元素还包括指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量的嵌入层次视图数量信息。
优选地，所述3D层次信息元素还包括标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是对应于深度图视图分量的嵌入层次视图类型信息，以及指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引的编码优先级索引信息。
优选地，所述解复用器还解析包括包含GVR信息元素的SEI消息的NAL单元，所述GVR信息元素被构造成用信号通知与通过使用随机接入点的视图分量恢复有关的信息，并且所述视图分量解码器还使用所述GVR信息元素，以对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码，其中，所述GVR信息元素包括指示特定接入单元(access unit)是否对应于GVR随机接入点的GVR标识信息、指示在按时间先后在当前时间点的视图分量之前的视图分量不存在的情况下在应用了GVR的视图分量当中不能随着解码被处理的视图分量的数量的3D扩展视图数量信息、以及标识不能随着解码被处理的视图分量的视图标识信息。
优选地，所述复用器还解析包括包含3D视图依赖信息元素的SEI消息的NAL单元，所述3D视图依赖信息元素被构造成用信号通知所述纹理视图分量与所述深度图视图分量之间的关联，并且所述视图分量解码器还使用所述3D视图依赖信息元素，以对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码，并且其中，所述3D视图依赖信息元素包括指示包括所述3D视图依赖信息元素的所述SEI消息是否提供关于包括在3D内容中的所有视图分量的信息的信息。
根据本发明的另一示例性实施方式，一种用于发送3D视图的视图分量的方法包括：生成一个或更多个纹理视图分量和一个或更多个深度图视图分量的步骤；生成被构造成用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息的3D层次信息描述符的步骤，其中，所述3D层次信息描述符包括标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量的层次视图类型信息，以及指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量的嵌入层次视图数量信息；以及生成包括所述一个或更多个纹理视图分量、所述一个或更多个深度图视图分量和所述3D层次信息描述符的广播信号的步骤。
优选地，所述3D层次信息描述符被包括在PMT、VCT或SDT中。
优选地，所述3D层次信息描述符还包括标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是深度图视图分量的嵌入层次视图类型信息，以及指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引的编码优先级索引信息。
本发明的效果
根据本发明，当旨在调整3D效果(或容积效果)时，每当观看者需要时，在观看3D内容的同时，可以通过接收器来创建新的左视图(或图像)和右视图(或图像)，并且因此，可以通过使用这个组合来调整3D效果。
另外，根据本发明，可以根据3D内容的观看者的视点相对于随机(或任意)视点创建3D内容视图(或图像)。
此外，根据本发明，可以相对于纹理视图分量和/或深度图视图分量之间的依赖执行适当的解码以得到3D视图渲染。
附图说明
图1例示了根据本发明的示例性实施方式的被构造成在任意视点生成3D图像的接收器的一部分。
图2例示了根据本发明的示例性实施方式的3D内容的视频数据和深度元素。
图3例示了根据本发明的示例性实施方式的用于对3D图像进行编码的编码模式。
图4例示了根据本发明的示例性实施方式的与编码模式相应的编码器的结构。
图5例示了根据本发明的示例性实施方式的对纹理图像和深度图图像进行编码的顺序。
图6例示了根据本发明的示例性实施方式的接入单元内的各个图像分量的编码顺序。
图7例示了根据本发明的示例性实施方式的逐步视图刷新(Gradual ViewRefresh，GVR)接入单元。
图8例示了根据本发明的示例性实施方式的使用逐步视图刷新(GVR)的解码过程。
图9例示了根据本发明的示例性实施方式的3D视图依赖描述符。
图10例示了根据本发明的示例性实施方式的关于赋予给depth_hor_upsampling_factor字段和depth_ver_upsampling_factor字段的值的描述。
图11例示了根据本发明的示例性实施方式的3D视图依赖描述符在PMT内的位置。
图12例示了根据本发明的示例性实施方式的3D层次描述符。
图13例示了根据本发明的示例性实施方式的关于赋予给hor_upsampling_factor字段和ver_upsampling_factor字段的值的描述。
图14例示了根据本发明的示例性实施方式的3D视图依赖描述符在PMT内的位置。
图15例示了根据本发明的示例性实施方式的与stream_type字段的值相应的有效位。
图16例示了根据本发明的示例性实施方式的视频级别的信令。
图17例示了根据本发明的示例性实施方式的SEI消息在3D视图依赖信息正通过SEI有效载荷来发送的情况下的语法。
图18例示了根据本发明的示例性实施方式的SEI消息在3D层次信息正通过SEI有效载荷来发送的情况下的语法。
图19例示了根据本发明的示例性实施方式的SEI消息在3D层次信息正通过SEI有效载荷来发送的情况下的语法。
图20例示了根据本发明的示例性实施方式的与nal_unit_type值相应的RBSP的NAL单元和语法结构的细节。
图21例示了根据本发明的示例性实施方式的使用3D层次信息的接收器的解码操作。
图22例示了根据本发明的示例性实施方式的针对图21的接收器的解码操作的3D层次信息。
图23例示了根据本发明的示例性实施方式的3DTV接收器的结构。
具体实施方式
将参照附图详细地描述能够实现在下面所描述的以下目的的详细实现的本发明的优选示例性实施方式。这时，被例示在附图中并且相对于附图描述的本发明的构造和操作仅仅被描述为至少一个示例性实施方式，并且因此，本发明及其必要构造和操作的技术范围和精神将不仅限于此。
另外，只要可能，尽管基于本发明的功能从通常知道和使用的术语中选择本发明中使用的术语，但是可以根据本领域技术人员的发明或实践或随着新技术的出现而变化或修改本文所使用的术语。另外，在一些特定情况下，本发明的描述中所提到的术语中的一些可以由本申请人以他的或她的判断来选择，其详细意义在本发明的描述的相关部分中被描述。此外，要求本发明的术语将不仅简单地由所使用的实际术语而且由位于之内的各个术语的意义来定义，并且还基于本发明的总体内容。
图1例示了根据本发明的示例性实施方式的被构造成在任意视点生成3D图像的接收器的一部分。
为了生成(或创建)任意(或随机)视点的3D图像，构造立体3D内容的左视图(或左视图视频)和右视图(或右视图视频)中的每个的纹理图像(或纹理视图(texture view))以及与各个纹理图像相应的深度图图像(或深度图视图(depth mapview))是需要的。
纹理图像(或纹理视图)对应于由像素构造的图像视图。可以使用纹理视图0(texture view 0)以生成播放3D内容所需要的左视图，并且可以使用纹理视图1(texture view 1)以生成播放3D内容所需要的右视图。
深度图图像(或深度图视图)对应于视图(或图像)或包括用于对左视图图像和右视图图像中的每个提供3D效果的信息的数据，所述左视图图像和右视图图像构造3D内容。深度图视图可以包括与构造3D内容的左视图和右视图的各个图像内的特定点相应的深度信息。例如，深度图视图可以包括与对应图像内的像素中的每个相应的深度信息，并且深度图视图还可以包括特定单元的深度信息相应的像素。另选地，深度图视图可以提供与包括在图像中的对象(object)相应的深度信息。该深度图视图可以包括与一个或更多个视点相应的深度信息。更具体地，深度图视图可以包括与像素、像素的组(或合集)或图像内的对象相应的至少一个深度信息，并且各个深度信息可以对应于与各个视点对应的深度信息。
视图合成(view synthesis)单元(或图像分析单元)可以通过使用纹理视图(左视图的纹理视图、右视图的纹理视图)和深度图视图来生成被包括在3D内容中的左视图和右视图。在生成左视图和右视图的过程中，除深度图视图之外，视图合成单元可以使用包括记录所对应的3D内容的摄像机的环境信息的摄像机参数(cameraparameter)。摄像机参数可以包括摄像机之间的距离、摄像机与要记录的对象之间的距离、摄像机之间的角度、摄像机的高度和/或摄像机它本身的构造信息。
3D格式器(3D formatter)通过渲染从视图合成单元生成的左视图和右视图来生成3D图像(或3D视图)。
图2例示了根据本发明的示例性实施方式的3D内容的视频数据和深度元素。
可以为提供3D内容的节目、服务或频道提供纹理视图以及与该纹理视图相应的深度信息。
在广播服务中，纹理视图以及与该纹理视图相应的深度信息可以用节目单元、服务单元或频道单元加以提供。本文中，深度信息可以对应于以上描述的深度图视图。
接收器可能被要求标识纹理视图以及与该纹理视图相应的深度信息并且还可能被要求确定哪一个深度信息将被应用于哪一个纹理视图。因此，可能要求经由广播信令发送相应的信令信息。
图3例示了根据本发明的示例性实施方式的用于对3D图像进行编码的编码模式。
根据本发明的示例性实施方式，可以通过使用AVC(Advanced Video Coding，高级视频编码)对3D图像(或3D视图)进行编码。并且，根据本发明的另一示例性实施方式，可以通过使用MVC(Multiview Video Coding，多视图视频编码)对3D图像进行编码。
根据本发明的示例性实施方式，可以通过使用至少两种模式来对3D图像进行编码。
“3D高(3D High)”模式对应于其中用来仅应用于纹理视图(或纹理数据)的AVC和/或MVC还应用于深度数据(或深度图视图或深度信息)的模式。在这个模式下，纹理视图可以与MVC编解码器兼容。这时，基本层的视图(或图像)可以与AVC编解码器和MVC编解码器这二者兼容。根据这个模式，独立地执行了纹理视图的编码和深度数据的编码。
“3D扩展高(3D Extended High)”模式对应于其中不是使纹理视图和深度数据基于AVC和/或MVC的编码被独立地执行而是通过彼此影响来执行编码的模式。在这个模式下，纹理视图可以与AVC编解码器兼容。这时，基本层的视图(或图像)可以与AVC编解码器和MVC编解码器这二者兼容。通常，这个模式与“3D高”模式相比具有更好的编码效率。
图4例示了根据本发明的示例性实施方式的与编码模式相应的编码器的结构。
图4的(a)例示了与“3D高”模式相应的编码器的结构。可以通过使用AVC和/或MVC对纹理视图(T0,T1)进行编码。可以从纹理视图分别地通过使用AVC和/或MVC对深度数据(D0,D1)进行编码，并且，因为在深度数据(D0,D1)与纹理视图(T0,T1)之间不存在依赖(dependency)，所以可以分别地对深度数据(D0,D1)和纹理视图(T0,T1)中的每个进行解码。
图4的(b)例示了与“3D扩展高”模式相应的编码器的结构。可以通过使用AVC和/或MVC对深度数据(D0,D1)和纹理视图(T0,T1)进行编码。然而，通过在彼此之间具有依赖执行了纹理视图的编码和深度数据的编码。因此，纹理视图和深度数据应该被共同地解码(或连同彼此一起解码)。
根据本发明的该示例性实施方式，基本纹理视图((base texture view，T0)可以在任何模式下与AVC编解码器兼容。
图5例示了根据本发明的示例性实施方式的对纹理图像和深度图图像进行编码的顺序。
可以针对各个视图分量对比特流进行编码，并且还可以针对各个视图分量来实现解码顺序。更具体地，左视图的纹理视图分量(视图0的纹理，(texture of view 0)、右视图的纹理视图分量(视图1的纹理，texture of view 1)、左视图的深度图视图(深度图视图0，depth map of view 0)和右视图的深度图视图(深度图视图1，depth mapof view 1)可以各自被编码和发送到相应的比特流，并且，在对一个视图分量的数据的处理完成之前，可能不执行对另一视图分量的数据的处理。
可以针对各个接入单元对比特流进行编码，并且还可以针对各个接入单元来实现解码顺序。更具体地，一个左视图帧、一个右视图帧、左视图的一个深度图帧和右视图的一个深度图帧可以被包括在一个接入单元中，并且这样的接入单元可以被编码和发送到相应的比特流。并且，在对包括在一个接入单元中的数据的处理完成之前，可能不执行对包括在另一接入单元中的数据的处理。
AVC/MVC兼容视图的纹理视图分量可以被编码为定位在它相应的深度视图分量之前。更具体地，纹理视图0(视图0的纹理，texture of view 0)可以被编码为定位在与特定视点相应的视图分量中的任一个之前。
可以根据纹理视图分量与深度图分量之间的依赖(dependency)在一个接入单元内执行编码。
图6例示了根据本发明的示例性实施方式的接入单元内的各个图像分量的编码顺序。
参照图6的(a)，纹理视图0被首先编码，并且它的相关纹理视图1然后被编码。此后，纹理视图0的深度图视图0被编码，并且它相关的纹理视图1的深度图视图1然后被编码。在这种情况下，纹理视图0和纹理视图1可以皆对应于AVC/MVC兼容的纹理视图。
参照图6的(b)，纹理视图0被首先编码，并且纹理视图0的深度图视图0然后被编码。此后，依赖于深度图视图0的纹理视图1被编码，并且然后，纹理视图1的深度图视图1然后在依赖于深度图视图0的同时被编码。在这种情况下，纹理视图0和纹理视图1可以皆对应于AVC/MVC兼容的纹理视图。
参照图6的(c)，纹理视图0被首先编码，并且纹理视图0的深度图视图0然后被编码。这时，深度图视图0可能依赖于纹理视图0。此后，纹理视图1的深度图视图1被编码。深度图视图1可能依赖于深度图视图0。然后，纹理视图1被编码。纹理视图1可能依赖于纹理视图0。并且，纹理视图1还可能依赖于深度图视图1。在这种情况下，尽管纹理视图0可能是AVC/MVC兼容的，但是纹理视图1可能不与MVC兼容。
在本描述中，视图B依赖于视图A的意义可以指示可以在视图B的编码过程期间使用视图A的特定元素。在这种情况下，在解码过程期间，应该首先对视图A进行解码以使得视图B能够被完全解码。
例如，可以通过对与原始(或初始)视图A和原始(或初始)视图B之间的差相应的数据进行编码来执行视图B的编码。另选地，可以通过对关于属于视图A的像素中的一些的附加信息进行编码来执行视图B的编码。
图7例示了根据本发明的示例性实施方式的逐步视图刷新(Gradual ViewRefresh，GVR)接入单元。
GVR使得预选视点能够被准确地解码并且使得剩余视点能够通过使用合成技术而恢复。
GVR对应于能够被用在3D视频编码中的一种随机接入点(random access point)，并且GVR与对应于随机接入点的即时解码刷新(Instantaneous Decoding Refresh，IDR)相比有较大的压缩效率。在本文中，在在视图数据(或图像数据)的比特序列中间接收到数据的情况下，随机接入点指代使得对应视点或紧跟对应视点之后的视图(或帧)能够被播放。
在IDR情况下，在接收器在比特序列中间存取以对所对应的比特序列进行编码的情况下，可以在所对应的视点处获取构造3D图像(或3D视图)的左视图和右视图。相反地，在GVR情况下，在接收器在比特序列中间存取以对所对应的比特序列进行解码的情况下，不能够在所对应的视点处立即获取左视图和右视图，并且可以获取左视图和右视图中的任一个或左视图或右视图的一部分。此后，可以逐步获取左视图和右视图中的全部。更具体地，根据GVR，在接收器已存取比特序列之后接收器可以从特定视点开始获取整个(或完整的)左视图和整个(或完整的)右视图。
尽管在IDR和锚接入单元中不使用帧间预测，但是在GVR接入单元(GVR accessunits)中使用了部分或有限的帧间预测，并且使用了视图合成(View synthesis)。
类似于锚接入单元的情况，可以通过SEI消息和NAL单元标头来发送GVR接入单元的信令。
可以经由预测通过使用属于邻近计数的视图来恢复属于各个计数的视图。
在图7的(a)和(b)中，用虚线标记的视图可以各自被定义为GVR接入单元。可以通过一个GVR接入单元从帧I(视图I)绘制帧P(视图P)。
参照图7的(b)，可以通过使用被包括在一个GVR接入单元中的帧I来获取左视图和右视图中的每个的帧P。
图8例示了根据本发明的示例性实施方式的使用逐步视图刷新(GVR)的解码过程。
参照图8，在从GVR接入单元(与计数15对应的GVR接入单元)启动了解码的情况下，帧间预测未应用于的纹理视图分量和深度图视图分量被首先解码。通过视图合成(例如，基于深度图像的渲染；depth-image-based rendering，DIBR)恢复了“非刷新的”视图。这时，经由视图合成恢复的视图可以对应于尚未被充分地(或完全)恢复的初始(或原始)视图的近似格式。在这种情况下，在预定时间段已过去之后，可以恢复整个(或完整的)视图。例如，图8对应于当从与计数30对应的视图开始充分地(或完全)恢复了视图时的情况。
图9例示了根据本发明的示例性实施方式的3D视图依赖描述符。
根据本发明的3D视图依赖描述符可以包括ATSC系统的节目图表(Program MapTable，PMT)、虚拟频道表(Virtual Channel Table，VCT)或事件信息表(EventInformation Table，EIT)。另选地，3D视图依赖描述符可以通过被包括在DVB系统的服务描述表(Service Description Table，SDT)或事件信息表(Event Information Table，EIT)中来发送。取决于通过它正在发送3D视图依赖描述符的表，信令可以决定以服务级别、节目级别或事件级别中的任一个执行信令。
3D视图依赖描述符用信号通知被包括在广播节目、广播频道或广播服务中的纹理视图和深度图视图之间的连接关系，并且提供关于各个视图之间的编码依赖(dependency)的信息。
另外，3D视图依赖描述符可以包括指示GVR方法是否被用作随机接入点的信息。
在通过使用GVR恢复了视图的情况下，接收器应该支持有DIBR(基于深度图像的渲染，depth-image-based rendering)功能，并且因此，还可以提供关于是否正在系统级别下使用GVR的信息。在这种情况下，还可以通过SEI消息或视频数据的NAL单元标头来发送所对应的信息。
3D视图依赖(dependency)描述符可以包括3D_mode字段、view_ID字段、view_PID字段、independent_texture_coding_flag字段、existence_of_corresponding_depth字段、depth_PID字段、depth_hor_upsampling_factor字段、depth_ver_upsampling_factor字段、GVR_include字段和/或cam_param_included字段。
3D_mode字段对应于指示纹理视图与深度图视图之间的编码依赖信息的字段。例如，当这个字段等于0时，这指示“3D高”模式(当纹理视图和深度图视图被独立地编码时的情况)，但是，当这个字段等于1时，这指示“3D扩展高”模式(当在纹理视图与深度图视图之间建立了依赖以增强编码效率时的情况)。
在“3D高”模式情况下，希望仅获取纹理视图的接收器也许能在不必对深度图视图进行解码的情况下对纹理视图进行解码。
在“3D扩展高”模式情况下，因为依赖(dependency)存在，所以可能不对纹理视图和深度图视图执行独立的解码。更具体地，当接收器对纹理视图进行解码时，需要接收器使用深度图视图的解码结果。另选地，当接收器对深度图视图进行解码时，需要接收器使用纹理视图的解码结果。
view_ID字段对应于通知纹理视图分量的视点的标识符(view identifier，视图标识符)。在与纹理视图分量对应的深度图视图分量存在的情况下，可以互连这些分量使得与深度图视图分量相应的view_ID值能够具有与纹理视图分量的view_ID值相同的值。
view_PID字段对应于发送纹理视图分量的ES流的PID值。
independent_texture_coding_flag字段指示是否可以对各个纹理视图执行独立的编码。例如，因为可以在默认情况下对纹理视图0(T0)执行独立的编码，所以这个字段将不是必需的，并且，在使用了这个字段的情况下，这个字段在所有情况下被赋予‘1’的值。相对于剩余的纹理视图(例如，T1)，可以通过这个字段来确定是否能够执行独立的解码。
existence_of_corresponding_depth字段对应于指示与纹理视图分量对应的深度图视图分量是否正被用信号通知的字段。例如，当这个字段的值等于‘0’时，这指示仅纹理视图分量存在，但是，当这个字段的值等于‘1’时，这指示纹理视图分量和深度图视图分量这二者存在。
作为在existence_of_corresponding_depth字段等于‘1’的情况下正被用信号通知的值，depth_PID字段对应于ES流的PID值，所述ES流发送与纹理视图分量对应的深度图视图分量。
depth_hor_upsampling_factor字段对应于通知关于水平升频因子(upsamplingfactor)的信息的字段，其是在与纹理视图分量对应的深度图视图分量被解码之后恢复视图(或图像)所需要的。
depth_ver_upsampling_factor字段对应于通知关于垂直升频因子的信息的字段，其是在与纹理视图分量对应的深度图视图分量被解码之后恢复视图(或图像)所需要的。
在使用了降低分辨率深度编码工具的情况下，发送端可以重新调节深度图视图分量的分辨率(resolution)并且然后可以发送经处理的分量。在这种情况下，在3D视图合成期间，接收端可能需要重新调节过程以在应用所对应的深度图视图时被执行，并且，这时可以通过参照升频因子(例如，depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段)来执行处理。必要时，还可以相对于纹理视图分量指定这样的升频因子。
将在下文中详细地描述能够被分配给depth_hor_upsampling_factor字段和/或depth_ver_upsampling_factor字段的值。
GVR_included字段指示是否能够通过使用GVR方法来恢复视图。例如，当GVR_included字段等于0时，这指示GVR图片(picture)被包括在节目、频道或服务中，但是，当GVR_included字段等于1时，这指示GVR图片未被包括在节目、频道或服务中。因为GVR能够仅在DIBR功能正被提供给接收端时被用作随机接入点(Random access point)，所以不支持DIBR的接收器可以通过使用这个字段值提前确定当前节目、频道或服务的随机接入点(Random access point)是否全部可用于存取(或可以接近的)。
cam_param_included字段对应于通知是否正相对于特定视图用信号通知摄像机参数的字段。如果GVR旨在被用作随机接入点(Random access point)，则摄像机参数可能是需要的。在这种情况下，可以向接收器通知GVR支持是否可通过这个字段得到。通常，当广播站发出GVR时，还可以发送摄像机参数。然而，在通过除视频标头以外的单独路径来发送摄像机参数的情况下，接收器也许能的确标识摄像机参数是否正在通过这个字段来提供。
可以对所有纹理视图执行信令，或者可以通过使用包括在3D视图依赖描述符中的纹理视图的for循环来对纹理视图中的仅一些执行信令。在对所有纹理视图执行了信令的情况下，可以在3D视图依赖描述符中包括num_of_views字段，以使得for循环能够被执行和视图的数量一样多的次数。
在3D_mode字段等于1的情况下，即，在“3D扩展高”模式情况下，用于相对于解码顺序通知视图分量之间的层次信息的解决方案正是需要。更具体地，在系统级别下通知被包括在节目、频道或服务中的纹理视图分量和深度图视图分量之间的依赖信息的信令解决方案正是需要的，并且，作为这样的解决方案，可以使用用于扩展对应于旧(或常规)MPEG-2系统的Hierarchy_descriptor的解决方案、或用于通过将有关信息包括在3D视图依赖描述符中来执行信令的解决方案、或用于通过分别地指定3D层次描述符来执行信令的解决方案。将稍后提供更详细的描述。
图10例示了根据本发明的示例性实施方式的关于赋予给depth_hor_upsampling_factor字段和depth_ver_upsampling_factor字段的值的描述。
被分配给depth_hor_upsampling_factor字段的值指示正沿着视图帧的水平方向应用所对应的升频因子，并且被分配给depth_ver_upsampling_factor字段的值指示正沿着视图帧的垂直方向应用所对应的升频因子。
在depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段的值等于‘0001’的情况下，解码器可以分别地验证被包括在视频元素流中的信息并且可以获取准确的升频因子信息。
当depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段的值等于‘0010’时，这指示与深度图视图分量相应的编码分辨率与纹理视图分量的编码分辨率相同。
当depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段的值等于‘0011’时，这指示与深度图视图分量相应的编码分辨率对应于纹理视图分量的编码分辨率的3/4。
当depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段的值等于‘0100’时，这指示与深度图视图分量相应的编码分辨率对应于纹理视图分量的编码分辨率的2/3。
当depth_hor_upsampling_factor字段或depth_ver_upsampling_factor字段的值等于‘0101’时，这指示与深度图视图分量相应的编码分辨率对应于纹理视图分量的编码分辨率的1/2。
图11例示了根据本发明的示例性实施方式的3D视图依赖描述符在PMT内的位置。
根据本发明的节目图表PMT包括下列的。
可以包括table_id字段、section_syntax_indicator字段、section_length字段、program_number字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、PCR_PID字段、program_info_length字段、stream_type字段、elementary_PID字段、ES_info_length字段和/或CRC_32字段。
table_id字段是8比特字段，其可以被设置为具有0x02的值以指示TS_program_map_section。
section_syntax_indicator字段是1比特字段，其可以被设置为1。
section_lengt字段由12个比特构造，其中前两个比特被设置为00。这个字段指示段的字节数并且指示从紧接这个字段之后开始并且直到CRC的长度。
program_number字段由16个比特构造。这指示program_map_PID适用于哪一个节目(或可用于应用)。仅通过单个TS_program_map_section来发送一个节目的定义。
version_number字段指示虚拟频道的版本。每当在PMT中发生改变时，version_number字段递增1。当版本值达到31时，下一个版本值等于0。这个字段的值具有与MGT的同一字段值相同的值。
current_next_indicator字段由1个比特构造，并且在VCT当前可用于应用的情况下，这个字段被设置为1。如果这个字段被设置为0，则这指示仍然不能够应用VCT并且下一个表是有效的。
section_number字段标识段的编号。例如，用于PMT的这个字段的值被设置为0x00。
last_section_number字段标识最后段的编号。例如，用于PMT的这个字段的值被设置为0x00。
PCR_PID字段由13个比特构造，并且这个字段表示包括有效PCR字段的TS相对于节目的PID，其以上由节目编号来描述。
program_info_length字段可以由12个比特构造，其中前两个比特被设置为具有00的值。剩余的10个比特指示许多字节的紧接这个字段之后的描述符。
stream_type字段可以由8个比特构造，并且这个字段指示节目元素的类型，所述节目元素正通过具有元素(或基本)PID的PID值的分组来发送。
elementary_PID字段可以由13个字段构造，并且这个字段指示被包括在有关节目元素中的TS的PID。
ES_info_length字段可以由12个比特构造，其中前两个字段被设置为00。剩余的10个比特指示有关节目元素的描述符，其以许多字节紧接在这个字段之后。
根据本发明的示例性实施方式，紧接在ES_info_length字段之后的描述符可以对应于3DTV服务位置描述符。
CRC_32字段指示解码器内的寄存器的零输出的CRC值。
根据本发明的示例性实施方式，3D视图依赖描述符可以被包括在其中PMT内的节目级别描述符能够被定位的区域中。更具体地，紧跟program_info_length字段之后的3D视图依赖描述符可以被包括在for循环中。
尽管在附图未示出它，但是在正通过VCT来发送3D视图依赖描述符的情况下，3D视图依赖描述符可以被定位于VCT的频道级别描述符循环中。
尽管在附图中未示出它，但是在正通过SDT来发送3D视图依赖描述符的情况下，3D视图依赖描述符可以被定位于SDT的频道级别描述符循环中，并且可以做出设定使得关于所有视图的信息能够被包括在3D视图依赖描述符中。
图12例示了根据本发明的示例性实施方式的3D层次描述符。
3D层次描述符包括在基于3D视频编码的广播系统中构造节目的纹理视图分量和深度图视图分量的编码有关的层次信息。
可以在PMT的元素流级别下定位3D层次描述符，并且在这种情况下，3D层次描述符可以包括关于视图分量的信息，其在对所对应的ES流进行解码时是需要的。
根据本发明的示例性实施方式的3D层次描述符可以包括hierarchy_view_type字段、hierarchy_view_ID字段、num_hierarchy_embedded_views字段、hierarchy_embedded_view_type字段、hierarchy_embedded_view_ID字段、coding_priority_index字段、hor_upsampling_factor和/或ver_upsampling_factor字段。
hierarchy_view_type字段对应于通知视图分量的类型的字段。例如，当这个字段的值等于‘0’时，这指示视图分量对应于纹理视图分量，但是，当这个字段的值等于‘1’时，这指示视图分量对应于深度图视图分量。
hierarchy_view_ID字段对应于通知视图分量的视点的标识符(视图标识符(viewidentifier))。
num_hierarchy_embedded_views字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的数量的字段。例如，在视图分量之间存在依赖的情况下，对当前视图分量进行解码所需要的视图分量可能存在，并且这时，可以通过num_hierarchy_embedded_views字段向接收器通知这样需要的视图分量的数量。
hierarchy_embedded_view_type字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的类型的字段。例如，如果hierarchy_embedded_view_type字段的值等于‘0’，则这指示视图分量对应于纹理视图分量，但是，如果hierarchy_embedded_view_type字段的值等于‘1’，则这指示视图分量对应于深度图视图分量。
hierarchy_embedded_view_ID字段对应于通知将在对视图分量进行解码之前被直接地解码的视图分量的视点的标识符(视图标识符(view identifier))。通过hierarchy_embedded_view_ID字段，接收器可以找到对当前视图分量进行解码所需要的视图分量。另选地，接收器可以通过使用hierarchy_embedded_view_type字段和hierarchy_embedded_view_ID字段的组合来找到需要的视图分量。
coding_priority_index字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的解码优先级的字段。这个字段还可以用view_index字段值代替。这个字段对应于用于用信号通知与当2个或更多个流将被直接地解码时相应的优先级的字段。
hor_upsampling_factor字段对应于通知关于水平升频因子的信息的字段，其是在视图分量被解码之后恢复视图分量所需要的。
ver_upsampling_factor字段对应于通知关于垂直升频因子的信息的字段，其是在视图分量被解码之后恢复视图分量所需要的。
在使用了降低分辨率编码工具的情况下，发送端可以重新调节视图分量的分辨率(view identifier)并且然后可以发送经处理的分量。在3D视图合成期间，接收端可能需要重新调节过程在应用所对应的深度图视图时被执行，并且可以通过参照升频因子(例如，hor_upsampling_factor字段和/或ver_upsampling_factor字段)来执行处理。
将在下文中详细地描述depth_hor_upsampling_factor字段和/或depth_ver_upsampling_factor字段的值。
图13例示了根据本发明的示例性实施方式的关于赋予给hor_upsampling_factor字段和ver_upsampling_factor字段的值的描述。
被分配给hor_upsampling_factor字段的值指示正沿着视图帧的水平方向应用所对应的升频因子，而被分配给ver_upsampling_factor字段的值指示正沿着视图帧的垂直方向应用所对应的升频因子。
在hor_upsampling_factor字段或ver_upsampling_factor字段的值等于‘0001’的情况下，解码器可以分别地验证被包括在视频元素流中的信息并且可以获取准确的升频因子信息。
当hor_upsampling_factor字段或ver_upsampling_factor字段的值等于‘0010’时，这指示与视图分量相应的编码分辨率与基本纹理视图分量的编码分辨率相同。
当hor_upsampling_factor字段或ver_upsampling_factor字段的值等于‘0011’时，这指示与视图分量相应的编码分辨率对应于基本纹理视图分量的编码分辨率的3/4。
当hor_upsampling_factor字段或ver_upsampling_factor字段的值等于‘0100’时，这指示与视图分量相应的编码分辨率对应于基本纹理视图分量的编码分辨率的2/3。
当hor_upsampling_factor字段或ver_upsampling_factor字段的值等于‘0101’时，这指示与视图分量相应的编码分辨率对应于基本纹理视图分量的编码分辨率的1/2。
图14例示了根据本发明的示例性实施方式的3D视图依赖描述符在PMT内的位置。
包括在PMT中的各个字段的描述将用以上所提供的相同描述代替。
根据本发明的示例性实施方式，3D视图依赖描述符可以被包括在PMT的节目级别描述符所位于的区域中。
在这种情况下，相对于3D编码，还可以重新设计并且用信号通知重新添加的stream_type字段。更具体地，因为与3D编码有关的流对应于不存在于常规AVC/MVC中的新的流，所以分配了新的stream_type字段的值，使得仅与常规AVC/MVC兼容的接收器能够被设计为忽视(或不理)与特定stream_type字段值对应的流，并且因此，可以在新的信令系统与常规(或旧)系统之间维持后向兼容性。
图15例示了根据本发明的示例性实施方式的与stream_type字段的值相应的有效位。
可以将3D视频编码广义地划分成与3D增强流对应的三个不同的方面。
首先，AVC/MVC兼容的深度图视图分量可以存在。这时，必要时，可以将AVC/MVC兼容的深度图视图分量划分成AVC兼容的深度图视图分量和MVC兼容的深度图视图分量。
其次，AVC/MVC非兼容的纹理视图分量可以存在。
第三，AVC/MVC非兼容的深度图视图分量可以存在。
在由流所发送的视图分量对应于AVC兼容的深度图视图分量情况下，可以将stream_type字段的值设置为‘0x24’。
在由流所发送的视图分量对应于MVC兼容的深度图视图分量情况下，可以将stream_type字段的值设置为‘0x25’。
在由流所发送的视图分量对应于AVC/MVC非兼容的纹理视图分量情况下，可以将stream_type字段的值设置为‘0x26’。在这种情况下，stream_type字段可以指示纹理视图分量对应于通过新的方法编码的分量，该新的方法不与AVC或MVC兼容。例如，纹理视图分量可以对应于通过使用深度图视图分量利用层间预测编码的分量。
在由流所发送的视图分量对应于AVC/MVC非兼容的深度图视图分量情况下，可以将stream_type字段的值设置为‘0x27’。在这种情况下，stream_type字段可以指示深度图视图分量对应于通过新的方法编码的分量，该新的方法不与AVC或MVC兼容。例如，深度图视图分量可以对应于通过使用纹理视图分量利用层间预测编码的分量。
尽管在附图中未示出它，但是可以通过VCT来发送3D层次描述符。实质上，3D层次描述符可以被设计为具有与像上面所描述的那样在PMT中定义的3D层次描述符相同的功能，并且可以另外考虑以下特征。
在3D层次描述符被包括在VCT中情况下，因为这对应于频道级别描述符，所以3D层次描述符对应于与PMT的以上描述的3D层次描述符的级别不同的级别，所述PMT针对各个元素流执行用信号通知。更具体地，可能需要被包括在PMT中的3D层次描述符具有与ES级别描述符的构造不同的构造。因此，为了用信号通知与包括在频道中的多个流中的每个相应的特性，可以使用通过将for循环包括在3D层次描述符中来列举与各个分量相应的特性的方法等等，并且，这时，可以在for循环外部列举被通常应用于所有的流的字段。
另外，除如以上所定义的被包括在PMT的3D层次描述符中的字段之外，应该将指示流的PID值的字段包括在3D层次描述符中。在这种情况下，通过使用另外包括的字段，接收器也许能确定被重新添加到3D层次描述符的信息正应用于哪一个ES流。
尽管在附图中未示出它，但是可以通过SDT来发送3D层次描述符。在这种情况下，实质上，3D层次描述符可以被设计为具有与像上面所描述的那样在PMT中定义的3D层次描述符相同的功能，并且可以另外考虑以下特征。
在3D层次描述符被指定给SDT情况下，因为3D层次描述符对应于服务级别描述符，所以3D层次描述符对应于与PMT的以上描述的3D层次描述符的级别不同的级别，所述PMT针对各个元素流执行用信号通知。更具体地，可能需要被包括在PMT中的3D层次描述符具有与ES级别描述符的构造不同的构造。因此，为了用信号通知与包括在频道中的多个流中的每个相应的特性，可以使用通过将for循环包括在3D层次描述符中来列举与各个分量相应的特性的方法等等，并且这时，可以在for循环外部列举被通常应用于所有的流的字段。
另外，除如以上所定义的被包括在PMT的3D层次描述符中的字段之外，可以添加包括对应流的component_tag值的字段。通过使用这个字段，接收器也许能确定被重新添加到3D层次描述符的信息正应用于哪一个ES流。
可以重新指定并且用信号通知与在以上描述的PMT中重新指定的stream_type字段对应的细节，以作为分量描述符的stream_content字段和component_type字段的组合被指示。
图16例示了根据本发明的示例性实施方式的视频级别的信令。
根据本发明的该示例性实施方式，包括在3D视图依赖描述符中的以上描述的信息、包括在3D分层描述符中的信息和/或与GVE有关的信息可以作为视频级别被发送。
例如，在H.264(或AVC)视频情况下，可以将对应的信息发送到包括信息补充处理(诸如解码和输出等等)的SEI(Supplemental Enhancement Information，补充增强信息)区域。
这时，可以各自在SEI中指定被包括在视频级别中以发送信息(诸如3D视图依赖信息、3D层次信息和GVR信息)的3D_view_dependency_info SEI消息、3D_hierarchy_info SEI消息和GVR_info SEI消息，或者3D视图依赖信息、3D层次信息和GVR信息中的至少两个或更多个可以被整合为单个SEI消息并且然后被指定。
在通过各个SEI消息分别发送3D视图依赖信息、3D层次信息和GVR信息情况下，可以通过使用payloadType元素的值来用信号通知关于哪一个类型的信息正被包括在SEI有效载荷中的细节。例如，在payloadType元素值等于‘48’情况下，这可以指示3D视图依赖信息正通过SEI有效载荷来发送。在payloadType元素值等于‘49’情况下，这可以指示3D层次信息正通过SEI有效载荷来发送。在payloadType元素值等于‘50’情况下，这可以指示GVR信息正通过SEI有效载荷来发送。此外，payloadSize元素可以用信号通知被包括在SEI有效载荷中的信息的大小。
图17例示了根据本发明的示例性实施方式的SEI消息在3D视图依赖信息正通过SEI有效载荷来发送的情况下的语法。
根据本发明的该示例性实施方式，发送3D视图依赖信息的SEI消息可以包括3D_view_dependency_info_id字段、3D_complete_views_or_not_flag字段、3D_mode字段、view_ID字段、independent_texture_coding_flag字段、existence_of_corresponding_depth字段、GVR_included字段和/或cam_param_included字段。
3D_view_dependency_info_id字段指示用于标识包括在SEI消息中的信息组合的标识号码，所述SEI消息被构造成发送3D视图依赖信息。
3D_complete_views_or_not_flag字段对应于指示包括在SEI消息中的细节是否正被应用于包括在当前节目(或频道、或服务、或操作点)中的所有视图的字段。
3D_mode字段对应于指示纹理视图与深度图视图之间的编码依赖(dependency)信息的字段。例如，当这个字段等于0时，这指示“3D高”模式(当纹理视图和深度图视图被独立地编码时的情况)，但是，当这个字段等于1时，这指示“3D扩展高”模式(当在纹理视图与深度图视图之间建立了依赖以增强编码效率时的情况)。
在“3D高”模式情况下，希望仅获取纹理视图的接收器也许能在不必对深度图视图进行解码的情况下对纹理视图进行解码。
在“3D扩展高”模式情况下，因为依赖(dependency)存在，所以可能不对纹理视图和深度图视图执行独立的解码。更具体地，当接收器对纹理视图进行解码时，需要接收器使用深度图视图的解码结果。另选地，当接收器对深度图视图进行解码时，需要接收器使用纹理视图的解码结果。
view_ID字段对应于通知纹理视图分量的视点的标识符(视图标识符(viewidentifier))。在与纹理视图分量对应的深度图视图分量存在情况下，可以互连这些分量使得与深度图视图分量相应的view_ID值能够具有与纹理视图分量的view_ID相同的值。
independent_texture_coding_flag字段指示是否可以对各个纹理视图执行独立的编码。例如，因为可以在默认情况下对纹理视图0(T0)执行独立的编码，所以这个字段将不是必需的，但是，在使用了这个字段的情况下，这个字段在所有情况下被赋予‘1’的值。相对于剩余的纹理视图(例如，T1)，可以通过这个字段来确定独立的解码是否能够被执行。
existence_of_corresponding_depth字段对应于指示与纹理视图分量对应的深度图视图分量是否正被用信号通知的字段。例如，当这个字段的值等于‘0’时，这指示仅纹理视图分量存在，但是，当这个字段的值等于‘1’时，这指示纹理视图分量和深度图视图分量这二者存在。
GVR_included字段指示是否能够通过使用GVR方法来恢复视图。例如，当GVR_included字段等于0时，这指示GVR图片(picture)被包括在节目、频道或服务中，但是，当GVR_included字段等于1时，这指示GVR图片未被包括在节目、频道或服务中。因为GVR能够仅在DIBR功能正被提供给接收端时用作随机接入点(Random access point)，所以不支持DIBR的接收器可以通过使用这个字段值提前确定当前节目、频道或服务的随机接入点(random access point)是否全部可用于存取(或可以接近的)。
cam_param_included字段对应于通知是否正相对于特定视图用信号通知摄像机参数的字段。如果GVR旨在被用作随机接入点(random access point)，则摄像机参数可能是需要的。在这种情况下，可以向接收器通知GVR支持是否可通过这个字段得到。通常，当广播站发出GVR时，还可以发送摄像机参数。然而，在通过除视频标头以外的单独路径来发送摄像机参数情况下，接收器也许能的确标识摄像机参数是否正通过这个字段来提供。
图18例示了根据本发明的示例性实施方式的SEI消息在3D层次信息正通过SEI有效载荷来发送的情况下的语法。
根据本发明的该示例性实施方式，发送3D层次信息的SEI消息可以包括3D_hierarchy_info_id字段、hierarchy_view_type字段、hierarchy_view_ID字段、num_hierarchy_embedded_views字段、hierarchy_embedded_view_type字段、hierarchy_embedded_view_ID字段和/或coding_priority_index字段。
3D_hierarchy_info_id字段指示用于标识包括在SEI消息中的信息组合的标识号码，所述SEI消息被构造成发送3D层次信息。
hierarchy_view_type字段对应于通知视图分量的类型的字段。例如，当这个字段的值等于‘0’时，这指示视图分量对应于纹理视图分量，但是，当这个字段的值等于‘1’时，这指示视图分量对应于深度图视图分量。
hierarchy_view_ID字段对应于通知视图分量的视点的标识符(视图标识符(random access point))。
num_hierarchy_embedded_views字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的数量的字段。例如，在在视图分量之间存在依赖情况下，对当前视图分量进行解码所需要的视图分量可能存在，并且这时，可以通过num_hierarchy_embedded_views字段向接收器通知这样需要的视图分量的数量。
hierarchy_embedded_view_type字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的类型的字段。例如，如果hierarchy_embedded_view_type字段的值等于‘0’，则这指示视图分量对应于纹理视图分量，但是，如果hierarchy_embedded_view_type字段的值等于‘1’，则这指示视图分量对应于深度图视图分量。
hierarchy_embedded_view_ID字段对应于通知将在对视图分量进行解码之前被直接地解码的视图分量的视点的标识符(视图标识符(view identifier))。通过hierarchy_embedded_view_ID字段，接收器可以找到对当前视图分量进行解码所需要的视图分量。另选地，接收器可以通过使用hierarchy_embedded_view_type字段和hierarchy_embedded_view_ID字段的组合来找到需要的视图分量。
coding_priority_index字段对应于指示将在对视图分量进行解码之前被直接地解码的视图分量的解码优先级的字段。这个字段还可以用view_index字段值代替。这个字段对应于用于用信号通知与当2个或更多个流将被直接地解码时相应的优先级的字段。
图19例示了根据本发明的示例性实施方式的SEI消息在GVR信息正通过SEI有效载荷来发送的情况下的语法。
在其中3D视频解码是不可能的旧TV中，因为能够输出仅在GVR点兼容的流，所以GVR不作为随机接入点。
相反地，在不支持有3D视频编码和3D视图合成的3DTV中，因为经由视图合成在GVR点生成了与增强流对应的视图，则GVR作为随机接入点。
这时，在支持有3D视图合成的3DTV中，可以通过GVR信息SEI消息来知道3D视图是否对应于GVR图片。
GVR信息SEI消息可以以被附着到对应于GVR随机接入点的各个接入单元的格式用信号通知，并且GVR信息SEI消息可以通过在所对应的接入单元内仅执行解码过程(即，能够由接收器仅通过使用DIBR来执行恢复而获取的视图的ID)来指示哪一个视图不能够被输出(或不可用于输出)。
GVR信息SEI消息包括GVR_flag字段、number_3D_extended_views字段和/或view_ID字段。
GVR_flag字段标识3D视图是否对应于GVR图片。更具体地，当GVR_flag字段的值等于‘1’时，这指示所对应的接入单元是GVR随机接入点。
number_3D_extended_views字段对应于指示当在GVR内不存在除当前时间点的视图以外的按时间先后在先的图片时不能够对其执行解码的视图的数量的字段。另选地，number_3D_extended_views字段指示能够仅通过应用DIBR恢复的视图的数量。number_3D_extended_views字段可以提供关于应该被进一步解码以获取完整的(或整个)视图的视图的数量的信息。
view_ID字段对应于通知视图分量的视点的标识符(视图标识符(viewidentifier))。view_ID字段执行在迭代for循环达和由number_3D_extended_views字段所标识的视图的数量一样多的次数的同时标识DIBR将应用于的视图的功能。另选地，view_ID字段执行在迭代for循环达和由number_3D_extended_views字段所标识的视图的数量一样多的次数的同时标识不能够完全恢复的视图的功能。
图20例示了根据本发明的示例性实施方式的与nal_unit_type值相应的RBSP的NAL单元和语法结构的细节。
根据本发明的另一示例性实施方式，可以将增强层的NAL单元的值重新分配给NAL单元标头的nal_unit_type值。因此，通过防止旧接收器识别所对应的值，可以做出设定使得能够防止3D视图依赖信息、3D层次信息和/或GVR信息被旧接收器使用。
根据本发明的另一示例性实施方式，由3D视图依赖信息SEI消息、3D层次信息SEI消息和/或GVR信息SEI消息所用信号通知的信息可以被定义为具有诸如nal_unit_header_3D_extension()的格式，并且然后可以通过nal_unit_header来用信号通知。可以重新定义当nal_unit_type值等于21时的情况，并且，在这种情况下，3D视图依赖信息SEI消息、3D层次信息SEI消息和/或GVR信息SEI消息可以被包括在NAL单元中并且然后发送。
在以SEI消息格式在视频级别下发送3D视图依赖信息、3D层次信息和/或GVR信息的情况下，为了通知与3D视图依赖/3D层次/GVR有关的信息，可以像在下面所描述的那样操作接收器。
接收器可以通过SEI RBSP(原始字节序列有效载荷，raw byte sequence payload)来接收3D视图依赖信息、3D层次信息和/或GVR信息。
接收器解析AVC NAL单元，但是，当nal_unit_type值等于6时，接收器将信息识别为SEI数据，并且，通过读取具有48的payloadType的3D视图依赖信息SEI消息，接收器使用所对应的信息。
接收器解析AVC NAL单元，但是，当nal_unit_type值等于6时，接收器将信息识别为SEI数据，并且，通过读取具有49的payloadType的3D层次信息SEI消息，接收器使用所对应的信息。
接收器解析AVC NAL单元，但是，当nal_unit_type值等于6时，接收器将信息识别为SEI数据，并且，通过读取具有50的payloadType的GVR信息SEI消息，接收器使用所对应的信息。
通过解析3D_view_dependency_info SEI消息，接收器获取对应视图的3D获取信息和依赖信息。
通过解析3D_hierarchy_info SEI消息，接收器获取3D层次信息。
通过解析GVR_info SEI消息，接收器获取GVR信息。
在3D视图依赖信息、3D层次信息和/或GVR信息通过被包括在NAL单元中在视频级别下发送的情况下，为了通知与3D视图依赖/3D层次/GVR有关的信息，可以像在下面所描述的那样操作接收器。
接收器解析来自广播信号的NAL单元，并且然后，获取具有21的nal_unit_type的slice_layer_extension_rsbp()，以及然后，通过解析被包括在slice_layer_extension_rsbp()中的3D视图依赖信息、3D层次信息和/或GVR信息，接收器可以在3D视频解码时使用经解析的信息。
图21例示了根据本发明的示例性实施方式的使用3D层次信息的接收器的解码操作。
参照图21，为了对视频2进行解码，需要总共四个视图分量(视频0、深度0、视频1、深度1)被直接地解码。因此，需要视频2的3D层次信息包括关于四个视图分量(视频0、深度0、视频1、深度1)的信息。
图22例示了根据本发明的示例性实施方式的针对图21的接收器的解码操作的3D层次信息。
因为视频2对应于纹理视图分量，所以hierarchy_view_type字段指示视图对应于纹理视图。hierarchy_view_ID字段具有对应于视频2的视点标识符的‘2’的值。因为需要总共4个视图分量视频0、深度0、视频1以及深度1被直接地解码以对视频2进行解码，所以num_hierarchy_embedded_views字段具有‘4’的值。3D层次信息迭代for循环达和由num_hierarchy_embedded_views字段所指示的值一样多的次数，并且用信号通知了关于视图分量中的每个的信息。
当接收器对特定流进行编码同时考虑各个视图分量的coding_priority_index字段的值时，接收器可以提前确定需要的纹理视图分量和/或深度图视图分量。更具体地，为了对视频2进行解码，需要接收四个分量V0、V1、D0和D1，并且，因为V1和D0被赋予相同的coding_priority_index字段值，所以接收器可以确定并行解码(同时执行的解码)是可能的(或可用的)。
图23例示了根据本发明的示例性实施方式的3DTV接收器的结构。
根据本发明的该示例性实施方式的3DTV接收器可以包括调谐器与解调器(23010)、VSB解码器(23020)、TP解复用器(23030)、PSI/PSIP/SI处理器(23040)、图像分量解码器(23050)、深度图图像分量解码器(23052)、纹理图像分量解码器(23054)、视图合成模块(或图像合成模块)(23060)、第一虚拟图像生成器(23070)、第二虚拟图像生成器(23080)和/或输出格式器(23090)。
3DTV接收器通过调谐器与解调器(23010)和VSB解码器(23020)来接收广播信号。VSB解码器(23020)将不受其标题(或名称)限制，并且还可以被解释为OFDM解码器等等。
TP解复用器(23030)经由滤波从广播信号中提取视频数据、系统信息等等，并且然后，输出所提取的数据和信息。系统信息可以包括PMT、TVCT、EIT和/或SDT。TP解复用器(23030)可以解析SEI消息和/或NAL单元，并且然后可以获取被包括在SEI消息和/或NAL单元中的3D视图依赖信息、3D层次信息和/或GVR信息。
PSI/PSIP/SI处理器(23040)可以接收系统信息，并且然后，PSI/PSIP/SI处理器(23040)可以通过解析所接收到的系统信息来获取3D视图依赖信息、3D层次信息和/或GVR信息。PSI/PSIP/SI处理器(23040)可以解析SEI消息和/或NAL单元标头，并且然后可以获取被包括在SEI消息和/或NAL单元中的3D视图依赖信息、3D层次信息和/或GVR信息。更具体地，可以通过TP解复用器(23030)或PSI/PSIP/SI处理器(23040)来提取被包括在SEI消息和/或NAL单元标头中的3D视图依赖信息、3D层次信息和/或GVR信息。
图像分量解码器(23050)包括深度图图像分量解码器(23052)和/或纹理图像分量解码器(23054)。
深度图图像分量解码器(23052)对来自视频数据的深度图图像分量进行解码。
纹理图像分量解码器(23054)对来自视频数据的纹理图像分量进行解码。
深度图图像分量解码器(23052)和/或纹理图像分量解码器(23052)可以通过使用3D视图依赖信息、3D层次信息和/或GVR信息来执行图像分量的升频或者可以确定图像分量之间的依赖，以根据所确定的依赖来对图像分量进行解码。对有关操作的描述将用以上参照图21和图22所提供的详细描述代替。
视图合成模块(23060)对纹理图像分量应用深度信息，该深度信息是从深度图图像分量获取的。
第一虚拟图像生成器(23070)和第二虚拟图像生成器(23080)分别对各自被包括在3D图像中的左视图图像或右视图图像执行渲染。第一虚拟图像生成器(23070)和第二虚拟图像生成器(23080)可以被包括在视图合成模块(23060)中，并且图像分析模块(23060)可以执行相对于各个视点来渲染左视图图像或右视图图像的功能。
输出格式器(23090)组合从第一虚拟图像生成器(23070)和第二虚拟图像生成器(23080)生成的左视图图像或右视图图像，从而输出3D图像。
尽管已区分和划分了附图以便于对本发明的描述，但是本发明可以提供用于通过组合本发明的先前描述的实施方式中的一些来构造新的实施方式的设计。而且，每当本领域技术人员需要时，本发明的范围包括设计可由计算机读取的记录介质，所述计算机具有记录在其中的用于执行本发明的以上描述的实施方式的程序。
如上所述，根据本发明的装置和方法可能不仅限于根据本发明的示例性实施方式的以上描述的构造和方法，并且因此，可以完全地或部分地通过选择性地组合本发明的各个示例性实施方式来构造本发明的示例性实施方式的变化。
此外，根据本发明的用于处理与广播节目有关的广播信号的方法可以作为代码被实现，所述代码能够由在网络装置中提供的处理器在能够被处理器读取的记录介质中读取。能够被处理器读取的记录介质包括存储能够被处理器读取的所有类型的记录装置。能够被处理器读取的记录媒体的示例可以包括ROM、RAM、CD-ROM、磁带、磁盘、光学数据存储装置等等。并且，还可以包括以载波(诸如经由因特网的传输)的形式实现的示例性记录介质。并且，能够被处理器读取的记录介质可以散布在通过网络连接的计算机系统内。并且，可以通过使用分散(或散布)方法来存储和执行能够被处理器读取的代码。
对于本领域技术人员而言将明显的是，在不脱离本说明书的精神或范围的情况下，能够对本说明书做出各种修改和变化。因此，本说明书旨在涵盖此发明的修改和变化，只要它们落在所附权利要求及其等同物的范围内即可。同样明显地，将不根据本说明书的技术范围或精神单独地或分别地理解本说明书的这些变化。
并且，装置发明和方法发明皆在本说明书中描述。因此，必要时，可以补充地应用两个发明的描述。
用于执行本发明的模式
如上所述，用于执行本发明的模式被描述为用于执行本发明的最佳模式。
工业适用性
本发明可以被用在与3DTV广播服务的提供有关的一系列工业领域中。

Claims (18)

1.一种用于发送用于3D视图的视图分量的方法，该方法包括：
生成一个或更多个纹理视图分量和一个或更多个深度图视图分量的步骤；
生成包括3D层次信息元素的补充增强信息SEI消息的步骤，该3D层次信息元素被构造成用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息；
生成包括所述SEI消息的NAL单元的步骤，该SEI消息包括所述3D层次信息元素；以及
生成包括所述一个或更多个纹理视图分量、所述一个或更多个深度图视图分量和所述NAL单元在内的广播信号的步骤。
2.根据权利要求1所述的方法，其中，所述3D层次信息元素包括层次视图类型信息，该层次视图类型信息标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量的层次视图类型信息。
3.根据权利要求2所述的方法，其中，所述3D层次信息元素还包括指示所述特定视图分量的视点的层次视图标识符信息。
4.根据权利要求2所述的方法，其中，所述3D层次信息元素还包括嵌入层次视图数量信息，该嵌入层次视图数量信息指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量。
5.根据权利要求4所述的方法，其中，所述3D层次信息元素还包括：嵌入层次视图类型信息，该嵌入层次视图类型信息标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是对应于深度图视图分量；以及编码优先级索引信息，该编码优先级索引信息指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引。
6.根据权利要求1所述的方法，该方法还包括：
生成包括GVR信息元素的SEI消息的步骤，该GVR信息元素被构造成用信号通知与通过使用随机接入点的视图分量恢复有关的信息；以及
生成包括所述SEI消息的NAL单元的步骤，所述SEI消息包括所述GVR信息元素。
7.根据权利要求6所述的方法，其中，所述GVR信息元素包括：GVR标识信息，该GVR标识信息指示特定接入单元是否对应于GVR随机接入点；3D扩展视图数量信息，该3D扩展视图数量信息指示在按时间先后在当前时间点的视图分量之前的视图分量不存在的情况下在应用了GVR的视图分量当中不能随着解码被处理的视图分量的数量；以及视图标识信息，该视图标识信息标识不能随着解码被处理的视图分量。
8.根据权利要求1所述的方法，该方法包括：
生成包括3D视图依赖信息元素的SEI消息的步骤，该3D视图依赖信息元素被构造成用信号通知所述纹理视图分量与所述深度图视图分量之间的关联；以及
生成包括SEI消息的NAL单元的步骤，所述SEI消息包括所述3D视图依赖信息元素。
9.根据权利要求8所述的方法，其中，所述3D视图依赖信息元素包括指示包括所述3D视图依赖信息元素的所述SEI消息是否提供关于包括在3D内容中的所有视图分量的信息的信息。
10.一种用于3D视图的视图分量接收装置，该装置包括：
调谐器，该调谐器被构造成接收包括一个或更多个纹理视图分量、一个或更多个深度图视图分量和NAL单元在内的广播信号；
解复用器，该解复用器被构造成解析包括包含3D层次信息元素的补充增强信息SEI消息的所述NAL单元，该3D层次信息元素被构造成用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息；以及
视图分量解码器，该视图分量解码器被构造成通过使用包括在所述SEI消息中的所述3D层次信息元素来对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码。
11.根据权利要求10所述的装置，其中，所述3D层次信息元素包括标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量的层次视图类型信息。
12.根据权利要求11所述的装置，其中，所述3D层次信息元素还包括嵌入层次视图数量信息，该嵌入层次视图数量信息指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量。
13.根据权利要求12所述的装置，其中，所述3D层次信息元素还包括：嵌入层次视图类型信息，该嵌入层次视图类型信息标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是深度图视图分量；以及编码优先级索引信息，该编码优先级索引信息指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引。
14.根据权利要求10所述的装置，其中，所述解复用器还解析包括包含GVR信息元素的SEI消息的NAL单元，所述GVR信息元素被构造成用信号通知与通过使用随机接入点的视图分量恢复有关的信息，
其中，所述视图分量解码器还使用所述GVR信息元素，以对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码，并且
其中，所述GVR信息元素包括：GVR标识信息，该GVR标识信息指示特定接入单元是否对应于GVR随机接入点；3D扩展视图数量信息，该3D扩展视图数量信息指示在按时间先后在当前时间点的视图分量之前的视图分量不存在的情况下在应用了GVR的视图分量当中不能随着解码被处理的视图分量的数量；以及视图标识信息，该视图标识信息标识不能随着解码被处理的视图分量。
15.根据权利要求10所述的装置，其中，所述复用器还解析包括包含3D视图依赖信息元素的SEI消息的NAL单元，所述3D视图依赖信息元素被构造成用信号通知所述纹理视图分量与所述深度图视图分量之间的关联，
其中，所述视图分量解码器还使用所述3D视图依赖信息元素，以对所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量进行解码，并且
其中，所述3D视图依赖信息元素包括指示包括所述3D视图依赖信息元素的所述SEI消息是否提供关于包括在3D内容中的所有视图分量的信息的信息。
16.一种用于发送用于3D视图的视图分量的方法，该方法包括：
生成一个或更多个纹理视图分量和一个或更多个深度图视图分量的步骤；
生成3D层次信息描述符的步骤，该3D层次信息描述符被构造成用信号通知与所述一个或更多个纹理视图分量和所述一个或更多个深度图视图分量之间的编码有关的层次信息，其中，所述3D层次信息描述符包括：层次视图类型信息，该层次视图类型信息标识特定视图分量对应于纹理视图分量还是对应于深度图视图分量；以及嵌入层次视图数量信息，该嵌入层次视图数量信息指示需要在对所述特定视图分量进行解码之前被解码的视图分量的数量；以及
生成包括所述一个或更多个纹理视图分量、所述一个或更多个深度图视图分量和所述3D层次信息描述符在内的广播信号的步骤。
17.根据权利要求16所述的方法，其中，所述3D层次信息描述符被包括在PMT、VCT或SDT中。
18.根据权利要求16所述的方法，其中，所述3D层次信息描述符还包括：嵌入层次视图类型信息，该嵌入层次视图类型信息标识将在所述特定视图分量的解码之前被解码的视图分量对应于纹理视图分量还是对应于深度图视图分量；以及编码优先级索引信息，该编码优先级索引信息指示将在所述特定视图分量的解码之前被解码的视图分量的解码优先级索引的编码优先级索引信息。
CN201380042553.7A 2012-08-10 2013-08-12 收发用于3d图像的图像分量的方法和装置 Pending CN104541508A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261681633P 2012-08-10 2012-08-10
US61/681,633 2012-08-10
PCT/KR2013/007226 WO2014025239A1 (ko) 2012-08-10 2013-08-12 3d 영상을 위한 영상 컴포넌트 송수신 처리 방법 및 장치

Publications (1)

Publication Number Publication Date
CN104541508A true CN104541508A (zh) 2015-04-22

Family

ID=50068393

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380042553.7A Pending CN104541508A (zh) 2012-08-10 2013-08-12 收发用于3d图像的图像分量的方法和装置

Country Status (6)

Country Link
US (1) US9872041B2 (zh)
EP (1) EP2884744B1 (zh)
KR (1) KR101653319B1 (zh)
CN (1) CN104541508A (zh)
CA (1) CA2881141C (zh)
WO (1) WO2014025239A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108616748A (zh) * 2017-01-06 2018-10-02 科通环宇（北京）科技有限公司 一种码流及其封装方法、解码方法及装置
CN114424527A (zh) * 2019-09-24 2022-04-29 华为技术有限公司 用于指定层的可伸缩嵌套式sei消息

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2908853C (en) 2013-04-08 2019-01-15 Arris Technology, Inc. Signaling for addition or removal of layers in video coding
JP2015136060A (ja) * 2014-01-17 2015-07-27 ソニー株式会社 通信装置、通信データ生成方法、および通信データ処理方法
JP6358460B2 (ja) 2014-04-04 2018-07-18 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法
MX360655B (es) 2014-05-21 2018-11-12 Arris Entpr Llc Gestión individual de memorias intermedias en transporte de video escalable.
MX364550B (es) 2014-05-21 2019-04-30 Arris Entpr Llc Señalización y selección para la mejora de capas en vídeo escalable.
KR101871728B1 (ko) * 2014-07-08 2018-06-27 엘지전자 주식회사 3d 방송 서비스를 위한 방송 신호 송수신 방법 및 장치
TWI529662B (zh) * 2014-12-15 2016-04-11 財團法人工業技術研究院 基於深度資訊的模型建構方法、圖形處理裝置與紀錄媒體
WO2016153273A1 (ko) * 2015-03-23 2016-09-29 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
EP4268462A1 (en) * 2020-12-28 2023-11-01 Koninklijke KPN N.V. Prioritized decoding and output of parts of a picture in video coding

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010043773A1 (en) * 2008-10-17 2010-04-22 Nokia Corporation Sharing of motion vector in 3d video coding
CN102055982A (zh) * 2011-01-13 2011-05-11 浙江大学 三维视频编解码方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2374283B1 (en) * 2009-01-06 2019-11-20 LG Electronics Inc. Method for processing three dimensional (3d) video signal and digital broadcast receiver for performing the method
CN105744284B (zh) 2009-02-19 2019-04-19 交互数字麦迪逊专利控股公司 使用3d视频格式的装置
US20120050475A1 (en) * 2009-05-01 2012-03-01 Dong Tian Reference picture lists for 3dv
US8976871B2 (en) * 2009-09-16 2015-03-10 Qualcomm Incorporated Media extractor tracks for file format track selection
KR101282552B1 (ko) 2009-11-04 2013-07-04 한국전자통신연구원 병렬 처리 스케일러블 비디오 부/복호화 방법 및 장치
GB2500330A (en) * 2010-12-03 2013-09-18 Lg Electronics Inc Receiving device and method for receiving multiview three-dimensional broadcast signal

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010043773A1 (en) * 2008-10-17 2010-04-22 Nokia Corporation Sharing of motion vector in 3d video coding
CN102055982A (zh) * 2011-01-13 2011-05-11 浙江大学 三维视频编解码方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108616748A (zh) * 2017-01-06 2018-10-02 科通环宇（北京）科技有限公司 一种码流及其封装方法、解码方法及装置
CN114424527A (zh) * 2019-09-24 2022-04-29 华为技术有限公司 用于指定层的可伸缩嵌套式sei消息
CN114424527B (zh) * 2019-09-24 2023-07-11 华为技术有限公司 所有层可伸缩嵌套式sei消息的设置方法和装置
US12120354B2 (en) 2019-09-24 2024-10-15 Huawei Technologies Co., Ltd. Scalable nesting SEI messages for specified layers

Also Published As

Publication number Publication date
EP2884744A4 (en) 2016-07-06
EP2884744B1 (en) 2018-07-18
US9872041B2 (en) 2018-01-16
CA2881141C (en) 2017-09-19
CA2881141A1 (en) 2014-02-13
WO2014025239A1 (ko) 2014-02-13
KR101653319B1 (ko) 2016-09-01
US20150229966A1 (en) 2015-08-13
EP2884744A1 (en) 2015-06-17
KR20150040902A (ko) 2015-04-15

Similar Documents

Publication Publication Date Title
CN104541508A (zh) 收发用于3d图像的图像分量的方法和装置
CN102292997B (zh) 广播接收机及其视频数据处理方法
CN102415100B (zh) 广播接收机及其3d视频数据处理方法
US9288469B2 (en) Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same
CN102484729B (zh) 广播发送器、广播接收器及其3d视频数据处理方法
CN104822071B (zh) 提供立体视频广播服务的数据流的发送方法和接收方法
CN102835047B (zh) 使用关于多视点视频流的链接信息发送数字广播流的方法和设备以及接收数字广播流的方法和设备
CN104301705B (zh) 广播接收机和三维视频数据处理方法
CN104717479B (zh) 广播接收机及其3d广播数据处理方法
CN103069817A (zh) 用于在3dtv中提供3d视频数据的方法
CN102257824A (zh) 3d图像信号处理方法和用于实现该方法的图像显示器
CN103190153B (zh) 用于立体感视频服务的信号传送方法和使用该方法的设备
CN102870419B (zh) 三维图像数据编码方法和装置以及解码方法和装置
CN104065945A (zh) 广播发射机、广播接收机及其3d视频数据处理方法
CN104813657B (zh) 用于将数字视频编码和解码的方法以及相关编码和解码设备
CN102405646B (zh) 三维(3d)视频信号的处理方法及执行该方法的数字广播接收机
US8953019B2 (en) Method and apparatus for generating stream and method and apparatus for processing stream
US20140132718A1 (en) Method and apparatus for processing a 3d service
CN103202025B (zh) 用于接收数字广播信号的设备和方法
CN103959768B (zh) 能够显示立体图像的数字广播接收方法和装置
KR101651232B1 (ko) 스테레오스코픽 영상 정보의 전송 방법 및 장치
KR101591703B1 (ko) 3차원 영상 데이터스트림 생성 방법 및 그 장치와 3차원 영상 데이터스트림 수신 방법 및 그 장치
KR20120060771A (ko) 스테레오스코픽 영상 정보의 전송 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150422