CN104137558B - 用于显示三维图像的数字广播接收方法及其接收设备 - Google Patents
用于显示三维图像的数字广播接收方法及其接收设备 Download PDFInfo
- Publication number
- CN104137558B CN104137558B CN201280070454.5A CN201280070454A CN104137558B CN 104137558 B CN104137558 B CN 104137558B CN 201280070454 A CN201280070454 A CN 201280070454A CN 104137558 B CN104137558 B CN 104137558B
- Authority
- CN
- China
- Prior art keywords
- packets
- delivery
- discardable
- view
- time point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 138
- 230000005540 biological transmission Effects 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 4
- 230000011218 segmentation Effects 0.000 claims description 3
- 241000208340 Araliaceae Species 0.000 claims description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 2
- 235000008434 ginseng Nutrition 0.000 claims description 2
- 230000006978 adaptation Effects 0.000 claims 10
- 230000029058 respiratory gaseous exchange Effects 0.000 claims 1
- 230000015572 biosynthetic process Effects 0.000 abstract description 2
- 230000008569 process Effects 0.000 description 54
- 238000009877 rendering Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 18
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 8
- 239000007787 solid Substances 0.000 description 8
- FMYKJLXRRQTBOR-UBFHEZILSA-N (2s)-2-acetamido-4-methyl-n-[4-methyl-1-oxo-1-[[(2s)-1-oxohexan-2-yl]amino]pentan-2-yl]pentanamide Chemical compound CCCC[C@@H](C=O)NC(=O)C(CC(C)C)NC(=O)[C@H](CC(C)C)NC(C)=O FMYKJLXRRQTBOR-UBFHEZILSA-N 0.000 description 6
- 210000003128 head Anatomy 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 238000009826 distribution Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 125000002015 acyclic group Chemical group 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000178 monomer Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 210000000857 visual cortex Anatomy 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/189—Recording image signals; Reproducing recorded image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
- H04N13/359—Switching between monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/015—High-definition television systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
Abstract
本发明涉及数字广播接收方法及其接收设备,更具体地说,涉及用于显示三维图像的数字广播接收方法及其接收设备。为了实现这个目的,根据本发明的一个实施例的数字广播接收方法包括步骤:接收和解复用数字广播信号,数字广播信号包括基础视图和扩展的视图视频流;通过使用形成基础视图和扩展的视图视频流的输送分组确认有关基础视图和扩展的视图图片的可丢弃信息;以及通过使用可丢弃信息,解码基础视图和扩展的视图视频流。
Description
技术领域
本发明涉及广播数字信号接收方法和广播数字信号接收装置,更具体地,涉及能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置。
背景技术
近年来,对三维图像服务的兴趣已经增长。因此,提供三维图像的装置正在发展中。存在三个类型的三维图像的实现,立体型、体型和全息型。
立体型的基本原理是以相交成直角方式排列的图像分别输入进人的左眼和右眼并且分别输入进左眼和右眼的图像在大脑中组合以产生三维图像。此时,以相交成直角的方式排列的图像分别被称为左视图图像和右视图像。当人的左眼和右眼通过偏光镜,或者通过显示装置本身看到左视图图像和右视图像时,用户感到三维图像效果。
但是,在相关技术中二维图像基本上在数字广播中使用。因此,为了在数字广播中有效地实现三维图像服务,考虑有效地检查和处理立体图像信号的方法。
发明内容
技术问题
因此,本发明的一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置,其能够在提供立体型三维图像的数字广播中处理用于特技播放的信号。
本发明的另一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置,其能够在提供多视图型三维图像的数字广播中处理用于特技播放的信号。
本发明的再一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置,其中在提供多视图型三维图像的数字广播中视图对ID和有关每个视图对优先级的信息被包括在PVR辅助信息中。
本发明的再一个目的是提供一种用于自然的特技播放的广播数字信号接收方法和广播数字信号接收装置。
技术方案
为了实现这些和其他的优点,和根据本发明的目的,如在此处实施和广泛描述的,提供了一种广播数字信号接收方法,包括步骤:接收和解复用广播数字信号,在广播数字信号中包括在参考时间点和在扩展时间点上的视频流;使用构成在参考时间点和在扩展时间点上的视频流的输送分组处理有关在参考时间点和扩展时间点上图片的可丢弃性信息;以及使用可丢弃性信息解码在参考时间点和扩展时间点上的视频流。
在该方法中,可丢弃性信息可以被包括在多个输送分组之中的第一输送分组中,多个输送分组构成在参考时间点和扩展时间点上的图片。
在该方法中,可丢弃性信息可以由在discardble_pair_flag字段和discardable_flag字段之中的至少一个表示,discardble_pair_flag字段和discardable_flag字段包括在第一输送分组中。
在该方法中,discardable_pair_flag字段可以表示如果执行3D特技播放是否解码输送分组,并且discardable_flag字段可以表示如果执行2D特技播放是否解码输送分组。
在该方法中,discardable_pair_flag字段和discardable_flag字段可以一起被包括在单个语法结构中。
在该方法中,如果执行3D特技播放,则当在第一输送分组中的头部信息中包括的discardable_pair_flag字段的值是1时,可以省略多个输送分组的解码,多个输送分组构成在参考时间点和扩展时间点上的图片,并且具有与第一输送分组的接入单元编号相同的接入单元编号。
在该方法中,如果执行2D特技播放,则当在第一输送分组中的头部信息中包括的discardable_flag字段的值是1时,可以省略多个输送分组的解码,多个输送分组构成在参考时间点上图片,并且具有与第一输送分组的接入单元编号相同的接入单元编号。
在该方法中,discardable_flag字段可以仅在1-PID多路复用模式下提供。
在该方法中,如果在2-PID多路复用模式中接收到在参考时间点和扩展时间点上的视频流,并且执行2D特技播放,则可丢弃性信息可以从与在参考时间点上的视频流的PID值相对应的输送分组中提取。
在该方法中,可丢弃性信息可以是有关构成在参考时间点和扩展时间点上的视频流的输送分组之中省略哪个输送分组的解码的信息。
在该方法中,在参考时间点和扩展时间点上的视频流可以分别具有在不同时间点上的视频流分段。
为了实现这些和其他的优点,和根据本发明的目的,如在此处实施和广泛描述的,提供了一种广播数字信号接收装置,包括:调谐器,其接收广播数字信号,在广播数字信号中包括在参考时间点和扩展时间点上的视频流;解复用器,其将广播数字信号解复用为在参考时间点和扩展时间点上的视频流;PVR处理器,其使用构成在参考时间点和扩展时间点上的视频流的输送分组处理有关在参考时间点和扩展时间点上图片的可丢弃性信息;和解码器,其使用可丢弃性信息解码在参考时间点和扩展时间点上的视频流;和3D视频处理器,其控制解码的在参考时间点和扩展时间点上的视频流。
该装置可以进一步包括存储单元,在其中存储与可丢弃性信息相关联的输送分组和与特技播放控制相关联的文件。
在该装置中,可丢弃性信息可以被包括在多个输送分组之中的第一输送分组中,多个输送分组构成在参考时间点和扩展时间点上的图片。
在该装置中,响应于执行3D特技播放的控制命令,当包括在第一输送分组中的头部信息中的discardable_pair_flag字段的值是1时,解码器可以省略多个输送分组的解码,这多个输送分组构成在参考时间点和扩展时间点上的图片,并且具有与第一输送分组的接入单元编号相同的接入单元编号。
在该装置中,响应于执行2D特技播放的控制命令,当包括在第一输送分组中的头部信息中的discardable_flag字段的值是1时,解码器可以省略多个输送分组的解码,这多个输送分组构成在参考时间点和扩展时间点上的图片,并且具有与第一输送分组的接入单元编号相同的接入单元编号。
有益效果
根据本发明,能够通过在提供立体型三维图像的数字广播中将可丢弃的图片集分配给构成三维图像的两个视图来处理用于特技播放的信号。
此外,根据本发明,能够在提供多视图型三维图像的数字广播中通过分配可安全移除的MVC接入单元(AU)和MVC子AU,来处理用于多视图型三维图像的特技播放的信号。
此外,根据本发明,在提供多视图型三维图像的数字广播中,通过在PVR辅助信息中存储视图对ID和有关每个视图对优先级的信息,有效地提供用于多视图型三维图像的特技播放。
附图说明
图1是用于描述以二维图像提供特技播放方法的示意图;
图2a和2b是用于描述MVC比特流的配置的示意图;
图3是用于描述以非周期性的方式接收的MVC比特流的配置的示意图;
图4a、4b和4c是用于描述允许有关可丢弃的图片的信息在输送流级别用信号发送的语法结构的示意图;
图5a和5b是图示根据本发明的一个实施例在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中获得discardable_pic_data用于特技播放的过程的流程图;
图6是用于描述根据本发明的一个实施例能够显示三维图像的广播数字信号接收装置的方框图;
图7a和7b是用于描述根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在多视图类型三维图像中提供有关可丢弃的图片的信息的方法的示意图;
图8是图示根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,获得discardable_pic_data用于提供在由两个或更多个MVC流配置的3D视图上执行的特技播放的过程的流程图;
图9是用于描述根据本发明的一个实施例的能够显示三维图像的广播数字信号接收装置的方框图;
图10a、10b、10c和10d,以及图11a、11b、11c和11d是用于描述根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在特技播放模式中控制图像再现的方法的示意图;以及
图12是用于描述数据由用于发送广播数字信号的发送装置处理的过程的方框图。
具体实施方式
现在将详细地参考本发明的优选实施例,其示例在附图中说明。
在解释用于再现给出深度感的三维图像(以下简称为“3D图像”)的视觉表达或者显示技术中使用术语3-D或者3D。观众的视觉皮层将左视图图像和右视图像的两个图像解释为一个3D图像。
能够显示3D图像的装置采用用于处理和3D图像表达的3D显示技术。能够显示3D图像的装置有选择地使用特定的观看设备以便有效地向观众提供3D图像。
3D图像的处理和表达的示例包括使用多个相机的立体图像/立体视频的捕捉、多视图图像/多视图视频的捕捉,二维图像和有关深度的信息的处理等等。能够显示3D图像的装置的示例包括液晶显示器(LCD)、数字TV屏幕、计算机监视器等等,其配备有适用于支持3D图像显示技术的硬件或者软件部件。特定的观看设备包括专用眼镜、护目镜、头盔、眼睛佩戴物等等。
具体地,3D图像显示技术包括立体照片三维图像(通常,利用无源红/青眼镜可观看)技术、偏振三维图像(通常,利用无源偏振眼镜可观看)技术、交替帧序列(通常,有源快门眼镜和头盔用于观看)技术、使用透镜或者栅栏屏幕的自动立体显示技术等等。以下描述的各种技术思想和特点可适用于这些技术。
3D图像显示技术的一个示例使用旋转或者交替操作的光学设备,例如,附接在滤色盘上的分段偏光镜,而在这样情况下,光学设备相互同步。3D图像显示技术的另一个示例使用基于数字微镜设备(DMD)的数字光处理器(DLP),数字微镜设备(DMD)使用可旋转的微小镜子,微小镜子以与要显示的图像中的像素相对应的矩形阵列排列。
另一方面,与3D图像渲染和显示技术(特别地,3D TV)有关的新型的标准正在各种公司、联盟和组织中发展。这些的示例包括电影与电视工程师学会(SMPTE)、消费电子协会(CEA)、3d@Home联盟、国际电信联盟(ITU)等等。除了这些之外,标准组,诸如DVB、BDA、ARIB、ATSC、DVD论坛,和IEC参与开发新型的标准。活动图像专家组(MPEG)参与多视图图像、立体图像和具有有关深度信息的二维图像的3D图像编译。在MPEG中,用于MPEG-4高级视频编译(AVC)的多视图视频编解码器扩展的标准化当前正在发展中。立体图像编译和立体分布格式与色移(立体照片)、像素子采样(并排、棋盘、五点形等等)以及增强的视频编译((2D+增量)、(2D+元数据),和具有有关深度信息的2D)相关联。在这里描述的技术思想和特点可适用于这些标准。
该技术思想和特点的至少一部分与在用于数字图像或者3D TV的图像再现和显示环境方面描述的3D图像显示技术相关联。但是,上述部分的详细内容不限制在这里描述的各种特点,并且可适用于别的类型的显示技术和装置。例如,3D TV技术不仅可适用于TV广播,而且可适用于蓝光盘TM、游戏机游戏、有线和IPTV传输、用于移动电话的内容传送等等,而在这样情况下,它们与其他类型的TV、机顶盒、蓝光盘TM播放器、DVD播放器和TV内容分发器兼容。
返回参考3D图像处理的处理和表达方法,立体图像/视频捕捉被称作考虑两个时间点的立体成像方法,并且多视图图像/视频捕捉被称作使用多个相机的多视图成像方法。
立体成像方法使用通过利用左侧相机和右侧相机对相同的拍摄对象成像获得的一对左视图图像和右视图图像。多视图图像方法使用通过利用三个以上的相机对相同的拍摄对象成像获得的三个以上图像,三个以上的相机其每个放置在离拍摄对象恒定的距离,或者具有恒定视角。在多视图成像方法中,在图像之中的两个图像被指定为左视图图像和右视图成像,并且因此,能够实现三维图像。但是,本发明不局限于此,并且使用三个以上图像(例如,整体成像方法)的别的类型的三维图像的实现是可能的。
为了传输,使用包括活动图像专家组(MPEG)标准的各种方法压缩和编译立体图像或者多视图图像。例如,为了传输,使用H.264/高级视频编译(AVC)标准压缩和编译立体图像或者多视图图像。此时,为了获得3D图像,接收系统使用H.264/高级视频编译(AVC)标准解码接收的图像。
此外,在立体图像和多视图图像之中的一个图像被指定为在基础层中的图像,并且另一个被指定为在扩展层中的图像。使用与单体图像相同的方式编译在基础层中的图像,并且被发送,并且对于在扩展层中的图像,仅仅有关在基础层和扩展层中的图像之间关系的信息被编译和发送。作为压缩和编译方法的示例,使用诸如JPEG、MPEG-2、MPEG-D、H.264/AVD的标准,并且作为压缩和编译在扩展层中图像的方法,使用H.264/多视图视频编译(MV)标准。
另一方面,在能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置中,用于再现图像的接入时间被有选择地(或者以指定的方式)控制为任意接入时间,并且提供特技播放,其以使应于该任意接入时间这样的方式再现图像。
首先,在现有的二维广播数字信号接收装置(例如,2D电视机)中提供特技播放的方法在下面参考图1描述。这么做以帮助理解根据本发明在能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置中提供在三维图像上执行的特技播放的方法。
为了支持在要再现的图像上执行的特技播放,在对应于二维图像的流之中的可丢弃的图片在二维广播数字信号接收装置中使用。
此时,如果二维图像被编译,则可丢弃的图片指的是在多个图片之中不用作参考的图片。因此,虽然在特技播放过程中没有再现,即,虽然被跳过,但是可丢弃的图片没有对其它图片的正常解码产生影响。
因此,在广播数字信号接收装置中,特别地,在个人视频记录器(PVR)中,如果特定的图片被跳过以产生快速再现效果,则该特定的图片,诸如可丢弃的图片,被跳过以产生该快速再现效果。
例如,如图1图示的,如果在从图片I0、P1、P2、P3、P4、P5、P6、P7、P8、P9、P10、P11、P12、P13和P14配置的二维图像中执行特技播放,则在广播数字信号接收装置中对应于可丢弃的图片的图片P1、P2、P4、P5、P7、P8、P10、P11、P13和P14被跳过,并且对应于不可丢弃的图片的图片I0、P3、P6、P9、P12被再现以提供特技播放。
另一方面,根据用于二维图像的编译技术不同地指定可丢弃的图片。例如,如果二维图像是通过以MPEG-2标准编译获得的视频,则不用作参考图片的B图片被用作可丢弃的图片。此外,否则,如果二维图像是通过以H.264/AVC标准编译获得的视频,则具有其中nal片头部的nal_ref_idc的值为0片的图片被用作可丢弃的图片。
另一方面,否则,例如,用于实现三维图像的至少两个图像每个的视频流,例如,输送流存在于三维图像中,参考其来确定分别对应于至少两个图像的图片是否都是可丢弃的图片。
因此,根据本发明的一个实施例,能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置提出了一种方法,其中仅当构成三维视图(或者三维图像)的基础视图和相关视图全部是可丢弃的图片时,该基础视图和相关视图被指定为可丢弃的图片,并且这个信息在输送分组级别上被处理。因此,根据本发明,在能够输出三维图像的数字信号接收装置中,可以不确定在构成三维视图(或者三维图像)的基础视图和相关视图中包括的所有nal片的每个是否是能够跳过特技播放的可丢弃的nal片。
在基于MVC提供三维图像的数字广播中提供平滑特技播放的方法在下面参考附图详细描述。图2a和2b是用于描述MVC比特流的配置的示意图。图3是用于描述以非周期性的方式接收的MVC比特流的配置的示意图。
首先,描述用于基于MVC实现三维图像的MVC比特流的配置。MVC比特流大致从两种类型的多模式来配置。
第一模式是1-PID多路复用模式(或者1-PID模式)。在1-PID多路复用模式中,在MVC比特流的配置中,一个MVC接入单元(MVC AU)被包括在一个PED分组中。此时,基础和相关视图分量都包括在一个MVC AU中。
另一方面,此时,通过使用MVC编译获得的视图分量分别地涉及基础视图和相关视图,并且指的是在左视图图像和右视图像之中的任何一个。以这样的方式,在1-PED多路复用模式中,两个对应的视图分量被组合为一个接入单元。
因此,如在图2a中图示的,在1-PID多路复用模式中,构成一个基础视图分量的多个输送分组(TP)和构成具有与一个基础视图分量相同的时间点的一个相关视图分量的多个输送分组被包括在一个MVC AU中。以这样的方式,在1-PID多路复用模式中,构成基础和相关视图分量的输送分组顺序地插入进一个输送流中。
另一方面,第二模式,与其中配置了基于MVC实现三维图像的MVC比特流的第一模式不同,是2-PID多路复用模式(或者2-PID)。
在2-PID多路复用中,一个PED分组包括一个视图分量,并且从用于不同视图的输送分组配置不同的输送流(TS)的每一个。
如在图2b中图示的,一个MVC AU从基础和相关视图分量的输送分组来配置,基础和相关视图分量包括在不同的输送流中并且其相互对应且对应于一个图片(或者帧)。也就是说,在这种情况下,对应于第一基础视图分量的输送分组包括在MVC基础视图流中,并且与对应于第一基础视图分量的第一相关视图分量相对应的输送分组被包括在MVC相关视图流中。因此,在MVC基础视图流中的输送分组和在MVC相关视图流中的输送分组分别在单独的传输流中被接收。
另一方面,基础视图分量在1-PID多路复用模式中被表达为MVC基础视图子比特流,并且在2-PID多路复用模式中被表达为MVC的AVC视频比特流。此外,基础视图分量是在通过使用MVC编译获得的两个视图分量之中对应于参考图像的分量,并且指的是使用现有的AVC.H.266解码器可解码的流。
另一方面,相关视图分量是使用ISO/IEC 14496-10的附录H可解码的流,并且对应于MVC扩展流。利用使用基础视图解码的结果的视图间预测,或者利用在相关视图分量之间的中间预测能够进行相关视图分量的解码。
因此,如参考图2a和2b描述的,在1-PID多路复用模式中,一个AU包括在一个PES分组中,并且因此,输送分组没有以AU为单位混合。但是,在2-PID多路复用模式中,构成一个AU的基础和相关视图分量包括在不同的PES分组中,并且因此,虽然每个视图分量的帧编号(或者图片编号)依次增长,但是构成一个AU单元的视图分量可以以它们不以连续的顺序相互邻近这样的方式来排列。
例如,如在图3中图示的,在2-PID多路复用模式中,虽然每个视图分量的输送分组在发送侧上被顺序地发送,但是每个视图分量的输送分组可以不每个AU单元顺序地列举,而在接收侧上经过重新多路复用过程。因此,如图示的,在终止对应于L0的输送分组的列举之前,对应于R0或者R1的输送分组可以被列举。因此,在这种情况下,在每个AU之间的界线被模糊,并且因此,存在在特技播放过程中很难选择仅仅对应于期望的AU的输送分组的问题。因此,起点和终点的位置需要对于每个视图分量指定。此外,需要一种方法,其中,在一个帧从其开始的输送分组点上用信号发送AU_number和包括在对应的AU内的基础和相关视图分量的可丢弃性。
因此,参考附图,在下面详细描述一种方法,其中无论MVC比特流以1-PID多路复用模式还是以2-PID多路复用模式配置,在传输流级别提供有关可丢弃的图片的信息。
图4a、4b和4c是用于描述使有关可丢弃的图片的信息能够在传输流级别上用信号发送的语法结构的示意图。
用于处理与在图4a、4b和4c中图示的可丢弃的图片有关数据的字段描述如下。为了根据本发明的简要描述,构成语法字段的英语表达如下使用,并且字段被放在引号中用于其标识。
参考图4a,有关可丢弃的图片的信息在“transport_packet()”中使用“adaptation_field()”提供。
如果包括在输送分组上的头部信息中的“adaptation_field_control”是“10”或者“11”,则存在“adaptation_field()”。
“Adaptation_field_control”表示“adaptation_field()”或者有效载荷是否存在于有效载荷部分中。
另一方面,如果“adaptation_field_control”是“10”,则“adaptation_field_length”的值是183,并且如果“adaptation_field_control”是“11”,则“adaptation_field_length”的值是在0至182的范围中。
另一方面,如果“adaptation_field_control”是“10”或者“11”,则有关可丢弃的图片的信息包括在“private_data_byte”字段中。
在图4b中,“transport_private_data_flag”字段存在于“adaptation_field()”中。
“transport_private_data_flag”表示“private_data_byte”是否存在于“adaptation_field()”中。
此时,如果“transport_private_data_flag”的值是“1”,则一个字节长度的“private_data_byte”字段存在于“adaptation_field()”中。
然后,如果“transport_private_data_flag”的值是“0”,则“private_data_byte”字段不存在于“adaptation_field()”中。
以这样的方式,如果包括在“adaptation_field()”中的“transport_private_data_flag”的值是“1”,则“private_data_byte”字段不存在于“adaptation_field()”中。
另一方面,如果“transport_private_data_flag”的值是“1”,则“private_data_byte”字段存在于“adaptation_field()”中,并且“transport_private_data_length”表示“private_data_byte”字段占据多少字节。
在上述的输送分组的语法结构中,可丢弃的图片信息,即“discardable_pic_data”,位于“private_data_byte”字段中。也就是说,“private_data_byte”包括有关可丢弃的图片的详细信息。
位于“private_data_byte”字段中的“discardable_pic_data()”的语法结构在下面参考图4c详细描述。
用于提供有关可丢弃的图片信息的“discardable_pic_data()”字段包括在图4c中图示的多个字段之中的至少一个。
“discardable_pic_data()”包括用于处理可丢弃的图片的字段。
首先,“view_component_start_flag”表示其中包括“view_component_start_flag”的输送分组,即当前输送分组,是否是包括当前输送分组的对应的视图分量帧的第一输送分组。也就是说,“view_component_start_flag”的值是“1”,其中包括值为“1”的“view_component_start_flag”的输送分组是视图分量帧的第一输送分组,该视图分量帧包括其中包括值为“1”的“view_component_start_flag”的输送分组。
如果“view_component_start_flag”的值是“0”,则包括值为“0”的“view_component_start_flag”的输送分组不是任意视图分量帧的第一输送分组,该任意视图分量帧包括其中包括值为“0”的“view_component_start_flag”的输送分组。
以这样的方式,通过“view_component_start_flag”字段,“discardable_pic_data()”提供有关构成任意视图分量帧的多个输送分组的哪个是第一输送分组的信息。
另一方面,使用其中“view_component_start_flag”值是“1”的输送分组,即在构成任意视图分量帧的多个输送分组之中的第一输送分组,“discardable_pic_data()”提供有关包括第一输送分组的视图分量帧和有关立体视图对的可丢弃性信息。
“AU_number”字段,构成“discardable_pic_data()”字段的另一字段,表示对应于其中包括“AU_number”字段的输送分组的接入单元(AU)的编号。在1-PID多路复用模式中,“AU_number”可以是包括分别对应于基础视图和相关视图的所有输送分组的接入单元的编号(参考图2a)。
另一方面,“AU_number”通过在GOP内的GOP序列号(高24比特)和显示顺序(或者解码顺序)(低8比特)的级联表示。
接下来,“discardable_pair_flag”表示对应于立体视图对的两个图片是否是所有可丢弃的图片,立体视图对对应于当前的流。也就是说,“discardable_pair_flag”表示对应于一对基础视图和相关视图的两个图片是否都是可丢弃的图片,一对基础视图和相关视图是通过多个输送分组实现的,这多个输送分组包括在接入单元中,在接入单元中包括其中包括“discardable_pair_flag”的输送分组。
更具体地说,在1-PID多路复用模式中,当“discardable_pair_flag”的值是“1”时,通过其中包括当前输送分组的接入单元实现的第一图片,和通过不同的接入单元实现的第二图片都是可丢弃的,该不同的接入单元具有与其中包括当前输送分组的接入单元的编号相同的编号。此时,第一图片和第二图片是构成立体视图对的图片。
因此,“discardable_pair_flag”的值是“1”,在3D特技播放时,对应于立体视图对的两个图片都是可丢弃的,立体视图对对应于当前的流。
接下来,“base_view_flag”是表示包括当前输送分组的视图是基础视图还是相关视图的字段。也就是说,如果“base_view_flag”的值是“1”,则对应于包括“base_view_flag”的输送分组的图片是基础视图。然后,如果“base_view_flag”的值是“0”,则对应于其中包括具有“0”值的“base_view_flag”的输送分组的图片是相关视图。
接下来,如果包括在对应于当前流的图片内的所有nal片的nal_ref_idc字段的值都是“0”,则“discardable_flag”具有“1”的值。也就是说,如果构成对应于其中包括“discardable_flag”的输送分组的图片的所有nal片的nal_ref_idc字段的值是“0”,则该图片是可丢弃的,并且因此,确定图片是否是可丢弃的“discardable_flag”的值是“1”。另一方面,即使在包括在图片内的片之中一个的nal_ref_idc字段的值是“1”,“discardable_flag”也具有“0”的值。
另一方面,上述“base_view_flag”字段(或者view_component_ID)在其中基础视图和相关视图构成一个接入单元的1-PID多路复用模式中是重要的。也就是说,因为在2-PID多路复用模式(或者N-PID多路复用模式中,基础视图和相关视图通过包括在输送头部中的PID值可标识,所以在2-PID多路复用模式中可以不包括“base_view_flag”。
接下来,“view_component_end_flag”表示其中包括“view_component_end_flag”的输送分组,即当前输送分组,是否是包括当前输送分组的对应的视图分量帧的最后的输送分组。也就是说,如果“view_component_end_flag”的值是“1”,则其中包括具有“1”的值的“view_component_end_flag”的输送分组是任意视图分量帧的最后的输送分组,在该任意视图分量帧中包括其中包括具有“1”的值的“view_component_end_flag”的输送分组。在其它情形下,“view_component_end_flag”的值被设置为“0”。
在下面描述一个过程,其中处理具有如在图4a、4b和4c中定义的结构的“discardable_pic_data”。与上述discardable_pic_data相关联的语法结构取决于MVC比特流是以1-PID多路复用模式还是以2-PID多路复用模式配置而不同地处理。
在下面描述一个过程,其中在接收装置中获得(处理)discardable_pic_data。
图5a和5b是图示根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中获得discardable_pic_data以提供特技播放过程的流程图。
首先,参考图5a,描述在1-PID多路复用模式和2-PID多路复用模式中discardable_pic_data被处理以提供3D特技播放的过程。
为了提供3D特技播放,分别对应于构成3D图像的基础视图和相关视图的两个图片必须都处于可丢弃的状态之中。也就是说,有关立体视图对的可丢弃性信息必须被提供以便提供3D特技播放。
为了这么做,能够显示三维图像的广播数字信号接收装置通过下述过程获得有关一对图片的可丢弃性信息。
可丢弃性信息通过包括在输送分组中的“adaptation_field()”来提供。为了获得有关在“adaptation_field()”中包括的一对图片的可丢弃性信息,首先进行确定包括在有关输送分组的头部信息中的“adaptation_field_control”的值的过程。“adaptation_field_control”的值是“10”或者“11”,“adaptation_field()”存在。“adaptation_field_control”的值是“10”或者“11”,有关可丢弃图片的信息包括在“private_data_byte”字段中。
如上所述,“adaptation_field_control”的值是“10”或者“11”,进行确定“transport_private_data_flag”字段的值的过程。
此时,如果“transport_private_data_flag”的值是“1”,则一个字节长度的“private_data_byte”字段存在于“adaptation_field()”中。
然后,如果“transport_private_data_flag”的值是“0”,则“private_data_byte”字段不存在于“adaptation_field()”中。
以这样的方式,如果包括在“adaptation_field()”中的“transport_private_data_flag”的值是“1”,则确定“private_data_byte”字段存在于“adaptation_field()”中。因此,如果“transport_private_data_flag”的值是“1”,则确定对应的输送分组包括有关可丢弃的图片的信息。
另一方面,“discardable_pic_data”,作为有关可丢弃的图片的信息,位于“private_data_byte”字段中。也就是说,“private_data_byte”包括有关可丢弃的图片的详细信息。
接下来,如果确定“transport_private_data_flag”的值是“1”,则进行通过“transport_private_data_length”确定“private_data_byte”字段占据多少字节的过程。
当通过“transport_private_data_length”确定“private_data_byte”字段占据多少字节的过程结束时,进行确定“view_component_start_flag”的值是否是“1”的过程。
如果“view_component_start_flag”的值是“1”,则识别当前输送分组是在构成任意视图分量的多个输送分组之中的第一输送分组。
另一方面,如果“view_component_start_flag”的值是“1”,则进行通过“AU_number”字段确定其中包括当前输送分组的接入单元的编号的过程。
接下来,进行通过确定“discardable_pair_flag”的值来确定对应于基础和相关视图的两个图片是否是可丢弃的图片的过程,基础和相关视图对应于其中包括当前输送分组的接入单元。
也就是说,当在1-PID多路复用模式中“discardable_pair_flag”的值是“1”时,确定对应于一对基础视图和相关视图的两个图片是可丢弃的图片,一对基础视图和相关视图通过其中包括当前输送分组的一个接入单元实现。
此外,在1-PID多路复用模式中,当“discardable_pair_flag”的值是“1”时,表示通过其中包括当前输送分组的接入单元实现的第一图片,和通过不同的接入单元实现的第二图片都是可丢弃的图片,不同的接入单元具有与其中包括当前输送分组的接入单元相同的编号。此时,第一图片和第二图片是构成立体视图对的图片。
因此,如果“discardable_pair_flag”的值是“1”,则在3D特技播放时,对应于立体视图对的两个图片在接收装置中都是可丢弃的,立体视图对对应于当前流。此外,如果“discardable_pair_flag”的值是“0”,则在3D特技播放时,对应于立体视图对的图像在接收装置中再现,立体视图对对应于当前流。
另一方面,如果“view_component_start_flag”的值是“0”,则当前输送分组不是在构成任意视图分量的多个输送分组之中的第一输送分组,而在这样情况下,进行通过“view_component_end_flag”确定对应的输送分组是否是在构成任意视图分量帧的多个输送分组之中的最后的输送分组的过程。
也就是说,如果“view_component_end_flag”的值是“1”,则其中包括具有“1”的值的“view_component_end_flag”的输送分组是任意视图分量帧的最后的输送分组,在该任意视图分量帧中包括其中包括具有“1”的值的“view_component_end_flag”的输送分组。在其它个情形下,“view_component_end_flag”的值被设置为“0”。
然后,如果“view_component_end_flag”的值是“1”,则进行确定“Au_number”以识别对应于对应的输送分组的接入单元的编号的过程。
以这样的方式,在接收装置中使用“discardable_pair_flag”实现3D特技播放。此外,在接收装置中,通过使用“view_component_start_flag”和“view_component_end_flag”识别接入单元的起点和终点,仅选择对应于在特技播放过程中希望的AU的输送分组。
该过程如上所述,其中在接收装置中使用“discardable_pair_flag”确定可丢弃性信息用于提供在3D立体视图上执行的3D特技播放。
另一方面,虽然分别对应于基础和相关视图的传输流都在接收装置中接收,但是根据用户的选择和接收装置的情形提供2D特技播放。
参考图5b,在下面描述在接收装置中提供2D特技播放的过程。与参考图5a提供的相同的过程的描述被省略,并且参考图5a提供的描述被替换。
在确定“view_component_start_flag”字段、“AU_number”字段和“discardable_pair_plag”字段的过程结束之后,进行确定“base_view_flag”字段的值的过程。
“base_view_flag”表示包括当前输送分组的视图是基础视图还是相关视图。也就是说,如果“base_view_flag”的值是“1”,则对应于其中包括“base_view_flag”的输送分组的图片是基础视图。然后,如果“base_view_flag”的值是“0”,则对应于其中包括具有“0”值的“base_view_flag”的输送分组的图片是相关视图。
也就是说,在再现2D图像的情况下,对应于基础视图的图像在接收装置中再现,并且因此,确定当前输送分组是否是对应于基础视图的输送分组。
因此,如果当前输送分组对应于基础视图,则在接收装置中进行确定“discardable_flag”字段的值的过程。
如果在对应于当前流的图片内包括的所有nal片的nal_ref_idc字段的值都是“0”,则“discardable_flag”具有“1”的值。也就是说,如果构成对应于其中包括“discardable_flag”的输送分组的图片的所有nal片的nal_ref_idc字段的值是“0”,则该图片是可丢弃的,并且因此,确定图片是否是可丢弃的“discardable_flag”的值是“1”。
因此,接收装置确定对应于其中“discardable_flag”具有“1”的值的输送分组的图片是可丢弃的图片。
另一方面,“base_view_flag”字段(或者view_component_ID)在其中基础视图和相关视图构成一个接入单元的1-PID多路复用模式中是重要的。也就是说,因为在2-PID多路复用模式(或者N-PID多路复用模式)中通过包括在传输头部中的PID值可标识基础视图和相关视图,所以在2-PID多路复用模式中可以不包括“base_view_flag”。
因此,在2-PID多路复用模式中,接收装置不确定“base_view_flag”,并且仅确定“discardable_flag”。
如上所述,根据本发明,在输送流级别上分别确定对应于基础和相关视图的图片的可丢弃性。
提供上述2D或者3D特技播放的、能够显示三维图像的广播数字信号接收装置在下面参考附图详细描述。图6是用于描述根据本发明的一个实施例的能够显示三维图像的广播数字信号接收装置的方框图。
广播数字信号接收装置包括调谐器和解调器410、VSB解码器420、解复用器430、PVR处理器440、存储单元450、PSI或者PSIP/SI处理器460、AVC层470a、MVC扩展层470b、L/R分解器480,和输出格式器490(3D视频处理器)。
此外,虽然未图示,但是该广播数字信号接收装置可以包括用于输出在对应的时间点的图像的图像输出单元。该图像输出单元控制用于每个时间点的图像。多个图像输出单元可以被提供且以左视图图像和右视图像分别输出这样的方式配置。
调谐器和解调器410接收广播数字信号、解调对应的信号、纠错、和提取输送流。作为对输送流执行滤波和分析的解复用器的示例,提供TP解复用器430。PSI/PSIP处理器460从由解复用器430传送的表信息中提取有关视频流的分组标识符(PID)信息。
AVC层470a是解码参考时间点视频的解码器。MVC扩展层470b是解码扩展时间点视频的解码器。
下面描述操作上述接收装置的方法。
接收装置从PMT中提取视频流PID和在PSI/PSIP处理器460中分析的TVCT信息。TP解复用器430使用对应的视频流ID输出视频流。当输出的视频流对应于参考时间点视频(AVC)时,解复用器430将视频流输出到AVC层470a。当输出的视频流对应于扩展时间点视频(MVC扩展)时,TP解复用器430将视频流输出到MVC扩展层470b。
AVC层470a和MVC扩展层470b处理在分别由AVC层470a和MVC扩展层470b接收的视频流中包括的视频数据和辅助数据,并且将处理的结果输出到L/R分解器480。基于由PSIP或者PSI/SI处理器460提取的信息,L/R分解器480和输出格式器490根据立体显示输出格式化参考时间点视频流和扩展时间点视频流,并且发送格式化的结果。
另一方面,根据本发明,在TP解复用器430(或者解复用器)结束对传输流的滤波和分析处理之后,PVR处理器440处理有关来自构成输送流的输送分组的参考时间点流和扩展时间点流的可丢弃性信息。另一方面,PSIP或者PSI/SI处理器460可以执行下述过程,其中可以执行处理有关来自构成输送流的输送分组的参考时间点流和扩展时间点流的可丢弃性信息。
也就是说,PVR处理器440如参考图5a和5b描述的过程处理“discardable_pic_data”。另一方面,如果对记录的图像实现特技播放,则由PVR处理器处理的可丢弃性信息被存储在存储单元450中,并且用作参考。
也就是说,与可用于特技播放的输送分组和特技播放控制相关联的文件被存储在存储单元450中。以这样的方式,与输送分组和特技播放控制相关联的文件被存储在存储单元450中,并且当执行该文件的控制命令被应用于特技播放时,随时被使用。
根据一个实施例,下面描述存储在存储单元450中的文件的配置。能够显示三维图像的广播数字信号接收装置引用如在以下的[表1]中配置的文件,以便使用“discardable_pic_data()”实现特技播放。
[表1]
在用于使用“discardable_pic_data()”实现特技播放的接收装置中的文件如上述[表1]中配置。另一方面,当用于实现3D图像的图像从多个视图而不是立体视图配置时,上述[表1]也以同样方式适用。
用于实现在从多个视图配置的视图分量上执行的特技播放的语法结构在下面参考附图详细描述。
用于在从两个流配置的立体MVC中提供可丢弃性信息的语法结构在上面参考图4a、4b和4c描述。该语法结构参考附图描述如下,其中如果立体MVC从两个或更多个MVC流配置,也就是说,如果一个或多个相关视图分量存在,则有关于此的可丢弃性信息被提供。图7a和7b是用于描述根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在多视图类型三维图像中提供有关可丢弃的图片的信息的方法的示意图。
首先,参考图7a,如果两个或更多个MVC流存在,也就是说,如果至少两个相关视图分量存在(流#1和流#2),则基础视图分量(流#0)与第一相关视图分量(流#1)或者第二相关视图分量(流#2)一起实现三维图像。
在图7b中图示的语法结构可用于可丢弃性信息被提供给从两个或更多个流配置的立体MVC的方法。
另一方面,参考图4a和4b描述的语法结构在立体MVC从两个或更多个流配置的情形下也适用,因此,仅详细描述用于“discardable_pic_data()”的语法结构。
“discardable_pic_data()”字段包括多个字段之中的至少一个字段,如在图7b中图示的。
首先,“view_component_start_flag”表示其中包括“view_component_start_flag”的输送分组,即当前输送分组是否是包括当前输送分组的对应的视图分量帧的第一输送分组。也就是说,“view_component_start_flag”的值是“1”,其中包括具有“1”的值的“view_component_start_flag”的输送分组是包括其中包含具有“1”的值的“view_component_start_flag”的输送分组的视图分量帧的第一输送分组。
如果“view_component_start_flag”的值是“0”,则包括具有“0”的值“view_component_start_flag”的输送分组不是任意视图分量帧的第一输送分组,该任意视图分量帧包括其中包含具有“0”的值的“view_component_start_flag”的输送分组。
以这样的方式,通过“view_component_start_flag”字段,“discardable_pic_data()”提供有关构成任意视图分量帧的多个输送分组的哪个是第一输送分组的信息。
另一方面,使用其中“view_component_start_flag”值是“1”的输送分组,即在构成任意视图分量帧的多个输送分组之中的第一输送分组,“discardable_pic_data()”提供有关包括第一输送分组的视图分量帧和有关立体视图对的可丢弃性信息。
“AU_number”字段、表示“discardable_pic_data()”的不同的字段是表示接入单元编号的字段。“AU_number”通过在GOP内的GOP序列号(高24比特)和显示顺序(或者解码顺序)(低8比特)的级联表示。
接下来,“base_view_flag”是表示包括当前输送分组的视图是基础视图还是相关视图的字段。也就是说,如果“base_view_flag”的值是“1”,则对应于其中包括“base_view_flag”的输送分组的图片是基础视图。然后,如果“base_view_flag”的值是“0”,则对应于其中包括具有“0”值的“base_view_flag”的输送分组的图片是相关视图。
接下来,如果在对应于当前流的图片内包括的所有nal片的nal_ref_idc字段的值都是“0”,则“discardable_flag”具有“1”的值。
“discardable_flag”表示对应于当前流的图片是否是可丢弃的。
也就是说,如果构成对应于其中包括“discardable_flag”的输送分组的图片的所有nal片的nal_ref_idc字段的值是“0”,则该图片是可丢弃的,并且因此,确定该图片是否是可丢弃的“discardable_flag”的值是“1”。另一方面,即使在该图片包括内的片之中一个的nal_ref_idc字段的值是“1”,“discardable_flag”也具有“0”的值。
另一方面,上述“base_view_flag”字段(或者view_component_ID)在其中基础视图和相关视图构成一个接入单元的1-PID多路复用模式中是重要的。也就是说,因为在2-PID多路复用模式(或者N-PID多路复用模式)中基础视图和相关视图通过在输送头部中包括的PID值可标识,所以在2-PID多路复用模式中可以不包括“base_view_flag”。
接下来,“num_3D_views”表示在其每一个中对应的流单元被包括作为单元的3D视图的数目,其与在系统级别用信号发送的Multiview_descriptor字段一样使用。此外,“num_3D_views”具有从一个流单元到另一个变化的值。
接下来,“discardable_3D_view_flag”是表示在3D视图之中是否存在可丢弃的视图的字段,在3D视图的每一个之中包括当前输送分组。如果可丢弃的3D视图存在于在其每一个之中包括当前输送分组的3D视图之中,则“discardable_3D_view_flag”具有“1”的值,并且否则,具有“0”的值。
接下来,“3D_view_ID”字段是在节目级上使3D视图可标识的字段,其与在系统级别用信号发送的Multiview_descriptor字段一样使用。
接下来,“3D_view_priority”字段是表示由对应的多个视图节目提供的3D视图的优先级的字段,其与在系统级别用信号发送的Multiview_descriptor字段一样使用。
接下来,“AU_number”字段是表示在其中包括对应的输送分组的接入单元编号的字段。在多个视图的情形下,接入单元指的是同时临时包含的全部视图分量组。也就是说,接入单元指的是包括同时被包含的所有N个视图的MVC图片,并且AU_number是用于标识MVC图片的字段。同样地,“AU_number”通过在GOP内的GOP序列号和显示顺序的级联表达。
接下来,“view_component_end_flag”表示其中包括“view_component_end_flag”的输送分组,即当前输送分组,是否是包括当前输送分组的对应的视图分量帧的最后的输送分组。也就是说,如果“view_component_end_flag”的值是“1”,则在其中包括具有“1”的值的“view_component_end_flag”的输送分组是在其中包括其中包含具有“1”的值的“view_component_end_flag”的输送分组的任意视图分量帧的最后的输送分组。在其它情形下,“view_component_end_flag”的值被设置为“0”。
参考附图,在下面描述使用如在图4a、4b和7b中限定的用于多个视图类型三维图像的语法结构处理disdable_pic_data的过程。
图8是图示根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,获得discardable_pic_data以提供在从两个或更多个MVC流配置的3D视图上执行的特技播放过程的流程图。
为了提供3D特技播放,分别对应于构成3D图像的基础视图和相关视图的两个图片必须都处于可丢弃的状态之中。此外,接收装置需要确定至少两个3D视图的哪个在从两个或更多个MVC流配置的3D视图中是可丢弃的。
为了这么做,能够显示三维图像的广播数字信号接收装置通过下述过程获得有关至少两个3D视图的可丢弃性信息。
可丢弃性信息通过包括在输送分组中的“adaptation_field()”提供。为了获得在“adaptation_field()”中包括的有关一对图片的可丢弃性信息,首先进行确定在有关输送分组的头部信息中包括的“adaptation_field_control”的值的过程。“adaptation_field_control”的值是“10”或者“11”,“adaptation_field()”存在。“adaptation_field_control”的值是“10”或者“11”,有关可丢弃图片的信息包括在“private_data_byte”字段中。
以这样的方式,“adaptation_field_control”的值是“10”或者“11”,进行确定“transport_private_data_flag”字段的值的过程。
此时,如果“transport_private_data_flag”是“1”,则一个字节长度的“private_data_byte”字段存在于“adaptation_field()”中。
然后,如果“transport_private_data_flag”的值是“0”,则“private_data_byte”字段不存在于“adaptation_field()”中。
以这样的方式,如果在“adaptation_field()”中包括的“transport_private_data_flag”的值是“1”,则确定“private_data_byte”字段存在于“adaptation_field()”中。因此,如果“transport_private_data_flag”的值是“1”,则确定对应的输送分组包括有关可丢弃的图片的信息。
另一方面,“discardable_pic_data”,作为有关可丢弃的图片的信息,位于“private_data_byte”字段中。也就是说,“private_data_byte”包括有关可丢弃的图片的详细信息。
接下来,如果确定“transport_private_data_flag”的值是“1”,则进行通过“transport_private_data_length”确定“private_data_byte”字段占据多少字节的过程。
当通过“transport_private_data_length”确定“private_data_byte”字段占据多少字节的过程结束时,进行确定“view_component_start_flag”的值是否是“1”的过程。
如果“view_component_start_flag”的值是“1”,则识别当前输送分组是在构成任意视图分量的多个输送分组之中的第一输送分组。
另一方面,如果“view_component_start_flag”的值是“1”,则进行通过“AU_number”字段确定在其中包括当前输送分组的接入单元的编号的过程。
接下来,进行通过确定“discardable_3D_view_flag”的值来确定可丢弃的视图是否存在于3D视图之中,在每一个3D视图中包括当前输送分组。
因此,如果“discardable_3D_view_flag”的值是“1”,则在接收装置中3D特技播放时,能够丢弃其中包括当前输送分组的3D视图。此外,在接收装置中,使用“3D_view_ID”字段和“3D_view_priority”字段标识在多个3D视图之中的3D_view,并且如果多个3D视图全部是可丢弃的,则确定丢弃3D视图的哪个。
另一方面,如果“view_component_start_flag”的值是“0”,则当前输送分组不是在构成任意视图分量的多个输送分组之中的第一输送分组,而在这样情况下,进行通过“view_component_end_flag”来确定对应的输送分组是否是在构成任意视图分量帧的多个输送分组之中的最后的输送分组的过程。
也就是说,如果“view_component_end_flag”的值是“1”,则其中包括具有“1”的值的“view_component_end_flag”的输送分组是任意视图分量帧的最后的输送分组,在该任意视图分量帧中包括其中包含具有“1”的值的“view_component_end_flag”的输送分组。在其它情形下,“view_component_end_flag”的值被设置为“0”。
然后,如果“view_component_end_flag”的值是“1”,则进行确定“Au_number”以识别与相应的输送分组相对应的接入单元的编号。
以这样的方式,在接收装置中,使用“discardable_3D_view_flag”实现在至少两个3D视图上执行的3D特技播放。此外,在接收装置中,通过使用“view_component_start_flag”和“view_component_end_flag”标识接入单元的起点和终点,仅选择对应于在特技播放过程中希望的AU的输送分组。
另一方面,如在图7a、7b和8中图示的,能够显示三维图像的广播数字信号接收装置如在图9中图示的实现,以便提供从两个或更多个MVC流配置的3D视图。
参考图9,为了解码多个MVC流,除了基础视频解码器之外,接收装置可以分别包括用于解码多个MVC流的多个辅助视频解码器。
如上所述,在根据本发明的一个实施例的能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,如果对立体广播内容执行特技播放,则通过引用有关位于每个输送分组头部中的“discardable_pair_flag”字段或者“discardable_3D_view_flag”字段的信息,来确定对应的输送分组是否是可丢弃的。
此外,在根据本发明的一个实施例的能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,如果立体广播内容仅仅在特技播放时被二维地输出,则通过“base_view_flag”确定对应的帧是否对应于基础视图。如果通过“base_view_flag”确定对应的帧对应于基础视图,则通过引用有关“discardable_flag”字段的信息,确定对应的输送分组是否是可丢弃的。
此外,在根据本发明的一个实施例的能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,通过第一过程、第二过程和第三过程提供2D或者3D特技播放。在第一过程中,在通过PVR记录接收的3D广播流时,在上游确定每个输送分组是否是可丢弃的。在第二过程中,基于有关序列开始(GOP开始)的信息(其包括在discardable_pic_data()内,或者单独地接收)识别可用于每个GOP的特技播放接入时间以及可丢弃和不可丢弃的图片的识别编号和分布,然后,存储其中上述信息被全面编制的文件或者表(参考用于文件结构[表1])。在第三过程中,当再现存储在PVR中的流时,如果用户允许特技播放功能,则使用在第二过程中存储的文件实现特技播放。
在下面参考附图详细描述在特技播放模式中控制再现速度的方法。图10a、10b、10c和10d,以及图11a、11b、11c和11d是用于描述根据本发明的一个实施例,在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在特技播放模式中控制图像再现的方法的示意图。
为了描述便利,不考虑图片是用于2D特技播放还是用于3D特技播放,在特技播放时可跳过的图片称为“可丢弃的图片”,且不可跳过的图片称为“不可丢弃的图片”。
首先,如果不可丢弃的图片(或者可丢弃的图片)被周期地排列,则参考图10a、10b、10c和10d描述接收装置的操作。
如图10a图示的,如果在从图片P0、P1、P2、P3、P4、P5、P6、P7、P8、P9、P10、P11、P12、P13和P14配置的图像中执行特技播放,则接收装置跳过对应于可丢弃的图片的图片P2、P5、P8、P11和P14,并且再现对应于不可丢弃的图片的图片P0、P1、P3、P4、P6、P7、P9、P10、p12和P13以便提供特技播放。
但是,当对图片P0、P1、P3、P4、P6、P7、P9、P10、P12和P13执行特技播放时,图片P0至P1以1×速度再现,并且图片P1至P3以2×速度再现。
因此,利用根据本发明的接收装置均匀地维持不可丢弃的图片再现的速度的建议是可能的。
为了这么做,参考在图10c中的流程图提供描述。在接收装置中,进行在GOP内不可丢弃的图片的数目(Nnd)和可丢弃的图片的数目(Nd)被抓取以均匀地保持不可丢弃的图片再现速度的过程(S1010)。
以这样的方式,如果不可丢弃的图片的数目(Nnd)和可丢弃的图片的数目(Nd)被抓取,则进行计算最大接入时间的过程(S1020)。此时,根据下述[公式1]计算最大接入时间。
[公式1]
最大接入时间Tmax=(Nnd+Nd)/Nnd
接下来,当确定最大接入时间时,进行确定意图在直至Tmax的范围内实现的特技播放接入时间T的过程(S1030)。
接下来,在接收装置中,进行仅对不可丢弃的图片执行解码的过程(S1040)。接下来,在接收装置中,进行使用解码的不可丢弃的图片在GOP内显示的第n个图片的定时输出(第n×T)个图片的过程(S1050)。
因此,在根据本发明的接收装置中,如在图10d中图示的,如果在当前定时nt nt×T是整数,则对应的不可丢弃的图片(例如,图片P2)被解码和输出。然后,在接收装置中,如果在当前定时nt nt×T不是整数,则对应的不可丢弃的图片(例如,图片P4)被解码,而不输出。因此,在根据本发明能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,在对应的定时使用帧内插技术等等提供在特技显示时自然再现可用的接入时间。
接下来,如果不可丢弃的图片(或者可丢弃的图片)被非周期地排列,则接收装置的操作参考图11a、11b、11c和11d描述。
如图11a图示的,如果在从图片P0、P1、P2、P3、P4、P5、P6、P7、P8、P9、P10、P11、P12、P13和P14配置的图像中执行特技播放,则接收装置跳过对应于可丢弃的图片的图片P1、P6、P7、P10、P11、P13和P14,并且再现对应于不可丢弃的图片的图片P0、P2、P3、P4、P5、P8、P9和P12以便提供特技播放。
但是,当在对应于不可丢弃的图片的图片P0、P2、P3、P4、P5、P8、P9和P12上执行特技播放时,在图片P0至P3再现的接入时间和图片P2至P3再现的接入时间之间存在差别。
因此,利用根据本发明的接收装置均匀地维持非周期排列的不可丢弃的图片再现的速度的建议是可能的。
参考在图11b中图示的流程图,为了这么做,在接收装置中,进行抓取在GOP内不可丢弃的图片的数目(Nnd)和可丢弃的图片的数目(Nd)的过程(S1110)。
接下来,当抓取不可丢弃的图片的数目(Nnd)和可丢弃的图片的数目(Nd)时,进行计算可用于不可丢弃的图片的最大接入时间的过程(S1120)。
此时,根据下述[公式2]计算最大接入时间。
[公式2]
最大接入时间Tmax=(Nnd+Nd)/Nnd
接下来,在接收装置中,进行确定意图在直至Tmax的范围内实现的特技播放接入时间T的过程(S1130)。
接下来,在接收装置中,进行仅对不可丢弃的图片执行解码的过程(S1140)。
接下来,在接收装置中,进行在GOP内显示的第n个图片的定时输出(第n×T)个图片的过程(S1150)。
因此,如在图11c中图示的,如果以1.9×速度提供特技显示,图片P0和P12(参考图11c)被输出。
另一方面,如果第(nt×T)个图片在当前定时nt已经被解码,则解码的第(nt×T)个图片被输出,并且当第(nt×T)个图片在当前定时nt仍然没有解码时,在已经解码的图片之中,在定时上最接近于第(nt×T)个图片的图片被输出。
参考图11b描述的过程参考图11d被进一步详细描述。在接收装置中,从包括在GOP(14个MVC视图对)中的所有图片的数目中抓取不可丢弃的图片的数目和可丢弃的图片的数目(Nnd=9,并且N=7)。接下来,在接收装置中,计算可实现的最大接入时间Tmax(Tmax=15/8)。
然后,在接收装置中,设置意图在直至Tmax的范围内实现的特技播放接入时间(例如,T=1.5)。
在这种情况下,在接收装置中,显示使用UI可实现的接入时间的列表,并且设置由用户选择的接入时间。此外,接收装置仅输出选项“快进”。当用户选择该选项时,接收装置在直至Tmax的范围内任意地确定接入时间。
接下来,在接收装置中,不可丢弃的图片P0、P2、P3、P4、P5、P8、P9和P12被解码。
然后,在接收装置中,图片P0被输出,其对应于呈现时间0(pt0),并且图片P3被输出,其对应于呈现时间2(pt2)。接下来,因为图片P6没有被解码,其对应于呈现时间4(pt4),所以在现有的解码的图片之中在输出时间上最接近的图片P5在呈现时间4被输出。接下来,在接收装置中,图片P9被输出,其对应于呈现时间6(pt6),并且图片P12被输出,其对应于已经解码的图片P12。在解码之后,图片P12处于等待状态直至呈现时间8。
此外,如果在3D特技播放模式,则上述可丢弃的/不可丢弃的图片在特技播放过程中是可跳过的,在相同的AU内的两个视图分量都是可丢弃的。此外,在2D特技播放模式中,仅仅考虑基础视图分量的可丢弃/不可丢弃属性实现上述可丢弃的/不可丢弃的图片。
如上所述,在根据本发明能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,提供在特技显示时在非周期排列的图片之间自然再现是可用的接入时间。
参考附图,在下面详细描述数据由用于发送广播数字信号的发送装置处理的过程。图12是用于描述数据由用于发送广播数字信号的发送装置处理的过程的方框图。
如在图12中图示的,根据本发明使用三维图像附加数据的三维广播数字信号发送装置包括图像获取单元110、音频数据获取单元120、编码器130、节目特定信息产生单元140、分组器150、传输流(TS)产生单元160、多路复用器170和调制器180。图像获取单元110获得原始图像和三维附加数据。音频数据获取单元120获得音频数据。通过图像获取单元100获得的原始图像和三维图像附加数据,和通过音频数据获取单元120获得的音频数据被输入进编码器130中。该编码器130将原始图像和三维图像附加数据以及音频数据编码为适用于数字传输的格式。节目特定信息产生单元140产生用于区别多条信息的节目特定信息(PSI)。由通过编码器130编码产生的基础流(ES)被输入进分组器150。该分组器150分组基础流(ES),并且产生基础流分组(PES)。来自分组器150的基础流分组(PES)和来自节目特定信息单元140的节目特定信息(PSI)被输入进传输流(TS)产生单元160。传输流(TS)产生单元160产生传输流TS。该传输流TS被从传输流产生单元160输入进多路复用器170。该多路复用器170将传输流TS多路复用为一个传输流TS。调制器180调制由多路复用器170多路复用产生的传输流TS。
图像获取单元110获得在用于产生原始图像的一个时间点的图像,在用于产生三维图像附加数据的另一个时间点的图像,以及在视差信息和深度信息之中的任何一个。
此时,通过图像获取单元110获得的在用于产生原始图像的一个时间点的图像是用作与在另一个时间点上的图像比较的一个参考的图像。通过图像获取单元110获得的在用于产生三维图像附加数据的另一个时间点上的图像是在与原始图像的时间点不同的一个时间点上的多视图图像,或者在与原始图像的时间点不同的许多时间点上的多视图图像。
当多视图图像,或者在一个时间点上的一个图像,和在另一个时间点上的两个图像被投影为一个图像时,用于产生三维图像附加数据的视差信息是有关在两个点之间距离的信息,其表示对象的相同的位置,虽然该对象的图像在不同的时间点被捕捉。深度信息是有关视角的信息,其是通过获得在一个时间点上图像以及以预先确定的距离在相同的对象的不同的时间点上的图像而已知的。
编码器130包括第一编码器131、第二编码器132和音频编码器133。在参考时间点上的原始图像被从图像获取单元110输入进第一编码器131。第一编码器131编码原始图像。三维图像附加数据被从图像获取单元110输入进第二编码器132。第二编码器132有效地编码三维图像附加数据。音频数据被从音频数据获取单元120输入进音频编码器133。该音频编码器单元133编码音频数据。
然后,节目特定信息产生单元140产生用于在各种信息单元之中区分的节目特定信息(PSI),诸如原始图像、三维图像附加数据和音频数据。此时,节目属性信息产生单元140使用如在节目图表(PMT)中列出的分组PID信息中的、在用于现有的数字广播的视频和音频中定义流类型,并且执行用于三维图像附加数据的流类型被预留,或者新定义为由用户私下定义的值的功能,其中节目图表(PMT)用于区别传输流(TS)为了在二维数字广播系统和三维数字广播系统之间兼容性。
分组器150包括第一分组器151、第二分组器152和第三分组器153。用于原始图像的基础流(ES_Ori)被从编码器130输入进第一分组器。第一分组器130分组基础流(ES_Ori),并且产生用于原始图像的基础流(PES_Ori)。用于三维图像附加数据的基础流(ES_3D)被从编码器130输入进第二分组器152。第二分组器152分组基础流(ES_3D),并且产生用于三维图像附加数据的基础流分组(PES_3D)。用于音频数据的基础流(ES_Au)被从编码器140输入进第三分组器153。第三分组器153分组基础流(ES_Au),并且产生用于音频数据的基础流分组(PES_Au)。
此时,如果存在与三维图像附加数据相关联新需要的输入字段,则分组器150进一步执行用于三维图像附加数据类型的输入字段被添加到用于三维图像附加数据的基础流分组(PES_3D)的头部部分并且被定义的功能,以便在在不同的时间点上的图像、视差信息、深度信息和深度信息之间区分。
传输流产生单元160包括第一传输流发生器161、第二传输流发生器162、第三传输流发生器163,和第四传输流发生器164。用于原始图像的基础流分组(PES_Ori)被从分组器150输入进第一传输流发生器161。第一传输流发生器161产生用于原始图像的传输流(TS_Ori)。用于三维图像附加数据的基础流分组(PES_3D)被从分组器150输入进第二传输流发生器162。第二传输流发生器162产生用于三维图像附加数据的传输流分组(TS_3D)。用于音频数据的基础流分组(PES_Au)被从分组器150输入进第三传输流发生器163。第三传输流发生器163产生用于音频数据的传输流分组(TS_Au)。节目特定信息(PSI)被从节目特定信息产生单元140输入进第四传输流发生器164。第四传输流发生器164产生用于节目特定信息的传输流分组(TS_PSI)。
多路复用器170执行节目时钟参考(PCR)被插入进用于原始图像的传输流(TS_Ori),以便在多路复用过程的最后步骤中在检测系统时间时使用的功能。
如上所述,在根据本发明的一个实施例能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中,能够在提供立体型三维图像的数字广播中通过将可丢弃的图片集分配到构成三维图像的两个视图,来处理用于特技播放的信号。
此外,根据本发明,能够在提供多视图型三维图像的数字广播中通过分配可安全移除的的MVC接入单元(AU)和MVC子AU,来处理用于多视图型三维图像的特技播放的信号。
此外,根据本发明,在提供多视图型三维图像的数字广播中,通过在PVR辅助信息中存储视图对ID和有关每个视图对优先级的信息,有效地提供用于多视图型三维图像的特技播放。
以上描述了各种实施例,以便描述与本发明的各种方面有关的原始技术思想。但是,一个实施例的一个或多个有区别特征可以适用于一个或多个不同的实施例。根据参考附图描述的实施例每个的一些组成单元或者步骤可以被修改或者调整。组成单元和/或步骤可以被删除或者移动,并且附加的组成部分和/或步骤可以包括在实施例的每个中。
此时,以上描述的各种区别特征和技术思想可以以软件、硬件、固件、中间件或者这些的两个或更多个的组合的形式实现。例如,用于在数字广播中实现接收立体图像信号方法,用于实现接收立体图像信号的设备的程序,被存储在计算机可读的介质中(其由计算机、处理器、控制器等等执行),包括一个或多个程序代码和执行各种任务的部分。类似地,用于在数字广播中实现接收立体图像信号的方法,和用于接收立体图像信号的设备的软件工具,被存储在计算机可读的介质中(由计算机、过程、控制器等等执行),包括执行各种任务的某些程序代码。以上描述的根据本发明的实施例的配置和方法不以限制方式适用,而是,所有或者一些实施例可以有选择地相互组合以对实施例生成各种修改。
对于本领域技术人员来说也是显而易见,不脱离本发明的精神或者范围可以在本发明中进行各种改进或者变化。因此,意图是本发明覆盖本发明的改进和变化,只要它们落在所附权利要求及其等效范围内。
Claims (16)
1.一种广播数字信号接收方法,包括步骤:
接收和解复用广播数字信号,在所述广播数字信号中包括有在参考时间点和扩展时间点上的视频流以及包含适配字段控制和传输专用数据标志的值的头部信息;
基于适配字段控制和传输专用数据标志的值确定输送分组是否包括可丢弃性信息;
当所述可丢弃性信息被确定包括在所述输送分组中时,使用构成在所述参考时间点和所述扩展时间点上视频流的输送分组处理有关在所述参考时间点和所述扩展时间点上的图片的所述可丢弃性信息;以及
使用所述可丢弃性信息解码在所述参考时间点和所述扩展时间点上的所述视频流,以及
其中,确定输送分组是否包括可丢弃性信息包括步骤:
确定是否适配字段控制的值是“10”或“11”;
如果适配字段控制的值是“10”或“11”,则确定传输专用数据标志是“1”;以及
如果适配字段控制的值是“10”或“11”以及传输专用数据标志是“1”,则确定输送分组包括可丢弃性信息。
2.根据权利要求1所述的方法,其中,所述可丢弃性信息被包括在多个输送分组之中的第一输送分组中,所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片。
3.根据权利要求2所述的方法,其中,所述可丢弃性信息由包括在所述第一输送分组中的discardble_pair_flag字段和discardable_flag字段之中的至少一个表示。
4.根据权利要求3所述的方法,其中,所述discardable_pair_flag字段表示如果执行3D特技播放是否解码所述输送分组,以及
其中,所述discardable_flag字段表示如果执行2D特技播放是否解码所述输送分组。
5.根据权利要求4所述的方法,其中,所述discardable_pair_flag字段和所述discardable_flag字段一起被包括在单个语法结构中。
6.根据权利要求4所述的方法,其中,如果执行所述3D特技播放,则当在所述第一输送分组中的头部信息中包括的所述discardable_pair_flag字段的值是1时,省略输送多个输送分组的解码,所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片,并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
7.根据权利要求4所述的方法,其中,如果执行所述2D特技播放,则当在所述第一输送分组中的头部信息中包括的所述discardable_flag字段的值是1时,省略所述多个输送分组的解码,所述多个输送分组构成在所述参考时间点上所述图片,并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
8.根据权利要求4所述的方法,其中,所述discardable_flag字段仅在1-PID多路复用模式中提供。
9.根据权利要求8所述的方法,其中,如果在2-PID多路复用模式中接收到在所述参考时间点和所述扩展时间点上所述视频流,并且执行所述2D特技播放,则所述可丢弃性信息从与在所述参考时间点上的所述视频流的PID值相对应的输送分组中提取。
10.根据权利要求1所述的方法,其中,所述可丢弃性信息是有关构成在所述参考时间点和所述扩展时间点上的所述视频流的所述输送分组之中省略哪个输送分组的解码的信息。
11.根据权利要求1所述的方法,其中,在所述参考时间点和所述扩展时间点上的所述视频流分别具有在不同的时间点上的视频流分段。
12.一种广播数字信号接收装置,包括:
调谐器,所述调谐器接收广播数字信号,在所述广播数字信号中包括有在参考时间点和扩展时间点上的视频流以及包含适配字段控制和传输专用数据标志的值的头部信息;
解复用器,所述解复用器将广播数字信号解复用为在所述参考时间点和所述扩展时间点上的所述视频流;
PVR处理器,所述PVR处理器基于适配字段控制和传输专用数据标志的值确定输送分组是否包括可丢弃性信息,以及当所述可丢弃性信息被确定包括在所述输送分组中时,使用构成在所述参考时间点和所述扩展时间点上的所述视频流的输送分组处理有关在所述参考时间点和所述扩展时间点上的图片的可丢弃性信息;
解码器,所述解码器使用所述可丢弃性信息解码在所述参考时间点和所述扩展时间点上的所述视频流;以及
3D视频处理器,所述3D视频处理器控制解码的在所述参考时间点和所述扩展时间点上的视频流,以及
其中,PVR处理器进一步被配置为:
确定是否适配字段控制的值是“10”或“11”;
如果适配字段控制的值是“10”或“11”,则确定传输专用数据标志是“1”;以及
如果适配字段控制的值是“10”或“11”以及传输专用数据标志是“1”,则确定输送分组包括可丢弃性信息。
13.根据权利要求12所述的装置,进一步包括存储单元,在其中存储与所述可丢弃性信息相关联的所述输送分组和与特技播放控制相关联的文件。
14.根据权利要求12所述的装置,其中,所述可丢弃性信息被包括在多个输送分组之中的第一输送分组中,所述多个输送分组构成在所述参考时间中和所述扩展时间点上的所述图片。
15.根据权利要求14所述的装置,其中,响应于执行3D特技播放的控制命令,当在第一输送分组中的头部信息中包括的discardable_pair_flag字段的值是1时,所述解码器省略所述多个输送分组的解码,所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片,并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
16.根据权利要求14所述的装置,其中,响应于执行2D特技播放的控制命令,当在第一输送分组中的头部信息中包括的discardable_flag字段的值是1时,所述解码器省略所述多个输送分组的解码,所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片,并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161580308P | 2011-12-27 | 2011-12-27 | |
US61/580,308 | 2011-12-27 | ||
PCT/KR2012/011593 WO2013100641A1 (ko) | 2011-12-27 | 2012-12-27 | 입체영상 디스플레이가 가능한 디지털 방송 수신방법 및 수신장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104137558A CN104137558A (zh) | 2014-11-05 |
CN104137558B true CN104137558B (zh) | 2017-08-25 |
Family
ID=48697986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280070454.5A Expired - Fee Related CN104137558B (zh) | 2011-12-27 | 2012-12-27 | 用于显示三维图像的数字广播接收方法及其接收设备 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20140354770A1 (zh) |
EP (1) | EP2800391A4 (zh) |
KR (1) | KR20140107182A (zh) |
CN (1) | CN104137558B (zh) |
CA (1) | CA2859673A1 (zh) |
WO (1) | WO2013100641A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ITTO20120134A1 (it) * | 2012-02-16 | 2013-08-17 | Sisvel Technology Srl | Metodo, apparato e sistema di impacchettamento di frame utilizzanti un nuovo formato "frame compatible" per la codifica 3d. |
US9674519B2 (en) * | 2012-11-09 | 2017-06-06 | Qualcomm Incorporated | MPEG frame compatible video coding |
WO2015115869A1 (ko) | 2014-02-03 | 2015-08-06 | 엘지전자 주식회사 | 트릭 플레이 서비스 제공을 위한 신호 송수신 장치 및 신호 송수신 방법 |
KR101809969B1 (ko) * | 2014-03-18 | 2017-12-18 | 엘지전자 주식회사 | Hevc 스트림의 트릭 플레이 서비스 제공을 위한 방송 신호 송수신 방법 및 장치 |
WO2017169722A1 (ja) * | 2016-03-28 | 2017-10-05 | ソニー株式会社 | 画像処理装置および方法 |
KR20190136417A (ko) * | 2018-05-30 | 2019-12-10 | 삼성전자주식회사 | 3차원 360도 영상 데이터의 전송 방법, 그에 따른 디스플레이 장치, 및 그에 따른 영상 저장 장치 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110025123A (ko) * | 2009-09-02 | 2011-03-09 | 삼성전자주식회사 | 비디오 영상 배속 재생 방법 및 장치 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07327242A (ja) * | 1994-05-31 | 1995-12-12 | Sanyo Electric Co Ltd | 立体動画像圧縮符号化装置及び立体動画像復号再生装置 |
KR100354745B1 (ko) * | 1998-11-02 | 2002-12-18 | 삼성전자 주식회사 | 비디오코딩및디코딩방법 |
CN100473140C (zh) * | 2003-06-18 | 2009-03-25 | 松下电器产业株式会社 | 再现装置和再现方法 |
US7974193B2 (en) * | 2005-04-08 | 2011-07-05 | Qualcomm Incorporated | Methods and systems for resizing multimedia content based on quality and rate information |
KR100770704B1 (ko) * | 2005-08-04 | 2007-10-29 | 삼성전자주식회사 | 픽쳐 스킵 방법 및 장치 |
JP2009060411A (ja) * | 2007-08-31 | 2009-03-19 | Toshiba Corp | Vodシステムおよびvodシステムにおけるコンテンツ配信方法 |
JP5632291B2 (ja) * | 2008-11-18 | 2014-11-26 | パナソニック株式会社 | 特殊再生を考慮した再生装置、集積回路、再生方法 |
CA2745021C (en) * | 2008-12-02 | 2014-10-28 | Lg Electronics Inc. | Method for displaying 3d caption and 3d display apparatus for implementing the same |
WO2010100875A1 (ja) * | 2009-03-02 | 2010-09-10 | パナソニック株式会社 | 記録媒体、再生装置、及び集積回路 |
WO2010126613A2 (en) * | 2009-05-01 | 2010-11-04 | Thomson Licensing | Inter-layer dependency information for 3dv |
RU2552137C2 (ru) * | 2009-05-18 | 2015-06-10 | Конинклейке Филипс Электроникс Н.В. | Точки входа для ускоренного 3d-воспроизведения |
FR2944933B1 (fr) * | 2009-07-24 | 2011-12-02 | Quadrille Ingenierie | Procede de diffusion de donnees numeriques. |
US8948241B2 (en) * | 2009-08-07 | 2015-02-03 | Qualcomm Incorporated | Signaling characteristics of an MVC operation point |
JP4823349B2 (ja) * | 2009-11-11 | 2011-11-24 | パナソニック株式会社 | 三次元映像復号装置及び三次元映像復号方法 |
CN103168473B (zh) * | 2010-10-16 | 2016-09-28 | Lg电子株式会社 | 数字接收机以及用于处理数字接收机中的3d 内容的方法 |
US8934762B2 (en) * | 2011-12-09 | 2015-01-13 | Advanced Micro Devices, Inc. | Apparatus and methods for altering video playback speed |
-
2012
- 2012-12-27 WO PCT/KR2012/011593 patent/WO2013100641A1/ko active Application Filing
- 2012-12-27 US US14/369,109 patent/US20140354770A1/en not_active Abandoned
- 2012-12-27 KR KR1020147010600A patent/KR20140107182A/ko not_active Application Discontinuation
- 2012-12-27 EP EP12863756.8A patent/EP2800391A4/en not_active Withdrawn
- 2012-12-27 CN CN201280070454.5A patent/CN104137558B/zh not_active Expired - Fee Related
- 2012-12-27 CA CA2859673A patent/CA2859673A1/en not_active Abandoned
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110025123A (ko) * | 2009-09-02 | 2011-03-09 | 삼성전자주식회사 | 비디오 영상 배속 재생 방법 및 장치 |
Also Published As
Publication number | Publication date |
---|---|
CN104137558A (zh) | 2014-11-05 |
EP2800391A1 (en) | 2014-11-05 |
WO2013100641A1 (ko) | 2013-07-04 |
US20140354770A1 (en) | 2014-12-04 |
EP2800391A4 (en) | 2015-07-29 |
KR20140107182A (ko) | 2014-09-04 |
CA2859673A1 (en) | 2013-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104837001B (zh) | 广播接收机及其视频数据处理方法 | |
US9554198B2 (en) | Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same | |
US10015467B2 (en) | Digital broadcasting reception method capable of displaying stereoscopic image, and digital broadcasting reception apparatus using same | |
JP5231563B2 (ja) | 立体映像データを記録する方法 | |
CN104137558B (zh) | 用于显示三维图像的数字广播接收方法及其接收设备 | |
US9578298B2 (en) | Method for decoding 2D-compatible stereoscopic video flows | |
US9357200B2 (en) | Video processing device and video processing method | |
CN103959768B (zh) | 能够显示立体图像的数字广播接收方法和装置 | |
US20120307882A1 (en) | Method for transporting information and/or application data inside a digital video stream, and relative devices for generating and playing such video stream | |
KR20110113475A (ko) | 입체영상 재생 장치 및 방송정보 표시 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170825 Termination date: 20211227 |
|
CF01 | Termination of patent right due to non-payment of annual fee |