CN1112806C - 排列立体视频序列的视频画面用于译码的方法 - Google Patents

排列立体视频序列的视频画面用于译码的方法 Download PDF

Info

Publication number
CN1112806C
CN1112806C CN97125286A CN97125286A CN1112806C CN 1112806 C CN1112806 C CN 1112806C CN 97125286 A CN97125286 A CN 97125286A CN 97125286 A CN97125286 A CN 97125286A CN 1112806 C CN1112806 C CN 1112806C
Authority
CN
China
Prior art keywords
picture
dts
pts
low layer
enhancement layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN97125286A
Other languages
English (en)
Other versions
CN1187734A (zh
Inventor
陈学敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google Technology Holdings LLC
Original Assignee
General Instrument Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Instrument Corp filed Critical General Instrument Corp
Publication of CN1187734A publication Critical patent/CN1187734A/zh
Application granted granted Critical
Publication of CN1112806C publication Critical patent/CN1112806C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/004—Predictors, e.g. intraframe, interframe coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218—Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0085—Motion estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

在立体视频传送系统中，低层和增强层的视频画面以特定的顺序传送，使得先于表示的临时存储的画面数被最小化。进而，每一画面的译码的时间章(DTS)和表示的时间章(PTS)能被确定以提供低层和增强层画面之间的同步。可以顺序的或并联地进行译码。特别是，提供一方法，其中增强层包括使用相应低层画面预测的差异预测画面。视频画面被排序，使得在相应的有关的低层画面之后传送差异预测的增强层画面，该方案以大量不同的特定实例示出。

Description

排列立体视频序列的视频画面用于译码的方法
本发明是关于同步立体视频序列的译码和显示(即表示)的装置和方法。特别是，除了最小化所需的译码器输入缓冲器尺寸的相应的最佳化位流传输顺序之外，呈现出增强层的确定表示时间章和译码时间章。
数字化技术已经变革了为顾客服务的视频和音频的传送，这是因为它能比模拟技术更高的质量传送信号和提供先前所不能提供的附加的特点。数字系统对于通过电缆电视网络或通过卫星到电缆电视联合广播和或直接到家用卫星电视接收器进行广播的信号特别有用。在这样的系统中，用户通过恢复和译码数据的接收器和译码器接收数字数据流以重构初始的视频和音频信号。数字接收器包括对此处理而使用的微机和存储器部件。
在提供低成本的接收器的同时仍能提供高质量的视频和音频的要求需要被处理的数量受到限制。然而，传送数字信号的可用带宽也受到物理制约，现存的通讯协议书，和政府规定的限制。依此，各种帧内数据压缩方案已经被发展了，它们具有在特定视频画面(如帧)内在相邻诸象素之间的空间相关的优点。
进而，帧内压缩方案具有在由使用运动补偿数据的连续帧的对应区域之间的瞬时相关和块匹配运动估算算法的优点。在这种情况下，通过识别最紧密相似特定当前块的先前画面的块确定图象的当前画面的每一块的运动矢量。通过发送表示对应块对之间差别的数据和识别对应对所需要的运动矢量在译码器中重构整个当前画面。当组合以块为基础的空间压缩技术例如离散余弦变换(DCT)时，块匹配运动估算算法特别有效。
进而，这里已经增加了对提出的立体视频传送格式例如运动画面专家组(MPEG)MPEG-2多视点轮廓(MVP)系统的兴趣，在1995年11月标题为“对13818-2提出草案修改号3(多视点轮廓)的ISO/IECJTC1/SC29/WG11 N1088的文件中描述了该系统，在此一并作为参考、立体视频提供同一个图象的略微偏离的视点以产生具有较大景深的组合的图象，以此产生三维(3-D)效果。在这个系统中，双摄象机可以位于相隔大约两英寸远以记录一事件在两个分离的视频信号上。两摄象机之间的空间距离近似为人眼的左眼和右眼之间的距离。进而，使用一些立体视频摄象记录器时，两个棱镜装在一个摄象记录器头内和例如当拍摄图象全景时，可以同步地移动。视频信号能被传送和在接收器内被重新组合以产生对应正常人眼的具有景深的图象。也能提供其它的空间效果。
该MPEG MVP系统包括在复用信号内传送的两个视频层。首先，基(即较低)层表示三维目标的左视。第二，增强(即辅助或较上部)层表示该目标的右视。由于左视和右视相同的目标和仅仅是相互稍微的偏移，因此通常在基层和增强层视频图象间存在着大的相关度。使用该相关压缩相对于基层的增强层的数据，以此减少在增强层内传送的必要的数据量以维持给定图象的质量。图象质量一般对应着视频数据的量化水平。
MPEG MVP系统包括三类视频画面：指定的内编码画面(I-画面，预测编码画面(P-画面)，双向预测编码画面(B-画面)。进而，当基层接收帧或场结构的视频序列时，增强层仅接收帧结构。I-画面完全描述了单个视频画面而没有参考任何其它的画面。为了改进错误的隐芷，运动矢量能包括在I-画面内。I-画面的错误在显示的视频中具有潜在的较大的影响，这是因为在基层的P-画面和B-画面是从诸I-画面中预测出来的。进而，在增强层的诸画面在称之为差异预测的交叉层预测的处理中从基层内的诸画面中预测出来的。在层内的从一帧到另一帧的预测被称为瞬时预测。
在基层中，基于先前的I或P画面预测P画面。从较早的I或P画面到未来的P画面给出参照被称为向前预测。B画面是从最接近的较早I或P画面和最接近的较后I或P画面预测出的。
在增强层中，P画面是从(a)增强层中最当前的译码的画面，(b)在显示顺序中的最当前的基层画中，或(c)在显示顺序中的下一个低层画面中预测出来的。当在显示顺序中的最当前的基层是I画面时，最经常使用情况(b)。进而，使用(d)为向前预测的最当前译码的增强层画面和在显示顺序里的为向后预测的最当前低层画面，(e)为向前预测的最当前译码的增强层画面和在显示顺序里的为向后预测的下一低层画面，或(f)在显示顺序里的为向后预测的最当前低层画面和在显示顺序里的为向后预测的下一个低层画面，能够预测增强层的B图象。当在显示顺序里的最当前低层画面是I画面时，仅仅这个I画面将被使用以预测编码(即，这里没有向前预测。
注意，仅仅预测模式(a)，(b)和(d)包括在MPEG MVP系统内。该MVP系统是包括每一种模式(a)-(f)的MPEG瞬时可测量性编码的子集。
在一种最佳的配置中，增强层仅具有P和B画面，而没有I画面。参考未来画面(即一个还没有被显示的画面)被称为向后预测。注意，在增强层中不发生向后预测。依此，增强层画面按显示顺序传送。这里存在着这样的情况，向后预测在增强压缩比率中是非常有用的。例如，在门打开的场景中，当前的画面根据门已经打开的的未来画面预测什么芷在门后。
B画面产生最大的压缩，但也包含着最大的错误。为了限制错误的传播，B画面决不从基层内的基它B画面中加以预测。P图象产生较小的错误和较小的压缩。I画面产生最小的压缩，但能够提供随机的存取。
这样，在基层内，为了解码P画面，必须能获得前先的I画面或P画面。类似的，为了解码B画面，必须能获得先前的P或I和未来的P或I画面。结果是，视频画面以相互依赖的顺序被编码和被传送，使得在画面预测之前，预测使用的所有画面被编码。当在译码器中接收到编码的信号时、视频画面被解码和为显示重新排序。依此，需要临时的存储部件以缓冲显示前的数据。然而，对相对大的译码器输入缓冲器的要求增大了制造译码器的成本。这是不期望的，因为译码器是大量销售的物品，它必需以最低的价格进行生产。
依此，这里需要同步增强层和基层视频序列的译码和表示。立体视频的译码和表示处理的同步是MVP的特别重要的方面。这是立体视频所固有的，两个审视相互紧密的联接，表示或显示同步的损失能够造成视者许多问题，例如眼睛紧张，头痛等。
进而，处理数字压缩应流这一事件的诸问题不同于例如符合NTSC或PAL标准的未压缩的位流或模拟信号的事件。例如，使用NTSC或PAL信号时，诸画面以同步的方式传送，使得时钟信号能从画面同步信号中直接地导出。在这种情况中，两个审视的同步可以通过使用画面同步容易地完成。
然而，在数字压缩立体位流中，在每层的每一画面的数据量是变化的，这取决于位速率，画面编码类型和场的复杂性。这样，译码和表示定时不能直接从画面数据开始处推导出来。即，不象模拟视频传送，在数字压缩位流中不存在着同步脉冲的自然概念。
依此，提供同步译码和立体视频顺序的表示的系统是有优点的。该系统能与顺序译码画面(即在一时刻一个画面)或平行译码画面(即一时刻两个画面)的译码器相兼容。进而，系统能够提供最小化所需译码器输入缓冲器尺寸的最佳画面传送顺序，本发明提供的系统具有上述和其它的优点。
依照本发明，这里提供了调整立体视频序列的低层和增强层视频画面的传输顺序的方法和装置。特别是，画面以这样的顺序被传送，使得先于表示的必需临时存储的画面的数目得到最小化。进而，能够确定每个画面的译码的时间章(DTS)和表示的时间章(PTS)以在译码以顺序或平行发生的译码器内提供低层和增强层画面之间的同步。
特别是，这里提供了调整立体视频信号的低层和增强层内的视频画面的传送顺序的方法，这里增强层包括了使用相应低层画面进行预测的差异预测画面。该方法包括了调整视频画面的步骤，使得在相应的有关的低层画面之后传送差异预测的增强层画面。
在第一实施例中，仅包括内编码画面的低层包含有连续画面ILi，ILi+2，ILi+2，ILi+3，ILi+4，等等，和相应的增强层画面由HEi，HEi+1，HEi+2，HEi+3，HEi+4，等等表示。在这种情况下，视频图象按下面顺序传送：ILi，ILi+1，HEi，ILi+2，HEi+1，ILi+3，HEi+2，ILi+4，等等(即序列1)。
替换地，在第二个实施例中，视频画面以下列顺序传送：ILi，HEi，ILi+1，ILi+2，HEi+2，ILi+3，HEi+3等等(即序列2)。
在第三个实施例中，仅包括内编码画面(I画面)和预测编码画面(P画面)的低层包括连续画面ILi，ILi+1，ILi+2，ILi+3和ILi+4等等和相应的增强层画面被分别表示为HEi，HEi+1，HEi+2，HEi+3，HEi+4等等。这里，视频画面以下面顺序传送：ILi，PLi+1，HEi，PLi+2，HEi+1，PLi+3，HEi+2，PLi+4，HEi+3，等等(即序列3)。
替换地，在第四个实施例中，视频画面以下面顺序传送：ILi，HEi，PLi+1，HEi+1，PLi+2，HEi+2，PLi+3，HEi+3等等(即序列4)。
在第五个实施例中，包括内编码画面(I画面)，预测编码画面(P画面)，和非连续的双向可预测编码画面(B画面)的低层分别包括连续的画面ILi，BLi+1，PLi+2，BLi+3，PLi+4，BLi+5，PLi+6等等，和相应的增强层画面分别表示为HEi，HEi+1，HEi+2，HEi+3，HEi+4，HEi+5，HEi+6等等。视频画面按以下顺序传送：ILi，PLi+2，BLi+1，HEi，HEi+1，PLi+4，BLi+3，HEi+2，HEi+3等等(即序列5)。
替换地，在第六个实施例中，视频画面按下面顺序传送：ILi，HEi，PLi+2，BLi+1，HEi+1，HEi+2，PLi+4，BLi+3，HEi+3，HEi+4等等(即序列6)。
替换地，在第七个实施例中，视频画面以下面顺序传送：ILi，PLi+2，HEi，BLi+1，HEi+1，PLi+4，HEi+2，BLi+3，HEi+3，等等(即序列7)。
在第八个实施例中，包括内编码画面(I画面)，预测编码画面(P画面)和连续双向预测编码画面(B画面)的低层分别包括连续画面ILi，BLi+1，BLi+2，PLi+3，BLi+4，BLi+5，PLi+6等等，和相应增强层画面分别表示为HEi，HEi+1，HEi+2，HEi+3，HEi+4，HEi+5和HEi+6等等。视频画面按以下顺序传送：ILi，PLi+3，BLi+1，HEi，BLi+2，HEi+1，HEi+2，PLi+6，BLi+4，HEi+3，BLi+5，HEi+5等等(即序列8)。
替换地，在第九个实施例中，视频画面以下面顺序传送：ILi，HEi，PLi+3，BLi+1，HEi+1，BLi+2，HEi+2，HEi+3，PLi+6，BLi+4，HEi+4，BLi+5，HEi+5和HEi+6等等(即序列9)。
替换地，在第十个实施例中，视频画面以下面顺序传送：ILi，PLi+3，HEi，BLi+1，HEi+1，BLi+2，PLi+3，HEi+3，BLi+4，HEi+4，BLi+5，HEi+5等等(即序列10)。
还介绍相应的装置。
进而，提供了处理包括低层和增强层的立体信号的视频画面序列的接收器，该接收器包括存储器，恢复/预测处理器和结合存储器和处理器操作的存储器管理器。存储器管理器在存储器中安排选出的低层画面的存储，使得在差异预测增强层画面中的相应一个之前由恢复/预测处理器处理它们、进而译码操作可以顺序地或平行地发生。
图1是立体视频的编码器/译码器的框图。
图2示出了使用本发明系统的增强层画面序列和第一基层画面序列。
图3示出了使用本发明系统的增强层画面序列和第二基层画面序列。
图4示出了使用本发明系统的增强层画面序列和第三基层画面序列。
图5示出了使用本发明系统的增强层画面序列和第四基层画面序列。
图6是立体视频增强层译码器结构的框图。
这里提供了同步译码和立体视频画面序列的方法和装置。
图1是立体视频的编码器/译码器结构的框图。MPEG MVP标准和类似的系统包括两视频层，即低层和增强层的编码。对于这样的应用，低层分配给左视，而增强层分配给右视。在图1的编码器/译码器结构中，由临时的再多路器(remux)105接收低层和增强层视频序列。使用时分多路传输(TDMX)，提供增强层视频给增强编码器110，而提供基层视频给低层编码器115。注意，可以提供低层视频数据给增强层编码器110以用于差异预测。
提供编码的增强层和基层到一般用122标出的传送传送流给译码器的系统多路传送器120。传送路径典型的是卫星连接到电缆系统的开始部分或通过卫星直接连到用户的家中。在译码器122中，传送流在系统分离器125内被分离。提供编码的增强层数据给增强层译码器130，而提供编码的低层数据给低层译码器器135。注意，在低层和增强层平行处理的配置中，译码最好同时完成。替换地，增强译码器130和低层译码器135可以共享处理硬件，在这种情况下，译码可以顺序地完成，一个时间一个画面。
译码的低层数据作为分离的数据流从低层译码器135中输出，和提供给临时再多路器140。在临时的再多路器140中，译码的基层数据和译码的增强层数据组合在一起以提供所示的增强层输出信号。增强和低层输出信号再提供给供显示的显示装置。
进而，低层和增强层的编码的位流在系统多路器120内必须被多路传输，使得译码器122能够依赖已经被译码的仅一帧或多场就能译码任何帧或场。然而，该问题由以下事实变得复杂化，对P和B画面的预测模式在低层和增强层内是不同的。进而，增强层画面总是以表示(即显示)顺序传送的，而对低层而言，并不经常是这种情况。因此，这经常需要在译码器内去存储和重新排序视频画面，使得译码和显示能以适当的顺序发生。
进而，困难出现在同步译码和低层和增强层数据的表示。如上所述，低层和增强层的视频位流作为两个基本视频流被传送，对于传送流而言，传送流小包的两个小包识别器(PIDS)在两层的传送流程序变换部分内被指定。进而，定时信息在低层的选取的小包的适配字段(即在PCR_PID)内完成以服务作为在译码器内定时比较的参考。特别是，27MHz时钟采样在程序_时钟_参考(PCR)字段被传送。更精确而言，采样是在程序_时钟_参考_基础和程序_时钟_参考_扩展字段内传输，这些均在1995，4，27的MPEG-2系统文件TIU-TRec.H.262，ISO/IEC 13818-1中描述过，一并在此作为参考。MPEG-2标准的进一步细节可在1994，3，25的标题为“信息技术一运动画面和相关的音频的一般编码”，推荐H.262的文件ISO/IECJICI/SC29/WG11 N0702内发现，一并在此作为参考。
PCR指出了在译码器内从位流中完成读取字段所期望的时间。在译码器中运行的局部时钟的相位和在瞬时获得PCR值的位流中的PCR值比较以确定是否视频，音频，和其它数据的译码被同步。进而，在译码器内的采样时钟被锁定到从PCR值导出的系统时钟。通过使用在ITU-TRec.H.262，ISO/IEC 13818-1内描述的等式计算PCR的值，该等式如下：
PCR(i)＝PCR_tase(i)X300+PCR_ext(i)，这里
PCR_tase(i)＝((系统_时钟_频率Xt(i))DIV 300)％233和
PCR_ext(i)＝((系统_时钟_频率Xt(i))DIV1)％300
这里“％”符号指出模操作。
以类似的方法，对于立体视频信号的程序流，定时信息作为在系统_时钟_参考(SCR)字段内的27MHz时钟的采样在小包头内完成的。使用在ITU-T Rec.H.262，ISO/IEC 13818-1内描述的等式计算SCR值，该等式如下：
SCR(i)＝SCR_tbase(i)X300+SCR_ext(i)，这里：
SCR_base(i)＝((系统_时钟_频率Xt(i))DIV 300)％233，和
SCR_ext(i)＝((系统_时钟_频率Xt(i))DIV1)％300
在低层和增强层内的视频小包内的识别在程序流变换中被指定作为两流的识别器。对于传送流和程序流两者而言，在小包化的基本流(PES)小包内提供了译码和立体视频的表示处理的同步。特别是，在PES头的任意字段内提供了表示时间章(PTS)和/或译码时间章(DTS)。
在传送或程序小包化之前，为每一个基本视频流构成了PES小包。如果需要去发送PTS和/或DTS到译码器，在PES流内提供新PES小包。因此，同步的关键是正确地计算PTS和DTS。在假想译码器模型的基础上由编码器确定PTS和DTS，即，传送流系统目标译码器(T-STD)，或程序流系统目标译码器(P-STD)，及它们两者均在ITU-TRec.H.262.ISO/TEC13818-1被描述。
系统时钟频率的周期的诸单元除以300指定了PTS和DTS两者，这就产生了90KHz诸单元。特别是在ITU-T Rec.H.262，ISO/TEC13818-1中描述的：
PTS(K)＝((系统_时钟_频率Xtpn(K))DIV 300)％233，这里tpn(K)是表示单元Pn(K)的表示时间。类似地，
DTS(j)＝((系统_时钟_频率Xtdn(K))DIV300)％233，这里tdn(K)是存取单元An(j)的译码时间。当画面需要由STD译码时，视频DTS指示时间。当译码的画面要表示给视者(即在电视上显示)时视频PTS指示时间。进而，由PTS和DTS指示的时间依照当前的PCR或SCR值加以估算。
视频位流在理论上的STD模型里瞬时地加以译码。然而，如果B画面呈现在立体位流的低层内，位流将不以表示的(即显示)顺序到达译码器。在这种情况下，在被译码后直到适当的表示时间，一些I和/或P画面必需临时存储在STD的重排序缓冲器内。然而，随着增强层，所有图象以表示的顺序到达译码器，和结果是，PTS和DTS值应当是一致的或者仅偏置一个固定的间隔。
为了同步低层和增强层顺序，在低层和增强层相对应的画面必需具有相同的PTS。任何现存的为MPEG-2主轮廓计算DTS的方法能被使用计算低层内的DTS，即DTSL，这里“L”表示低层，后来的PTS和DTS值将参照相应的DTSL。特别是，让DTSLi和PTSLi分别为低层第i画面的DTS和PTS。同样，让DTSEi和PTSEi分别为增强层内第i画面的DTS和PTS。然后，连续画面的表示之间的时间间隔F能被定义为： 例如，在NTSC标准下，帧速率为29.97帧/秒，F＝3,003。F是90KHz时钟周期的正常帧周期，和对应着真实用去时间3,003周期/90KHz＝0.0336秒。在PAL标准下，当帧速率是25帧/秒时，F＝3,600。
进而，同步低层和增强层序列是紧密地依赖于视频序列的传送和显示次序。一般地，非立体视频信号的MPEG2标准并不指定任何特定分布，I画面，P画面和B画面必需采用在基层的顺序，但允许不同的分布以提供不同的压缩和随机存取度。在一种可能的分布中，在基层的每一个画面均是I画面。在另一种可能的分布中，两个I和P画面被提供，或者是I，P，和B画面，这里提供的B画面不是连续的，或两者I，P，和B画面被提供，这里可以提供两个连续的B画面。一般而言，由于降低图象的质量，所以不提三个或者更多的连续的B画面。在增强层中，提供B，P画面、I画面可以任意地被提供。
图2示出了使用本发明系统的增强层画面序列和第一基层画面序列。这里低层仅包括I画面。增强层画面序列一般用200表示，而低层序列一般用250表示。序列200和250以显示顺序示出。每个画面均被标号以指示画面类型(即I，B或P)，层的指定(例如“E”表示增强层，和“L”表示低层)和画面的序列位置，这里脚标“0”表示序列的第0个画面，脚标“1”表示序列内的第一个画面，等等。
增强层200包括画面IE0(202)，BE1(204)，BE2(206)，PE3(208)，BE4(210)，BE5(212)，PE6(214)，BE7(216)，BE8(218)，PE9(220)，BE10(222)，BE11(224)和IE12(226)。然
而特别增强层序列仅仅用于示意。在此讨论的任意增强层序列包括图2-5的那些序列，特别的增强层画面类型并不限定，这是因为增强层是按显示顺序传送的。这样，任何增强层画面均能被考虑为一般画面类型(即HEi)，这里“H”表示画面类型。
在这实例的低层250仅包括I画面，即包括IL0(252)，IL1(254)，IL2(256)，IL3(258)，IL4(260)，IL5(262)，IL6(264)，IL7(266)，IL8(268)，IL9(270)，IL10(272)，IL11(274)和IL12(276)。进而，每一序列的画面组(GOP)的开始被指出。GOP指示能够被译码而不参考其它GOP画面的一个或多个连续画面。一般而言、低层和增强层的诸GOP并不对准，而有不同的长度。例如，增强层200的第一GOP的开始处示出在画面IE0(202)，而第二GOP的开始处是在画面IE12(226)。类似地，示出的在低层250的第一GOP的开始处是在画面IL2(256)，而第二GOP的开始是在画面IL8(268)。
进而，在图2所示的诸箭头指示允许的预测模式，根据连到箭头尾部的画面可以预测由箭头头部指出的画面。例如，由画面IL1(254)可以预测画面BE1(204)。请回忆，I画面是不能预测编码的，但是自保持的。
使用图2的画面显示顺序，开始点在IL2的依照本发明的有优点的传送顺序是：IL2，BE1，IL3，BE2，IL4，BE3，IL5，BE4，IL6，BE5，IL7，PE6，IL8，BE7，IL9，BE8，IL10，PE9，IL11，BE10，IL12，BE11等等(序列1)。使用这个图象顺序，到达译码器的每一个预编码的画面在译码前并没有被重新排列顺序。这样，能够减少在译码器内的存储和处理要求，因此也就减少了译码器的成本。另一个适当的画面传送顺序是：IL2，BE2，IL3，PE3，IL4，BE4，IL5，BE5，IL6，PE6，IL7，BE7，IL8，BE8，IL9，PE9，IL10，BE10，IL11，BE11，IL12，IB12等等(序列2)。
随着这些图象的传送顺序，所有的画面以表示顺序到达译码器。进而，这就可能为每一画面确定适当的PTS和DTS。首先假定，第三低层画面的DTS，即DTSLi是已知的。
作为特定的实例，使用图2的第一画面传送顺序，即序列1，在下面的表1中描述了译码和表示的发生、假定为顺序译码。在表1中，第一列表示时间，使用DTSL2作为开始时间，使用增量是0.5F，第二列表示低层画面的译码时间，第三列表示增强层画面的译码时间，和第四列表示低层和增强层画面的表示时间。
这里，需要仅两个译码画面的存储。例如，在BE2被接收以前，IL2和IL3被译码和被存储。当接收时，BE2能同时被译码和输出，为实质上和IL2同时表示。
                  表1
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE1 IL1 BE1
F IL3
1.5F BE2 IL2 BE2
2F IL4
2.5F PE3 IL3 PE3
3F IL5
3.5F BE4 IL4 BE4
4F IL6
4.5F BE5 IL5 BE5
5F IL7
5.5F PE6 IL6 PE6
6F IL8
6.5F BE7 IL7 BE7
7F IL9
7.5F BE8 IL8 BE8
8F IL10
8.5F PE9 IL9 PE9
9F IL11
9.5F BE10 IL10 BE10
10F IL12
10.5F BE11 IL11 BE11
进而，为在低层或增强层序列的第三个画面，DTS和PTS能由DTSLi确定如下：
PTSLi＝DTSLi+1.5F；
DTSEi＝DTSLi+1.5F；和
PTSEi＝PTSLi
例如，图2中的PE3(208)的PTS等于IL3的DTS与1.5F之合。这样，PE3的译码和表示将跟随着1.5倍画面时间间隔的IL3的译码(即1.5F)。
使用图2的第二画面传送顺序，下面的表2描述译码和表示。
                      表2
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE2 IL2 BE2
F IL3
1.5F PE3 IL3 PE3
2F IL4
2.5F BE4 IL4 BE4
3F IL5
3.5F BE5 IL5 BE5
4F IL6
4.5F PE0 IL6 PE6
5F IL7
5.5F BE7 IL7 BE7
6F IL8
6.5F BE8 IL8 BE8
7F IL9
7.5F PE9 IL9 PE9
8F IL10
8.5F BE10 IL10 BE10
9F IL11
9.5F BE11 IL11 BE11
10F IL12
10.5F IE12 IL12 IE12
这里，仅需要一个译码画面的存储，例如，在BE2被接收前，对IL2译码和存储。当接收时，BE2能被瞬时译码和为用IL2同时表示而输出。
对于在低层或增强序列的第i个画面，DTS和PTS能从如下的为表2传送顺序的DTSLi中加以确定：
PTSLi＝DTSLi+0.5F；
DTSEi＝DTSLi+0.5F；和
PTSEi＝PTSLi
图3是使用本发明系统的增强层画面序列和第二基层画面序列的图示。这里，低层包括了I和P画面两者。一样的数字成份对应着图2的成分。增强层200和先前讨论的相同。一般用300表示的低层包括画面序列PL0(302)，PL1(304)，IL2(306)，PL3(308)，PL4(310)，PL5(312)，PL6(314)，IL8(316)，PL9(318)，PL10(320)，PL11(322)和PL12(326)。在IL2(306)和IL8(318)处开始GOP。
这里预测方案稍微复杂一些。请回忆，在基层中，P画面是使用最接近的前先的I或P画面进行预测编码的。在增强层中，B画面是使用直至三个可能的不同的模式进行预测编码的。然而，当相应的低层画面是I画面时，只使用那个I画面。同样，在增强层中，使用最当前的增强层画面，按显示顺序的最当前低层画面或按显示顺序的下一个低层画面，进行P画面的预测编码的。再一次，当相应的低层画面是I画面时，仅仅使用那个I画面。注意，在一些情况下，所示的预测模式包括任选的路径。
这样，在低层序列300中，例如，使用PL3和PL5对PL4进行编码。在增强层200中，使用BE2或PL3对PE3进行编码。开始于IL2的依本发明的适当的画面传送顺序是：IL2，BE1，PL3，BE2，PL4，PE3，PL5，BE4，PL6，BE5，PL7，PE6，IL8，BE7，PL9，BE8，PL10，PE9，PL11，BE10，PL12，BE11等等(序列3)，对此序列而言，在下面的表3描述了译码和表示的发生。
                       表3
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE1
F PL3
1.5F BE2 IL2 BE2
2F PL4
2.5F PE3 PL3 PE3
3F PL5
3.5F BE4 PL4 BE4
4F PL6
4.5F BE5 PL5 BE5
5F PL7
5.5F PE6 PL6 PE6
6F IL8
6.5F BE7 PL7 BE7
7F PL9
7.5F BE8 IL8 BE8
8F PL10
8.5F PE9 PL9 PE9
9F PL11
9.5F BE10 PL10 BE10
10F PL12
10.5F BE11 PL11 BE11
这里，仅需要对两个译码画面的存储，例如，在BE2被接收前，对IL2和PL3进行译码和存储。当接收时，BE2然后能瞬时译码和为同时用IL2表示而输出。
对于在低层或增强层序列内的第三个画面而言，DTS和PTS可由如下的表3传送顺序的DTSLi加以确定：
PTSLi＝DTSLi+1.5F；
DTSEi＝DTSLi+1.5F；和
PTSEi＝PTSLi，
替换地，作为图3实例的另一个适当的传送顺序是：IL2，BE2，PL3，PE3，PL4，BE4，PL5，BE5，PL6，PE6，PL7，BE7，IL8，BE8，PL9，PE9，PL10，BE10，PL11，BE11，PL12，IE12等等(序列4)。下面的表4描述译码和表示的发生。
                 表4
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE2 IL2 BE2
F PL3
1.5F PE3 PL3 PE3
2F PL4
2.5F BE4 PL4 BE4
3F PL5
3.5F BE5 PL5 BE5
4F PL6
4.5F PE6 PL6 PE6
5F PL7
5.5F BE7 PL7 BE7
6F IL8
6.5F BE8 IL8 BE8
7F PL9
7.5F PE9 PL9 PE9
8F PL10
8.5F BE10 PL10 PE10
9F PL11
9.5F BE11 PL11 BE11
10F PL12
10.5F IE12 PL12 IE12
这里，仅需要一个译码画面的存储。例如，在BE2被收到以前，IE2被译码和存储，在此时间BE2能被译码和直接输出以同时用IL2表示。
对在低层或增强层序列的第三个画面而言，DTS和PTS能从随后表4的传送顺序的DTSLi中加以确定：
PTSLi＝DTSLi+0.5F；
DTSEi＝DTSLi+0.5F；和
PTSEi＝PTSLi
图4示出了使用本发明系统的增强层画面序列和第三基层画面序列。这里，低层包括了I，P和B画面，这里B画面不是连续的。一样的数部分对应着图2和3的成份。增强层200和先前讨论的相同。一般用400给出的低层包括画面序列PL0(402)，BL1(404)，IL2(406)，BL3(408)，PL4(410)，BL5(412)，PL6(414)，BL7(416)，IL8(418)，BL9(420)，PL10(422)，BL11(424)和PL12(426)。在IL2(406)和IL8(418)处开始GOP。
这里预测方案如下，请回忆，在基层中，B画面是使用最接近先前的I或P画面，和最接近随后的I或P画面进行预测编码的。这样，在低层序列400中，例如，使用IL2和PL4对BL3进行编码。开始于IL2的依照本发明的适当的画面传送顺序是：IL2，PE4，BE3，BE2，PE3，PL6，BL5，BE4，BE3，IL8，BL7，PE6，BE7，PL10，BL9， BE8，PE9，PL12，BL11，BE10，BE11等等(序列5)。替换地，另一个适当的传送顺序是：IL2，BE2，PL4，BL3，PE3，BE4，PL6，BL5，BE5，PE6，IL8，BL7，BE7，BE8，PL10，BL9，PE9，BE10，PL12，BL12，BE12，IE12等等(序列6)。进一步的适当的传送顺序是：IL2，PL4，BE2，BL3，PE3，PL6，BE4，BL5，BE5，IL8，PE8，BL7，BE7，PL10，BE8，BL9，PE9，PL12，BE10，BL11，BE11等等(序列7)。
对于在低层或增强层序列内的第三个画面而言，DTS和PTS能从如下的DTSLi中确定。对于每一个画面而言，画面的表示被延迟了整数乘以跟随的画面的译码F的倍数。
例如，使用上面的第一传送顺序，即序列5，下面的表5描述了译码和表示的发生。
                      表5
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F PL4
F BL3
1.5F BE2 IL2 BE2
2F PE3
2.5F PL6 BL3 PE3
3F BL5
3.5F BE4 PL4 BE4
4F BE5
4.5F IL8 BL5 BE5
5F BL7
5.5F PE6 PL6 PE6
6F BE7
6.5F PL10 BL7 BE7
7F BL9
7.5F BE8 IL8 BE8
8F PE9
8.5F PL12 BL9 PE9
9F BL11
9.5F BE10 PL10 BE10
10F BE11
10.5F BL11 BE11
这里，仅需要三个译码画面的存储，例如，在BE2被接收前，译码和存储IL2，PL4和BL3，在此时间BE2能然后被译码和直接输出以用IL2同时表示。
对于在低层或增强层序列内的第i个画面而言，对于表5的传送顺序，DTS和PTS能从下面的DTSLi中加以确定如下：
PTSLi＝DTSLi+(mod2(i+1)+1)1.5F，对于所有的i；
DTSEi＝DTSLi+1.5F，对于i＝2；
DTSEi＝DTSLi+(1+mod2(i+1)F，对于i＞2；和
PTSEi＝PTSLi，对于所有的i；这里，mod2(i)是对整数(i)求模2，使得当i是偶数时mod2(i)＝0，当i是奇数时mod2(i)＝1。
使用序列6时，在下面的表6描述了译码和表示的发生。
                     表6
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE2
F PL4 IL2 BE2
1.5F BL3
2F PE3 BL3 PE3
2.5F BE4
3F PL6 PL4 BE4
3.5F BL5
4F BE5 BL5 BE5
4.5F PE6
5F IL8 PL6 PE6
5.5F BL7
6F BE7 BL7 BE7
6.5F BE8
7F PL10 IL8 BE8
7.5F BL9
8F PE9 BL9 PE9
8.5F BE10
9F PL12 PL10 BE10
9.5F BL11
10F BE11 BL11 BE11
10.5F IE12
11F PL12 IE12
这里，仅需要两个译码画面的存储。例如，在PE3被接收之前，译码和存储PL4和BL3，在这时PE3被译码和直接输出以同时用IL2表示。
对于低层或增强层序列的第三个画面而言，对于表6的传送顺序，DTS和PTS能从DTSLi加以确定如下：
PTSLi＝DTSLi+F，对于i＝2；
PTSLi＝DTSLi+(3mod2(i+1)+1)0.5F，对于i＞2；
DTSEi＝DTSLi+0.5F，对于i＝2；
DTSEi＝DTSLi+(1+2mod(i+1))0.5F，对于i＞2；和
PTSEi＝PTSLi，对于所有的i。
使用序列7，下面的表7描述了译码和表示的发生。
                    表7
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F PL4
F BE2 IL2 BE2
1.5F BL3
2F PE3 BL3 PE3
2.5F PL6
3F BE4 PL4 BE4
3.5F BL5
4F BE5 BL5 BE5
4.5F IL8
5F PE6 PL6 PE6
5.5F BL7
6F BE7 BL7 BE7
6.5F PL10
7F BE8 IL8 BE8
7.5F BL9
8F PE9 BL9 PE9
8.5F PL12
9F B10 PL10 BE10
9.5F BL11
10F BE11 BL11 BE11
10.5F
11F PL12 IE12
这里，仅需要存储两个译码的画面，例如，在BE2被接收前译码和存储IL2和PL4在此期间BE2被译码和直接输出以同时用IL2表示。
对于在低层或增强层序列的第i个画面而言，对于表7的传送顺序，DTS和PTS能从DTSLi加以确定如下：
PTSLi＝DTSLi+F，对于i＝2；
PTSLi＝DTSLi+(4mod2(i+1)+1)0.5F，对于i＞2；
DTSEi＝DTSLi+F，对于i＝2；
DTSEi＝DTSLi+(4mod2(i+1)+1)0.5F，对于i＞2；和
PTSEi＝PTSLi对于所有的i。
图5示出了使用本发明系统的增强层画面序列和第四基层画面序列。这里，低层包括了I，P和B画面，具有两个连续的B画面。一样的数字部件对应着图2-4的部件。增强层200和先前讨论的相同。一般用500标出的低层包括图面序列BL0(502)，BL1(504)，IL2(506)，BL3(508)，BL4(510)，PL5(512)，BL6(514)，BL7(516)，IL8(518)，BL9(520)，BL10(522)，PL11(524)和BL12(526)。在IL2(506)和IL8(518)处开始GOP。
在IL2开始的依照本发明的适当的画面传送顺序是：IL2，PL5，BL3，BE2，BL4，PE4，BE4，IL8，BL6，BE5，BL7，PE6，BE7，PL11，BL9，BE8，BL7，PE9，BE10等等(序列8)使用这个传送顺序，下面的表8描述了译码和表示的发生。
                   表8
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F PL5
F BL3
1.5F BE2 IL2 BE2
2F BL4
2.5F PE3 BL3 PE3
3F BE4
3.5F IL8 BL4 BE4
4F BL6
4.5F BE5 PL5 BE5
5F BL7
5.5F PE6 BL6 PE6
6F BE7
6.5F PL11 BL7 BE7
7F BL9
7.5F BE8 IL8 BE8
8F BL10
8.5F PE9 BL9 PE9
9F BE10
9.5F BL10 BE10
10F
10.5F PL11
这里，仅需要存储三个译码的画面。例如，在BE2被接收前，译码和存储IL2，PL5，和BL3，在这个时间BE2被译码和直接输出以同时用IL2加以表示。
对于在低层或增强层序列的第i个画面而言，对于表8的传送顺序，DTS和PTS能从DTSLi中确定如下：
PTSLi＝DTSLi+1.5F，对于i＝2；
PTSLi＝DTSLi+(5mod2(mod3(i-1))+3)0.5F，对于i＞2；
DTSEi＝DTSLi+1.5F，对于i＝2；
DTSEi＝DTSLi+(3-mod2(mod3(i))+5mod2(mod3(i-1))0.5F，对于i＞2；和
PTSEi＝PTSLi对于所有的i。这里mod3(i)是对整数i求模3，使得当i＝0+3n时mod2(i)＝0，当i＝1+3n时，mod3(i)＝1，和当i＝2+3n，n＝0，1，2，3等等时，mod3(i)＝2。
替换地，另一个适当的传送顺序是：IL2，BE2，PL5，BL3，PE3，BL4，BE4，BE5，IL8，BL6，PE6，BL7，BE7，BE8，PL11，BL9，PE9，BL10，BE10，BE11等等(序列9)。使用这种传送顺序，下面的表9描述了译码和表示的发生。
                      表9
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F BE2
F PL5 IL2 BE2
1.5F BL3
2F PE3 BL3 PE3
2.5F BL4
3F BE4 BL4 BE4
3.5F BE5
4F IL8 PL5 BE5
4.5F BL6
5F PE6 BL6 PE6
5.5F BL7
6F BE7 BL7 BE7
6.5F BE8
7F PL11 IL8 BE8
7.5F BL9
8F PE9 BL9 PE9
8.5F BL10
9F BE10 BL10 BE10
9.5F BE11
10F PL11 BE11
这里，仅需要存储两个译码的画面，例如，在PL5被接收以前，译码和存储IL2和BE2，在此时间输出BE2和IL2以同时表示。
对于在低层或增强层序列的第i个画面而言，对于传送顺序表9，DTS和PTS可以从DTSLi加以推导如下：
PTSLi＝DTSLi+F，对于i＝2；
PTSLi＝DTSLi+(5mod2(mod3(i-1))+1)0.5F，对于i＞2；
DTSEi＝DTSLi+0.5F，对于i＝2；
DTSEi＝DTSLi+(5mod2(mod3(i-1))+1)0.5F，对于i＞2；和
PTSEi＝PTSLi，对于所有的i。
进一步适当的传送顺序是：IL2，PL5，BE2，BL3，PE3，BL4，BE4，IL5，BE5，BL6，PE6，BL7，BE7，PL11，BE8，BL9，PE9，BL10，BE10等等(序列10)。使用这样的序列，下面的表10描述了译码和表示的发生。
                        表10
时间，+DTSL2 译码 译码 表示 表示
0 IL2
0.5F PL5
F BE2 IL2 BE2
1.5F BL3
2F PE3 BL3 PE3
2.5F BL4
3F BE4 BL4 BE4
3.5F IL8
4F BE5 PL5 BE5
4.5F BL6
5F PE6 BL6 PE6
5.5F BL7
6F BE7 BL7 BE7
6.5F PL11
7F BE8 IL8 BE8
7.5F BL9
8F PE9 BL9 PE9
8.5F BL10
9F BE10 BL10 BE10
9.5F
10F PL11 BE11
这里，只需要存储两个译码的画面，例如，在BE2被接收之前，译码和存储IL2和PL5，在此时间BE2被译码和直接输出以用IL2同时表示。
对于在低层或增强层序列的第i个画面而言，对于表10的传送顺序，DTS和PTS能由DTSLi加以表示如下：
PTSLi＝DTSLi+F，对于i＝2；
PTSLi＝DTSLi+(6mod2(mod3(i-1))+1)0.5F，对于i＞2；
DTSEi＝DTSLi+F，对于i＝2；
DTSEi＝DTSLi+(6mod2(mod3(i-1))+1)0.5F，对于i＞2；和
PTSEi＝PTSLi对于所有的i。
注意，在上述序列1-10的每一个情况下，假定顺序译码，当使用平行译码时，PTS和DTS之间的关系以更一般的方式为特征。特定情况下，当低层没有B画面时而仅有I和/或P画面时，在两层内的所有画面以表示的顺序到达译码器。这样，对在低层或增强层序列的第i个画面而言，DTS和PTS能DTSLi加以确定如下：
PTSLi＝DTSLi+F；
DTSEi＝DTSLi+F；和
PTSEi＝PTSLi.
下面表11示出的实例给出了这种关系。DTSLi和DTSL(i-1)之间的差是F。
                                      表11
Pic.No. Pic(画面)类型，低层 DTSL PTSL Pic(画面)类型增强层 DTSE PTSE
0 I DTSL0 DTSL0+F I，P DTSL0+F DTSL0+F
1 I，P DTSL1 DTSL1+F I，P，B DTSL1+F DTSL1+F
2 I，  P  DTSL2 DTSL2+F I，P，B  DTSL2+F  DTSL2+F
3 I，  P  DTSL3 DTSL3+F I，P，B  DTSL3+F  DTSL3+F
例如，参看序列1并结合上面图2讨论，下面表12示出了译码和表示的发生。
                      表12
时间，+DTSL2 译码 译码 表示 表示
0 IL2 BE1 IL1 BE1
F IL3 BE2 IL2 BE2
2F IL4 PE3 IL3 PE3
3F IL5 BE4 IL4 BE4
4F IL6 BE5 IL5 BE5
5F IL7 PE6 IL6 PE6
6F IL8 BE7 IL7 BE7
7F IL9 BE8 IL8 BE8
8F IL10 PE9 IL9 PE9
9F IL11 BE10 IL10 BE10
10F IL12 BE11 IL11 BE11
这里，仅需要存储一个译码的画面。例如，在BE2被接收前，译码和存储IL2。当接收时，BE2立即被译码和被输出以用IL2实质上同时表示。
当低层不具有连续B画面时，DTS和PTS由DTSLi加以确定如下。如果低层的第i个画面是由带有“闭合GOP”指示器的I画面，或是由这样I画面跟随的P画面时，那么PTSLi＝DTSLi+2F。如果低层内的第i个画面是P画面，或“打开GOP”的I画面，和第(i+1)画面不是带有“闭合GOP”的I画面，那末PTSLi＝DTSLi+3F。如果低层的第I画面是B画面，那末PTSLi＝DTSLi+F对于增强层而言，DTSEi＝DTSLi+2F和PTSEi＝DTSLi+2F。注意，在MPEG-2的视频协议书中，一组的画面头是包括在GOP的开始和由一位指示器加以设置，闭合gop(组)＝0，而当闭合gop(组)＝1时指示闭合的GOP，一打开GOP的I画面依照译码的顺序象P画面一样处理。下面表13
实例示出了在低层内的非连续B画面的译码和表示。
                                         表13
Pic.No. Pic(画面)的类型，低层 DTSL PTSL Pic(画面)类型，增强层 DTSE PTSE
0 I(闭合的GOP) DTSL0 DTSL0+2F I，P DTSL0+2F或DTSL0+F DTSL0+2F
1 P DTSL1 DTSL1+3F I，P DTSL1+2F DTSL1+2F
2 B DTSL2 DTSL2+F I，P，B DTSL2+2F DTSL2+2F
3 P DTSL3 DTSL3+3F I，P，B DTSL3+2F DTSL3+2F
4 B DTSL4 DTSL4+F I，P，B DTSL4+2F DTSL4+2F
5 I(打开的GOP) DTSL5 DTSL5+3F I，P，B DTSL5+2F DTSL5+2F
6 B DTSL6 DTSL6+F I，P，B DTSL6+2F DTSL6+2F
7 I(闭合的GOP) DTSL7 DTSL7+2F I，P，B DTSL7+2F DTSL7+2F
在特定的例子中，按显示顺序的低层序列是IL0，BL1，PL2，BL3，PL4，BL5，IL6，IL7等等。按显示和传送顺序的增强层序列是PE0，BE1，BE2，BE3，BE4，BE5，PE6，PE7等等。依照本发明的一个可能的传送顺序是IL1，PL2，BL1，PE0，PL4，BE1，BL3，BE2，IL6，BE3，BL5，BE4，IL7，BE5等等。所示的表14能够确定DTS和PTS。
                     表14
时间，+DTSL2 译码 译码 表示 表示
0 IL0
F PL2
2F BL1 PE0 IL0 PE0
3F PL4 BE1 BL1 BE2
4F BL3 BE2 PL2 BE2
5F IL6 BE3 BL3 BE3
6F BL5 BE4 PL4 BE4
7F IL7 BE5 BL5 BE5
8F PE6 IL6 PE6
9F PE7 IL7 PE7
当低层有两个连续的B画面时，用下面的规则计算DTS和PTS。如果低层的第i个画面是带有闭合GOP指示器的I画面，或由这样的I画面跟随在其后的P画面，那末PTSLi＝DTSLi+2F。如果低层的第i个画面是P画面，或是打开GOP的I画面，和第(i+1)画面不是带有闭合GOP指示器的I画面，那末PTSLi＝DTSLi+4F。如果低层的第三个画面是B画面，那末PTSLi＝DTSLi+F。对于增强层，DTSEi＝DTSLi+2F和PTSEi＝DTSLi+2F。
低层的两个连续B画面的译码和表示由下面的表15作为实例给出。
                                    表15
Pic.No. Pic(画面)的类型，低层 DTSL PTSL Pic(画面)类型，增强层 DTSE PTSE
0 I(闭合的GOP) DTSL0 DTSL0+2F I，P DTSL0+2FDTSL0+F DTSL1+2F
1 P DTSL1 DTSL1+4F I，P，B DTSL1+2F DTSL1+2F
2 B DTSL2 DTSL2+F I，P，B DTSL2+2F DTSL2+2F
3 B DTSL3 DTSL3+F I，P，B DTSL3+2F DTSL3+2F
4 I(打开的GOP) DTSL4 DTSL4+4F I，P，B DTSL4+2F DTSL4+2F
5 B DTSL5 DTSL5+F I，P，B DTSL5+2F DTSL5+2F
6 B DTSL6 DTSL6+F I，P，B DTSL6+2F DTSL6+2F
7 P DTSL7 DTSL7+2F I，P，B DTSL7+2F DTSL7+2F
8 I(闭合的GOP) DTSL8 DTSL8+2F I，P，B DTSL8+2F DTSL8+2F
在特定的实例中，按显示顺序的低层序列是IL0，BL1，BL2，PL3，BL4，BL5，IL6，IL7等等。按显示和传送顺序的增强层序列是PE0，BE1，BE2，BE3，BE4，BE5，PE6，PE7等等。依照本发明的一个可能的传送顺序是IL0，PL3，BL1，PE0，BL2，BE1，IL6，BE2，BL4，BE3，BL5，BE4，IL7，BE5等等。示出的表16可以确定DTS和PTS。
                     表16
时间，+DTSL2 译码 译码 表示 表示
0 IL0
F PL3
2F BL1 PE0 IL0 PE0
3F BL2 BE1 BL1 BE2
4F IL6 BE2 BL2 BE2
5F BL4 BE3 PL3 BE3
6F BL5 BE4 BL4 BE4
7F IL7 BE5 BL5 BE5
8F PE6 IL6 PE6
9F PE7 IL7 PE7
应用到帧模式视频的上述规则可以一般化到电影模式的相应情况。
图6是立体视频的增强层译码器结构的框图。一般用130示出的译码器包括输入端605以接收压缩的增强层数据，和传送水平的语法分析程序610以分析数据。分析的数据提供给可以包括中央处理单元的存储器管理器630。存储器管理器630和例如可以包括动态随机存取的存储器(ORAM)的存储器620通讯。存储器管理器630也和恢复/预测处理器640通讯，和通过端口650接收可以临时存储在存储器620内的译码的低层数据以在对差异预测的增强层画面译码时由处理器640连续地使用。
恢复/预测处理器640提供各种处理功能，例如错误检测和校正，运动矢量译码，逆量化，逆离散余弦变换，Huffman译码和预测计算。在由恢复/预测功能640处理之后，由存储器管理器输出译码的增强层数据。替换地，译码的数据通过未示出的装置直接从恢复/预测功能640输出。
对于低层也可以使用类似的结构。进而，增强层和低层译码器可以共享硬件。例如，可以共享存储器620和处理器640。然而，使用平行译码时，这是不可能的。提供共同的时钟信号(未示出)，使得依照这里公开的传送顺序协调译码。特别是，在接收预测的画面数据之前，这将必须临时存储用来预测差异预测增强层画面而使用的低层画面，或其它低层画面。依照本发明，在译码前必需存储的画面数被最小化，因此允许减少存储器的尺寸。
如所见，本发明提供了立体视频画面顺序的有优点的画面传送方案。特别是，以这样的顺序传送画面，使得必需在表示前临时存储的画面数被最小化。然而，这里公开的传送顺序的实例和MPEG-2，MVP协议书，和提出的MPEG-4协议书相兼容。进而，可以确定每个画面的译码时间章(DTS)和表示时间章(PTS)以提供在译码器内的低层和增强层画面之间的同步。依照是否译码是顺序的或并联的，和是否低层没有B画面，或有非连续的B画面，或有两个连续的B画面而设置DTS和PTS。
虽然结合各种特定的实施例已经描述了发明，对此可以做出各种适用和修改而不脱离权利要求书中给出的本发明的精神和范围，这对本领域的普通技术人员而言是受欢迎的。例如，这里公开的方案可以采用不同于这里特别示出的其它的低层和增强层序列，这对该领域的普通技术人员而言是受欢迎的。

Claims (17)

1、一种排列传送到译码器的数字编码立体视频信号的低层和增强层内的立体视频画面序列的方法，所述的增强层包括使用相应低层画面进行预测的差异预测画面，该方法包括以下步骤：
排列所述视频画面，使得在所述相应的有关低层画面之后传送所述差异预测增强层画面；其中：
(a)所述低层仅包括内编码画面(I画面)，其中包括连续画面ILi、ILi+1和ILi+2，相应的增强层画面分别被表示为HEi、HEi+1和HEi+2，所述视频画面被排列，使它们按如下顺序发送：ILi、ILi+1、HEi、ILi+2；或
(b)所述低层仅包括内编码画面(I画面)，其中包括连续画面ILi和ILi+1，相应的增强层画面分别被表示为HEi和HEi+1，所述视频画面被排列，使它们按如下顺序发送：ILi、HEi、ILi+1、HEi+2。
2、一种排列传送到译码器的数字编码立体视频信号的低层和增强层内的立体视频画面序列的方法，所述的增强层包括使用相应低层画面进行预测的差异预测画面，该方法包括以下步骤：
排列所述视频画面，使得在所述相应的有关低层画面之后传送所述差异预测增强层画面；其中：
(a)所述低层仅包括内编码画面(I画面)和预测编码画面(P画面)，其中包括连续画面ILi、PLi+1和PLi+2，相应的增强层画面分别被表示为HEi、HEi+1和HEi+2，所述视频画面被排列，使它们按如下顺序发送：ILi、PLi+1、HEi、PLi+2；或
(b)所述低层仅包括内编码画面(I画面)和预测编码画面(P画面)，其中包括连续画面ILi和PLi+1，相应的增强层画面分别被表示为HEi和HEi+1所述视频画面被排列，使它们按如下顺序发送：ILi、HEi、PLi+1、HEi+1。
3、一种排列传送到译码器的数字编码立体视频信号的低层和增强层内的立体视频画面序列的方法，所述的增强层包括使用相应低层画面进行预测的差异预测画面，该方法包括以下步骤：
排列所述视频画面，使得在所述相应的有关低层画面之后传送所述差异预测增强层画面；其中：
(a)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和非连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1和PLi+2，相应的增强层画面分别被表示为HEi、HEi+1和HEi+2，所述视频画面被排列，使它们按如下顺序发送：ILi、PLi+2、BLi+1、HEi、HEi+1；或
(b)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和非连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1和PLi+2，相应的增强层画面分别被表示为HEi、HEi+1和HEi+2，所述视频画面被排列，使它们按如下顺序发送：ILi、HEi、PLi+2、BLi+1、HEi+1、HEi+2；或
(c)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和非连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1和PLi+2，相应的增强层画面分别被表示为HEi、HEi+1和HEi+2，所述视频画面被排列，使它们按如下顺序发送：ILi、PLi+2、HEi、BLi+1、HEi+1。
4、一种排列传送到译码器的数字编码立体视频信号的低层和增强层内的立体视频画面序列的方法，所述的增强层包括使用相应低层画面进行预测的差异预测画面，该方法包括以下步骤：
排列所述视频画面，使得在所述相应的有关低层画面之后传送所述差异预测增强层画面；其中：
(a)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1、BLi+2和PLi+3，相应的增强层画面分别被表示为HEi、HEi+1、HEi+2和HEi+3，所述视频画面被排列，使它们按如下顺序发送：ILi、PLi+3、BLi+1、HEi、BLi+2、HEi+1、HEi+2；或
(b)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1、BLi+2和PLi+3，相应的增强层画面分别被表示为HEi、HEi+1、HEi+2和HEi+3，所述视频画面被排列，使它们按如下顺序发送：ILi、HEi、PLi+3、BLi+1、HEi+1、BLi+2、HEi+2和HEi+3；或
(c)所述低层包括内编码画面(I画面)、预测编码画面(P画面)和连续双向预测编码画面(B画面)，其中包括连续画面ILi、BLi+1、BLi+2和PLi+3，相应的增强层画面分别被表示为HEi、HEi+1、HEi+2和HEi+3，所述视频画面被排列，使它们按如下顺序发送：ILi、PLi+3、HEi、BLi+1、HEi+1、BLi+2、HEi+2。
5、一种允许对数字编码的立体视频信号的低层和增强层中的视频画面序列进行并行译码的方法，其中，所述的低层至少包括内编码画面(I画面)和预测编码画面的一种，但并不包括双向预测编码(B画面)，该方法包括以下步骤：
提供带有译码时间章(DTS)和表示时间章(PTS)的所述画面，这些时间章分别指示译码和表示每一个所述画面的时间；其中：
第i低层画面的DTS是DTSLi；
第i低层画面的PTS是PTSLi；
第i增强层画面的DTS是DTSHi；
第i增强层画面的PTS是PTSHi；
F是连续画面表示之间的时间间隔；和
PTSLi＝DTSHi＝PTSHi＝DTSLi+F
6、一种允许对数字编码的立体视频信号的低层和增强层中的视频画面序列进行并行译码的方法，其中，所述的低层至少包括非连续双向预测编码画面(B画面)，该方法包括以下步骤：
提供带有译码时间章(DTS)和表示时间章(PTS)的所述画面，这些时间章分别指示译码和表示每一个所述画面的时间；其中：
第i低层画面的DTS是DTSLi；
第i低层画面的PTS是PTSLi；
第i增强层画面的DTS是DTSHi；
第i增强层画面的PTS是PTSHi；
F是连续画面表示之间的时间间隔；和
当第i低层画面是带有闭合GOP指示器的内编码画面(I画面)时，PTSLi＝DTSLi+2F。
7、如权利要求6的方法，其中：
当第i低层画面是预测编码画面(P画面)，及第(i+1)低层画面是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+2F。
8、如权利要求6的方法，其中：
当第i低层画面是P画面指示器，及第(i+1)低层画面不是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+3F。
9、如权利要求6的方法，其中：
当第i低层画面是带有打开GOP指示器的I画面，及第(i+1)低层画面不是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+3F。
10、如权利要求6的方法，其中：
当第i低层画面是B画面时，PTSLi＝DTSLi+F。
11、如权利要求6的方法，其中：
DTSHi＝PTSHi＝PTSLi＝DTSLi+2F
12、一种允许对数字编码的立体视频信号的低层和增强层中的视频画面序列进行并行译码的方法，其中，所述的低层至少包括一组两个连续双向预测编码画面(B画面)，该方法包括以下步骤：
提供带有译码时间章(DTS)和表示时间章(PTS)的所述画面，这些时间章分别指示译码和表示每一个所述画面的时间；其中：
第i低层画面的DTS是DTSLi；
第i低层画面的PTS是PTSLi；
第i增强层画面的DTS是DTSHi；
第i增强层画面的PTS是PTSHi；
F是连续画面表示之间的时间间隔；和
当第i低层画面是带有闭合GOP指示器的内编码画面(I画面)时，PTSLi＝DTSLi+2F。
13、如权利要求12的方法，其中：
当第i低层画面是预测编码画面(P画面)，及第(i+1)低层画面是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+2F。
14、如权利要求12的方法，其中：
当第i低层画面是P画面指示器，及第(i+1)低层画面不是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+4F。
15、如权利要求12的方法，其中：
当第i低层画面是带有打开GOP指示器的I画面，及第(i+1)低层画面不是带有闭合GOP指示器的I画面时，PTSLi＝DTSLi+4F。
16、如权利要求12的方法，其中：
当第i低层画面是B画面时，PTSLi＝DTSLi+F。
17、如权利要求12的方法，其中：
DTSHi＝PTSHi＝PTSLi＝DTSLi+2F
CN97125286A 1996-10-24 1997-10-24 排列立体视频序列的视频画面用于译码的方法 Expired - Fee Related CN1112806C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/736,383 US5886736A (en) 1996-10-24 1996-10-24 Synchronization of a stereoscopic video sequence
US08/736383 1996-10-24

Publications (2)

Publication Number Publication Date
CN1187734A CN1187734A (zh) 1998-07-15
CN1112806C true CN1112806C (zh) 2003-06-25

Family

ID=24959663

Family Applications (1)

Application Number Title Priority Date Filing Date
CN97125286A Expired - Fee Related CN1112806C (zh) 1996-10-24 1997-10-24 排列立体视频序列的视频画面用于译码的方法

Country Status (10)

Country Link
US (1) US5886736A (zh)
EP (1) EP0838959B1 (zh)
JP (1) JPH10174126A (zh)
KR (1) KR19980033135A (zh)
CN (1) CN1112806C (zh)
CA (1) CA2218607C (zh)
DE (1) DE69722556T2 (zh)
HK (1) HK1010775A1 (zh)
NO (1) NO974891L (zh)
TW (1) TW349311B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104247413A (zh) * 2012-04-23 2014-12-24 Lg电子株式会社 用于3d服务的信号处理设备和方法

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2101495B1 (en) * 1996-02-28 2012-12-26 Panasonic Corporation High-resolution optical disk for recording stereoscopic video, optical disk reproducing device and optical disk recording device
KR100203262B1 (ko) * 1996-06-11 1999-06-15 윤종용 픽춰단위 동기화를 위한 비디오디코더의 인터페이스장치
CN1183780C (zh) * 1996-12-04 2005-01-05 松下电器产业株式会社 光盘再现设备及光盘记录方法
EP0866624B1 (en) * 1997-03-17 2006-08-02 Sony Corporation Picture signal encoding apparatus and picture signal decoding apparatus
KR100418141B1 (ko) * 1997-04-01 2004-06-09 소니 가부시끼 가이샤 화상부호화장치,화상부호화방법,화상복호화장치및화상복호화방법
US6233356B1 (en) * 1997-07-08 2001-05-15 At&T Corp. Generalized scalability for video coder based on video objects
US6993201B1 (en) * 1997-07-08 2006-01-31 At&T Corp. Generalized scalability for video coder based on video objects
US6229850B1 (en) * 1997-07-22 2001-05-08 C-Cube Semiconductor Ii, Inc. Multiple resolution video compression
US6118498A (en) * 1997-09-26 2000-09-12 Sarnoff Corporation Channel scanning and channel change latency reduction in an ATSC television receiver
US6043838A (en) * 1997-11-07 2000-03-28 General Instrument Corporation View offset estimation for stereoscopic video coding
US6731811B1 (en) * 1997-12-19 2004-05-04 Voicecraft, Inc. Scalable predictive coding method and apparatus
US6055274A (en) * 1997-12-30 2000-04-25 Intel Corporation Method and apparatus for compressing multi-view video
US6292512B1 (en) * 1998-07-06 2001-09-18 U.S. Philips Corporation Scalable video coding system
US6275253B1 (en) * 1998-07-09 2001-08-14 Canon Kabushiki Kaisha Stereographic image compression with image moment normalization
US6215825B1 (en) * 1998-07-09 2001-04-10 Canon Kabushiki Kaisha Stereographic image compression with image difference generation and lossy compression
US6191839B1 (en) * 1999-05-03 2001-02-20 Rockwell Collin, Inc. Patterned thermal sensor
US7245663B2 (en) * 1999-07-06 2007-07-17 Koninklijke Philips Electronis N.V. Method and apparatus for improved efficiency in transmission of fine granular scalable selective enhanced images
EP1269761A1 (en) * 2000-03-31 2003-01-02 Koninklijke Philips Electronics N.V. Encoding of two correlated sequences of data
US6718507B1 (en) * 2000-09-12 2004-04-06 At&T Corp. System and method for representing compressed information
US7133449B2 (en) * 2000-09-18 2006-11-07 Broadcom Corporation Apparatus and method for conserving memory in a fine granularity scalability coding system
US7042944B2 (en) * 2000-09-22 2006-05-09 Koninklijke Philips Electronics N.V. Single-loop motion-compensation fine granular scalability
US7463683B2 (en) * 2000-10-11 2008-12-09 Koninklijke Philips Electronics N.V. Method and apparatus for decoding spatially scaled fine granular encoded video signals
JP4668515B2 (ja) * 2001-01-30 2011-04-13 韓國電子通信研究院 マルチメディアコンテンツに同期化されたメタデータ伝送装置及び方法
US20020118742A1 (en) * 2001-02-26 2002-08-29 Philips Electronics North America Corporation. Prediction structures for enhancement layer in fine granular scalability video coding
US20020191625A1 (en) * 2001-05-25 2002-12-19 Patrick Kelly Table-based correlation of base and enhancement layer frames
EP1328127A1 (de) * 2002-01-09 2003-07-16 Beta Research GmbH Simultaneinspeisung und Synchronisation von Audio und Videodaten
US7561783B2 (en) * 2002-07-16 2009-07-14 Thomson Licensing Interleaving of base and enhancement layers for HD-DVD
US20050220441A1 (en) * 2002-07-16 2005-10-06 Comer Mary L Interleaving of base and enhancement layers for hd-dvd
KR100488804B1 (ko) * 2002-10-07 2005-05-12 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법
US20050135478A1 (en) * 2003-12-18 2005-06-23 Van Der Schaar Mihaela Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames
KR101145261B1 (ko) * 2004-02-27 2012-05-24 삼성전자주식회사 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치
JP2007525906A (ja) * 2004-02-27 2007-09-06 ティディヴィジョン コーポレイション エス．エー． デ シー．ヴィ． 立体３ｄビデオイメージディジタルコーディングのシステムおよび方法
JP2007525907A (ja) * 2004-02-27 2007-09-06 ティディヴィジョン コーポレイション エス．エー． デ シー．ヴィ． 立体３ｄビデオイメージディジタルデコーディングのシステムおよび方法
US7725799B2 (en) * 2005-03-31 2010-05-25 Qualcomm Incorporated Power savings in hierarchically coded modulation
WO2007027010A1 (en) * 2005-07-15 2007-03-08 Samsung Electronics Co., Ltd. Apparatus and method of encoding video and apparatus and method of decoding encoded video
US8937997B2 (en) 2006-03-16 2015-01-20 Apple Inc. Scalable video coding/multiplexing compatible with non-scalable decoders
KR100934674B1 (ko) * 2006-03-30 2009-12-31 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
US20100091845A1 (en) * 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
EP2030450B1 (en) * 2006-06-19 2015-01-07 LG Electronics Inc. Method and apparatus for processing a video signal
US7632974B2 (en) * 2006-07-19 2009-12-15 Lammus Technology Inc. Alkylation process for increased conversion and reduced catalyst use
TW200820791A (en) * 2006-08-25 2008-05-01 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
US7456760B2 (en) * 2006-09-11 2008-11-25 Apple Inc. Complexity-aware encoding
US20080095238A1 (en) * 2006-10-18 2008-04-24 Apple Inc. Scalable video coding with filtering of lower layers
BRPI0719860B1 (pt) * 2006-10-18 2021-09-08 Interdigital Vc Holdings, Inc. Aparelhos, métodos e meio de armazenamento não transitório para compensação de iluminação e cor local sem sinalização explícita
CN101569197B (zh) 2006-12-21 2013-07-10 汤姆森许可贸易公司 针对多视点视频编码和解码使用高级语法进行改进信号通知的方法和装置
EP2116059A2 (en) * 2007-01-04 2009-11-11 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video
US20090060035A1 (en) * 2007-08-28 2009-03-05 Freescale Semiconductor, Inc. Temporal scalability for low delay scalable video coding
MY162861A (en) 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
CN101415114B (zh) * 2007-10-17 2010-08-25 华为终端有限公司 视频编解码方法和装置以及视频编解码器
KR100954290B1 (ko) * 2007-12-10 2010-04-26 한국전자통신연구원 Ｄｍｂ 방송 시스템에서 고품질 미디어 데이터 처리 방법및 장치
AU2009205250B2 (en) * 2008-01-17 2013-02-21 Panasonic Corporation Recording medium on which 3D video is recorded, recording medium for recording 3D video, and reproducing device and method for reproducing 3D video
KR101472332B1 (ko) * 2008-04-15 2014-12-15 삼성전자주식회사 3차원 디지털 컨텐츠의 제공 방법, 수신 방법 및 그 장치
US20090262838A1 (en) * 2008-04-21 2009-10-22 Qualcomm Incorporated Method and apparatus for encoding transmission data blocks for enhanced switching performance
US20090304086A1 (en) * 2008-06-06 2009-12-10 Apple Inc. Method and system for video coder and decoder joint optimization
RU2502214C2 (ru) * 2008-09-30 2013-12-20 Панасоник Корпорэйшн Носитель записи, устройство воспроизведения, системная бис, способ воспроизведения, очки и устройство отображения для трехмерных изображений
CN102804785A (zh) * 2009-04-13 2012-11-28 瑞尔D股份有限公司 编码、解码和发布增强分辨率的立体视频
JP4985807B2 (ja) * 2009-04-15 2012-07-25 ソニー株式会社 再生装置および再生方法
US8705624B2 (en) * 2009-11-24 2014-04-22 STMicroelectronics International N. V. Parallel decoding for scalable video coding
WO2011091301A1 (en) * 2010-01-21 2011-07-28 General Instrument Corporation Full resolution stereoscopic video with 2d backward compatible signal
KR20110088334A (ko) * 2010-01-28 2011-08-03 삼성전자주식회사 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 생성 방법 및 장치, 3차원 멀티미디어 서비스를 제공하기 위한 데이터스트림 수신 방법 및 장치
KR101277267B1 (ko) * 2010-04-02 2013-06-20 전자부품연구원 3차원 방송을 위한 데이터 코덱 방법 및 장치
US9378561B1 (en) * 2010-06-08 2016-06-28 Ambarella, Inc. Layer switching in an H.264 scalable video decoder
WO2013090923A1 (en) 2011-12-17 2013-06-20 Dolby Laboratories Licensing Corporation Multi-layer interlace frame-compatible enhanced resolution video delivery
US8976856B2 (en) 2010-09-30 2015-03-10 Apple Inc. Optimized deblocking filters
JP6025065B2 (ja) * 2011-09-13 2016-11-16 パナソニックＩｐマネジメント株式会社 符号化装置、復号装置、再生装置、符号化方法、及び復号方法
JP2013126048A (ja) * 2011-12-13 2013-06-24 Sony Corp 送信装置、送信方法、受信装置および受信方法
US20140247878A1 (en) * 2012-09-21 2014-09-04 Lidong Xu Cross-layer motion vector prediction
KR20140103569A (ko) * 2013-02-18 2014-08-27 한국전자통신연구원 적응적 계층 선택을 위한 장치 및 방법, 이를 구비한 서버
US20140301436A1 (en) * 2013-04-05 2014-10-09 Qualcomm Incorporated Cross-layer alignment in multi-layer video coding
JP6605789B2 (ja) * 2013-06-18 2019-11-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法、受信方法、送信装置、および、受信装置
JP6354262B2 (ja) * 2014-03-31 2018-07-11 株式会社Ｊｖｃケンウッド 映像符号化データ送信装置、映像符号化データ送信方法、映像符号化データ受信装置、映像符号化データ受信方法、及び映像符号化データ送受信システム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2083203C (en) * 1991-11-19 1996-10-29 Riichi Nagura Image data transmission system capable of obtaining a high resolution stereo image with reduced transmission data
NL9201593A (nl) * 1992-09-14 1994-04-05 Nederland Ptt Systeem omvattende een eerste encoder voor het coderen van een eerste digitaal signaal, een tweede encoder voor het coderen van een tweede digitaal signaal en ten minste één decoder voor het decoderen van gecodeerde digitale signalen, en encoder en decoder voor toepassing in het systeem.
EP0639031A3 (en) * 1993-07-09 1995-04-05 Rca Thomson Licensing Corp Method and device for encoding stereo image signals.
JPH07123447A (ja) * 1993-10-22 1995-05-12 Sony Corp 画像信号記録方法および画像信号記録装置、画像信号再生方法および画像信号再生装置、画像信号符号化方法および画像信号符号化装置、画像信号復号化方法および画像信号復号化装置、ならびに画像信号記録媒体
US5559999A (en) * 1994-09-09 1996-09-24 Lsi Logic Corporation MPEG decoding system including tag list for associating presentation time stamps with encoded data units
KR0137701B1 (ko) * 1994-12-13 1998-05-15 양승택 엠피이지-2(mpeg-2) 시스템의 피이에스(pes) 패킷화 장치
US5612735A (en) * 1995-05-26 1997-03-18 Luncent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing two disparity estimates
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
US5652616A (en) * 1996-08-06 1997-07-29 General Instrument Corporation Of Delaware Optimal disparity estimation for stereoscopic video coding

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104247413A (zh) * 2012-04-23 2014-12-24 Lg电子株式会社 用于3d服务的信号处理设备和方法
CN104247413B (zh) * 2012-04-23 2017-12-29 Lg 电子株式会社 用于3d服务的信号处理设备和方法

Also Published As

Publication number Publication date
NO974891L (no) 1998-04-27
EP0838959A3 (en) 1999-03-24
MX9708213A (es) 1998-08-30
NO974891D0 (no) 1997-10-23
EP0838959A2 (en) 1998-04-29
HK1010775A1 (en) 1999-06-25
CA2218607C (en) 2004-07-13
US5886736A (en) 1999-03-23
CA2218607A1 (en) 1998-04-24
KR19980033135A (ko) 1998-07-25
DE69722556D1 (de) 2003-07-10
TW349311B (en) 1999-01-01
JPH10174126A (ja) 1998-06-26
EP0838959B1 (en) 2003-06-04
CN1187734A (zh) 1998-07-15
DE69722556T2 (de) 2004-05-13

Similar Documents

Publication Publication Date Title
CN1112806C (zh) 排列立体视频序列的视频画面用于译码的方法
EP0912063B1 (en) A method for computational graceful degradation in an audiovisual compression system
US6034731A (en) MPEG frame processing method and apparatus
CN1134165C (zh) 运动图形处理方法和设备以及恢复信号产生方法和设备
US6671323B1 (en) Encoding device, encoding method, decoding device, decoding method, coding system and coding method
US8160134B2 (en) Encoding system and method, decoding system and method, multiplexing apparatus and method, and display system and method
US9019343B2 (en) Image data transmission device, image data transmission method, and image data reception device
JP4628062B2 (ja) 三次元ビデオ符号化に関するシステム及び方法
CN1076932C (zh) 图像信号编码和解码的方法与装置
US8913503B2 (en) Method and system for frame buffer compression and memory resource reduction for 3D video
US20130022116A1 (en) Camera tap transcoder architecture with feed forward encode data
Lee et al. The VC-1 and H. 264 video compression standards for broadband video services
CN1178497C (zh) 数据再生传输设备和数据再生传输方法
EP2124454B1 (en) Bit stream converting method, bit stream converting device, bit stream coupling device, bit stream dividing program, bit stream converting program and bit stream coupling program
CN1311958A (zh) 数字视频记录器用的特技播放信号的产生
CN1476248A (zh) 压缩图像数据从发送端传输到接收端的视频数据收发系统
CN1315118A (zh) 压缩与未经压缩的数字视频信号的统计式多路转接的动态位分配
CN1832575A (zh) 视频编码/解码方法和设备
CA2765570A1 (en) Broadcast transmitter, broadcast receiver and 3d video processing method thereof
CN1949880A (zh) 数字广播接收机中的同步装置和同步方法
US8170401B2 (en) Optimizing ad insertion by removing low information frames
WO2010022672A1 (zh) 码流转换系统及方法、码流识别单元和方案确定单元
US20110080948A1 (en) Method and system for 3d video decoding using a tier system framework
US9414080B2 (en) Method and system for asymmetrical rate control for 3D video compression
JP2009004939A (ja) 多視点画像復号方法、多視点画像復号装置及び多視点画像復号プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C53 Correction of patent of invention or patent application
COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: SECONDARY SYSTEM CO., LTD. TO: GENERAL INSTRUMENT CO.,LTD.

CP03 Change of name, title or address

Address after: American Pennsylvania

Applicant after: GENERAL INSTRUMENT Corp.

Address before: Illinois, USA

Applicant before: General Instrument Corp.

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MOTOROLA MOBILITY LLC

Free format text: FORMER OWNER: GENERAL INSTRUMENT HOLDING CO., LTD.

Effective date: 20130918

Owner name: GENERAL INSTRUMENT HOLDING CO., LTD.

Free format text: FORMER OWNER: GENERAL INSTRUMENT CORPORATION

Effective date: 20130918

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130918

Address after: Illinois State

Patentee after: MOTOROLA MOBILITY LLC

Address before: California, USA

Patentee before: General Instruments Holding Co.,Ltd.

Effective date of registration: 20130918

Address after: California, USA

Patentee after: General Instruments Holding Co.,Ltd.

Address before: American Pennsylvania

Patentee before: GENERAL INSTRUMENT Corp.

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160302

Address after: California, USA

Patentee after: Google Technology Holdings LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY LLC

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20030625

Termination date: 20161024