CN102598673A - 用于帧连续立体视频编码的动态参考帧重排序 - Google Patents

用于帧连续立体视频编码的动态参考帧重排序 Download PDF

Info

Publication number
CN102598673A
CN102598673A CN2010800476766A CN201080047676A CN102598673A CN 102598673 A CN102598673 A CN 102598673A CN 2010800476766 A CN2010800476766 A CN 2010800476766A CN 201080047676 A CN201080047676 A CN 201080047676A CN 102598673 A CN102598673 A CN 102598673A
Authority
CN
China
Prior art keywords
frame
reference frame
coding
encoded
stereo video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800476766A
Other languages
English (en)
Inventor
洪承郁
郁杨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102598673A publication Critical patent/CN102598673A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

对诸如来自空间上不同的左成像器和右成像器的用于帧连续立体视频的视频序列进行编码。在编码处理期间，如果判定重排序将增大可以从已编码输出中跳过的宏块(MB)的数目或另外地增大编码效率，则参考帧被重排序。随后，响应于参考帧的排序，编码使用用于帧连续立体视频的运动估计和熵编码被完成。有关连续立体视频输出内的参考帧排序的侧面信息被编码以允许解码器恰当地解码参考帧。结果，跳过的MB的数目可以被动态增大并且运动预测期间参考的MB的数目被显著减小。

Description

用于帧连续立体视频编码的动态参考帧重排序
相关申请的交叉引用
本申请要求2010年10月18日提交的美国专利临时申请第12/906,758号的优先权(该临时申请被通过引用而全部结合于此)，并且要求2009年11月6日提交的美国临时专利申请第61/258,737号的优先权(该临时申请被通过引用而全部结合于此)。
有关联邦赞助的研究和开发的声明
不适用
对以光盘递交的素材的引述结合
不适用
受版权保护的素材的通告
本专利文档中的素材的一部分受美国和其它国家的版权法的版权保护。版权所有人不反对任何人对本专利文档或专利公开按照其出现在美国专利商标局可公开获得的文件或记录中那样进行复制，并且在其它情形下无论如何都保留所有版权。因此，版权所有者不放弃将本专利文档保持在保密状态的任何权利，包括并且不限于遵循37C.F.R.$1.14的权利。
本发明的背景
1.技术领域
本发明一般地涉及立体成像，并且更具体地涉及对帧连续(framesequential)立体成像中的变化进行编码。
2.相关技术的描述
对图像和视频的高质量再现的兴趣持续增长。高清晰广播和再现装置变得无处不在。为了支持这些高带宽流的高效通信，编码标准已经例如利用允许多个参考帧的H.264和其它基于熵的编码标准在持续改进。
近年来，再现三维(3D)图像的能力已经获得了越来越多的兴趣和发展。在渲染3D图像时，空间上不同的帧必须被捕获并被分离地传送到观众的左眼和右眼。这些年来，已经提出了许多技术，从数十年前的有色影院眼镜到最近的快门眼镜的使用，其中，在快门眼镜中，每个透镜包括快门(例如LCD)，快门接通和关断以使得每个眼睛从连续显示左眼和右眼图像两者的屏幕仅看到其对应的左眼图像或右眼图像。
不论用来控制针对每个眼睛如何显示图像的机制如何，编码3D视频素材的帧连续方法被广泛使用。在传统2D视频中，来自单个空间位置的连续帧被以给定成帧速率(例如30帧每秒(fps))被输出。到了对被连续编码的3D视频成帧，输出的连续帧在左侧空间图像和右侧空间图像之间交替。
与帧连续立体视频相关联的问题之一与流的传输有关，因为流具有无法使用传统编码标准被轻易“压缩”的高带宽。
因此，需要在不需要开发不与2D视频流相兼容的全新的3D编码机制的同时对帧连续立体视频进行编码的系统和方法。这些需要以及其它需要在本发明内得到满足，本发明克服了之前开发的视频编码系统和方法的不足。
本发明的简要内容
本发明提高了当将多个不同图像(例如不同类型的视频，例如空间上不同)编码到同一输出流中时的效率(质量相比于比特率)，并且其特别地适合于帧连续编码输出流内的立体视频的编码。
为了改进帧连续立体(FSS)视频的编码，本发明考虑到流内的参考帧位置的选择性重排序(交换)。应当明白，编码方法可操作用于减小流内的空间和时间冗余。为了实现该目的，这些编码技术降低了同一图像帧的块内的空间冗余，并且降低了具有连续捕获间隔的连续帧上的宏块之间的时间冗余。
应当明白，视频流(在此也简称为“视频”)是视频帧的序列。序列的每个帧包括静止图像。视频的回放以期望的帧率，通常以接近30帧每秒的速率(例如从23.976、24、25、29.97、30fps的传统帧率中选择或可用的非标准速率)执行。
在FSS视频的编码期间，毗邻的帧不表现连续捕获间隔，而是空间上不同的，这显著影响编码流的效率(压缩度或比特预算)。通过使用参考帧的选择性重排序，本发明在被应用于FSS视频时增大了传统2D编码机制的效率。根据本发明的装置和方法可以实现在各种高级编码器内，包括H.264和AVC编码器(AVC＝高级视频编码)，这可以支持多个参考帧。
本发明可以以多种方式实现，包括但不限于以下描述。
本发明的一个实施例是一种用于对帧连续立体视频进行编码的装置，包括：(a)计算机，该计算机被配置为将第一图像序列和第二图像序列(例如来自左侧成像器和右侧成像器)编码到帧连续立体视频输出中；(b)存储器，该存储器耦合到所述计算机；以及(c)程序，所述程序被存储在所述存储器上并且可在所述计算机运行以用于执行如下步骤：(c)(i)将图像分割成块；(c)(ii)响应于参考帧重排序是否会导致改进的编码的判断，对选择的参考帧重排序；以及(c)(iii)响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码。将明白，熵编码的其余部分可以根据编码器协议以任何期望的方式执行，诸如，通过使用变换、量化变换系数并将变化编码到输出数据中来执行块的去相关。
在至少一种实现方式中，帧利用利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。为了允许恰当的有效的解码，指示参考帧排序的侧面信息被编码到编码视频输出中。
根据该创新性装置和/或方法的编码可以用在包括用于减低时间冗余的程序的、以任何现代块为基础的编码系统中，诸如用于H.264、AVC编码的视频编码器和类似的编码器。本发明操作用于增大编码效率，诸如增大被跳过并且不被编码到帧连续立体视频输出中的宏块的数目和减小每编码帧被参考的宏块的数目。诸如H.264之类的高级编码器定义侧面信息(side-information)，参考帧序列信息可以通过侧面信息被传递给解码器，从而不需要为了将序列信息传送给解码器而进行协议修改。
在本发明的至少一个实施例中，判断场景剪切是否已经发生，从而该帧被设定为帧间类型。在本发明的至少一个方面中，双I帧可以被用来减小连续立体视频输出的质量变差。
本发明的一个实施例是一种在被配置用于将第一图像序列和第二图像序列编码到帧连续立体视频输出中的视频编码器电路中对帧连续立体视频进行编码的方法，包括：(a)将图像分割成块；(b)响应于参考帧重排序是否将导致改进的编码的判断，对选择的参考帧重排序；以及(c)响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码。对选择的参考帧的重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目。
本发明提供许多有益方面，在不偏离本教导的情况下，这些方面可以被分离地实现或以任何期望组合被实现。
本发明的一个方面是用于以更高的效率来对帧连续立体视频进行编码的方法和装置。
本发明的另一个方面是对视频帧的序列内的参考帧重排序来提高编码效率。
本发明的另一个方面是响应于针对原始次序的编码和至少一个重排序的编码的比较来判断是否要对参考帧重排序。
本发明的另一个方面在对帧连续立体视频进行编码时提供跳过MB的数目的增大。
本发明的另一个方面在对帧连续立体视频进行编码时提供每帧所参考的MB的数目的减小。
本发明的又一个方面在于该方法可以容易地应用于许多不同视频编码技术来增强它们处理3D视频时的编码效率。
本发明的更多个方面将在说明书的以下部分中引出，其中，详细的描述仅仅用于充分公开本发明的优选实施例的目的而不施加任何限制。
(一个或多个)附图中的若干示图的简要描述
参考以下附图将更全面地理解本发明，这些附图仅用于说明目的：
图1是响应于对由立体成像系统捕获的左右视频帧进行交织而示出的连续立体视频帧序列。
图2A-2B是在图2A中按照通常次序被示出并且在图2B中响应于根据本发明的实施例的为了增大编码效率的序列重排序的选择性参考帧重排序而显示的视频帧序列。
图3是根据本发明一个方面的响应于参考帧重排序的参考索引比特节约的数据图。
图4是根据本发明的一个方面的参考帧重排序的流程图，其示出响应于测试多个参考帧序列配置来选择将被编码的一个帧序列的示例。
图5是传统地和在根据本发明的一个方面的帧重排序之后图示出的视频帧序列，其示出所参考和所跳过的宏块的相对数目之间的对比。
图6是示出根据本发明的一个方面的参考帧重排序的测试的结果的数据表。
图7是示出根据本发明的一个方面的参考帧重排序的另一测试的结果的数据表。
图8-9是根据本发明的方面的响应于参考帧的数目的增大的峰值信噪比(PSNR)与帧数的曲线图。
图10是根据本发明的方面的响应于应用选择性帧重排序并使用双I帧来降低变差的峰值信噪比(PSNR)与帧数的曲线图。
图11-12是在根据本发明的一个方面的比较图11中的通过传统编码提供的PSNR和图12中响应于选择性参考帧重排序的结果的比较事件中所捕捉的图像。
图13-14是在图13中示出响应于传统编码的并且在图14中示出响应于根据本发明的一个方面的选择性帧重排序(其示出增多数目的跳过宏块)的帧内、前向、后向和跳过宏块的数目的宏块状态图。
图15是根据本发明的一个方面被配置用于将左右图像数据(或流)编码成帧连续立体视频流的编码器的框图。
本发明的详细描述
更具体地参考附图，为了说明目的，本发明被体现在图2A至图15中示出的设备中。将明白，在不偏离这里所公开的基本概念的情况下，该设备可以根据配置以及部件的细节不同而不同，并且方法可以根据具体步骤和序列的不同而不同。
图1图示出被示为来自诸如视频文件或流之类的左右视频源的交织(interleaved)视频的帧连续立体视频流。随后，所产生的交织视频数据在发送前被编码以减小其带宽。
应当明白，降低空间和时间冗余的传统编码器被配置用于2D视频数据文件。当处理交织视频文件(诸如所示出的立体视频)时，降低时间冗余的效力由于空间上相关联但是时间上不相关联的交替的连续L-R帧的存在而受到不利影响。
这些编码间题可以从以下段落中被更好地理解，这些段落提供了有关从最初的MPEG标准起就一直可用的典型编码处理的一些一般背景，使得本发明的方面可以被更好地理解。应当明白，不同的视频编码标准在某些方面不同于以下的内容，但是遵循类似的样式(pattern)并且保持了描述帧间和预测帧的帧编码。
视频帧被分割成跨越期望数目的像素的宏块(例如，8x8、16x16、32x32或任何其它期望的形状和尺寸)。当考虑YUV编码标准时，每个宏块具有某一数目的亮度和色度块。宏块是当执行运动补偿压缩时所使用的像素单位，并且块通常根据离散余弦变换(DCT)压缩被指定。帧通常以三种类型被编码：帧内帧(I-帧)、前向预测帧(P帧)和双向预测帧(B帧)。
I帧被编码为主要被独立地编码而不参考过去或将来的帧的单个帧。根据一种形式的编码，帧的块首先使用DCT(离散余弦变换)被从空间域变换到频域中，这将信号分离到独立的频带中。可替换地，可以对块执行其它形式的编码，诸如波形编码。多数频率信息在所产生的块的左上角中。此后，数据通常根据比特预算被量化到任何期望的级别，以使得在比特预算内，低阶比特被充分压缩或忽略。所产生的数据随后例如按照Z行(zig-zag)排序被游长编码以便通过增加零的聚集并消除这些聚集的零来优化压缩。
P帧被相对于过去的参考帧编码，过去的参考帧可以包括或者P帧或者I帧。过去的参考帧是最靠近的在前参考帧。P帧中的每个宏块(MB)可以或者被编码为I宏块或者被编码为P宏块。I宏块就像I帧中的宏块那样被编码，而P宏块被编码为过去的参考帧的区域加上误差(熵)项。为了指定参考帧的像素区域，运动向量被包括(例如，运动向量(0，0)指示MB与正要编码的宏块处于相同的位置)。非零误差项被编码、被量化并被游长编码。
B帧被相对于过去的参考帧、将来的参考帧或这两种帧被编码。将来的参考帧是最靠近的后续参考帧(I或P)。用于B帧的编码类似于P帧，除了运动向量可以指代将来的参考帧中的区域以外。对于使用过去的将来的参考帧两者的宏块，这两个区域被平均。
帧不必遵循静态IPB样式，并且每个个别的帧可以是任意类型的。输出序列中的帧的IPB排序的次序以解码器容易利用最小帧缓冲来对帧解压缩的方式布置。例如，IBBPBBP的输入序列可以布置成作为IPBBPBB的输出序列。然而，仍然根据传统编码技术以相同序列保留参考帧的排序。
已编码的视频序列(例如H.264)是具有标记了逻辑部分的开头和结尾的专门的比特样式的经排序的比特流。每个视频序列因此由一系列图片组(GOP)组成，每个图片组由一系列图片(帧)组成。尽管本发明是鉴于“帧”来描述的，但是应当明白，对于片段(slice)和帧的理解之间有一些重叠，并且术语“片段”常常和“帧”同义地使用。技术上，帧是可独立解码的单元并且每帧可以有一个或多个片段，或者少至每片段一个宏块，或者在两者之间的任何变化，从而，本发明一般地适用于帧和片段两者。
本发明在对给定帧进行编码来提高编码效率时通过有选择的重排序来有选择地修改参考帧的排序。当被应用于帧连续立体视频编码时，本发明于是利用帧间预测和视点间预测的组合。视点间预测是在多个视点之间执行的预测，诸如从左视点帧预测右视点帧。帧间预测从同一视点内执行，而不论是右视点还是左视点，右视点和左视点在立体序列中用插入参考帧(interposing reference frame)分开。根据本发明的多视点编码执行两种类型的预测来利用视点间冗余并选择最佳预测参考帧，最佳预测参考帧总是帧连续立体视频序列中的最接近参考帧。以下图示出对立体视频数据执行该方法的简单示例。
图2A图示出具有多个参考帧的传统帧连续立体视频。在示图中可以看到，在该情况中，最近的参考帧(右边)往回参考在前的两个参考帧。
图2B图示出其中第一和第二参考帧被重排序从而第三参考帧仅需要往回参考第二参考帧的示例。
图3示出块数据的一部分内的参考索引编码(ref_idx)的示例，其图示出宏块类型指示符(mb_type)和运动向量差(MVD)。该示图图示出将额外比特用于指示参考帧的排序。
将明白，本发明可以更容易地应用于允许对多个帧的参考的诸如H.264之类的高级编码器，以使得可以对于每个宏块来指定帧。本发明对仅参考单个参考帧的编码器的应用要求增加参考帧选择的机制以使得解码可以被适当地执行。
还应当明白，高级视频编码通常作为离线、非实时的处理被执行，但是利用足够的处理资源，本发明可以被实现为执行在线实时编码。
图4图示出根据本发明的选择性参考帧重排序的示例实施例50。在该示例实施例中，编码在步骤54-60中根据第一排序被执行，在步骤66-72中根据第二排序被执行，并且随后进行是否需要参考帧重排序的比较，从而帧在步骤78-80中被再次编码。
方法以初始条件开始于52，并且参考列表根据第一次序54被设定。在步骤56中被检测为首次通过(first pass)，帧被编码58并且统计信息被确定和保存60。通过索引(pass index)被递增62并且参考列表被重排序54。由于这不是在步骤56处检测到的首次通过(i＝0)，因此，针对第二次通过(i＝1)进行检查64并且为真，则参考列表基于来自前一帧编码的数据68被重排序66。
帧被再次编码70并且比较利用之前的统计信息被执行72来判断参考重排序是否是有益的。应当明白，该比较可以对任意期望数目的因素或因素组合执行，包括但不限于增大跳过的(在编码输出中跳过的)宏块的数目、适配成本约束、增大SNR等等。
通过(基于i＝2)分支到步骤74的处理，通过索引被再次递增62并且参考列表被再次排序，其中，比较数据76被用来判断参考列表重排序是否将被执行。参考帧重排序如果有益则在步骤78中被执行，并且帧在步骤80中被编码，并且针对帧的编码在步骤82结束。
应当明白，图4的流程图以及以上相关联的描述通过示例而非限制的方式被提供。本领域普通技术人员将明白，本发明的技术可以用来选择是否以及如何根据任意期望形式的程序运行来对参考帧重排序。应当明白，当比较用于重排序的统计信息时，可以考虑多于两个参考帧位置，而比较可以基于许多编码特征或其组合被执行。例如，比较可以被配置为以给定量化级最小化已编码视频的比特成本，或者可以关于编码/解码开销、峰值信噪比或可以关于经重排序的帧和原始次序的帧来进行比较的其它期望特征进行折中。
图5在其上部图示出在重排序之前90和重排序之后92与当前帧94有关的多个参考帧96a-96d。在图5的下部示出关于每个参考帧比较编码处理期间所参考的MB的数目的结果。在重排序之前，发现参考帧0被参考2800MB，参考帧1被参考5,484MB，参考帧2被参考1288MB，并且参考帧3被参考372MB。这与参考帧重排序之后的结果形成显著对比，在参考帧重排序之后，发现，参考帧0被参考2600MB，参考帧1被参考1644MB，参考帧2被参考412MB，并且参考帧3被参考304MB。因此，MB参考的总数从8944降低为4960，显示出开销的显著降低。
另外，跳过的宏块的数目从被重排序之前的1055提高到重排序之后的2321。将明白，跳过的MB不需要被编码，因为他们如此相似(例如，帧之间没有明显的运动、摇动或缩放)从而增大数目的跳过MB导致为编码输出生成的比特数的直接降低。应当明白，根据本发明的教导。参考帧可以按照任何期望次序被重排序，并且也支持多次重排序，例如，3，2，1，0→3，2，0，1→2，3，0，1。
图6和图7图示出从使用与H.264有关的编码的测试生成的结果。在图6的第一行上可以看到，在没有参考帧重排序的情况下，帧113的编码对于其比特预算，具有281298782的帧内成本(Icost)和239747616的预测帧(Pcost)。另外，宏块的构成包括211个帧内MB(imb)、2996个预测MB(pmb)和被跳过的393个MB(smb)。在图6的第二行上，示出在根据本发明的选择性参考帧重排序之后的针对帧113的结果。在重排序的情况中，Icost增大至390020622，而Pcost降低为134540291。在非常明显增大的2240个跳过宏块内，编码仅导致9个帧内MB(imb)、1351个预测MB(pmb)。
图7图示出在自适应场景剪切技术上执行的另一测试。在该测试中可以看到，在没有重排序的情况下，参考帧2以针对其比特预算的409160218的帧间成本(Icost)和274247403的预测帧(Pcost)被编码。另外，宏块的构成包括28个帧内MB(imb)，2814个预测MB(pmb)以及被跳过的758MB(smb)。在此情况中，可以看到，对于参考帧0(LO[0])，每帧的MB参考时544，对于帧1(LO[1])是10712，对于帧2(LO[2])是0，而对于帧(LO[3])是0。
图7的第二行图示出在根据本发明的选择性参考帧重排序之后的显示的针对帧2的结果。在重排序的情况下，Icost略微增大至533704954，而Pcost显著降低为57679346(几乎是其之前的值的五分之一)。编码导致18个帧内MB(imb)、447个预测MB(pmb)和非常显著增多的3135个跳过宏块。在此情况下，可以看到，每帧的MB参考对于参考帧0(LO[0])从544增至1292，对于帧1(LO[1])从10712显著下降至496，而帧2对于该编码情况(LO[2])和帧3(LO[3])保持为0。可以看到质量是QP:43:10，其中，片段类型是P、POC编码类型是4并且d PIC参数被设定为3。
在考虑帧间预测的额外比特开销成本时，如果假定增加每宏块两个比特来用于参考帧选择，则为2比特*8000MB/帧＝16,000比特，或2,000额外字节/帧。然而，可以容易地明白，该成本相比于必须被编码的MB的增多是很小的，如通过增多数目的跳过宏块可见。本发明的至少一个实施例针对最小化帧间预测的成本，从而节约的比特可以用于在针对已编码视频的给定比特预算的情况下提高视频的质量。
在本发明的开发中，已经认识到另外的或可替代的机制可以被用来增大帧连续立体视频的编码质量和/或效率。这些将被简要讨论并且被用作与本发明的参考帧重排序技术的比较点。
一种用于增强帧的编码的装置，用于增大所使用的参考帧的数目，从而提供增多的参考机会。应当明白，参考帧的数目受级别限制(例如，对于最大解码图片缓冲器大小(MaxDPB)，级别4.1和4.0＝12MB)。
另一种机制包括通过使用对左右已编码图像都有益的双I帧来降低质量变差。
图8和图9分别图示出响应于针对h.264编码形式的和针对索尼编码格式的参考帧的数目的结果。可以看到，在两个参考之后，基本上没有实现更多增益。将看到，对于在其上利用此的索尼编码技术，校正的PSNR逼近25，对于x.264，校正的PSNR逼近32。
图10图示出执行根据本发明一个方面的动态参考重排序的结果。曲线图中的第一迹线图示出原始次序操作，其中，PSNR从大约30增大至大约37。第二迹线图示出利用了参考帧重排序的结果，其中PSNR保持在以大约38为中心。第三迹线图示出PSNR响应于向参考帧重排序方法增加双I帧如何被平滑。
图11和图12是图示出帧113的比较的图像，在图11中图示出在没有参考帧重排序的情况下的具有23.50的PSNR的帧113，在图12中图示出利用了本发明的参考帧重排序的具有27.55的PSNR的帧113。
图13和图14是分别在图11和图12中示出图像内的包括帧内MB、前向MB、后向MB和跳过MB的宏块类型的曲线图。响应于选择性的参考帧重排序而大大增多数目的跳过MB可以在图14中被容易地辨识。
图15图示出在被配置用于对立体图像数据进行编码的电路106中接收来自左成像器102和右成像器104(或等同图像数据源)的图像数据的简单立体编码装置的示例实施例100。响应于使用与存储器110结合工作的至少一个计算机(中央)处理单元(CPU)108来在处理器108上运行来自存储器的程序，编码被执行。应当明白，在不偏离本发明的教导的情况下，编码装置可以包括任意数目的处理器以及任意期望的另外的硬件加速电路。程序执行视频编码步骤，包括选择性的参考帧重排序，并且生成已编码输出112。
在解码期间，应当明白，已编码视频内的数据指示哪个参考帧将被用于宏块中的每个。
应当明白，本发明还被用于对每帧具有多于一个的图像的视频执行预测，例如，在并排(side-by-side)和上下(top-and-bottom)成像中。在并排图像中，左右图像被包含在相同帧的左部和右部中，类似地，在上下成像中，左右图像被包含在帧的上部和下部中。应当明白，尽管相同帧连续视频中的多个视点被描述为是来自左右视点的，但是这些可以是来自任何期望的多个有利位置的。使用多视点预测，将明白，运动向量的范围应当扩大。
应当充分认识到，根据本发明配置的编码器和解码器可以用于处理帧连续立体视频，就像被用于处理传统(非立体)视频那样，因为参考帧排序仅在其提供编码益处时被选择性地执行。
从这里的描述，将明白，本发明可以体现在各种方式中，并且具有各种模式和特征，包括但不限于如下：
1.一种用于对帧连续立体视频进行编码的装置，包括：
计算机，该计算机被配置为将第一图像序列和第二图像序列编码到帧连续立体视频输出中；
存储器，该存储器耦合到所述计算机；以及
程序，所述程序被存储在所述存储器上并且可在所述计算机运行以用于执行步骤，所述步骤包括：
将图像分割成块；
响应于参考帧重排序是否会导致改进的编码的判断，对选择的参考帧重排序；以及
响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码。
2.如实施例1所述的装置，其中，所述熵编码包括使用变换、量化变换系数并且将变换编码到输出数据中来进行块的去相关。
3.如实施例1所述的装置，其中，所述程序执行包括判断场景剪切是否已经发生并且将帧设定为I类型的步骤。
4.如实施例1所述的装置，其中，所述程序执行包括使用双I帧来减小所述连续立体视频输出的质量变差的步骤。
5.如实施例1所述的装置，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
6.如实施例1所述的装置，其中，所述编码装置包括被适配为根据AVC或H.264编码标准来对视频进行编码的编码器。
7.如实施例1所述的装置，其中，在所述装置中对选择的参考帧重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目。
8.如实施例1所述的装置，其中，在所述装置中对选择的参考帧重排序减小每帧被参考的宏块的数目。
9.如实施例1所述的装置，其中，所述第一图像序列和所述第二图像序列响应于左侧成像器和右侧成像器的图像捕获而被捕获。
10.如实施例1所述的装置，其中，所述程序执行包括对有关所述连续立体视频输出内的参考帧排序的信息进行编码以允许解码器恰当地解码参考帧的步骤。
11.一种用于对帧连续立体视频进行编码的装置，包括：
计算机，该计算机被配置为将第一图像序列和第二图像序列编码到帧连续立体视频输出中；
存储器，该存储器被耦合到所述计算机；以及
程序，该程序被存储在所述存储器上并且可在所述计算机上运行以用于执行步骤，所述步骤包括：
将图像分割成块；
响应于根据跳过的宏块的数目的增大、PSNR的增大和/或比特成本约束的适配所进行的参考帧重排序是否将导致改进的编码的判断，对选择的参考帧重排序；
通过使用变换、量化变换系数并将变换编码到输出数据中所获得的不相关的块，响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码；以及
对有关所述连续立体视频输出内的参考帧排序的侧面信息进行编码以允许解码器恰当地解码参考帧。
12.如实施例11所述的装置，其中，所述程序执行包括使用双I帧来减小所述连续立体视频输出的质量变差的步骤。
13.如实施例11所述的装置，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
14.如实施例11所述的装置，其中，所述编码装置包括被适配为根据AVC或H.264编码标准来对视频进行编码的编码器。
15.如实施例11所述的装置，其中，在所述装置中对选择的参考帧重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目，并且/或减小每帧被参考的宏块的数目。
16.一种在被配置用于将第一图像序列和第二图像序列编码到帧连续立体视频输出中的视频编码器电路中对帧连续立体视频进行编码的方法，包括：
将图像分割成块；
响应于参考帧重排序是否将导致改进的编码的判断，对选择的参考帧重排序；以及
响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码；
其中，所述对选择的参考帧的重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目。
17.如实施例16所述的方法，其中，所述熵编码通过使用变换、量化变换系数并且将变换编码到输出数据中来执行块的去相关。
18.如实施例16所述的方法，还包括使用双I帧来减小所述连续立体视频输出的质量变差。
19.如实施例16所述的方法，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
20.如实施例16所述的方法，还包括对有关所述连续立体视频输出内的参考帧排序的信息进行编码以允许解码器恰当地解码参考帧。
尽管以上描述包含许多细节，但是这些不应当被理解为是限制本发明的范围的而应当被理解为仅仅提供对本发明的目前优选的实施例中的一些的说明。因此，将明白，本发明的范围充分涵盖对于本领域技术人员显而易见的其它实施例，并且本发明的范围仅由所附权利要求书相应地限定，其中，用单数来提及元素并不意图是指“一个或仅一个”，除非明确指出，否则，是指“一个或多个”。本领域技术人员已知的上述优选实施例的元素的所有结构和功能等同物被通过参考明确结合于此并且意图被权利要求书所涵盖。此外，设备或方法没有必要解决本发明所要解决的每个问题，因为其由权利要求书涵盖。此外，本公开中的元素、组件或方法都不意图用于公开，不论元素、组件或方法是否被明确记载在权利要求书中。这里的保护元素应当按照35U.S.C.112第六款的规定来理解，除非这些元素明确使用“用于……的装置”这样的短语来记叙。

Claims (20)

1.一种用于对帧连续立体视频进行编码的装置，包括：
计算机，该计算机被配置为将第一图像序列和第二图像序列编码到帧连续立体视频输出中；
存储器，该存储器耦合到所述计算机；以及
程序，所述程序被存储在所述存储器上并且可在所述计算机运行以用于执行步骤，所述步骤包括：
将图像分割成块；
响应于参考帧重排序是否会导致改进的编码的判断，对选择的参考帧重排序；以及
响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码。
2.如权利要求1所述的装置，其中，所述熵编码包括使用变换、量化变换系数并且将变换编码到输出数据中来进行块的去相关。
3.如权利要求1所述的装置，其中，所述程序执行包括判断场景剪切是否已经发生并且将帧设定为I类型的步骤。
4.如权利要求1所述的装置，其中，所述程序执行包括使用双I帧来减小所述连续立体视频输出的质量变差的步骤。
5.如权利要求1所述的装置，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
6.如权利要求1所述的装置，其中，所述编码装置包括被适配为根据AVC或H.264编码标准来对视频进行编码的编码器。
7.如权利要求1所述的装置，其中，在所述装置中对选择的参考帧重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目。
8.如权利要求1所述的装置，其中，在所述装置中对选择的参考帧重排序减小每帧被参考的宏块的数目。
9.如权利要求1所述的装置，其中，所述第一图像序列和所述第二图像序列响应于左侧成像器和右侧成像器的图像捕获而被捕获。
10.如权利要求1所述的装置，其中，所述程序执行包括对有关所述连续立体视频输出内的参考帧排序的信息进行编码以允许解码器恰当地解码参考帧的步骤。
11.一种用于对帧连续立体视频进行编码的装置，包括：
计算机，该计算机被配置为将第一图像序列和第二图像序列编码到帧连续立体视频输出中；
存储器，该存储器被耦合到所述计算机；以及
程序，该程序被存储在所述存储器上并且可在所述计算机上运行以用于执行步骤，所述步骤包括：
将图像分割成块；
响应于根据跳过的宏块的数目的增大、PSNR的增大和/或比特成本约束的适配所进行的参考帧重排序是否将导致改进的编码的判断，对选择的参考帧重排序；
通过使用变换、量化变换系数并将变换编码到输出数据中所获得的不相关的块，响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码；以及
对有关所述连续立体视频输出内的参考帧排序的侧面信息进行编码以允许解码器恰当地解码参考帧。
12.如权利要求11所述的装置，其中，所述程序执行包括使用双I帧来减小所述连续立体视频输出的质量变差的步骤。
13.如权利要求11所述的装置，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
14.如权利要求11所述的装置，其中，所述编码装置包括被适配为根据AVC或H.264编码标准来对视频进行编码的编码器。
15.如权利要求11所述的装置，其中，在所述装置中对选择的参考帧重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目，并且/或减小每帧被参考的宏块的数目。
16.一种在被配置用于将第一图像序列和第二图像序列编码到帧连续立体视频输出中的视频编码器电路中对帧连续立体视频进行编码的方法，包括：
将图像分割成块；
响应于参考帧重排序是否将导致改进的编码的判断，对选择的参考帧重排序；以及
响应于对包括重排序的参考帧的参考帧的排序，完成用于帧连续立体视频的运动预测和熵编码；
其中，所述对选择的参考帧的重排序增大被跳过并且不被编码到所述帧连续立体视频输出中的宏块的数目。
17.如权利要求16所述的方法，其中，所述熵编码通过使用变换、量化变换系数并且将变换编码到输出数据中来执行块的去相关。
18.如权利要求16所述的方法，还包括使用双I帧来减小所述连续立体视频输出的质量变差。
19.如权利要求16所述的方法，其中，帧利用重排序的参考帧和原始排序的参考帧两者被编码并且每种情况的统计信息被比较来判断在所述编码中参考帧是否应当被重排序。
20.如权利要求16所述的方法，还包括对有关所述连续立体视频输出内的参考帧排序的信息进行编码以允许解码器恰当地解码参考帧。
CN2010800476766A 2009-11-06 2010-11-02 用于帧连续立体视频编码的动态参考帧重排序 Pending CN102598673A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US25873709P 2009-11-06 2009-11-06
US61/258,737 2009-11-06
US12/906,758 2010-10-18
US12/906,758 US20110109721A1 (en) 2009-11-06 2010-10-18 Dynamic reference frame reordering for frame sequential stereoscopic video encoding
PCT/US2010/055120 WO2011059856A2 (en) 2009-11-06 2010-11-02 Dynamic reference frame reordering for frame sequential stereoscopic video encoding

Publications (1)

Publication Number Publication Date
CN102598673A true CN102598673A (zh) 2012-07-18

Family

ID=43973883

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800476766A Pending CN102598673A (zh) 2009-11-06 2010-11-02 用于帧连续立体视频编码的动态参考帧重排序

Country Status (6)

Country Link
US (1) US20110109721A1 (zh)
EP (1) EP2478710A2 (zh)
JP (1) JP2013509048A (zh)
KR (1) KR20120058616A (zh)
CN (1) CN102598673A (zh)
WO (1) WO2011059856A2 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105052140A (zh) * 2013-01-30 2015-11-11 英特尔公司 用于下一代视频的模式和参考类型数据的内容自适应熵编码
CN108229290A (zh) * 2017-07-26 2018-06-29 北京市商汤科技开发有限公司 视频物体分割方法和装置、电子设备、存储介质和程序
WO2021008470A1 (en) * 2019-07-12 2021-01-21 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8854486B2 (en) * 2004-12-17 2014-10-07 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
JP2011082683A (ja) * 2009-10-05 2011-04-21 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
RU2506712C1 (ru) * 2012-06-07 2014-02-10 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ межкадрового прогнозирования для кодирования многоракурсной видеопоследовательности
US11051026B2 (en) 2015-08-31 2021-06-29 Intel Corporation Method and system of frame re-ordering for video coding
WO2018056763A1 (ko) * 2016-09-23 2018-03-29 엘지전자(주) 템플릿 기반 가중치를 이용하여 예측을 수행하는 방법 및 장치
US10412383B2 (en) 2017-08-15 2019-09-10 Google Llc Compressing groups of video frames using reversed ordering
EP3591972A1 (en) * 2018-07-02 2020-01-08 Axis AB Method and system for encoding video with overlay
CN111901605B (zh) * 2019-05-06 2022-04-29 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070109409A1 (en) * 2004-12-17 2007-05-17 Sehoon Yea Method and System for Processing Multiview Videos for View Synthesis using Skip and Direct Modes
CN101356822A (zh) * 2006-01-10 2009-01-28 汤姆逊许可公司 用于构造可伸缩视频的参考图像列表的方法和设备
US20090190655A1 (en) * 2006-09-29 2009-07-30 Fujitsu Limited Moving picture encoding apparatus

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6111596A (en) * 1995-12-29 2000-08-29 Lucent Technologies Inc. Gain and offset correction for efficient stereoscopic coding and improved display
US6563549B1 (en) * 1998-04-03 2003-05-13 Sarnoff Corporation Method and apparatus for adaptively encoding an information stream
US6738980B2 (en) * 2001-11-15 2004-05-18 Industrial Technology Research Institute Methods and systems for video streaming with VCR functionality
WO2005022923A2 (en) * 2003-08-26 2005-03-10 Thomson Licensing S.A. Method and apparatus for minimizing number of reference pictures used for inter-coding
FI115589B (fi) * 2003-10-14 2005-05-31 Nokia Corp Redundanttien kuvien koodaaminen ja dekoodaaminen
US20060013305A1 (en) * 2004-07-14 2006-01-19 Sharp Laboratories Of America, Inc. Temporal scalable coding using AVC coding tools
US20080036854A1 (en) * 2006-08-08 2008-02-14 Texas Instruments Incorporated Method and system of communicating and rendering stereoscopic and dual-view images
ES2492923T3 (es) * 2006-10-16 2014-09-10 Nokia Corporation Sistema y procedimiento para implementar una administración eficiente de memoria intermedia decodificada en codificación de video de vistas múltiples

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070109409A1 (en) * 2004-12-17 2007-05-17 Sehoon Yea Method and System for Processing Multiview Videos for View Synthesis using Skip and Direct Modes
CN101356822A (zh) * 2006-01-10 2009-01-28 汤姆逊许可公司 用于构造可伸缩视频的参考图像列表的方法和设备
US20090190655A1 (en) * 2006-09-29 2009-07-30 Fujitsu Limited Moving picture encoding apparatus

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105052140A (zh) * 2013-01-30 2015-11-11 英特尔公司 用于下一代视频的模式和参考类型数据的内容自适应熵编码
CN105052140B (zh) * 2013-01-30 2019-01-15 英特尔公司 用于下一代视频的模式和参考类型数据的内容自适应熵编码
CN108229290A (zh) * 2017-07-26 2018-06-29 北京市商汤科技开发有限公司 视频物体分割方法和装置、电子设备、存储介质和程序
CN108229290B (zh) * 2017-07-26 2021-03-02 北京市商汤科技开发有限公司 视频物体分割方法和装置、电子设备、存储介质
US11222211B2 (en) 2017-07-26 2022-01-11 Beijing Sensetime Technology Development Co., Ltd Method and apparatus for segmenting video object, electronic device, and storage medium
WO2021008470A1 (en) * 2019-07-12 2021-01-21 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods

Also Published As

Publication number Publication date
WO2011059856A3 (en) 2011-08-18
US20110109721A1 (en) 2011-05-12
WO2011059856A2 (en) 2011-05-19
EP2478710A2 (en) 2012-07-25
JP2013509048A (ja) 2013-03-07
KR20120058616A (ko) 2012-06-07

Similar Documents

Publication Publication Date Title
US10575016B2 (en) Apparatus and method for encoding and decoding moving picture using adaptive scanning
CN102598673A (zh) 用于帧连续立体视频编码的动态参考帧重排序
JP6708716B2 (ja) ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体
US8767819B2 (en) Moving picture encoding apparatus
KR101904625B1 (ko) 비디오 코딩에서 서브-디코딩된 픽처 버퍼 (서브-dpb) 기반의 dpb 동작들을 위한 시그널링
KR100779875B1 (ko) 다-시점 코딩을 위한 참조 프레임 순서 설정 방법 및 그방법을 기록한 기록매체
AU2013403225B2 (en) Features of base color index map mode for video and image coding and decoding
JP5072996B2 (ja) 三次元ビデオ符号化に関するシステム及び方法
US8374243B2 (en) Method and apparatus for encoding and decoding based on intra prediction
US7515759B2 (en) 3D video coding using sub-sequences
US8199815B2 (en) Apparatus and method for video encoding/decoding and recording medium having recorded thereon program for executing the method
EP1713280A2 (en) Scalable video coding
EP2544451A2 (en) Method and system for digital decoding 3D stereoscopic video images
EP1156680A2 (en) Improved video coding using adaptive coding of block parameters for coded/uncoded blocks
WO2010113770A1 (ja) 画像信号復号装置、画像信号復号方法、画像信号符号化装置、画像信号符号化方法、およびプログラム
US20080273599A1 (en) Method and apparatus for encoding and decoding multi-view video data
KR20060009878A (ko) 화상들의 시퀀스들을 부호화하기 위한 방법
WO2000018136A1 (en) Region-based refresh strategy for video compression
CN105163117B (zh) 一种图像编码方法及装置
US20050089098A1 (en) Data processing apparatus and method and encoding device of same
US6556714B2 (en) Signal processing apparatus and method
KR101295158B1 (ko) 공간임의접근을 지원하는 영상 코덱 시스템과 이를구성하는 영상 부호화/복호화 장치 및 방법
KR20040086400A (ko) 비디오 이미지 처리 방법
KR100780844B1 (ko) 다시점 화상 복호화기, 다시점 화상 데이터 처리 시스템,다시점 화상 데이터 처리 방법 및 이를 수행하는프로그램을 기록한 기록매체
Yu et al. Interlaced video coding with field-based multiresolution representation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120718