CN101491096A

CN101491096A - 信号处理方法及其装置

Info

Publication number: CN101491096A
Application number: CNA2007800263325A
Authority: CN
Inventors: 梁正休
Original assignee: LG Electronics Inc
Current assignee: LG Electronics Inc
Priority date: 2006-07-12
Filing date: 2007-07-12
Publication date: 2009-07-22
Anticipated expiration: 2027-07-12
Also published as: KR20090046826A; TWI344792B; US20130322536A1; US20090290643A1; US9571835B2; TWI344791B; KR101370919B1; TW200822755A; WO2008007917A1; CN101491096B; JP5021739B2; JP2009543508A; TW200826683A; WO2008007913A1; EP2052546A1; EP2052546A4

Abstract

本发明提供了一种信号处理方法，其包括：为当前块搜索在第一域上具有最高相关性的相关单元；获得该相关单元的编码信息；以及使用所述获得的编码信息预测所述当前块的关于第二域的编码信息。

Description

信号处理方法及其装置

技术领域

本发明涉及一种信号处理方法及其装置。

背景技术

压缩编/解码为一系列的信号处理技术，用于通过通信线路传输数字化信息，或者将此数字化信息储存为适合存储介质的形式。压缩编/解码的对象有音频、视频、字符等。尤其地，用于在视频上执行压缩编/解码的技术被称为视频序列压缩。通常，视频序列的特征在于包含空间冗余或时间冗余。此外，作为单个领域的，还有使用至少一或多个照相机为用户提供多个视点的3维(3D)视频处理的多视点视频序列(multi-view video sequence)。

发明内容

技术问题

因为多视点视频序列在视点之间具有高相关性，所以可通过多个视点之间的空间预测除去重叠的信息。因此，需要各种压缩技术以有效地完成多个视点之间的预测。

如果未充分地除去空间冗余和时间冗余，则会降低编码信号的压缩率。如果过量地除去空间冗余和时间冗余，则无法产生执行信号解码所需要的信息。从而，重建率会降低。

此外，在多视点视频信号中，因为视点间图像(inter-view pictures)大多数仅仅是照相机的位置彼此不同，所以视点间图像的相关性和冗余会非常高。如果视点间图像的冗余未被充分地除去或者过度地被除去，则会降低压缩率或重建率。

技术方案

本发明的一个目的在于提高信号处理的效率。

本发明的另一目的在于提供一种预测信号的编码信息的方法，可有效地处理信号。

本发明的再一目的在于提供一种预测运动信息的方法，可有效地编/解码视频信号。

有益效果

在处理信号时，当时间方向的运动矢量被赋予给当前单元时，本发明可使用时间方向的运动矢量来预测当前单元的视点方向的运动矢量。因为时间方向的运动矢量参照同一视点处不同时区上的图像，除非每个对象的深度(depth)依照时间的流逝而变化，几乎可以准确地预测时间方向的运动矢量。使用与当前单元相邻的其它单元的编码信息预测当前单元的编码信息，从而可实现更加准确的预测，从而降低对应的错误传输量。因此，可完成高效的编码。使用与相邻单元时间方向相关的参考单元的视点方向的编码信息以预测当前单元的编码信息，也可完成高效编码。

此外，即使当前单元的运动信息未被传送，也可计算与当前单元的运动信息非常类似的运动信息。从而可提高重建率。

附图说明

图1为根据本发明的视频信号解码器的概念方框图；

图2为本发明的一个实施方式的用于预测当前单元的编码信息的方法的示意图；

图3为根据本发明的一个实施方式的预测运动矢量的方法的示意图；

图4为根据本发明的一个实施方式的按照与当前块相邻的相邻块的参考图像是处于视点方向还是时间方向来预测当前块的运动矢量的方法的示意图；

图5为根据本发明的另一实施方式的使用视点间相关性预测当前块的编码信息的方法的示意图；

图6为根据本发明的一个实施方式的预测当前块的编码信息的方法的示意图；

图7为根据本发明的一个实施方式的如果时间方向的前向和后向参考块均参照视点方向的块，则选择前向参考块或者后向参考块以预测当前块的分区信息的不同示例的表格；

图8为根据本发明的一个实施方式的如果时间方向的前向与后向参考块均参照视点方向的块，则选择前向参考块或者后向参考块以预测当前块的预测方向信息的不同示例的表格；

图9为根据本发明的一个实施方式的预测当前块的视点方向的编码信息的方法的流程图；

图10为根据本发明的一个实施方式的预测当前块的编码信息的方法的示意图；以及

图11为根据本发明的一个实施方式的预测当前块的视点方向的编码信息的方法的流程图。

最佳模式

为了获得本发明的这些目的与其它优点，如同具体及广泛描述地，本发明提供一种信号处理方法，其包括为当前块搜索在第一域上具有最高相关性的相关单元；获得相关单元的编码信息；以及使用获得的编码信息预测当前块的关于第二域的编码信息。

为了进一步获得本发明的这些目的与其它优点，本发明提供一种信号处理方法，其包括：使用当前块的相邻块搜索第一域上的相关单元；获得相关单元的编码信息；以及使用获得的编码信息预测当前块的关于第二域的编码信息。

为了进一步获得本发明的这些目的与其它优点，本发明提供一种信号处理方法，其包括：提取当前块的运动跳过信息，提取当前块的同一位置块的运动信息，获得与提取的运动信息不同的域上存在的参考块的运动信息，以及根据获得的参考块的运动信息导出当前块的运动信息。

为了进一步获得本发明的这些目的与其它优点，本发明的一种信号处理方法包含以下步骤：获得第一域上的当前单元与相邻单元之间的运动信息；根据获得的运动信息获得当前单元中包含的与当前块相对应的相关块；获得第二域上的相关单元的运动信息；以及使用获得的第二域的运动信息导出对应于当前单元的第二域的运动信息。

实施本发明的模式

现在结合附图的例子对本发明的较佳具体实施方式作详细说明。可以理解的是，如上所述的本发明的一般说明和随后所述的本发明的详细说明均是具有代表性和解释性的，并且是为了提供对本发明的权利要求的进一步解释。

图1所示为根据本发明的视频信号解码器的概念方框图。

请参考图1，解码器主要包含解析单元100、熵解码单元200、反矢量化/反向变换单元300、帧内预测(intra-prediction)单元400、解块(deblocking)滤波器单元500、解码图像缓冲器单元600、帧间预测(inter-prediction)单元700等。帧间预测单元700包含IC偏移预测单元710、照明补偿单元720、运动补偿单元730等。

解析单元100通过NAL单元执行解析，以解码接收到的视频序列。通常，在解码条带头(slice header)和条带数据之前，至少一或多个序列参数集以及至少一或多个图像参数集被传送至解码器。这个例子中，各种配置信息可被包含于NAL头区域或者NAL头延伸区域中。因为多视点视频编码(MVC)为传统AVC技术的额外技术，在MVC流的情况下增加多种配置信息比无条件地增加它们更加有效。例如，用于区分MVC流出现或未出现的标志信息可被增加至NAL头区域或者NAL头延伸区域。仅仅当输入的比特流依照标志信息对应于多视点视频编码的比特流时，可为多视点视频增加配置信息。例如，配置信息可包含时间级别信息(temporal level information)、视点级别信息(viewlevel information)、视点间图像组识别信息(inter-view picture groupidentification information)、视点识别信息(view identification information)等。

解析流通过熵解码单元200被熵解码。然后，提取每一宏块的系数、运动矢量等。反矢量化/反向变换单元300用预定的常数乘以接收的量化值而得到产生的变换系数，然后通过反向变换此系数而重建像素值。帧内预测单元400使用重建的像素值对当前图像内的解码样本执行屏幕内预测(intra-screen prediction)。同时，解块滤波器单元500应用重建的像素值至每一编码宏块，以减少块失真。通过平滑块的边缘，滤波器改善解码图像的图像质量。滤波器过程的选择取决于边界强度以及此边界周围的图像样本的变化程度(gradient)。经过滤波的图像被输出或者储存于解码图像缓冲器单元600中。

解码图像缓冲器单元600的角色是储存或打开先前编码的图像以完成图像间预测(inter-picture prediction)。这个例子中，每一图像的“frame_num”和图像序号(picture order count；POC)被用于储存解码图像缓冲器单元600中的对应图像或者打开对应的图像。在MVC中，因为部份的先前编码的图像可能与当前图像的视点不同，因此为了可将这些图像作为参考图像，可使用用于识别图像的视点的视点信息连同“frame_num”和图像序号。帧间预测单元700可使用以上述方式管理的参考图像。

帧间预测单元700使用在解码图像缓冲器单元600中储存的参考图像完成图像间预测。帧间编码后的宏块可被划分为宏块分区(macroblock partition)。每一宏块分区可从一或两个参考图像中预测得出。帧间预测单元700包含IC偏移预测单元710、照明补偿单元720以及运动补偿单元730。

如果输入的比特流对应于多视点序列，因为从不同的照相机分别获得多个视点序列，由于照相机的内部及外部因素会导致出现照明差别。为了防止照明差别，照明补偿单元720执行照明补偿。执行照明补偿时，可使用标志信息，其中标志信息指示是否在视频信号的预定层上执行照明补偿。例如，可使用用于指示是否在对应条带(slice)或对应宏块上执行照明补偿的标志信息来完成照明补偿。使用标志信息执行照明补偿时，可应用于各种宏块类型(例如，帧间16×16模式、B-跳过(B-SKIP)模式、直接模式等)。

运动补偿单元730使用熵解码单元200传输的信息补偿当前块的运动。运动补偿单元730从视频信号中提取相邻于当前块的块的运动矢量，并且获得当前块的预测运动矢量值。然后，运动补偿单元730使用获得的预测运动矢量值以及从视频信号中提取的偏移矢量(offsetvector)以补偿当前块的运动。可使用单个或者多个参考图像完成这种运动补偿。在多视点视频编/解码中，如果当前图像参考另一视点上的图像的话，可使用解码图像缓冲器单元600中储存的用于视点间预测的参考图像列表的信息执行运动补偿。还可使用用于识别对应图像的视点的视点信息执行运动补偿。

直接预测模式(直接模式)为一种由完成编码后的块的运动信息预测当前块的运动信息的编码模式。因为可节省编码运动信息所需的比特数，所以这种方法改善了压缩效率。例如，时间直接模式使用时间方向的运动信息的相关性预测当前块的运动信息。当序列中包含不同的运动，且这些运动的速度固定时，时间直接模式有效。空间直接模式使用空间方向的运动信息的相关性预测当前块的运动信息。当序列中包含不同的运动，且这些运动的速度变化时，空间直接模式有效。

帧间预测图像以及帧内预测图像依照预测模式通过以上过程被选择以重建当前图像。以下描述将解释提供有效的信号处理方法的各种实施方式。

图2为根据本发明的一个实施方式的预测当前单元的编码信息的方法的示意图。

首先，本发明使用的单元的含义可包含应用至视频信号的例如块、子块、宏块、条带、图像、帧、图像组、序列等。因此，单元的含义应根据每个应用示例而被解释。此外，不仅是在应用到视频信号时，而且在被应用到其他信号时，此单元可被限制为适合对应信号的不同含义。

多视点视频序列中，每个单元可存在于第一或第二域中。例如，第一域对应时间域，而第二域对应空间域。这个例子中，各单元可存在于时间方向或空间方向(例如，视点方向等)的轴线上。因此，一些单元仅仅可获得时间方向的预测信息，或者其它单元仅仅可获得空间方向的预测信息，此外，还有一些单元可获得时间方向和空间方向的预测信息。预测时间方向的编码信息的情况下，如果参考单元存在于相同视点的不同时区之上的话，每一单元包含时间方向的运动矢量。如果参考单元存在于相同时间的不同视点的上，每一单元包含空间方向的运动矢量。这类矢量被称为差异矢量(disparity vector)。以下描述中，运动矢量包含时间方向的运动矢量的概念以及空间方向运动矢量的概念。本发明中，编码信息可包含关于运动矢量、参考索引、块类型、预测方向等信息。

根据本发明的一个实施方式，如果时间方向的运动矢量被赋予给当前单元①，则可使用时间方向的运动矢量预测当前单元①的视点方向的运动矢量。例如，可从与当前单元①具有最高相关性的单元③(例如，参考单元)中找到时间方向的运动矢量所指示的单元M③。这个例子中，如果单元M③包含视点方向的运动矢量mv③_f，可预测其为当前单元①的视点方向的运动矢量。因为时间方向的运动矢量指相同视点的不同时区上的图像，除非对象的深度随着时间的流逝变化很大，否则的话，基本就可以准确地预测视点方向的运动矢量。

同样，如果视点方向的运动矢量被给至当前单元①，可使用视点方向的运动矢量预测当前单元①的时间方向的运动矢量。例如，可从与当前单元①具有最高相关性的单元④(例如，参考单元)中找到视点方向的运动矢量所指示的单元M④。这个例子中，如果单元M④包含时间方向的运动矢量mv④’_b，可预测其为当前单元①的时间方向的运动矢量。因为视点方向的运动矢量指示不同视点的相同时区上的图像，特定对象的时间运动对每个照相机来说几乎类似。因此，大多时候可准确地预测时间方向的运动矢量。

此外，以上实施方式中，如果依照当前单元的块类型执行双向预测，显然以上解释的每个例子均可应用至前向及后向两个方向。

以上每个实施方式中，由运动矢量指示的单元(相关单元③或相关单元④)的开始位置可能与用4×4相等地划分每个单元所属的宏块而产生的4×4块的开始位置不一致。如果这样的话，找到最接近的4×4块然后为块产生运动信息，或者对与相关单元③或相关单元④相重叠的块的运动信息进行平均，以这样的方式可预测运动信息。因此，使用这种方法，可为第一域或第二域上的每个单元预测运动信息。

依照本发明的另一实施方式，可使用与当前单元相邻的单元的信息预测当前单元的运动信息。

例如，假设与当前单元①相邻的多个单元中，两个相邻单元A和B包含时间方向的运动矢量，单元C包含视点方向的运动矢量。这个例子中，如果计划预测当前单元①的时间方向的运动矢量，则相邻单元A和B的时间方向的运动矢量可被使用。如果使用之前实施方式的方法，则可使用相邻单元C的视点方向的运动矢量预测相邻单元C的时间方向的运动矢量。使用包含相邻单元C的被预测的时间方向的运动矢量的三个时间方向的运动矢量，可预测当前单元①的时间方向的运动矢量。如此，应用第一域上的运动矢量的相同方法可应用至第二域。

例如，在希望预测当前单元①的视点方向的运动矢量的情况下，可直接地使用相邻单元C的视点方向的运动矢量。而且，如果使用之前实施方式的方法，还可使用相邻单元A和B的时间方向的运动矢量预测每一视点方向的运动矢量，从而可更加准确地预测当前单元①的视点方向的运动矢量。

此外，通过应用以上方法至具有时间方向的运动矢量和视点方向的运动矢量的当前单元①的相邻单元的所有组合，可预测当前单元①的时间方向的运动矢量和视点方向的运动矢量。

在应用以上解释的方法中，为了使得用作参考单元的每个单元的块包含时间方向的运动矢量和视点方向的运动矢量，可使用以下方法。假设，将仅仅在时间方向具有预测信息的单元命名为单元T，将仅仅在视点方向具有预测信息的单元命名为单元V。这个例子中，单元T仅仅需要包含时间方向的运动矢量，而单元V仅仅需要包含视点方向的运动矢量。单元T或单元V可被帧内编码(intra-coded)。如果在单元V中当前块被帧内编码，则可使用相邻块的视点方向的运动矢量预测当前块的视点方向的运动矢量。

同样，如果在单元T中当前块被帧内编码，则可使用相邻块的时间方向的运动矢量预测时间方向的运动矢量。并且，可设定当前块的时间方向的运动矢量为预测的时间方向的运动矢量。假设一个单元具有来自时间和视点方向的预测信息，其被命名为单元T/V，每一块仅包含一个时间或视点方向的运动矢量。此外，可依照上述方式将当前块的运动矢量设定为按照参考单元预测的运动矢量。如果在单元T/V上完成帧内编码，可使用相邻块的时间方向的运动矢量和视点方向的运动矢量预测当前块的运动矢量。因此，对于应用帧内编码的单元来说，通过相邻单元执行预测的方法可采用三个相邻单元的中间值或者相邻4×4单元九个平均值的方式。

依照本发明的另一实施方式，可使用当前单元的运动矢量所指示的邻近的附近单元(approximate unit)作为当前单元的相关单元。这个例子中，可使用相关单元和附近单元之间的位置差值矢量执行更加准确的预测。

依照运动矢量的分辨率(resolution)，通过1/n像素(n＝1，2，4，8等)的分辨率找到初始相关单元的位置。这个例子中，可能无法正确地映射至正常的网格结构的单元。即，如果n>1，相关单元的像素可位于网格结构中的单元的十进制点像素的位置。依照从相关单元获得的信息，通过从初始映射的相关单元的位置移动以接近更大的网格结构的方式，可完成映射。例如，在计划预测参考索引的情况下，相关单元的正常的网格结构中的8×8块位置可被匹配。这个例子中，对于当前块的四个8×8块，对应宏块的每一8×8块的参考索引信息均可被使用。可为每一4×4块产生运动信息。

因为运动信息由4×4块单元所提供，在欲获得此信息的情况下，可匹配相关单元中的正常的4×4网格块位置。这个例子中，可获得对应4×4块的运动信息。如果执行相关单元的正常的网格结构中的16×16宏块位置的映射，可产生对应宏块的全部信息。例如，可产生块类型、参考索引、运动矢量等信息。

上面解释的从初始映射位置近似到相邻的正常结构的位置的方法包含多个实施方式。正常结构可认为是例如像素的尺度(scale)、4×4块的尺度、8×8块的尺度、16×16块的尺度等网格结构。例如，有近似到包含当前单元的左上角像素被映射到的初始位置点的单元的左上端的方法。在位于角落上的情况下，可近似到一侧单元的左上端像素。这个例子中，可选择左上端、右上端、左下端或右下端处的单元。或者，可执行与初始映射位置最接近的位置点的映射。例如，计划通过8×8块的尺度执行映射的情况下，可通过测量从每一8×8块的左上端像素位置的距离而执行到最接近的位置点的映射。

依照本发明的另一实施方式，可使用第一域单元的第二域的编码信息来预测当前单元的第二域的编码信息。这个例子中，作为编码信息，块信息可与运动信息一起被获得。预设置的表格可用于导出编码信息。例如，跳过模式(skip mode)表示在当前单元之前被编码的不同单元的信息可被用作当前单元的信息。应用跳过模式时，可使用在不同域上存在的信息。下面解释对应的实施方式的具体细节。

第一示例中，可假设时间Tb处的两个不同视点序列内的对象(或背景)之间的相对运动关系被保持同足够接近的时间Tc的几乎类似。这个例子中，时间Tb处的视点方向的编码信息和时间Tc处的视点方向的编码信息之间存在高度的相关性。完整地使用相同视点处的不同时区上的对应块的运动信息，可获得较高的编码效率。可使用指示这种方案是否被使用的运动跳过信息(motion skip information)。依照运动跳过信息，如果运动跳过模式被应用，则可从当前块的对应块中预测块类型、运动矢量、参考索引等运动信息。因此，可减少编码运动信息所需的比特数。例如，如果motion_skip_flag为0，则运动跳过模式未被应用。如果motion_skip_flag为1，则运动跳过模式被应用。运动跳过信息位于宏块层。例如，运动跳过信息位于宏块层的扩展区域，以通知是否在解码器侧从比特流中产生运动信息。

第二示例，与上面的例子一样，交换第一与第二域的方式中可使用相同的方案。尤其地，时间Tb处的视点Vb内的对象(或背景)和时间Tb处的视点Vb的相邻视点Va内的对象(或背景)很可能包含彼此类似的运动信息。这个例子中，如果相同时区上的另一视点的对应块的运动信息被产生以完整地使用，可得到较高的编码效率。指示此方案是否被使用的运动跳过信息可被使用。

针对以上解释的两种运动跳过模式，当前单元的相关单元的寻找方法可类似地被应用。以下描述中，为了方便，第一示例被命名为视点间运动跳过，而第二示例被命名为时间运动跳过。

以下解释寻找当前单元的相关单元的方法。

首先，作为相关单元，可使用在与当前单元不同的域上存在的单元中的与当前单元处于同一位置处的单元。例如，视点间运动跳过模式的例子中，不同视点处相同时区上存在的位于当前区域同一位置处的块可用作相关块。时间运动跳过模式的例子中，在不同时区上相同视点处存在的位于当前块的同一位置的块可用作相关块。或者可使用当前块的相邻块的运动信息找到相关块。之前的描述中已经加以解释。因此，一旦找到相关块，则可使用每一相关块的运动信息预测当前块的运动信息。如果相关块没有运动信息，则无法应用运动跳过模式。以上解释的相关单元的寻找方法可完整地扩展成为寻找用于更小或更大的单元的相关单元的方法。

通过组合上述两种跳过模式方案可得到多种方法的实施方式。

第一实施方式中，可分离地管理标志以识别两种类型的跳过模式中哪种被应用。例如，视点间跳过模式可表示为inter_view_motion_skip_flag，时间跳过模式可表示为temporal_motion_skip_flag。可使用语法上的两个标志比特表示上述应用出现或未出现。在试着应用两种类型的跳过模式之后选择一种较佳的模式，或者每一条带仅仅可使用两种跳过模式的其中之一。

例如，在视点间运动跳过模式的例子中，当前单元的相邻单元应该指相同视点处的不同时区上存在的单元。如果相邻单元中的任一个均无法满足这个条件，则无法应用视点间跳过模式。或者，从相邻单元的运动信息中找到视点方向的参考单元之后，如果参考单元包含时间方向的运动信息，则时间方向的运动信息可被使用。时间运动跳过模式可以类似的方式被应用。即，当前单元的相邻单元应该涉及相同时区上的不同视点处存在的单元。如果相邻单元的任一个均无法满足这个条件，则无法应用时间运动跳过模式。或者，在从相邻单元的运动信息中找到时间方向的参考单元之后，如果参考单元具有视点方向的运动信息，则视点方向的运动信息可被使用。

另一示例中，通过条带单元判定运动跳过模式，然后在使用此判定的运动跳过模式的情况中，可插入指示运动跳过模式如何被应用的信息于条带头中。例如，语法元素“motion_skip_enable”可被使用。如果“motion_skip_enable”为1，则视点间运动跳过模式被应用。如果“motion_skip_enable”为0，则时间运动跳过模式被应用。可通过“motion_skip_flag”为每一宏块表示运动跳过模式是否被应用至对应的宏块。此标志的位置对应于宏块层的延伸区域。

在第二实施方式中，如果从当前单元的相邻单元预测的参考单元存在于视点轴之上，则应用时间运动跳过模式。如果预测的参考单元存在于时间轴之上，则可应用视点间运动跳过模式。解码器侧已知这些情况。因此，一个“motion_skip_flag”就足够了。这个例子中，可依照从相邻单元来预测运动信息的方法来确定模式。例如，在解码器侧解析motion_skip_flag之后，如果运动跳过模式被应用，则可从相邻单元预测运动信息。如果预测的参考单元为相同时区上的不同视点处的单元，则可应用时间运动跳过模式。如果预测的参考单元为不同时区上的相同视点处存在的单元，则可应用视点间运动跳过模式。从相邻单元中找到相关单元的运动信息，和在空间直接预测模式中采用的方法一样，可得到参考索引和运动矢量。

第三实施方式中，仅仅可使用两种运动跳过模式的其中之一。这个例子中，仅仅需要一个“motion_skip_flag”。例如，应用视点间跳过模式时，当前单元的相邻单元应该指不同时区上的相同视点处的单元。如果相邻单元中的任一个均无法满足这个条件，则无法应用视点间运动跳过模式。从相邻单元的运动信息中找到视点方向的参考单元之后，如果参考单元具有时间方向的运动信息，则可使用该时间方向的运动信息。这种方案可类似地应用到应用时间运动跳过模式的例子中。

视点间运动跳过模式的例子中，如果相关单元的运动信息并非视点方向的运动信息，则无法应用此算法。依照当前单元与相关单元之间的时间差值或者相关单元与相关单元的参考单元之间的时间差值，使用比例公式可得到运动矢量。同样，在时间运动跳过模式的例子中，如果相关块的运动信息并非时间方向的运动信息，则无法应用以上的算法。或者，依照当前单元与相关单元之间或相关单元与相关单元的参考单元之间的视点间几何或拓扑距离，使用比例公式可导出运动矢量。例如，假设实际的照相机依照V0、V1和V2的顺序位于直线上。假设当前单元位于V1处。假设相关单元位于V0处。假设相关单元的参考单元位于V2处。这个例子中，相关块的运动矢量的各分量的大小被设定为1/2以被使用。如果给出实际照相机之间的距离，考虑其实际距离则可得到运动矢量。此外，即使照相机未处于直线上，可使用几何或拓扑距离。

通过视点识别信息可知道视点之间的区别。通过图像序号、帧号等可知道时间轴上的单元区别。多视点视频序列中，仅仅使用参考索引无法找到不同视点之间的正确单元。如果参考单元的重新排列过程出现视点之间的不同，一个视点处的参考索引指示的单元与不同视点处的相同值的参考索引所指示的单元彼此之间不对应。例如，如果由Vb和Tb处存在的宏块M①的参考索引所指示的单元对应于Vb和Tc处存在的单元③，则视点Va处的同样参考索引对应于Va和Ta处存在的单元⑤。因此，产生相关单元的运动信息时，至少需要图像序号、帧号与/或视点识别信息其中之一以替代参考索引。通过比较当前单元的参考列表上的参考单元的图像序号、帧号与/或视点识别信息的至少其中之一，最终可找到同样的参考。

此外，上述方式导出的运动矢量被用作预测值，且找到实际的运动矢量。因此，对应的差值被编码以使用。这个例子中，能够找到更加准确的位置。

图3所示为根据本发明的一个实施方式的预测运动矢量的方法。

编码器通过使用当前块的相邻块的运动信息预测当前块的运动信息，然后传输实际运动矢量和预测运动矢量之间的差值。同样，解码器判断当前宏块所参照的图像的参考图像号是否等于相邻块涉及的图像的参考图像号，然后得到预测的运动矢量值。例如，如果相邻块中存在一个具有与当前宏块相同的参考图像号的块，则对该相邻块的运动矢量不进行改变地使用。其它例子中，则使用相邻块的运动矢量的中间值。

多视点视频编码中，参考图像可存在于视点轴和时间轴之上。由于这个特征，如果当前宏块的参考图像号与相邻块的参考图像号不同，则对应的运动矢量彼此之间很可能不相关。如果这样的话，预测的运动矢量值的准确性大大被降低。因此，本发明的实施方式提出一种使用视点间的相关性的新的运动矢量预测方法。

例如，视点之间产生的运动矢量可能依赖于各对象的深度。如果序列的深度没有很大的空间变化，并且如果序列的运动随着时间轴的变化不严重，则每一宏块的位置处的深度变化也不大。这个例子中，深度表示能够指示视点间差异的信息。此外，因为全局运动矢量(globalmotion vector)的影响基本上存在于照相机之间，无论深度如何略微变化，如果全局矢量比深度变化足够地大，则使用全局运动矢量比使用时间方向的运动矢量可能更加有效。

这个例子中，全局运动矢量表示可共同地应用至预定区域的运动矢量。例如，如果运动矢量对应于部份区域(例如，宏块、块、像素等)，全局运动矢量(或全局差异矢量)为与包含部份区域的整个区域相对应的运动矢量。例如，整个区域对应于一个条带、一个图像或者整个序列。整个区域可能对应于图像、背景或者预定区域内的至少一个对象。全局运动矢量可能为一个像素单元、1/4像素单元、4×4单元、8×8单元或者宏块单元的值。

依照本发明的实施方式，可使用同一位置块(co-located block)的视点间运动信息预测当前块的运动矢量。这个例子中，同一位置块表示存在于相同图像内的当前块的相邻块，或者包含于不同的图像中的位于与当前块相同位置的块。例如，不同视点处的不同图像的情况下同一位置块为空间上的同一位置块，或者相同视点的不同图像的情况下同一位置块为时间上的同一位置块。

多视点视频编码结构中，在提供以预定的时间间隔仅在视点方向进行预测的图像的方式中，可实现随机访问(random access)。因此，如果用于预测运动信息的两个图像仅仅在视点方向被解码，则可应用新的运动矢量预测方法到在这两个图像之间暂时存在的图像。例如，仅仅可从用于视点方向预测的图像中获得视点方向的运动矢量。获得的矢量可被储存为4×4块单元。如果在仅完成视点方向预测的情况下照明差值比较大，则会频繁发生帧内预测(intra-prediction)编码。这个例子中，运动矢量可被设定为0。然而，如果由于照明差别过大而频繁执行帧内预测编码，则产生很多具有视点方向的运动矢量的未知信息的宏块。为了加以补偿，在帧内预测的例子中，可使用相邻块的运动矢量计算虚拟的视点间的运动矢量。帧内预测所编码的块的运动矢量可被设定为虚拟的视点间运动矢量。

从两个解码图像中获得视点间运动信息之后，可编码两个图像之间存在的分层的B图像(pictures-B)。这个例子中，两个解码图像可为锚图像。这个例子中，锚图像表示仅仅参考相同时区上的帧中的条带而进行编码的图像。例如，锚图像表示参考不同视点的帧而不参考当前视点的帧的编码图像。

如果相邻块不包含视点间的运动矢量，使用解码图像中的同一位置的4×4块的视点间运动矢量的平均值，可预测每一分区的视点间运动矢量。相同的方式可被应用至相邻块包含视点间运动矢量和时间运动矢量的例子中。例如，可使用公式1和公式2预测当前块的运动矢量。

[公式1]

\frac{Σ_{i = 0}^{M} Σ_{j = 0}^{N} ({mv}_{0, x} [i] [j] + {mv}_{1, x} [i] [j]) + MN}{2 MN}

[公式2]

\frac{Σ_{i = 0}^{M} Σ_{j = 0}^{N} ({mv}_{0, y} [i] [j] + {mv}_{1, y} [i] [j]) + MN}{2 MN}

这个例子中，“M”表示每一分区的水平块的大小，“N”表示每一分区的垂直块的大小。“mv0”和“mv1”分别表示解码图像中的前向和后向参考图像的运动矢量。例如，每一“mv0”和“mv1”表示锚图像的视点间运动矢量或者锚图像的全局运动矢量。

尽管相邻块分别包含视点间参考图像，但是可从预测的视点间运动矢量的中间值或平均值中得到新预测的运动矢量值。

如果在当前块之上完成时间方向的预测编码或者帧内预测编码，则无法知道当前块的视点间的运动信息。因此，依照本发明另一实施方式，通过以下方法预测视点间的运动矢量。

第一方法中，可使用时间或视点方向中当前图像的之前参考图像和之后参考图像的同一位置块。例如，4×4块的视点间的运动矢量被平均以使用。

第二方法中，可使用时间方向的运动矢量所指示的块的视点间运动矢量。这样找到一个相同对象，并且使用此对象的运动。因此，虽然运动较大，但是此对象的深度没有改变，可更加准确地预测视点间运动矢量。这个例子中，因为使用时间方向的运动矢量找到的对应块的位置并非准确地与4×4块单元相符合，所以最接近的4×4块的运动信息被使用，或者应用了重叠于对应块的区域的比率的权重的运动信息可被使用。以下结合图4解释这些方法的详细实施方式。

图4为根据本发明的一个实施方式的按照与当前块相邻的相邻块的参考图像是处于视点方向还是时间方向来预测当前块的运动矢量的方法的示意图。

如果相邻块的每一参考图像号不同于当前块的参考图像号，0或者其它的预测方法可被使用。例如，图4(a)表示每一相邻块参照视点方向图像，并且当前块参照时间方向图像。这个例子中，当前块的预测运动矢量值可被设定为0。图4(b)表示每一相邻参考时间方向图像，而当前块参考视点方向图像。这个例子中，对于当前块的预测运动矢量值，可应用图2或图3解释的运动矢量预测方法，或者当前块的预测运动矢量值可被设定为0。

另一例子中，相邻块中的两个均参考当前块的相同方向的图像。例如，图4(c)表示在当前块参考时间方向图像时，两个相邻块参考时间方向图像并且剩余的一个相邻块参考视点方向图像。这个例子中，参考时间方向图像的两个相邻块的运动矢量被平均，以待用作当前块的预测运动矢量值。图4(d)表示在当前块参考视点方向图像时，两个相邻块参考视点方向图像，并且剩余的一个相邻块参考时间方向图像。这个例子中，涉及视点方向图像的两个相邻块的运动矢量被平均，以用作当前块的预测运动矢量值。图2或图3解释的运动矢量预测方法可应用至该参考时间方向图像的相邻块。从对应获得的运动矢量和两个相邻块的运动矢量中得到中间值或权重平均值，以待被用作当前块的预测运动矢量值。

此外，在图2或图3中解释的预测方法可由块单元应用至图4(a)至图4(d)。

图5所示为本发明另一实施方式的使用视点间相关性预测当前块的编码信息的方法。

在当前块的运动矢量的预测方法中，通过找到与当前块不同视点处存在的对应块，可使用对应块的编码信息预测当前块的编码信息。首先，以下解释与当前块不同视点处存在的对应块的寻找方法。

例如，对应块可能为由当前块的视点方向的运动矢量所指示的块。这个例子中，视点方向的运动矢量为表示视点间差异矢量或全局运动矢量。图3的描述中解释了全局运动矢量的含义。全局运动矢量表示相同时刻的相邻视点的对应宏块的位置。请参考图5，图像A和B存在于时间Ta，图像C和D存在于时间Tcurr，而图像E和F存在于时间Tb。这个例子中，时间Ta或Tb的图像A、B、E和F可能为锚图像，而时间Tcur处的图像C和D为非锚图像。图像A、C和E存在于相同视点Vn处，而图像B、D和F存在于相同视点Vm处。图像C为待解码的图像。图像D的对应宏块(macroblock；MB)为当前块(当前宏块)的视点方向的全局运动矢量GDVcurr所指示的块。通过当前图像和当前图像的视点相邻的视点图像之间的宏块单元，可得到全局运动矢量。这个例子中，通过指示视点间参考关系的信息，可知道相邻视点的信息。

指示视点间参考关系(view dependency)的信息为指示哪种结构被用于预测视点间序列的信息。这个可从视频信号的数据区域中被得到。例如，此信息可从序列参数集区域中被得到。使用参考图像的数目和参考图像的视点信息可得到视点间的参考信息，例如，获得总视点的数目。然后，根据总视点的数目可得到区别每一视点的视点信息。此外，可为每一视点的参考方向获得参考图像的数目。依照参考图像的数目，可获得每一参考图像的视点信息。依照这种方式，可获得视点间参考信息。依照锚图像和非锚图像的情况，分别获得视点间的参考信息。其可被使用锚图像识别信息观察到，锚图像识别信息指示当前NAL中的编码条带是否为锚图像。

依照锚图像识别信息，获得全局运动矢量的方法也随之变化。例如，如果当前图像为锚图像，则可从接收的比特流中得到全局运动矢量。如果当前图像为非锚图像，可从锚图像中得到全局运动矢量。

这个例子中，指示时间距离的信息连同锚图像的全局运动矢量可被使用。例如，参考图5，假设图像A的全局运动矢量被命名为GDVa，图像E的全局运动矢量被命名为GDVb，使用图像A和E(锚图像)的全局运动矢量和时间距离信息可获得当前图像C(非锚图像)的全局运动矢量。例如，时间距离信息包含POC(图像序号)，其指示图像输出序列。因此，使用公式3可导出当前图像的全局运动矢量。

[公式3]

{GDV}_{cur} = {GDV}_{A} + [\frac{T_{cur} - T_{A}}{T_{B} - T_{A}} \times ({GDV}_{B} - GD V_{A})]

因此，由得到的当前图像的全局运动矢量所指示的块可被视为对应块，以预测当前块的编码信息。

对应块的所有运动信息和模式信息可被用于预测当前块的编码信息。编码信息可包含编码当前块所需要的各种信息，例如运动信息、照明补偿信息、权重预测信息等。如果运动跳过模式被应用至当前宏块，以代替当前块的编码运动信息，不同视点处的之前编码的图像的运动信息可完整地被用作当前块的运动信息。这个例子中，运动跳过模式包含根据相邻视点处的对应块的运动信息获得当前块的运动信息的例子。例如，如果运动跳过模式被应用至当前宏块，则对应块的所有运动信息例如宏块类型、参考索引、运动矢量等可完整地被用作当前宏块的运动信息。然而，运动跳过模式不可应用到以下例子中。例如，当前图像为与已知编码解码器兼容的参考视点的图像，或者当前图像为锚图像。此外，运动跳过模式可应用至相邻视点处存在对应块的例子中，并且按照帧间预测模式被编码。如果运动跳过模式被应用，依照视点间参考信息，优先使用参考图像List0的运动信息。必要时可使用参考图像List1的运动信息。

图6为根据本发明的一个实施方式的预测当前块的编码信息的方法。

使用视点方向中编码信息相关性可更加准确地预测编码信息。当前图像的编码信息与从时间方向获得的之前参考图像和之后参考图像的编码信息具有极大的相关性。因此，使用这些特征可得到更准确的预测。以下结合图6解释详细实施方式。

图6中，水平轴指示时间轴(...，T1，T2，T3，...)。为了便于解释，参考当前图像，之前时间的图像的方向被命名为前向，之后时间的图像的方向被命名为后向。同样，垂直轴表示视点轴(...，V1，V2，V3，...)。为了便于解释，参考当前图像，之前图像V1处的图像方向被命名为前向，之后视点V3处的图像的方向被命名为后向。

依照本发明的一个实施方式，使用从时间方向的当前图像的之前和之后图像中获得的运动信息，可预测视点方向的运动信息。这种方法也可使用模式信息。例如，通过定义运动信息预测模式，可通知运动信息预测模式将被应用。预测当前块的视点方向的运动信息时，可使用同一位置块，同一位置块所处的位置与视点方向的当前块之前或之后的图像中的当前块的位置相同。从当前块的相邻块中预测得到时间方向的运动矢量之后，能使用由所预测的运动矢量所指示的块。

例如，如果应用运动信息预测模式，可完整地使用视点方向中的当前图像的之前图像R1和之后图像R2中的当前块的同一位置(或者时间方向的运动矢量所指示的位置)的块的运动信息。例如，预测方向信息、分区信息以及运动矢量值可被完整地使用。这个例子中，指示该模式将被应用的标志信息和块文字偏移值可被编码。依照另一实施方式，预测方向信息和分区信息可被完整地使用。同一位置块的运动矢量值mv1、mv2、mv3和mv4可被用作当前块的预测运动矢量值mvpL0和mvpL1。因此，如果运动信息预测模式被应用，指示对应模式的标志信息将被应用的标志信息，运动矢量偏移值和块文字偏移值可被编码。

依照另一实施方式，之前实施方式中的当前块的预测方向信息和分区信息不使用同一位置块(或者时间方向的运动矢量所指示的位置处的块)的预测方向信息和分区信息。例如，同一位置块的运动矢量值可用作当前块的预测运动矢量值，从当前块的相邻块中可得到当前块的预测方向信息和分区信息。这个例子中，可编码预测方向信息和分区信息。

依照另一实施方式，如果当前图像仅仅可包含视点方向的单个参考图像，下面解释预测当前图像的编码信息的方法。例如，无论是否多个参考图像，如果可得到当前图像的视点方向的前向预测，或者可得到视点方向的前向预测，下面解释预测当前图像的编码信息的方法。尤其地，参考当前图像，假设目前有时间方向的前向和后向参考图像R1和R2。将考察当前块的对应位置处块的编码信息。并考察参考图像的对应位置处的块是否具有视点方向的参考图像或者时间方向的参考图像。

如果参考图像的对应位置的所有块仅仅包含时间方向的参考图像，则当前块不使用参考图像的对应位置处的块的编码信息。如果参考图像的对应位置处的块的仅仅包含视点方向的参考图像，则可使用对应块的编码信息预测当前块的视点方向编码信息。

如果时间方向的前向和后向参考图像R1和R2参照视点方向的图像，仅仅从两个参考图像的其中之一可预测当前块的编码信息。依照预设的约定，可判断使用两个参考图像中的哪一个的编码信息。例如，识别两个参考图像的分区信息之后，可使用具有较小分区的参考图像的分区信息。尤其，可根据分区尺寸中较小尺寸的参考图像的分区信息，预测当前块的分区信息。以下结合图7解释详细实施方式。

图7为根据本发明的一个实施方式的如果时间方向的前向与后向参考块均参考视点方向的块，则选择前向参考块或者后向参考块以预测当前块的分区信息(partition information)的不同示例的表格。

如果多个参考块的分区信息之一被选择以预测当前块的分区信息，可使用多个参考块的分区信息中包含较小分区的参考块的分区信息。如果时间方向的前向和后向参考块的分区信息包含相同的分区信息，可预测当前块的分区信息为相同信息。然而，如果时间方向的前向和后向参考块的分区信息包含不同的信息，则可做出选择。

例如，如果时间方向的前向参考块的分区信息指示直接模式，并且如果后向参考块的分区信息为16×16、16×8、8×16或者8×8，则当前块的分区信息可被预测为16×16、16×8、8×16或者8×8。如果时间方向的前向参考块的分区信息指示16×8，并且如果后向参考块的分区信息指示8×8，则可使用子划分的分区8×8作为当前块的分区信息预测值。如果时间方向的前向参考块的分区信息指示8×16，并且后向参考块的分区信息指示16×8，可使用子划分的分区8×8作为当前块的分区信息预测值。

图7所示的分区信息的示例可能无法应用至没有计划使用对应位置的块的编码信息的例子。这个例子中，仅仅使用对应块的视点方向编码信息预测当前块的视点方向编码信息。例如，如果参考块的分区信息和当前块的分区信息匹配，则可完整地使用对应块的视点方向运动信息。这个例子中，如果存在前向和后向参考块，通过平均两个方向的对应分区的视点方向的运动矢量或者应用时间轴上距离比的权重，可找到视点方向的预测运动矢量值。或者，依照既定的约定可使用一个方向的信息。

如果参考块的分区信息和当前块的分区信息不匹配，块内的运动矢量被平均以使用。例如，在当前块的分区信息为16×16块时，如果参考块被预测为16×8，则可使用两个16×8参考块的平均运动矢量作为16×16当前块的预测运动矢量值。如果参考块存在于前向和后向两个方向中，如之前所述的该方法，通过平均各方向的参考块内的分区的运动矢量，找到预测的运动矢量之后，两个方向的对应时间方向的运动矢量被平均，或者权重通过时间轴上的距离比被应用以找到最终预测的运动矢量值。或者，可依照既定约定使用一个方向的矢量。

即使时间方向的前向和后向参考图像R1和R2两者均参照视点方向的图像，和以上的例子一样，可以只使用参考图像R1或参考图像R2。例如，使用前向参考图像R1或者后向参考图像R2预测当前块的编码信息。

标志信息可被用来指示是否两个参考图像R1和R2都被使用，或只有前向参考图像或者后向参考图像被使用。

依照另一实施方式，在当前图像可包含多个视点方向的参考图像时，解释这种当前图像的编码信息的预测方法。例如，当视点方向的前向预测、后向预测以及双向预测可用时，解释当前图像的编码信息的预测方法。这个例子中，如前面实施方式的先前描述一样，可应用相同的方式。

依照另一实施方式，如果时间方向的前向和后向参考图像R1和R2均参照视点方向的图像，仅仅从两个参考图像之一的编码信息可预测当前块的编码信息。依照预设信息可判断使用两个参考块中的哪一个的编码信息。例如，预测编码信息的预测方向信息时，获得两个参考图像的预测方向信息，然后使用可包含它们的参考图像的预测方向信息。结合图8解释详细实施方式。

图8所示为根据本发明的一个实施方式的如果时间方向的前向与后向参考块均参照视点方向的块，则选择前向参考块或者后向参考块以预测当前块的预测方向信息的不同示例的表格。

如果选择多个参考块的预测方向信息之一，以预测当前块的预测方向信息，可使用多个参考块的预测方向信息中的可包含其全体的参考图像的预测方向信息。如果时间方向的前向或后向参考块的预测方向信息包含相同的预测方向信息，当前块的预测方向信息可被预测为相同的信息。然而，在包含不同信息的情况下可做出选择。例如，如果时间方向的前向参考块的预测方向信息指示视点方向的前向，并且如果视点方向的后向参考块的预测方向信息指示视点方向的后向，则可双向地预测当前块的预测方向信息。如果视点方向的前向参考块的预测方向信息指示视点方向的双向，并且如果时间方向的后向参考块的预测方向信息指示视点方向的前向或者后向，则包含它们的双向可被预测为当前块的预测方向信息。

图9所示为根据本发明的一个实施方式的预测当前块的视点方向的编码信息的方法的流程图。

首先，从视频信号中获得视点间编码信息预测模式信息(步骤910)。如果根据预测模式信息视点间编码信息预测被应用的话，则检查以当前块为基准的时间方向的参考块是否具有视点方向的编码信息(步骤920)。这个例子中，参考块可为同一位置块，位于当前块的位置相同的位置处。或者，参考块为从当前块的相邻块中导出的运动矢量所指示的块。这个例子中，如果参考块不具有视点方向的编码信息，当前块可使用当前块的相邻块的编码信息预测当前块的编码信息(步骤930)。然而，如果参考块包含视点方向的编码信息，可应用多种方法。例如，检查全体参考块中存在多少个具有视点方向的编码信息的参考块(步骤940)。如果全体参考块中的多个参考块包含视点方向的编码信息，可使用上述参考块的编码信息预测当前块的编码信息。例如，依照预设约定，可使用参考块的分区信息或预测方向信息作为当前块的分区信息或者预测方向信息(步骤950)。如果参考块之一包含视点方向的编码信息，则检查该参考块是否包含时间方向的编码信息(步骤960)。作为检查的结果，如果参考块不包含时间方向的编码信息，则可使用参考块的视点方向的编码信息作为当前块的编码信息的预测值(步骤970)。如果此信息不可用，则使用与当前块相邻的块的编码信息获得当前块的预测编码信息值(步骤930)。

图10为根据本发明的一个实施方式的预测当前块的编码信息的方法的示意图。

多视点视频编码时，可使用当前块的相邻块的编码信息以预测当前块的编码信息。例如，编码信息可包含运动信息、预测方向信息、分区信息、照明补偿信息等。然而，相邻块可指不同时区上相同视点的图像或者相同时间上不同视点的图像。相邻块也可指不同时区上不同视点的图像。因此，依照当前块所指图像处于视点方向或者时间方向，选择性地使用相邻块的编码信息的方法更加有效。因为视点方向的编码信息和时间方向的编码信息直接的相关性较低，完成视点间预测的情况下可设计一种不同的编码信息的预测方法。以下结合图10解释详细实施方式。

图10中，水平轴指示时间轴(...，T1，T2，T3，...)。为了便于解释，参考当前图像(T2)，之前时间T1的图像方向被命名为前向，而之后时间T3的图像方向被命名为后向方向。同样，垂直轴指示视点轴(...，V1，V2，V3，...)。为了便于解释，参考当前图像，之前视点V1的图像方向被命名为前向，而之后视点V3的图像方向被命名为后向。

依照本发明的一个实施方式，相邻于当前块的块A、B、C和D的编码信息可用于预测当前块的视点方向的编码信息。例如，如果相邻块参照视点方向的图像，则可使用相邻块的编码信息作为当前块的预测编码信息值。如果相邻块参照时间方向的图像，则可设定相邻块的编码信息为0。如果在相邻块上完成预测帧内编码，相邻块的编码信息不被使用或者设定为0。

依照本发明的另一实施方式，如果相邻于当前块的块B参照时间方向的图像R3，可使用时间方向的参考图像R3的编码信息预测当前块的视点方向的编码信息。例如，首先找到相邻于当前块的块B的运动矢量所指示的位置的块。这个例子中，和图10所示的参考图像R3一样，相邻块B的运动矢量所指示的位置的块未必准确地符合参考图像R3的正常网格内的块之一。即，可能和多个块相重叠。这个例子中，各种实施方式可被应用以预测当前块的视点方向的编码信息。

依照一个实施方式，可检查相邻块B的运动矢量所指示的位置处的块的重叠的块中，是否存在参考视点方向的图像的块。例如，如果相邻块B的运动矢量所指示的位置处的块的重叠块中不存在参考视点方向的图像的一个块(例如时间方向中被预测的块的示例，帧内预测的块示例)，则不使用重叠块。当重叠块被完全被排除之后，如果无法预测当前块的视点方向的运动矢量，则相邻块B不被使用以预测当前块的运动矢量或者被设定为0。

然而，如果在重叠块中至少存在一个参考视点方向的图像的块，可使用包含最大重叠区域的块的编码信息。例如，可使用包含最大重叠区域的块的视点方向的运动矢量值作为当前块的视点方向的预测运动矢量值。或者，如果至少两个块最广泛地重叠于相同区域，可找到最大重叠块的平均值或中间值。或者，可找到由应用权重至各重叠区域所产生的值。或者，可使用简单地平均各重叠区域的方法。如果在用于重叠区域的块上完成双向预测编码，以上解释的方法可应用于使用各视点方向的编码信息。

因为多视点视频编码图像能够在时间方向上实现双向预测，以下详细的算法可应用至每一示例。

首先，参照时间方向的图像，如果预测方向为前向或者为后向，以上解释的方法可完整地被应用。然而，在时间方向的双向预测例子中，可确认使用时间方向的运动矢量所找到的块是否参照视点方向的图像。如果两个方向的其中之一仅参照视点方向的图像，可使用仅仅参照视点方向的图像的块的编码信息。然而，如果双向参考块均参照视点方向的图像，可使用双向参考块的编码信息。这个例子中，使用双向参考块的编码信息时，可完整地应用以上解释。例如，可使用参照视点方向的图像的块的编码信息，其中该块处于与由当前块的相邻块的运动矢量所指示的位置处的块相重叠的块之中。使用方法的细节可依照以上解释的相同方式被应用。

各种实施方式可被提供以作为参考视点方向的图像的双向参考块的示例。例如，参考块对应视点方向的前向预测、后向预测或者双向预测。同样，以上解释可完整地应用至每一示例。

如果获得双向参考块的编码信息，编码信息被平均以用作当前块的相邻块的视点方向的编码信息。这个例子中，如果时间前向参考块在时间距离上不同于时间后向参考块，可应用权重(weight)。

通过以上解释的方法为当前块的每一相邻块预测视点方向的编码信息之后，可预测当前块的编码信息。或者在通过已知技术方法预测当前块的编码信息的过程中，可通过以上解释的方法预测视点方向的编码信息。

首先，可检查当前块的相邻块是否参考视点方向的图像(步骤1110)。这个例子中，可依照预定的顺序检查相邻块。例如，首先检查当前块的左侧的块(A)，检查当前块上部的块(B)，检查上部块(B)的右侧块(C)，然后检查上部块(B)的左侧块(D)。或者，在首先检查上部块(B)之后，按顺序检查当前块的左侧块(A)、上部块(B)的右侧块(C)以及上部块(B)的左侧块(D)。如果依照检查程序此相邻块参考视点方向的图像，可使用相邻块的视点方向的编码信息预测当前块的编码信息。然而，如果相邻块不参考视点方向的图像，例如如果相邻块被帧内编码，则相邻块的编码信息不被使用或者被设定为0(步骤1130)。

依照另一实施方式，在相邻块不参考视点方向的图像的情况下，如果相邻块参考时间方向的图像，可在时间方向搜索参考块(步骤1140)。并且可检查在其中搜索的参考块重叠于时间方向的参考图像的块的部分。这个例子中，可检查重叠块中是否存在一个块，参考视点方向的图像(步骤1150)。如果重叠块不参照视点方向的图像，则重叠块的编码信息不被使用或者被设定为0(步骤1160)。然而如果重叠块参照视点方向的图像，可使用重叠块的视点方向的编码信息来预测当前块的编码信息(步骤1170)。这个例子中，如果在重叠块中存在至少一个块，其参考视点方向的图像，则可使用包含最大重叠区域的块的编码信息。例如，可使用包含最大重叠区域的块的视点方向的运动矢量值作为当前块的视点方向的预测运动矢量值。如果至少两个区域最大范围地重叠于相同的区域，可找到最大范围重叠的块的平均值或中位值。或者，一种应用权重至每一重叠区域的方法可被应用。如果在重叠区域中的使用的块上执行视点方向的双向预测编码，则图10解释的方法可使用每一视点方向的编码信息。

如前所述，本发明的一种信号处理装置提供用于数字多媒体广播(digita1 multimedia broadcasting；DMB)的多媒体广播发送/接收装置，然后用于解码视频信号、数据信号等。多媒体广播发送/接收装置可包含移动通信终端。

本发明的信号处理方法可储存于计算机可读记录介质中，准备作为计算机中执行的程序。本发明的包含数据结果的多媒体信息可被储存于计算机可读取记录介质中。此外，计算机可读取介质包含计算机系统可读取的用于储存信息的各种储存装置。计算机可读取介质包含只读存储器、随机储存内存、光盘只读存储器、磁带、软磁盘、光学数据储存装置等，并且还包含用载波形式(例如，通过因特网传输)实现的介质。编码方法产生的比特流储存于计算机可读取介质中或者通过有线/无线通信网络被传输。

虽然本发明以前述的较佳实施方式做了如上公开并说明，然而本领域的技术人员应当意识到在不脱离本发明的精神和范围的情况下，所作的改变与变化均属于本发明之内。因此，本发明可覆盖在所附的权利要求及其等同物中所揭示的本发明的范围中的改变与变化。

工业实用性

因此，视频信号数据的压缩编码技术考虑空间重复、时间重复、可伸缩(scalable)重复以及视点间重复。压缩编码过程中，通过考虑视点间存在的互相重复可完成压缩编码。考虑视点间重复的压缩编码只是本发明的一种实施方式。本发明的技术构想可应用至时间重复、可伸缩重复等。

Claims

1.一种信号处理方法，其包括：

为当前块搜索在第一域上具有最高相关性的相关单元；

获得所述相关单元的编码信息；以及

使用所述获得的编码信息预测所述当前块的关于第二域的编码信息。

2.如权利要求1所述的信号处理方法，其中，使用指示所述第一域上的所述当前块和所述相关单元之间的相邻性的信息判断所述相关性，并且其中所述指示相邻性的信息包含参考索引、指示显示顺序的信息、指示解码顺序的信息或者视点识别信息。

3.如权利要求2所述的信号处理方法，其中，所述相关单元为处于所述第一域上的单元中的与所述当前块位于同一位置的块。

4.如权利要求2所述的信号处理方法，其中，所述相关单元为通过应用全局运动矢量至所述第一域或第二域上的单元而得到的块。

5.如权利要求4所述的信号处理方法，其中，所述第一及第二域分别对应于时间域以及空间域。

6.如权利要求5所述的信号处理方法，其中，从锚单元推导出所述第一域上的单元的全局运动矢量。

7.一种信号处理方法，其包括：

使用当前块的相邻块搜索第一域上的相关单元；

获得所述相关单元的编码信息；以及

8.如权利要求7所述的信号处理方法，其中，所述相关单元为处于所述第一域上的单元中的与所述当前块位于同一位置的块。

9.如权利要求7所述的信号处理方法，其中，所述相关单元为通过应用全局运动矢量至所述第一域或第二域上的单元而得到的块。

10.如权利要求9所述的信号处理方法，其中，所述第一及第二域分别对应于时间域以及空间域。

11.如权利要求10所述的信号处理方法，其中，从锚单元推导出所述第一域上的单元的全局运动矢量。

12.如权利要求1或7所述的信号处理方法，其中，所述编码信息包含运动矢量、参考索引、块类型、预测方向信息或残差信息。