CN105432086B - 处理视频信号的方法和装置 - Google Patents
处理视频信号的方法和装置 Download PDFInfo
- Publication number
- CN105432086B CN105432086B CN201480040701.6A CN201480040701A CN105432086B CN 105432086 B CN105432086 B CN 105432086B CN 201480040701 A CN201480040701 A CN 201480040701A CN 105432086 B CN105432086 B CN 105432086B
- Authority
- CN
- China
- Prior art keywords
- motion vector
- view
- current block
- corresponding blocks
- depth
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明涉及一种用于处理视频信号的方法和装置。本发明能够获得当前块的视图间运动矢量,使用视图间运动矢量获得第一对应块,识别第一对应块的预测方法,当第一对应块没有通过时间间预测被编译时获得第二对应块,获得第二对应块的时间运动矢量,通过使用第二对应块的时间运动矢量获得当前块的时间运动矢量,以及通过使用当前块的时间运动矢量解码当前块。
Description
技术领域
本发明涉及编译视频信号的方法及其装置。
背景技术
压缩编码指的是用于经由通信链路发送数字化信息或者以适于存储媒体的形式存储数字化信息的一系列信号处理技术。压缩编码的目标包含语音、视频、文本等等。特别的,用于在视频目标上执行压缩编码的技术被称为视频图像压缩。多视图视频的普遍特征是具有空间冗余、时间冗余和跨时冗余
发明内容
技术任务
本发明的目标是增加视频信号的编译效率。
技术方案
根据本发明,经由对应块的预测方法识别对应块是否通过时间间预测被编译。如果对应块通过时间间预测被编译,则使用该对应块的时间运动矢量能够获得当前块的时间运动矢量。
根据本发明,如果对应块没有通过时间间预测被编译,则能够通过修改当前块的视图间运动矢量获得与已识别的对应块不同的对应块。
从本发明获得的技术任务不限于上面提及的技术任务。并且,从下面的描述中,与本发明有关的技术领域的普通技术人员内能够清楚理解其他未提及的技术任务。
有益效果
根据本发明,虽然不存在与第一对应块相对应的时间运动矢量,但是也能够通过获得包含时间运动矢量的对应块,防止没有获得当前块的时间运动矢量的情况的发生。
从本发明获得的效果不限于上面提及的效果。并且,从下面的描述中,与本发明有关的技术领域的普通技术人员内能够清楚理解其他未提及的效果。
附图说明
图1是作为对其应用本发明的实施例的对其应用深度编译的广播接收机的内部框图。
图2是作为对其应用本发明的实施例的用于视频解码器的示意性框图。
图3是作为对其应用本发明的实施例的通过获得当前块的运动矢量解码当前块的实施例的流程图。
图4是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
图5是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
图6是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
具体实施方式
最佳模式
根据本发明,处理视频信号的方法能够包含步骤:获得当前块的视图间运动矢量,使用视图间运动矢量获得第一对应块,识别第一对应块的预测方法,如果第一对应块没有通过时间间预测被编译则获得第二对应块,获得第二对应块的时间运动矢量,使用第二对应块的时间运动矢量获得当前块的时间运动矢量,以及使用当前块的时间运动矢量解码当前块。
根据本发明,获得第二对应块的步骤能够包含步骤:修改视图间运动矢量,以及使用修改的视图间运动矢量获得第二对应块。
根据本发明,如果第一对应块通过时间间预测被编译,则该方法能够进一步包含步骤:获得第一对应块的时间运动矢量,以及使用第一对应块的时间运动矢量获得当前块的时间运动矢量。
根据本发明,能够从当前块的相邻块获得当前块的视图间运动矢量。
根据本发明,能够使用与当前块相对应的深度块的深度值获得当前块的视图间运动矢量。
发明模式
在多视图视频信号上执行压缩编码或者解码的技术考虑空间冗余、时间冗余和跨时冗余。在多视图图像的情况下,可能会执行对在两个或更多个视点捕获的多视图纹理图案的编译,以实现三维(3D)图像。并且,如果需要,可能会进一步执行关于对应于多视图纹理图案的深度数据的编译。在编译深度数据的情况下,显然能够考虑到空间冗余、时间冗余和跨时冗余执行关于深度数据的压缩编译。深度数据对应于其中表现了关于摄像机和对应像素之间距离的信息的数据。在本发明中,深度数据能够被灵活的解释为与深度相关的信息,如深度信息、深度图像、深度图片、深度序列、深度比特流等等。并且,在本人发明中,编译(coding)能够包含编码(encoding)的概念和解码(decoding)的概念,并且能够根据本发明的技术思想和技术范围被灵活的解释。
图1是作为对其应用本发明的实施例的对其应用深度编译的广播接收机的内部框图。
根据本发明的实施例,广播接收机被配置为接收无线电波广播信号并且播放图像。广播接收机能够使用接收到的深度相关信息产生3D内容。广播接收机包含调谐器100、解调/信道解码器102、传输解复用单元104、分组释放单元106、音频解码器108、视频解码器110、PSI/PSIP处理单元114、3D渲染单元116、格式化器120和显示单元122。
调谐器100选择从经由天线(未示出)输入的多个广播信号中选择的频道的广播信号,并且输出所选择的广播信号。解调/信道解码器102解调从调谐器100接收的广播信号,对于解调的信号执行纠错解码并且输出传输流(TS)。传输解复用单元104解复用传输流,将视频PES与音频PES分开,并且从传输流中提取PSI/PSIP信息。分组释放单元106从视频PES和音频PES中释放分组,并且恢复视频ES和音频ES。音频解码器108通过解码音频ES输出音频比特流。音频比特流被数字-模拟转换器(未示出)转换为模拟音频信号,被放大器(未示出)放大,并且经由扬声器(未示出)输出。视频解码器110通过解码视频ES恢复原始图像。能够基于通过PSI/PSIP处理单元114检查的分组ID(PID)执行音频解码器108和视频解码器110的解码过程。在解码过程中,视频解码器能够提取深度信息。并且,视频解码器能够提取对于产生虚拟摄像机视图的图像的必要的附加信息(例如,摄像机信息),或者对于评估被位于相对较前的物体阻挡的区域(闭塞)的必要的附加信息(例如,诸如物体外形的几何信息,物体透明度信息和色彩信息),并且向3D渲染单元116提供该信息。但是,根据本发明的不同实施例,深度信息和/或附加信息能够被传输解复用单元104彼此分离。
PSI/PSIP处理单元114从传输解复用单元104接收PSI/PSIP信息,解析该信息并且在存储器中(未示出)或者记录器中存储解析的信息。通过这样做,能够以存储的信息为基础播放广播。3D渲染单元116能够使用存储的图像、深度信息、附加信息和摄像机参数在虚拟摄像机的位置中产生色彩信息、深度信息等。
并且,3D渲染单元116使用存储的图像和深度信息对存储的图像执行3D变形,并且在虚拟摄像机的位置中产生虚拟图像。虽然本实施例将3D渲染单元116解释为以独立于视频解码器110的方式配置的模块,但是这只是实施例。3D渲染单元116能够包含在视频解码器110中。
格式化器120格式化解码过程中恢复的图像,即,真实摄像机捕获的图像,以及3D渲染单元116根据对应接收机的显示方案产生的虚拟图像,并且使得3D图像经由显示单元112被显示。在这种情况下,相应于用户命令,能够有选择的执行通过3D渲染单元116合成的合成虚拟摄像机位置的虚拟图像与深度信息,以及由格式化器120格式化的图像格式化。特别的,观看者能够通过控制遥控器(未示出)使得合成的图像没有被显示,并且可能会指明图像将被彼此合成的时间。
如前面描述中提及,虽然3D渲染单元116使用深度信息产生3D图像,但是作为不同的实施例,视频解码器110也能够使用深度信息。以下,解释了视频解码器110使用深度信息的各种实施例。
图2是作为对其应用本发明的实施例的用于视频解码器的示意性框图。
参考图2,视频解码器110能够包含熵解码单元210、反量化单元220、反变换器230、去块滤波单元240、解码图片缓存单元250、中间预测单元260和内部预测单元270。在这种情况下,实线表示色彩图片数据流,并且虚线表示深度图片数据流。虽然图2中色彩图片数据和深度图片数据以彼此分开的方式被示出,但是其可以指示分开的比特流或者仅在单一的比特流中的数据流。特别的,能够经由单一的比特流或者彼此不同的比特流发送色彩图片数据和深度图片数据。图2只示出了数据流。本发明不限于在单一的解码器中发送所有数据的情况。
首先,为了解码收到的深度比特流200,在NAL单元执行解析。在这种情况下,关于深度的各种属性信息能够被包含在NAL头区、NAL头扩展区、序列头区(例如序列参数集)、序列头扩展区、图片头区(例如,图片参数集)、图片头扩展区、片头区、片头扩展区、片数据区或者宏块区。虽然能够通过单独的编译器使用深度编译,但是如果深度编译与传统编译器兼容,则在仅深度比特流的情况下,可以更有效的增加关于深度的各种属性信息。例如,可能会在序列头区(例如,序列参数集)或者序列头扩展区增加能够识别比特流是否对应于深度流的深度识别信息。根据深度识别信息,只有当输入的比特流对应于深度编译比特流时,才能增加关于深度序列的属性信息。
解析的深度比特流200经由熵解码单元210被熵解码。从该深度比特流中提取每个宏块的系数、运动矢量等等。反量化单元220以将收到的量化值乘以规定常量的方式获得转换的系数值,并且反变换器230通过反变换该系数值恢复深度图片的深度信息。内部预测单元270使用恢复的当前深度图片的深度信息在画面中执行预测。同时,去块滤波单元240将去块滤波应用于每个编译的宏块以减少块失真现象。滤波以使得块边缘变得平滑的方式改善了解码帧的图像质量。基于边界强度和边界附近图像采样的变化(梯度)选择滤波过程。为了输出已滤波的深度图片或者使用该图片作为参考图片,在解码图片缓存单元250中存储该图片。
解码图片缓存单元250起到存储/打开之前编译的深度图片的作用,以执行画面间的预测。在这种情况下,为了在解码图片缓存单元250中存储或者打开深度图片,可以使用每个图片的frame_num(帧号)和POC(图像顺序计数)。在执行深度编译的情况下,由于在之前的编译的图片中存在与当前深度图片视图不同的视图的深度图片,因此为了利用该图片作为参考图片,可能会不仅使用frame_num和POC,而且也使用用于识别深度图片的视图的深度视图信息。
并且,解码图片缓存单元250能够使用关于深度视图的信息,以产生用于在深度图片视图间预测的参考图片列表。例如,解码图片缓存单元250能够使用深度视图参考信息。深度视图参考信息对应于被用来指示深度图片视图间依赖关系的信息。例如,深度视图参考信息可以包含深度视图的总数、深度视图识别编号、深度视图参考图片数、深度视图参考图片的深度视图识别编号等等。
为了更灵活的实现在画面间的预测,解码图片缓存单元250管理参考图片。例如,它可以使用存储器管理控制操作方法和滑动窗口方法。这旨在将参考图片的存储器与非参考图片的存储器整合至单一存储器,并且以小存储器有效的管理参考图片和非参考图片。在执行深度编译的情况下,能够以单独的指示标注深度图片,以在解码图片缓存单元中将深度图片区别于色彩图片。在标记过程中能够使用用于识别每个深度图片的信息。为了深度编译,中间预测单元260能够使用通过前述过程管理的参考图片。
参考图2,中间预测单元260能够包含运动补偿单元261、虚拟视图合成单元262和深度图片产生单元263。
运动补偿单元261使用从熵解码单元210发送的信息补偿当前块的运动。运动补偿单元261从视频信号中提取在当前块附近的块的运动矢量,并且获得当前块的运动矢量预测值。运动补偿单元261使用运动矢量预测值和从视频信号中提取的不同矢量补偿当前块的运动。能够使用单一的参考图片或者多个参考图片执行对运动的补偿。在执行深度编译的情况下,如果当前深度图片涉及不同视图的深度图片,则能够使用存储在解码图片缓存单元250中的用于在深度图片视图间预测的参考图片列表的信息执行对运动的补偿。并且,可能会使用用于识别深度图片视图的深度视图信息执行运动补偿。
并且,虚拟视图合成单元262使用邻近当前色彩图片的视图的视图的色彩图片合成虚拟视图的色彩图片。为了使用彼此相邻的视图的色彩图片或者使用优选的特定视图的色彩图片,可能会使用指示色彩图片视图的视图识别信息。在产生虚拟视图色彩图片的情况下,可能会定义指示是否产生虚拟视图色彩图片的标记信息。如果标记信息指示产生虚拟视图的色彩图片,则能够使用视图识别信息产生虚拟视图色彩图片。通过虚拟视图合成单元262获得的虚拟视图的色彩图片能够被用作参考图片。在这种情况下,显然虚拟识别信息也被分配至虚拟视图的色彩图片。
作为不同的实施例,虚拟视图合成单元262能够使用邻近当前深度图片视图的视图的深度图片合成虚拟视图的深度图片。类似的,可能会使用深度视图识别信息指示深度图片的视图。在这种情况下,能够从对应色彩图片的视图识别信息引导出深度视图识别信息。例如,对应的色彩图片能够包含与当前深度图片的图片输出顺序相同的图片输出顺序的信息,和相同的视图识别信息。
深度图片产生单元263能够使用深度编译信息产生当前深度图片。在这种情况下,深度编译信息能够包括指示摄像机和物体之间的距离的距离变量(例如,在摄像机坐标系中的Z坐标,等等),用于深度编译的宏块类型信息,深度图片中边界线识别信息,指示RBSP中的数据是否包含深度编译数据的信息,指示深度图片数据中数据的类型的信息,色彩图片数据和视差数据,等等。并且,能够使用深度编译信息预测当前深度图片。特别的,能够使用当前深度图片的邻近深度图片执行中间预测。能够使用当前图片中的解码的深度信息执行中间预测。
前述的运动补偿单元261能够从位于当前块的邻近视图的对应块中获得运动矢量预测值。在这种情况下,对应块能够被定义为位于与当前块所在的当前视图不同的视图的块。使用对应于当前块的帧间运动矢量,能够获得对应块,或者能够指定对应块的位置。在本发明中,对应块能够包含第一对应块至第六对应块。如果对应块通过时间间预测被编译,则运动补偿单元261能够获得对应块的运动矢量作为预测值。但是,如果对应块通过内部预测被编译,则不能够使用对应块的运动矢量。
因此,当对应块不具有运动矢量时,本发明提出了一种通过获得当前块的运动矢量解码当前块的方法及其装置。
图3是作为对其应用本发明的实施例的通过获得当前块的运动矢量解码当前块的实施例的流程图。
能够获得对应于当前块的第一视图运动矢量[S310]。在这种情况下,能够通过指示参考视图的参考图片中的对应块相对于当前块的运动矢量定义第一视图间运动矢量。能够使用当前块的邻近块的视图间运动矢量获得第一视图间运动矢量。或者,能够使用对应于当前块的深度块的深度值获得第一视图间运动矢量。
能够使用视图间运动矢量获得对应块[S320]。在这种情况下,对应块对应于与当前视图相邻的参考视图的参考图片中的块。对应块可以指示对应于视图间运动矢量的块。在本发明中,视图间运动矢量不仅包含在步骤S310中获得的视图间运动矢量,而且也包含以下描述的步骤S340中修改的视图间运动矢量。并且,在本发明中,对应块能够包含对应于在步骤S310中获得的第一视图间运动矢量的第一对应块,和对应于在步骤S340中修改的视图间运动矢量的第二对应块。运动补偿单元261以使得视图间运动矢量对应于当前块的方式指定并且获得对应块的位置。
能够识别对应块的预测方法[S330]。对应块的预测方法能被分为内部预测和中间预测。特别的,对应块的预测方法能够被分为内部预测、视图间预测和时间间预测。能够使用预测类型信息,对应于对应块的运动矢量信息,参考图片信息等等识别对应块的预测方法。
能够通过指示用于编译对应块的预测方法的信息定义预测类型信息。因此,能够根据由预测类型信息指示的预测方法识别对应块的预测方法。例如,如果预测类型信息指示时间间预测,则能够认识到对应块通过时间间预测被编译。
运动矢量信息能够被定义为包含至少一个选自由下述信息组成的组中的信息:关于对应块是否包含运动矢量的信息,关于对应块是否对应于视图间运动矢量的信息,和关于对应矢量是否对应于时间运动矢量的信息。例如,如果运动矢量信息指示对应块包含运动矢量并且该运动矢量对应于时间运动矢量,则能够认识到该对应块通过时间间预测被编译。
参考图片信息能够被定义为包含至少一个选自由下述信息组成的组中的信息:关于对应块是否包含参考图片的信息,关于对应图形和对应块是否在相同的视图中的信息,等等。例如,如果参考图片信息指示对应块包含参考图片并且该参考图片和该对应块在相同视图中,则能够认识到对应块通过时间间预测被编译。
如果对应块没有通过时间间预测被编译,则能够修改当前块的视图间运动矢量[S340]。如果对应块通过内部预测或者视图间预测而没有通过时间间预测被编译,则用于获得当前块的时间运动矢量的时间运动矢量可能不存在。因此,如果对应块没有通过时间间预测被编译,则可能会修改当前块的视图间运动矢量以获得不同的对应块。修改的视图间运动矢量能够被定义为第二视图间运动矢量。下面,解释修改当前块的视图间运动矢量的示例。
能够使用预定的视图间运动矢量修改信息修改当前块的视图间运动矢量。预定的视图间运动矢量修改信息被应用于当前视图的视图间运动矢量,并且被用于产生修改的视图间运动矢量。能够通过修改的视图间运动矢量和初始获得的当前时间的视图间运动矢量之间的差定义预定的视图间运动矢量修改信息。
因此,能够以获得视图间运动矢量修改信息和将视图间运动矢量修改信息应用于初始获得的当前块的视图间运动矢量的方式,获得修改的视图间运动矢量。例如,修改的视图间运动矢量可以指示当前块的初始获得的视图间运动矢量的左边或者右边。
能够使用修改的视图间运动矢量获得与首先获得的对应块的位置不同位置的对应块(以下称为第二对应块)。随后,识别第二对应块的预测方法(能够使用与步骤S330相同的方法识别对应块的预测方法)。如果第二对应块通过时间间预测被编译,则能够通过执行步骤S350获得对应块的时间运动矢量。如果第二对应块没有通过时间间预测被编译,则能够再次修改当前块的视图间运动矢量以获得进一步的不同的对应块(第N个对应块)。
直到识别通过时间间预测编译的对应块,才能够执行步骤S340。作为进一步的不同实施例,如果尝试识别通过时间间预测编译的对应块预定次数但依然没有识别通过时间间预测编译的对应块,则能够终止步骤S340的修改。
如果对应块通过时刻预测被编译,则能够获得对应块的时间运动矢量[S350]。如果对应块通过时刻预测被编译,则对应块能够包含含有时间运动矢量的运动信息。在这种情况下,时间运动矢量能够被定义为指示与对应块和不同时间的参考图片中的参考块的视图相同的视图的运动矢量。
能够使用对应块的时间运动矢量获得当前块的时间运动矢量[S360]。当前块的时间运动矢量使用对应块的时间运动矢量作为预测值,并且能够使用运动矢量残差获得当前块的时间运动矢量。或者,能够以按照原样使用对应块的时间运动矢量的方式获得当前块的时间运动矢量。在这种情况下,运动矢量残差能够被定义为原始运动矢量和运动矢量预测值之间的差值。能够从比特流中获得运动矢量残差。
能够使用当前块的时间运动矢量解码当前块[S370]。例如,通过时间运动矢量指示的参考块的像素值被获得作为预测值,并且能够使用该预测值获得当前块的像素值。
图4是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
当前块410被包含在当前视图(V1)的当前图像420中。并且,如果获得当前块的视图间运动矢量430,则能够获得通过视图间运动矢量430指示的第一对应块440。如果第一个对应块440不是使用时间运动矢量被编译的块,则能够以修改当前块的视图间运动矢量430的方式获得修改的视图间运动矢量450。并且,能够获得通过修改的视图间运动矢量450指示的第二对应块460。能够获得被用于第二对应块460的时间间预测的时间运动矢量470。能够使用获得的第二对应块的时间运动矢量470获得当前块的时间运动矢量480。
下面,通过参考图5和图6解释通过获得当前块的时间运动矢量解码当前块的进一步的不同实施例。在图5和图6的实施例中,假设存在对应于当前块的至少两个或更多个视图间运动矢量。
图5是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
根据当前块能够获得多个视图间运动矢量[S510]。对应于当前块的多个视图间运动矢量能够指示对应于当前块的彼此不同的视图间运动矢量。例如,对应于当前块的多个视图间运动矢量能够包含第三视图间运动矢量和第四视图间运动矢量。作为示例,如果使用当前块的邻近块的视图间运动矢量获得第三视图间运动矢量,则能够使用对应于当前块的深度块的深度值获得第四视图间运动矢量。作为不同的示例,如果使用对应于当前块的深度块的深度值获得第三视图间运动矢量,则能够使用当前块的邻近块的视图间运动矢量获得第四视图间运动矢量。作为进一步的不同示例,能够通过修改第三视图间运动矢量获得第四视图间运动矢量。
能够使用第三视图间运动矢量获得第三对应块[S520]。第三对应块可以对应于当前视图的邻近参考视图的参考图片中的块,这以使得第三视图间运动矢量对应于当前块的方式来指示。
能够识别第三对应块的预测方法[S530]。第三对应块的预测方法能够被分为内部预测和中间预测。特别的,对应块的预测方法能够被分为内部预测、视图间预测和时间间预测。能够使用预测类型信息,对应于对应块的运动矢量信息,参考图片信息等等识别对应块的预测方法。识别预测方法的方法与之前在步骤S340中提及的方法相同。
如果第三对应块通过时间间预测被编译,则能够获得第三对应块的时间运动矢量,并且能够使用第三对应块的时间运动矢量获得当前块的时间运动矢量[S550]。当前块的时间运动矢量使用第三对应块的时间运动矢量作为预测值,并且能够使用运动矢量残差获得当前块的时间运动矢量。或者,能够以按照原样使用第三对应块的时间运动矢量的方式获得当前块的时间运动矢量。
如果第三对应块没有通过时间间预测被编译,则能够获得第四对应块的时间运动矢量[S560]。第四对应块可以对应于当前视图的邻近参考视图的参考图片中的块,这以使得第四视图间运动矢量对应当前块的方式来指示。
能够使用第四对应块的时间运动矢量获得当前块的时间运动矢量[S570]。当前块的时间运动矢量使用第四对应块的时间运动矢量作为预测值,并且能够使用运动矢量残差获得当前块的时间运动矢量。或者,能够以按照原样使用第四对应块的时间运动矢量的方式获得当前块的时间运动矢量。
能够使用当前块的时间运动矢量解码当前块[S580]。例如,通过时间运动矢量指示的参考块的像素值被获得作为预测值,并且能够使用该预测值获得当前块的像素值。
图6是作为对其应用本发明的实施例的通过获得当前块的时间运动矢量解码当前块的实施例的流程图。
能够获得当前块的第五视图间运动矢量[S610]。第五视图间运动矢量对应于与当前块相对应的视图间运动矢量。第五视图间运动矢量能够被定义为指示参考视图的参考图片中的对应块相对于当前块的运动矢量。能够使用当前块的邻近块的视图间运动矢量获得第五视图间运动矢量。或者,能够使用对应于当前块的深度块的深度值获得第五视图间运动矢量。
能够使用第五视图间运动矢量获得第五对应块[S620]。第五对应块可以对应于当前视图的邻近参考视图的参考图片中的块,这以使得第五视图间运动矢量对应当前块的方式来指示。
能够识别第五对应块的预测方法[S630]。第五对应块的预测方法能够被分为内部预测和中间预测。特别的,对应块的预测方法能够被分为内部预测、视图间预测和时间间预测。能够使用预测类型信息,对应于对应块的运动矢量信息,参考图片信息等等识别对应块的预测方法。识别预测方法的方法与之前在步骤S340中提及的方法相同。
如果第五对应块通过时间间预测被编译,则能够获得第五对应块的时间运动矢量,并且能够使用第五对应块的时间运动矢量获得当前块的时间运动矢量[S650]。当前块的时间运动矢量使用第五对应块的时间运动矢量作为预测值,并且能够使用运动矢量残差获得当前块的时间运动矢量。或者,能够以按照原样使用第五对应块的时间运动矢量的方式获得当前块的时间运动矢量。
如果第五对应块没有通过时间间预测被编译,则能够获得当前块的第六视图间运动矢量[S660]。第六视图间运动矢量对应于与当前块相对的视图间运动矢量。能够通过指示参考视图的参考图片中的对应块相对于当前块的运动矢量定义第六视图间运动矢量。能够使用当前块的邻近块的视图间运动矢量获得第六视图间运动矢量。或者,也能够使用对应于当前块的深度块的深度值获得第六视图间运动矢量。或者,也能够通过修改第五视图间运动矢量获得第六视图间运动矢量。
能够获得第六对应块的时间运动矢量[S670]。第六对应块可以对应于当前视图的邻近参考视图的参考图片中的块,这以使得第六视图间运动矢量对应当前块的方式来指示。
能够使用第六对应块的时间运动矢量获得当前块的时间运动矢量[S680]。当前块的时间运动矢量使用第六对应块的时间运动矢量作为预测值,并且能够使用运动矢量残差获得当前块的时间运动矢量。或者,能够以按照原样使用第六对应块的时间运动矢量的方式获得当前块的时间运动矢量。
能够使用当前块的时间运动矢量解码当前块[S690]。例如,通过时间运动矢量指示的参考块的像素值被获得作为预测值,并且能够使用该预测值获得当前块的像素值。
如前面描述所提及的,采用本发明的解码/编码装置被安装在多媒体广播收发机内,诸如DMB(数字多媒体广播),并且能够被用于解码视频信号,数据信号等等。而且,多媒体广播收发机能够包含移动通信终端。
并且,能够通过在计算机内可驱动的并且存储于计算机可读的记录介质中的程序制造对其应用本发明的解码/编码方法。根据本发明包括数据结构的多媒体数据也能够被存储于计算机可读的记录介质中。计算机可读的记录介质包含计算机可读数据存储于其中的所有类型的存储装置。计算机可读的记录介质的示例包括ROM、RAM、CD-RM、磁带、软盘、光数据存储装置等等。并且,能够以载波的形式实现记录媒体(例如,经由互联网传输)。并且,通过编码方法产生的比特流能够被存储于计算机可读的记录介质中,或者能够经由有线/无线通信网络被发送。
工业实用性
本发明能够被用于编译视频信号。
Claims (8)
1.一种处理包括当前块的视频信号的方法,所述方法包含步骤:
获得所述当前块的视图间运动矢量;
使用所述当前块的视图间运动矢量获得参考视图中的第一对应块;
识别所述第一对应块的预测方法;
如果所述第一对应块不通过时间间预测被编译,则通过应用预定的视图间运动矢量修改信息到当前块的视图间运动矢量来修改所述当前块的视图间运动矢量,
其中,所述预定的视图间运动矢量修改信息由在修改的视图间运动矢量和所述当前块的视图间运动矢量之间的差所定义,以及修改的视图间运动矢量指示由所述当前块的视图间运动矢量指示的位置的权利,以及
其中,应用预定的视图间运动矢量修改信息直到由时间间预测编译的块通过修改的视图间运动矢量被识别;
使用修改的所述当前块的视图间运动矢量获得参考视图中的第二对应块;
获得所述第二对应块的时间运动矢量;
使用所述第二对应块的时间运动矢量获得所述当前块的时间运动矢量;以及
使用所述当前块的时间运动矢量解码所述当前块。
2.根据权利要求1所述的方法,进一步包含步骤:
如果所述第一对应块通过所述时间间预测被编译,则获得所述第一对应块的时间运动矢量;以及
使用所述第一对应块的时间运动矢量获得所述当前块的时间运动矢量。
3.根据权利要求1所述的方法,其中,从所述当前块的相邻块获得所述当前块的所述视图间运动矢量。
4.根据权利要求1所述的方法,其中,使用对应于所述当前块的深度块的深度值获得所述当前块的所述视图间运动矢量。
5.一种用于处理包括当前块的视频信号的装置,所述装置包括中间预测单元,所述中间预测单元被配置为:
获得所述当前块的视图间运动矢量,
使用所述当前块的视图间运动矢量获得参考视图中的第一对应块,
识别所述第一对应块的预测方法,
如果所述第一对应块没有通过时间间预测被编译,则通过应用预定的视图间运动矢量修改信息到当前块的视图间运动矢量来修改所述当前块的视图间运动矢量,
其中,预定的视图间运动矢量修改信息由在修改的视图间运动矢量和所述当前块的视图间运动矢量之间的差所定义,以及修改的视图间运动矢量指示由所述当前块的视图间运动矢量指示的位置的权利,以及
其中,应用所述预定的视图间运动矢量修改信息直到由时间间预测编译的块通过修改的视图间运动矢量被识别;
使用修改的所述当前块的视图间运动矢量获得参考视图中的第二对应块,
获得所述第二对应块的时间运动矢量,
使用所述第二对应块的时间运动矢量获得所述当前块的时间运动矢量,以及
使用所述当前块的时间运动矢量解码所述当前块。
6.根据权利要求5所述的装置,其中,如果所述第一对应块通过所述时间间预测被编译,则所述中间预测单元被配置为获得所述第一对应块的时间运动矢量,并且使用所述第一对应块的时间运动矢量获得所述当前块的时间运动矢量。
7.根据权利要求5所述的装置,其中,从所述当前块的相邻块获得所述当前块的所述视图间运动矢量。
8.根据权利要求5所述的装置,其中,使用与所述当前块相对应的深度块的深度值获得所述当前块的所述视图间运动矢量。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361856012P | 2013-07-18 | 2013-07-18 | |
US61/856,012 | 2013-07-18 | ||
PCT/KR2014/006524 WO2015009092A1 (ko) | 2013-07-18 | 2014-07-18 | 비디오 신호 처리 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105432086A CN105432086A (zh) | 2016-03-23 |
CN105432086B true CN105432086B (zh) | 2019-04-12 |
Family
ID=52346463
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480040701.6A Expired - Fee Related CN105432086B (zh) | 2013-07-18 | 2014-07-18 | 处理视频信号的方法和装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10129560B2 (zh) |
EP (1) | EP3024242A4 (zh) |
JP (1) | JP2016528808A (zh) |
KR (1) | KR101750316B1 (zh) |
CN (1) | CN105432086B (zh) |
WO (1) | WO2015009092A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10986367B2 (en) | 2016-11-04 | 2021-04-20 | Lg Electronics Inc. | Inter prediction mode-based image processing method and apparatus therefor |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ZA200805337B (en) * | 2006-01-09 | 2009-11-25 | Thomson Licensing | Method and apparatus for providing reduced resolution update mode for multiview video coding |
US20100266042A1 (en) | 2007-03-02 | 2010-10-21 | Han Suh Koo | Method and an apparatus for decoding/encoding a video signal |
EP2140687A2 (en) * | 2007-04-03 | 2010-01-06 | Gary Demos | Flowfield motion compensation for video compression |
CN101374235B (zh) | 2007-08-24 | 2012-05-02 | 大唐移动通信设备有限公司 | 视频编码中的快速块运动估计方法和装置 |
JP2012151576A (ja) * | 2011-01-18 | 2012-08-09 | Hitachi Ltd | 画像符号化方法、画像符号化装置、画像復号方法及び画像復号装置 |
KR101747434B1 (ko) * | 2011-01-20 | 2017-06-16 | 연세대학교 산학협력단 | 움직임 정보 및 변이 정보를 부호화/복호화하는 영상 처리 장치 및 방법 |
JP5747559B2 (ja) * | 2011-03-01 | 2015-07-15 | 富士通株式会社 | 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム |
KR20120118780A (ko) | 2011-04-19 | 2012-10-29 | 삼성전자주식회사 | 다시점 비디오의 움직임 벡터 부호화 방법 및 장치, 그 복호화 방법 및 장치 |
US9485517B2 (en) * | 2011-04-20 | 2016-11-01 | Qualcomm Incorporated | Motion vector prediction with motion vectors from multiple views in multi-view video coding |
KR102350988B1 (ko) | 2011-04-25 | 2022-01-13 | 엘지전자 주식회사 | 인트라 예측 방법과 이를 이용한 부호화기 및 복호화기 |
JP6039178B2 (ja) | 2011-09-15 | 2016-12-07 | シャープ株式会社 | 画像符号化装置、画像復号装置、並びにそれらの方法及びプログラム |
EP2727366B1 (en) | 2011-10-11 | 2018-10-03 | MediaTek Inc. | Method and apparatus of motion and disparity vector derivation for 3d video coding and hevc |
KR20130044189A (ko) | 2011-10-21 | 2013-05-02 | 광운대학교 산학협력단 | 다시점 비디오 부호화/복호화 방법 및 그 장치 |
EP3657796A1 (en) * | 2011-11-11 | 2020-05-27 | GE Video Compression, LLC | Efficient multi-view coding using depth-map estimate for a dependent view |
US9525861B2 (en) * | 2012-03-14 | 2016-12-20 | Qualcomm Incorporated | Disparity vector prediction in video coding |
US9503720B2 (en) * | 2012-03-16 | 2016-11-22 | Qualcomm Incorporated | Motion vector coding and bi-prediction in HEVC and its extensions |
EP2846544A4 (en) * | 2012-04-30 | 2016-03-16 | Humax Holdings Co Ltd | METHOD AND APPARATUS FOR ENCODING MULTI-VIEW IMAGES, AND METHOD AND APPARATUS FOR DECODING MULTI-VIEW IMAGES |
CN104471944B (zh) * | 2012-07-18 | 2018-01-09 | 索尼公司 | 图像处理装置和方法 |
US9538180B2 (en) * | 2012-12-17 | 2017-01-03 | Qualcomm Incorporated | Motion vector prediction in video coding |
-
2014
- 2014-07-18 WO PCT/KR2014/006524 patent/WO2015009092A1/ko active Application Filing
- 2014-07-18 JP JP2016527938A patent/JP2016528808A/ja active Pending
- 2014-07-18 EP EP14826404.7A patent/EP3024242A4/en not_active Withdrawn
- 2014-07-18 CN CN201480040701.6A patent/CN105432086B/zh not_active Expired - Fee Related
- 2014-07-18 US US14/904,638 patent/US10129560B2/en active Active
- 2014-07-18 KR KR1020167000321A patent/KR101750316B1/ko active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
US20160173903A1 (en) | 2016-06-16 |
CN105432086A (zh) | 2016-03-23 |
KR20160024908A (ko) | 2016-03-07 |
JP2016528808A (ja) | 2016-09-15 |
WO2015009092A1 (ko) | 2015-01-22 |
KR101750316B1 (ko) | 2017-06-23 |
US10129560B2 (en) | 2018-11-13 |
EP3024242A4 (en) | 2017-01-11 |
EP3024242A1 (en) | 2016-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111989925B (zh) | 基于dmvr和bdof的帧间预测方法及其设备 | |
KR101663819B1 (ko) | 정제된 깊이 맵 | |
CN104904209B (zh) | 视频信号处理方法 | |
WO2009131688A2 (en) | Inter-view skip modes with depth | |
KR101687092B1 (ko) | 비디오 인코딩/디코딩 장치, 방법 및 프로그램 | |
CN104429078A (zh) | 用于处理视频信号的方法和设备 | |
CN106105218A (zh) | 在3d视频编码中处理相机参数的方法和设备 | |
CN105432086B (zh) | 处理视频信号的方法和装置 | |
CN104969556A (zh) | 处理视频信号的方法和设备 | |
US10171836B2 (en) | Method and device for processing video signal | |
CN105393540A (zh) | 用于处理视频信号的方法和设备 | |
CN104982038B (zh) | 处理视频信号的方法和设备 | |
KR101753592B1 (ko) | 비디오 신호 처리 방법 및 장치 | |
CN105122813B (zh) | 视频信号处理方法和设备 | |
KR101783617B1 (ko) | 비디오 신호 처리 방법 및 장치 | |
KR20090116989A (ko) | 영상 부호화 방법, 복호화 방법, 영상 표시 장치 및 그기록 매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190412 Termination date: 20200718 |
|
CF01 | Termination of patent right due to non-payment of annual fee |