CN102271255A - 双拼立体视频编码的运动估计方法和装置 - Google Patents

双拼立体视频编码的运动估计方法和装置 Download PDF

Info

Publication number
CN102271255A
CN102271255A CN2011102274479A CN201110227447A CN102271255A CN 102271255 A CN102271255 A CN 102271255A CN 2011102274479 A CN2011102274479 A CN 2011102274479A CN 201110227447 A CN201110227447 A CN 201110227447A CN 102271255 A CN102271255 A CN 102271255A
Authority
CN
China
Prior art keywords
sequence
sampling
video sequence
sampled images
current block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011102274479A
Other languages
English (en)
Other versions
CN102271255B (zh
Inventor
季向阳
马茜
戴琼海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN 201110227447 priority Critical patent/CN102271255B/zh
Publication of CN102271255A publication Critical patent/CN102271255A/zh
Application granted granted Critical
Publication of CN102271255B publication Critical patent/CN102271255B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提出一种双拼立体视频编码的运动估计方法和装置,该方法包括:对第一路和第二路视频序列下采样,对下采样后的第一路和第二路下采样图像序列拼接;选择当前块a1,并获取初始匹配块集合;对a1和初始匹配块集合上采样,并寻找与a1对应的当前块a2;计算a2与每一个匹配块的差值和能量,并获得与所述当前块a2之间的运动矢量;计算a1与匹配块b2之间的差值块,并编码;和对重构双拼视频序列进行拆分,并对拆分后的图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列。应用本发明实施例方法编码更为精确,编码压缩性能更为好。该装置结构简单,易于实现。

Description

双拼立体视频编码的运动估计方法和装置
技术领域
本发明涉及计算机视觉和视频处理技术领域,特别涉及一种双拼立体视频编码的运动估计方法和装置。
背景技术
近年来,随着三维立体应用的普及,对立体图像和视频的研究开始成为热点。由于原始图像和视频的数据量非常大,而带宽不可无限制的增大,为了利用有限的网络带宽完成大数据量的图像传输,有效的视频压缩技术开始成为国内外研究的热点之一。
对于双拼的立体视频编码,现有技术仍保持单视图的编码模式,还没有规范的有针对性的统一编码模式。目前标准中普遍采用单视点编码的框架进行处理,实际并没有考虑信号源双拼属性的特点,由此,导致双拼立体视频编码的性能很低。
而运动估计方法的好坏直接影响到双拼立体视频编码的性能。运动估计是根据先前编码的一帧或者多帧(参考帧)数据产生当前帧的一个模型。运动估计方法和运动补偿算法的好坏直接关系着匹配过程中残差帧的能量,在可以接受的计算复杂度内,其能量越低,匹配越精确。
发明内容
本发明旨在至少解决上述技术问题之一。
为此,本发明的一个目的在于提出一种双拼立体视频编码的运动估计方法,该方法弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,从而在保证编码效率的同时,提高编码的精度,进而提高编码的压缩性能。
本发明的另一目的在于提出一种双拼立体视频编码的运动估计装置,该装置弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,从而在保证编码效率的同时,提高编码的精度,进而提高编码的压缩性能。另外,该装置结构简单,易于实现。
为了实现上述目的,本发明第一方面实施例提出的双拼立体视频编码的运动估计方法,包括以下步骤:提供双目立体视频序列的第一路视频序列和第二路视频序列;分别对所述第一路视频序列和所述第二路视频序列进行下采样以得到第一路下采样图像序列和第二路下采样图像序列,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列;在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合;对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2;分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量;计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列;以及对所述重构双拼视频序列进行拆分以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列,其中,所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。
根据本发明实施例的双拼立体视频编码的运动估计方法,考虑到解码部分的上采样重构过程对运动匹配精确性的影响,因此在编码部分中,在进行运动估计匹配时,采用与本发明所用到的下采样方式相反的上采样方式进行对图像或者当前块和匹配块的上采样,从而弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,进而在保证编码效率的同时,提高编码的精度以及编码的压缩性能。
另外,根据本发明的双拼立体视频编码的运动估计方法还可以具有如下附加的技术特征:
在本发明的一个实施例中,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接的方式包括:第一路下采样图像序列和所述第二路下采样图像序列的左右拼接方式、上下拼接方式和交错拼接方式的其中之一。
在本发明的一个实施例中,通过左右拼接方式对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接。
在本发明的一个实施例中,所述第一路视频序列为所述双目立体视频序列的左视图序列,所述第二路视频序列为所述双目立体视频序列的右视图序列。
在本发明的一个实施例中,所述下采样采用奇数列下采样、偶数列下采样、奇数行下采样和偶数行下采样方式的其中之一。
在本发明的一个实施例中,所述下采样采用奇数列下采样的方式。
在本发明的一个实施例中,所述双目编码序列的编码格式为H.261、H.263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一。
根据本发明第二方面实施例的双拼立体视频编码的运动估计装置,包括:图像获取模块,用于提供双目立体视频序列的第一路视频序列和第二路视频序列;下采样模块,所述下采样模块用于分别对所述第一路视频序列和所述第二路视频序列进行下采样以得到第一路下采样图像序列和第二路下采样图像序列,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列;匹配块获取模块,用于在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合;上采样模块,用于对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2;第一计算模块,用于分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量;第二计算模块,用于计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列;以及重构模块,用于对所述重构双拼视频序列进行拆分以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列,其中,所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。
根据本发明实施例的双拼立体视频编码的运动估计装置,考虑到解码部分的上采样重构过程对运动匹配精确性的影响,因此在编码部分中,在进行运动估计匹配时,采用与本发明所用到的下采样方式相反的上采样方式进行对图像或者当前块和匹配块的上采样,从而弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,进而在保证编码效率的同时,提高编码的精度以及编码的压缩性能。另外,该装置结构简单,易于实现。
另外,根据本发明的双拼立体视频编码的运动估计装置还可以具有如下附加的技术特征:
在本发明的一个实施例中,所述下采样模块对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接的方式包括:第一路下采样图像序列和所述第二路下采样图像序列的左右拼接方式、上下拼接方式和交错拼接方式的其中之一。
在本发明的一个实施例中,通过左右拼接方式对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接。
在本发明的一个实施例中,所述图像获取模块获取的所述第一路视频序列为所述双目立体视频序列的左视图序列,所述第二路视频序列为所述双目立体视频序列的右视图序列。
在本发明的一个实施例中,所述下采样采用奇数列下采样、偶数列下采样、奇数行下采样和偶数行下采样方式的其中之一。
在本发明的一个实施例中,所述下采样采用奇数列下采样的方式。
在本发明的一个实施例中,所述重构模块对所述双目编码序列的编码采用如下格式:H.261、H.263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例的双拼立体视频编码的运动估计方法的流程图;
图2为本发明实施例的双拼立体视频的拼接示意图;
图3为本发明实施例的图1中步骤S103的详细流程示意图;
图4为本发明实施例的图1中步骤S104的详细流程示意图;和
图5为本发明实施例的双拼立体视频编码的运动估计装置的结构图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
以下结合附图1-4首先描述根据本发明实施例的双拼立体视频编码的运动估计方法。
如图1所示,根据本发明实施例的双拼立体视频编码的运动估计方法,包括如下步骤:
步骤S101,提供双目立体视频序列的第一路视频序列和第二路视频序列。
在本发明的一个实施例中,结合图1,所述第一路视频序列为所述双目立体视频序列的左视图,相应地,第二路视频序列为右视图。
步骤S102,拼接。
具体而言,包括:
(1)分别对所述第一路视频序列(左视图)和所述第二路视频序列(右视图)进行下采样以得到第一路下采样图像序列和第二路下采样图像序列。
如图2所示,作为一个具体的示例,可以分别对第一路视频序列(左视图)和所述第二路视频序列(右视图)进行隔列并对奇数列进行下采样。当然,本发明的实施例并不限于此,例如还可以采用偶数列下采样、奇数行下采样和偶数行下采样,这些均不失一般性,因此,都可以作为对本发明后续处理的前提,在本发明的以下示例中,下采样均指对奇数列的下采样。
(2)对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列。
再次结合图2,本发明实施例中采用对第一路下采样图像序列和第二路下采样图像序列进行左右拼接的方式进行拼接。但是,本发明的实施例并不限于此并不限于此,例如还可以通过上下拼接方式、行交错或者列交错的方式对第一路下采样图像序列和第二路下采样图像序列进行拼接,无论何种拼接方式,均可采用本发明后续处理方式进行处理,因此,本发明对于何种拼接方式并没有限制。
步骤S103,对拼接得到的双拼立体视频序列进行编码。对全部差值块和所述全部运动矢量进行编码以得到编码序列。
具体地,结合图3,包括如下步骤:
(1)更新当前块。例如在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合。
(2)更新匹配块,例如对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2。
(3)利用当前块a2与匹配块b2计算最佳匹配位置,获得运动矢量。更为具体地,分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量。
(4)从当前块a1中减去最佳匹配位置的上采样前匹配块得到差值块。也就是说计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块。
(5)编码运动矢量和差值块。通过迭代获得全部差值块和所述全部运动矢量,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列。
这样,通过上述步骤,可以将双目立体视频序列编码为符合H.261、H.263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一格式的码流。
步骤S104,拆分。
结合图4,具体而言,对所述重构双拼视频序列进行拆分以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列。
对于编码后的码流,当被传送到播放端或者解码端后,首先需要对该码流进行解码,将该码流解码为双拼的立体视频序列形式,接着采用上述实施例中的与拼接方式相对应的拆分方式将该双拼的立体视频拆分为两路视频序列(尚未进行上采样),接着对拆分的两路视频进行上采样,以还原为最终的第一路视频序列和第二路视频序列。这样,最终对本发明方法的码流实现解码。
需理解,上述实施例中所提及的上采样、下采样、拆分和拼接的解释如下:
所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。而下采样和拼接已经在前述实施例中进行解释,为了减少冗余,对上采样和拆分的含义不做赘述。
根据本发明实施例的双拼立体视频编码的运动估计方法,考虑到解码部分的上采样重构过程对运动匹配精确性的影响,因此在编码部分中,在进行运动估计匹配时,采用与本发明所用到的下采样方式相反的上采样方式进行对图像或者当前块和匹配块的上采样,从而弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,进而在保证编码效率的同时,提高编码的精度以及编码的压缩性能。
以下结合图5描述根据本发明实施例的双拼立体视频编码的运动估计装置。
如图5所示,根据本发明实施例的双拼立体视频编码的运动估计装置500,包括:图像获取模块510、下采样模块520、匹配块获取模块530、上采样模块540、第一计算模块550、第二计算模块560以及重构模块570。
以下对每个功能模块的功能进行详细描述。具体地:
图像获取模块510用于提供双目立体视频序列的第一路视频序列和第二路视频序列。在本发明的一个实施例中,结合图1,所述第一路视频序列为所述双目立体视频序列的左视图,相应地,第二路视频序列为右视图。
所述下采样模块520用于分别对所述第一路视频序列和所述第二路视频序列进行下采样以得到第一路下采样图像序列和第二路下采样图像序列,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列。
更为具体地,包括(1)分别对所述第一路视频序列(左视图)和所述第二路视频序列(右视图)进行下采样以得到第一路下采样图像序列和第二路下采样图像序列。作为一个具体的示例,可以分别对第一路视频序列(左视图)和所述第二路视频序列(右视图)进行隔列并对奇数列进行下采样。当然,本发明的实施例并不限于此,例如还可以采用偶数列下采样、奇数行下采样和偶数行下采样,这些均不失一般性,因此,都可以作为对本发明后续处理的前提,在本发明的以下示例中,下采样均指对奇数列的下采样。
(2)对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列。本发明实施例中采用对第一路下采样图像序列和第二路下采样图像序列进行左右拼接的方式进行拼接。但是,本发明的实施例并不限于此并不限于此,例如还可以通过上下拼接方式、行交错或者列交错的方式对第一路下采样图像序列和第二路下采样图像序列进行拼接,无论何种拼接方式,均可采用本发明后续处理方式进行处理,因此,本发明对于何种拼接方式并没有限制。
匹配块获取模块530用于在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合。
上采样模块540用于对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2。
第一计算模块550用于分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量。
第二计算模块560用于计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列。
重构模块570用于对所述重构双拼视频序列进行拆分以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列。
这样,通过上述功能模块,可以将双目立体视频序列编码为符合H.261、H.263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一格式的码流。并能够实现对上述实施例中得到的码流进行解码。
需理解,上述实施例中所提及的上采样、下采样、拆分和拼接的解释如下:
所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。而下采样和拼接已经在前述实施例中进行解释,为了减少冗余,对上采样和拆分的含义不做赘述。
根据本发明实施例的双拼立体视频编码的运动估计装置,考虑到解码部分的上采样重构过程对运动匹配精确性的影响,因此在编码部分中,在进行运动估计匹配时,采用与本发明所用到的下采样方式相反的上采样方式进行对图像或者当前块和匹配块的上采样,从而弥补了拼接格式的双目视频序列在进行编码时,其初始阶段的下采样过程以及后期处理的上采样重构过程对视频编码性能的影响,进而在保证编码效率的同时,提高编码的精度以及编码的压缩性能。另外,该装置结构简单,易于实现。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同限定。

Claims (14)

1.一种双拼立体视频编码的运动估计方法,其特征在于,包括以下步骤:
提供双目立体视频序列的第一路视频序列和第二路视频序列;
分别对所述第一路视频序列和所述第二路视频序列进行下采样以得到第一路下采样图像序列和第二路下采样图像序列,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列;
在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合;
对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2;
分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量;
计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列;
对所述重构双拼视频序列进行拆分以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列,
其中,所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。
2.根据权利要求1所述的运动估计方法,其特征在于,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接的方式包括:
第一路下采样图像序列和所述第二路下采样图像序列的左右拼接方式、上下拼接方式和交错拼接方式的其中之一。
3.根据权利要求2所述的运动估计方法,其特征在于,通过左右拼接方式对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接。
4.根据权利要求1所述的运动估计方法,其特征在于,所述第一路视频序列为所述双目立体视频序列的左视图序列,所述第二路视频序列为所述双目立体视频序列的右视图序列。
5.根据权利要求1所述的运动估计方法,其特征在于,所述下采样采用奇数列下采样、偶数列下采样、奇数行下采样和偶数行下采样方式的其中之一。
6.根据权利要求5所述的运动估计方法,其特征在于,所述下采样采用奇数列下采样的方式。
7.根据权利要求1-6任一项所述的运动估计方法,其特征在于,所述双目编码序列的编码格式为H.261、H263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一。
8.一种双拼立体视频编码的运动估计装置,其特征在于,包括:
图像获取模块,用于提供双目立体视频序列的第一路视频序列和第二路视频序列;
下采样模块,所述下采样模块用于分别对所述第一路视频序列和所述第二路视频序列进行下采样以得到第一路下采样图像序列和第二路下采样图像序列,对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接以得到双拼立体视频序列;
匹配块获取模块,用于在所述双拼立体视频序列的当前帧图像上选择当前块a1,并获取所述当前块a1在所述双拼立体视频序列中预设的参考帧图像上的初始匹配块集合;
上采样模块,用于对所述当前块a1和所述初始匹配块集合中每个初始匹配块进行上采样,并在所述第一路视频序列或第二路视频序列的相应帧图像上寻找与所述上采样后的当前块a1对应的当前块a2;
第一计算模块,用于分别计算所述当前块a2与所述初始匹配块集合中上采样后的每一个匹配块的差值和能量,并获得全部能量中最小的一个能量对应的上采样后的匹配块b2与所述当前块a2之间的运动矢量;
第二计算模块,用于计算所述当前块a1与所述匹配块b2相关联的初始匹配块之间的差值块,并对全部差值块和所述全部运动矢量进行编码以得到重构双拼视频序列;以及
重构模块,用于对所述重构双拼视频序列进行拆分,以得到第三路下采样图像序列和第四路下采样图像序列,并对所述第三路下采样图像序列和所述第四路下采样图像序列进行上采样,以得到与所述第一路视频序列和所述第二路视频序列对应的重构双目视频序列,
其中,所述上采样为所述下采样的逆向采样,所述拆分为与所述拼接相反。
9.根据权利要求8所述的运动估计装置,其特征在于,所述下采样模块对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接的方式包括:
第一路下采样图像序列和所述第二路下采样图像序列的左右拼接方式、上下拼接方式和交错拼接方式的其中之一。
10.根据权利要求9所述的运动估计装置,其特征在于,通过左右拼接方式对所述第一路下采样图像序列和所述第二路下采样图像序列进行拼接。
11.根据权利要求8所述的运动估计装置,其特征在于,所述图像获取模块获取的所述第一路视频序列为所述双目立体视频序列的左视图序列,所述第二路视频序列为所述双目立体视频序列的右视图序列。
12.根据权利要求8所述的运动估计装置,其特征在于,所述下采样采用奇数列下采样、偶数列下采样、奇数行下采样和偶数行下采样方式的其中之一。
13.根据权利要求12所述的运动估计装置,其特征在于,所述下采样采用奇数列下采样的方式。
14.根据权利要求8-13任一项所述的运动估计装置,其特征在于,所述重构模块对所述双目编码序列的编码采用如下格式:
H.261、H.263、H.264、MPEG-1、MPEG-2、MPEG-4的其中之一。
CN 201110227447 2011-08-09 2011-08-09 双拼立体视频编码的运动估计方法和装置 Active CN102271255B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201110227447 CN102271255B (zh) 2011-08-09 2011-08-09 双拼立体视频编码的运动估计方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201110227447 CN102271255B (zh) 2011-08-09 2011-08-09 双拼立体视频编码的运动估计方法和装置

Publications (2)

Publication Number Publication Date
CN102271255A true CN102271255A (zh) 2011-12-07
CN102271255B CN102271255B (zh) 2013-01-16

Family

ID=45053397

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201110227447 Active CN102271255B (zh) 2011-08-09 2011-08-09 双拼立体视频编码的运动估计方法和装置

Country Status (1)

Country Link
CN (1) CN102271255B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103428520A (zh) * 2013-08-16 2013-12-04 深圳市鑫航世电子科技有限公司 一种3d图像合成方法和系统
CN106412554A (zh) * 2016-09-22 2017-02-15 北京搜狐新媒体信息技术有限公司 一种编码方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1684105A (zh) * 2004-04-13 2005-10-19 清华大学 大规模三维场景多视点激光扫描数据自动配准方法
CN101141642A (zh) * 2006-09-05 2008-03-12 索尼株式会社 信息处理装置及方法
CN102137259A (zh) * 2011-04-13 2011-07-27 清华大学 双路立体视频的编码方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1684105A (zh) * 2004-04-13 2005-10-19 清华大学 大规模三维场景多视点激光扫描数据自动配准方法
CN101141642A (zh) * 2006-09-05 2008-03-12 索尼株式会社 信息处理装置及方法
CN102137259A (zh) * 2011-04-13 2011-07-27 清华大学 双路立体视频的编码方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
安平,张兆杨,刘苏醒: "交互式立体显示中基于图像拼合的视点合成", 《电子器件》, vol. 31, no. 1, 28 February 2008 (2008-02-28), pages 285 - 289 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103428520A (zh) * 2013-08-16 2013-12-04 深圳市鑫航世电子科技有限公司 一种3d图像合成方法和系统
CN106412554A (zh) * 2016-09-22 2017-02-15 北京搜狐新媒体信息技术有限公司 一种编码方法及装置
CN106412554B (zh) * 2016-09-22 2018-05-18 北京搜狐新媒体信息技术有限公司 一种编码方法及装置

Also Published As

Publication number Publication date
CN102271255B (zh) 2013-01-16

Similar Documents

Publication Publication Date Title
EP3349464B1 (en) Multi-view signal codec
KR100523052B1 (ko) 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법
US5619256A (en) Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
CN103108187B (zh) 一种三维视频的编码方法、解码方法、编码器和解码器
CN107318027B (zh) 图像编码/解码方法、图像编码/解码装置、以及图像编码/解码程序
CN101072356B (zh) 一种运动矢量预测方法
US20120249750A1 (en) Stereo-image quality and disparity/depth indications
CN104247427A (zh) 使用分区编码的有效预测
CN103503460A (zh) 视频译码中的运动向量预测
KR100738867B1 (ko) 다시점 동영상 부호화/복호화 시스템의 부호화 방법 및시점간 보정 변이 추정 방법
CN102497551A (zh) 动态图像编码装置及方法、动态图像解码装置及方法
CN102291579B (zh) 一种快速的多目立体视频分形压缩与解压缩方法
CN102308583B (zh) 对多视角图像进行编码和解码的设备和方法
CN101668205A (zh) 基于残差宏块自适应下采样立体视频压缩编码方法
US20100002764A1 (en) Method For Encoding An Extended-Channel Video Data Subset Of A Stereoscopic Video Data Set, And A Stereo Video Encoding Apparatus For Implementing The Same
CN102685532A (zh) 自由视点四维空间视频编码系统的编码方法
CN102271270A (zh) 一种双目立体视频拼接方法及拼接装置
CN103098475B (zh) 图像编码方法和装置、图像解码方法和装置
Chen et al. LSVC: A learning-based stereo video compression framework
ITTO20121073A1 (it) Apparato e metodo per la generazione e la ricostruzione di un flusso video
CN102137259B (zh) 双路立体视频的编码方法及装置
CN102316323B (zh) 一种快速的双目立体视频分形压缩与解压缩方法
CN113850718A (zh) 一种基于帧间特征对齐的视频同步时空超分方法
CN102271255B (zh) 双拼立体视频编码的运动估计方法和装置
EP1950974A1 (en) Dynamic image encoding device, dynamic image decoding device, dynamic image encoding method, dynamic image decoding method, dynamic image encoding program, and dynamic image decoding program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant