CN103905825B - 视频图像的运动补偿方法和装置 - Google Patents

视频图像的运动补偿方法和装置 Download PDF

Info

Publication number
CN103905825B
CN103905825B CN201210580243.8A CN201210580243A CN103905825B CN 103905825 B CN103905825 B CN 103905825B CN 201210580243 A CN201210580243 A CN 201210580243A CN 103905825 B CN103905825 B CN 103905825B
Authority
CN
China
Prior art keywords
video
frame
motion vector
estimation
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210580243.8A
Other languages
English (en)
Other versions
CN103905825A (zh
Inventor
屈振华
龙显军
陈珣
万军
马涛
孙健
梅平
贺征
李屹寰
白冰
桂烜
江洪
陈宇华
郭英
尹梅
钟远晖
余冬苹
张海涛
林涛
许捷翰
刘豪
叶文超
梁铮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN201210580243.8A priority Critical patent/CN103905825B/zh
Publication of CN103905825A publication Critical patent/CN103905825A/zh
Application granted granted Critical
Publication of CN103905825B publication Critical patent/CN103905825B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种视频图像的运动补偿方法和装置,涉及视频图像处理领域。该方法包括:从接收的视频流中解码得到当前欲显示的视频帧及其下一个视频帧;根据下一个视频帧的帧类型以及解码得到的当前欲显示的视频帧的运动矢量信息和下一个视频帧的运动矢量信息,估计当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量;根据估计的运动矢量,对当前欲显示的视频帧以及下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧。本发明直接根据视频解码时产生的运动矢量来估计帧间的运动矢量,并且根据估计的运动矢量进行运动补偿,可以避免重新计算运动矢量的巨大运算量,有利于软硬件的实时实现。

Description

视频图像的运动补偿方法和装置
技术领域
本发明涉及视频图像处理领域,特别涉及一种视频图像的运动补偿方法和装置。
背景技术
目前,嵌入式设备,如手机、平板电脑等,在进行实时视频通信时,受限于软硬件的计算能力有限,对于部分常用编码格式,如h.263、h.264等,通常只能支持单向预测的编码形式,即视频流中只包含关键帧(简称I帧)和前向预测帧(简称P帧)。一个典型的视频帧发送的顺序为:I→P→P→…→P→I→P→P→P…。单向预测误差会随P帧的增加而越来越强。当下一个I帧到达时,最后一个P帧与I帧间存在明显的图像质量差异,从而令视频的视觉质量明显降低。
利用多帧视频的时间平均可以一定程度消除帧间的视觉差异,从而减弱这种现象,但副作用是如果帧间存在相对运动,则会产生运动模糊。一种改进方式是先进行帧间运动补偿,然后再进行帧间平均。
现有一种基于图像块的运动补偿技术,该技术根据前一帧中的图像块,在后一帧中查找相似度最高的图像块作为其对应块,并以两者间的位移矢量作为运动矢量。由于相似图像块的查找过程包含多个图像块间的两两比对,计算量通常较大,不利于对视频进行实时增强。
发明内容
本发明实施例所要解决的一个技术问题是:解决基于图像块的运动补偿技术计算量较大,不利于对视频进行实时增强的问题。
本发明实施例的一个方面提供了一种视频图像的运动补偿方法,包括:从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息;从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将所述下一个视频帧缓存,如果所述下一个视频帧为前向预测帧,保存解码得到的所述下一个视频帧的运动矢量信息;根据所述下一个视频帧的帧类型以及解码得到的所述当前欲显示的视频帧的运动矢量信息和所述下一个视频帧的运动矢量信息,估计所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量;根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧。
对于从接收的视频流中解码得到的视频帧的运动矢量信息,如果视频帧为动态图像专家组MPEG格式,则视频帧的每个宏块对应一个运动矢量,如果视频帧为H.264格式,则视频帧的每个子宏块对应一个运动矢量。
所述估计所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量具体包括:如果所述下一个视频帧为前向预测帧,则将所述下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量。
所述估计所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量具体包括:如果所述下一个视频帧为关键帧,则所述当前欲显示的视频帧和所述关键帧的下一个视频帧均为前向预测帧,将所述当前欲显示的视频帧的运动矢量与所述关键帧之后的前向预测帧的运动矢量的平均作为所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量。
根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加具体包括:根据所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对所述当前欲显示的视频帧进行运动补偿;将补偿后的所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。
本发明实施例的另一个方面提供了一种视频图像的运动补偿装置,包括:解码单元,用于从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息;从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将所述下一个视频帧缓存,如果所述下一个视频帧为前向预测帧,保存解码得到的所述下一个视频帧的运动矢量信息;运动矢量估计单元,用于根据所述下一个视频帧的帧类型以及解码得到的所述当前欲显示的视频帧的运动矢量信息和所述下一个视频帧的运动矢量信息,估计所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量;叠加显示单元,用于根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧。
在解码单元中,对于从接收的视频流中解码得到的视频帧的运动矢量信息,如果视频帧为动态图像专家组MPEG格式,则视频帧的每个宏块对应一个运动矢量,如果视频帧为H.264格式,则视频帧的每个子宏块对应一个运动矢量。
所述运动矢量估计单元,具体用于:如果所述下一个视频帧为前向预测帧,则将所述下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量。
所述运动矢量估计单元,具体用于:如果所述下一个视频帧为关键帧,则所述当前欲显示的视频帧和所述关键帧的下一个视频帧均为前向预测帧,将所述当前欲显示的视频帧的运动矢量与所述关键帧之后的前向预测帧的运动矢量的平均作为所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量。
所述叠加显示单元,具体用于:根据所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对所述当前欲显示的视频帧进行运动补偿;将补偿后的所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。
本发明直接根据视频解码时产生的运动矢量来估计帧间的运动矢量,并且根据估计的运动矢量进行运动补偿,可以避免重新计算运动矢量的巨大运算量,有利于软硬件的实时实现。另外,本发明的运动补偿方案,在进行叠加显示时可以一定程度抑制噪声,平滑单向预测编码方式造成的视觉突变;同时,本发明的运动补偿方案,可以避免由于帧间相对运动导致的图像模糊,改善嵌入式设备播放网络视频或进行视频通讯时的视觉效果。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明视频图像的运动补偿方法一个实施例的流程示意图。
图2为本发明运动矢量估计的一个示意图。
图3为本发明视频图像的运动补偿方法另一个实施例的流程示意图。
图4为本发明视频图像的运动补偿装置一个实施例的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为授权说明书的一部分。
在这里示出和讨论的所有示例中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它示例可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
本发明的视频图像运动补偿方案,适用于单向预测的编码方式,即视频流中只包含关键帧(简称I帧)和前向预测帧(简称P帧)。一个典型的视频帧发送的顺序为:I→P→P→…→P→I→P→P→P…。
图1为本发明视频图像的运动补偿方法一个实施例的流程示意图。如图1所示,该实施例的方法包括以下步骤:
S101,从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息。
需要说明的是,如果当前欲显示的视频帧为前向预测帧,则解码除了能够获得该视频帧的像素值数据,还能够获得该视频帧的运动矢量信息。如果当前欲显示的视频帧为关键帧,则解码仅能获得该视频帧的像素值数据。
对H.264编码格式而言,一个图像帧从空间上被分割为多个宏块,每个宏块又可以划分为多个子宏块,每个子宏块对应于一个运动矢量。对于MPEG(Moving PicturesExperts Group,动态图像专家组)编码格式而言,每个宏块对应于一个运动矢量。
需要说明的是,解码过程中获取宏块或子宏块的运动矢量可以参考现有技术,这里不再详述。
S102,从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将下一个视频帧缓存,如果下一个视频帧为前向预测帧,保存解码得到的下一个视频帧的运动矢量信息。
S103,根据下一个视频帧的帧类型以及解码得到的当前欲显示的视频帧的运动矢量信息和下一个视频帧的运动矢量信息,估计当前欲显示的视频帧与下一个视频帧之间每个像素位置处的运动矢量。
根据下一个视频帧的不同的帧类型,本发明提供了不同的运动矢量估计方法。
(1)如果下一个视频帧为前向预测帧,则将下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为当前欲显示的视频帧与下一个视频帧之间每个像素位置处的估计的运动矢量。可以采用如下公式表示:
其中,表示当前欲显示的视频帧Pi与其下一个视频帧Pi+1之间每个像素(x,y)位置处的估计的运动矢量,Δi+1(x,y)表示下一个视频帧Pi+1每个像素(x,y)的运动矢量。需要说明的是,Δi+1(x,y)可以从视频帧Pi+1解码时得到的像素(x,y)所属的宏块或子宏块的运动矢量获得。
(2)如果下一个视频帧为关键帧,则当前欲显示的视频帧和关键帧的下一个视频帧均为前向预测帧,将当前欲显示的视频帧的运动矢量与的运动矢量的平均作为当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量。可以采用如下公式表示:
其中,表示当前欲显示的视频帧Pi与其下一个视频帧Pi+1之间每个像素(x,y)位置处的估计的运动矢量,Δi(x,y)表示当前欲显示的视频帧Pi每个像素(x,y)的运动矢量,Δi+2(x,y)表示关键帧之后的视频帧Pi+2每个像素(x,y)的运动矢量。
此处,设Δi(x,y)=[ui,vi]T,Δi+2(x,y)=[ui+2,vi+2]T,则有:
图2为本发明运动矢量估计的一个示意图。如图2所示,第1帧的下一帧(即,第2帧)为P帧,则第5帧的下一帧(即,第6帧)为I帧,则
S104,根据估计的运动矢量,对当前欲显示的视频帧以及下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧。
具体地,根据当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对当前欲显示的视频帧进行运动补偿;将补偿后的当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。这里假设则视频帧叠加可以采用如下公式表示:
Qi(x,y)=αPi(x+u,y+v)+(1-α)Pi+1(x,y)
其中,Qi(x,y)表示叠加后的视频帧,α为系数,0<α<1,例如,α可以取0.5。
上述实施例,直接根据视频解码时产生的运动矢量来估计帧间的运动矢量,并且根据估计的运动矢量进行运动补偿,可以避免重新计算运动矢量的巨大运算量,有利于软硬件的实时实现。另外,本发明的运动补偿方案,在进行叠加显示时可以一定程度抑制噪声,平滑单向预测编码方式造成的视觉突变;同时,本发明的运动补偿方案,可以避免由于帧间相对运动导致的图像模糊,改善嵌入式设备播放网络视频或进行视频通讯时的视觉效果。
图3为本发明视频图像的运动补偿方法另一个实施例的流程示意图。如图3所示,该实施例的方法包括以下步骤:
S301,从接收的视频流中解码得到当前欲显示的视频帧Pi,将当前欲显示的视频帧Pi缓存,暂不显示Pi帧。如果当前欲显示的视频帧Pi为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息Δi(x,y)=[ui,vi]T
需要说明的是,如果当前欲显示的视频帧为前向预测帧,则解码除了能够获得该视频帧的像素值数据,还能够获得该视频帧的运动矢量信息。如果当前欲显示的视频帧为关键帧,则解码仅能获得该视频帧的像素值数据。
S302,从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧Pi+1,将下一个视频帧Pi+1缓存,如果下一个视频帧Pi+1为前向预测帧,保存解码得到的下一个视频帧Pi+1的运动矢量信息。
S303,判断下一个视频帧Pi+1是否为I帧。如果下一个视频帧Pi+1是I帧,执行步骤S304和S305;如果下一个视频帧Pi+1是P帧,执行步骤S306。
S304,如果下一个视频帧Pi+1是I帧,继续对视频流解码获得再下一个视频帧Pi+2,及其运动矢量信息Δi+2(x,y)=[ui+2,vi+2]T
S305,将当前帧(i帧)与其再下一帧(i+2帧)的运动矢量进行平均得到估计的运动矢量,即
S306,如果下一个视频帧Pi+1是P帧,将i+1帧的运动矢量作为估计的帧间运动矢量,即
S307,根据估计的运动矢量对当前欲显示的视频帧进行运动补偿,并且将运动补偿的结果与下一个视频帧进行帧平均得到叠加后的视频帧,即Qi(x,y)=αPi(x+u,y+v)+(1-α)Pi+1(x,y)。
S308,输出并显示叠加后的视频帧Qi
S309,判断是否解码结束。如果解码结束,则本次流程结束,如果解码为结束,则执行步骤S302,继续读取下一帧图像进行运动补偿。
本实施例中各公式的含义参见实施例1,这里不再赘述。
上述实施例,直接根据视频解码时产生的运动矢量来估计帧间的运动矢量,并且根据估计的运动矢量进行运动补偿,可以避免重新计算运动矢量的巨大运算量,有利于软硬件的实时实现。另外,本发明的运动补偿方案,在进行叠加显示时可以一定程度抑制噪声,平滑单向预测编码方式造成的视觉突变;同时,本发明的运动补偿方案,可以避免由于帧间相对运动导致的图像模糊,改善嵌入式设备播放网络视频或进行视频通讯时的视觉效果。
图4为本发明视频图像的运动补偿装置一个实施例的流程示意图。该运动补偿装置可以是视频解码器的一部分。如图4所示,该实施例的运动补偿装置包括:
解码单元401,用于从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息;从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将下一个视频帧缓存,如果下一个视频帧为前向预测帧,保存解码得到的下一个视频帧的运动矢量信息;
运动矢量估计单元402,用于根据下一个视频帧的帧类型以及解码得到的当前欲显示的视频帧的运动矢量信息和下一个视频帧的运动矢量信息,估计当前欲显示的视频帧与下一个视频帧之间每个像素位置处的运动矢量;以及,
叠加显示单元403,用于根据估计的运动矢量,对当前欲显示的视频帧以及下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧。
在解码单元中401,对于从接收的视频流中解码得到的视频帧的运动矢量信息,如果视频帧为动态图像专家组MPEG格式,则视频帧的每个宏块对应一个运动矢量,如果视频帧为H.264格式,则视频帧的每个子宏块对应一个运动矢量。
在一种实施方式中,运动矢量估计单元402,具体用于:如果下一个视频帧为前向预测帧,则将下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为当前欲显示的视频帧与下一个视频帧之间每个像素位置处的估计的运动矢量。
在另一种实施方式中,运动矢量估计单元402,具体用于:如果下一个视频帧为关键帧,则当前欲显示的视频帧和关键帧的下一个视频帧均为前向预测帧,将当前欲显示的视频帧的运动矢量与关键帧之后的前向预测帧的运动矢量的平均作为当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量。
其中,叠加显示单元403,具体用于:根据当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对当前欲显示的视频帧进行运动补偿;将补偿后的当前欲显示的视频帧与当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。
上述实施例,直接根据视频解码时产生的运动矢量来估计帧间的运动矢量,并且根据估计的运动矢量进行运动补偿,可以避免重新计算运动矢量的巨大运算量,有利于软硬件的实时实现。另外,本发明的运动补偿方案,在进行叠加显示时可以一定程度抑制噪声,平滑单向预测编码方式造成的视觉突变;同时,本发明的运动补偿方案,可以避免由于帧间相对运动导致的图像模糊,改善嵌入式设备播放网络视频或进行视频通讯时的视觉效果。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种视频图像的运动补偿方法,包括:
从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息;
从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将所述下一个视频帧缓存,如果所述下一个视频帧为前向预测帧,保存解码得到的所述下一个视频帧的运动矢量信息;
如果所述下一个视频帧为前向预测帧,则将所述下一个视频帧的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量;
如果所述下一个视频帧为关键帧,将所述当前欲显示的视频帧的运动矢量与所述关键帧之后的一帧前向预测帧的运动矢量的平均作为所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量;
根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧,以便对当前欲显示的视频帧进行运动补偿。
2.根据权利要求1所述的方法,其特征在于,对于从接收的视频流中解码得到的视频帧的运动矢量信息,如果视频帧为动态图像专家组MPEG格式,则视频帧的每个宏块对应一个运动矢量,如果视频帧为H.264格式,则视频帧的每个子宏块对应一个运动矢量。
3.根据权利要求1所述的方法,其特征在于,所述估计所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的运动矢量具体包括:
如果所述下一个视频帧为前向预测帧,则将所述下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量。
4.根据权利要求1所述的方法,其特征在于,根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加具体包括:
根据所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对所述当前欲显示的视频帧进行运动补偿;
将补偿后的所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。
5.一种视频图像的运动补偿装置,包括:
解码单元,用于从接收的视频流中解码得到当前欲显示的视频帧,将当前欲显示的视频帧缓存,如果当前欲显示的视频帧为前向预测帧,保存解码得到的当前欲显示的视频帧的运动矢量信息;从接收的视频流中解码得到当前欲显示的视频帧的下一个视频帧,将所述下一个视频帧缓存,如果所述下一个视频帧为前向预测帧,保存解码得到的所述下一个视频帧的运动矢量信息;
运动矢量估计单元,用于在所述下一个视频帧为前向预测帧时,将所述下一个视频帧的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量;在所述下一个视频帧为关键帧时,将所述当前欲显示的视频帧的运动矢量与所述关键帧之后的一帧前向预测帧的运动矢量的平均作为所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量;
叠加显示单元,用于根据估计的运动矢量,对所述当前欲显示的视频帧以及所述下一个视频帧进行叠加,并且在屏幕上显示叠加后的视频帧,以便对当前欲显示的视频帧进行运动补偿。
6.根据权利要求5所述的装置,其特征在于,在解码单元中,对于从接收的视频流中解码得到的视频帧的运动矢量信息,如果视频帧为动态图像专家组MPEG格式,则视频帧的每个宏块对应一个运动矢量,如果视频帧为H.264格式,则视频帧的每个子宏块对应一个运动矢量。
7.根据权利要求5所述的装置,其特征在于,所述运动矢量估计单元,具体用于:
如果所述下一个视频帧为前向预测帧,则将所述下一个视频帧每个像素所属的宏块或子宏块所对应的运动矢量信息作为所述当前欲显示的视频帧与所述下一个视频帧之间每个像素位置处的估计的运动矢量。
8.根据权利要求5所述的装置,其特征在于,所述叠加显示单元,具体用于:
根据所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧之间每个像素位置处的估计的运动矢量,对所述当前欲显示的视频帧进行运动补偿;
将补偿后的所述当前欲显示的视频帧与所述当前欲显示的视频帧的下一个视频帧进行帧平均得到叠加后的视频帧。
CN201210580243.8A 2012-12-27 2012-12-27 视频图像的运动补偿方法和装置 Active CN103905825B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210580243.8A CN103905825B (zh) 2012-12-27 2012-12-27 视频图像的运动补偿方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210580243.8A CN103905825B (zh) 2012-12-27 2012-12-27 视频图像的运动补偿方法和装置

Publications (2)

Publication Number Publication Date
CN103905825A CN103905825A (zh) 2014-07-02
CN103905825B true CN103905825B (zh) 2018-02-13

Family

ID=50996947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210580243.8A Active CN103905825B (zh) 2012-12-27 2012-12-27 视频图像的运动补偿方法和装置

Country Status (1)

Country Link
CN (1) CN103905825B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602018B (zh) * 2014-10-21 2018-09-18 腾讯科技(北京)有限公司 视频数据的运动信息的获取方法和装置、编码方法和装置
CN109741715B (zh) * 2019-02-25 2020-10-16 深圳市华星光电技术有限公司 显示面板的补偿方法、补偿装置及存储介质
CN109803175B (zh) * 2019-03-12 2021-03-26 京东方科技集团股份有限公司 视频处理方法及装置、设备、存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1455599A (zh) * 2002-05-02 2003-11-12 微软公司 图像和视频编码的2-d变换
CN1484921A (zh) * 2001-01-03 2004-03-24 ��˹��ŵ�� 视频传输时在比特流之间的切换
CN1615645A (zh) * 2002-01-14 2005-05-11 诺基亚有限公司 编码动态滤波器
CN1697328A (zh) * 2004-05-14 2005-11-16 微软公司 快速视频编解码变换实现
CN101272494A (zh) * 2008-01-25 2008-09-24 浙江大学 利用合成参考帧的视频编解码方法及装置
CN101321284A (zh) * 2007-06-10 2008-12-10 华为技术有限公司 一种编解码方法、设备及系统
CN101478675A (zh) * 2008-01-03 2009-07-08 中国科学院计算技术研究所 一种视频中语义事件检测方法及系统
GB2471577B (en) * 2009-07-03 2011-09-14 Intel Corp Methods and systems to estimate motion based on reconstructed reference frames at a video decoder
CN102316323A (zh) * 2011-07-06 2012-01-11 北京航空航天大学 一种快速的双目立体视频分形压缩与解压缩方法
CN102404568A (zh) * 2011-08-18 2012-04-04 上海交通大学 视频编解码中针对整帧丢失误码掩盖的p帧内插方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003035B2 (en) * 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1484921A (zh) * 2001-01-03 2004-03-24 ��˹��ŵ�� 视频传输时在比特流之间的切换
CN1615645A (zh) * 2002-01-14 2005-05-11 诺基亚有限公司 编码动态滤波器
CN1455599A (zh) * 2002-05-02 2003-11-12 微软公司 图像和视频编码的2-d变换
CN1697328A (zh) * 2004-05-14 2005-11-16 微软公司 快速视频编解码变换实现
CN101321284A (zh) * 2007-06-10 2008-12-10 华为技术有限公司 一种编解码方法、设备及系统
CN101478675A (zh) * 2008-01-03 2009-07-08 中国科学院计算技术研究所 一种视频中语义事件检测方法及系统
CN101272494A (zh) * 2008-01-25 2008-09-24 浙江大学 利用合成参考帧的视频编解码方法及装置
GB2471577B (en) * 2009-07-03 2011-09-14 Intel Corp Methods and systems to estimate motion based on reconstructed reference frames at a video decoder
CN102316323A (zh) * 2011-07-06 2012-01-11 北京航空航天大学 一种快速的双目立体视频分形压缩与解压缩方法
CN102404568A (zh) * 2011-08-18 2012-04-04 上海交通大学 视频编解码中针对整帧丢失误码掩盖的p帧内插方法

Also Published As

Publication number Publication date
CN103905825A (zh) 2014-07-02

Similar Documents

Publication Publication Date Title
KR100736041B1 (ko) 에러 은닉 방법 및 장치
US8532193B1 (en) Block error compensating apparatus of image frame and method thereof
JP2006501760A5 (zh)
JP4518111B2 (ja) 映像処理装置、映像処理方法、及びプログラム
JP4875007B2 (ja) 動画像符号化装置、動画像符号化方法、及び、動画像復号化装置
CN106341622B (zh) 一种多路视频流的编码方法及装置
US20180184108A1 (en) Motion Vector Field Coding and Decoding Method, Coding Apparatus, and Decoding Apparatus
JP2012516637A5 (zh)
CN101355708B (zh) 一种自适应误码掩盖方法
CN104717509B (zh) 一种视频解码方法及装置
CN103905825B (zh) 视频图像的运动补偿方法和装置
JP2010154490A5 (zh)
JP2010136292A (ja) 画像処理装置
US8275033B2 (en) Picture mode selection for video transcoding
JP2008301026A (ja) 映像品質推定方法、装置、およびプログラム
US20050138532A1 (en) Apparatus and method for concealing errors in a frame
WO2023197932A1 (zh) 视频帧错误隐藏方法、装置、电子设备及介质
JP4266227B2 (ja) 動画像信号処理装置
JP4440233B2 (ja) エラー隠匿方法及び装置
CN100515089C (zh) 一种对视频数据进行处理的方法
JP2004056461A (ja) 画像信号の処理装置および処理方法、画像表示装置、それに使用される係数データの生成装置および生成方法、並びに各方法を実行するためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な媒体
JP2009206940A (ja) 補間フレーム生成回路及びフレーム補間装置
JP4909592B2 (ja) 動画像再生方法及び装置並びにプログラム
JPH07111654A (ja) 動画像伝送システム
JP2019096094A (ja) 画像処理装置および画像処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant