CN109587496B - 一种Skip块判别方法、编码器、电子设备及可读存储介质 - Google Patents

一种Skip块判别方法、编码器、电子设备及可读存储介质 Download PDF

Info

Publication number
CN109587496B
CN109587496B CN201910008739.XA CN201910008739A CN109587496B CN 109587496 B CN109587496 B CN 109587496B CN 201910008739 A CN201910008739 A CN 201910008739A CN 109587496 B CN109587496 B CN 109587496B
Authority
CN
China
Prior art keywords
macro block
coded
skip
block
macroblock
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910008739.XA
Other languages
English (en)
Other versions
CN109587496A (zh
Inventor
邹箭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Onething Technology Co Ltd
Original Assignee
Shenzhen Onething Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Onething Technology Co Ltd filed Critical Shenzhen Onething Technology Co Ltd
Priority to CN201910008739.XA priority Critical patent/CN109587496B/zh
Publication of CN109587496A publication Critical patent/CN109587496A/zh
Application granted granted Critical
Publication of CN109587496B publication Critical patent/CN109587496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Abstract

本申请公开了一种Skip块判别方法:将基于Skip MV计算得到待编码宏块与预测宏块间的预测残差作为参考门限值,根据待编码宏块与参考宏块计算得到实际的残差图像,并从该残差图像中得到实际门限值,后续只需要根据实际门限值与参考门限值间的大小关系即可快速的判别该待编码宏块是否为Skip宏块。区别于基于运算量极大的运动估计算法计算得到的结果来判别当前的待编码块是否属于Skip块的现有技术,本申请所提供的技术方案无需进行复杂且耗时的运动估计,运算量较少,Skip块判别效率更高。本申请还同时公开了一种应用有该Skip块判别方法的编码器、电子设备及计算机可读存储介质,具有上述有益效果。

Description

一种Skip块判别方法、编码器、电子设备及可读存储介质
技术领域
本申请涉及视频编码技术中的帧间预测领域,特别涉及一种Skip块判别方法、编码器、电子设备及计算机可读存储介质。
背景技术
为了便于传输视频,需要尽可能的缩小视频的大小,通常会使用视频压缩技术来缩小视频的大小。
视频压缩技术本质上是一种编码技术,重复出现的图像信息是视频压缩的主要对象,判别重复图像的方式则主要是通过预测的手段。以我国提出的AVS视频编码标准为例,预测部分包括两类:帧内预测和帧间预测,帧内预测是利用相邻像素的相关性,通过当前像素块的左边和上边的像素进行预测,只需对实际值和预测值的差值进行编码;帧间预测是利用先前已编码帧的图像作为参考图像对当前图像进行预测的一种方式,它把参考图像的抽样点通过运动矢量的补偿作为当前图像抽样值的参考值。其主要方法是为当前的待编码块构造尽可能准确的预测块,从而得到能量较小的残差块,以通过只传输能量较小的残差块来减少传输的比特数。
相比于帧内预测,帧间预测往往会占据AVS编码器编码总耗时的80%以上,耗时的原因是在传统帧间预测方式中为了保障预测块的质量,会进行计算量极大的运动估计过程,运动估计过程时计算最近匹配宏块与待编码宏块间运动关系的步骤,需要根据搜索的精度生成二分之一或四分之一插值平面,其运算量主要体现在利用已有的预测平面的整像素点进行抽头系数加权运算,基于传统的六边形搜索算法来估计,至少也需要进行6次这样的运动估计运算,耗时较长。而基于这一步骤的运算后,往往有很多待编码宏块是Skip块(该宏块不需要进行信息传输),因此往往做了很多的无用功。
因此,如何在基于不影响预测块质量的前提下,尽可能的减少帧间预测耗时、提升Skip块判别效率,是本领域技术人员亟待解决的问题。
发明内容
本申请的目的在于提供一种Skip块判别方法、编码器、电子设备及计算机可读存储介质,旨在不影响预测块质量的前提下,减少帧间预测耗时、提升Skip块判别效率。
为实现上述目的,本申请提供了一种Skip块判别方法,该方法包括:
根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV;
根据所述Skip MV进行运动补偿,得到所述待编码宏块的预测宏块;
对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值;
根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值;
根据所述实际门限值与所述参考门限值间的大小关系判别所述待编码宏块是否为Skip块。
可选的,根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV,包括:
取所述左相邻宏块、所述顶部相邻宏块以及所述右上相邻宏块的MV的中间值作为所述待编码宏块的Skip MV。
可选的,根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值,包括:
将所述待编码宏块与所述参考宏块按预设尺寸进行划分,得到子待编码宏块和子参考宏块;
计算每个所述子编码宏块与每个所述子参考宏块的像素点灰度和均值;
计算每两个所述像素点灰度和均值的差值,得到各残差均值;
将根据各所述残差均值形成的下采样平面作为所述残差图像;
对所述残差图像进行DCT变换,得到DCT变换结果;
将所述DCT变换结果的绝对值作为所述实际门限值。
可选的,对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值,包括:
根据所述预测宏块与所述待编码宏块的预测残差计算Y、U、V三个平面分别对应的参考门限值;其中,所述Y平面对应的参考门限值为亮度参考门限值、所述U平面对应的参考门限值为第一色度参考门限值、所述V平面对应的参考门限值为第二色度参考门限值;
对应的,根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值,包括:
根据所述待编码宏块与所述参考宏块分别计算得到所述Y、U、V三个平面的残差图像;
分别根据所述Y平面、所述U平面和所述V平面的的残差图像计算得到亮度实际门限值、第一色度实际门限值、第二色度实际门限值;
对应的,根据所述实际门限值与所述参考门限值间的大小关系判别所述待编码宏块是否为Skip块,包括:
当所述亮度实际门限值、所述第一色度实际门限值、所述第二色度实际门限值均不超过对应的亮度参考门限值、第一色度参考门限值、第二色度参考门限值时,判定所述待编码宏块为所述Skip块。
可选的,该Skip块判别方法还包括:
当所述左相邻宏块不可用、所述顶部相邻宏块不可用、所述左相邻宏块的参考索引号为0且两个MV分量均为零或所述顶部相邻宏块的参考索引号为0且两个MV分量均为零时,直接将所述待编码宏块判别为所述Skip块。
可选的,所述Skip块判别方法具体应用于AVS或AVS+编码器的Skip块判别过程中
为实现上述目的,本申请还提供了一种编码器,该编码器包括:
Skip MV计算单元,用于根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV;
预测宏块生成单元,用于根据所述Skip MV进行运动补偿,得到所述待编码宏块的预测宏块;
参考门限值获得单元,用于对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值;
实际门限值获得单元,用于根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值;
Skip块判别单元,用于根据所述实际门限值与所述参考门限值间的大小关系判别所述待编码宏块是否为Skip块。
可选的,所述Skip MV计算单元包括:
中间值取用子单元,用于取所述左相邻宏块、所述顶部相邻宏块以及所述右上相邻宏块的MV的中间值作为所述待编码宏块的Skip MV。
可选的,所述实际门限值获得单元包括:
宏块拆分子单元,用于将所述待编码宏块与所述参考宏块按预设尺寸进行划分,得到子待编码宏块和子参考宏块;
灰度和均值计算子单元,用于计算每个所述子编码宏块与每个所述子参考宏块的像素点灰度和均值;
残差均值计算子单元,用于计算每两个所述像素点灰度和均值的差值,得到各残差均值;
残差图像生成子单元,用于将根据各所述残差均值形成的下采样平面作为所述残差图像;
实际门限值获得子单元,用于对所述残差图像进行DCT变换,并将得到的DCT变换结果的绝对值作为所述实际门限值。
可选的,该参考门限值获得单元包括:
三平面参考门限值计算子单元,用于根据所述预测宏块与所述待编码宏块的预测残差计算Y、U、V三个平面分别对应的参考门限值;其中,所述Y平面对应的参考门限值为亮度参考门限值、所述U平面对应的参考门限值为第一色度参考门限值、所述V平面对应的参考门限值为第二色度参考门限值;
对应的,所述实际门限值获得单元包括:
三平面残差图像计算子单元,用于根据所述待编码宏块与所述参考宏块分别计算得到所述Y、U、V三个平面的残差图像;
三平面实际门限值计算子单元,用于分别根据所述Y平面、所述U平面和所述V平面的的残差图像计算得到亮度实际门限值、第一色度实际门限值、第二色度实际门限值;
对应的,所述Skip块判别单元包括:
均不超过判别子单元,用于当所述亮度实际门限值、所述第一色度实际门限值、所述第二色度实际门限值均不超过对应的亮度参考门限值、第一色度参考门限值、第二色度参考门限值时,判定所述待编码宏块为所述Skip块。
可选的,该编码器还包括:
特殊情况判别单元,用于当所述左相邻宏块不可用、所述顶部相邻宏块不可用、所述左相邻宏块的参考索引号为0且两个MV分量均为零或所述顶部相邻宏块的参考索引号为0且两个MV分量均为零时,直接将所述待编码宏块判别为所述Skip块。
可选的,所述编码器具体为AVS或AVS+编码器。
为实现上述目的,本申请还进一步提供了一种电子设备,所述电子设备包括存储器、处理器、总线,所述存储器上存储有可在所述处理器上运行的Skip块判别程序,所述Skip块判别程序被所述总线传输至所述处理器,并在被所述处理器执行时实现如上述内容所描述的Skip块判别方法。
为实现上述目的,本申请还进一步提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有Skip块判别程序,所述Skip块判别程序可被一个或者多个处理器执行,以实现如上述内容所描述的Skip块判别方法。
显然,本申请提供的Skip块判别方法:将基于Skip MV计算得到待编码宏块与预测宏块间的预测残差作为参考门限值,根据待编码宏块与参考宏块计算得到实际的残差图像,并从该残差图像中得到实际门限值,后续只需要根据实际门限值与参考门限值间的大小关系即可快速的判别该待编码宏块是否为Skip宏块。区别于基于运算量极大的运动估计算法计算得到的结果来判别当前的待编码块是否属于Skip块的现有技术,本申请所提供的技术方案无需进行复杂且耗时的运动估计,运算量较少,Skip块判别效率更高。
本申请同时还提供了一种应用该Skip块判别方法的编码器、电子设备及计算机可读存储介质,具有上述有益效果,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种Skip块判别方法的流程图;
图2为本申请实施例提供的一种相邻宏块示意图;
图3为本申请实施例提供的Skip块判别方法中一种得到实际门限值的方法的流程图;
图4为本申请实施例提供的另一种Skip块判别方法的流程图;
图5为本申请实施例提供的一种编码器的结构框图;
图6为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在本发明中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
实施例一
请参见图1,图1为本申请实施例提供的一种Skip块判别方法的流程图,其包括以下步骤:
S101:根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算待编码宏块的Skip MV;
上述各宏块位置关系可参见图2:E表示待编码宏块,A表示该待编码宏块的左相邻宏块,B表示该待编码宏块的顶部相邻宏块,C表示该待编码宏块的右上相邻宏块,A、B、C宏块都各自具有其自己的MV(MotionVector,运动矢量用运动矢量),MV表示当前编码块与其参考图像中的最佳匹配块之间的相对位移。由于待编码宏块E与左相邻宏块A、顶部相邻宏块B以及右上相邻宏块C间的位置关系,使得直接根据左相邻宏块A、顶部相邻宏块B以及右上相邻宏块C的MV来计算得到Skip MV。
通常可直接将左相邻宏块A、顶部相邻宏块B以及右上相邻宏块C各自MV的中间值作为待编码宏块E的Skip MV,当然也可以在此基础上增加一些修正系统或者为根据相关性的影响程度通过加权计算法来得到待编码宏块E的Skip MV。
S102:根据Skip MV进行运动补偿,得到待编码宏块的预测宏块;
在S101的基础上,本步骤旨在通过运动补偿技术根据该Skip MV得到与该待编码宏块的预存宏块。
运动补偿是通过先前的局部图像来预测、补偿当前的局部图像的一种技术,它是减少帧序列冗余信息的有效方法。换句话说,运动补偿是一种描述相邻帧(相邻在这里表示在编码关系上相邻,在播放顺序上两帧未必相邻)差别的方法,具体来说是描述前面一帧的每个宏块怎样移动到当前帧中的某个位置去。
运动补偿的基本原理为:当编码器对图像序列中地第N帧进行处理时,利用运动补偿中地核心技术-运动估值ME(Motion Estimation)得到第N帧的预测帧N′。而在实际编码传输时,并不总是传输第N帧,而是第N帧和其预测帧N′得差值△。若运动估值足够准确(即预测帧与实际帧足够接近),差值△的能量比原始图像第N帧图像的能量小,编码传输△所需得比特数也就少得多。具体实现步骤可分为如下三步:运动补偿的步骤如下:
(1)图像分割为静止得和运动的两部分,估计运动部分的位移向量(即该SkipMV);
(2)按照估计得到的位移向量取得前一帧的图像数据;
(3)通过使用预测滤波器,得到前一帧图像数据的预测像素。
当对象是一帧图像中的一个待编码宏块时,通过上述步骤就可以得到与该待编码宏块对应的预测宏块。
S103:对预测宏块和待编码宏块计算预测残差,得到参考门限值;
在S102的基础上,本步骤旨在通过做预测宏块与待编码宏块的差得到预测残差,并根据该预测参数进一步计算得到参考的门限值,将作为该编码宏块与预测宏块间的差值的一种表现形式来与后续步骤通过另一种方式得到实际门限值进行比较。
S104:根据待编码宏块与参考宏块计算得到残差图像的实际门限值;
本步骤旨在根据待编码宏块与参考宏块计算得到残差图像的实际门限值,计算得到实际门限值的方式区别于计算得到参考门限值的方式,但两种方式算得的结果都可用来表征在帧间预测过程中该待编码宏块对应的图像信息是否可以压缩(即无需传输,等效于删去),也就是该待编码宏块是否为Skip块。
一种包括但不限于的根据待编码宏块与参考宏块计算得到残差图像的实际门限值的方式如下,请参见图3所示的流程图:
S201:将待编码宏块与参考宏块按预设尺寸进行划分,得到子待编码宏块和子参考宏块;
在AVS标准中,帧间预测时通常会将每帧图像换分为16×16的宏块,也就是说每个宏块的尺寸为16×16,单位是像素块。由于本步骤针对的对象仅为一个16×16的待编码宏块和一个相同尺寸的参考宏块,因此通常还需要将其再划分为更小的子待编码宏块和子参考宏块,例如可以将每个子待编码宏块和子参考宏块的尺寸设置为2×2。当然,可以根据实际情况,调整每个子待编码宏块和子参考宏块的尺寸。
S202:计算每个子编码宏块与每个子参考宏块的像素点灰度和均值;
S203:计算每两个像素点灰度和均值的差值,得到各残差均值;
在S201的基础上,S202旨在计算每个子编码宏块与每个子参考宏块的像素点灰度和均值,并做每两个像素点灰度和均值间的差,以得到残差均值。残差均值可以表示相似度的均值。
S204:将根据各残差均值形成的下采样平面作为残差图像;
在S203的基础上,本步骤旨在将根据各残差均值形成的下采样平面作为残差图像。假定使用2×2作为每个子待编码宏块和子参考宏块的尺寸,根据最终根据各残差均值形成的残差图像的尺寸为8×8,由于经过此步骤后得到的尺寸降低,因此这一过程是一个下采样的过程,因此形成的残差图像也被称为下采样平面。
S205:对残差图像进行DCT变换,并将得到的DCT变换结果的绝对值作为实际门限值。
在S204的基础上,本步骤旨在对残差图像进行DCT变换,并将得到的DCT变换结果的绝对值作为实际门限值。
DCT变换(Discrete Cosine Transform,离散余弦变换)经常被信号处理和图像处理使用,用于对信号和图像(包括静止图像和运动图像)进行有损数据压缩。这是由于离散余弦变换具有很强的"能量集中"特性:大多数的自然信号(包括声音和图像)的能量都集中在离散余弦变换后的低频部分,而且当信号具有接近马尔科夫过程(Markov processes)的统计特性时,离散余弦变换的去相关性接近于K-L变换(Karhunen-Loève变换-具有最优的去相关性)的性能。
例如,在静止图像编码标准JPEG中,在运动图像编码标准MJPEG和MPEG的各个标准中都使用了离散余弦变换。在这些标准制中都使用了二维的第二种类型离散余弦变换,并将结果进行量化之后进行熵编码。这时对应第二种类型离散余弦变换中的n通常是8,并用该公式对每个8×8宏块的每行进行变换,然后每列进行变换,得到的是一个8×8的变换系数矩阵。即经过DCT变化后经得到残差图像的变换系数,而变换系统的绝对值则将可以作为实际门限值。
S105:根据实际门限值与参考门限值间的大小关系判别待编码宏块是否为Skip块。
在S104的基础上,本步骤根据实际门限值与参考门限值间的大小关系判别待编码宏块是否为Skip块。
相比于根据待编码宏块与参考宏块间的残差图像计算得到的门限值,基于待编码宏块与通过运动补偿计算得到预测宏块间的差值计算得到的门限值更具有指导意义,因此后者将作为一个上限的参考门限值来判别前者得到的实际门限值是否处于该上限下,若实际门限值不超过该参考门限值,则说明该待编码宏块中的信息未超过预测宏块的预料,因此在预测范围内或者说预测正确的待编码宏块是属于Skip块的。相反,若实际门限值超过了该参考门限值,说明该待编码宏块中的信息超过了预测宏块的预料,因此不在预测范围内或者说预测不正确的待编码宏块是无法被判定为Skip块的。
特殊情况下,若左相邻宏块A不可用、顶部相邻宏块B不可用、左相邻宏块A的参考索引号为0且两个MV分量均为零或顶部相邻宏块B的参考索引号为0且两个MV分量均为零时(即上述四个条件满足其一即可),该待编码宏块E的Skip MV将直接为0,也就可可以直接将该待编码宏块E判别为Skip块。
基于本实施例提供的技术方案,将基于Skip MV计算得到待编码宏块与预测宏块间的预测残差作为参考门限值,根据待编码宏块与参考宏块计算得到实际的残差图像,并从该残差图像中得到实际门限值,后续只需要根据实际门限值与参考门限值间的大小关系即可快速的判别该待编码宏块是否为Skip宏块。区别于基于运算量极大的运动估计算法计算得到的结果来判别当前的待编码块是否属于Skip块的现有技术,本申请所提供的技术方案无需进行复杂且耗时的运动估计,运算量较少,Skip块判别效率更高。
实施例二
请参见图4,图4为本申请实施例提供的另一种Skip块判别方法的流程图,在实施例一的基础上,本实施例还具体的根据实际应用场景下存在的Y、U、V三个平面,分别计算得到相应的门限值,并提供了一种相应的判别该待编码宏块是否为Skip块的方法,包括如下步骤:
S301:取左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV的中间值作为待编码宏块的Skip MV;
本实施例直接取左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV的中间值作为待编码宏块的Skip MV。举个例子,假定左相邻宏块A、顶部相邻宏块B以及右上相邻宏块C的MV分别为X1、X2和X3,且X1<X2<X3,则X2作为这三者的中间值将作为该待编码宏块E的Skip MV。
S302:根据Skip MV进行运动补偿,得到待编码宏块的预测宏块;
本步骤与S102相同,在此不再赘述。
S303:根据预测宏块与待编码宏块的预测残差分别计算与Y平面对应的亮度参考门限值、与U平面对应的第一色度参考门限值、与V平面对应的第二色度参考门限值;
在图像编码领域,Y、U、V分别作为描述图像的三个参数:亮度、色度以及浓度,由于浓度通常被认定为色度的一种,因此U和V也被统称为色度,本步骤也将与U平面对应的参考门限值称为第一色度参考门限值,将与V平面对应的参考门限值称为第二色度参考门限值。
S304:根据待编码宏块与参考宏块分别计算得到Y、U、V三个平面的残差图像;
计算残差图像的过程对每个平面来说是一样的,只不过在针对不同的平面时,宏块的参数不同而已。进一步的,分别计算得到三个平面的残差图像的方式可在运算能力足够时选择并行计算的方式,能够进一步减少耗时。
S305:分别根据Y平面、U平面和V平面的的残差图像计算得到亮度实际门限值、第一色度实际门限值、第二色度实际门限值;
S206:当亮度实际门限值、第一色度实际门限值、第二色度实际门限值均不超过对应的亮度参考门限值、第一色度参考门限值、第二色度参考门限值时,判定待编码宏块为Skip块。
由于三个平面将对应三个不同的门限值,本实施例将同时基于这三个门限值进行实际门限值与参考门限值间的大小比较,且仅当三个实际门限值均不超过对应的参考门限值时,才将判定该待编码宏块为Skip块。由于每个平面算得参数不同,同时满足三种门限值将使得判别结果更加准确,误判率更低。
需要说明的是,上述各实施例给中的各具体步骤是以AVS或AVS+编码器为例,其它诸如H.264、H.263或遵循其它同类相似的视频压缩标准的编码器只是在诸如宏块划分、预测方式等实施细节上有些许差异,都遵循相同的原理,因此本实施例通过上述实施例给出的发明思想也可以经过略微的适应性调整应用在其它相同或相似的编码器中,此处不再一一赘述。
因为情况复杂,无法一一列举进行阐述,本领域技术人员应能意识到根据本申请提供的基本方法原理结合实际情况可以存在很多的例子,在不付出足够的创造性劳动下,应均在本申请的保护范围内。
实施例三
请参见图5,图5为本申请实施例提供的一种编码器的结构框图,该编码器可以包括:
Skip MV计算单元100,用于根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算待编码宏块的Skip MV;
预测宏块生成单元200,用于根据Skip MV进行运动补偿,得到待编码宏块的预测宏块;
参考门限值获得单元300,用于对预测宏块和待编码宏块计算预测残差,得到参考门限值;
实际门限值获得单元400,用于根据待编码宏块与参考宏块计算得到残差图像的实际门限值;
Skip块判别单元500,用于根据实际门限值与参考门限值间的大小关系判别待编码宏块是否为Skip块。
其中,该Skip MV计算单元100可以包括:
中间值取用子单元,用于取左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV的中间值作为待编码宏块的Skip MV。
其中,该实际门限值获得单元400可以包括:
宏块拆分子单元,用于将待编码宏块与参考宏块按预设尺寸进行划分,得到子待编码宏块和子参考宏块;
灰度和均值计算子单元,用于计算每个子编码宏块与每个子参考宏块的像素点灰度和均值;
残差均值计算子单元,用于计算每两个像素点灰度和均值的差值,得到各残差均值;
残差图像生成子单元,用于将根据各残差均值形成的下采样平面作为残差图像;
实际门限值获得子单元,用于对残差图像进行DCT变换,并将得到的DCT变换结果的绝对值作为实际门限值。
其中,该参考门限值获得单元300可以包括:
三平面参考门限值计算子单元,用于根据预测宏块与待编码宏块的预测残差计算Y、U、V三个平面分别对应的参考门限值;其中,Y平面对应的参考门限值为亮度参考门限值、U平面对应的参考门限值为第一色度参考门限值、V平面对应的参考门限值为第二色度参考门限值;
对应的,该实际门限值获得单元400可以包括:
三平面残差图像计算子单元,用于根据待编码宏块与参考宏块分别计算得到Y、U、V三个平面的残差图像;
三平面实际门限值计算子单元,用于分别根据Y平面、U平面和V平面的的残差图像计算得到亮度实际门限值、第一色度实际门限值、第二色度实际门限值;
对应的,该Skip块判别单元500可以包括:
均不超过判别子单元,用于当亮度实际门限值、第一色度实际门限值、第二色度实际门限值均不超过对应的亮度参考门限值、第一色度参考门限值、第二色度参考门限值时,判定待编码宏块为Skip块。
进一步的,该编码器还可以包括:
特殊情况判别单元,用于当左相邻宏块不可用、顶部相邻宏块不可用、左相邻宏块的参考索引号为0且两个MV分量均为零或顶部相邻宏块的参考索引号为0且两个MV分量均为零时,直接将待编码宏块判别为Skip块。
其中,该编码器具体为AVS或AVS+编码器。
实施例四
在上文中已经通过一些实施例对如何增加Skip块的判别效率的方案进行了详细的描述,本申请还提供一种与该方法对应的实体硬件装置,此部分内容原理与方案部分相对应,实现原理的部分此处不再赘述,以下将对该实体硬件装置的硬件组成进行描述,请参见图6,图6为本申请实施例提供的一种操作系统的电子设备的结构示意图:
该电子设备600包括存储器610、处理器620以及总线630,存储器610上存储有可在处理器620上运行的操作系统的Skip块判别程序,该Skip块判别程序通过总线630被传输至处理器620,并在被处理器620执行时可实现如上述实施例所描述的Skip块判别程序的各步骤。
其中,存储器610至少包括一种类型的可读存储介质,可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、磁性存储器、磁盘、光盘等。存储器610在一些实施例中可以是电子设备600的内部存储单元,例如该电子设备600的硬盘。存储器610在另一些实施例中也可以是该电子设备600的外部存储设备,例如该电子设备600上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器610还可以同时由内部存储单元和外部存储设备同时组成。进一步的,存储器610不仅可以用于存储安装于该电子设备600中的各种应用软件和各类数据,还可以用于暂时地存储已经输出或者将要输出的数据。
处理器620在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片,用于运行存储器610中存储的程序代码或处理数据,例如执行Skip块判别程序等。
总线630可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extended industry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图6中仅用一条双向中空指示线表示,但并不表示仅有一根总线或一种类型的总线。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例中所给出的方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种Skip块判别方法,其特征在于,方法包括:
根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV;
根据所述Skip MV进行运动补偿,得到所述待编码宏块的预测宏块;
对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值;
根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值;
当所述实际门限值不超过所述参考门限值时,判定所述待编码宏块为Skip块。
2.根据权利要求1所述的Skip块判别方法,其特征在于,根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV,包括:
取所述左相邻宏块、所述顶部相邻宏块以及所述右上相邻宏块的MV的中间值作为所述待编码宏块的Skip MV。
3.根据权利要求1所述的Skip块判别方法,其特征在于,根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值,包括:
将所述待编码宏块与所述参考宏块按预设尺寸进行划分,得到子待编码宏块和子参考宏块;
计算每个所述子待编码宏块与每个所述子参考宏块的像素点灰度和均值;
计算每两个所述像素点灰度和均值的差值,得到各残差均值;
将根据各所述残差均值形成的下采样平面作为所述残差图像;
对所述残差图像进行DCT变换,得到DCT变换结果;
将所述DCT变换结果的绝对值作为所述实际门限值。
4.根据权利要求1所述的Skip块判别方法,其特征在于,对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值,包括:
根据所述预测宏块与所述待编码宏块的预测残差计算Y、U、V三个平面分别对应的参考门限值;其中,所述Y平面对应的参考门限值为亮度参考门限值、所述U平面对应的参考门限值为第一色度参考门限值、所述V平面对应的参考门限值为第二色度参考门限值;
对应的,根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值,包括:
根据所述待编码宏块与所述参考宏块分别计算得到所述Y、U、V三个平面的残差图像;
分别根据所述Y平面、所述U平面和所述V平面的残差图像计算得到亮度实际门限值、第一色度实际门限值、第二色度实际门限值;
对应的,当所述实际门限值不超过所述参考门限值时,判定所述待编码宏块为Skip块,包括:
当所述亮度实际门限值、所述第一色度实际门限值、所述第二色度实际门限值均不超过对应的亮度参考门限值、第一色度参考门限值、第二色度参考门限值时,判定所述待编码宏块为所述Skip块。
5.根据权利要求1至4任一项所述的Skip块判别方法,其特征在于,还包括:
当所述左相邻宏块不可用、所述顶部相邻宏块不可用、所述左相邻宏块的参考索引号为0且两个MV分量均为零或所述顶部相邻宏块的参考索引号为0且两个MV分量均为零时,直接将所述待编码宏块判别为所述Skip块。
6.根据权利要求5所述的Skip块判别方法,其特征在于,所述Skip块判别方法具体应用于AVS或AVS+编码器的Skip块判别过程中。
7.一种编码器,其特征在于,方法包括:
Skip MV计算单元,用于根据待编码宏块的左相邻宏块、顶部相邻宏块以及右上相邻宏块的MV计算所述待编码宏块的Skip MV;
预测宏块生成单元,用于根据所述Skip MV进行运动补偿,得到所述待编码宏块的预测宏块;
参考门限值获得单元,用于对所述预测宏块和所述待编码宏块计算预测残差,得到参考门限值;
实际门限值获得单元,用于根据所述待编码宏块与参考宏块计算得到残差图像的实际门限值;
Skip块判定单元,用于当所述实际门限值不超过所述参考门限值时,判定所述待编码宏块为Skip块。
8.根据权利要求7所述的编码器,其特征在于,所述编码器具体为AVS或AVS+编码器。
9.一种电子设备,其特征在于,所述电子设备包括存储器、处理器以及总线,所述存储器上存储有可在所述处理器上运行的Skip块判别程序,所述Skip块判别程序被所述总线传输至所述处理器,并在被所述处理器执行时可实现如权利要求1至5任一项所述的Skip块判别方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有预安装程序,所述预安装程序可被一个或者多个处理器执行,以实现如权利要求1至5中任一项所述的Skip块判别方法。
CN201910008739.XA 2019-01-04 2019-01-04 一种Skip块判别方法、编码器、电子设备及可读存储介质 Active CN109587496B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910008739.XA CN109587496B (zh) 2019-01-04 2019-01-04 一种Skip块判别方法、编码器、电子设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910008739.XA CN109587496B (zh) 2019-01-04 2019-01-04 一种Skip块判别方法、编码器、电子设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN109587496A CN109587496A (zh) 2019-04-05
CN109587496B true CN109587496B (zh) 2022-09-09

Family

ID=65915596

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910008739.XA Active CN109587496B (zh) 2019-01-04 2019-01-04 一种Skip块判别方法、编码器、电子设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN109587496B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1993292A1 (en) * 2006-03-09 2008-11-19 NEC Corporation Dynamic image encoding method and device and program using the same
CN107087200A (zh) * 2017-05-11 2017-08-22 郑州轻工业学院 针对高效率视频编码标准的跳过编码模式提前判决方法
CN107566846A (zh) * 2017-09-20 2018-01-09 北京维境视讯信息技术有限公司 视频编码跳过模式决策方法、装置、设备及存储介质
CN109089116A (zh) * 2018-09-26 2018-12-25 深圳市网心科技有限公司 一种Skip类型宏块的判定方法、装置、设备及介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101095358A (zh) * 2004-12-29 2007-12-26 皇家飞利浦电子股份有限公司 一种对视频数据流编码的方法和装置
KR20120072205A (ko) * 2010-12-23 2012-07-03 한국전자통신연구원 매크로블록 간의 예측 기법을 이용한 움직임 추정 장치 및 방법
US9420289B2 (en) * 2012-07-09 2016-08-16 Qualcomm Incorporated Most probable mode order extension for difference domain intra prediction
US9473778B2 (en) * 2013-09-27 2016-10-18 Apple Inc. Skip thresholding in pipelined video encoders

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1993292A1 (en) * 2006-03-09 2008-11-19 NEC Corporation Dynamic image encoding method and device and program using the same
CN107087200A (zh) * 2017-05-11 2017-08-22 郑州轻工业学院 针对高效率视频编码标准的跳过编码模式提前判决方法
CN107566846A (zh) * 2017-09-20 2018-01-09 北京维境视讯信息技术有限公司 视频编码跳过模式决策方法、装置、设备及存储介质
CN109089116A (zh) * 2018-09-26 2018-12-25 深圳市网心科技有限公司 一种Skip类型宏块的判定方法、装置、设备及介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Efficient SKIP Mode Detection for Coarse Grain Quality Scalable Video Coding;L. Shen, Y. Sun, Z. Liu and Z. Zhang;《IEEE Signal Processing Letters》;20100812;全文 *
H.264/AVC快速帧内预测算法的研究;丁媛媛等;《计算机工程与应用》;20080511(第14期);全文 *

Also Published As

Publication number Publication date
CN109587496A (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
CN101682774B (zh) 视频编码方法和解码方法、视频编码装置和解码装置
US10841583B2 (en) Coding unit depth determining method and apparatus
EP2664142B1 (en) Video encoding and decoding with improved error resilience
CN101848391B (zh) 运动图像编码装置以及运动图像译码装置
CN110290388B (zh) 帧内预测方法、视频编码方法、计算机设备及存储装置
US20180146210A1 (en) Moving Picture Decoding Method and Moving Picture Encoding Method
KR100584495B1 (ko) 비디오 화상 코딩 장치 및 방법
CN107046645B9 (zh) 图像编解码方法及装置
US8000393B2 (en) Video encoding apparatus and video encoding method
US8189667B2 (en) Moving picture encoding apparatus
JP2011514095A (ja) 映像イントラ予測方法及び装置
WO2022104498A1 (zh) 帧内预测方法、编码器、解码器以及计算机存储介质
US20080002769A1 (en) Motion picture coding apparatus and method of coding motion pictures
CN100521744C (zh) 图像处理设备和方法
CN101573985A (zh) 用于视频预测编码的方法和装置以及用于视频预测解码的方法和装置
CN112073719B (zh) 一种串匹配预测方法、装置、系统及计算机可读存储介质
US7433407B2 (en) Method for hierarchical motion estimation
CN101888546A (zh) 一种运动估计的方法及装置
CN114900691B (zh) 编码方法、编码器及计算机可读存储介质
CN112887732B (zh) 一种权值可配置的帧间帧内联合预测编解码的方法及装置
CN117280691A (zh) 增强的运动向量预测
CN109640081B (zh) 一种帧内预测方法、编码器、电子设备及可读存储介质
CN113079376A (zh) 对静止区域的视频编码方法和装置
CN109587496B (zh) 一种Skip块判别方法、编码器、电子设备及可读存储介质
US6141449A (en) Coding mode determination system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant