CN102075743A - 视频编码方法及装置、视频解码方法及装置 - Google Patents

视频编码方法及装置、视频解码方法及装置 Download PDF

Info

Publication number
CN102075743A
CN102075743A CN 200910226177 CN200910226177A CN102075743A CN 102075743 A CN102075743 A CN 102075743A CN 200910226177 CN200910226177 CN 200910226177 CN 200910226177 A CN200910226177 A CN 200910226177A CN 102075743 A CN102075743 A CN 102075743A
Authority
CN
China
Prior art keywords
video
macro block
frame
coefficient
interpolation coefficient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200910226177
Other languages
English (en)
Other versions
CN102075743B (zh
Inventor
林永兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN200910226177.2A priority Critical patent/CN102075743B/zh
Priority to PCT/CN2010/079074 priority patent/WO2011063747A1/zh
Publication of CN102075743A publication Critical patent/CN102075743A/zh
Application granted granted Critical
Publication of CN102075743B publication Critical patent/CN102075743B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例涉及一种视频编码方法及装置、视频解码方法及装置,编码方法包括:根据视频帧获取插值滤波系数;对视频帧根据插值滤波系数进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用插值滤波系数。本发明实施例提供的视频编码方法及装置、视频解码方法及装置,通过视频帧获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行宏块下采样分解帧内编码中的插值过程中,实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,该自适应插值方法提高了视频编码压缩效率。

Description

视频编码方法及装置、视频解码方法及装置
技术领域
本发明实施例涉及通信技术领域,尤其是一种视频编码方法及装置、视频解码方法及装置。
背景技术
为了满足人们对高清视频的传送和存储需求,下一代视频编码标准将重点面向高清、超高清视频大幅度提高视频编码压缩效率,以解决高清视频的带宽需求增长和信息网络基础设施的发展之间的矛盾。
在国际电信联盟(International Telegraph Union,简称:ITU)下的视频编码专家组(Video Coding Experts Group,简称:VCEG)提案中提出的基于块(block)下采样分解并利用相邻像素之间的相关性进行帧内预测编码的编码实现方法。具体地,对8×8大小的块通过下采样分解,得到4个4×4的块,对4个块中的1个块(block)进行帧内(Intra)编码,然后以该4个块中的1个块的重构图像作为参考,对4个块中的其余3个块进行预测编码。在该编码过程中,需要对作为参考的4个块中的1个块进行插值,以便使得4个块中的其余3个块的预测估计更准确。由于编码实现方法采用了基于块下采样分解,因此充分利用了块级的率失真优化(Rate-Distortion Optimization,简称:RDO)决策编码,从而改善了编码压缩性能。
发明人在实施本发明的过程中发现,当对4个块中作为参考的1个块(block)进行插值时,虽然采用固定系数的差值滤波器实现方便,但采用固定系数的插值滤波器不能很好的适应图像内容的变化,因此不利于进一步提升视频编码性能。
发明内容
本发明实施例的目的在于提供一种视频编码方法及装置、视频解码方法及装置,通过基于帧级或宏块级的自适应插值提高视频编码压缩效率。
本发明实施例提供一种视频编码方法,包括:
根据视频帧获取插值滤波系数;
对所述视频帧根据所述插值滤波系数进行宏块下采样分解帧内编码,其中,所述宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数。
本发明实施例还提供一种视频解码方法,包括:
从视频帧形成的码流中获取所述视频帧的插值滤波系数;
根据所述插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码,其中,对所述宏块下采样帧内解码中的插值过程采用插值滤波系数进行插值运算。
本发明实施例还提供一种视频编码装置,包括:
获取模块,用于根据视频帧获取插值滤波系数;
编码模块,用于对所述视频帧根据所述插值滤波系数进行宏块下采样分解帧内编码;
插值模块,用于在宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数进行插值运算。
本发明实施例还提供一种视频解码装置,包括:
获取模块,用于从视频帧形成的码流中获取所述视频帧的插值滤波系数;
解码模块,用于根据所述插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码;
插值模块,用于对所述宏块下采样解码帧内编码中的插值过程采用插值滤波系数进行插值运算。
本发明实施例还提供一种视频编码方法,包括:
从设定滤波器集合中获取插值滤波器;
将所述插值滤波器分配给视频帧的宏块;
根据所述插值滤波器对应的插值滤波系数对所述视频帧的宏块进行宏块下采样分解帧内编码,其中,所述宏块下采样分解帧内编码中的插值过程使用插值滤波系数;
将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理。
本发明实施例还提供一种视频解码方法,包括:
从视频帧形成的码流中获取标识信息;
根据所述标识信息从设定滤波器集合中获取插值滤波器,将所述插值滤波器分配给所述视频帧的宏块;
根据所述插值滤波器对应的插值滤波系数对所述宏块进行宏块下采样分解帧内解码;其中,所述宏块下采样分解帧内解码中的插值过程使用插值滤波系数。
本发明实施例还提供一种视频编码装置,包括:
获取模块,用于从设定滤波器集合中获取插值滤波器;
分配模块,用于将所述插值滤波器分配给视频帧的宏块;
编码模块,用于根据所述插值滤波器对应的插值滤波系数对所述视频帧进行宏块下采样分解帧内编码;
写入模块,用于将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理。
本发明实施例还提供一种视频解码装置,包括:
第一获取模块,用于从视频帧形成的码流中获取标识信息;
第二获取模块用于根据所述标识信息从设定滤波器集合中获取插值滤波器,将所述插值滤波器分配给所述视频帧的宏块;
解码模块,用于根据所述插值滤波器对应的插值滤波系数对所述宏块进行宏块下采样分解帧内解码。
本发明实施例提供的视频编码方法及装置、视频解码方法及装置,通过视频帧获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行宏块下采样分解帧内编码中的插值过程中,实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,该自适应插值方法提高了视频编码压缩效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例所适用的宏块下采样分解示意图;
图2为图1所示对宏块进行插值所采用的滤波器示意图;
图3为本发明实施例所适用的宏块下采样分解帧内编码的流程示意图;
图4为本发明视频编码方法一个实施例的流程示意图;
图5为本发明视频编码方法又一个实施例的流程示意图;
图6为本发明视频编码方法另一个实施例的流程示意图;
图7为本发明视频编码方法另一个实施例的流程示意图;
图8为本发明实施例所适用的宏块下采样分解帧内解码的流程示意图;
图9为本发明视频解码方法一个实施例的流程示意图;
图10为本发明视频解码方法又一个实施例的流程示意图;
图11为本发明视频编码装置一个实施例的结构示意图;
图12为本发明视频编码装置又一个实施例的结构示意图;
图13为本发明视频解码装置一个实施例的结构示意图;
图14为本发明视频解码装置又一个实施例的结构示意图;
图15为本发明视频编码方法再一个实施例的流程示意图;
图16为本发明视频解码方法另一个实施例的流程示意图;
图17为本发明视频编码装置再一个实施例的结构示意图;
图18为本发明视频解码装置另一个实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在基于块的混合视频编码框架下主要有两类编码方式:帧内编码(Intra coding)和帧间编码(Inter coding);其中,帧内编码利用空域相关性去除空域冗余,由于在编码过程中仅涉及当前帧的信息,因此不需要对参考帧进行插值。帧间编码利用时域相关性(例如:运动补偿预测),根据参考帧进行预测编码插值,实现运动补偿预测。
图1为本发明实施例所适用的下采样分解示意图,图2为图1所示对宏块进行插值所采用的滤波器示意图,如图1所示,
Figure B2009102261772D0000051
“□”表示视频帧中的四种像素不同坐标位置,一个16×16大小的宏块(MacroBlock,简称:MB)经过1/2下采样分解后形成4个8×8的块,即:块0、块1、块2、块3;如图2所示,块3(block3)作为帧内(Intra)编码块,对块1进行编码时需要对块3在垂直方向采用4-抽头(tap)进行插值,对块2进行编码时需要对块3在水平方向采用4-抽头(tap)进行插值,对块0进行编码时需要对块3在四邻域求取均值。本发明实施例以图1为例进行说明,但图1所示MB的大小与下采样方式并不能构成对本发明实施例的限制,MB的大小还可以为32×32、64×64等,本发明实施例可以根据实际需要将m×m大小的MB经过1/3、或者1/4等等下采样分解形成相应的块。
图3为本发明实施例所适用的MB下采样分解帧内编码的流程示意图,如图3所示,本发明实施例中所述的MB下采样分解帧内编码具体包括如下步骤:
步骤301、对视频帧的MB进行下采样分解,形成n2个块;
其中,对视频帧进行1/n下采样分解,形成n2个块,其中n为大于1的正整数,如图1所示,以n具体为2进行说明,对MB进行1/2下采样分解,共形成4个块(block),即:块0、块1、块2、块3;
步骤302、对MB中的1个块(block)进行帧内(Intra)编码;
如图1所示,将4个块(块0、块1、块2、块3)中的块3(block3)作为帧内(Intra)编码块,对帧内(Intra)编码块的预测残差进行变换、量化和熵编码,形成已编码的帧内编码块(块3)的重构图像值;其中,预测残差具体可以为原始图像像素值与预测值之间的差值;
步骤303、根据已编码的帧内编码块的重构图像值,对其余(n2-1)个块进行基于插值的块间预测编码;
其中,本发明实施例中的基于插值的块间预测具体可以为:以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值;如图1所示,对块0、块1、块2进行根据块3进行基于插值的块间预测编码;其中,使用固定的滤波器系数对已编码的帧内编码块(块3)的重构图像值进行插值。滤波器系数既可以是2维不可分离的插值滤波系数,也可以是2维可分离的插值滤波系数。图2给出了一种4抽头(tap)的滤波器,分别对块1进行垂直方向的插值、对块2进行水平方向的插值、对块0进行四邻域求取均值;对帧内编码块(块3)的预测残差进行变换、量化和熵编码;
步骤304、对MB形成的n2个块的重构图像值进行上采样合成,得到MB的重构图像值;
其中,上采样合成是将MB内的所有块(块0、块1、块2、块3)的像素重新组合成MB的过程,为步骤301中下采样分解的逆过程。
在上述编码过程中,由于下采样分解是在宏块级(MB level)上进行的,因此,可以作为一种新的MB类型,与现有MB类型一起参与率失真优化(Rate-Distortion Optimization,简称:RDO)编码;作为宏块级(MB level)的技术,可以在宏块级(MB level)上实现较好的适应视频帧(图像)内不同区域的纹理特性,从而提高编码压缩效率。
图4为本发明视频编码方法一个实施例的流程示意图,如图4所示,本发明实施例包括如下步骤:
步骤401、根据视频帧获取插值滤波系数;
步骤402、根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数。
其中,步骤402中所述的宏块下采样分解帧内编码适用于图3所述的宏块下采样分解帧内编码,并且,步骤402中的MB下采样分解Intra编码中的插值过程采用从视频帧中获取到的插值滤波系数;具体地,结合图1~图3进行说明,在基于插值的块间预测过程中,以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值。
本发明实施例提供的视频编码方法,通过视频帧获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行宏块下采样分解帧内编码中的插值过程中,实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,该基于帧级的自适应插值方法提高了视频编码压缩效率。
图5为本发明视频编码方法又一个实施例的流程示意图,如图5所示,本发明实施例包括如下步骤:
步骤501、对视频帧根据固定插值滤波系数进行宏块下采样分解帧内编码,获取视频帧重构图像;
其中,结合图1进行示例性说明,对图1所示的16×16大小的MB进行1/2下采样,采用固定插值滤波系数进行下采样插值,形成4个块,分别为:块0、块1、块2、块3;对4个块中的一个块进行帧内编码,例如:将块3作为帧内编码块进行帧内编码,得到块3的重构像素值,再对得到的块3的重构像素值进行插值,然后再根据插值后的块3的重构像素值对4个块中的其余3个块进行基于插值的块间预测编码;本发明实施例中的固定插值滤波系数为编码设备预先设置的用于对视频帧进行插值运算的滤波器系数,既可以为2维不可分离的插值滤波系数,也可以为2维可分离的插值滤波系数。
步骤502、根据视频帧的原始像素值与基于重构图像得到的预测值之间的差值得到第一预测残差,根据第一预测残差获取视频帧的插值滤波系数插值滤波系数;
其中,在本发明实施例中,插值滤波系数可以是通过解方程组或者优化算法计算得到的使重构图像的预测残差能量最小的插值滤波系数;其中,预测残差具体可以为视频帧的原始像素值与根据重构图像得到的预测值之间的差值。当然,在可选择的实施例中,可以根据需要在预测残差能量允许的范围内确定插值滤波系数。
步骤503、对视频帧根据插值滤波系数进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数;
其中,步骤503中所述的宏块下采样分解帧内编码适用于图3所述的宏块下采样分解帧内编码;具体地,结合图1~图3进行说明,在基于插值的块间预测过程中,以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值;当获取到MB的4个块的全部的重构图像值,对4个块的全部的重构图像值进行上采样合成,从而得到MB的重构图像值;其中,上采样合成是将4个块的重构图像值重新组合成MB的过程,是上述步骤501中下采样分解的逆过程。
在该编码过程中,由于下采样分解是在宏块级(MB level)进行的,因此,可以作为一种新的MB类型,与现有MB类型一起参与RDO编码。作为一种宏块级(MB level)的技术,通过在宏块级(MB level)上进行编码较好地适应了视频帧内不同区域的纹理特性,从而提高了编码压缩效率;进一步地,由于采用了MB下采样分解帧内(Intra)编码,并且下采样分解形成的各个块(block)之间的位置关系相对确定,因此根据插值滤波系数进行宏块下采样分解帧内编码时,无需进行运动估计。
步骤504、将插值滤波系数写入视频帧形成的码流,使接收设备根据该插值滤波系数进行解码处理。
其中,将插值滤波系数与固定插值系数进行减法运算获取差值系数,将差值系数写入码流,使接收设备根据该差值系数获取到插值滤波系数,并根据该插值滤波系数进行解码处理;由于差值系数的数据量远远小于插值滤波系数的数据量,因此通过码流传送差值系数能够减小视频数据在传输时占用的带宽;在将差值系数写入码流时,可以将差值系数写到视频帧的图像头、或者条带头(Slice header,简称:SH)、或者图像参数集(Picture Parameter Set,简称:PPS);进一步地,可以利用插值滤波系数的对称性,将该插值滤波系数写入码流时只需写入该插值滤波系数中的一半滤波系数即可,从而节约了编码比特开销。
本发明实施例提供的视频编码方法,通过视频帧获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行插值的过程中实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,从而提高了视频编码压缩效率。
在上述图5所示实施例中,在获取插值滤波系数时,对MB中所有的块进行了一次下采样分解帧内(Intra)编码;在获取到插值滤波系数后,对视频帧进行了下采样分解帧内(Intra)编码,因此,该视频编码过程仍属于两次(Two pass)编码。
图6为本发明视频编码方法另一个实施例的流程示意图,如图6所示,本发明实施例包括如下步骤:
步骤601、根据视频帧的原始像素值与基于视频帧得到的预测值之间的差值得到第二预测残差插值滤波系数;
步骤602、根据第二预测残差获取视频帧的插值滤波系数;
步骤603、对视频帧根据插值滤波系数进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数。
其中,步骤603中所述的宏块下采样分解帧内编码适用于图3所述的宏块下采样分解帧内编码,结合图1~图3进行说明,在基于插值的块间预测过程中,以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值。
本发明实施例提供的视频编码方法,根据视频帧的原始像素值与基于视频帧得到的预测值之间的差值得到第二预测残差,并根据第二预测残差获取视频帧的插值滤波系数,由于不需对视频帧进行编码获得视频帧重构图像,因此降低了编码过程的复杂度;根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,整个视频编码过程实现了一次(One pass)编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行插值的过程中实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,从而提高了视频编码压缩效率。
图7为本发明视频编码方法另一个实施例的流程示意图,如图7所示,本发明实施例包括如下步骤:
步骤701、获取视频帧在第一方向上的预测残差能量最小的最佳第一方向插值滤波系数;
其中,以第一方向具体为视频帧的垂直方向为例并结合图1进行说明,MB被1/2下采样分解成4个块,其中,将块3作为帧内编码块,其余块(块0、块1、块2)作为块间预测编码块;采用2维可分离自适应插值滤波器(Adaptive Interpolation Filter,简称:AIF)对块1在垂直方向进行插值,对块2进行水平方向插值;块1的预测残差为
Figure B2009102261772D0000111
其中,
Figure B2009102261772D0000112
表示块1的预测残差,
Figure B2009102261772D0000113
表示在块1中坐标位置为(x,y)的原始像素值,
Figure B2009102261772D0000114
表示在块3中坐标位置为
Figure B2009102261772D0000115
的原始像素值,其中,
Figure B2009102261772D0000116
n表示AIF抽头数,hi表示视频帧在垂直方向上的插值滤波系数,0<=i<n。
在获取到MB中的块1的预测残差
Figure B2009102261772D0000117
后,对视频帧中的其余MB也进行上述计算,即可获取到视频帧的所有与垂直方向插值相关的(即所有MB中相应的块1)预测残差;进一步地,为求得最佳第一方向插值滤波系数,需要求解
Figure B2009102261772D0000118
当求解出上述
Figure B2009102261772D0000119
后,即可使得视频帧的所有与垂直方向插值相关的(即所有MB中相应的块1)的预测残差能量为最小,从而得到帧级(frame-level)的最佳第一方向插值滤波系数hi
步骤702、获取视频帧在与第一方向垂直的第二方向上的预测残差能量最小的最佳第二方向插值滤波系数,其中,最佳第一方向插值滤波系数和最佳第二方向插值滤波系数为插值滤波系数;
其中,以第二方向具体为视频帧的水平方向为例并结合图1进行说明,块2的预测残差为其中,
Figure B2009102261772D00001111
表示块2的预测残差,
Figure B2009102261772D00001112
表示在块2中坐标位置为(x,y)的原始像素值,
Figure B2009102261772D00001113
表示块3中坐标位置为
Figure B2009102261772D00001114
的原始像素值,其中,
Figure B2009102261772D00001115
n表示滤波器的抽头个数,对于图1所示的MB,n=4;vi表示水平方向的插值滤波系数,其中,0<=i<n。
在获得1个MB中block2的预测残差后,进一步地,对当前帧中其它MB也进行上述计算,即可得到当前帧的所有与水平方向插值相关的(即视频帧内所有的块2)的预测残差;为求得插值滤波系数,需要求解
Figure B2009102261772D0000121
的最小化值,当求解出上述
Figure B2009102261772D0000122
的最小化值后,即可使得视频帧的所有与水平方向插值相关的(即所有MB中相应的块2)的预测残差能量为最小,从而得到帧级(frame-level)的最佳第二方向插值滤波系数vi;其中,最佳第一方向插值滤波系数和最佳第二方向插值滤波系数为插值滤波系数。在上述获取最佳第二方向插值滤波系数的过程中,仅以块2进行示例性说明,在实际求取最佳第二方向插值滤波系数的过程中,也可以将块0和块2结合在一起获取最佳第二方向插值滤波系数。
步骤703、对视频帧根据插值滤波系数进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数;
其中,步骤703中所述的宏块下采样分解帧内编码适用于图3所述的宏块下采样分解帧内编码,结合图1~图3进行说明,在基于插值的块间预测过程中,以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值。
在该编码过程中,由于下采样分解是在宏块级(MB level)进行的,因此,可以作为一种新的MB类型,与现有MB类型一起参与率失真优化(Rate-Distortion Optimization,简称:RDO)编码。作为一种宏块级(MB level)的技术,通过在宏块级(MB level)上进行编码较好地适应了视频帧内不同区域的纹理特性,从而提高了编码压缩效率;进一步地,由于采用了MB下采样分解帧内(Intra)编码,并且下采样分解形成的各个块(block)之间的位置关系相对确定,因此根据插值滤波系数进行宏块下采样分解帧内编码时,无需进行运动估计。
步骤704、将插值滤波系数写入视频帧形成的码流,使接收设备根据插值滤波系数进行解码处理。
其中,还可以将插值滤波系数与固定插值系数进行减法运算获取差值系数,将差值系数写入码流,使接收设备根据该差值系数获取到插值滤波系数,并根据该插值滤波系数进行解码处理;由于差值系数的数据量远远小于插值滤波系数的数据量,因此通过码流传送差值系数能够减小视频数据在传输时占用的带宽;在将差值系数写入码流时,可以将差值系数写到视频帧的图像头、或者SH、或者PPS;进一步,由于插值滤波系数具有对称性,因此在将该插值滤波系数写入码流时只需写入该插值滤波系数中的一半滤波系数即可,从而节约了编码比特开销。
本发明实施例提供的视频编码方法,由于在插值滤波系数的获取过程中均采用视频帧的原始图像像素值分别得到水平方向和竖直方向的预测残差,由于不需对视频帧进行编码获取视频帧的重构图像,避免了对视频帧进行图像重构的操作,降低了编码实现的复杂度;根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,整个编码过程仅需一次编码即可实现自适应插值,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行插值的过程中实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,从而提高了视频编码压缩效率。
可选择地,在上述图7所示实施例中,若获取到的MB中的块1的预测残差
Figure B2009102261772D0000131
中的
Figure B2009102261772D0000132
作为帧内编码块的块3中坐标位置为
Figure B2009102261772D0000133
Figure B2009102261772D0000134
的重构像素值,块2的预测残差为
Figure B2009102261772D0000135
中的
Figure B2009102261772D0000136
作为帧内编码块的块3中坐标位置为
Figure B2009102261772D0000141
的重构像素值,则通过图7所示实施例可以实现通过视频帧重构图像后计算得到视频帧的插值滤波系数,也即,图5所示实施例中步骤502根据重构图像获取视频帧的插值滤波系数可以通过图7所示实施例实现。
图8为本发明实施例所适用的MB下采样分解帧内解码的流程示意图,如图8所示,并结合图1进行示例性说明,本发明实施例中所述的MB下采样分解帧内解码具体包括如下步骤:
步骤801、从视频帧形成的码流进行处理并获得MB的残差系数;
步骤802、对MB中的1个块进行帧内解码;
其中,如图1所示,将MB形成的4个块(块0、块1、块2、块3)中的块3(block3)作为帧内(Intra)编码块进行帧内解码,利用已解码的块3的解码图像值,对该MB内部其余块(块0、块1、块2)进行基于插值的块间预测解码;利用滤波器系数对已解码的块3的重构图像进行插值;此外,本发明实施例中的基于插值的块间预测具体可以为:以MB中的帧内编码块(块3)的重构图像值为参考,利用插值滤波系数对图像重构值进行插值,以插值后的帧内编码块的相对应位置的像素值作为MB中的其余块的预测值。
步骤803、对上述MB的所有块的重构图像值进行上采样合成,得到MB的重构图像值。
其中,上采样合成是将MB内的所有块(块0、块1、块2、块3)的像素重新组合成MB的过程。
在上述解码过程中,由于上采样合成是在宏块级(MB level)上进行的,因此,可以作为一种新的MB类型,可以在宏块级(MB level)上实现较好的适应视频帧(图像)内不同区域的纹理特性。
图9为本发明视频解码方法一个实施例的流程示意图,如图9所示,本发明实施例包括如下步骤:
步骤901、从视频帧形成的码流中获取视频帧的插值滤波系数;
步骤902、根据插值滤波系数对视频帧形成的码流进行宏块下采样分解帧内解码,其中,宏块下采样分解帧内解码中的插值过程使用该插值滤波系数。
本发明实施例提供的视频解码方法,从视频帧形成的码流中获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
图10为本发明视频解码方法又一个实施例的流程示意图,如图10所示,本发明实施例包括如下步骤:
步骤101、从视频帧中获取差值系数,将差值系数与固定插值系数进行加法运算获取插值滤波系数;
其中,由于差值系数的数据量远远小于插值滤波系数的数据量,因此通过码流传送差值系数能够减小视频数据在传输时占用的带宽;又由于差值系数在写入码流时,可将差值系数写到视频帧的图像头、或者SH、或者PPS,因此通过视频帧的图像头、或者SH、或者PPS即可获取该插值系数;进一步地,还可以利用插值滤波系数的对称性,通过在码流中获取到该插值滤波系数的一半滤波系数即可获取全部的插值滤波系数。
步骤102、从视频帧形成的码流进行处理并获取宏块的残差系数;
步骤103、根据残差系数对宏块中的一个块进行帧内解码得到宏块中的一个块的解码图像值;
其中,结合图1进行示例性说明,视频帧所形成的码流中16×16大小的MB所形成的4个块,分别为:块0、块1、块2、块3;对4个块中的一个块进行帧内解码,例如:将块3根据残差系数进行帧内解码得到该宏块中的块3的解码图像值。
步骤104、根据宏块中的一个块的解码图像值和插值滤波系数对宏块中的其余块进行基于插值的块间预测解码得到宏块中的其余块的解码图像值;
其中,结合图1进行示例性说明,根据块3的解码图像值和插值滤波系数对该MB中的其余块(块0、块1、块2)进行基于插值的块间预测解码分别得到其余块对应的解码图像值。
步骤105、对宏块中的所有块的解码图像值进行上采样合成,得到宏块的解码图像值。
其中,结合图1进行示例性说明,对MB中的所有块(块0、块1、块2、块3)的解码图像值进行上采样合成,从而得到该MB的重构图像值;其中上采样合成是将4个块的重构图像值重新组合成MB的过程。
本发明实施例提供的视频解码方法,从视频帧形成的码流中获取到插值滤波系数,并根据插值滤波系数对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
图11为本发明视频编码装置一个实施例的结构示意图,如图11所示,本实施例包括:获取模块11、编码模块12、插值模块13;
其中,获取模块11根据视频帧获取插值滤波系数;编码模块12对视频帧根据获取模块11获取到的插值滤波系数进行宏块下采样分解帧内编码;插值模块13在编码模块12进行宏块下采样分解帧内编码中的插值过程使用获取模块11获取到的插值滤波系数进行插值运算。
本发明实施例提供的视频编码装置,通过获取模块11视频帧获取到插值滤波系数,编码模块12根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行插值的过程中实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,从而提高了视频编码压缩效率。
图12为本发明视频编码装置又一个实施例的结构示意图,如图12所示,本实施例包括:获取模块21、编码模块22、插值模块23、写入模块24;
其中,获取模块21根据视频帧获取插值滤波系数;编码模块22对视频帧根据获取模块21获取到的插值滤波系数进行宏块下采样分解帧内编码;插值模块23在编码模块22进行宏块下采样分解帧内编码中的插值过程使用获取模块21获取到的插值滤波系数进行插值运算;写入模块24将获取模块21获取到的插值滤波系数写入编码模块22对视频帧编码后形成的码流,使所述接收设备根据所述插值滤波系数进行解码处理。
进一步地,获取模块21还可以包括:第一获取单元211、第二获取单元212、第三获取单元213,和/或,第四获取单元214、第五获取单元215;其中,第一获取单元211对视频帧根据固定插值滤波系数进行宏块下采样分解帧内编码,获取视频重构图像,第二获取单元212根据所述重构图像获取使预测残差能量最小的插值滤波系数,第三获取模块213根据第二获取单元212得到的第一预测残差获取视频帧的插值滤波系数;第四获取单元214根据所述视频帧的原始像素值与基于所述视频帧得到的预测值之间的差值得到第二预测残差;第五获取单元215根据第四获取单元214得到的第二预测残差获取所述视频帧的插值滤波系数插值滤波系数。
进一步地,写入模块24还可以包括:减法单元241和写入单元242;其中,减法单元241将所述插值滤波系数与固定插值系数进行减法运算获取差值系数;写入单元242将所述差值系数写入码流,使接收设备根据所述差值系数获取到所述插值滤波系数,并根据所述插值滤波系数进行解码处理。
本发明实施例提供的视频编码装置,通过获取模块21视频帧获取到插值滤波系数,编码模块22根据插值滤波系数对视频帧进行宏块下采样分解帧内编码,由于每一视频帧都有该视频帧对应的插值滤波系数,因此在对视频帧进行插值的过程中实现了采用插值滤波系数对视频帧的宏块根据视频帧的图像内容变化自适应插值,从而提高了视频编码压缩效率。
图13为本发明视频解码装置一个实施例的结构示意图,如图13所示,本实施例包括:获取模块31、解码模块32、插值模块33;
其中,获取模块31从视频帧形成的码流中获取所述视频帧的插值滤波系数;解码模块32根据获取模块31获取到的插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码;插值模块33对所述宏块下采样解码帧内编码中的插值过程采用获取模块31获取到的插值滤波系数进行插值运算。
本发明实施例提供的视频解码装置,获取模块31从视频帧形成的码流中获取到插值滤波系数,解码模块32根据插值滤波系数对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
图14为本发明视频解码装置又一个实施例的结构示意图,如图14所示,本实施例包括:获取模块41、解码模块42、插值模块43;
其中,获取模块41从视频帧形成的码流中获取所述视频帧的插值滤波系数;解码模块42根据获取模块41获取到的插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码;插值模块43对解码模块42进行宏块下采样解码帧内编码中的插值过程采用获取模块41获取到的插值滤波系数进行插值运算。
进一步地,获取模块41还可以包括:第一获取单元411和加法单元412;其中,第一获取单元411从视频帧中获取差值系数;加法单元412将所述差值系数与固定插值系数进行加法运算获取插值滤波系数。
进一步地,解码模块42还可以包括:第二获取单元421、第一解码单元422、第二解码单元423、上采样单元424;其中,第二获取单元421对所述视频帧形成的码流进行处理并获取宏块的残差系数;第一解码单元422根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;第二解码单元423根据所述解码图像值和所述插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;上采样单元424对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
本发明实施例提供的视频解码装置,获取模块41从视频帧形成的码流中获取到插值滤波系数,解码模块42根据插值滤波系数对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
图15为本发明视频编码方法再一个实施例的流程示意图,如图15所示,本发明实施例包括如下步骤:
步骤151、从设定滤波器集合中获取插值滤波器;
步骤152、将插值滤波器分配给视频帧的宏块;
步骤153、根据插值滤波器对应的插值滤波系数对视频帧的宏块进行宏块下采样分解帧内编码,其中,宏块下采样分解帧内编码中的插值过程使用插值滤波系数;
步骤154、将插值滤波器对应的标识信息写入视频帧形成的码流,使接收设备根据标识信息获取插值滤波器进行解码处理。
本发明实施例中的标识信息,具体可以为设定滤波器集合中能够表示滤波器之间相互区别的标识信息,例如:设定滤波器集合中的每一个滤波器的编号、或者每一个滤波器的序列号、或者每一个滤波器的索引号,但是编号、序列号、索引号并不构成对标识信息的限制。
本发明实施例提供的视频编码方法,通过插值滤波器对应的插值滤波系数对视频帧进行宏块下采样分解帧内编码,在对视频帧进行插值的过程中采用插值滤波器对视频帧的宏块根据图像内容变化自适应插值,该基于宏块级的自适应插值方法提高了视频编码压缩效率;由于标识信息的数据量远远小于最佳滤波器的数据量,因此通过码流传送标识信息能够减小视频数据在传输时占用的带宽。
进一步地,在上述图15所示实施例的基础上,步骤151具体可以通过如下方式实现:从设定滤波器集合中获取使宏块的预测残差能量最小的插值滤波器作为最佳的插值滤波器;或者,从设定滤波器集合中获取使宏块的率失真代价最小的插值滤波器作为最佳的插值滤波器。
在上述图15所示实施例的编码过程中,由于下采样分解是在宏块级(MB level)上进行的,因此,可以将本发明实施例的编码过程作为一种新的MB类型,与现有MB类型一起参与RDO编码;作为宏块级(MB level)的技术,可以在宏块级(MB level)上实现较好的适应视频帧(图像)内不同区域的纹理特性,从而提高编码压缩效率。
图16为本发明视频解码方法另一个实施例的流程示意图,如图16所示,本发明实施例包括如下步骤:
步骤161、从视频帧形成的码流中获取标识信息;
步骤162、根据标识信息从设定滤波器集合中的获取插值滤波器,将插值滤波器分配给视频帧的宏块;
步骤163、根据插值滤波器对应的插值滤波系数对宏块进行宏块下采样分解帧内解码。
本发明实施例提供的视频解码方法,通过插值滤波器的标识信息对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
在上述图16所示实施例的基础上,步骤163具体可以包括:
对视频帧形成的码流进行处理并获取宏块的残差系数;
根据残差系数对宏块中的一个块进行帧内解码得到宏块中的一个块的解码图像值;
根据解码图像值和插值滤波器对应的插值滤波系数对宏块中的其余块进行基于插值的块间预测解码得到宏块中的其余块的解码图像值;
对宏块中的所有块的解码图像值进行上采样合成,得到宏块的解码图像值。
图17为本发明视频编码装置再一个实施例的结构示意图,如图17所示,本实施例包括:获取模块71、分配模块72、编码模块73、写入模块74;
其中,获取模块71从设定滤波器集合中获取插值滤波器;分配模块72将获取模块71获取到的插值滤波器分配给视频帧的宏块;编码模块73根据所述插值滤波器对应的插值滤波系数对视频帧进行宏块下采样分解帧内编码;写入模块74将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理。
本发明实施例提供的视频编码装置,编码模块73通过获取模块71获取到的插值滤波器对应的插值滤波系数对视频帧进行宏块下采样分解帧内编码,在对视频帧进行插值的过程中采用插值滤波器对视频帧的宏块根据图像内容变化自适应插值,从而提高了视频编码压缩效率;由于标识信息的数据量远远小于最佳滤波器的数据量,因此通过写入模块74将标识信息写入码流传送标识信息能够减小视频数据在传输时占用的带宽。
进一步地,在上述图17所示实施例的基础上,获取模块71还可以包括:第一获取单元和/或第二获取单元;其中,第一获取单元从设定滤波器集合中获取使宏块的预测残差能量最小的插值滤波器作为最佳的插值滤波器;第二获取单元从设定滤波器集合中获取使宏块的率失真代价最小的插值滤波器作为最佳的插值滤波器;
在上述图17所示实施例中,通过写入模块将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理,由于标识信息的数据量远远小于最佳滤波器的数据量,因此通过码流传送标识信息能够减小视频数据在传输时占用的带宽。
图18为本发明视频解码装置另一个实施例的结构示意图,如图18所示,本实施例包括:第一获取模块81、第二获取模块82、解码模块83;
其中,第一获取模块81从视频帧形成的码流中获取标识信息;第二获取模块82根据所述标识信息从设定滤波器集合中的获取插值滤波器,将所述插值滤波其分配给所述视频帧的宏块;解码模块83根据所述插值滤波器对应的插值滤波系数对所述宏块进行宏块下采样分解帧内解码。
本发明实施例提供的视频解码装置,通过第一获取模块81获取到的插值滤波器的标识信息对视频帧进行宏块下采样分解帧内解码,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性,基于宏块级(MB level)解码过程实现了较好的适应视频帧(图像)内不同区域的纹理特性。
进一步地,在上述图18所示实施例的基础上,解码模块83还可以包括:第一获取单元、第一解码单元、第二解码单元、上采样单元;其中,第一获取单元对所述视频帧形成的码流进行处理并获取宏块的残差系数;第一解码单元根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;第二解码单元根据所述解码图像值和所述插值滤波器对应的插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;上采样单元对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
本领域普通技术人员可以理解:实现上述实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (25)

1.一种视频编码方法,其特征在于,包括:
根据视频帧获取插值滤波系数;
根据所述插值滤波系数,对所述视频帧进行宏块下采样分解帧内编码,其中,所述宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数。
2.根据权利要求1所述的方法,其特征在于,所述根据视频帧获取插值滤波系数包括:
对视频帧根据固定插值滤波系数进行宏块下采样分解帧内编码,获取视频帧重构图像;
根据所述视频帧的原始像素值与基于所述重构图像得到的预测值之间的差值得到第一预测残差;
根据所述第一预测残差获取视频帧的插值滤波系数。
3.根据权利要求1所述的方法,其特征在于,所述根据视频帧获取插值滤波系数包括:
根据所述视频帧的原始像素值与基于所述视频帧得到的预测值之间的差值得到第二预测残差;
根据所述第二预测残差获取所述视频帧的插值滤波系数。
4.根据权利要求1~3任一所述的方法,其特征在于,所述根据视频帧获取插值滤波系数包括:
获取所述视频帧在第一方向上的最佳第一方向插值滤波系数和所述视频帧在与所述第一方向垂直的第二方向上的最佳第二方向插值滤波系数,所述最佳第一方向插值滤波系数和最佳第二方向插值滤波系数为插值滤波系数。
5.根据权利要求4所述的方法,其特征在于,所述获取所述视频帧在第一方向上的最佳第一方向插值滤波系数和所述视频帧在与所述第一方向垂直的第二方向上的最佳第二方向插值滤波系数包括:
获取所述视频帧在第一方向上的预测残差能量最小的最佳第一方向插值滤波系数;
获取所述视频帧在与所述第一方向垂直的第二方向上的预测残差能量最小的最佳第二方向插值滤波系数。
6.根据权利要求1~3任一所述的方法,其特征在于,还包括:
将所述视频帧的插值滤波系数写入所述视频帧形成的码流,使所述接收设备根据所述插值滤波系数进行解码处理。
7.根据权利要求1~3所述的方法,其特征在于,插值滤波系数插值滤波系数还包括:
将所述视频帧的插值滤波系数与固定插值系数进行减法运算获取差值系数,将所述差值系数写入码流,使接收设备根据所述差值系数获取到所述插值滤波系数,并根据所述插值滤波系数进行解码处理。
8.一种视频解码方法,其特征在于,包括:
从视频帧形成的码流中获取所述视频帧的插值滤波系数;
根据所述插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码,其中,对所述宏块下采样帧内解码中的插值过程采用插值滤波系数进行插值运算。
9.根据权利要求8所述的方法,其特征在于,所述从视频帧形成的码流中获取所述视频帧的插值滤波系数包括:
从视频帧中获取差值系数,将所述差值系数与固定插值系数进行加法运算获取插值滤波系数。
10.根据权利要求8或9所述的方法,其特征在于,所述根据所述插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码包括:
对所述视频帧形成的码流进行处理并获取宏块的残差系数;
根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;
根据所述解码图像值和所述插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;
对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
11.一种视频编码装置,其特征在于,包括:
获取模块,用于根据视频帧获取插值滤波系数;
编码模块,用于对所述视频帧根据所述插值滤波系数进行宏块下采样分解帧内编码;
插值模块,用于在宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数进行插值运算。
12.根据权利要求11所述的装置,其特征在于,所述获取模块包括:
第一获取单元,用于对视频帧根据固定插值滤波系数进行宏块下采样分解帧内编码,获取视频重构图像;
第二获取单元,用于根据所述视频帧的原始像素值与基于所述重构图像得到的预测值之间的差值得到第一预测残差插值滤波系数;
第三获取模块,用于根据所述第一预测残差获取视频帧的插值滤波系数;和/或,
第四获取单元,用于根据所述视频帧的原始像素值与基于所述视频帧得到的预测值之间的差值得到第二预测残差;
第五获取单元,用于根据所述第二预测残差获取所述视频帧的插值滤波系数插值滤波系数。
13.根据权利要求11或12所述的装置,其特征在于,还包括:
写入模块,用于将所述插值滤波系数写入所述视频帧形成的码流,使所述接收设备根据所述插值滤波系数进行解码处理。
14.根据权利要求13所述的装置,其特征在于,所述写入模块包括:
减法单元,用于将所述插值滤波系数与固定插值系数进行减法运算获取插值系数;
写入单元,用于将所述差值系数写入码流,使接收设备根据所述差值系数获取到所述插值滤波系数,并根据所述插值滤波系数进行解码处理。
15.一种视频解码装置,其特征在于,包括:
获取模块,用于从视频帧形成的码流中获取所述视频帧的插值滤波系数;
解码模块,用于根据所述插值滤波系数对所述视频帧形成的码流进行宏块下采样分解帧内解码;
插值模块,用于对所述宏块下采样解码帧内编码中的插值过程采用插值滤波系数进行插值运算。
16.根据权利要求15所述的装置,其特征在于,所述获取模块包括:
第一获取单元,用于从视频帧中获取差值系数;
加法单元,用于将所述差值系数与固定插值系数进行加法运算获取插值滤波系数。
17.根据权利要求15或16所述的装置,其特征在于,所述解码模块包括:
第二获取单元,用于对所述视频帧形成的码流进行处理并获取宏块的残差系数;
第一解码单元,用于根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;
第二解码单元,用于根据所述解码图像值和所述插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;
上采样单元,用于对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
18.一种视频编码方法,其特征在于,包括:
从设定滤波器集合中获取插值滤波器;
将所述插值滤波器分配给视频帧的宏块;
根据所述插值滤波器对应的插值滤波系数对所述视频帧的宏块进行宏块下采样分解帧内编码,其中,所述宏块下采样分解帧内编码中的插值过程使用所述插值滤波系数;
将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理。
19.根据权利要求18所述的方法,其特征在于,所述从设定滤波器集合中获取插值滤波器包括:
从设定滤波器集合中获取使宏块的预测残差能量最小的插值滤波器;或者,
从设定滤波器集合中获取使宏块的率失真代价最小的插值滤波器。
20.一种视频解码方法,其特征在于,包括:
从视频帧形成的码流中获取标识信息;
根据所述标识信息从设定滤波器集合中的获取插值滤波器,将所述插值滤波器分配给所述视频帧的宏块;
根据所述插值滤波器对应的插值滤波系数对所述宏块进行宏块下采样分解帧内解码;其中,所述宏块下采样分解帧内解码中的插值过程使用插值滤波系数。
21.根据权利要求20所述的方法,其特征在于,所述根据所述插值滤波器对应的标识信息对所述视频帧的宏块进行宏块下采样分解帧内解码包括:
对所述视频帧形成的码流进行处理并获取宏块的残差系数;
根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;
根据所述解码图像值和所述插值滤波器对应的插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
22.一种视频编码装置,其特征在于,包括:
获取模块,用于从设定滤波器集合中获取插值滤波器;
分配模块,用于将所述插值滤波器分配给视频帧的宏块;
编码模块,用于根据所述插值滤波器对应的插值滤波系数对所述视频帧进行宏块下采样分解帧内编码;
写入模块,用于将所述插值滤波器对应的标识信息写入所述视频帧形成的码流,使接收设备根据所述标识信息获取插值滤波器进行解码处理。
23.根据权利要求22所述的装置,其特征在于,所述获取模块包括:
第一获取单元,用于从设定滤波器集合中获取使宏块的预测残差能量最小的插值滤波器作为最佳的插值滤波器;和/或,
第二获取单元,用于从设定滤波器集合中获取使宏块的率失真代价最小的插值滤波器作为最佳的插值滤波器。
24.一种视频解码装置,其特征在于,包括:
第一获取模块,用于从视频帧形成的码流中获取标识信息;
第二获取模块,用于根据所述标识信息从设定滤波器集合中的获取插值滤波器,将所述插值滤波器分配给所述视频帧的宏块;
解码模块,用于根据所述插值滤波器对应的插值滤波系数对所述宏块进行宏块下采样分解帧内解码。
25.根据权利要求24所述的装置,其特征在于,所述解码模块包括:
第一获取单元,用于对所述视频帧形成的码流进行处理并获取宏块的残差系数;
第一解码单元,用于根据所述残差系数对所述宏块中的一个块进行帧内解码得到所述宏块中的一个块的解码图像值;
第二解码单元,用于根据所述解码图像值和所述插值滤波器对应的插值滤波系数对所述宏块中的其余块进行基于插值的块间预测解码得到所述宏块中的其余块的解码图像值;
上采样单元,用于对所述宏块中的所有块的解码图像值进行上采样合成,得到所述宏块的解码图像值。
CN200910226177.2A 2009-11-24 2009-11-24 视频编码方法及装置、视频解码方法及装置 Active CN102075743B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN200910226177.2A CN102075743B (zh) 2009-11-24 2009-11-24 视频编码方法及装置、视频解码方法及装置
PCT/CN2010/079074 WO2011063747A1 (zh) 2009-11-24 2010-11-24 视频编码方法及装置、视频解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910226177.2A CN102075743B (zh) 2009-11-24 2009-11-24 视频编码方法及装置、视频解码方法及装置

Publications (2)

Publication Number Publication Date
CN102075743A true CN102075743A (zh) 2011-05-25
CN102075743B CN102075743B (zh) 2014-03-12

Family

ID=44034067

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910226177.2A Active CN102075743B (zh) 2009-11-24 2009-11-24 视频编码方法及装置、视频解码方法及装置

Country Status (2)

Country Link
CN (1) CN102075743B (zh)
WO (1) WO2011063747A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769745A (zh) * 2012-06-21 2012-11-07 哈尔滨工业大学 插值依赖的图像自适应下采样方法
CN103096057A (zh) * 2011-11-08 2013-05-08 华为技术有限公司 一种色度帧内预测方法和装置
CN105049846A (zh) * 2015-08-14 2015-11-11 广东中星电子有限公司 图像和视频编解码的方法和设备
WO2020181456A1 (en) * 2019-03-11 2020-09-17 Alibaba Group Holding Limited Inter coding for adaptive resolution video coding
CN112218072A (zh) * 2020-10-10 2021-01-12 南京大学 一种基于解构压缩和融合的视频编码方法
WO2021063389A1 (en) * 2019-10-03 2021-04-08 Huawei Technologies Co., Ltd. Encoder, decoder and corresponding methods using interpolation filtering
CN113709483A (zh) * 2021-07-08 2021-11-26 杭州微帧信息科技有限公司 一种插值滤波器系数自适应生成方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2048886A1 (en) * 2007-10-11 2009-04-15 Panasonic Corporation Coding of adaptive interpolation filter coefficients
CN101350925A (zh) * 2008-07-11 2009-01-21 清华大学 一种插值滤波方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103096057A (zh) * 2011-11-08 2013-05-08 华为技术有限公司 一种色度帧内预测方法和装置
CN103096057B (zh) * 2011-11-08 2016-06-29 华为技术有限公司 一种色度帧内预测方法和装置
CN102769745A (zh) * 2012-06-21 2012-11-07 哈尔滨工业大学 插值依赖的图像自适应下采样方法
CN102769745B (zh) * 2012-06-21 2014-12-31 哈尔滨工业大学 插值依赖的图像自适应下采样方法
CN105049846A (zh) * 2015-08-14 2015-11-11 广东中星电子有限公司 图像和视频编解码的方法和设备
WO2020181456A1 (en) * 2019-03-11 2020-09-17 Alibaba Group Holding Limited Inter coding for adaptive resolution video coding
WO2021063389A1 (en) * 2019-10-03 2021-04-08 Huawei Technologies Co., Ltd. Encoder, decoder and corresponding methods using interpolation filtering
CN112218072A (zh) * 2020-10-10 2021-01-12 南京大学 一种基于解构压缩和融合的视频编码方法
CN113709483A (zh) * 2021-07-08 2021-11-26 杭州微帧信息科技有限公司 一种插值滤波器系数自适应生成方法及装置
CN113709483B (zh) * 2021-07-08 2024-04-19 杭州微帧信息科技有限公司 一种插值滤波器系数自适应生成方法及装置

Also Published As

Publication number Publication date
CN102075743B (zh) 2014-03-12
WO2011063747A1 (zh) 2011-06-03

Similar Documents

Publication Publication Date Title
JP6417021B2 (ja) イントラ予測モードにおける映像復号化方法
CN103891293B (zh) 用于色度分量的自适应环路滤波的方法及设备
RU2355125C1 (ru) СПОСОБ ФИЛЬТРАЦИИ ДЛЯ УМЕНЬШЕНИЯ БЛОЧНОСТИ, УЧИТЫВАЮЩИЙ РЕЖИМ intra-BL, И ИСПОЛЬЗУЮЩИЙ ЕГО МНОГОУРОВНЕВЫЙ ВИДЕОКОДЕР/ВИДЕОДЕКОДЕР
CN102075743B (zh) 视频编码方法及装置、视频解码方法及装置
CA2763887C (en) Image processing device and method
CN101836455B (zh) 用于处理视频信号的方法和装置
TWI816439B (zh) 以區塊為基礎之預測技術
CN103796029B (zh) 视频编码设备
JP5918328B2 (ja) 画像符号化方法及び画像復号方法
CN102939761A (zh) 用于使用自适应滤波器来执行帧内预测的方法和设备
CN103931186B (zh) 图像解码装置
CN102484719A (zh) 对视频编码的方法和设备及对视频解码的方法和设备
CN105338347A (zh) 用于图像解码的方法和装置
CN101641961A (zh) 使用运动补偿滤波的图像编码和解码方法及设备
CN104935932A (zh) 图像解码设备
CN103703773A (zh) 在显示屏内进行帧内预测的方法和装置
TW202107890A (zh) 解碼視訊資料的設備、編碼視訊資料的設備及電腦可讀取儲存媒體
CN104604232A (zh) 用于编码多视点图像的方法及装置,以及用于解码多视点图像的方法及装置
CN103503451A (zh) 用于对经编码的图像分区进行滤波的方法和设备
CN105306957A (zh) 自适应环路滤波方法和设备
TW202107893A (zh) 使用內預測之寫碼技術
CN102075766B (zh) 视频编码、解码方法、装置及视频编解码系统
CN103875246A (zh) 影像编码方法、装置、影像解码方法、装置及它们的程序
CN107343199B (zh) 用于hevc中样点的快速自适应补偿方法
CN113099225A (zh) 一种基于图像纹理和梯度特征的快速编码的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant