CN111193929A - 一种前向双假设编码图像块的编解码方法和装置 - Google Patents

一种前向双假设编码图像块的编解码方法和装置 Download PDF

Info

Publication number
CN111193929A
CN111193929A CN201910573977.5A CN201910573977A CN111193929A CN 111193929 A CN111193929 A CN 111193929A CN 201910573977 A CN201910573977 A CN 201910573977A CN 111193929 A CN111193929 A CN 111193929A
Authority
CN
China
Prior art keywords
image block
frame
motion information
decoding
queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910573977.5A
Other languages
English (en)
Other versions
CN111193929B (zh
Inventor
虞露
朱兴国
凌勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Beijing Samsung Telecommunications Technology Research Co Ltd
Samsung Electronics Co Ltd
Original Assignee
Zhejiang University ZJU
Beijing Samsung Telecommunications Technology Research Co Ltd
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU, Beijing Samsung Telecommunications Technology Research Co Ltd, Samsung Electronics Co Ltd filed Critical Zhejiang University ZJU
Publication of CN111193929A publication Critical patent/CN111193929A/zh
Application granted granted Critical
Publication of CN111193929B publication Critical patent/CN111193929B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提出了一种前向双假设参考图像块的编解码方法,该方法根据当前的编码模式,将当前块的运动信息包括两个前向参考帧索引值和两个运动矢量有选择性地编码写入码流,为编码写入码流的部分运动信息则通过一定的规则在解码端导出。该方法充分利用图像块运动信息内部之间的相关性,以及当前图像块与相邻图像块运动信息之间的相关性,进一步提高帧间预测技术的编码效率。

Description

一种前向双假设编码图像块的编解码方法和装置
本申请是2014年6月13日提交的名称为“一种前向双假设编码图像块的编解码方法和装置”的中国专利申请No.201410264885.6的分案申请。
技术领域
本发明涉及视频图像编码与多媒体通信领域,具体而言,涉及一种前向双假设编码图像块的编解码方法及其对应的装置。
背景技术
视频和图像编码技术是数字视频和图像这一重要多媒体信息得以被广泛应用的基础和关键。当前基于块的视频编码混合框架下,视频编码一般包括以下四大块:预测编码、变换编码以及量化、熵编码、环路滤波,其中预测编码包括帧内预测和帧间预测。同一帧图像内部,相邻的像素点具有相近的像素值,故当前像素的编码可以用空域上相邻像素来进行预测。对于视频序列,相邻帧图像在时域上存在很大相关性,这是帧间预测技术的理论基础。目前,已有的视频编码标准如MPEG-1/2/4、H.261/H.263、H.264/AVC、AVS-1/2以及H.265/HEVC,均采用了编码混合框架,基于块的帧间预测技术也随着视频编码的发展而逐渐改进。
基于块的帧间预测技术的发展主要是两个方面:(1)从整像素预测到1/2像素预测,再到1/4像素甚至1/8像素预测,像素点预测精度越来越高;(2)单方向的参考块数目从1个变到2个,参考块数目增多。在H.264/HEVC和AVS-2之前,对于只有前向参考图像内的每个块,其前向参考块只有1个,当前块的像素经过前向参考块像素预测,参考块的位置信息(参考帧索引和运动矢量MV)被编码写入码流,我们将这样的图像块称为前向单假设编码图像块。在H.264/HEVC和AVS-2中,前向多参考预测技术被引入。对于只有前向参考图像内的每个块,其前向参考块有2个,当前块的像素经过2个前向参考加权预测后,参考块的位置信息(2个参考帧索引和2个MV)被编码写入码流,我们将这样的具有两个参考块的图像块称为前向双假设编码图像块。
双假设编码图像块有2个参考图像块。假设当前待编码的图像块为A,其对应的参考图像块为B和C,那么图像块A的预测编码过程可以描述为:将参考图像块B和C进行加权求和得到预测图像块P,用P对A进行预测编码。其中加权求和的思想可以用下述公式进行描述:
P=α×C+(1-α)×B (1)
其中0<α<1,α可以是编解码器或者编码标准规定的固定值(如α=0.5),也可以是在码流中传送的值,也可以是根据图像块A、B和C所在的参考帧之间的关系推导出来的值。上述公式只是描述了加权求和的思想,具体实现方式可能有异(如实际实现可能采用整数实现方式),这种思想目前在加权预测技术等广泛用到。
在HEVC中,对于双假设编码图像块,其对应的2个参考帧索引之间没有直接联系,2个参考帧索引值可以相同,也可以不同;其对应的2个MV之间也没有直接联系,可以相同,也可以不同;编码端需要将2个参考帧索引和2个MV都写入码流。在AVS-2中,前向双假设编码图像块的编码模式又称为方向性双假设模式(简称DMH,Directional MultipleHypothesis),与HEVC中不同的是,该模式下的两个参考帧索引是相同的,且两个MV值之间的差小于一个阈值;故在该模式下要写入码流的参考块的位置信息只包含3个:1个参考帧索引、1个MV和两个MV之间的差值。为了描述方便,一个图像块的参考帧索引和MV都称为该图像块的运动信息。
为了进一步提高双假设预测编码的效率,我们分析了双假设编码图像块的特性,发现在双假设预测编码下,2个参考块所在的参考帧索引之间存在一定联系,且2个MV之间也并非完全不相关;且当前图像块的运动信息与其相邻块的运动信息也有很大联系。以MV为例,当前图像块的MV与其时空域相邻图像块的MV存在很大的相关性,在一些特殊的情形,可以通过相邻块的MV信息直接导出当前块的MV,而不需要在码流中传输。目前已有一些MV导出方法,如MV中值导出法、AMVP、Merger基于边界长度的MV导出法等,统称为运动矢量导出方法。
当前块的时空域相邻块如图1所示。空域相邻块总共有5种,见图1a,时域相邻块即为前一编码帧在相同位置的块,一般称为colocated块,见图1b。
除了从相邻块的MV导出当前块的MV之外,还可以根据参考帧索引值之间的关系导出MV,称为scaling MV导出方法。scaling MV的导出规则为:对于当前块A,它在参考帧索引值为RF1的参考帧F1中的匹配块B所对应的运动矢量为MV1,那么任给一个索引值为RF2的参考帧F2,块A的在该参考帧的匹配块C所对应的运动矢量MV2的导出方法是:
Figure BDA0002111588020000021
其中d1是参考帧F1与当前帧的距离,d2是参考帧F2与当前帧的距离。值得一提的是,运动矢量MV中有两个分量:x分量MVx和y分量MVy,一般写成MV={MVx,MVy}。故使用公式(2)推导MV时,2个分量之间是互相独立推导的。
当引入双假设编码思想后,双假设编码图像块需要两个参考块。对于编码端而言,其对应的运动搜索过程需要从参考队列中搜出两个参考帧索引值及其对应的两个运动矢量。这个搜索过程可以采用全搜索,即对参考队列中的每一帧每个位置点都进行搜索选择;也可以采用快速搜索算法。而快速搜索方法有很多种,可以是固定1个或者2个参考帧,只对帧内的每个位置点进行搜索;或者是简化帧内位置点的搜索但每帧都搜索;亦或者是即简化帧的搜索又简化帧内位置点的搜索。对于解码端而言,如果运动信息(2个参考帧索引和2个运动矢量)全部在码流中传输,那么解码端只需要直接从码流中获取运动信息即可;如果运动信息并非全部在码流中传输,那么解码端除了从码流中获取以外,还需要特定的运动信息导出方式。
发明内容
本发明在分析运动信息之间的相关性的基础上,提出了一种基于导出部分运动信息的双假设编码图像块的编解码方法。以前的方法没有完全利用运动信息之间的相关性,该发明有效利用了运动信息之间的相关性,可以提高帧间预测效率。
本发明的第一目的在于提供一种前向双假设编码图像块的编码方法,其包括:
(1)对图像块A在参考帧中进行运动搜索,得到其最佳的两个参考图像块B和C,将参考图像块B和C的加权求和作为图像块A的预测图像块P;
(2)根据参考图像块B的位置得到其所在的参考帧Fb和运动矢量MVb;根据参考图像块C的位置得到其所在的参考帧Fc和运动矢量MVc;按照显示顺序,Fb和Fc均在图像块A所在的帧Fa之前;根据Fb在参考队列中的位置得到其对应的参考帧索引值RFb,根据Fc在参考队列中的位置得到其对应的参考帧索引值RFc
(3)将编码器选择的编码模式信息写入码流;
(4)根据编码模式,将RFb、RFc、MVb、MVc中的部分但非全部信息编码写入码流。
进一步的,所述参考帧索引值RFb、RFc和运动矢量MVb、MVc采用如下之一的模式进行编码:
(1)模式1:将RFb、MVb、MVc信息写入码流,不将RFc信息写入码流;
(2)模式2:将MVb、MVc信息写入码流,不将RFb、RFc信息写入码流;
(3)模式3:将RFb、RFc、MVb信息写入码流,不将MVc信息写入码流;
(4)模式4:将RFb、MVb信息写入码流,不将RFc、MVc信息写入码流。
进一步的,所述的模式1中,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
进一步的,所述的模式3中的RFb、RFc一定不相等。
进一步的,所述的模式4中的RFb等于或者不等于RFc
进一步的,所述的模式4中的RFb不等于参考队列中的所有前向帧中距离当前帧最近的前向帧对应的参考索引值。
进一步的,所述的模式4中的RFb不等于参考队列中的所有前向帧对应的参考索引值中最小的参考索引值。
进一步的,所述的模式4中的RFb不等于预设的固定值。
本发明的第二目的在于提供一种前向双假设编码图像块的解码方法,其包括:
(1)从码流中解码得到模式信息;
(2)根据所述模式信息,从码流中解码得到RFb、RFc、MVb、MVc中的部分但非全部信息,所述的RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据以下三种方法之一导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息:
(a)根据图像块A相邻块的运动信息,利用已有的运动矢量和参考帧索引导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息;
(b)根据从码流中解码得到的RFb、RFc、MVb、MVc部分信息导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息;
(c)对未从码流中解码得到的RFb、RFc、MVb、MVc信息置为预设的固定值;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考帧Fb中提取参考图像块B,从参考帧Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;将参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P。
进一步的,所述的参考帧索引值RFb、RFc和运动矢量MVb、MVc采用如下之一的模式进行解码:
(1)模式1:从码流中解码得到RFb、MVb、MVc信息,根据下述三种方法之一导出RFc信息:
(a)将RFb的值赋给RFc
(b)将参考队列中距离当前帧最近的前向帧所对应的参考帧索引值赋给RFc
(c)将当前图像块相邻块的参考帧索引值赋给RFc
(2)模式2:从码流中解码得到MVb、MVc信息,根据下述两种方法之一导出RFb、RFc信息:
(a)将参考队列中距离当前帧最近的2个前向帧所对应的参考帧索引值分别赋给RFb和RFc
(b)根据时空域相邻块的参考帧索引值导出RFb和RFc
(3)模式3:从码流中解码得到RFb、RFc、MVb信息,根据已有的运动矢量导出方法导出MVc信息;
(4)模式4:从码流中解码得到RFb、MVb信息,根据下述四种方法之一导出RFc信息:
(a)将参考队列中参考帧索引值不等于RFb的所有前向帧中距离当前帧最近的前向帧所对应的参考帧索引值赋给RFc
(b)将当前图像块相邻块的参考帧索引值赋给RFc
(c)将参考队列中参考帧索引值不等于RFb的所有前向帧所对应的参考帧索引值中的最小值赋给RFc;
(d)将预设的固定值赋给RFc;
按照已有的运动矢量导出方法导出MVc信息。
进一步的,所述的模式1中,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
进一步的,所述的模式3中的RFb、RFc一定不相等。
进一步的,所述模式4中的RFb不等于参考队列中距离当前帧最近的前向帧所对应的参考帧索引值,且RFc、MVc按以下方法导出:将参考队列中距离当前帧最近的前向帧所对应的参考帧索引值赋给RFc,按照已有的运动矢量导出方法导出MVc信息;
进一步的,所述模式4中的RFb不等于参考队列中所有前向帧对应的参考索引值中的最小值,且RFc、MVc按以下方法导出:将参考队列中所有前向帧所对应的参考索引值中的最小值赋给RFc;按照已有的运动矢量导出方法导出MVc信息;
进一步的,所述模式4中的RFb不等于预设的固定值,且RFc、MVc按以下方法导出:将所述预设的固定值赋给RFc;按照已有的运动矢量导出方法导出MVc信息。
本发明第三目的在于提供一种前向双假设编码图像块的编码装置,其包括运动搜索单元,帧间预测单元,选择运动信息单元,运动信息编码单元和模式编码单元;
所述的运动搜索单元的输入是当前图像块A和参考队列,输出为参考图像块B和参考图像块C以及对应的运动信息{RFb、RFc、MVb、MVc};所述的参考队列中所有帧在显示顺序上均在当前帧之前,RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;该单元的功能是为当前图像块A在参考队列中找到两个参考块,并输出运动信息;
所述的帧间预测单元输入是参考图像块B和参考图像块C,输出是预测图像块P;该单元的功能是对参考图像块B和C加权求和得到预测图像块P;
所述的选择运动信息单元的输入是当前图像块A的编码模式信息和运动搜索单元输出的运动信息合集,输出是运动信息子集R,用于运动信息子集的选择;
所述的运动信息编码单元的输入是运动信息子集R,输出是码流,用于对运动信息子集进行编码写入码流;
所述的模式编码单元的输入是编码模式,输出是码流,功能是对编码模式进行编码写入码流。
进一步的,所述的选择运动信息单元所输入的编码模式有4种,分别为模式1、2、3和4,运动信息合集为{RFb、RFc、MVb、MVc},在模式1、2、3、4下输出的运动信息子集分别为{RFb、MVb、MVc},{MVb、MVc}、{RFb、RFc、MVb}以及{RFb、MVb}。
进一步的,所述的选择运动信息单元所输入的编码模式为模式1时,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
进一步的,所述的选择运动信息单元所输入的编码模式为模式3时,RFb、RFc一定不相等。
进一步的,所述的选择运动信息单元所输入的编码模式为模式4时,RFb等于或者不等于RFc
进一步的,所述的选择运动信息单元所输入的编码模式为模式4时,RFb不等于参考队列中的所有前向帧中距离当前帧最近的参考帧对应的参考索引值。
进一步的,所述的选择运动信息单元所输入的编码模式为模式4时,RFb不等于参考队列中的所有前向帧对应的参考索引值中最小的参考索引值。
进一步的,所述的选择运动信息单元所输入的编码模式为模式4时,RFb不等于预设的固定值。
本发明第四目的在于提供一种前向双假设编码图像块的解码装置,其包括模式信息解码单元,运动信息解码单元,运动信息导出单元,导出参考块单元和帧间预测单元;
所述的模式信息解码单元的输入是码流,输出是当前图像块A的模式信息,用于从码流中解码得到图像块A的模式信息;
所述的运动信息解码单元的输入是码流和图像块A的模式信息,输出是运动信息子集R,用于从码流和模式信息中解码得到图像块A的部分运动信息;
所述的运动信息导出单元的输入是运动信息子集R和模式信息,输入是运动信息子集Q,且满足R与Q的交集是空集;该单元的功能是根据已解码的信息导出余下的运动信息;
所述的导出参考块单元的输入是运动信息合集U和参考队列,输出是两个参考图像块B和C,其中参考队列中所有帧在显示顺序上均在当前帧之前,运动信息合集U是运动信息子集R和Q的并集,功能是根据已导出的运动信息和参考队列得到2个前向参考图像块;
所述的帧间单元的输入是参考图像块B和C,输出是预测图像块P,功能是将参考图像块B和C的进行加权求和得到预测图像块P。
进一步的,所述的运动信息解码单元所输入的模式信息有4种,为模式1、2、3和4;在模式1、2、3、4下输出的运动信息子集R分别是{RFb、MVb、MVc}、{MVb、MVc}、{RFb、RFc、MVb}以及{RFb、MVb}。
进一步的,所述的运动信息解码单元所输入的模式信息为模式1时,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
进一步的,所述的运动信息解码单元所输入的模式信息为模式3时,RFb、RFc一定不相等。
相对于已有的双假设编码图像块的编解码方法,该发明可以进一步利用运动信息的相关性,只传送部分的运动信息,从而可以达到在同样的视频编码质量下节省传输运动信息的目的,进而减少传输的码流。
附图说明
图1(a)和(b)为当前块的时空域相邻块示意图;
图2为本发明一种前向双假设编码图像块A的编码装置实施例结构示意图;
图3为本发明一种前向双假设编码图像块A的解码装置实施例结构示意图。
具体实施方式
为了使本发明的技术方案和优点更加清楚,下面将结合附图对本发明做进一步详细的描述。显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
当前图像待编码的一个N×N大小的图像块A,参考队列中有M个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。N、M都是正整数,N表示图像块的大小,M表示参考队列中参考帧的个数。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为下列4个模式中的一种:(a)模式1,只在码流中传输1个参考帧索引和两个运动矢量;(b)模式2,只在码流中传输2个运动矢量;(c)模式3,只在码流中传输2个参考帧索引和1个运动矢量;(d)模式4,只在码流中传输1个参考帧索引及其对应的那个运动矢量。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在参考队列中搜寻得到两个N×N大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb,图像块B与图像块A之间的距离用运动矢量为MVb表示;图像块C所在的帧为Fc,对应的参考帧索引值为RFc,对应的运动矢量为MVc
(2)将图像块B和C的加权求和作为图像块A的预测图像块P;
(3)将编码器选择的编码模式信息写入码流;
(4)根据编码模式特征,将RFb、RFc、MVb、MVc中的部分但非全部信息进行编码写入码流;
实施例2
当前图像待编码的一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在4个参考帧中搜寻得到两个16×16大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=2,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={15,-10};图像块C所在的帧为Fc,对应的参考帧索引值为RFc=0,对应的运动矢量为MVc={12,-8};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权;
(3)编码器经过率失真优化选择的最佳编码模式为模式1,将模式1信息写入码流;
(4)根据编码模式1的特征,将RFb、MVb、MVc进行编码写入码流;不将RFc信息写入码流。
实施例3
当前图像待编码的一个8×8大小的图像块A,参考队列中有6个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在6个参考帧中搜寻得到两个8×8大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=0,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={1,2};图像块C所在的帧为Fc=1,对应的参考帧索引值为RFc=1,对应的运动矢量为MVc={4,7};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=1/3;
(3)编码器经过率失真优化选择的最佳编码模式为模式2,将模式2信息写入码流;
(4)根据编码模式2的特征,将MVb、MVc进行编码写入码流;不将RFb、RFc信息写入码流。
实施例4
当前图像待编码的一个32×32大小的图像块A,参考队列中有3个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在参考帧中搜寻得到两个32×32大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=0,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={1,3};图像块C所在的帧为Fc,对应的参考帧索引值为RFc=2,对应的运动矢量为MVc={3,9};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α由两个参考帧与当前编码帧的距离而定,Fb与当前帧的距离为1,Fc与当前帧的距离为3,故参考块C的权重为1/(1+3)=0.25,取α=0.25;
(3)编码器经过率失真优化选择的最佳编码模式为模式3,将模式3信息写入码流;
(4)根据编码模式3的特征,将RFb、RFc、MVb信息编码写入码流,不将MVc信息写入码流。
实施例5
当前图像待编码的一个64×64大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在参考帧中搜寻得到两个64×64大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=0,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={5,7};图像块C所在的帧为Fc,对应的参考帧索引值为RFc=1,对应的运动矢量为MVc={10,14};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权;
(3)编码器经过率失真优化选择的最佳编码模式为模式4,将模式4信息写入码流;
(4)根据编码模式4的特征,将RFb、MVb信息编码写入码流,不将RFc、MVc信息写入码流。
实施例6
当前图像待编码的一个32×32大小的图像块A,参考队列中有10个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括::
(1)编码器对图像块A通过运动搜索在参考帧中搜寻得到两个32×32大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=0,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={3,4};图像块C所在的帧为Fc,对应的参考帧索引值为RFc=0,对应的运动矢量为MVc={10,9};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权;
(3)编码器经过率失真优化选择的最佳编码模式为模式1,将模式1信息写入码流;
(4)根据编码模式1的特征,该模式下MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|=|3-10|=7>hx,|MVb_y-MVc_y|=|4-9|=5>hy,其中hx,hy是编码器或者编码标准规定的一个固定值,在本实例中hx=2,hy=2;|*|为取绝对值操作;RFb、RFc满足RFb=RFc;将RFb、MVb、MVc进行编码写入码流;不将RFc信息写入码流。
实施例7
当前图像待编码的一个4×4大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。。编码器对图像块A的编码模式有许多种,其中至少有1种模式采用了双假设编码方法,我们称之为双假设编码模式。双假设编码模式可以为实施例1中所述的4个模式中的一种。对图像块A的编码包括:
(1)编码器对图像块A通过运动搜索在参考帧中搜寻得到两个4×4大小的参考图像块B和C;其中图像块B所在的帧为Fb,对应的参考帧索引值为RFb=0,图像块B与图像块A之间的距离用运动矢量为MVb表示,其中MVb={2,4};图像块C所在的帧为Fc,对应的参考帧索引值为RFc=1,对应的运动矢量为MVc={4,8};
(2)将图像块B和C的加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权;
(3)编码器经过率失真优化选择的最佳编码模式为模式3,将模式3信息写入码流;
(4)根据编码模式3,该模式下RFb=0,RFc=1互不相等,将RFb、RFc、MVb信息编码写入码流,不将MVc信息写入码流。
实施例8
当前待解码图像中一个N×N大小的图像块A,参考队列中有M个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。N、M都是正整数,N表示图像块的大小,M表示参考队列中参考帧的个数。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为下述4种模式中的一种:(a)模式1,只从码流中解码得到1个参考帧索引和两个运动矢量,第2个参考帧索引值通过预定义的参考帧索引导出方法进行导出;(b)模式2,只从码流中解码得到2个运动矢量,2个参考帧索引值则通过预定义的参考帧索引导出方法进行导出;(c)模式3,只从码流中解码得到2个参考帧索引和1个运动矢量,第2个运动矢量通过预定义的运动矢量导出方法导出;(d)模式4,只在码流中解码得到一个参考帧索引及其对应的那个运动矢量,另一个参考帧索引及其对应的运动矢量则分别由预定的规则进行导出。对图像块A的解码包括:
(1)从码流中解码得到图像块A的解码模式信息;
(2)根据所述模式信息,从码流中解码得到RFb、RFc、MVb、MVc中的部分但非全部信息,所述的RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据以下三种方法之一导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息:
a)根据图像块A相邻块的运动信息导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息;
b)根据从码流中解码得到的RFb、RFc、MVb、MVc部分信息导出未从码流中解码得到的RFb、RFc、MVb、MVc其余信息;
c)对未从码流中解码得到的RFb、RFc、MVb、MVc信息置为预设的固定值;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考帧Fb中提取参考图像块B,从参考帧Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P。
实施例9
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式1;
(2)根据模式1的特征,从码流中解码RFb、MVb、MVc信息,得到RFb=1,MVb={4,9},MVc={2,3};其中RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:寻找在参考队列中与当前帧距离最近的帧,其在参考队列中的索引值idx=0,令RFc=idx;从而得到RFc=0;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例10
当前待解码图像中一个32×32大小的图像块A,参考队列中有7个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式1;
(2)根据模式1的特征,从码流中解码RFb、MVb、MVc信息,得到RFb=2,MVb={2,7},MVc={10,3};其中RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为RFc=RFb;从而得到RFc=2;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例11
当前待解码图像中一个64×64大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式1;
(2)根据模式1的特征,从码流中解码RFb、MVb、MVc信息,得到RFb=2,MVb={2,7},MVc={10,3};其中RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:取得图像块A的左边图像块L,如果块L有两个参考帧索引值,取较小的索引值并记为为idx;如果块L只有一个参考帧索引值,将此索引值记为idx;如果块L无参考帧索引值,即L不使用帧间预测编码,则idx=0;令RFc=idx;在本实例中,块L是使用单假设参考的块,只有一个参考帧,其对应的索引值为idx=1;故而导出结果为RFc=1;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α由两个参考帧与当前编码帧的距离而定,Fb与当前帧的距离为3,Fc与当前帧的距离为2,故参考块C的权重为3/(2+3)=0.6,取α=0.6。
注:实施例11中,步骤(3)中的左边图像块可以换做其他如图1所示的任何时、空域相邻块;此实例中仅列出左边块的例子。
实施例12
当前待解码图像中一个8×8大小的图像块A,参考队列中有6个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式2;
(2)根据模式2的特征,从码流中解码MVb、MVc信息,得到MVb={3,8},MVc={9,2};其中MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)导出参考图像块B所在的参考帧Fb在参考队列中的索引值RFb和参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:寻找在参考队列中与当前帧距离最近的2个参考帧,其在参考队列中的索引值分别是idx1=0和idx2=1,令RFb=idx1,RFc=idx2;得到的结果为RFb=0和RFc=1;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例13
当前待解码图像中一个4×4大小的图像块A,参考队列中有5个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式2;
(2)根据模式2的特征,从码流中解码MVb、MVc信息,得到MVb={3,-8},MVc={-9,2};其中MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)导出参考图像块B所在的参考帧Fb在参考队列中的索引值RFb和参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为RFb=idx1,RFc=idx2,其中idx1和idx2根据上边块的参考帧索引值导出,具体如下:如果上边块有两个参考帧,则将其索引值分别赋值为idx1和idx2;如果上边块只有一个参考帧索引,将此参考帧索引记为idx1,并令idx2=0;如果上边块为非帧间编码块,没有参考帧索引,那么idx1=0,idx2=1;在本实例中上边块为双假设编码块,有两个参考帧,idx1=1,idx2=2,故得到的结果为RFb=1,RFc=2;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
注:实施例13中,步骤(3)中的上边图像块可以换做其他如图1所示的任何时、空域相邻块;此实例中仅列出上边块的例子。
实施例14
当前待解码图像中一个16×16大小的图像块A,参考队列中有8个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式3;
(2)根据模式3的特征,从码流中解码RFb、RFc、MVb信息,得到RFb=1,RFc=5,MVb={-1,-1};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据scaling MV导出方法从RFb、RFc、MVb中导出参考图像块C相对于图像块A的运动矢量MVc;Fb与当前帧的距离为2,Fc与当前帧的距离为6,那么MVc={-1×6/2,-1×6/2}={-3,-3};
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例15
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至3。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,RFb的取值范围为0至3,在此实例中设解得RFb=1,MVb={8,6};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:在参考队列中参考帧索引值不等于RFb的参考帧中寻找与当前帧距离最近的帧,设其在参考队列中的索引值为idx,则RFc=idx;在本实例中idx值为0,从而得到RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据sca l ing MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为2,Fc与当前帧的距离为1,那么MVc={8×1/2,6×1/2}={4,3};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例16
当前待解码图像中一个128×128大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,得到RFb=1,MVb={2,9};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc和参考图像块C相对于图像块A的运动矢量MVc,导出方法为:取得图像块A的左下边图像块LB,如果块LB有两个参考帧索引值,取较小的索引值并记为idx,如果块LB只有一个参考帧索引值,将此索引值记为idx,并记块LB在该idx索引值下对应的运动矢量为mv,令RFc=idx且MVc=mv;如果块LB无参考帧索引值,即LB不使用帧间预测编码,则寻找在参考队列中与当前帧距离最近且其参考帧索引值不等于RFb的帧,将其在参考队列中的索引值为idx,则有RFc=idx,而此时MVc就通过scaling MV导出法由RFb、RFc、MVb信息导出;在本实例中,块LB只有一个参考帧,其索引值为2,对应的mv={7,2},从而得到RFc=2,MVc={7,2};
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
注:实施例16中,步骤(3)中的左下边图像块可以换做其他如图1所示的任何时空域相邻块;此实例中仅列出左下边块的例子。
实施例17
当前待解码图像中一个32×32大小的图像块A,参考队列中有5个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至4。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,其中RFb的值不等于参考队列中距离当前帧最近的参考帧的参考帧索引值,在此实例中设参考队列中距离当前帧最近的参考帧的参考帧索引值idx为0,则码流中解码得到的RFb取值范围为1至4,在本实例中设解得RFb=2,MVb={8,4};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将参考队列中距离当前帧最近的参考帧对应的参考帧索引值idx赋给RFc,在本实例中idx值为0,从而得到RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为4,Fc与当前帧的距离为1,那么MVc={8×1/4,4×1/4}={2,1};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例18
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至3。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,其中RFb的值不等于参考队列中距离当前帧最近的参考帧的参考帧索引值,在此实例中设参考队列中距离当前帧最近的参考帧的参考帧索引值idx为2,则码流中解码得到的RFb可以为0、1或3,在本实例中设解得RFb=1,MVb={6,3};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将参考队列中距离当前帧最近的参考帧对应的参考帧索引值idx赋给RFc,在本实例中idx值为2,从而得到RFc=2;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为3,Fc与当前帧的距离为1,那么MVc={6×1/3,3×1/3}={2,1};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例19
当前待解码图像中一个16×16大小的图像块A,参考队列中有6个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至5。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,RFb的取值范围为0至5,在此实例中设解得RFb=0,MVb={3,4};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将参考队列中的所有参考帧对应的参考索引值中不等于RFb的参考索引值中的最小值idx赋给RFc,在本实例中可以得到idx为1,从而得到RFc=1;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为1,Fc与当前帧的距离为2,那么MVc={3×2/1,4×2/1}={6,8};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例20
当前待解码图像中一个8×8大小的图像块A,参考队列中有7个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至6。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,RFb的取值范围为0至6,在此实例中设解得RFb=5,MVb={6,12};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将参考队列中的所有参考帧对应的参考索引值中不等于RFb的参考索引值中的最小值idx赋给RFc,在本实例中可以得到idx值为0,从而得到RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为6,Fc与当前帧的距离为1,那么MVc={6×1/6,12×1/6}={1,2};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例21
当前待解码图像中一个64×64大小的图像块A,参考队列中有8个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引的取值范围为0至7。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,其中RFb的值不等于参考队列的所有参考帧对应的参考索引值中最小的参考索引值,在此实例中设最小的参考索引值idx为0,则RFb的取值范围的1至7,在此实例中设解得RFb=1,MVb={6,2};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将参考队列的所有参考帧对应的参考索引值中最小的参考帧索引值idx赋给RFc,在本实例中idx值为0,从而得到RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为2,Fc与当前帧的距离为1,那么MVc={6×1/2,2×1/2}={3,1};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例22
当前待解码图像中一个8×8大小的图像块A,参考队列中有7个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引值的取值范围为0至6。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,RFb的取值范围为0至6,在此实例中设解得RFb=3,MVb={12,4};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将固定值idx赋给RFc,在此实例中假设固定值idx=0,则RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为4,Fc与当前帧的距离为1,那么MVc={12×1/4,4×1/4}={3,1};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例23
当前待解码图像中一个32×32大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引值的取值范围为0至3。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,RFb的取值范围为0至3,在此实例中设解得RFb=2,MVb={12,6};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将固定值idx赋给RFc,在此实例中假设固定值idx=1,则RFc=1;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为3,Fc与当前帧的距离为2,那么MVc={12×2/3,6×2/3}={8,4};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例24
当前待解码图像中一个8×8大小的图像块A,参考队列中有5个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引值的取值范围为0至4。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,其中RFb的值不等于预设的固定值idx,在此实例中假设预设的固定值idx=2,则RFb的取值可以为0、1、3或4,在此实例中设解得RFb=3,MVb={15,5};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将固定值idx赋给RFc,本实例中idx为2,从而得到RFc=2;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为5,Fc与当前帧的距离为3,那么MVc={15×3/5,5×3/5}={9,6};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(6)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例25
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前,参考索引值的取值范围为0至3。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,本例中解码得到图像块A的解码模式为模式4;
(2)根据模式4的特征,从码流中解码RFb、MVb信息,其中RFb的值不等于预设的固定值idx,在此实例中假设预设的固定值idx=0,则RFb的取值范围为1至3,在此实例中设解得RFb=2,MVb={9,6};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据RFb导出参考图像块C所在的参考帧Fc在参考队列中的索引值RFc,导出规则为:将固定值idx赋给RFc,本实例idx为0,所以得RFc=0;
(4)根据现有方法导出参考图像块C相对于图像块A的运动矢量MVc,优选地,一种可能的实现方法为根据scaling MV导出方法从RFb、RFc、MVb中导出MVc,具体地有:设Fb与当前帧的距离为3,Fc与当前帧的距离为1,那么MVc={9×1/3,6×1/3}={3,2};
(5)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例26
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式3;
(2)根据模式3的特征,从码流中解码RFb、RFc、MVb信息,得到RFb=2,RFc=3,MVb={-20,15};该模式下所解码得到的RFb、RFc满足RFb、RFc一定不相等,其中RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量;所述的参考图像块B和参考图像块C是图像块A的参考图像块;
(3)根据scaling MV导出方法从RFb、RFc、MVb中导出参考图像块C相对于图像块A的运动矢量MVc:Fb与当前帧的距离为5,Fc与当前帧的距离为8,那么MVc={-20×8/5,15×8/5}={-32,24};
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例27
当前待解码图像中一个16×16大小的图像块A,参考队列中有4个参考帧,这些参考帧在显示顺序上都排列在当前帧之前。解码器对图像块A的解码模式有许多种,其中至少有1种模式采用了双假设解码方法,我们称这样的模式为双假设解码模式。双假设解码模式可以为实施例8所述的4种模式中的一种。对图像块A的解码包括:
(1)从码流中解码图像块A的模式信息,解码结果为图像块A的解码模式为模式1;
(2)根据模式1的特征,从码流中解码RFb、MVb、MVc信息,得到RFb=1,MVb={-20,9},MVc={10,2};该模式下MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|=|-20-10|=30>hx,|MVb_y-MVc_y|=|9-2|=7>hy,其中hx,hy是编码器或者编码标准规定的一个固定值,在本实例中hx=2,hy=2;|*|为取绝对值操作;RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量;其中参考图像块B和参考图像块C是图像块A的参考图像块;
(3)参考图像块C所在的参考帧Fc在参考队列中的索引值RFc导出规则为RFc=RFb;从而得到RFc=1;
(4)根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考图像Fb中提取参考图像块B,参考图像Fc中提取参考图像块C,按照显示顺序,Fb和Fc均在图像块A所在的图像Fa之前;
(5)由参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P,其中加权求和如公式(1)所示,参数α=0.5,即是平均加权。
实施例28
一种前向双假设编码图像块A的编码装置,如图2所示,包括:运动搜索单元,帧间预测单元,选择运动信息单元,运动信息编码单元和模式编码单元。这些单元之间的关系和作用如下:
运动搜索单元的输入是当前图像块A和参考队列,输出为参考图像块B和参考图像块C以及对应的运动信息集合{RFb、RFc、MVb、MVc},其中参考队列中所有帧在显示顺序上均在当前帧之前,RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值,MVb是参考图像块B相对于图像块A的运动矢量,MVc是参考图像块C相对于图像块A的运动矢量。该单元的功能是为当前图像块A在参考队列中找到两个参考图像块,并输出运动信息。
帧间预测单元的输入是参考图像块B和参考图像块C,输出是预测图像块P;该单元的功能是对参考图像块B和C进行加权求和得到预测图像块P。
选择运动信息单元的输入是当前图像块A的编码模式信息和运动搜索单元输出的运动信息合集,输出是运动信息子集R,用于运动信息子集的选择。
运动信息编码单元的输入是运动信息子集,输出是码流,功能是对运动信息子集进行编码写入码流。
模式编码单元的输入是编码模式,输出是码流,功能是对编码模式进行编码写入码流。
实施例29
一种前向双假设编码图像块A的编码装置,各单元的关系和作用如实施例28所述。其中选择运动信息单元所输入的编码模式有4种,分别为模式1、2、3和4,运动信息合集为{RFb、RFc、MVb、MVc},在模式1、2、3、4下输出的运动信息子集分别为{RFb、MVb、MVc},{MVb、MVc}、{RFb、RFc、MVb}以及{RFb、MVb}。
实施例30
一种前向双假设编码图像块A的编码装置,各单元的关系和作用如实施例29所述。其中选择运动信息单元所输入的编码模式为模式1时,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
实施例31
一种前向双假设编码图像块A的编码装置,各单元的关系和作用如实施例29所述。其中选择运动信息单元所输入的编码模式为模式3时,RFb、RFc一定不相等。
实施例32
一种前向双假设编码图像块A的解码装置,如图3所示,包括:模式信息解码单元,运动信息解码单元,运动信息导出单元,导出参考块单元和帧间预测单元。各单元之间的关系和作用如下:
模式信息解码单元的输入是码流,输出是当前图像块A的模式信息,功能是从码流中解码得到图像块A的模式信息。
运动信息解码单元的输入是码流和图像块A的模式信息,输出是运动信息子集R,该单元的功能是从码流和模式信息中解码得到图像块A的部分运动信息。
运动信息导出单元的输入是运动信息子集R和模式信息,输入是运动信息子集Q,且满足R与Q的交集是空集。该单元的功能是根据已解码的信息导出余下的运动信息。
导出参考块单元的输入是运动信息合集U和参考队列,输出是两个参考图像块B和C,其中参考队列中所有帧在显示顺序上均在当前帧之前,运动信息合集U是子集R和子集Q的并集。该单元的功能是根据已导出的运动信息和参考队列得到2个前向参考图像块。
运动补偿单元的输入是参考图像B和C,输出是预测图像块P。该单元的功能是将参考图像块B和C的进行加权求和得到预测图像块P。
实施例33
一种前向双假设编码图像块A的解码装置,各单元的关系和作用如实施例32所述。其中运动信息解码单元所输入的模式信息有4种,为模式1、2、3和4;在模式1、2、3、4下输出的运动信息子集R分别是{RFb、MVb、MVc}、{MVb、MVc}、{RFb、RFc、MVb}以及{RFb、MVb}。
实施例34
一种前向双假设编码图像块A的解码装置,各单元的关系和作用如实施例33所述。其中运动信息解码单元所输入的模式信息为模式1时,MVb={MVb_x,MVb_y}和MVc={MVc_x,MVc_y}必满足|MVb_x-MVc_x|>hx,|MVb_y-MVc_y|>hy,其中hx,hy是编码器或者编码标准规定的一个固定值;所述的RFb、RFc满足RFb=RFc
实施例35
一种前向双假设编码图像块A的解码装置,各单元的关系和作用如实施例33所述。其中运动信息解码单元所输入的模式信息为模式3时,RFb、RFc一定不相等。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (4)

1.一种前向双假设编码图像块的编码方法,包括:
对图像块A在参考队列中进行运动搜索,得到两个参考图像块B和C,将参考图像块B和C的加权求和作为图像块A的预测图像块P;
根据参考图像块B的位置得到参考图像块B所在的参考帧Fb和运动矢量MVb;根据参考图像块C的位置得到参考图像块C所在的参考帧Fc和运动矢量MVc;按照显示顺序,Fb和Fc均在图像块A所在的帧Fa之前;根据Fb在参考队列中的位置得到Fb对应的参考帧索引值RFb,根据Fc在参考队列中的位置得到Fc对应的参考帧索引值RFc
仅将RFb、RFc、MVb、MVc中的RFb和MVb编码写入码流,
其中,RFc为参考队列中的所有前向参考帧对应的参考帧索引值中不等于RFb的参考索引值中的最小值,以及
其中,MVc是基于MVb、帧Fa与参考帧Fb之间的第一距离、以及帧Fa与参考帧Fc之间的第二距离进行缩放的运动矢量。
2.一种前向双假设编码图像块的解码方法,包括:
从码流中解码得到RFb、RFc、MVb、MVc中的RFb和MVb,其中RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值;RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值;MVb是参考图像块B相对于当前图像块A的运动矢量,MVc是参考图像块C相对于当前图像块A的运动矢量;所述参考图像块B和参考图像块C是图像块A的参考图像块;
根据所述RFb和MVb导出RFb、RFc、MVb以及MVc中的RFc以及MVc
根据参考帧索引值RFb、RFc和运动矢量MVb、MVc,从参考帧Fb中导出参考图像块B以及从参考帧Fc中导出参考图像块C;按照显示顺序,Fb和Fc均在图像块A所在的图像帧Fa之前;将参考图像块B和参考图像块C加权求和作为图像块A的预测图像块P;
其中,导出RFc为参考队列中的所有参考帧对应的参考索引值中不等于RFb的参考索引值中的最小值,以及
其中MVc是基于MVb、帧Fa与参考帧Fb之间的第一距离、以及帧Fa与参考帧Fc之间的第二距离进行缩放的运动矢量。
3.一种前向双假设编码图像块的编码装置,包括:运动搜索单元,帧间预测单元,选择运动信息单元和运动信息编码单元;
运动搜索单元的输入包括当前图像块A和参考队列;运动搜索单元的输出包括参考图像块B,参考图像块C和对应的运动信息合集{RFb,RFc,MVb,MVc};RFb是参考图像块B所在的参考帧Fb在参考队列中的索引值;RFc是参考图像块C所在的参考帧Fc在参考队列中的索引值;MVb表示参考图像块B相对于图像块A的运动矢量;MVc是参考图像块C相对于图像块A的运动矢量;Fb和Fc均在图像块A所在的帧Fa之前;所述运动搜索单元用于为当前图像块A在参考队列中找到两个参考图像块,并输出运动信息;
所述帧间预测单元的输入包括参考图像块B和C,帧间预测单元的输出包括预测图像块P;帧间预测单元用于对参考图像块B和C加权求和得到预测图像块P;
所述选择运动信息单元的输入包括所述运动搜索单元输出的运动信息合集;所述选择运动信息单元的输出包括运动信息子集R;所述选择运动信息单元用于所述运动信息子集的选择;
所述运动信息编码单元的输入包括所述运动信息子集R,所述运动信息编码单元的输出包括码流;所述运动信息编码单元用于将所述运动信息子集进行编码并写入所述码流;
所述运动信息编码单元用于将仅包含RFb、RFc、MVb、MVc运动信息合集中的RFb和MVb的运动信息子集R进行编码写入码流;
其中,RFc为参考队列中的所有参考帧对应的参考索引值中不等于RFb的参考索引值中的最小值,
其中,MVc是基于MVb、帧Fa与参考帧Fb之间的第一距离、以及帧Fa与参考帧Fc之间的第二距离进行缩放的运动矢量。
4.一种前向双假设编码图像块的解码装置,包括:运动信息解码单元,运动信息导出单元,导出参考块单元和帧间预测单元;其中,
所述运动信息解码单元的输入包括码流,所述运动信息解码单元的输出包括当前图像块A的运动信息子集R;
所述运动信息解码单元用于从所述码流中获取所述图像块A的部分运动信息,所述部分运动信息仅包括RFb、RFc、MVb、MVc中的RFb和MVb;RFb表示参考图像块B所在的参考帧Fb在参考队列中的索引值,RFc表示参考图像块C所在的参考帧Fc在参考队列中的索引值;MVb表示参考图像块B相对于图像块A的运动矢量,MVc表示参考图像块C相对于图像块A的运动矢量;Fb和Fc均在图像块A所在的帧Fa之前;所述运动信息导出单元的输入包括运动信息子集R,所述运动信息导出单元的输出包括运行信息子集Q;所述运动信息导出单元用于根据RFb、MVb导出RFb、RFc、MVb、MVc中的RFc、MVc
所述导出参考块单元的输入包括运动信息合集U和参考队列,所述导出参考块单元的输出包括两个参考图像块B和C,所述运动信息合集U是所述子集R以及所述子集Q的并集;所述导出参考块单元用于根据所述运动信息以及所述参考队列得到两个前向参考图像块;以及
所述帧间预测单元的输入包括所述参考图像块B和C,输出包括预测图像块P,所述帧间预测单元用于将所述参考图像块B和C进行加权求和得到所述预测图像块P,
其中,所述运动信息导出单元用于导出RFc为参考队列中的所有参考帧对应的参考索引值中不等于RFb的参考索引值中的最小值,以及
其中,MVc是基于MVb、帧Fa与参考帧Fb之间的第一距离、以及帧Fa与参考帧Fc之间的第二距离进行缩放的运动矢量。
CN201910573977.5A 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置 Active CN111193929B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310689790 2013-12-16
CN2013106897904 2013-12-16
CN201410264885.6A CN104717512B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201410264885.6A Division CN104717512B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置

Publications (2)

Publication Number Publication Date
CN111193929A true CN111193929A (zh) 2020-05-22
CN111193929B CN111193929B (zh) 2022-04-12

Family

ID=53403085

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201910574609.2A Active CN111193930B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置
CN201910573977.5A Active CN111193929B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置
CN201410264885.6A Active CN104717512B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910574609.2A Active CN111193930B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201410264885.6A Active CN104717512B (zh) 2013-12-16 2014-06-13 一种前向双假设编码图像块的编解码方法和装置

Country Status (6)

Country Link
US (1) US10187654B2 (zh)
KR (1) KR101631947B1 (zh)
CN (3) CN111193930B (zh)
BR (1) BR112016014080B1 (zh)
RU (1) RU2700399C2 (zh)
WO (1) WO2015093810A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110121073B (zh) * 2018-02-06 2021-07-09 浙江大学 一种双向帧间预测方法及装置
CN117560505A (zh) 2018-03-29 2024-02-13 华为技术有限公司 一种双向帧间预测方法及装置
CN110944171B (zh) * 2018-09-25 2023-05-09 华为技术有限公司 一种图像预测方法和设备
WO2020141766A1 (ko) * 2019-01-01 2020-07-09 엘지전자 주식회사 머지 데이터에 대한 정보를 코딩하는 방법 및 장치
WO2023050439A1 (zh) * 2021-09-30 2023-04-06 浙江大学 编解码方法、码流、编码器、解码器、存储介质和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119493A (zh) * 2007-08-30 2008-02-06 威盛电子股份有限公司 区块式数字编码图像的译码方法及装置
CN102131091A (zh) * 2010-01-15 2011-07-20 联发科技股份有限公司 解码端运动向量导出方法
US20120177125A1 (en) * 2011-01-12 2012-07-12 Toshiyasu Sugio Moving picture coding method and moving picture decoding method
CN102934440A (zh) * 2010-05-26 2013-02-13 Lg电子株式会社 用于处理视频信号的方法和设备

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2688958B1 (fr) * 1992-03-17 1997-06-27 Thomson Csf Procede de codage d'images bi-standard tres bas debit et codeur-decodeur pour la mise en óoeuvre de ce procede.
US6807231B1 (en) * 1997-09-12 2004-10-19 8×8, Inc. Multi-hypothesis motion-compensated video image predictor
US7266150B2 (en) * 2001-07-11 2007-09-04 Dolby Laboratories, Inc. Interpolation of video compression frames
KR100508798B1 (ko) * 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
JP2004023458A (ja) 2002-06-17 2004-01-22 Toshiba Corp 動画像符号化/復号化方法及び装置
CN101043626B (zh) * 2002-07-15 2010-06-09 株式会社日立制作所 动态图像编码方法
US7801217B2 (en) 2002-10-01 2010-09-21 Thomson Licensing Implicit weighting of reference pictures in a video encoder
US7720152B2 (en) 2002-10-01 2010-05-18 Thomson Licensing Implicit weighting of reference pictures in a video decoder
CN1284380C (zh) * 2003-12-31 2006-11-08 中国科学院计算技术研究所 一种参考图像缓冲区管理方法
US8228994B2 (en) * 2005-05-20 2012-07-24 Microsoft Corporation Multi-view video coding based on temporal and view decomposition
JP5165593B2 (ja) * 2006-02-02 2013-03-21 トムソン ライセンシング 組合せ参照双方向予測を用いて動き推定を行う方法および装置
KR101356734B1 (ko) * 2007-01-03 2014-02-05 삼성전자주식회사 움직임 벡터 트랙킹을 이용한 영상의 부호화, 복호화 방법및 장치
KR100955396B1 (ko) * 2007-06-15 2010-04-29 성균관대학교산학협력단 양-예측 부호화 방법 및 장치, 양-예측 복호화 방법 및장치 및 기록매체
CN101605256A (zh) * 2008-06-12 2009-12-16 华为技术有限公司 一种视频编解码的方法及装置
CN102113326A (zh) * 2008-08-04 2011-06-29 杜比实验室特许公司 重叠块差异估计和补偿体系结构
KR101377527B1 (ko) * 2008-10-14 2014-03-25 에스케이 텔레콤주식회사 복수 개의 참조 픽처의 움직임 벡터 부호화/복호화 방법 및장치와 그를 이용한 영상 부호화/복호화 장치 및 방법
US8873626B2 (en) * 2009-07-02 2014-10-28 Qualcomm Incorporated Template matching for video coding
US9118929B2 (en) 2010-04-14 2015-08-25 Mediatek Inc. Method for performing hybrid multihypothesis prediction during video coding of a coding unit, and associated apparatus
US8837592B2 (en) * 2010-04-14 2014-09-16 Mediatek Inc. Method for performing local motion vector derivation during video coding of a coding unit, and associated apparatus
US9288501B2 (en) * 2011-03-08 2016-03-15 Qualcomm Incorporated Motion vector predictors (MVPs) for bi-predictive inter mode in video coding
US20130176390A1 (en) 2012-01-06 2013-07-11 Qualcomm Incorporated Multi-hypothesis disparity vector construction in 3d video coding with depth
US20130188719A1 (en) * 2012-01-20 2013-07-25 Qualcomm Incorporated Motion prediction in svc using motion vector for intra-coded block
US9264706B2 (en) * 2012-04-11 2016-02-16 Qualcomm Incorporated Bypass bins for reference index coding in video coding
US9635356B2 (en) * 2012-08-07 2017-04-25 Qualcomm Incorporated Multi-hypothesis motion compensation for scalable video coding and 3D video coding
CN103024378B (zh) * 2012-12-06 2016-04-13 浙江大学 一种视频编解码中运动信息导出方法及装置
US9357214B2 (en) * 2012-12-07 2016-05-31 Qualcomm Incorporated Advanced merge/skip mode and advanced motion vector prediction (AMVP) mode for 3D video
US9521389B2 (en) * 2013-03-06 2016-12-13 Qualcomm Incorporated Derived disparity vector in 3D video coding
US9491460B2 (en) * 2013-03-29 2016-11-08 Qualcomm Incorporated Bandwidth reduction for video coding prediction
US9609347B2 (en) * 2013-04-04 2017-03-28 Qualcomm Incorporated Advanced merge mode for three-dimensional (3D) video coding
KR20130067280A (ko) * 2013-04-18 2013-06-21 엠앤케이홀딩스 주식회사 인터 예측 부호화된 동영상 복호화 방법
CN103338372A (zh) * 2013-06-15 2013-10-02 浙江大学 一种视频处理方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119493A (zh) * 2007-08-30 2008-02-06 威盛电子股份有限公司 区块式数字编码图像的译码方法及装置
CN102131091A (zh) * 2010-01-15 2011-07-20 联发科技股份有限公司 解码端运动向量导出方法
CN102934440A (zh) * 2010-05-26 2013-02-13 Lg电子株式会社 用于处理视频信号的方法和设备
US20120177125A1 (en) * 2011-01-12 2012-07-12 Toshiyasu Sugio Moving picture coding method and moving picture decoding method

Also Published As

Publication number Publication date
BR112016014080B1 (pt) 2023-05-16
US10187654B2 (en) 2019-01-22
CN111193929B (zh) 2022-04-12
CN104717512A (zh) 2015-06-17
CN111193930A (zh) 2020-05-22
KR101631947B1 (ko) 2016-06-20
BR112016014080A2 (pt) 2017-08-08
WO2015093810A1 (ko) 2015-06-25
CN104717512B (zh) 2019-07-23
RU2018137850A3 (zh) 2019-07-17
RU2700399C2 (ru) 2019-09-16
US20160301947A1 (en) 2016-10-13
KR20150070035A (ko) 2015-06-24
RU2018137850A (ru) 2018-12-13
CN111193930B (zh) 2021-11-30

Similar Documents

Publication Publication Date Title
CN111010568B (zh) 插值滤波器的训练方法、装置及视频图像编解码方法、编解码器
CN111193929B (zh) 一种前向双假设编码图像块的编解码方法和装置
CN109076234A (zh) 图像预测方法和相关设备
CN113491132B (zh) 视频图像解码、编码方法、装置及可读存储介质
US20210400259A1 (en) Dmvr using decimated prediction block
TWI790662B (zh) 一種編解碼方法、裝置及其設備
US11889109B2 (en) Optical flow based video inter prediction
CN113383550A (zh) 光流修正的提前终止
CN114026864A (zh) 用于几何分割模式的色度样本权重推导
CN113597761A (zh) 帧内预测方法和装置
JP7384939B2 (ja) 双予測のオプティカルフロー計算および双予測補正におけるブロックレベル境界サンプル勾配計算のための整数グリッド参照サンプルの位置を計算するための方法
CN116405686A (zh) 图像重建方法和装置
AU2020261145B2 (en) Picture prediction method and apparatus, and computer-readable storage medium
CN115348449A (zh) 编码器,解码器和使用压缩mv存储的对应方法
AU2024201357A1 (en) Picture prediction method and apparatus, and computer-readable storage medium
TWI748522B (zh) 視訊編碼器、視訊解碼器及相應方法
CN111263166B (zh) 一种视频图像预测方法及装置
CN113473134A (zh) 子块融合候选的单独融合列表和视频编码的帧内和帧间预测技术协调
RU2783385C2 (ru) Кодер, декодер и соответствующие способы с использованием компактного mv хранилища
RU2817030C2 (ru) Кодер, декодер и соответствующие способы использования для списка объединения ibc
RU2793825C1 (ru) Способ и устройство для хранения информации о движении
RU2771925C1 (ru) Кодер, декодер и соответствующие способы с использованием компактного mv хранилища
RU2815734C1 (ru) Способ и устройство для хранения информации о движении
EP3907996A1 (en) Image display order determination method and apparatus, and video coding/decoding device
CN115211109A (zh) 对通用帧内预测过程的滤波器修改的编码器、解码器及相应方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant