CN113411593B - 一种编解码方法、装置及其设备 - Google Patents

一种编解码方法、装置及其设备 Download PDF

Info

Publication number
CN113411593B
CN113411593B CN202110679294.5A CN202110679294A CN113411593B CN 113411593 B CN113411593 B CN 113411593B CN 202110679294 A CN202110679294 A CN 202110679294A CN 113411593 B CN113411593 B CN 113411593B
Authority
CN
China
Prior art keywords
block
value
current block
original
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110679294.5A
Other languages
English (en)
Other versions
CN113411593A (zh
Inventor
陈方栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202110679294.5A priority Critical patent/CN113411593B/zh
Publication of CN113411593A publication Critical patent/CN113411593A/zh
Application granted granted Critical
Publication of CN113411593B publication Critical patent/CN113411593B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Abstract

本申请提供一种编解码方法、装置及其设备，该方法包括：若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；根据所述水平方向速率和所述垂直方向速率获取预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。通过本申请的技术方案，可以提高编码性能。

Description

一种编解码方法、装置及其设备
技术领域
本申请涉及编解码技术领域，尤其是涉及一种编解码方法、装置及其设备。
背景技术
为了达到节约空间的目的，视频图像都是经过编码后才传输的，完整的视频编码方法可以包括预测、变换、量化、熵编码、滤波等过程。其中，预测编码可以包括帧内编码和帧间编码，帧间编码是利用视频时间域的相关性，使用邻近已编码图像的像素预测当前图像的像素，以达到有效去除视频时域冗余的目的。
在帧间编码中，可以使用运动矢量(Motion Vector，MV)表示当前帧视频图像的当前块与参考帧视频图像的参考块之间的相对位移。例如，当前帧的视频图像A与参考帧的视频图像B存在很强的时域相关性，在需要传输视频图像A的图像块A1(当前块)时，则可以在视频图像B中进行运动搜索，找到与图像块A1最匹配的图像块B1(即参考块)，并确定图像块A1与图像块B1之间的相对位移，该相对位移也就是图像块A1的运动矢量。
编码端可以将运动矢量发送给解码端，不是将图像块A1发送给解码端，解码端可以根据运动矢量和图像块B1得到图像块A1。显然，由于运动矢量占用的比特数远远小于图像块A1占用的比特数，因此，上述方式可以节约大量比特开销。
在传统方式中，在当前块是单向块时，获得当前块的运动信息后，可以根据该运动信息进行编码/解码，从而提高编码性能。但是，在当前块是双向块时，获得当前块的双向运动信息后，可以根据双向运动信息获取来自两个不同方向的预测图像，而来自两个不同方向的预测图像往往存在镜像对称的关系，当前编码框架中未充分利用这一特性来进一步的去除冗余。也就是说，针对双向块的应用场景，目前存在编码性能比较差等问题。
发明内容
本申请提供了一种编解码方法、装置及其设备，可以提高编码性能。
本申请提供一种编解码方法，所述方法包括：若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：
根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；
根据所述水平方向速率和所述垂直方向速率获取预测补偿值；
根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
本申请提供一种编解码装置，所述装置包括：所述装置用于若当前块的特征信息满足特定条件，则获取所述当前块或者所述当前块的子块的目标预测值，所述装置包括：
第一确定模块，用于若当前块的特征信息满足特定条件，根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；
第二确定模块，用于根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；
第一获取模块，用于根据所述水平方向速率和所述垂直方向速率获取预测补偿值；
第二获取模块，用于根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
本申请提供一种编码端设备，包括：处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令；所述处理器用于执行机器可执行指令，以实现如下步骤：若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；
根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；
根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；
根据所述水平方向速率和所述垂直方向速率获取预测补偿值；
根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
本申请提供一种解码端设备，包括：处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令；所述处理器用于执行机器可执行指令，以实现如下步骤：若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；
根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；
根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；
根据所述水平方向速率和所述垂直方向速率获取预测补偿值；
根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
由以上技术方案可见，本申请实施例中，可以根据当前块的第一单向运动信息确定第一原始预测值，根据当前块的第二单向运动信息确定第二原始预测值，根据第一原始预测值和第二原始预测值确定水平方向速率和垂直方向速率，并根据水平方向速率和垂直方向速率获取预测补偿值，并根据预测补偿值获取目标预测值。上述方式能够基于光流法获取当前块或者当前块的子块的目标预测值，从而提高硬件实现友好性，带来编码性能的提高。
附图说明
为了更加清楚地说明本申请实施例的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据本申请实施例的这些附图获得其他的附图。
图1A是本申请一种实施方式中的插值的示意图；
图1B是本申请一种实施方式中的视频编码框架的示意图；
图2是本申请一种实施方式中的编解码方法的流程图；
图3是本申请一种实施方式中的编解码方法的流程图；
图4是本申请一种实施方式中的当前块的子块对应的参考块的示意图；
图5是本申请一种实施方式中的编解码装置的结构图；
图6是本申请一种实施方式中的解码端设备的硬件结构图；
图7是本申请一种实施方式中的编码端设备的硬件结构图。
具体实施方式
在本申请实施例中所使用的术语仅仅是出于描述特定实施例的目的，而非用于限制本申请。本申请实施例和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其它含义。还应当理解，本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。应当理解，尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，此外，所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请实施例中提出一种编解码方法、装置及其设备，可以涉及如下概念：
帧内预测与帧间预测(intra prediction and inter prediction)技术：帧内预测是指，利用视频空间域的相关性，使用当前图像已经编码块的像素预测当前像素，以达到去除视频空域冗余的目的。帧间预测是指，利用视频时域的相关性，由于视频序列包含有较强的时域相关性，使用邻近已编码图像像素预测当前图像的像素，达到有效去除视频时域冗余的目的。主要视频编码标准帧间预测部分都采用了基于块的运动补偿技术，主要原理是为当前图像的每一像素块在之前的已编码图像中寻找最佳匹配块，该过程称为运动估计(Motion Estimation，ME)。
运动矢量(Motion Vector，MV)：在帧间编码中，可以使用运动矢量表示当前编码块与其参考图像中的最佳匹配块之间的相对位移。每个划分的块都有相应的运动矢量需要传输到解码端，如果对每个块的运动矢量进行独立编码和传输，特别是划分成小尺寸的块时，则需要消耗相当多的比特。为了降低用于编码运动矢量的比特数，则可以利用相邻图像块之间的空间相关性，根据相邻已编码块的运动矢量对当前待编码块的运动矢量进行预测，然后，对预测差进行编码。这样，可以有效地降低表示运动矢量的比特数。在对当前块的运动矢量编码过程中，首先，使用相邻已编码块的运动矢量预测当前块的运动矢量，然后，可以对运动矢量的预测值(MVP，Motion Vector Prediction)与运动矢量的真正估值之间的差值(MVD，MotionVector Difference)进行编码，从而有效降低MV的编码比特数。
运动信息(Motion Information)：由于运动矢量表示当前图像块与某个参考图像块的位置偏移，为了准确的获取指向图像块的信息，除了运动矢量，还需要参考帧图像的索引信息来表示使用哪个参考帧图像。在视频编码技术中，对于当前帧图像，通常可以建立一个参考帧图像列表，参考帧图像索引信息则表示当前图像块采用了参考帧图像列表中的第几个参考帧图像。此外，很多编码技术还支持多个参考图像列表，因此，还可以使用一个索引值来表示使用了哪一个参考图像列表，这个索引值可以称为参考方向。在视频编码技术中，可以将运动矢量、参考帧索引、参考方向等与运动相关的信息统称为运动信息。
插值(Interpolation)：若当前运动矢量为非整像素精度，则无法直接从对应参考帧中拷贝已有像素值，所需像素值通过插值获得。如图1A所示，若想获得偏移为1/2像素的像素值Y1/2，则通过周围已有像素值X插值获得。若采用抽头数为N的插值滤波器，则通过周围N个整像素插值获得。若抽头数N为8，则
Figure BDA0003122230980000041
ak为滤波器系数，即加权系数。
运动补偿：运动补偿的过程就是通过插值或拷贝获得当前块所有预测像素值的过程。
视频编码框架：参见图1B所示，可以使用视频编码框架实现本申请实施例的编码端处理流程，此外，视频解码框架的示意图与图1B类似，在此不再重复赘述，而且，可以使用视频解码框架实现本申请实施例的解码端处理流程。具体的，在视频编码框架和视频解码框架中，包括帧内预测、运动估计/运动补偿、参考图像缓冲器、环内滤波、重建、变换、量化、反变换、反量化、熵编码器等模块。在编码端，通过这些模块之间的配合，可以实现编码端处理流程，在解码端，通过这些模块之间的配合，可以实现解码端处理流程。
在传统方式中，在当前块是双向块(即当前块是采用双向预测的块)时，来自两个不同方向的预测图像往往存在镜像对称的关系，当前编码框架中未充分利用这一特性来进一步的去除冗余，从而存在编码性能比较差等问题。针对上述发现，本申请实施例中，在当前块是双向块时，提出一种基于光流法的预测信号调整方式，能够基于原始运动信息获得原始预测值，基于原始预测值，通过光流方程获得当前块的预测补偿值，基于该预测补偿值与原始预测值获得当前块的目标预测值。上述方式能够基于光流法获取当前块的目标预测值，从而提高硬件实现友好性，带来编码性能的提高，即可以提高编码性能和编码效率。
以下结合几个具体实施例，对本申请实施例中的编解码方法进行详细说明。
实施例1：参见图2所示，为编解码方法的流程示意图，该方法可以应用于解码端或者编码端，该方法通过执行以下步骤获取当前块或者当前块的子块的目标预测值。若针对当前块执行以下步骤，则可以获取当前块的目标预测值；若当前块被划分为至少一个子块，且针对当前块的每个子块执行以下步骤，则可以获取当前块的子块的目标预测值，该方法包括：
步骤201，若当前块的特征信息满足特定条件，则根据当前块的第一单向运动信息确定第一原始预测值，并根据当前块的第二单向运动信息确定第二原始预测值。
示例性的，当前块可以是双向块(即当前块是采用双向预测的块)，也就是说，当前块对应的运动信息是双向运动信息，且这个双向运动信息可以包括两个不同方向的运动信息，将这两个不同方向的运动信息称为第一单向运动信息和第二单向运动信息。第一单向运动信息可以对应第一参考帧，且该第一参考帧位于当前块所处当前帧的前面；第二单向运动信息可以对应第二参考帧，且该第二参考帧位于当前块所处当前帧的后面。
示例性的，特征信息可以包括但不限于以下一种或者多种：运动信息属性；预测模式属性；尺寸信息；序列级开关控制信息。当然，上述只是几个示例，对此不做限制。
若特征信息包括运动信息属性，且运动信息属性满足如下情况的一种或者同时满足以下至少两种时，则确定运动信息属性满足特定条件；1、当前块采用双向预测，且当前块对应的两个参考帧来自不同方向；2、当前块包括多个子块，多个子块的运动信息均相同；3、当前块采用双向预测，且当前块对应的两个参考帧的加权权重相同；4、当前块采用双向预测，且当前块对应的两个参考帧与当前帧的距离相同；5、当前块采用双向预测，且当前块对应的两个参考帧的预测值的差异值小于预设阈值。当然，上述只是几个示例，对此不做限制。
针对情况5，还需要获取当前块对应的两个参考帧的预测值的差异值，为了获取该差异值，可以采用如下方式：根据当前块的第一单向运动信息从第一参考帧中获取第一预测块，并根据当前块的第二单向运动信息从第二参考帧中获取第二预测块；根据第一预测块的下采样后的预测值与第二预测块的下采样后的预测值的SAD，获取第一参考帧与第二参考帧的预测值的差异值。或者，根据当前块的第一单向运动信息从第一参考帧中获取第一预测块，并根据当前块的第二单向运动信息从第二参考帧中获取第二预测块；根据第一预测块的预测值与第二预测块的预测值的SAD，获取第一参考帧与第二参考帧的预测值的差异值。
若特征信息包括预测模式属性，且预测模式属性为不采用基于帧内帧间联合预测的融合模式，和/或，不采用对称运动矢量差模式，则确定预测模式属性满足特定条件。
若特征信息包括序列级开关控制信息，且该序列级开关控制信息为允许当前块采用双向光流模式，则确定序列级开关控制信息满足特定条件。
若特征信息包括尺寸信息，且尺寸信息包括宽度值、高度值和面积值中的至少一个，当尺寸信息中的宽度值、高度值和面积值中的至少一个满足相应的阈值条件时，尺寸信息满足特定条件。示例性的，尺寸信息满足如下情况的一种或者同时满足以下至少两种时，则确定尺寸信息满足特定条件；当前块的宽度值大于或等于第一阈值，当前块的宽度值小于或等于第二阈值；当前块的高度值大于或等于第三阈值，当前块的高度值小于或等于第四阈值；当前块的面积值大于或等于第五阈值，当前块的面积值小于或等于第六阈值。当然，上述只是几个示例，对此不做限制。
示例性的，第一阈值可以小于第二阈值，第一阈值和第二阈值均为2的X1次方，X1为正整数，对此第一阈值和第二阈值均不做限制，例如，第一阈值可以为8，第二阈值可以为128。第三阈值可以小于第四阈值，第三阈值和第四阈值也为2的X2次方，X2为正整数，对此第三阈值和第四阈值均不做限制，例如，第三阈值可以为8，第四阈值可以为128。第五阈值可以小于第六阈值，第五阈值和第六阈值也为2的X3次方，X3为正整数，对此第五阈值和第六阈值均不做限制，例如，第五阈值可以为64(即8*8)，第六阈值可以为16384(即128*128)。当然，上述阈值只是示例，对这些阈值均不做限制。
示例性的，特征信息可以包括运动信息属性、预测模式属性、尺寸信息、序列级开关控制信息中的一种或者几种。当特征信息包括运动信息属性时，则运动信息属性满足特定条件时，可以表明特征信息满足特定条件；当特征信息包括预测模式属性时，则预测模式属性满足特定条件时，可以表明特征信息满足特定条件；当特征信息包括尺寸信息时，则尺寸信息满足特定条件时，可以表明特征信息满足特定条件；当特征信息包括序列级开关控制信息时，则序列级开关控制信息满足特定条件时，可以表明特征信息满足特定条件。
当特征信息包括运动信息属性、预测模式属性、尺寸信息、序列级开关控制信息中的至少两种时，例如，以特征信息包括运动信息属性和预测模式属性为例，则运动信息属性满足特定条件、且预测模式属性满足特定条件时，可以表明特征信息满足特定条件。又例如，以特征信息包括运动信息属性、尺寸信息、序列级开关控制信息为例，则运动信息属性满足特定条件、且尺寸信息满足特定条件、且序列级开关控制信息满足特定条件时，可以表明特征信息满足特定条件。当然，上述过程只是几个示例，对此不做限制。
示例性的，根据当前块的第一单向运动信息确定第一原始预测值，并根据当前块的第二单向运动信息确定第二原始预测值，可以包括但不限于：基于当前块的第一单向运动信息，从第一参考帧中确定第一参考块，并确定第一参考块的第一原始预测值；第一参考块的中心区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到，第一参考块的边缘区域的第一原始预测值是通过对第一参考帧中的像素值进行拷贝得到。基于当前块的第二单向运动信息，从第二参考帧中确定第二参考块，并确定第二参考块的第二原始预测值；第二参考块的中心区域的第二原始预测值是通过对第二参考帧中的像素值进行插值得到，第二参考块的边缘区域的第二原始预测值是通过对第二参考帧中的像素值进行拷贝得到。
例如，基于当前块的第一单向运动信息，可以从第一参考帧中确定当前块对应的第一参考块，假设当前块的大小为M*M，第一参考块的大小为N*N，N可以大于M，如M为4，N为6。可以将第一参考块划分为中心区域和边缘区域，第一参考块的中心区域是指：以第一参考块的中心点为中心，大小为M*M的区域；第一参考块的边缘区域是指：第一参考块中除了中心区域之外的其它区域。针对第一参考块的中心区域，第一参考块的中心区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到；针对第一参考块的边缘区域，第一参考块的边缘区域的第一原始预测值是通过对第一参考帧中的像素值进行拷贝得到。
基于当前块的第二单向运动信息，可以从第二参考帧中确定当前块对应的第二参考块，假设当前块的大小为M*M，第二参考块的大小为N*N，N可以大于M，如M为4，N为6。可以将第二参考块划分为中心区域和边缘区域，第二参考块的中心区域是指：以第二参考块的中心点为中心，大小为M*M的区域；第二参考块的边缘区域是指：第二参考块中除了中心区域之外的其它区域。针对第二参考块的中心区域，第二参考块的中心区域的第二原始预测值是通过对第二参考帧中的像素值进行插值得到；针对第二参考块的边缘区域，第二参考块的边缘区域的第二原始预测值是通过对第二参考帧中的像素值进行拷贝得到。
示例性的，根据当前块的第一单向运动信息确定第一原始预测值，并根据当前块的第二单向运动信息确定第二原始预测值，可以包括但不限于：基于当前块的第一单向运动信息，从第一参考帧中确定第一参考块，并确定第一参考块的第一原始预测值，所述第一原始预测值是通过对第一参考帧中的像素值进行插值得到。基于当前块的第二单向运动信息，从第二参考帧中确定第二参考块，并确定第二参考块的第二原始预测值，所述第二原始预测值是通过对第二参考帧中的像素值进行插值得到。例如，基于当前块的第一单向运动信息，可以从第一参考帧中确定当前块对应的第一参考块，假设当前块的大小为M*M，则第一参考块的大小可以为M*M。基于当前块的第二单向运动信息，可以从第二参考帧中确定当前块对应的第二参考块，假设当前块的大小为M*M，则第二参考块的大小可以为M*M。
步骤202，根据第一原始预测值和第二原始预测值确定水平方向速率。
示例性的，水平方向速率是指：当前块在参考帧上对应子块(即位于参考帧的与当前块对应的子块)的水平方向(即X方向)速率。或者，当前块的子块在参考帧上对应子块(即位于参考帧的与当前块的子块对应的子块)的水平方向(即X方向)速率。
示例性的，根据第一原始预测值和第二原始预测值确定水平方向速率，包括但不限于：
方式一、根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、时域预测值差值与水平方向梯度和的互相关系数S3。然后，根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率。
方式二、若满足第一预设条件，根据第一原始预测值和第二原始预测值确定水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与垂直方向梯度和的互相关系数S6；根据互相关系数S2、速率阈值、互相关系数S6、第一放大因子和第二放大因子确定水平方向速率。若不满足第一预设条件，根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、时域预测值差值与水平方向梯度和的互相关系数S3；根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率。
示例性的，第一预设条件基于互相关系数S2、垂直方向梯度和的自相关系数S5确定。
方式三、若满足第二预设条件，根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与水平方向梯度和的互相关系数S3、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6；根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定水平方向速率。若不满足第二预设条件，则根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、时域预测值差值与水平方向梯度和的互相关系数S3；根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率。
示例性的，第二预设条件基于互相关系数S2、自相关系数S5确定。
步骤203，根据第一原始预测值和第二原始预测值确定垂直方向速率。
示例性的，垂直方向速率是指：当前块在参考帧上对应子块(即位于参考帧的与当前块对应的子块)的垂直方向(即Y方向)速率。或者，当前块的子块在参考帧上对应子块(即位于参考帧的与当前块的子块对应的子块)的垂直方向(即Y方向)速率。
示例性的，根据第一原始预测值和第二原始预测值确定垂直方向速率，包括但不限于：
方式一、根据第一原始预测值和第二原始预测值确定水平方向梯度和与垂直方向梯度和的互相关系数S2、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6。然后，可以根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、水平方向速率、第一放大因子和第二放大因子确定垂直方向速率。
方式二、根据第一原始预测值和第二原始预测值获取未进行截断处理的未截断水平方向速率，并根据所述未截断水平方向速率确定垂直方向速率。
示例性的，可以根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与水平方向梯度和的互相关系数S3、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6。然后，根据自相关系数S1、互相关系数S3、第一放大因子和第二放大因子确定未截断水平方向速率，并根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、未截断水平方向速率、第一放大因子和第二放大因子确定垂直方向速率。
方式三、当满足第三预设条件时，根据第一原始预测值和第二原始预测值确定垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6；然后，根据自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定垂直方向速率。当不满足第三预设条件时，根据第一原始预测值和第二原始预测值确定水平方向梯度和与垂直方向梯度和的互相关系数S2、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6；然后，根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、水平方向速率、第一放大因子和第二放大因子确定垂直方向速率。
示例性的，第三预设条件可以基于所述水平方向速率确定。
步骤202和步骤203中，可以根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子，确定水平方向梯度和、垂直方向梯度和、时域预测值差值；根据水平方向梯度和、垂直方向梯度和、时域预测值差值，确定水平方向梯度和的自相关系数S1、水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与水平方向梯度和的互相关系数S3、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6。
示例性的，互相关系数S2可以位于第一互相关系数阈值与第二互相关系数阈值之间；互相关系数S6可以位于第三互相关系数阈值与第四互相关系数阈值之间。
例如，若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S2小于第一互相关系数阈值，则将互相关系数S2更新为第一互相关系数阈值；若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S2大于第二互相关系数阈值，则将互相关系数S2更新为第二第二互相关系数阈值；若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S2大于或等于第一互相关系数阈值、小于或者等于第二互相关系数阈值，则保持互相关系数S2不变。
若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S6小于第三互相关系数阈值，则将互相关系数S6更新为第三互相关系数阈值；若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S6大于第四互相关系数阈值，则将互相关系数S6更新为第四互相关系数阈值；若根据第一原始预测值、第二原始预测值、第一放大因子和第二放大因子得到的互相关系数S6大于或等于第三互相关系数阈值、小于或者等于第四互相关系数阈值，则保持互相关系数S6不变。
示例性的，第一放大因子可以为5与(BD-7)中的较小值，或者，1与(BD-11)中的较大值。当然，上述只是第一放大因子的示例，对此不做限制，可以根据经验配置。
示例性的，第二放大因子可以为8与(BD-4)中的较小值，或者，4与(BD-8)中的较大值。当然，上述只是第二放大因子的示例，对此不做限制，可以根据经验配置。
示例性的，速率阈值可以为2的M次方，M为13与BD的差值，或者，5与(BD-7)中的较大值。当然，上述只是速率阈值的示例，对此不做限制，可以根据经验配置。
示例性的，BD(bit depth)为比特深度，表示为每个色度或亮度像素值所需的比特宽度。
步骤204，根据水平方向速率和垂直方向速率获取预测补偿值。
示例性的，根据水平方向速率和垂直方向速率获取预测补偿值，可以包括但不限于：根据第一原始预测值、第二原始预测值和梯度右移位数，确定水平方向梯度和垂直方向梯度，并根据水平方向速率、垂直方向速率、水平方向梯度和所述垂直方向梯度，获取预测补偿值。
示例性的，梯度右移位数可以为2与(14-BD)中的较大值，或者，6与(BD-6)中的较大值。当然，上述只是梯度右移位数的示例，对此不做限制，可以根据经验配置。
步骤205，根据第一原始预测值、第二原始预测值和预测补偿值获取目标预测值。
示例性的，若上述方法用于获取当前块的目标预测值，则：若当前块的特征信息满足特定条件，则根据当前块的第一单向运动信息确定所述当前块对应的第一原始预测值，并根据当前块的第二单向运动信息确定所述当前块对应的第二原始预测值。根据第一原始预测值和第二原始预测值确定所述当前块对应的水平方向速率，并根据第一原始预测值和第二原始预测值确定所述当前块对应的垂直方向速率。然后，根据水平方向速率和垂直方向速率获取所述当前块对应的预测补偿值，并根据第一原始预测值、第二原始预测值和预测补偿值获取所述当前块对应的目标预测值。至此，成功获取到所述当前块对应的目标预测值。
示例性的，若当前块被划分为至少一个子块，且上述方法用于获取当前块的每个子块的目标预测值，则：若当前块的特征信息满足特定条件，针对所述当前块的每个子块，根据所述子块的第一单向运动信息(与当前块的第一单向运动信息相同)确定所述子块对应的第一原始预测值，并根据所述子块的第二单向运动信息(与当前块的第二单向运动信息相同)确定所述子块对应的第二原始预测值。根据第一原始预测值和第二原始预测值确定所述子块对应的水平方向速率，根据第一原始预测值和第二原始预测值确定所述子块对应的垂直方向速率。然后，根据水平方向速率和垂直方向速率获取所述子块对应的预测补偿值，并根据第一原始预测值、第二原始预测值和预测补偿值获取所述子块对应的目标预测值。
至此，成功获取到所述子块对应的目标预测值。在得到所述当前块的每个子块的目标预测值之后，实际上，就是得到了所述当前块的目标预测值。
由以上技术方案可见，本申请实施例中，可以根据当前块的第一单向运动信息确定第一原始预测值，根据当前块的第二单向运动信息确定第二原始预测值，根据第一原始预测值和第二原始预测值确定水平方向速率和垂直方向速率，并根据水平方向速率和垂直方向速率获取预测补偿值，并根据预测补偿值获取目标预测值。上述方式能够基于光流法获取当前块或者当前块的子块的目标预测值，从而提高硬件实现友好性，带来编码性能的提高。
实施例2：本申请实施例中提出一种编解码方法，可以应用于解码端或者编码端，参见图3所示，为编解码方法的流程示意图。示例性的，若当前块的特征信息满足特定条件，则可以针对当前块的每个子块执行以下步骤，以获取当前块的每个子块的目标预测值。
步骤301，若当前块的特征信息满足特定条件，则根据当前块的第一单向运动信息(即当前块的子块的第一单向运动信息)确定子块的第一原始预测值，并根据当前块的第二单向运动信息(即当前块的子块的第二单向运动信息)确定子块的第二原始预测值。
示例性的，若当前块是双向块(即当前块是采用双向预测的块)，则可以获取当前块对应的双向运动信息，对此获取方式不做限制。这个双向运动信息包括两个不同方向的运动信息，将两个不同方向的运动信息称为第一单向运动信息(如第一运动矢量和第一参考帧索引)和第二单向运动信息(如第二运动矢量和第二参考帧索引)。基于第一单向运动信息可以确定第一参考帧(如参考帧0)，且第一参考帧位于当前块所处当前帧的前面；基于第二单向运动信息可以确定第二参考帧(如参考帧1)，且第二参考帧位于当前块所处当前帧的后面。
示例性的，针对当前块的每个子块，该子块的第一单向运动信息与当前块的第一单向运动信息相同，该子块的第二单向运动信息与当前块的第二单向运动信息相同。
示例性的，特征信息可以包括以下一种或者多种：运动信息属性；预测模式属性；尺寸信息；序列级开关控制信息，关于特征信息满足特定条件，参见步骤201，在此不再赘述。
示例性的，根据当前块的第一单向运动信息确定子块的第一原始预测值，并根据当前块的第二单向运动信息确定子块的第二原始预测值，可以包括：基于当前块的第一单向运动信息，从第一参考帧中确定与当前块的子块对应的第一参考块，并确定所述第一参考块的第一原始预测值I(0)(x，y)；基于当前块的第二单向运动信息，从第二参考帧中确定与当前块的子块对应的第二参考块，并确定所述第二参考块的第二原始预测值I(1)(x，y)。关于第一原始预测值和第二原始预测值的确定方式，可以参见步骤201，在此不再赘述。
步骤302，根据子块的第一原始预测值和第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值。例如，根据子块的第一原始预测值、子块的第二原始预测值、第一放大因子和第二放大因子，确定水平方向梯度和、垂直方向梯度和、时域预测值差值。
步骤303，根据水平方向梯度和、垂直方向梯度和、时域预测值差值，确定水平方向梯度和的自相关系数S1(后续称为自相关系数S1)、水平方向梯度和与垂直方向梯度和的互相关系数S2(后续称为互相关系数S2)、时域预测值差值与水平方向梯度和的互相关系数S3(后续称为互相关系数S3)、垂直方向梯度和的自相关系数S5(后续称为自相关系数S5)、时域预测值差值与垂直方向梯度和的互相关系数S6(后续称为互相关系数S6)。
步骤304，根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的水平方向速率。
步骤305，根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的垂直方向速率。
步骤306，根据水平方向速率和垂直方向速率获取当前块的子块的预测补偿值。
步骤307，根据当前块的子块的第一原始预测值、当前块的子块的第二原始预测值和当前块的子块的预测补偿值，获取当前块的子块的目标预测值。
示例性的，步骤301-步骤307的流程，可以参见实施例1，在此不再赘述。
实施例3：编码端/解码端需要判断当前块的特征信息是否满足特定条件。如果是，则采用本申请实施例的技术方案，获取当前块或者当前块的子块的目标预测值，这个技术方案也可以称为双向光流模式。如果否，则不需要采用本申请提出的目标预测值获取方式。
当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
实施例4：当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
当前块包括多个子块，多个子块的运动信息均相同，也就是说，当前块的每个子块的运动信息可以完全一样，即当前块不采用子块运动信息模式。
示例性的，当前块不采用子块运动信息模式，可以包括：当前块不采用Affine模式或SBTMVP模式；Affine模式为采用仿射运动模型模式，SBTMVP(subblock-based temporalmotion vector prediction)模式为在时域获取整块运动信息的模式。在当前块采用Affine模式或SBTMVP模式时，当前块内部的各个子块的运动信息，大概率不完全一样，因此，当前块可以不采用Affine模式或SBTMVP模式。
实施例5：当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
当前块包括多个子块，多个子块的运动信息均相同，也就是说，当前块的每个子块的运动信息可以完全一样，即当前块不采用子块运动信息模式。
当前块采用双向预测，且当前块对应的两个参考帧的加权权重相同。
实施例6：当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
当前块包括多个子块，多个子块的运动信息均相同，也就是说，当前块的每个子块的运动信息可以完全一样，即当前块不采用子块运动信息模式。
当前块采用双向预测，且当前块对应的两个参考帧的加权权重相同。
当前块不采用CIIP模式(基于帧内帧间联合预测的融合模式)。
实施例7：当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
当前块包括多个子块，多个子块的运动信息均相同，也就是说，当前块的每个子块的运动信息可以完全一样，即当前块不采用子块运动信息模式。
当前块采用双向预测，且当前块对应的两个参考帧的加权权重相同。
当前块不采用SMVD(Symmetric Motion Vector Difference，对称运动矢量差)模式，SMVD模式中双向运动信息中的两个MVD是对称的，即只需要编码其中一个运动矢量差MVD，另一个运动矢量差为负的MVD。
实施例8：当特征信息至少同时满足下面条件时，确定当前块的特征信息满足特定条件。
序列级开关控制信息为允许当前块采用双向光流模式，也就是说，序列级控制允许双向光流模式启用，即序列级控制开关为开，表示允许当前块采用双向光流模式。
当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，也就是说，当前块对应的一个参考帧位于当前帧之前，当前块对应的另一个参考帧位于当前帧之后。
当前块的尺寸信息(如宽度值、高度值、面积值等)在限定范围内。
当前块包括多个子块，多个子块的运动信息均相同，也就是说，当前块的每个子块的运动信息可以完全一样，即当前块不采用子块运动信息模式。
当前块采用双向预测，且当前块对应的两个参考帧的加权权重相同。
实施例9：将上述实施例3-实施例8中的条件“当前块采用双向预测，且当前块对应的两个参考帧来自不同方向”，修改为“当前块采用双向预测，且当前块对应的两个参考帧来自不同方向，且当前块对应的两个参考帧与当前帧的距离相同”。
例如，若当前帧的显示顺序号为POC，当前块对应的两个参考帧的显示顺序号分别为POC0和POC1，则两个参考帧来自不同方向，等同于(POC-POC0)*(POC-POC1)<0，两个参考帧与当前帧的距离相同，等同于(POC-POC0)的值等于(POC1-POC)的值。
实施例10：当特征信息至少满足下面条件时，确定当前块的特征信息满足特定条件。
序列级开关控制信息为允许当前块采用双向光流模式，也就是说，序列级控制允许双向光流模式启用，即序列级控制开关为开，表示允许当前块采用双向光流模式。
实施例11：当特征信息至少满足下面条件时，确定当前块的特征信息满足特定条件。
当前块采用双向预测，且当前块对应的两个参考帧的预测值的差异值可以小于预设阈值TH_SAD。示例性的，可以采用如下方式获取当前块对应的两个参考帧的预测值的差异值：
方式一、根据当前块的第一单向运动信息从第一参考帧中获取与当前块的子块对应的第一预测块，并根据当前块的第二单向运动信息从第二参考帧中获取与当前块的子块对应的第二预测块；根据第一预测块的预测值与第二预测块的预测值的SAD(Sum ofAbsolute Difference，绝对差值和)，获取第一参考帧与第二参考帧的预测值的差异值。
在方式一中，预测值的差异值为第一预测块的预测值(后续记为pred0)与第二预测块的预测值(后续记为pred1)的SAD，即pred0和pred1中所有像素的SAD。例如，可以通过如下公式确定第一参考帧与第二参考帧的预测值的差异值，在该公式中，pred0(i，j)为pred0的第i列，第j行的pred0预测值，pred1(i，j)为pred1的第i列，第j行的pred1预测值，n为像素总数，abs(x)表示x的绝对值，H表示高度值，W表示宽度值。
Figure BDA0003122230980000151
方式二、根据当前块的第一单向运动信息从第一参考帧中获取与当前块的子块对应的第一预测块，并根据当前块的第二单向运动信息从第二参考帧中获取与当前块的子块对应的第二预测块；根据第一预测块的下采样后的预测值(即对第一预测块的预测值进行下采样后，得到的预测值)与第二预测块的下采样后的预测值(即对第二预测块的预测值进行下采样后，得到的预测值)的SAD，获取第一参考帧与第二参考帧的预测值的差异值。
在方式二中，预测值的差异值为第一预测块的下采样N倍后的预测值(后续记为pred0)与第二预测块的下采样N倍后的预测值(后续记为pred1)的SAD。例如，可以通过如下公式确定第一参考帧与第二参考帧的预测值的差异值，在该公式中，pred0(i，j)为pred0的第i列，第j行的pred0预测值，pred1(i，j)为pred1的第i列，第j行的pred1预测值，n为像素总数，abs(x)表示x的绝对值，H表示高度值，W表示宽度值，N为正整数，优选为2。
Figure BDA0003122230980000152
实施例12：在上述实施例中，当前块的尺寸信息在限定范围内，可为如下情况的一种：
情况一、当前块的宽度值在第一区间[Wmin，Wmax]的范围内；当前块的高度值位于第二区间[Hmin，Hmax]的范围内；Wmin、Wmax、Hmin、Hmax均为2的n1次方，n1为大于等于1的整数；例如，Wmin优选为8，Wmax优选为128，Hmin优选为8，Hmax优选为128。
当前块的面积值位于第三区间[Smin，Smax]的范围内；Smin、Smax均为2的n2次方，n2为大于等于1的整数；例如，Smin优选为64，Smax优选为128*128＝16384。
在上述实施例中，[a，b]表示大于等于a，且小于等于b。
情况二、当前块的宽度值在第一区间[Wmin，Wmax]的范围内；Wmin、Wmax均为2的n1次方，n1为大于等于1的整数；例如，Wmin优选为8，Wmax优选为128。
情况三、当前块的高度值位于第二区间[Hmin，Hmax]的范围内；Hmin、Hmax均为2的n1次方，n1为大于等于1的整数；例如，Hmin优选为8，Hmax优选为128。
示例性的，若满足如下任何一种条件，则当前块对应的两个参考帧的加权权重相同：
条件1：当前块不采用允许不同加权权重的方法。
条件2：当前块允许采用不同加权权重的方法(如块级加权预测方法BCW(Bi-prediction with CU based weighting)启用)，且当前块的两个加权权重完全一样。
条件3：当前块所在当前帧不采用不同加权权重的方法。
条件4：当前块所在当前帧允许采用不同加权权重的方法(如帧级加权预测方法启用)，且当前帧的两个加权权重完全一样。
实施例13：编码端/解码端需要根据当前块的第一单向运动信息确定子块的第一原始预测值，并根据当前块的第二单向运动信息确定子块的第二原始预测值。例如，基于当前块的第一单向运动信息，从第一参考帧中确定与当前块的子块对应的第一参考块，并确定所述第一参考块的第一原始预测值I(0)(x，y)；基于当前块的第二单向运动信息，从第二参考帧中确定与当前块的子块对应的第二参考块，并确定所述第二参考块的第二原始预测值I(1)(x，y)。
例如，基于当前块的第一单向运动信息，从第一参考帧中确定第一参考块，并确定第一参考块的第一原始预测值I(0)(x，y)；第一参考块的中心区域的第一原始预测值I(0)(x，y)是通过对第一参考帧中的像素值进行插值得到，第一参考块的边缘区域的第一原始预测值I(0)(x，y)是通过对第一参考帧中的像素值进行拷贝得到。基于当前块的第二单向运动信息，从第二参考帧中确定第二参考块，并确定第二参考块的第二原始预测值I(1)(x，y)；第二参考块的中心区域的第二原始预测值I(1)(x，y)是通过对第二参考帧中的像素值进行插值得到，第二参考块的边缘区域的第二原始预测值I(1)(x，y)是通过对第二参考帧中的像素值进行拷贝得到。
参见图4所示，假设子块的大小为4*4，第一参考块的大小为6*6，第一参考块的中心区域是指：以第一参考块的中心点为中心，大小为4*4的区域，第一参考块的中心区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到，对此不再赘述。第一参考块的边缘区域是指：第一参考块中除了中心区域之外的其它区域(即中心区域之外，上下左右各1行1列的区域)，第一参考块的边缘区域的第一原始预测值是通过对第一参考帧中的像素值进行拷贝得到，在图4中，示出了将第一参考帧中的像素点的像素值，拷贝到第一参考块的边缘区域。当然，图4只是一个示例，还可以利用其它像素点的像素值进行拷贝。
显然，在上述方式中，针对第一参考块的边缘区域，可以通过第一参考帧中最近的整像素值拷贝获取，以避免额外的插值过程，间接地避免访问额外的参考像素。
关于第二参考块的中心区域的第二原始预测值、第二参考块的边缘区域的第二原始预测值，第二原始预测值的获取过程可以参见第一原始预测值的获取过程，在此不再重复赘述。
例如，基于当前块的第一单向运动信息，从第一参考帧中确定第一参考块，确定第一参考块的第一原始预测值，第一参考块的第一原始预测值均是通过对第一参考帧中的像素值进行插值得到。基于当前块的第二单向运动信息，从第二参考帧中确定第二参考块，确定第二参考块的第二原始预测值，第二参考块的第二原始预测值是通过对第二参考帧中的像素值进行插值得到。例如，假设子块的大小为4*4，第一参考块的大小为4*4，第二参考块的大小为4*4，第一参考块的所有区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到，第二参考块的所有区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到。
实施例14：在得到子块的第一原始预测值和子块的第二原始预测值后，编码端/解码端根据子块的第一原始预测值和第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值。例如，根据子块的第一原始预测值、子块的第二原始预测值、第一放大因子和第二放大因子，确定水平方向梯度和、垂直方向梯度和、时域预测值差值。例如，通过公式(1)确定水平方向梯度和，通过公式(2)确定垂直方向梯度和，通过公式(3)确定时域预测值差值：
Figure BDA0003122230980000171
Figure BDA0003122230980000172
θ(i，j)＝(I(1)(i，j)＞＞nb)-(I(0)(i，j)＞＞nb) (3)
示例性的，
Figure BDA0003122230980000173
表示水平方向梯度，
Figure BDA0003122230980000174
表示垂直方向梯度，针对公式(1)-公式(3)中的如下参数：
Figure BDA0003122230980000175
和
Figure BDA0003122230980000176
可以通过方式(4)和公式(5)确定。
Figure BDA0003122230980000181
Figure BDA0003122230980000182
ψx(i，j)表示水平方向梯度和，ψy(i，j)表示垂直方向梯度和，θ(i，j)表示时域预测值差值。
I(0)(x，y)表示子块的第一原始预测值，I(1)(x，y)表示子块的第二原始预测值。假设子块的大小为4*4，参见实施例13，I(0)(x，y)是大小为4*4的第一参考块的第一原始预测值，或大小为6*6的第一参考块的第一原始预测值，I(1)(x，y)是大小为4*4的第二参考块的第二原始预测值，或大小为6*6的第二参考块的第二原始预测值，以I(0)(x，y)是大小为4*4的第一参考块的第一原始预测值，I(1)(x，y)是大小为4*4的第二参考块的第二原始预测值为例。I(k)(i，j)表示坐标(i，j)的像素值，如I(0)(i，j)表示第一参考块中坐标(i，j)的像素值，对应子块的第一原始预测值，I(1)(i，j)表示第二参考块中坐标(i，j)的像素值，对应子块的第二原始预测值。
na可以表示第一放大因子，第一放大因子na可以为5与(BD-7)中的较小值，或者，1与(BD-11)中的较大值。nb可以表示第二放大因子，第二放大因子nb可以为8与(BD-4)中的较小值，或者，4与(BD-8)中的较大值。shift1可以表示梯度右移位数，梯度右移位数shift1可以为2与(14-BD)中的较大值，或者，6与(BD-6)中的较大值。
＞＞表示右移，如＞＞na表示右移na，即，除以2的na次方。＞＞nb表示右移nb，也就是说，除以2的nb次方。＞＞shift1表示右移shift1，即，除以2的shift1次方。
BD(bit depth)可以为比特深度，可以表示为每个色度或亮度像素值所需的比特宽度。例如，BD可以为10或者8，通常情况下，BD可以为已知值。
实施例15：在得到水平方向梯度和、垂直方向梯度和、时域预测值差值后，编码端/解码端还可以根据水平方向梯度和、垂直方向梯度和、时域预测值差值，确定水平方向梯度和的自相关系数S1(后续称自相关系数S1)、水平方向梯度和与垂直方向梯度和的互相关系数S2(后续称互相关系数S2)、时域预测值差值与水平方向梯度和的互相关系数S3(后续称互相关系数S3)、垂直方向梯度和的自相关系数S5(后续称自相关系数S5)、时域预测值差值与垂直方向梯度和的互相关系数S6(后续称互相关系数S6)。例如，可以通过如下公式确定自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6。
S1＝∑(i，j)∈Ωψx(i，j)·ψx(i，j) (6)
S2＝∑(i，j)∈Ωψx(i，j)·ψy(i，j) (7)
S3＝∑(i，j)∈Ωθ(i，j)·ψx(i，j) (8)
S5＝∑(i，j)∈Ωψy(i，j)·ψy(i，j) (9)
S6＝∑(i，j)∈Ωθ(i，j)·ψy(i，j) (10)
ψx(i，j)表示水平方向梯度和，ψy(i，j)表示垂直方向梯度和，θ(i，j)表示时域预测值差值。
假设子块的大小为4*4，Ω表示4*4子块对应的窗口，或者，Ω表示4*4子块周围的6*6窗口。针对Ω中的每个坐标点(i，j)，可以先通过上述实施例确定ψx(i，j)、ψy(i，j)和θ(i，j)，然后，根据ψx(i，j)、ψy(i，j)和θ(i，j)，确定S1、S2、S3、S5、S6。
实施例16：在得到互相关系数S2和互相关系数S6之后，可以将互相关系数S2限制在第一互相关系数阈值与第二互相关系数阈值之间，例如，若互相关系数S2小于第一互相关系数阈值，则可以将互相关系数S2更新为第一互相关系数阈值，若互相关系数S2大于第二互相关系数阈值，则可以将互相关系数S2更新为第二互相关系数阈值。可以将互相关系数S6限制在第三互相关系数阈值与第四互相关系数阈值之间，例如，若互相关系数S6小于第三互相关系数阈值，则可以将互相关系数S6更新为第三互相关系数阈值，若互相关系数S6大于第四互相关系数阈值，则可以将互相关系数S6更新为第四互相关系数阈值；第一互相关系数阈值可以小于第二互相关系数阈值，第三互相关系数阈值可以小于第四互相关系数阈值。
示例性的，可以对互相关系数S2和互相关系数S6进行如下大小限制，从而防止中间结果溢出，即使得位宽不超过一定范围。-(1＜＜THS2)表示第一阈值，1＜＜THS2表示第二阈值，-(1＜＜THS6)表示第三阈值，1＜＜THS6表示第四阈值。例如，为了防止位宽超过32比特，则THS2可以为25，THS6可以为27。当然，上述数值只是一个示例，对此不做限制。
S2＝clip3(-(1＜＜THS2)，(1＜＜THS2)，S2) (11)
S6＝clip3(-(1＜＜THS6)，(1＜＜THS6)，S6) (12)
Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变。因此，公式(11)表示，若S2小于-(1＜＜THS2)，则S2为-(1＜＜THS2)，若S2大于(1＜＜THS2)，则S2为(1＜＜THS2)，否则，S2保持不变。同理，公式(12)表示，若S6小于-(1＜＜THS6)，则S6为-(1＜＜THS6)，若S6大于(1＜＜THS6)，则S6为(1＜＜THS6)，否则，S6保持不变。＜＜表示左移。
实施例17：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的水平方向速率。可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的垂直方向速率。
例如，可以根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率，参见如下公式所示，为基于上述参数确定水平方向速率的示例。
Figure BDA0003122230980000191
在上述公式中，若S1>0成立，则
Figure BDA0003122230980000201
若S1>0不成立，则vx＝0。vx表示水平方向速率，th′BIO表示速率阈值，即用于将水平方向速率vx限制在-th′BIO与th′BIO之间，即水平方向速率vx大于或者等于-th′BIO，水平方向速率vx小于或者等于th′BIO。速率阈值th′BIO可以为2的M次方，M为13与BD的差值，或者，5与(BD-7)中的较大值。例如，th′BIO＝213-BD或者th′BIO＝2max(5，BD-7)，BD为比特深度。
na可以表示第一放大因子，第一放大因子na可以为5与(BD-7)中的较小值，或者，1与(BD-11)中的较大值。nb可以表示第二放大因子，第二放大因子nb可以为8与(BD-4)中的较小值，或者，4与(BD-8)中的较大值。＞＞表示右移，
Figure BDA00031222309800002010
为向下取整。
第一放大因子na和第二放大因子nb均可以根据经验配置，第二放大因子nb可以大于第一放大因子na。第一放大因子na和第二放大因子nb用于放大水平方向速率vx的取值区间，例如，假设nb-na为3，则
Figure BDA0003122230980000202
为8，则可以将水平方向速率vx的取值区间放大8倍，假设nb-na为4，则
Figure BDA0003122230980000203
为16，则可以将水平方向速率vx的取值区间放大16倍，以此类推。
Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA0003122230980000204
为x，综上所述，若
Figure BDA0003122230980000205
Figure BDA0003122230980000206
大于-th′BIO，且小于th′BIO，则水平方向速率vx为
Figure BDA0003122230980000207
例如，可以根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、水平方向速率、第一放大因子和第二放大因子确定垂直方向速率，参见如下公式所示。
Figure BDA0003122230980000208
vy表示垂直方向速率，vx表示水平方向速率，th′BIO表示速率阈值，即用于将垂直方向速率限制在-th′BIO与th′BIO之间，即垂直方向速率大于或者等于-th′BIO，垂直方向速率小于或者等于th′BIO。速率阈值th′BIO可以为2的M次方，M为13与BD的差值，或者，5与(BD-7)中的较大值。例如，th′BIO＝213-BD或者th′BIO＝2max(5，BD-7)，BD为比特深度。
na可以表示第一放大因子，第一放大因子na可以为5与(BD-7)中的较小值，或者，1与(BD-11)中的较大值。nb可以表示第二放大因子，第二放大因子nb可以为8与(BD-4)中的较小值，或者，4与(BD-8)中的较大值。＞＞表示右移，
Figure BDA0003122230980000209
为向下取整。
第一放大因子na和第二放大因子nb均可以根据经验配置，第二放大因子nb可以大于第一放大因子na。第一放大因子na和第二放大因子nb用于放大垂直方向速率vy的取值区间，例如，假设nb-na为3，则
Figure BDA0003122230980000211
为8，则可以将垂直方向速率vy的取值区间放大8倍，假设nb-na为4，则
Figure BDA0003122230980000212
为16，则可以将垂直方向速率vy的取值区间放大16倍，以此类推。
Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA0003122230980000213
为x，综上所述，若
Figure BDA0003122230980000214
大于-th′BIO，且小于th′BIO，则垂直方向速率vy为
Figure BDA0003122230980000215
示例性的，在上述公式中，
Figure BDA0003122230980000216
实施例18：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的水平方向速率。可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的垂直方向速率。
例如，可以根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率，参见如下公式所示，为基于上述参数确定水平方向速率的示例。
Figure BDA0003122230980000217
公式(15)与公式(13)相比，去除了
Figure BDA0003122230980000218
前面的负号，其它内容与公式(13)相同，各参数的含义也与公式(13)相同，在此不再重复赘述。
例如，可以根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、水平方向速率、第一放大因子和第二放大因子确定垂直方向速率，参见如下公式所示。
Figure BDA0003122230980000219
前面的负号，其它内容与公式(14)相同，各参数的含义也与公式(14)相同，在此不再重复赘述。
实施例19：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的水平方向速率。
例如，若满足第一预设条件，则可以根据互相关系数S2、速率阈值、互相关系数S6、第一放大因子和第二放大因子确定水平方向速率。若不满足第一预设条件，则可以根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率。第一预设条件基于互相关系数S2、自相关系数S5确定，参见如下公式所示：
当满足第一预设条件时，
Figure BDA0003122230980000221
当不满足第一预设条件时，
Figure BDA0003122230980000222
上述第一预设条件可以包括：|S2|>k|S5|，|.|表示取绝对值，k为阈值，可任意设置，如设为8。
当满足第一预设条件时，若S2＝＝0成立，则
Figure BDA0003122230980000223
Figure BDA0003122230980000224
若S2＝＝00不成立，则vx＝0。vx表示水平方向速率，th′BIO表示速率阈值，na表示第一放大因子，nb表示第二放大因子，＞＞表示右移，
Figure BDA0003122230980000225
为向下取整。
Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA0003122230980000226
为x，综上所述，若
Figure BDA0003122230980000227
Figure BDA0003122230980000228
大于-th′BIO，且小于th′BIO，则水平方向速率vx为
Figure BDA0003122230980000229
当不满足第一预设条件时，公式(18)与公式(13)相同，在此不再重复赘述。
实施例20：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的水平方向速率。
例如，若满足第二预设条件，则可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定水平方向速率。若不满足第二预设条件，则可以根据自相关系数S1、速率阈值、互相关系数S3、第一放大因子和第二放大因子确定水平方向速率。第二预设条件基于互相关系数S2、自相关系数S5确定，参见如下公式所示：当满足第二预设条件时，则Stmp＝S1·S5-S2·S2，
Figure BDA00031222309800002210
当不满足第二预设条件时，则
Figure BDA00031222309800002211
当满足第二预设条件时，先根据S1、S2、S5确定Stmp，具体确定方式参见上述公式，然后，若Stmp＝＝0成立，则
Figure BDA00031222309800002212
Figure BDA00031222309800002213
若Stmp＝＝0不成立，则vx＝0。vx表示水平方向速率，th′BIO表示速率阈值，na表示第一放大因子，nb表示第二放大因子，＞＞表示右移，
Figure BDA00031222309800002214
为向下取整。
在上述公式中，Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA00031222309800002215
为x，综上所述，若
Figure BDA0003122230980000231
大于-th′BIO，且小于th′BIO，则水平方向速率vx可以为
Figure BDA0003122230980000232
当不满足第二预设条件时，公式(20)与公式(13)相同，在此不再重复赘述。
上述第二预设条件可以包括但不限于：|S2|>k|S5|，|.|表示取绝对值，k为阈值，可任意设置，如设为8。当然，这个第二预设条件只是一个示例，对此不做限制。
实施例21：针对实施例19，当不满足第一预设条件时，水平方向速率的确定公式变为公式(15)，针对实施例20，当不满足第二预设条件时，水平方向速率的确定公式变为公式(15)。
实施例22：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的垂直方向速率。
例如，可以根据自相关系数S1、互相关系数S3、第一放大因子和第二放大因子确定未截断水平方向速率，并根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、所述未截断水平方向速率、第一放大因子和第二放大因子确定垂直方向速率。
参见如下公式所示：
Figure BDA0003122230980000233
Figure BDA0003122230980000234
从上述公式可以看出，若S1>0成立，则
Figure BDA0003122230980000235
若S1>0不成立，则vx_org＝0。与上述实施例中的vx相比，本实施例中，并未使用速率阈值th′BIO将水平方向速率限制在-th′BIO与th′BIO之间，因此，将vx_org称为未截断水平方向速率，即未进行截断处理，也就是说，这个未截断水平方向速率vx_org没有被限制在-th′BIO与th′BIO之间。
Figure BDA0003122230980000236
vy表示垂直方向速率，vx_org表示未截断水平方向速率，th′BIO表示速率阈值，na表示第一放大因子，nb表示第二放大因子，＞＞表示右移，
Figure BDA00031222309800002310
为向下取整。Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA0003122230980000237
为x，综上所述，若
Figure BDA0003122230980000238
大于-th′BIO，且小于th′BIO，则垂直方向速率vy为
Figure BDA0003122230980000239
示例性的，在上述公式中，
Figure BDA0003122230980000241
实施例23：在得到自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6后，可以根据自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6中的一个或者多个，确定当前块的子块在参考帧上对应子块的垂直方向速率。
例如，当满足第三预设条件时，根据自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定垂直方向速率。当不满足第三预设条件时，根据互相关系数S2、自相关系数S5、互相关系数S6、速率阈值、水平方向速率、第一放大因子和第二放大因子确定垂直方向速率。示例性的，第三预设条件可以基于所述水平方向速率确定。
参见如下公式所示：当满足第三预设条件时，则：
Figure BDA0003122230980000242
当不满足第三预设条件时，则：
Figure BDA0003122230980000243
示例性的，第三预设条件可以为：若vx为-th′BIO或th′BIO，即vx为最小值或最大值。
当满足第三预设条件时，若S5>0成立，则
Figure BDA0003122230980000244
Figure BDA0003122230980000245
若S5>0不成立，则vy＝0。示例性的，vy表示垂直方向速率，th′BIO表示速率阈值，na表示第一放大因子，nb表示第二放大因子，＞＞表示右移，
Figure BDA0003122230980000246
为向下取整。Clip3(a，b，x)表示，若x小于a，则x＝a；若x大于b，则x＝b；否则x不变，在上述公式中，-th′BIO为a，th′BIO为b，
Figure BDA0003122230980000247
为x，综上所述，若
Figure BDA0003122230980000248
大于-th′BIO，且小于th′BIO，则垂直方向速率vy可以为
Figure BDA0003122230980000249
当不满足第三预设条件时，公式(24)与公式(14)相同，在此不再重复赘述。
实施例24：针对实施例23，当不满足第三预设条件时，垂直方向速率的确定公式变更为公式(16)。
实施例25：在上述实施例中，第一放大因子na可以为5与(BD-7)中的较小值，即na＝min(5，BD-7)；或者，第一放大因子na可以为1与(BD-11)中的较大值，即na＝Max(1，BD-11)。当然，上述只是第一放大因子的示例，对此不做限制，可以根据经验配置。第二放大因子nb可以为8与(BD-4)中的较小值，即nb＝min(8，BD-4)；或者，第二放大因子nb可以为4与(BD-8)中的较大值，即nb＝Max(4，BD-8)。当然，上述只是第二放大因子的示例，对此不做限制，可以根据经验配置。速率阈值th′BIO可以为2的M次方，M为13与BD的差值，或者，5与(BD-7)中的较大值。例如，th′BIO＝213-BD或者th′BIO＝2max(5，BD-7)。当然，上述只是速率阈值的示例，对此不做限制，可以根据经验配置。
通过将第一放大因子na设置为1与(BD-11)中的较大值，可以减少梯度的自相关系数和互相关系数的右移位数，增加自相关系数和互相关系数的所需位宽(保存精度)。通过将第二放大因子nb设置为4与(BD-8)中的较大值，可以减少梯度的自相关系数和互相关系数的右移位数，增加自相关系数和互相关系数的所需位宽(保存精度)。通过将速率阈值th′BIO设置为2max(5，BD-7)，可以增加水平方向速率vx和垂直方向速率vy的所需位宽(保存精度)。
实施例26：编码端/解码端得到水平方向速率vx和垂直方向速率vy后，可以根据水平方向速率vx和垂直方向速率vy获取当前块的子块的预测补偿值，例如，根据子块的第一原始预测值、子块的第二原始预测值和梯度右移位数，确定水平方向梯度和垂直方向梯度，并根据水平方向速率vx、垂直方向速率vy、水平方向梯度和所述垂直方向梯度，获取预测补偿值。
例如，编码端/解码端可以通过如下公式获取当前块的子块的预测补偿值b(x，y)：
Figure BDA0003122230980000251
示例性的，
Figure BDA0003122230980000252
表示水平方向梯度，
Figure BDA0003122230980000253
表示垂直方向梯度，针对上述公式中的如下参数：
Figure BDA0003122230980000254
和
Figure BDA0003122230980000255
还可以通过如下方式确定这些参数。
Figure BDA0003122230980000256
Figure BDA0003122230980000257
I(k)(i，j)表示坐标(i，j)的像素值，如I(0)(i，j)表示第一参考块中坐标(i，j)的像素值，对应子块的第一原始预测值，I(1)(i，j)表示第二参考块中坐标(i，j)的像素值，对应子块的第二原始预测值。例如，I(0)(x，y)表示子块的第一原始预测值，I(1)(x，y)表示子块的第二原始预测值。假设子块的大小为4*4，I(0)(x，y)是大小为4*4的第一参考块的第一原始预测值，或者大小为6*6的第一参考块的第一原始预测值，I(1)(x，y)是大小为4*4的第二参考块的第二原始预测值，或者大小为6*6的第二参考块的第二原始预测值，以I(0)(x，y)是大小为4*4的第一参考块的第一原始预测值，I(1)(x，y)是大小为4*4的第二参考块的第二原始预测值为例。
vx表示水平方向速率，vy表示垂直方向速率，＞＞表示右移，rnd为round，表示取整操作，shift1表示梯度右移位数，＞＞shift1表示右移shift1。梯度右移位数shift1可以为2与(14-BD)中的较大值，即shift1＝max(2，14-BD)，或者，shift1可以为6与(BD-6)中的较大值，即shift1＝max(6,BD-6)。当然，上述只是梯度右移位数的示例，对此不做限制，可以根据经验配置。通过将shift1设置为6与(BD-6)中的较大值，可以增加梯度的右移位数，即减少梯度所需位宽(保存精度)。BD表示比特深度，即亮度值所需比特宽度，一般为10或8。
实施例27：编码端/解码端可以根据当前块的子块的第一原始预测值、当前块的子块的第二原始预测值和当前块的子块的预测补偿值，获取当前块的子块的目标预测值。例如，编码端/解码端可以通过如下公式获取当前块的子块的目标预测值predBDOF(x，y)：
predBDOF(x，y)＝(I(0)(x，y)+I(1)(x，y)+b(x，y)+ooffset)＞＞shift(28)
在上述公式中，I(0)(x，y)表示子块的第一原始预测值，I(1)(x，y)表示子块的第二原始预测值，b(x，y)表示子块的预测补偿值，＞＞表示右移，＞＞shift表示右移shift。
示例性的，ooffset＝2shift-1+214，shift＝15-BD，BD表示比特深度。
当然，上述方式只是获取子块的目标预测值的示例，对此不做限制。
实施例28：在当前块被划分为多个子块时，可以采用上述实施例，确定每个子块的目标预测值，即针对当前块的每个子块(如4*4大小的子块)进行预测信号的调整，从而得到每个子块的目标预测值。本实施例中，当满足特定条件时，还可以提前跳出某个子块的信号调整过程，也就是说，不再采用上述实施例的方式确定子块的目标预测值。
例如，当前块被划分为子块1、子块2、子块3和子块4，编码端/解码端先采用上述实施例的方式确定子块1的目标预测值，然后采用上述实施例的方式确定子块2的目标预测值，假设满足特定条件，则编码端/解码端不再采用上述实施例的方式确定子块3的目标预测值和子块4的目标预测值，即提前跳出子块3和子块4的信号调整过程。
示例性的，若当前块的两个子块的预测值的差异值均小于某个阈值TH_SUB_SAD时，可以确定满足特定条件，提前跳出剩余子块的信号调整过程。例如，若子块1的预测值的差异值小于阈值TH_SUB_SAD，且子块2的预测值的差异值小于阈值TH_SUB_SAD，则确定满足特定条件，提前跳出剩余子块(即子块3和子块4)的信号调整过程。
又例如，当前块被划分为多个子块，针对每个子块，编码端/解码端采用上述实施例的方式确定所述子块的目标预测值之前，判断是否满足特定条件。若满足特定条件，则不再采用上述实施例的方式确定所述子块的目标预测值，即提前跳出所述子块的信号调整过程。若不满足特定条件，则可以采用上述实施例的方式确定所述子块的目标预测值。
示例性的，若所述子块的预测值的差异值均小于某个阈值TH_SUB_SAD时，可以确定满足特定条件，提前跳出所述子块的信号调整过程。例如，若子块1的预测值的差异值小于阈值TH_SUB_SAD，则确定满足特定条件，提前跳出子块1的信号调整过程。
示例性的，为了确定子块的预测值的差异值，可以采用如下方式实现：
方式一、预测值的差异值可以为第一预测块(即根据当前块的第一单向运动信息从第一参考帧中获取的与子块对应的第一预测块)的预测值(后续记为pred0)与第二预测块(即根据当前块的第二单向运动信息从第二参考帧中获取的与子块对应的第二预测块)的预测值(后续记为pred1)的SAD，即pred0和pred1中所有像素的SAD。例如，可以通过如下公式确定第一参考帧与第二参考帧的预测值的差异值，在该公式中，pred0(i，j)为pred0的第i列，第j行的pred0预测值，pred1(i，j)为pred1的第i列，第j行的pred1预测值，n为像素总数，abs(x)表示x的绝对值，H表示高度值，W表示宽度值。
Figure BDA0003122230980000271
方式二、预测值的差异值还可以为第一预测块的下采样N倍后的预测值(记为pred0，即对第一预测块的预测值进行下采样后，得到的预测值)与第二预测块的下采样N倍后的预测值(记为pred1，即对第二预测块的预测值进行下采样后，得到的预测值)的SAD。例如，通过如下公式确定第一参考帧与第二参考帧的预测值的差异值，pred0(i，j)为pred0的第i列，第j行的pred0预测值，pred1(i，j)为pred1的第i列，第j行的pred1预测值，n为像素总数，abs(x)表示x的绝对值，H表示高度值，W表示宽度值，N为正整数，优选为2。
Figure BDA0003122230980000272
实施例29：
基于与上述方法同样的申请构思，本申请实施例还提出一种编解码装置，应用于编码端或者解码端，所述装置用于若当前块的特征信息满足特定条件，则获取所述当前块或者所述当前块的子块的目标预测值，如图5所示，为所述装置的结构图，所述装置包括：
第一确定模块51，用于若当前块的特征信息满足特定条件，根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；
第二确定模块52，用于根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；
第一获取模块53，用于根据所述水平方向速率和所述垂直方向速率获取预测补偿值；
第二获取模块54，用于根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
示例性的，所述特征信息可以包括但不限于以下一种或多种：运动信息属性；预测模式属性；尺寸信息；序列级开关控制信息。
所述第一确定模块51还用于：若所述特征信息包括所述运动信息属性，所述运动信息属性满足如下情况的一种或者同时满足以下至少两种时，确定所述运动信息属性满足特定条件；
所述当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向；
所述当前块包括多个子块，所述多个子块的运动信息均相同；
所述当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；
所述当前块采用双向预测，且所述当前块对应的两个参考帧与当前帧的距离相同；
所述当前块采用双向预测，且当前块对应的两个参考帧的预测值的差异值小于预设阈值。
所述第一确定模块51还用于：根据所述当前块的第一单向运动信息从第一参考帧中获取第一预测块，并根据所述当前块的第二单向运动信息从第二参考帧中获取第二预测块；
根据所述第一预测块的下采样后的预测值与所述第二预测块的下采样后的预测值的SAD，获取所述第一参考帧与所述第二参考帧的预测值的差异值。
所述第一确定模块51还用于：若所述特征信息包括所述预测模式属性，所述预测模式属性为不采用基于帧内帧间联合预测的融合模式，和/或，不采用对称运动矢量差模式，确定所述预测模式属性满足特定条件。
所述第一确定模块51还用于：若所述特征信息包括所述序列级开关控制信息，且所述序列级开关控制信息为允许所述当前块采用双向光流模式，则确定所述序列级开关控制信息满足特定条件。
所述第一确定模块51还用于：若所述特征信息包括所述尺寸信息，所述尺寸信息满足如下情况的一种或者同时满足以下至少两种时，则确定所述尺寸信息满足特定条件；所述当前块的宽度值大于或等于第一阈值，所述当前块的宽度值小于或等于第二阈值；所述当前块的高度值大于或等于第三阈值，所述当前块的高度值小于或等于第四阈值；所述当前块的面积值大于或等于第五阈值，所述当前块的面积值小于或等于第六阈值。
所述第一确定模块51根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值时具体用于：
基于所述当前块的第一单向运动信息，从第一参考帧中确定第一参考块，并确定所述第一参考块的第一原始预测值；其中，所述第一参考块的中心区域的第一原始预测值是通过对第一参考帧中的像素值进行插值得到，所述第一参考块的边缘区域的第一原始预测值是通过对第一参考帧中的像素值进行拷贝得到；基于所述当前块的第二单向运动信息，从第二参考帧中确定第二参考块，并确定所述第二参考块的第二原始预测值；其中，所述第二参考块的中心区域的第二原始预测值是通过对第二参考帧中的像素值进行插值得到，所述第二参考块的边缘区域的第二原始预测值是通过对第二参考帧中的像素值进行拷贝得到。
所述第二确定模块52根据所述第一原始预测值和所述第二原始预测值确定水平方向速率时具体用于：当满足第一预设条件时，根据第一原始预测值和第二原始预测值确定水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与垂直方向梯度和的互相关系数S6；根据互相关系数S2、速率阈值、互相关系数S6、第一放大因子和第二放大因子确定水平方向速率；第一预设条件基于互相关系数S2、垂直方向梯度和的自相关系数S5确定。
所述第二确定模块52根据所述第一原始预测值和所述第二原始预测值确定水平方向速率时具体用于：若满足第二预设条件，根据第一原始预测值和第二原始预测值确定水平方向梯度和的自相关系数S1、水平方向梯度和与垂直方向梯度和的互相关系数S2、时域预测值差值与水平方向梯度和的互相关系数S3、垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6；根据所述自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定水平方向速率；其中，所述第二预设条件基于所述互相关系数S2、所述自相关系数S5确定。
所述第二确定模块52根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率时具体用于：根据所述第一原始预测值和所述第二原始预测值获取未进行截断处理的未截断水平方向速率，并根据所述未截断水平方向速率确定垂直方向速率。
所述第二确定模块52根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率时具体用于：当满足第三预设条件时，根据所述第一原始预测值和所述第二原始预测值确定垂直方向梯度和的自相关系数S5、时域预测值差值与垂直方向梯度和的互相关系数S6；根据所述自相关系数S5、互相关系数S6、速率阈值、第一放大因子和第二放大因子确定垂直方向速率；其中，所述第三预设条件基于所述水平方向速率确定。
所述互相关系数S2位于第一互相关系数阈值与第二互相关系数阈值之间；
所述互相关系数S6位于第三互相关系数阈值与第四互相关系数阈值之间。
第一放大因子为5与(BD-7)中的较小值，或，1与(BD-11)中的较大值；第二放大因子为8与(BD-4)中的较小值，或，4与(BD-8)中的较大值；速率阈值为2的M次方，M为13与BD的差值，或，5与(BD-7)中的较大值；其中，BD为比特深度。
所述第一获取模块53根据所述水平方向速率和所述垂直方向速率获取预测补偿值时具体用于：根据所述第一原始预测值、所述第二原始预测值和梯度右移位数，确定水平方向梯度和垂直方向梯度，并根据所述水平方向速率、所述垂直方向速率、所述水平方向梯度和所述垂直方向梯度，获取所述预测补偿值；其中，所述梯度右移位数为2与(14-BD)中的较大值，或，6与(BD-6)中的较大值，BD为比特深度。
本申请实施例提供的解码端设备，从硬件层面而言，其硬件架构示意图具体可以参见图6所示。包括：处理器61和机器可读存储介质62，所述机器可读存储介质62存储有能够被所述处理器61执行的机器可执行指令；所述处理器61用于执行机器可执行指令，以实现本申请上述示例公开的方法。例如，处理器用于执行机器可执行指令，以实现如下步骤：
若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；根据所述水平方向速率和所述垂直方向速率获取预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
本申请实施例提供的编码端设备，从硬件层面而言，其硬件架构示意图具体可以参见图7所示。包括：处理器71和机器可读存储介质72，所述机器可读存储介质72存储有能够被所述处理器71执行的机器可执行指令；所述处理器71用于执行机器可执行指令，以实现本申请上述示例公开的方法。例如，处理器用于执行机器可执行指令，以实现如下步骤：
若当前块的特征信息满足特定条件，则执行以下步骤获取所述当前块或者所述当前块的子块的目标预测值：根据所述当前块的第一单向运动信息确定第一原始预测值，根据所述当前块的第二单向运动信息确定第二原始预测值；根据所述第一原始预测值和所述第二原始预测值确定水平方向速率；根据所述第一原始预测值和所述第二原始预测值确定垂直方向速率；根据所述水平方向速率和所述垂直方向速率获取预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述预测补偿值获取目标预测值。
基于与上述方法同样的申请构思，本申请实施例还提供一种机器可读存储介质，所述机器可读存储介质上存储有若干计算机指令，所述计算机指令被处理器执行时，能够实现本申请上述示例公开的编解码方法。其中，上述机器可读存储介质可以是任何电子、磁性、光学或其它物理存储装置，可以包含或存储信息，如可执行指令、数据，等等。例如，机器可读存储介质可以是：RAM(Radom Access Memory，随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等)，或者类似的存储介质，或者它们的组合。
上述实施例阐明的系统、装置、模块或单元，可以由计算机芯片或实体实现，或由具有某种功能的产品来实现。一种典型的实现为计算机，计算机的形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可以由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其它可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。而且，这些计算机程序指令也可以存储在能引导计算机或其它可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或者多个流程和/或方框图一个方框或者多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其它可编程数据处理设备上，使得在计算机或者其它可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其它可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (13)

1.一种解码方法，其特征在于，所述方法包括：
若确定对当前块启动双向光流模式，则对所述当前块进行基于双向光流模式的运动补偿；其中，所述当前块包括一个或多个子块，所述对所述当前块进行基于双向光流模式的运动补偿，包括：针对所述当前块的每个子块，确定所述子块的第一原始预测值和所述子块的第二原始预测值；根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述子块中每个4x4块的目标预测值，根据所述子块中每个4x4块的目标预测值确定所述子块的目标预测值；根据所述当前块包括的每个子块的目标预测值确定所述当前块的预测值；
其中，所述当前块的运动信息包括第一运动矢量和第一参考帧索引，第二运动矢量和第二参考帧索引；所述确定所述子块的第一原始预测值和所述子块的第二原始预测值，包括：基于第一运动矢量从第一参考帧索引对应的第一参考帧中确定第一参考块，并基于所述第一参考块的预测值确定所述第一原始预测值；基于第二运动矢量从第二参考帧索引对应的第二参考帧中确定第二参考块，并基于所述第二参考块的预测值确定所述第二原始预测值；
其中，对于所述子块中的每个4x4块，所述根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述4x4块的目标预测值，包括：根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率；根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的垂直方向速率；根据所述4x4块的水平方向速率和所述4x4块的垂直方向速率获取所述4x4块的预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述4x4块的预测补偿值，获取所述4x4块的目标预测值；
其中，所述根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率，包括：根据所述第一原始预测值和所述第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值；根据所述水平方向梯度和、所述垂直方向梯度和、所述时域预测值差值，确定自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5和互相关系数S6；其中，所述自相关系数S1为水平方向梯度和的自相关系数，所述互相关系数S2为水平方向梯度和与垂直方向梯度和的互相关系数，所述互相关系数S3为所述时域预测值差值与水平方向梯度和的互相关系数，所述自相关系数S5为垂直方向梯度和的自相关系数，所述互相关系数S6为所述时域预测值差值与垂直方向梯度和的互相关系数；
若满足第一预设条件，则根据所述互相关系数S2、速率阈值、所述互相关系数S6、第一放大因子和第二放大因子确定所述4x4块的水平方向速率；
若不满足第一预设条件，则根据所述自相关系数S1、所述速率阈值、所述互相关系数S3、所述第一放大因子和所述第二放大因子确定所述4x4块的水平方向速率；
其中，所述第一预设条件为：互相关系数S2的绝对值大于自相关系数S5的绝对值的k倍，k为预设的整数阈值。
2.根据权利要求1所述的方法，其特征在于，在所述当前块启动双向光流模式时，所述当前块同时满足的条件包括：开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：在当前块不启动双向光流模式时，当前块不满足如下条件中的任意一个条件：
开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
4.根据权利要求2或3所述的方法，其特征在于，所述当前块的宽度值，高度值和面积值均在限定范围内，包括：
当前块的宽度大于等于 8，当前块的高度大于等于8，当前块的宽高乘积大于等于128。
5.一种解码装置，其特征在于，所述装置用于：
若确定对当前块启动双向光流模式，则对所述当前块进行基于双向光流模式的运动补偿；其中，所述当前块包括一个或多个子块，所述对所述当前块进行基于双向光流模式的运动补偿，包括：针对所述当前块的每个子块，确定所述子块的第一原始预测值和所述子块的第二原始预测值；根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述子块中每个4x4块的目标预测值，根据所述子块中每个4x4块的目标预测值确定所述子块的目标预测值；根据所述当前块包括的每个子块的目标预测值确定所述当前块的预测值；
其中，所述当前块的运动信息包括第一运动矢量和第一参考帧索引，第二运动矢量和第二参考帧索引；所述确定所述子块的第一原始预测值和所述子块的第二原始预测值，包括：基于第一运动矢量从第一参考帧索引对应的第一参考帧中确定第一参考块，并基于所述第一参考块的预测值确定所述第一原始预测值；基于第二运动矢量从第二参考帧索引对应的第二参考帧中确定第二参考块，并基于所述第二参考块的预测值确定所述第二原始预测值；
其中，对于所述子块中的每个4x4块，所述根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述4x4块的目标预测值，包括：根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率；根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的垂直方向速率；根据所述4x4块的水平方向速率和所述4x4块的垂直方向速率获取所述4x4块的预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述4x4块的预测补偿值，获取所述4x4块的目标预测值；
其中，所述根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率，包括：根据所述第一原始预测值和所述第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值；根据所述水平方向梯度和、所述垂直方向梯度和、所述时域预测值差值，确定自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5和互相关系数S6；其中，所述自相关系数S1为水平方向梯度和的自相关系数，所述互相关系数S2为水平方向梯度和与垂直方向梯度和的互相关系数，所述互相关系数S3为所述时域预测值差值与水平方向梯度和的互相关系数，所述自相关系数S5为垂直方向梯度和的自相关系数，所述互相关系数S6为所述时域预测值差值与垂直方向梯度和的互相关系数；
若满足第一预设条件，则根据所述互相关系数S2、速率阈值、所述互相关系数S6、第一放大因子和第二放大因子确定所述4x4块的水平方向速率；
若不满足第一预设条件，则根据所述自相关系数S1、所述速率阈值、所述互相关系数S3、所述第一放大因子和所述第二放大因子确定所述4x4块的水平方向速率；
其中，所述第一预设条件为：互相关系数S2的绝对值大于自相关系数S5的绝对值的k倍，k为预设的整数阈值。
6.根据权利要求5所述的装置，其特征在于，在所述当前块启动双向光流模式时，所述当前块同时满足的条件包括：开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
7.根据权利要求6所述的装置，其特征在于，
在当前块不启动双向光流模式时，当前块不满足如下条件中的任意一个条件：
开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
8.根据权利要求6或7所述的装置，其特征在于，所述当前块的宽度值，高度值和面积值均在限定范围内，包括：当前块的宽度大于等于 8，当前块的高度大于等于8，当前块的宽高乘积大于等于128。
9.一种视频解码器，其特征在于，包括：处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令；
所述处理器用于执行机器可执行指令，以实现如下步骤：
若确定对当前块启动双向光流模式，则对所述当前块进行基于双向光流模式的运动补偿；其中，所述当前块包括一个或多个子块，所述对所述当前块进行基于双向光流模式的运动补偿，包括：针对所述当前块的每个子块，确定所述子块的第一原始预测值和所述子块的第二原始预测值；根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述子块中每个4x4块的目标预测值，根据所述子块中每个4x4块的目标预测值确定所述子块的目标预测值；根据所述当前块包括的每个子块的目标预测值确定所述当前块的预测值；
其中，所述当前块的运动信息包括第一运动矢量和第一参考帧索引，第二运动矢量和第二参考帧索引；所述确定所述子块的第一原始预测值和所述子块的第二原始预测值，包括：基于第一运动矢量从第一参考帧索引对应的第一参考帧中确定第一参考块，并基于所述第一参考块的预测值确定所述第一原始预测值；基于第二运动矢量从第二参考帧索引对应的第二参考帧中确定第二参考块，并基于所述第二参考块的预测值确定所述第二原始预测值；
其中，对于所述子块中的每个4x4块，所述根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述4x4块的目标预测值，包括：根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率；根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的垂直方向速率；根据所述4x4块的水平方向速率和所述4x4块的垂直方向速率获取所述4x4块的预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述4x4块的预测补偿值，获取所述4x4块的目标预测值；
其中，所述根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率，包括：根据所述第一原始预测值和所述第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值；根据所述水平方向梯度和、所述垂直方向梯度和、所述时域预测值差值，确定自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5和互相关系数S6；其中，所述自相关系数S1为水平方向梯度和的自相关系数，所述互相关系数S2为水平方向梯度和与垂直方向梯度和的互相关系数，所述互相关系数S3为所述时域预测值差值与水平方向梯度和的互相关系数，所述自相关系数S5为垂直方向梯度和的自相关系数，所述互相关系数S6为所述时域预测值差值与垂直方向梯度和的互相关系数；
若满足第一预设条件，则根据所述互相关系数S2、速率阈值、所述互相关系数S6、第一放大因子和第二放大因子确定所述4x4块的水平方向速率；
若不满足第一预设条件，则根据所述自相关系数S1、所述速率阈值、所述互相关系数S3、所述第一放大因子和所述第二放大因子确定所述4x4块的水平方向速率；
其中，所述第一预设条件为：互相关系数S2的绝对值大于自相关系数S5的绝对值的k倍，k为预设的整数阈值。
10.根据权利要求9所述的视频解码器，其特征在于，在所述当前块启动双向光流模式时，所述当前块同时满足的条件包括：开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
11.一种电子设备，其特征在于，包括处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行上述权利要求1至4中的任一项权利要求所述的解码方法的步骤。
12.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现下述解码方法：
若确定对当前块启动双向光流模式，则对所述当前块进行基于双向光流模式的运动补偿；其中，所述当前块包括一个或多个子块，所述对所述当前块进行基于双向光流模式的运动补偿，包括：针对所述当前块的每个子块，确定所述子块的第一原始预测值和所述子块的第二原始预测值；根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述子块中每个4x4块的目标预测值，根据所述子块中每个4x4块的目标预测值确定所述子块的目标预测值；根据所述当前块包括的每个子块的目标预测值确定所述当前块的预测值；
其中，所述当前块的运动信息包括第一运动矢量和第一参考帧索引，第二运动矢量和第二参考帧索引；所述确定所述子块的第一原始预测值和所述子块的第二原始预测值，包括：基于第一运动矢量从第一参考帧索引对应的第一参考帧中确定第一参考块，并基于所述第一参考块的预测值确定所述第一原始预测值；基于第二运动矢量从第二参考帧索引对应的第二参考帧中确定第二参考块，并基于所述第二参考块的预测值确定所述第二原始预测值；
其中，对于所述子块中的每个4x4块，所述根据所述子块的第一原始预测值和所述子块的第二原始预测值确定所述4x4块的目标预测值，包括：根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率；根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的垂直方向速率；根据所述4x4块的水平方向速率和所述4x4块的垂直方向速率获取所述4x4块的预测补偿值；根据所述第一原始预测值、所述第二原始预测值和所述4x4块的预测补偿值，获取所述4x4块的目标预测值；
其中，所述根据所述第一原始预测值和所述第二原始预测值，确定所述4x4块的水平方向速率，包括：根据所述第一原始预测值和所述第二原始预测值确定水平方向梯度和、垂直方向梯度和、时域预测值差值；根据所述水平方向梯度和、所述垂直方向梯度和、所述时域预测值差值，确定自相关系数S1、互相关系数S2、互相关系数S3、自相关系数S5和互相关系数S6；其中，所述自相关系数S1为水平方向梯度和的自相关系数，所述互相关系数S2为水平方向梯度和与垂直方向梯度和的互相关系数，所述互相关系数S3为所述时域预测值差值与水平方向梯度和的互相关系数，所述自相关系数S5为垂直方向梯度和的自相关系数，所述互相关系数S6为所述时域预测值差值与垂直方向梯度和的互相关系数；
若满足第一预设条件，则根据所述互相关系数S2、速率阈值、所述互相关系数S6、第一放大因子和第二放大因子确定所述4x4块的水平方向速率；
若不满足第一预设条件，则根据所述自相关系数S1、所述速率阈值、所述互相关系数S3、所述第一放大因子和所述第二放大因子确定所述4x4块的水平方向速率；
其中，所述第一预设条件为：互相关系数S2的绝对值大于自相关系数S5的绝对值的k倍，k为预设的整数阈值。
13.根据权利要求12所述的计算机可读存储介质，其特征在于，在所述当前块启动双向光流模式时，所述当前块同时满足的条件包括：开关控制信息为允许所述当前块采用双向光流模式；当前块不采用子块运动信息模式，且当前块不采用CIIP模式，且当前块不采用SMVD模式；当前块采用双向预测，且所述当前块对应的两个参考帧来自不同方向，且所述当前块对应的所述两个参考帧与当前帧的距离相同；当前块采用双向预测，且所述当前块对应的两个参考帧的加权权重相同；当前块的宽度值，高度值和面积值均在限定范围内。
CN202110679294.5A 2019-06-21 2019-06-21 一种编解码方法、装置及其设备 Active CN113411593B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110679294.5A CN113411593B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910544562.5A CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679294.5A CN113411593B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201910544562.5A Division CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Publications (2)

Publication Number Publication Date
CN113411593A CN113411593A (zh) 2021-09-17
CN113411593B true CN113411593B (zh) 2022-05-27

Family

ID=70220964

Family Applications (30)

Application Number Title Priority Date Filing Date
CN202111016249.8A Active CN113596478B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679304.5A Active CN113411597B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680962.6A Active CN113411602B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679315.3A Active CN113411600B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016275.0A Withdrawn CN113596479A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679299.8A Active CN113411595B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013520.2A Active CN113596476B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680983.8A Active CN113411608B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680987.6A Active CN113411610B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN201911252238.2A Active CN111031318B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680982.3A Active CN113411607B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680967.9A Active CN113411605B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679294.5A Active CN113411593B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679298.3A Active CN113411594B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016282.0A Active CN113596480B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016376.8A Withdrawn CN113747175A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016365.XA Active CN113596481B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680986.1A Active CN113411609B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013599.9A Active CN113596477B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679314.9A Active CN113411599B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680961.1A Active CN113411601B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679303.0A Active CN113411596B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013595.0A Withdrawn CN113613021A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013517.0A Withdrawn CN113613020A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680966.4A Active CN113411604B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679310.0A Active CN113411598B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN201910544562.5A Active CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680975.3A Active CN113411606B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016246.4A Withdrawn CN113709503A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680965.XA Active CN113411603B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Family Applications Before (12)

Application Number Title Priority Date Filing Date
CN202111016249.8A Active CN113596478B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679304.5A Active CN113411597B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680962.6A Active CN113411602B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679315.3A Active CN113411600B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016275.0A Withdrawn CN113596479A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679299.8A Active CN113411595B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013520.2A Active CN113596476B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680983.8A Active CN113411608B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680987.6A Active CN113411610B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN201911252238.2A Active CN111031318B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680982.3A Active CN113411607B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680967.9A Active CN113411605B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Family Applications After (17)

Application Number Title Priority Date Filing Date
CN202110679298.3A Active CN113411594B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016282.0A Active CN113596480B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016376.8A Withdrawn CN113747175A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016365.XA Active CN113596481B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680986.1A Active CN113411609B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013599.9A Active CN113596477B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679314.9A Active CN113411599B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680961.1A Active CN113411601B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679303.0A Active CN113411596B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013595.0A Withdrawn CN113613021A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111013517.0A Withdrawn CN113613020A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680966.4A Active CN113411604B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110679310.0A Active CN113411598B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN201910544562.5A Active CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680975.3A Active CN113411606B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202111016246.4A Withdrawn CN113709503A (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
CN202110680965.XA Active CN113411603B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备

Country Status (8)

Country Link
US (1) US20220232242A1 (zh)
EP (1) EP3989576A4 (zh)
JP (2) JP7334272B2 (zh)
KR (2) KR20240005233A (zh)
CN (30) CN113596478B (zh)
CA (1) CA3139466A1 (zh)
MX (1) MX2021015977A (zh)
WO (2) WO2020253730A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113596478B (zh) * 2019-06-21 2022-04-26 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN112135145B (zh) * 2019-11-14 2022-01-25 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
WO2023172002A1 (ko) * 2022-03-11 2023-09-14 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102934444A (zh) * 2010-04-06 2013-02-13 三星电子株式会社 用于对视频进行编码的方法和设备以及用于对视频进行解码的方法和设备
CN107925775A (zh) * 2015-09-02 2018-04-17 联发科技股份有限公司 基于双向预测光流技术的视频编解码的运动补偿方法及装置

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008048235A (ja) * 2006-08-18 2008-02-28 Sony Corp 可変長符号の復号化方法および復号化装置
JP2008289134A (ja) * 2007-04-20 2008-11-27 Panasonic Corp 符号化レート変換装置、集積回路、符号化レート変換方法、及びプログラム
CN100493194C (zh) * 2007-05-17 2009-05-27 上海交通大学 用于视频感兴趣区域编解码的泄漏运动补偿方法
JPWO2014054267A1 (ja) * 2012-10-01 2016-08-25 パナソニックＩｐマネジメント株式会社 画像符号化装置及び画像符号化方法
CN104427345B (zh) * 2013-09-11 2019-01-08 华为技术有限公司 运动矢量的获取方法、获取装置、视频编解码器及其方法
US10531093B2 (en) * 2015-05-25 2020-01-07 Peking University Shenzhen Graduate School Method and system for video frame interpolation based on optical flow method
US10375413B2 (en) * 2015-09-28 2019-08-06 Qualcomm Incorporated Bi-directional optical flow for video coding
CN108541375B (zh) * 2016-02-03 2022-04-12 夏普株式会社 运动图像解码装置、运动图像编码装置、以及预测图像生成装置
EP4138392A1 (en) * 2016-02-05 2023-02-22 HFI Innovation Inc. Method and apparatus of motion compensation based on bi-directional optical flow techniques for video coding
CN108781295B (zh) * 2016-03-16 2022-02-18 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
US10939105B2 (en) * 2016-03-25 2021-03-02 Panasonic Intellectual Property Management Co., Ltd. Methods and apparatuses for encoding and decoding video using signal dependent adaptive quantization
US20170339405A1 (en) * 2016-05-20 2017-11-23 Arris Enterprises Llc System and method for intra coding
CN116614641A (zh) * 2016-07-12 2023-08-18 韩国电子通信研究院 图像编码/解码方法和用于所述方法的记录介质
WO2018012933A1 (ko) * 2016-07-14 2018-01-18 삼성전자 주식회사 비디오 복호화 방법 및 그 장치 및 비디오 부호화 방법 및 그 장치
CN116567217A (zh) * 2016-08-11 2023-08-08 Lx 半导体科技有限公司 图像编码/解码方法以及图像数据的发送方法
CN106454378B (zh) * 2016-09-07 2019-01-29 中山大学 一种基于变形运动模型的帧率上转换视频编码方法及系统
KR102499139B1 (ko) * 2016-09-21 2023-02-13 삼성전자주식회사 이미지를 표시하는 전자 장치 및 그 제어 방법
WO2018113658A1 (en) * 2016-12-22 2018-06-28 Mediatek Inc. Method and apparatus of motion refinement for video coding
US10931969B2 (en) * 2017-01-04 2021-02-23 Qualcomm Incorporated Motion vector reconstructions for bi-directional optical flow (BIO)
US10523964B2 (en) * 2017-03-13 2019-12-31 Qualcomm Incorporated Inter prediction refinement based on bi-directional optical flow (BIO)
WO2018174618A1 (ko) * 2017-03-22 2018-09-27 한국전자통신연구원 참조 블록을 사용하는 예측 방법 및 장치
KR102409430B1 (ko) * 2017-04-24 2022-06-15 에스케이텔레콤 주식회사 움직임 보상을 위한 옵티컬 플로우 추정 방법 및 장치
WO2018199468A1 (ko) * 2017-04-24 2018-11-01 에스케이텔레콤 주식회사 움직임 보상을 위한 옵티컬 플로우 추정 방법 및 장치
CN116866586A (zh) * 2017-05-17 2023-10-10 株式会社Kt 对图像解码的方法以及存储压缩视频数据的装置
US10904565B2 (en) * 2017-06-23 2021-01-26 Qualcomm Incorporated Memory-bandwidth-efficient design for bi-directional optical flow (BIO)
CN110832858B (zh) * 2017-07-03 2023-10-13 Vid拓展公司 用于视频编解码的设备、方法
WO2019045427A1 (ko) * 2017-08-29 2019-03-07 에스케이텔레콤 주식회사 양방향 옵티컬 플로우를 이용한 움직임 보상 방법 및 장치
WO2019074273A1 (ko) * 2017-10-10 2019-04-18 한국전자통신연구원 인터 예측 정보를 사용하는 방법 및 장치
KR102523002B1 (ko) * 2017-12-14 2023-04-18 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
CN112970259A (zh) * 2018-11-05 2021-06-15 北京字节跳动网络技术有限公司 视频处理中具有细化的帧间预测
CN112565785B (zh) * 2018-12-28 2022-04-26 杭州海康威视数字技术股份有限公司 一种编解码方法及其设备
WO2020149648A1 (ko) * 2019-01-15 2020-07-23 엘지전자 주식회사 변환 스킵 플래그를 이용한 영상 코딩 방법 및 장치
CN113491124A (zh) * 2019-02-14 2021-10-08 Lg 电子株式会社 基于dmvr的帧间预测方法和设备
WO2020185427A1 (en) * 2019-03-11 2020-09-17 Alibaba Group Holding Limited Inter prediction methods for coding video data
WO2020184848A1 (ko) * 2019-03-13 2020-09-17 엘지전자 주식회사 Dmvr 기반의 인터 예측 방법 및 장치
CN113597766B (zh) * 2019-03-17 2023-11-10 北京字节跳动网络技术有限公司 基于光流的预测细化的计算
US11140409B2 (en) * 2019-03-22 2021-10-05 Lg Electronics Inc. DMVR and BDOF based inter prediction method and apparatus thereof
JP7058329B2 (ja) * 2019-03-22 2022-04-21 エルジー エレクトロニクス インコーポレイティド Ｄｍｖｒおよびｂｄｏｆベースのインター予測方法および装置
CN113596478B (zh) * 2019-06-21 2022-04-26 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US11509910B2 (en) * 2019-09-16 2022-11-22 Tencent America LLC Video coding method and device for avoiding small chroma block intra prediction
US20210092404A1 (en) * 2019-09-20 2021-03-25 Qualcomm Incorporated Reference picture constraint for decoder side motion refinement and bi-directional optical flow
US11563980B2 (en) * 2020-04-02 2023-01-24 Qualcomm Incorporated General constraint information syntax in video coding
US11611778B2 (en) * 2020-05-20 2023-03-21 Sharp Kabushiki Kaisha Systems and methods for signaling general constraint information in video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102934444A (zh) * 2010-04-06 2013-02-13 三星电子株式会社 用于对视频进行编码的方法和设备以及用于对视频进行解码的方法和设备
CN107925775A (zh) * 2015-09-02 2018-04-17 联发科技股份有限公司 基于双向预测光流技术的视频编解码的运动补偿方法及装置

Also Published As

Publication number Publication date
CA3139466A1 (en) 2020-12-24
CN113613021A (zh) 2021-11-05
CN113596480B (zh) 2022-08-12
CN113411602B (zh) 2022-05-31
CN113709503A (zh) 2021-11-26
CN113411597B (zh) 2022-05-27
CN113411595A (zh) 2021-09-17
CN113747175A (zh) 2021-12-03
CN113411609B (zh) 2022-05-31
CN113596478B (zh) 2022-04-26
CN113411594A (zh) 2021-09-17
CN113411603A (zh) 2021-09-17
CN113596481A (zh) 2021-11-02
CN113411606A (zh) 2021-09-17
CN113411610B (zh) 2022-05-27
JP2023156444A (ja) 2023-10-24
KR20220003027A (ko) 2022-01-07
CN113411608B (zh) 2022-05-31
CN113596477B (zh) 2022-07-01
CN113411606B (zh) 2022-07-01
CN113596477A (zh) 2021-11-02
CN113411598A (zh) 2021-09-17
WO2020253769A1 (zh) 2020-12-24
CN113411595B (zh) 2022-05-31
CN113411600A (zh) 2021-09-17
CN113411607B (zh) 2022-05-31
CN111031318A (zh) 2020-04-17
CN113596476B (zh) 2022-07-01
CN113411601B (zh) 2022-05-31
CN113596479A (zh) 2021-11-02
CN113411605B (zh) 2022-05-31
CN113411602A (zh) 2021-09-17
KR102620203B1 (ko) 2023-12-29
CN113411593A (zh) 2021-09-17
CN113411597A (zh) 2021-09-17
US20220232242A1 (en) 2022-07-21
JP7334272B2 (ja) 2023-08-28
CN113411604B (zh) 2022-05-31
CN113596476A (zh) 2021-11-02
CN113411594B (zh) 2022-05-31
CN113411599B (zh) 2022-05-31
CN113596480A (zh) 2021-11-02
CN112118455A (zh) 2020-12-22
JP2022534240A (ja) 2022-07-28
EP3989576A1 (en) 2022-04-27
CN113411603B (zh) 2022-03-25
CN113411598B (zh) 2022-05-31
EP3989576A4 (en) 2022-08-31
CN113411599A (zh) 2021-09-17
CN113596481B (zh) 2022-07-01
MX2021015977A (es) 2022-02-10
CN113596478A (zh) 2021-11-02
CN113613020A (zh) 2021-11-05
CN112118455B (zh) 2022-05-31
CN113411605A (zh) 2021-09-17
WO2020253730A1 (zh) 2020-12-24
CN113411596A (zh) 2021-09-17
CN113411610A (zh) 2021-09-17
CN113411608A (zh) 2021-09-17
KR20240005233A (ko) 2024-01-11
CN113411604A (zh) 2021-09-17
CN113411600B (zh) 2022-05-31
CN113411607A (zh) 2021-09-17
CN111031318B (zh) 2020-12-29
CN113411609A (zh) 2021-09-17
CN113411601A (zh) 2021-09-17
CN113411596B (zh) 2022-05-31

Similar Documents

Publication Publication Date Title
CN113411593B (zh) 一种编解码方法、装置及其设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant