CN110495169B - 视频图像处理方法与装置 - Google Patents

视频图像处理方法与装置 Download PDF

Info

Publication number
CN110495169B
CN110495169B CN201880016545.8A CN201880016545A CN110495169B CN 110495169 B CN110495169 B CN 110495169B CN 201880016545 A CN201880016545 A CN 201880016545A CN 110495169 B CN110495169 B CN 110495169B
Authority
CN
China
Prior art keywords
block
motion vector
image block
current image
blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880016545.8A
Other languages
English (en)
Other versions
CN110495169A (zh
Inventor
郑萧桢
傅天亮
王苫社
马思伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Peking University
SZ DJI Technology Co Ltd
Original Assignee
Peking University
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Peking University, SZ DJI Technology Co Ltd filed Critical Peking University
Priority to CN202111455033.1A priority Critical patent/CN114125440A/zh
Priority claimed from PCT/CN2018/112805 external-priority patent/WO2019192170A1/zh
Publication of CN110495169A publication Critical patent/CN110495169A/zh
Application granted granted Critical
Publication of CN110495169B publication Critical patent/CN110495169B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Abstract

提供一种视频图像处理方法与装置，该方法包括：对当前图像块的预设的M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前图像块的相关块；将所述当前图像块和所述相关块采用相同的方式划分成多个子图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块一一对应；根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测。在保证编解码性能的前提下，可以降低复杂度。

Description

视频图像处理方法与装置
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所 有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在 的该专利文件或者该专利披露。
技术领域
本申请涉及视频编解码领域，并具体涉及一种视频图像处理方法与装 置。
背景技术
目前，主要的视频编码标准在帧间预测部分都采用了基于块的运动补偿 技术，其主要原理是为当前图像块在已编码图像中寻找一个最相似块，该过 程称为运动补偿。例如，对于一帧图像，先分成等大的编码区域(Coding Tree Unit，CTU)，例如，大小为64×64或128×128。每个CTU可以进一步划分成 方形或矩形的编码单元(Coding Unit，CU)。每个CU在参考帧中(一般为 当前帧的时域附近的已重构帧)寻找最相似块作为当前CU的预测块。当前 块(即当前CU)与相似块(即当前CU的预测块)之间的相对位移称为运 动矢量(Motion Vector，MV)。在参考帧中寻找最相似块作为当前块的预测 块的过程就是运动补偿。
当前技术中，通常根据当前CU的已编码的邻近块的运动矢量，构建当 前CU的运动矢量候选列表，也称为merge候选列表；从merge候选列表中 选择最优的一个候选运动矢量作为当前CU的运动矢量；根据当前CU的运 动矢量确定当前CU的预测块。
高级/可选时域运动矢量预测技术(Advanced/Alternative temporal motionvector prediction，ATMVP)是一种运动矢量预测机制。ATMVP技术的基本思 想是通过获取当前CU内多个子块的运动信息进行运动补偿。ATMVP技术
在当前ATMVP技术的第一步中，通过扫描当前CU的候选运动矢量列 表或当前CU的相邻图象块的运动矢量，确定一个时域矢量的过程还存在改 进的空间。
发明内容
本申请提供一种视频图像处理方法与装置，在保持现有ATMVP技术 的性能增益的前提下，可以降低ATMVP技术的复杂度。
第一方面，提供一种视频图像处理方法，该方法包括：
对当前图像块的预设的M个邻近块中的N个邻近块依次扫描，根据扫 描结果确定目标邻近块，N小于M；
根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块 的参考图像，确定所述当前图像块的相关块；
将所述当前图像块和所述相关块采用相同的方式划分成多个子图像块， 所述当前图像块中的各子图像块与所述相关块中的各子图像块一一对应；
根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对 应的子图像块进行预测。
在本申请提供的方案中，在获取当前图像块的参考运动矢量过程中，仅 对已经获取的M个候选运动矢量中的N(N小于M)个候选运动矢量依次 扫描，相对于现有技术，可以减少在获取当前图像块的参考运动矢量过程中 对候选运动矢量的扫描次数。应理解，将本申请提供的方案应用于现有 ATMVP技术的第一步中，可以对其存在的冗余操作进行简化。
第二方面，提供一种视频图像处理方法，该方法包括：
根据当前图像块的运动矢量第二候选列表中的M个候选者确定所述当 前图像块的M个邻近块；
对所述M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标 邻近块，N小于M；
根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块 的参考图像，确定所述当前图像块的相关块；
根据所述当前图像块的相关块确定所述当前图像块的运动矢量第一候 选列表中的特定候选者；
当确定采用所述特定候选者时，将所述当前图像块和所述相关块采用相 同的方式划分成多个子图像块，所述当前图像块中的各子图像块与所述相关 块中的各子图像块一一对应；
根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对 应的子图像块进行预测。
第三方面，提供一种视频图像处理装置，该装置包括：
构建模块，用于对当前图像块的预设的M个邻近块中的N个邻近块依 次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标邻近块的 运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前 图像块的相关块；将所述当前图像块和所述相关块采用相同的方式划分成多 个子图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块 一一对应；
预测模块，用于根据所述相关块中各子图像块的运动矢量分别对所述当 前图像块中对应的子图像块进行预测。
第四方面，提供一种视频图像处理装置，该装置包括：
构建模块，用于根据当前图像块的运动矢量第二候选列表中的M个候 选者确定所述当前图像块的M个邻近块；对所述M个邻近块中的N个邻近 块依次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标邻近 块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述 当前图像块的相关块；根据所述当前图像块的相关块确定所述当前图像块的 运动矢量第一候选列表中的特定候选者；当确定采用所述特定候选者时，将 所述当前图像块和所述相关块采用相同的方式划分成多个子图像块，所述当 前图像块中的各子图像块与所述相关块中的各子图像块一一对应；
预测模块，用于根据所述相关块中各子图像块的运动矢量分别对所述当 前图像块中对应的子图像块进行预测。
第五方面，提供一种视频图像处理装置，该装置包括存储器与处理器， 所述存储器用于存储指令，所述处理器用于执行所述存储器存储的指令，并 且对所述存储器中存储的指令的执行使得，所述处理器用于执行第一方面或 第一方面的任一可能的实现方式中的方法。
第六方面，提供一种视频图像处理装置，该装置包括存储器与处理器， 所述存储器用于存储指令，所述处理器用于执行所述存储器存储的指令，并 且对所述存储器中存储的指令的执行使得，所述处理器用于执行第二方面或 第二方面的任一可能的实现方式中的方法。
第七方面，提供一种计算机存储介质，其上存储有计算机程序，所述计 算机程序被计算机执行时使得所述计算机实现第一方面或第一方面的任一 可能的实现方式中的方法。
第八方面，提供一种计算机存储介质，其上存储有计算机程序，所述计 算机程序被计算机执行时使得所述计算机实现第二方面或第二方面的任一 可能的实现方式中的方法。
第九方面，提供一种包含指令的计算机程序产品，所述指令被计算机执 行时使得所述计算机实现第一方面或第一方面的任一可能的实现方式中的 方法。
第十方面，提供一种包含指令的计算机程序产品，所述指令被计算机执 行时使得所述计算机实现第二方面或第二方面的任一可能的实现方式中的 方法。
附图说明
图1是本申请实施例提供的视频图像处理方法的示意性流程图。
图2是通过当前图像块的邻近块获取当前块的候选运动矢量的示意图。
图3是对候选运动矢量进行缩放处理的示意图。
图4是本申请实施例提供的视频图像处理方法的另一示意性流程图。
图5是本申请实施例提供的视频图像处理装置的示意性框图。
图6是本申请实施例提供的视频图像处理装置的另一示意性框图。
图7是本申请实施例提供的视频图像处理方法的示意性流程图。
图8是本申请实施例提供的视频图像处理方法的另一示意性流程图。
图9是本申请实施例提供的视频图像处理装置的再一示意性框图。
图10是本申请实施例提供的视频图像处理装置的再一示意性框图。
图11是本申请实施例提供的视频图像处理装置的再一示意性框图。
图12是获取运动矢量第一候选列表的候选者的示意图。
图13是构造运动矢量第一候选列表的候选者的再一示意图。
图14和图15是本申请实施例提供的视频图像处理方法的示意性流程图。
图16是本申请实施例提供的视频图像处理装置的再一示意性框图。
图17是本申请实施例提供的视频图像处理装置的再一示意性框图。
具体实施方式
在视频编解码中，预测步骤用于减少图像中的冗余信息。预测块指的是 一帧图像中用于预测的基本单元，在一些标准中，该预测块也称为预测单元 (Prediction Unit，PU)。在对一帧图像进行编码/压缩之前，图像被分成多个 图像块，进一步的，该多个图像块中的每一个图像块可以再次被分成多个图 像块，以此类推。不同的编码方法中，分割的层级数量可以不同，所承担的 操作方法也不同。不同的编码标准中，对同一层级上的图像块的名称可能不 同。例如，在一些视频标准中，一帧图像第一次被分割成的多个图像块中的每个图像块称为编码树单元(Coding Tree Unit，CTU)；每个编码树单元可 以包含一个编码单元(Coding Unit，CU)或者再次分割成多个编码单元； 一个编码单元可以根据预测方式分割成一个、两个、四个或者其他数量的预 测单元。在一些视频标准中，该编码树单元也被称为最大编码单元(Largest Coding Unit，LCU)。
预测指的是查找与该预测块相似的图像数据，也称为该预测块的参考块。 通过对该预测块和该预测块的参考块之间的差异进行编码/压缩，以减少编码 /压缩中的冗余信息。其中，预测块与参考块的差异可以是由该预测块与该参 考块的相应像素值相减得到的残差。预测包括帧内预测和帧间预测。帧内预 测指的是在预测块所在帧内查找该预测块的参考块，帧间预测指的是在除预 测块所在帧以外的其他帧内查找该预测块的参考块。
在现有的一些视频标准中，预测单元是图像中最小的单元，预测单元不 会继续被划分成多个图像块。下文中所提到的“图像块”或“当前图像块” 指的是一个预测单元(或一个编码单元)，而且一个图像块可以被继续划分 成多个子图像块，每个子图像块可以进一步做预测。
本方案中，在对当前图像块进行预测之前，会构建运动矢量候选列表， 根据在该运动矢量候选列表中选中的候选运动矢量对当前图像块进行预测。 运动矢量候选列表有多类模式。下面先对运动矢量候选列表的多类模式进行 举例说明。
在第一类模式中，作为第一个示例，在编码端，在构建好运动矢量候选 列表之后，可以通过如下步骤完成当前图像块的编码。
1)从运动矢量候选列表中选出最优的一个运动矢量(记为MV1)，将 选出的MV1作为当前图像块的运动矢量，并获得该MV1在运动矢量候选列 表中的索引。
2)根据当前图像块的运动矢量MV1，从参考图像(即参考帧)中确定 当前图像块的预测图像块。即，确定当前图像块的预测图像块在参考帧中的 位置。
3)获得当前图像块与预测图像块之间的残差。
4)向解码端发送当前图像块的运动矢量MV1在运动矢量候选列表中的 索引以及步骤3)获得的残差。
作为示例，在解码端，可以通过如下步骤解码出当前图像块。
1)从编码端接收残差与当前图像块的运动矢量在运动矢量候选列表中 的索引。
2)通过根据本申请实施例的方法获取运动矢量候选列表。解码端获取 的运动矢量候选列表与编码端获取的运动矢量候选列表一致。
3)根据索引，在运动矢量候选列表中获取当前图像块的运动矢量MV1。
4)根据运动矢量MV1，获取当前图像块的预测图像块，再结合残差， 解码得到当前图像块。
也即在第一类模式中，当前图像块的运动矢量等于预测MV(Motion vectorprediction，MVP)。在一些标准中，该第一类模式也称为Merge模式。
在第二类模式中，与第一类模式不同的是，编码端从运动矢量候选列表 选出最优的一个运动矢量MV1后，还以该MV1为搜索起点进行运动搜索， 将最终搜索到的位置与搜索起点的位移记为运动矢量差值(Motion vector difference，MVD)。然后根据当前图像块的运动矢量MV1+MVD，从参考图 像中确定当前图像块的预测图像块。编码端还向解码端发送给MVD。在一 些标准中，该第二类模式也称为AMVP模式(即普通帧间预测模式)。
不同类型模式下的运动矢量候选列表的构建方式可以相同也可以不同。 同一种方式构建的运动矢量候选列表可以只适用其中的一种类型模式，也可 以适用不同类型的构建模式，在此不做限制。
本方案中将提供两种构建方式的运动矢量候选列表，为描述方便，下文 中称该两种构建方式的运动矢量候选列表为运动矢量第一候选列表和运动 矢量第二候选列表。该两种列表的一个区别在于：运动矢量第一候选列表中 的至少一个候选者包括子图像块的运动矢量，运动矢量第二候选列表中的每 个候选者包括图像块的运动矢量。如上文所说，这里的图像块和当前图像块 是同一类型的概念，指的均是一个预测单元(或一个编码单元)，子图像块 指的是在该图像块的基础上分割得到的多个子图像块。在采用运动矢量第一 候选列表中的候选者进行预测时，根据该候选者确定当前图像块的参考块， 然后计算该图像块与该参考块的残差。在采用运动矢量第二候选列表中的候 选者进行预测时，若采用的候选者为子图像块的运动矢量，则根据该候选者 确定当前图像块中的各子图像块的参考块，然后计算当前图像块中的各子图 像块与其参考块的残差，将各子图像块的残差拼接成该当前图像块的残差。
其中，在确定运动矢量第一候选列表和/或运动矢量第二候选列表中候选 者时，可以根据ATMVP技术确定其中一个候选者。在一个示例中，在构建 运动矢量第一候选列表时，可以将根据ATMVP技术确定的运动矢量作为第 一个候选者加入列表中。在一个示例中，在构建运动矢量第二候选列表时， 可以在根据当前图像块的预设位置处的预设数量个空域邻近块的运动矢量 往运动矢量第二候选列表中加入候选者之后，将根据ATMVP技术确定的运 动矢量作为候选者加入列表中，当然，该两个候选列表的候选者加入顺序可 以是其他顺序，对此不做限制。
下面先结合运动矢量第二候选列表的构建方式使用方式对如何根据 ATMVP技术确定其中一个候选者进行举例说明。
在描述运动矢量第二候选列表的构建方式中，为方便理解，在此对运动 矢量进行解释。一个图像块的运动矢量可以包含两个信息：1)该运动矢量 所指向的图像；2)位移。一个图像块的运动矢量所表示的含义为，在该运 动矢量所指向的图像中与该图像块具有该位移的图像块。对于已编/解码的图 像块，其运动矢量所包含的含义包括：该已编/解码的图像块的参考图像，以 及已编/解码的图像块的参考块相对该已编/解码的图像块的位移。需注意的 是，本文中提到的一个图像块的参考块，指的是表示用于计算该图像块的残 差的图像块。
图1为本申请实施例提供的视频图像处理方法视频图像处理方法的示 意性流程图。该方法包括如下步骤。
S110，确定用于加入当前图像块的运动矢量第二候选列表的M个候选 运动矢量。
当前图像块为待进行编码(或解码)的图像块。当前图像块所在的图像 帧称为当前帧。例如，当前图像块为一个编码单元(CU)。
例如，当前图像块的运动矢量第二候选列表可以是Merge候选列表或者 AMVP候选列表。例如，该运动矢量第二候选列表可以是Merge候选列表中 的常规运动矢量候选列表(Nomal Merge List)。应理解，运动矢量第二候选 列表也可以有别的名称。
M个候选运动矢量可以是根据当前图像块在当前帧内的M个邻近块的 运动矢量确定的。邻近块可以为在当前帧上与当前图像块的位置相邻或具有 一定位置间距的图像块。应理解，这M个邻近块为当前帧内已完成编码(或 解码)的图像块。
作为示例，如图2所示，当前图像块的M个邻近块为图2中所示的位 于当前图像块周围4个位置A1(左)→B1(上)→B0(右上)→A0(左下) 的图像块。根据这4个位置的图像块的运动矢量确定当前图像块的M(即M 等于4)个候选运动矢量。
此外，当该M个邻近块中出现不可获得的邻近块时，或者该M个邻近 块中出现采用帧内编码模式的邻近块时，该不可获得的邻近块或该采用帧内 编码模式的邻近块的运动矢量不可获得。那么，该不可获得的邻近块的运动 矢量不作为候选运动矢量，放弃将该不可获得的运动矢量加入当前图像块的 运动矢量第二候选列表。
作为一种可能的实现方式，完成步骤S110之后，M个候选运动矢量已加 入运动矢量第二候选列表。在步骤S120中，可以直接对运动矢量第二候选 列表进行扫描。
S120，对M个候选运动矢量中的N个候选运动矢量依次扫描，根据扫 描结果确定参考运动矢量，N小于M。其中，M和N都是自然数。
无论该M个候选运动矢量都被加入运动矢量第二候选列表中，还是该 M个候选运动矢量中出现部分运动矢量不可得而导致该M个候选运动矢量 中只有部分候选运动矢量被加入运动矢量第二候选列表中，都固定对该M 个候选运动矢量中的N个候选运动矢量依次扫描。固定对该M个候选运动 矢量中的N个候选运动矢量依次扫描，可以指的是固定对该N个候选运动 矢量中已被加入候选运动矢量列表的候选运动矢量进行扫描；或者，可以指的是固定对该M个候选运动矢量中已被加候选运动矢量列表的N个候选运 动矢量进行扫描。
根据N个候选运动矢量的扫描结果确定参考运动矢量的过程可以是，基 于预设条件对N个候选运动矢量依次进行判断，根据判断结果确定参考运动 矢量。
作为示例，预设条件包括：图像块可以获得或不采用帧内预测编码模式， 且所述候选运动矢量指向的参考帧与当前图像块的参考图像相同。
其中，当前图像块的参考图像为与当前图像块所在的图像时间距离最近 的参考图像；或，当前图像块的参考图像为编解码端预设的参考图像；或， 当前图像块的参考图像为在视频参数集、序列头、序列参数集、图像头、图 像参数集、条带头中指定的参考图像。
例如，该当前图像块的参考图像为当前图像块的同位帧，同位帧即为在 条带级信息头中设定的用于获取运动信息进行预测的帧。在一些应用场景中， 该同位帧也被称为位置相关帧(collocated picture)。
应理解，根据未来技术的演进，该预设条件可能会被赋予其它不同的定 义，相应的方案也落入本申请保护范围。
下文将对根据N个候选运动矢量的扫描结果确定参考运动矢量的过程 进行详细描述。
在步骤S120中，仅对步骤S110中获取的M个候选运动矢量中的N个 运动矢量进行扫描，这样可以减少扫描次数。
可选地，在步骤S120中，可以对M个候选运动矢量中的前N个候选运 动矢量依次扫描。
可选地，在步骤S120中，可以对M个候选运动矢量中的最后N个候选 运动矢量依次扫描；或者，可以对M个候选运动矢量中的中间的N个候选 运动矢量依次扫描。本申请对此不作限定。
作为一个示例，在步骤S120中，对M个候选运动矢量中的部分候选运 动矢量依次扫描。
作为另一个示例，在步骤S120中，对当前已加入运动矢量第二候选列 表中的候选运动矢量中的部分候选运动矢量进行依次扫描。
S130，根据参考运动矢量、当前图像块以及当前图像块的参考图像，确 定继续加入运动矢量第二候选列表中的候选运动矢量。
当前图像块的运动矢量第二候选列表中包括步骤S110中确定的M个候 选运动矢量以及步骤S130中确定的候选运动矢量。在一个示例中，在根据 S130确定继续加入运动矢量第二候选列表的第M+1个候选运动矢量之后， 还根据其他方法确定继续加入运动矢量第二候选列表的其他候选运动矢量， 在此不做限制。
在构建完运动矢量第二候选列表后，如图1所示，该方法还可以包括： S140，根据步骤S130得到的运动矢量第二候选列表，确定当前图像块的运 动矢量。
应理解，本申请提供的方案可应用于ATMVP技术中。在现有ATMVP 技术的第一步中，通过对运动矢量第二候选列表中当前已加入的所有空域候 选运动矢量进行扫描，来获取当前图像块的时域矢量。例如，运动矢量第二 候选列表通常会被填充4个空域候选运动矢量，则可能会出现如下情形：需 要扫描4个候选运动矢量，才能获得当前图像块的时域矢量。
而在本申请实施例中，在获取当前图像块的参考运动矢量过程中，仅对 已经获取的M个候选运动矢量中的N(N小于M)个候选运动矢量依次扫 描，相对于现有技术，可以减少在获取当前图像块的参考运动矢量过程中对 候选运动矢量的扫描次数。应理解，将本申请提供的方案应用于现有ATMVP 技术的第一步中，可以对其存在的冗余操作进行简化。
申请人在通用视频编码(Versatile Video Coding)最新的参考软件 VTM-2.0上，选取官方通测序列作为测试序列，测试配置为RA配置及LDB 配置，对本申请提供的方案进行测试，测试结果显示，减少扫描次数后，还 可以保持ATMVP技术的性能增益。
因此，本申请提供的方案在保持现有ATMVP技术的性能增益的前提下， 可以降低ATMVP技术的复杂度。
应理解，本申请提供的构建的方案所形成的运动矢量第二候选列表可以 应用于编码端与解码端。换句话说，本申请提供的方法的执行主体可以为编 码端，也可以为解码端。
作为示例，本申请提供的构建方案所形成的运动矢量第二候选列表的可 以应用于上述的第一类模式(例如Merge模式)。
可选地，在本实施例中，在步骤S110中，根据当前图像块在当前帧内 的4个邻近块的运动矢量，确定用于加入当前图像块的运动矢量第二候选列 表中的4个候选运动矢量，即M等于4。在步骤S120中，对4个候选运动 矢量中的N个候选运动矢量进行扫描，N小于4。
例如，N等于1。例如，在步骤S120中，仅对运动矢量第二候选列表中 的第一个候选运动矢量进行扫描。再例如，N等于2或3。
下文将对步骤S120中，根据N个候选运动矢量的扫描结果确定当前图 像块的参考运动矢量的方式进行描述。
在步骤S120中，逐个判断M个候选运动矢量中的N个候选运动矢量是 否满足预设条件，根据判断结果确定参考运动矢量。本文中以预设条件的定 义为候选运动矢量指向的参考帧与当前图像块的参考图像相同为例进行描 述。
可选地，在步骤S120中，对N个候选运动矢量依次进行扫描，当扫描 到第一个符合预设条件的候选运动矢量时，即当扫描到第一个参考帧与当前 帧的同位帧相同的候选运动矢量时，停止扫描，且根据扫描到的第一个符合 预设条件的候选运动矢量确定参考运动矢量。
应理解，在扫描到第一个符合预设条件的候选运动矢量时，扫描次数可 能等于N，也可能小于N。例如，当第一个扫描的候选运动矢量就满足预设 条件，则停止扫描，将这个候选运动矢量作为当前图像块的参考运动矢量。
可选地，在步骤S120中，当在N个候选运动矢量中未扫描到符合预设 条件的候选运动矢量时，即当N个候选运动矢量指向的参考帧均与当前图像 块的同位帧不同时，将默认值作为参考运动矢量的值。
例如，默认值为(0，0)，即参考运动矢量为(0，0)。应理解，根据实 际情况，默认值还可以有别的定义。
可选地，在步骤S120中，当在N个候选运动矢量中未扫描到符合预设 条件的候选运动矢量时，即当N个候选运动矢量指向的参考帧均与当前图像 块的同位帧不同时，对运动矢量第二候选列表中的特定候选运动矢量进行缩 放处理，根据缩放处理后的特定候选运动矢量确定参考运动矢量。
该特定候选运动矢量可以为N个候选运动矢量中，按扫描顺序得到的第 一个运动矢量或者最后一个运动矢量。
该特定候选运动矢量还可以为N个候选运动矢量中，按其它扫描顺序得 到的运动矢量。
当预设条件的定义为候选运动矢量指向的参考帧与当前图像块的参考 帧相同时，对运动矢量第二候选列表中的特定候选运动矢量进行缩放处理， 根据缩放处理后的特定候选运动矢量确定参考运动矢量，包括：对运动矢量 第二候选列表中的特定候选运动矢量进行缩放处理，使得经过缩放处理的特 定候选运动矢量指向的参考帧与当前图像块的参考图像相同；将经过缩放处 理后的特定候选运动矢量作为参考运动矢量。
如图3所示，curr_pic表示当前图像块所在图像，col_pic表示当前图像 块的同位帧(collocated picture)，neigh_ref_pic表示特定候选运动矢量指向的 参考帧。一种实现方式中，基于特定候选运动矢量指向的参考图像 neigh_ref_pic与该特定运动矢量对应的图像块所在图像curr_pic之间的时间 距离，以及当前图像块的参考图像col_pic与当前图像块所在图像curr_pic 之间的时间距离，确定该特定运动矢量的缩放比例。
应理解，图像帧与图像帧之间的运动程度差异性较差，在当前帧与其同 位帧之间运动剧烈的情况下，如果使用运动矢量(0，0)作为定位当前块的 对应块的依据，并没有考虑帧间的运动，而是直接假设当前块在同位帧中的 绝对坐标没有发生任何改变，实际上有很大概率，当前块在同位帧中的坐标 与其在当前帧中的坐标不同，因此，会产生较大的偏差。
本申请实施例，在N个候选运动矢量中未扫描到参考帧与当前帧的同位 帧相同的候选运动矢量的情况下，对N个候选运动矢量中的一个候选运动矢 量进行缩放处理，使其参考帧与当前帧的同位帧相同，然后将这个经过缩放 处理的候选运动矢量作为当前图像块的运动矢量。这样可以提高当前图像块 的运动矢量的准确度。
可选地，当N为小于M且大于1的整数时，本实施例中的特定候选运 动矢量可以为N个候选运动矢量中参考帧与当前图像块的同位帧在时域上 距离最近的候选运动矢量。
应理解，选择N个候选运动矢量中参考帧与当前帧的同位帧距离最近的 一个候选运动矢量进行缩放处理，可以减少进行缩放处理的耗时，从而提高 获取当前图像块的运动矢量的效率。
可选地，当N为小于M且大于1的整数时，本实施例中的特定候选运 动矢量也可以为N个候选运动矢量中的任意一个候选运动矢量。
应理解，当N等于1时，本实施例中的特定候选运动矢量就是所扫描的 这一个候选运动矢量。
可选地，作为一个实施例，N等于1，在步骤S120中，通过扫描该运动 矢量第二候选列表中的一个候选运动矢量，获取该当前图像块的参考运动矢 量。当扫描的这个候选运动矢量指向参考帧与当前图像块所在的当前帧的同 位帧不同时，对这个候选运动矢量进行缩放处理，使得经过该缩放处理的候 选运动矢量的参考帧与该当前帧的同位帧相同；将经过该缩放处理后的候选 运动矢量作为该当前图像块的参考运动矢量。当扫描的这一个候选运动矢量 的参考帧与当前帧的同位帧相同时，则将这个候选运动矢量作为当前图像块的运动矢量。
在本实施例中，通过扫描该候选运动矢量列表中的一个候选运动矢量， 获取该当前图像块的运动矢量，有效减少了在获取当前图像块的运动矢量过 程中扫描候选运动矢量的次数；在扫描的候选运动矢量的参考帧与当前帧的 同位帧不同时，对这个候选运动矢量进行缩放处理，使其参考帧与当前帧的 同位帧相同，然后以这个经过缩放处理后的候选运动矢量作为当前图像块的 运动矢量，这样可以提高当前图像块的运动矢量的准确度。因此，相对于现 有技术，本申请实施例提供的方案，既可以简化确定当前图像块的运动矢量的过程，又可以提高当前图像块的运动矢量的准确度。
应理解，当预设条件的定义发生变化时，对运动矢量第二候选列表中的 特定候选运动矢量进行缩放处理的过程也要相应发生变化，即保证缩放处理 之后的特定候选运动矢量满足预设条件。
下文将对步骤S130中，根据参考运动矢量、当前图像块以及当前图像 块的参考图像，确定继续加入运动矢量第二候选列表中的候选运动矢量的过 程进行描述。
可选地，作为一种实现方式，根据参考运动矢量、当前图像块以及当前 图像块的参考图像，确定继续加入运动矢量第二候选列表中的候选运动矢量， 包括：将当前图像块划分成多个子图像块；根据参考运动矢量，在当前图像 块的参考图像中确定子图像块的相关块；根据相关块的运动矢量，确定继续 加入运动矢量第二候选列表的候选运动矢量。
在一个示例中，将当前图像块中每个子图像块的相关块的运动矢量作为 候选者加入到运动矢量第二候选列表中。在采用该候选者进行预测时，根据 当前图像块中每个子图像块的相关块的运动矢量对该子图像块进行预测。
在一个示例中，将当前图像块的相关块的代表运动矢量作为候选者加入 到运动矢量第二候选列表中，并标记该候选者为根据ATMVP技术确定的。 当采用该候选者进行预测时，根据该标记和候选者确定当前图像块的相关块， 将当前图像块和该相关块采用相同的方式划分成多个子图像块，当前图像块 中的各子图像块与所述相关块中的各子图像块一一对应；根据该相关块中各 子图像块的运动矢量分别对当前图像块中对应的子图像块进行预测。可选的， 当相关块中出现运动矢量不可获得的子图像块时，采用该相关块的代表运动 矢量替代该不可获得的运动矢量，对当前图像块中对应的子图像块进行预测。 可选的，当相关块中出现运动矢量不可获得的子图像块，且相关块的代表运 动矢量均不可获得时，放弃将根据ATMVP技术确定的候选者加入到该运动 矢量第二候选列表中。一种示例中，当相关块中的子图像块不可获得，或者 相关块中的子图像块采用帧内编码模式时，确定该相关块中出现不可获得运 动矢量的子图像块。
可选的，当前图像块的相关块的代表运动矢量可以指的是该相关块的中 心位置的运动矢量，或者其他代表该相关块的运动矢量，在此不做限制。
在一些视频编解码标准中，相关块可以被称为collocated block或者corresponding block。
例如，当前图像块为一个CU，将其划分之后得到的子图像块可称为 sub-CU。可选地，子图像块的大小和/或子图像块的相关块的大小固定为大 于或等于64个像素。可选地，子图像块的大小和/或子图像块的相关块的大 小均固定为8×8个像素。
在目前ATMVP技术中，对子图像块的大小进行帧级自适应的设置，子 图像块的大小默认为4×4，当满足一定条件时，子图像块的大小被设置为8×8。 例如，在编码端，在编码当前图像块时，计算同一时域层的上一个编码图像 块进行ATMVP模式编码时CU中的各个子图像块的平均块大小，当平均块 大小大于阈值，当前图像块的子图像块的尺寸被设置为8×8，否则使用默认 值4×4。目前，在新一代视频编码标准(Versatile Video Coding，VVC)中， 是以8×8的大小对运动矢量进行存储。应理解，当将子图像块的大小设置为 4×4，该子图像块的运动矢量的大小(也为4×4)不符合当前标准中运动矢 量的存储粒度。此外，目前ATMVP技术中，编码当前图像块时，还需要存 储同一时域层的上一个已编码图像块的子图像块的大小的信息。
在本申请实施例中，将当前图像块的子图像块的大小设置为8×8，一方 面可以适应视频标准VVC中规定的运动矢量的存储粒度，另一方面，无需 存储上一个已编码图像块的子图像块的大小的信息，因此，可以节省存储空 间。
应理解，在保证子图像块的大小和/或子图像块的相关块的大小固定为等 于64个像素的前提下，子图像块的大小和/或子图像块的相关块的大小还可 以为别的尺寸，例如子图像块的大小和/或子图像块的相关块的大小为A×B， A≤64，B≤64，A和B均为4的整数。例如，子图像块的大小和/或子图像 块的相关块的大小为4×16个像素，或者为16×4个像素。
可选地，作为另一种实现方式，根据参考运动矢量、当前图像块以及当 前图像块的参考图像，确定继续加入运动矢量第二候选列表中的候选运动矢 量，包括：根据参考运动矢量，在当前图像块的参考图像中确定当前图像块 的相关块；根据相关块的运动矢量，确定继续加入运动矢量第二候选列表的 候选运动矢量。
在编/解码技术中，一般采用已编/解码的图像来作为当前待编/解码的参 考图像。在一些实施例中，还可以构造一个参考图像，来提高参考图像与当 前待编/解码图像的相似度。
举例而言，视频内容中存在一类特定的编/解码场景，在该场景中背景基 本不发生改变，只有视频中的前景发生改变或者运动。例如，视频监控就属 于该类场景。在视频监控场景中通常监控摄像头固定不动或者只发生缓慢的 移动，可以认为背景基本不发生变化。与此相对，在视频监控镜头中所拍摄 到的人或车等物体则经常发生移动或改变，可以认为前景是经常变化的。在 这类场景中，可以造一个特定的参考图像，该特定的参考图像中只包含高质 量的背景信息。该特定参考图像中可以包括多个图像块，任意一个图像块均是从某个已解码图像中取出的，该特定参考图像中的不同图像块可能取自于 不同的已解码图像。在进行帧间预测时，当前待编/解码图像的背景部分可通 过参考该特定参考图像，由此能够减少帧间预测的残差信息，从而提高编/ 解码效率。
上述是对特定参考图像的一个具体举例。在一些实现方式中，特定参考 图像具有以下至少一种性质：构造帧(composite reference)、长期参考图像、 不被输出的图像。其中，该不被输出的图像，指的是不被输出显示的图像； 一般来说，该不被输出的图像是作为其他图像的参考图像存在的。例如，该 特定参考图像可以是构造的长期参考图像，或者可以是不被输出的构造帧， 或者可以是不被输出的长期参考图像等等。在一些实现方式中，构造帧也被 称为合成参考帧。
在一些实现方式中，非特定参考图像可以是不具有以下至少一种性质的 参考图像：构造帧、长期参考图像、不被输出的图像。例如，该特定参考图 像可以包括除构造帧以外的参考图像，或者包括除长期参考图像以外的参考 图像，或者包括除不被输出的图像以外的参考图像，或者包括除构造的长期 参考图像以外的参考图像，或者包括除不被输出的构造帧以外的参考图像， 或者包括除不被输出的长期参考图像以外的参考图像等等。
在一些实现方式中，视频中的图像可作为参考图像时，可以区分长期参 考图像和短期参考图像的。其中，该短期参考图像是与长期参考图像相对应 的一个概念。短期参考图像存在于参考图像缓冲区中一段时间，经过该短期 参考图像之后的已解码的参考图像在参考图像缓冲区中的若干移入和移出 操作之后，短期参考图像会被移出参考图像缓冲区。参考图像缓冲区也可以 称为参考图像列表缓存、参考图像列表、参考帧列表缓存或参考帧列表等， 本文中将其统称为参考图像缓冲区。
长期参考图像(或长期参考图像中的一部分数据)可以一直存在于参考 图像缓冲区中，该长期参考图像(或长期参考图像中的一部分数据)不受已 解码的参考图像在参考图像缓冲区中的移入和移出操作的影响，只有在解码 端发出更新指令操作时该长期参考图像(或长期参考图像中的一部分数据) 才会被移出参考图像缓冲区。
短期参考图像和长期参考图像在不同的标准中的叫法可能不同，例如， 在H.264/高级视频编码(advanced video coding，AVC)或者H.265/HEVC等 标准中短期参考图像被称为短期参考帧(short-term reference)，长期参考图 像被称为长期参考帧(long-termreference)。又如在信源编码标准(audio video coding standard，AVS)1-P2、AVS2-P2、电气和电子工程师协会(institute of electrical and electronics engineers，IEEE)1857.9-P4等标准中，长期参考图 像被称为背景帧(background picture)。又如在VP8、VP9等标准中，长期 参考图像被称为黄金帧(golden frame)。
应理解，本申请实施例中采用特定的术语，并不代表必须应用到特定场 景下，例如，将长期参考图像称为长期参考帧并不代表必须用到H.264/AVC 或者H.265/HEVC等标准对应的技术中。
以上提到的长期参考图像可以是从多个已解码图像中取出的图像块构 造得到的，或者利用多个已解码图像对已有参考帧(例如，预存的参考帧) 进行更新得到。当然，该构造的特定参考图像也可以是短期参考图像。或者， 长期参考图像也可以不是构造的参考图像。
在上述的实现方式中，特定参考图像可以包括长期参考图像，非特定参 考图像可以包括短期参考图像。
可选地，参考帧的类型可以在码流结构中通过特殊字段标识出来。
可选地，在确定参考图像为长期参考图像时，确定该参考图像为特定参 考图像；或，在确定参考图像为不被输出的帧时，确定该参考图像为特定参 考图像；或，在确定参考图像为构造帧时，确定该参考图像为特定参考图像； 或，在确定参考图像为不被输出的帧，且进一步确定该参考图像为构造帧时， 确定该参考图像为特定参考图像。
可选地，各种类型的参考图像都可以具有相应的标识，此时对于解码端 而言，可以依据参考图像所具有的标识来确定该参考图像是否为特定参考图 图像。
在一些实现方式中，在确定参考图像具有长期参考图像的标识时，确定 该参考图像为特定参考图像。
在一些实现方式中，在确定参考图像具有不被输出的标识时，确定该参 考图像为特定参考图像。
在一些实现方式中，在确定参考图像具有构造帧的标识时，确定该参考 图像为特定参考图像。
在一些实现方式中，在确定参考图像具有以下三个标识中的至少两个标 识时，确定参考图像为特定参考图像：长期参考图像的标识、不被输出的标 识、构造帧或合成参考帧的标识。例如，确定参考图像具有不被输出的标识， 且确定参考图像具有构造帧的标识时，确定参考图像为特定参考图像。
具体地，图像可以具有指示是否是被输出帧的标识，当某一图像被指示 是不被输出时，则表明该帧为参考图像，进一步地，判断该帧是否具有构造 帧的标识，如果是，则确定所述参考图像为特定参考图像。如果某一图像被 指示被输出，则可以不进行是否是构造帧的判断，直接确定该帧不是特定参 考图像。或者，如果某一图像被指示不被输出，但是具有不是构造帧的标识， 则可以确定该帧不是特定参考图像。
可选地，从图像头(picture header)、图像参数集(PPS，picture parameterset)、条带头(slice header)中解析参数确定所述参考图像满足以下条件之 一时，确定所述参考图像为特定参考图像：
所述参考图像为长期参考图像；
所述参考图像为构造参考图像；
所述参考图像为不被输出图像；
所述参考图像为不被输出图像时，进一步判断所述参考图像为构造参考 图像。
在本申请实施例的一些实现方式中，在确定当前图像块的运动矢量的过 程中，涉及到要利用其它图像上的某个图像块的运动矢量来确定该图像块的 运动矢量。为描述方便，称该图像块为第一图像块，称所要利用的其他图像 上的某个图像块为该第一图像块的时域参考块或相关块。可以理解的是，第 一图像块和该第一图像块的时域参考块(或相关块)位于不同的图像上。那 么，在利于该时域参考块(或相关块)的运动矢量来确定第一图像块的运动 矢量的过程中，可能需要对该时域参考块(或相关块)的运动矢量进行缩放。为描述方便，本文中统一采用“相关块”这个术语。
例如，ATMVP技术应用在构建AMVP候选列表中时，在根据ATMVP 技术确定当前图像块的相关块的运动矢量时，需要对该相关块的运动矢量进 行缩放，然后根据缩放后的运动矢量确定当前图像块的运动矢量。一般来说， 基于相关块的运动矢量指向的参考图像与该相关块所在图像之间的时间距 离，以及当前图像块的参考图像与当前图像块所在图像之间的时间距离，确 定该相关块的运动矢量的缩放比例。
在一个示例中，称该相关块的运动矢量为MV 2，该运动矢量MV 2所 指向的参考图像的参考帧索引值为x。其中，该参考帧索引值x为MV 2所 指向的参考图像的顺序编号(例如POC)与该相关块所在图像的顺序编号之 差。称第一图像块的参考图像的参考帧索引值为y。其中，该参考帧索引值 y为第一图像块的参考图像的顺序编号与该第一图像块所在图像的顺序编号 之差。那么，对运动矢量MV 2的缩放比例为V/x。可选的，可以将运动矢 量MV2与y/x的乘积作为第一图像块的运动矢量。
然而，当相关块的运动矢量MV 2是指向一个特定参考图像时，或者， 当第一图像块的参考图像是一个特定参考图像时，由于特定参考图像与第一 图像块所在图像的时间距离定义不明确，对相关块的运动矢量MV 2缩放便 没有意义。
可选地，在本实施例中，当根据相关块的运动矢量确定当前图像块的运 动矢量时，具体地：当相关块的运动矢量指向特定参考图像，或者当前图像 块的参考图像为特定参考图像时，根据处理后的相关块的运动矢量确定当前 图像块的运动矢量，其中，处理后的相关块的运动矢量和处理前的相关块的 运动矢量相同。
例如，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
可选地，在本实施例中，当根据相关块的运动矢量确定当前图像块的运 动矢量时，具体地：当相关块的运动矢量指向特定参考图像，或者当前图像 块的参考图像为特定参考图像时，放弃根据相关块的运动矢量确定当前图像 块的运动矢量。
在一些实施例中，步骤S120包括：在N个候选运动矢量中未扫描到符 合预设条件的候选运动矢量，对运动矢量第二候选列表中的特定候选运动矢 量进行缩放处理，根据缩放处理后的特定候选运动矢量确定参考运动矢量。 这种情形下，可选地，该方法还包括：当特定候选运动矢量指向特定参考图 像，或者当前图像块的参考图像为特定参考图像时，根据处理后的特定候选 运动矢量确定继续加入运动矢量第二候选列表中的候选运动矢量，其中，处 理后的特定候选运动矢量和处理前的特定候选运动矢量相同。
其中，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
在一些实施例中，步骤S120包括：在N个候选运动矢量中未扫描到符 合预设条件的候选运动矢量，对运动矢量第二候选列表中的特定候选运动矢 量进行缩放处理，根据缩放处理后的特定候选运动矢量确定参考运动矢量。 这种情形下，可选地，该方法还包括：当特定候选运动矢量指向特定参考图 像，或者当前图像块的参考图像为特定参考图像时，放弃根据特定候选运动 矢量确定继续加入运动矢量第二候选列表的候选运动矢量。
上述可知，本申请实施例，在获取当前图像块的参考运动矢量过程中， 仅对已经获取的M个候选运动矢量中的N(N小于M)个候选运动矢量依 次扫描，相对于现有技术，可以减少在获取当前图像块的参考运动矢量过程 中对候选运动矢量的扫描次数。应理解，将本申请提供的方案应用于现有 ATMVP技术中，可以对其存在的冗余操作进行简化。
在N个候选运动矢量中未扫描到参考帧与当前帧的同位帧相同的候选 运动矢量的情况下，对N个候选运动矢量中的一个候选运动矢量进行缩放处 理，使其参考帧与当前帧的同位帧相同，然后将这个经过缩放处理的候选运 动矢量作为当前图像块的运动矢量，这样可以提高当前图像块的运动矢量的 准确度。
将当前图像块划分为大小为8×8的子图像块，一方面可以适应视频标准 VVC中规定的运动矢量的存储粒度，另一方面，无需存储上一个已编码图 像块的子块的大小的信息，因此，可以节省存储空间。
如图4所示，本申请实施例还提供一种视频图像处理方法，该方法包 括如下步骤，
S410，获取用于加入当前图像块的运动矢量第二候选列表的M个候选 运动矢量。
步骤S410对应于上文描述的步骤S110，具体描述参考上文，这里不再 赘述。
S420，对M个候选运动矢量中的至少部分候选运动矢量依次扫描，根 据扫描结果确定当前图像块的参考运动矢量。
作为一种可选实现方式，对M个候选运动矢量中的部分候选运动矢量 依次扫描，根据扫描结果确定当前图像块的参考运动矢量。在这种实现方式 下，步骤S420可对应于上文描述的步骤S120，具体描述参见上文。
作为另一种可选实现方式，对M个候选运动矢量中的全部候选运动矢 量依次扫描，根据扫描结果确定当前图像块的参考运动矢量。
应理解，在步骤S420中，根据扫描结果确定当前图像块的参考运动矢 量的具体方式可以参考上文实施例中的相关描述，这里不再赘述。
S430，将当前图像块划分成多个子图像块，其中，子图像块的大小固定 为大于或等于64个像素。
例如，当前图像块为一个CU，将其划分之后得到的子图像块可称为 sub-CU。
S440，根据参考运动矢量在当前图像块的参考图像中确定子图像块的相 关块。
当前图像块的参考图像可以是当前图像块的同位帧。
S450，根据相关块的运动矢量确定继续加入运动矢量第二候选列表的候 选运动矢量。
在目前ATMVP技术中，对子图像块的大小进行帧级自适应的设置，子 图像块的大小默认为4×4，当满足一定条件时，子图像块的大小被设置为8×8。 例如，在编码端，在编码当前图像块时，计算同一时域层的上一个编码图像 块进行ATMVP模式编码时CU中的各个子图像块的平均块大小，当平均块 大小大于阈值，当前图像块的子图像块的尺寸被设置为8×8，否则使用默认 值4×4。换言之，在现有技术中，在编码当前图像块时，还需要存储同一时 域层的上一个已编码图像块的子图像块的大小的信息。
在本申请实施例中，将当前图像块的子图像块的大小固定为大于或等于 64个像素，无需存储上一个已编码图像块的子图像块的大小的信息，因此， 可以节省存储空间。
可选地，在本实施例中，子图像块的大小和/或子图像块的相关块的大小 均固定为8×8个像素。
在目前ATMVP技术中，对子图像块的大小进行帧级自适应的设置，子 图像块的大小默认为4×4，当满足一定条件时，子图像块的大小被设置为8×8。 例如，在编码端，在编码当前图像块时，计算同一时域层的上一个编码图像 块进行ATMVP模式编码时CU中的各个子图像块的平均块大小，当平均块 大小大于阈值，当前图像块的子图像块的尺寸被设置为8×8，否则使用默认 值4×4。目前，在新一代视频编码标准(Versatile Video Coding，VVC)中， 是以8×8的大小对运动矢量进行存储。应理解，当将子图像块的大小设置为 4×4，该子图像块的运动矢量的大小(也为4×4)不符合当前标准中运动矢 量的存储粒度。此外，目前ATMVP技术中，编码当前图像块时，还需要存 储同一时域层的上一个已编码图像块的子图像块的大小的信息。
在本申请实施例中，将当前图像块的子图像块的大小设置为8×8，一方 面可以适应视频标准VVC中规定的运动矢量的存储粒度，另一方面，无需 存储上一个已编码图像块的子图像块的大小的信息，因此，可以节省存储空 间。
应理解，在保证子图像块的大小和/或子图像块的相关块的大小固定为等 于64个像素的前提下，子图像块的大小和/或子图像块的相关块的大小还可 以为别的尺寸，例如子图像块的大小和/或子图像块的相关块的大小为A×B， A≤64，B≤64，A和B均为4的整数。例如，子图像块的大小和/或子图像 块的相关块的大小为4×16个像素，或者为16×4个像素。
可选地，在步骤S420中，对至少部分候选运动矢量依次进行扫描，当 扫描到第一个符合预设条件的候选运动矢量时，停止扫描，且根据扫描到的 第一个符合预设条件的候选运动矢量确定参考运动矢量。
根据扫描到的第一个符合预设条件的候选运动矢量确定参考运动矢量， 可以包括：将第一个符合预设条件的候选运动矢量作为目标邻近块。
可选地，预设条件包括：候选运动矢量的参考图像与当前图像块的参考 图像相同。
可选地，步骤S450包括：当相关块的运动矢量指向特定参考图像，或 者当前图像块的参考图像为特定参考图像时，根据处理后的相关块的运动矢 量确定继续加入运动矢量第二候选列表中的候选运动矢量，其中，处理后的 相关块的运动矢量和处理前的相关块的运动矢量相同。
例如，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
可选地，步骤S450包括：当相关块的运动矢量指向特定参考图像，或 者当前图像块的参考图像为特定参考图像时，放弃根据相关块的运动矢量确 定继续加入运动矢量第二候选列表的候选运动矢量。
因此，图4所示的实施例，将当前图像块划分为大小为8×8的子图像块， 一方面可以适应视频标准VVC中规定的运动矢量的存储粒度，另一方面， 无需存储上一个已编码图像块的子块的大小的信息，因此，可以节省存储空 间。
上面描述了如何根据ATMVP技术确定加入运动矢量第二候选列表的候 选者的方法。一些实现方式中，还可以往运动矢量第二候选列表加入其它的 候选者，在此不做限制。
上文结合图1和图4描述了本申请的方法实施例，下文将描述上文方法 实施例对应的装置实施例。应理解，装置实施例的描述与方法实施例的描述 相互对应，因此，未详细描述的内容可以参见前面方法实施例，为了简洁， 这里不再赘述。
图5为本申请实施例提供的视频图像处理装置500的示意性框图。该 装置500用于执行如图1所示的方法实施例。该装置500包括如下单元。
获取单元510，用于获取用于加入当前图像块的运动矢量第二候选列表 的M个候选运动矢量；
确定单元520，用于对M个候选运动矢量中的N个候选运动矢量依次 扫描，根据扫描结果确定参考运动矢量，N小于M；
确定单元520还用于，根据参考运动矢量、当前图像块以及当前图像块 的参考图像，确定继续加入运动矢量第二候选列表中的候选运动矢量；
确定单元520还用于，根据运动矢量第二候选列表，确定当前图像块的 运动矢量。
在现有ATMVP技术的第一步中，通过对运动矢量第二候选列表中当前 已加入的所有候选运动矢量进行扫描，来获取当前图像块的时域矢量。例如， 运动矢量第二候选列表通常会被填充4个候选运动矢量，则可能会出现如下 情形：需要扫描4个候选运动矢量，才能获得当前图像块的时域矢量。
而在本申请实施例中，在获取当前图像块的参考运动矢量过程中，仅对 已经获取的M个候选运动矢量中的N(N小于M)个候选运动矢量依次扫 描，相对于现有技术，可以减少在获取当前图像块的参考运动矢量过程中对 候选运动矢量的扫描次数。应理解，将本申请提供的方案应用于现有ATMVP 技术的第一步中，可以对其存在的冗余操作进行简化。
申请人在通用视频编码(Versatile Video Coding)最新的参考软件 VTM-2.0上，选取官方通测序列作为测试序列，测试配置为RA配置及LDB 配置，对本申请提供的方案进行测试，测试结果显示，减少扫描次数后，还 可以保持ATMVP技术的性能增益。
因此，本申请提供的方案在保持现有ATMVP技术的性能增益的前提下， 可以降低ATMVP技术的复杂度。
可选地，作为一个实施例，获取单元510用于，根据当前图像块在当前 帧内的M个邻近块的运动矢量，获取用于加入当前图像块的运动矢量第二 候选列表的M个候选运动矢量。
可选地，作为一个实施例，邻近块为在当前帧上与当前图像块的位置相 邻或具有一定位置间距的图像块。
可选地，作为一个实施例，确定单元520用于，对M个候选运动矢量 中的前N个候选运动矢量依次扫描。
可选地，作为一个实施例，M等于4，N小于4。
可选地，作为一个实施例，N等于1或2。
可选地，作为一个实施例，确定单元520用于，基于预设条件，对M 个候选运动矢量中的N个候选运动矢量依次扫描，根据扫描结果确定参考运 动矢量。
可选地，作为一个实施例，预设条件包括：指向的参考帧与当前图像块 的参考图像相同的候选运动矢量。
可选地，作为一个实施例，确定单元520用于，对N个候选运动矢量依 次进行扫描，当扫描到第一个符合预设条件的候选运动矢量时，停止扫描， 且根据扫描到的第一个符合预设条件的候选运动矢量确定参考运动矢量。
可选地，作为一个实施例，确定单元520用于，当在N个候选运动矢量 中未扫描到符合预设条件的候选运动矢量时，对运动矢量第二候选列表中的 特定候选运动矢量进行缩放处理，根据缩放处理后的特定候选运动矢量确定 参考运动矢量。
可选地，作为一个实施例，特定候选运动矢量为N个候选运动矢量中， 按扫描顺序得到的第一个运动矢量或者最后一个运动矢量。
可选地，作为一个实施例，确定单元520用于，对运动矢量第二候选列 表中的特定候选运动矢量进行缩放处理，使得经过缩放处理的特定候选运动 矢量指向的参考帧与当前图像块的参考图像相同；将经过缩放处理后的特定 候选运动矢量作为参考运动矢量。
可选地，作为一个实施例，确定单元520用于，当在N个候选运动矢量 中未扫描到符合预设条件的候选运动矢量时，将默认值作为参考运动矢量。
可选地，作为一个实施例，默认值为运动矢量(0，0)。
可选地，作为一个实施例，确定单元520用于，将当前图像块划分成多 个子图像块；根据参考运动矢量，在当前图像块的参考图像中确定子图像块 的相关块；根据相关块的运动矢量，确定继续加入运动矢量第二候选列表的 候选运动矢量。
可选地，作为一个实施例，子图像块的大小和/或子图像块的相关块的大 小固定为大于或等于64个像素。
可选地，作为一个实施例，当前图像块为一个编码单元CU。
可选地，作为一个实施例，确定单元520用于，根据参考运动矢量，在 当前图像块的参考图像中确定当前图像块的相关块；根据相关块的运动矢量， 确定继续加入运动矢量第二候选列表的候选运动矢量。
可选地，作为一个实施例，确定单元520用于，当相关块的运动矢量指 向特定参考图像，或者当前图像块的参考图像为特定参考图像时，根据处理 后的相关块的运动矢量确定继续加入运动矢量第二候选列表中的候选运动 矢量，其中，处理后的相关块的运动矢量和处理前的相关块的运动矢量相同。
可选地，作为一个实施例，处理后的相关块的运动矢量，包括：根据数 值为1的缩放比例对相关块的运动矢量进行缩放后得到的运动矢量，或者， 跳过缩放步骤的相关块的运动矢量。
可选地，作为一个实施例，确定单元520用于，当相关块的运动矢量指 向特定参考图像，或者当前图像块的参考图像为特定参考图像时，放弃根据 相关块的运动矢量确定继续加入运动矢量第二候选列表的候选运动矢量。
可选地，作为一个实施例，确定单元520用于，当特定候选运动矢量指 向特定参考图像，或者当前图像块的参考图像为特定参考图像时，根据处理 后的特定候选运动矢量确定继续加入运动矢量第二候选列表中的候选运动 矢量，其中，处理后的特定候选运动矢量和处理前的特定候选运动矢量相同。
可选地，作为一个实施例，处理后的相关块的运动矢量，包括：根据数 值为1的缩放比例对相关块的运动矢量进行缩放后得到的运动矢量，或者， 跳过缩放步骤的相关块的运动矢量。
可选地，作为一个实施例，确定单元520用于，当特定候选运动矢量指 向特定参考图像，或者当前图像块的参考图像为特定参考图像时，放弃根据 特定候选运动矢量确定继续加入运动矢量第二候选列表的候选运动矢量。
可选地，作为一个实施例，运动矢量第二候选列表为Merge候选列表。
可选地，作为一个实施例，当前图像块的参考图像为当前图像块的同位 帧。
可选地，作为一个实施例，子图像块的大小和/或子图像块的相关块的大 小均固定为8×8个像素。
应理解，本实施例中的获取单元510和确定单元520均可以由处理器实 现。
如图6所示，本申请实施例还提供一种视频图像处理装置600。该装置 600用于执行如图4所示的方法实施例。该装置600包括如下单元。
获取单元610，用于获取用于加入当前图像块的运动矢量第二候 选列表的M个候选运动矢量；
确定单元620，用于对M个候选运动矢量中的至少部分候选运动矢量依 次扫描，根据扫描结果确定当前图像块的参考运动矢量；
划分单元630，用于将当前图像块划分成多个子图像块，其中，子图像 块的大小固定为大于或等于64个像素；
确定单元620还用于，根据参考运动矢量在当前图像块的参考图像中确 定子图像块的相关块；
确定单元620还用于，根据相关块的运动矢量确定继续加入运动矢量第 二候选列表的候选运动矢量。
在目前ATMVP技术中，对子图像块的大小进行帧级自适应的设置，子 图像块的大小默认为4×4，当满足一定条件时，子图像块的大小被设置为8×8。 例如，在编码端，在编码当前图像块时，计算同一时域层的上一个编码图像 块进行ATMVP模式编码时CU中的各个子图像块的平均块大小，当平均块 大小大于阈值，当前图像块的子图像块的尺寸被设置为8×8，否则使用默认 值4×4。换言之，在现有技术中，在编码当前图像块时，还需要存储同一时 域层的上一个已编码图像块的子图像块的大小的信息。
在本申请实施例中，将当前图像块的子图像块的大小固定为大于或等于 64个像素，无需存储上一个已编码图像块的子图像块的大小的信息，因此， 可以节省存储空间。
可选地，作为一个实施例，子图像块的大小和/或子图像块的相关块的大 小均固定为8×8个像素。
目前，在新一代视频编码标准(Versatile Video Coding，VVC)中，是 以8×8的大小对运动矢量进行存储。在本申请实施例中，将当前图像块的子 图像块的大小设置为8×8，一方面可以适应视频标准VVC中规定的运动矢 量的存储粒度，另一方面，无需存储上一个已编码图像块的子图像块的大小 的信息，因此，可以节省存储空间。
可选地，作为一个实施例，确定单元620用于，对至少部分候选运动矢 量依次进行扫描，当扫描到第一个符合预设条件的候选运动矢量时，停止扫 描，且根据扫描到的第一个符合预设条件的候选运动矢量确定参考运动矢量。
可选地，作为一个实施例，确定单元620用于，将第一个符合预设条件 的候选运动矢量作为目标邻近块。
可选地，作为一个实施例，预设条件包括：候选运动矢量的参考图像与 当前图像块的参考图像相同。
应理解，本实施例中的获取单元610、确定单元620和划分单元630均 可以由处理器实现。
在上文描述中，一个图像块的运动矢量包含两个信息：1)该运动矢量 所指向的图像；2)位移。在一些应用场景中，一个图像块的运动矢量仅仅 包含“位移”这个信息。该图像块另外提供了用于指示该图像块的参考图像的 索引信息。对于已编/解码的图像块，其运动矢量所包含的含义包括：该已编 /解码的图像块的参考块在参考图像上相对与该已编/解码的图像块位置相同 且位于该参考图像的图像块的位移。在确定该已编/解码的图像块的参考块时， 需要通过该已编/解码的图像块的参考图像的索引信息以及该已编/解码的图 像块的运动矢量确定该已编/解码的图像块的参考块。那么，在图1所示的视 频图像处理方法中，步骤S120不是对运动矢量第二候选列表中的候选运动 矢量进行扫描，而是直接对该候选运动矢量所对应的图像块进行扫描。下文 中针对该运动矢量新的定义(也即包含“位移”信息但不包含“所指向的图像”)， 提供视频图像处理方法。需要注意的是，针对“运动矢量”的这两种不同含 义所分别提供的基于ATMVP技术确定候选运动矢量的方法基本是一致的， 上文中的解释也适用于下文提供的视频图像处理方法，区别主要在构建运动 矢量第二候选列表中，根据ATMVP技术确定加入运动矢量第二候选列表中 的候选者时，在上文已描述的视频图像处理方法中是对已加入运动矢量第二 候选列表中的运动矢量进行扫描，而下文中所提供的视频图像处理方法中是 对该已加入运动矢量第二候选列表中的运动矢量所对应的图像块进行扫描。
如图7所示，本申请实施例提供一种视频图像处理方法，该方法包括如 下步骤。
S710，确定当前图像块的M个邻近块。
当前图像块为待进行编码(或解码)的图像块。例如，当前图像块为一 个编码单元(CU)。
当前图像块所在的图像帧称为当前帧。
邻近块为在当前图像上与当前图像块的位置相邻或具有一定位置间距 的图像块。
M个邻近块为当前帧内已完成编码(或解码)的图像块。
作为示例，如图2所示，按图2中所示的位于当前图像块周围4个位置 A1(左)→B1(上)→B0(右上)→A0(左下)的图像块的顺序，依次确定 当前图像块的4个邻近块。
S720，对M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目 标邻近块，N小于M。
根据N个邻近块的扫描结果确定目标邻近块的过程可以是，基于预设条 件对N个邻近块依次进行判断，根据判断结果确定目标邻近块。
作为示例，预设条件的定义为，邻近块的参考图像与当前图像块的参考 图像相同。
其中，当前图像块的参考图像为与当前图像块所在的图像时间距离最近 的参考图像；或，当前图像块的参考图像为编解码端预设的参考图像；或， 当前图像块的参考图像为在视频参数集、序列头、序列参数集、图像头、图 像参数集、条带头中指定的参考图像。
例如，该当前图像块的参考图像为当前图像块的同位帧，同位帧即为在 条带级信息头中设定的用于获取运动信息进行预测的帧。
应理解，根据未来技术的演进，该预设条件可能会被赋予其它不同的定 义，相应的方案也落入本申请保护范围。
下文将对根据N个邻近块的扫描结果确定目标邻近块的过程进行详细 描述。
在步骤S720中，仅对步骤S710中获取的M个邻近块中的N个邻近块 进行扫描，这样可以减少扫描次数。
可选地，在步骤S720中，可以对M个邻近块中的前N个邻近块依次扫 描。
当在步骤S710中，按预设顺序依次确定当前图像块的M个邻近块时， 步骤S720中获取的前N个邻近块，指的是按该预设顺序首先确定的N个邻 近块。
可选地，在步骤S720中，可以对M个邻近块中的最后N个邻近块依次 扫描；或者，可以对M个邻近块中的中间的N个邻近块依次扫描。本申请 对此不作限定。
S730，根据目标邻近块的运动矢量、当前图像块以及当前图像块的参考 图像，确定当前图像块的相关块。
S740，根据相关块的运动矢量对当前图像块进行编/解码。
可选地，步骤S740包括：根据相关块的运动矢量和参考图像确定当前 图像块的参考块。
例如，步骤S740包括：构建当前图像块的候选块列表，该候选块列表 中的候选块包括M个邻近块和相关块；根据候选块列表中的候选块的参考 块对当前图像块进行编解码。
在一个示例中，该候选块列表为当前图像块的merge候选列表。在一个 示例中。该候选块列表为当前图像块的AMVP候选列表。
在编码端，将当前块的候选块的索引(index)写入码流。在解码端，获 取到索引后，从候选块列表中找到该索引对应的候选块，根据该候选块的参 考块确定当前图像块的参考块，或者，根据该候选块的运动矢量确定当前图 像块的运动矢量。
例如，直接将候选块的参考块确定当前图像块的参考块，或者，直接将 候选块的运动矢量确定当前图像块的运动矢量。又例如，编码端还将该当前 块的MVD写入码流中。解码端获取到该MVD后，将该候选块的运动矢量 加上MVD作为当前块的运动矢量，然后根据该运动矢量和当前块的参考图 像确定当前块的参考块。
在本申请实施例中，在获取当前图像块的目标邻近块的过程中，仅对已 经获取的M个邻近块中的N(N小于M)个邻近块依次扫描，相对于现有 技术，可以减少在获取当前图像块的目标邻近块的过程中对候选邻近块的扫 描次数，从而降低复杂度。
可选地，在本实施例中，在步骤S710中，确定当前图像块在当前帧内 的4个邻近块，即M等于4。在步骤S720中，对4个邻近块中的N个邻近 块进行扫描，N小于4。
例如，N等于1。例如，在步骤S720中，仅对4个邻近块中的第一个邻 近块进行扫描。
再例如，N等于2或3。
下文将对步骤S720中，根据N个邻近块的扫描结果确定目标邻近块的 方式进行描述。
可选地，在步骤S720中，对N个邻近块依次进行扫描，当扫描到第一 个符合预设条件的邻近块时，停止扫描，且根据扫描到的第一个符合预设条 件的邻近块确定目标邻近块。
例如，预设条件的定义为邻近块的参考图像与当前图像块的参考图像相 同。
应理解，在将来演进的技术中，预设条件还可能被赋予其他定义。
下文中，以预设条件的定义为邻近块的参考图像与当前图像块的参考图 像相同为例进行描述。
例如，将第一个符合预设条件的邻近块作为目标邻近块。
可选地，当在步骤S720中，在N个邻近块中未扫描到符合预设条件的 邻近块时，该方法还包括：对M个邻近块中的特定邻近块的运动矢量进行 缩放处理，根据缩放处理后的运动矢量对当前图像块进行编/解码。
例如，根据缩放处理后的运动矢量和当前图像块的参考图像确定当前图 像块的参考块。
可选地，特定邻近块为N个邻近块中，按扫描顺序得到的第一个邻近块 或者最后一个邻近块。
该特定邻近块还可以为N个邻近块中，按其它扫描顺序得到的邻近块。
可选地，根据缩放处理后的运动矢量对当前图像块进行编/解码，包括： 对特定邻近块的运动矢量进行缩放处理，使得经过缩放处理后的运动矢量指 向的参考帧与当前图像块的参考图像相同；将经过缩放处理后的运动矢量在 当前图像块的参考图像中指向的图像块作为当前图像块的参考块。
可选地，当在步骤S720中，当在N个邻近块中未扫描到符合预设条件 的邻近块时，将默认块作为当前图像块的候选参考块。
例如，默认块为运动矢量(0，0)指向的图像块。
下文将对步骤S730中，根据目标邻近块的运动矢量、当前图像块以及 当前图像块的参考图像，确定当前图像块的相关块的过程进行描述。
可选地，作为一种实现方式，根据目标邻近块的运动矢量、当前图像块 以及当前图像块的参考图像，确定当前图像块的相关块，包括：将当前图像 块划分为多个子图像块；根据目标邻近块的运动矢量，在当前图像块的参考 图像中确定子图像块的相关块，当前图像块的相关块包括子图像块的相关块。
相关块可以被称为collocated block或者corresponding block。
例如，当前图像块为一个CU，将其划分之后得到的子图像块可称为 sub-CU。
可选地，子图像块的大小和/或子图像块的相关块的大小固定为大于或等 于64个像素。
可选地，子图像块的大小和/或子图像块的相关块的大小均固定为8×8 个像素。
在目前ATMVP技术中，对子图像块的大小进行帧级自适应的设置，子 图像块的大小默认为4×4，当满足一定条件时，子图像块的大小被设置为8×8。 例如，在编码端，在编码当前图像块时，计算同一时域层的上一个编码图像 块进行ATMVP模式编码时CU中的各个子图像块的平均块大小，当平均块 大小大于阈值，当前图像块的子图像块的尺寸被设置为8×8，否则使用默认 值4×4。目前，在新一代视频编码标准(Versatile Video Coding，VVC)中， 是以8×8的大小对运动矢量进行存储。应理解，当将子图像块的大小设置为 4×4，该子图像块的运动矢量的大小(也为4×4)不符合当前标准中运动矢 量的存储粒度。此外，目前ATMVP技术中，编码当前图像块时，还需要存 储同一时域层的上一个已编码图像块的子图像块的大小的信息。
在本申请实施例中，将当前图像块的子图像块的大小设置为8×8，一方 面可以适应视频标准VVC中规定的运动矢量的存储粒度，另一方面，无需 存储上一个已编码图像块的子图像块的大小的信息，因此，可以节省存储空 间。
应理解，在保证子图像块的大小和/或子图像块的相关块的大小固定为等 于64个像素的前提下，子图像块的大小和/或子图像块的相关块的大小还可 以为别的尺寸，例如子图像块的大小和/或子图像块的相关块的大小为A×B， A≤64，B≤64，A和B均为4的整数。例如，子图像块的大小和/或子图像 块的相关块的大小为4×16个像素，或者为16×4个像素。
可选地，作为另一种实现方式，根据目标邻近块的运动矢量、当前图像 块以及当前图像块的参考图像，确定当前图像块的相关块，包括：根据目标 邻近块的运动矢量，在当前图像块的参考图像中确定当前图像块的相关块。
可选地，步骤S740包括：当相关块的参考图像为特定参考图像，或者 当前图像块的参考图像为特定参考图像时，根据处理后的相关块的运动矢量 和当前图像块的参考图像确定当前图像块的候选参考块；其中，处理后的相 关块的运动矢量和处理前的相关块的运动矢量相同。
例如，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
可选地，步骤S740包括：当相关块的参考图像为特定参考图像，或者 当前块的参考图像为特定参考图像时，放弃根据相关块的运动矢量确定当前 图像块的候选参考块。
在一些实施例中，步骤S720包括：当特定邻近块的运动矢量指向特定 参考图像，或者当前图像块的参考图像为特定参考图像时，根据处理后的相 关块的运动矢量和当前图像块的参考图像确定当前图像块的参考块；其中， 处理后的相关块的运动矢量和处理前的相关块的运动矢量相同。
其中，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
上述可知，本申请实施例，在获取当前图像块的目标邻近块的过程中， 仅对已经获取的M个邻近块中的N(N小于M)个邻近块依次扫描，相对 于现有技术，可以减少在获取当前图像块的目标邻近块的过程中对候选邻近 块的扫描次数，从而降低复杂度。
在N个邻近块中未扫描到参考帧与当前帧的同位帧相同的邻近块的情 况下，对N个邻近块中的一个邻近块的运动矢量进行缩放处理，使其参考帧 与当前帧的同位帧相同，然后将这个经过缩放处理的运动矢量作为当前图像 块的运动矢量，这样可以提高当前图像块的运动矢量的准确度。
将当前图像块划分为大小为8×8的子图像块，一方面可以适应视频标准 VVC中规定的运动矢量的存储粒度，另一方面，无需存储上一个已编码图 像块的子块的大小的信息，因此，可以节省存储空间。
在本申请实施例的一些实现方式中，在确定当前图像块的运动矢量的过 程中，涉及到要利用其它图像上的某个图像块的运动矢量来确定该图像块的 运动矢量。为描述方便，称该图像块为第一图像块，称所要利用的其他图像 上的某个图像块为该第一图像块的时域参考块或相关块。可以理解的是，第 一图像块和该第一图像块的时域参考块(或相关块)位于不同的图像上。那 么，在利用该时域参考块(或相关块)的运动矢量来确定第一图像块的运动 矢量的过程中，可能需要对该时域参考块(或相关块)的运动矢量进行缩放。为描述方便，本文中统一采用“相关块”这个术语。
例如，ATMVP技术应用在构建AMVP候选列表中时，在根据ATMVP 技术确定当前图像块的相关块后，根据该相关块的运动矢量确定当前图像块 的运动矢量时，需要对该相关块的运动矢量进行缩放，然后根据缩放后的运 动矢量确定当前图像块的运动矢量。一般来说，基于相关块的运动矢量指向 的参考图像与该相关块所在图像之间的时间距离，以及当前图像块的参考图 像与当前图像块所在图像之间的时间距离，确定该相关块的运动矢量的缩放 比例。
在一个示例中，称该相关块的运动矢量为MV 2，该运动矢量MV 2所 指向的参考图像的参考帧索引值为x。其中，该参考帧索引值x为MV 2所 指向的参考图像的顺序编号(例如POC)与该相关块所在图像的顺序编号之 差。称第一图像块的参考图像的参考帧索引值为y。其中，该参考帧索引值 y为第一图像块的参考图像的顺序编号与该第一图像块所在图像的顺序编号 之差。那么，对运动矢量MV 2的缩放比例为y/x。可选的，可以将运动矢 量MV2与y/x的乘积作为第一图像块的运动矢量。
然而，当相关块的运动矢量MV 2是指向一个特定参考图像时，或者， 当第一图像块的参考图像是一个特定参考图像时，由于特定参考图像与第一 图像块所在图像的时间距离定义不明确，对相关块的运动矢量MV 2缩放便 没有意义。
可选地，在本实施例中，当根据相关块的运动矢量确定当前图像块的运 动矢量时，具体地：当相关块的运动矢量指向特定参考图像，或者当前图像 块的参考图像为特定参考图像时，根据处理后的相关块的运动矢量确定当前 图像块的运动矢量，其中，处理后的相关块的运动矢量和处理前的相关块的 运动矢量相同。
例如，处理后的相关块的运动矢量，包括：根据数值为1的缩放比例对 相关块的运动矢量进行缩放后得到的运动矢量，或者，跳过缩放步骤的相关 块的运动矢量。
可选地，在本实施例中，当根据相关块的运动矢量确定当前图像块的运 动矢量时，具体地：当相关块的运动矢量指向特定参考图像，或者当前图像 块的参考图像为特定参考图像时，放弃根据相关块的运动矢量确定当前图像 块的运动矢量。
如图8所示，本申请实施例还提供一种视频图像处理方法，该方法包括 如下步骤。
S810，确定当前图像块的M个邻近块。
步骤S810可以对应于上文实施例中的步骤S710。
S820，对M个邻近块中的至少部分邻近块依次扫描，根据扫描结果确 定目标邻近块。
可选地，对M个邻近块中的部分邻近块依次扫描，根据扫描结果确定 目标邻近块。
可选地，对M个邻近块中的全部邻近块依次扫描，根据扫描结果确定 目标邻近块。
S830，将当前图像块划分成多个子图像块，其中，子图像块的大小固定 为大于或等于64个像素。
S840，根据目标邻近块的运动矢量及子图像块，在当前图像块的参考图 像中确定当前图像块的相关块。
可选地，当前图像块的参考图像为与当前图像块所在的图像时间距离最 近的参考图像。
可选地，当前图像块的参考图像为编解码端预设的参考图像。
可选地，当前图像块的参考图像为在视频参数集、序列头、序列参数集、 图像头、图像参数集、条带头中指定的参考图像。
S850，根据相关块的运动矢量对当前图像块进行编/解码。
在本申请实施例中，将当前图像块的子图像块的大小固定为大于或等于 64个像素，无需存储上一个已编码图像块的子图像块的大小的信息，因此， 可以节省存储空间。
可选地，在本实施例中，子图像块的大小和/或子图像块的时域参考块的 大小均固定为8×8个像素。
目前，在新一代视频编码标准(Versatile Video Coding，VVC)中，是 以8×8的大小对运动矢量进行存储。在本申请实施例中，将当前图像块的子 图像块的大小设置为8×8，一方面可以适应视频标准VVC中规定的运动矢 量的存储粒度，另一方面，无需存储上一个已编码图像块的子图像块的大小 的信息，因此，可以节省存储空间。
应理解，在保证子图像块的大小和/或子图像块的相关块的大小固定为等 于64个像素的前提下，子图像块的大小和/或子图像块的相关块的大小还可 以为别的尺寸，例如子图像块的大小和/或子图像块的相关块的大小为A×B， A≤64，B≤64，A和B均为4的整数。例如，子图像块的大小和/或子图像 块的相关块的大小为4×16个像素，或者为16×4个像素。
可选地，步骤S820包括：对至少部分邻近块依次进行扫描，当扫描到 第一个符合预设条件的邻近块时，停止扫描，且根据扫描到的第一个符合预 设条件的邻近块确定目标邻近块。
例如，将第一个符合预设条件的邻近块作为目标邻近块。
例如，预设条件的定义为：邻近块的参考图像与当前图像块的参考图像 相同。
可选地，步骤S840包括：根据目标邻近块的运动矢量及子图像块，在 当前图像块的参考图像中确定子图像块的相关块，其中，当前图像块的相关 块，包括子图像块的相关块。
上文结合图7和图8描述了本申请的方法实施例，下文将描述图7和图 8所示的方法实施例对应的装置实施例。应理解，装置实施例的描述与方法 实施例的描述相互对应，因此，未详细描述的内容可以参见前面方法实施例， 为了简洁，这里不再赘述。
图9为本申请实施例提供的视频图像处理装置900的示意性框图。该 装置900用于执行如图7所示的方法实施例。该装置900包括如下单元。
获取单元910，用于获取当前图像块的M个邻近块；
确定单元920，用于对M个邻近块中的N个邻近块依次扫描，根据扫 描结果确定目标邻近块，N小于M；
确定单元920还用于，根据目标邻近块的运动矢量、当前图像块以及当 前图像块的参考图像，确定当前图像块的相关块；
编/解码单元930，用于根据相关块的运动矢量对当前图像块进行编/解 码。
在本申请实施例中，在获取当前图像块的目标邻近块的过程中，仅对已 经获取的M个邻近块中的N(N小于M)个邻近块依次扫描，相对于现有 技术，可以减少在获取当前图像块的目标邻近块的过程中对候选邻近块的扫 描次数，从而降低复杂度。
可选地，作为一个实施例，M等于4，N小于4。
可选地，作为一个实施例，N等于1或2。
可选地，作为一个实施例，确定单元920用于，对M个邻近块中的前N 个邻近块依次扫描。
可选地，作为一个实施例，获取单元910用于，按预设顺序依次获取当 前图像块的M个邻近块；前N个邻近块，指的是按预设顺序首先确定的N 个邻近块。
可选地，作为一个实施例，确定单元920用于，对N个邻近块依次进行 扫描，当扫描到第一个符合预设条件的邻近块时，停止扫描，且根据扫描到 的第一个符合预设条件的邻近块确定目标邻近块。
可选地，作为一个实施例，确定单元920用于，将第一个符合预设条件 的邻近块作为目标邻近块。
可选地，作为一个实施例，预设条件包括：邻近块的参考图像与当前图 像块的参考图像相同。
可选地，作为一个实施例，编/解码单元930用于，根据相关块的运动矢 量和参考图像确定当前图像块的参考块。
可选地，作为一个实施例，编/解码单元930用于，构建当前图像块的候 选块列表，候选块列表中的候选块包括M个邻近块和相关块；根据候选块 列表中的候选块的参考块对当前图像块进行编解码。
可选地，作为一个实施例，编/解码单元930还用于，当在N个邻近块 中未扫描到符合预设条件的邻近块时，对M个邻近块中的特定邻近块的运 动矢量进行缩放处理，根据缩放处理后的运动矢量对当前图像块进行编/解码。
可选地，作为一个实施例，编/解码单元930用于，根据缩放处理后的运 动矢量和当前图像块的参考图像确定当前图像块的参考块。
可选地，作为一个实施例，特定邻近块为N个邻近块中，按扫描顺序得 到的第一个邻近块或者最后一个邻近块。
可选地，作为一个实施例，编/解码单元930用于，对特定邻近块的运动 矢量进行缩放处理，使得经过缩放处理后的运动矢量指向的参考帧与当前图 像块的参考图像相同；将经过缩放处理后的运动矢量在当前图像块的参考图 像中指向的图像块作为当前图像块的参考块。
可选地，作为一个实施例，确定单元920用于，当N个邻近块中未扫描 到符合预设条件的邻近块时，将默认块作为当前图像块的参考块。
可选地，作为一个实施例，默认块为运动矢量(0，0)指向的图像块。
可选地，作为一个实施例，确定单元920用于：
将当前图像块划分为多个子图像块；
根据目标邻近块的运动矢量，在当前图像块的参考图像中确定子图像块 的相关块，当前图像块的相关块包括子图像块的相关块。
可选地，作为一个实施例，子图像块的大小和/或子图像块的相关块的大 小固定为大于或等于64个像素。
可选地，作为一个实施例，当前图像块为一个编码单元CU。
可选地，作为一个实施例，确定单元920用于，根据目标邻近块的运动 矢量，在当前图像块的参考图像中确定当前图像块的相关块。
可选地，作为一个实施例，邻近块为在当前图像上与当前图像块的位置 相邻或具有一定位置间距的图像块。
可选地，作为一个实施例，编/解码单元930用于，当相关块的参考图像 为特定参考图像，或者当前图像块的参考图像为特定参考图像时，根据处理 后的相关块的运动矢量和当前图像块的参考图像确定当前图像块的参考块；
其中，处理后的相关块的运动矢量和处理前的相关块的运动矢量相同。
可选地，作为一个实施例，处理后的相关块的运动矢量，包括： 根据数值为1的缩放比例对相关块的运动矢量进行缩放后得到的运动矢量， 或者，跳过缩放步骤的相关块的运动矢量。
可选地，作为一个实施例，编/解码单元930用于，当相关块的参考图像 为特定参考图像，或者当前块的参考图像为特定参考图像时，放弃根据相关 块的运动矢量确定当前图像块的参考块。
可选地，作为一个实施例，确定单元920用于：当特定邻近块的运动矢 量指向特定参考图像，或者当前图像块的参考图像为特定参考图像时，根据 处理后的相关块的运动矢量和当前图像块的参考图像确定当前图像块的参 考块；其中，处理后的相关块的运动矢量和处理前的相关块的运动矢量相同。
可选地，作为一个实施例，处理后的相关块的运动矢量，包括：根据数 值为1的缩放比例对相关块的运动矢量进行缩放后得到的运动矢量，或者， 跳过缩放步骤的相关块的运动矢量。
应理解，本实施例中的获取单元910、确定单元920和编/解码单元930 均可以由处理器实现。
如图10所示，本申请实施例还提供一种视频图像处理装置1000。该装 置1000用于执行如图8所示的方法实施例。该装置1000包括如下单元。
获取单元1010，用于获取当前图像块的M个邻近块；
确定单元1020，用于对M个邻近块中的至少部分邻近块依次扫描，根 据扫描结果确定目标邻近块；
划分单元1030，用于将当前图像块划分成多个子图像块，其中，子图像 块的大小固定为大于或等于64个像素；
确定单元1020还用于，根据目标邻近块的运动矢量及子图像块，在当 前图像块的参考图像中确定当前图像块的相关块；
编/解码单元1040，用于根据相关块的运动矢量对当前图像块进行编/解 码。
在本申请实施例中，将当前图像块的子图像块的大小固定为大于或等于 64个像素，无需存储上一个已编码图像块的子图像块的大小的信息，因此， 可以节省存储空间。
可选地，作为一个实施例，子图像块的大小和/或子图像块的时域参考块 的大小均固定为8×8个像素。
目前，在新一代视频编码标准(Versatile Video Coding，VVC)中，是 以8×8的大小对运动矢量进行存储。在本申请实施例中，将当前图像块的子 图像块的大小设置为8×8，一方面可以适应视频标准VVC中规定的运动矢 量的存储粒度，另一方面，无需存储上一个已编码图像块的子图像块的大小 的信息，因此，可以节省存储空间。
应理解，在保证子图像块的大小和/或子图像块的相关块的大小固定为等 于64个像素的前提下，子图像块的大小和/或子图像块的相关块的大小还可 以为别的尺寸，例如子图像块的大小和/或子图像块的相关块的大小为A×B， A≤64，B≤64，A和B均为4的整数。例如，子图像块的大小和/或子图像 块的相关块的大小为4×16个像素，或者为16×4个像素。
可选地，作为一个实施例，对M个邻近块中的至少部分邻近块依次扫 描，根据扫描结果确定目标邻近块，包括：对至少部分邻近块依次进行扫描， 当扫描到第一个符合预设条件的邻近块时，停止扫描，且根据扫描到的第一 个符合预设条件的邻近块确定目标邻近块。
可选地，作为一个实施例，确定单元1020用于，将第一个符合预设条 件的邻近块作为目标邻近块。
可选地，作为一个实施例，预设条件包括：邻近块的参考图像与当前图 像块的参考图像相同。
可选地，作为一个实施例，确定单元1020用于，根据目标邻近块的运 动矢量及子图像块，在当前图像块的参考图像中确定子图像块的相关块，其 中，当前图像块的相关块，包括子图像块的相关块。
应理解，本实施例中的获取单元1010、确定单元1020、划分单元1030 和编/解码单元1040均可以由处理器实现。
如图11所示，本申请实施例还提供一种视频图像处理装置1100。装置 1100可以用于执行上文描述的方法实施例。装置1100包括处理器1110、存 储器1120，存储器1120用于存储指令，处理器1110用于执行存储器1120 存储的指令，并且对存储器1120中存储的指令的执行使得处理器1110用于 执行根据上文方法实施例的方法。
可选地，如图11所示，该装置1100还可以包括通信接口1130，用于与 外部设备进行通信。例如，处理器1110用于控制通信接口1130接收和/或发 送信号。
本申请提供的装置500、600、900、1000和1100可以应用于编码器， 也可以应用于解码器。
上文中对运动矢量第二候选列表进行了解释，下面将对运动矢量第一候 选列表进行解释。
在运动补偿预测阶段，以往主流的视频编码标准只应用了平移运动模型。 而在现实世界中，有太多种运动形式，如放大/缩小，旋转，远景运动和其他 不规则运动。为了提高帧间预测的效率，可以在编解码技术中引入仿射变换 (affine)运动补偿模型。仿射变换运动补偿会通过一组控制点(control point) 的MV来描述图像块的仿射运动场。一个示例中，仿射变换运动补偿模型采 用的是四参Affine模型，则该组控制点包括两个控制点(例如图像块的左上 角点和右上角点)。一个示例中，仿射变换运动补偿模型采用的是六参Affine 模型，则该组控制点包括三个控制点(例如图像块的左上角点、右上角点和 左下角点)。
一种实现方式中，在构建运动矢量第一候选列表时，加入的候选者可以 是一组控制点的MV，或者称为控制点预测运动矢量(CPMVP，Control point motion vectorprediction)。可选的，运动矢量第一候选列表可用于Merge模 式中，具体的，可以称为Affine Merge模式；相对应的，该运动矢量第一候 选列表可以称为affine mergecandidate list。在Affine Merge模式中，直接使 用运动矢量第一候选列表中的预测作为当前图像块的CPMV(Control point motion vector)，也即不需要进行affine运动估计过程。
一种实现方式中，可将根据ATMVP技术确定的候选者加入到运动矢量 第一候选列表中。
其中，一个示例中，将当前图像块的相关块的控制点运动矢量组作为候 选者加入到运动矢量第一候选列表中。在采用运动矢量第一列表中该候选者 进行预测时，根据当前图像块的相关块的控制点运动矢量组对该当前图像块 进行预测。
其中，一个示例中，如上文所描述的，将当前图像块的相关块的代表运 动矢量作为候选者加入到运动矢量第一候选列表中。进一步，可选的，还标 记该候选者为根据ATMVP技术确定的。当采用运动矢量第一候选列表中该 候选者进行预测时，根据该标记和候选者确定当前图像块的相关块，将当前 图像块和该相关块采用相同的方式划分成多个子图像块，当前图像块中的各 子图像块与所述相关块中的各子图像块一一对应；根据该相关块中各子图像 块的运动矢量分别对当前图像块中对应的子图像块的运动矢量进行预测。
其中，可选的，当相关块中出现运动矢量不可获得的子图像块时，采用 该相关块的代表运动矢量替代该不可获得的运动矢量，对当前图像块中对应 的子图像块进行预测。可选的，当相关块的代表运动矢量均不可获得时，放 弃将根据ATMVP技术确定的候选者加入到该运动矢量第二候选列表中。一 种示例中，当相关块中的子图像块不可获得，或者相关块中的子图像块采用 帧内编码模式时，确定该相关块中出现不可获得运动矢量的子图像块。
其中，可选的，运动矢量第一候选列表中每个候选者包括一组控制点的 运动矢量；在将当前图像块的相关块的代表运动矢量加入运动矢量第一候选 列表中时，为保证数据格式的一致性，可将该相关块的代表运动矢量插入为 候选者中的每一个控制点的运动矢量(也即该候选者中的每个控制点的运动 矢量都赋值为该相关块的代表运动矢量)。
其中，可选的，当前图像块的相关块的代表运动矢量可以指的是该相关 块的中心位置的运动矢量，或者其他代表该相关块的运动矢量，在此不做限 制。
根据上文对运动矢量第二候选列表的描述可知，在根据ATMVP技术确 定候选者时，需要确定当前图像块的相关块。本方案中，在根据ATMVP技 术确定加入运动矢量第一候选列表的候选者时，确定当前图像块的相关块的 方法包括两种：
方法一、对当前图像块的预设的M个邻近块中的N个邻近块依次扫描， 根据扫描结果确定目标邻近块，N小于M，M小于等于4；根据所述目标邻 近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所 述当前图像块的相关块。
方法二、确定根据当前图像块的运动矢量第二候选列表中的M个候选 者确定当前图像块的M个邻近块；对该M个邻近块中的N个邻近块依次扫 描，根据扫描结果确定目标邻近块，N小于M，M小于等于4；根据该目标 邻近块的运动矢量、当前图像块以及当前图像块的参考图像，确定所述当前 图像块的相关块。其中，运动矢量第二候选列表中的M个候选者可以指的 是当前图像块的M个邻近块。
其中，对方法一和方法二中关于“根据扫描结果确定目标邻近块”，以 及“根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块 的参考图像，确定所述当前图像块的相关块”这两个步骤的说明，可参考上 文中的解释，在此不在赘述。
一种实现方式中，确定加入运动矢量第一候选列表中的候选者的方法包 括：从当前图像块的邻近块中，按特定扫描顺序确定采用仿射变换模式进行 预测的邻近块的控制点运动矢量组；将每一个确定的邻近块的控制点运动矢 量组作为一个候选者加入运动矢量第一候选列表。
其中，一个示例中，采用仿射变化模式进行预测的邻近块，指的是该邻 近块的运动矢量是根据affine merge candidate list中的候选者确定的。也即候 选者来自当前图像块的使用affine模式的空域相邻块的affine运动模型；即， 将使用affine模式的空域相邻块的CPMV作为当前块的CPMVP。
其中，一个示例中，控制点运动矢量组可以包括该邻近块的2个控制点 的运动矢量(例如该邻近块的左上角点和右上角点)，或者包括该邻近块的3 个控制点的运动矢量(例如图像块的左上角点、右上角点和左下角点)，这 取决于采用的是四参Affine模型还是六参Affine模型。
其中，一个示例中，按特定扫描顺序确定采用仿射变换模式进行预测的 邻近块的控制点运动矢量组，包括：
在所述当前图像块的左侧邻近块中按第一扫描顺序确定第一邻近块的 控制点运动矢量组；
在所述当前图像块的上侧邻近块中按第二扫描顺序确定第二邻近块的 控制点运动矢量组；
将所述第一邻近块的控制点运动矢量组和所述第二邻近块的控制点运 动矢量组加入所述运动矢量第一候选列表。
例如，如图12所示，图12是通过当前图像块的邻近块获取运动矢量 第一候选列表的候选者的示意图。在当前图像块的左侧，按图像块A-＞图像 块D-＞图像块E的扫描顺序依次扫描，将第一个满足预置条件的图像块的 控制点运动矢量组作为一个候选者加入运动矢量第一候选列表。在当前图像 块的上侧，按图像块B-＞图像块C的扫描顺序依次扫描，将第一个满足预 置条件的图像块的控制点运动矢量组作为一个候选者加入运动矢量第一候 选列表。可选的，在该扫描顺序中，若未找到符合该阈值条件的图像块，则 放弃在该扫描顺序中确定出候选者。
一种实现方式中，确定加入运动矢量第一候选列表中的候选者的方法包 括：
根据所述当前图像块的部分控制点的邻近块构造所述部分控制点的运 动矢量；
将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候 选列表。
也即在该种实现方式中，是通过构造候选者来加入到运动矢量第一候选 列表中。一个示例中，在通过构造候选者来加入到运动矢量第一候选列表之 前，首先判断运动矢量第一候选列表中的候选者的数量是否已达到预置数值 (例如5)，若未达到预置数值，则通过构造候选者来加入到运动矢量第一候 选列表中。
一个示例中，构造的候选者是将当前图像块部分控制点的邻近块的运动 信息组合后作为CPMVP加入到运动矢量第一候选列表中。
如图13所示，图13是通过当前图像块的邻近块构造运动矢量第一候选 列表的候选者的示意图。当前图像块一共有四个控制点，分别为CP1，CP2， CP3，CP4。其中，图像块A0和A1是CP1的空域相邻块；图像块A2，B2 和B3是CP2的空域相邻块；图像块B0和B1是CP2的空域相邻块，T是 CP4的时域相邻块。控制点CP1，CP2，CP3和CP4的坐标分别为：(0，0)，(W， 0)，(H，0)和(W，H)，W和H分别表示当前CU的宽和高。每个控制点的相邻 块运动信息的获取优先级为：
对于CP1，获取优先级为：B2-＞B3-＞A2。B2可用时，使用B2的MV 作为控制点CP1的MV；B2不可用时，使用B3的MV作为控制点CP1的 MV；若B2和B3都不可用，则使用A1的MV作为控制点CP1的MV；若 B2，B3和A1都不可用，则控制点CP1的运动信息不可得。
同理，对于CP2，获取优先级为：B1-＞B0；对于CP3，获取优先级为： A1-＞A0；对于CP4，直接使用T的MV作为控制点CP4的MV。
只有当当前CU的控制点(六参数模型：CP0，CP1和CP2；四参数模型： CP0和CP1)的MV都可用时，才会插入构造生成的MV，否则直接跳至下 一步。得到所有控制点的MV(如果有的话)之后，将控制点的MV进行不 同的组合即可得到多个affine candidates，组合方式如下：
若使用四参数affine模型，则组合四个控制点的MV中的两个即可得到 一个或多个候选者，选择其中的两种组合方式：{CP1，CP2}，{CP1，CP3}。 其中，组合方式{CP1，CP3}需要根据四参数模型将选中的两个控制点的MV 转化成当前CU的左上角和右上角控制点的MV(CP1和CP2)。
若使用六参数affine模型，则组合四个控制点的MV中的三个即可得到 一个或多个候选者，选择4种组合方式：{CP1，CP2，CP4}，{CP1，CP2，CP3}， {CP2，CP3，CP4}，{CP1，CP3，CP4}。其中，组合方式{CP1，CP2，CP3}，{CP2， CP3，CP4}，{CP1，CP3，CP4}需要根据六参数模型将选中的三个控制点的MV 转化成当前CU的左上角，右上角和左下角控制点的MV(CP1，CP2和CP3)
一个示例中，若不同组合的MV(2个或3个)所使用的参考帧不相同， 则认为该组合构造生成的候选者不可用。
一种实现方式中，确定加入运动矢量第一候选列表中的候选者的方法包 括：使用默认向量进行填充。可选的，该默认向量可以是零向量或其他向量。 可选的，可以是在采用其他方法确定加入运动矢量第一候选列表的候选者之 后，判断当前已加入该第一候选列表的候选者的数量是否已达到预置数值； 若未达到，则使用默认向量填充到第一候选列表中，直至第一候选列表中的 候选者的数量达到预置数值。
当采用运动矢量第一候选列表中的候选者来对当前图像块进行预测时， 若采用的候选者为除利用ATMVP技术所确定的候选者以外的至少一个候选 者时，通过仿射运动模型根据该候选者导出当前图像块中的子图像块的运动 矢量。当采用的候选者为利用ATMVP技术所确定的候选者时，则根据上文 所描述的，根据相关块中的每个子图像块的运动矢量确定当前图像块中各子 图像块的参考块，将各子图像块的参考块拼接成当前图像块的参考块，并根 据该参考块计算当前图像块的残差。
下面结合图14和图15对本申请实施例提供的一种视频图像处理方法进 行举例描述。如图14所示，该方法包括如下步骤。
S1410，对当前图像块的预设的M个邻近块中的N个邻近块依次扫描， 根据扫描结果确定目标邻近块，N小于M。可选的，M小于等于4。
S1420，根据所述目标邻近块的运动矢量、所述当前图像块以及所述当 前图像块的参考图像，确定所述当前图像块的相关块。
S1430，将所述当前图像块和所述相关块采用相同的方式划分成多个子 图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块一一 对应。
S1440，根据所述相关块中各子图像块的运动矢量分别对所述当前图像 块中对应的子图像块进行预测。
对图14所示的视频图像处理方法的解释可参考上文，在此不再赘述。
如图15所示，该方法包括如下步骤。
S1510，根据当前图像块的运动矢量第二候选列表中的M个候选者确定 所述当前图像块的M个邻近块。
S1520，对所述M个邻近块中的N个邻近块依次扫描，根据扫描结果确 定目标邻近块，N小于M。可选的，M小于等于4。
S1530，根据所述目标邻近块的运动矢量、所述当前图像块以及所述当 前图像块的参考图像，确定所述当前图像块的相关块。
S1540，根据所述当前图像块的相关块确定所述当前图像块的运动矢量 第一候选列表中的特定候选者。其中，该特定候选者可以是上文所提到的根 据ATMVP技术所确定的候选者。
S1550，当确定采用所述特定候选者时，将所述当前图像块和所述相关 块采用相同的方式划分成多个子图像块，所述当前图像块中的各子图像块与 所述相关块中的各子图像块一一对应。
S1560，根据所述相关块中各子图像块的运动矢量分别对所述当前图像 块中对应的子图像块进行预测。
对图15所示的视频图像处理方法的解释可参考上文，在此不再赘述。
图16为本申请实施例提供的视频图像处理装置1600的示意性框图。 该装置1600用于执行如图14所示的方法实施例。该装置1600包括如下单 元。
构建模块1610，对当前图像块的预设的M个邻近块中的N个邻近块依 次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标邻近块的 运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前 图像块的相关块；将所述当前图像块和所述相关块采用相同的方式划分成多 个子图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块 一一对应；
预测模块1620，根据所述相关块中各子图像块的运动矢量分别对所述当 前图像块中对应的子图像块进行预测。
一个示例中，N等于1或2。
一个示例中，预测模块还用于：在所述根据所述相关块中各子图像块的 运动矢量分别对所述当前图像块中对应的子图像块进行预测之前将所述相 关块的代表运动矢量作为候选者加入运动矢量第一候选列表；
当确定采用所述候选者时，所述预测模块根据所述相关块中各子图像块 的运动矢量分别对所述当前图像块中对应的子图像块进行预测。
一个示例中，所述根据所述相关块中各子图像块的运动矢量分别对所述 当前图像块中对应的子图像块进行预测，包括：
将所述相关块中各子图像块的运动矢量，分别作为所述当前图像块中对 应的子图像块的运动矢量。
一个示例中，将所述相关块的代表运动矢量作为第一个候选者加入运动 矢量第一候选列表。
一个示例中，所述相关块的代表运动矢量包括所述相关块的中心位置的 运动矢量。
一个示例中，预测模块还用于：当所述相关块中出现不可获得运动矢量 的子图像块时，将所述相关块的代表运动矢量作为所述不可获得运动矢量的 子图像块的运动矢量，对所述当前图像块中对应的子图像块进行预测。
一个示例中，预测模块还用于：当所述相关块中出现不可获得运动矢量 的子图像块，且所述相关块的代表运动矢量不可获得时，放弃根据所述相关 块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行 预测。
一个示例中，预测模块还用于：当所述相关块中的子图像块不可获得， 或者所述相关块中的子图像块采用帧内编码模式时，确定所述相关块中出现 不可获得运动矢量的子图像块。
一个示例中，构建模块还用于：确定其他候选者，将所述其他候选者加 入所述运动矢量第一候选列表，其中，所述其他候选者中的至少一个候选者 包括子图像块的运动矢量。
一个示例中，构建模块还用于：当确定采用所述其他候选者中的其中一 个候选者时，根据所述采用的候选者确定所述当前图像块中的子图像块的运 动矢量。
一个示例中，所述至少一个候选者包括一组控制点的运动矢量。
一个示例中，预测模块还用于：
当确定采用所述至少一个候选者中的候选者时，根据仿射变换模型对所 述采用的候选者进行仿射变换；
根据所述仿射变换后的候选者对所述当前图像块中的子图像块进行预 测。
一个示例中，当所述仿射变换模型包括四参仿射变换模型时，所述至少 一个候选者中，每个候选者包括2个控制点的运动矢量；
当所述仿射变换模型包括六参仿射变换模型时，所述至少一个候选者中， 每个候选者包括3个控制点的运动矢量。
一个示例中，构建模块还用于：从所述当前图像块的邻近块中，按特定 扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组；
将每一个确定的邻近块的控制点运动矢量组作为一个候选者加入所述 运动矢量第一候选列表。
一个示例中，所述从所述当前图像块的邻近块中，按特定扫描顺序确定 采用仿射变换模式进行预测的邻近块的控制点运动矢量组，包括：
在所述当前图像块的左侧邻近块中按第一扫描顺序确定第一邻近块的 控制点运动矢量组；
在所述当前图像块的上侧邻近块中按第二扫描顺序确定第二邻近块的 控制点运动矢量组；
将所述第一邻近块的控制点运动矢量组和所述第二邻近块的控制点运 动矢量组加入所述运动矢量第一候选列表。
一个示例中，构建模块还用于：根据所述当前图像块的部分控制点的邻 近块构造所述部分控制点的运动矢量；
将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候 选列表。
一个示例中，所述根据所述当前图像块的部分控制点的邻近块构造所述 部分控制点的运动矢量，包括：
对所述部分控制点中的每个控制点，按第三扫描顺序对所述控制点的特 定邻近块依次扫描，将满足预设条件的特定邻近块的运动矢量作为所述控制 点的运动矢量。
一个示例中，构建模块还用于：
当所述部分控制点的运动矢量分别指向不同的参考帧时，放弃将所述当 前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
一个示例中，当所述运动矢量第一候选列表中的候选者的数量大于预设 数值时，放弃将所述当前图像块的部分控制点的运动矢量加入所述运动矢量 第一候选列表。
一个示例中，构建模块还用于：
构建运动矢量第二候选列表，其中，加入所述运动矢量第二候选列表的 候选者为一个图像块的运动矢量；
当确认采用所述运动矢量第二候选列表中的候选者时，根据所述候选者 的运动矢量确定所述当前图像块的运动矢量。
一个示例中，所述根据所述候选者的运动矢量确定所述当前图像块的运 动矢量，包括：
将所述确认采用的候选者作为所述当前图像块的运动矢量，或者对所述 确认采用的候选者进行缩放后作为所述当前图像块的运动矢量。
一个示例中，所述构建运动矢量第二候选列表，包括：
根据所述当前图像块在当前图像上的若干个邻近块的运动矢量确定加 入所述运动矢量第二候选列表的候选者。
一个示例中，所述当前图像块在当前图像上的若干个邻近块包括所述预 设的M个邻近块。
一个示例中，构建模块还用于：
按预设顺序依次将所述预设的M个邻近块的运动矢量分别作为M个候 选者，加入所述运动矢量第二候选列表；
所述N个邻近块，指的是按所述预设顺序首先确定的N个邻近块。
一个示例中，构建模块还用于：
当所述M个邻近块中的一个或多个邻近块的运动矢量不可获得时，放 弃根据所述一个或多个邻近块的运动矢量确定加入所述运动矢量第二候选 列表的候选者。
一个示例中，所述对所述M个邻近块中的N个邻近块依次扫描，根据 扫描结果确定目标邻近块，包括：
对所述N个邻近块依次进行扫描，当扫描到第一个符合预设条件的邻近 块时，停止扫描，且根据所述扫描到的所述第一个符合预设条件的邻近块确 定目标邻近块。
一个示例中，所述根据所述扫描到的所述第一个符合预设条件的邻近块 确定目标邻近块，包括：
将所述第一个符合预设条件的邻近块作为所述目标邻近块。
一个示例中，所述预设条件包括：
邻近块的参考图像与所述当前图像块的参考图像相同。
一个示例中，构建模块还用于当在所述N个邻近块中未扫描到符合所述 预设条件的邻近块时，对所述M个邻近块中的特定邻近块的运动矢量进行 缩放处理，预测模块还用于根据所述缩放处理后的运动矢量对所述当前图像 块进行预测。
一个示例中，所述根据所述缩放处理后的运动矢量对所述当前图像块进 行预测，包括：
根据所述缩放处理后的运动矢量和所述当前图像块的参考图像确定所 述当前图像块的参考块。
一个示例中，所述特定邻近块为所述N个邻近块中，按扫描顺序得到的 第一个邻近块或者最后一个邻近块。
一个示例中，所述对所述M个邻近块中的特定邻近块的运动矢量进行 缩放处理，根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包 括：
对所述特定邻近块的运动矢量进行缩放处理，使得经过所述缩放处理后 的运动矢量指向的参考帧与所述当前图像块的参考图像相同；
将经过所述缩放处理后的运动矢量在所述当前图像块的参考图像中指 向的图像块作为所述当前图像块的参考块。
一个示例中，当在所述N个邻近块中未扫描到符合所述预设条件的邻近 块时，将默认块作为所述当前图像块的参考块。
一个示例中，所述默认块为运动矢量(0，0)指向的图像块。
一个示例中，所述子图像块的大小和/或所述子图像块的相关块的大小固 定为大于或等于64个像素。
一个示例中，所述子图像块的大小和/或所述子图像块的相关块的大小固 定为8×8个像素，或16×4个像素或4×16个像素。
一个示例中，所述当前图像块为一个编码单元CU。
一个示例中，所述根据所述目标邻近块的运动矢量、所述当前图像块以 及所述当前图像块的参考图像，确定所述当前图像块的相关块，包括：
根据所述目标邻近块的运动矢量，在所述当前图像块的参考图像中确定 所述当前图像块的相关块。
一个示例中，所述邻近块为在所述当前图像上与所述当前图像块的位置 相邻或具有一定位置间距的图像块。
一个示例中，所述根据所述相关块的运动矢量对所述当前图像块进行预 测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前图像块的参考 图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图 像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢 量相同。
一个示例中，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运 动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
一个示例中，所述根据所述相关块的运动矢量对所述当前图像块进行预 测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前块的参考图像 为特定参考图像时，放弃根据所述相关块的运动矢量确定所述当前图像块的 参考块。
一个示例中，构建模块还用于：
当所述特定邻近块的运动矢量指向特定参考图像，或者所述当前图像块 的参考图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述 当前图像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢 量相同。
一个示例中，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运 动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
一个示例中，M小于等于4。
图17为本申请实施例提供的视频图像处理装置1700的示意性框图。 该装置1700用于执行如图15所示的方法实施例。该装置1700包括如下单 元。
构建模块1710，用于根据当前图像块的运动矢量第二候选列表中的M 个候选者确定所述当前图像块的M个邻近块；对所述M个邻近块中的N个 邻近块依次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标 邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定 所述当前图像块的相关块；根据所述当前图像块的相关块确定所述当前图像 块的运动矢量第一候选列表中的特定候选者；当确定采用所述特定候选者时， 将所述当前图像块和所述相关块采用相同的方式划分成多个子图像块，所述 当前图像块中的各子图像块与所述相关块中的各子图像块一一对应；
预测模块1720，用于根据所述相关块中各子图像块的运动矢量分别对所 述当前图像块中对应的子图像块进行预测。
一个示例中，所述运动矢量第一候选列表中的至少一个候选者包括子图 像块的运动矢量，所述运动矢量第二候选列表中的每个候选者包括图像块的 运动矢量。
一个示例中，N等于1或2。
一个示例中，所述M个候选者包括所述当前图像块在当前图像上的M 个邻近块的运动矢量。
一个示例中，所述对所述M个邻近块中的N个邻近块依次扫描，根据 扫描结果确定目标邻近块，包括：
对所述N个邻近块依次进行扫描，当扫描到第一个符合预设条件的邻近 块时，停止扫描，且根据所述扫描到的所述第一个符合预设条件的邻近块确 定目标邻近块。
一个示例中，所述根据所述扫描到的所述第一个符合预设条件的邻近块 确定目标邻近块，包括：
将所述第一个符合预设条件的邻近块作为所述目标邻近块。
一个示例中，所述预设条件包括：
邻近块的参考图像与所述当前图像块的参考图像相同。
一个示例中，构建模块还用于当在所述N个邻近块中未扫描到符合所述 预设条件的邻近块时，对所述M个邻近块中的特定邻近块的运动矢量进行 缩放处理，预测模块还用于根据所述缩放处理后的运动矢量对所述当前图像 块进行预测。
一个示例中，所述根据所述缩放处理后的运动矢量对所述当前图像块进 行预测，包括：
根据所述缩放处理后的运动矢量和所述当前图像块的参考图像确定所 述当前图像块的参考块。
一个示例中，所述特定邻近块为所述N个邻近块中，按扫描顺序得到的 第一个邻近块或者最后一个邻近块。
一个示例中，所述对所述M个邻近块中的特定邻近块的运动矢量进行 缩放处理，根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包 括：
对所述特定邻近块的运动矢量进行缩放处理，使得经过所述缩放处理后 的运动矢量指向的参考帧与所述当前图像块的参考图像相同；
将经过所述缩放处理后的运动矢量在所述当前图像块的参考图像中指 向的图像块作为所述当前图像块的参考块。
一个示例中，当在所述N个邻近块中未扫描到符合所述预设条件的邻近 块时，将默认块作为所述当前图像块的参考块。
一个示例中，所述默认块为运动矢量(0，0)指向的图像块。
一个示例中，所述子图像块的大小和/或所述子图像块的相关块的大小固 定为大于或等于64个像素。
一个示例中，所述子图像块的大小和/或所述子图像块的相关块的大小固 定为8×8个像素，或16×4个像素或4×16个像素。
一个示例中，所述当前图像块为一个编码单元CU。
一个示例中，所述根据所述目标邻近块的运动矢量、所述当前图像块以 及所述当前图像块的参考图像，确定所述当前图像块的相关块，包括：
根据所述目标邻近块的运动矢量，在所述当前图像块的参考图像中确定 所述当前图像块的相关块。
一个示例中，所述邻近块为在所述当前图像上与所述当前图像块的位置 相邻或具有一定位置间距的图像块。
一个示例中，所述根据所述相关块的运动矢量对所述当前图像块进行预 测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前图像块的参考 图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图 像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢 量相同。
一个示例中，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运 动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
一个示例中，所述根据所述相关块的运动矢量对所述当前图像块进行预 测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前块的参考图像 为特定参考图像时，放弃根据所述相关块的运动矢量确定所述当前图像块的 参考块。
一个示例中，构建模块还用于：当所述特定邻近块的运动矢量指向特定 参考图像，或者所述当前图像块的参考图像为特定参考图像时，根据处理后 的所述相关块的运动矢量和所述当前图像块的参考图像确定所述当前图像 块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢 量相同。
一个示例中，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运 动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
一个示例中，所述根据所述相关块中各子图像块的运动矢量分别对所述 当前图像块中对应的子图像块进行预测，包括：
将所述相关块中各子图像块的运动矢量，分别作为所述当前图像块中对 应的子图像块的运动矢量。
一个示例中，所述根据所述当前图像块的相关块确定所述当前图像块的 运动矢量第一候选列表中的特定候选者，包括：
将所述当前图像块的相关块的代表运动矢量作为所述特定候选者加入 所述运动矢量第一候选列表。
一个示例中，将所述相关块的代表运动矢量作为第一个候选者加入运动 矢量第一候选列表。
一个示例中，所述相关块的代表运动矢量包括所述相关块的中心位置的 运动矢量。
一个示例中，预测模块还用于：当所述相关块中出现不可获得运动矢量 的子图像块时，将所述相关块的代表运动矢量作为所述不可获得运动矢量的 子图像块的运动矢量，对所述当前图像块中对应的子图像块进行预测。
一个示例中，预测模块还用于：当所述相关块中出现不可获得运动矢量 的子图像块，且所述相关块的代表运动矢量不可获得时，放弃根据所述相关 块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行 预测。
一个示例中，预测模块还用于：当所述相关块中的子图像块不可获得， 或者所述相关块中的子图像块采用帧内编码模式时，确定所述相关块中出现 不可获得运动矢量的子图像块。
一个示例中，预测模块还用于：当确定采用所述运动矢量第二候选列表 中除所述特定候选者以外的其中一个候选者时，根据仿射变换模型对所述采 用的候选者进行仿射变换；
根据所述仿射变换后的候选者对所述当前图像块中的子图像块进行预 测。
一个示例中，所述运动矢量第二候选列表中除所述特定候选者以外至少 一个候选者中，每个候选者包括一组控制点的运动矢量。
一个示例中，当所述仿射变换模型包括四参仿射变换模型时，所述至少 一个候选者中，每个候选者包括2个控制点的运动矢量；
当所述仿射变换模型包括六参仿射变换模型时，所述至少一个候选者中， 每个候选者包括3个控制点的运动矢量。
一个示例中，预测模块还用于：从所述当前图像块的邻近块中，按特定 扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组；
将每一个确定的邻近块的控制点运动矢量组作为一个候选者加入所述 运动矢量第一候选列表。
一个示例中，所述从所述当前图像块的邻近块中，按特定扫描顺序确定 采用仿射变换模式进行预测的邻近块的控制点运动矢量组，包括：
在所述当前图像块的左侧邻近块中按第一扫描顺序确定第一邻近块的 控制点运动矢量组；
在所述当前图像块的上侧邻近块中按第二扫描顺序确定第二邻近块的 控制点运动矢量组；
将所述第一邻近块的控制点运动矢量组和所述第二邻近块的控制点运 动矢量组加入所述运动矢量第一候选列表。
一个示例中，构建模块还用于：根据所述当前图像块的部分控制点的邻 近块构造所述部分控制点的运动矢量；
将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候 选列表。
一个示例中，所述根据所述当前图像块的部分控制点的邻近块构造所述 部分控制点的运动矢量，包括：
对所述部分控制点中的每个控制点，按第三扫描顺序对所述控制点的特 定邻近块依次扫描，将满足预设条件的特定邻近块的运动矢量作为所述控制 点的运动矢量。
一个示例中，构建模块还用于：当所述部分控制点的运动矢量分别指向 不同的参考帧时，放弃将所述当前图像块的部分控制点的运动矢量加入所述 运动矢量第一候选列表。
一个示例中，构建模块还用于：当所述运动矢量第一候选列表中的候选 者的数量大于预设数值时，放弃将所述当前图像块的部分控制点的运动矢量 加入所述运动矢量第一候选列表。
一个示例中，构建模块还用于：构建运动矢量第二候选列表，其中，加 入所述运动矢量第二候选列表的候选者为一个图像块的运动矢量；
当确认采用所述运动矢量第二候选列表中的候选者时，根据所述候选者 的运动矢量确定所述当前图像块的运动矢量。
一个示例中，所述根据所述候选者的运动矢量确定所述当前图像块的运 动矢量，包括：
将所述确认采用的候选者作为所述当前图像块的运动矢量，或者对所述 确认采用的候选者进行缩放后作为所述当前图像块的运动矢量。
一个示例中，所述构建运动矢量第二候选列表，包括：
根据所述当前图像块在当前图像上的M个邻近块的运动矢量确定加入 所述运动矢量第二候选列表的所述M个候选者。
一个示例中，构建模块还用于：按预设顺序依次将所述预设的M个邻 近块的运动矢量分别作为M个候选者，加入所述运动矢量第二候选列表；
所述N个邻近块，指的是按所述预设顺序首先确定的N个邻近块。
一个示例中，构建模块还用于：当所述M个邻近块中的一个或多个邻 近块的运动矢量不可获得时，放弃根据所述一个或多个邻近块的运动矢量确 定加入所述运动矢量第二候选列表的候选者。
一个示例中，M小于等于4。
本申请实施例还提供一种计算机存储介质，其上存储有计算机程序，计 算机程序被计算机执行时使得计算机执行上文方法实施例提供的方法。
本申请实施例还提供一种包含指令的计算机程序产品，该指令被 计算机执行时使得计算机执行上文方法实施例提供的方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其他任 意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的 形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加 载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述 的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、 或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中， 或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如， 所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线 (例如同轴电缆、光纤、数字用户线(digital subscriber line，DSL))或无线 (例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数 据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可 用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储 设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如数字视频光盘(digital video disc，DVD))、或者半导体介质(例如固 态硬盘(solidstate disk，SSD))等。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各 示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结 合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特 定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方 法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和 方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示 意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可 以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个 系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间 的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合 或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作 为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方， 或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或 者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中， 也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单 元中。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限 于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易 想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护 范围应以所述权利要求的保护范围为准。

Claims (90)

1.一种视频图像处理方法，其特征在于，包括：
对当前图像块的预设的M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标邻近块，N小于M；
根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前图像块的相关块；
将所述当前图像块和所述相关块采用相同的方式划分成多个子图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块一一对应；
根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测；
其中，所述根据所述相关块的运动矢量对所述当前图像块进行预测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前图像块的参考图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢量相同。
2.根据权利要求1所述的方法，其特征在于，N等于1或2。
3.根据权利要求1或2所述的方法，其特征在于，所述根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测，之前还包括：
将所述相关块的代表运动矢量作为候选者加入运动矢量第一候选列表；
当确定采用所述候选者时，根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测。
4.根据权利要求3所述的方法，其特征在于，所述根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测，包括：
将所述相关块中各子图像块的运动矢量，分别作为所述当前图像块中对应的子图像块的运动矢量。
5.根据权利要求3所述的方法，其特征在于，将所述相关块的代表运动矢量作为第一个候选者加入运动矢量第一候选列表。
6.根据权利要求3所述的方法，其特征在于，所述相关块的代表运动矢量包括所述相关块的中心位置的运动矢量。
7.根据权利要求3所述的方法，其特征在于，所述方法还包括：
当所述相关块中出现不可获得运动矢量的子图像块时，将所述相关块的代表运动矢量作为所述不可获得运动矢量的子图像块的运动矢量，对所述当前图像块中对应的子图像块进行预测。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
当所述相关块中出现不可获得运动矢量的子图像块，且所述相关块的代表运动矢量不可获得时，放弃根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测。
9.根据权利要求8所述的方法，其特征在于，当所述相关块中的子图像块不可获得，或者所述相关块中的子图像块采用帧内编码模式时，确定所述相关块中出现不可获得运动矢量的子图像块。
10.根据权利要求3所述的方法，其特征在于，所述方法还包括：
确定其他候选者，将所述其他候选者加入所述运动矢量第一候选列表，其中，所述其他候选者中的至少一个候选者包括子图像块的运动矢量。
11.根据权利要求10所述的方法，其特征在于，所述方法还包括：
当确定采用所述其他候选者中的其中一个候选者时，根据所述采用的候选者确定所述当前图像块中的子图像块的运动矢量。
12.根据权利要求10所述的方法，其特征在于，所述至少一个候选者包括一组控制点的运动矢量。
13.根据权利要求10所述的方法，其特征在于，所述方法还包括：
当确定采用所述至少一个候选者中的候选者时，根据仿射变换模型对所述采用的候选者进行仿射变换；
根据所述仿射变换后的候选者对所述当前图像块中的子图像块进行预测。
14.根据权利要求13所述的方法，其特征在于，
当所述仿射变换模型包括四参仿射变换模型时，所述至少一个候选者中，每个候选者包括2个控制点的运动矢量；
当所述仿射变换模型包括六参仿射变换模型时，所述至少一个候选者中，每个候选者包括3个控制点的运动矢量。
15.根据权利要求3所述的方法，其特征在于，所述方法还包括：
从所述当前图像块的邻近块中，按特定扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组；
将每一个确定的邻近块的控制点运动矢量组作为一个候选者加入所述运动矢量第一候选列表。
16.根据权利要求15所述的方法，其特征在于，所述从所述当前图像块的邻近块中，按特定扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组，包括：
在所述当前图像块的左侧邻近块中按第一扫描顺序确定第一邻近块的控制点运动矢量组；
在所述当前图像块的上侧邻近块中按第二扫描顺序确定第二邻近块的控制点运动矢量组；
将所述第一邻近块的控制点运动矢量组和所述第二邻近块的控制点运动矢量组加入所述运动矢量第一候选列表。
17.根据权利要求3所述的方法，其特征在于，所述方法还包括：
根据所述当前图像块的部分控制点的邻近块构造所述部分控制点的运动矢量；
将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
18.根据权利要求17所述的方法，其特征在于，所述根据所述当前图像块的部分控制点的邻近块构造所述部分控制点的运动矢量,包括：
对所述部分控制点中的每个控制点，按第三扫描顺序对所述控制点的特定邻近块依次扫描，将满足预设条件的特定邻近块的运动矢量作为所述控制点的运动矢量。
19.根据权利要求17所述的方法，其特征在于，所述方法还包括：
当所述部分控制点的运动矢量分别指向不同的参考帧时，放弃将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
20.根据权利要求17所述的方法，其特征在于，所述方法还包括：
当所述运动矢量第一候选列表中的候选者的数量大于预设数值时，放弃将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
21.根据权利要求3所述的方法，其特征在于，所述方法还包括：
构建运动矢量第二候选列表，其中，加入所述运动矢量第二候选列表的候选者为一个图像块的运动矢量；
当确认采用所述运动矢量第二候选列表中的候选者时，根据所述候选者的运动矢量确定所述当前图像块的运动矢量。
22.根据权利要求21所述的方法，其特征在于，所述根据所述候选者的运动矢量确定所述当前图像块的运动矢量，包括：
将所述确认采用的候选者作为所述当前图像块的运动矢量，或者对所述确认采用的候选者进行缩放后作为所述当前图像块的运动矢量。
23.根据权利要求21所述的方法，其特征在于，所述构建运动矢量第二候选列表，包括：
根据所述当前图像块在当前图像上的若干个邻近块的运动矢量确定加入所述运动矢量第二候选列表的候选者。
24.根据权利要求23所述的方法，其特征在于，所述当前图像块在当前图像上的若干个邻近块包括所述预设的M个邻近块。
25.根据权利要求24所述的方法，其特征在于，按预设顺序依次将所述预设的M个邻近块的运动矢量分别作为M个候选者，加入所述运动矢量第二候选列表；
所述N个邻近块，指的是按所述预设顺序首先确定的N个邻近块。
26.根据权利要求24所述的方法，其特征在于，所述方法还包括：
当所述M个邻近块中的一个或多个邻近块的运动矢量不可获得时，放弃根据所述一个或多个邻近块的运动矢量确定加入所述运动矢量第二候选列表的候选者。
27.根据权利要求1或26所述的方法，其特征在于，所述对所述M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标邻近块，包括：
对所述N个邻近块依次进行扫描，当扫描到第一个符合预设条件的邻近块时，停止扫描，且根据所述扫描到的所述第一个符合预设条件的邻近块确定目标邻近块。
28.根据权利要求27所述的方法，其特征在于，所述根据所述扫描到的所述第一个符合预设条件的邻近块确定目标邻近块，包括：
将所述第一个符合预设条件的邻近块作为所述目标邻近块。
29.根据权利要求27所述的方法，其特征在于，所述预设条件包括：
邻近块的参考图像与所述当前图像块的参考图像相同。
30.根据权利要求27所述的方法，其特征在于，所述方法还包括：
当在所述N个邻近块中未扫描到符合所述预设条件的邻近块时，对所述M个邻近块中的特定邻近块的运动矢量进行缩放处理，根据所述缩放处理后的运动矢量对所述当前图像块进行预测。
31.根据权利要求30所述的方法，其特征在于，所述根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包括：
根据所述缩放处理后的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块。
32.根据权利要求30所述的方法，其特征在于，所述特定邻近块为所述N个邻近块中，按扫描顺序得到的第一个邻近块或者最后一个邻近块。
33.根据权利要求30所述的方法，其特征在于，所述对所述M个邻近块中的特定邻近块的运动矢量进行缩放处理，根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包括：
对所述特定邻近块的运动矢量进行缩放处理，使得经过所述缩放处理后的运动矢量指向的参考帧与所述当前图像块的参考图像相同；
将经过所述缩放处理后的运动矢量在所述当前图像块的参考图像中指向的图像块作为所述当前图像块的参考块。
34.根据权利要求27所述的方法，其特征在于，所述方法还包括：
当在所述N个邻近块中未扫描到符合所述预设条件的邻近块时，将默认块作为所述当前图像块的参考块。
35.根据权利要求34所述的方法，其特征在于，所述默认块为运动矢量(0，0)指向的图像块。
36.根据权利要求1所述的方法，其特征在于，所述子图像块的大小和/或所述子图像块的相关块的大小固定为大于或等于64个像素。
37.根据权利要求36所述的方法，其特征在于，所述子图像块的大小和/或所述子图像块的相关块的大小固定为8×8个像素，或16×4个像素或4×16个像素。
38.根据权利要求1所述的方法，其特征在于，所述当前图像块为一个编码单元CU。
39.根据权利要求1所述的方法，其特征在于，所述根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前图像块的相关块，包括：
根据所述目标邻近块的运动矢量，在所述当前图像块的参考图像中确定所述当前图像块的相关块。
40.根据权利要求1所述的方法，其特征在于，所述邻近块为在所述当前图像上与所述当前图像块的位置相邻或具有一定位置间距的图像块。
41.根据权利要求1所述的视频图像处理方法，其特征在于，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
42.根据权利要求30所述的方法，其特征在于，所述方法还包括：
当所述特定邻近块的运动矢量指向特定参考图像，或者所述当前图像块的参考图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢量相同。
43.根据权利要求42所述的方法，其特征在于，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
44.根据权利要求1所述的方法，其特征在于，M小于等于4。
45.一种视频图像处理装置，其特征在于，包括：
构建模块，用于对当前图像块的预设的M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标邻近块，N小于M；根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前图像块的相关块；将所述当前图像块和所述相关块采用相同的方式划分成多个子图像块，所述当前图像块中的各子图像块与所述相关块中的各子图像块一一对应；
预测模块，根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测；
其中，所述根据所述相关块的运动矢量对所述当前图像块进行预测，包括：
当所述相关块的参考图像为特定参考图像，或者所述当前图像块的参考图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢量相同。
46.根据权利要求45所述的视频图像处理装置，其特征在于，N等于1或2。
47.根据权利要求45或46所述的视频图像处理装置，其特征在于，所述预测模块还用于：
在所述根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测之前，将所述相关块的代表运动矢量作为候选者加入运动矢量第一候选列表；
当确定采用所述候选者时，所述预测模块根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测。
48.根据权利要求47所述的视频图像处理装置，其特征在于，所述根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测，包括：
将所述相关块中各子图像块的运动矢量，分别作为所述当前图像块中对应的子图像块的运动矢量。
49.根据权利要求47所述的视频图像处理装置，其特征在于，将所述相关块的代表运动矢量作为第一个候选者加入运动矢量第一候选列表。
50.根据权利要求47所述的视频图像处理装置，其特征在于，所述相关块的代表运动矢量包括所述相关块的中心位置的运动矢量。
51.根据权利要求47所述的视频图像处理装置，其特征在于，所述预测模块还用于：
当所述相关块中出现不可获得运动矢量的子图像块时，将所述相关块的代表运动矢量作为所述不可获得运动矢量的子图像块的运动矢量，对所述当前图像块中对应的子图像块进行预测。
52.根据权利要求51所述的视频图像处理装置，其特征在于，所述预测模块还用于：
当所述相关块中出现不可获得运动矢量的子图像块，且所述相关块的代表运动矢量不可获得时，放弃根据所述相关块中各子图像块的运动矢量分别对所述当前图像块中对应的子图像块进行预测。
53.根据权利要求52所述的视频图像处理装置，其特征在于，所述预测模块还用于：
当所述相关块中的子图像块不可获得，或者所述相关块中的子图像块采用帧内编码模式时，确定所述相关块中出现不可获得运动矢量的子图像块。
54.根据权利要求47所述的视频图像处理装置，其特征在于，所述构建模块还用于：
确定其他候选者，将所述其他候选者加入所述运动矢量第一候选列表，其中，所述其他候选者中的至少一个候选者包括子图像块的运动矢量。
55.根据权利要求54所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当确定采用所述其他候选者中的其中一个候选者时，根据所述采用的候选者确定所述当前图像块中的子图像块的运动矢量。
56.根据权利要求54所述的视频图像处理装置，其特征在于，所述至少一个候选者包括一组控制点的运动矢量。
57.根据权利要求54所述的视频图像处理装置，其特征在于，所述预测模块还用于：
当确定采用所述至少一个候选者中的候选者时，根据仿射变换模型对所述采用的候选者进行仿射变换；
根据所述仿射变换后的候选者对所述当前图像块中的子图像块进行预测。
58.根据权利要求57所述的视频图像处理装置，其特征在于，
当所述仿射变换模型包括四参仿射变换模型时，所述至少一个候选者中，每个候选者包括2个控制点的运动矢量；
当所述仿射变换模型包括六参仿射变换模型时，所述至少一个候选者中，每个候选者包括3个控制点的运动矢量。
59.根据权利要求47所述的视频图像处理装置，其特征在于，所述构建模块还用于：
从所述当前图像块的邻近块中，按特定扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组；
将每一个确定的邻近块的控制点运动矢量组作为一个候选者加入所述运动矢量第一候选列表。
60.根据权利要求59所述的视频图像处理装置，其特征在于，所述从所述当前图像块的邻近块中，按特定扫描顺序确定采用仿射变换模式进行预测的邻近块的控制点运动矢量组，包括：
在所述当前图像块的左侧邻近块中按第一扫描顺序确定第一邻近块的控制点运动矢量组；
在所述当前图像块的上侧邻近块中按第二扫描顺序确定第二邻近块的控制点运动矢量组；
将所述第一邻近块的控制点运动矢量组和所述第二邻近块的控制点运动矢量组加入所述运动矢量第一候选列表。
61.根据权利要求47所述的视频图像处理装置，其特征在于，所述构建模块还用于：
根据所述当前图像块的部分控制点的邻近块构造所述部分控制点的运动矢量；
将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
62.根据权利要求61所述的视频图像处理装置，其特征在于，所述根据所述当前图像块的部分控制点的邻近块构造所述部分控制点的运动矢量，包括：
对所述部分控制点中的每个控制点，按第三扫描顺序对所述控制点的特定邻近块依次扫描，将满足预设条件的特定邻近块的运动矢量作为所述控制点的运动矢量。
63.根据权利要求61所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当所述部分控制点的运动矢量分别指向不同的参考帧时，放弃将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
64.根据权利要求61所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当所述运动矢量第一候选列表中的候选者的数量大于预设数值时，放弃将所述当前图像块的部分控制点的运动矢量加入所述运动矢量第一候选列表。
65.根据权利要求47所述的视频图像处理装置，其特征在于，所述构建模块还用于：
构建运动矢量第二候选列表，其中，加入所述运动矢量第二候选列表的候选者为一个图像块的运动矢量；
当确认采用所述运动矢量第二候选列表中的候选者时，根据所述候选者的运动矢量确定所述当前图像块的运动矢量。
66.根据权利要求65所述的视频图像处理装置，其特征在于，所述根据所述候选者的运动矢量确定所述当前图像块的运动矢量，包括：
将所述确认采用的候选者作为所述当前图像块的运动矢量，或者对所述确认采用的候选者进行缩放后作为所述当前图像块的运动矢量。
67.根据权利要求65所述的视频图像处理装置，其特征在于，所述构建运动矢量第二候选列表，包括：
根据所述当前图像块在当前图像上的若干个邻近块的运动矢量确定加入所述运动矢量第二候选列表的候选者。
68.根据权利要求67所述的视频图像处理装置，其特征在于，所述当前图像块在当前图像上的若干个邻近块包括所述预设的M个邻近块。
69.根据权利要求68所述的视频图像处理装置，其特征在于，所述构建模块还用于：
按预设顺序依次将所述预设的M个邻近块的运动矢量分别作为M个候选者，加入所述运动矢量第二候选列表；
所述N个邻近块，指的是按所述预设顺序首先确定的N个邻近块。
70.根据权利要求68所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当所述M个邻近块中的一个或多个邻近块的运动矢量不可获得时，放弃根据所述一个或多个邻近块的运动矢量确定加入所述运动矢量第二候选列表的候选者。
71.根据权利要求45或70所述的视频图像处理装置，其特征在于，所述对所述M个邻近块中的N个邻近块依次扫描，根据扫描结果确定目标邻近块，包括：
对所述N个邻近块依次进行扫描，当扫描到第一个符合预设条件的邻近块时，停止扫描，且根据所述扫描到的所述第一个符合预设条件的邻近块确定目标邻近块。
72.根据权利要求71所述的视频图像处理装置，其特征在于，所述根据所述扫描到的所述第一个符合预设条件的邻近块确定目标邻近块，包括：
将所述第一个符合预设条件的邻近块作为所述目标邻近块。
73.根据权利要求71所述的视频图像处理装置，其特征在于，所述预设条件包括：
邻近块的参考图像与所述当前图像块的参考图像相同。
74.根据权利要求71所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当在所述N个邻近块中未扫描到符合所述预设条件的邻近块时，对所述M个邻近块中的特定邻近块的运动矢量进行缩放处理，
所述预测模块还用于根据所述缩放处理后的运动矢量对所述当前图像块进行预测。
75.根据权利要求74所述的视频图像处理装置，其特征在于，所述根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包括：
根据所述缩放处理后的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块。
76.根据权利要求74所述的视频图像处理装置，其特征在于，所述特定邻近块为所述N个邻近块中，按扫描顺序得到的第一个邻近块或者最后一个邻近块。
77.根据权利要求74所述的视频图像处理装置，其特征在于，所述对所述M个邻近块中的特定邻近块的运动矢量进行缩放处理，根据所述缩放处理后的运动矢量对所述当前图像块进行预测，包括：
对所述特定邻近块的运动矢量进行缩放处理，使得经过所述缩放处理后的运动矢量指向的参考帧与所述当前图像块的参考图像相同；
将经过所述缩放处理后的运动矢量在所述当前图像块的参考图像中指向的图像块作为所述当前图像块的参考块。
78.根据权利要求71所述的视频图像处理装置，其特征在于，当在所述N个邻近块中未扫描到符合所述预设条件的邻近块时，将默认块作为所述当前图像块的参考块。
79.根据权利要求78所述的视频图像处理装置，其特征在于，所述默认块为运动矢量(0，0)指向的图像块。
80.根据权利要求45所述的视频图像处理装置，其特征在于，所述子图像块的大小和/或所述子图像块的相关块的大小固定为大于或等于64个像素。
81.根据权利要求80所述的视频图像处理装置，其特征在于，所述子图像块的大小和/或所述子图像块的相关块的大小固定为8×8个像素，或16×4个像素或4×16个像素。
82.根据权利要求45所述的视频图像处理装置，其特征在于，所述当前图像块为一个编码单元CU。
83.根据权利要求45所述的视频图像处理装置，其特征在于，所述根据所述目标邻近块的运动矢量、所述当前图像块以及所述当前图像块的参考图像，确定所述当前图像块的相关块，包括：
根据所述目标邻近块的运动矢量，在所述当前图像块的参考图像中确定所述当前图像块的相关块。
84.根据权利要求45所述的视频图像处理装置，其特征在于，所述邻近块为在所述当前图像上与所述当前图像块的位置相邻或具有一定位置间距的图像块。
85.根据权利要求45所述的视频图像处理装置，其特征在于，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
86.根据权利要求74所述的视频图像处理装置，其特征在于，所述构建模块还用于：
当所述特定邻近块的运动矢量指向特定参考图像，或者所述当前图像块的参考图像为特定参考图像时，根据处理后的所述相关块的运动矢量和所述当前图像块的参考图像确定所述当前图像块的参考块；
其中，所述处理后的所述相关块的运动矢量和处理前的相关块的运动矢量相同。
87.根据权利要求86所述的视频图像处理装置，其特征在于，所述处理后的所述相关块的运动矢量，包括：
根据数值为1的缩放比例对所述相关块的运动矢量进行缩放后得到的运动矢量，或者，
跳过缩放步骤的所述相关块的运动矢量。
88.根据权利要求45所述的视频图像处理装置，其特征在于，M小于等于4。
89.一种视频图像处理装置，其特征在于，包括：存储器与处理器，所述存储器用于存储指令，所述处理器用于执行所述存储器存储的指令，并且对所述存储器中存储的指令的执行使得，所述处理器用于执行如权利要求1至44中任一项所述的方法。
90.一种计算机存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被计算机执行时使得，所述计算机执行如权利要求1至44中任一项所述的方法。
CN201880016545.8A 2018-04-02 2018-10-30 视频图像处理方法与装置 Active CN110495169B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111455033.1A CN114125440A (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
CNPCT/CN2018/081652 2018-04-02
PCT/CN2018/081652 WO2019191890A1 (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CNPCT/CN2018/095710 2018-07-13
PCT/CN2018/095710 WO2019192102A1 (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
PCT/CN2018/103693 WO2019192141A1 (zh) 2018-04-02 2018-08-31 用于图像运动补偿的方法和装置
CNPCT/CN2018/103693 2018-08-31
PCT/CN2018/107436 WO2019192152A1 (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置
CNPCT/CN2018/107436 2018-09-25
PCT/CN2018/112805 WO2019192170A1 (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111455033.1A Division CN114125440A (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置

Publications (2)

Publication Number Publication Date
CN110495169A CN110495169A (zh) 2019-11-22
CN110495169B true CN110495169B (zh) 2021-12-17

Family

ID=68099733

Family Applications (16)

Application Number Title Priority Date Filing Date
CN202311156567.3A Pending CN117294837A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN202311161948.0A Pending CN117135346A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN202311161992.1A Pending CN117061738A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN201880012597.8A Active CN110419217B (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN201880012589.3A Active CN110419220B (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN202311004591.5A Pending CN116760999A (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN202311002352.6A Pending CN116781928A (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN201880042138.4A Active CN110786012B (zh) 2018-04-02 2018-08-31 用于图像运动补偿的方法和装置
CN202111284624.7A Active CN113824966B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置
CN201880011514.3A Active CN110326295B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置、存储介质
CN202111283215.5A Active CN113852828B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置
CN201880016545.8A Active CN110495169B (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置
CN202111455033.1A Pending CN114125440A (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置
CN202210376345.1A Pending CN115037942A (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置
CN201980002813.5A Active CN110720219B (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置
CN202210376602.1A Pending CN114938452A (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置

Family Applications Before (11)

Application Number Title Priority Date Filing Date
CN202311156567.3A Pending CN117294837A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN202311161948.0A Pending CN117135346A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN202311161992.1A Pending CN117061738A (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN201880012597.8A Active CN110419217B (zh) 2018-04-02 2018-04-02 用于图像处理的方法和图像处理装置
CN201880012589.3A Active CN110419220B (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN202311004591.5A Pending CN116760999A (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN202311002352.6A Pending CN116781928A (zh) 2018-04-02 2018-07-13 用于图像运动补偿的方法和装置
CN201880042138.4A Active CN110786012B (zh) 2018-04-02 2018-08-31 用于图像运动补偿的方法和装置
CN202111284624.7A Active CN113824966B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置
CN201880011514.3A Active CN110326295B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置、存储介质
CN202111283215.5A Active CN113852828B (zh) 2018-04-02 2018-09-25 获取视频图像运动矢量的方法与装置

Family Applications After (4)

Application Number Title Priority Date Filing Date
CN202111455033.1A Pending CN114125440A (zh) 2018-04-02 2018-10-30 视频图像处理方法与装置
CN202210376345.1A Pending CN115037942A (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置
CN201980002813.5A Active CN110720219B (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置
CN202210376602.1A Pending CN114938452A (zh) 2018-04-02 2019-03-13 视频图像处理方法与装置

Country Status (6)

Country Link
US (15) US11490118B2 (zh)
EP (6) EP3780608A4 (zh)
JP (10) JP7088606B2 (zh)
KR (1) KR20200134319A (zh)
CN (16) CN117294837A (zh)
WO (4) WO2019191890A1 (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117156155A (zh) * 2018-03-14 2023-12-01 Lx 半导体科技有限公司 图像编码/解码方法、存储介质和发送方法
CN117294837A (zh) 2018-04-02 2023-12-26 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
CN110876059B (zh) * 2018-09-03 2022-06-10 华为技术有限公司 运动矢量的获取方法、装置、计算机设备及存储介质
WO2020084553A1 (en) * 2018-10-24 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Motion candidate derivation based on multiple information in sub-block motion vector prediction
CN113228681A (zh) * 2018-12-21 2021-08-06 韩国电子通信研究院 图像编码/解码方法和装置以及存储比特流的记录介质
KR20210103558A (ko) * 2018-12-28 2021-08-23 텔레호낙티에볼라게트 엘엠 에릭슨(피유비엘) 움직임 벡터 예측자 리스트의 생성
CN114097228B (zh) 2019-06-04 2023-12-15 北京字节跳动网络技术有限公司 具有几何分割模式编解码的运动候选列表
KR102627821B1 (ko) 2019-06-04 2024-01-23 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 이웃 블록 정보를 사용한 모션 후보 리스트 구성
CN117354507A (zh) 2019-06-06 2024-01-05 北京字节跳动网络技术有限公司 视频编解码的运动候选列表构建
CN114175636B (zh) 2019-07-14 2024-01-12 北京字节跳动网络技术有限公司 自适应参数集中的自适应环路滤波的指示
WO2021018031A1 (en) * 2019-07-27 2021-02-04 Beijing Bytedance Network Technology Co., Ltd. Restrictions of usage of tools according to reference picture types
JP7444970B2 (ja) 2019-08-20 2024-03-06 北京字節跳動網絡技術有限公司 デフォルトおよびユーザ定義のスケーリング行列の使用法
CN114402610A (zh) 2019-09-13 2022-04-26 北京字节跳动网络技术有限公司 视频编解码中的加权样点双向预测
JP7324940B2 (ja) 2019-09-19 2023-08-10 北京字節跳動網絡技術有限公司 ビデオコーディングにおけるスケーリングウインドウ
EP4018671A4 (en) 2019-09-19 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. DERIVING REFERENCE SAMPLE POSITIONS IN VIDEO CODING
CN114450959A (zh) 2019-09-28 2022-05-06 北京字节跳动网络技术有限公司 视频编解码中的几何分割模式
MX2022003836A (es) 2019-10-05 2022-05-12 Beijing Bytedance Network Tech Co Ltd Se?alizacion basada en los niveles de las herramientas de codificacion de video.
JP7391203B2 (ja) * 2019-10-12 2023-12-04 北京字節跳動網絡技術有限公司 ビデオコーディングツールを洗練する使用およびシグナリング
KR20220073740A (ko) 2019-10-13 2022-06-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 레퍼런스 픽처 리샘플링 및 비디오 코딩 툴 사이의 상호 작용
CN113727119B (zh) * 2020-05-20 2023-03-17 Oppo广东移动通信有限公司 帧间预测方法、编码器、解码器以及计算机存储介质
CN111724422B (zh) * 2020-06-29 2024-01-09 深圳市慧鲤科技有限公司 图像处理方法及装置、电子设备及存储介质
CN112132732B (zh) * 2020-09-10 2023-06-02 宁波大学科学技术学院 立体图像的像素预测方法、可逆信息隐藏提取方法、终端及存储介质
WO2022141278A1 (zh) * 2020-12-30 2022-07-07 深圳市大疆创新科技有限公司 视频处理方法和编码装置
WO2023192335A1 (en) * 2022-03-28 2023-10-05 Beijing Dajia Internet Information Technology Co., Ltd. Methods and devices for candidate derivation for affine merge mode in video coding
WO2024005456A1 (ko) * 2022-06-27 2024-01-04 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2024005616A1 (ko) * 2022-07-01 2024-01-04 엘지전자 주식회사 영상 인코딩/디코딩 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101573985A (zh) * 2006-11-03 2009-11-04 三星电子株式会社 用于视频预测编码的方法和装置以及用于视频预测解码的方法和装置
CN101873500A (zh) * 2009-04-24 2010-10-27 华为技术有限公司 帧间预测编码方法、帧间预测解码方法及设备
US20120128071A1 (en) * 2010-11-24 2012-05-24 Stmicroelectronics S.R.L. Apparatus and method for performing error concealment of inter-coded video frames
CN103636218A (zh) * 2011-06-30 2014-03-12 Jvc建伍株式会社 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
CN106375770A (zh) * 2011-01-21 2017-02-01 Sk电信有限公司 视频解码方法

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1978747B1 (en) * 2001-11-29 2014-05-21 Panasonic Corporation Coding distortion removal method
JP4130783B2 (ja) * 2002-04-23 2008-08-06 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
KR100491530B1 (ko) * 2002-05-03 2005-05-27 엘지전자 주식회사 모션 벡터 결정 방법
US20050013498A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7660354B2 (en) 2005-05-11 2010-02-09 Fang Shi Temporal error concealment for bi-directionally predicted frames
ZA200900857B (en) * 2006-07-06 2010-05-26 Thomson Licensing Method and apparatus for decoupling frame number and/or picture order count (POC) for multi-view video encoding and decoding
JP2009118221A (ja) * 2007-11-07 2009-05-28 Toshiba Corp ディジタル画像復号装置及びディジタル画像復号方法
WO2011099468A1 (ja) * 2010-02-09 2011-08-18 日本電信電話株式会社 動きベクトル予測符号化方法，動きベクトル予測復号方法，動画像符号化装置，動画像復号装置およびそれらのプログラム
KR20120009861A (ko) * 2010-07-22 2012-02-02 에스케이 텔레콤주식회사 확장된 스킵모드를 이용한 영상 부호화/복호화 방법 및 장치
KR20120016991A (ko) 2010-08-17 2012-02-27 오수미 인터 프리딕션 방법
CN107360427B (zh) * 2010-10-08 2020-09-01 Ge视频压缩有限责任公司 编码器和编码方法与解码器和解码方法
US8824558B2 (en) 2010-11-23 2014-09-02 Mediatek Inc. Method and apparatus of spatial motion vector prediction
CN107105280B (zh) 2010-12-14 2020-01-03 M&K控股株式会社 用于编码运动画面的设备
US9635382B2 (en) 2011-01-07 2017-04-25 Texas Instruments Incorporated Method, system and computer program product for determining a motion vector
US8755437B2 (en) * 2011-03-17 2014-06-17 Mediatek Inc. Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate
CN102611881B (zh) * 2011-01-19 2014-06-25 华为技术有限公司 参考运动矢量获取方法、模块及编、解码装置
PL2690870T3 (pl) * 2011-03-21 2020-07-27 Lg Electronics Inc. Sposób wyboru predyktora wektora ruchu i urządzenie go stosujące
US9247249B2 (en) 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding
JP5786478B2 (ja) 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
PL3481066T3 (pl) * 2011-06-28 2021-11-22 Lg Electronics Inc. Sposób wyprowadzania predyktora wektora ruchu
KR101954006B1 (ko) * 2011-06-30 2019-03-04 소니 주식회사 화상 처리 장치 및 방법
CN107295347B (zh) 2011-08-29 2020-06-26 苗太平洋控股有限公司 用于解码合并模式下的运动信息的装置
CN102447904A (zh) * 2011-10-24 2012-05-09 成都虢电智能电力科技有限公司 一种快速对视频序列进行运动估计的方法
WO2013061551A1 (ja) * 2011-10-27 2013-05-02 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
RU2646328C1 (ru) 2011-10-28 2018-03-02 Сан Пэтент Траст Способ кодирования изображений, способ декодирования изображений, устройство кодирования изображений и устройство декодирования изображений
EP2773111B1 (en) * 2011-10-28 2020-01-01 Sun Patent Trust Image encoding method, image decoding method, image encoding device, and image decoding device
TWI679876B (zh) 2011-10-31 2019-12-11 日商Ｊｖｃ建伍股份有限公司 動態影像解碼裝置及動態影像解碼方法
SG11201402160XA (en) * 2011-11-08 2014-08-28 Samsung Electronics Co Ltd Method and apparatus for motion vector determination in video encoding or decoding
CN104025599B (zh) 2011-11-08 2018-12-14 诺基亚技术有限公司 参考图片处理
US9596466B2 (en) 2011-12-23 2017-03-14 Electronics And Telecommunications Research Institute Method and apparatus for setting reference picture index of temporal merging candidate
EP3716621B1 (en) 2012-04-12 2021-12-01 JVCKENWOOD Corporation Moving picture coding device, moving picture coding method, moving picture coding program, and moving picture decoding device, moving picture decoding method, moving picture decoding program
JP2013223049A (ja) 2012-04-13 2013-10-28 Sharp Corp 画像復号装置、および画像符号化装置
US9979958B2 (en) * 2012-04-20 2018-05-22 Qualcomm Incorporated Decoded picture buffer processing for random access point pictures in video sequences
RU2624578C2 (ru) * 2012-07-02 2017-07-04 Самсунг Электроникс Ко., Лтд. Способ и устройство для прогнозирования вектора движения для кодирования видео или декодирования видео
US9325990B2 (en) 2012-07-09 2016-04-26 Qualcomm Incorporated Temporal motion vector prediction in video coding extensions
CN102883161B (zh) * 2012-09-19 2015-09-30 华为技术有限公司 视频编码和解码的处理方法和装置
US20150350684A1 (en) * 2012-09-20 2015-12-03 Sony Corporation Image processing apparatus and method
US9538180B2 (en) * 2012-12-17 2017-01-03 Qualcomm Incorporated Motion vector prediction in video coding
CN105075269B (zh) * 2013-04-04 2018-07-03 夏普株式会社 图像解码装置、图像编码装置及计算机可读取的记录介质
RU2746310C2 (ru) * 2013-04-07 2021-04-12 Долби Интернэшнл Аб Способ для декодирования битового потока видео
US9591321B2 (en) * 2013-04-07 2017-03-07 Dolby International Ab Signaling change in output layer sets
US9930363B2 (en) 2013-04-12 2018-03-27 Nokia Technologies Oy Harmonized inter-view and view synthesis prediction for 3D video coding
TWI632807B (zh) * 2013-07-10 2018-08-11 夏普股份有限公司 Moving image decoding device
CN105453562B (zh) * 2013-07-30 2018-12-25 株式会社Kt 支持多个层的图像编码和解码方法以及使用该方法的装置
US9762927B2 (en) 2013-09-26 2017-09-12 Qualcomm Incorporated Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC
JP6397421B2 (ja) * 2013-10-08 2018-09-26 シャープ株式会社 画像復号装置及び画像符号化装置
WO2015102042A1 (en) * 2014-01-02 2015-07-09 Sharp Kabushiki Kaisha Parameter set signaling
FI3958572T3 (fi) 2014-01-02 2024-03-13 Dolby Laboratories Licensing Corp Menetelmä moninäkymävideon koodaamiseksi, menetelmä moninäkymävideon dekoodaamiseksi ja tallennusväliaine niitä varten
US20170019666A1 (en) * 2014-03-13 2017-01-19 Sharp Kabushiki Kaisha Constrained reference picture parameters
US9756355B2 (en) * 2014-06-20 2017-09-05 Qualcomm Incorporated Value ranges for syntax elements in video coding
WO2016048834A1 (en) * 2014-09-26 2016-03-31 Vid Scale, Inc. Intra block copy coding with temporal block vector prediction
MX2017005651A (es) * 2014-10-31 2017-06-29 Samsung Electronics Co Ltd Dispositivo de codificacion de video y dispositivo de decodificacion de video que usa la codificacion de salto de alta precision y metodo del mismo.
US9872296B2 (en) 2015-01-06 2018-01-16 Qualcomm Incorporated Techniques for beam shaping at a millimeter wave base station and a wireless device and fast antenna subarray selection at a wireless device
WO2016165069A1 (en) * 2015-04-14 2016-10-20 Mediatek Singapore Pte. Ltd. Advanced temporal motion vector prediction in video coding
CN116016941A (zh) * 2015-09-08 2023-04-25 寰发股份有限公司 管理已解码图像缓存器的方法及视频编码器或视频解码器
CN106534858B (zh) 2015-09-10 2019-09-06 展讯通信（上海）有限公司 真实运动估计方法及装置
CN111526360A (zh) 2016-02-06 2020-08-11 华为技术有限公司 图像编解码方法及装置
CN114466193A (zh) * 2016-03-16 2022-05-10 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
US10659801B2 (en) 2016-03-24 2020-05-19 Lg Electronics Inc. Method and apparatus for inter prediction in video coding system
US10560718B2 (en) 2016-05-13 2020-02-11 Qualcomm Incorporated Merge candidates for motion vector prediction for video coding
MX2018014493A (es) 2016-05-25 2019-08-12 Arris Entpr Llc Particionamiento binario, ternario, cuaternario para jvet.
EP3497932A4 (en) 2016-08-15 2020-03-25 Nokia Technologies Oy VIDEO CODING AND DECODING
US11409855B2 (en) * 2016-08-22 2022-08-09 Lenovo (Singapore) Pte. Ltd. Gesture based CAPTCHA test
CN107820095B (zh) * 2016-09-14 2020-01-03 北京金山云网络技术有限公司 一种长期参考图像选择方法及装置
US10812791B2 (en) * 2016-09-16 2020-10-20 Qualcomm Incorporated Offset vector identification of temporal motion vector predictor
EP3301914A1 (en) 2016-09-30 2018-04-04 Thomson Licensing Method and apparatus for encoding and decoding a large field of view video
EP3343925A1 (en) 2017-01-03 2018-07-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
EP3343924A1 (en) 2017-01-03 2018-07-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
US10542280B2 (en) 2017-01-09 2020-01-21 QUALCOMM Incorpated Encoding optimization with illumination compensation and integer motion vector restriction
US20180199057A1 (en) 2017-01-12 2018-07-12 Mediatek Inc. Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding
JP7036628B2 (ja) * 2017-03-10 2022-03-15 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
CN109089119B (zh) 2017-06-13 2021-08-13 浙江大学 一种运动矢量预测的方法及设备
JP2020145486A (ja) 2017-07-28 2020-09-10 シャープ株式会社 動画像符号化装置及び動画像復号装置
KR102233964B1 (ko) 2017-09-12 2021-03-30 삼성전자주식회사 움직임 정보의 부호화 및 복호화 방법, 및 움직임 정보의 부호화 및 복호화 장치
CN107682705B (zh) * 2017-09-26 2020-05-12 杭州电子科技大学 基于mv-hevc框架的立体视频b帧错误隐藏方法
US20190141320A1 (en) * 2017-11-07 2019-05-09 Qualcomm Incorporated Enhanced reference picture management in video coding
KR102387363B1 (ko) 2017-11-30 2022-04-18 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
WO2019172705A1 (ko) 2018-03-09 2019-09-12 한국전자통신연구원 샘플 필터링을 이용한 영상 부호화/복호화 방법 및 장치
CN116781929A (zh) 2018-04-01 2023-09-19 Lg电子株式会社 图像编码/解码设备和图像数据发送设备
KR20230028586A (ko) 2018-04-01 2023-02-28 엘지전자 주식회사 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN117294837A (zh) 2018-04-02 2023-12-26 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
MX2021001743A (es) * 2018-08-17 2021-06-23 Huawei Tech Co Ltd Gestión de imágenes de referencia en codificación de video.

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101573985A (zh) * 2006-11-03 2009-11-04 三星电子株式会社 用于视频预测编码的方法和装置以及用于视频预测解码的方法和装置
CN101873500A (zh) * 2009-04-24 2010-10-27 华为技术有限公司 帧间预测编码方法、帧间预测解码方法及设备
US20120128071A1 (en) * 2010-11-24 2012-05-24 Stmicroelectronics S.R.L. Apparatus and method for performing error concealment of inter-coded video frames
CN106375770A (zh) * 2011-01-21 2017-02-01 Sk电信有限公司 视频解码方法
CN103636218A (zh) * 2011-06-30 2014-03-12 Jvc建伍株式会社 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序

Also Published As

Publication number Publication date
CN115037942A (zh) 2022-09-09
US11368714B2 (en) 2022-06-21
EP3780618A4 (en) 2022-03-02
JP7294753B2 (ja) 2023-06-20
CN110326295B (zh) 2021-11-16
EP3780614A4 (en) 2022-02-23
US11343534B2 (en) 2022-05-24
US20220321907A1 (en) 2022-10-06
US20210021856A1 (en) 2021-01-21
CN110419217B (zh) 2023-09-26
JP2023017981A (ja) 2023-02-07
CN110419220B (zh) 2023-08-29
US11350124B2 (en) 2022-05-31
US11330294B2 (en) 2022-05-10
CN117294837A (zh) 2023-12-26
JP2021520121A (ja) 2021-08-12
CN110720219B (zh) 2022-04-26
US20210021824A1 (en) 2021-01-21
EP3780618A1 (en) 2021-02-17
JP2021520124A (ja) 2021-08-12
CN114938452A (zh) 2022-08-23
CN110419217A (zh) 2019-11-05
CN116760999A (zh) 2023-09-15
CN114125440A (zh) 2022-03-01
CN110419220A (zh) 2019-11-05
JP2021520126A (ja) 2021-08-12
WO2019192102A1 (zh) 2019-10-10
CN110326295A (zh) 2019-10-11
US11190798B2 (en) 2021-11-30
JP2024010198A (ja) 2024-01-23
JP2023110048A (ja) 2023-08-08
US20210021825A1 (en) 2021-01-21
US11159821B2 (en) 2021-10-26
JP2021526322A (ja) 2021-09-30
WO2019191890A1 (zh) 2019-10-10
CN113852828A (zh) 2021-12-28
EP3780608A1 (en) 2021-02-17
US20210021812A1 (en) 2021-01-21
WO2019192152A1 (zh) 2019-10-10
US20210021865A1 (en) 2021-01-21
EP3780608A4 (en) 2021-12-01
EP3780615A4 (en) 2022-03-02
CN113824966A (zh) 2021-12-21
US11871032B2 (en) 2024-01-09
KR20200134319A (ko) 2020-12-01
US20210227253A1 (en) 2021-07-22
EP3783897A4 (en) 2022-02-23
JP2021520119A (ja) 2021-08-12
CN110786012B (zh) 2024-01-30
US20210021855A1 (en) 2021-01-21
JP7216109B2 (ja) 2023-01-31
EP3780619A1 (en) 2021-02-17
US20220086483A1 (en) 2022-03-17
EP3780615A1 (en) 2021-02-17
US20210218989A1 (en) 2021-07-15
JP2021520120A (ja) 2021-08-12
US11490118B2 (en) 2022-11-01
EP3780619A4 (en) 2022-02-23
JP7388659B2 (ja) 2023-11-29
JP7088606B2 (ja) 2022-06-21
US11323742B2 (en) 2022-05-03
US11949912B2 (en) 2024-04-02
CN117061738A (zh) 2023-11-14
US11363294B2 (en) 2022-06-14
JP2023052491A (ja) 2023-04-11
WO2019192141A1 (zh) 2019-10-10
US20220353527A1 (en) 2022-11-03
CN113852828B (zh) 2023-09-12
US20210227251A1 (en) 2021-07-22
US11490120B2 (en) 2022-11-01
CN110495169A (zh) 2019-11-22
CN110786012A (zh) 2020-02-11
CN113824966B (zh) 2023-09-12
CN110720219A (zh) 2020-01-21
US20210227252A1 (en) 2021-07-22
US11949911B2 (en) 2024-04-02
CN116781928A (zh) 2023-09-19
US20210227254A1 (en) 2021-07-22
US11381839B2 (en) 2022-07-05
CN117135346A (zh) 2023-11-28
EP3780614A1 (en) 2021-02-17
US20220286706A1 (en) 2022-09-08
EP3783897A1 (en) 2021-02-24

Similar Documents

Publication Publication Date Title
CN110495169B (zh) 视频图像处理方法与装置
US9693075B2 (en) Picture encoding device, picture encoding method, picture encoding program, picture decoding device, picture decoding method, and picture decoding program
CN111357290B (zh) 视频图像处理方法与装置
WO2019192301A1 (zh) 视频图像处理方法与装置
WO2019192170A1 (zh) 视频图像处理方法与装置
JP2024057014A (ja) 動画像符号化方法、動画像符号化装置、及びビットストリーム生成方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant