CN109005407B - 视频图像编码和解码的方法、编码设备和解码设备 - Google Patents

视频图像编码和解码的方法、编码设备和解码设备 Download PDF

Info

Publication number
CN109005407B
CN109005407B CN201811104435.5A CN201811104435A CN109005407B CN 109005407 B CN109005407 B CN 109005407B CN 201811104435 A CN201811104435 A CN 201811104435A CN 109005407 B CN109005407 B CN 109005407B
Authority
CN
China
Prior art keywords
motion vector
determining
affine
image block
control point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811104435.5A
Other languages
English (en)
Other versions
CN109005407A (zh
Inventor
张红
杨海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201811104435.5A priority Critical patent/CN109005407B/zh
Publication of CN109005407A publication Critical patent/CN109005407A/zh
Application granted granted Critical
Publication of CN109005407B publication Critical patent/CN109005407B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/53—Multi-resolution motion estimation; Hierarchical motion estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/537—Motion estimation other than block-based
    • H04N19/54—Motion estimation other than block-based using feature points or meshes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/57—Motion estimation characterised by a search window with variable size or shape
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

本发明提供了一种视频图像编码和解码的方法、编码设备和解码设备。该方法包括：确定仿射图像块的运动矢量差异；确定该仿射图像块的运动矢量精度；根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；根据该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。由此，能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。

Description

视频图像编码和解码的方法、编码设备和解码设备
技术领域
本发明涉及视频图像处理领域，尤其涉及视频图像编码和解码的方法、编码设备和解码设备。
背景技术
随着互联网科技的迅猛发展以及人们物质精神文化的日益丰富，在互联网中针对视频的应用需求尤其是针对高清视频的应用需求越来越多，而高清视频的数据量非常大，要想高清视频能在带宽有限的互联网中传输，必须首先解决的问题就是高清视频压缩编码问题。目前，国际上有两个国际组织专门进行视频编码标准的制定工作，即国际标准化组织(International Organization for Standardization，简称为“ISO”)/国际电工委员会(International Electrotechnical Commission，简称为“IEC”)下的运动图像专家组(Motion Picture Experts Group，简称为“MPEG”)和国际电信联盟电信标准化组(International Telecommunication Union-Telecommunication standardizationsector，简称为“ITU-T”)的视频编码专家组(Video Coding Experts Group，简称为“VCEG”)。成立于1986年的MPEG专门负责制定多媒体领域内的相关标准，主要应用于存储、广播电视、因特网或无线网上的流媒体等。ITU-T则主要制定面向实时视频通信领域的视频编码标准，如视频电话、视频会议等应用。
在过去的几十年里，国际上已经成功制定了面向各种应用的视频编码标准，主要包括：用于影音光碟(Video Compact Disc，简称为“VCD”)的MPEG-1标准，用于竖直多功能光盘(Digital Video Disc，简称为“DVD”)和数字视频广播(Digital VideoBroadcasting，简称为“DVB”)的MPEG-2标准，用于视频会议的H.261标准以及H.263标准、H.264标准，允许对任意形状的对象编码的MPEG-4标准，以及最新的高性能视频编码(HighEfficiency Video Coding，简称为“HEVC”)标准。
相比于最新的视频编码标准HEVC，对于包含旋转、缩放运动的序列，基于线性变化的运动矢量场的运动补偿预测技术可以显著提高编码性能，在现有的基于仿射变换的运动补偿预测技术中，在获得图像块的仿射变换参数后，要计算图像块内每个点的运动矢量，根据每个点的运动矢量做运动补偿预测，从而获取每个点的运动补偿预测信号。由于图像块内每个点的运动矢量都可能不同，需要根据运动矢量为每个点进行不同的操作。基于点的运动补偿预测复杂度很高，为了降低编解码的复杂度，相关技术尝试在图像块内再划分子图像块，求得每个子图像块的运动矢量，再获得每个子图像块的运动补偿预测信号。
但是，相关技术中的子图像块的大小是固定的，子图像块过小会导致较高的编解码的复杂度，子图像块过大会降低编解码性能。
发明内容
本发明提供了一种视频图像编码和解码的方法、编码设备和解码设备，可以通过选取合适大小的子图像块，降低编解码的复杂度，提升编解码性能。
第一方面，提供了一种视频图像编码的方法，包括：确定仿射图像块的运动矢量差异；确定该仿射图像块的运动矢量精度；根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；根据该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。
结合第一方面，在第一方面的第一种可能的实现方式中，该确定仿射图像块的运动矢量差异，包括：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
结合第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，该根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量，包括：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；
其中，该根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量，包括：确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
结合第一方面的第二种可能的实现方式，在第一方面的第三种可能的实现方式中，该方法还包括：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；
其中，该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
结合第一方面的第二种可能的实现方式，在第一方面的第四种可能的实现方式中，该方法还包括：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；
其中，该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
结合第一方面的第二种可能的实现方式，在第一方面的第五种可能的实现方式中，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：
确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
结合第一方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第一方面的第六种可能的实现方式中，该根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定仿射运动补偿子图像块的大小，包括：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第一方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第一方面的第七种可能的实现方式中，该根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，包括：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第一方面的第一种至第七种可能的实现方式中任一可能的实现方式，在第一方面的第八种可能的实现方式中，该第一控制点与该第三控制点为同一个像素点。
结合第一方面的第一种至第八种可能的实现方式中任一可能的实现方式，在第一方面的第九种可能的实现方式中，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
结合第一方面的第七种可能的实现方式，在第一方面的第十种可能的实现方式中，该第一预设值为4，和/或，该第二预设值为4。
结合第一方面，第一方面的第一种至第十种可能的实现方式中任一可能的实现方式，在第一方面的第十一种可能的实现方式中，该确定该仿射图像块的运动矢量精度，包括：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
结合第一方面，第一方面的第一种至第十一种可能的实现方式中任一可能的实现方式，在第一方面的第十二种可能的实现方式中，该根据该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理，包括：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行编码。
结合第一方面的第十二种可能的实现方式，在第一方面的第十三种可能的实现方式中，该方法还包括：对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
结合第一方面的第十三种可能的实现方式，在第一方面的第十四种可能的实现方式中，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
第二方面，提供了一种视频图像解码的方法，包括：确定仿射图像块的运动矢量差异；确定该仿射图像块的运动矢量精度；根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
结合第二方面，在第二方面的第一种可能的实现方式中，该确定仿射图像块的运动矢量差异，包括：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
结合第二方面的第一种可能的实现方式，在第二方面的第二种可能的实现方式中，该根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量，包括：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；
其中，该根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量，包括：确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
结合第二方面的第二种可能的实现方式，在第二方面的第三种可能的实现方式中，该方法还包括：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；
其中，该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
结合第二方面的第二种可能的实现方式，在第二方面的第四种可能的实现方式中，该方法还包括：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；
其中，该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
结合第二方面的第二种可能的实现方式，在第二方面的第五种可能的实现方式中，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；该确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：
确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
结合第二方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第二方面的第六种可能的实现方式中，该根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定仿射运动补偿子图像块的大小，包括：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第二方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第二方面的第七种可能的实现方式中，该根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，包括：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第二方面的第一种至第七种可能的实现方式中任一可能的实现方式，在第二方面的第八种可能的实现方式中，该第一控制点与该第三控制点为同一个像素点。
结合第二方面的第一种至第八种可能的实现方式中任一可能的实现方式，在第二方面的第九种可能的实现方式中，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
结合第二方面的第七种可能的实现方式，在第二方面的第十种可能的实现方式中，该第一预设值为4，和/或，该第二预设值为4。
结合第二方面，第二方面的第一种至第十种可能的实现方式中任一可能的实现方式，在第二方面的第十一种可能的实现方式中，该确定该仿射图像块的运动矢量精度，包括：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
结合第二方面，第二方面的第一种至第十一种可能的实现方式中任一可能的实现方式，在第二方面的第十二种可能的实现方式中，该根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理，包括：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行解码。
结合第二方面的第十二种可能的实现方式，在第二方面的第十三种可能的实现方式中，该方法还包括：对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
结合第二方面的第十三种可能的实现方式，在第二方面的第十四种可能的实现方式中，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
第三方面，提供了一种编码设备，包括：第一确定模块，用于确定仿射图像块的运动矢量差异；第二确定模块，用于确定该仿射图像块的运动矢量精度；第三确定模块，用于根据该第一确定模块确定的该运动矢量差异、该第二确定模块确定的该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；编码模块，用于根据该第三确定模块确定的该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。
结合第三方面，在第三方面的第一种可能的实现方式中，该第一确定模块具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
结合第三方面的第一种可能的实现方式，在第三方面的第二种可能的实现方式中，该第一确定模块具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
结合第三方面的第二种可能的实现方式，在第三方面的第三种可能的实现方式中，该第一确定模块具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
结合第三方面的第二种可能的实现方式，在第三方面的第四种可能的实现方式中，该第一确定模块具体用于：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
结合第三方面的第二种可能的实现方式，在第三方面的第五种可能的实现方式中，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该第一确定模块具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
结合第三方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第三方面的第六种可能的实现方式中，该第三确定模块具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第三方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第三方面的第七种可能的实现方式中，该第三确定模块具体用于：在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第三方面的第一种至第七种可能的实现方式中任一可能的实现方式，在第三方面的第八种可能的实现方式中，该第一控制点与该第三控制点为同一个像素点。
结合第三方面的第一种至第八种可能的实现方式中任一可能的实现方式，在第三方面的第九种可能的实现方式中，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
结合第三方面的第七种可能的实现方式，在第三方面的第十种可能的实现方式中，该第一预设值为4，和/或，该第二预设值为4。
结合第三方面，第三方面的第一种至第十种可能的实现方式中任一可能的实现方式，在第三方面的第十一种可能的实现方式中，该第二确定模块具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
结合第三方面，第三方面的第一种至第十一种可能的实现方式中任一可能的实现方式，在第三方面的第十二种可能的实现方式中，该编码模块具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行编码。
结合第三方面的第十二种可能的实现方式，在第三方面的第十三种可能的实现方式中，该编码设备还包括：滤波模块，用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
结合第三方面的第十三种可能的实现方式，在第一方面的第十四种可能的实现方式中，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
第四方面，提供了一种解码设备，包括：第一确定模块，用于确定仿射图像块的运动矢量差异；第二确定模块，用于确定该仿射图像块的运动矢量精度；第三确定模块，用于根据该第一确定模块确定的该运动矢量差异、该第二确定模块确定的该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；解码模块，用于根据该第三确定模块确定的该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
结合第四方面，在第四方面的第一种可能的实现方式中，该第一确定模块具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
结合第四方面的第一种可能的实现方式，在第四方面的第二种可能的实现方式中，该第一确定模块具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
结合第四方面的第二种可能的实现方式，在第四方面的第三种可能的实现方式中，该第一确定模块具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
结合第四方面的第二种可能的实现方式，在第四方面的第四种可能的实现方式中，该第一确定模块具体用于确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
结合第四方面的第二种可能的实现方式，在第四方面的第五种可能的实现方式中，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该第一确定模块具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
结合第四方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第四方面的第六种可能的实现方式中，该第三确定模块具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第四方面的第三种至第五种可能的实现方式中任一可能的实现方式，在第四方面的第七种可能的实现方式中，该第三确定模块具体用于：在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
结合第四方面的第一种至第七种可能的实现方式中任一可能的实现方式，在第四方面的第八种可能的实现方式中，该第一控制点与该第三控制点为同一个像素点。
结合第四方面的第一种至第八种可能的实现方式中任一可能的实现方式，在第四方面的第九种可能的实现方式中，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
结合第四方面的第七种可能的实现方式，在第四方面的第十种可能的实现方式中，该第一预设值为4，和/或，该第二预设值为4。
结合第四方面，第四方面的第一种至第十种可能的实现方式中任一可能的实现方式，在第四方面的第十一种可能的实现方式中，该第二确定模块具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
结合第四方面，第四方面的第一种至第十一种可能的实现方式中任一可能的实现方式，在第四方面的第十二种可能的实现方式中，该解码模块具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行解码。
结合第四方面的第十二种可能的实现方式，在第四方面的第十三种可能的实现方式中，该解码设备还包括：滤波模块，用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
结合第四方面的第十三种可能的实现方式，在第四方面的第十四种可能的实现方式中，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
基于上述技术方案，本发明实施例的视频图像编码和解码的方法、编码设备和解码设备，根据仿射图像块的运动矢量差异、仿射图像块的运动矢量精度和仿射图像块中的控制点之间的距离，确定仿射图像块中的仿射运动补偿子图像块的大小，由此，在编解码过程中能够通过选取合适大小的子图像块，降低编解码的复杂度，提升编解码性能。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的视频图像编码的方法的示意性流程图；
图2是根据本发明实施例的视频图像编码的方法的另一示意性流程图；
图3是根据本发明实施例的视频图像编码的方法的再一示意性流程图；
图4是根据本发明实施例的视频图像编码的方法的再一示意性流程图；
图5是根据本发明实施例的仿射图像块及控制点的示意图；
图6是根据本发明实施例的仿射图像块中三个不重合像素点的示意图；
图7是根据本发明实施例的仿射图像块的另一示意图；
图8是根据本发明实施例的视频图像编码的方法的再一示意性流程图；
图9是根据本发明实施例的视频图像编码的方法的再一示意性流程图；
图10是根据本发明实施例的视频图像编码的方法的再一示意性流程图；
图11是根据本发明实施例的仿射图像块的再一示意图；
图12是根据本发明实施例的视频图像解码的方法的示意性流程图；
图13是根据本发明实施例的视频图像解码的方法的另一示意性流程图；
图14是根据本发明实施例的视频图像解码的方法的再一示意性流程图；
图15是根据本发明实施例的视频图像解码的方法的再一示意性流程图；
图16是根据本发明实施例的视频图像解码的方法的再一示意性流程图；
图17是根据本发明实施例的视频图像解码的方法的再一示意性流程图；
图18是根据本发明实施例的视频图像解码的方法的再一示意性流程图；
图19是根据本发明实施例的编码设备的示意性框图；
图20是根据本发明实施例的编码设备的另一示意性框图；
图21是根据本发明实施例的解码设备的示意性框图；
图22是根据本发明实施例的解码设备的另一示意性框图；
图23是根据本发明另一实施例的编码设备的示意性框图；
图24是根据本发明另一实施例的解码设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1示出了根据本发明实施例的视频图像编码的方法的示意性流程图。图1所示的方法可以由编码设备执行，例如编码器，具体地，如图1所示，方法1000包括：
S1100，确定仿射图像块的运动矢量差异；
S1200，确定该仿射图像块的运动矢量精度；
S1300，根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；
S1400，根据该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。
具体而言，编码设备根据确定的控制点，确定仿射图像块的运动矢量差异，并确定该仿射图像块的运动矢量精度，根据确定的运动矢量差异、运动矢量精度和控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行编码处理。
因此，本发明实施例的视频图像编码的方法，编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
应理解，在本发明实施例中，该仿射图像(Affine)块为图像块内所有单元的运动矢量符合相同的仿射模型，例如，同一个仿射模型，并可以用相同的参数，例如同一组参数来表示的图像块。其中单元是指一组像素，例如，可以是一个像素点，也可以是1×3，2×4等的块结构，本发明对此不作限定。
应理解，在本发明实施例中，仿射运动补偿子图像(Affine MotionCompensation，简称为“Affine-MC”)块为Affine块内部划分出来的用来做运动补偿预测的子图像块，每个Affine-MC块的大小可以相同也可以不同，本发明对此不作限定。
还应理解，在本发明实施例中，可以选择任意不重合的像素点作为控制点来确定Affine块的运动矢量差异，本发明对此不作限定。
优选地，如图2所示，S1100包括：
S1101，根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；
S1102，根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
应理解，在本发明实施例中，该运动矢量差异的第一分量指该运动矢量差异的水平分量，该运动矢量差异的第二分量指该运动矢量差异的竖直分量。
还应理解，在本发明实施例中，第一、第二、第三和第四只是为了区分像素点，而不应该对本发明的保护范围构成任何限定，例如，第一控制点也可以称为第二控制点，第二控制点可以成为第一控制点等。
在本发明实施例中，可选地，该第一控制点和该第三控制点为同一个像素点，也就是说，选取的控制点的个数为3个，并且3个控制点中的一个控制点与其他2个控制点中的一个控制点位于同一水平线上，与其他2个控制点中的另一个控制点位于同一竖直线上。
在本发明实施例中，可选地，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该Affine块的顶点，假设一个Affine块的4个顶点分别标记为左上角顶点、左下角顶点、右上角顶点和右下角顶点，可以选择位于两个正交方向上的任意三个顶点来确定该Affine块的运动矢量差异，例如，可以选择左上角顶点、左下角顶点和右上角顶点，可以选择左上角顶点、右上角顶点和右下角顶点，本发明对此不作限定。
在本发明实施例中，可选地，可以将第一控制点与第二控制点的运动矢量的两个方向上的分量中任意一个方向上的分量的差值确定为该Affine块的运动矢量差异的第一分量，可以将第三控制点与第四控制点的运动矢量的两个方向上的分量中任意一个方向上的分量的差值确定为该Affine块的运动矢量差异的第二分量；还可以根据实际对编码复杂度和编码性能的要求，选择介于第一控制点与第二控制点的运动矢量的两个方向上的分量的两个差值之间的数值确定为该第一分量，选择介于第三控制点与第四控制点的运动矢量的两个方向上的分量的两个差值之间的数值确定为该第二分量，本发明对此不作限定。
可选地，如图3所示，S1101具体包括：
S1103，确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；
S1104，将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；
相应的，如图4所示，S1102具体包括：
S1105，确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；
S1106，将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
也就是说，如果用vx(x,y)和vy(x,y)表示位置为(x,y)的像素点的运动矢量的水平分量和竖直分量，则可以根据公式(1)和(2)确定Affine块的运动矢量差异：
Δmvhor＝max(vx(x+w,y)-vx(x,y),vy(x+w,y)-vyx,y) (1)
Δmvver＝max(vx(x',y'+h)-vx(x',y'),vy(x',y'+h)-vy(x',y')) (2)
其中，max表示取最大值，Δmvhor表示Affine块的运动矢量差异的水平分量，Δmvver表示Affine块的运动矢量差异的竖直分量，w表示第一控制点与第二控制点的第一水平距离，h表示第三控制点与第四控制点的第一竖直距离。
在本发明实施例中，可选地，可以确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；
相应地，S1103具体为：根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；
S1105具体为：根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
应理解，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
在本发明实施例中，可选地，仿射变换模型可以采用现有技术中的6参数仿射变换模型，也可以采用4参数或2参数仿射变换模型，在6参数仿射变换模型中，假设(x,y)为像素点P在当前图像中的坐标，(x′,y′)为像素点P在参考图像中匹配的像素点P'的坐标，a,b,c,d,e,f为仿射变换参数。若已知仿射变换参数，即可求得像素点(x,y)在参考图像中的位置(x′,y′)，从而可以从参考图像中获得像素点的预测信号：
x′＝ax+by+e (3)
y′＝cx+dy+f (4)
通常情况下，仿射变换参数可以根据图像块中部分像素点的运动矢量计算得到，运动矢量的水平分量和竖直分量可分别表示为公式(5)和(6)：
vx＝x-x' (5)
vy＝y-y' (6)
将公式(3)带入公式(5)中，将公式(4)带入公式(6)中，得到坐标为(x,y)的像素点的运动矢量的水平分量和竖直分量分别为公式(7)和(8)：
vx＝(1-a)x-by-e (7)
vy＝(1-d)y-cx-f (8)
将公式(7)带入公式(1)中，将公式(8)带入公式(2)中，公式(1)和(2)分别转变为公式(9)和(10)：
Δmvhor＝max((1-a)w,-cw)
(9)
Δmvver＝max(-bh,(1-d)h) (10)
通过确定仿射变换参数a、b、c和d，以及控制点之间的距离就可以确定Affine块的运动矢量差异的第一分量和第二分量。
应理解，在采用4参数仿射变换模型或2参数仿射变换模型时，确定运动矢量差异的方法和采用6参数仿射变换模型时的确定方法本质上是相同的，为了简便，在此不再赘述。
在本发明实施例中，可选地，在编码过程中，仿射变换参数可以通过对各个系数进行迭代计算得到，比如将系数a加1，判断在该模型下运动补偿预测信号是否是最优。仿射变换参数也可以是根据邻近Affine块的仿射变换系数推导得到的。但本发明并不限于此。
在本发明实施例中，可选地，可以确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；
相应地，S1103具体为：将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；
S1105具体为：将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
具体而言，可以直接确定出控制点的运动矢量，通过将运动矢量的各分量分别作差，就可以直接得到Affine块的运动矢量差异的第一分量和第二分量。
例如，图5是根据本发明实施例的仿射图像块及控制点的示意图。其中两个控制点A和B在同一水平线上，距离为w，两个控制点C和D在同一竖直线上，距离为h，如果已知控制点A、B、C和D点的运动矢量，则可以根据公式(11)和(12)确定Affine块的运动矢量差异的第一分量和第二分量：
Δmvhor＝max(vxB-vxA,vyB-vyA) (11)
Δmvver＝max(vxC-vxD,vyC-vyD) (12)
在本发明实施例中，可选地，控制点A和C可以为同一个像素点。
在本发明实施例中，可选地，控制点A、B、C和D可以为Affine块的顶点，此时，控制点A和B的距离为Affine块的宽度W，控制点C和D的间距为Affine块的高度H。
在本发明实施例中，可选地，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该S1103和S1105具体为：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
具体而言，假设A、B和C是图像块中任意互相不重合的三个像素点，三个像素点的位置如图6所示，三个点的运动矢量分别为(vxA,vyA)、(vxB,vyB)和(vxC,vyC)。点A与点B在水平方向的距离是w1，竖直方向的距离是h1，点A与点C在水平方向的距离是w2，竖直方向的距离是h2，点B与点C的在水平方向的距离为w2-w1，竖直方向的距离是h1+h2。假设在水平方向上相邻的两个像素点的运动矢量在水平方向的各分量的差异分别为Δmvxhor和Δmvyhor，在竖直方向上相邻的两个像素点的运动矢量在竖直方向的各分量的差异分别为Δmvxver和Δmvyver，由于图像块内运动矢量是线性变化的，则可以通过确定A、B和C点的运动矢量确定Δmvxhor、Δmvyhor、Δmvxver和Δmvyver，从而可以确定图像块的相邻像素点的运动矢量差异。具体可以根据公式(13)～(16)确定：
vxB＝vxA+w1·Δmvxhor+h1·Δmvxver (13)
vyB＝vyA+w1·Δmvyhor+h1·Δmvyver (14)
vxC＝vxA+w2·Δmvxhor+h2·Δmvxver (15)
vyC＝vyA+w2·Δmvyhor+h2·Δmvyver (16)
还可以根据公式(13)和(14)以及公式(17)和(18)确定：
vxC＝vxB+(w2-w1)·Δmvxhor+(h2+h1)·Δmvxver (17)
vyC＝vyB+(w2-w1)·Δmvyhor+(h2+h1)·Δmvyver (18)
在本发明实施例中，可选地，编码设备可以从通过运动估计搜索得到所有控制点的运动矢量；可以从周围图像块获得所有控制点的运动矢量；可以根据仿射变换模型计算出所有控制点的运动矢量；可以通过运动估计搜索得到部分控制点的运动矢量，从邻近图像块获得其他控制点的运动矢量；可以通过仿射运动估计搜索得到部分控制点的运动矢量，根据仿射变换模型计算得到其他控制点的运动矢量；可以从邻近图像块获得部分控制点的运动矢量，根据仿射变换模型计算出其他控制点的运动矢量；但本发明并不限于此。
可选地，在S1200中，可以将第三预设值确定为该仿射图像块的运动矢量精度；或根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
具体而言，Affine块的运动矢量的值可以是整数，此时称运动矢量是整像素精度，即像素精度为1；运动矢量的值也可以是非整数的，此时称运动矢量是亚像素精度，包括1/2、1/4、1/8等精度。图7所示的是一个4×4的图像块，其中×表示的是整像素位置的像素，采集得到的图像只有整像素位置的像素。O表示的是1/2精度位置的像素，需要通过整像素位置的像素进行插值来得到。其他精度位置的像素值需要使用整像素精度像素或1/2精度像素进一步插值来获得。若当前像素点的运动矢量是整数，则指向参考图像中×所在的位置，若当前像素点的运动矢量是1/2精度，则指向参考图像中O所在的位置。
Affine块的运动矢量精度指Affine块内所有像素点的运动矢量的最高精度。Affine块的运动矢量精度可以是预先设定好的，例如整像素精度、1/2、1/4、1/8、1/16等精度。也可以是根据图Affine块邻近图像块的特性来确定，例如若周围的图像较为平滑，可以预测当前Affine块也较为平滑，则可以选用较高的运动矢量精度，例如1/8、1/16精度等，反之选用较低的运动矢量精度，例如整像素精度、1/2精度等。获得的精度用MvAc来表示。
可选地，如图8所示，S1300具体包括：
S1301，将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；
S1302，将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
具体而言，通常获得的运动矢量差异Δmvhor和Δmvver较小，表示每个像素点的运动矢量的精度过高，例如1/32，1/64等。过高的运动矢量精度对视频的压缩性能贡献不大，且会带来巨大的计算量。因此，根据之前获得的期望的运动矢量精度MvAc，来对Affine块进行划分，划分成多个Affine-MC块，保证每个Affine-MC块的运动矢量精度达到MvAc。
在本发明实施例中，可选地，假设第一控制点与第二控制点之间的水平距离为w，第三控制点与第四控制点之间的竖直距离为h，假设Affine-MC块的宽度为aMcW，高度为aMcH，则可以根据公式(19)确定aMcW和aMcH：
等同于：
在本发明实施中，可选地，在该第一控制点、该第二控制点、该第三控制点和该第四控制点为Affine块的顶点时，该第一控制点与该第二控制点之间的水平距离为Affine块的宽度W，该第三控制点与该第四控制点之间的竖直距离为Affine块的高度H。则Affine-MC块的宽度aMcW和高度aMcH，可以根据公式(20)确定：
等同于：
在本发明实施例中，可选地，在该第一控制点与该第二控制点为相邻的控制点，该第三控制点与该第四控制点为相邻的控制点时，该第一控制点与该第二控制点之间的第一水平距离为1，即第一控制点与第二控制点之间间隔一个整数的像素间隔；该第三控制点与该第四控制点之间的第一竖直距离为1，即第三控制点与第四控制点之间间隔一个整数的像素间隔。则公式(19)可以简化为公式(21)：
等同于：
因此，本发明实施例的视频图像编码的方法，编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，在保持仿射变换运动补偿预测性能的前提下，降低编码的复杂度，提高编码性能。
可选地，如图9所示，S1300包括：
S1303，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
S1304，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
具体而言，为了编码过程中的硬件实现，可以对Affine-MC块的宽度和高度设置一个下限值，在计算出的宽度或高度小于该预设的下限值时，将该预设的下限值确定为Affine-MC块的宽度或高度，优选地，可以将该下限值均设定为4，但也可以根据实际需要设置为其他数值，例如，可以将宽度的下限值设定为2，高度的设定值设定为3，或者宽度的下限值设定为1，高度的设定值设定为2，本发明对此不作限定。
可选地，如图10所示，S1400包括：
S1401，确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；
S1402，根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；
S1403，根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；
S1404，对该每个仿射运动补偿子图像块的预测残差信号进行编码。
应理解，在本发明实施例中，每个Affine-MC块可能包含多个像素点，需要从每个Affine-MC中选取一个像素点的运动矢量作为该Affine-MC块的运动矢量。
可选地，在S1401中，可以选取Affine-MC块的中心位置处的像素点的运动矢量作为该Affine-MC块的运动矢量，可以将Affine-MC块内所有像素点的运动矢量的平均值作为该Affine-MC块的运动矢量，可以选取位于Affine-MC块的左上角的像素点的运动矢量作为该Affine-MC块的运动矢量，但本发明并不限于此。
在本发明实施例中，可选地，对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
在本发明实施例中，可选地，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
具体而言，如图11所示，粗实线块表示Affine块，细实线块表示Affine-MC块，虚线框表示相邻的Affine-MC块的边界的像素，交叉点表示像素。其中，图11中虚线框的区域包含相邻Affine-MC块各自在边界的两行或者两列像素，也可以包含各自边界的一行或一列，三行或三列等。由于相邻的Affine-MC块的运动矢量可能不同，那么从参考图像中取得的预测信号在参考图像中不相邻，这会导致相邻Affine-MC块边界的预测信号之间的不连续，从而导致残差的不连续，影响残差的编码性能，因此考虑对Affine-MC块边界处的运动补偿预测信号进行滤波。
重建信号一般是将运动补偿预测信号与重建的残差信号相加而得到。残差信号一般使用有损编码，这会导致重建的残差信号与原始的残差信号之间存在失真。相邻Affine-MC块的边界处的像素的失真方向可能不一致，例如第一个Affine-MC块右边的像素由于失真变大，右边相邻的Affine-MC块左边的像素由于失真变小，这会导致在Affine-MC块的重建像素的边界处像素值不连续，影响主观和客观的效果。因此需要对重建信号进行滤波。
在本发明实施例中，可选地，可以通过低通滤波器进行滤波，使得边界区域的像素值变化的更平缓，例如使用高斯滤波器进行滤波，但本发明并不限于此。
在本发明实施例中，可选地，可以采用重叠分块运动补偿(Overlapped blockmotion compensation，简称为“OBMC”方法进行滤波。对待滤波的像素使用其邻近的Affine-MC块的运动矢量做运动补偿预测，将获得的运动补偿预测信号与使用待滤波像素自己的运动矢量获得的运动补偿预测信号进行加权平均，得到最终的运动补偿预测信号。
为了更好的证明本发明实施例相对于现有技术的有益效果，采用LDP测试结构测试了采用本发明实施例的方法和现有技术中的方法进行编码时的编码复杂度和编码性能，结果如表1所示：
表1
通过表1可以看写出，采用本发明实施例的视频图像编码的方法，能够提升编码性能，节约编码时间。
因此，本发明实施例的视频图像编码的方法，编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
以上结合图1至图11详细描述了根据本发明实施例的视频图像编码的方法，下面将结合图12至图18详细描述根据本发明实施例的视频图像解码的方法。应注意，解码端的有关操作本质上与编码端的一致，为了避免重复，在此不再赘述。
图12示出了根据本发明实施例的视频图像解码的方法的示意性流程图。图12所示的方法可以由解码设备执行，例如解码器，具体地，如图12所示，方法2000包括：
S2100，确定仿射图像块的运动矢量差异；
S2200，确定该仿射图像块的运动矢量精度；
S2300，根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；
S2400，根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
具体而言，解码设备根据确定的控制点，确定仿射图像块的运动矢量差异，并确定该仿射图像块的运动矢量精度，根据确定的运动矢量差异、运动矢量精度和控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行解码处理。
因此，本发明实施例的视频图像解码的方法，解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行解码处理。由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
优选地，如图13所示，S2100包括：
S2101，根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；
S2102，根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
应理解，在本发明实施例中，该运动矢量差异的第一分量指该运动矢量差异的水平分量，该运动矢量差异的第二分量指该运动矢量差异的竖直分量。
可选地，如图14所示，S2101具体包括：
S2103，确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；
S2104，将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；
相应的，如图15所示，S2102具体包括：
S2105，确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；
S2106，将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
在本发明实施例中，可选地，可以确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；
相应地，S2103具体为：根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；
S2105具体为：根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，可以确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；
相应地，S2103具体为：将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；
S2105具体为：将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值。
在本发明实施例中，可选地，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该S2103和S2105具体为：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，解码设备可以从码流中解析得到所有控制点的运动矢量；可以从周围图像块获得所有控制点的运动矢量；可以根据仿射变换模型计算出所有控制点的运动矢量；可以从码流中解析得到部分控制点的运动矢量，从邻近图像块获得其他控制点的运动矢量；可以码流中解析得到部分控制点的运动矢量，根据仿射变换模型计算得到其他控制点的运动矢量；可以从邻近图像块获得部分控制点的运动矢量，根据仿射变换模型计算出其他控制点的运动矢量；但本发明并不限于此。
可选地，在S2200中，可以将第三预设值确定为该仿射图像块的运动矢量精度；或根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
可选地，如图16所示，S2300具体包括：
S2301，将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；
S2302，将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，如图17所示，S2300包括：
S2303，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的水平分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
S2304，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的竖直分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的竖直分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，如图18所示，S2400包括：
S2401，确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；
S2402，根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；
S2403，根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；
S2404，对该每个仿射运动补偿子图像块的预测残差信号进行解码。
在本发明实施例中，可选地，对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
在本发明实施例中，可选地，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。因此，本发明实施例的视频图像解码的方法，解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行解码处理。由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
可选地，本发明中解码方法也可以是：
解析码流，以获取仿射图像块的运动矢量差异以及该仿射图像块的运动矢量精度，其中，该仿射图像块内的像素点具有相同的仿射变换参数；
根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；
根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
或者；
解析码流，获取仿射图像块信息；
根据该仿射图像块信息确定该仿射图像块中的仿射运动补偿子图像块的大小；
根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
通过这种方式解码端可以无需重新计算，而直接用编码端传至解码端的参数来确定仿射运动补偿子图像块的大小，从而进一步降低计算的复杂度。
下面将结合图19和图20详细描述本发明实施例的编码设备。如图19所示，该编码设备10包括：
第一确定模块11，用于确定仿射图像块的运动矢量差异；
第二确定模块12，用于确定该仿射图像块的运动矢量精度；
第三确定模块13，用于根据该第一确定模块11确定的该运动矢量差异、该第二确定模块12确定的该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；
编码模块14，用于根据该第三确定模块13确定的该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。
具体而言，编码设备根据确定的控制点，确定仿射图像块的运动矢量差异，并确定该仿射图像块的运动矢量精度，根据确定的运动矢量差异、运动矢量精度和控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行编码处理。
因此，本发明实施例的编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
在本发明实施例中，可选地，该第一确定模块11具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
在本发明实施例中，可选地，该第一确定模块11具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
在本发明实施例中，可选地，该第一确定模块11具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，该第一确定模块11具体用于：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值；
在本发明实施例中，可选地，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该第一确定模块11具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，该第三确定模块13具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
在本发明实施例中，可选地，该第三确定模块13具体用于：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
在本发明实施例中，可选地，该第一控制点与该第三控制点为同一个像素点。
在本发明实施例中，可选地，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
在本发明实施例中，可选地，该第一预设值为4，和/或，该第二预设值为4。
在本发明实施例中，可选地，该第二确定模块12具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
在本发明实施例中，可选地，该编码模块14具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行编码。
在本发明实施例中，可选地，如图20所示，该编码设备10还包括：
滤波模块15，用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
在本发明实施例中，可选地，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
应理解，根据本发明实施例的编码设备10可对应于执行本发明实施例中的视频图像编码的方法1000，并且编码设备10中的各个模块的上述和其它操作和/或功能分别为了实现图1至图11中的各个方法的相应流程，为了简洁，在此不再赘述。
因此，本发明实施例的编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
下面将结合图21和图22详细描述本发明实施例的解码设备。如图21所示，该解码设备20包括：
第一确定模块21，用于确定仿射图像块的运动矢量差异；
第二确定模块22，用于确定该仿射图像块的运动矢量精度；
第三确定模块23，用于根据该第一确定模块21确定的该运动矢量差异、该第二确定模块22确定的该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；
解码模块24，用于根据该第三确定模块23确定的该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
具体而言，解码设备根据确定的控制点，确定仿射图像块的运动矢量差异，并确定该仿射图像块的运动矢量精度，根据确定的运动矢量差异、运动矢量精度和控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，根据确定的该大小，对该仿射图像块进行解码处理。
因此，本发明实施例的解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行解码处理，由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
在本发明实施例中，可选地，该第一确定模块21具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
在本发明实施例中，可选地，该第一确定模块21具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
在本发明实施例中，可选地，该第一确定模块21具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，该第一确定模块21具体用于：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值；
在本发明实施例中，可选地，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该第一确定模块21具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
在本发明实施例中，可选地，该第三确定模块23具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
在本发明实施例中，可选地，该第三确定模块23具体用于：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
在本发明实施例中，可选地，该第一控制点与该第三控制点为同一个像素点。
在本发明实施例中，可选地，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
在本发明实施例中，可选地，该第一预设值为4，和/或，该第二预设值为4。
在本发明实施例中，可选地，该第二确定模块22具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
在本发明实施例中，可选地，该解码模块24具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行解码。
在本发明实施例中，可选地，如图22所示，该解码设备20还包括：
滤波模块25，用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
在本发明实施例中，可选地，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
应理解，根据本发明实施例的解码设备20可对应于执行本发明实施例中的视频图像解码的方法2000，并且解码设备20中的各个模块的上述和其它操作和/或功能分别为了实现图12至图18中的各个方法的相应流程，为了简洁，在此不再赘述。
因此，本发明实施例的解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该大小对该仿射图像块进行解码处理，由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
如图23所示，本发明实施例还提供了一种编码设备30，包括处理器31、存储器32和总线系统33。其中，处理器31和存储器32通过总线系统33相连，该存储器32用于存储指令，该处理器31用于执行该存储器32存储的指令。编码设备30的存储器32存储程序代码，且处理器31可以调用存储器32中存储的程序代码执行以下操作：确定仿射图像块的运动矢量差异；确定该仿射图像块的运动矢量精度；根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；根据该仿射运动补偿子图像块的大小，对该仿射图像块进行编码处理。
因此，本发明实施例的编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
应理解，在本发明实施例中，该处理器31可以是中央处理单元(CentralProcessing Unit，简称为“CPU”)，该处理器31还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
该存储器32可以包括只读存储器和随机存取存储器，并向处理器31提供指令和数据。存储器32的一部分还可以包括非易失性随机存取存储器。例如，存储器32还可以存储设备类型的信息。
该总线系统33除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图中将各种总线都标为总线系统33。
在实现过程中，上述方法的各步骤可以通过处理器31中的硬件的集成逻辑电路或者软件形式的指令完成。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器32，处理器31读取存储器32中的信息，结合其硬件完成上述方法的步骤。为避免重复，这里不再详细描述。
可选地，作为一个实施例，该处理器31具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
可选地，作为一个实施例，该处理器31具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
可选地，作为一个实施例，该处理器31具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
可选地，作为一个实施例，该处理器31具体用于：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值；
可选地，作为一个实施例，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该处理器31具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
可选地，作为一个实施例，该处理器31具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，作为一个实施例，该处理器31具体用于：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，作为一个实施例，该第一控制点与该第三控制点为同一个像素点。
可选地，作为一个实施例，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
可选地，作为一个实施例，该第一预设值为4，和/或，该第二预设值为4。
可选地，作为一个实施例，该处理器31具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
可选地，作为一个实施例，该处理器31具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行编码。
可选地，作为一个实施例，该处理器31：还用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
可选地，作为一个实施例，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
应理解，根据本发明实施例的编码设备30可对应于本发明实施例中的编码设备10，并可以对应于执行根据本发明实施例的方法1000中的相应主体，并且编码设备30中的各个模块的上述和其它操作和/或功能分别为了实现图1至图11中的各个方法的相应流程，为了简洁，在此不再赘述。
因此，本发明实施例的编码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该仿射运动补偿子图像块的大小对该仿射图像块进行编码处理，由此，在编码过程中能够通过选取合适大小的子图像块，降低编码的复杂度，提高编码性能。
如图24所示，本发明实施例还提供了一种解码设备40，包括处理器41、存储器42和总线系统43。其中，处理器41和存储器42通过总线系统43相连，该存储器42用于存储指令，该处理器41用于执行该存储器42存储的指令。解码设备40的存储器42存储程序代码，且处理器41可以调用存储器42中存储的程序代码执行以下操作：确定仿射图像块的运动矢量差异；确定该仿射图像块的运动矢量精度；根据该运动矢量差异、该运动矢量精度和该仿射图像块中的控制点之间的距离，确定该仿射图像块中的仿射运动补偿子图像块的大小，该控制点为用于确定该运动矢量差异的像素点；根据该仿射运动补偿子图像块的大小，对该仿射图像块进行解码处理。
因此，本发明实施例的解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该大小对该仿射图像块进行解码处理。由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
应理解，在本发明实施例中，该处理器41可以是中央处理单元(CentralProcessing Unit，简称为“CPU”)，该处理器41还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
该存储器42可以包括只读存储器和随机存取存储器，并向处理器41提供指令和数据。存储器42的一部分还可以包括非易失性随机存取存储器。例如，存储器42还可以存储设备类型的信息。
该总线系统43除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图中将各种总线都标为总线系统43。
在实现过程中，上述方法的各步骤可以通过处理器41中的硬件的集成逻辑电路或者软件形式的指令完成。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器42，处理器41读取存储器42中的信息，结合其硬件完成上述方法的步骤。为避免重复，这里不再详细描述。
可选地，作为一个实施例，该处理器41具体用于：根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定该运动矢量差异的第一分量；根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定该运动矢量差异的第二分量；
其中，该第一控制点与该第二控制点之间具有第一水平距离，该第三控制点与该第四控制点之间具有第一竖直距离。
可选地，作为一个实施例，该处理器41具体用于：确定该第一控制点与该第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；将该第一水平分量差值和该第一竖直分量差值中的最大值确定为该运动矢量差异的第一分量；确定该第三控制点与该第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；将该第二水平分量差值和该第二竖直分量差值中的最大值确定为该运动矢量差异的第二分量。
可选地，作为一个实施例，该处理器41具体用于：确定该仿射图像块内的像素点的仿射变换参数，该仿射图像块内的像素点具有相同的仿射变换参数；根据该仿射变换参数和该第一水平距离，确定该第一水平分量差值和该第一竖直分量差值；根据该仿射变换参数和该第一竖直距离，确定该第二水平分量差值和该第二竖直分量差值。
可选地，作为一个实施例，该处理器41具体用于：确定该第一控制点的运动矢量、该第二控制点的运动矢量、该第三控制点的运动矢量和该第四控制点的运动矢量；将该第一控制点的运动矢量的水平分量与该第二控制点的运动矢量的水平分量的差值确定为该第一水平分量差值；将该第一控制点的运动矢量的竖直分量和该第二控制点的运动矢量的竖直分量的差值，确定为该第一竖直分量差值；将该第三控制点的运动矢量的水平分量与该第四控制点的运动矢量的水平分量的差值确定为该第二水平分量差值；将该第三控制点的运动矢量的竖直分量和该第四控制点的运动矢量的竖直分量的差值，确定为该第二竖直分量差值；
可选地，作为一个实施例，该第一控制点与该第二控制点为相邻的两个像素点，该第三控制点与该第四控制点为相邻的两个像素点；
其中，该处理器41具体用于：确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，该第一像素点、该第二像素点和该第三像素点为互相不重合的像素点；确定该第一像素点与该第二像素点之间的第二水平距离和第二竖直距离；确定该第一像素点与该第三像素点之间的第三水平距离和第三竖直距离；根据该第一像素点的运动矢量、该第二像素点的运动矢量、该第三像素点的运动矢量、该第二水平距离、该第二竖直距离、该第三水平距离和该第三竖直距离，确定该第一水平分量差值、该第一竖直分量差值、该第二水平分量差值和该第二竖直分量差值。
可选地，作为一个实施例，该处理器41具体用于：将该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值确定为该仿射运动补偿子图像块的水平方向的长度；将该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，作为一个实施例，该处理器41具体用于：
在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值大于或等于第一预设值时，将该比值确定为该仿射运动补偿子图像块的水平方向的长度，或，在该运动矢量精度与该第一水平距离的乘积与该运动矢量差异的第一分量的比值小于该第一预设值时，将该第一预设值确定为该仿射运动补偿子图像块的水平方向的长度；
在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值大于或等于第二预设值时，将该比值确定为该仿射运动补偿子图像块的竖直方向的长度，或，在该运动矢量精度与该第一竖直距离的乘积与该运动矢量差异的第二分量的比值小于该第二预设值时，将该第二预设值确定为该仿射运动补偿子图像块的竖直方向的长度。
可选地，作为一个实施例，该第一控制点与该第三控制点为同一个像素点。
可选地，作为一个实施例，该第一控制点、该第二控制点、该第三控制点和该第四控制点为该仿射图像块的顶点。
可选地，作为一个实施例，该第一预设值为4，和/或，该第二预设值为4。
可选地，作为一个实施例，该处理器41具体用于：将第三预设值确定为该仿射图像块的运动矢量精度；或，根据该仿射图像块的邻近图像块的特性确定该仿射图像块的运动矢量精度，该邻近图像块为与该仿射图像块在空间上和/或时间上相邻的图像块。
可选地，作为一个实施例，该处理器41具体用于：确定该仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；根据该每个仿射运动补偿子图像块的运动矢量，确定该每个仿射运动补偿子图像块的运动补偿预测信号；根据该每个仿射运动补偿子图像块的运动补偿预测信号，确定该每个仿射运动补偿子图像块的预测残差信号；对该每个仿射运动补偿子图像块的预测残差信号进行解码。
可选地，作为一个实施例，该处理器41：还用于对该每个仿射运动补偿子图像块的边界像素点的信号进行滤波，该边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
可选地，作为一个实施例，该边界像素点的信号包括运动补偿预测信号和/或重建信号，该重建信号为运动补偿预测信号与重建的残差信号之和。
应理解，根据本发明实施例的解码设备40可对应于本发明实施例中的解码设备20，并可以对应于执行根据本发明实施例的方法2000中的相应主体，并且解码设备40中的各个模块的上述和其它操作和/或功能分别为了实现图12至图18中的各个方法的相应流程，为了简洁，在此不再赘述。
因此，本发明实施例的解码设备通过确定的仿射图像块的运动矢量差异、运动矢量精度和控制点之间的距离，确定仿射运动补偿子图像块的大小，根据该大小对该仿射图像块进行解码处理。由此，在解码过程中能够通过选取合适大小的子图像块，降低解码的复杂度，提高解码性能。
应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。
在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
另外，本文中术语“系统”和“网络”在本文中常可互换使用。应理解，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
在本申请所提供的实施例中，应理解，“与A相应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其它信息确定B。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称为“ROM”)、随机存取存储器(Random Access Memory，简称为“RAM”)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (49)

1.一种视频图像处理的方法，其特征在于，包括：
确定仿射图像块中的控制点之间的运动矢量差异；
确定所述仿射图像块的运动矢量精度；
根据所述运动矢量差异、所述运动矢量精度和所述仿射图像块中的控制点之间的距离，确定所述仿射图像块中的仿射运动补偿子图像块的大小，所述控制点为用于确定所述运动矢量差异的像素点；
根据所述仿射运动补偿子图像块的大小，对所述仿射图像块进行处理，所述处理包括解码处理或者编码处理。
2.根据权利要求1所述的方法，其特征在于，所述确定仿射图像块中的控制点之间的运动矢量差异，包括：
根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定所述运动矢量差异的第一分量；
根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定所述运动矢量差异的第二分量；
其中，所述第一控制点与所述第二控制点之间具有第一水平距离，所述第三控制点与所述第四控制点之间具有第一竖直距离。
3.根据权利要求2所述的方法，其特征在于，所述确定所述仿射图像块中的仿射运动补偿子图像块的大小包括：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述第一水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述第一竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
4.根据权利要求3所述的方法，其特征在于，所述确定所述仿射图像块中的仿射运动补偿子图像块的大小包括：
将所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值确定为所述仿射运动补偿子图像块的水平方向的长度；
将所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值确定为所述仿射运动补偿子图像块的竖直方向的长度。
5.根据权利要求4所述的方法，其特征在于，所述确定所述仿射图像块中的仿射运动补偿子图像块的大小包括：
当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值大于或等于第一预设值时，将所述比值确定为所述仿射运动补偿子图像块的水平方向的长度，或，当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值小于所述第一预设值时，将所述第一预设值确定为所述仿射运动补偿子图像块的水平方向的长度；
在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值大于或等于第二预设值时，将所述比值确定为所述仿射运动补偿子图像块的竖直方向的长度，或，在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值小于所述第二预设值时，将所述第二预设值确定为所述仿射运动补偿子图像块的竖直方向的长度。
6.根据权利要求2至5中任一项所述的方法，其特征在于，所述确定所述运动矢量差异的第一分量，包括：
确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；
将所述第一水平分量差值和所述第一竖直分量差值中的最大值确定为所述运动矢量差异的第一分量；
其中，所述确定所述运动矢量差异的第二分量，包括：
确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；
将所述第二水平分量差值和所述第二竖直分量差值中的最大值确定为所述运动矢量差异的第二分量。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
确定所述仿射图像块内的像素点的仿射变换参数，所述仿射图像块内的像素点具有相同的仿射变换参数；
其中，所述确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：
根据所述仿射变换参数和所述第一水平距离，确定所述第一水平分量差值和所述第一竖直分量差值；
其中，所述确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：
根据所述仿射变换参数和所述第一竖直距离，确定所述第二水平分量差值和所述第二竖直分量差值。
8.根据权利要求6所述的方法，其特征在于，所述方法还包括：
确定所述第一控制点的运动矢量、所述第二控制点的运动矢量、所述第三控制点的运动矢量和所述第四控制点的运动矢量；
其中，所述确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值，包括：
将所述第一控制点的运动矢量的水平分量与所述第二控制点的运动矢量的水平分量的差值确定为所述第一水平分量差值；
将所述第一控制点的运动矢量的竖直分量和所述第二控制点的运动矢量的竖直分量的差值，确定为所述第一竖直分量差值；
其中，所述确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：
将所述第三控制点的运动矢量的水平分量与所述第四控制点的运动矢量的水平分量的差值确定为所述第二水平分量差值；
将所述第三控制点的运动矢量的竖直分量和所述第四控制点的运动矢量的竖直分量的差值，确定为所述第二竖直分量差值。
9.根据权利要求6所述的方法，其特征在于，所述第一控制点与所述第二控制点为相邻的两个像素点，所述第三控制点与所述第四控制点为相邻的两个像素点；
其中，所述确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；所述确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值，包括：
确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，所述第一像素点、所述第二像素点和所述第三像素点为互相不重合的像素点；
确定所述第一像素点与所述第二像素点之间的第二水平距离和第二竖直距离；
确定所述第一像素点与所述第三像素点之间的第三水平距离和第三竖直距离；
根据所述第一像素点的运动矢量、所述第二像素点的运动矢量、所述第三像素点的运动矢量、所述第二水平距离、所述第二竖直距离、所述第三水平距离和所述第三竖直距离，确定所述第一水平分量差值、所述第一竖直分量差值、所述第二水平分量差值和所述第二竖直分量差值。
10.根据权利要求2至5中任一项所述的方法，其特征在于，所述第一控制点与所述第三控制点为同一个像素点。
11.根据权利要求2至5中任一项所述的方法，其特征在于，所述第一控制点、所述第二控制点、所述第三控制点和所述第四控制点为所述仿射图像块的顶点。
12.根据权利要求5所述的方法，其特征在于，所述第一预设值为4，和/或，所述第二预设值为4。
13.根据权利要求1至5中任一项所述的方法，其特征在于，所述确定所述仿射图像块的运动矢量精度，包括：
将第三预设值确定为所述仿射图像块的运动矢量精度；或，
根据所述仿射图像块的邻近图像块的特性确定所述仿射图像块的运动矢量精度，所述邻近图像块为与所述仿射图像块在空间上和/或时间上相邻的图像块。
14.根据权利要求1至5中任一项所述的方法，其特征在于，所述根据所述仿射运动补偿子图像块的大小，对所述仿射图像块进行编码处理，包括：
确定所述仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；
根据所述每个仿射运动补偿子图像块的运动矢量，确定所述每个仿射运动补偿子图像块的运动补偿预测信号；
根据所述每个仿射运动补偿子图像块的运动补偿预测信号，确定所述每个仿射运动补偿子图像块的预测残差信号；
对所述每个仿射运动补偿子图像块的预测残差信号进行编码。
15.根据权利要求14所述的方法，其特征在于，所述方法还包括：
对所述每个仿射运动补偿子图像块的边界像素点的信号进行滤波，所述边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
16.根据权利要求15所述的方法，其特征在于，所述边界像素点的信号包括运动补偿预测信号和/或重建信号，所述重建信号为运动补偿预测信号与重建的残差信号之和。
17.根据权利要求1至5中任一所述的方法，其特征在于，所述确定所述仿射图像块中的仿射运动补偿子图像块的大小包括：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述仿射图像块中的控制点之间的水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述仿射图像块中的控制点之间的竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
18.一种编码设备，其特征在于，包括：
第一确定模块，用于确定仿射图像块中的控制点之间的运动矢量差异；
第二确定模块，用于确定所述仿射图像块的运动矢量精度；
第三确定模块，用于根据所述第一确定模块确定的所述运动矢量差异、所述第二确定模块确定的所述运动矢量精度和所述仿射图像块中的控制点之间的距离，确定所述仿射图像块中的仿射运动补偿子图像块的大小，所述控制点为用于确定所述运动矢量差异的像素点；
编码模块，用于根据所述第三确定模块确定的所述仿射运动补偿子图像块的大小，对所述仿射图像块进行编码处理。
19.根据权利要求18所述的编码设备，其特征在于，所述第一确定模块具体用于：
根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定所述运动矢量差异的第一分量；
根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定所述运动矢量差异的第二分量；
其中，所述第一控制点与所述第二控制点之间具有第一水平距离，所述第三控制点与所述第四控制点之间具有第一竖直距离。
20.根据权利要求19所述的编码设备，其特征在于，所述第三确定模块具体用于：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述第一水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述第一竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
21.根据权利要求20所述的编码设备，其特征在于，所述第三确定模块具体用于：
将所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值确定为所述仿射运动补偿子图像块的水平方向的长度；
将所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值确定为所述仿射运动补偿子图像块的竖直方向的长度。
22.根据权利要求20所述的编码设备，其特征在于，所述第三确定模块具体用于：
当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值大于或等于第一预设值时，将所述比值确定为所述仿射运动补偿子图像块的水平方向的长度，或，当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值小于所述第一预设值时，将所述第一预设值确定为所述仿射运动补偿子图像块的水平方向的长度；
在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值大于或等于第二预设值时，将所述比值确定为所述仿射运动补偿子图像块的竖直方向的长度，或，在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值小于所述第二预设值时，将所述第二预设值确定为所述仿射运动补偿子图像块的竖直方向的长度。
23.根据权利要求19至22中任一项所述的编码设备，其特征在于，所述第一确定模块具体用于：
确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；
将所述第一水平分量差值和所述第一竖直分量差值中的最大值确定为所述运动矢量差异的第一分量；
确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；
将所述第二水平分量差值和所述第二竖直分量差值中的最大值确定为所述运动矢量差异的第二分量。
24.根据权利要求23所述的编码设备，其特征在于，所述第一确定模块具体用于：
确定所述仿射图像块内的像素点的仿射变换参数，所述仿射图像块内的像素点具有相同的仿射变换参数；
根据所述仿射变换参数和所述第一水平距离，确定所述第一水平分量差值和所述第一竖直分量差值；
根据所述仿射变换参数和所述第一竖直距离，确定所述第二水平分量差值和所述第二竖直分量差值。
25.根据权利要求23所述的编码设备，其特征在于，所述第一确定模块具体用于：
确定所述第一控制点的运动矢量、所述第二控制点的运动矢量、所述第三控制点的运动矢量和所述第四控制点的运动矢量；
将所述第一控制点的运动矢量的水平分量与所述第二控制点的运动矢量的水平分量的差值确定为所述第一水平分量差值；
将所述第一控制点的运动矢量的竖直分量和所述第二控制点的运动矢量的竖直分量的差值，确定为所述第一竖直分量差值；
将所述第三控制点的运动矢量的水平分量与所述第四控制点的运动矢量的水平分量的差值确定为所述第二水平分量差值；
将所述第三控制点的运动矢量的竖直分量和所述第四控制点的运动矢量的竖直分量的差值，确定为所述第二竖直分量差值。
26.根据权利要求23所述的编码设备，其特征在于，所述第一控制点与所述第二控制点为相邻的两个像素点，所述第三控制点与所述第四控制点为相邻的两个像素点；
其中，所述第一确定模块具体用于：
确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，所述第一像素点、所述第二像素点和所述第三像素点为互相不重合的像素点；
确定所述第一像素点与所述第二像素点之间的第二水平距离和第二竖直距离；
确定所述第一像素点与所述第三像素点之间的第三水平距离和第三竖直距离；
根据所述第一像素点的运动矢量、所述第二像素点的运动矢量、所述第三像素点的运动矢量、所述第二水平距离、所述第二竖直距离、所述第三水平距离和所述第三竖直距离，确定所述第一水平分量差值、所述第一竖直分量差值、所述第二水平分量差值和所述第二竖直分量差值。
27.根据权利要求22所述的编码设备，其特征在于，所述第一预设值为4，和/或，所述第二预设值为4。
28.根据权利要求18至22中任一项所述的编码设备，其特征在于，所述第二确定模块具体用于：
将第三预设值确定为所述仿射图像块的运动矢量精度；或，
根据所述仿射图像块的邻近图像块的特性确定所述仿射图像块的运动矢量精度，所述邻近图像块为与所述仿射图像块在空间上和/或时间上相邻的图像块。
29.根据权利要求18至22中任一项所述的编码设备，其特征在于，所述编码模块具体用于：
确定所述仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；
根据所述每个仿射运动补偿子图像块的运动矢量，确定所述每个仿射运动补偿子图像块的运动补偿预测信号；
根据所述每个仿射运动补偿子图像块的运动补偿预测信号，确定所述每个仿射运动补偿子图像块的预测残差信号；
对所述每个仿射运动补偿子图像块的预测残差信号进行编码。
30.根据权利要求29所述的编码设备，其特征在于，所述编码模块还包括：
滤波模块，用于对所述每个仿射运动补偿子图像块的边界像素点的信号进行滤波，所述边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
31.根据权利要求30所述的编码设备，其特征在于，所述边界像素点的信号包括运动补偿预测信号和/或重建信号，所述重建信号为运动补偿预测信号与重建的残差信号之和。
32.根据权利要求18至22中任一所述的编码设备，其特征在于，所述运动矢量差异包括水平方向的第一分量和竖直方向的第二分量，所述第三确定模块具体用于：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述仿射图像块中的控制点之间的水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述仿射图像块中的控制点之间的竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
33.一种解码设备，其特征在于，包括：
第一确定模块，用于确定仿射图像块中的控制点之间的运动矢量差异；
第二确定模块，用于确定所述仿射图像块的运动矢量精度；
第三确定模块，用于根据所述第一确定模块确定的所述运动矢量差异、所述第二确定模块确定的所述运动矢量精度和所述仿射图像块中的控制点之间的距离，确定所述仿射图像块中的仿射运动补偿子图像块的大小，所述控制点为用于确定所述运动矢量差异的像素点；
解码模块，用于根据所述第三确定模块确定的所述仿射运动补偿子图像块的大小，对所述仿射图像块进行解码处理。
34.根据权利要求33所述的解码设备，其特征在于，所述第一确定模块具体用于：
根据位于同一水平线上的第一控制点与第二控制点的运动矢量的差值，确定所述运动矢量差异的第一分量；
根据位于同一竖直线上的第三控制点与第四控制点的运动矢量的差值，确定所述运动矢量差异的第二分量；
其中，所述第一控制点与所述第二控制点之间具有第一水平距离，所述第三控制点与所述第四控制点之间具有第一竖直距离。
35.根据权利要求34所述的解码设备，其特征在于，所述第三确定模块具体用于：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述第一水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述第一竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
36.根据权利要求35所述的解码设备，其特征在于，所述第三确定模块具体用于：
将所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值确定为所述仿射运动补偿子图像块的水平方向的长度；
将所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值确定为所述仿射运动补偿子图像块的竖直方向的长度。
37.根据权利要求35所述的解码设备，其特征在于，所述第三确定模块具体用于：
当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值大于或等于第一预设值时，将所述比值确定为所述仿射运动补偿子图像块的水平方向的长度，或，当所述运动矢量精度与所述第一水平距离的乘积与所述运动矢量差异的第一分量的比值小于所述第一预设值时，将所述第一预设值确定为所述仿射运动补偿子图像块的水平方向的长度；
在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值大于或等于第二预设值时，将所述比值确定为所述仿射运动补偿子图像块的竖直方向的长度，或，在所述运动矢量精度与所述第一竖直距离的乘积与所述运动矢量差异的第二分量的比值小于所述第二预设值时，将所述第二预设值确定为所述仿射运动补偿子图像块的竖直方向的长度。
38.根据权利要求34至37中任一所述的解码设备，其特征在于，所述第一确定模块具体用于：
确定所述第一控制点与所述第二控制点的运动矢量的第一水平分量差值和第一竖直分量差值；
将所述第一水平分量差值和所述第一竖直分量差值中的最大值确定为所述运动矢量差异的第一分量；
确定所述第三控制点与所述第四控制点的运动矢量的第二水平分量差值和第二竖直分量差值；
将所述第二水平分量差值和所述第二竖直分量差值中的最大值确定为所述运动矢量差异的第二分量。
39.根据权利要求38所述的解码设备，其特征在于，所述第一确定模块具体用于：
确定所述仿射图像块内的像素点的仿射变换参数，所述仿射图像块内的像素点具有相同的仿射变换参数；
根据所述仿射变换参数和所述第一水平距离，确定所述第一水平分量差值和所述第一竖直分量差值；
根据所述仿射变换参数和所述第一竖直距离，确定所述第二水平分量差值和所述第二竖直分量差值。
40.根据权利要求38所述的解码设备，其特征在于，所述第一确定模块具体用于：
确定所述第一控制点的运动矢量、所述第二控制点的运动矢量、所述第三控制点的运动矢量和所述第四控制点的运动矢量；
将所述第一控制点的运动矢量的水平分量与所述第二控制点的运动矢量的水平分量的差值确定为所述第一水平分量差值；
将所述第一控制点的运动矢量的竖直分量和所述第二控制点的运动矢量的竖直分量的差值，确定为所述第一竖直分量差值；
将所述第三控制点的运动矢量的水平分量与所述第四控制点的运动矢量的水平分量的差值确定为所述第二水平分量差值；
将所述第三控制点的运动矢量的竖直分量和所述第四控制点的运动矢量的竖直分量的差值，确定为所述第二竖直分量差值。
41.根据权利要求38所述的解码设备，其特征在于，所述第一控制点与所述第二控制点为相邻的两个像素点，所述第三控制点与所述第四控制点为相邻的两个像素点；
其中，所述第一确定模块具体用于：
确定第一像素点的运动矢量、第二像素点的运动矢量和第三像素点的运动矢量，所述第一像素点、所述第二像素点和所述第三像素点为互相不重合的像素点；
确定所述第一像素点与所述第二像素点之间的第二水平距离和第二竖直距离；
确定所述第一像素点与所述第三像素点之间的第三水平距离和第三竖直距离；
根据所述第一像素点的运动矢量、所述第二像素点的运动矢量、所述第三像素点的运动矢量、所述第二水平距离、所述第二竖直距离、所述第三水平距离和所述第三竖直距离，确定所述第一水平分量差值、所述第一竖直分量差值、所述第二水平分量差值和所述第二竖直分量差值。
42.根据权利要求34至37中任一项所述的解码设备，其特征在于，所述第一控制点与所述第三控制点为同一个像素点。
43.根据权利要求34至37中任一项所述的解码设备，其特征在于，所述第一控制点、所述第二控制点、所述第三控制点和所述第四控制点为所述仿射图像块的顶点。
44.根据权利要求37所述的解码设备，其特征在于，所述第一预设值为4，和/或，所述第二预设值为4。
45.根据权利要求33至37中任一项所述的解码设备，其特征在于，所述第二确定模块具体用于：
将第三预设值确定为所述仿射图像块的运动矢量精度；或，
根据所述仿射图像块的邻近图像块的特性确定所述仿射图像块的运动矢量精度，所述邻近图像块为与所述仿射图像块在空间上和/或时间上相邻的图像块。
46.根据权利要求33至37中任一项所述的解码设备，其特征在于，所述解码模块具体用于：
确定所述仿射运动补偿子图像块中每个仿射运动补偿子图像块的运动矢量；
根据所述每个仿射运动补偿子图像块的运动矢量，确定所述每个仿射运动补偿子图像块的运动补偿预测信号；
根据所述每个仿射运动补偿子图像块的运动补偿预测信号，确定所述每个仿射运动补偿子图像块的预测残差信号；
对所述每个仿射运动补偿子图像块的预测残差信号进行解码。
47.根据权利要求46所述的解码设备，其特征在于，所述解码设备还包括：
滤波模块，用于对所述每个仿射运动补偿子图像块的边界像素点的信号进行滤波，所述边界像素点为位于每个仿射运动补偿子图像块的边界的一行或多行像素点。
48.根据权利要求47所述的解码设备，其特征在于，所述边界像素点的信号包括运动补偿预测信号和/或重建信号，所述重建信号为运动补偿预测信号与重建的残差信号之和。
49.根据权利要求33至37中任一所述的解码设备，其特征在于，所述运动矢量差异包括水平方向的第一分量和竖直方向的第二分量，所述第三确定模块具体用于：
根据所述运动矢量差异的第一分量，所述运动矢量精度和所述仿射图像块中的控制点之间的水平距离，确定所述仿射运动补偿子图像块的水平方向的长度；和
根据所述运动矢量差异的第二分量，所述运动矢量精度和所述仿射图像块中的控制点之间的竖直距离，确定所述仿射运动补偿子图像块的竖直方向的长度。
CN201811104435.5A 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备 Active CN109005407B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811104435.5A CN109005407B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201811104435.5A CN109005407B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备
CN201510249484.8A CN106303543B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201510249484.8A Division CN106303543B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备

Publications (2)

Publication Number Publication Date
CN109005407A CN109005407A (zh) 2018-12-14
CN109005407B true CN109005407B (zh) 2023-09-01

Family

ID=57319464

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201811104435.5A Active CN109005407B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备
CN201510249484.8A Active CN106303543B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510249484.8A Active CN106303543B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备

Country Status (14)

Country Link
US (4) US10390036B2 (zh)
EP (2) EP3291557B1 (zh)
JP (4) JP6978944B2 (zh)
KR (3) KR102257653B1 (zh)
CN (2) CN109005407B (zh)
AU (1) AU2016264380B2 (zh)
CA (1) CA2985868C (zh)
ES (1) ES2900232T3 (zh)
HK (1) HK1244984A1 (zh)
MX (2) MX2017014652A (zh)
MY (1) MY183126A (zh)
RU (1) RU2689426C1 (zh)
SG (1) SG11201709418UA (zh)
WO (1) WO2016184261A1 (zh)

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965869B (zh) * 2015-08-29 2023-09-12 华为技术有限公司 图像预测的方法及设备
CN108965871B (zh) 2015-09-29 2023-11-10 华为技术有限公司 图像预测的方法及装置
CN107027040B9 (zh) 2016-01-29 2020-08-28 华为技术有限公司 一种去除块效应的滤波方法及装置
EP3523980A4 (en) * 2016-10-10 2019-08-14 Sharp Kabushiki Kaisha SYSTEMS AND METHOD FOR IMPLEMENTING A MOTION COMPENSATION FOR CODING VIDEO DATA
CN108271023B (zh) 2017-01-04 2021-11-19 华为技术有限公司 图像预测方法和相关设备
CN116708780A (zh) * 2017-08-11 2023-09-05 华为技术有限公司 视频图像编码和解码的方法、装置及设备
US10609384B2 (en) * 2017-09-21 2020-03-31 Futurewei Technologies, Inc. Restriction on sub-block size derivation for affine inter prediction
WO2019066574A1 (ko) * 2017-09-28 2019-04-04 삼성전자 주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
JPWO2019069602A1 (ja) * 2017-10-03 2020-09-10 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、プログラムおよび映像システム
WO2019069601A1 (ja) * 2017-10-03 2019-04-11 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法およびプログラム
WO2019072210A1 (en) * 2017-10-13 2019-04-18 Huawei Technologies Co., Ltd. RESTRICTION ON SUB-BLOCK SIZE DEDUCTION FOR AFFINE INTERPREDITION
CN109729352B (zh) * 2017-10-27 2020-07-21 华为技术有限公司 确定仿射编码块的运动矢量的方法和装置
CN109922347A (zh) * 2017-12-13 2019-06-21 财团法人工业技术研究院 视频编译码方法及其图像处理装置
US20190208211A1 (en) * 2018-01-04 2019-07-04 Qualcomm Incorporated Generated affine motion vectors
US10757417B2 (en) * 2018-01-20 2020-08-25 Qualcomm Incorporated Affine motion compensation in video coding
EP3741121A1 (en) 2018-02-14 2020-11-25 Huawei Technologies Co., Ltd. Adaptive interpolation filter
CN116781929A (zh) * 2018-04-01 2023-09-19 Lg电子株式会社 图像编码/解码设备和图像数据发送设备
WO2019194506A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 인터 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019199127A1 (ko) * 2018-04-12 2019-10-17 삼성전자 주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR102610110B1 (ko) 2018-04-13 2023-12-06 엘지전자 주식회사 비디오 처리 시스템에서 인터 예측 방법 및 장치
WO2019199152A1 (ko) * 2018-04-14 2019-10-17 엘지전자 주식회사 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
KR20230109772A (ko) 2018-04-24 2023-07-20 엘지전자 주식회사 비디오 코딩 시스템에서 인터 예측 방법 및 장치
WO2019231256A1 (ko) * 2018-05-30 2019-12-05 엘지전자 주식회사 어파인 움직임 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
WO2019235819A1 (ko) * 2018-06-04 2019-12-12 엘지전자 주식회사 비디오 신호를 처리하기 위한 방법 및 장치
EP3788787A1 (en) 2018-06-05 2021-03-10 Beijing Bytedance Network Technology Co. Ltd. Interaction between ibc and atmvp
US10999596B2 (en) * 2018-06-19 2021-05-04 Qualcomm Incorporated Unification of affine motion field derivation and affine motion compensation
GB2589221B (en) 2018-06-19 2023-03-22 Beijing Bytedance Network Tech Co Ltd Mode dependent MVD precision set
EP3808080A4 (en) * 2018-06-20 2022-05-25 HFI Innovation Inc. MOTION VECTOR BUFFER MANAGEMENT METHOD AND APPARATUS FOR A VIDEO CODING SYSTEM
CN113115046A (zh) 2018-06-21 2021-07-13 北京字节跳动网络技术有限公司 分量相关的子块分割
US11070813B2 (en) * 2018-06-29 2021-07-20 Intel Corporation Global motion estimation and modeling for accurate global motion compensation for efficient video processing or coding
KR20210016054A (ko) * 2018-06-30 2021-02-10 김기백 영상 부호화/복호화 방법 및 장치
KR20210024487A (ko) * 2018-07-01 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 효율적인 아핀 병합 모션 벡터 유도
BR112020026992A2 (pt) 2018-07-02 2021-04-06 Huawei Technologies Co., Ltd. Método de predição de vetor de movimento e aparelho relacionado
WO2020009449A1 (ko) * 2018-07-02 2020-01-09 엘지전자 주식회사 어파인 예측을 이용하여 비디오 신호를 처리하기 위한 방법 및 장치
GB2590228B (en) * 2018-08-04 2023-04-05 Beijing Bytedance Network Tech Co Ltd Clipping of updated MV or derived MV
WO2020045050A1 (ja) * 2018-08-27 2020-03-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
CN116647696A (zh) 2018-09-06 2023-08-25 Lg电子株式会社 图像解码方法、图像编码方法、存储介质和发送方法
CN110891179B (zh) * 2018-09-08 2023-11-14 北京字节跳动网络技术有限公司 计算运动矢量预测值
CN110891176B (zh) * 2018-09-10 2023-01-13 华为技术有限公司 基于仿射运动模型的运动矢量预测方法及设备
SI3681161T1 (sl) 2018-09-12 2024-03-29 Lg Electronics Inc., Postopek za dekodiranje in kodiranje slik z napravo na podlagi napovedovanja gibanja v enoti podbloka v sistemu za kodiranje slik
TWI827681B (zh) * 2018-09-19 2024-01-01 大陸商北京字節跳動網絡技術有限公司 具有自適應運動矢量分辨率的仿射模式的語法重用
US10834417B2 (en) * 2018-09-21 2020-11-10 Tencent America LLC Method and apparatus for video coding
WO2020060757A1 (en) * 2018-09-21 2020-03-26 Interdigital Vc Holdings, Inc. Translational and affine candidates in a unified list
WO2020060344A1 (ko) * 2018-09-21 2020-03-26 엘지전자 주식회사 영상 신호를 처리하기 위한 방법 및 장치
CN110944206B (zh) * 2018-09-23 2023-05-26 北京字节跳动网络技术有限公司 涉及仿射运动的一般应用
TWI818086B (zh) 2018-09-24 2023-10-11 大陸商北京字節跳動網絡技術有限公司 擴展Merge預測
CN112740663B (zh) * 2018-09-24 2022-06-14 华为技术有限公司 图像预测方法、装置以及相应的编码器和解码器
WO2020070730A2 (en) * 2018-10-06 2020-04-09 Beijing Bytedance Network Technology Co., Ltd. Size restriction based on affine motion information
WO2020070612A1 (en) 2018-10-06 2020-04-09 Beijing Bytedance Network Technology Co., Ltd. Improvement for temporal gradient calculating in bio
JP7157246B2 (ja) 2018-11-06 2022-10-19 北京字節跳動網絡技術有限公司 ジオメトリック分割を用いたインター予測のためのサイド情報信号通知方法
CN112997495B (zh) 2018-11-10 2024-02-20 北京字节跳动网络技术有限公司 当前图片参考中的取整
US11528484B2 (en) 2018-12-06 2022-12-13 Lg Electronics Inc. Method and apparatus for processing video signal on basis of inter prediction
JP2022028089A (ja) * 2018-12-17 2022-02-15 ソニーグループ株式会社 画像符号化装置、画像符号化方法、画像復号装置、および画像復号方法
WO2020135368A1 (zh) * 2018-12-24 2020-07-02 华为技术有限公司 一种帧间预测的方法和装置
CN111355961B (zh) * 2018-12-24 2023-11-03 华为技术有限公司 一种帧间预测的方法和装置
KR102349457B1 (ko) 2018-12-28 2022-01-10 삼성전자주식회사 움직임 벡터 차분의 부호화 방법 및 부호화 장치, 및 움직임 벡터 차분의 복호화 방법 및 복호화 장치
WO2020140862A1 (en) 2018-12-30 2020-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditional application of inter prediction with geometric partitioning in video processing
WO2020141910A1 (ko) * 2019-01-02 2020-07-09 엘지전자 주식회사 화면간 예측을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치
WO2020141935A1 (ko) * 2019-01-03 2020-07-09 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
JP7235877B2 (ja) 2019-01-31 2023-03-08 北京字節跳動網絡技術有限公司 アフィンモード適応型動きベクトル解像度を符号化するためのコンテキスト
US11134262B2 (en) 2019-02-28 2021-09-28 Tencent America LLC Method and apparatus for video coding
JP7026064B2 (ja) * 2019-03-11 2022-02-25 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
WO2020181507A1 (zh) * 2019-03-12 2020-09-17 北京大学 图像处理的方法与装置
US11394993B2 (en) * 2019-03-13 2022-07-19 Tencent America LLC Method and apparatus for affine inter prediction with small subblocks
US11343525B2 (en) 2019-03-19 2022-05-24 Tencent America LLC Method and apparatus for video coding by constraining sub-block motion vectors and determining adjustment values based on constrained sub-block motion vectors
CN113853793B (zh) * 2019-05-21 2023-12-19 北京字节跳动网络技术有限公司 基于光流的帧间编码的语法信令
US11153598B2 (en) * 2019-06-04 2021-10-19 Tencent America LLC Method and apparatus for video coding using a subblock-based affine motion model
US11330287B2 (en) 2019-06-28 2022-05-10 Tencent America LLC Method and apparatus for video coding
CN110636301B (zh) * 2019-09-18 2021-08-03 浙江大华技术股份有限公司 仿射预测方法、计算机设备和计算机可读存储介质
KR20220065879A (ko) * 2019-09-30 2022-05-20 후아웨이 테크놀러지 컴퍼니 리미티드 Dct 기반 보간 필터의 사용
WO2021188876A1 (en) * 2020-03-20 2021-09-23 Beijing Dajia Internet Information Technology Co., Ltd. Spatial neighbor based affine motion derivation
CN114342390B (zh) * 2020-07-30 2022-10-28 北京达佳互联信息技术有限公司 用于仿射运动补偿的预测细化的方法和装置
CN113313628B (zh) * 2021-06-29 2023-02-03 河南工业大学 基于仿射变换和均值像素法的环状编码点鲁棒性识别方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997017797A2 (en) * 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation
CN104053001A (zh) * 2013-03-15 2014-09-17 三星电子株式会社 对视频进行稳定化的方法和包括后处理电路的视频解码器
WO2015006894A1 (en) * 2013-07-15 2015-01-22 Microsoft Corporation Feature-based image set compression
CN104363451A (zh) * 2014-10-27 2015-02-18 华为技术有限公司 图像预测方法及相关装置

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6275532B1 (en) * 1995-03-18 2001-08-14 Sharp Kabushiki Kaisha Video coding device and video decoding device with a motion compensated interframe prediction
US5654771A (en) * 1995-05-23 1997-08-05 The University Of Rochester Video compression system using a dense motion vector field and a triangular patch mesh overlay model
JP3426092B2 (ja) * 1996-09-12 2003-07-14 シャープ株式会社 動画像符号化装置における動き補償フレーム間予測方法
US6775415B1 (en) * 1999-05-25 2004-08-10 George Mason University Fractal image compression using reinforcement learning
KR100359115B1 (ko) 2000-05-24 2002-11-04 삼성전자 주식회사 영상 코딩 방법
JP3681342B2 (ja) * 2000-05-24 2005-08-10 三星電子株式会社 映像コーディング方法
JP4355319B2 (ja) * 2002-01-24 2009-10-28 株式会社日立製作所 動画像復号化方法
US7408986B2 (en) * 2003-06-13 2008-08-05 Microsoft Corporation Increasing motion smoothness using frame interpolation with motion analysis
KR100631777B1 (ko) 2004-03-31 2006-10-12 삼성전자주식회사 다 계층의 모션 벡터를 효율적으로 압축하는 방법 및 장치
KR100586882B1 (ko) 2004-04-13 2006-06-08 삼성전자주식회사 모션 스케일러빌리티를 지원하는 코딩 방법 및 장치
JP4340968B2 (ja) * 2004-05-07 2009-10-07 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US8665958B2 (en) * 2008-01-29 2014-03-04 Electronics And Telecommunications Research Institute Method and apparatus for encoding and decoding video signal using motion compensation based on affine transformation
JP4544334B2 (ja) 2008-04-15 2010-09-15 ソニー株式会社 画像処理装置および画像処理方法
WO2011070730A1 (ja) * 2009-12-07 2011-06-16 日本電気株式会社 映像符号化装置および映像復号装置
EP3490257B1 (en) 2010-04-13 2024-01-10 GE Video Compression, LLC Sample region merging
CN102547261B (zh) * 2010-12-24 2016-06-15 上海电机学院 一种分形图像编码方法
CN102611884B (zh) 2011-01-19 2014-07-09 华为技术有限公司 图像编解码方法及编解码设备
WO2013033790A1 (en) * 2011-09-09 2013-03-14 Newsouth Innovations Pty Limited A method and apparatus for communicating and recovering motion information
WO2013068564A1 (en) * 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding using spatial prediction
WO2013068548A2 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient multi-view coding using depth-map estimate for a dependent view
US9769473B2 (en) * 2012-06-08 2017-09-19 Apple Inc. Predictive video coder with low power reference picture transformation
CN104704827B (zh) * 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
RU2533852C2 (ru) * 2012-12-26 2014-11-20 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ кодирования/декодирования многоракурсной видеопоследовательности на основе адаптивной компенсации локальных различий яркости при межкадровом предсказании (варианты)
JP6399433B2 (ja) * 2013-05-31 2018-10-03 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
US9258446B2 (en) * 2013-10-16 2016-02-09 Fuji Xerox Co., Ltd. Image processing apparatus
US10554965B2 (en) * 2014-08-18 2020-02-04 Google Llc Motion-compensated partitioning
CN107734335B (zh) 2014-09-30 2020-11-06 华为技术有限公司 图像预测方法及相关装置
US20160316220A1 (en) * 2015-04-21 2016-10-27 Microsoft Technology Licensing, Llc Video encoder management strategies
JP7105706B2 (ja) * 2019-01-16 2022-07-25 三菱電機株式会社 パワーモジュール

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997017797A2 (en) * 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation
CN104053001A (zh) * 2013-03-15 2014-09-17 三星电子株式会社 对视频进行稳定化的方法和包括后处理电路的视频解码器
WO2015006894A1 (en) * 2013-07-15 2015-01-22 Microsoft Corporation Feature-based image set compression
CN104363451A (zh) * 2014-10-27 2015-02-18 华为技术有限公司 图像预测方法及相关装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Affine SKIP and DIRECT modes for efficient video coding;HAN Huang等;《VISUAL COMMUNICATIONS AND IMAGE PROCESSING (VCIP) 2012 IEEE》;20121127;全文 *

Also Published As

Publication number Publication date
US20180070102A1 (en) 2018-03-08
KR102297921B1 (ko) 2021-09-02
EP3291557A1 (en) 2018-03-07
KR20180006961A (ko) 2018-01-19
US11949908B2 (en) 2024-04-02
RU2689426C1 (ru) 2019-05-28
CA2985868A1 (en) 2016-11-24
US10887618B2 (en) 2021-01-05
ES2900232T3 (es) 2022-03-16
MX2020011278A (es) 2020-11-13
JP7260620B2 (ja) 2023-04-18
EP3291557B1 (en) 2021-11-03
US20230077431A1 (en) 2023-03-16
CN106303543B (zh) 2018-10-30
KR20190122914A (ko) 2019-10-30
US20190335196A1 (en) 2019-10-31
EP4033765A1 (en) 2022-07-27
CA2985868C (en) 2022-11-29
AU2016264380A1 (en) 2017-12-14
CN109005407A (zh) 2018-12-14
HK1244984A1 (zh) 2018-08-17
JP2023089084A (ja) 2023-06-27
BR112017024467A2 (zh) 2018-07-24
KR102148804B1 (ko) 2020-08-27
MY183126A (en) 2021-02-15
SG11201709418UA (en) 2017-12-28
JP2022010251A (ja) 2022-01-14
JP2018520558A (ja) 2018-07-26
WO2016184261A1 (zh) 2016-11-24
CN106303543A (zh) 2017-01-04
US11490115B2 (en) 2022-11-01
US10390036B2 (en) 2019-08-20
JP2020174373A (ja) 2020-10-22
JP6978944B2 (ja) 2021-12-08
KR102257653B1 (ko) 2021-05-27
AU2016264380B2 (en) 2018-10-18
EP3291557A4 (en) 2018-03-28
US20210105502A1 (en) 2021-04-08
MX2017014652A (es) 2018-04-11
KR20200102541A (ko) 2020-08-31
JP6978552B2 (ja) 2021-12-08

Similar Documents

Publication Publication Date Title
CN109005407B (zh) 视频图像编码和解码的方法、编码设备和解码设备
CN108600749B (zh) 图像预测的方法及设备
CN109391814B (zh) 视频图像编码和解码的方法、装置及设备
WO2017005141A1 (zh) 参考图像编码和解码的方法、编码设备和解码设备
RU2771955C2 (ru) Устройство, оборудование, способ кодирования и декодирования видеоизображений
CN115804095A (zh) 视频编码中的帧内预测方法
BR112017024467B1 (pt) Método de codificação de imagem de vídeo, método de decodificação de imagem de vídeo, dispositivo de codificação, e dispositivo de decodificação

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant