CN114079787A - 视频解码方法、视频编码方法、装置、设备和存储介质 - Google Patents

视频解码方法、视频编码方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN114079787A
CN114079787A CN202010794517.8A CN202010794517A CN114079787A CN 114079787 A CN114079787 A CN 114079787A CN 202010794517 A CN202010794517 A CN 202010794517A CN 114079787 A CN114079787 A CN 114079787A
Authority
CN
China
Prior art keywords
displacement vector
block
list
decoded
classes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010794517.8A
Other languages
English (en)
Inventor
王英彬
许晓中
刘杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010794517.8A priority Critical patent/CN114079787A/zh
Priority to PCT/CN2021/109390 priority patent/WO2022033325A1/zh
Priority to EP21855378.2A priority patent/EP4102838A4/en
Publication of CN114079787A publication Critical patent/CN114079787A/zh
Priority to US17/889,870 priority patent/US20220394285A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/57Motion estimation characterised by a search window with variable size or shape

Abstract

本申请公开了一种视频解码方法、视频编码方法、装置、计算机设备以及存储介质,属于视频处理领域。通过本申请实施例提供的技术方案,在解码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,解码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频解码的复杂度,提高了视频解码的效率。

Description

视频解码方法、视频编码方法、装置、设备和存储介质
技术领域
本申请涉及视频处理领域,特别涉及一种视频解码方法、视频编码方法、装置、计算机设备以及存储介质。
背景技术
随着网络技术的发展,越来越多的用户通过各类终端观看视频。受限于网络带宽,终端获取的视频往往是经过压缩,也即是经过编码的视频,因此,终端在播放视频时,需要对视频进行解码。
相关技术中,终端对视频进行解码时,需对待解码块对应的位移矢量进行分类,基于分类后的位移矢量对待解码块解码。但是,一个位移矢量可能对应于多个类型,导致解码复杂度较高。
发明内容
本申请实施例提供了一种视频解码方法、视频编码方法、装置、计算机设备以及存储介质,能够降低解码的复杂度。所述技术方案如下:
一方面,提供了一种视频解码方法,所述方法包括:
在视频解码过程中,对历史运动信息列表中已解码块的位移矢量进行分类;
在分类时,若所述已解码块满足多个类中任一个类的分类条件,则将所述已解码块的位移矢量加入所述任一个类,并停止对所述已解码块的位移矢量的分类。
在一种可能的实施方式中,所述方法还包括:
在分类时,若所述已解码块满足多个类中任一个类的分类条件,且所述任一个类中存在任一位移矢量,不将所述已解码块的位移矢量分入所述任一个类。
一方面,提供了一种视频编码方法,所述方法包括:
在视频编码过程中,对历史运动信息列表中已编码块的位移矢量进行分类;
在分类时,若所述已编码块满足多个类中任一个类的分类条件,则将所述已编码块的位移矢量加入所述任一个类,并停止对所述已编码块的位移矢量的分类。
在一种可能的实施方式中,所述方法还包括:
在分类时,若所述已编码块满足多个类中任一个类的分类条件,且所述任一个类中存在任一位移矢量,不将所述已编码块对应的位移矢量分入所述任一个类。
在一种可能的实施方式中,所述根据分类之后的位移矢量,生成候选位移矢量列表包括下述任一项:
响应于所述多个类中存在不包含任一个位移矢量的类,根据除所述类以外的所述多个类中其他类包含的位移矢量,生成所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述类,根据所述多个类中的位移矢量,生成所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待编码块位置相邻的已编码块的第二位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待编码块位置不相邻的已编码块的第三位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中编码顺序与所述待编码块相邻的已编码块的的位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中目标位置的位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述候选位移矢量列表包括:
响应于所述多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量,生成第一位移矢量列表;
从所述第一位移矢量列表中确定与所述类对应的第一位移矢量,将所述与所述类对应的第一位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述响应于所述多个类中存在不包含任一个位移矢量的类,将与待编码块位置相邻的已编码块的第二位移矢量加入所述候选位移矢量列表包括:
响应于所述多个类中存在不包含任一个位移矢量的类,根据与所述待编码块位置相邻的多个已编码块的第二位移矢量生成第二位移矢量列表;
从所述第二位移矢量列表中确定与所述类对应的第二位移矢量,将所述与所述类对应的第二位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述将与待编码块位置相邻的已编码块的位移矢量加入所述候选位移矢量列表之前,所述方法还包括:
响应于与所述待编码块位置相邻的已编码块不对应于任一位移矢量,将第四位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,从候选位移矢量列表中,确定与所述待编码块对应的目标位移矢量。
在一种可能的实施方式中,所述从所述候选位移矢量列表中,确定与所述待编码块对应的目标位移矢量包括:确定所述候选位移矢量列表中多个位移矢量的率失真参数;将所述率失真参数最小的位移矢量确定为与所述待编码块对应的目标位移矢量。
在一种可能的实施方式中,所述分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
一方面,提供了一种视频解码装置,所述装置包括:
第一分类模块,用于在视频解码过程中,对历史运动信息列表中已解码块的位移矢量进行分类;在分类时,若所述已解码块满足多个类中任一个类的分类条件,则将所述已解码块的位移矢量加入所述任一个类,并停止对所述已解码块的位移矢量的分类。
在一种可能的实施方式中,所述第一分类模块还用于在分类时,若所述已解码块满足多个类中任一个类的分类条件,且所述任一个类中存在任一位移矢量,不将所述已解码块的位移矢量分入所述任一个类。
在一种可能的实施方式中,所述第一分类模块还用于若所述已解码块满足多个类中任一个类的分类条件,将所述已解码块的位移矢量在所述历史运动信息列表中的索引加入所述任一个类。
在一种可能的实施方式中,所述装置还包括:
第一候选位移矢量列表生成模块,用于根据分类之后的位移矢量,生成候选位移矢量列表,一个待解码块对应于一个候选位移矢量列表。
在一种可能的实施方式中,所述第一候选位移矢量列表生成模块,用于执行下述任一项:
响应于所述多个类中存在不包含任一个位移矢量的类,根据除所述类以外的所述多个类中其他类包含的位移矢量,生成所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待解码块位置相邻的已解码块的第二位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待解码块位置不相邻的已解码块的第三位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中解码顺序与所述待解码块相邻的已解码块的位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中目标位置的位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第一候选位移矢量列表生成模块,用于响应于所述多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量,生成第一位移矢量列表;从所述第一位移矢量列表中确定与所述类对应的第一位移矢量,将所述与所述类对应的第一位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第一候选位移矢量列表生成模块,用于响应于所述多个类中存在不包含任一个位移矢量的类,根据与所述待解码块位置相邻的多个已解码块的第二位移矢量生成第二位移矢量列表;从所述第二位移矢量列表中确定与所述类对应的第二位移矢量,将所述与所述类对应的第二位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第一候选位移矢量列表生成模块,还用于响应于与所述待解码块位置相邻的已解码块不对应于任一位移矢量,将第四位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述装置还包括:
所述第一目标位移矢量确定模块,用于根据待解码块的索引,在所述候选位移矢量列表中确定与所述待解码块对应的目标位移矢量;
解码模块,用于根据所述目标位移矢量,对所述待解码块进行解码。
在一种可能的实施方式中,所述分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
一方面,提供了一种视频编码装置,所述装置包括:
第二分类模块,用于在视频编码过程中,对历史运动信息列表中已编码块的位移矢量进行分类;在分类时,若所述已编码块满足多个类中任一个类的分类条件,则将所述已编码块的位移矢量加入所述任一个类,并停止对所述已编码块的位移矢量的分类。
在一种可能的实施方式中,所述第二分类模块,还用于在分类时,若所述已编码块满足多个类中任一个类的分类条件,且所述任一个类中存在任一位移矢量,不将所述已编码块对应的位移矢量分入所述任一个类。
在一种可能的实施方式中,所述第二分类模块,用于若所述已编码块满足多个类中任一个类的分类条件,将所述已编码块的位移矢量在所述历史运动信息列表中的索引加入所述任一个类。
在一种可能的实施方式中,所述装置还包括:
第二候选位移矢量列表生成模块,用于根据分类之后的位移矢量,生成候选位移矢量列表,一个候选位移矢量列表对应于一个待编码块;
第二目标位移矢量确定模块,用于从所述候选位移矢量列表中,确定与所述待编码块对应的目标位移矢量;
编码模块,用于根据所述目标位移矢量,对所述待编码块进行编码,并根据所述目标位移矢量在所述候选位移矢量列表中的次序,生成所述待编码块的索引。
在一种可能的实施方式中,所述第二候选位移矢量列表生成模块,用于执行下述任一项:
响应于所述多个类中存在不包含任一个位移矢量的类,根据除所述类以外的所述多个类中其他类包含的位移矢量,生成所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待编码块位置相邻的已编码块的第二位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待编码块位置不相邻的已编码块的第三位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中编码顺序与所述待编码块相邻的已编码块位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中目标位置的位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第二候选位移矢量列表生成模块,用于响应于所述多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量,生成第一位移矢量列表;从所述第一位移矢量列表中确定与所述类对应的第一位移矢量,将所述与所述类对应的第一位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第二候选位移矢量列表生成模块,用于响应于所述多个类中存在不包含任一个位移矢量的类,根据与所述待编码块位置相邻的多个已编码块的第二位移矢量生成第二位移矢量列表;从所述第二位移矢量列表中确定与所述类对应的第二位移矢量,将所述与所述类对应的第二位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第二候选位移矢量列表生成模块,还用于响应于与所述待编码块位置相邻的已编码块不对应于任一位移矢量,将第四位移矢量加入所述候选位移矢量列表。
在一种可能的实施方式中,所述第二目标位移矢量确定模块,用于确定所述候选位移矢量列表中多个位移矢量的率失真参数;将所述率失真参数最小的位移矢量确定为与所述待编码块对应的目标位移矢量。
在一种可能的实施方式中,所述分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
一方面,提供了一种计算机设备,所述计算机设备包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述程序代码由所述一个或多个处理器加载并执行以实现所述视频解码方法或所述视频编码方法。
一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条程序代码,所述程序代码由处理器加载并执行以实现所述视频解码方法或所述视频编码方法。
一方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机程序代码,该计算机程序代码存储在计算机可读存储介质中,计算机设备的处理器从计算机可读存储介质读取该计算机程序代码,处理器执行该计算机程序代码,使得该计算机设备执行上述所述视频解码方法或上述视频编码方法。
通过本申请实施例提供的技术方案,在解码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,解码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频解码的复杂度,提高了视频解码的效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种运动矢量示意图;
图2是本申请实施例提供的一种块矢量示意图;
图3是本申请实施例提供的一种串矢量示意图;
图4是本申请实施例提供的一种视频解码方法的实施环境示意图;
图5是本申请实施例提供的一种视频解码方法的流程图;
图6是本申请实施例提供的一种视频编码方法的流程图;
图7是本申请实施例提供的一种视频解码方法的流程图;
图8是本申请实施例提供的一种待解码块和已解码块相对位置示意图;
图9是本申请实施例提供的一种待解码块和已解码块相对位置示意图;
图10是本申请实施例提供的一种视频编码方法的流程图;
图11是本申请实施例提供的一种视频解码装置的结构示意图;
图12是本申请实施例提供的一种视频编码装置的结构示意图;
图13是本申请实施例提供的一种终端的结构示意图;
图14是本申请实施例提供的一种服务器的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
本申请中术语“第一”“第二”等字样用于对作用和功能基本相同的相同项或相似项进行区分,应理解,“第一”、“第二”、“第n”之间不具有逻辑或时序上的依赖关系,也不对数量和执行顺序进行限定。
本申请中术语“至少一个”是指一个或多个,“多个”的含义是指两个或两个以上,例如,多个待编码块是指两个或两个以上的待编码块。
首先,对本申请中涉及的名词进行如下介绍:
运动补偿:运动补偿是视频编码常用的一类预测方法,运动补偿基于视频内容在时域或空域的冗余特性,根据已编码块导出待编码块的位移矢量的预测值,在编码过程中能够采用已编码块的像素值来代替待编码块的像素值,并记录待编码块的位移矢量,就能够实现对待编码块的编码。
运动补偿分为:帧间预测、帧内块复制预测以及帧内串复制预测等,在编码过程中,可能单独或组合使用这些预测方法。
对于帧间预测来说,位移矢量被称为位移矢量(Motion Vector,MV)或者位移矢量。帧间预测利用视频内容在时间域的相关性,使用邻近已编码块的像素来预测待编码块的像素,以达到有效去除视频时域冗余的目的。参见图1,101为待编码帧,102为参考帧,编码块1011为待编码块,编码块1021是编码块1011的参考块。编码块1022与编码块1011在图像中的坐标相同,编码块1021的坐标为(xr,yr),编码块1022坐标为(x,y)。编码块1021与编码块1022之间的位移,也即是运动矢量,即:MV=(xr-x,yr-y)。
对于帧内块复制预测(Intra Block Copy,IBC)来说,位移矢量被称为块矢量(Block Vector,BV)。帧内块复制利用视频内容在空间的相关性,使用当前图像上已编码块的像素预测待编码块的像素,能够有效节省编码像素所需的比特。如图3所示,在IBC中当前编码块与其参考块之间的位移,称为块矢量(Block Vector,简称BV)。H.266/VVC采用了类似于帧间预测BV预测技术进一步节省编码BV所需的比特。参见图2,201为当前帧,2011为待编码块,2012为已编码块,2013为已编码区域,2014为待编码区域,2015为块矢量。
对于帧内串复制来说(Intra String Copy,ISC),位移矢量被称为串矢量(StringVector,SV)。按照某种扫描顺序(光栅扫描、往返扫描和Zig-Zag扫描等),将一个编码块分成一系列像素串或未匹配像素。类似于IBC,每个待编码串在当前图像已编码区域中寻找相同形状的已编码串,导出当前串的预测值,能够有效节省比特。参见图3,区域301为已编码区域,白色的28个像素为待编码串302,灰色的35个像素为待编码的串303,黑色的1个像素表示未匹配像素304,305为与待编码串302对应的已编码串,306为与待编码串303对应的已编码串,307为待编码串302与已编码串305之间的串矢量,308为待编码串303与已编码串306之间的串矢量。
在本申请提供的视频编码方法以及视频解码方法能够用于多种视频编码标准的上下文中,比如应用在多功能视频编码标准(Versatile Video Coding,VVC/H.266)中,也能够应用在第三代数字视频编解码技术标准(Audio Video coding Standard 3,AVS3)中,本申请实施例对此不做限定。
图4是本申请实施例提供的一种视频编码方法的实施环境示意图,参见图4,该实施环境中可以包括第一终端410、第二终端420和服务器440。
可选地,第一终端410能够通过无线网络或有线网络与第二终端420相连,第一终端和第二终端为智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。第一终端410上安装和运行有支持视频编码的应用程序,第一终端410也可以被称为编码端。第二终端420上安装和运行有支持视频解码的应用程序,第二终端420页可以被称为解码端。第一终端410对视频进行编码之后,能够将编码后视频发送给第二终端420,第二终端能够对编码后的视频进行解码。
在一种可能的实施方式中,第一终端410和第二终端420均为既能够进行编码也能够进行解码的终端,本申请实施例对此不做限定。
可选地,第一终端410和第二终端420能够通过无线网络或有线网络与服务器440相连。第一终端410能够将视频进行编码之后,发送给服务器440,由服务器440将编码后的视频下发给第二终端420,第二终端能够对编码后的视频进行解码。
可选地,服务器440是独立的物理服务器,或者是多个物理服务器构成的服务器集群或者分布式系统,或者是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
当然,服务器440也能够直接对视频进行编码,将编码后的视频下发至第一终端410或者第二终端420,本申请实施例对此不作限定。
为了对本申请提供的视频编码方法以及视频解码方法进行更加清楚的描述,首先对本申请提供的视频编码方法以及视频解码方法的应用场景进行介绍。
在一种可能的实施方式中,本申请提供的技术方案能够应用在本地视频的场景中,视频作者通过编码端对视频进行编码,将编码后的视频发送给解码端,解码端能够对编码后的视频进行解码,供使用解码端的用户观看该视频,其中,视频作者在编码端对视频进行编码之后,能够通过网络连接将编码后的视频发送给解码端,也能够通过存储介质,比如只读光盘(Compact Disc Read-Only Memory,CD-ROM)、高密度数字视频光盘(DigitalVideo Disc,DVD)以及存储棒将编码后的视频传送给解码端,本申请实施例对此不作限定。
在一种可能的实施方式中,本申请提供的技术方案能够应用于在线视频播放的过程中。视频作者通过编码端对视频进行编码之后,能够通过编码端将编码后的视频上传至服务器,服务器能够将编码后的视频发送给解码端,解码端能够对编码后的视频进行解码,供使用解码端的用户观看该视频。
在一种可能的实施方式中,本申请提供的技术方案能够应用于视频通话的场景中,比如应用于在线会议的场景中。以在线会议为两个用户之间的会议为例,两个用户分别使用既能够进行视频编码,也能够进行视频解码的终端进行在线会议,其中,一个终端能够采集视频画面,对采集到的视频画面进行编码,将编码后的视频画面发送给服务器,由服务器将编码后的视频画面传送给另一个终端,另一个终端能够对编码后的视频画面进行解码,另一个终端的用户能够看到该视频画面。当然,另一个终端也能够采集视频画面,并对视频画面进行编码之后发送给服务器,由服务器进行转送,这样能够实现两个用户之间的在线会议。当然,基于上述描述,也能够扩展为多个用户之间的在线会议,本申请实施例对此不做限定。
在一种可能的实施方式中,本申请提供的技术方案能够应用于直播场景中。主播通过编码端采集视频画面,由编码端对采集到的视频画面进行编码,将编码后的视频画面传送给服务器,由服务器将编码后的视频画面发送给观众使用的解码端,或者由服务器将编码后的视频画面进行解码,按照不同码率对视频画面进行编码之后再发送给观众使用的解码端,本申请实施例对此不作限定。
需要注意的是,在下述对本申请提供的技术方案进行说明的过程中,是以终端作为执行主体为例进行的。在其他可能的实施方式中,也可以由服务器作为执行主体来执行本申请提供的技术方案,本申请实施例对于执行主体的类型不做限定。
图5是本申请实施例提供的一种视频解码方法的流程图,参见图5,方法包括:
501、在视频解码过程中,解码端对历史运动信息列表中已解码块的位移矢量进行分类,在分类时,若已解码块满足多个类中任一个类的分类条件,则将已解码块的位移矢量加入该类。
其中,历史运动信息列表也可以称为基于历史的运动矢量预测列表(Historybased Motion Vector Prediction,HMVP),历史运动信息列表中不仅存储有已解码块的位移矢量,还存储有用于对位移矢量进行分类的辅助信息,辅助信息包括已解码块的尺寸信息、位置信息以及已解码块的位移矢量的重复使用次数。
502、解码端停止对已解码块的位移矢量的分类。
通过本申请实施例提供的技术方案,在解码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,解码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频解码的复杂度,提高了视频解码的效率。
图6是本申请实施例提供的一种视频解码方法的流程图,参见图6,方法包括:
601、在视频编码过程中,编码端对历史运动信息列表中已编码块的位移矢量进行分类,在分类时,若已编码块满足多个类中任一个类的分类条件,则将已编码块的位移矢量加入该类。
602、编码端停止对已编码块的位移矢量的分类。
通过本申请实施例提供的技术方案,在编码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,编码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频编码的复杂度,提高了视频编码的效率。
上述步骤501-502以及步骤601-602是本申请提供的技术方案的简要说明,下面将结合一些例子对本申请提供的技术方案进行详细说明。由于本申请提供的视频解码方法和视频编码方法属于同一发明构思,在下述说明的过程中,首先对视频解码方法进行说明。在说明过程中,为了便于理解,是以待解码块的数量为一个为例进行说明的,在解码过程中,能够对多个待解码块进行解码,对多个待解码块进行解码的方法与对一个待解码块进行解码的过程同理。
图7是本申请实施例提供的一种视频解码方法的流程图,参见图7,方法包括:
701、在视频解码过程中,解码端对历史运动信息列表中已解码块的位移矢量进行分类,在分类时,若已解码块满足多个类中任一个类的分类条件,则将已解码块的位移矢量加入该类。
其中,历史运动信息列表为一个长度有限的列表,当历史运动信息列表被填满,同时有新的位移矢量要加入历史运动信息列表时,最早进入历史运动信息列表的位移矢量将会被移除,为新的位移矢量留出空间,这种存储方式称为先入先出(First Input FirstOutput,FIFO)。其中,历史运动信息列表的长度与视频解码标准相关,比如为6、8或者12,当然,随着视频解码标准的更新,历史运动信息列表的长度也会随之更新,本申请实施例对此不作限定。
还有,历史运动信息列表中存储的位移矢量对应于不同的序号,可选地,历史运动信息列表的长度为3,那么该历史运动信息列表中存储的位移矢量分别对应于序号0、1和2,在后续对位移矢量进行分类的过程中,解码端能够按照正序,也即是0→1→2的顺序对位移矢量进行分类,也能够按照逆序,也即是2→1→0的顺序对位移矢量进行分类,本申请实施例对此不做限定。
在一种可能的实施方式中,解码端能够根据历史运动信息列表中存储的已解码块的辅助信息,对已解码块的位移矢量进行分类。在分类时,解码端能够将已解码块的辅助信息与多个类的分类条件进行对比,响应于已解码块的辅助信息满足多个类中的任一个类的分类条件,解码端将该已解码块的位移矢量加入该类。
另外,将该已解码块的位移矢量加入该类之前,解码端还能够确定历史运动信息列表中是否存在与该解码块的位移矢量相同的位移矢量。响应于历史运动信息列表中存在与该解码块的位移矢量相同的位移矢量,比如将与该解码块的位移矢量相同的位移矢量记作A,那么终端将位移矢量A从历史运动信息列表中移除,将该解码块的位移矢量加入历史运动信息列表,同时将该解码块的位移矢量的使用次数+1。
下面分别以分类条件为已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件为例,对解码端基于辅助信息对已解码块的位移矢量进行分类的方法进行说明。
首先,基于上述分类条件,设置7个类,7个类的分类条件分别为:
类0:已解码块的面积大于或等于64像素;
类1:BV的使用次数大于或等于2;
类2:已解码块左上角的坐标位于待解码块左上角坐标的左方;
类3:已解码块左上角的坐标位于待解码块左上角坐标的上方;
类4:已解码块左上角的坐标位于待解码块左上角坐标的左上方;
类5:已解码块左上角的坐标位于待解码块左上角坐标的右上方;
类6:已解码块左上角的坐标位于待解码块左上角坐标的左下方。
其中,每个类的序号为解码端基于辅助信息进行对已解码块的位移矢量进行分类时的匹配顺序,也即是在分类过程中,解码端首先将已解码块的辅助信息与类0的分类条件进行比较。若已解码块的辅助信息不满足类0的分类条件,那么解码端将已解码块的辅助信息与类1的分类条件进行比较,依次类推。
需要说明的是,上述类0-类6对应的分类条件仅仅是为了举例而提供的,随着视频解码标准的更新,类的数量以及类对应的分类条件能够随之更新。
另外,每个类都对应于一个用于存储位移矢量的列表,响应于确定一个已解码块的位移矢量属于任一个类,解码端能够将该已解码块的位移矢量添加入与该类对应的列表中。解码端向与类对应的列表中填充位移矢量时,同时也能够对列表中的位移矢量进行编号,解码端将最新进入列表中的位移矢量的序号确定为1。举例来说,列表中仅存在一个位移矢量A,位移矢量A在列表中的序号为1,当解码端向该列表中填充位移矢量B时,解码端能够将位移矢量B的序号设置为1,将位移矢量A的序号变更为2。每个类对应的列表中,序号为1的位移矢量为该类对应的候选位移矢量,候选位移矢量也即是在后续生成候选位移矢量列表时采用的位移矢量。
当然,每个类对应的用于存储位移矢量的列表也能够仅仅存储最新被加入的位移矢量,也即每个类对应的用于存储位移矢量的列表中,仅记录最新满足分类条件的位移矢量。举例来说,若列表中存在一个满足分类条件的位移矢量C,当有新的满足分类条件的位移矢量D进入该列表时,解码端能够将位移矢量C从该列表中删除,只存储位移矢量D。
在设置类以及类对应的分类条件之后,解码端能够根据已解码块的辅助信息对已解码块的位移矢量进行分类,下面将结合几个例子进行说明:
以类0为例,当已解码块A的位移矢量和辅助信息进入历史运动信息列表后,解码端从历史运动信息列表中的确定已解码块A的尺寸信息,比如为4×4,也即是已解码块A的面积为16像素,由于16像素小于64像素,解码端确定已解码块A不满足类0的分类条件,已解码块A无法分入类0。当已解码块B的位移矢量和辅助进行进入历史运动信息列表后,解码端能够从历史运动信息列表中确定已解码块B的尺寸信息,比如8×8,也即是已解码块B的面积为64像素,解码端确定已解码块B满足类0的分类条件,将已解码块B的位移矢量加入类0对应的列表中,并在类0对应的列表中将已解码块B的位移矢量的序号设置为1。
以类1为例,当已解码块C的位移矢量和辅助信息进入历史运动信息列表后,解码端从历史运动信息列表中的确定已解码块C的位移矢量的使用次数,比如为1,解码端能够确定已解码块C不满足类1的分类条件,已解码块C无法分入类1。当已解码块D的位移矢量进入历史运动信息列表后,解码端从历史运动信息列表中的确定已解码块D的位移矢量的使用次数,比如为3,解码端能够确定已解码块D满足类1的分类条件,将已解码块D加入类1对应的类表中,并在类1对应的列表中将已解码块D的位移矢量的序号设置为1。
以类2为例,当已解码块E的位移矢量和辅助信息进入历史运动信息列表后,解码端从历史运动信息列表中的确定已解码块E左上角的坐标,比如(1,2),若待解码块左上角的坐标为(0,2),参见图8,由于已解码块E左上角的坐标位于待解码块左上角坐标的右侧,解码端确定已解码块E不满足类2的分类条件,已解码块E无法分入类2。当已解码块F的位移矢量进入历史运动信息列表后,解码端从历史运动信息列表中的确定已解码块F左上角的坐标,比如(3,2),若待解码块左上角的坐标为(2,2),参见图8,由于已解码块F左上角的坐标位于待解码块左上角坐标的左侧,解码端确定已解码块F满足类2的分类条件,将已解码块F加入类2对应的类表中,并在类2对应的列表中将已解码块F的位移矢量的序号设置为1。
需要说明的是,类3-类6的分类方法与类2属于同一发明构思,在此不再赘述。
在一种可能的实施方式中,在分类时,若已解码块满足多个类中任一个类的分类条件,且该类中存在任一位移矢量,解码端能够不将已解码块对应的位移矢量分入该类。
在这种实施方式下,解码端能够保证每个类下最多只有一个位移矢量,这样能够减少类对应的列表所占用的存储空间,同时无需在后续生成候选位移矢量列表前进行查重,提高了视频解码的效率。
举例来说,当已解码块当已解码块G的位移矢量和辅助信息进入历史运动信息列表后,解码端能够根据已解码块G的辅助信息对已解码块G进行分类。若已解码块G辅助信息满足上述类3的分类条件,解码端查询类3对应的列表。若类3对应的列表中不存在任一位移矢量,解码端将已解码块G的位移矢量加入类3对应的列表。若类3对应的列表中存在任一位移矢量,解码端将已解码块G的辅助信息与类4的分类条件进行比较,依次类推,保证一个类中最多存在一个位移矢量。
在一种可能的实施方式中,若已解码块满足多个类中任一个类的分类条件,解码端将已解码块的位移矢量在历史运动信息列表中的索引加入任一个类。
可选地,索引为一个位移矢量在历史运动信息列表中的顺序,当然也可以为其他能够在历史运动信息列表中唯一的查找到该位移矢量的索引,本申请实施例对此不做限定。
在这种实现实施方式下,解码端将索引而不是位移矢量加入类中,这样能够减少类对应的列表占用的存储空间。
702、解码端停止对已解码块的位移矢量的分类。
通过步骤701和702,对于任一个已解码块的位移矢量来说,解码端能够在将其分入任一个类之后,停止对其继续进行分类,从而保证一个位移矢量仅被分入一个类,避免了在后续导出候选矢量列表时的查重操作,降低了解码复杂度,提高了解码效率。
703、解码端根据分类之后的位移矢量,生成候选位移矢量列表,一个候选位移矢量列表对应于一个待解码块。
在一种可能的实施方式中,解码端根据分类之后的位移矢量,生成候选位移矢量列表能够通过下述任一种方式实现:
方式1、响应于多个类中存在不包含任一个位移矢量的类,解码端能够根据除该类以外的多个类中其他类包含的位移矢量,生成候选位移矢量列表。
举例来说,解码端能够按照多个类的序号的大小,依次从每个类对应的列表中获取位移矢量,比如存在6个类,解码端能够依次从6个类对应的列表中获取一个位移矢量,将获取到的位移矢量加入候选位移矢量列表。响应于多个类中任一个类对应的列表中未存储有任一个位移矢量,解码端能够跳过该类,也即是在候选位移矢量列表中该类对应的位置为空。
方式2、响应于多个类中存在不包含任一个位移矢量的类,解码端能够将第一位移矢量加入候选位移矢量列表。
可选地,第一位移矢量为技术人员设计的位移矢量,比如为零矢量(0,0),或者为与尺寸相关的矢量,比如(-w,0)以及(0,-h),其中w和h分别为最小解码单元的宽和高,或者待解码块的宽和高,或者为预设的宽和高,本申请实施例对此不做限定。
在方式2的基础上,响应于多个类中存在不包含任一个位移矢量的类,解码端能够根据多个第一位移矢量,生成第一位移矢量列表,解码端能够从第一位移矢量列表中确定与该类对应的第一位移矢量,将与该类对应的第一位移矢量加入候选位移矢量列表。
举例来说,解码端能够创建一个由(0,0)、(-w,0)、(-2*w,0)、(0,-h)、(0,-2*h)、(-w,-h)、(-w,-2*h)、(-2*w,-h)以及(-2*w,-2*h)九个第一位移矢量构成的第一位移矢量列表,解码端能够对该第一位移矢量列表中每个第一位移矢量进行编号,比如按照从左至右的顺序进行编号,或者按照从右至左的顺序进行编号。若解码端按照从左至右的顺序进行编号,那么(0,0)、(-w,0)、(-2*w,0)、(0,-h)、(0,-2*h)、(-w,-h)、(-w,-2*h)、(-2*w,-h)以及(-2*w,-2*h)九个第一位移矢量分别对应于序号0-序号8。若解码端按照从右至左的顺序进行编号,那么(0,0)、(-w,0)、(-2*w,0)、(0,-h)、(0,-2*h)、(-w,-h)、(-w,-2*h)、(-2*w,-h)以及(-2*w,-2*h)九个第一位移矢量分别对应于序号8-序号0,本申请实施例对于解码端编号的方式不做限定。响应于多个类中存在不包含任一个位移矢量的类,该类的序号比如为4,解码端能够从第一位移矢量列表中将序号为4的第一位移矢量加入候选位移矢量列表,作为与序号为4的类对应的位移矢量。
当然,解码端除了能够按照上述举例中的方式向候选位移矢量列表中加入位移矢量之外,也能够按照其他可能的方式从第一位移矢量列表中确定第一位移矢量,并将该第一位移矢量加入候选位移矢量列表。比如,解码端能够随机从第一位移矢量列表中确定第一位移矢量,并将该第一位移矢量加入候选位移矢量列表。
方式3、响应于多个类中存在不包含任一个位移矢量的类,解码端能够将与待解码块位置相邻的已解码块的第二位移矢量加入候选位移矢量列表。
举例来说,参见图9,901为待解码块,已解码块902-906为与待解码块位置相邻的已解码块。响应于多个类中存在不包含任一个位移矢量的类,比如类3,解码端能够将已解码块902-906中任一个已解码块的第二位移矢量加入候选位移矢量列表,比如将已解码块905的第二位移矢量加入候选位移矢量列表,作为类3对应的位移矢量。
当然,图9示出的与待解码块位置相邻的已解码块仅仅是为了便于理解而设置的,随着解码标准的更新,与待解码块位置相邻的已解码块的数量和位置均可以随之更新,本申请实施例对此不作限定。
在一种可能的实施方式中,响应于与待解码块位置相邻的已解码块不对应于任一位移矢量,解码端能够将第四位移矢量加入候选位移矢量列表。
举例来说,若与待解码块位置相邻的已解码块不包含运动矢量,例如已解码块为非IBC/ISC解码块,或者为ISC解码块中的孤立点等,解码端能够向候选位移矢量列表中加入第四位移矢量,第四位移矢量也即是预设的位移矢量,可选的,预设矢量包括上述方式1或方式2中第一位移矢量,当然也能够包括零矢量(0,0),其中,第一位移矢量的确定方法参见之前的描述,在此不再赘述。
在方式3的基础上,响应于多个类中存在不包含任一个位移矢量的类,解码端能够根据与待解码块位置相邻的多个已解码块的第二位移矢量生成第二位移矢量列表。解码端能够从第二位移矢量列表中确定与类对应的第二位移矢量,将与类对应的第二位移矢量加入候选位移矢量列表。
举例来说,解码端能够根据如图9所示的已解码块902-906的第二位移矢量,生成第二位移矢量列表。解码端能够按照从左至右或者从右至左的顺序对第二位移矢量列表中的第二位移矢量进行编号。响应于多个类中存在不包含任一个位移矢量的类,比如类2,解码端能够从第二位移矢量列表中获取序号为2的第二位移矢量,并将序号为2的第二位移矢量加入候选位移矢量列表。
另外,解码端也能够采用其他方式从第二位移矢量列表中获取第二位移矢量,比如,解码端能够将最先加入第二位移矢量列表的第二位移矢量加入候选位移矢量列表,解码端也能够将最后加入第二位移矢量列表的第二位移矢量加入候选位移矢量列表,本申请实施例对此不做限定。
还有,在解码端生成第二位移矢量列表时,能够对与待解码块位置相邻的多个已解码块的第二位移矢量进行查重,响应于多个已解码块的第二位移矢量中包括相同的第二位移矢量,解码端能够将相同的第二位移矢量删除,基于不相同的第二位移矢量生成第二位移矢量列表。
除此之外,响应于解码端未在第二位移矢量列表中查询到与该类对应的第二位移矢量,那么解码端能够向候选位移矢量列表中添加预设的位移矢量,可选地,预设矢量包括上述方式1或方式2中第一位移矢量,当然也能够包括零矢量(0,0),其中,第一位移矢量的确定方法参见之前的描述,在此不再赘述。
方式4、响应于多个类中存在不包含任一个位移矢量的类,解码端能够将与待解码块位置不相邻的已解码块的第三位移矢量加入候选位移矢量列表。
举例来说,解码端能够分别获取左上角坐标为(x-8,y+h/2)、(x+2/2,y-8)以及(x-8,y-8)的已解码块中任一个已解码块的第三位移矢量,将该第三位移矢量加入候选位移矢量列表,作为与不包含任一个位移矢量的类对应的位移矢量,其中,x和y分别为待解码块左上角的横坐标和纵坐标,h为待解码块的高。
当然,上述与待解码块位置不相邻的已解码块的坐标仅仅是为了便于理解而设置的,在其他能够的实施方式中,也能够由技术人员根据实际情况进行设置,本申请实施例对此不做限定。
在方式4的基础上,响应于多个类中存在不包含任一个位移矢量的类,解码端能够根据与待解码块位置不相邻的多个已解码块的第三位移矢量生成第三位移矢量列表。解码端能够从第三位移矢量列表中确定与该类对应的第三位移矢量,将与该类对应的第三位移矢量加入候选位移矢量列表。
举例来说,解码端能够根据与待解码块不相邻的多个已解码块的第三位移矢量,生成第三位移矢量列表。解码端能够按照从左至右或者从右至左的顺序对第三位移矢量列表中的第三位移矢量进行编号。响应于多个类中存在不包含任一个位移矢量的类,比如类2,解码端能够从第三位移矢量列表中获取序号为2的第三位移矢量,并将序号为2的第三位移矢量加入候选位移矢量列表。
另外,解码端也能够采用其他方式从第三位移矢量列表中获取第三位移矢量,比如,解码端能够将最先加入第三位移矢量列表的第三位移矢量加入候选位移矢量列表,解码端也能够将最后加入第三位移矢量列表的第三位移矢量加入候选位移矢量列表,本申请实施例对此不做限定。
还有,在解码端生成第三位移矢量列表时,能够对与待解码块位置不相邻的多个已解码块的第三位移矢量进行查重,响应于多个已解码块的第三位移矢量中包括相同的第三位移矢量,解码端能够将相同的第三位移矢量删除,基于不相同的第三位移矢量生成第三位移矢量列表。
除此之外,响应于解码端未在第三位移矢量列表中查询到与该类对应的第三位移矢量,那么解码端能够向候选位移矢量列表中添加预设的位移矢量,可选地,预设矢量包括上述方式1或方式2中第一位移矢量,当然也能够包括零矢量(0,0),其中,第一位移矢量的确定方法参见之前的描述,在此不再赘述。
方式5、响应于多个类中存在不包含任一个位移矢量的类,解码端能够将历史运动信息列表中解码顺序与待解码块相邻的已解码块的位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,响应于多个类中存在不包含任一个位移矢量的类,解码端能够将在待解码块之前,上一个解码变成的已解码块的位移矢量键入候选位移矢量列表,也即是将解码时间距离待解码块最近的已解码块的位移矢量进入候选位移矢量列表。
举例来说,解码端能够从历史运动信息列表中获取最后加入历史运动信息列表的位移矢量,将该位移矢量加入候选位移矢量列表。
方式6、响应于多个类中存在不包含任一个位移矢量的类,解码端能够将历史运动信息列表中目标位置的位移矢量加入候选位移矢量列表。
可选的,目标位置的位移矢量为历史运动信息列表中,序号与类的序号相同的位移矢量。
在这种方式下,根据解码端为历史运动信息列表中的位移矢量的解码方式的不同,可能在同一个历史运动信息列表中确定出两个不同的位移矢量。比如,历史运动信息列表中存储有6个位移矢量(-1,-2)、(-2,-3)、(-1,-3)、(-2,-4)、(-1,-1)以及(0,-1),其中(-1,-2)为最先加入历史运动信息列表的位移矢量,(0,-1)为最后加入历史运动信息列表的位移矢量。若该类的序号为3,且解码端按照从左至右的顺序对历史运动信息列表中的位移矢量进行排序,那么解码端能够将位移矢量(-1,-3)加入候选位移矢量列表。若解码端按照从右至左的顺序对历史运动信息列表中的位移矢量进行排序,那么解码端能够将位移矢量(-1,-1)加入候选位移矢量列表。
另外,若历史运动信息列表中目标位置不存在与该类对应的位移矢量,那么解码端能够向候选位移矢量列表中添加预设的位移矢量,可选地,预设矢量包括上述方式1或方式2中第一位移矢量,当然也能够包括零矢量(0,0),其中,第一位移矢量的确定方法参见之前的描述,在此不再赘述。
举例来说,若历史运动信息列表的长度为6,而存在7个类,响应于类7中不存在任一位移矢量,由历史运动信息列表的长度小于类7的序号,因此解码端无法在运动信息列表中查询到与类7对应的位移矢量,解码端能够向候选位移矢量列表中添加预设的位移矢量。
需要说明的是,上述方式1-方式6能够单独使用,也能够同时使用,本申请实施例对此不做限定。
704、解码端根据待解码块的索引,在候选位移矢量列表中确定与待解码块对应的目标位移矢量。
以待解码块的索引为待解码块对应的目标位移矢量在候选位移矢量列表中的顺序标识为例,解码端能够在解码过程中,根据顺序标识,从候选位移矢量列表中获取目标位移矢量。
705、解码端根据目标位移矢量,对待解码块进行解码。
通过本申请实施例提供的技术方案,在解码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,解码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频解码的复杂度,提高了视频解码的效率。
需要说明的是,本申请提供的视频编码方法与视频解码方法属于同一发明构思,对于同一个图像帧中的同一个图像块来说,在视频编码过程中被称为待编码块或已编码块,在视频解码过程中被称为待解码块或已解码块。
图10是本申请实施例提供的一种视频编码方法的流程图,参见图10,方法包括:
1001、在视频编码过程中,编码端对历史运动信息列表中已编码块的位移矢量进行分类,在分类时,若已编码块满足多个类中任一个类的分类条件,则将已编码块的位移矢量加入该类。
可选地,分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
步骤1001与上述步骤701属于同一发明构思,实现方法参见上述步骤701的描述,在此不再赘述。
在一种可能的实施方式中,在分类时,若已编码块满足多个类中任一个类的分类条件,且任一个类中存在任一位移矢量,编码端不将已编码块的位移矢量分入该类。
在一种可能的实施方式中,若已编码块满足多个类中任一个类的分类条件,编码端将已编码块的位移矢量在历史运动信息列表中的索引加入该类。
1002、编码端停止对已编码块的位移矢量的分类。
步骤1002与上述步骤702属于同一发明构思,实现方法参见上述步骤702的描述,在此不再赘述。
1003、编码端根据分类之后的位移矢量,生成候选位移矢量列表,一个待编码块对应于一个候选位移矢量列表。
步骤1003与上述步骤703属于同一发明构思,实现方法参见上述步骤703的描述,在此不再赘述。
在一种可能的实施方式中,编码端根据分类之后的位移矢量,生成候选位移矢量列表能够通过下述任一种方式实现:
方式1、响应于多个类中存在不包含任一个位移矢量的类,编码端根据除类以外的多个类中其他类包含的位移矢量,生成候选位移矢量列表。
方式2、响应于多个类中存在不包含任一个位移矢量的类,编码端将第一位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,响应于多个类中存在不包含任一个位移矢量的类,编码端能够根据多个第一位移矢量生成第一位移矢量列表,编码端从第一位移矢量列表中确定与类对应的第一位移矢量,将与类对应的第一位移矢量加入候选位移矢量列表。
方式3、响应于多个类中存在不包含任一个位移矢量的类,编码端将与待编码块位置相邻的已编码块的第二位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,响应于与待编码块位置相邻的已编码块不对应于任一位移矢量,编码端将第四位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,响应于多个类中存在不包含任一个位移矢量的类,编码端根据与待编码块位置相邻的多个已编码块的第二位移矢量生成第二位移矢量列表。编码端从第二位移矢量列表中确定与类对应的第二位移矢量,将与类对应的第二位移矢量加入候选位移矢量列表。
方式4、响应于多个类中存在不包含任一个位移矢量的类,编码端将与待编码块位置不相邻的已编码块的第三位移矢量加入候选位移矢量列表。
方式5、响应于多个类中存在不包含任一个位移矢量的类,编码端将编码时间与待编码块相邻的已编码块的位移矢量加入候选位移矢量列表。
方式6、响应于多个类中存在不包含任一个位移矢量的类,编码端将历史运动信息列表中目标位置的位移矢量加入候选位移矢量列表。
1004、编码端从候选位移矢量列表中,确定与待编码块对应的目标位移矢量。
可选地,目标位移矢量为率失真参数符合目标条件的位移矢量。
在一种可能的实施方式中,编码端确定候选位移矢量列表中多个位移矢量的率失真参数,将率失真参数最小的位移矢量确定为与待编码块对应的目标位移矢量。
举例来说,若视频编码的码率为1000kbps,编码端能够确定在码率为1000kbps下,候选位移矢量列表中的位移矢量分别对应的率失真参数。采用同样的视频编码方法得到的视频码率和图像失真率之间的关系参见公式(1)。编码端基于公式(1)生成拉格朗日代价函数(2),编码端通过拉格朗日代价函数(2)来确定多种划分模式对应的率失真参数,从而确定率失真参数最小的目标位移矢量。
Figure BDA0002625052800000231
其中,R为码率,D为图像失真率,α为系数,δ2为待编码单元中多个像素点的方差。
Min{J=D+λR} (2)
其中,Min{}为取最小值,λ为系数,J为率失真参数。
1005、编码端根据目标位移矢量,对待编码块进行编码,并在编码信息中添加目标位移矢量的索引。
可选的,目标位移矢量的索引为目标位移矢量在候选位移矢量列表中的顺序标识,比如候选位移矢量列表中存在6个位移矢量,目标位移矢量在候选位移矢量列表中的顺序为2,那么编码端能够将2作为目标位移矢量的索引,在后续的解码过程中,解码端能够通过索引2直接从候选位移矢量列表中获取目标位移矢量。
通过本申请实施例提供的技术方案,在编码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,编码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频编码的复杂度,提高了视频编码的效率。
图11是本申请实施例提供的一种视频解码装置结构示意图,参见图11,装置包括:第一分类模块1101、第一候选位移矢量列表生成模块1102、第一目标位移矢量确定模块1103以及解码模块1104。
第一分类模块1101,用于在视频解码过程中,对历史运动信息列表中已解码块的位移矢量进行分类。在分类时,若已解码块满足多个类中任一个类的分类条件,则将已解码块的位移矢量加入任一个类,并停止对已解码块的位移矢量的分类。
在一种可能的实施方式中,第一分类模块1101还用于在分类时,若已解码块满足多个类中任一个类的分类条件,且任一个类中存在任一位移矢量,不将已解码块的位移矢量分入任一个类。
在一种可能的实施方式中,第一分类模块1101还用于若已解码块满足多个类中任一个类的分类条件,将已解码块的位移矢量在历史运动信息列表中的索引加入任一个类。
在一种可能的实施方式中,装置还包括:
第一候选位移矢量列表生成模块1102,用于根据分类之后的位移矢量,生成候选位移矢量列表,一个待解码块对应于一个候选位移矢量列表。
在一种可能的实施方式中,第一候选位移矢量列表生成模块1102,用于执行下述任一项:
响应于多个类中存在不包含任一个位移矢量的类,根据除类以外的多个类中其他类包含的位移矢量,生成候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将与待解码块位置相邻的已解码块的第二位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将与待解码块位置不相邻的已解码块的第三位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将历史运动信息列表中解码顺序与待解码块相邻的已解码块的位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将历史运动信息列表中目标位置的位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第一候选位移矢量列表生成模块1102,用于响应于多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量生成第一位移矢量列表,从第一位移矢量列表中确定与类对应的第一位移矢量,将与类对应的第一位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第一候选位移矢量列表生成模块1102,用于响应于多个类中存在不包含任一个位移矢量的类,根据与待解码块位置相邻的多个已解码块的第二位移矢量生成第二位移矢量列表。从第二位移矢量列表中确定与类对应的第二位移矢量,将与类对应的第二位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第一候选位移矢量列表生成模块1102,还用于响应于与待解码块位置相邻的已解码块不对应于任一位移矢量,将第四位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,装置还包括:
第一目标位移矢量确定模块1103,用于根据待解码块的索引,在候选位移矢量列表中确定与待解码块对应的目标位移矢量。
解码模块1104,用于根据目标位移矢量,对待解码块进行解码。
在一种可能的实施方式中,分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
通过本申请实施例提供的技术方案,在解码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,解码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频解码的复杂度,提高了视频解码的效率。
图12是本申请实施例提供的一种视频编码装置结构示意图,参见图12,装置包括:第二分类模块1201、第二候选位移矢量列表生成模块1202、第二目标位移矢量确定模块1203以及编码模块1204。
第二分类模块1201,用于在视频编码过程中,对历史运动信息列表中已编码块的位移矢量进行分类。在分类时,若已编码块满足多个类中任一个类的分类条件,则将已编码块的位移矢量加入任一个类,并停止对已编码块的位移矢量的分类。
在一种可能的实施方式中,第二分类模块1201,还用于在分类时,若已编码块满足多个类中任一个类的分类条件,且任一个类中存在任一位移矢量,不将已编码块对应的位移矢量分入任一个类。
在一种可能的实施方式中,第二分类模块1201,用于若已编码块满足多个类中任一个类的分类条件,将已编码块的位移矢量在历史运动信息列表中的索引加入任一个类。
在一种可能的实施方式中,装置还包括:
第二候选位移矢量列表生成模块1202,用于根据分类之后的位移矢量,生成候选位移矢量列表,一个候选位移矢量列表对应于一个待编码块。
第二目标位移矢量确定模块1203,用于从候选位移矢量列表中,确定与待编码块对应的目标位移矢量。
编码模块1204,用于根据目标位移矢量,对待编码块进行编码,并根据目标位移矢量在候选位移矢量列表中的次序,生成待编码块的索引。
在一种可能的实施方式中,第二候选位移矢量列表生成模块1202,用于执行下述任一项:
响应于多个类中存在不包含任一个位移矢量的类,根据除类以外的多个类中其他类包含的位移矢量,生成候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将与待编码块位置相邻的已编码块的第二位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将与待编码块位置不相邻的已编码块的第三位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将历史运动信息列表中编码顺序与待编码块相邻的已编码块位移矢量加入候选位移矢量列表。
响应于多个类中存在不包含任一个位移矢量的类,将历史运动信息列表中编码顺序与待编码块相邻的已编码块的位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第二候选位移矢量列表生成模块1202,用于响应于多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量生成第一位移矢量列表,从第一位移矢量列表中确定与类对应的第一位移矢量,将与类对应的第一位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第二候选位移矢量列表生成模块1202,用于响应于多个类中存在不包含任一个位移矢量的类,根据与待编码块位置相邻的多个已编码块的第二位移矢量生成第二位移矢量列表。从第二位移矢量列表中确定与类对应的第二位移矢量,将与类对应的第二位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第二候选位移矢量列表生成模块1202,还用于响应于与待编码块位置相邻的已编码块不对应于任一位移矢量,将第四位移矢量加入候选位移矢量列表。
在一种可能的实施方式中,第二目标位移矢量确定模块1203,用于确定候选位移矢量列表中多个位移矢量的率失真参数。将率失真参数最小的位移矢量确定为与待编码块对应的目标位移矢量。
在一种可能的实施方式中,分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
通过本申请实施例提供的技术方案,在编码端对历史运动信息列表中的位移矢量进行分类的过程中,一旦一个位移矢量被分入了一个类,编码端不会继续对该位移矢量进行分类,而是会终止对该位移矢量的分类。相较于相关技术中对历史运动信息列表中的位移矢量进行分类的过程,能够避免一个位移矢量被分入多个类的情况,从而在构建候选位移矢量列表时无需进行查重操作,降低了视频编码的复杂度,提高了视频编码的效率。
本申请实施例提供了一种计算机设备,用于执行上述方法,该计算机设备可以实现为终端或者服务器,终端包括编码端和解码端,下面先对终端的结构进行介绍:
图13是本申请实施例提供的一种终端的结构示意图。该终端1300可以是:智能手机、平板电脑、笔记本电脑或台式电脑。终端1300还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端1300包括有:一个或多个处理器1301和一个或多个存储器1302。
处理器1301可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1301可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1301也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1301可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1301还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1302可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1302还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1302中的非暂态的计算机可读存储介质用于存储至少一个程序代码,该至少一个程序代码用于被处理器1301所执行以实现本申请中方法实施例提供的视频解码方法或视频编码方法。
在一些实施例中,终端1300还可选包括有:外围设备接口1303和至少一个外围设备。处理器1301、存储器1302和外围设备接口1303之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1303相连。具体地,外围设备包括:射频电路1304、显示屏1305、摄像头组件1306、音频电路1307、定位组件1308和电源1309中的至少一种。
外围设备接口1303可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1301和存储器1302。在一些实施例中,处理器1301、存储器1302和外围设备接口1303被集成在同一芯片或电路板上;在一些其他实施例中,处理器1301、存储器1302和外围设备接口1303中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1304用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1304通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1304将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1304包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。
显示屏1305用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1305是触摸显示屏时,显示屏1305还具有采集在显示屏1305的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1301进行处理。此时,显示屏1305还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。
摄像头组件1306用于采集图像或视频。可选地,摄像头组件1306包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。
音频电路1307可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1301进行处理,或者输入至射频电路1304以实现语音通信。
定位组件1308用于定位终端1300的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。
电源1309用于为终端1300中的各个组件进行供电。电源1309可以是交流电、直流电、一次性电池或可充电电池。
在一些实施例中,终端1300还包括有一个或多个传感器1310。该一个或多个传感器1310包括但不限于:加速度传感器1311、陀螺仪传感器1312、压力传感器1313、指纹传感器1314、光学传感器1315以及接近传感器1316。
加速度传感器1311可以检测以终端1300建立的坐标系的三个坐标轴上的加速度大小。
陀螺仪传感器1312可以检测终端1300的机体方向及转动角度,陀螺仪传感器1312可以与加速度传感器1311协同采集用户对终端1300的3D动作。
压力传感器1313可以设置在终端1300的侧边框和/或显示屏1305的下层。当压力传感器1313设置在终端1300的侧边框时,可以检测用户对终端1300的握持信号,由处理器1301根据压力传感器1313采集的握持信号进行左右手识别或快捷操作。当压力传感器1313设置在显示屏1305的下层时,由处理器1301根据用户对显示屏1305的压力操作,实现对UI界面上的可操作性控件进行控制。
指纹传感器1314用于采集用户的指纹,由处理器1301根据指纹传感器1314采集到的指纹识别用户的身份,或者,由指纹传感器1314根据采集到的指纹识别用户的身份。
光学传感器1315用于采集环境光强度。在一个实施例中,处理器1301可以根据光学传感器1315采集的环境光强度,控制显示屏1305的显示亮度。
接近传感器1316用于采集用户与终端1300的正面之间的距离。
本领域技术人员可以理解,图13中示出的结构并不构成对终端1300的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
上述计算机设备还可以实现为服务器,下面对服务器的结构进行介绍:
图14是本申请实施例提供的一种服务器的结构示意图,该服务器1400可因配置或性能不同而产生比较大的差异,可以包括一个或多个处理器(Central Processing Units,CPU)1401和一个或多个的存储器1402,其中,所述一个或多个存储器1402中存储有至少一条程序代码,所述至少一条程序代码由所述一个或多个处理器1401加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器1400还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器1400还可以包括其他用于实现设备功能的部件,在此不做赘述。
在示例性实施例中,还提供了一种计算机可读存储介质,例如包括程序代码的存储器,上述程序代码可由处理器执行以完成上述实施例中的视频解码方法或视频编码方法。例如,该计算机可读存储介质可以是只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机程序代码,该计算机程序代码存储在计算机可读存储介质中,计算机设备的处理器从计算机可读存储介质读取该计算机程序代码,处理器执行该计算机程序代码,使得该计算机设备执行上述视频解码方法或上述视频编码方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来程序代码相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
上述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (15)

1.一种视频解码方法,其特征在于,所述方法包括:
在视频解码过程中,对历史运动信息列表中已解码块的位移矢量进行分类;
在分类时,若所述已解码块满足多个类中任一个类的分类条件,则将所述已解码块的位移矢量加入所述任一个类,并停止对所述已解码块的位移矢量的分类。
2.据权利要求1所述的方法,其特征在于,所述若所述已解码块满足多个类中任一个类的分类条件,将所述已解码块的位移矢量加入所述任一个类包括:
若所述已解码块满足多个类中任一个类的分类条件,将所述已解码块的位移矢量在所述历史运动信息列表中的索引加入所述任一个类。
3.根据权利要求1所述的方法,其特征在于,所述停止对所述已解码块的位移矢量的分类之后,所述方法还包括:
根据分类之后的位移矢量,生成候选位移矢量列表,一个待解码块对应于一个候选位移矢量列表。
4.根据权利要求3所述的方法,其特征在于,所述根据分类之后的位移矢量,生成候选位移矢量列表包括下述任一项:
响应于所述多个类中存在不包含任一个位移矢量的类,根据除所述类以外的所述多个类中其他类包含的位移矢量,生成所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待解码块位置相邻的已解码块的第二位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将与所述待解码块位置不相邻的已解码块的第三位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中解码顺序与所述待解码块相邻的已解码块的位移矢量加入所述候选位移矢量列表;
响应于所述多个类中存在不包含任一个位移矢量的类,将所述历史运动信息列表中目标位置的位移矢量加入所述候选位移矢量列表。
5.根据权利要求4所述的方法,其特征在于,所述响应于所述多个类中存在不包含任一个位移矢量的类,将第一位移矢量加入所述候选位移矢量列表包括:
响应于所述多个类中存在不包含任一个位移矢量的类,根据多个第一位移矢量生成第一位移矢量列表;
从所述第一位移矢量列表中确定与所述类对应的第一位移矢量,将所述与所述类对应的第一位移矢量加入所述候选位移矢量列表。
6.根据权利要求4所述的方法,其特征在于,所述响应于所述多个类中存在不包含任一个位移矢量的类,将与待解码块位置相邻的已解码块的第二位移矢量加入所述候选位移矢量列表包括:
响应于所述多个类中存在不包含任一个位移矢量的类,根据与所述待解码块位置相邻的多个已解码块的第二位移矢量生成第二位移矢量列表;
从所述第二位移矢量列表中确定与所述类对应的第二位移矢量,将所述与所述类对应的第二位移矢量加入所述候选位移矢量列表。
7.根据权利要求4所述的方法,其特征在于,所述将与待解码块位置相邻的已解码块的位移矢量加入所述候选位移矢量列表之前,所述方法还包括:
响应于与所述待解码块位置相邻的已解码块不对应于任一位移矢量,将第四位移矢量加入所述候选位移矢量列表。
8.根据权利要求3所述的方法,其特征在于,所述生成候选位移矢量列表之后,所述方法还包括:
根据待解码块的索引,在所述候选位移矢量列表中确定与所述待解码块对应的目标位移矢量;
根据所述目标位移矢量,对所述待解码块进行解码。
9.根据权利要求1~8任一项所述的方法,其特征在于,所述分类条件包括以下至少其中之一:
已解码块的尺寸大于或等于尺寸阈值、已解码块的位移矢量的使用次数大于次数阈值以及已解码块与待解码块之间的空间位置关系符合位置条件。
10.一种视频编码方法,其特征在于,包括:
在视频编码过程中,对历史运动信息列表中已编码块的位移矢量进行分类;
在分类时,若所述已编码块满足多个类中任一个类的分类条件,则将所述已编码块的位移矢量加入所述任一个类,并停止对所述已编码块的位移矢量的分类。
11.根据权利要求10所述的方法,其特征在于,所述停止对所述已编码块的位移矢量的分类之后,所述方法还包括:
根据分类之后的位移矢量,生成候选位移矢量列表,一个候选位移矢量列表对应于一个待编码块;
从所述候选位移矢量列表中,确定与所述待编码块对应的目标位移矢量;
根据所述目标位移矢量,对所述待编码块进行编码,并根据所述目标位移矢量在所述候选位移矢量列表中的次序,生成所述待编码块的索引。
12.根据权利要求10所述的方法,其特征在于,所述若所述已编码块满足多个类中任一个类的分类条件,将所述已编码块的位移矢量加入所述任一个类包括:
若所述已编码块满足多个类中任一个类的分类条件,将所述已编码块的位移矢量在所述历史运动信息列表中的索引加入所述任一个类。
13.一种视频解码装置,其特征在于,所述装置包括:
分类模块,用于在视频解码过程中,对历史运动信息列表中已解码块的位移矢量进行分类;在分类时,若所述已解码块满足多个类中任一个类的分类条件,则将所述已解码块的位移矢量加入所述任一个类,并停止对所述已解码块的位移矢量的分类。
14.一种视频编码装置,其特征在于,所述装置包括:
分类模块,用于在视频编码过程中,对历史运动信息列表中已编码块的位移矢量进行分类;在分类时,若所述已编码块满足多个类中任一个类的分类条件,则将所述已编码块的位移矢量加入所述任一个类,并停止对所述已编码块的位移矢量的分类。
15.一种计算机设备,其特征在于,所述计算机设备包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述程序代码由所述一个或多个处理器加载并执行以实现如权利要求1至权利要求9任一项所述的视频解码方法,或如权利要求10至权利要求12任一项所述的视频编码方法。
CN202010794517.8A 2020-08-10 2020-08-10 视频解码方法、视频编码方法、装置、设备和存储介质 Pending CN114079787A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202010794517.8A CN114079787A (zh) 2020-08-10 2020-08-10 视频解码方法、视频编码方法、装置、设备和存储介质
PCT/CN2021/109390 WO2022033325A1 (zh) 2020-08-10 2021-07-29 视频解码方法、视频编码方法、装置、设备和存储介质
EP21855378.2A EP4102838A4 (en) 2020-08-10 2021-07-29 VIDEO DECODING METHOD AND APPARATUS, VIDEO ENCODING METHOD AND APPARATUS, AND DEVICE AND STORAGE MEDIA
US17/889,870 US20220394285A1 (en) 2020-08-10 2022-08-17 Video decoding method and apparatus, video encoding method and apparatus, and device and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010794517.8A CN114079787A (zh) 2020-08-10 2020-08-10 视频解码方法、视频编码方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN114079787A true CN114079787A (zh) 2022-02-22

Family

ID=80247683

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010794517.8A Pending CN114079787A (zh) 2020-08-10 2020-08-10 视频解码方法、视频编码方法、装置、设备和存储介质

Country Status (4)

Country Link
US (1) US20220394285A1 (zh)
EP (1) EP4102838A4 (zh)
CN (1) CN114079787A (zh)
WO (1) WO2022033325A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8665326B2 (en) * 2009-01-30 2014-03-04 Olympus Corporation Scene-change detecting device, computer readable storage medium storing scene-change detection program, and scene-change detecting method
KR101456499B1 (ko) * 2010-07-09 2014-11-03 삼성전자주식회사 움직임 벡터의 부호화 방법 및 장치, 그 복호화 방법 및 장치
GB201409634D0 (en) * 2014-05-30 2014-07-16 Canon Kk Intra block copy mode encoding choice
US20180242024A1 (en) * 2017-02-21 2018-08-23 Mediatek Inc. Methods and Apparatuses of Candidate Set Determination for Quad-tree Plus Binary-tree Splitting Blocks

Also Published As

Publication number Publication date
US20220394285A1 (en) 2022-12-08
EP4102838A1 (en) 2022-12-14
WO2022033325A1 (zh) 2022-02-17
EP4102838A4 (en) 2023-08-02

Similar Documents

Publication Publication Date Title
CN111770340B (zh) 视频编码方法、装置、设备以及存储介质
US10986332B2 (en) Prediction mode selection method, video encoding device, and storage medium
EP4022573A1 (en) Predictive coding for point cloud compression
JP7085014B2 (ja) ビデオ符号化方法並びにその装置、記憶媒体、機器、及びコンピュータプログラム
TW201507440A (zh) 用於視窗內容編碼之視窗圖與基於標準的漸進式編解碼器
US9984504B2 (en) System and method for improving video encoding using content information
CN110708557B (zh) 解码器中的视频解码方法和设备、计算机设备
CN112532975B (zh) 视频编码方法、装置、计算机设备及存储介质
CN109168032B (zh) 视频数据的处理方法、终端、服务器及存储介质
US20230328233A1 (en) Reference frame selection method and apparatus, device, and medium
CN110572679B (zh) 帧内预测的编码方法、装置、设备及可读存储介质
US10536726B2 (en) Pixel patch collection for prediction in video coding system
JP7211373B2 (ja) 動画像解析装置、動画像解析システム、動画像解析方法、及びプログラム
CN114079787A (zh) 视频解码方法、视频编码方法、装置、设备和存储介质
CN111770339B (zh) 视频编码方法、装置、设备及存储介质
CN116563771A (zh) 图像识别方法、装置、电子设备及可读存储介质
CN112437304B (zh) 视频解码方法、编码方法、装置、设备及可读存储介质
CN105847822A (zh) 一种视频解码方法及装置
CN116760986B (zh) 候选运动矢量生成方法、装置、计算机设备和存储介质
CN114422782B (zh) 视频编码方法、装置、存储介质及电子设备
US20240095966A1 (en) Coding of displacements by use of contexts for vertex mesh (v-mesh)
CN117768650A (zh) 图像块的色度预测方法、装置、电子设备及存储介质
CN116546203A (zh) 视频帧处理方法、装置、电子设备及可读存储介质
CN115811615A (zh) 屏幕视频的编码方法、装置、计算机设备及存储介质
Duvar et al. Adaptive bit-plane selection-based low complexity motion estimation for screen content coding

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40064589

Country of ref document: HK