CN115883835A - 一种视频编码方法、装置、设备及存储介质 - Google Patents
一种视频编码方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN115883835A CN115883835A CN202310195983.8A CN202310195983A CN115883835A CN 115883835 A CN115883835 A CN 115883835A CN 202310195983 A CN202310195983 A CN 202310195983A CN 115883835 A CN115883835 A CN 115883835A
- Authority
- CN
- China
- Prior art keywords
- coding
- coding unit
- prediction mode
- video frame
- target video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 238000012216 screening Methods 0.000 claims description 44
- 238000012545 processing Methods 0.000 claims description 34
- 230000015654 memory Effects 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 16
- 238000001914 filtration Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 13
- 230000000694 effects Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000000638 solvent extraction Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请实施例公开了一种视频编码方法、装置、设备及存储介质。其中方法包括:获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,编码信息包括M个第一编码单元在目标视频帧中的位置及预测模式,获取目标视频帧中待编码的第二编码单元,根据M个第一编码单元中与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。可见,通过与第二编码单元存在重叠区域的第一编码单元的预测模式,来确定第二编码单元的预测模式,可以简化第二编码单元的预测模式的确定过程,进而提高视频帧的编码效率。
Description
技术领域
本申请涉及计算机技术领域,具体涉及一种视频编码方法、装置、设备及存储介质。
背景技术
随着科技研究的进步,视频消费者对视频质量(如清晰度)的需求不断提高。为了支持高质量视频的传输,视频的编解码标准也在不断更新。研究发现,将视频按照第一编解码标准(旧的编解码标准)编码的第一码流数据转换为按照第二编解码标准(新的编解码标准)编码的第二码流数据,需要先对第一码流数据进行解码,再按照第二编解码标准对解码得到的视频进行重新编码。在按照第二编解码标准对解码得到的视频进行重新编码的过程中,通常需要对视频帧中各个编码块在不同预测模式下的编码效率进行比较,来确定该编码块的预测模式,视频帧的编码效率较低。
发明内容
本申请实施例提供了一种视频编码方法、装置、设备及计算机可读存储介质,能够提高视频帧的编码效率。
一方面,本申请实施例提供了一种视频编码方法,包括:
获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准对目标视频帧进行划分得到的;编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式,M为正整数;
获取目标视频帧中待编码的第二编码单元,第二编码单元是按照第二编解码标准对目标视频帧进行划分得到的,第二编解码标准不同于第一编解码标准;
根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元;
根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式;
按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
一方面,本申请实施例提供了一种视频编码装置,该视频编码装置包括:
获取单元,用于获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准对目标视频帧进行划分得到的;编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式,M为正整数;
以及用于获取目标视频帧中待编码的第二编码单元,第二编码单元是按照第二编解码标准对目标视频帧进行划分得到的,第二编解码标准不同于第一编解码标准;
处理单元,用于根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元;
以及用于根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式;
以及用于按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
在一种实施方式中,若第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;则处理单元用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
在一种实施方式中,若第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;则处理单元用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,预测模式包括帧内预测模式和帧间预测模式;处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一数量占比,若第一数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二数量占比,若第二数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
在一种实施方式中,预测模式包括帧内预测模式和帧间预测模式;处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一面积占比,若第一面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二面积占比,若第二面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
在一种实施方式中,处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
若k个第一编码单元中存在至少一个第一编码单元包含于第二编码单元,则根据至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
从k个第一编码单元中随机筛选出一个第一编码单元;
若被筛选出的第一编码单元与第二编码单元的重叠面积大于面积阈值,则将第二编码单元的预测模式设为被筛选出的第一编码单元的预测模式。
在一种实施方式中,处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
获取k个第一编码单元与第二编码单元的重叠面积;
从k个第一编码单元中筛选出满足重叠面积筛选规则的第一编码单元;
根据满足重叠面积筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式;
其中,满足重叠面积筛选规则的第一编码单元包括以下任一个:重叠面积大于面积阈值的第一编码单元,重叠占比大于占比阈值的第一编码单元,重叠面积大于面积阈值且重叠占比大于占比阈值的第一编码单元。
在一种实施方式中,处理单元用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
获取k个第一编码单元中每个第一编码单元中的第一目标点的位置信息,以及第二编码单元中的第二目标点的位置信息;
通过各个第一编码单元中的第一目标点的位置信息和第二编码单元中的第二目标点的位置信息,计算各个第一编码单元中的第一目标点与第二编码单元中的第二目标点的距离;
从k个第一编码单元中筛选出满足距离筛选规则的第一编码单元,满足距离筛选规则的第一编码单元中的第一目标点与第二目标点的距离小于距离阈值;
根据满足距离筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,若第二编码单元包含于至少两个第一编码单元,且至少两个第一编码单元的预测模式相同;则处理单元用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
将第二编码单元的预测模式设为至少两个第一编码单元的预测模式。
在一种实施方式中,处理单元用于,获取目标视频帧中待编码的第二编码单元,具体用于:
按照P种预设划分方式对待编码对象进行划分,得到待编码对象的P种划分结果,待编码对象为目标视频帧,或者为目标视频帧中的目标区域,P为正整数;
若待编码对象在P种划分结果下的编码效率均不高于待编码对象的编码效率,则将待编码对象确定为目标视频帧中待编码的第二编码单元。
在一种实施方式中,处理单元用于,获取目标视频帧和目标视频帧的编码信息,具体用于:
获取目标视频帧在第一编解码标准下的码流数据;
对目标视频帧在第一编解码标准下的码流数据进行解码,得到目标视频帧和目标视频帧的编码信息。
相应地,本申请提供了一种计算机设备,该计算机设备包括:
存储器,存储器中存储有计算机程序;
处理器,用于加载计算机程序实现上述视频编码方法。
相应地,本申请提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,该计算机程序适于由处理器加载并执行上述视频编码方法。
相应地,本申请提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述视频编码方法。
本申请实施例中,获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,编码信息包括M个第一编码单元在目标视频帧中的位置及预测模式,获取目标视频帧中待编码的第二编码单元,根据M个第一编码单元中与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。可见,通过与第二编码单元存在重叠区域的第一编码单元的预测模式,来确定第二编码单元的预测模式,可以简化第二编码单元的预测模式的确定过程,进而提高视频帧的编码效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种视频编码方案的场景示意图;
图2 为本申请实施例提供的一种视频编码方法的流程图;
图3a为本申请实施例提供的基本划分方式示意图;
图3b为本申请实施例提供的一种视频帧划分结果示意图;
图4为本申请实施例提供的另一种视频编码方法的流程图;
图5a为本申请实施例提供的一种第二编码单元包含于一个第一编码单元的示意图;
图5b为本申请实施例提供的一种第二编码单元包含于多个第一编码单元的示意图;
图5c为本申请实施例提供的一种码流转换流程示意图;
图6为本申请实施例提供的一种视频编码装置的结构示意图;
图7为本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
下面对本申请涉及的相关术语进行简单介绍:
高效率视频编码(High Efficiency Video Coding,HEVC)标准:也称为H.265编解码标准,可用于扩充H.264/AVC编解码标准,该标准规定了H.265对应的码流数据的编解码流程和相关语法。
多功能视频编码(Versatile Video Coding,VVC)标准:也称为H.266编解码标准,该标准规定了H.266对应的码流数据的编解码流程和相关语法。
编码单元(Coding Unit,CU):是指对视频帧进行编码时的基本单元,在编码过程中,编码单元可以是指整个视频帧(不对视频帧进行划分的情况下),也可以是指视频帧中的一部分区域(对视频帧进行划分的情况下)。
帧内预测:是指编码单元在编码时,不参考视频中除该编码单元所属视频帧以外的其他视频帧的信息。
帧间预测:是指编码单元在编码时,参考视频中与该编码单元所属视频帧相邻的视频帧的信息。
请参阅图1,图1为本申请实施例提供的一种视频编码方案的场景示意图。如图1所示,该视频编码方案可以由计算机设备101执行,计算机设备101可以是终端设备,也可以是服务器。其中,终端设备包括但不限于:智能手机(如Android手机、IOS手机等)、平板电脑、便携式个人计算机、智能家电、车载终端、可穿戴设备等智能设备,本申请实施例对此不做限定。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(ContentDelivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器,本申请实施例对此不做限定。
需要说明的是,计算机设备的数量仅用于举例,并不构成本申请的实际限定;例如,编码场景中还可以包括终端设备102,或者服务器103。目标视频帧和目标视频帧的中间信息可以是由除计算机设备101以外的其他计算机设备(如终端设备102)传递给计算机设备101的,也可以是由计算机设备101对本地存储或者获取的目标视频帧按照第一编解码标准进行编码得到的码流数据进行解码得到的,本申请对此不作限制。
视频编码方案的大致原理如下:
(1)计算机设备101获取目标视频帧和目标视频帧的编码信息。目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准(如HEVC标准)对目标视频帧进行划分得到的,具体的划分方式可以包括以下任一种:不划分、水平二划分、垂直二划分、四划分、水平三划分、垂直三划分。编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式,M为正整数。每个第一编码单元在目标视频帧中的位置可以通过坐标、坐标与边长结合等位置指示方式进行指示,本申请对此不作限制。预测模式具体可以包括帧间预测模式和帧内预测模式。
在一种实施方式中,计算机设备101获取目标视频帧在第一编解码标准下的码流数据,并按照第一编解码标准对应的解码标准对目标视频帧在第一编解码标准下的码流数据进行解码,得到目标视频帧和该目标视频帧的编码信息。
(2)计算机设备101获取目标视频帧中待编码的第二编码单元,第二编码单元是按照第二编解码标准(如VVC标准)对目标视频帧进行划分得到的,第一编解码标准和第二编解码标准不同。需要说明的是,在具体实现过程中,按照第一编解码标准对目标视频帧进行划分和按照第二编解码标准对目标视频帧进行划分的结果可能相同,也可能不同。
在一种实施方式中,计算机设备101按照第二编解码标准对目标视频帧进行划分,得到一个或多个第二编码单元。待编码的第二编码单元可以是一个或多个第二编码单元中的任一个。
(3)计算机设备101根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元。
在一种实施方式中,第一编码单元和第二编码单元的位置可以通过顶点坐标进行指示,计算机设备101可以通过第一编码单元和第二编码单元的坐标,确定M个第一编码单元,以及第二编码单元在目标视频帧中的对应区域,并根据M个第一编码单元,以及第二编码单元在目标视频帧中的对应区域,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元。
(4)计算机设备101根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;也就是说,第二编码单元仅与第j个第一编码单元存在重叠区域。计算机设备101将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
在另一种实施方式中,第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式相同,k为大于1且小于等于M的整数;也就是说,第二编码单元与M个第一编码单元中的至少两个第一编码单元存在重叠区域。计算机设备101将第二编码单元的预测模式设为第k个第一编码单元中任一个第一编码单元的预测模式。
在又一种实施方式中,第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;也就是说,第二编码单元与M个第一编码单元中的至少两个第一编码单元存在重叠区域。计算机设备101根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
(5)计算机设备101按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。在一种实施方式中,目标视频帧按照第二编解码标准被划分为一个或多个第二编码单元,在获取目标视频帧的编码信息后,计算机设备101可以按照上述步骤(3)和步骤(4)中的方法确定每个第二编码单元的预测模式,并按照各个第二编码单元的预测模式对其进行编码,到目标视频帧在第二编解码标准下的码流数据。
本申请实施例中,获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,编码信息包括M个第一编码单元在目标视频帧中的位置及预测模式,获取目标视频帧中待编码的第二编码单元,根据M个第一编码单元中与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。可见,通过与第二编码单元存在重叠区域的第一编码单元的预测模式,来确定第二编码单元的预测模式,可以简化第二编码单元的预测模式的确定过程,进而提高视频帧的编码效率。
基于上述视频编码方案,本申请实施例提出更为详细的视频编码方法,下面将结合附图对本申请实施例提出的视频编码方法进行详细介绍。
请参阅图2,图2为本申请实施例提供的一种视频编码方法的流程图,该视频编码方法可以由计算机设备执行,该计算机设备可以是终端设备,也可以是服务器。如图2所示,该视频编码方法可包括如下步骤S201-S205:
S201、获取目标视频帧和目标视频帧的编码信息。
目标视频帧可以是待转换视频中的任一个视频帧,所谓待转换视频可以理解为需要将按照第一编解码标准(如HEVC标准)编码得到的码流数据,转换为按照第二编解码标准(如VVC标准)编码得到的码流数据的视频。
目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准对目标视频帧进行划分得到的,M为正整数。图3a为本申请实施例提供的基本划分方式示意图。如图3a所示,基本划分方式可以包括以下任一种:不划分、水平二划分、垂直二划分、四划分、水平三划分、垂直三划分。
可以理解的是,在按照第一编解码标准对目标视频帧进行划分时,上述6种基本划分方式可以相互结合,且按照第一编解码标准对目标视频帧进行划分的次数不作限制;例如,先对目标视频帧进行水平二划分,得到目标视频帧的上半部分和目标视频帧的下半部分;再对目标视频帧的上半部分进行垂直三划分,不对目标视频帧的下半部分进行进一步划分。图3b为本申请实施例提供的一种视频帧划分结果示意图。如图3b所示,先对目标视频帧进行四划分,得到目标视频帧的左上半部分、右上半部分、左下半部分和右下半部分;不对目标视频帧的左上半部分进行进一步划分;对目标视频帧的右上半部分再次进行四划分;对目标视频帧的左下半部分进行水平二划分,再对目标视频帧的左下半部分的上半部分进行垂直三划分,不对目标视频帧的左下半部分的下半部分进行进一步划分;对目标视频帧的右下半部分进行水平三划分。
编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式。每个第一编码单元在目标视频帧中的位置可以通过坐标、坐标与边长结合等位置指示方式进行指示,本申请对此不作限制。每个第一编码单元的预测模式可以为帧间预测模式,或者帧内预测模式,具体根据第一编码单元在两种预测模式下的编码效率决定。
在一种实施方式中,计算机设备可以获取待转换视频在第一编解码标准下的码流数据,并从待转换视频在第一编解码标准下的码流数据中获取目标视频帧在第一编解码标准下的码流数据,目标视频帧可以是待转换视频中的任一个视频帧。在获取目标视频帧在第一编解码标准下的码流数据后,计算机设备可以按照第一编解码标准对应的解码标准对目标视频帧在第一编解码标准下的码流数据进行解码,得到目标视频帧和该目标视频帧的编码信息。
S202、获取目标视频帧中待编码的第二编码单元。
第二编码单元是按照第二编解码标准(如VVC标准)对目标视频帧进行划分得到的,本申请中的第一编解码标准和第二编解码标准不同。
在一种实施方式中,计算机设备按照P种预设划分方式(如图3a中除不划分以外的其它五种划分方式)对待编码对象进行划分,得到待编码对象的P种划分结果;其中,待编码对象可以为目标视频帧,也可以为目标视频帧中的目标区域(如目标视频帧的上半部分),P为正整数。若待编码对象在P种划分结果下的编码效率均不高于待编码对象的编码效率(即待编码对象在不划分的情况下编码效率),则计算机设备可以将该待编码对象确定为目标视频帧中待编码的第二编码单元。相应地,若待编码对象在P种划分结果中,存在至少一种划分结果对应的编码效率高于待编码对象的编码效率(即待编码对象在不划分的情况下编码效率),则计算机设备可以(采用编码效率最高的划分结果对应的划分方式)对该待编码对象进行进一步划分,直至划分得到的编码单元在不划分的情况下编码效率最高。
需要说明的是,在具体实现过程中,按照第一编解码标准对目标视频帧进行划分和按照第二编解码标准对目标视频帧进行划分所采用的基本划分方式可以相同;例如,按照第一编解码标准对目标视频帧进行划分和按照第二编解码标准对目标视频帧进行划分的过程中,计算机设备所采用的基本划分方式均为图3a中所示的6种基本划分方式。按照第一编解码标准对目标视频帧进行划分和按照第二编解码标准对目标视频帧进行划分的结果可能相同,也可能不同。
S203、根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元。
在一种实施方式中,第一编码单元和第二编码单元的位置可以通过顶点坐标进行指示,计算机设备可以通过第一编码单元和第二编码单元的坐标,确定M个第一编码单元,以及第二编码单元在目标视频帧中的对应区域,并根据M个第一编码单元,以及第二编码单元在目标视频帧中的对应区域,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元。
举例来说,假设第二编码单元的左上角顶点坐标为(a0, b0),右下角顶点坐标为(a1,b1);第一编码单元的左上角顶点坐标为(c0, d0),右下角顶点坐标为(c1,d1)。那么第一编码单元和第二编码单元存在重叠区域需要满足的条件为以下任一项:b1d0/>b0且a0c0/>a1;b1/>d0/>b0且a0/>c1/>a1;b1/>d1/>b0且a0/>c0/>a1;b1/>d1/>b0且a0/>c1/>a1。
S204、根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;也就是说,第二编码单元仅与第j个第一编码单元存在重叠区域。计算机设备将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
在另一种实施方式中,第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式相同,k为大于1且小于等于M的整数;也就是说,第二编码单元与M个第一编码单元中的至少两个第一编码单元存在重叠区域。计算机设备将第二编码单元的预测模式设为第k个第一编码单元中任一个第一编码单元的预测模式。
在又一种实施方式中,第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;也就是说,第二编码单元与M个第一编码单元中的至少两个第一编码单元存在重叠区域。计算机设备根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
S205、按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
在一种实施方式中,若第二编码单元的预测模式为帧内预测,则计算机设备直接按照第二编解码标准对第二编码单元进行编码,得到第二编码单元的编码结果;或者计算机设备参考目标视频帧中除当前正在编码的第二编码单元以外的其它第二编码单元(按照第二编解码标准)对当前正在编码的第二编码单元进行编码得到第二编码单元的编码结果。在得到目标视频帧包含的所有第二编码单元的编码结果后,计算机设备基于目标视频帧包含的所有第二编码单元的编码结果,得到目标视频帧在第二编解码标准下的码流数据。
在另一种实施方式中,若第二编码单元的预测模式为帧间预测,则计算机设备参考目标视频帧的相邻帧(中的第二编码单元)对第二编码单元进行编码,得到第二编码单元的编码结果。其中,目标视频帧的相邻帧是指视频中播放顺序在目标视频帧之前或之后的一帧或多帧。在得到目标视频帧包含的所有第二编码单元的编码结果后,计算机设备基于目标视频帧包含的所有第二编码单元的编码结果,得到目标视频帧在第二编解码标准下的码流数据。
本申请实施例中,获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,编码信息包括M个第一编码单元在目标视频帧中的位置及预测模式,获取目标视频帧中待编码的第二编码单元,根据M个第一编码单元中与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。可见,通过与第二编码单元存在重叠区域的第一编码单元的预测模式,来确定第二编码单元的预测模式,可以简化第二编码单元的预测模式的确定过程,进而提高视频帧的编码效率。
请参阅图4,图4为本申请实施例提供的另一种视频编码方法的流程图,该视频编码方法可以由计算机设备执行,该计算机设备可以是终端设备,也可以是服务器。如图4所示,该视频编码方法可包括如下步骤S401-S407:
S401、获取目标视频帧和目标视频帧的编码信息。
S402、获取目标视频帧中待编码的第二编码单元。
S403、根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元。
步骤S401-步骤S403的具体实施方式可参考图2中步骤S201-步骤S203中的实施方式,在此不再赘述。
S404、若第二编码单元包含于第j个第一编码单元,则将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
图5a为本申请实施例提供的一种第二编码单元包含于一个第一编码单元的示意图。如图5a所示,当第二编码单元包含于一个第一编码单元时,第二编码单元仅与一个第一编码单元存在重叠区域。具体来说,第二编码单元包含于第j个第一编码单元是指第二编码单元与第j个第一编码单元重叠,或者是指第二编码单元位于第j个第一编码单元的内部,j为小于等于M的正整数。
在一种实施方式中,假设第二编码单元的左上角顶点坐标为(a0, b0),右下角顶点坐标为(a1,b1);第j个第一编码单元的左上角顶点坐标为(c0, d0),右下角顶点坐标为(c1,d1)。那么第二编码单元包含于第j个第一编码单元需满足的条件可以表示为:a0≥c0且b0≥d0且a1≤c1且b1≤d1。
S405、若第二编码单元包含于多个第一编码单元,且第一编码单元的预测模式相同,则将第二编码单元的预测模式设为第一编码单元的预测模式。
图5b为本申请实施例提供的一种第二编码单元包含于多个第一编码单元的示意图。如图5b所示,当第二编码单元包含于至少两个第一编码单元时,第二编码单元与多个(至少两个)第一编码单元存在重叠区域。
在一种实施方式中,第二编码单元包含于至少两个第一编码单元,且与第二编码单元存在重叠区域的第一编码单元的预测模式均相同,则计算机设备将第二编码单元的预测模式设为与第二编码单元存在重叠区域的第一编码单元的预测模式。
S406、若第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,则根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。k为大于1且小于等于M的整数。
在一种实施方式中,预测模式包括帧内预测模式和帧间预测模式。计算机设备统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一数量占比,第一数量占比是指k个第一编码单元中,预测模式为帧内预测模式的第一编码单元的数量与k的比值。若第一数量占比大于数量比例阈值(如50%、70%等),则计算机设备将第二编码单元的预测模式确定为帧内预测模式。可选的,若第一数量占比小于数量比例阈值(如50%),则计算机设备将第二编码单元的预测模式确定为帧间预测模式。
类似地,计算机设备也可以统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二数量占比,第二数量占比是指k个第一编码单元中,预测模式为帧间预测模式的第一编码单元的数量与k的比值。若第二数量占比大于数量比例阈值(如50%、70%等),则计算机设备将第二编码单元的预测模式确定为帧间预测模式。可选的,若第二数量占比小于数量比例阈值(如50%),则计算机设备将第二编码单元的预测模式确定为帧内预测模式。
在一个实施例中,计算机设备统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一数量占比,并统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二数量占比;若第一数量占比和第二数量占比均不大于数量比例阈值,则计算机设备可以比较第一数量占比和第二数量占比的大小,若第一数量占比大于第二数量占比,则将第二编码单元的预测模式确定为帧内预测模式;若第一数量占比小于第二数量占比,则将第二编码单元的预测模式确定为帧间预测模式。若第一数量占比和第二数量占比均不大于数量比例阈值,计算机设备还可以随机从帧间预测模式和帧内预测模式中随机选择一种作为第二编码单元的预测模式,或者比较第二编码单元在帧间预测模式下的编码效率和在帧内预测模式下的编码效率,并将编码效率高的预测模式确定为第二编码单元的预测模式。
在另一种实施方式中,预测模式包括帧内预测模式和帧间预测模式。计算机设备统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一面积占比,第一面积占比是指预测模式为帧内预测模式的第一编码单元与第二编码单元的重叠面积与第二编码单元的面积的比值;例如,假设预测模式为帧内预测模式的第一编码单元与第二编码单元的重叠面积为35,第二编码单元的面积为50,则第一面积占比为70%。若第一面积占比大于面积比例阈值(如50%、70%等),则计算机设备将第二编码单元的预测模式确定为帧内预测模式。可选的,若第一面积占比小于面积比例阈值(如50%),则计算机设备将第二编码单元的预测模式确定为帧间预测模式。
类似地,计算机设备也可以统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二面积占比,第二面积占比是指预测模式为帧间预测模式的第一编码单元与第二编码单元的重叠面积与第二编码单元的面积的比值;例如,假设预测模式为帧间预测模式的第一编码单元与第二编码单元的重叠面积为44,第二编码单元的面积为50,则第一面积占比为88%。若第二面积占比大于面积比例阈值(如50%、70%等),则计算机设备将第二编码单元的预测模式确定为帧间预测模式。可选的,若第二面积占比小于面积比例阈值(如50%),则计算机设备将第二编码单元的预测模式确定为帧内预测模式。
在一个实施例中,计算机设备统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一面积占比,并统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二面积占比;若第一面积占比和第二面积占比均不大于面积比例阈值,则计算机设备可以比较第一面积占比和第二面积占比的大小,若第一面积占比大于第二面积占比,则将第二编码单元的预测模式确定为帧内预测模式;若第一面积占比小于第二面积占比,则将第二编码单元的预测模式确定为帧间预测模式。若第一面积占比和第二面积占比均不大于面积比例阈值,计算机设备还可以随机从帧间预测模式和帧内预测模式中随机选择一种作为第二编码单元的预测模式,或者比较第二编码单元在帧间预测模式下的编码效率和在帧内预测模式下的编码效率(或失真率),并将编码效率(或失真率)高的预测模式确定为第二编码单元的预测模式。
在又一种实施方式中,计算机设备可以从k个第一编码单元中随机筛选出一个第一编码单元;若被筛选出的第一编码单元与第二编码单元的重叠面积大于面积阈值,则将第二编码单元的预测模式设为被筛选出的第一编码单元的预测模式。其中,面积阈值可以是固定值,也可以是根据第一编码单元的面积计算得到的;例如,面积阈值为选中的第一编码单元的总面积的80%。相应地,若被筛选出的第一编码单元与第二编码单元的重叠面积小于等于面积阈值,则计算机设备继续从除已被筛选过的第一编码单元外的其它第一编码单元中随机筛选第一编码单元,直至确定第二编码单元的预测模式。若k个第一编码单元与第二编码单元的重叠面积均小于等于面积阈值,则将第二编码单元的预测模式确定为k个第一编码单元中与第二编码单元重叠面积最大的第一编码单元的预测模式。
在再一种实施方式中,计算机设备获取k个第一编码单元与第二编码单元的重叠面积,并从k个第一编码单元中筛选出满足重叠面积筛选规则的第一编码单元。在筛选出满足重叠面积筛选规则的第一编码单元后,计算机设备根据满足重叠面积筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式。其中,满足重叠面积筛选规则的第一编码单元包括以下任一个:重叠面积大于面积阈值的第一编码单元,重叠占比大于占比阈值的第一编码单元,重叠面积大于面积阈值且重叠占比大于占比阈值的第一编码单元。重叠占比是指第一编码单元与第二编码单元的重叠面积与该第一编码单元的面积的比值;例如,假设第一编码单元与第二编码单元的重叠面积为37,且第一编码单元的面积为50,则该第一编码单元的重叠占比为74%。若满足重叠面积筛选规则的第一编码单元的数量为1,则计算机设备可以直接将第二编码单元的预测模式设为第一编码单元的预测模式;若满足重叠面积筛选规则的第一编码单元的数量为多个(至少两个),则计算机设备可以通过统计各种预测模式对应的第一编码单元的数量占比或者面积占比等方式,来确定第二编码单元的预测模式。
在另一种实施方式中,计算机设备获取第一编码单元中的第一目标点的位置信息(如坐标)和第二编码单元中第二目标点的位置信息,通过获取的位置信息计算各个第一编码单元中的第一目标点(如第一编码单元的左上顶点、右上顶点、中心点等等)与第二编码单元的第二目标点(如第二编码单元的左上顶点、右上顶点、中心点等等)的距离。在得到各个第一编码单元中的第一目标点与第二编码单元的第二目标点的距离后,计算机设备从k个第一编码单元中筛选出满足距离筛选规则的第一编码单元;其中,满足距离筛选规则的第一编码单元中的第一目标点与第二目标点的距离小于距离阈值(如距离小于10)。计算机设备根据满足距离筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式。若满足距离筛选规则的第一编码单元的数量为1,则计算机设备可以直接将第二编码单元的预测模式设为第一编码单元的预测模式;若满足距离筛选规则的第一编码单元的数量为多个(至少两个),则计算机设备可以通过统计各种预测模式对应的第一编码单元的数量占比或者面积占比等方式,来确定第二编码单元的预测模式。
在又一种实施方式中,若k个第一编码单元中存在至少一个第一编码单元包含于第二编码单元,则计算机设备根据至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。若含于第二编码单元的第一编码单元的数量为1,则计算机设备可以直接将第二编码单元的预测模式设为第一编码单元的预测模式;若含于第二编码单元的第一编码单元的数量为多个(至少两个),则计算机设备可以通过统计各种预测模式对应的第一编码单元的数量占比或者面积占比等方式,来确定第二编码单元的预测模式。
S407、按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
步骤S407的具体实施方式可参考图2中步骤S205的实施方式,在此不再赘述。
图5c为本申请实施例提供的一种码流转换流程示意图。如图5c所示,在码流转换的过程中,首先通过解码器(如HEVC解码器)对第一码流数据(按照第一编解码标准对视频进行编码得到的码流数据)进行解码(按照第一编解码标准对应的解码标准),得到解压后的视频以及编码信息。在得到解压后的视频以及编码信息后,编码器(如VVC编码器),基于编码信息(按照第二编解码标准)对解压后的视频进行编码,得到第二码流数据。
本申请实施例中,获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,编码信息包括M个第一编码单元在目标视频帧中的位置及预测模式,获取目标视频帧中待编码的第二编码单元,根据M个第一编码单元中与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。可见,通过与第二编码单元存在重叠区域的第一编码单元的预测模式,来确定第二编码单元的预测模式,可以简化第二编码单元的预测模式的确定过程,进而提高视频帧的编码效率。
上述详细阐述了本申请实施例的方法,为了便于更好地实施本申请实施例的上述方案,相应地,下面提供了本申请实施例的装置。
请参见图6,图6为本申请实施例提供的一种视频编码装置的结构示意图,图6所示的视频编码装置可以搭载在计算机设备中,该计算机设备具体可以是终端设备或者服务器。该视频编码装置可以用于执行上述图2和图4所描述的方法实施例中的部分或全部功能。请参见图6,该视频编码装置包括:
获取单元601,用于获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准对目标视频帧进行划分得到的;编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式,M为正整数;
以及用于获取目标视频帧中待编码的第二编码单元,第二编码单元是按照第二编解码标准对目标视频帧进行划分得到的,第二编解码标准不同于第一编解码标准;
处理单元602,用于根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元;
以及用于根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式;
以及用于按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
在一种实施方式中,若第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;则处理单元602用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
在一种实施方式中,若第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;则处理单元602用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,预测模式包括帧内预测模式和帧间预测模式;处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一数量占比,若第一数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二数量占比,若第二数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
在一种实施方式中,预测模式包括帧内预测模式和帧间预测模式;处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一面积占比,若第一面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二面积占比,若第二面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
在一种实施方式中,处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
若k个第一编码单元中存在至少一个第一编码单元包含于第二编码单元,则根据至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
从k个第一编码单元中随机筛选出一个第一编码单元;
若被筛选出的第一编码单元与第二编码单元的重叠面积大于面积阈值,则将第二编码单元的预测模式设为被筛选出的第一编码单元的预测模式。
在一种实施方式中,处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
获取k个第一编码单元与第二编码单元的重叠面积;
从k个第一编码单元中筛选出满足重叠面积筛选规则的第一编码单元;
根据满足重叠面积筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式;
其中,满足重叠面积筛选规则的第一编码单元包括以下任一个:重叠面积大于面积阈值的第一编码单元,重叠占比大于占比阈值的第一编码单元,重叠面积大于面积阈值且重叠占比大于占比阈值的第一编码单元。
在一种实施方式中,处理单元602用于,根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
获取k个第一编码单元中每个第一编码单元中的第一目标点的位置信息,以及第二编码单元中的第二目标点的位置信息;
通过各个第一编码单元中的第一目标点的位置信息和第二编码单元中的第二目标点的位置信息,计算各个第一编码单元中的第一目标点与第二编码单元中的第二目标点的距离;
从k个第一编码单元中筛选出满足距离筛选规则的第一编码单元,满足距离筛选规则的第一编码单元中的第一目标点与第二目标点的距离小于距离阈值;
根据满足距离筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式。
在一种实施方式中,若第二编码单元包含于至少两个第一编码单元,且至少两个第一编码单元的预测模式相同;则处理单元602用于,根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式,具体用于:
将第二编码单元的预测模式设为至少两个第一编码单元的预测模式。
在一种实施方式中,处理单元602用于,获取目标视频帧中待编码的第二编码单元,具体用于:
按照P种预设划分方式对待编码对象进行划分,得到待编码对象的P种划分结果,待编码对象为目标视频帧,或者为目标视频帧中的目标区域,P为正整数;
若待编码对象在P种划分结果下的编码效率均不高于待编码对象的编码效率,则将待编码对象确定为目标视频帧中待编码的第二编码单元。
在一种实施方式中,处理单元602用于,获取目标视频帧和目标视频帧的编码信息,具体用于:
获取目标视频帧在第一编解码标准下的码流数据;
对目标视频帧在第一编解码标准下的码流数据进行解码,得到目标视频帧和目标视频帧的编码信息。
根据本申请的一个实施例,图2和图4所示的视频编码方法所涉及的部分步骤可由图6所示的视频编码装置中的各个单元来执行。例如,图2中所示的步骤S201和步骤S202可由图6所示的获取单元601执行,步骤S203-步骤S205可由图6所示的处理单元602执行;图4中所示的步骤S401和步骤S402可由图6所示的获取单元601执行,步骤S403-步骤S407可由图6所示的处理单元602执行。图6所示的视频编码装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,视频编码装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机设备的通用计算装置上运行能够执行如图2和图4中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图6中所示的视频编码装置,以及来实现本申请实施例的视频编码方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算装置中,并在其中运行。
基于同一发明构思,本申请实施例中提供的视频编码装置解决问题的原理与有益效果与本申请方法实施例中视频编码方法解决问题的原理和有益效果相似,可以参见方法的实施的原理和有益效果,为简洁描述,在这里不再赘述。
请参阅图7,图7为本申请实施例提供的一种计算机设备的结构示意图,该计算机设备可以是终端设备或者服务器。如图7所示,计算机设备至少包括处理器701、通信接口702和存储器703。其中,处理器701、通信接口702和存储器703可通过总线或其他方式连接。其中,处理器701(或称中央处理器(Central Processing Unit,CPU))是计算机设备的计算核心以及控制核心,其可以解析计算机设备内的各类指令以及处理计算机设备的各类数据,例如:CPU可以用于解析对象向计算机设备所发出的开关机指令,并控制计算机设备进行开关机操作;再如:CPU可以在计算机设备内部结构之间传输各类交互数据,等等。通信接口702可选的可以包括标准的有线接口、无线接口(如WI-FI、移动通信接口等),受处理器701的控制可以用于收发数据;通信接口702还可以用于计算机设备内部数据的传输以及交互。存储器703(Memory)是计算机设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的存储器703既可以包括计算机设备的内置存储器,当然也可以包括计算机设备所支持的扩展存储器。存储器703提供存储空间,该存储空间存储了计算机设备的操作系统,可包括但不限于:安卓(Android)系统、互联网操作系统(InternetworkingOperatingSystem,IOS)等等,本申请对此并不作限定。
本申请实施例还提供了一种计算机可读存储介质(Memory),计算机可读存储介质是计算机设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机可读存储介质既可以包括计算机设备中的内置存储介质,当然也可以包括计算机设备所支持的扩展存储介质。计算机可读存储介质提供存储空间,该存储空间存储了计算机设备的处理系统。并且,在该存储空间中还存放了适于被处理器701加载并执行的计算机程序。需要说明的是,此处的计算机可读存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器;可选的,还可以是至少一个位于远离前述处理器的计算机可读存储介质。
在一个实施例中,处理器701通过运行存储器703中的计算机程序,执行如下操作:
获取目标视频帧和目标视频帧的编码信息,目标视频帧包括M个第一编码单元,M个第一编码单元是按照第一编解码标准对目标视频帧进行划分得到的;编码信息包括M个第一编码单元在目标视频帧中的位置,及M个第一编码单元在第一编解码标准下的预测模式,M为正整数;
获取目标视频帧中待编码的第二编码单元,第二编码单元是按照第二编解码标准对目标视频帧进行划分得到的,第二编解码标准不同于第一编解码标准;
根据M个第一编码单元在目标视频帧中的位置和第二编码单元在目标视频帧中的位置,从M个第一编码单元中筛选出与第二编码单元存在重叠区域的第一编码单元;
根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式;
按照第二编码单元的预测模式,对第二编码单元进行编码,得到目标视频帧在第二编解码标准下的码流数据。
作为一种可选的实施例,若第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;则处理器701根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
将第二编码单元的预测模式设为第j个第一编码单元的预测模式。
作为一种可选的实施例,若第二编码单元包含于k个第一编码单元,且k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;则处理器701根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
作为一种可选的实施例,预测模式包括帧内预测模式和帧间预测模式;处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一数量占比,若第一数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二数量占比,若第二数量占比大于数量比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
作为一种可选的实施例,预测模式包括帧内预测模式和帧间预测模式;处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
统计k个第一编码单元中预测模式为帧内预测模式的第一编码单元的第一面积占比,若第一面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧内预测模式;或者,
统计k个第一编码单元中预测模式为帧间预测模式的第一编码单元的第二面积占比,若第二面积占比大于面积比例阈值,则将第二编码单元的预测模式确定为帧间预测模式。
作为一种可选的实施例,处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
若k个第一编码单元中存在至少一个第一编码单元包含于第二编码单元,则根据至少一个第一编码单元的预测模式,确定第二编码单元的预测模式。
作为一种可选的实施例,处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
从k个第一编码单元中随机筛选出一个第一编码单元;
若被筛选出的第一编码单元与第二编码单元的重叠面积大于面积阈值,则将第二编码单元的预测模式设为被筛选出的第一编码单元的预测模式。
作为一种可选的实施例,处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
获取k个第一编码单元与第二编码单元的重叠面积;
从k个第一编码单元中筛选出满足重叠面积筛选规则的第一编码单元;
根据满足重叠面积筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式;
其中,满足重叠面积筛选规则的第一编码单元包括以下任一个:重叠面积大于面积阈值的第一编码单元,重叠占比大于占比阈值的第一编码单元,重叠面积大于面积阈值且重叠占比大于占比阈值的第一编码单元。
作为一种可选的实施例,处理器701根据k个第一编码单元中至少一个第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
获取k个第一编码单元中每个第一编码单元中的第一目标点的位置信息,以及第二编码单元中的第二目标点的位置信息;
通过各个第一编码单元中的第一目标点的位置信息和第二编码单元中的第二目标点的位置信息,计算各个第一编码单元中的第一目标点与第二编码单元中的第二目标点的距离;
从k个第一编码单元中筛选出满足距离筛选规则的第一编码单元,满足距离筛选规则的第一编码单元中的第一目标点与第二目标点的距离小于距离阈值;
根据满足距离筛选规则的第一编码单元的预测模式,确定第二编码单元的预测模式。
作为一种可选的实施例,若第二编码单元包含于至少两个第一编码单元,且至少两个第一编码单元的预测模式相同;则处理器701根据与第二编码单元存在重叠区域的第一编码单元的预测模式,确定第二编码单元的预测模式的具体实施例为:
将第二编码单元的预测模式设为至少两个第一编码单元的预测模式。
作为一种可选的实施例,处理器701获取目标视频帧中待编码的第二编码单元的具体实施例为:
按照P种预设划分方式对待编码对象进行划分,得到待编码对象的P种划分结果,待编码对象为目标视频帧,或者为目标视频帧中的目标区域,P为正整数;
若待编码对象在P种划分结果下的编码效率均不高于待编码对象的编码效率,则将待编码对象确定为目标视频帧中待编码的第二编码单元。
作为一种可选的实施例,处理器701获取目标视频帧和目标视频帧的编码信息的具体实施例为:
获取目标视频帧在第一编解码标准下的码流数据;
对目标视频帧在第一编解码标准下的码流数据进行解码,得到目标视频帧和目标视频帧的编码信息。
基于同一发明构思,本申请实施例中提供的计算机设备解决问题的原理与有益效果与本申请方法实施例中视频编码方法解决问题的原理和有益效果相似,可以参见方法的实施的原理和有益效果,为简洁描述,在这里不再赘述。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序适于被处理器加载并执行上述方法实施例的视频编码方法。
本申请实施例还提供一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述的视频编码方法。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,可读存储介质可以包括:闪存盘、只读存储器(Read-Only Memory ,ROM)、随机存取器(RandomAccess Memory,RAM)、磁盘或光盘等。
以上所揭露的仅为本申请一种较佳实施例而已,当然不能以此来限定本申请之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本申请权利要求所作的等同变化,仍属于申请所涵盖的范围。
Claims (15)
1.一种视频编码方法,其特征在于,所述方法包括:
获取目标视频帧和所述目标视频帧的编码信息,所述目标视频帧包括M个第一编码单元,所述M个第一编码单元是按照第一编解码标准对所述目标视频帧进行划分得到的;所述编码信息包括所述M个第一编码单元在所述目标视频帧中的位置,及所述M个第一编码单元在所述第一编解码标准下的预测模式,M为正整数;
获取所述目标视频帧中待编码的第二编码单元,所述第二编码单元是按照第二编解码标准对所述目标视频帧进行划分得到的,所述第二编解码标准不同于所述第一编解码标准;
根据所述M个第一编码单元在所述目标视频帧中的位置和所述第二编码单元在所述目标视频帧中的位置,从所述M个第一编码单元中筛选出与所述第二编码单元存在重叠区域的第一编码单元;
根据与所述第二编码单元存在重叠区域的第一编码单元的预测模式,确定所述第二编码单元的预测模式;
按照所述第二编码单元的预测模式,对所述第二编码单元进行编码,得到所述目标视频帧在所述第二编解码标准下的码流数据。
2.如权利要求1所述的方法,其特征在于,若所述第二编码单元包含于第j个第一编码单元,j为小于等于M的正整数;则所述根据与所述第二编码单元存在重叠区域的第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
将所述第二编码单元的预测模式设为所述第j个第一编码单元的预测模式。
3.如权利要求1所述的方法,其特征在于,若所述第二编码单元包含于k个第一编码单元,且所述k个第一编码单元的预测模式不相同,k为大于1且小于等于M的整数;则所述根据与所述第二编码单元存在重叠区域的第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式。
4.如权利要求3所述的方法,其特征在于,所述预测模式包括帧内预测模式和帧间预测模式;所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
统计所述k个第一编码单元中预测模式为所述帧内预测模式的第一编码单元的第一数量占比,若所述第一数量占比大于数量比例阈值,则将所述第二编码单元的预测模式确定为帧内预测模式;或者,
统计所述k个第一编码单元中预测模式为所述帧间预测模式的第一编码单元的第二数量占比,若所述第二数量占比大于所述数量比例阈值,则将所述第二编码单元的预测模式确定为帧间预测模式。
5.如权利要求3所述的方法,其特征在于,所述预测模式包括帧内预测模式和帧间预测模式;所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
统计所述k个第一编码单元中预测模式为所述帧内预测模式的第一编码单元的第一面积占比,若所述第一面积占比大于面积比例阈值,则将所述第二编码单元的预测模式确定为帧内预测模式;或者,
统计所述k个第一编码单元中预测模式为所述帧间预测模式的第一编码单元的第二面积占比,若所述第二面积占比大于所述面积比例阈值,则将所述第二编码单元的预测模式确定为帧间预测模式。
6.如权利要求3所述的方法,其特征在于,所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
若所述k个第一编码单元中存在至少一个第一编码单元包含于所述第二编码单元,则根据所述至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式。
7.如权利要求3所述的方法,其特征在于,所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
从所述k个第一编码单元中随机筛选出一个第一编码单元;
若被筛选出的第一编码单元与所述第二编码单元的重叠面积大于面积阈值,则将所述第二编码单元的预测模式设为所述被筛选出的第一编码单元的预测模式。
8.如权利要求3所述的方法,其特征在于,所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
获取所述k个第一编码单元与所述第二编码单元的重叠面积;
从所述k个第一编码单元中筛选出满足重叠面积筛选规则的第一编码单元;
根据所述满足重叠面积筛选规则的第一编码单元的预测模式,确定所述第二编码单元的预测模式;
其中,满足重叠面积筛选规则的第一编码单元包括以下任一个:重叠面积大于面积阈值的第一编码单元,重叠占比大于占比阈值的第一编码单元,重叠面积大于面积阈值且重叠占比大于占比阈值的第一编码单元。
9.如权利要求3所述的方法,其特征在于,所述根据所述k个第一编码单元中至少一个第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
获取所述k个第一编码单元中每个第一编码单元中的第一目标点的位置信息,以及所述第二编码单元中的第二目标点的位置信息;
通过各个第一编码单元中的第一目标点的位置信息和所述第二编码单元中的第二目标点的位置信息,计算各个第一编码单元中的第一目标点与所述第二编码单元中的第二目标点的距离;
从所述k个第一编码单元中筛选出满足距离筛选规则的第一编码单元,所述满足距离筛选规则的第一编码单元中的第一目标点与所述第二目标点的距离小于距离阈值;
根据所述满足距离筛选规则的第一编码单元的预测模式,确定所述第二编码单元的预测模式。
10.如权利要求1所述的方法,其特征在于,若所述第二编码单元包含于至少两个第一编码单元,且所述至少两个第一编码单元的预测模式相同;则所述根据与所述第二编码单元存在重叠区域的第一编码单元的预测模式,确定所述第二编码单元的预测模式,包括:
将所述第二编码单元的预测模式设为所述至少两个第一编码单元的预测模式。
11.如权利要求1所述的方法,其特征在于,所述获取所述目标视频帧中待编码的第二编码单元,包括:
按照P种预设划分方式对待编码对象进行划分,得到所述待编码对象的P种划分结果,所述待编码对象为所述目标视频帧,或者为所述目标视频帧中的目标区域,P为正整数;
若所述待编码对象在所述P种划分结果下的编码效率均不高于所述待编码对象的编码效率,则将所述待编码对象确定为目标视频帧中待编码的第二编码单元。
12.如权利要求1-11任一项所述的方法,其特征在于,所述获取目标视频帧和所述目标视频帧的编码信息,包括:
获取目标视频帧在第一编解码标准下的码流数据;
对所述目标视频帧在第一编解码标准下的码流数据进行解码,得到所述目标视频帧和所述目标视频帧的编码信息。
13.一种视频编码装置,其特征在于,所述视频编码装置包括:
获取单元,用于获取目标视频帧和所述目标视频帧的编码信息,所述目标视频帧包括M个第一编码单元,所述M个第一编码单元是按照第一编解码标准对所述目标视频帧进行划分得到的;所述编码信息包括所述M个第一编码单元在所述目标视频帧中的位置,及所述M个第一编码单元在所述第一编解码标准下的预测模式,M为正整数;
以及用于获取所述目标视频帧中待编码的第二编码单元,所述第二编码单元是按照第二编解码标准对所述目标视频帧进行划分得到的,所述第二编解码标准不同于所述第一编解码标准;
处理单元,用于根据所述M个第一编码单元在所述目标视频帧中的位置和所述第二编码单元在所述目标视频帧中的位置,从所述M个第一编码单元中筛选出与所述第二编码单元存在重叠区域的第一编码单元;
以及用于根据与所述第二编码单元存在重叠区域的第一编码单元的预测模式,确定所述第二编码单元的预测模式;
以及用于按照所述第二编码单元的预测模式,对所述第二编码单元进行编码,得到所述目标视频帧在所述第二编解码标准下的码流数据。
14.一种计算机设备,其特征在于,包括:存储器和处理器;
存储器,所述存储器中存储有计算机程序;
处理器,用于加载所述计算机程序实现如权利要求1-12任一项所述的视频编码方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序适于被处理器加载并执行如权利要求1-12任一项所述的视频编码方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310195983.8A CN115883835B (zh) | 2023-03-03 | 2023-03-03 | 一种视频编码方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310195983.8A CN115883835B (zh) | 2023-03-03 | 2023-03-03 | 一种视频编码方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115883835A true CN115883835A (zh) | 2023-03-31 |
CN115883835B CN115883835B (zh) | 2023-04-28 |
Family
ID=85761868
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310195983.8A Active CN115883835B (zh) | 2023-03-03 | 2023-03-03 | 一种视频编码方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115883835B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170094304A1 (en) * | 2015-09-30 | 2017-03-30 | Apple Inc. | Predictor candidates for motion estimation search systems and methods |
CN112492350A (zh) * | 2020-11-18 | 2021-03-12 | 腾讯科技(深圳)有限公司 | 一种视频转码方法、装置、设备和介质 |
CN114257810A (zh) * | 2020-09-23 | 2022-03-29 | 腾讯科技(深圳)有限公司 | 上下文模型的选择方法、装置、设备及存储介质 |
WO2022228104A1 (zh) * | 2021-04-30 | 2022-11-03 | 北京汇钧科技有限公司 | 视频的转码方法、装置、电子设备及存储介质 |
WO2023005709A1 (zh) * | 2021-07-28 | 2023-02-02 | 腾讯科技(深圳)有限公司 | 视频编码方法、装置、介质及电子设备 |
-
2023
- 2023-03-03 CN CN202310195983.8A patent/CN115883835B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170094304A1 (en) * | 2015-09-30 | 2017-03-30 | Apple Inc. | Predictor candidates for motion estimation search systems and methods |
CN114257810A (zh) * | 2020-09-23 | 2022-03-29 | 腾讯科技(深圳)有限公司 | 上下文模型的选择方法、装置、设备及存储介质 |
CN112492350A (zh) * | 2020-11-18 | 2021-03-12 | 腾讯科技(深圳)有限公司 | 一种视频转码方法、装置、设备和介质 |
WO2022228104A1 (zh) * | 2021-04-30 | 2022-11-03 | 北京汇钧科技有限公司 | 视频的转码方法、装置、电子设备及存储介质 |
WO2023005709A1 (zh) * | 2021-07-28 | 2023-02-02 | 腾讯科技(深圳)有限公司 | 视频编码方法、装置、介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN115883835B (zh) | 2023-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110290388B (zh) | 帧内预测方法、视频编码方法、计算机设备及存储装置 | |
CN107005718A (zh) | 使用二叉树块分区的视频编码的方法 | |
US11438587B2 (en) | Method and apparatus for encoding a picture block | |
CN103380621B (zh) | 多度量滤波 | |
RU2518635C2 (ru) | Способ и устройство для кодирования и декодирования блока кодирования границы картинки | |
KR20190103297A (ko) | 비디오 코딩 방법, 비디오 디코딩 방법, 컴퓨터 기기와 기록매체 | |
US20130301715A1 (en) | Prediction method in coding or decoding and predictor | |
CN104205834A (zh) | 用于对每个空间子区域进行视频编码的方法和设备以及用于对每个空间子区域进行视频解码的方法和设备 | |
CN105898330A (zh) | 采用受限帧内区块拷贝模式进行视频编码的方法和装置 | |
CN112005550B (zh) | 用于处理图像的方法及其设备 | |
CN106105201A (zh) | 使用像素距离的解块滤波 | |
CN109510987B (zh) | 编码树节点划分方式的确定方法、装置及编码设备 | |
CN104025594A (zh) | 视频编码中的瓦片大小 | |
CN104662902A (zh) | 用于视频编码的受限帧内解块过滤 | |
US20190182503A1 (en) | Method and image processing apparatus for video coding | |
CN115278302A (zh) | 直播流媒体数据处理方法、系统、装置和计算机设备 | |
US20240187624A1 (en) | Methods and devices for decoder-side intra mode derivation | |
CN110213595B (zh) | 基于帧内预测的编码方法、图像处理设备和存储装置 | |
KR102028016B1 (ko) | 인트라 예측을 이용한 비디오 부호화/복호화 방법 및 장치 | |
CN116866591A (zh) | 一种图像编码方法、装置及计算机设备、介质 | |
CN115883835B (zh) | 一种视频编码方法、装置、设备及存储介质 | |
CN116405665A (zh) | 编码方法、装置、设备及存储介质 | |
CN114666592A (zh) | 基于avs3编码历史信息的cu块划分方法、装置及介质 | |
WO2018096067A1 (en) | Method and apparatus for encoding a picture | |
WO2019219066A1 (zh) | 一种编解码方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40083085 Country of ref document: HK |