CN115002486A - 编码单元预测块的权重确定方法及装置 - Google Patents

编码单元预测块的权重确定方法及装置 Download PDF

Info

Publication number
CN115002486A
CN115002486A CN202210590038.3A CN202210590038A CN115002486A CN 115002486 A CN115002486 A CN 115002486A CN 202210590038 A CN202210590038 A CN 202210590038A CN 115002486 A CN115002486 A CN 115002486A
Authority
CN
China
Prior art keywords
weight
coding unit
weights
weight information
optimal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210590038.3A
Other languages
English (en)
Inventor
许桂森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bigo Technology Pte Ltd
Original Assignee
Bigo Technology Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bigo Technology Pte Ltd filed Critical Bigo Technology Pte Ltd
Priority to CN202210590038.3A priority Critical patent/CN115002486A/zh
Publication of CN115002486A publication Critical patent/CN115002486A/zh
Priority to PCT/CN2023/094574 priority patent/WO2023226831A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/67—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving unequal error protection [UEP], i.e. providing protection according to the importance of the data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本申请实施例公开了一种编码单元预测块的权重确定方法及装置，该方法包括：获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。本方案显著提升了视频编码速度，具有较低的压缩损失率，在增加极少内存使用率的情况下，降低了处理器运算功耗。

Description

编码单元预测块的权重确定方法及装置
技术领域
本申请实施例涉及视频编码技术领域，尤其涉及一种编码单元预测块的权重确定方法及装置。
背景技术
在视频编码混合框架中，通过帧内预测与帧间预测的方式确定图像间的残差信息，进而对残差信息进行变换与量化实现视频图像的编码。其中，帧间预测包括单向预测与双向预测。单向预测指预测当前编码单元时使用一个参考帧的信息，即在一个参考帧中进行运动估计得到最优的运动矢量，然后进行运动补偿得到预测值；双向预测指预测当前编码单元时，同时使用两个参考帧的信息，分别在两个参考帧中通过运动估计得到最优的运动矢量，并且通过运动补偿分别得到两个预测块，再对两个预测块通过加权平均得到编码单元的最终预测结果。
相关技术中，考虑到当前编码单元对应的两个预测块与自身的相似度存在差异，故通过设置不同权重的方式以进行区分，即两个预测块分别对应不同的权重值，以使得当前编码单元的预测结果更加准确。如在最新一代编码标准H.266中引入的编码单元级双向加权预测技术，针对双向的两个不同预测块，使用不同权重进行加权平均以计算得到当前编码单元的预测结果。但是，在确定预测块的权重时，需要遍历多组预先设置的不同的权重值以确定预测块的最优权重，而在每次遍历过程中使用到的运动估计耗时严重，确定权重过程的计算复杂度高，降低了整体编码效率。
发明内容
本申请实施例提供了一种编码单元预测块的权重确定方法及装置，解决了相关技术中在确定预测块的权重时耗时增加，计算复杂度过高的问题，显著提高了整体的编码效率。
第一方面，本申请实施例提供了一种编码单元预测块的权重确定方法，该方法包括：
获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
第二方面，本申请实施例还提供了一种编码单元预测块的权重确定装置，包括：
权重获取模块，配置为获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
权重判断模块，配置为在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
权重处理模块，配置为响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
第三方面，本申请实施例还提供了一种编码单元预测块的权重确定设备，该设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本申请实施例所述的编码单元预测块的权重确定方法。
第四方面，本申请实施例还提供了一种存储计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行本申请实施例所述的编码单元预测块的权重确定方法。
第五方面，本申请实施例还提供了一种计算机程序产品，该计算机程序产品包括计算机程序，该计算机程序存储在计算机可读存储介质中，设备的至少一个处理器从计算机可读存储介质读取并执行计算机程序，使得设备执行本申请实施例所述的编码单元预测块的权重确定方法。
本申请实施例中，通过获取已确定的编码单元的权重信息，其中，权重信息包括不同的权重以及对应的准确度分数，在确定当前编码单元的预测块的权重时，根据准确度分数确定权重信息是否可用，响应于所述权重信息可用的判断结果，对权重信息中记录的权重进行遍历，以确定最优权重结果，其中，权重信息中记录的权重的数量小于初始遍历权重的数量。本方案通过对需要遍历计算的权重进行合理的筛减，显著提升了视频编码速度，具有较低的压缩损失率，在增加极少内存使用率的情况下，降低了处理器运算功耗。
附图说明
图1为本申请实施例提供的一种编码单元预测块的权重确定方法的流程图；
图2为一种将64*64尺寸大小的编码单元进行划分得到16*16尺寸大小的编码单元的示意图；
图3为一种将64*64尺寸大小的编码单元进行划分得到16*64尺寸大小的编码单元的示意图；
图4为本申请实施例提供的一种帧间双向预测的编码过程的示意图；
图5为本申请实施例提供的另一种编码单元预测块的权重确定方法的流程图；
图6为本申请实施例提供的另一种编码单元预测块的权重确定方法的流程图；
图7为本申请实施例提供的一种编码单元预测块的权重确定装置的结构框图；
图8为本申请实施例提供的一种编码单元预测块的权重确定设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请实施例，而非对本申请实施例的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请实施例相关的部分而非全部结构。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
图1为本申请实施例提供的一种编码单元预测块的权重确定方法的流程图，可用于视频编码过程中，该方法可以由计算设备如服务器、智能终端、笔记本、平板电脑等来执行，具体包括如下步骤：
步骤S101、获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数。
其中，编码单元为视频图像编码过程中，对图像进行划分得到的区块单元。以最新一代视频编码国际标准H.266/VVC为例，其对图像进行划分的最大编码单元尺寸为128*128，最小编码单元的尺寸为4*4。示例性的，以图像尺寸为2560*1280为例，其可划分为200个LCU(Largest Coding Unit，最大编码单元)，针对每个LCU可进一步的进行逐级的编码单元的划分，如1个128*128尺寸的编码单元可等分为16个32*32尺寸的编码单元，每个32*32尺寸的编码单元。示例性的，图2为一种将64*64尺寸大小的编码单元进行划分得到16*16尺寸大小的编码单元的示意图。由图可知，1个64*64尺寸大小的编码单元等分为了16个16*16尺寸大小的编码单元，此时该64*64尺寸大小的编码单元相当于16*16尺寸大小的编码单元的上一级单元，该64*64尺寸的编码单元可定义为16*16尺寸大小的编码单元父编码单元，16*16尺寸的编码单元可定义为64*64尺寸大小的编码单元子编码单元。
当然，上述图2所示的进行编码单元的划分方式仅为示例性的一种，也可采用其它的划分方式。示例性的，如图3所示，图3为一种将64*64尺寸大小的编码单元进行划分得到16*64尺寸大小的编码单元的示意图，由图3可知，1个64*64尺寸大小的编码单元划分为了4个16*64尺寸大小的编码单元。
在一个实施例中，在进行编码单元的编码过程中，采用由最大编码单元逐级向下划分得到下一级子编码单元，直到最小编码单元为止。编码过程中，根据划分情况依次进行编码单元的编码。如以128*128尺寸的最大编码单元为例，首先对其进行编码，编码过程中相应的会计算得到该编码单元的权重信息。在其编码完毕后，进一步将128*128尺寸大小的编码单元划分为64*64尺寸大小的编码单元，针对每个64*64尺寸大小的编码单元，依次进行编码确定对应的权重信息。后续，再针对每个64*64尺寸大小的编码单元，将其划分为32*32尺寸大小的编码单元并进行相应的计算生成每个编码单元的权重信息，以此类推直至最小尺寸大小的编码单元计算完毕为止。
在一个实施例中，按照上述示例性的将128*128尺寸大小的编码单元，逐级划分为等大小尺寸的编码单元的过程，在确定16*16尺寸大小的编码单元的权重信息时，已确定的编码单元的权重信息为覆盖该16*16尺寸大小的编码单元的32*32尺寸大小的编码单元、64*64尺寸大小的编码单元以及128*128尺寸大小的编码单元的权重信息。
其中，该编码单元的权重信息用于表征编码单元对应的不同预测块的权重。在视频图像编码过程中，在对当前帧图像中的某个编码单元进行编码时，由于前后帧图像具有关联性，通过参考前后帧图像相应位置的编码块的信息以进行当前编码单元的编码以实现基于时域的图像压缩。在双向预测时，即分别基于当前帧图像的前后帧图像进行预测时，前后帧图像中对应当前编码单元位置处的编码块定义为当前编码单元的预测块。如图4所示，图4为本申请实施例提供的一种帧间双向预测的编码过程的示意图。示例性的，以第二帧图像中的编码单元1011作为当前编码单元，第一帧图像相应位置处的编码单元1012和第三帧图像位置处的编码单元1013为编码单元1011的两个预测块。其中，第一帧图像、第二帧图像和第三帧图像为连续的三帧图像。需要说明的是，上述图4示例为一种示例性编码单元和预测块对应关系的示意情况，在具体的编码过程中，该编码单元对应的预测块可以存在一定的位置偏移，且第一帧图像、第二帧图像和第三帧图像可以是非连续相邻的图像帧，其中间可以有其它图像帧。
其中，编码单元的权重信息包括不同的权重以及对应的准确度分数。在一个实施例中，以编码单元的权重信息表征当前编码单元的两个不同的预测块的权重为例，权重信息记录的权重可以是两个预测块分别各自对应的权重值，也可以设置的权重系数，通过该权重系数计算得到两个预测块各自对应的权重。在权重信息记录的为权重系数的情况下，可以记录具体的权重系数值，也可以是记录的该权重系数值对应的索引值。示例性的，当前编码单元的基于两个预测块的预测结果记为Pbi-pred，两个预测块的单向预测结果分别记为P0和P1，以ω表征权重系数，预测结果Pbi-pred＝((8-ω)*P0+ω*P1+4)>>3，其中ω取值为{-2,3,4,5,10}，即不同的权重系数ω代入上述公式，其对两个单向预测结果配置不同的权重值，以最终得到更为合理的当前编码单元的双向预测结果。可选的，以权重信息存储权重系数的索引值为例，针对具有5个不同取值的权重系数而言，该索引值可设置为1、2、3、4和5，分别以此对应ω值为-2、3、4、5和10。需要说明的是，上述的权重系数的数量和具体的取值为示例性的说明，具体的取值大小可适应性调整。且上述示例性的以编码单元的权重信息表征两个对应的预测块的不同权重的情况，如针对3个或更多的预测块的权重可采用其它公式或分别记录的方式存储在权重信息中。
在一个实施例中，权重信息包括不同的权重以及对应的准确度分数。以不同的权重通过权重系数表征为例，权重信息分别存储有不同权重系数对应的准确度分数，该准确度分数通过累加得到。示例性的，以权重系数值ω取值为-2、3、4、5和10为例，针对最大的编码单元128*128尺寸大小的编码单元为例，进行权重信息的确定时，如根据不同的预测模式确定出的最优权重分别为3和4，则相应的在进行分数累加时，针对ω取值为3对应的准确度分数加1，针对ω取值为4对应的准确度分数加1，此时针对取值为-2、5和10的情况，由于未被确定为最优权重，不进行准确度分数的累加，其对应的分数均为0。则此时针对权重系数取值为{-2,3,4,5,10}时，每个权重系数对应的分值依次为0、1、1、0和0，即权重信息中记录的权重作为最优权重的次数越多，对应的准确度分数越高。在128*128尺寸大小的编码单元确定完毕权重信息后，相应的，确定下一级划分的编码单元的权重信息，以128*128尺寸大小的编码单元划分为64*64尺寸大小的编码单元为例，如果针对其中的一个64*64尺寸大小的编码单元根据不同的预测模式确定出的最优权重分别为3和5，则相应的在进行分数累加时，针对ω取值为3对应的准确度分数加1，针对ω取值为5对应的准确度分数加1，此时权重系数{-2,3,4,5,10}依次对应的准确度分数为0、2、1、1和0。在64*64尺寸大小的编码单元全部的权重信息确定完毕后，相应的确定每个64*64尺寸大小的编码单元划分得到的32*32尺寸大小的编码单元的权重信息，依次类推直到最小尺寸大小的编码单元的权重信息被确定完毕为止，其中，不同权重对应的准确度分数依据上述方式依次进行累加并相应存储。
步骤S102、在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用。
在一个实施例中，在确定当前编码单元的预测块的权重时，根据获取到的权重信息，根据其中的准确度分数确定该权重信息是否可用。如果不可用，则采用原有逻辑确定当前编码单元的预测块的权重，即遍历预先设置的初始遍历权重，以确定最优权重。如该初始遍历权重为5个不同的权重系数，则遍历每个权重系数进行运算以确定最优权重。如果该权重信息可用，则执行步骤S103。
在一个实施例中，根据准确度分数确定权重信息是否可用的过程可以是：确定权重信息中各个权重的准确度分数之和是否大于或等于预设分数值。是理性的，权重信息以记录5个不同的权重系数和对应的准确度分数值为例，假定当前编码单元对应的已编码单元的权重信息中，5个权重系数分别对应的准确度分数分别为1、5、3、4和2，则准确度分数之和为1+5+3+4+2＝15，若此时设置的预设分数值为20，则15小于20不满足权重信息的可用条件；示例性的，5个权重系数分别对应的准确度分数分别为2、8、7、4和0，则准确度分数之和为2+8+7+4+0＝21，在预设分数值还为20的情况下，此时准确度分数之和大于该预设分数值，则判定该权重信息可用。当然，上述仅为一种可选的进行权重信息是否可用的判断过程，在另一个实施例中，还可以是首先对准确度分数进行筛选，筛选出大于一定阈值的准确度分数后，将大于一定阈值的筛选出的准确度分数进行求和以和预设分数值进行比对。当然，上述实施例给出的准确度分数采用累加的方式计算得到，在另一个实施例中，还可以是针对每个权重初始设置为固定分支(如100分)，针对出现的最优权重的情况进行分值的减少，即准确度分数值越低时，对应的权重作为最优权重被确定的次数越多，相应的，在判断权重信息是否可用时，判断条件为如果各个准确度分数之和小于设置的预设分数值，则判断权重信息可用，反之为不可用。
步骤S103、响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
在一个实施例中，权重信息中仅记录被确定过为最优权重的权重。以权重为权重系数进行表征的情况为例，初始遍历权重的数量即权重系数的数量示例性的为5个，对应的值示例性的分别为{-2,3,4,5,10}，在128*128尺寸大小的编码单元进行最优权重的确定时，在不同的预测模式下，分别遍历每个权重系数，如分别得到的最优权重系数为3和4，此时权重信息中记录的权重内容为3、4；在该128*128尺寸大小的编码单元划分得到的一个64*64尺寸大小的编码单元进行最优权重的确定时，假设确定出该64*64尺寸大小的编码单元对应的已确定编码单元的权重信息(128*128尺寸大小的编码单元的权重信息)不可用，其采用原有逻辑，在不同的预测模式下，分别遍历每个权重系数，如分别得到的最优权重系数为4和5，则此时该64*64尺寸大小的编码单元对应的权重信息中记录的权重内容为3、4和5；针对另一个64*64尺寸大小的编码单元对应的权重信息中记录的权重内容的生成方式同理，示例性的为-2、4和5。
在一个实施例中，以当前编码单元为一个16*16尺寸大小的编码单元为例，其获取到的已确定的编码单元的权重信息中记录的权重系数示例性的为3、4和5，且判断得出该权重信息为可用。假设初始遍历权重系数包含5个分别为-2、3、4、5和10，此时仅对权重信息中记录的权重(权重系数3、4和5)进行遍历，以确定最优权重结果，而针对初始遍历权重系数中的-2和10不进行遍历运算，以显著减少数据运算量，降低处理器功耗。当然，在另一个实施例中，如果权重信息中记录的权重的数量和初始遍历权重的数量一致，即通过之前的编码单元进行权重信息确定的过程中，初始遍历权重均被确定过为最优权重，则在进行当前编码单元的最优权重的确定过程中，进行全部数量的权重的遍历，该种方式可以满足编码的正常运行，但无法节省处理器功耗，其运算量相较于未经过前述的权重筛选过程，保持不变。
在一个实施例中，确定当前编码单元的预测块的权重，包括：第一预测模式下确定当前编码单元的预测块的权重。其中，该第一预测模式进行预测块的权重的确定时，通过对多个不同的权重进行遍历以得到最优权重。具体的，遍历计算过程中，如果确定出权重信息可用，根据权重信息中记录的权重依次计算每个权重下，当前编码单元的率失真代价，确定率失真代价最小的权重为最优权重结果。
可选的，率失真代价的计算过程包括求解出当前编码单元的运动矢量(MV，MotionVector)，并根据邻近已编码的编码单元进行预测得到预测运动矢量(MVP，Motion VectorPrediction)，通过计算二者的差值MVD(MVD＝MV-MVP)进行残差编码，在MVD后输出对应的权重。通过该计算过程可知，针对每次权重的遍历均需要进行运动估计得到运动矢量其耗时严重。
在一个实施例中，在第一预测模式下确定第一最优权重后，将最优权重结果保存至权重信息中，以用于后续子编码单元进行最优权重的确定时进行参考，同时根据该最优权重结果更新对应权重的准确度分数。具体的更新过程可以采用分数累加或相减的方式，参见前述示例的说明，此处不再赘述。
在另一个实施例中，确定当前编码单元的预测块的权重，还包括：在第二预测模式下确定当前编码单元的预测块的权重，得到第一最优权重结果，将第一最优权重结果保存至权重信息中，根据第一最优权重结果更新对应权重的准确度分数。其中，在第二预测模式下确定当前编码单元的预测块的权重时，其基于当前编码单元的相邻块对应的权重进行推导，得到第一最优权重结果。可选的，第一最优权重结果包括N个第二预测模式确定出的N个最优权重，其中，N为大于或等于1的正整数，如确定出3个第二预测模式下的最优权重。相应的，在得到第一最优权重结果，将第一最优权重结果保存至权重信息中，以用于后续子编码单元进行最优权重的确定时进行参考，同时根据该第一最优权重结果更新对应权重的准确度分数。具体的更新过程可以采用分数累加或相减的方式，参见前述示例的说明，此处不再赘述。
由上述方案可知，在确定当前编码单元的预测块的权重时，根据记录的权重信息进行合理的需要进行遍历的权重的筛选，显著提升了视频编码速度，具有较低的压缩损失率，在增加极少内存使用率的情况下，降低了处理器运算功耗。通过实验数据可知，上述方式可平均提升6％编码速度，造成0.08％的客观压缩效率损失，在主观上保持画质一致，并且只增加了极少的内存使用率；针对线上应用而言，可以节省6％的服务器CPU资源，并且降低6％的客户端CPU消耗。
在上述方案的基础上，在确定最优权重结果之后，还包括：确定下一编码单元的最优权重结果，直到最大编码单元的权重决策完成。其中，最大编码单元对应的尺寸大小依据不同的编码标准存在差别，如128*128尺寸大小的编码单元被定义为最大编码单元，或256*256尺寸大小的编码单元被定义为最大编码单元，其具体尺寸本方案不做限定。其中，最大编码单元的权重决策指该最大编码单元中，依次逐级划分得到的每个最小编码单元(示例性的如4*4、2*2或8*8尺寸为例)完成最优权重的确定。
图5为本申请实施例提供的另一种编码单元预测块的权重确定方法的流程图，给出了一种包含两种预测模式下确定当前编码单元的预测块的权重的方法，如图5所示，具体包括：
步骤S201、获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数。
步骤S202、在第二预测模式下确定当前编码单元的预测块的权重，得到第一最优权重结果，将第一最优权重结果保存至权重信息中，同时根据第一最优权重结果更新对应权重的准确度分数。
在一个实施例中，在进行当前编码单元的最优权重的确定过程中，包括两种预测模式，针对第一预测模式而言，通过对设置初始遍历权重或权重信息中记录的权重进行遍历计算得到最优权重结果。针对第二预测模式而言，其通过基于当前编码单元的相邻块对应的权重进行推导，得到第一最优权重结果。可选的，基于当前编码单元的相邻块对应的权重进行推导的过程可以是：分别获取相邻编码单元即相邻块确定出的最优权重信息，如当前编码单元上方编码单元和左侧编码单元的最优权重信息已经计算推导得出，则获取当前编码单元上方编码单元和左侧编码单元的最优权重信息，对其中记录的最优权重进行均值求解，在得到求解结果后，在候选权重(即设置的初始遍历权重)中确定最接近的权重作为当前编码单元在第二预测模式下确定的一种最优权重，当然上述仅为一种示例性的第二预测模式下当前编码单元确定最优权重的方式，还可设置多种其它方式，如设置另外两种求解方式，以在最优的三种第二预测模式下分别确定对应的最优权重结果，组合得到第一最优权重结果。
在一个实施例中，当第二预测模式在第一预测模式之前执行时，在得到第一最优权重结果后，将其保存至权重信息中，同时根据第一最优权重结果更新对应权重的准确度分数，以在通过第一预测模式进行最优权重的确认时，使用该更新的权重信息进行权重是否可用的判断，以及后续利用该权重信息进行权重的筛选，以减少运算量。
步骤S203、在第一预测模式下确定当前编码单元的预测块的权重时，根据更新后的准确度分数确定权重信息是否可用。
步骤S204、响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，将所述最优权重结果保存至所述权重信息中，根据所述最优权重结果更新对应权重的准确度分数。
由上述可知，在进行编码单元的权重的确定过程中，针对两种预测模式而言，第一预测模式下确定当前编码单元的预测块的权重时，利用第二预测模式确定的当前编码单元的第一最优权重结果，进一步提升了权重筛选的准确度，使得最终编码效果更优，同时可以节省更多的处理器功耗。
在一个实施例中，针对两种预测模式下的当前编码单元在计算得到最优权重结果后，如得到第一预测模式对应的最优权重结果，和第二预测模式对应的第一最优权重结果，再将最优权重结果和第一最优权重结果更新到权重信息的过程中，针对权重分数的统计采用不同的计数方式。可选的，以累加的方式进行权重的准确度分数的统计时，针对最优权重结果中的权重进行分数累加时，其分数累加值大于第一最优权重结果中的权重进行分数累加时的分值，示例性的，针对最优权重结果中的权重进行分数累加时，对应权重的累加分数值是第一最优权重结果中的权重进行分数累加时的分值的两倍。通过设置不同的分数累加方式，提升采用第一预测模式确定出的最优权重的准确度比重，针对第一预测模式确定出的最优权重而言，其由于依赖相邻块的数据，准确度低于采用权重遍历确定出的最优权重的准确度。由此，使得最终得到的权重信息更加准确。
图6为本申请实施例提供的另一种编码单元预测块的权重确定方法的流程图，给出了一种对权重信息中记录的权重进行遍历的过程，如图6所示，具体包括：
步骤S301、获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数，所述权重信息通过数组存储。
在一个实施例中，通过数组进行权重信息的存储，数组中元素的索引和权重对应，如索引[0]、[1]、[2]、[3]和[4]分别对应权重系数-2、3、4、5和10。示例性的，针对确定出的最优权重结果，将其保存在数组结构中。如确定出最优权重结果为-2，则将索引[0]对应的数值即存储的准确度分数进行累加，此时数组存储信息示例性的为索引a[0]，其对应的数值为1；当确定出最优权重结果为10时，此时数组存储信息示例性的为索引a[0]和a[4]，其分别对应的数值为1、1；当确定出最优权重结果为-2和3时，此时数组存储信息示例性的为索引a[0]、a[1]和a[4]，其分别对应的数值为2、1和1，以此类推。需要说明的是，上述仅为一种示例性的通过数组进行权重信息存储的方式，还可以使用二维数组分别存储权重系数值和对应的准确度分数，或分别单独存储前后不同参考预测块的权重值和对应的准确度分数。
步骤S302、在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用。
步骤S303、响应于所述权重信息可用的判断结果，将所述数组中记录的权重添加至创建的权重列表中，对所述权重列表中记录的权重进行遍历，以确定最优权重结果。
在一个实施例中，当确定权重信息可用时，以数组中仅记录被确定为最优权重结果的权重的情况为例，将数组中记录的权重添加至创建的权重列表中。示例性的，假设当前可用的权重信息中对应的数组记录由权重索引1、2和3，则将权重索引1、2和3，或权重索引1、2和3对应的权重系数值3、4和5添加至创建的权重列表中，在进行编码单元的最优权重的确定时，依据权重列表中记录的信息进行权重遍历，以确定最优权重结果。
由上述可知，通过设置的特殊数据结构进行权重信息的存储和遍历，根据记录的权重信息进行合理的需要进行遍历的权重的筛选，显著提升了视频编码速度，具有较低的压缩损失率，在增加极少内存使用率的情况下，降低了处理器运算功耗。
图7为本申请实施例提供的一种编码单元预测块的权重确定装置的结构框图，该装置用于执行上述实施例提供的编码单元预测块的权重确定方法，具备执行方法相应的功能模块和有益效果。如图7所示，该装置具体包括：权重获取模块101、权重判断模块102和权重处理模块103，其中，
权重获取模块101，配置为获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
权重判断模块102，配置为在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
权重处理模块103，配置为响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
由上述方案可知，通过获取已确定的编码单元的权重信息，其中，权重信息包括不同的权重以及对应的准确度分数，在确定当前编码单元的预测块的权重时，根据准确度分数确定权重信息是否可用，响应于所述权重信息可用的判断结果，对权重信息中记录的权重进行遍历，以确定最优权重结果，其中，权重信息中记录的权重的数量小于初始遍历权重的数量。本方案通过对需要遍历计算的权重进行合理的筛减，显著提升了视频编码速度，具有较低的压缩损失率，在增加极少内存使用率的情况下，降低了处理器运算功耗。
在一个可能的实施例中，所述权重处理模块103配置为：
第一预测模式下确定当前编码单元的预测块的权重；
根据所述权重信息中记录的权重依次计算每个权重下，当前编码单元的率失真代价，确定率失真代价最小的权重为最优权重结果。
在一个可能的实施例中，该装置还包括权重更新模块104，配置为在确定最优权重结果之后，将所述最优权重结果保存至所述权重信息中；
根据所述最优权重结果更新对应权重的准确度分数。
在一个可能的实施例中，所述权重处理模块103配置为：
在第二预测模式下确定当前编码单元的预测块的权重，得到第一最优权重结果，所述第一最优权重结果包括N个第二预测模式确定出的N个最优权重，其中，N为大于或等于1的正整数；
将所述第一最优权重结果保存至所述权重信息中，根据所述第一最优权重结果更新对应权重的准确度分数。
在一个可能的实施例中，所述已确定的编码单元包括各级包含当前编码单元的父编码单元，所述权重信息中记录的权重作为最优权重的次数越多，对应的准确度分数越高。
在一个可能的实施例中，所述权重判断模块102配置为：
确定所述权重信息中各个权重的准确度分数之和是否大于或等于预设分数值；
所述权重处理模块103配置为：
响应于所述准确度分数之和大于所述预设分数值的判断结果。
在一个可能的实施例中，所述权重信息通过数组存储，所述权重处理模块103配置为：
将所述数组中记录的权重添加至创建的权重列表中；
对所述权重列表中记录的权重进行遍历。
在一个可能的实施例中，所述权重处理模块103还配置为：
在确定最优权重结果之后，确定下一编码单元的最优权重结果，直到最大编码单元的权重决策完成。
图8为本申请实施例提供的一种编码单元预测块的权重确定设备的结构示意图，如图8所示，该设备包括处理器201、存储器202、输入装置203和输出装置204；设备中处理器201的数量可以是一个或多个，图8中以一个处理器201为例；设备中的处理器201、存储器202、输入装置203和输出装置204可以通过总线或其他方式连接，图8中以通过总线连接为例。存储器202作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请实施例中的编码单元预测块的权重确定方法对应的程序指令/模块。处理器201通过运行存储在存储器202中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的编码单元预测块的权重确定方法。输入装置203可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置204可包括显示屏等显示设备。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种上述实施例描述的编码单元预测块的权重确定方法，其中，包括：
获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
值得注意的是，上述编码单元预测块的权重确定装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本申请实施例的保护范围。
在一些可能的实施方式中，本申请提供的方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在计算机设备上运行时，所述程序代码用于使所述计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的方法中的步骤，例如，所述计算机设备可以执行本申请实施例所记载的编码单元预测块的权重确定方法。所述程序产品可以采用一个或多个可读介质的任意组合实现。

Claims (12)

1.编码单元预测块的权重确定方法，其特征在于，包括：
获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
2.根据权利要求1所述的权重确定方法，其特征在于，所述确定当前编码单元的预测块的权重，包括：
第一预测模式下确定当前编码单元的预测块的权重；
相应的，所述对所述权重信息中记录的权重进行遍历，以确定最优权重结果，包括：
根据所述权重信息中记录的权重依次计算每个权重下，当前编码单元的率失真代价，确定率失真代价最小的权重为最优权重结果。
3.根据权利要求2所述的权重确定方法，其特征在于，在所述确定最优权重结果之后，还包括：
将所述最优权重结果保存至所述权重信息中；
根据所述最优权重结果更新对应权重的准确度分数。
4.根据权利要求1所述的权重确定方法，其特征在于，所述编码单元预测块的权重确定方法，还包括：
在第二预测模式下确定当前编码单元的预测块的权重，得到第一最优权重结果，所述第一最优权重结果包括N个第二预测模式确定出的N个最优权重，其中，N为大于或等于1的正整数；
将所述第一最优权重结果保存至所述权重信息中，根据所述第一最优权重结果更新对应权重的准确度分数。
5.根据权利要求1所述的权重确定方法，其特征在于，所述已确定的编码单元包括各级包含当前编码单元的父编码单元，所述权重信息中记录的权重作为最优权重的次数越多，对应的准确度分数越高。
6.根据权利要求1-5中任一项所述的权重确定方法，其特征在于，所述根据所述准确度分数确定所述权重信息是否可用，包括：
确定所述权重信息中各个权重的准确度分数之和是否大于或等于预设分数值；
相应的，所述响应于所述权重信息可用的判断结果，包括：
响应于所述准确度分数之和大于所述预设分数值的判断结果。
7.根据权利要求1-5中任一项所述的权重确定方法，其特征在于，所述权重信息通过数组存储，所述对所述权重信息中记录的权重进行遍历，包括：
将所述数组中记录的权重添加至创建的权重列表中；
对所述权重列表中记录的权重进行遍历。
8.根据权利要求1-5中任一项所述的权重确定方法，其特征在于，在所述确定最优权重结果之后，还包括：
确定下一编码单元的最优权重结果，直到最大编码单元的权重决策完成。
9.编码单元预测块的权重确定装置，其特征在于，包括：
权重获取模块，配置为获取已确定的编码单元的权重信息，所述权重信息包括不同的权重以及对应的准确度分数；
权重判断模块，配置为在确定当前编码单元的预测块的权重时，根据所述准确度分数确定所述权重信息是否可用；
权重处理模块，配置为响应于所述权重信息可用的判断结果，对所述权重信息中记录的权重进行遍历，以确定最优权重结果，其中，所述权重信息中记录的权重的数量小于初始遍历权重的数量。
10.一种编码单元预测块的权重确定设备，所述设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现权利要求1-8中任一项所述的编码单元预测块的权重确定方法。
11.一种存储计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行权利要求1-8中任一项所述的编码单元预测块的权重确定方法。
12.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-8中任一项所述的编码单元预测块的权重确定方法。
CN202210590038.3A 2022-05-26 2022-05-26 编码单元预测块的权重确定方法及装置 Pending CN115002486A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210590038.3A CN115002486A (zh) 2022-05-26 2022-05-26 编码单元预测块的权重确定方法及装置
PCT/CN2023/094574 WO2023226831A1 (zh) 2022-05-26 2023-05-16 编码单元预测块的权重确定方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210590038.3A CN115002486A (zh) 2022-05-26 2022-05-26 编码单元预测块的权重确定方法及装置

Publications (1)

Publication Number Publication Date
CN115002486A true CN115002486A (zh) 2022-09-02

Family

ID=83029505

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210590038.3A Pending CN115002486A (zh) 2022-05-26 2022-05-26 编码单元预测块的权重确定方法及装置

Country Status (2)

Country Link
CN (1) CN115002486A (zh)
WO (1) WO2023226831A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106961604A (zh) * 2017-03-07 2017-07-18 腾讯科技（深圳）有限公司 视频编码的码率分配、编码单元码率分配方法及装置
WO2020114510A1 (zh) * 2018-12-06 2020-06-11 华为技术有限公司 用于多假设编码的加权预测方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102425722B1 (ko) * 2016-04-29 2022-07-27 세종대학교산학협력단 영상 신호 부호화/복호화 방법 및 장치
US20180332298A1 (en) * 2017-05-10 2018-11-15 Futurewei Technologies, Inc. Bidirectional Prediction In Video Compression
CN113873249B (zh) * 2020-06-30 2023-02-28 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106961604A (zh) * 2017-03-07 2017-07-18 腾讯科技（深圳）有限公司 视频编码的码率分配、编码单元码率分配方法及装置
WO2020114510A1 (zh) * 2018-12-06 2020-06-11 华为技术有限公司 用于多假设编码的加权预测方法及装置
CN111294590A (zh) * 2018-12-06 2020-06-16 华为技术有限公司 用于多假设编码的加权预测方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SHINYA SHIMIZU; HIDEAKI KIMATA; SHIORI SUGIMOTO; AKIRA KOJIMA: "Depth-based weighted bi-prediction for video plus depth map coding", 《2012 19TH IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING》, 21 February 2013 (2013-02-21) *
张涛: "视频压缩中的高效帧内编码技术研究", 《中国优秀博士学位论文全文数据库》, 1 January 2017 (2017-01-01) *

Also Published As

Publication number Publication date
WO2023226831A1 (zh) 2023-11-30

Similar Documents

Publication Publication Date Title
US11178419B2 (en) Picture prediction method and related apparatus
KR102252816B1 (ko) 부호화유닛 심도 확정 방법 및 장치
CN100499818C (zh) 运动图像压缩编码方法和运动图像压缩编码装置
US11070803B2 (en) Method and apparatus for determining coding cost of coding unit and computer-readable storage medium
CN111133759B (zh) 编码或解码视频数据的方法和装置
CN101557514A (zh) 一种帧间预测编解码方法、装置及系统
CN102187351B (zh) 加水印时的块效应和保真度
CN112312133B (zh) 一种视频编码方法、装置、电子设备及可读存储介质
WO2022143215A1 (zh) 一种帧间预测方法、装置、电子设备、计算机可读存储介质及计算机程序产品
WO2019007766A1 (en) METHOD AND APPARATUS FOR ENCODING OR DECODING VIDEO DATA WITH SUB-PIXEL MOTION VECTOR DECOMPOSITION
CN114900691B (zh) 编码方法、编码器及计算机可读存储介质
CN117280691A (zh) 增强的运动向量预测
CN108924551A (zh) 视频图像编码模式的预测方法及相关设备
CN111277838B (zh) 编码模式选择方法、装置、电子设备及计算机可读介质
WO2023155751A1 (zh) 视频编码控制方法、装置、设备和存储介质
CN115002486A (zh) 编码单元预测块的权重确定方法及装置
JP4957780B2 (ja) 動き補償予測符号化装置、動き補償予測符号化方法及びプログラム
WO2019150411A1 (ja) 映像符号化装置、映像符号化方法、映像復号装置、映像復号方法、及び映像符号化システム
CN112218075A (zh) 候选列表的填充方法、电子设备、计算机可读存储介质
CN113923453B (zh) 视频的时域滤波方法及装置、电子设备、存储介质
JP5622613B2 (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
CN118118689A (zh) 视频编码的运动矢量确定方法、装置、设备及存储介质
CN116132672A (zh) 视频编码中的量化参数偏移量确定方法和装置
CN116546200A (zh) 视频编码中的模式跳过方法、装置、设备及存储介质
CN116708798A (zh) 一种基于哈希搜索算法的视频编码方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination