CN116074507A - 帧内预测模式确定方法、装置、芯片及程序产品 - Google Patents

帧内预测模式确定方法、装置、芯片及程序产品 Download PDF

Info

Publication number
CN116074507A
CN116074507A CN202111279817.3A CN202111279817A CN116074507A CN 116074507 A CN116074507 A CN 116074507A CN 202111279817 A CN202111279817 A CN 202111279817A CN 116074507 A CN116074507 A CN 116074507A
Authority
CN
China
Prior art keywords
angle
mode
prediction
candidate
intra
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111279817.3A
Other languages
English (en)
Inventor
请求不公布姓名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cambrian Kunshan Information Technology Co ltd
Original Assignee
Cambrian Kunshan Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cambrian Kunshan Information Technology Co ltd filed Critical Cambrian Kunshan Information Technology Co ltd
Priority to CN202111279817.3A priority Critical patent/CN116074507A/zh
Publication of CN116074507A publication Critical patent/CN116074507A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请实施例公开了一种帧内预测模式确定方法、装置、芯片及程序产品,该方法包括:获取待编码图像帧的角度模式集,角度模式集包括帧内预测的N种候选角度预测模式;计算角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;根据N个代价值,从角度模式集中选取出目标角度模式列表,目标角度模式列表包括M种候选角度预测模式;根据目标角度模式列表确定待编码图像帧的帧内子块预测ISP方向。本申请通过只选择一种ISP划分模式进行计算,可以减少ISP计算轮次,从而降低人工智能芯片在编码过程中帧内预测的计算复杂度。

Description

帧内预测模式确定方法、装置、芯片及程序产品
技术领域
本申请涉及视频编码技术领域,尤其涉及一种帧内预测模式确定方法、装置、芯片及程序产品。
背景技术
下一代视频编码(Versatile Video Coding,VVC)作为人工智能芯片中最新一代视频编码标准,提出了很多改进编码质量的新技术。其中帧内子块预测(Intra Sub-Partitions,ISP)技术相比于其他帧内新技术是一个较为复杂的技术。当一个块采用ISP技术时,需要分别再进行水平划分或垂直进行划分,得到2个或4个子块。然后再对每个子块进行后续预测计算等,总共需要最多处理8个子块,并且每个子块都需要进行预测值计算,变换量化,残差,代价计算等,预测模式的增加在提高了帧内预测的准确性的同时也带来了非常高的计算复杂度。因此,如何在人工智能芯片的编码过程中对VCC帧内ISP模式进行优化是亟需解决的问题。
发明内容
本申请实施例提供了一种帧内预测模式确定方法、装置、芯片及程序产品,能够降低人工智能芯片在编码过程中帧内预测的计算复杂度。
第一方面,本申请实施例提供一种帧内预测模式确定方法,所述方法包括:
获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
第二方面,本申请实施例提供的一种帧内预测模式确定装置,所述装置包括:
获取单元,用于获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
计算单元,用于计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
选取单元,用于根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
确定单元,用于根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
第三方面,本申请实施例提供一种终端设备,所述终端设备包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行上述第一方面所述的方法中所描述的部分或全部步骤的指令。
第四方面,本申请实施例提供一种芯片,所述芯片用于执行上述第一方面所述的方法。
第五方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行上述第一方面所述的方法中所描述的部分或全部步骤。
第六方面,本申请实施例提供了一种包含指令的计算机程序产品,所述计算机程序产品在终端设备上运行时,使得所述终端设备执行上述第一方面所述的方法。
本申请提供的技术方案,获取待编码图像帧的角度模式集,角度模式集包括帧内预测的N种候选角度预测模式;计算角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;根据N个代价值,从角度模式集中选取出目标角度模式列表,目标角度模式列表包括M种候选角度预测模式;根据目标角度模式列表确定待编码图像帧的帧内子块预测ISP方向。本申请通过只选择一种ISP划分模式进行计算,可以减少ISP计算轮次,从而降低人工智能芯片在编码过程中帧内预测的计算复杂度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是一种帧内角度预测的流程示意图;
图2是本申请实施例提供的一种帧内子块划分方式的示意图;
图3是本申请实施例提供的一种通信系统的示意图;
图4是本申请实施例提供的一种帧内预测模式确定方法的流程示意图;
图5是本申请实施例提供的一种角度预测模式的示意图;
图6是本申请实施例提供的一种帧内预测模式确定装置的功能单元组成框图;
图7是本申请实施例提供的一种终端设备的结构示意图。
具体实施方向
下面结合本申请实施例中的附图对本申请实施例进行描述。
一般地,在视频处理过程中,会对视频中的图像进行编解码处理。在编码时会对输入视频中的每帧图像划分成多个图像块,然后基于每一个图像块进行预测、变换、量化、熵编码等处理。其中预测包括帧内预测和帧间预测两大类:帧内预测是指利用视频空域相关性,使用当前图像块左侧和上方的已编码块的像素生成当前图像块的预测值。目前帧内预测模式由H.265原有的35种增加到67种,即DC模式,Planar平面模式,和65种角度预测模式。
如图1所示,在帧内角度预测环节中,会遍历计算帧内的65种角度模式的预测值及其代价。然后选出最多6种最佳(即代价最小)的角度模式,接着分别对这些最佳模式进行帧内预测(Intra Subblock Prediction,ISP)计算。如图2所示,在进行帧内ISP计算过程中需要分别从水平方向和垂直方向把当前图像块再继续划分成4个子块,然后按照图中1~4的顺序,依次按照标准规定的计算过程计算出预测值。其中角度预测模式的增加大大虽然提高了帧内预测的准确性,但同时也带来了非常高的计算复杂度。
为了解决上述问题,本申请提出了一种帧内预测模式确定方法,通过减少ISP计算轮次,即只选择ISP水平预测和垂直预测其中一种模式进行计算,以降低编码过程帧内预测的计算复杂度。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参考图3,图3是本申请实施例提供的一种通信系统的结构示意图。如图3所示,该通信系统包括多个终端设备,该多个终端设备可通过例如网络320进行互相通信。该多个终端设备310包括第一终端设备311和第二终端设备312,第一终端设备311可对视频数据(例如由第一终端设备311采集的视频图片流)进行编码以通过网络320传输到第二终端设备312。已编码的视频数据以一个或多个已编码视频码流形式传输。第二终端设备312可从网络320接收已编码视频数据,对已编码视频数据进行解码以恢复视频数据,并根据恢复的视频数据显示视频图片。
示例地,第一终端设备311和第二终端设备312中的每个终端设备可对视频数据(例如由终端设备采集的视频图片流)进行编码,以通过网络320传输到第一终端设备311和第二终端设备312中的另一终端设备。第一终端设备311和第二终端设备312中的每个终端设备还可接收由第一终端设备311和第二终端设备312中的另一终端设备传输的已编码视频数据,且可对所述已编码视频数据进行解码以恢复视频数据,且可根据恢复的视频数据在可访问的显示装置上显示视频图片。
其中,该第一终端设备311、第二终端设备312可为服务器、个人计算机和智能电话,但本申请公开的原理可不限于此。本申请公开的实施例适用于膝上型计算机、平板电脑、媒体播放器和/或专用视频会议设备。网络320表示在第一终端设备311、第二终端设备312之间传送已编码视频数据的任何数目的网络,包括例如有线(连线的)和/或无线通信网络。网络320可在电路交换和/或分组交换信道中交换数据。该网络可包括电信网络、局域网、广域网和/或互联网。
请参阅图4,图4为本申请实施例提供的一种帧内预测模式确定方法流程示意图,应用于如图3所示的通信系统。如图4所示,该方法包括如下步骤。
S410、获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数。
其中,所述待编码图像帧可以是视频图像帧中的关键帧,该关键帧为通过帧内预测编码方式进行编码的图像帧。示例的,获取该待编码图像帧时,首先获取待编码视频流,并依次获取该视频流中的每一帧关键帧,将当前待编码的关键字作为待编码图像帧。
在H.266中,其沿用了Planar和DC模式,并将角度预测模式增加到了65种,从而使得帧内预测模式达到了67种,每种角度预测模式的预测方向均不相同。在本申请实施例中,所述N可为65,终端设备获取H.226的65中角度预测模式,得到角度模式集,每一种H.226的角度预测模式对应一种候选角度预测模式。
S420、计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值。
在帧内角度预测过程中,终端设备需要计算帧内65种角度预测模式的代价值,进而可根据代价值从65中角度预测模式中选出最佳的角度预测模式。
可选的,所述计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值,包括:根据代价计算公式计算每个候选角度预测模式的代价值,得到所述N代价值,所述代价计算公式表示为:RDcost=D+λ*R,其中,所述RDcost为候选角度预测模式的代价值,所述D为绝对变换差和,所述λ为拉格朗日系数,所述R为估计编码候选角度预测模式所需的比特开销,所述R包括角度模式的比特估计和残差码率估计。
具体地,在进行帧内角度预测时,终端设备可遍历所有帧内角度预测模式,利用代价计算公式计算每个候选角度预测模式的代价值,得到N各代价值。该代价计算公式可以表示为:RDcost=D+λ*R,其中,所述RDcost为候选角度预测模式的代价值,所述D为绝对变换差和,所述λ为拉格朗日系数,所述R为估计编码候选角度预测模式所需的比特开销,所述R包括角度模式的比特估计和残差码率估计。
可以理解的是,本申请实施例中示意的代价计算公式并不构成对代价计算公式的具体限定。在本申请另一些实施例中,代价计算公式也可以以其他的形式表示,例如,电流计算公式可以表示为RDcost=min(D,D')+λ*R等等,所述D‘为将预测残差进哈达玛变换后再绝对值求和,所述R为当前角度预测模式所需的比特开销。
S430、根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N。
在本申请中,在计算出每个角度预测模式的代价值后,可从N个候选角度预测模式中选出最佳的M个角度预测模式,进而可根据最佳的角度预测模式来选择是采用ISP水平预测还是ISP垂直预测。
可选的,所述根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,包括:对所述N个代价值进行升序排列,并从所述N个代价值中筛选出前M个代价值,得到M个目标代价值;将从所述角度模式集合中选取出的每个目标代价值对应的候选角度预测模式进行组成,得到所述目标角度列表。
具体地,对遍历角度模式集中的所有候选角度预测模式的代价值进行升序排序,选择出代价值前M个最小的代价值对应的候选角度预测模式,作为待编码图像帧在角度预测过程中的最佳角度预测模式。将该M种候选角度预测模式按照代价值的升序组成目标角度列表,并标注好索引。例如,代价值最小的候选角度预测模式的索引为1,代价值次小的候选角度预测模式的索引为2,依次类推。
可选的,所述M=3。
其中,为了能够方便选出是采用ISP水平方向预测还是ISP垂直方向预测,可将M设置为奇数。进而M值越大,则需要计算进行ISP水平方向预测或ISP垂直方向预测的角度预测模式越多,其计算量也就越大。因此为了减少帧内预测的计算量,本申请实施例中将M设置为3。
示例地,M也可以取其他值,如2、4、5等,本申请实施例对比不做限定。
其中,在所述候选角度预测模式的方向角度小于预设方向角度时,所述候选角度预测模式处于所述第一方向;在所述候选角度预测模式方向角度大于所述预设方向角度时,所述候选角度预测模式处于所述第二方向。
在本申请实施例中,所述第一方向可以为水平方向,所述第二方向可以为垂直方向。示例的,所述第一方向也可以为垂直方向,所述第二方向为水平方向。在第一方向为水平方向,第二方向为垂直方向时,若候选角度预测模式的方向角度小于预设方向角度时,则将该候选角度预测模式归类于水平方向上的模式;若候选角度预测模式的方向角度大于预设方向角度时,则将该候选角度预测模式归类于垂直方向上的模式。
举例说明,如图5所示,假设预设方向角度为34,即以34方向为分界线,将小于34的方向角度(2~33方向)的候选角度预测模式归类于水平方向上的模式,将大于34的方向角度(35~66方向)的候选角度预测模式归类于垂直方向上的模式,其中标负号的方向和超过66的方向属于帧内其他技术,本申请并不涉及。
S440、根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
进一步地,在筛选出最佳的候选角度预测模式后,可根据最佳的候选角度预测模式选择出IISP采用哪种划分方式。
可选的,所述根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向,包括:计算第一数量和第二数量,所述第一数量为所述目标角度模式列表中候选角度预测模式为处于第一方向的角度模式的数量,所述第二数量为所述目标角度模式列表中候选角度预测模式为处于第二方向的角度模式的数量;若所述第一数量大于所述第二数量,则确定所述待编码图像帧的所述ISP方向为所述第一方向;若所述第二数量大于所述第一数量,则确定所述待编码图像帧的所述ISP方向为所述第二方向。
其中,本申请可通过比较目标角度模式中候选角度预测模式所属方向的数量来决定ISP采用的划分方式。在第一方向为水平方向,第二方向为垂直方式时,若目标角度模式中的候选角度预测模式归类于水平方向的数量大于归类于水平方向的数量,则认为ISP水平方向预测的开销更小,因此将ISP水平方向预测确定为待编码图像帧的帧内子块预测方向。若目标角度模式中的候选角度预测模式归类于水平方向的数量小于归类于水平方向的数量,则认为ISP垂直方向预测的开销更小,因此将ISP垂直方向预测确定为待编码图像帧的帧内子块预测方向。
在一种可能的示例中,所述方法还包括:若所述第一数量等于所述第二数量,则将第一角度模式所处的方向确定为所述待编码图像帧的所述ISP划分方向,所述第一角度模式为所述目标角度模式列表中所述代价值最小的所述候选角度预测模式。
示例的,当M为偶数时,可能会出现第一数量等于第二数量的情况,此时可以将目标角度模式中代价值最小(即目标角度模式列表中候选角度预测模式索引最小)的候选角度预测模式归类的方向确定为ISP划分方向。例如,在M=4,目标角度模式列表中第一个候选角度预测模式的方向角度为16(其代价值最小)、第二个候选角度预测模式的方向角度为7、第三个候选角度预测模式的方向角度为44、第四个候选角度预测模式的方向角度为56,其中归类于水平方向的数量与归类于水平方向的数量相等,因此将代价值最小的候选角度预测模式(第一个候选角度预测模式)归属的方向(水平方向)确定为待编码图像帧的帧内子块预测方向。
可以看出,本申请提出了一种帧内预测模式确定方法,获取待编码图像帧的角度模式集,角度模式集包括帧内预测的N种候选角度预测模式;计算角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;根据N个代价值,从角度模式集中选取出目标角度模式列表,目标角度模式列表包括M种候选角度预测模式;根据目标角度模式列表确定待编码图像帧的帧内子块预测ISP方向。本申请通过只选择一种ISP划分模式进行计算,可以减少ISP计算轮次,从而降低人工智能芯片在编码过程中帧内预测的计算复杂度。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,网络设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方向来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
请参阅图6,图6是本申请实施例提供的一种帧内预测模式确定装置600的功能单元组成框图,所述装置600包括:获取单元610、计算单元620、选取单元630和确定单元640;其中,
所述获取单元610,用于获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
所述计算单元620,用于计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
所述选取单元630,用于根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
所述确定单元640,用于根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
可选的,在根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向方面,所述确定单元640具体用于:计算第一数量和第二数量,所述第一数量为所述目标角度模式列表中候选角度预测模式为处于第一方向的角度模式的数量,所述第二数量为所述目标角度模式列表中候选角度预测模式为处于第二方向的角度模式的数量;若所述第一数量大于所述第二数量,则确定所述待编码图像帧的所述ISP方向为所述第一方向;若所述第二数量大于所述第一数量,则确定所述待编码图像帧的所述ISP方向为所述第二方向。
可选的,所述M=3。
可选的,所述确定单元640还用于:若所述第一数量等于所述第二数量,则将第一角度模式所处的方向确定为所述待编码图像帧的所述ISP划分方向,所述第一角度模式为所述目标角度模式列表中所述代价值最小的所述候选角度预测模式。
可选的,在根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表方面,所述选取单元630具体用于:对所述N个代价值进行升序排列,并从所述N个代价值中筛选出前M个代价值,得到M个目标代价值;将从所述角度模式集合中选取出的每个目标代价值对应的候选角度预测模式进行组成,得到所述目标角度列表。
可选的,在所述候选角度预测模式的方向角度小于预设方向角度时,所述候选角度预测模式处于所述第一方向;在所述候选角度预测模式方向角度大于所述预设方向角度时,所述候选角度预测模式处于所述第二方向。
可选的,在计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值方面,所述计算单元620具体用于:根据代价计算公式计算每个候选角度预测模式的代价值,得到所述N代价值,所述代价计算公式表示为:RDcost=D+λ*R,其中,所述RDcost为候选角度预测模式的代价值,所述D为绝对变换差和,所述λ为拉格朗日系数,所述R为估计编码候选角度预测模式所需的比特开销,所述R包括角度模式的比特估计和残差码率估计。
应理解,这里的装置600以功能单元的形式体现。这里的术语“单元”可以指应用特有集成电路(application specific integrated circuit,ASIC)、电子电路、用于执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、合并逻辑电路和/或其它支持所描述的功能的合适组件。在一个可选例子中,本领域技术人员可以理解,装置600可以具体为上述实施例中的终端设备,装置600可以用于执行上述方法实施例中与终端设备对应的各个流程和/或步骤,为避免重复,在此不再赘述。
上述各个方案的装置600具有实现上述方法中终端设备执行的相应步骤的功能;所述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块;例如获取单元610可以由发送机替代、计算单元620、选取单元630和确定单元640可以由处理器代替,分别执行各个方法实施例中的收发操作以及相关的处理操作。
在本申请的实施例,装置600也可以是芯片或者芯片系统,例如:片上系统(systemon chip,SoC)。对应的,检测单元可以是该芯片的检测电路,在此不做限定。
请参阅图7,图7是本申请实施例提供的一种终端设备的结构示意图,该终端设备包括:一个或多个处理器、一个或多个存储器、一个或多个通信接口,以及一个或多个程序;所述一个或多个程序被存储在所述存储器中,并且被配置由所述一个或多个处理器执行以下步骤的指令:
获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
其中,上述方法实施例涉及的各场景的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
应理解,上述存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
在本申请实施例中,上述装置的处理器可以是中央处理单元(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
应理解,本申请实施例中涉及的“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a-b,a-c,b-c,或a-b-c,其中a,b,c可以是单个,也可以是多个。
以及,除非有相反的说明,本申请实施例提及“第一”、“第二”等序数词是用于对多个对象进行区分,不用于限定多个对象的顺序、时序、优先级或者重要程度。例如,第一信息和第二信息,只是为了区分不同的信息,而并不是表示这两种信息的内容、优先级、发送顺序或者重要程度等的不同。
在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器执行存储器中的指令,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
本申请实施例还提供一种芯片,所述芯片用于执行上述方法实施例中记载的任一方法的部分或全部步骤。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。
本申请实施例还提供一种包含指令的计算机程序产品,当所述计算机程序产品在终端设备上运行时,使得所述终端设备执行上述方法实施例中记载的任一方法的部分或全部步骤。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方向实现。例如,以上所描述的装置实施例仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方向,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本申请实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者TRP等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、ROM、RAM、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方向进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方向及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种帧内预测模式确定方法,其特征在于,所述方法包括:
获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
2.根据权利要求1所述的方法,其特征在于,所述根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向,包括:
计算第一数量和第二数量,所述第一数量为所述目标角度模式列表中候选角度预测模式为处于第一方向的角度模式的数量,所述第二数量为所述目标角度模式列表中候选角度预测模式为处于第二方向的角度模式的数量;
若所述第一数量大于所述第二数量,则确定所述待编码图像帧的所述ISP方向为所述第一方向;
若所述第二数量大于所述第一数量,则确定所述待编码图像帧的所述ISP方向为所述第二方向。
3.根据权利要求1或2所述的方法,其特征在于,所述M=3。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若所述第一数量等于所述第二数量,则将第一角度模式所处的方向确定为所述待编码图像帧的所述ISP划分方向,所述第一角度模式为所述目标角度模式列表中所述代价值最小的所述候选角度预测模式。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,包括:
对所述N个代价值进行升序排列,并从所述N个代价值中筛选出前M个代价值,得到M个目标代价值;
将从所述角度模式集合中选取出的每个目标代价值对应的候选角度预测模式进行组成,得到所述目标角度列表。
6.根据权利要求5所述的方法,其特征在于,在所述候选角度预测模式的方向角度小于预设方向角度时,所述候选角度预测模式处于所述第一方向;在所述候选角度预测模式方向角度大于所述预设方向角度时,所述候选角度预测模式处于所述第二方向。
7.根据权利要求1所述的方法,其特征在于,所述计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值,包括:
根据代价计算公式计算每个候选角度预测模式的代价值,得到所述N代价值,所述代价计算公式表示为:RDcost=D+λ*R,其中,所述RDcost为候选角度预测模式的代价值,所述D为绝对变换差和,所述λ为拉格朗日系数,所述R为估计编码候选角度预测模式所需的比特开销,所述R包括角度模式的比特估计和残差码率估计。
8.一种帧内预测模式确定装置,其特征在于,所述装置包括:
获取单元,用于获取待编码图像帧的角度模式集,所述角度模式集包括帧内预测的N种候选角度预测模式,所述N为正整数;
计算单元,用于计算所述角度模式集中每一种候选角度预测模式的代价值,得到N个代价值;
选取单元,用于根据所述N个代价值,从所述角度模式集中选取出目标角度模式列表,所述目标角度模式列表包括M种候选角度预测模式,所述M小于所述N;
确定单元,用于根据所述目标角度模式列表确定所述待编码图像帧的帧内子块预测ISP方向。
9.一种终端设备,其特征在于,所述终端设备包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种芯片,其特征在于,所述芯片用于执行如权利要求1-7中任一项所述的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法的步骤。
12.一种包含指令的计算机程序产品,其特征在于,所述计算机程序产品在终端设备上运行时,使得所述终端设备执行上述如权利要求1-7任一项所述的方法。
CN202111279817.3A 2021-10-29 2021-10-29 帧内预测模式确定方法、装置、芯片及程序产品 Pending CN116074507A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111279817.3A CN116074507A (zh) 2021-10-29 2021-10-29 帧内预测模式确定方法、装置、芯片及程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111279817.3A CN116074507A (zh) 2021-10-29 2021-10-29 帧内预测模式确定方法、装置、芯片及程序产品

Publications (1)

Publication Number Publication Date
CN116074507A true CN116074507A (zh) 2023-05-05

Family

ID=86182450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111279817.3A Pending CN116074507A (zh) 2021-10-29 2021-10-29 帧内预测模式确定方法、装置、芯片及程序产品

Country Status (1)

Country Link
CN (1) CN116074507A (zh)

Similar Documents

Publication Publication Date Title
US20200244986A1 (en) Picture prediction method and related apparatus
WO2023134791A2 (zh) 一种环境安防工程监测数据管理方法及系统
CN107046645B (zh) 图像编解码方法及装置
CN107809642B (zh) 用于视频图像编码和解码的方法、编码设备和解码设备
CN102075760B (zh) 快速运动估计方法及装置
CN118055253A (zh) 用于视频代码化中的运动补偿预测的光流估计
CN103096080A (zh) 用于估计当前块的运动矢量的设备
CN101978698A (zh) 用于对图像进行编码和解码的方法及设备
CN104539949B (zh) Hevc屏幕编码中基于边缘方向的快速分块的方法及装置
WO2019072248A1 (zh) 运动估计方法、装置、电子设备及计算机可读存储介质
US11190766B2 (en) Method and apparatus for determining division of coding unit, computing device, and readable storage medium
CN111314698A (zh) 一种图像编码处理方法及装置
US20120027091A1 (en) Method and System for Encoding Video Frames Using a Plurality of Processors
CN108401185B (zh) 参考帧选择方法、视频转码方法、电子设备和存储介质
US9332266B2 (en) Method for prediction in image encoding and image encoding apparatus applying the same
CN109688411B (zh) 一种视频编码率失真代价估计方法和装置
CN105992012B (zh) 一种错误隐藏的方法和装置
Kaushik Comparative analysis of exhaustive search algorithm with ARPS algorithm for motion estimation
CN114143537B (zh) 一种基于可能性大小的全零块预测方法
CN116074507A (zh) 帧内预测模式确定方法、装置、芯片及程序产品
JP2010081635A (ja) 動き補償予測符号化装置、動き補償予測符号化方法及びプログラム
CN110519597B (zh) 一种基于hevc的编码方法、装置、计算设备和介质
TWI450590B (zh) 嵌入式系統及其中移動評估的資料讀取之方法
CN116074521A (zh) 调色板模式确定方法、装置、芯片、存储介质及程序产品
JP2016052056A (ja) 符号化回路、符号化方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination