CN114900691A - 编码方法、编码器及计算机可读存储介质 - Google Patents

编码方法、编码器及计算机可读存储介质 Download PDF

Info

Publication number
CN114900691A
CN114900691A CN202210824946.4A CN202210824946A CN114900691A CN 114900691 A CN114900691 A CN 114900691A CN 202210824946 A CN202210824946 A CN 202210824946A CN 114900691 A CN114900691 A CN 114900691A
Authority
CN
China
Prior art keywords
template
current
pixel point
coding block
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210824946.4A
Other languages
English (en)
Other versions
CN114900691B (zh
Inventor
江东
林聚财
方诚
殷俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202210824946.4A priority Critical patent/CN114900691B/zh
Publication of CN114900691A publication Critical patent/CN114900691A/zh
Application granted granted Critical
Publication of CN114900691B publication Critical patent/CN114900691B/zh
Priority to PCT/CN2023/107408 priority patent/WO2024012559A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请公开了一种编码方法、编码器及计算机可读存储介质,该编码方法包括:获取当前编码块;基于参考帧中的目标参考块,为当前编码块中的当前像素点构建预测值调整模型,其中,预测值调整模型的参数是利用目标参考块中与当前像素点对应的参考像素点、目标参考块的参考模板中第一像素点以及当前编码块的当前模板中第二像素点的重建像素值计算得到的,其中,参考模板包括目标参考块的多个相邻重建像素点,当前模板包括当前编码块的多个相邻重建像素点;利用预测值调整模型对当前像素点进行预测,得到当前像素点的目标预测值。本申请所提供的编码方法能够优化图像的视觉效果。

Description

编码方法、编码器及计算机可读存储介质
技术领域
本申请属于视频编码领域,特别是涉及一种编码方法、编码器及计算机可读存储介质。
背景技术
由于视频图像数据量比较大,通常需要对其进行编码压缩后,再进行传输或存储,编码后的数据称之为视频码流。
目前在对视频图像数据进行编码时,可以采用线性预测的方式进行编码。其中线性预测是指构建参考块与当前编码块间的线性模型,然后让参考块的重建像素通过线性模型预测当前编码块的像素值,其中线性模型的参数是利用当前编码块及其参考块的相邻重建像素点的重建像素值计算得到的。
本申请的发明人发现,上述现有的线性预测过程存在一定的局限性,线性预测过程有待进一步优化。
发明内容
本申请提供一种编码方法、编码器及计算机可读存储介质,能够优化图像的视觉效果。
本申请实施例第一方面提供编码方法,所述方法包括:获取当前编码块;基于参考帧中的目标参考块,为所述当前编码块中的当前像素点构建预测值调整模型,其中,所述预测值调整模型的参数是利用所述目标参考块中与所述当前像素点对应的参考像素点、所述目标参考块的参考模板中第一像素点以及所述当前编码块的当前模板中第二像素点的重建像素值计算得到的,其中,所述参考模板包括所述目标参考块的多个相邻重建像素点,所述当前模板包括所述当前编码块的多个相邻重建像素点;利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值。
本申请实施例第二方面提供一种解码方法,所述方法包括:接收编码器发送的编码数据;通过对所述编码数据进行解码,得到当前解码块中当前像素点的目标预测值;其中,所述当前解码块中所述当前像素点的所述目标预测值是采用上述编码方法处理得到的。
本申请实施例第三方面提供一种编码器,所述编码器包括处理器、存储器以及通信电路,所述处理器分别耦接所述存储器、所述通信电路,所述存储器中存储有程序数据,所述处理器通过执行所述存储器内的所述程序数据以实现上述编码方法中的步骤。
本申请实施例第四方面提供一种解码器,所述解码器包括处理器、存储器以及通信电路,所述处理器分别耦接所述存储器、所述通信电路,所述存储器中存储有程序数据,所述处理器通过执行所述存储器内的所述程序数据以实现上述解码方法中的步骤。
本申请实施例第五方面提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序能够被处理器执行以实现上述方法中的步骤。
有益效果是:本申请考虑到当前编码块中不同像素点与目标参考块之间的照明关系不完全相同,因此分别根据当前编码块中的每个像素点对应的参考像素点的重建像素值、参考模板中第一像素点的重建像素值以及当前模板中第二像素点的重建像素值,确定每个像素点的预测值调整模型,并根据像素点各自对应的预测值调整模型对像素点进行预测,得到像素点对应的目标预测值,从而可以保证编码过程与实际情况相符,达到优化图像的视觉效果的目的。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图,其中:
图1是现有技术中进行线性预测时的简单结构示意图;
图2是本申请编码方法一实施方式的流程示意图;
图3是图1中步骤S120的流程示意图;
图4是图3中步骤S123的流程示意图;
图5是图1中步骤S130的具体流程示意图;
图6是本申请编码方法另一实施方式中的部分流程示意图;
图7是生成候选参考块的过程示意图;
图8是图6中步骤S160的流程示意图;
图9是本申请编码方法另一实施方式中的部分流程示意图;
图10是本申请编码方法另一实施方式中的部分流程示意图;
图11是在当前编码块上生成多个窗口的过程示意图;
图12是水平方向索贝尔算子的示意图;
图13是垂直方向索贝尔算子的示意图;
图14是本申请编码方法另一实施方式中的部分流程示意图;
图15是本申请编码器一实施方式的结构示意图;
图16是本申请编码器另一实施方式的结构示意图;
图17是本申请解码方法一实施方式的流程示意图;
图18是本申请解码器一实施方式的结构示意图;
图19是本申请计算机可读存储介质一实施方式的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
需要说明的是,本申请中的术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括至少一个该特征。本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了更好地理解本申请的方案,首先对编码的背景技术进行简单介绍:
在视频编解码中,为了提高压缩率,减少需要传输的码字,编码器不会直接对像素值进行编码传输,而是采用帧内或帧间预测模式,即采用当前帧或参考帧的已编码块的重建像素点对当前块的像素值进行预测。其中,采用某种预测模式预测得出的像素值叫做预测像素值,预测像素值与原始像素值的差叫做残差。其中编码器仅需对某种预测模式及采用该种预测模式时产生的残差进行编码,解码端就可根据这些码流信息解码出相应像素值,这样大大降低了编码所需码字。
同时在视频编码过程中,输入编码器的是一个个图像帧,但编码器在对一帧图像进行解码时,需要将一帧图像分割成若干个LCU(最大编码单元),然后再将LCU划分为多个CU(编码单元,也可以称为编码块),视频编码就是以CU为单元进行的。
在对某一个图像帧进行编码时,通常是按照一定的顺序对图像帧中的各个编码块进行编码,例如是按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码,或者也可以按照从右往左,从下往上的顺序依次对各个编码块进行编码。可以理解的是,当按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码时,对于任意一个编码块而言,与其相邻的重建像素点(已经过预测的像素电)分布在该编码块的上方和左方,当按照从右往左,从下往上的顺序依次对各个编码块进行编码时,对于任意一个编码块而言,与其相邻的重建像素点分布在该编码块的下方和右方,其中为了便于说明,以下均以按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码进行说明。
为了便于说明,以下均将当前时刻正在进行编码的编码块定义为当前编码块,其中,当采用帧间预测的方式进行编码时,需要通过运动搜索等方法在参考帧(可以是任何一个已经经过编码的图像帧)中寻找与当前编码块最为接近的参考块,并记录当前编码块与参考块间的运动信息如运动矢量MV(motion vector)。
参阅图1,在图1中当前编码块为斜线填充部分,用标号1表示,当前编码块的当前模板为圆点填充部分,其中当前模板包括当前编码块的相邻重建像素点;当前编码块的参考块为横线填充部分,用标号2表示,参考块的参考模板为网格填充部分,其中参考模板包括参考块的相邻重建像素点,当前编码块经过预测后变为预测块,用标号3表示。
其中在采用LIC(local illumination compensation,局部光照补偿)模式进行编码时,编码的过程如下:
利用当前编码块的当前模板与当前编码块的参考块的参考模板之间的照明变化构建出一个线性模型,该线性模型表征着当前编码块与其参考块之间的局部照明关系,该线性模型的参数包括缩放因子α和偏移量β,然后利用该线性模型补偿当前编码块与参考块在亮度上的差异,即利用如下公式确定当前编码块中像素点的预测像素值:
qi=α×pi+β,其中,pi为当前编码块中像素点i的初始预测像素值,qi为像素点i的预测像素值,其中,pi是根据当前编码块和参考块之间的运动矢量MV进行运动补偿而得到的,关于pi的确定过程在此不做具体介绍。
从上述过程可以看出,在现有采用LIC模式进行编码的过程中,在当前编码块中,所有像素点对应的α都相同,所有像素点对应的β都相同,也就是说,线性模型对同一个编码块中的不同像素点进行照明补偿时,都是按照同一标准进行补偿,但是实际上,不同像素点与参考块之间的照明变化关系不完全相同,因此现有的编码过程与实现情况不符,因此为了克服现有技术中的缺陷,本申请提出了如下方案:
参阅图2,图2是本申请编码方法一实施方式的流程示意图,该编码方法包括:
S110:获取当前编码块。
具体地,当前编码块是指当前要进行编码的编码块,也可以将其简称为当前块。
S120:基于参考帧中的目标参考块,为当前编码块中的当前像素点构建预测值调整模型,其中,预测值调整模型的参数是利用目标参考块中与当前像素点对应的参考像素点、目标参考块的参考模板中第一像素点以及当前编码块的当前模板中第二像素点的重建像素值计算得到的,其中,参考模板包括目标参考块的多个相邻重建像素点,当前模板包括当前编码块的多个相邻重建像素点。
具体地,本实施方式为了避免上述所说的现有技术中的缺陷,为当前编码块中的每个像素点都构建一个预测值调整模型,其中为了便于介绍,以为当前像素点构建预测值调整模型为例进行介绍,其中,当前像素点为当前编码块中当前时刻正在进行编码的像素点。
其中,在获取到当前编码块后,在参考帧中查找与当前编码块匹配的编码块,将该编码块定义为目标参考块。其中,在参考帧中确定目标参考块的过程可以是采用现有技术中通过运动搜索等方法在参考帧中确定与当前编码块最接近的编码块,也可以参见下文的介绍。
其中,当前编码块的当前模板包括当前编码块的多个相邻重建像素点,目标参块的参考模板包括目标参块的多个相邻重建像素点,为了便于说明,将参考模板中的像素点定义第一像素点,将当前模板中的像素点定义为第二像素点。其中,当前模板中第二像素点相对当前编码块的分布情况与参考模板中第一像素点相对目标参考块的分布情况相同,例如,当按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码时,如果当前模板中的第二像素点分布在当前编码块的左侧和上侧,则参考模板中的第一像素点也分布在目标参考块的左侧和上侧。
在本实施方式中,当按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码时,当前模板中的第二像素点既可以只分布在当前编码块的左侧,也可以只分布在当前编码块的上侧,还可以同时分布在当前编码块的左侧和上侧,具体可参见下文介绍。
在确定目标参考块后,在目标参考块中确定与当前像素点对应的参考像素点,其中,当前像素点在当前编码块中的位置与参考像素点在目标参考块中的位置相同。
在确定参考像素点后,根据参考像素点的重建像素值、参考模板中第一像素点的重建像素值以及当前模板中第二像素点的重建像素值,确定当前像素点的预测值调整模型的参数,从而构建当前像素点对应的预测值调整模型。
可以理解的是,对于当前编码块中的不同像素点而言,如果对应的参考像素点的重建像素值不同,则对应的预测值调整模型就不同。
S130:利用预测值调整模型对当前像素点进行预测,得到当前像素点的目标预测值。
具体地,在得到当前像素点对应的预测值调整模型后,利用预测值调整模型对当前像素点进行预测,得到当前像素点的目标预测值。
其中,在得到当前像素点的目标预测值后,就可以确定当前像素点的目标预测值与当前像素点的原始像素值的差值,即残差,然后编码器基于残差进行编码。
可以理解的是,针对当前编码块中的每个像素点都执行上述步骤S120以及步骤S130后,可以得到当前编码块中每个像素点的目标预测值。
从上述内容可以看出,本申请考虑到当前编码块中不同像素点与目标参考块之间的照明关系不完全相同,因此分别根据当前编码块中的每个像素点对应的参考像素点的重建像素值、参考模板中第一像素点的重建像素值以及当前模板中第二像素点的重建像素值,确定每个像素点的预测值调整模型,并根据像素点各自对应的预测值调整模型对像素点进行预测,得到像素点对应的目标预测值,从而可以保证编码过程与实际情况相符,达到优化图像的视觉效果的目的。
在本实施方式中,预测值调整模型的参数包括多个调整系数,多个调整系数与参考模板中的多个第一像素点一一对应,且第一像素点对应的调整系数和第一像素点对应的重建像素值差距呈正相关,其中第一像素点对应的重建像素值差距为第一像素点的重建像素值与参考像素点的重建像素值的差距。
具体地,将第一像素点的重建像素值与参考像素点的重建像素值的差距,确定为第一像素点对应的重建像素值差距。可以理解的是,第一像素点对应的重建像素值差距越大,表示该第一像素点的重建像素值与参考像素点的重建像素值的差距越大。
假设参考模板中第一像素点的个数为k个,则预测值调整模型包括k个调整系数,且每个第一像素点都对应一个调整系数,且第一像素点对应的调整系数和第一像素点对应的重建像素值呈正相关,其中此处的正相关可以是:第一像素点对应的重建像素值差距越大,第一像素点对应的调整系数越大,也可以是:随着第一像素点对应的重建像素值差距增大,第一像素点对应的调整系数整体也在增大,但是也存在第一像素点p对应的重建像素值差距大于第一像素点q对应的重建像素值差距,但是第一像素点p对应的调整系数与第一像素点q对应的调整系数相等的现象。
参阅图3,步骤S120确定预测值调整模型的参数的步骤,包括:
S121:分别将参考模板中每个第一像素点的重建像素值与参考像素点的重建像素值的差值的绝对值,确定为每个第一像素点对应的绝对值。
具体地,假设参考模板中第一像素点的个数为k个,则将参考像素点的重建像素值与k个第一像素点的重建像素值分别做差,并对做差的结果取绝对值,从而得到k个绝对值,其中,将k个绝对值分别记为D0、D1、D2、…、Dk-1
S122:分别将每个第一像素点对应的绝对值代入预设函数,得到每个第一像素点对应的代表值,其中,第一像素点对应的代表值和第一像素点对应的绝对值呈正相关。
具体地,预先建立一个函数关系,将第一像素点对应的绝对值带入该函数关系,即可得到第一像素点对应的代表值,其中,该函数关系可以是线性函数关系,也可以是非线性函数关系,也就是说预设函数可以是线性函数,也可以是非线性函数,只要保证第一像素点对应的代表值和第一像素点对应的绝对值呈正相关。
其中,与上述类似,此处的正相关可以是:第一像素点对应的绝对值越大,第一像素点对应的代表值越大,也可以是:随着第一像素点对应的绝对值增大,第一像素点对应的代表值整体也在增大,但是也存在第一像素点p对应的绝对值大于第一像素点q对应的绝对值,但第一像素点p对应的代表值与第一像素点q对应的代表值相等的现象。
其中,分别将绝对值D0、D1、D2、…、Dk-1代入预设函数,得到的代表值分别记为V0、V1、V2、…、Vk-1,也就是说,D0、D1、D2、…、Dk-1与V0、V1、V2、…、Vk-1一一对应。
S123:分别根据每个第一像素点对应的代表值,确定每个第一像素点对应的调整系数,其中,第一像素点对应的调整系数和第一像素点对应的代表值呈正相关。
具体地,可以是第一像素点对应的代表值越大,第一像素点对应的调整系数也越大,也可以是随着第一像素点对应的代表值增大,第一像素点对应的调整系数整体也在增大,但是也存在第一像素点p对应的代表值大于第一像素点q对应的代表值,但第一像素点p对应的调整系数与第一像素点q对应的调整系数相等的情况。
在一应用场景中,参阅图4,步骤S123具体包括:
S1231:将所有代表值进行求和处理,得到第一和值。
具体地,将V0、V1、V2、…、Vk-1进行相加,得到第一和值
S1232:分别将每个第一像素点对应的代表值与第一和值的比值,确定为每个第一像素点对应的调整系数。
具体地,将k个第一像素点对应的调整系数分别记为S0、S1、S2,…,Sk-1,其中,S0、S1、S2,…,Sk-1与V0、V1、V2…,Vk-1一一对应。
其中,Sn=Vn/(V0+V1+V2+…+Vk-1),n=0,1,…,k-1。
在另一应用场景中,步骤S123还可以直接将第一像素点对应的代表值作为第一像素点对应的调整系数。
在上述方案中,根据第一像素点对应的绝对值确定第一像素点对应的代表值,接着根据第一像素点的代表值确定第一像素点对应的调整系数,然后再根据第一像素点的调整系数确定第一像素点对应的目标预测值的目的是:在不同的应用场景中,可以根据实际需求调整预设函数,既可以使两个第一像素点对应的代表值之间的差距小于两个第一像素点对应的绝对值之间的差距,也可以使两个第一像素点对应的代表值之间的差距大于两个第一像素点对应的绝对值之间的差距,使得方案灵活多变,能够满足各种实际需求。
当然在其他实施方式中,也可以不将每个第一像素点对应的绝对值代入预设函数,而是直接根据第一像素点对应的绝对值,确定第一像素点的调整系数,例如,Sn=Dn/(D0+D1+D2+…+Dk-1),n=0,1,…,k-1。
在本实施方式中,步骤S130利用预测值调整模型对当前像素点进行预测的步骤,包括:
S131:根据多个调整系数以及多个第一像素点对应的第二像素点的重建像素值,确定当前像素点的目标预测值。
具体地,从上述内容可知,每个第一像素点都对应一个调整系数以及一个第二像素点。
其中,第一像素点对应的调整系数与第一像素点对应的重建像素差距相关,而第二像素点与当前像素点之间的像素差距,和第一像素点对应的重建像素差存在密不可分的联系,因此根据多个调整系数以及多个第一像素点对应的第二像素点的重建像素值,可以确定当前像素点的目标预测值。
在本实施方式中,参阅图5,步骤S131具体包括:
S1311:分别将第一像素点对应的调整系数与第一像素点对应的第二像素点的重建像素值相乘,得到多个第一乘积。
具体地,与第一像素点对应的第二像素点在当前模板中的位置和第一像素点在参考模板中的位置相同。
为了便于说明,依旧以上述参考模板中第一像素点的个数为k个进行说明:
将k个第一像素点对应的第二像素点的重建像素值分别记为m0、m1、m2,…,mk-1,其中,S0、m0与同一个第一像素点对应,S1、m1与同一个第一像素点对应,以此类推,Sk-1、mk-1与同一个第一像素点对应。
则步骤S131就是确定S0与m0的乘积、S1与m1的乘积,…,Sk-1、mk-1的乘积,从而得到k个第一乘积。
S1312:将所有第一乘积的和,确定为调整值。
具体地,依旧以上述例子为例,按照下述公式确定调整值A:
A= S0×m0+ S1×m1+ S2×m2+…+ Sk-1×mk-1
S1313:根据调整值,得到当前像素点的目标预测值。
上述方案可以使得,第一像素点的重建像素值与参考像素点的重建像素值的差距越大,在得到的目标预测值中,对应的第二像素点的重建像素值的占比就越大,从而可以减小当前像素点的目标预测值与第二像素点的重建像素值之间的差距,避免像素点之间像素值的跳变。
在其他实施方式中,步骤S131的过程具体还可以是:分别将第一像素点对应的调整系数的平方值与第一像素点对应的第二像素点的重建像素值相乘,得到多个第二乘积;将所有第二乘积的和,确定为调整值;根据调整值,得到当前像素点的目标预测值。
总而言之,本申请并不限制步骤S131的具体过程。
在一应用场景中,步骤S1313可以是直接将调整值作为当前像素点的目标预测值。
在另一应用场景中,步骤S1313的具体过程包括:
步骤S13131:根据当前像素点的初始预测值和调整值,得到当前像素点的目标预测值。其中,当前像素点的初始预测值是根据当前编码块与目标参考块之间的运动信息而得到的。
其中,当前像素点的初始预测值具体可以是根据当前编码块与目标参考块之间的运动矢量MV进行运动补偿而得到的,当前编码块对应的目标参考块不同,得到的当前像素点的初始预测值也不同。其中,确定当前像素点的初始预测值的过程属于现有技术,在此不做具体介绍。
其中,步骤S13131具体可以是,确定当前像素点的初始预测值和调整值的平均值,得到当前像素点的目标预测值,或者,确定当前像素点的初始预测值和调整值的和值,得到当前像素点的目标预测值。
或者,步骤S13131还可以是:对初始预测值和调整值进行加权求和处理,得到当前像素点的目标预测值。具体地,此时可以预先由设计人员根据实际需求为初始预测值和调整值设定权重,例如初始预测值的权重为λ1,调整值的权重为λ2,然后将初始预测值与λ1相乘,将调整值与λ2相乘,然后将两个相乘得到的结果相加,得到当前像素点的目标预测值。
需要说明的是,对于当前编码块中的不同像素点而言,其对应的预测预测值的权重λ1可以相同,也可以不同,相应地,对应的调整值的权重λ2可以相同,也可以不同,可以根据实际需求进行设定。
其中,为了更好地理解上述方案,下面结合实例进行介绍:
假设当前编码块的大小为4×4,当前模板中的第二像素点只分布在当前编码块的上侧,在当前时刻对当前编码块的最左上角像素点(位置(0,0))进行调整,即当前像素点为当前编码块的最左上角像素点,同时假设当前像素点的初始预测值为60,当前像素点对应的参考像素点的重建像素值为60,参考模板中四个第一像素点从左往右的重建像素值依次为20、30、40以及50,则从左往右,四个第一像素点对应的绝对值依次为40、30、20以及10。
假设在将第一像素点对应的绝对值带入预设函数后,得到的代表值与第一像素点对应的绝对值相等,则从左往右,四个第一像素点对应的代表值依次为40、30、20以及10,进而从左往右,四个第一像素点对应的调整系数依次为0.4、0.3、0.2以及0.1。
同时假设当前模板从左往右的四个第二像素点的重建像素值依次40、50、60以及70,则得到的调整值为A=40×0.4+50×0.3+60×0.2+70×0.1=50。
同时假设调整值的权重为0.4,当前像素点的初始预测值的权重为0.6,则当前像素点的目标预测值为0.4×50+0.6×60=56。
参阅图6,在本实施方式中,在步骤S120之前还需要在参考帧中确定目标参考块,该过程包括:
S140:根据当前编码块对应的初始运动矢量,在参考帧中确定初始参考块。
具体地,首先通过运动搜索等方法在参考帧中确定与当前编码块最为接近的编码块,该最为接近的编码块即为初始参考块。
S150:将初始参考块在参考帧中进行平移处理,得到包括初始参考块的多个候选参考块。
具体地,将初始参考块在参考帧中以n个预设步长,以及t个预设方向进行平移处理,能得到包括初始参考块的(n×t+1)个候选参考块。
可以理解的是,随着初始参考块在参考帧中的平移,初始参考块的参考模板也在随之平移。
为了更好地理解,在此举出具体实例:
结合图7,设置2个预设步长,分别为2个像素点,4个像素点,以及设置4个预设方向,分别为垂直向上,垂直向下,水平向左,水平向右,在该应用场景中,通过平移初始参考块,能够得到包括初始参考块的9个候选参考块。
S160:在多个候选参考块中,将与当前编码块相似度最大的候选编码块确定为目标参考块。
具体地,在得到多个候选参考块之后,在多个候选编码块中查找与当前编码块相似度最大的候选编码块,而后将相似度最大的候选编码块,确定为目标参考块。也就是说,目标参考块是多个候选参考块中,与当前编码块最相似的候选参考块。
在本实施方式中,参阅图8,步骤S160具体包括:
S161:分别根据多个候选参考块的参考模板与当前编码块的当前模板,确定每个候选参考块对应的第一代价值,其中,候选参考块对应的第一代价值和候选参考块对应的模板差异呈正相关,模板差异为候选参考块的参考模板与当前模板的差异。
具体地,针对每个候选参考块而言,根据候选参考块的参考模板与当前模板,确定候选参考块对应的第一代价值。
其中,此处的正相关指的是:候选参考块对应的模板差异越小,候选参考块对应的第一代价值越小。而如果候选参考块对应的第一代价值越小,则说明候选参考块的参考模板与当前编码块的当前模板的差异越小,参考模板与当前模板越相似度越高,进而说明候选参考块与当前编码块也越相似,进而后续可以将对应第一代价值最小的候选参考块,确定为目标参考块。
其中,采用现有技术中任何一种方法确定候选参考块的参考模板与当前编码块的当前模板的第一代价值,只要保证候选参考块的参考模板与当前编码块的当前模板的差异越小,候选参考块对应的第一代价值越小即可。
S162:将对应第一代价值最小的候选参考块确定为目标参考块。
需要说明的是,在其他应用场景中,步骤S160还可以采用其他方式确定目标参考块,例如,直接确定每个候选参考块与当前编码块的相似度,然后将对应相似度最高的候选参考块,确定为目标参考块。
在上述方案中,通过在参考帧中平移初始参考块而生成包括初始参考块的多个候选参考块,然后在多个候选参考块中,确定与当前编码块最相似的目标参考块,与现有技术中直接将初始编码块作为目标参考块相比,可以避免在确定初始参考块时出现错误而影响后续结果的准确性。
其中,为了将最终参考块指示给解码端,编码器在将码流传输给解码器时,需要增加一个句法元素(第一句法元素),即在步骤S130之后生成第一句法元素,该句法元素指示在编码时是否生成了多个候选参考块,即是否执行了步骤S140-步骤S160,具体而言,该句法元素有两种状态,当为第一种状态时,指示在编码时没有生成多个候选参考块,即在编码时没有执行步骤S140-步骤S160,此时最终参考块是初始参考块,当为第二种状态时,指示在编码时生成了多个候选参考块,此时最终参考块是在多个候选参考块中确定的与当前编码块相似度最大的候选编码块,即执行了步骤S140-步骤S160,其中,当该句法元素是第二种状态时,还需要生成另外两个句法元素:一个句法元素(第二句法元素)指示最终参考块相对初始参考块的偏移方向,另一个句法元素(第三句法元素)指示最终参考块相对初始参考块的偏移量。
可以理解的是,通过上述方案,当前编码块中每个像素点的最终预测值均是每个像素点基于与当前编码块相似度最大的参考块(定义为最终参考块)下的预测值。而在其他实施方式中,为了达到同样的目的,参阅图9,编码方法还包括:
S210:根据当前编码块对应的初始运动矢量,在参考帧中确定初始参考块。
S220:将初始参考块在参考帧中进行平移处理,得到包括初始参考块的多个候选参考块。
具体地,多个候选参考块的生成过程与前述实施方式相同。
S230:依次将多个候选参考块分别作为目标参考块,确定当前像素点在每个候选参考块下的目标预测值。
具体地,对于当前编码块中的当前像素点而言,将多个候选参考块依次作为目标参考块,执行步骤S120以及步骤S130。
为了便于理解,在此结合实例进行说明:
假设候选参考块有3个,分别为第一候选参考块、第二候选参考块以及第三候选参考块,首先将第一候选参考块作为目标参考块,而执行步骤S120以及步骤S130,得到当前像素点在第一候选参考块下的目标预测值,然后将第二候选参考块作为目标参考块,而执行步骤S120以及步骤S130,得到当前像素点在第二候选参考块下的目标预测值,最后将第三候选参考块作为目标参考块,而执行步骤S120以及步骤S130,得到当前像素点在第三候选参考块下的目标预测值。
S240:在分别将当前编码块中的每个像素点依次作为当前像素点,而得到当前编码块中的每个像素点在每个候选参考块下的目标预测值后,分别根据当前编码块中的所有像素点在每个候选参考块下的目标预测值,确定每个候选参考块对应的第二代价值。
具体地,将当前编码块中的每个像素点都依次作为当前像素点而执行前述步骤后,可以得到当前编码块中的每个像素点在每个候选参考块下的目标预测值。
为了便于理解,在此举出具体实例,假设候选参考块的数量为L个,则对于当前编码块中的每个像素点而言,其都有L个目标预测值。
而在得到当前编码块中的所有像素点在多个候选参考块下的目标预测值时,对于任意一个候选参考块而言,根据当前编码块中所有像素点在该候选参考块下的目标预测值,可以确定该候选参考块的第二代价值,该第二代价值具体为率失真代价值,其中,确定候选参考块的第二代价值的过程属于现有技术,在此不做详述。
S250:分别将每个像素点在对应第二代价值最小的候选参考块下的目标预测值,确定为每个像素点的最终预测值。
具体地,候选参考块对应的第二代价值越小,说明候选参考块与当前编码块的差异越小,相似度越高,因此对于当前编码块中的任意像素点而言,将其在对应第二代价值最小的候选参考块下的目标预测值,确定为该像素点的最终预测值。
在该方案中,当前编码块中任意像素点的最终预测值也是该像素点在与当前编码块最相似的参考块下的预测值,能够与上述方案达到同样的目的。
需要说明的是,在其他实施方式后中,也可以不考虑在确定初始参考块时出现错误的情况,即此时不可以生成多个候选参考块,而是直接将初始参考块作为与当前编码块最相似的编码块(最终参考块),对于当前编码块中的任意像素点而言,其在初始参考块下的预测值即为最终的预测值。
其中,为了将最终参考块指示给解码端,编码器在将码流传输给解码器时,需要增加一个句法元素(第一句法元素),即在步骤S130之后生成第一句法元素,该句法元素指示在编码时是否生成了多个候选参考块,即是否执行了步骤S210-S250,具体而言,该句法元素有两种状态,当为第一种状态时,指示在编码时没有生成多个候选参考块,此时最终参考块是初始参考块,即没有执行步骤S210-S250,当为第二种状态时,指示在编码时生成了多个候选参考块,此时最终参考块是在多个候选参考块中确定的与当前编码块相似度最大的候选编码块,即执行了步骤S210-S250,其中,当该句法元素是第二种状态时,还需要生成并传输另外两个句法元素:一个句法元素(第二句法元素)指示最终参考块(对应第二代价值最小的候选参考块)相对初始参考块的偏移方向,另一个句法元素(第三句法元素)指示最终参考块(对应第二代价值最小的候选参考块)相对初始参考块的偏移量。
参阅图10,在本实施方式中,在步骤S120之前还需要确定当前编码块的当前模板,该过程包括:
S170:基于当前编码块的尺寸、纹理方向中的至少一种,将当前编码块的当前模板确定为第一模板、第二模板以及第三模板中的一个。
其中,第一模板中的第二像素点分布在当前编码块的第一侧和第二侧;第二模板中的第二像素点分布在当前编码块的第一侧;第三模板中的第二像素点分布在当前编码块的第二侧,也就是说,在当前编码块的当前模板为第一模板时,当前模板中的第二像素点分布在当前编码块的第一侧和第二侧;在当前编码块的当前模板为第二模板时,当前模板中的第二像素点分布在当前编码块的第一侧;在当前编码块的当前模板为第三模板时,当前模板中的第二像素点分布在当前编码块的第二侧。
其中,为了便于说明,以下均以当当前编码块的当前模板为第二模板时,当前模板中的第二像素点的排列方向与当前编码块的宽度方向平行,当当前编码块的当前模板为第三模板时,当前模板中的第二像素点的排列方向与当前编码块的高度方向平行进行说明。
可以理解的是,当按照从左往右,从上往下的顺序依次对图像帧中的各个编码块进行编码时,第一侧为当前编码块的上侧,第二侧为当前编码块的左侧;当按照从右往左,从下往上的顺序依次对图像帧中的各个编码块进行编码时,第一侧为当前编码块的下侧,第二侧为当前编码块的右侧,但是为了便于说明,以下均以第一侧为当前编码块的上侧,第二侧为当前编码块的左侧进行说明,也就是说,第一模板中一部分的第二像素点的排列方向与当前编码块的宽度方向平行,另一部分的第二像素点的排列方向与当前编码块的高度方向平行;第二模板中的第二像素点的排列方向与当前编码块的宽度方向平行;第三模板中的第二像素点的排列方向与当前编码块的高度方向平行。
在现有技术中,在确定当前编码块的当前模板时,直接将当前编码块的当前模板确定为第一模板,但是实际上图像具有多样性,在有的图像中,其当前编码块与其左侧、上侧的区域都存在密不可分的联系,但是在有的图像中,其当前编码块只有左侧的区域存在联系,或者只与上侧的区域存在联系,而如果直接将当前编码块的当前模板确定为第一模板,则容易与图像的实际情况不符。因此本实施方式在步骤S120之前,需要根据当前编码块的尺寸、纹理方向中的至少一种,确定当前编码块的当前模板。其中,可以仅根据当前编码块的尺寸或者纹理方向,确定当前编码块的当前模板,也可以同时结合当前编码块的尺寸和纹理方向,确定当前编码块的当前模板。
在一应用场景中,步骤S170具体包括:响应于当前编码块的宽与高的比值大于第一阈值,将当前编码块的当前模板确定为第二模板,第一阈值大于1;响应于当前编码块的高与宽的比值大于第二阈值,将当前编码块的当前模板确定为第三模板,第二阈值大于1;响应于当前编码块的宽与高的比值不大于第一阈值且当前编码块的高与宽的比值不大于第二阈值,将当前编码块的当前模板确定为第一模板。
具体地,当当前编码块的宽与高的比值大于第一阈值时,说明当前编码块的宽大于高,此时位于当前编码块上侧的相邻重建像素点的数量大于位于当前编码块左侧的相邻重建像素点的数量,因此位于当前编码块上侧的相邻重建像素点对当前编码块的影响大于位于当前编码块左侧的相邻重建像素点对当前编码块的影响,因此利用位于当前编码块上侧的相邻重建像素点构建当前模板;基于类似的理由,在当前编码块的高与宽的比值大于第二阈值时,利用位于当前编码块左侧的相邻重建像素点构建当前模板,而当当前编码块的宽与高的比值不大于第一阈值且当前编码块的高与宽的比值不大于第二阈值时,同时利用位于当前编码块上侧的相邻重建像素点和位于当前编码块左侧的相邻重建像素点构建当前模板。
为了更好地理解上述方案,在此结合实例进行说明:
假设第一阈值为2,第二阈值为4,若当前编码块的尺寸为16×4,则此时宽与高的比值为4,该比值大于第一阈值,进而将当前编码块的当前模板设置为第二模板,即利用当前编码块上侧的相邻重建像素点构建当前模板,若当前编码块的尺寸为4×32,则此时高与宽的比值为8,该比值大于第二阈值,进而将当前编码块的当前模板设置为第三模板,即利用当前编码块左侧的相邻重建像素点构建当前模板;若当前编码块的尺寸为8×4,或者4×12,则同时利用左侧和上侧的相邻重建像素点构建当前模板。
在该应用场景中,当根据当前编码块的尺寸确定当前编码块的当前模板时,因为解码器可以知道编码块的尺寸,因此解码器可以直接根据编码块的尺寸确定解码器在编码时使用的模板类型,也就是说,此时编码器在传输码流时,无需传输额外的句法元素,但是为了减少解码器的计算复杂度,编码器在传输时,也可以新增一个句法元素(第四句法元素),该句法元素指示编码器在编码时将当前编码块的当前模板确定为是第一模板、第二模板还是第三模板,具体而言,第四句法元素包括第一标识,当当前模板为第一模板时,第一标识的值为第一数值,当当前模板为第二模板时,第一标识的值为第二数值,当当前模板为第三模板时,第一标识的值为第三数值,也就是说,第一标识的值与当前模型的类型关联。
在另一应用场景中,步骤S170具体包括:响应于当前编码块的纹理方向为水平方向,将当前编码块的当前模板确定为第三模板;响应于当前编码块的纹理方向为垂直方向,将当前编码块的当前模板确定为第二模板;否则,将当前编码块的当前模板确定为第一模板。
具体地,在当前编码块的纹理方向为水平方向时,说明当前编码块中的像素点与当前编码块左侧区域的像素点属于同一物体的概率较高,当前编码块左侧区域的像素点对当前编码块的影响较高,因此利用位于当前编码块左侧的相邻重建像素点构建当前模板;基于类似的理由,在当前编码块的纹理方向为垂直方向时,说明当前编码块中的像素点与当前编码块上侧区域的像素点属于同一物体的概率较高,当前编码块上侧区域的像素点对当前编码块的影响较高,因此利用位于当前编码块上侧的相邻重建像素点构建当前模板。当当前编码块的纹理方向既不是水平方向,也不是垂直方向时,则同时利用位于当前编码块上侧的相邻重建像素点和位于当前编码块左侧的相邻重建像素点构建当前模板。
其中,确定当前编码块的纹理方向的过程包括:
(a)在当前编码块上生成多个窗口,每个窗口均框选当前编码块中的部分像素点,且不同窗口框选的像素点不完全相同。
具体地,窗口的尺寸小于当前编码块的尺寸,且不同窗口框选当前编码块的不同区域。同时生成的多个窗口的尺寸可以完全相同,也可以不完全相同,具体可结合实际需求进行设置。
其中,可以按照预设规则在当前编码块上生成多个窗口,例如,在图11应用场景中,在尺寸为4×4的当前编码块上,利用一个3×3的窗口按照光栅扫描的方式,并以步长为1个像素点移动并遍历当前编码块,从而最终在当前编码块上生成4个窗口,这4个窗口在图11中用虚线框示出,或者,在其他应用场景中,还可以在当前编码块上随机生成多个窗口。
(b)分别确定每个窗口中当前编码块的纹理方向,得到每个窗口对应的纹理方向,其中,每个窗口中当前编码块的纹理方向为水平方向或者垂直方向。
具体地,在生成多个窗口后,分别确定每个窗口所框选的当前编码块的纹理方向,例如,在一应用场景中,确定每个窗口所框选的当前编码块的纹理方向是水平方向还是垂直方向,或者,在另一应用场景中,确定每个窗口所框选的当前编码块的纹理方向是水平方向,还是垂直方向,还是既不是水平方向,也不是垂直方向。
在本实施方式中,确定每个窗口对应的纹理方向的过程可以是:利用索贝尔算子计算每个窗口中当前编码块的水平和垂直梯度,例如,对于尺寸均为3×3的窗口而言,设置如图12所示的水平方向索贝尔算子以及如图13所示的垂直方向索贝尔算子(水平方向索贝尔算子与垂直方向索贝尔算子的尺寸与窗口的尺寸相同),然后对于每个窗口而言,分别利用水平方向索贝尔算子以及垂直方向索贝尔算子确定窗口中当前编码块的水平梯度值和垂直梯度值,最终对于每个窗口而言,都有一个水平梯度值和垂直梯度值。然后针对每个窗口而言,如果其对应的水平梯度值的绝对值小于水平阈值T0,则确定该窗口中当前编码块的纹理方向为水平方向,但是如果其对应的垂直梯度值的绝对值小于垂直阈值T1,则确定该窗口中当前编码块的纹理方向为垂直方向。
(c)确定对应纹理方向为水平方向的第一窗口的数量与多个窗口的总数量的第一比值。
(d)确定对应纹理方向为垂直方向的第二窗口的数量与多个窗口的总数量的第二比值。
具体地,在得到每个窗口对应的纹理方向后,将对应纹理方向为水平方向的窗口定义为第一窗口,将对应纹理方向为垂直方向的窗口定义为第二窗口,然后统计窗口的总数量、第一窗口的数量和第二窗口的数量,并确定第一窗口的数量与窗口的总数量的第一比值,第二窗口的数量与窗口的总数量的第二比值。
(e)响应于第一比值大于或者等于第三阈值,第二比值小于第四阈值,确定当前编码块的纹理方向为水平方向。
(f)响应于第一比值小于第五阈值,第二比值大于或者等于第六阈值,确定当前编码块的纹理方向为垂直方向。
(g)否则,确定当前编码块的纹理方向既不是水平方向,也不是垂直方向。
具体地,如果第一比值大于或者等于第三阈值w0,且第二比值小于第四阈值w1,则确定当前编码块的纹理方向为水平方向;如果第一比值小于第五阈值w2,且第二比值大于或者等于第六阈值w3,则确定当前编码块的纹理方向为垂直方向。但是如果上述条件都不满足,则确定当前编码块的纹理方向既不是水平方向,也不是垂直方向。
需要说明的是,本申请对于确定当前编码块的纹理方向的具体过程并不做具体限制,例如,在其他实施方式中,还可以采用哈希计算确定当前编码块的纹理方向。
其中,在确定当前编码块的纹理方向时,可以是基于当前编码块中各个像素点的原始像素值,也可以是基于当前编码块中各个像素点的初始预测值。其中各个像素点的初始预测值具体可以是根据当前编码块与目标参考块之间的运动矢量MV进行运动补偿而得到的,确定各个像素点的初始预测值的过程属于现有技术,在此不做具体介绍。
其中,基于当前编码块中各个像素点的原始像素值,确定当前编码块的纹理方向的具体过程就是,将各个像素点的原始像素值代入各种计算,最终得到当前编码块的纹理方向;基于当前编码块中各个像素点的初始预测值,确定当前编码块的纹理方向的具体过程就是,将各个像素点的初始预测值代入各种计算,最终得到当前编码块的纹理方向。
在该应用场景中,当基于当前编码块中各个像素点的原始像素值,确定当前编码块的纹理方向时,由于解码器不知道当前编码块中各个像素点的原始像素值,因此解码器就无法知道编码器在编码时所使用的当前模板,因此为了将当前模板指示给解码器,编码器在将码流传输给解码器时,需要增加一个句法元素(第四句法元素),该句法元素指示编码器在编码时将当前编码块的当前模板确定为是第一模板、第二模板还是第三模板,具体而言,第四句法元素包括第一标识,当当前模板为第一模板时,第一标识的值为第一数值,当当前模板为第二模板时,第一标识的值为第二数值,当当前模板为第三模板时,第一标识的值为第三数值,也就是说,第一标识的值与当前模板的类型相关。
而当基于当前编码块中各个像素点的初始预测值,确定当前编码块的纹理方向,由于解码器可以知道各个像素点的初始预测值,进而解码器可以知道编码器在编码时所使用的当前模板的类型,因此编码器在传输码流时,可以无需传输额外的句法元素,但是为了减少解码器的计算复杂度,编码器在传输时也可以新增一个句法元素(第四句法元素),该句法元素指示编码器在编码时将当前编码块的当前模板确定为是第一模板、第二模板还是第三模板。
在上述方案中,最终当前编码块中每个像素点的预测值均是每个像素点基于对当前编码块影响最大的模板(定义为最终模板)下的预测值。而在其他实施方式中,为了达到同样的目的,参阅图14,编码方法还包括:
S310:依次以当前编码块的当前模板为第一模板、第二模板以及第三模板,确定当前像素点的目标预测值。
具体地,对于当前编码块中的当前像素点而言,将第一模板、第二模板以及第三模板依次作为当前模板,执行步骤S120以及步骤S130,从而得到当前像素点在第一模板下的目标预测值,当前像素点在第二模板下的目标预测值以及当前像素点在第三模板下的目标预测值。
S320:在分别将当前编码块中的每个像素点依次作为当前像素点,而得到当前编码块中的每个像素点在第一模板、第二模板、第三模板下的目标预测值后,分别根据当前编码块中的所有像素点在第一模板、第二模板以及第三模板下的目标预测值,确定第一模板、第二模板以及第三模板对应的第三代价值。
具体地,将当前编码块中的每个像素点都依次作为当前像素点而执行前述步骤后,对于当前编码块中的每个像素点而言,都可以得到其在第一模板下的目标预测值,在第二模板下的目标预测值以及在第三模板下的目标预测值。
从而对于第一模板而言,根据当前编码块中所有像素点在第一模板下的目标预测值,可以确定第一模板对应的第三代价值;对于第二模板而言,根据当前编码块中所有像素点在第二模板下的目标预测值,可以确定第二模板对应的第三代价值;对于第三模板而言,根据当前编码块中所有像素点在第三模板下的目标预测值,可以确定第三模板对应的第三代价值。其中,第三代价值具体为率失真代价值,确定第三代价值的过程属于现有技术,在此不做详述。
S330:响应于第一模板对应的第三代价值最小,将每个像素点在第一模板下的目标预测值,确定为每个像素点的最终预测值。
具体地,如果第一模板对应的第三代价值最小,则说明第一模板对当前编码块的影响较大,则分别将每个像素点在第一模板下的目标预测值,确定为像素点各自的最终预测值。
S340:响应于第二模板对应的第三代价值最小,将每个像素点在第二模板下的目标预测值,确定为每个像素点的最终预测值。
具体地,如果第二模板对应的第三代价值最小,则说明第二模板对当前编码块的影响较大,则分别将每个像素点在第二模板下的目标预测值,确定为像素点各自的最终预测值。
S350:响应于第三模板对应的第三代价值最小,将每个像素点在第三模板下的目标预测值,确定为每个像素点的最终预测值。
具体地,如果第三模板对应的第三代价值最小,则说明第三模板对当前编码块的影响较大,则分别将每个像素点在第三模板下的目标预测值,确定为像素点各自的最终预测值。
在该实施方式中,在得到第一模板对应的第三代价值后,可以将第一模板对应的第三代价值记为RDcost1,在得到第二模板对应的第三代价值后,可以将第二模板对应的第三代价值记为RDcost2,在得到第三模板对应的第三代价值后,可以将第三模板对应的第三代价值记为RDcost3,然后比较RDcost1、RDcost2以及RDcost3的大小,如果RDcost1最小,则将当前编码块的当前模板设置为第一模板。
在该方案中,当前编码块中任意像素点的最终预测值也是该像素点在对当前编码块影响最大的模板下的预测值,能够与上述方案达到同样目的。
在该实施方式中,为了将当前编码块的当前模板指示给解码器,编码器在传输码流时,需要增加一个句法元素(第四句法元素),该句法元素指示编码器在编码时,将当前编码块的当前模板设置为第一模板、第二模板还是第三模板,例如在该句法元素中,设置一个块级的句法标识lic_sub_mode,当lic_sub_mode等于0时,表示当前编码块的当前模板是第一模板,当lic_sub_mode等于1时,表示当前编码块的当前模板是第二模板,当lic_sub_mode等于2时,表示当前编码块的当前模板是第三模板。也就是说,第四句法元素包括第一标识,当在第一模板、第二模板以及第三模板对应的第三代价值中,第一模板对应的第三代价值最小时,第一标识的值为第一数值,当在第一模板、第二模板以及第三模板对应的第三代价值中,第二模板对应的第三代价值最小时,第二标识的值为第二数值,当在第一模板、第二模板以及第三模板对应的第三代价值中,第三模板对应的第三代价值最小时,第一标识的值为第三数据。
需要说明的是,在其他实施方式中,也可以采用现有技术中的方案直接设置当前编码块的当前模板,即直接将当前编码块的当前模板设置为第一模板,当前编码块中任意像素点的最终预测值均为像素点在第一模板下的预测值。
参阅图15,图15是本申请编码器一实施方式的结构示意图。该编码器200包括处理器210、存储器220以及通信电路230,处理器210分别耦接存储器220、通信电路230,存储器220中存储有程序数据,处理器210通过执行存储器220内的程序数据以实现上述任一项实施方式中编码方法的步骤,其中详细的步骤可参见上述实施方式,在此不再赘述。
其中,编码器200可以是电脑、手机等任一项具有算法处理能力的装置,在此不做限制。
参阅图16,图16是本申请编码器另一实施方式的结构示意图。该编码器300包括获取模块310、构建模块320以及预测模块330。
获取模块310用于获取当前编码块。
构建模块320与获取模块310连接,用于基于参考帧中的目标参考块,为当前编码块中的当前像素点构建预测值调整模型,其中,预测值调整模型的参数是利用目标参考块中与当前像素点对应的参考像素点、目标参考块的参考模板中第一像素点以及当前编码块的当前模板中第二像素点的重建像素值计算得到的,其中,参考模板包括目标参考块的多个相邻重建像素点,当前模板包括当前编码块的多个相邻重建像素点。
预测模块330与构建模块320连接,用于利用预测值调整模型对当前像素点进行预测,得到当前像素点的目标预测值。
其中,编码器300在工作时执行上述任一项实施方式中编码方法的步骤,详细的步骤可参见上述相关内容,在此不做赘述。
其中,编码器300可以是电脑、手机等任一项具有算法处理能力的装置,在此不做限制。
参阅图17,图17是本申请解码方法一实施方式的流程示意图。该解码方法包括:
S410:接收编码器发送的编码数据。
S420:通过对编码数据进行解码,得到当前解码块中当前像素点的目标预测值。
其中,当前解码块中当前像素点的目标预测值是采用上述任一项实施方式中编码方法得到的,详细的步骤可参见实施相关内容,在此不再赘述。
参阅图18,图18是本申请解码器一实施方式的结构示意图。该解码器400包括处理器410、存储器420以及通信电路430,处理器410分别耦接存储器420、通信电路430,存储器420中存储有程序数据,处理器410通过执行存储器420内的程序数据以实现上述任一项实施方式中解码方法的步骤,其中详细的步骤可参见上述实施方式,在此不再赘述。
其中,解码器400可以是电脑、手机等任一项具有算法处理能力的装置,在此不做限制。
参阅图19,图19是本申请计算机可读存储介质一实施方式的结构示意图。该计算机可读存储介质500存储有计算机程序510,计算机程序510能够被处理器执行以实现上述任一项方法中的步骤。
其中,计算机可读存储介质500具体可以为U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等可以存储计算机程序510的装置,或者也可以为存储有该计算机程序510的服务器,该服务器可将存储的计算机程序510发送给其他设备运行,或者也可以自运行该存储的计算机程序510。
以上所述仅为本申请的实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (23)

1.一种编码方法,其特征在于,所述方法包括:
获取当前编码块;
基于参考帧中的目标参考块,为所述当前编码块中的当前像素点构建预测值调整模型,其中,所述预测值调整模型的参数是利用所述目标参考块中与所述当前像素点对应的参考像素点、所述目标参考块的参考模板中第一像素点以及所述当前编码块的当前模板中第二像素点的重建像素值计算得到的,其中,所述参考模板包括所述目标参考块的多个相邻重建像素点,所述当前模板包括所述当前编码块的多个相邻重建像素点;
利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值。
2.根据权利要求1所述的方法,其特征在于,所述预测值调整模型的参数包括多个调整系数,多个所述调整系数与所述参考模板中的多个所述第一像素点一一对应,且所述第一像素点对应的所述调整系数和所述第一像素点对应的重建像素差距呈正相关,所述重建像素差距为所述第一像素点的重建像素值与所述参考像素点的重建像素值的差距;
所述利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值的步骤,包括:
根据多个所述调整系数以及多个所述第一像素点对应的所述第二像素点的重建像素值,确定所述当前像素点的所述目标预测值。
3.根据权利要求2所述的方法,其特征在于,所述根据多个所述调整系数以及多个所述第一像素点对应的所述第二像素点的重建像素值,确定所述当前像素点的所述目标预测值的步骤,包括:
分别将所述第一像素点对应的所述调整系数与所述第一像素点对应的所述第二像素点的重建像素值相乘,得到多个第一乘积;
将所有所述第一乘积的和确定为调整值;
根据所述调整值,得到所述当前像素点的所述目标预测值。
4.根据权利要求2所述的方法,其特征在于,所述基于参考帧中的目标参考块,为所述当前编码块中的当前像素点构建预测值调整模型的步骤,包括:
分别将所述参考模板中每个所述第一像素点的重建像素值与所述参考像素点的重建像素值的差值的绝对值,确定为每个所述第一像素点对应的所述绝对值;
分别将每个所述第一像素点对应的所述绝对值代入预设函数,得到每个所述第一像素点对应的代表值,其中,所述第一像素点对应的所述代表值和所述第一像素点对应的所述绝对值呈正相关;
分别根据每个所述第一像素点对应的所述代表值,确定每个所述第一像素点对应的所述调整系数,其中,所述第一像素点对应的所述调整系数和所述第一像素点对应的所述代表值呈正相关。
5.根据权利要求4所述的方法,其特征在于,所述分别根据每个所述第一像素点对应的所述代表值,确定每个所述第一像素点对应的所述调整系数的步骤,包括:
将所有所述代表值进行求和处理,得到第一和值;
分别将每个所述第一像素点对应的所述代表值与所述第一和值的比值,确定为每个所述第一像素点对应的所述调整系数。
6.根据权利要求3所述的方法,其特征在于,所述根据所述调整值,得到所述当前像素点的所述目标预测值的步骤,包括:
根据所述当前像素点的初始预测值和所述调整值,得到所述当前像素点的所述目标预测值;
其中,所述当前像素点的所述初始预测值是根据所述当前编码块与所述目标参考块之间的运动信息而得到的。
7.根据权利要求6所述的方法,其特征在于,所述根据所述当前像素点的初始预测值和所述调整值,得到所述当前像素点的所述目标预测值的步骤,包括:
对所述初始预测值和所述调整值进行加权求和处理,得到所述当前像素点的所述目标预测值。
8.根据权利要求1所述的方法,其特征在于,在所述基于参考帧中的目标参考块,为所述当前编码块中的当前像素点构建预测值调整模型之前,还包括:
根据所述当前编码块对应的初始运动矢量,在所述参考帧中确定初始参考块;
将所述初始参考块在所述参考帧中进行平移处理,得到包括所述初始参考块的多个候选参考块;
在多个所述候选参考块中,将与所述当前编码块相似度最大的所述候选编码块确定为所述目标参考块。
9.根据权利要求8所述的方法,其特征在于,所述在多个所述候选参考块中,将与所述当前编码块相似度最大的所述候选编码块确定为所述目标参考块的步骤,包括:
分别根据多个所述候选参考块的参考模板与所述当前编码块的当前模板,确定每个所述候选参考块对应的第一代价值,其中,所述候选参考块对应的所述第一代价值和所述候选参考块对应的模板差异呈正相关,所述模板差异为所述候选参考块的参考模板与所述当前模板的差异;
将对应所述第一代价值最小的所述候选参考块,确定为所述目标参考块。
10.根据权利要求8所述的方法,其特征在于,在所述利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值之后,还包括:
生成第一句法元素;
响应于所述第一句法元素指示执行所述根据所述当前编码块对应的初始运动矢量,在所述参考帧中确定初始参考块的步骤至所述在多个所述候选参考块中,将与所述当前编码块最相似的所述候选编码块确定为所述目标参考块的步骤,生成第二句法元素以及第三句法元素,其中,所述第二句法元素用于将所述目标参考块相对所述初始参考块的偏移方向指示给解码器,所述第三句法元素用于将所述目标参考块在所述偏移方向上相对所述初始参考块的偏移量指示给所述解码器。
11.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述当前编码块对应的初始运动矢量,在所述参考帧中确定初始参考块;
将所述初始参考块在所述参考帧中进行平移处理,得到包括所述初始参考块的多个候选参考块;
依次将多个所述候选参考块分别作为所述目标参考块,确定所述当前像素点在每个所述候选参考块下的所述目标预测值;
在分别将所述当前编码块中的每个像素点依次作为所述当前像素点,而得到所述当前编码块中的每个像素点在每个所述候选参考块下的所述目标预测值后,分别根据所述当前编码块中的所有像素点在每个所述候选参考块下的所述目标预测值,确定每个所述候选参考块对应的第二代价值;
分别将每个像素点在对应所述第二代价值最小的所述候选参考块下的所述目标预测值,确定为每个像素点的最终预测值。
12.根据权利要求11所述的方法,其特征在于,在所述利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值之后,还包括:
生成第一句法元素;
响应于所述第一句法元素指示执行所述根据所述当前编码块对应的初始运动矢量,在所述参考帧中确定初始参考块的步骤至所述分别将每个像素点在对应所述第二代价值最小的所述候选参考块下的所述目标预测值,确定为每个像素点的最终预测值的步骤,生成第二句法元素以及第三句法元素,其中,所述第二句法元素用于将对应所述第二代价值最小的所述候选参考块相对所述初始参考块的偏移方向指示给解码器,所述第三句法元素用于将对应所述第二代价值最小的所述候选参考块在所述偏移方向上相对所述初始参考块的偏移量指示给所述解码器。
13.根据权利要求1所述的方法,其特征在于,在所述基于参考帧中的目标参考块,为所述当前编码块中的当前像素点构建预测值调整模型之前,还包括:
基于所述当前编码块的尺寸、纹理方向中的至少一种,将所述当前编码块的所述当前模板确定为第一模板、第二模板以及第三模板中的一个;
其中,所述第一模板中的所述第二像素点分布在所述当前编码块的第一侧和第二侧;所述第二模板中的所述第二像素点分布在所述当前编码块的第一侧;所述第三模板中的所述第二像素点分布在所述当前编码块的第二侧。
14.根据权利要求13所述的方法,其特征在于,在所述利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值之后,还包括:
生成第四句法元素,所述第四句法元素包括第一标识,所述第一标识的值与所述当前模板的类型关联。
15.根据权利要求13所述的方法,其特征在于,所述基于所述当前编码块的尺寸、纹理方向中的至少一种,将所述当前编码块的所述当前模板确定为第一模板、第二模板以及第三模板中的一个的步骤,包括:
响应于所述当前编码块的宽与高的比值大于第一阈值,将所述当前编码块的所述当前模板确定为所述第二模板,所述第一阈值大于1;
响应于所述当前编码块的高与宽的比值大于第二阈值,将所述当前编码块的所述当前模板确定为所述第三模板,所述第二阈值大于1;
响应于所述当前编码块的宽与高的比值不大于所述第一阈值且所述当前编码块的高与宽的比值不大于所述第二阈值,将所述当前编码块的所述当前模板确定为所述第一模板。
16.根据权利要求13所述的方法,其特征在于,所述基于所述当前编码块的尺寸、纹理方向中的至少一种,将所述当前编码块的所述当前模板确定为第一模板、第二模板以及第三模板中的一个的步骤,包括:
响应于所述当前编码块的纹理方向为水平方向,将所述当前编码块的所述当前模板确定为所述第三模板;
响应于所述当前编码块的纹理方向为垂直方向,将所述当前编码块的所述当前模板确定为所述第二模板;
否则,将所述当前编码块的所述当前模板确定为所述第一模板。
17.根据权利要求16所述的方法,其特征在于,所述方法还包括:
在所述当前编码块上生成多个窗口,每个所述窗口均框选所述当前编码块中的部分像素点,且不同所述窗口框选的像素点不完全相同;
分别确定每个所述窗口中所述当前编码块的纹理方向,得到每个所述窗口对应的纹理方向;
确定对应纹理方向为水平方向的第一窗口的数量与所述多个窗口的总数量的第一比值;
确定对应纹理方向为垂直方向的第二窗口的数量与所述多个窗口的总数量的第二比值;
响应于所述第一比值大于或者等于第三阈值,所述第二比值小于第四阈值,确定所述当前编码块的纹理方向为水平方向;
响应于所述第一比值小于第五阈值,所述第二比值大于或者等于第六阈值,确定所述当前编码块的纹理方向为垂直方向;
否则,确定所述当前编码块的纹理方向既不是水平方向,也不是垂直方向。
18.根据权利要求1所述的方法,其特征在于,所述方法还包括:
依次以所述当前编码块的所述当前模板为第一模板、第二模板以及第三模板,确定所述当前像素点的所述目标预测值;
在分别将所述当前编码块中的每个像素点依次作为所述当前像素点,而得到所述当前编码块中的每个像素点在所述第一模板、所述第二模板、所述第三模板下的所述目标预测值后,分别根据所述当前编码块中的所有像素点在所述第一模板、所述第二模板以及所述第三模板下的所述目标预测值,确定所述第一模板、所述第二模板以及所述第三模板对应的第三代价值;
响应于所述第一模板对应的所述第三代价值最小,将每个像素点在所述第一模板下的所述目标预测值,确定为每个像素点的最终预测值;
响应于所述第二模板对应的所述第三代价值最小,将每个像素点在所述第二模板下的所述目标预测值,确定为每个像素点的最终预测值;
响应于所述第三模板对应的所述第三代价值最小,将每个像素点在所述第三模板下的所述目标预测值,确定为每个像素点的最终预测值;
其中,所述第一模板中的所述第二像素点分布在所述当前编码块的第一侧和第二侧;所述第二模板中的所述第二像素点分布在所述当前编码块的第一侧;所述第三模板中的所述第二像素点分布在所述当前编码块的第二侧。
19.根据权利要求18所述的方法,其特征在于,在所述利用所述预测值调整模型对所述当前像素点进行预测,得到所述当前像素点的目标预测值之后,还包括:
生成第四句法元素,所述第四句法元素包括第一标识,当在所述第一模板、所述第二模板以及所述第三模板对应的所述第三代价值中,所述第一模板对应的所述第三代价值最小时,所述第一标识的值为第一数值,当在所述第一模板、所述第二模板以及所述第三模板对应的所述第三代价值中,所述第二模板对应的所述第三代价值最小时,所述第二标识的值为第二数值,当在所述第一模板、所述第二模板以及所述第三模板对应的所述第三代价值中,所述第三模板对应的所述第三代价值最小时,所述第一标识的值为第三数值。
20.一种解码方法,其特征在于,所述方法包括:
接收编码器发送的编码数据;
通过对所述编码数据进行解码,得到当前解码块中当前像素点的目标预测值;
其中,所述当前解码块中所述当前像素点的所述目标预测值是采用如权利要求1至19任一项所述编码方法处理得到的。
21.一种编码器,其特征在于,所述编码器包括处理器、存储器以及通信电路,所述处理器分别耦接所述存储器、所述通信电路,所述存储器中存储有程序数据,所述处理器通过执行所述存储器内的所述程序数据以实现如权利要求1-19任一项所述方法中的步骤。
22.一种解码器,其特征在于,所述解码器包括处理器、存储器以及通信电路,所述处理器分别耦接所述存储器、所述通信电路,所述存储器中存储有程序数据,所述处理器通过执行所述存储器内的所述程序数据以实现如权利要求20所述方法中的步骤。
23.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序能够被处理器执行以实现如权利要求1-20任一项所述方法中的步骤。
CN202210824946.4A 2022-07-14 2022-07-14 编码方法、编码器及计算机可读存储介质 Active CN114900691B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210824946.4A CN114900691B (zh) 2022-07-14 2022-07-14 编码方法、编码器及计算机可读存储介质
PCT/CN2023/107408 WO2024012559A1 (en) 2022-07-14 2023-07-14 Methods, systems, and storage mediums for video encoding and decoding

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210824946.4A CN114900691B (zh) 2022-07-14 2022-07-14 编码方法、编码器及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN114900691A true CN114900691A (zh) 2022-08-12
CN114900691B CN114900691B (zh) 2022-10-28

Family

ID=82729304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210824946.4A Active CN114900691B (zh) 2022-07-14 2022-07-14 编码方法、编码器及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN114900691B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115134600A (zh) * 2022-09-01 2022-09-30 浙江大华技术股份有限公司 编码方法、编码器及计算机可读存储介质
WO2024012559A1 (en) * 2022-07-14 2024-01-18 Zhejiang Dahua Technology Co., Ltd. Methods, systems, and storage mediums for video encoding and decoding

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150124885A1 (en) * 2012-07-06 2015-05-07 Lg Electronics (China) R&D Center Co., Ltd. Method and apparatus for coding and decoding videos
US20180249177A1 (en) * 2015-10-31 2018-08-30 Huawei Technologies Co., Ltd. Reference Frame Encoding Method and Apparatus, and Reference Frame Decoding Method and Apparatus
CN110446044A (zh) * 2019-08-21 2019-11-12 浙江大华技术股份有限公司 线性模型预测方法、装置、编码器及存储装置
CN110636311A (zh) * 2019-09-18 2019-12-31 浙江大华技术股份有限公司 运动矢量的获取方法及相关预测方法、装置
CN111050176A (zh) * 2018-10-15 2020-04-21 腾讯科技(深圳)有限公司 视频编码、视频解码方法、装置、计算机设备和存储介质
CN112437299A (zh) * 2018-09-21 2021-03-02 华为技术有限公司 一种帧间预测方法和装置
CN113596457A (zh) * 2019-09-23 2021-11-02 杭州海康威视数字技术股份有限公司 编解码方法方法、装置及设备
CN114531596A (zh) * 2022-01-25 2022-05-24 京东方科技集团股份有限公司 图像处理方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150124885A1 (en) * 2012-07-06 2015-05-07 Lg Electronics (China) R&D Center Co., Ltd. Method and apparatus for coding and decoding videos
US20180249177A1 (en) * 2015-10-31 2018-08-30 Huawei Technologies Co., Ltd. Reference Frame Encoding Method and Apparatus, and Reference Frame Decoding Method and Apparatus
CN112437299A (zh) * 2018-09-21 2021-03-02 华为技术有限公司 一种帧间预测方法和装置
CN111050176A (zh) * 2018-10-15 2020-04-21 腾讯科技(深圳)有限公司 视频编码、视频解码方法、装置、计算机设备和存储介质
CN110446044A (zh) * 2019-08-21 2019-11-12 浙江大华技术股份有限公司 线性模型预测方法、装置、编码器及存储装置
CN110636311A (zh) * 2019-09-18 2019-12-31 浙江大华技术股份有限公司 运动矢量的获取方法及相关预测方法、装置
CN113596457A (zh) * 2019-09-23 2021-11-02 杭州海康威视数字技术股份有限公司 编解码方法方法、装置及设备
CN114531596A (zh) * 2022-01-25 2022-05-24 京东方科技集团股份有限公司 图像处理方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
YANG DAWEI等: "A fast mode decision algorithm of adaptive inter-layer prediction in scalable video coding", 《 2009 7TH INTERNATIONAL CONFERENCE ON INFORMATION, COMMUNICATIONS AND SIGNAL PROCESSING (ICICS)》 *
孙士雄: "H.264/AVC帧间预测关键技术的研究与硬件实现", 《有线电视技术》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024012559A1 (en) * 2022-07-14 2024-01-18 Zhejiang Dahua Technology Co., Ltd. Methods, systems, and storage mediums for video encoding and decoding
CN115134600A (zh) * 2022-09-01 2022-09-30 浙江大华技术股份有限公司 编码方法、编码器及计算机可读存储介质
CN115134600B (zh) * 2022-09-01 2022-12-20 浙江大华技术股份有限公司 编码方法、编码器及计算机可读存储介质

Also Published As

Publication number Publication date
CN114900691B (zh) 2022-10-28

Similar Documents

Publication Publication Date Title
US9973756B2 (en) Video encoder and video encoding method
KR101797805B1 (ko) 디코딩 방법, 디코딩 장치, 및 컴퓨터 판독가능한 저장 매체
JP3716931B2 (ja) 連続画像の適応型復号装置
CN114900691B (zh) 编码方法、编码器及计算机可读存储介质
US20170374379A1 (en) Picture prediction method and related apparatus
KR20210010633A (ko) 히스토리 기반 움직임 벡터에 기반한 인터 예측 방법 및 그 장치
RU2509439C2 (ru) Способ и устройство кодирования и декодирования, сигнал, носитель данных и продукты компьютерной программы
WO2011064990A1 (ja) 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法
KR20170026536A (ko) 디지털 이미지를 인코딩하기 위한 방법 및 연관된 디코딩 방법, 디바이스들 및 컴퓨터 프로그램들
JP2022008349A (ja) 低減されたメモリアクセスを用いてfrucモードでビデオデータを符号化又は復号する方法及び装置
KR20110114524A (ko) 화상 예측 부호화 장치, 방법 및 프로그램, 화상 예측 복호 장치, 방법 및 프로그램, 및 부호화·복호 시스템 및 방법
CN105282558A (zh) 帧内像素预测方法、编码方法、解码方法及其装置
KR20110081200A (ko) 화소 예측치 생성 순서 자동 생성 방법, 화상 부호화 방법, 화상 복호 방법, 그 장치, 그 프로그램 및 그 프로그램을 기록한 기록 매체
KR20130105821A (ko) 이미지 컨텐츠에 기초한 검색 및 랭킹에 의한, 비디오 압축 시 레퍼런스 블록으로의 링크를 인코딩
US20240089494A1 (en) Video encoding and decoding method and apparatus, storage medium, electronic device, and computer program product
CN114793282A (zh) 带有比特分配的基于神经网络的视频压缩
CN109688411B (zh) 一种视频编码率失真代价估计方法和装置
US10015508B2 (en) Video encoding device and video encoding method
CN103959788B (zh) 通过模式匹配在解码器层面的运动估计
CN115134600B (zh) 编码方法、编码器及计算机可读存储介质
CN115988212A (zh) 编码方法、编码器及计算机可读存储介质
US10045022B2 (en) Adaptive content dependent intra prediction mode coding
WO2019150411A1 (ja) 映像符号化装置、映像符号化方法、映像復号装置、映像復号方法、及び映像符号化システム
JP2008301270A (ja) 動画像符号化装置及び動画像符号化方法
US11616950B2 (en) Bitstream decoder

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant