CN116156180A - 帧内预测方法、图像编码方法、图像解码方法以及设备 - Google Patents

帧内预测方法、图像编码方法、图像解码方法以及设备 Download PDF

Info

Publication number
CN116156180A
CN116156180A CN202310417721.1A CN202310417721A CN116156180A CN 116156180 A CN116156180 A CN 116156180A CN 202310417721 A CN202310417721 A CN 202310417721A CN 116156180 A CN116156180 A CN 116156180A
Authority
CN
China
Prior art keywords
intra
image block
frame prediction
pixel
reference pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310417721.1A
Other languages
English (en)
Other versions
CN116156180B (zh
Inventor
李国新
张博
张韵东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Vimicro Artificial Intelligence Chip Technology Co ltd
Original Assignee
Beijing Vimicro Artificial Intelligence Chip Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Vimicro Artificial Intelligence Chip Technology Co ltd filed Critical Beijing Vimicro Artificial Intelligence Chip Technology Co ltd
Priority to CN202310417721.1A priority Critical patent/CN116156180B/zh
Publication of CN116156180A publication Critical patent/CN116156180A/zh
Application granted granted Critical
Publication of CN116156180B publication Critical patent/CN116156180B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供了一种帧内预测方法、图像编码方法、图像解码方法以及设备,该方法包括:从与第二图像块的目标参考像素所在排之间的距离大于或等于预设距离的第一图像块中,确定第一参考像素的第一预测像素值以及第一参考像素的原始像素值,基于第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第一参考像素的像素所在排上的第二参考像素进行修正,基于第一参考像素的像素所在排上的第一参考像素和第二参考像素,对第一图像块进行帧内预测,不但减少了第一图像块与用于进行帧内预测的像素之间的距离,并且修正后的第一参考像素所在排上的像素的像素值更接近于其对应的原始像素值,从而提高帧内预测结果的准确度。

Description

帧内预测方法、图像编码方法、图像解码方法以及设备
技术领域
本申请涉及视频编码技术领域,具体涉及一种帧内预测方法、图像编码方法、图像解码方法以及设备。
背景技术
目前帧内预测是视频编码中的一种主要的视频编码方式,该帧内预测是利用与当前图像块的相邻块中的像素作为当前图像块的参考像素,利用参考像素对当前图像块进行帧内预测。
当当前图像块较大时,当前图像块中的像素距离该参考像素所在排较远,从而会存在当前图像块中的像素与参考像素的差别较大的情况,在这种情况下,若仍使用相邻块中的像素对当前图像块进行帧内预测,会影响当前图像块的帧内预测的准确度。
发明内容
有鉴于此,本申请实施例提供了一种帧内预测方法、图像编码方法、图像解码方法以及设备,能够提高图像块的帧内预测的准确度。
第一方面,本发明实施例提供了一种帧内预测方法,该方法包括:
对于目标图像块中的第一图像块,在预设的第一帧内预测模式下,获取第一图像块中的至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,第一图像块与目标图像块中第二图像块的目标参考像素所在排之间的距离大于或等于预设距离,该第一图像块位于第二图像块远离所述目标参考像素的一侧,该目标图像块为对视频帧划分得到多个图像块中的任一图像块;
基于至少一个第一参考像素确定所述第一图像块中的第二参考像素,第一参考像素与所述第二参考像素在同一排;
在第一帧内预测模式下,获取第二参考像素的第二预测像素值;
基于至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值;
在第一帧内预测模式下,基于第三预测像素值和至少一个第一参考像素的原始像素值,对第一图像块中除至少一个第一参考像素所在排之外的像素进行帧内预测,得到第一图像块的第一帧内预测结果。
可选的,作为一实施例,基于至少一个第一参考像素确定所述第一图像块中的第二参考像素,包括:
获取至少一个第一参考像素所在的第一像素排,第一像素排与目标参考像素所在排平行;
从第一像素排中除至少一个第一参考像素之外的其他像素中,选取至少一个像素作为第二参考像素。
可选的,作为一实施例,当至少一个第一参考像素的数量为一个时,基于第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值,包括:
确定第一参考像素的原始像素值与第一预测像素值的第一差值;
基于第一差值,对第二预测像素值进行修正,得到第三预测像素值。
可选的,作为一实施例,当至少一个第一参考像素的数量大于或等于两个且小于至少一个第一参考像素所在排的像素数量时,基于至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值,包括:
基于至少两个第一参考像素中每一第一参考像素的第一预测像素值以及该第一参考像素的原始像素值,利用线性差值法,对所述第二预测像素值进行修正,得到所述第三预测像素值。
在一实施例中,至少两个第一参考像素为至少两个第一参考像素所在的第一像素排上的像素数量的均分点所对应的像素。
在一实施例中,预设距离是根据目标图像块的大小所确定的。
第二方面,本发明实施例提供了一种图像编码方法,该方法包括:
从候选帧内预测模式中确定出目标帧内预测模式,包括:
对于候选帧内预测模式中的任一第一帧内预测模式,在第一帧内预测模式下,对第二图像块进行帧内预测,得到第二图像块的第二帧内预测结果,并根据上述的帧内预测方法得到第一帧内预测结果;基于第一帧内预测结果、第二帧内预测结果以及目标图像块的原始像素值,得到在所述第一帧内预测模式下的目标图像块对应的第一残差信息;基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定出目标帧内预测模式;
基于目标帧内预测模式的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,对目标图像块进行编码,指示信息用于指示第一参考像素的原始像素值。
在一实施例中,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
第三方面,本发明实施例提供了一种图像解码方法,该方法包括:
从已经编码的视频流中解码出目标图像块的编码信息,编码信息包括:目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,目标帧内预测模式是基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定的;指示信息用于指示第一参考像素的原始像素值;
根据至少一个第一参考像素的指示信息,确定至少一个第一参考像素的原始像素值;将目标帧内预测模式作为第一帧内预测模式,并基于至少一个第一参考像素的原始像素值,通过上述的帧内预测方法获得在目标帧内预测模式下的第一图像块的第一帧内预测结果;
基于第一帧内预测结果、第二图像块在目标帧内预测模式下的第二帧内预测结果以及目标帧内预测模式对应的第一残差信息,得到目标图像块的重构像素值。
第四方面,本发明实施例提供了一种帧内预测装置,该装置包括:
第一获取模块,用于对于目标图像块中的第一图像块,在预设的第一帧内预测模式下,获取第一图像块中的至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,第一图像块与目标图像块中第二图像块的目标参考像素所在排之间的距离大于或等于预设距离,第一图像块位于第二图像块远离目标参考像素的一侧,目标图像块为对视频帧划分得到多个图像块中的任一图像块;
第一确定模块,用于基于至少一个第一参考像素确定第一图像块中的第二参考像素,第一参考像素与第二参考像素在同一排;
第二获取模块,用于在第一帧内预测模式下,获取第二参考像素的第二预测像素值;
修正模块,用于基于至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值;
第一预测模块,用于在第一帧内预测模式下,基于第三预测像素值和至少一个第一参考像素的原始像素值,对第一图像块中除至少一个第一参考像素所在排之外的像素进行帧内预测,得到第一图像块的第一帧内预测结果。
可选的,作为一实施例,第一确定模块,包括:
获取至少一个第一参考像素所在的第一像素排,第一像素排与目标参考像素所在排平行;
从第一像素排中除至少一个第一参考像素之外的其他像素中,选取至少一个像素作为第二参考像素。
可选的,作为一实施例,修正模块,用于:当至少一个第一参考像素的数量为一个时,确定第一参考像素的原始像素值与第一预测像素值的第一差值;
基于第一差值,对第二预测像素值进行修正,得到第三预测像素值。
可选的,作为一实施例,修正模块用于:
当至少一个第一参考像素的数量大于或等于两个且小于至少一个第一参考像素所在排的像素数量时,基于至少两个第一参考像素中每一第一参考像素的第一预测像素值以及该第一参考像素的原始像素值,利用线性差值法,对第二预测像素值进行修正,得到第三预测像素值。
在一实施例中,至少两个第一参考像素为至少两个第一参考像素所在的第一像素排上的像素数量的均分点所对应的像素。
在一实施例中,预设距离是根据目标图像块的大小所确定的。
第五方面,本发明实施例提供了一种图像编码装置,该装置包括:
第二预测模块,用于:对于候选帧内预测模式中的任一第一帧内预测模式,在第一帧内预测模式下,对第二图像块进行帧内预测,得到第二图像块的第二帧内预测结果,并根据上述的帧内预测方法得到第一帧内预测结果;基于第一帧内预测结果、第二帧内预测结果以及目标图像块的原始像素值,得到在第一帧内预测模式下的目标图像块对应的第一残差信息;基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定出目标帧内预测模式;
编码模块,用于基于目标帧内预测模式的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,对目标图像块进行编码,指示信息用于指示第一参考像素的原始像素值。
作为一实施例,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
第六方面,本发明实施例提供了一种图像解码装置,该装置包括:
第三获取模块,用于从已经编码的视频流中解码出目标图像块的编码信息,编码信息包括:目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,目标帧内预测模式是基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定的;指示信息用于指示第一参考像素的原始像素值;
第二确定模块,用于根据至少一个第一参考像素的指示信息,确定至少一个第一参考像素的原始像素值;
第三确定模块,将目标帧内预测模式作为第一帧内预测模式,并基于至少一个第一参考像素的原始像素值,通过上述的帧内预测方法获得在目标帧内预测模式下的第一图像块的第一帧内预测结果;
重构模块,用于基于第一帧内预测结果、第二图像块在目标帧内预测模式下的第二帧内预测结果以及目标帧内预测模式对应的第一残差信息,得到目标图像块的重构像素值。
作为一实施例,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
第七方面,本申请实施例又提供一种计算机可读存储介质,存储介质存储有计算机程序,所述计算机程序用于执行上述的帧内预测方法,或者用于执行上述的图像编码方法,或者用于执行上述的图像解码方法。
第八方面,本申请实施例又提供一种电子设备,包括:
处理器;用于存储处理器可执行指令的存储器;处理器,用于执行上述的帧内预测方法,或者用于执行上述的图像编码方法,或者用于执行上述的图像解码方法。
第九方面,本发明实施例又提供了一种计算机程序产品,其包括计算机程序指令,计算机程序指令在被处理器运行时使得处理器执行上述的帧内预测方法,或者执行上述的图像编码方法,或者执行上述的图像解码方法。
本申请的实施例提供的技术方案至少带来以下有益效果:
本申请实施例提供了一种帧内预测方法,从与第二图像块的目标参考像素所在排之间的距离大于或等于预设距离的第一图像块中,确定第一参考像素、第一参考像素的第一预测像素值以及第一参考像素的原始像素值,基于第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第一参考像素的像素所在排上的第二参考像素进行修正,基于第一参考像素的像素所在排上的第一参考像素和第二参考像素,对第一图像块进行帧内预测,与基于目标图像块的相邻图像块中的参考像素所在排的像素对目标图像块的编码方式相比,不但减少了目标图像块中的第一图像块与用于进行帧内预测的像素之间的距离,而且修正后的第一参考像素所在排上的像素的像素值更接近于其对应的原始像素值,基于修正后的第一参考像素所在排上的像素值对第一图像块进行帧内预测,使得第一图像块的预测结果更接近于该第一图像块的原始像素值,从而提高帧内预测结果的准确度。
附图说明
图1为一种帧内预测的示意图。
图2是本申请一示例性实施例提供的一种帧内预测的示意图。
图3是本申请一示例性实施例提供的一种帧内预测方法的流程示意图。
图4是本申请一示例性实施例提供的一种图像编码方法的流程示意图。
图5是本申请一示例性实施例提供的一种图像解码方法的流程示意图。
图6是本申请另一示例性实施例提供的一种帧内预测装置的示意图。
图7是本申请另一示例性实施例提供的一种图像编码装置的示意图。
图8是本申请另一示例性实施例提供的一种图像解码装置的示意图。
图9是本申请一示例性实施例提供的电子设备的示意图。
具体实施方式
下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本说明书保护的范围。
在视频编码时,视频中的每一视频帧图像会被划分为固定大小的图像块,以固定大小的图像块为单位,对该图像块进行帧内预测,该帧内预测是将当前帧中与未编码的图像块相邻的已编码的图像块中的像素作为未编码的图像块的参考像素,利用该参考像素来对未编码的图像块进行帧内预测。下面通过图1介绍帧内预测的具体过程。
如图1为一种帧内预测的示意图,目标图像块101为当前帧中的未编码的图像块,目标参考像素102为当前帧中与未编码的图像块相邻的已编码图像块中的像素,利用目标参考像素102对目标图像块101按照帧内预测模式对应的预测方向103进行帧内预测。
需要说明的是,在帧内预测时,不同的帧内预测模式使用的目标参考像素的位置也不同,目标参考像素可以为目标图像块的上方一行像素,也可以为目标图像块的左侧一列像素,例如:当采用的帧内预测模式为HEVC(High EfficiencyVideo Coding,高效率视频编码)时,该HEVC包含35个不同的帧内预测模式,分别为直流模式,平面模式和33个角度模式,该33个角度模式对应33个预测方向,该33个角度模式中模式10的预测方向是水平方向,模式26的预测方向是垂直方向,当预测方向是水平方向时,使用的是目标图像块左侧一列像素作为目标参考像素(图1中左方用灰度填充部分的像素),当预测方向是垂直方向时,使用的是目标图像块上方一行像素作为目标参考像素(图1中上方用灰度填充部分的像素)。
当当前图像块较大时,当前图像块中的像素距离该参考像素所在排(行或列)较远,当前图像块中的像素与该参考像素之间的相关性较差,从而会存在当前图像块中的像素与参考像素的差别较大的情况,在这种情况下,若仍使用上述帧内预测方法进行帧内预测,会使当前图像块的预测结果与该当前块的原始图像块相差较大,导致当前图像块的帧内预测的准确度较低,使得当前图像块基于该预测结果进行编码时,会造成当前图像块的残差较大,从而影响压缩效果。
针对上述问题,本申请提供了一种帧内预测方法,针对当前图像块中的距离参考像素所在排较远的像素,利用当前图像块中的像素,对距离参考像素所在排较远的像素进行帧内预测,以尽可能提高帧内预测的准确度。
在本申请中,目标参考像素为与目标图像块相邻的已编码的图像块中像素。作为一种实施例,目标参考像素为与目标图像块相邻的上方像素行或左侧像素列。以目标参考像素为目标图像块相邻的上方像素行中的像素为例,下面通过图2来介绍目标图像块的划分结果。
图2为本申请一示例性实施例提供的一种帧内预测的示意图,如图2所示,目标图像块204为对当前视频帧划分得到多个图像块中的任一图像块,目标图像块204包括:第一图像块201和第二图像块202,目标参考像素203作为第二图像202的参考像素,利用该目标参考像素203对第二图像块202进行帧内预测,第一图像块201中的像素与目标图像块204中第二图像块202的目标参考像素203所在排之间的距离大于或等于预设距离,第一图像块201位于第二图像块远离目标参考像素203的一侧。
需要说明的是,当目标参考像素为目标图像块相邻的左方像素行中的像素时,第一图像块和第二图像块的划分可参照上述目标参考像素为目标图像块相邻的上方像素行中的像素的划分方式进行划分,不再赘述。通过上述的划分方式,使得将目标图像块划分为第一图像块和第二图像块,第一图像块位于第二图像块远离目标参考像素的一侧。
在本申请中,第一图像块和第二图像块是根据与目标参考像素所在排之间的距离划分的,至于如何根据距离进行划分可以根据实际情况进行设定。作为一种实施例,当目标图像块中的图像块与第二图像块的目标参考像素所在排之间的距离大于或等于预设距离时,则该图像块作为第一图像块,否则,该图像块作为第二图像块。
在本申请中,预设距离可以根据实际情况进行设定,该预设距离是预先设定的一个固定距离,也可以是根据目标图像块的大小所确定的,当根据目标图像块的大小确定预设距离时,预设距离可以与目标图像块的边长成正比,作为一种实施例,预设距离可以为目标图像块的边长的一半,例如:当目标图像块为16×16的像素块,预设距离可以为8个像素块所对应的长度,从而将目标图像块划分为两个16×8的像素块,将靠近目标参考像素所在排的一个16×8的像素块作为第二图像块,将远离目标参考像素所在排的一个16×8的像素块作为第一图像块,从而使得第一图像块位于第二图像块远离目标参考像素的一侧。
需要说明的是,虽然目标图像块按照距离划分为第一图像块和第二图像块,只是为了通过第一图像块和第二图像块来区分对应帧内预测的方式,并没有将目标图像块切分为第一图像块和第二图像块,而在实际编码过程中,还是以第一图像块和第二图像块作为一个图像块进行整体编码。
上面介绍了目标图像块划分为第一图像块和第二图像块的方式,基于得到的第一图像块,下面来介绍对第一图像块进行帧内预测的过程。
在帧内预测时,会先确定帧内预测所采用的候选帧内预测模式,例如:采用HEVC的候选帧内预测模式。该HEVC的候选帧内预测模式有35种,分别为平面(Planar)模式、直流(DC)模式和33种角度模式,该35种候选帧内预测模式对应的目标参考像素的位置为目标图像块相邻的上方像素行或左侧像素列,在任一帧内预测模式下,目标参考像素的位置通过该帧内预测模式来确定,从而能够通过帧内预测模式确定的目标参考像素,通过该目标参考像素来对第二图像块进行帧内预测。
图3为本申请一示例性实施例提供的一种帧内预测方法的流程示意图。图3以第一帧内预测模式为候选帧内预测模式中的任一第一帧内预测模式为例,基于图2得到的第一图像块,在预设的第一帧内预测模式下,对该第一图像块进行帧内预测进行说明。该方法可以应用于终端,也可以应用于服务器,该帧内预测方法包括如下步骤:
步骤S301,对于目标图像块中的第一图像块,在预设的第一帧内预测模式下,获取第一图像块中的至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值。
在本申请中,第一参考像素的选取方式可以根据实际情况进行设定,作为一种实施例,可以从第一图像块中距离第二图像块的目标参考像素所在排最近的一排中选取第一参考像素,将该最近的一排的中间位置的像素或邻近正中间位置的像素作为第一参考像素,也可以从该最近的一排中选取至少两个像素作为第一参考像素。如图2所示,将该最近的一排的邻近正中间位置的像素作为第一参考像素(用黑色填充的像素)。
作为一种实施例,当第一参考像素的数量不小于两个时,至少两个第一参考像素为至少两个第一参考像素所在的第一像素排上的像素数量的均分点所对应的像素。例如:若第一参考像素的数量为两个,则像素数量的均分点为第一像素排的三等分点;若第一参考像素的数量为三个,则像素数量的均分点为第一像素排的四等分点;……若第一参考像素的数量为N个,则像素数量的等分点为第一像素排的N+1等分点。
需要说明的是,当存在第一参考像素的数量N不能将第一像素排上的像素均分为N+1的情况时,可以采用将第一像素排上的像素数量除以N+1得到的结果向下取整的方式来确定等分点。
通过上述方式可以确定第一参考像素,在对目标图像块进行编码时,需要将上述方式确定的第一参考像素的原始像素值需要添加到视频流中,以便根据该视频流中的第一参考像素的原始像素值对该目标图像块进行解码,因此,为了尽可能减少传输该视频流所需要的码流,在本申请的一种实施例中,第一参考像素的数量应小于第一参考像素所在排的像素数量。
在本申请的一种实施例中,在确定了第一参考像素后,需要确定第一参考像素的第一预测像素值,可以通过采用HEVC的帧内预测方法确定第一帧内预测模式下的目标参考像素,然后基于该目标参考像素,得到在第一帧内预测模式下的第一参考像素的第一预测像素值。第一参考像素的原始像素值为采集到的第一参考像素的实际像素值。
步骤S302,基于至少一个第一参考像素确定第一图像块中的第二参考像素。
其中,第一参考像素与第二参考像素在同一排。
在本申请中,确定的第二参考像素与第一参考像素在同一排即可,至于如何确定与第一参考像素同一排的第二参考像素,作为一种实施例,获取至少一个第一参考像素所在的第一像素排,第一像素排与目标参考像素所在排平行;从第一像素排中除第一参考像素之外的其他像素中,选取至少一个像素作为第二参考像素。
通过上述方式选取得到的第二参考像素,可以为第一像素排中除第一参考像素之外的其他像素中的部分像素,也可以为其他像素中的全部像素,第二参考像素的数量和位置可根据实际情况进行设定。
步骤S303,在第一帧内预测模式下,获取第二参考像素的第二预测像素值。
在本申请中,第二参考像素的第二预测像素值的确定方式可参见第一参考像素的第一预测像素值的确定方式,不再赘述。
步骤S304,基于至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值。
需要说明的是,通过第一参考像素对第二参考像素的第二预测像素值进行修正,用于使修正得到的第三预测像素值更接近第二参考像素的原始像素值,从而使得基于第三预测像素值对第一图像块进行帧内预测的结果更准确。
在本申请中,第一参考像素的数量可以为一个,也可以为两个或两个以上,第一参考像素的数量不同,第一参考像素对第二参考像素的第二预测像素值进行修正的方式不同。
作为一种实施例,当至少一个第一参考像素的数量为一个时,基于该第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值,包括:确定第一参考像素的原始像素值与第一预测像素值的第一差值;基于第一差值,对第二预测像素值进行修正,得到第三预测像素值。例如:将第二预测像素值与第一差值的和,作为该第二参考像素的第三预测像素值。
作为另一种实施例,当至少一个第一参考像素的数量大于或等于两个且小于至少一个第一参考像素所在排的像素数量时,基于至少一个参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值,包括:基于至少两个第一参考像素中每一第一参考像素的第一预测像素值以及该第一参考像素的原始像素值,利用线性差值法,对第二预测像素值进行修正,得到第三预测像素值。
线性差值法用于利用相邻的两点的值来确定连接该相邻两点的直线,从而通过该直线确定出该两点之外的其他点的对应值。在本申请,基于每相邻的两个第一参考像素的第一预测像素值,利用线性差值法,确定该两个第一参考像素对应的第一直线方程;基于每相邻的两个第一参考像素的原始像素值,利用线性差值法,确定该两个第一参考像素对应的第二直线方程;利用每相邻的两个第一参考像素的第一直线方程和第二直线方程,来确定每个第二参考像素在其对应的第一直线方程和第二直线方程上的像素值的目标差值,利用该目标差值对第二参考像素的第二预测像素值进行修正,得到第三预测像素值。在一种实施例中,将目标差值的绝对值与第二参考像素的第二预测像素值的和,作为该第二参考像素的第三预测像素值。
在本申请中,为了保证减少第一参考像素与原始像素值之间的残差,在进行编码时,将第一参考像素的原始像素值替换第一参考像素的第一预测值,利用第一参考像素的原始像素值进行编码,使得在像素重构时,得到的目标图像块的重构像素值更准确。
步骤S305,在第一帧内预测模式下,基于第三预测像素值和至少一个第一参考像素的原始像素值,对第一图像块中除至少一个第一参考像素所在排之外的像素进行帧内预测,得到第一图像块的第一帧内预测结果。
需要说明的是,在对第一图像块进行帧内预测时,需要先确定用于对第一图像块进行帧内预测的参考像素,在本申请的一种实施例中,第一图像块进行帧内预测的参考像素可以为第一参考像素所在排上的所有像素,基于第一参考像素所在排上的所有像素对第一图像块中的除至少一个第一参考像素所在排之外的像素进行帧内预测。
在对第一图像块中除至少一个第一参考像素所在排之外的像素进行帧内预测后,得到第一图像块中除至少一个第一参考像素所在排之外的像素对应的帧内预测结果,基于该帧内预测结果和至少一个第一参考像素所在排上的所有像素的像素值,得到第一图像块的第一帧内预测结果。
在本申请一种实施例中,至少一个第一参考像素所在排上的像素包括:至少一个第一参考像素和至少一个第二参考像素,在本申请的另一种实施例中,至少一个第一参考像素所在排上的像素还包括:除第一参考像素和第二参考像素之外的其他像素。其中,第一参考像素所在排中的第一参考像素的像素值为第一参考像素的原始像素值,该排中的第二参考像素的像素值为第三预测像素值,当第一参考像素所在排中还存在除第一参考像素和第二参考像素之外的其他像素时,该其他像素的像素值采用其他像素的第四预测像素值,该其他像素的第四预测像素值的确定方式可参考第一参考像素的第一预测像素值的确定方式,不再赘述。
本申请实施例提供了一种帧内预测方法,从与第二图像块的目标参考像素所在排之间的距离大于或等于预设距离的第一图像块中,确定第一参考像素,从而确定第一参考像素的第一预测像素值以及第一参考像素的原始像素值,基于第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第一参考像素的像素所在排上的第二参考像素进行修正,基于第一参考像素的像素所在排上的第一参考像素和第二参考像素,对第一图像块进行帧内预测,与基于已编码的图像块中的参考像素所在排的像素对目标图像块的编码方式相比,通过减少了第一图像块与用于进行帧内预测的像素之间的距离,使得当前图像块中的第一图像块中的像素与用于对该第一图像块进行帧内预测的像素的相关性较强,并且,修正后的第一参考像素所在排上的像素值更接近于其对应的原始像素值,从而提高帧内预测结果的准确度。
上面通过图3的帧内预测的过程,得到在预设的第一帧内预测模式下,对第一图像块进行帧内预测的第一帧内预测结果。
下面通过图4来介绍,以候选帧内预测模式中的任一帧内预测模式为第一帧内预测模式为例,通过步骤S401-S403从多种候选帧内预测模式中确定出目标帧内预测模式,然后基于该目标帧内预测模式进行编码的具体过程。如图4所示,本申请一示例性实施例提供了一种图像编码方法,包括如下步骤:
步骤S401,对于候选帧内预测模式中的任一第一帧内预测模式,获取目标图像块中的第一图像块在第一帧内预测模式下的第一帧内预测结果和第二图像块在第一帧内预测模式下的第二帧内预测结果。
在本申请中,第一帧内预测结果通过步骤S301-S305确定,第二帧内预测结果是第二图像块基于目标参考像素,利用第一帧内预测模式进行帧内预测得到的。至于基于目标参考像素,利用第一帧内预测模式进行帧内预测的具体步骤可参见得到第一参考像素的第一预测像素值的具体过程,不再赘述。
步骤S402,基于第一帧内预测结果、第二帧内预测结果以及目标图像块的原始像素值,得到在第一帧内预测模式下的目标图像块对应的第一残差信息。
需要说明的是,第一帧内预测结果用于表征该第一图像块中的像素的预测值,第二帧内预测结果用于表征该第二图像块中的像素的预测值,从而可以基于第一帧内预测结果和第二帧内预测结果得到目标图像块对应的预测图像块。
在本申请中,第一残差信息用于表征在第一帧内预测模式下对目标图像块进行帧内预测得到预测图像块后,预测图像块与目标图像块的原始图像块之间的差值。在本申请的一种实施例中,第一残差信息为预测图像块与目标图像块的原始图像块之间的差值。
步骤S403,基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定出目标帧内预测模式。
在本申请中,目标帧内预测模式为根据残差信息确定的一种预测模式。其中,目标帧内预测模式可以为最优的帧内预测模式,通过该目标帧内预测模式进行帧内预测,能够尽可能地减少目标图像块与预测图像块之间的差值,从而在编码时减少目标图像块中的像素的失真,提高视频压缩效果。
在一种实施例中,目标帧内预测模式可以为最小的第一残差信息的残差和对应的预测模式,也可以是目标帧内预测模式为多种候选帧内预测模式中的率失真代价最小的帧内预测模式。
在本申请的一种实施例中,对每一第一帧内预测模式下的第一残差信号进行处理,得到每一第一帧内预测模式对应的第一残差信号的SATD(Sum ofAbsoluteTransformed Difference,一种视频残差信号大小的衡量标准)值,利用每一第一帧内预测模式对应的第一残差信号的SATD,计算目标图像块在各个候选帧内预测模式下的率失真代价,从各个率失真代价中确定出数值最小的率失真代价,将该数值最小的率失真代价对应的候选帧内预测模式确定为目标帧内预测模式。
步骤S404,基于目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,对目标图像块进行编码。
其中,指示信息用于指示第一参考像素的原始像素值,至于指示信息的具体内容可以根据实际情况进行设定。作为一种实施例,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,该目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。例如:如图2所示,目标平均值可以为目标图像块相邻的上方像素行和左侧像素列上的像素的平均值(用灰度填充部分的像素)。
若存在与目标图像块相邻的已编码的像素排上的像素值未知,则可以将预设值作为该未知像素值的大小,从而再将与目标图像块相邻的所有像素的像素值的平均值作为上述目标平均值。
在本实施例中,若指示信息为第二差值时,在减少目标图像块的失真度的基础上,能够减少需要编码的比特数,提高视频压缩效果。
在本申请的一种实施例中,对第一残差信息进行变换和量化处理后得到量化后残差信息,将量化后残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息保存到码流中,以便解码端接收到该码流,对该码流进行解码,从码流中获取到量化后残差信息,对量化后残差信息进行反量化和反变化,从而得到第一残差信息,解码端也会从码流中解析得到目标帧内预测模式以及至少一个第一参考像素的指示信息,从而基于目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,得到目标图像块在目标帧内预测模式下的重构像素值。本申请中的重构像素值的具体得到过程可以参见图5。
本申请实施例提供了一种图像编码方法,从与第二图像块的目标参考像素所在排之间的距离大于或等于预设距离的第一图像块中,确定第一参考像素,从而确定第一参考像素的第一预测像素值以及第一参考像素的原始像素值,基于第一参考像素的第一预测像素值以及第一参考像素的原始像素值,对第一参考像素的像素所在排上的第二参考像素进行修正,基于第一参考像素的像素所在排上的第一参考像素和第二参考像素,对第一图像块进行帧内预测,与基于已编码的图像块中的参考像素所在排的像素对目标图像块的编码方式,通过减少了第一图像块与用于进行帧内预测的像素之间的距离,使得当前图像块中的第一图像块中的像素与用于对该第一图像块进行帧内预测的像素的相关性较强,而且修正后的第一参考像素所在排上的像素值更接近于其对应的原始像素值,因此,基于修正后的第一参考像素所在排上的像素值对第一图像块进行帧内预测,使得第一图像块的预测结果更接近于该第一图像块的原始像素值,从而提高帧内预测结果的准确度,并且,目标帧内预测模式为最优帧内预测模式,通过该目标帧内预测模型进行帧内预测,能够尽可能地减少目标图像块与预测图像块之间的差值,从而在编码时减少目标图像块中的像素的失真,提高视频压缩效果。
图5为本申请一示例性实施例提供的一种图像解码方法的流程示意图,该方法可以应用于终端,也可以应用于服务器。该图像解码方法包括如下步骤:
步骤S501,从已编码的视频流中解码出目标图像块的编码信息。
本申请中的编码信息用于对目标图像进行解码,来得到目标图像块在目标帧内预测模式下的重构像素值。在一实施例中,编码信息包括:目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,其中,目标帧内预测模式是基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定的;指示信息用于指示第一参考像素的原始像素值;第一残差信息为预测图像块与原始图像块之间的差值。
下面通过步骤S502-S504具体介绍根据第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,对目标图像块进行解码,得到目标图像块的重构像素值的过程。
步骤S502,根据至少一个第一参考像素的指示信息,确定至少一个第一参考像素的原始像素值。
在本申请中,指示信息用于指示第一参考像素的原始像素值,通过该指示信息来得到第一参考像素的原始像素值,该指示信息的具体内容可以参见步骤S404中的指示信息的内容,不再赘述。
在本申请中,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,该目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
当指示信息的内容不同时,确定至少一个第一参考像素的方式也不同,当指示信息包括在至少一个第一参考像素的原始像素值时,获取该第一参考像素的指示信息并将该指示信息作为该第一参考像素的原始像素值;当第一参考像素的指示信息包括该第一参考像素的第二差值时,确定至少一个第一参考像素中的每个第一参考像素的原始像素值的方式为:获取该目标图像块相邻且已编码的像素排(行或列)上的像素值的平均值,将该平均值与该第一参考像素的第二差值相加得到第一参考像素的原始像素值。
步骤S503,将目标帧内预测模式作为第一帧内预测模式,并基于至少一个第一参考像素的原始像素值,通过上述帧内预测方法获得在目标帧内预测模式下的第一图像块的第一帧内预测结果。
在目标帧内预测模式下,得到第一图像块的第一帧内预测结果的具体过程可参见步骤S301-S305。需要说明的是,步骤S301-S305是在第一帧内预测模式下,得到第一图像块的第一帧内预测结果的具体过程,当需要得到在目标帧内预测模式下的第一图像块的第一帧内预测结果的过程时,将目标帧内预测模式作为第一帧内预测模式,并基于步骤S502确定的至少一个参考像素的原始像素值,通过步骤S301-S305来得到目标帧内预测模式下的第一图像块的第一帧内预测结果。
步骤S504,基于第一帧内预测结果、第二图像块在目标帧内预测模式下的第二帧内预测结果以及目标帧内预测模式对应的第一残差信息,得到目标图像块的重构像素值。
在本申请中,重构像素值是通过对目标图像块解码得到的目标图像块的像素值,目标图像块基于重构像素值进行显示,作为一实施例,第一帧内预测结果和第二帧内预测结果组成该目标图像块的预测图像块,将预测图像块与目标图像块的第一残差信息相加得到目标图像块的重构像素值。
需要说明的是,第二图像块在目标帧内预测模式下的第二帧内预测结果的确定方式可参见得到第一参考像素的第一预测像素值的具体过程,不再赘述。
本申请实施例提供了一种图像解码方法,从已经编码的视频流中解码出目标图像块的编码信息,编码信息包括:目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,根据至少一个第一参考像素的指示信息,确定至少一个第一参考像素的原始像素值;基于至少一个第一参考像素的原始像素值,通过上述帧内预测方法获得在目标帧内预测模式下的第一图像块的第一帧内预测结果,从而基于该第一帧内预测结果进行解码,由于当前图像块中的第一图像块中的像素与用于对该第一图像块进行帧内预测的像素的相关性较强,而且修正后的第一参考像素所在排上的像素值更接近于其对应的原始像素值,因此,基于修正后的第一参考像素所在排上的像素值对第一图像块进行帧内预测,使得第一图像块的第一帧内预测结果更接近于该第一图像块的原始像素值,从而基于该第一图像块的第一帧内预测结果进行编码,能够在解码时使得到的重构像素值与目标图像块的原始像素值更接近,尽可能地减少目标图像块的图像的失真,从而提高解码得的目标图像块的像素的准确度。
如图6所示,本发明实施例提供了一种帧内预测装置,该装置包括:
第一获取模块601,用于对于视频帧中的目标图像块中的第一图像块,在预设的第一帧内预测模式下,获取第一图像块中的至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,第一图像块与目标图像块中第二图像块的目标参考像素所在排之间的距离大于或等于预设距离,第一图像块位于第二图像块远离目标参考像素的一侧,目标图像块为对视频帧划分得到多个图像块中的任一图像块;
第一确定模块602,用于基于至少一个第一参考像素确定第一图像块中的第二参考像素,第一参考像素与第二参考像素在同一排;
第二获取模块603,用于在第一帧内预测模式下,获取第二参考像素的第二预测像素值;
修正模块604,用于基于至少一个第一参考像素的第一预测像素值以及至少一个第一参考像素的原始像素值,对第二预测像素值进行修正,得到第三预测像素值;
第一预测模块605,用于在第一帧内预测模式下,基于第三预测像素值和至少一个第一参考像素的原始像素值,对第一图像块中除至少一个第一参考像素所在排之外的像素进行帧内预测,得到第一图像块的第一帧内预测结果。
可选的,作为一实施例,该第一确定模块602,包括:
获取至少一个第一参考像素所在的第一像素排,第一像素排与目标参考像素所在排平行;
从第一像素排中除第一参考像素之外的其他像素中,选取至少一个像素作为第二参考像素。
可选的,作为一实施例,当至少一个第一参考像素的数量为一个时,修正模块604用于:
确定第一参考像素的原始像素值与第一预测像素值的第一差值;
基于第一差值,对第二预测像素值进行修正,得到第三预测像素值。
可选的,作为一实施例,当至少一个第一参考像素的数量大于或等于两个且小于至少一个第一参考像素所在排的像素数量时,修正模块604用于:
基于至少两个第一参考像素中每一第一参考像素的第一预测像素值以及该第一参考像素的原始像素值,利用线性差值法,对第二预测像素值进行修正,得到第三预测像素值。
在一实施例中,至少两个第一参考像素为至少两个第一参考像素所在的第一像素排上的像素数量的均分点所对应的像素。
在一实施例中,预设距离是根据目标图像块的大小所确定的。
如图7,本发明实施例提供了一种图像编码装置,该装置包括:
第二预测模块701,用于:对于候选帧内预测模式中的任一第一帧内预测模式,在第一帧内预测模式下,对第二图像块进行帧内预测,得到第二图像块的第二帧内预测结果,并根据上述的帧内预测方法得到第一帧内预测结果;基于第一帧内预测结果、第二帧内预测结果以及目标图像块的原始像素值,得到在第一预测模式下的目标图像块对应的第一残差信息;基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定出目标帧内预测模式;
编码模块702,用于基于目标帧内预测模式的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,对目标图像块进行编码,指示信息用于指示第一参考像素的原始像素值。
在一实施例中,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
如图8,本发明实施例提供了一种图像解码装置,该装置包括:
第三获取模块801,用于从已经编码的视频流中解码出目标图像块的编码信息,编码信息包括:目标帧内预测模式对应的第一残差信息、目标帧内预测模式以及至少一个第一参考像素的指示信息,目标帧内预测模式是基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从候选帧内预测模式中确定的;指示信息用于指示第一参考像素的原始像素值;
第二确定模块802,用于根据至少一个第一参考像素的指示信息,确定至少一个第一参考像素的原始像素值;
第三确定模块803,将目标帧内预测模式作为第一帧内预测模式,并基于至少一个第一参考像素的原始像素值,通过上述的帧内预测方法获得在目标帧内预测模式下的第一图像块的第一帧内预测结果;
重构模块804,用于基于第一帧内预测结果、第二图像块在目标帧内预测模式下的第二帧内预测结果以及目标帧内预测模式对应的第一残差信息,得到目标图像块的重构像素值。
在一实施例中,指示信息包括至少一个第一参考像素的原始像素值或至少一个第一参考像素的原始像素值与目标平均值的第二差值,目标平均值为与目标图像块相邻且已编码的像素排上像素值的平均值。
下面,参考图9来描述根据本申请实施例的电子设备。图9所示为本申请一示例性实施例提供的电子设备的结构示意图。
如图9所示,电子设备900包括一个或多个处理器901和存储器902。
处理器901可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制电子设备900中的其他组件以执行期望的功能。
存储器902可以包括一个或多个计算机程序产品,计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器901可以运行所述程序指令,以实现上文所述的本申请的各个实施例的帧内预测方法、图像编码方法、图像解码方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如帧内预测的各种内容。
在一个示例中,电子设备900还可以包括:输入装置903和输出装置904,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。
该输入装置903可以包括例如键盘、鼠标等等。该输出装置904可以向外部输出各种信息。该输出装置904可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。
当然,为了简化,图9中仅示出了该电子设备900中与本申请有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,电子设备900还可以包括任何其他适当的组件。
除了上述方法和设备以外,本申请的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述描述的根据本申请各种实施例的帧内预测方法、图像编码方法或者图像解码方法中的步骤。
所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本申请实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、C++等,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外,本申请的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述描述的根据本申请各种实施例的帧内预测方法、图像编码方法或者图像解码方法中的步骤。
所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
以上结合具体实施例描述了本申请的基本原理,但是,需要指出的是,在本申请中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本申请的各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作用,而非限制,上述细节并不限制本申请为必须采用上述具体的细节来实现。
本申请中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
还需要指出的是,在本申请的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本申请的等效方案。
为了例示和描述的目的已经给出了以上描述。此外,此描述不意图将本申请的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例,但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。
以上所述仅为本说明书的较佳实施例而已,并不用以限制本说明书,凡在本说明书的精神和原则之内,所作的任何修改、等同替换等,均应包含在本说明书的保护范围之内。

Claims (10)

1.一种帧内预测方法,其特征在于,包括:
对于目标图像块中的第一图像块,在预设的第一帧内预测模式下,获取所述第一图像块中的至少一个第一参考像素的第一预测像素值以及所述至少一个第一参考像素的原始像素值,所述第一图像块与所述目标图像块中第二图像块的目标参考像素所在排之间的距离大于或等于预设距离,所述第一图像块位于所述第二图像块远离所述目标参考像素的一侧,所述目标图像块为对视频帧划分得到多个图像块中的任一图像块;
基于所述至少一个第一参考像素确定所述第一图像块中的第二参考像素,所述第一参考像素与所述第二参考像素在同一排;
在所述第一帧内预测模式下,获取所述第二参考像素的第二预测像素值;
基于所述至少一个第一参考像素的第一预测像素值以及所述至少一个第一参考像素的原始像素值,对所述第二预测像素值进行修正,得到第三预测像素值;
在所述第一帧内预测模式下,基于所述第三预测像素值和所述至少一个第一参考像素的原始像素值,对所述第一图像块中除所述至少一个第一参考像素所在排之外的像素进行帧内预测,得到所述第一图像块的第一帧内预测结果。
2.根据权利要求1所述的方法,其特征在于,所述基于所述至少一个第一参考像素确定所述第一图像块中的第二参考像素,包括:
获取所述至少一个第一参考像素所在的第一像素排,所述第一像素排与所述目标参考像素所在排平行;
从所述第一像素排中除所述至少一个第一参考像素之外的其他像素中,选取至少一个像素作为所述第二参考像素。
3.根据权利要求1所述的方法,其特征在于,当所述至少一个第一参考像素的数量为一个时,基于第一参考像素的第一预测像素值以及所述第一参考像素的原始像素值,对所述第二预测像素值进行修正,得到所述第三预测像素值,包括:
确定所述第一参考像素的原始像素值与所述第一预测像素值的第一差值;
基于所述第一差值,对所述第二预测像素值进行修正,得到所述第三预测像素值。
4.根据权利要求1所述的方法,其特征在于,当所述至少一个第一参考像素的数量大于或等于两个且小于所述至少一个第一参考像素所在排的像素数量时,所述基于所述至少一个第一参考像素的第一预测像素值以及所述至少一个第一参考像素的原始像素值,对所述第二预测像素值进行修正,得到第三预测像素值,包括:
基于至少两个第一参考像素中每一第一参考像素的第一预测像素值以及该第一参考像素的原始像素值,利用线性差值法,对所述第二预测像素值进行修正,得到所述第三预测像素值。
5.根据权利要求4所述的方法,其特征在于,所述至少两个第一参考像素为所述至少两个第一参考像素所在的第一像素排上的像素数量的均分点所对应的像素。
6.根据权利要求1所述的方法,其特征在于,所述预设距离是根据所述目标图像块的大小所确定的。
7.一种图像编码方法,其特征在于,包括:
从候选帧内预测模式中确定出目标帧内预测模式,包括:
对于所述候选帧内预测模式中的任一第一帧内预测模式,在所述第一帧内预测模式下,对第二图像块进行帧内预测,得到所述第二图像块的第二帧内预测结果,并根据权利要求1-6中任一项所述的帧内预测方法得到第一帧内预测结果;基于所述第一帧内预测结果、所述第二帧内预测结果以及所述目标图像块的原始像素值,得到在所述第一帧内预测模式下的所述目标图像块对应的第一残差信息;基于所述候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从所述候选帧内预测模式中确定出所述目标帧内预测模式;
基于所述目标帧内预测模式的第一残差信息、所述目标帧内预测模式以及所述至少一个第一参考像素的指示信息,对所述目标图像块进行编码,所述指示信息用于指示所述第一参考像素的原始像素值。
8.根据权利要求7所述的方法,其特征在于,所述指示信息包括所述至少一个第一参考像素的原始像素值或所述至少一个第一参考像素的原始像素值与目标平均值的第二差值,所述目标平均值为与所述目标图像块相邻且已编码的像素排上像素值的平均值。
9.一种图像解码方法,其特征在于,包括:
从已经编码的视频流中解码出目标图像块的编码信息,所述编码信息包括:目标帧内预测模式对应的第一残差信息、所述目标帧内预测模式以及至少一个第一参考像素的指示信息,所述目标帧内预测模式是基于候选帧内预测模式下的每一第一帧内预测模式对应的第一残差信息,从所述候选帧内预测模式中确定的;所述指示信息用于指示所述第一参考像素的原始像素值;
根据所述至少一个第一参考像素的指示信息,确定所述至少一个第一参考像素的原始像素值;
将所述目标帧内预测模式作为所述第一帧内预测模式,并基于所述至少一个第一参考像素的原始像素值,通过权利要求1-6中任一项所述的帧内预测方法获得在所述目标帧内预测模式下的第一图像块的第一帧内预测结果;
基于所述第一帧内预测结果、所述第二图像块在所述目标帧内预测模式下的第二帧内预测结果以及所述目标帧内预测模式对应的第一残差信息,得到所述目标图像块的重构像素值。
10.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
所述处理器,用于执行上述权利要求1至6任一项所述的帧内预测方法,或者用于执行上述权利要求7-8任一项所述的图像编码方法,或者用于执行上述权利要求9所述的图像解码方法。
CN202310417721.1A 2023-04-19 2023-04-19 帧内预测方法、图像编码方法、图像解码方法以及设备 Active CN116156180B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310417721.1A CN116156180B (zh) 2023-04-19 2023-04-19 帧内预测方法、图像编码方法、图像解码方法以及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310417721.1A CN116156180B (zh) 2023-04-19 2023-04-19 帧内预测方法、图像编码方法、图像解码方法以及设备

Publications (2)

Publication Number Publication Date
CN116156180A true CN116156180A (zh) 2023-05-23
CN116156180B CN116156180B (zh) 2023-06-23

Family

ID=86358545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310417721.1A Active CN116156180B (zh) 2023-04-19 2023-04-19 帧内预测方法、图像编码方法、图像解码方法以及设备

Country Status (1)

Country Link
CN (1) CN116156180B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017073360A1 (ja) * 2015-10-30 2017-05-04 ソニー株式会社 画像処理装置および方法
CN108781297A (zh) * 2016-03-18 2018-11-09 联发科技股份有限公司 视频编码的方法与装置
CN109587491A (zh) * 2017-09-28 2019-04-05 腾讯科技(深圳)有限公司 一种帧内预测方法、装置及存储介质
CN114071161A (zh) * 2020-07-29 2022-02-18 Oppo广东移动通信有限公司 图像编码方法、图像解码方法及相关装置
CN114079791A (zh) * 2020-08-21 2022-02-22 Oppo广东移动通信有限公司 编码方法、解码方法及相关装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017073360A1 (ja) * 2015-10-30 2017-05-04 ソニー株式会社 画像処理装置および方法
CN108781297A (zh) * 2016-03-18 2018-11-09 联发科技股份有限公司 视频编码的方法与装置
CN109587491A (zh) * 2017-09-28 2019-04-05 腾讯科技(深圳)有限公司 一种帧内预测方法、装置及存储介质
CN114071161A (zh) * 2020-07-29 2022-02-18 Oppo广东移动通信有限公司 图像编码方法、图像解码方法及相关装置
CN114079791A (zh) * 2020-08-21 2022-02-22 Oppo广东移动通信有限公司 编码方法、解码方法及相关装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CHEN,JIANLE 等: "Algorithm description for Versatile Video Coding and Test Model 4 (VTM 4) Document: JVET-M1002", OINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 13TH MEETING: MARRAKECH, MA, 9–18 JAN. 2019 *

Also Published As

Publication number Publication date
CN116156180B (zh) 2023-06-23

Similar Documents

Publication Publication Date Title
US11394994B2 (en) Image encoding method and apparatus, and image decoding method and apparatus
CN107809642B (zh) 用于视频图像编码和解码的方法、编码设备和解码设备
CN101682774B (zh) 视频编码方法和解码方法、视频编码装置和解码装置
US8472739B2 (en) Method for encoding a sequence of digitized images
EP2262270A1 (en) Method, device and system for interframe prediction encoding and decoding
US20140126644A1 (en) A Method a Decoder and Encoder for Processing a Motion Vector
CN102823249A (zh) 运动向量预测编码方法、运动向量预测解码方法、活动图像编码装置、活动图像解码装置及其程序
KR20120120280A (ko) 움직임 벡터 예측 부호화 방법, 움직임 벡터 예측 복호 방법, 동화상 부호화 장치, 동화상 복호 장치 및 그들의 프로그램
WO2024012263A1 (zh) 一种视频编码处理方法、装置、设备及存储介质
KR20200015499A (ko) 서브픽셀 움직임 벡터 정교화를 수반한 비디오 데이터를 인코딩 또는 디코딩하기 위한 방법 및 장치
US11451771B2 (en) Moving-image decoder using intra-prediction, moving-image decoding method using intra-prediction, moving-image encoder using intra-prediction, moving-image encoding method using intra-prediction, and computer readable recording medium
CN116156180B (zh) 帧内预测方法、图像编码方法、图像解码方法以及设备
JP2007110409A (ja) 画像処理装置及び画像処理方法をコンピュータに実行させるためのプログラム
US9407918B2 (en) Apparatus and method for coding image, and non-transitory computer readable medium thereof
US20110110424A1 (en) Video Encoder and Data Processing Method
US11991375B2 (en) Moving image encoding device, moving image compression device, moving image encoding method, and program
US11616950B2 (en) Bitstream decoder
KR19980065483A (ko) 정점기반 형상 부호화 및 인접 프레임간 정점 예측방법
CN113840144B (zh) 图像分量的预测方法、编码器、解码器及计算机存储介质
US20210306662A1 (en) Bitstream decoder
CN117119194A (zh) 图像处理方法、装置、电子设备和可读存储介质
EA043161B1 (ru) Декодер потоков битов
CN117768647A (zh) 图像处理方法、装置、设备及可读存储介质
CN116233448A (zh) 图像编码方法、装置、电子设备及存储介质
KR20200001099A (ko) 블록 예측을 기반한 영상 스트림 재압축 시스템 및 이를 이용한 영상 스트림 재압축 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant