CN113129218A - 一种处理图像的方法及终端 - Google Patents
一种处理图像的方法及终端 Download PDFInfo
- Publication number
- CN113129218A CN113129218A CN201911396720.3A CN201911396720A CN113129218A CN 113129218 A CN113129218 A CN 113129218A CN 201911396720 A CN201911396720 A CN 201911396720A CN 113129218 A CN113129218 A CN 113129218A
- Authority
- CN
- China
- Prior art keywords
- pixel point
- image
- processed
- total
- variation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 99
- 238000000034 method Methods 0.000 title claims abstract description 33
- 230000003287 optical effect Effects 0.000 claims abstract description 76
- 239000006185 dispersion Substances 0.000 claims abstract description 38
- 238000010606 normalization Methods 0.000 claims description 27
- 238000004364 calculation method Methods 0.000 claims description 19
- 238000010586 diagram Methods 0.000 claims description 17
- 238000010130 dispersion processing Methods 0.000 claims description 9
- 238000003780 insertion Methods 0.000 claims description 8
- 230000037431 insertion Effects 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 4
- 238000009499 grossing Methods 0.000 abstract description 12
- 230000000694 effects Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本申请适用于计算机技术领域,提供了一种处理图像的方法及终端,包括:获取待处理图像;计算所述待处理图像中各个像素点的离散总变差;在每个像素点对应的预设区域中,获取每个像素点对应的目标像素点;基于目标像素点的数量以及目标像素点的总变差,计算对应的像素点的光流值;基于各个所述像素点的光流值,生成所述待处理图像的光流图。上述方式,终端以图像总变差为基础对待处理图像进行平滑处理,得到对应的光流图,使用经过平滑处理后的图像在终端显示,提高了图像显示质量以及清晰度,且不容易出现显示错误。
Description
技术领域
本申请属于计算机技术领域,尤其涉及一种处理图像的方法及终端。
背景技术
采用运动补偿的方式对连续的图像进行补偿,可以提高图像显示的清晰度;在进行运动补偿时,最重要的就是平滑光流。然而,现有技术中,通过使用高斯平滑后的数据项和非局部中值滤波相结合实现平滑光流。这种平滑光流的方法,容易导致显示屏显示的图像错误,或者导致显示屏显示的图像质量差、出现重影。
发明内容
有鉴于此,本申请实施例提供了一种处理图像的方法及终端,以解决传统的平滑光流的方法,容易导致显示屏显示的图像错误,或者导致显示屏显示的图像质量差、出现重影的问题。
本申请实施例的第一方面提供了一种处理图像的方法,包括:
获取待处理图像;
计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
基于各个所述像素点的光流值,生成所述待处理图像的光流图。
进一步地,为了准确地计算每个待处理图像对应的离散总变差,提升待处理图像的质量,计算所述待处理图像中各个像素点对应的离散总变差具体包括:
获取所述待处理图像中各个像素点的亮度,并基于所述亮度计算每个所述像素点的梯度值;
基于每个所述梯度值计算每个所述像素点的总变差;
对所述总变差进行归一化处理;
对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
进一步地,为了准确地计算每个待处理图像对应的离散总变差,提升待处理图像的质量,对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差具体包括:
计算归一化处理后的总变差与预设数值之间的乘积;
对所述乘积进行近似取整处理,得到各个像素点的离散总变差。
进一步地,对待处理图像中每个像素点进行平滑处理时选择合适的处理区域,可以使待处理图像平滑处理的效果更好,本申请还包括:基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
进一步地,为了提升待处理图像的质量、清晰度,使处理后的待处理图像效果更好,基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值具体包括:
统计每个所述像素点对应的目标像素点的数量;
计算每个所述像素点对应的目标像素点的总变差之和;
用所述目标像素点的总变差之和除以所述目标像素点的数量,对计算结果进行近似取整处理,得到每个所述像素点的光流值。
进一步地,为了提升待处理图像在终端显示界面的显示清晰度,避免出现重影,本申请还包括利用所述光流图对所述待处理图像进行插帧处理,得到待播放图像。
本发明实施例的第二方面提供了一种处理图像的终端,该终端包括:
第一获取单元,用于获取待处理图像;
第一计算单元,用于计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
第二获取单元,用于在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
第二计算单元,用于基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
生成单元,用于基于各个所述像素点的光流值,生成所述待处理图像的光流图。
进一步地,所述第一计算单元包括:
亮度获取单元,用于获取所述待处理图像中各个像素点的亮度,并基于所述亮度计算每个所述像素点的梯度值;
总变差计算单元,用于基于每个所述梯度值计算每个所述像素点的总变差;
总变差计算单元,用于对所述总变差进行归一化处理;
离散处理单元,用于对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
进一步地,所述离散处理单元具体用于:
计算归一化处理后的总变差与预设数值之间的乘积;
对所述乘积进行近似取整处理,得到各个像素点的离散总变差。
进一步地,所述第二计算单元具体用于:
统计每个所述像素点对应的目标像素点的数量;
计算每个所述像素点对应的目标像素点的总变差之和;
用所述目标像素点的总变差之和除以所述目标像素点的数量,对计算结果进行近似取整处理,得到每个所述像素点的光流值。
进一步地,终端还包括:
设置单元,用于基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
进一步地,终端还包括:
插帧处理单元,用于利用所述光流图对所述待处理图像进行插帧处理,得到待播放图像。
本发明实施例的第三方面提供了另一种终端,包括处理器、输入设备、输出设备和存储器,所述处理器、输入设备、输出设备和存储器相互连接,其中,所述存储器用于存储支持终端执行上述方法的计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行以下步骤:
获取待处理图像;
计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
基于各个所述像素点的光流值,生成所述待处理图像的光流图。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取待处理图像;
计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
基于各个所述像素点的光流值,生成所述待处理图像的光流图。
本申请实施例提供的一种处理图像的方法及终端具有以下有益效果:
本申请实施例,通过获取待处理图像;计算所述待处理图像中各个像素点的离散总变差;在每个像素点对应的预设区域中,获取每个像素点对应的目标像素点;基于目标像素点的数量以及目标像素点的总变差,计算对应的像素点的光流值;基于各个所述像素点的光流值,生成所述待处理图像的光流图。本发明实施例,以图像总变差为基础对待处理图像进行平滑处理,得到对应的光流图。使用经过平滑处理后的图像在终端显示,提高了图像显示质量以及清晰度,且不容易出现显示错误,提升了运动补偿的效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的一种处理图像的方法的实现流程图;
图2是本申请另一实施例提供的一种处理图像的方法的实现流程图;
图3是本申请一实施例提供的一种处理图像的终端的示意图;
图4是本申请另一实施例提供的一种处理图像的终端的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
请参见图1,图1是本发明实施例提供的一种处理图像的方法的示意流程图。本实施例中处理图像方法的执行主体为终端,终端包括但不限于智能手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)等移动终端,还可以包括台式电脑等终端。如图1所示的处理图像的方法可包括:
S101:获取待处理图像。
终端在检测到处理图像指令时,获取待处理图像。处理图像指令可以由用户触发,如用户点击终端中的处理图像选项。终端可以在所有待处理的图像中,获取待处理图像;也可以在待处理的视频中获取待处理图像;还可以是用户上传的待处理图像。例如,获取某个待处理的视频序列中t0时刻对应的第一图像作为待处理图像,或者获取该视频序列中t1时刻对应的第二图像作为待处理图像;此处仅为示例性说明,对此不做限定。
S102:计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差。
终端计算所述待处理图像中各个像素点的离散总变差;离散总变差为待处理图像中各个像素点的总变差经过离散处理后得到的总变差。具体地,终端获取待处理图像中各个像素点对应的亮度,并基于该亮度计算这些像素点的梯度值;根据这些梯度值计算每个像素点对应的总变差,对该总变差进行归一化处理,对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
进一步地,为了准确地计算各个像素点对应的离散总变差,提升待处理图像的质量,S102可以包括:S1021-S1024,具体如下:
S1021:获取所述待处理图像中各个像素点的亮度,并基于所述亮度计算每个所述像素点的梯度值。
终端获取待处理图像中的各个像素点对应的亮度,并根据这些亮度计算待处理图像中这些像素点各自对应的梯度值。具体地,终端获取待处理图像中的像素点对应的亮度,如获取到的亮度为I(x,y);根据亮度I(x,y)计算对应的梯度值。其中,(x,y)是待处理图像中的像素点的水平方向坐标和垂直方向坐标;梯度值可以包括水平梯度值以及垂直梯度值。具体的计算方法如下:
水平梯度值:Gx(x,y)=I(x+1,y)-I(x,y)
垂直梯度值:Gy(x,y)=I(x,y+1)-I(x,y)
其中,Gx(x,y)表示该像素点对应的水平梯度值,Gy(x,y)表示该像素点对应的垂直梯度值。
S1022:基于每个所述梯度值计算每个所述像素点的总变差。
终端根据计算得到的每个梯度值计算每个像素点对应的总变差。具体地,终端根据计算得到的每个像素点对应的水平梯度值以及垂直梯度值,计算各个像素点对应的总变差。可通过下述公式计算总变差:
例如,将计算得到的水平梯度值:Gx(x,y)以及计算得到的垂直梯度值:Gy(x,y)代入计算总变差的公式中,可求出总变差。
S1023:对所述总变差进行归一化处理。
终端对该总变差进行归一化处理,即终端获取计算得到的每个像素点对应的总变差,将这些总变差归一化至区间[0,1]中;可理解为将数据映射到0-1的范围之内。具体地,终端将待处理图像中所计算的所有像素点的总变差相加,得到总变差之和;用该待处理图像中每个像素点的总变差除以该总变差之和,得到的数值便为对该总变差进行归一化处理后的数值,该数值在区间[0,1]中。
S1024:对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
终端对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。具体地,经过归一化处理后的总变差都在区间[0,1]中,对[0,1]中的数值进行离散处理;例如,对[0,1]中的每个数值乘以预设数值,再对得到的每个乘积进行近似取整处理,得到[0,1]中每个数值对应的离散总变差,即得到待处理图像中每个像素点各自对应的离散总变差。其中,预设数值为正整数,具体数值大小由用户自行设置,对此不做限定。
进一步地,为了准确地计算各个像素点对应的离散总变差,提升待处理图像的质量,S1024可以包括:S10241-S10242,具体如下:
S10241:计算归一化处理后的总变差与预设数值之间的乘积。
终端计算进行归一化处理后的总变差与预设数值之间的乘积。其中,预设数值为正整数,具体数值大小由用户自行设置,对此不做限定。例如,终端对进行归一化处理后的每个总变差乘以正整数N,得到对应的乘积。
S10242:对所述乘积进行近似取整处理,得到各个像素点的离散总变差。
终端对每个乘积进行近似取整处理,得到每个乘积对应的离散总变差,即得到每个待处理图像中每个像素点对应的离散总变差。具体地,终端为每个乘积选取与该乘积最接近的正整数,并将该正整数记为该乘积的离散总变差,即每个待处理图像中每个像素点对应的离散总变差。
S103:在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同。
终端获取每个像素点对应的预设区域,在该预设区域中获取与该像素点对应的目标像素点。其中,目标像素点的离散总变差与该像素点的离散总变差相同,即目标像素点为该预设区域中离散总变差等于该像素点离散总变差的像素点。例如,在一种应用场景中,以(2m+1)表示预设区域的长度,(2n+1)表示预设区域的宽度,组成一个以某个像素点为中心点,面积为(2m+1)(2n+1)的区域。m、n均为大于0的正整数,m、n的值可由用户根据实际情况进行设置,例如m=2,n=1,对此不做限定。
进一步地,对待处理图像中每个像素点进行平滑处理时选择合适的处理区域,可以使待处理图像平滑处理的效果更好,在S103之前,还可包括:基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
终端基于待处理图像中每个像素点所处的位置,设置每个像素点对应的预设区域。具体地,终端获取每个待处理图像中每个像素点对应的像素值,通过该像素值可以确定该像素点在该待处理图像中的位置,为该位置的该像素点设置对应的预设区域。例如,以待处理图像中某个像素点所处的位置为中心,以(2m+1)(2n+1)为大小,为该像素点设置预设区域。其中,预设区域的大小可由用户自行设置、调整,对此不做限定。
S104:基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值。
终端基于每个像素点对应的目标像素点的数量以及目标像素点的总变差,计算每个像素点对应的光流值。具体地,终端统计每个像素点对应的目标像素点的数量;计算每个像素点对应的目标像素点的总变差之和;计算总变差之和与目标像素点的数量之间的商;对计算得到的商进行近似取整处理,得到每个像素点对应的光流值。
进一步地,为了提升待处理图像的质量、清晰度,使处理后的待处理图像效果更好,S104可以包括:S1041-S1043,具体如下:
S1041:统计每个所述像素点对应的目标像素点的数量。
终端获取每个像素点对应的预设区域,统计该预设区域中与该像素点对应的目标像素点的数量。例如,在一种应用场景中,待处理图像中某个像素点对应的预设区域为以该像素点所处的位置为中心,以(2m+1)(2n+1)为大小组成的区域。在该(2m+1)(2n+1)大小的区域中,获取离散总变差与该像素点的离散总变差相同的目标像素点,统计并记录这些目标像素点的数量。
S1042:计算每个所述像素点对应的目标像素点的总变差之和。
终端计算每个像素点对应的所有目标像素点的总变差之和。即终端将待处理图像中每个像素点对应所有的目标像素点的总变差相加,将相加得到的数值记为总变差之和。
S1043:用所述目标像素点的总变差之和除以所述目标像素点的数量,对计算结果进行近似取整处理,得到每个所述像素点的光流值。
终端用目标像素点的总变差之和除以目标像素点的数量,对计算结果进行近似取整处理,得到每个像素点的光流值。具体地,用每个待处理图像中每个像素点对应的所有目标像素点的总变差之和,除以与每个像素点对应的所有目标像素点的数量,得到商。终端对计算得到的商进行近似取整处理,得到每个像素点对应的光流值。即终端为该商选取一个与该商最接近的整数,并将该整数记为该像素点对应的光流值。通过同样的方式,可得到每个待处理图像中每个像素点对应的光流值。
例如,某个待处理图像中离散总变差为k的像素点对应的目标像素点的总变差之和可以为:其中,m、n、-m、-n组成该像素点对应的预设区域,k表示离散总变差。该像素点对应的目标像素点的数量可以表示为:该像素点对应的光流值为:F(xk,yk)=[TA(xk,yk)÷TB(xk,yk)],其中,[]该符号表示近似取整运算。
进一步地,当在预设区域中没有查找到与该像素点对应的目标像素点时,可直接将该像素点对应的离散总变差作为该像素点对应的光流值。
S105:基于各个所述像素点的光流值,生成所述待处理图像的光流图。
终端获取每个像素点的光流值以及每个像素点生成待处理图像的光流图。可以理解为计算得到的每个像素点的光流值为每个像素点经过处理后对应的像素值,基于这些经过处理的像素点可以生成待处理图像的光流图。具体地,光流图是由终端先获取待处理图像,计算待处理图像中各个像素点的离散总变差;在每个像素点对应的预设区域中,获取每个像素点对应的目标像素点;基于目标像素点的数量以及目标像素点的总变差,计算对应的像素点的光流值;再基于各个所述像素点的光流值,生成所述待处理图像的光流图。可以理解为光流图是终端以图像总变差为基础对待处理图像进行平滑处理后得到的光流图。得到的光流图中平滑了图像中小尺寸纹理的光流,从而有效避免了小尺寸纹理匹配错误造成的运动补偿错误。为了便于理解,在一个应用场景中,终端获取某个待处理的视频序列中t0时刻对应的第一图像,以及获取该视频序列中t1时刻对应的第二图像;对第一图像以及第二图像同时做以下处理,以第一图像为例进行说明。获取第一图像中各个像素点对应的亮度,如获取到的亮度为I(x,y);根据亮度I(x,y)计算对应的梯度值;梯度值可以包括水平梯度值:Gx(x,y)以及垂直梯度值Gy(x,y);终端根据计算得到的每个像素点对应的水平梯度值以及垂直梯度值,计算每个像素点对应的总变差,例如总变差:终端对该总变差进行归一化处理,并对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差;例如,终端计算进行归一化处理后的总变差与预设数值之间的乘积,对每个乘积进行近似取整处理,得到每个乘积对应的离散总变差,即得到每个待处理图像中每个像素点对应的离散总变差。终端获取每个像素点对应的预设区域,在该预设区域中获取与该像素点对应的目标像素点;例如,在一种应用场景中,待处理图像中某个像素点对应的预设区域为以该像素点所处的位置为中心,以(2m+1)(2n+1)为大小组成的区域。在该(2m+1)(2n+1)大小的区域中,查找离散总变差与该像素点的离散总变差相同的目标像素点;统计每个预设区域中目标像素点的数量;计算每个像素点对应的所有目标像素点的总变差的总和;计算总变差的总和与数量之间的商;对计算得到的商进行近似取整处理,得到每个像素点对应的光流值。例如,第一图像中离散总变差为k的像素点对应的目标像素点的总变差之和可以为:其中,m、n、-m、-n组成该像素点对应的预设区域,k表示离散总变差。该像素点对应的目标像素点的数量可以表示为:该像素点对应的光流值为:F(xk,yk)=[TA(xk,yk)÷TB(xk,yk)],其中,[]该符号表示近似取整运算。基于所有像素点以及各个像素点对应的光流值,生成第一图像对应的光流图。
本申请实施例,通过获取待处理图像;计算所述待处理图像中各个像素点的离散总变差;在每个像素点对应的预设区域中,获取每个像素点对应的目标像素点;基于目标像素点的数量以及目标像素点的总变差,计算对应的像素点的光流值;基于各个所述像素点的光流值,生成所述待处理图像的光流图。本发明实施例,以图像总变差为基础对待处理图像进行平滑处理,得到对应的光流图。使用经过平滑处理后的图像在终端显示,提高了图像显示质量以及清晰度,且不容易出现显示错误,提升了运动补偿的效果。
请参见图2,图2是本发明另一实施例提供的一种处理图像的方法的示意流程图。本实施例中处理图像的方法的执行主体为终端,终端包括但不限于智能手机、平板电脑、个人数字助理等移动终端,还可以包括台式电脑等终端。
本实施例与上一实施例的区别为S206,本实施例中S201-S205与上一实施例中的S101-S105完全相同,具体请参阅上一实施例中S101-S105的相关描述,此处不赘述。
进一步地,为了提升待处理图像在终端显示界面的显示清晰度,避免出现重影,在S205之后还可包括S206,具体如下:
S206:利用所述光流图对所述待处理图像进行插帧处理,得到待播放图像。
终端利用光流图对待处理图像进行插帧处理,即将该光流图插入与其对应的待处理图像之后或者之前,得到待播放图像。例如待处理图像有两个,分别为第一待处理图像、第二待处理图像,对应的两个光流图分别为第一光流图、第二光流图。将第一光流图插入第一待处理图像之前,或者将第一光流图插入第一待处理图像之后;将第二光流图插入第二待处理图像之前,或者将第二光流图插入第二待处理图像之后,得到待播放图像。例如,待播放图像为第一待处理图像、第一插帧待处理图像、第二待处理图像、第二插帧待处理图像;此处仅为示例性说明,对此不做限定。待播放图像可在终端进行播放,也可以由终端将该待播放图像发送至其他播放设备,由其他播放设备进行播放。
本申请实施例,通过获取待处理图像;计算所述待处理图像中各个像素点的离散总变差;在每个像素点对应的预设区域中,获取每个像素点对应的目标像素点;基于目标像素点的数量以及目标像素点的总变差,计算对应的像素点的光流值;基于各个所述像素点的光流值,生成所述待处理图像的光流图。本发明实施例,以图像总变差为基础对待处理图像进行平滑处理,得到对应的光流图。使用经过平滑处理后的图像在终端显示,提高了图像显示质量以及清晰度,且不容易出现显示错误,提升了运动补偿的效果。
请参见图3,图3是本申请一实施例提供的一种处理图像的终端的示意图。该终端包括的各单元用于执行图1、图2对应的实施例中的各步骤。具体请参阅图1、图2各自对应的实施例中的相关描述。为了便于说明,仅示出了与本实施例相关的部分。参见图3,包括:
第一获取单元310,用于获取待处理图像;
第一计算单元320,用于计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
第二获取单元330,用于在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
第二计算单元340,用于基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
生成单元350,用于基于各个所述像素点的光流值,生成所述待处理图像的光流图。
进一步地,所述第一计算单元320包括:
亮度获取单元,用于获取所述待处理图像中各个像素点的亮度,并基于所述亮度计算每个所述像素点的梯度值;
总变差计算单元,用于基于每个所述梯度值计算每个所述像素点的总变差;
总变差计算单元,用于对所述总变差进行归一化处理;
离散处理单元,用于对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
进一步地,所述离散处理单元具体用于:
计算归一化处理后的总变差与预设数值之间的乘积;
对所述乘积进行近似取整处理,得到各个像素点的离散总变差。
进一步地,所述第二计算单元340具体用于:
统计每个所述像素点对应的目标像素点的数量;
计算每个所述像素点对应的目标像素点的总变差之和;
用所述目标像素点的总变差之和除以所述目标像素点的数量,对计算结果进行近似取整处理,得到每个所述像素点的光流值。
进一步地,终端还包括:
设置单元,用于基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
进一步地,终端还包括:
插帧处理单元,用于利用所述光流图对所述待处理图像进行插帧处理,得到待播放图像。
请参见图4,图4是本申请另一实施例提供的一处理图像的终端的示意图。如图4所示,该实施例的终端4包括:处理器40、存储器41以及存储在所述存储器41中并可在所述处理器40上运行的计算机可读指令42。所述处理器40执行所述计算机可读指令42时实现上述各个处理图像的方法实施例中的步骤,例如图1所示的S101至S105。或者,所述处理器40执行所述计算机可读指令42时实现上述各实施例中各单元的功能,例如图3所示单元310至350功能。
示例性的,所述计算机可读指令42可以被分割成一个或多个单元,所述一个或者多个单元被存储在所述存储器41中,并由所述处理器40执行,以完成本申请。所述一个或多个单元可以是能够完成特定功能的一系列计算机可读指令段,该指令段用于描述所述计算机可读指令42在所述终端4中的执行过程。例如,所述计算机可读指令42可以被第一获取单元、第一计算单元、第二获取单元、第二计算单元以及生成单元,各单元具体功能如上所述。
所述终端可包括,但不仅限于,处理器40、存储器41。本领域技术人员可以理解,图4仅仅是终端4的示例,并不构成对终端4的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端还可以包括输入输出终端、网络接入终端、总线等。
所称处理器40可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是所述终端4的内部存储单元,例如终端4的硬盘或内存。所述存储器41也可以是所述终端4的外部存储终端,例如所述终端4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器41还可以既包括所述终端4的内部存储单元也包括外部存储终端。所述存储器41用于存储所述计算机可读指令以及所述终端所需的其他程序和数据。所述存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种处理图像的方法,其特征在于,包括:
获取待处理图像;
计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
基于各个所述像素点的光流值,生成所述待处理图像的光流图。
2.如权利要求1所述的方法,其特征在于,所述计算所述待处理图像中各个像素点的离散总变差包括:
获取所述待处理图像中各个像素点的亮度,并基于所述亮度计算每个所述像素点的梯度值;
基于每个所述梯度值计算每个所述像素点的总变差;
对所述总变差进行归一化处理;
对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差。
3.如权利要求2所述的方法,其特征在于,所述对归一化处理后的总变差进行离散处理,得到各个像素点的离散总变差包括:
计算归一化处理后的总变差与预设数值之间的乘积;
对所述乘积进行近似取整处理,得到各个像素点的离散总变差。
4.如权利要求1所述的方法,其特征在于,所述基于所述目标像素点的数量以及所述目标像素点的总变差,计算每个所述像素点的光流值包括:
统计每个所述像素点对应的目标像素点的数量;
计算每个所述像素点对应的目标像素点的总变差之和;
用所述目标像素点的总变差之和除以所述目标像素点的数量,对计算结果进行近似取整处理,得到每个所述像素点的光流值。
5.如权利要求1所述的方法,其特征在于,所述在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点之前,还包括:
基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
6.如权利要求1至5任一项所述的方法,其特征在于,所述基于各个所述像素点的光流值,生成所述待处理图像的光流图之后,还包括:
利用所述光流图对所述待处理图像进行插帧处理,得到待播放图像。
7.一种处理图像的终端,其特征在于,包括:
第一获取单元,用于获取待处理图像;
第一计算单元,用于计算所述待处理图像中各个像素点的离散总变差;所述离散总变差为对所述待处理图像中各个像素点的总变差进行离散处理后得到的总变差;
第二获取单元,用于在每个所述像素点对应的预设区域中,获取每个所述像素点对应的目标像素点;所述目标像素点的离散总变差与对应的所述像素点的离散总变差相同;
第二计算单元,用于基于所述目标像素点的数量以及所述目标像素点的总变差,计算对应的所述像素点的光流值;
生成单元,用于基于各个所述像素点的光流值,生成所述待处理图像的光流图。
8.如权利要求7所述的终端,其特征在于,所述终端还包括:
设置单元,用于基于所述待处理图像中每个所述像素点所处的位置,设置每个所述像素点对应的预设区域。
9.一种处理图像的终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令,其特征在于,所述处理器执行所述计算机可读指令时实现如权利要求1至6任一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911396720.3A CN113129218A (zh) | 2019-12-30 | 2019-12-30 | 一种处理图像的方法及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911396720.3A CN113129218A (zh) | 2019-12-30 | 2019-12-30 | 一种处理图像的方法及终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113129218A true CN113129218A (zh) | 2021-07-16 |
Family
ID=76767963
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911396720.3A Pending CN113129218A (zh) | 2019-12-30 | 2019-12-30 | 一种处理图像的方法及终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113129218A (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120321139A1 (en) * | 2011-06-14 | 2012-12-20 | Qualcomm Incorporated | Content-adaptive systems, methods and apparatus for determining optical flow |
GB201400875D0 (en) * | 2008-10-15 | 2014-03-05 | Spinella Ip Holdings Inc | Digital processing method and system for determination of optical flow |
WO2017128646A1 (zh) * | 2016-01-29 | 2017-08-03 | 中兴通讯股份有限公司 | 一种图像处理的方法及装置 |
-
2019
- 2019-12-30 CN CN201911396720.3A patent/CN113129218A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB201400875D0 (en) * | 2008-10-15 | 2014-03-05 | Spinella Ip Holdings Inc | Digital processing method and system for determination of optical flow |
US20120321139A1 (en) * | 2011-06-14 | 2012-12-20 | Qualcomm Incorporated | Content-adaptive systems, methods and apparatus for determining optical flow |
WO2017128646A1 (zh) * | 2016-01-29 | 2017-08-03 | 中兴通讯股份有限公司 | 一种图像处理的方法及装置 |
Non-Patent Citations (1)
Title |
---|
MATTHEW BRAND: "Incremental Singular Value Decomposition of Uncertain Data with Missing Values", 《ECCV 2002》, pages 707 - 720 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109064428B (zh) | 一种图像去噪处理方法、终端设备及计算机可读存储介质 | |
CN110084765B (zh) | 一种图像处理方法、图像处理装置及终端设备 | |
US11348207B2 (en) | Image processing method and apparatus, computer-readable medium, and electronic device | |
Becker et al. | An algorithm for splitting parallel sums of linearly composed monotone operators, with applications to signal recovery | |
US9286653B2 (en) | System and method for increasing the bit depth of images | |
CN106780336B (zh) | 一种图像缩小方法及装置 | |
CN105389776B (zh) | 图像缩放技术 | |
WO2020147698A1 (zh) | 画面优化方法、装置、终端及对应的存储介质 | |
CN108447040A (zh) | 直方图均衡化方法、装置及终端设备 | |
JP2012085292A (ja) | 画像のホワイトバランス処理方法及び装置 | |
CN111223061A (zh) | 图像修正方法、修正装置、终端设备及可读存储介质 | |
US9548043B2 (en) | Pixel value interpolation method and system | |
US10438323B2 (en) | Image brightness correction and noise suppression method, device, and recording medium for storing image processing program | |
JP2021043874A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
EP3675503B1 (en) | Display apparatus and image processing method thereof | |
CN113129218A (zh) | 一种处理图像的方法及终端 | |
CN109308690B (zh) | 一种图像亮度均衡方法及终端 | |
US9594955B2 (en) | Modified wallis filter for improving the local contrast of GIS related images | |
US11132776B2 (en) | Image processing device, image processing method, and image processing program for maintaining sharpness of image | |
CN111383299A (zh) | 图像的处理方法、装置及计算机可读存储介质 | |
Hashimoto et al. | An fpga-based fully pipelined bilateral grid for real-time image denoising | |
US10559106B2 (en) | Video smoothing method and apparatus | |
CN107451959B (zh) | 图片处理方法及系统 | |
CN109388311A (zh) | 一种图像显示方法、装置及设备 | |
CN105844688B (zh) | 虚拟现实渲染方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Country or region after: China Address after: 516006 TCL science and technology building, No. 17, Huifeng Third Road, Zhongkai high tech Zone, Huizhou City, Guangdong Province Applicant after: TCL Technology Group Co.,Ltd. Address before: 516006 Guangdong province Huizhou Zhongkai hi tech Development Zone No. nineteen District Applicant before: TCL Corp. Country or region before: China |
|
CB02 | Change of applicant information |