CN103839079A - 一种基于分类学习的相似图像彩色化算法 - Google Patents

一种基于分类学习的相似图像彩色化算法 Download PDF

Info

Publication number
CN103839079A
CN103839079A CN201410100019.3A CN201410100019A CN103839079A CN 103839079 A CN103839079 A CN 103839079A CN 201410100019 A CN201410100019 A CN 201410100019A CN 103839079 A CN103839079 A CN 103839079A
Authority
CN
China
Prior art keywords
image
super pixel
pixel
super
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410100019.3A
Other languages
English (en)
Other versions
CN103839079B (zh
Inventor
蒋云良
罗育宏
刘勇
范婧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Normal University CJNU
Original Assignee
Zhejiang Normal University CJNU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Normal University CJNU filed Critical Zhejiang Normal University CJNU
Priority to CN201410100019.3A priority Critical patent/CN103839079B/zh
Publication of CN103839079A publication Critical patent/CN103839079A/zh
Application granted granted Critical
Publication of CN103839079B publication Critical patent/CN103839079B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Abstract

本发明公开了一种基于分类学习的相似图像彩色化算法,包括以下步骤:收集样本图像,然后提取图像灰度共生矩阵属性利用AP算法将这些样本图像分为5个类,分别计算目标图像和参照图像的超像素,然后从参照图像迁移色彩到目标图像,之后根据图像空间的连续性对超像素颜色进行校正,最后利用算法进行颜色传播,完成彩色化。本发明考虑到图像全局属性对图像的影响,提取图像灰度共生矩阵属性对超像素匹配函数的参数进行分类学习,这样对于具有不同构图的图像就有不同的参数函数作超像素的匹配,提高了我们方法对图像的通用性,而且在匹配之后,可以在超像素级别上进行区域生长算法分割,在区域内进行颜色修正。

Description

一种基于分类学习的相似图像彩色化算法
【技术领域】
本发明涉及相似图像彩色化算法的技术领域,特别是基于分类学习的相似图像彩色化算法的技术领域。
【背景技术】
图像彩色化的目标是为灰度图像增添颜色使得彩色化后的图像有感知意义和视觉吸引力。但彩色化问题的关键是存在很多潜在的颜色可以分配给目标灰度图像的像素点(比如,叶子可以是黄色,绿色和棕色)。因此,彩色化问题是一个没有绝对正确的解决方案的问题。
为减少潜在颜色分配的影响,人工交互在彩色化过程中扮演重要角色。交互式彩色化方法要求用户为目标图像人工标注颜色,然后通过优化方法将人工标注的颜色值平滑扩散到整张图像从而完成图像彩色化。这些技术的一个缺点是过多的人工花费,此外,着色效果依赖与用户标注的颜色值,而且对用户有较高的专业要求。另一种是自动彩色化方法,这些方法需要一个与待彩色化的灰度图像相似的彩色的参照图像作为输入,然后通过匹配将颜色从参照图像迁移到目标图像。在多数情况下,虽然这些方法可以减少人工标注的时间花费,但是这些方法往往需要仔细调整大量参数以获得满意的结果。
【发明内容】
本发明的目的就是解决现有技术中的问题,提出一种基于分类学习的相似图像彩色化算法,能够利用图像全局特性对超像素特征匹配时的特征权重进行分类学习,更加具有通用性,而且在匹配之后,利用图像空间的连续性对超像素的颜色进行校正使本方法展现出更强水平的空间结合性。
为实现上述目的,本发明提出了一种基于分类学习的相似图像彩色化算法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重
Figure BDA0000478386790000021
使得误差函数Eγγ达到最小,我们定义每一组图像的匹配误差为:
Figure BDA0000478386790000022
其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合:
Figure BDA0000478386790000023
其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Eγγγ求最小值,最后到最优权重
Figure BDA0000478386790000024
d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
Dist(ti,γj)=w1E1(ti,γj)+w2E2(ti,γj)+w3E3(ti,γj)+w4E4(ti,γj),
其中,ti和γj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素γj是使得Dist最小的参照图像超像素,即:
B=argminj Dist(ti,γj),γj∈R
其中R表示参考图像所有超像素,然后将γj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈N(r)s≠rwrsu(s)2,其中u(r),u(s)表示是像素的颜色值,N(r)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足: w rs ∝ e - ( Y ( s ) - Y ( r ) ) 2 / 2 σ r 2 Σ s ∈ N ( r ) s ≠ r w rs = 1 , Y(s),Y(r)是像素亮度,
Figure BDA0000478386790000032
是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
作为优选,所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标计算其均值和方差作为最终的灰度共生矩阵的计算结果。
作为优选,所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
作为优选,所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中s表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:argminLu∈Vv∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
作为优选,所述对公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||进行求解时,对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v,的强度和标准差的欧氏距离,分别为
Figure BDA0000478386790000041
Figure BDA0000478386790000043
并且
Figure BDA0000478386790000044
则是超像素v属于N*(u)遍历u的所有邻接超像素,其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作(e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1,C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
本发明的有益效果:本发明考虑到图像全局属性对图像的影响,提取图像灰度共生矩阵属性对超像素匹配函数的参数进行分类学习,这样对于具有不同构图的图像就有不同的参数函数作超像素的匹配,提高了我们方法对图像的通用性,而且在匹配之后,可以在超像素级别上进行区域生长算法分割,在区域内进行颜色修正,利用图像空间的连续性对超像素的颜色进行校正使本方法展现出更强水平的空间结合性。
【具体实施方式】
本发明一种基于分类学习的相似图像彩色化算法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重
Figure BDA0000478386790000061
使得误差函数Eγγ达到最小,我们定义每一组图像的匹配误差为:
Figure BDA0000478386790000062
其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合:
Figure BDA0000478386790000063
其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Eγγ求最小值,最后到最优权重
Figure BDA0000478386790000064
d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
Dist(ti,γj)=w1E1(ti,γj)+w2E2(ti,γj)+w3E3(ti,γj)+w4E4(ti,γj),
其中,ti和γj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素γj是使得Dist最小的参照图像超像素,即:
B=argminj Dist(ti,γj),γj∈R
其中R表示参考图像所有超像素,然后将γj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈V(r)s≠rwrsu(s))2,其中u(r),u(s)表示是像素的颜色值,N(r,)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足: w rs ∝ e - ( Y ( s ) - Y ( r ) ) 2 / 2 σ r 2 Σ s ∈ N ( r ) s ≠ r w rs = 1 , Y(s),Y(r)是像素亮度,
Figure BDA0000478386790000072
是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标计算其均值和方差作为最终的灰度共生矩阵的计算结果,所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中s表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:argminLu∈Vv∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
所述对公式argminLu∈Vv∈N(u)ωuv,||Cu-Cv||进行求解时对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v的强度和标准差的欧氏距离,分别为
Figure BDA0000478386790000081
Figure BDA0000478386790000082
Figure BDA0000478386790000083
并且
Figure BDA0000478386790000084
则是超像素v属于N*(u)遍历u的所有邻接超像素,其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作(e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1,C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L*,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
我们收集了1000组样本图像,并且提取样本图像的灰度共生矩阵属性分成5类进行参数学习,学习结果如表1。
Figure BDA0000478386790000091
表1参数学习结果
为了评估我们的方法,我们的最终结果和Welsh,Irony,Gupta的方法作比较,本发明的效果要比这些方法都好,通过实验我们可以看出,对彩色化过程中的参数是进行学习得到的,而不是人工设定,是可以改进彩色化效果的。但是这都是在参照图像与目标图像相似性较好的情况下实现的。
上述实施例是对本发明的说明,不是对本发明的限定,任何对本发明简单变换后的方案均属于本发明的保护范围。

Claims (5)

1.一种基于分类学习的相似图像彩色化算法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重使得误差函数Eγγ达到最小,我们定义每一组图像的匹配误差为:
Figure FDA0000478386780000011
其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合:
Figure FDA0000478386780000012
其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Eγγ求最小值,最后到最优权重
Figure FDA0000478386780000013
d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
Dist(ti,γj)=w1E1(ti,γj)+w2E2(ti,γj)+w3E3(ti,γj)+w4E4(ti,γj),
其中,ti和γj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素γj是使得Dist最小的参照图像超像素,即:
B=argminj Dist(t:γj),γj∈R
其中R表示参考图像所有超像素,然后将γj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈N(r)s≠rwrsu(S)2,其中u(r),u(s)表示是像素的颜色值,N(r)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足: w rs ∝ e - ( Y ( s ) - Y ( r ) ) 2 / 2 σ r 2 Σ s ∈ N ( r ) s ≠ r w rs = 1 , Y(s),Y(r)是像素亮度,
Figure FDA0000478386780000022
是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
2.如权利要求1所述的一种基于分类学习的相似图像彩色化算法,其特征在于:所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标计算其均值和万差作为最终的灰度共生矩阵的计算结果。
3.如权利要求1所述的一种基于分类学习的相似图像彩色化算法,其特征在于:所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
4.如权利要求1所述的一种基于分类学习的相似图像彩色化算法,其特征在于:所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中s表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:argminLu∈Vv∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
5.如权利要求4所述的一种基于分类学习的相似图像彩色化算法,其特征在于:所述对公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||进行求解时,对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v的强度和标准差的欧氏距离,分别为
Figure FDA0000478386780000031
Figure FDA0000478386780000032
Figure FDA0000478386780000033
并且
Figure FDA0000478386780000034
则是超像素v属于N*(u)遍历u的所有邻接超像素,其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作(e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式argminLu∈Vv∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L*,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
CN201410100019.3A 2014-03-18 2014-03-18 一种基于分类学习的相似图像彩色化处理方法 Active CN103839079B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410100019.3A CN103839079B (zh) 2014-03-18 2014-03-18 一种基于分类学习的相似图像彩色化处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410100019.3A CN103839079B (zh) 2014-03-18 2014-03-18 一种基于分类学习的相似图像彩色化处理方法

Publications (2)

Publication Number Publication Date
CN103839079A true CN103839079A (zh) 2014-06-04
CN103839079B CN103839079B (zh) 2017-03-01

Family

ID=50802557

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410100019.3A Active CN103839079B (zh) 2014-03-18 2014-03-18 一种基于分类学习的相似图像彩色化处理方法

Country Status (1)

Country Link
CN (1) CN103839079B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104376529A (zh) * 2014-11-25 2015-02-25 深圳北航新兴产业技术研究院 一种基于glcm的灰度图像彩色化系统和方法
CN105118076A (zh) * 2015-07-30 2015-12-02 上海应用技术学院 基于过度分割和局部与全局一致性的图像彩色化方法
CN106780583A (zh) * 2016-11-28 2017-05-31 国家海洋局第二海洋研究所 基于矩阵元素插值的任意灰度共生矩阵的计算方法及应用
CN107705268A (zh) * 2017-10-20 2018-02-16 天津工业大学 一种基于改进的Retinex与Welsh近红外图像增强与彩色化算法
CN107730568A (zh) * 2017-10-31 2018-02-23 山东师范大学 基于权重学习的着色方法和装置
CN107909561A (zh) * 2017-11-15 2018-04-13 浙江大学宁波理工学院 一种基于权值优化的最优传输图像颜色迁移方法
CN108492328A (zh) * 2018-03-23 2018-09-04 云南大学 视频帧间目标匹配方法、装置和实现装置
CN109711432A (zh) * 2018-11-29 2019-05-03 昆明理工大学 一种基于颜色方差的图像相似判定方法
CN109949379A (zh) * 2019-03-27 2019-06-28 森大(深圳)技术有限公司 喷墨打印机的追色方法、装置、设备及存储介质
WO2019153741A1 (zh) * 2018-02-07 2019-08-15 京东方科技集团股份有限公司 图像着色方法和装置
US10748036B2 (en) 2017-11-21 2020-08-18 Nvidia Corporation Training a neural network to predict superpixels using segmentation-aware affinity loss
CN112950461A (zh) * 2021-03-27 2021-06-11 刘文平 全局与超像素分割相融合的色彩迁移方法
CN113242417A (zh) * 2021-05-10 2021-08-10 中国人民解放军海军航空大学 标准差加权的色偏数字图像校正方法
CN116757915A (zh) * 2023-08-16 2023-09-15 北京蓝耘科技股份有限公司 一种集群gpu资源调度方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102360506A (zh) * 2011-09-30 2012-02-22 北京航空航天大学 一种基于局部线性保持的场景颜色风格一致化处理方法
CN102360490A (zh) * 2011-09-30 2012-02-22 北京航空航天大学 基于颜色转换和编辑传播的图像季节特征增强方法
US8401250B2 (en) * 2010-02-19 2013-03-19 MindTree Limited Detecting objects of interest in still images
CN103295250A (zh) * 2013-05-31 2013-09-11 东莞中山大学研究院 一种基于l1混合范数求解的图像彩色化的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8401250B2 (en) * 2010-02-19 2013-03-19 MindTree Limited Detecting objects of interest in still images
CN102360506A (zh) * 2011-09-30 2012-02-22 北京航空航天大学 一种基于局部线性保持的场景颜色风格一致化处理方法
CN102360490A (zh) * 2011-09-30 2012-02-22 北京航空航天大学 基于颜色转换和编辑传播的图像季节特征增强方法
CN103295250A (zh) * 2013-05-31 2013-09-11 东莞中山大学研究院 一种基于l1混合范数求解的图像彩色化的方法

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104376529A (zh) * 2014-11-25 2015-02-25 深圳北航新兴产业技术研究院 一种基于glcm的灰度图像彩色化系统和方法
CN104376529B (zh) * 2014-11-25 2017-08-11 深圳北航天汇创业孵化器有限公司 一种基于glcm的灰度图像彩色化系统和方法
CN105118076B (zh) * 2015-07-30 2017-12-01 上海应用技术学院 基于过度分割和局部与全局一致性的图像彩色化方法
CN105118076A (zh) * 2015-07-30 2015-12-02 上海应用技术学院 基于过度分割和局部与全局一致性的图像彩色化方法
CN106780583B (zh) * 2016-11-28 2019-11-19 自然资源部第二海洋研究所 基于矩阵元素插值的任意灰度共生矩阵的计算方法及应用
CN106780583A (zh) * 2016-11-28 2017-05-31 国家海洋局第二海洋研究所 基于矩阵元素插值的任意灰度共生矩阵的计算方法及应用
CN107705268A (zh) * 2017-10-20 2018-02-16 天津工业大学 一种基于改进的Retinex与Welsh近红外图像增强与彩色化算法
CN107730568A (zh) * 2017-10-31 2018-02-23 山东师范大学 基于权重学习的着色方法和装置
CN107730568B (zh) * 2017-10-31 2021-01-08 山东师范大学 基于权重学习的着色方法和装置
CN107909561A (zh) * 2017-11-15 2018-04-13 浙江大学宁波理工学院 一种基于权值优化的最优传输图像颜色迁移方法
CN107909561B (zh) * 2017-11-15 2021-07-27 浙江大学宁波理工学院 一种基于权值优化的最优传输图像颜色迁移方法
US11256961B2 (en) 2017-11-21 2022-02-22 Nvidia Corporation Training a neural network to predict superpixels using segmentation-aware affinity loss
US10748036B2 (en) 2017-11-21 2020-08-18 Nvidia Corporation Training a neural network to predict superpixels using segmentation-aware affinity loss
WO2019153741A1 (zh) * 2018-02-07 2019-08-15 京东方科技集团股份有限公司 图像着色方法和装置
US11334973B2 (en) 2018-02-07 2022-05-17 Boe Technology Group Co., Ltd. Image colorizing method and device
CN108492328A (zh) * 2018-03-23 2018-09-04 云南大学 视频帧间目标匹配方法、装置和实现装置
CN109711432A (zh) * 2018-11-29 2019-05-03 昆明理工大学 一种基于颜色方差的图像相似判定方法
CN109949379A (zh) * 2019-03-27 2019-06-28 森大(深圳)技术有限公司 喷墨打印机的追色方法、装置、设备及存储介质
CN112950461A (zh) * 2021-03-27 2021-06-11 刘文平 全局与超像素分割相融合的色彩迁移方法
CN113242417A (zh) * 2021-05-10 2021-08-10 中国人民解放军海军航空大学 标准差加权的色偏数字图像校正方法
CN116757915A (zh) * 2023-08-16 2023-09-15 北京蓝耘科技股份有限公司 一种集群gpu资源调度方法
CN116757915B (zh) * 2023-08-16 2023-11-28 北京蓝耘科技股份有限公司 一种集群gpu资源调度方法

Also Published As

Publication number Publication date
CN103839079B (zh) 2017-03-01

Similar Documents

Publication Publication Date Title
CN103839079A (zh) 一种基于分类学习的相似图像彩色化算法
CN105631880B (zh) 车道线分割方法和装置
CN107392925B (zh) 基于超像素编码和卷积神经网络的遥感影像地物分类方法
CN103093444B (zh) 基于自相似性和结构信息约束的图像超分辨重建方法
CN104966085A (zh) 一种基于多显著特征融合的遥感图像感兴趣区域检测方法
CN106803257B (zh) 一种作物病害叶片图像中病斑的分割方法
CN104077612B (zh) 一种基于多特征稀疏表示技术的害虫图像识别方法
CN103854261A (zh) 色偏图像的校正方法
CN108596892A (zh) 一种基于改进LeNet-5模型的焊缝缺陷识别方法
CN103426158B (zh) 两时相遥感图像变化检测的方法
CN111127360B (zh) 一种基于自动编码器的灰度图像迁移学习方法
CN110807485B (zh) 基于高分遥感影像二分类语义分割图融合成多分类语义图的方法
CN105303546B (zh) 基于模糊连接度的近邻传播聚类图像分割方法
CN105160686A (zh) 一种基于改进sift算子的低空多视角遥感影像匹配方法
CN111882555B (zh) 基于深度学习的网衣检测方法、装置、设备及存储介质
CN109685772B (zh) 一种基于配准失真表示的无参照立体图像质量评估方法
CN112819096A (zh) 一种基于复合卷积神经网络的化石图像分类模型的构建方法
CN104217440A (zh) 一种从遥感图像中提取建成区的方法
CN106355607A (zh) 一种宽基线彩色图像模板匹配方法
CN105426847A (zh) 低质量自然光虹膜图像非线性增强方法
CN111047618A (zh) 基于多尺度的无参考屏幕内容图像质量评估方法
CN104143203A (zh) 一种图像编辑传播方法
CN107358635B (zh) 一种基于模糊相似性的彩色形态学图像处理方法
CN106447603A (zh) 一种彩色图像灰度化方法
CN104361573B (zh) 融合颜色信息和全局信息的sift特征匹配算法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant