CN103839079B - 一种基于分类学习的相似图像彩色化处理方法 - Google Patents
一种基于分类学习的相似图像彩色化处理方法 Download PDFInfo
- Publication number
- CN103839079B CN103839079B CN201410100019.3A CN201410100019A CN103839079B CN 103839079 B CN103839079 B CN 103839079B CN 201410100019 A CN201410100019 A CN 201410100019A CN 103839079 B CN103839079 B CN 103839079B
- Authority
- CN
- China
- Prior art keywords
- pixel
- super
- image
- color
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 18
- 239000000284 extract Substances 0.000 claims abstract description 14
- 230000006870 function Effects 0.000 claims abstract description 10
- 239000011159 matrix material Substances 0.000 claims abstract description 6
- 230000005012 migration Effects 0.000 claims abstract description 4
- 238000013508 migration Methods 0.000 claims abstract description 4
- 238000005457 optimization Methods 0.000 claims description 13
- 239000003086 colorant Substances 0.000 claims description 10
- 238000012545 processing Methods 0.000 claims description 9
- 238000012546 transfer Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 claims description 5
- 206010008190 Cerebrovascular accident Diseases 0.000 claims description 3
- 208000006011 Stroke Diseases 0.000 claims description 3
- 238000000205 computational method Methods 0.000 claims description 3
- 230000037452 priming Effects 0.000 claims description 3
- 238000004040 coloring Methods 0.000 claims description 2
- 238000000605 extraction Methods 0.000 claims description 2
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 238000009792 diffusion process Methods 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 230000008878 coupling Effects 0.000 abstract description 3
- 238000010168 coupling process Methods 0.000 abstract description 3
- 238000005859 coupling reaction Methods 0.000 abstract description 3
- 230000006978 adaptation Effects 0.000 abstract description 2
- 239000000203 mixture Substances 0.000 abstract description 2
- 230000011218 segmentation Effects 0.000 abstract description 2
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Landscapes
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于分类学习的相似图像彩色化处理方法,包括以下步骤:收集样本图像,然后提取图像灰度共生矩阵属性利用AP算法将这些样本图像分为5个类,分别计算目标图像和参照图像的超像素,然后从参照图像迁移色彩到目标图像,之后根据图像空间的连续性对超像素颜色进行校正,最后利用算法进行颜色传播,完成彩色化。本发明考虑到图像全局属性对图像的影响,提取图像灰度共生矩阵属性对超像素匹配函数的参数进行分类学习,这样对于具有不同构图的图像就有不同的参数函数作超像素的匹配,提高了我们方法对图像的通用性,而且在匹配之后,可以在超像素级别上进行区域生长算法分割,在区域内进行颜色修正。
Description
【技术领域】
本发明涉及相似图像彩色化算法的技术领域,特别是基于分类学习的相似图像彩色化处理方法的技术领域。
【背景技术】
图像彩色化的目标是为灰度图像增添颜色使得彩色化后的图像有感知意义和视觉吸引力。但彩色化问题的关键是存在很多潜在的颜色可以分配给目标灰度图像的像素点(比如,叶子可以是黄色,绿色和棕色)。因此,彩色化问题是一个没有绝对正确的解决方案的问题。
为减少潜在颜色分配的影响,人工交互在彩色化过程中扮演重要角色。交互式彩色化方法要求用户为目标图像人工标注颜色,然后通过优化方法将人工标注的颜色值平滑扩散到整张图像从而完成图像彩色化。这些技术的一个缺点是过多的人工花费,此外,着色效果依赖与用户标注的颜色值,而且对用户有较高的专业要求。另一种是自动彩色化方法,这些方法需要一个与待彩色化的灰度图像相似的彩色的参照图像作为输入,然后通过匹配将颜色从参照图像迁移到目标图像。在多数情况下,虽然这些方法可以减少人工标注的时间花费,但是这些方法往往需要仔细调整大量参数以获得满意的结果。
【发明内容】
本发明的目的就是解决现有技术中的问题,提出一种基于分类学习的相似图像彩色化处理方法,能够利用图像全局特性对超像素特征匹配时的特征权重进行分类学习,更加具有通用性,而且在匹配之后,利用图像空间的连续性对超像素的颜色进行校正使本方法展现出更强水平的空间结合性。
为实现上述目的,本发明提出了一种基于分类学习的相似图像彩色化处理方法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重使得误差函数Err达到最小,我们定义每一组图像的匹配误差为:
其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合:其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Err求最小值,最后到最优权重
d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
Dist(ti,rj)=w1E1(ti,rj)+w2E2(ti,rj)+w3E3(ti,rj)+w4E4(ti,rj),
其中,ti和rj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素rj是使得Dist最小的参照图像超像素,即:
B=argminjDist(ti,rj),rj∈R,
其中R表示参考图像所有超像素,然后将rj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈N(r)s≠ rwrsu(s))2,其中u(r),u(s)表示是像素的颜色值,N(r)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足:Y(s),Y(r)是像素亮度,是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
作为优选,所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标计算其均值和方差作为最终的灰度共生矩阵的计算结果。
作为优选,所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
作为优选,所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中s表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
作为优选,所述对公式arg minLΣu∈VΣv∈N(u)ωuv||Cu-Cv||进行求解时,对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v的强度和标准差的欧氏距离,分别为和若并且则是超像素v属于N*(u)遍历u的所有邻接超像素,其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作(e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1,C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L*,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
本发明的有益效果:本发明考虑到图像全局属性对图像的影响,提取图像灰度共生矩阵属性对超像素匹配函数的参数进行分类学习,这样对于具有不同构图的图像就有不同的参数函数作超像素的匹配,提高了我们方法对图像的通用性,而且在匹配之后,可以在超像素级别上进行区域生长算法分割,在区域内进行颜色修正,利用图像空间的连续性对超像素的颜色进行校正使本方法展现出更强水平的空间结合性。
【具体实施方式】
本发明一种基于分类学习的相似图像彩色化处理方法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重使得误差函数Err达到最小,我们定义每一组图像的匹配误差为:
其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合:其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Err求最小值,最后到最优权重
d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
Dist(ti,rj)=w1E1(ti,rj)+w2E2(ti,rj)+w3E3(ti,rj)+w4E4(ti,rj),
其中,ti和rj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素rj是使得Dist最小的参照图像超像素,即:
B=argminjDist(ti,rj),rj∈R,
其中R表示参考图像所有超像素,然后将rj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈N(r)s≠ rwrsu(s))2,其中u(r),u(s)表示是像素的颜色值,N(r)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足:Y(s),Y(r)是像素亮度,是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标计算其均值和方差作为最终的灰度共生矩阵的计算结果,所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中s表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:argminL∑u∈V∑v∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
所述对公式argminL∑u∈V∑v∈N(u)ωuv||Cu-Cv||进行求解时,对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v的强度和标准差的欧氏距离,分别为和若并且则是超像素v属于N*(u)遍历u的所有邻接超像素,其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作(e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1,C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式arg minLΣu∈VΣv∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L*,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
我们收集了1000组样本图像,并且提取样本图像的灰度共生矩阵属性分成5类进行参数学习,学习结果如表1。
表1参数学习结果
为了评估我们的方法,我们的最终结果和Welsh,Irony,Gupta的方法作比较,本发明的效果要比这些方法都好,通过实验我们可以看出,对彩色化过程中的参数是进行学习得到的,而不是人工设定,是可以改进彩色化效果的。但是这都是在参照图像与目标图像相似性较好的情况下实现的。
上述实施例是对本发明的说明,不是对本发明的限定,任何对本发明简单变换后的方案均属于本发明的保护范围。
Claims (5)
1.一种基于分类学习的相似图像彩色化处理方法,依次包括以下步骤:
a)在网络上收集多组样本图像,对于每一组图像,取其中一张作为参照图像,而对另一张灰度化后的图像作为要着色的目标图像,同时添加没有灰度化的原图像作为正确着色方案,然后提取目标图像的灰度共生矩阵,利用AP算法将上述多组样本图像分为5类;
b)使用基于几何流的超像素算法,分别对目标图像和参照图像提取超像素,目标图像和参照图像的每一个超像素包括亮度值、标准差、Gabor和SURF四个特征;
c)为了得到图像提取的超像素的亮度值、标准差、Gabor和SURF四个特征的最优化线性组合,通过权重学习来寻找一组最优权重使得误差函数Err达到最小,我们定义每一组图像的匹配误差为:其中,O是原图像,R是参照图像,I是标记有超像素颜色的目标图像,Os表示原图像第s个超像素所对应的颜色值,Is表示目标图像第s个超像素通过颜色迁移得到的颜色值,而每一类的总误差是该类内所有图像误差综合: 其中,n表示该类中的样本数量,我们使用Levenberg-Marquardt优化算法对误差函数Err求最小值,最后到最优权重d)对b)步骤中提取的的超像素,在参照图像的超像素中寻找与目标图像超像素一致的超像素,采用欧氏距离作为超像素之间相似度的度量,首先对所有超像素的亮度值、标准差、Gabor和SURF四个特征进行标准化处理,然后对每一个特征计算其对应的欧式距离,将每一个特征的欧式距离乘以该特征的权重,最后四个特征的加权欧氏距离作为超像素间的相似度度量Dist,Dist越小说明超像素越相似,计算方法如下:
DiSt(ti,rj)=w1E1(ti,rj)+w2E2(ti,rj)+w3E3(ti,rj)+w4E4(ti,rj),
其中,ti和rj分别表示目标图像的超像素和参照图像的超像素,E1,E2,E3和E4 分别是亮度值、标准差、Gabor和SURF所对应的欧式距离,而w1,w2,w3和w4则分别表示亮度值、标准差、Gabor和SURF所对应的相似度权重,根据图像灰度共生矩阵属性判断类别,选择该类所对应的权重,权重值由c)步骤中描述的学习算法获得,目标图像超像素ti所匹配的超像素rj是使得Dist最小的参照图像超像素,即:
B=argminjDist(ti,rj)rj∈R,
其中R表示参考图像所有超像素,然后将rj中的颜色值作为ti所对应的初始颜色值;
e)在色彩匹配迁移的过程中还是会产生小部分的匹配错误,可以根据图像空间的连续性对超像素颜色进行校正,最后通过最优化颜色插值算法将超像素颜色传播到目标图像的每一个像素上,完成目标图像的彩色化,最优化颜色插值算法基于一个简单的假定:相邻的像素之间如果有相似的灰度值,那么就会有相似的颜色值,利用这一假定,图像颜色扩散的过程转化为一个全局优化求解的过程,设定最小化目标:J(u)=∑r(u(r)-∑s∈N(r)s≠rwrsu(s))2,其中u(r),u(s)表示是像素的颜色值,N(r)表示r的邻域,wrs是r,s间依据亮度值确定的权值,满足:Y(s),Y(r)是像素亮度,是r邻域内亮度方差,邻域外像素与邻域中心像素间的权值为0。
2.如权利要求1所述的一种基于分类学习的相似图像彩色化处理方法,其特征在于:所述步骤a)中采用灰度共生矩阵中四个最常用的特征指标来表达图像全局特性,四个最常用的特征分别是角二阶矩、对比度、相关性和熵,取0°、45°、90°和135°作为不同方向的偏移参数,作其灰度共生矩阵,分别求取偏移后的灰度共生矩阵的四个最常用的特征指标,然后对同一类特征指标 计算其均值和方差作为最终的灰度共生矩阵的计算结果。
3.如权利要求1所述的一种基于分类学习的相似图像彩色化处理方法,其特征在于:所述b)步骤通过计算属于超像素中的像素点的均值作为表示超像素的特征值,亮度值:使用Lab颜色空间作为颜色迁移的颜色空间,提取Lab颜色空间中的L作为每一个像素点的亮度值;标准差:考虑到像素点的邻域空间统计量,采用5X5大小的像素的亮度值的标准差作为该点像素的标准差;Gabor:使用Gabor滤波器为每一个像素点提取一个40维的特征,设定8个方向和5个指数尺度;SURF:每一个像素点提取一个128维的SURF。
4.如权利要求1所述的一种基于分类学习的相似图像彩色化处理方法,其特征在于:所述步骤e)中假设超像素在图像空间中是连续的,并且超像素的亮度值和标准差两个特性又是相近的,那么判定超像素的颜色值也是相近的,记每一个超像素中心点颜色为C,则亮度值可以表示为:L=[C1,C2,…,CS],其中S表示目标图像的超像素个数,给定一个图G=(V,E),其中V是超像素点,E表示超像素邻接关系,L与C值的最小化能量公式的顶点形式为:argminL∑u∈V∑v∈N(u)ωuv||Cu-Cv||,其中N(u)是超像素u的邻接超像素集,ωuv为权重因子,ωuv=exp(-(λ1||lu-lv||+λ2||stdu-stdv||)),其中l是超像素亮度值,std是超像素的标准差属性值,λ1,λ2是权衡因子。
5.如权利要求4所述的一种基于分类学习的相似图像彩色化处理方法,其特征在于:对公式argminL∑u∈V∑v∈N(u)ωuv||Cu-Cv||进行求解时,对N(u)重新定义后得到N*(u):
e1)对每一个超像素u,以u的亮度l和标准差std作为邻域增长的亮度和标准差;
e2)计算u与其邻接超像素v的强度和标准差的欧氏距离,分别为和若并且则是超像素v属于N*(u)遍历u的所有邻接超像素, 其中,T1和T2分别是强度值和标准差的阈值;
e3)若N*(u)的元素个数为0,则说明该超像素点在图像空间上是独立点,其色彩值只依赖局部特性,若N*(u)元素个数不为0,则对N*(u)中所有超像素的邻接超像素作e2)的操作,生长路径最大为15;
对于超像素u及其用上述方法得到的邻接超像素集N*(u),那么这些超像素的颜色值就是相似的,那么如果存在这样的L*=[C1,C2,…,CS],L*使得对于每一个超像素及其邻接超像素集的颜色值都分别相似,则公式arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||中的求和项收敛到其最小值,此时的L*为最优解,那么求解公式arg minL∑u∈V∑v∈N(u)ωuv||Cu-Cv||就可以转变为求令任意一个超像素及其邻接超像素集的颜色值相似的L*,对于超像素u及其邻接超像素集N*(u),采用K-means算法把这些超像素颜色聚成两类,选取超像素颜色数量上较多的一类去平滑另一类超像素颜色,最终实现对超像素颜色进行校正。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410100019.3A CN103839079B (zh) | 2014-03-18 | 2014-03-18 | 一种基于分类学习的相似图像彩色化处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410100019.3A CN103839079B (zh) | 2014-03-18 | 2014-03-18 | 一种基于分类学习的相似图像彩色化处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103839079A CN103839079A (zh) | 2014-06-04 |
CN103839079B true CN103839079B (zh) | 2017-03-01 |
Family
ID=50802557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410100019.3A Active CN103839079B (zh) | 2014-03-18 | 2014-03-18 | 一种基于分类学习的相似图像彩色化处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103839079B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104376529B (zh) * | 2014-11-25 | 2017-08-11 | 深圳北航天汇创业孵化器有限公司 | 一种基于glcm的灰度图像彩色化系统和方法 |
CN105118076B (zh) * | 2015-07-30 | 2017-12-01 | 上海应用技术学院 | 基于过度分割和局部与全局一致性的图像彩色化方法 |
CN106780583B (zh) * | 2016-11-28 | 2019-11-19 | 自然资源部第二海洋研究所 | 基于矩阵元素插值的任意灰度共生矩阵的计算方法及应用 |
CN107705268B (zh) * | 2017-10-20 | 2021-07-02 | 天津工业大学 | 一种基于改进的Retinex与Welsh近红外图像增强与彩色化算法 |
CN107730568B (zh) * | 2017-10-31 | 2021-01-08 | 山东师范大学 | 基于权重学习的着色方法和装置 |
CN107909561B (zh) * | 2017-11-15 | 2021-07-27 | 浙江大学宁波理工学院 | 一种基于权值优化的最优传输图像颜色迁移方法 |
US10748036B2 (en) | 2017-11-21 | 2020-08-18 | Nvidia Corporation | Training a neural network to predict superpixels using segmentation-aware affinity loss |
CN109754444B (zh) | 2018-02-07 | 2021-10-26 | 京东方科技集团股份有限公司 | 图像着色方法和装置 |
CN108492328B (zh) * | 2018-03-23 | 2021-02-26 | 云南大学 | 视频帧间目标匹配方法、装置和实现装置 |
CN109711432A (zh) * | 2018-11-29 | 2019-05-03 | 昆明理工大学 | 一种基于颜色方差的图像相似判定方法 |
CN109949379B (zh) * | 2019-03-27 | 2021-06-18 | 深圳市汉森软件有限公司 | 喷墨打印机的追色方法、装置、设备及存储介质 |
CN112950461A (zh) * | 2021-03-27 | 2021-06-11 | 刘文平 | 全局与超像素分割相融合的色彩迁移方法 |
CN113242417B (zh) * | 2021-05-10 | 2022-09-13 | 中国人民解放军海军航空大学 | 标准差加权的色偏数字图像校正方法 |
CN116757915B (zh) * | 2023-08-16 | 2023-11-28 | 北京蓝耘科技股份有限公司 | 一种集群gpu资源调度方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102360506A (zh) * | 2011-09-30 | 2012-02-22 | 北京航空航天大学 | 一种基于局部线性保持的场景颜色风格一致化处理方法 |
CN102360490A (zh) * | 2011-09-30 | 2012-02-22 | 北京航空航天大学 | 基于颜色转换和编辑传播的图像季节特征增强方法 |
US8401250B2 (en) * | 2010-02-19 | 2013-03-19 | MindTree Limited | Detecting objects of interest in still images |
CN103295250A (zh) * | 2013-05-31 | 2013-09-11 | 东莞中山大学研究院 | 一种基于l1混合范数求解的图像彩色化的方法 |
-
2014
- 2014-03-18 CN CN201410100019.3A patent/CN103839079B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8401250B2 (en) * | 2010-02-19 | 2013-03-19 | MindTree Limited | Detecting objects of interest in still images |
CN102360506A (zh) * | 2011-09-30 | 2012-02-22 | 北京航空航天大学 | 一种基于局部线性保持的场景颜色风格一致化处理方法 |
CN102360490A (zh) * | 2011-09-30 | 2012-02-22 | 北京航空航天大学 | 基于颜色转换和编辑传播的图像季节特征增强方法 |
CN103295250A (zh) * | 2013-05-31 | 2013-09-11 | 东莞中山大学研究院 | 一种基于l1混合范数求解的图像彩色化的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103839079A (zh) | 2014-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103839079B (zh) | 一种基于分类学习的相似图像彩色化处理方法 | |
Pang et al. | Automatic segmentation of crop leaf spot disease images by integrating local threshold and seeded region growing | |
CN106340023A (zh) | 图像分割的方法和装置 | |
CN107578390A (zh) | 一种使用神经网络进行图像白平衡校正的方法及装置 | |
WO2018076212A1 (zh) | 基于反卷积神经网络的场景语义分割方法 | |
CN107123088B (zh) | 一种自动更换证件照背景颜色的方法 | |
CN108537239B (zh) | 一种图像显著性目标检测的方法 | |
CN110807760B (zh) | 一种烟叶分级方法及系统 | |
CN106296695A (zh) | 基于显著性的自适应阈值自然目标图像分割抽取算法 | |
CN106355607B (zh) | 一种宽基线彩色图像模板匹配方法 | |
CN103854261B (zh) | 色偏图像的校正方法 | |
CN109635636A (zh) | 基于属性特征和加权的分块特征相融合的行人再识别方法 | |
CN114723643B (zh) | 一种基于强化学习和美学评估的低光图像增强方法 | |
CN102360506A (zh) | 一种基于局部线性保持的场景颜色风格一致化处理方法 | |
CN108830823A (zh) | 基于空域结合频域分析的全参考型图像质量评价方法 | |
CN108388905A (zh) | 一种基于卷积神经网络和邻域上下文的光源估计方法 | |
CN108846404A (zh) | 一种基于相关约束图排序的图像显著性检测方法及装置 | |
CN105303546B (zh) | 基于模糊连接度的近邻传播聚类图像分割方法 | |
CN106097354A (zh) | 一种结合自适应高斯肤色检测和区域生长的手部图像分割方法 | |
CN107146229A (zh) | 基于元胞自动机模型的结肠息肉图像分割方法 | |
CN115049853A (zh) | 烟叶卷曲不变特性特征提取方法及存储介质 | |
CN113989299A (zh) | 一种基于k均值聚类的露天矿岩层图像分割方法 | |
CN110084821A (zh) | 一种多实例交互式图像分割方法 | |
CN110084820A (zh) | 基于改进fcm算法的紫色土图像自适应分割提取方法 | |
Hu et al. | No reference quality assessment for Thangka color image based on superpixel |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |