CN115345788A - 提高色觉异常者视觉下图像颜色对比度的方法与装置 - Google Patents

Abstract

提高色觉异常者视觉下图像颜色对比度的方法，在L^*a^*b^*彩色空间，确定色觉异常者视觉下容易产生颜色混淆的区域，并计算L^*、a^*和b^*分量；对L^*分量即亮度值进行修正，当正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异趋近于零，得到最优亮度修正值；设定不同参数值输出相应结果，得到最优输出图像。本发明还提供了提高色觉异常者视觉下图像颜色对比度的装置，本发明基于方差调节图像亮度对比度，使得拥有正常色觉的观察者和色觉异常的观察者对于同一幅图像的颜色对比度感知相同，从而达到提高色觉异常者观察者对图像颜色辨别能力的目的。

Description

提高色觉异常者视觉下图像颜色对比度的方法与装置

技术领域

本发明属于图像处理技术领域，特别涉及一种提高色觉异常者视觉下图像颜色对比度的方法与装置。

背景技术

造成色觉异常例如色盲或者色弱的原因主要是视锥细胞的变异或者是缺失，在缺失视锥细胞的情况下，患者对于自然光谱中的某些颜色就失去了应有的辨识能力，从而形成了色觉异常。到目前为止，研究者对色觉异常者进行了大量研究并且提出很多有效的矫正方法，试图去减少色觉异常者日常生活中辨色的困扰。例如，在色盲模型方面，根据视觉的三通道模型，研究者提出了几种不同的色盲模型，如：Vienot F等人提出了基于。MS色彩空间的红绿色盲仿真模型，Nakauchi S等人提出了色盲的多层神经网络模型，E.Martin C等人提出了色盲及正常视觉系统模型，Wachtler T等人提出了二色视觉彩色感知模型，马煜等人提出了基于BP神经网络的色盲治疗模型，但是受限于目前的医疗水平，研究者从图像处理领域寻找突破口。现有技术中也有不少人应用图像处理技术，对图像的色彩进行一定的变换，然后将变换过的图像给色盲患者观察，使用图像处理方法进行色盲矫正，从操作的可行性，对人体的无害性、安全性上看，具有很高的价值.在众多矫正方法中，有些通过改变原始颜色去实现，有些通过修改亮度去实现，各有各的创新点和缺点。

Milic提出了一种基于混淆线的颜色矫正方法，该方法利用色度信息对输入图像的颜色进行分组并计算每一组的中心颜色；接着，当两种颜色在同一混淆线上分布时，将中心颜色往混淆线垂直方向上的相反方向重新映射；最后，利用重新映射后的中心颜色再去计算组内的其他颜色。Milic的方法对对中心颜色的重新映射范围进行了设定，这样避免了中心颜色产生新的混淆色，但不能避免中心颜色以外的其他颜色之间产生新的混淆色。

Tennenholtz提出了一种基于相似性的自然对比度增强技术，虽然也是针对色觉异常者颜色混淆色区域进行处理，但是并没有排除掉图像中色觉异常者能够区分出来的非彩色部分。

何志良等人提出基于图像分割的局部色盲矫正方法，结合K-means和系统聚类算法对原图像进行分割，并计算各个区域在色盲图像下LAB颜色空间中的欧氏距离作为颜色相似性的度量，确定红绿色盲难以分辨的颜色区域，最后将该区域替换成亮度一致且颜色区分度大的颜色，从而实现色盲图像校正的目的。但是对于较大的图像时，算法的速度较慢。

发明内容

为了克服上述现有技术的缺点，本发明的目的在于提供一种提高色觉异常者视觉下图像颜色对比度的方法与装置，基于方差调节图像对比度，使得拥有正常色觉的观察者和色觉异常的观察者对于同一幅图像的颜色对比度感知相同，从而达到提高色觉异常者观察者对图像颜色辨别能力的目的。

为了实现上述目的，本发明采用的技术方案是：

提高色觉异常者视觉下图像颜色对比度的方法，包括如下步骤：

S1，在L^*a^*b^*彩色空间，确定色觉异常者视觉下容易产生颜色混淆的区域，并对该区域的像素值进行计算，得到L^*分量、a^*分量和b^*分量；

S2，对所得L^*分量即亮度值进行修正，当正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异趋近于零，得到最优亮度修正值；所述二色觉下的结果图像即色觉异常者视觉下的图像；

S3，设定不同参数值输出相应结果，得到最优输出图像。

本发明还提供了提高色觉异常者视觉下图像颜色对比度的装置，基于上述方法，包括：

输入模块，用于输入图像；

运算模块，用于根据所述输入图像，计算最优亮度修正值，并得到最优输出图像；

输出模块，用于输出所述最优输出图像；

通信模块，用于输入模块与运算模块之间以及运算模块与输出模块之间的数据传输。

在一个实施例中，所述输入模块为摄像头，所述运算模块搭载于处理器，所述输出模块为显示屏。

在一个实施例中，所述摄像头为智能手机摄像头，所述处理器为所述智能手机的处理器，所述显示屏为所述智能手机的显示屏。

在一个实施例中，所述摄像头为可穿戴设备摄像头，所述处理器为智能手机或VR设备的处理器，所述显示屏为所述智能手机或VR设备的显示屏。

与现有技术相比，本发明的有益效果是：

1、由于仅色觉异常者无法辨别区域的亮度值进行了修改，不仅可以有效地提高色觉异常者视觉下图像的颜色对比度，同时还能保持原始图像的自然性，从而提高色觉异常者患者对的辨识能力。

2、本发明基于最速下降法获得最优修正值，没有用到复杂的算法，具有相当快的计算速度。

附图说明

图1是本发明流程图。

图2为输入图像：(a)红线条，(b)数字“74”，(c)绿线条，(d)图像“15”，输入图片来源于石原氏色盲检测图。

图3为图2中输入图像(a)-(d)分别对应的红色盲仿真图。

图4为图2中输入图像(a)-(d)分别对应的绿色盲仿真图。

图5中(a)-(d)是K型色觉下的Protanopia类型(红色盲)亮度修正后正常色觉下观察到的结果图像。

图6中(a)-(d)分别是图5中(a)-(d)的K型色觉下的Protanopia类型(红色盲)的结果图像。

图7中(a)-(d)是K型色觉下的Deuteranopia类型(绿色盲)亮度修正后正常色觉下的结果图像。

图8中(a)-(d)分别是图7中(a)-(d)的K型色觉下的Deuteranopia类型(绿色盲)结果类型。

具体实施方式：

下面结合附图对本发明做详细叙述。

本发明主要针对色觉异常者不易识别的图像进行研究，通过修改色觉异常者容易产生颜色混淆区域的像素值，改变图像的亮度值，增强对比度，使正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异趋近于零，即正常色觉的邻域方差与二色觉相等，也就是说，要实现的理想结果是正常色觉观察者和色觉异常者对于同一幅图像的颜色对比度感知相同，从而达到提高色觉异常者患者对于图像的辨别能力的目的。

具体地，参考图1，本发明提高色觉异常者视觉下图像颜色对比度的方法，将图像像素的亮度值进行修改，从而增强图像颜色的明暗反差程度，达到颜色矫正的目的，其包括如下步骤：

S1，在L^*a^*b^*彩色空间，确定色觉异常者视觉下容易产生颜色混淆的区域，并对该区域的像素值进行计算，得到L^*分量、a^*分量和b^*分量。

一幅图像的某一像素在L^*a^*b^*彩色空间中的值由L^*、a^*、b^*三个分量构成，而色觉异常者由于缺失a^*轴上的值，把缺失的部分称之为色觉异常者容易产生颜色混淆的区域。本发明中，色觉异常者视觉下容易产生颜色混淆的区域具体通过如下方法确定：

计算正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异

差异

若无限接近于0，则色觉异常者能够区分相应像素区域，若不为零且相差超过两个像素的最大颜色距离β，则色觉异常者无法区分相应像素区域，该像素区域即色觉异常者视觉下容易产生颜色混淆的区域，所述输入图像为彩色图像。参数β表示色觉异常者视觉不能分辨清楚两个像素时，这两个像素的最大颜色距离，本发明中，β取值为5。

的计算公式如下：

其中，

表示正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异，n表示输入图像的像素数量，

表示在L^*a^*b^*彩色空间中，二色觉下的结果图像的第i个目标像素与其邻域内混淆色像素的方差，

表示在L^*a^*b^*彩色空间中，正常色觉下的输入图像的第i个目标像素与其邻域内混淆色像素的方差。K表示P-类型色觉(红色盲)或D-类型色觉(绿色盲)，N表示正常色觉。

S_i,ρ表示第i个目标像素与其邻域内像素的棋盘距离相差小于等于ρ(ρ分别取值为5、10、15)的集合，m表示集合S_i,ρ中的元素个数，

表示正常色觉下第j个像素的亮度值，

表示正常色觉下集合S_i,ρ中所有像素的L^*均值(在L^*通道的亮度均值)，

表示正常色觉下第j个像素在a通道的色度值，

表示正常色觉下集合S_i,ρ中所有像素的a^*均值(在a通道的色度均值)，

表示正常色觉下第j个像素在b通道的色度值，

表示正常色觉下集合S_i,ρ中所有像素的b^*均值(在b通道的色度均值)；

表示二色觉下第j个像素的理想亮度值，

表示二色觉下集合S_i,ρ中所有像素的L^*均值(理想亮度均值)，

表示二色觉下第j个像素的a通道理想色度值，

表示二色觉下集合S_i,ρ中所有像素的a^*均值(a通道理想色度均值)，

表示二色觉下第j个像素的b通道理想色度值，

表示二色觉下集合S_i,ρ中所有像素的b^*均值(b通道理想色度均值)；

θ为压缩参数，用于将

的取值范围压缩到与

相同的范围内。在正常视觉下，一幅图像的某一像素在L^*a^*b^*彩色空间中的值由L^*、a^*、b^*三个分量构成，而红-绿色觉异常者对应地缺失a^*轴上的值。因此，

和

的取值范围是不同的，

的范围相对于

而言较大，需要通过压缩函数将

的取值范围适当缩小，二者之间才可以再进行运算。

二色觉下的理想亮度值L′^*计算公式如下：

表示输入图像中第i个像素的亮度值、a通道色度值、b通道色度值，c₁、c₂是对图像像素的亮度值进行调整的参数，L′^*是色觉异常者患者理想的亮度值，通过参数c₁、c₂对图像像素的亮度值进行调整时，要将a^*、b^*轴的信息考虑在内，参数c₁、c₂将通过优化迭代得到最优解。

S2，对所得L^*分量即亮度值进行修正，当正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异趋近于零，得到最优亮度修正值；其中二色觉下的结果图像即色觉异常者视觉下的图像。

本步骤中，以

为目标函数，并利用最速下降法得到目标函数的最优解，也即图像混淆区域的像素亮度值的最优修正值，表达如下：

c₁ ^(t+1)＝c₁ ^(t)+μ₁ ^(t)

c₂ ^(t+1)＝c₂ ^(t)+μ₂ ^(t)

式中，Rⁿ为n维实数集，

是最优化后的结果图像，也即最终的输出图像；

参数c₁、c₂将通过优化迭代得到最优解，最优化过程通过计算更新量进行迭代实现，其中c₁ ^(t+1)表示c₁第t+1次迭代结果，c₂ ^(t+1)表示c₂第t+1次迭代结果，c₁ ^(t)表示e1第t次迭代结果，c₂ ^(t)表示c2第t次迭代结果。

μ₁是参数c₁的迭代更新量，μ₂是参数c₂的迭代更新量；μ₁ ^(t)是参数e₁的第t次迭代更新量，μ₂ ^(t)是参数c₂的第t次迭代更新量。

τ作为迭代结束的判断条件，其是更新量的平方。当τ小于给定参数ε时，目标函数获得最优解。参数ε的取值将在具体的实验过程中做出合理的设定。

S3，设定不同参数值输出相应结果，得到最优输出图像。

通过设定几组不同的参数值进行实验，选出每组输出的结果图像效果最好的参数值，得到最优输出图像。

在混淆区域的判定条件中涉及三个参数，分别是α、β、γ。参数α代表正常视觉能够分辨清楚两个像素时，这两个像素的最小颜色距离；参数β是色觉异常者视觉不能分辨清楚两个像素时，这两个像素的最大颜色距离；参数γ是正常视觉不能分辨清楚两个像素时，这两个像素的最大颜色距离。为了不将测试图像中的非彩色背景考虑在内，在实验过程中设置参数δ，只对

大于参数δ的像素进行处理本发明。

本发明的一个具体实施例如图2至图8，在图2中，示出了四种输入图像，分别为：a)红线条，b)数字“74”，c)绿线条，d)图像“15”，输入图像来源于石原氏色盲检测图。

图3中a)-d)为图2中输入图像a)-d)分别对应的红色盲仿真图。图4中a)-d)为图2中输入图像a)-d)分别对应的绿色盲仿真图。仿真图模拟了色觉异常者视觉下的彩色图像，图像中的信息对于相应的色觉异常者(如红色盲或绿色盲)来说是无法识别的。

图5中a)-d)为K型色觉下的Protanopia类型(红色盲)亮度修正后正常色觉下观察到的结果图像。分别为：a)红线条，b)数字“74”，c)绿线条，d)图像“15”。经过该方法处理后，只修改了亮度信息，色度信息并未修改，所以在正常视觉下修改后的结果图与原始输入图像只存在亮度差异。

图6中a)-d)分别是图5中a)-d)的K型色觉下的Protanopia类型(红色盲)的结果图像。分别为：a)红线条，b)数字“74”，c)绿线条，d)图像“15”。经过该方法处理后，图像中的颜色信息已可以被红色盲获取，即，红色盲已可以识别出其中的内容。

图7中a)-d)是K型色觉下的Deuteranopia类型(绿色盲)亮度修正后正常色觉下的结果图像。分别为：a)红线条，b)数字“74”，c)绿线条，d)图像“15”。经过该方法处理后，只修改了亮度信息，色度信息并未修改，所以在正常视觉下修改后的结果图与原始输入图像只存在亮度差异。

图8中a)-d)分别是图7中a)-d)的K型色觉下的Deuteranopia类型(绿色盲)结果类型。分别为：a)红线条，b)数字“74”，c)绿线条，d)图像“15”。经过该方法处理后，图像中的颜色信息可以被绿色盲获取，即，绿色盲已可以识别出其中的内容。

最终本发明设定参数值如下：

红色觉异常者：(α,β,γ,δ,ρ,θ,ε)＝(15,5,5,5,5,500,0.4)

绿色觉异常者：(α,β,γ,δ,ρ,θ,ε)＝(25,5,5,5,5,1500,0.1)

本发明还提供了相应的提高色觉异常者视觉下图像颜色对比度的装置，包括：

输入模块，用于输入图像；

运算模块，用于根据所述输入图像，计算最优亮度修正值，并得到最优输出图像；

输出模块，用于输出最优输出图像；

通信模块，用于输入模块与运算模块之间以及运算模块与输出模块之间的数据传输.

本发明中，输入模块一般可为摄像头，例如智能手机摄像头，或者可穿戴设备例如头盔、眼镜等装置上配备的摄像头。

运算模块显然可以搭载于各种类型的处理器，常见如智能手机的处理器，或者VR设备以及其它可穿戴设备的处理器。例如在本发明中采用了AMD Ryzen7 5800H withRadeon Graphics作为处理器，其具有16GB内存，并具有NVIDIA GeForce GTX 1650的GPU，完全能够满足计算要求。

输出模块则为显示屏，即，它的作用是将最终的图像呈现，常见如智能手机的显示屏，或VR设备的显示屏。当然，也可以为pc机显示器。

由此，本发明的通信模块可以根据具体情况采用有线或者无线的通信方式，例如，在采用智能手机摄像头、智能手机处理器和智能手机显示屏时，显然采用的是全有线的通信结构，即，利用手机扫描获取原始输入图像，在处理后，结果在显示屏上显示。

又例如，在采用智能手机摄像头、PC机处理器或云端处理器时，显然输入模块与运算模块之间的通信应为无线通信，在运算模块处理得到输出图像之后，可以通过有线或者无线方式，将结果在PC机显示器或者智能手机显示屏上显示。

在采用VR设备时，具有同样的道理。

Claims (10)

1.提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，包括如下步骤：

S1，在L^*a^*b^*彩色空间，确定色觉异常者视觉下容易产生颜色混淆的区域，并对该区域的像素值进行计算，得到L^*分量、a^*分量和b^*分量；

S2，对所得L^*分量即亮度值进行修正，当正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异趋近于零，得到最优亮度修正值；所述二色觉下的结果图像即色觉异常者视觉下的图像；

S3，设定不同参数值输出相应结果，得到最优输出图像。

2.根据权利要求1所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，所述S1中，计算正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异，该差异若无限接近于0，则色觉异常者能够区分相应像素区域，若不为零且相差超过两个像素的最大颜色距离β，则色觉异常者无法区分相应像素区域，该像素区域即色觉异常者视觉下容易产生颜色混淆的区域，所述输入图像为彩色图像。

3.根据权利要求1或2所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，所述正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异通过如下公式计算：

其中，

表示正常色觉下的输入图像和二色觉下的结果图像之间的像素方差的差异，n表示输入图像的像素数量，

表示在L^*a^*b^*彩色空间中，二色觉下的结果图像的第i个目标像素与其邻域内混淆色像素的方差，

表示在L^*a^*b^*彩色空间中，正常色觉下的输入图像的第i个目标像素与其邻域内混淆色像素的方差，K表示P-类型色觉或D-类型色觉，N表示正常色觉；

S_i,ρ表示第i个目标像素与其邻域内像素的棋盘距离相差小于等于ρ的集合，m表示集合S_i,ρ中的元素个数，

表示正常色觉下第j个像素的亮度值，

表示正常色觉下集合S_i,ρ中所有像素的L^*均值，

表示正常色觉下第j个像素在a通道的色度值，

表示正常色觉下集合S_i,ρ中所有像素的a^*均值，

表示正常色觉下第j个像素在b通道的色度值，

表示正常色觉下集合S_i,ρ中所有像素的b^*均值；

表示二色觉下第j个像素的理想亮度值，

表示二色觉下集合S_i,ρ中所有像素的L^*均值，

表示二色觉下第j个像素的a通道理想色度值，

表示二色觉下集合S_i,ρ中所有像素的a^*均值，

表示二色觉下第j个像素的b通道理想色度值，

表示二色觉下集合S_i,ρ中所有像素的b^*均值；

θ为压缩参数，用于将

的取值范围压缩到与

相同的范围内。

4.根据权利要求3所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，二色觉下的理想亮度值L^*计算公式如下：

表示输入图像中第i个像素的亮度值、a通道色度值、b通道色度值，c₁、c₂是对图像像素的亮度值进行调整的参数，通过优化迭代得到最优解。

5.根据权利要求4所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，所述S2中，以

为目标函数，并利用最速下降法得到目标函数的最优解，也即图像混淆区域的像素亮度值的最优修正值，表达如下：

c₁ ^(t+1)＝c₁ ^(t)+μ₁ ^(t)

c₂ ^(t+1)＝c₂ ^(t)+μ₂ ^(t)

Rⁿ为n维实数集，

是最优化后的结果图像，也即最终的输出图像；

c₁ ^(t+1)表示c₁第t+1次迭代结果，c₂ ^(t+1)表示c₂第t+1次迭代结果，c₁ ^(t)表示c₁第t次迭代结果，c₂ ^(t)表示c₂第t次迭代结果；

μ₁是参数c₁的迭代更新量，μ₂是参数c₂的迭代更新量；μ₁ ^(t)是参数c₁的第t次迭代更新量，μ₂ ^(t)是参数c₂的第t次迭代更新量；

τ作为迭代结束的判断条件，当τ小于给定参数ε时，目标函数获得最优解。

6.根据权利要求4所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，所述S3中，通过设定几组不同的参数值进行实验，选出每组输出的结果图像效果最好的参数值，得到最优输出图像。

7.根据权利要求6所述提高色觉异常者视觉下图像颜色对比度的方法，其特征在于，设定参数值如下：

红色觉异常者：(α,β,γ,δ,ρ,θ,ε)＝(15,5,5,5,5,500,0.4)

绿色觉异常者：(α,β,γ,δ,ρ,θ,ε)＝(25,5,5,5,5,1500,0.1) 。

8.提高色觉异常者视觉下图像颜色对比度的装置，基于权利要求1所述提高色觉异常者视觉下图像颜色对比度的方法，包括：

输入模块，用于输入图像；

运算模块，用于根据所述输入图像，计算最优亮度修正值，并得到最优输出图像；

输出模块，用于输出所述最优输出图像；

通信模块，用于输入模块与运算模块之间以及运算模块与输出模块之间的数据传输。

9.根据权利要求8所述提高色觉异常者视觉下图像颜色对比度的装置，其特征在于，所述输入模块为摄像头，所述运算模块搭载于处理器，所述输出模块为显示屏。

10.根据权利要求9所述提高色觉异常者视觉下图像颜色对比度的装置，其特征在于，所述摄像头为智能手机摄像头，所述处理器为所述智能手机的处理器，所述显示屏为所述智能手机的显示屏；

或者，所述摄像头为可穿戴设备摄像头，所述处理器为智能手机或VR设备的处理器，所述显示屏为所述智能手机或VR设备的显示屏。

Images