CN103226689B - 检测红眼的方法及装置、去除红眼的方法及装置 - Google Patents

检测红眼的方法及装置、去除红眼的方法及装置 Download PDF

Info

Publication number
CN103226689B
CN103226689B CN201210021206.3A CN201210021206A CN103226689B CN 103226689 B CN103226689 B CN 103226689B CN 201210021206 A CN201210021206 A CN 201210021206A CN 103226689 B CN103226689 B CN 103226689B
Authority
CN
China
Prior art keywords
pixel
blood
eye illness
shot eye
red
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210021206.3A
Other languages
English (en)
Other versions
CN103226689A (zh
Inventor
黄玉春
林福辉
彭晓峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Spreadtrum Communications Shanghai Co Ltd
Original Assignee
Spreadtrum Communications Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Spreadtrum Communications Shanghai Co Ltd filed Critical Spreadtrum Communications Shanghai Co Ltd
Priority to CN201210021206.3A priority Critical patent/CN103226689B/zh
Publication of CN103226689A publication Critical patent/CN103226689A/zh
Application granted granted Critical
Publication of CN103226689B publication Critical patent/CN103226689B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

一种检测红眼的方法及装置、去除红眼的方法及装置。所述检测红眼的方法包括:获取眼部图像中的红眼样本点;搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离;基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关。本发明的技术方案,提高了检测红眼和去除红眼的效率,降低检测红眼时的漏检率和误检率,也降低了去除红眼时的漏纠正率和误纠正率,且对红眼区域的纠正效果较好。

Description

检测红眼的方法及装置、去除红眼的方法及装置
技术领域
本发明涉及图像技术领域,尤其涉及一种检测红眼的方法及装置、去除红眼的方法及装置。
背景技术
“红眼效应”是指用闪光灯拍摄人物照片时,由于被拍摄者眼底血管的反光而导致的人眼瞳孔中央形成的红点现象。其形成原因主要是由于人的瞳孔在环境光比较暗时会放大,近距离闪光灯的强光经过放大的瞳孔,照在视网膜后的微血管组织上,反射回红色的光线,造成实际成像的照片呈现“红眼”状,红眼和人们一般所认知的眼睛的颜色差别很大,大大的降低了照片的质量。随着具有闪光功能的数码相机、手机、摄像机等的应用越来越广泛,对于“红眼效应”的去除具有很强的实际应用性,且也变得越发的重要。
现有技术中,去除红眼区域时,通常采用自动去除和手动去除两种方式来对红眼区域进行去除。
所谓自动去除,通常是通过一定的算法先提取出眼部区域,基于提取的眼部区域进而结合相应的算法来检测出红眼区域,然后对检测到的红眼区域进行纠正。
具体地,可以先借助于人脸检测器,通过人脸检测器检测出人脸区域,进而通过霍夫变换法或变形模板法等来粗略提取眼部区域。如:提取人脸的上半部分作为眼部区域。
或者通过皮肤判别器来获取不同于皮肤的眼洞,进而提取眼部区域。
或者通过嘴巴、鼻子、或眉毛等脸部特征的提取,并基于眼睛与嘴巴、鼻子或眉毛之间的位置关系来粗略提取眼部区域。如:提取嘴巴所在的预定范围内作为眼部区域。
或者通过拍摄前的最后一帧预览照片(无红眼照片)来粗略提取眼部区域。如:提取与所述无红眼照片存在红色差异的部分作为眼部区域。
在通过上述方式提取到眼部区域之后,基于提取的眼部区域,发掘红眼中的红眼色特征,进而基于所述红眼色特征来提取红眼区域。然后基于红眼的形状对提取到的红眼区域的形状特征进行相应的验证,一般来讲,红眼区域的形状通常为圆形、类圆形、椭圆形、类椭圆形,因此,若提取到的红眼区域的形状为圆形、类圆形、椭圆形、类椭圆形,就可以判定提取到的红眼区域的确为拍摄过程中形成的红眼区域,进而可以对提取到的红眼区域的红眼色进行纠正,并对红眼区域的边缘进行各种光滑处理,使得修正后的眼部图像看起来更自然以达到去除红眼的目的。
所谓手动去除,则是借助于各种红眼去除的辅助工具,完全由人工手动的对每一个像素点逐个进行修复。
对于上述的两种去除红眼的方式而言,自动去除红眼的方式主要是利用红眼区域的颜色和形状特征来对红眼区域进行定位和验证进而对红眼进行纠正,检测红眼、去除红眼的效率较高,但是,对红眼区域的颜色和形状的依赖性很强。
在实际拍摄过程中,由于拍照时的照明条件、背景光线、拍摄对象、设备及角度的差异,会导致红眼区域的颜色及形状发生较大的变化。如:由于光照条件的变化,红眼中的红色程度会发生很大的变化,且对于不同的人种而言,其红眼程度也不尽相同。拍摄过程中,眼睛张开的程度的不同也会导致红眼形状从理想圆形到不同程度类椭圆的变化。一旦红眼的颜色有较大的变化则会导致提取红眼区域的失败,而红眼在形状上有较大的变化,也会导致对提取到的红眼区域进行验证的失败,故使得检测红眼区域时的漏检率和误检率较高,进而导致了对红眼进行纠正时的漏纠正率和误纠正率较高。
对于手动去除红眼的方式而言,由于借助了各种辅助工具,故,手动去除红眼相对来说比较灵活,且准确性较高,但是由于需要人工对红眼区域中的每一个像素点先进行检测,然后进行逐点修复,所以检测红眼、去除红眼的效率较低。特别是在小型设备上进行红眼去除的操作时,更加的费时费力,检测和去除红眼的效率极低。
因此,如何能够提供一种漏检率和误检率较低且检测效率高的检测红眼的方法成为目前亟待解决的问题之一。
其他有关红眼检测的相关技术还可以参见公开号为WO2007116947A1,发明名称为REDEYEDETECTINGAPPARATUS,REDEYEDETECTINGMETHODANDREDEYEDETECTINGPROGRAM的国际专利申请。
发明内容
本发明解决的问题是提供一种漏检率、误检率较低且检测效率较高的检测红眼的方法及装置,去除红眼的方法及装置。
为了解决上述问题,本发明提供了一种检测红眼的方法,包括:
获取眼部图像中的红眼样本点;
搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离;
基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关。
为解决上述问题,本发明还提供了一种检测红眼的装置,包括:
获取单元,用于获取眼部图像中的红眼样本点;
搜索计算单元,用于搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离,所述预定范围与所述眼部图像的分辨率相关;
红色像素点确定单元,用于基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域。
为解决上述问题,本发明还提供了一种去除红眼的方法,包括:
采用上述的检测红眼的方法检测红眼区域;
对所述红眼区域进行纠正。
为解决上述问题,本发明还提供了一种去除红眼的装置,包括:
上述的检测红眼的装置;
纠正单元,用于对所述红眼区域进行纠正。
与现有技术相比,本发明的技术方案具有以下优点:
相对于自动去除红眼的方式而言,由于先确定了红眼样本点并搜索预定范围内的像素点,且根据颜色距离确定了预定范围内的红色像素点,因此,降低了检测红眼时的漏检率和误检测率,进而也降低了去除红眼时的漏纠正率和误纠正率。相对于手动去除红眼的方式而言,由于只需要确定红眼样本点进而在包括所述红眼样本点的预定范围内进行搜索,而无需手动地逐点检测和去除红眼,因此,减少了人工检测和去除红眼的次数,在很大程度上提高了检测红眼和去除红眼的效率。
进一步地,通过以所述红眼样本点为中心,搜索预定邻域内的像素点,以基于颜色距离确定红色像素点,实现起来较为简单,计算量小,且加快了对红色像素点的搜索速度,因此,提高了检测红眼的效率,进而也相应地提高了去除红眼的效率。
进一步地,在获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换,基于不同的色彩空间计算所述红眼样本点与预定范围内的像素点之间的颜色距离以确定红色像素点。由于色彩空间不同,故确定红色像素点时的颜色距离的阈值也有所不同,进而可以在不同色彩空间精确地检测红眼区域,降低检测红眼时的漏检率和误检率,也降低了去除红眼时的漏纠正率和误纠正率。并且,由于可以适用不同色彩空间,因而具有很大的灵活性。
进一步地,对搜索到的预定范围内的像素点,基于所述颜色距离确定黑色像素点,并利用所述黑色像素点自适应地对检测到的红眼区域进行纠正,因而对红眼区域的纠正效果较好。
附图说明
图1是本发明实施例一的检测红眼的方法的流程示意图;
图2是本发明实施例一的搜索包括红眼样本点的预定范围内的像素点的一种搜索方式的示意图;
图3是本发明实施例一的搜索包括红眼样本点的预定范围内的像素点的另一种搜索方式的示意图;
图4是本发明实施例一的去除红眼的方法的流程示意图;
图5是本发明实施例一的检测红眼的装置的结构示意图;
图6是本发明实施例一的去除红眼的装置的结构示意图;
图7是本发明实施例二的去除红眼的方法的流程示意图;
图8是本发明实施例二的去除红眼的装置的结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。
在以下描述中阐述了具体细节以便于充分理解本发明。但是本发明能够以多种不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本发明内涵的情况下做类似推广。因此本发明不受下面公开的具体实施方式的限制。
正如背景技术中所描述的,现有技术中检测红眼区域时,漏检率、误检率较高且检测效率较低。
发明人提出,先获取眼部图像中的红眼样本点,搜索包括所述红眼样本点的预定范围内的像素点,通过计算所述像素点与所述红眼样本点之间的颜色距离来确定红色像素点。由于先获取了红眼样本点,故在一定程度上可以降低检测红眼时的漏检率和误检率,另一方面由于对预定范围内的像素点的搜索完全通过自动的方式进行,故,提高了检测红眼时的检测效率。
实施例一
请参见图1,图1是本发明实施例一的检测红眼的方法的流程示意图,如图1所示,所述检测红眼的方法包括:
步骤S11:获取眼部图像中的红眼样本点。
步骤S12:搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离。
步骤S13:基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关。
具体地,执行步骤S11,本步骤中,眼部图像中红眼样本点的获取可以通过现有的图像处理软件中的辅助工具来获得,如由用户通过photoshop或acdsee等图像处理软件中自带的辅助工具单次点击红眼区域中的红色像素点以获得红眼样本点。
另外,若在小型设备上获取眼部图像中的红眼样本点,如:移动终端,则可以借助于移动终端自带的图像处理工具来获取红眼样本点。
执行步骤S12,搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离。所述预定范围与所述眼部图像的分辨率相关。一般来讲,所述预定范围为人脸区域面积的0.25~0.5倍,且为了可以更快地搜索到红眼区域,通常所述预定范围是以红眼样本点为中心的面积为人脸区域面积的0.25~0.5倍的圆形,也可以为矩形或其他多边形。
本实施例中,可以通过如下两种方式来搜索预定范围内的像素点,并计算所述像素点与所述红眼样本点之间的颜色距离。
请参见图2,图2是本发明实施例一的搜索包括红眼样本点的预定范围内的像素点的一种搜索方式的示意图。如图2所示,首先搜索中心像素点的预定邻域的像素点,所述中心像素点位于所述预定范围内。本实施例,第一次搜索的中心像素点即为步骤S11中获取的红眼样本点R,所述预定邻域为四邻域或八邻域。以图2为例,红眼样本点R的四邻域的像素点为像素点2、4、5、7;红眼样本点R的八邻域的像素点为像素点1、2、3、4、5、6、7、8。
本实施例中以预定邻域为八邻域对整个搜索过程进行说明。首先搜索红眼样本点R的八邻域的像素点1、2、3、4、5、6、7、8。分别计算像素点1、2、3、4、5、6、7、8与红眼样本点R之间的颜色距离。接下来,以前一次搜索到的像素点为中心像素点继续进行八邻域搜索。本实施例中,前一次搜索到的像素点为像素点1、2、3、4、5、6、7、8,则可以以像素点1、2、3、4、5、6、7、8中的一个像素点为中心像素点进行八邻域搜索,以像素点8为例,则其八邻域的像素点应为像素点R、5、13、7、9、12、11、10,本实施例中,优选地,对前一次搜索过的像素点不再进行搜索,故对于像素点8而言只搜索其八邻域中的像素点9、10、11、12、13,然后计算像素点9、10、11、12、13与红眼样本点R之间的颜色距离。接下来,再以像素点9、10、11、12、13中的一个像素点为中心像素点进行八邻域搜索,计算搜索到的像素点与红眼样本点R之间的颜色距离。重复上述搜索和计算的过程,直至最后搜索到的像素点所在的区域超出所述预定范围,则停止搜索。
请参见图3,图3是本发明实施例一的搜索包括红眼样本点的预定范围内的像素点的另一种搜索方式的示意图。如图3所示,以所述红眼样本点R为中心搜索预定邻域的像素点。本实施例中,所述预定邻域可以为以所述红眼样本点R为中心,预定长度为边长的正方形;或者,以所述红眼样本点R为中心,预定长度和宽度分别为长和宽的长方形。本实施例中,以预定邻域为正方形为例进行相应的说明,若红眼样本点R的坐标为(x,y),则以所述红眼样本点R为中心,搜索边长为2倍的像素点间距离的正方形邻域的像素点。也即搜索坐标分别为(x-1,y)、(x+1,y)、(x-1,y+1)、(x,y+1)、(x+1,y+1)、(x-1,y-1)、(x,y-1)、(x+1,y-1)的像素点。对应于图3中,则为像素点1、2、3、4、5、6、7、8,计算像素点1、2、3、4、5、6、7、8与所述红眼样本点R之间的颜色距离。增大所述预定邻域,本实施例中则可以通过增大预设边长来增大所述预定邻域,如增大所述预设边长为4倍的像素点间距离,则搜索边长为4倍的像素点间距离的正方形邻域的像素点,对应于图3则为搜索像素点9、10、11、12、13、14、15、16、17、18、19、20、21、22、23、24。然后,计算像素点9、10、11、12、13、14、15、16、17、18、19、20、21、22、23、24与所述红眼样本点R之间的颜色距离,增大所述预定邻域,继续搜索,并计算搜索到的像素点与所述红眼样本点R之间的颜色距离。重复上述搜索像素点、计算颜色距离和增大邻域的过程,直至搜索到的像素点所在区域超出所述预定范围,则停止搜索。
通过上述的两种方式,则可以搜索到包括所述红眼样本点的预定范围内的像素点。然后计算搜索到的像素点与所述红眼样本点之间的颜色距离。对于不同的色彩空间,则采用不同的方式获取搜索到的像素点与所述红眼样本点之间的颜色距离。本实施例中,以RGB色彩空间为例,则搜索到的像素点与所述红眼样本点之间的颜色距离通过如下公式获得:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值。
执行步骤S13,基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域。通过执行步骤S12,搜索到了预定范围内的像素点,同时也计算了搜索到的像素点与所述红眼样本点之间的颜色距离,故基于所述颜色距离可以确定红色像素点。具体地,若所述颜色距离大于第一阈值且小于第二阈值,则所述像素点为红色像素点。对于RGB空间而言,所述第一阈值为1,所述第二阈值为20。也即对于RGB空间而言,当所述红眼样本点与搜索到的像素点之间的颜色距离大于1且小于20时,则搜索到的像素点为红色像素点。而对于与所述红眼样本点的颜色距离等于1的像素点可以为红色像素点也可以不为红色像素点,同样地,对于与所述红眼样本点的颜色距离等于20的像素点,可以为红色像素点也可以不为红色像素点,当像素点与所述红眼样本点之间的颜色距离等于第一阈值或第二阈值时,是否确定该像素点为红色像素点则取决于红眼区域检测时的精度需求。
本实施例中,以眼部图像所在的色彩空间为RGB空间,对红眼样本点与搜索到的像素点之间的颜色距离进行了说明,并以RGB空间的阈值来确定红色像素点以获得红眼区域。为了可以获得更精确的红眼区域,本实施例中还可以在获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换,通过在不同的色彩空间中,对所述红眼样本点与搜索到的像素点之间的颜色距离的衡量来更加精确地确定红色像素点。
具体地,对所述眼部图像进行色彩空间转换可以是在搜索包括所述红眼样本点的预定范围内的像素点之前进行色彩空间转换,然后在转换后的色彩空间中搜索预定范围内的像素点,并计算所述像素点与所述红眼样本点之间的颜色距离。
也可以是在搜索包括所述红眼样本点的预定范围内的像素点之后进行色彩空间转换,在转换后的色彩空间中计算所述像素点与所述红眼样本点之间的颜色距离。
本实施例中,若提取的眼部图像所在的色彩空间为RGB空间,则可以将其转换至CIELab空间、HSV空间、YUV空间中的任意一种色彩空间。将RGB空间的图像转换至CIELab空间或HSV空间或YUV空间为现有技术,故此处不再赘述。
本实施例中,若转换后的眼部图像的色彩空间为CIELab空间,则计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = ( l - l s ) 2 + ( a - a s ) 2 + ( b - b s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,l、a、b分别表示像素点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围,ls、as、bs分别表示红眼样本点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围。
若转换后的眼部图像的色彩空间为HSV空间,则计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = α 1 ( v - v s ) 2 + β 1 ( s - s s ) 2 + ( h - h s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,h、s、v分别表示像素点的色调、饱和度和亮度,hs、ss、vs分别表示红眼样本点的色调、饱和度和亮度,α1、β1表示权重系数。
若转换后的眼部图像的色彩空间为YUV空间,则计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = α 2 ( y - y s ) 2 + β 2 ( u - u s ) 2 + ( v - v s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,y表示像素点的亮度u、v表示像素点的色度,ys表示红眼样本点的亮度、us、vs表示红眼样本点的色度,α2、β2表示权重系数。
而对应于上述的CIELab空间或HSV空间或YUV空间而言,其确定红色像素点时,也是对在各个色彩空间计算得到的红眼样本点与搜索到的像素点之间的颜色距离进行判断,在所述颜色距离大于第一阈值且小于第二阈值时,所述像素点则为红色像素点。不同的是,对于不同的色彩空间而言,所述第一阈值、第二阈值的取值各有不同,具体在不同的色彩空间中,所述第一阈值、第二阈值取多少,由实际测试而定。
此外,需要说明的是,本实施例中,是由用户借助于图像处理软件中的辅助工具通过单次点击的方式获得红眼样本点,而在其他实施例中,也可以由用户通过多次点击获得多个红眼样本点,对获得的每一红眼样本点而言都存在包含所述红眼样本点的预定子范围,对每一个红眼样本点所对应的预定子范围求并集所获得的范围,为最终包含多个红眼样本点的预定范围。然后基于该预定范围搜索像素点,并计算搜索到的像素点与多个红眼样本点之间的颜色距离以确定红色像素点。
通过上述的方式确定了红色像素点,所述红色像素点所在的区域即为检测到的红眼区域。检测到红眼区域后,接下来对所述红眼区域进行纠正,即去除所述红眼区域。
请参见图4,图4是本发明实施例一的去除红眼的方法的流程示意图,如图4所示,所述去除红眼的方法包括:
步骤S11:获取眼部图像中的红眼样本点。
步骤S12:搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离。
步骤S13:基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关。
步骤S14:基于所述颜色距离确定黑色像素点,利用所述黑色像素点对所述红眼区域进行纠正。
本实施例中,执行步骤S11~S13检测红眼区域与上述的检测红眼的过程相类似,此处不再赘述。
执行步骤S14:基于所述颜色距离确定黑色像素点,利用所述黑色像素点对所述红眼区域进行纠正。通过上述的步骤S11和S12搜索了包含所述红眼样本点的预定范围内的像素点,具体的搜索过程可以参见上述在检测红眼的方法中的描述。本实施例中,仍以眼部图像所在的色彩空间为RGB空间进行相应的说明,则所述颜色距离的获取方式与上述步骤S12中相同,不同的是,对于搜索到的像素点而言,当其与所述红眼样本点之间的颜色距离大于第三阈值且小于第四阈值时,则该搜索到的像素点为黑色像素点。对于RGB空间所述第三阈值为20,所述第四阈值为40。也即当搜索到的像素点与所述红眼样本点之间的颜色距离大于20小于40时,该像素点为黑色像素点。而对于与所述红眼样本点的颜色距离等于20的像素点可以为黑色像素点也可以不为黑色像素点,同样地,对于与所述红眼样本点的颜色距离等于40的像素点,可以为黑色像素点也可以不为黑色像素点,当像素点与所述红眼样本点之间的颜色距离等于第三阈值或第四阈值时,是否确定该像素点为黑色像素点则取决于红眼区域检测时的精度需求。
此外,由于本实施例中是利用搜索到的黑色像素点对红眼区域进行纠正,故搜索到的黑色像素点越精确则纠正后的红眼区域的效果就越好,故本实施例中确定黑色像素点时,也可以在不同的色彩空间进行,具体计算公式可以参见上述的CIELab空间或HSV空间或YUV空间中红眼样本点与搜索到的像素点之间的颜色距离的计算公式。只不过对应于不用的色彩空间,第三阈值和第四阈值的取值有所不同,具体取何值由实际测试而定。
本实施例中,利用所述黑色像素点对所述红眼区域进行纠正具体通过如下公式进行:
R new = α * G old + B old 2 + ( 1 -α ) * R ‾ black
G new = α * G old + ( 1 - α ) * G black * R new R ‾ black
B new = α * B old + ( 1 - α ) * B ‾ black * R new R ‾ black
其中,Rnew、Gnew、Bnew分别为所述红眼区域中的像素点在纠正后的红通道值、绿通道值、蓝通道值,Gold、Bold分别为所述红眼区域中的像素点在纠正前的绿通道值、蓝通道值,也即检测到的红眼区域中红色像素点的绿通道值和蓝通道值。
分别为黑色像素点的红通道值平均值、绿通道值平均值、蓝通道值平均值,具体地,就是对搜索到的所有的黑色像素点的红通道值相加并除以黑色像素点的总数获得红通道值平均值、对搜索到的所有的黑色像素点的绿通道值相加并除以黑色像素点的总数获得绿通道值平均值、对搜索到的所有的黑色像素点的蓝通道值相加并除以黑色像素点的总数获得蓝通道值平均值。α为权重因子,α∈[0,1]。
通过上述的纠正方法,对检测到的红眼区域进行纠正,且采用黑色像素点和纠正前的红色像素点的绿通道值、蓝通道值对红眼区域进行纠正,由于其兼顾了红色像素点自身及其周围的黑色像素点的像素值,对纠正后的像素点的红绿蓝三通道值进行了相应的调整,故,实现了对纠正后的红眼区域的去饱和效果,且纠正后的红眼区域的比较自然,效果较好。
对应于上述的检测红眼的方法,本发明实施例还提供一种检测红眼的装置,请参见图5,图5是本发明实施例一的检测红眼的装置的结构示意图,如图5所示,所述检测红眼的装置1包括:
获取单元10,用于获取眼部图像中的红眼样本点。
搜索计算单元11,与所述获取单元10相连,用于搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离,所述预定范围与所述眼部图像的分辨率相关。
红色像素点确定单元12,与所述搜索计算单元11相连,用于基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域。
本实施例中,所述搜索计算单元11包括:
第一搜索子单元110,与所述获取单元10相连,用于搜索中心像素点的预定邻域的像素点,所述中心像素点位于所述预定范围内。
第一计算单元111,与所述第一搜索子单元110、红色像素点确定单元12相连,用于计算搜索到的像素点与所述红眼样本点之间的颜色距离。
第一控制单元112,与所述第一搜索子单元110、第一计算单元111相连,用于在所述第一搜索子单元110搜索到的像素点所在的区域未超出所述预定范围时,控制所述第一搜索子单元110、第一计算单元111工作;其中,第一次搜索的中心像素点为所述红眼样本点,以后各次搜索的中心像素点为前一次搜索到的像素点。
本实施例中,所述第一搜索子单元110搜索中心像素点的预定邻域可以为四邻域,也可以为八邻域。本实施例中,优选地,所述第一搜索子单元110搜索中心像素点的预定邻域的未被搜索过的像素点。
在其他实施例中,所述搜索计算单元包括:
第二搜索子单元(图中未示出),用于以所述红眼样本点为中心搜索预定邻域的像素点。
第二计算单元(图中未示出),与所述第二搜索子单元相连,用于计算所述像素点与所述红眼样本点之间的颜色距离。
第二控制单元(图中未示出),与所述第二搜索子单元、第二计算单元相连,用于在所述第二搜索子单元搜索到的像素点所在区域未超出所述预定范围时,增大所述预定邻域并控制所述第二搜索子单元、第二计算单元工作。
本实施例中,所述检测红眼的装置1还包括:色彩空间转换单元(图中未示出),用于在所述获取单元10获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换。所述搜索计算单元11用于计算转换后的色彩空间中所述像素点与所述红眼样本点之间的颜色距离。
本实施例中,若所述眼部图像的色彩空间为RGB空间,所述色彩空间转换单元用于将所述眼部图像转换至CIELab空间、HSV空间、YUV空间中的任意一种色彩空间。
具体地,若所述色彩空间转换单元将所述眼部图像转换至CIELab空间,则所述搜索计算单元11通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( l - l s ) 2 + ( a - a s ) 2 + ( b - b s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,l、a、b分别表示像素点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围,ls、as、bs分别表示红眼样本点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围。
若所述色彩空间转换单元将所述眼部图像转换至HSV空间,则所述搜索计算单元11通过如下公式计算所述像素点与所述红眼样本点之间的颜色距
d = α 1 ( v - v s ) 2 + β 1 ( s - s s ) 2 + ( h - h s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,h、s、v分别表示像素点的色调、饱和度和亮度,hs、ss、vs分别表示红眼样本点的色调、饱和度和亮度,α1、β1表示权重系数。
若所述色彩空间转换单元将所述眼部图像转换至YUV空间,则所述搜索计算单元11通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = α 2 ( y - y s ) 2 + β 2 ( u - u s ) 2 + ( v - v s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,y表示像素点的亮度u、v表示像素点的色度,ys表示红眼样本点的亮度、us、vs表示红眼样本点的色度,α2、β2表示权重系数。
本实施例中,所述红色像素点确定单元12包括:第一判断单元(图中未示出),用于在所述颜色距离大于第一阈值且小于第二阈值时,判断所述像素点为红色像素点。
本实施例中,在所述眼部图像的色彩空间为RGB空间时,所述搜索计算单元11通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值。此时,所述第一判断单元用于在所述颜色距离大于1且小于20时,判断所述像素点为红色像素点。
需要说明的是,对于上述的不同的色彩空间,其对应了相应的计算所述红眼样本点与搜索到的像素点之间的颜色距离公式,此时第一判断单元基于第一阈值和第二阈值判断搜索到的像素点为红色像素点时,所述第一阈值、第二阈值的取值由在该色彩空间进行的实际测试而定。
本实施例中,所述检测红眼的装置的工作过程可以参见上述的检测红眼的方法进行,此处不再赘述。
对应于上述的去除红眼的方法,本发明实施例还提供一种去除红眼的装置,请参见图6,图6是本发明实施例一的去除红眼的装置的结构示意图,如图6所示,所述去除红眼的装置包括:
上述的检测红眼的装置1。
纠正单元13,与所述检测红眼的装置1相连,用于对所述红眼区域进行纠正。
本实施例中,为了使得纠正后的红眼区域的效果较好,所述去除红眼的装置还包括:
黑色像素点确定单元14,与所述检测红眼的装置1相连,用于基于所述颜色距离确定黑色像素点。
所述纠正单元13,与所述黑色像素点确定单元14相连,用于利用所述黑色像素点对所述红眼区域进行纠正。
本实施例中,所述黑色像素点确定单元14包括:第二判断单元(图中未示出),用于在所述颜色距离大于第三阈值且小于第四阈值时,判断所述像素点为黑色像素点。
本实施例中,在所述眼部图像的色彩空间为RGB空间,所述搜索计算单元11通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值。此时,所述第二判断单元用于在所述颜色距离大于20且小于40时,判断所述像素点为黑色像素点。
所述纠正单元13通过如下公式对所述红眼区域进行纠正:
R new = α * G old + B old 2 + ( 1 -α ) * R ‾ black
G new = α * G old + ( 1 - α ) * G black * R new R ‾ black
B new = α * B old + ( 1 - α ) * B ‾ black * R new R ‾ black
其中,Rnew、Gnew、Bnew分别为所述红眼区域中的像素点在纠正后的红通道值、绿通道值、蓝通道值,Gold、Bold分别为所述红眼区域中的像素点在纠正前的绿通道值、蓝通道值,也即检测到的红眼区域中红色像素点的绿通道值和蓝通道值。
分别为黑色像素点的红通道值平均值、绿通道值平均值、蓝通道值平均值。α为权重因子,α∈[0,1]。
需要说明的是,本实施例中给出了在不同的色彩空间计算所述红眼样本点与搜索到的像素点之间的颜色距离的公式,而基于所述颜色距离来判断红色像素点或黑色像素点时的第一阈值、第二阈值、第三阈值和第四阈值的取值则是根据实际测试而定的,因此,所述第一阈值、第二阈值、第三阈值和第四阈值的取值不应作为对本发明技术方案的限定。
本实施例中,去除红眼的装置的工作过程可以参见上述的去除红眼的方法进行,此处不再展开具体详述。
实施例二
本实施例中,检测红眼的方法与实施例一中相类似,不同的是,本实施例中去除红眼的方法与实施例一中不相同,其去除红眼的方法还包括了对纠正的红眼区域进行相应的判断,以判断纠正后的红眼区域是否为误纠正区域,在纠正的区域为误纠正区域时,对其进行抑制。
请参见图7,图7是本发明实施例二的去除红眼的方法的流程示意图,如图7所示,所述去除红眼的方法包括:
步骤S11:获取眼部图像中的红眼样本点。
步骤S12:搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离。
步骤S13:基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关。
步骤S14′:对所述红眼区域进行纠正。
步骤S15:基于纹理分析获取纠正后的红眼区域中的误纠正区域。
步骤S16:利用中值滤波对所述误纠正区域进行抑制。
本实施例中,步骤S11~S13与实施例一中相类似,故此处不再展开具体详述。执行步骤S14′对所述红眼区域进行纠正,可以利用现有技术对红眼区域进行纠正,而在本实施例中,可以利用检测到的红眼区域附近的黑色眼珠区域的像素点的像素值的均值来代替红眼区域中的像素点的像素值。所述黑色眼珠区域是指与所述红眼区域具有嵌套关系的区域,所述黑色眼珠区域可以利用黑色眼珠区域的颜色特征和形状特征及与所述红眼区域的位置关系来获取,如通过不同的颜色分割方法来获取黑色区域,然后对获取的黑色区域的形状及位置关系进行判断,若获取的黑色区域的形状为圆形、类圆形、椭圆形、类椭圆形中的一种且与检测到的红眼区域具有嵌套关系,则该黑色区域为黑色眼珠区域。在获取了黑色眼珠区域后,取位于所述红眼区域附近的黑色眼珠区域中的6~12个像素点,计算6~12个像素点的像素值的均值,以6个像素点为例,则是将6个像素点的像素值相加并除以6,以获得6个像素点的像素值的均值,并以此均值作为所述红眼区域的像素点的像素值。
进一步,本实施例中,为了降低对检测到的红眼区域的误纠正率,执行步骤S15,基于纹理分析获取纠正后的红眼区域中的误纠正区域。
具体地,获取检测到的红眼区域中预定范围内的像素点的红色度的均匀程度,所述预定范围关联于所述红眼区域的大小。
若所述均匀程度达到预设值,则所述纠正后的红眼区域为误纠正区域。
所述检测到的红眼区域即为与纠正后的红眼区域对应的检测到的红眼区域。所述检测到的红眼区域中的预定范围,可以为所述红眼区域的二分之一到四分之一,优选地,取所述红眼区域的二分之一,且所述预定范围可以为所述红眼区域中的任意区域,只要确保预定范围仍属于所述红眼区域且为红眼区域的二分之一到四分之一即可。本实施例中,所述检测到的红眼区域中预定范围内的像素点的红色度的均匀程度通过如下方式获得:
I a = Σ i = 1 N I i N , E = Σ i = 1 N ( I i - I a ) 2 N
其中,Ii为第i个像素点的红色度,Ia为检测到的红眼区域中预定范围内的像素点的红色度的平均值,N为预定范围内的像素点的个数,E为检测到的红眼区域中预定范围内的像素点的红色度的均匀程度。
一般来讲,如果纠正后的红眼区域有误,很可能是将眼唇部分误检为红眼区域进而对其进行了纠正,因此,对检测到的(纠正前的)红眼区域中预定范围内的像素点的红色度的均匀程度进行相应的检测,若该预定范围内的像素点的红色度的均匀程度较差,则证明该区域应为眼唇,本实施例中以检测到的红眼区域中预定范围内的像素点的红色度的标准方差来衡量红色度的均匀程度,故所述红色度的标准方差越小则代表该区域的红色度的均匀程度越好,因此,对于采用像素点的红色度的标准方差来衡量红色度的均匀程度而言,红色度的均匀程度达到预设值,则是指在检测到的红眼区域中预定范围内的像素点的红色度的标准方差大于第一预设阈值时,判断纠正后的红眼区域有误。本实施例中所述第一预设阈值大于或等于0.1且小于或等于0.3。
若采用其他的方式衡量检测到的红眼区域中预定范围内的像素点的红色度的均匀程度,如采用红色纹理的分散程度来衡量预定范围内的像素点的红色度的均匀程度的话,则该区域的红色纹理的分散程度越大,均匀程度就越好,此时对于采用红色纹理的分散程度来衡量预定范围内的像素点的红色度的均匀程度而言,红色度的均匀程度达到预设值,则是指在检测到的红眼区域中预定范围内的像素点的红色纹理的分散程度小于第二预设阈值时,判断检测到的红眼区域有误。所述第二预设阈值由实际测试而定。
在确定了误纠正的红眼区域后,执行步骤S16,利用中值滤波对所述误纠正区域进行抑制。具体地设置所述误纠正区域中的像素点的色度值为所述误纠正区域中的像素点在纠正前的色度值的中值。
本实施例中,获取的眼部图像所在的空间为RGB空间,并基于RGB空间计算了红眼样本点与搜索到的像素点之间的颜色距离来确定红色像素点进而检测红眼区域。然而,由于人眼视觉系统的特性,对检测到的红眼区域进行纠正时,通常是在YUV空间进行,将红眼区域纠正后再将其转换至RGB空间。故,本实施例中对误纠正区域进行抑制时,首先将误纠正区域中的像素点在纠正前该像素点的R、G、B的值转换为YUV空间中的Y、U、V值。另外,对误纠正区域进行抑制时,亮度的影响并不是很大,故对误纠正区域进行抑制时,可以只考虑色度(亮度不变),也可以对亮度和色度都考虑。
因此,对所述误纠正区域进行抑制时,具体地可以计算纠正前的区域中的所有像素点的色度值,并将所有色度值的中值作为误纠正区域中的像素点的色度值(亮度值不变)。误纠正区域中的像素点的色度值确定后,再将误纠正区域中的像素点的色度值和亮度值转换为相应的R、G、B的值,以完成对所述误纠正区域的抑制。
或者,计算纠正前的区域中的所有像素点的色度值和亮度值,并将所有色度值的中值、亮度值的中值分别作为误纠正区域中的像素点的色度值和亮度值。误纠正区域中的像素点的色度值和亮度值确定后,再将误纠正区域中的像素点的色度值和亮度值转换为相应的R、G、B的值,以完成对所述误纠正区域的抑制。
本实施例中,从RGB空间转换至YUV空间通过如下公式进行:
Y U V = 0.299 0.587 0.114 - 0.147 - 0.289 0.436 0.615 - 0.515 - 0.100 R G B
从YUV空间转换至RGB空间通过如下公式进行:
R G B = 1 0 . 000 1 . 140 1 - 0.396 - 0 . 581 1 2.029 0.000 R G B
此外,本实施例中,在利用中值滤波对所述误纠正区域进行抑制时。也可以设置所述误纠正区域中的像素点的色度值为所述误纠正区域中设定范围的像素点在纠正前的色度值的中值。即不用误纠正区域中所有像素点在纠正前的色度值的中值来对所述误纠正区域进行抑制,而是只利用所述误纠正区域中设定范围的像素点在纠正前的色度值的中值来对所述误纠正区域进行抑制,所述设定范围可以与上述的获取检测到的红眼区域中预定范围内的像素点的红色度的均匀程度时的预定范围的大小相同。只利用所述误纠正区域中设定范围的像素点在纠正前的色度值的中值来对误纠正区域进行抑制,在一定程度上可以减小运算量。
对应于上述的去除红眼的方法,本实施例还提供一种去除红眼的装置,请参见图8,图8是本发明实施例二的去除红眼的装置的结构示意图,如图8所示,所述去除红眼的装置包括:
第一获取单元20,用于获取眼部图像中的红眼样本点。
搜索计算单元21,与所述第一获取单元20相连,用于搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离,所述预定范围与所述眼部图像的分辨率相关。
红色像素点确定单元22,与所述搜索计算单元21相连,用于基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域。
纠正单元23,与所述红色像素点确定单元22相连,用于对所述红眼区域进行纠正。
第二获取单元24,与所述纠正单元23相连,用于基于纹理分析获取纠正后的红眼区域中的误纠正区域。
抑制单元25,与所述第二获取单元24相连,用于利用中值滤波对所述误纠正区域进行抑制。
本实施例中所述去除红眼的装置的工作过程可以参见上述的去除红眼的方法进行,此处不再赘述。
综上所述,本发明的技术方案至少具有以下有益效果:
相对于自动去除红眼的方式而言,由于先确定了红眼样本点并搜索预定范围内的像素点,且根据颜色距离确定了预定范围内的红色像素点,因此,降低了检测红眼时的漏检率和误检测率,进而也降低了去除红眼时的漏纠正率和误纠正率。相对于手动去除红眼的方式而言,由于只需要确定红眼样本点进而在包括所述红眼样本点的预定范围内进行搜索,而无需手动地逐点检测和去除红眼,因此,减少了人工检测和去除红眼的次数,在很大程度上提高了检测红眼和去除红眼的效率。
进一步地,通过以所述红眼样本点为中心,搜索预定邻域内的像素点,以基于颜色距离确定红色像素点,实现起来较为简单,计算量小,且加快了对红色像素点的搜索速度,因此,提高了检测红眼的效率,进而也相应地提高了去除红眼的效率。
进一步地,在获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换,基于不同的色彩空间计算所述红眼样本点与预定范围内的像素点之间的颜色距离以确定红色像素点。由于色彩空间不同,故确定红色像素点时的颜色距离的阈值也有所不同,进而可以在不同色彩空间精确地检测红眼区域,降低检测红眼时的漏检率和误检率,也降低了去除红眼时的漏纠正率和误纠正率。并且,由于可以适用不同色彩空间,因而具有很大的灵活性。
进一步地,对搜索到的预定范围内的像素点,基于所述颜色距离确定黑色像素点,并利用所述黑色像素点自适应地对检测到的红眼区域进行纠正,因而对红眼区域的纠正效果较好。
本发明虽然已以较佳实施例公开如上,但其并不是用来限定本发明,任何本领域技术人员在不脱离本发明的精神和范围内,都可以利用上述揭示的方法和技术内容对本发明技术方案做出可能的变动和修改,因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化及修饰,均属于本发明技术方案的保护范围。

Claims (28)

1.一种去除红眼的方法,其特征在于,包括:
检测红眼区域,包括:获取眼部图像中的红眼样本点;搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离;基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域,所述预定范围与所述眼部图像的分辨率相关;
基于所述颜色距离确定黑色像素点;
利用所述黑色像素点对所述红眼区域进行纠正,通过如下公式进行:
R n e w = α * G o l d + B o l d 2 + ( 1 - α ) * R ‾ b l a c k
G n e w = α * G o l d + ( 1 - α ) * G ‾ b l a c k * R n e w R ‾ b l a c k
B n e w = α * B o l d + ( 1 - α ) * B ‾ b l a c k * R n e w R ‾ b l a c k
其中,Rnew、Gnew、Bnew分别为所述红眼区域中的像素点在纠正后的红通道值、绿通道值、蓝通道值,Gold、Bold分别为所述红眼区域中的像素点在纠正前的绿通道值、蓝通道值、分别为黑色像素点的红通道值平均值、绿通道值平均值、蓝通道值平均值,α为权重因子,α∈[0,1]。
2.如权利要求1所述的去除红眼的方法,其特征在于,所述基于所述颜色距离确定黑色像素点包括:
若所述颜色距离大于第三阈值且小于第四阈值,则所述像素点为黑色像素点。
3.如权利要求2所述的去除红眼的方法,其特征在于,所述眼部图像的色彩空间为RGB空间,所述计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值;
所述第三阈值为20,所述第四阈值为40。
4.如权利要求1所述的去除红眼的方法,其特征在于,所述搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离包括:
搜索中心像素点的预定邻域的像素点,所述中心像素点位于所述预定范围内;
计算搜索到的像素点与所述红眼样本点之间的颜色距离;
重复上述过程,直至搜索到的像素点所在的区域超出所述预定范围,其中,第一次搜索的中心像素点为所述红眼样本点,以后各次搜索的中心像素点为前一次搜索到的像素点。
5.如权利要求4所述的去除红眼的方法,其特征在于,所述预定邻域为四邻域或八邻域。
6.如权利要求4所述的去除红眼的方法,其特征在于,所述搜索中心像素点的预定邻域的像素点是指搜索中心像素点的预定邻域的未被搜索过的像素点。
7.如权利要求1所述的去除红眼的方法,其特征在于,所述搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离包括:
以所述红眼样本点为中心搜索预定邻域的像素点;
计算所述像素点与所述红眼样本点之间的颜色距离;
增大所述预定邻域,重复上述过程,直至搜索到的像素点所在区域超出所述预定范围。
8.如权利要求1所述的去除红眼的方法,其特征在于,还包括:在获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换,所述像素点与所述红眼样本点之间的颜色距离是指在转换后的色彩空间中所述像素点与所述红眼样本点之间的颜色距离。
9.如权利要求8所述的去除红眼的方法,其特征在于,所述眼部图像的色彩空间为RGB空间,所述对眼部图像进行色彩空间转换包括:将所述眼部图像转换至CIELab空间、HSV空间、YUV空间中的任意一种色彩空间。
10.如权利要求9所述的去除红眼的方法,其特征在于,转换后的眼部图像的色彩空间为CIELab空间,所述计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = ( l - l s ) 2 + ( a - a s ) 2 + ( b - b s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,l、a、b分别表示像素点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围,ls、as、bs分别表示红眼样本点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围。
11.如权利要求9所述的去除红眼的方法,其特征在于,转换后的眼部图像的色彩空间为HSV空间,所述计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = α 1 ( v - v s ) 2 + β 1 ( s - s s ) 2 + ( h - h s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,h、s、v分别表示像素点的色调、饱和度和亮度,hs、ss、vs分别表示红眼样本点的色调、饱和度和亮度,α1、β1表示权重系数。
12.如权利要求9所述的去除红眼的方法,其特征在于,转换后的眼部图像的色彩空间为YUV空间,所述计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = α 2 ( y - y s ) 2 + β 2 ( u - u s ) 2 + ( v - v s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,y表示像素点的亮度u、v表示像素点的色度,ys表示红眼样本点的亮度、us、vs表示红眼样本点的色度,α2、β2表示权重系数。
13.如权利要求1所述的去除红眼的方法,其特征在于,所述基于所述颜色距离确定红色像素点包括:
若所述颜色距离大于第一阈值且小于第二阈值,则所述像素点为红色像素点。
14.如权利要求13所述的去除红眼的方法,其特征在于,所述眼部图像的色彩空间为RGB空间,所述计算所述像素点与所述红眼样本点之间的颜色距离通过如下公式进行:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值;
所述第一阈值为1,所述第二阈值为20。
15.一种去除红眼的装置,其特征在于,包括:
检测红眼的装置,所述检测红眼的装置包括:获取单元,用于获取眼部图像中的红眼样本点;搜索计算单元,用于搜索包括所述红眼样本点的预定范围内的像素点,计算所述像素点与所述红眼样本点之间的颜色距离,所述预定范围与所述眼部图像的分辨率相关;
红色像素点确定单元,用于基于所述颜色距离确定红色像素点,以所述红色像素点所在的区域为红眼区域;
黑色像素点确定单元,用于基于所述颜色距离确定黑色像素点;
纠正单元,用于利用所述黑色像素点对所述红眼区域进行纠正,通过如下公式对所述红眼区域进行纠正:
R n e w = α * G o l d + B o l d 2 + ( 1 - α ) * R ‾ b l a c k
G n e w = α * G o l d + ( 1 - α ) * G ‾ b l a c k * R n e w R ‾ b l a c k
B n e w = α * B o l d + ( 1 - α ) * B ‾ b l a c k * R n e w R ‾ b l a c k
其中,Rnew、Gnew、Bnew分别为所述红眼区域中的像素点在纠正后的红通道值、绿通道值、蓝通道值,Gold、Bold分别为所述红眼区域中的像素点在纠正前的绿通道值、蓝通道值、分别为黑色像素点的红通道值平均值、绿通道值平均值、蓝通道值平均值,α为权重因子,α∈[0,1]。
16.如权利要求15所述的去除红眼的装置,其特征在于,所述黑色像素点确定单元包括:第二判断单元,用于在所述颜色距离大于第三阈值且小于第四阈值时,判断所述像素点为黑色像素点。
17.如权利要求16所述的去除红眼的装置,其特征在于,所述眼部图像的色彩空间为RGB空间,所述搜索计算单元通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值;
所述第二判断单元用于在所述颜色距离大于20且小于40时,判断所述像素点为黑色像素点。
18.如权利要求15所述的去除红眼的装置,其特征在于,所述搜索计算单元包括:
第一搜索子单元,用于搜索中心像素点的预定邻域的像素点,所述中心像素点位于所述预定范围内;
第一计算单元,用于计算搜索到的像素点与所述红眼样本点之间的颜色距离;
第一控制单元,用于在所述第一搜索子单元搜索到的像素点所在的区域未超出所述预定范围时,控制上述单元工作;其中,第一次搜索的中心像素点为所述红眼样本点,以后各次搜索的中心像素点为前一次搜索到的像素点。
19.如权利要求18所述的去除红眼的装置,其特征在于,所述预定邻域为四邻域或八邻域。
20.如权利要求18所述的去除红眼的装置,其特征在于,所述第一搜索子单元搜索中心像素点的预定邻域的未被搜索过的像素点。
21.如权利要求15所述的去除红眼的装置,其特征在于,所述搜索计算单元包括:
第二搜索子单元,用于以所述红眼样本点为中心搜索预定邻域的像素点;
第二计算单元,用于计算所述像素点与所述红眼样本点之间的颜色距离;
第二控制单元,用于在所述第二搜索子单元搜索到的像素点所在区域未超出所述预定范围时,增大所述预定邻域并控制上述单元工作。
22.如权利要求15所述的去除红眼的装置,其特征在于,还包括:色彩空间转换单元,用于在所述获取单元获取眼部图像中的红眼样本点后对所述眼部图像进行色彩空间转换;
所述搜索计算单元用于计算转换后的色彩空间中所述像素点与所述红眼样本点之间的颜色距离。
23.如权利要求22所述的去除红眼的装置,其特征在于,所述眼部图像的色彩空间为RGB空间,所述色彩空间转换单元用于将所述眼部图像转换至CIELab空间、HSV空间、YUV空间中的任意一种色彩空间。
24.如权利要求23所述的去除红眼的装置,其特征在于,所述色彩空间转换单元将所述眼部图像转换至CIELab空间,所述搜索计算单元通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( l - l s ) 2 + ( a - a s ) 2 + ( b - b s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,l、a、b分别表示像素点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围,ls、as、bs分别表示红眼样本点的亮度通道、从红色至绿色的范围、从蓝色至黄色的范围。
25.如权利要求23所述的去除红眼的装置,其特征在于,所述色彩空间转换单元将所述眼部图像转换至HSV空间,所述搜索计算单元通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = α 1 ( v - v s ) 2 + β 1 ( s - s s ) 2 + ( h - h s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,h、s、v分别表示像素点的色调、饱和度和亮度,hs、ss、vs分别表示红眼样本点的色调、饱和度和亮度,α1、β1表示权重系数。
26.如权利要求23所述的去除红眼的装置,其特征在于,所述色彩空间转换单元将所述眼部图像转换至YUV空间,所述搜索计算单元通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = α 2 ( y - y s ) 2 + β 2 ( u - u s ) 2 + ( v - v s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,y表示像素点的亮度u、v表示像素点的色度,ys表示红眼样本点的亮度、us、vs表示红眼样本点的色度,α2、β2表示权重系数。
27.如权利要求15所述的去除红眼的装置,其特征在于,所述红色像素点确定单元包括:第一判断单元,用于在所述颜色距离大于第一阈值且小于第二阈值时,判断所述像素点为红色像素点。
28.如权利要求27所述的去除红眼的装置,其特征在于,所述眼部图像的色彩空间为RGB空间,所述搜索计算单元通过如下公式计算所述像素点与所述红眼样本点之间的颜色距离:
d = ( R - R s ) 2 + ( G - G s ) 2 + ( B - B s ) 2
其中,d表示像素点与红眼样本点之间的颜色距离,R、G、B分别表示像素点的红通道值、绿通道值、蓝通道值,Rs、Gs、Bs分别表示红眼样本点的红通道值、绿通道值、蓝通道值;
所述第一判断单元用于在所述颜色距离大于1且小于20时,判断所述像素点为红色像素点。
CN201210021206.3A 2012-01-30 2012-01-30 检测红眼的方法及装置、去除红眼的方法及装置 Active CN103226689B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210021206.3A CN103226689B (zh) 2012-01-30 2012-01-30 检测红眼的方法及装置、去除红眼的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210021206.3A CN103226689B (zh) 2012-01-30 2012-01-30 检测红眼的方法及装置、去除红眼的方法及装置

Publications (2)

Publication Number Publication Date
CN103226689A CN103226689A (zh) 2013-07-31
CN103226689B true CN103226689B (zh) 2016-04-13

Family

ID=48837130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210021206.3A Active CN103226689B (zh) 2012-01-30 2012-01-30 检测红眼的方法及装置、去除红眼的方法及装置

Country Status (1)

Country Link
CN (1) CN103226689B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109801249A (zh) * 2018-12-27 2019-05-24 深圳豪客互联网有限公司 图像融合方法、装置、计算机设备和存储介质
CN113034509A (zh) * 2021-02-26 2021-06-25 北京达佳互联信息技术有限公司 图像处理方法及装置
CN115564971B (zh) * 2022-07-18 2023-06-16 广东柏奴斯股份有限公司 一种基于灰度共生矩阵的织带阻燃性能测试方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102171723A (zh) * 2008-08-01 2011-08-31 惠普开发有限公司 红眼检测的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7403654B2 (en) * 2004-10-04 2008-07-22 Arcsoft, Inc. Enhanced automatic red eye removal

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102171723A (zh) * 2008-08-01 2011-08-31 惠普开发有限公司 红眼检测的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
RGB颜色空间的矢量_角度距离色差公式;杨振亚等;《计算机工程与应用》;20100221;第46卷(第6期);154,155 *
图像的色彩空间研究;文山等;《六盘水师范高等专科学校学报》;20051230;第17卷(第6期);15-18 *

Also Published As

Publication number Publication date
CN103226689A (zh) 2013-07-31

Similar Documents

Publication Publication Date Title
US8184900B2 (en) Automatic detection and correction of non-red eye flash defects
TWI532385B (zh) 白平衡處理方法及其處理裝置
WO2017088365A1 (zh) 一种肤色检测方法及装置
CN103974053B (zh) 一种基于灰点提取的自动白平衡矫正方法
CN103327345B (zh) 白平衡处理方法及其处理装置
US20160063305A1 (en) Image processing device and image processing method
US8285039B2 (en) Image processor
CN104168478B (zh) 基于Lab空间及相关性函数的视频图像偏色检测方法
JP2007097178A (ja) 顔検出による赤目の除去方法
EP1528509A3 (en) Image processing method and apparatus for red eye correction
US8559668B2 (en) Red-eye reduction using facial detection
KR20040047834A (ko) 적목현상 부분을 제거하기 위한 이미지 처리
KR101631012B1 (ko) 화상 처리 장치 및 화상 처리 방법
CN103455790A (zh) 一种基于肤色模型的皮肤识别方法
CN103218615B (zh) 人脸判定方法
CN103226689B (zh) 检测红眼的方法及装置、去除红眼的方法及装置
CN109242792B (zh) 一种基于白色物体的白平衡校对方法
CN110412257B (zh) 一种结合人工标定与星射线算法的试纸块定位方法
CN102088539A (zh) 一种预拍照画质评价方法和系统
CN103226690B (zh) 检测红眼的方法及装置、去除红眼的方法及装置
CN109583330B (zh) 一种用于人脸照片的毛孔检测方法
CN114286014A (zh) 一种图像数据库采集方法
CN104050676B (zh) 一种基于Logistic回归模型的逆光图像检测方法及装置
US8767088B2 (en) White balancing method and image capturing device
CN106409193A (zh) 一种显示屏残影检测系统及其方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20170207

Address after: 200127 room 3205F, building 707, Zhang Yang Road, Pudong New Area Free Trade Zone, Shanghai, China

Patentee after: Xin Xin Finance Leasing Co.,Ltd.

Address before: Zuchongzhi road in Pudong Zhangjiang hi tech park Shanghai 201203 Lane 2288 Pudong New Area Spreadtrum Center Building 1

Patentee before: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20170707

Address after: 100033 room 2062, Wenstin Executive Apartment, 9 Financial Street, Beijing, Xicheng District

Patentee after: Xin Xin finance leasing (Beijing) Co.,Ltd.

Address before: 200127 room 3205F, building 707, Zhang Yang Road, Pudong New Area Free Trade Zone, Shanghai, China

Patentee before: Xin Xin Finance Leasing Co.,Ltd.

EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20130731

Assignee: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

Assignor: Xin Xin finance leasing (Beijing) Co.,Ltd.

Contract record no.: 2018990000163

Denomination of invention: Red eye detection method and device and red eye removing method and device

Granted publication date: 20160413

License type: Exclusive License

Record date: 20180626

EE01 Entry into force of recordation of patent licensing contract
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200306

Address after: 201203 Zuchongzhi Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai 2288

Patentee after: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

Address before: 100033 room 2062, Wenstin administrative apartments, 9 Financial Street B, Xicheng District, Beijing.

Patentee before: Xin Xin finance leasing (Beijing) Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200602

Address after: 361012 unit 05, 8 / F, building D, Xiamen international shipping center, No.97 Xiangyu Road, Xiamen area, China (Fujian) free trade zone, Xiamen City, Fujian Province

Patentee after: Xinxin Finance Leasing (Xiamen) Co.,Ltd.

Address before: 201203 Zuchongzhi Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai 2288

Patentee before: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

EC01 Cancellation of recordation of patent licensing contract
EC01 Cancellation of recordation of patent licensing contract

Assignee: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

Assignor: Xin Xin finance leasing (Beijing) Co.,Ltd.

Contract record no.: 2018990000163

Date of cancellation: 20210301

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20130731

Assignee: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

Assignor: Xinxin Finance Leasing (Xiamen) Co.,Ltd.

Contract record no.: X2021110000010

Denomination of invention: Method and device for detecting red eye, method and device for removing red eye

Granted publication date: 20160413

License type: Exclusive License

Record date: 20210317

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230710

Address after: 201203 Shanghai city Zuchongzhi road Pudong New Area Zhangjiang hi tech park, Spreadtrum Center Building 1, Lane 2288

Patentee after: SPREADTRUM COMMUNICATIONS (SHANGHAI) Co.,Ltd.

Address before: 361012 unit 05, 8 / F, building D, Xiamen international shipping center, 97 Xiangyu Road, Xiamen area, China (Fujian) pilot Free Trade Zone, Xiamen City, Fujian Province

Patentee before: Xinxin Finance Leasing (Xiamen) Co.,Ltd.