CN109035136B - 图像处理方法及装置、存储介质 - Google Patents

图像处理方法及装置、存储介质 Download PDF

Info

Publication number
CN109035136B
CN109035136B CN201810832188.4A CN201810832188A CN109035136B CN 109035136 B CN109035136 B CN 109035136B CN 201810832188 A CN201810832188 A CN 201810832188A CN 109035136 B CN109035136 B CN 109035136B
Authority
CN
China
Prior art keywords
area
pupil
region
highlight
erasing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810832188.4A
Other languages
English (en)
Other versions
CN109035136A (zh
Inventor
王倩
杜俊增
刘宇星
张月娇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201810832188.4A priority Critical patent/CN109035136B/zh
Publication of CN109035136A publication Critical patent/CN109035136A/zh
Application granted granted Critical
Publication of CN109035136B publication Critical patent/CN109035136B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G06T3/04
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Abstract

本公开是关于一种图像处理方法及装置、存储介质,属于图像处理技术应用领域。所述方法包括:对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;识别所述瞳孔区域中的高光区域;对所述高光区域进行抹除处理;在抹除处理后的所述瞳孔区域中添加指定素材。本公开由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,因此避免了瞳孔区域中的高光区域对素材的影响。解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。

Description

图像处理方法及装置、存储介质
技术领域
本公开涉及图像处理技术应用领域,特别涉及一种图像处理方法及装置、存储介质。
背景技术
在对图像进行处理的过程中,为了更好地呈现出人物的神态,通常会对人物瞳孔中的高光区域进行处理。
目前,相关技术中提供了一种高光区域的图像处理方法,通过将不同形状的高光区域的素材直接叠加在图像中的对应位置上,以实现图像中人物更为丰富的神态。
发明内容
本公开实施例提供了一种图像处理方法及装置、存储介质,可以解决相关技术中存在的问题。所述技术方案如下:
根据本公开实施例的第一方面,提供一种图像处理方法,所述方法包括:
对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
识别所述瞳孔区域中的高光区域;
对所述高光区域进行抹除处理;
在抹除处理后的所述瞳孔区域中添加指定素材。
可选的,所述在抹除处理后的所述瞳孔区域中添加指定素材,包括:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
可选的,所述在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,所述方法包括:
获取所述高光区域的形状和面积;
根据所述形状和所述面积,从素材库中获取所述指定素材。
可选的,所述在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,所述方法包括:
获取所述高光区域的形状和面积;
根据所述形状从素材库中获取目标素材;
根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
可选的,所述对所述高光区域进行抹除处理,包括:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
可选的,所述对图像中的人脸进行识别,确定所述人脸中的瞳孔区域,包括:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
可选的,所述对所述高光区域进行抹除处理,包括:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
根据本公开实施例的第二方面,提供一种图像处理装置,其特征在于,所述装置包括:
人脸识别模块,用于对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
高光区域识别模块,用于识别所述瞳孔区域中的高光区域;
处理模块,用于对所述高光区域进行抹除处理;
添加模块,用于在抹除处理后的所述瞳孔区域中添加指定素材。
可选的,所述添加模块,用于:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
可选的,所述装置包括:
第一获取模块,用于在所述添加模块在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,获取所述高光区域的形状和面积;
第二获取模块,用于根据所述形状和所述面积,从素材库中获取所述指定素材。
可选的,所述装置包括:
第三获取模块,用于在所述添加模块在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,获取所述高光区域的形状和面积;
第四获取模块,用于根据所述形状从素材库中获取目标素材;
调整模块,用于根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
可选的,所述处理模块,用于:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
可选的,所述人脸识别模块,用于:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
可选的,所述处理模块,用于:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
根据本公开实施例的第三方面,提供一种图像处理装置,其特征在于,包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
识别所述瞳孔区域中的高光区域;
对所述高光区域进行抹除处理;
在抹除处理后的所述瞳孔区域中添加指定素材。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述可读存储介质在处理组件上运行时,使得处理组件执行如第一方面所述的图像处理方法。
根据本公开实施例的第五方面,提供一种计算机程序产品,其特征在于,所述计算机程序产品中存储有指令,当其在计算机上运行时,使得计算机执行如第一方面所述的图像处理方法。
根据本公开实施例的第六方面,提供一种芯片,其特征在于,所述芯片包括可编程逻辑电路和/或程序指令,当所述芯片运行时用于实现如第一方面所述的图像处理方法。
本公开的实施例提供的技术方案可以包括以下有益效果:通过在识别出瞳孔区域中的高光位置后,对该高光区域进行了抹除处理,然后再在抹除处理后的瞳孔区域中添加指定素材。由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,可以避免瞳孔区域中的高光区域对素材的影响,解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
为了更清楚地说明本公开的实施例,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据一示例性实施例示出的一种图像处理方法的流程图。
图2是根据一示例性实施例示出的另一种图像处理方法的流程图。
图3是根据一示例性实施例示出的一种确定人脸中的瞳孔区域的方法流程图。
图4是根据一示例性实施例示出的一种对高光区域进行抹除处理的方法流程图。
图5是根据一示例性实施例示出的一只人眼中呈现的高光区域的示意图。
图6是根据一示例性实施例示出的图5所示的一只人眼进行抹除处理后的瞳孔区域的示意图。
图7是根据一示例性实施例示出的在图6所示的瞳孔区域中添加指定素材的示意图。
图8是根据一示例性实施例示出的一种图像处理装置的结构示意图。
图9是根据一示例性实施例示出的另一种图像处理装置的结构示意图。
图10是根据一示例性实施例示出的又一种图像处理装置的结构示意图。
图11是根据一示例性实施例示出的一种终端的结构示意图。
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开作进一步地详细描述,显然,所描述的实施例仅仅是本公开一部份实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本公开保护的范围。
人物瞳孔中的高光区域也可以称为眼神光,该高光区域是指眼睛周围的明亮物反射到瞳孔上所形成的亮斑,该高光区域可以使得图像中的人物形象更为生动。不同形状的高光区域可以反应出人物的不同神态。相关技术中提供了一种高光区域的图像处理方法,在终端采集到图像之后,通过将不同形状的高光区域的素材直接叠加在图像中的对应位置上,以实现图像中人物更为丰富的神态。但是,在图像中的对应位置已经存在高光区域时,如果直接在原有的高光区域上直接叠加素材,该叠加的素材可能会出现无法遮盖原有的高光区域的情况,这种情况会导致叠加后所呈现的高光区域失真,难以呈现出该叠加的素材预期可以呈现出的人物神态。
而本公开提供了一种图像处理方法及装置、存储介质可以解决相关技术中存在的问题。本公开实施里提供的图像处理方法可以应用于终端中,该终端可以是手机、平板电脑或者个人电脑等可以显示图像的装置。
请参见图1,该图示出了本发明实施例提供的一种图像处理方法的流程图,该方法可以包括:
步骤101、图像处理装置对图像中的人脸进行识别,确定人脸中的瞳孔区域。
步骤102、图像处理装置识别瞳孔区域中的高光区域。
步骤103、图像处理装置对该高光区域进行抹除处理。
步骤104、图像处理装置在抹除处理后的瞳孔区域中添加指定素材。
可选的,所述在抹除处理后的所述瞳孔区域中添加指定素材,包括:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
可选的,所述在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,所述方法包括:
获取所述高光区域的形状和面积;
根据所述形状和所述面积,从素材库中获取所述指定素材。
可选的,所述在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,所述方法包括:
获取所述高光区域的形状和面积;
根据所述形状从素材库中获取目标素材;
根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
可选的,所述对所述高光区域进行抹除处理,包括:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
可选的,所述对图像中的人脸进行识别,确定所述人脸中的瞳孔区域,包括:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
可选的,所述对所述高光区域进行抹除处理,包括:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
综上所述,本公开实施例提供了一种图像处理方法,在识别出瞳孔区域中的高光位置后,对该高光区域进行了抹除处理,然后再在抹除处理后的瞳孔区域中添加指定素材。由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,可以避免瞳孔区域中的高光区域对素材的影响,解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。
并且,由于该瞳孔区域中最终呈现的显示效果可以由添加的指定素材决定,因此,该最终呈现的显示效果可以更精确的实现该指定素材所预期呈现的人物神态。
请参见图2,该图示出了本发明实施例提供的另一种图像处理方法的流程图,该方法包括:
步骤201、图像处理装置对图像中的人脸进行识别,确定该人脸中的瞳孔区域。
其中,该图像可以为通过终端中的摄像头等成像设备采集到的并显示于终端的显示屏中的图像,该图像可以为实时采集的图像,或者为预先采集并存储于终端中的图像,该图像可以是静态图像或者动态图像,本公开实施例在此不做限制。图像处理装置对终端的显示屏中的图像中的人脸进行识别,以确定出该人脸中的瞳孔区域。
可选的,如图3所示,本步骤可以包括如下子步骤:
子步骤2011、图像处理装置对图像中的人脸进行识别,确定人脸区域。
图像处理装置可以基于人脸识别技术来对图像中的人脸进行识别,以确定出该图像中所包含的人脸区域。具体过程可以参考相关技术,本公开实施例在此不做赘述。
子步骤2012、图像处理装置采集人脸区域的特征点,根据该人脸区域的特征点确定眼部区域。
其中,人脸区域的特征点可以包括用来描述人脸区域中五官的位置以及形状等特征的多个特征点,该多个特征点可以用来描述人脸区域中五官的几何特征。根据人脸区域中五官的相对位置以及形状可以确定出用来描述眼部区域的特征点,根据该眼部区域的特征点可以确定出眼部区域。图像处理装置采集人脸区域的特征点的相关过程可以参考相关技术,本公开实施例在此不做赘述。
子步骤2013、图像处理装置采集眼部区域的特征点,根据眼部区域的特征点确定瞳孔区域。
其中,眼部区域的特征点为可以包括用来描述眼睛轮廓(即眼眶边缘)、虹膜轮廓以及瞳孔轮廓等特征的多个特征点,该多个特征点可以用来描述眼部各个结构的几何特征。根据眼部区域中各个部分的相对位置可以确定出用来描述瞳孔区域的特征点,根据该瞳孔区域的特征点可以确定出瞳孔区域。当然,该眼部区域的特征点也可以包括用来描述眼睛角膜、虹膜以及瞳孔颜色等特征的多个特征点,根据眼部区域中各个结构的颜色来确定瞳孔区域,具体可以参考相关技术,本公开实施例在此不做赘述。
步骤202、图像处理装置识别瞳孔区域中的高光区域。
由于高光区域为眼睛周围的明亮物反射到瞳孔上所形成的亮斑,因此,可以通过确定瞳孔区域中每个像素点的亮度信息来识别出该瞳孔区域中的高光区域。
由于亮度区域中每个像素点的亮度信息可以不同,因此可以设置一个亮度信息的阈值,将瞳孔区域中每个像素点的亮度信息与该阈值进行比较,将大于该阈值的像素点确定为该高光区域中的像素点,多个大于该阈值的像素点可以形成高光区域。
步骤203、图像处理装置对高光区域位于图像中的位置进行追踪。
当图像为动态图像时,为了保证确定出的高光区域的位置的准确性,图像处理装置可以对图像中的高光区域进行追踪,可选的,可以对高光区域的几何中心点进行实时追踪。
步骤204、当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,图像处理装置对该位置上的高光区域进行抹除处理。
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,可以说明图像中的眼部区域中的瞳孔区域处于静止的状态,此时图像处理装置可以再对该位置上的高光区域进行抹除处理。在眼部区域中的瞳孔位置处于静止状态下再对高光区域进行抹除处理可以保证该抹除处理的准确性,避免了由于瞳孔区域在运动中,而误抹除掉瞳孔区域中除高光区域之外的其他区域。
图像处理装置对该位置上的高光区域进行抹除处理,以使得瞳孔区域中,高光区域的颜色与瞳孔区域中的其他区域的颜色分布一致。其中,颜色分布一致可以包括高光区域的颜色与瞳孔区域中的其他区域的颜色一样、近似一样或者颜色渐变等情况,以使得该高光区域与瞳孔区域中的其他区域视觉差距不明显,以实现抹除的视觉效果。
可选的,该抹除处理可以包括多种实现方式,本公开实施例提供了其中一种实现方式,如图4所示,该抹除处理可以包括:
子步骤2041、图像处理装置确定高光区域周围的瞳孔的颜色。
图像处理装置可以获取该高光区域周围的瞳孔区域中某一点像素的像素值,或者多点像素的平均像素值,将该像素值或者平均像素值所对应的颜色确定为该高光区域周围的瞳孔的颜色。
子步骤2042、图像处理装置将高光区域用该瞳孔的颜色填充。
图像处理装置将高光区域用该瞳孔的颜色填充的过程可以包括,将高光区域中的每一个像素的像素值均替换成子步骤2041中所确定的该高光区域周围的瞳孔的颜色对应的像素值。
需要说明的是,上述步骤203为可选步骤,也就是说,在步骤202中,图像处理装置识别瞳孔区域中的高光区域之后,可以直接执行步骤204中,对该高光区域进行抹除处理的操作。本公开实施例在此不做限制。
步骤205、图像处理装置在抹除处理后的瞳孔区域中的指定位置处添加指定素材。
其中,该指定位置是抹除处理前的高光区域的位置。该指定素材的形状和大小均可以与抹除处理前的高光区域对应。由于该抹除处理前的高光区域的形状和大小与瞳孔区域的大小对应,因此,该指定素材的形状和大小也可以均与瞳孔区域的形状和大小对应,在一个可能的实施例中,指定素材的大小可以为瞳孔区域的大小的百分之十五至百分之二十,该比例下的指定素材可以更加生动地呈现出人物的神态。
该指定素材可以从素材库获取,该素材库可以存储于终端中,也可以存储于与终端连接的服务器中,本公开实施例在此不做限制。该素材库中可以存储有目标素材,该目标素材可以与该指定素材的大小相同,也可以与该指定素材的大小不同,以下以这两种情况来分别进行介绍:
第一种、目标素材与该指定素材的大小相同,则在步骤205之前,图像处理方法可以包括:
A1、图像处理装置获取高光区域的形状和面积。
当然,图像处理装置也可以获取瞳孔区域的形状和面积。
A2、图像处理装置根据该形状和该面积,从素材库中获取指定素材。
当图像处理装置获取到瞳孔区域的形状和面积时,可以根据预设比例从素材库中获取指定素材,例如该预设比例为,指定素材的大小为瞳孔区域的大小的百分之十五。
第二种、目标素材与该指定素材的大小不同,则在步骤205之前,图像处理方法可以包括:
B1、图像处理装置获取高光区域的形状和面积。
本步骤可以参考上述步骤A1。
B2、图像处理装置根据形状从素材库中获取目标素材。
B3、图像处理装置根据面积对目标素材的大小进行调整,将调整后的目标素材获取为指定素材。
调整后的目标素材的大小可以与高光区域或者瞳孔区域的大小对应。
在另一个可能的实施例中,图像处理装置从素材库中获取指定素材的过程可以由用户自主执行,由用户根据自己的需求选取对应形状的目标素材,当该目标素材的面积与高光区域的面积不符时,图像处理装置可以执行上述步骤B3来对目标素材的大小进行调整,将调整后的目标素材获取作为指定素材添加在抹除处理后的瞳孔区域中的指定位置处。
以下以另一个实施例来对上述图像处理方法进行描述。
终端(或者用户)开启终端中设置的前置摄像头来采集人脸,同时被触发的还有与该前置摄像头对应设置的前置发光二极管(英文:LightEmittingDiode;简称:LED)灯,该前置LED灯照射在人眼中形成一片高光区域,如图5所示,该图示意性描述了前置LED灯照射到一只人眼中所呈现的高光区域。图像处理装置通过对图像中的人脸进行识别,确定出该人脸中的瞳孔区域,然后识别出瞳孔区域中的高光区域。图像处理装置将识别出的高光区域进行抹除处理,示例的,如图6所示,该图示出了抹除处理后的瞳孔区域。图像处理装置在抹除处理后的瞳孔区域中的指定位置处添加指定素材,示例的,如图7所示。
可选的,图7所示的实施例中,该指定素材的形状为星形,在其他可能的实施例中,该指定素材的形状还可以为圆形、矩形以及月牙形等,本公开实施例在此不做限制。
综上所述,本公开实施例提供了一种图像处理方法,在识别出瞳孔区域中的高光位置后,对该高光区域进行了抹除处理,然后再在抹除处理后的瞳孔区域中添加指定素材。由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,可以避免瞳孔区域中的高光区域对素材的影响,解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。
图8示出了本公开实施例提供的一种图像处理装置300的结构示意图,装置300包括:
人脸识别模块301,用于对图像中的人脸进行识别,确定人脸中的瞳孔区域。
高光区域识别模块302,用于识别瞳孔区域中的高光区域。
处理模块303,用于对高光区域进行抹除处理。
添加模块304,用于在抹除处理后的瞳孔区域中添加指定素材。
可选的,所述添加模块,用于:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
可选的,所述装置包括:
第一获取模块,用于在所述添加模块在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,获取所述高光区域的形状和面积;
第二获取模块,用于根据所述形状和所述面积,从素材库中获取所述指定素材。
可选的,所述装置包括:
第三获取模块,用于在所述添加模块在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,获取所述高光区域的形状和面积;
第四获取模块,用于根据所述形状从素材库中获取目标素材;
调整模块,用于根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
可选的,所述处理模块,用于:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
可选的,所述人脸识别模块,用于:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
可选的,所述处理模块,用于:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
综上所述,本公开实施例提供了一种图像处理装置,在识别出瞳孔区域中的高光位置后,对该高光区域进行了抹除处理,然后再在抹除处理后的瞳孔区域中添加指定素材。由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,可以避免瞳孔区域中的高光区域对素材的影响,解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。
可选的,添加模块304,用于:
在抹除处理后的瞳孔区域中的指定位置处添加指定素材,指定位置是抹除处理前的高光区域的位置。
可选的,如图9所示,装置300包括:
第一获取模块305,用于在添加模块304在抹除处理后的瞳孔区域中的指定位置处添加指定素材之前,获取高光区域的形状和面积。
第二获取模块306,用于根据形状和面积,从素材库中获取指定素材。
可选的,如图10所示,装置300包括:
第三获取模块307,用于在添加模块304在抹除处理后的瞳孔区域中的指定位置处添加所述指定素材之前,获取高光区域的形状和面积。
第四获取模块308,用于根据形状从素材库中获取目标素材。
调整模块309,用于根据该面积对目标素材的大小进行调整,将调整后的目标素材获取为指定素材。
可选的,处理模块303,用于:
对高光区域位于图像中的位置进行追踪。
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对该位置上的高光区域进行抹除处理。
可选的,人脸识别模块301,用于:
对图像中的人脸进行识别,确定人脸区域。
采集人脸区域的特征点,根据人脸区域的特征点确定眼部区域。
采集眼部区域的特征点,根据眼部区域的特征点确定所述瞳孔区域。
可选的处理模块303,用于:
确定高光区域周围的瞳孔的颜色。
将高光区域用瞳孔的颜色填充。
综上所述,本公开实施例提供了一种图像处理装置,在识别出瞳孔区域中的高光位置后,对该高光区域进行了抹除处理,然后再在抹除处理后的瞳孔区域中添加指定素材。由于该指定素材是在抹除高光区域后的瞳孔区域中添加的,可以避免瞳孔区域中的高光区域对素材的影响,解决了相关技术中,在原有的高光区域上直接叠加素材,而可能导致叠加后所呈现的素材失真的问题,达到提高在瞳孔区域叠加的素材的显示效果。
图11是根据一示例性实施例示出的一种终端400的框图。例如,终端400可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图11,终端400可以包括以下一个或多个组件:处理组件402,存储器404,电源组件406,多媒体组件408,音频组件410,输入/输出(I/O)的接口412,传感器组件414,以及通信组件416。
处理组件402通常控制终端400的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件402可以包括一个或多个模块,便于处理组件402和其他组件之间的交互。例如,处理组件402可以包括多媒体模块,以方便多媒体组件408和处理组件402之间的交互。
存储器404被配置为存储各种类型的数据以支持在终端400的操作。这些数据的示例包括用于在终端400上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件406为终端400的各种组件提供电力。电源组件406可以包括电源管理系统,一个或多个电源,及其他与为终端400生成、管理和分配电力相关联的组件。
多媒体组件408包括在所述终端400和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件408包括一个前置摄像头和/或后置摄像头。当终端400处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件410被配置为输出和/或输入音频信号。例如,音频组件410包括一个麦克风(MIC),当终端400处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中,音频组件410还包括一个扬声器,用于输出音频信号。
I/O接口412为处理组件402和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件414包括一个或多个传感器,用于为终端400提供各个方面的状态评估。例如,传感器组件414可以检测到终端400的打开/关闭状态,组件的相对定位,例如所述组件为终端400的显示器和小键盘,传感器组件414还可以检测终端400或终端400一个组件的位置改变,用户与终端400接触的存在或不存在,终端400方位或加速/减速和终端400的温度变化。传感器组件414可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件414还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件416被配置为便于终端400和其他设备之间有线或无线方式的通信。终端400可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件416还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端400可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器404,上述指令可由终端400的处理器420执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种计算机可读存储介质,当所述可读存储介质中的指令由终端400的处理器执行时,使得终端400能够执行一种图像处理方法,所述方法包括:
对图像中的人脸进行识别,确定人脸中的瞳孔区域;
识别瞳孔区域中的高光区域;
对高光区域进行抹除处理;
在抹除处理后的瞳孔区域中添加指定素材。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (13)

1.一种图像处理方法,其特征在于,所述方法包括:
对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
识别所述瞳孔区域中的高光区域;
对所述高光区域进行抹除处理;
获取所述高光区域的形状和面积;
根据所述形状和所述面积,从素材库中获取指定素材;
在抹除处理后的所述瞳孔区域中添加所述指定素材,所述指定素材的形状和大小均与抹除处理前的所述高光区域对应;
所述对所述高光区域进行抹除处理,包括:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
2.根据权利要求1所述的方法,其特征在于,所述在抹除处理后的所述瞳孔区域中添加指定素材,包括:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
3.根据权利要求2所述的方法,其特征在于,所述在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,所述方法包括:
获取所述高光区域的形状和面积;
根据所述形状从素材库中获取目标素材;
根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
4.根据权利要求1至3任一所述的方法,其特征在于,所述对图像中的人脸进行识别,确定所述人脸中的瞳孔区域,包括:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
5.根据权利要求1所述的方法,其特征在于,所述对所述高光区域进行抹除处理,包括:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
6.一种图像处理装置,其特征在于,所述装置包括:
人脸识别模块,用于对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
高光区域识别模块,用于识别所述瞳孔区域中的高光区域;
处理模块,用于对所述高光区域进行抹除处理;
第一获取模块,用于获取所述高光区域的形状和面积;
第二获取模块,用于根据所述形状和所述面积,从素材库中获取指定素材;
添加模块,用于在抹除处理后的所述瞳孔区域中添加指定素材,所述指定素材的形状和大小均与抹除处理前的所述高光区域对应;
所述处理模块,用于:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
7.根据权利要求6所述的装置,其特征在于,所述添加模块,用于:
在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材,所述指定位置是抹除处理前的所述高光区域的位置。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第三获取模块,用于在所述添加模块在抹除处理后的所述瞳孔区域中的指定位置处添加所述指定素材之前,获取所述高光区域的形状和面积;
第四获取模块,用于根据所述形状从素材库中获取目标素材;
调整模块,用于根据所述面积对所述目标素材的大小进行调整,将调整后的所述目标素材获取为所述指定素材。
9.根据权利要求6至8任一所述的装置,其特征在于,所述人脸识别模块,用于:
对所述图像中的人脸进行识别,确定人脸区域;
采集所述人脸区域的特征点,根据所述人脸区域的特征点确定眼部区域;
采集所述眼部区域的特征点,根据所述眼部区域的特征点确定所述瞳孔区域。
10.根据权利要求6所述的装置,其特征在于,所述处理模块,用于:
确定所述高光区域周围的瞳孔的颜色;
将所述高光区域用所述瞳孔的颜色填充。
11.一种图像处理装置,其特征在于,包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
对图像中的人脸进行识别,确定所述人脸中的瞳孔区域;
识别所述瞳孔区域中的高光区域;
对所述高光区域进行抹除处理;
获取所述高光区域的形状和面积;
根据所述形状和所述面积,从素材库中获取指定素材;
在抹除处理后的所述瞳孔区域中添加所述指定素材,所述指定素材的形状和大小均与抹除处理前的所述高光区域对应;
所述对所述高光区域进行抹除处理,包括:
对所述高光区域位于所述图像中的位置进行追踪;
当两个相邻时间点所追踪到的位置的间距小于预设间距阈值时,对所述位置上的高光区域进行抹除处理。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述可读存储介质在处理组件上运行时,使得处理组件执行如权利要求1至5任一所述的图像处理方法。
13.一种芯片,其特征在于,所述芯片包括可编程逻辑电路和/或程序指令,当所述芯片运行时用于实现如权利要求1至5任一所述的图像处理方法。
CN201810832188.4A 2018-07-26 2018-07-26 图像处理方法及装置、存储介质 Active CN109035136B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810832188.4A CN109035136B (zh) 2018-07-26 2018-07-26 图像处理方法及装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810832188.4A CN109035136B (zh) 2018-07-26 2018-07-26 图像处理方法及装置、存储介质

Publications (2)

Publication Number Publication Date
CN109035136A CN109035136A (zh) 2018-12-18
CN109035136B true CN109035136B (zh) 2023-05-09

Family

ID=64645500

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810832188.4A Active CN109035136B (zh) 2018-07-26 2018-07-26 图像处理方法及装置、存储介质

Country Status (1)

Country Link
CN (1) CN109035136B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110648296B (zh) * 2019-09-24 2022-10-11 Oppo广东移动通信有限公司 一种瞳孔颜色修正方法、修正装置、终端设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1993707A (zh) * 2004-07-30 2007-07-04 佳能株式会社 图像处理方法和设备、摄像设备以及程序
JP2014182672A (ja) * 2013-03-21 2014-09-29 Casio Comput Co Ltd 画像処理装置、画像処理方法及びプログラム
CN106022205A (zh) * 2015-03-26 2016-10-12 欧姆龙株式会社 图像处理装置以及图像处理方法
CN107909058A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN107909057A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1993707A (zh) * 2004-07-30 2007-07-04 佳能株式会社 图像处理方法和设备、摄像设备以及程序
JP2014182672A (ja) * 2013-03-21 2014-09-29 Casio Comput Co Ltd 画像処理装置、画像処理方法及びプログラム
CN106022205A (zh) * 2015-03-26 2016-10-12 欧姆龙株式会社 图像处理装置以及图像处理方法
CN107909058A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN107909057A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN109035136A (zh) 2018-12-18

Similar Documents

Publication Publication Date Title
US10565763B2 (en) Method and camera device for processing image
CN108182730B (zh) 虚实对象合成方法及装置
US10026381B2 (en) Method and device for adjusting and displaying image
US20170178289A1 (en) Method, device and computer-readable storage medium for video display
EP3905203A1 (en) Method and apparatus for processing video, and storage medium
CN107025419B (zh) 指纹模板录入方法及装置
US20170287188A1 (en) Method and apparatus for intelligently capturing image
US20160065785A1 (en) Methods and apparatuses for generating photograph
CN107341777B (zh) 图片处理方法及装置
EP3113071A1 (en) Method and device for acquiring iris image
CN107015648B (zh) 图片处理方法及装置
CN112330570A (zh) 图像处理方法、装置、电子设备及存储介质
CN109167921B (zh) 拍摄方法、装置、终端及存储介质
CN108470321B (zh) 照片的美颜处理方法、装置和存储介质
CN109035136B (zh) 图像处理方法及装置、存储介质
CN105635573B (zh) 摄像头视角调整方法和装置
CN111355879B (zh) 包含特效图案的图像获取方法、装置和电子设备
CN108961156B (zh) 人脸图像处理的方法及装置
CN108319899B (zh) 指纹识别方法和装置
CN110636377A (zh) 视频处理方法、装置、存储介质、终端及服务器
CN111373409B (zh) 获取颜值变化的方法及终端
US11252341B2 (en) Method and device for shooting image, and storage medium
CN113315903B (zh) 图像获取方法和装置、电子设备、存储介质
CN109389547B (zh) 图像显示方法及装置
CN111506207B (zh) 进行屏下指纹识别时确定点亮区域的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant