CN108564531A - 一种图像处理方法及装置 - Google Patents

一种图像处理方法及装置 Download PDF

Info

Publication number
CN108564531A
CN108564531A CN201810433926.8A CN201810433926A CN108564531A CN 108564531 A CN108564531 A CN 108564531A CN 201810433926 A CN201810433926 A CN 201810433926A CN 108564531 A CN108564531 A CN 108564531A
Authority
CN
China
Prior art keywords
eyeball
pupil
target
described point
eyes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810433926.8A
Other languages
English (en)
Other versions
CN108564531B (zh
Inventor
弓子健
张轩哲
李涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kylin Seing Network Technology Ltd By Share Ltd
Original Assignee
Kylin Seing Network Technology Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kylin Seing Network Technology Ltd By Share Ltd filed Critical Kylin Seing Network Technology Ltd By Share Ltd
Priority to CN201810433926.8A priority Critical patent/CN108564531B/zh
Publication of CN108564531A publication Critical patent/CN108564531A/zh
Application granted granted Critical
Publication of CN108564531B publication Critical patent/CN108564531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本申请实施例提供了一种图像处理方法及装置,该方法包括:获取包含至少一个人脸图像的目标图像;利用预设人脸识别方法确定眼睛对应的第一描点信息;以及确定眼球对应的第二描点信息;根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;根据实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像。在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。

Description

一种图像处理方法及装置
技术领域
本申请涉及信息处理领域,尤其涉及一种图像处理方法及装置。
背景技术
目前,随着图像识别技术的快速发展,为了提升用户拍照使用体验,对拍照后的人脸图像进行美化处理,同时,随着人工智能在图像识别中的深度应用,利用人脸识别引擎能够实现对人脸关键点动态识别,其中,人脸关键点是指贴合人脸五官和轮廓的关键点,人脸关键点主要包含:人脸轮廓、眼睛轮廓、眉毛轮廓、嘴唇轮廓、以及鼻子轮廓。在对人脸图像进行美化处理的过程中,先基于人脸关键点识别引擎提取各人脸关键点的位置信息,再根据提取出的各人脸关键点确定需要美妆的图像区域,并完成相应的渲染效果。尤其,人脸图像中的眼部特征是比较关键的美化区域之一,通常需要对人脸图像中的眼睛部位进行美瞳处理,使得眼睛变大变亮,从而提升人脸图像的整体美观度。
当前,现有技术中提供了一种对人脸图像中眼睛部位进行美瞳处理的方法,主要是:获取待美化处理的目标图像,提取目标图像中的眼睛轮廓信息,将眼睛轮廓信息的中心位置确定为眼球的中心位置,根据眼球的中心位置和预设眼球半径确定眼球显示区域,将预设的美瞳物料放置于确定出的眼球显示区域,得到对眼睛进行美瞳处理后的目标图像。
由此可知,现有技术中直接将眼睛轮廓信息的中心位置确定为眼球的中心位置,并且眼球通常是不完全显示的,导致确定出的眼球显示区域的准确度低,进而导致人眼美瞳效果的准确度低、真实度差。
发明内容
本申请实施例的目的是提供一种图像处理方法及装置,在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
为解决上述技术问题,本申请实施例是这样实现的:
本申请实施例提供了一种图像处理方法,包括:
获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例提供了一种图像处理装置,包括:
图像获取模块,用于获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
第一描点确定模块,用于利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
第二描点确定模块,用于利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
显示区域确定模块,用于根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
图像处理模块,用于根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例提供了一种图像处理设备,包括:处理器;以及
被安排成存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器实现以下流程:
获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例提供了一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被执行时实现以下流程:
获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例中的图像处理方法及装置,获取包含至少一个人脸图像的目标图像;利用预设人脸识别方法确定眼睛对应的第一描点信息;以及确定眼球对应的第二描点信息;根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;根据实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像。在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的图像处理方法的第一种流程示意图;
图2a为本申请实施例提供的图像处理方法中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系第一种示意图;
图2b为本申请实施例提供的图像处理方法中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系第二种示意图;
图2c为本申请实施例提供的图像处理方法中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系第三种示意图;
图3为本申请实施例提供的图像处理方法的第二种流程示意图;
图4a为本申请实施例提供的图像处理方法中确定眼球的实际显示区域的第一种实现原理示意图;
图4b为本申请实施例提供的图像处理方法中确定眼球的实际显示区域的第二种实现原理示意图;
图4c为本申请实施例提供的图像处理方法中确定眼球的实际显示区域的第三种实现原理示意图;
图5为本申请实施例提供的图像处理方法的第三种流程示意图;
图6a为本申请实施例提供的图像处理方法中截取得到目标美瞳物料的第一种实现原理示意图;
图6b为本申请实施例提供的图像处理方法中截取得到目标美瞳物料的第二种实现原理示意图;
图7为本申请实施例提供的图像处理方法的第四种流程示意图;
图8为本申请实施例提供的图像处理装置的模块组成示意图;
图9为本申请实施例提供的图像处理设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
本申请实施例提供了一种图像处理方法及装置,在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
图1为本申请实施例提供的图像处理方法的第一种流程示意图,图1中的方法的执行主体可以计算机设备,也可以是移动终端设备,如图1所示,该方法至少包括以下步骤:
S101,获取待美化处理的目标图像,其中,该目标图像中包含至少一个人脸图像,该目标图像可以是用户的自拍照片,还可以是多人合影照片,例如,针对美颜处理模式下,在检测到自拍照片后,自动将该自拍照片确定为待美化处理的目标图像。
S102,利用预设人脸识别方法提取人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,该第一描点信息用于标记眼睛的外轮廓;
具体的,将目标图像导入人脸关键点识别引擎中,自动利用预设人脸识别方法获取针对人脸图像中眼睛部位的第一描点信息,该第一描点信息包括多个眼睛形状描点的标识与每个描点对应的坐标信息,所有眼睛形状描点的连接线构建眼睛的外轮廓。
S103,利用预设人脸识别方法提取眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,该第二描点信息用于标记眼球的外轮廓以及确定眼球的中心点;
具体的,将目标图像导入人脸关键点识别引擎中,还自动利用预设人脸识别方法获取针对人脸图像中眼球部位的第二描点信息,该第二描点信息包括多个眼球形状描点的标识与每个描点对应的坐标信息,所有眼球形状描点的连接线构建眼睛的外轮廓,另外,该第二描点信息还包括眼球的中心点的标识与该中心点的坐标信息。
其中,第一描点信息中各描点的坐标信息(x1m,y1m)和第二描点信息中各描点的坐标信息(x2n,y2n)以及眼球的中心的坐标信息(x0,y0)是在同一二维坐标系中确定的,m表示眼睛形状描点的标识,n表示眼球形状描点的标识。
具体的,如果目标图像中包含多个人脸图像,需要确定每个人脸图像中左眼睛的第一描点信息和左眼球的第二描点信息,以及右眼睛的第一描点信息和右眼球的第二描点信息。
另外,考虑到可能存在眼球显示不完全的情况,因此,基于第二描点信息构建得到的眼球的外轮廓可能不是一个完整的圆形,而是圆形中的一部分,例如,如图2a所示,在图2a中,眼球位于人脸图像中眼睛的居中位置,此时眼球的上下轮廓被遮挡;又如,如图2b所示,在图2b中,眼球在人脸图像的眼睛中左偏且左右显示完全,此时眼球的上下轮廓被遮挡且眼球左轮廓短于右轮廓;再如,如图2c所示,在图2c中,眼球在人脸图像的眼睛中右偏且右端显示不完全,此时眼球的上下轮廓、右轮廓被遮挡且只显示眼球左轮廓,其中,虚线表示被遮挡轮廓。
S104,根据上述第一描点信息和上述第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;
具体的,针对需要对人脸图像中的眼球进行美瞳处理的情况,需要先确定人脸图像中左眼球在左眼睛中的实际显示区域、以及人脸图像中右眼球在右眼睛中的实际显示区域,眼球在眼睛中的位置不同,确定出的实际显示区域不同,其中,该实际显示区域的准确度直接决定人眼美瞳效果的自然度,确定出的实际显示区域的准确度越高,最终得到的人眼美瞳效果越好。
S105,根据确定出的实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像;
具体的,在分别确定出人脸图像的各眼球的实际显示区域后,自动将相应的美瞳物料融合于眼球的实际显示区域,从而达到人眼美瞳的效果,另外,同时还可以对人脸图像中其他部位进行美化处理。
本申请实施例中,在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
其中,针对确定眼球的实际显示区域的过程,如图3所示,上述S104根据上述第一描点信息和上述第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域,具体包括:
S1041,遍历眼睛的外轮廓上各描点的坐标信息和眼球的外轮廓上各描点的坐标信息,以眼球的中心点为起点,确定在各径向上距离中心点最近的描点;
具体的,基于眼睛的外轮廓上各描点的坐标信息(x1m,y1m)和眼球的外轮廓上各描点的坐标信息(x2n,y2n),以眼球的中心点(x0,y0)为起点,在某一径向上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m)和/或眼球的外轮廓上标识为n的描点(x2n,y2n),分别计算眼球的中心点(x0,y0)与描点(x1m,y1m)和/或描点(x2n,y2n)之间的距离,确定在各径向上距离中心点最近的描点,其中,在各径向上距离中心点最近的描点可能是(x1m,y1m),也可能是(x2n,y2n);
另外,考虑到确定出的眼球的描点均位于眼睛轮廓之内,为了提高确定在各径向上距离中心点最近的描点的效率,还可以通过判断目标径向上是否同时包含眼睛形状描点和眼球形状描点,若是,则将眼球形状描点确定为该目标径向上距离中心点最近的描点,若否,则将目标径向上包含眼睛形状描点或眼球形状描点确定为该目标径向上距离中心点最近的描点。
S1042,根据由确定出的各最近的描点构建的轮廓,确定眼睛和眼球的重合区域,其中,该重合区域包含眼球的中心点;
具体的,将确定出的各最近的描点的连接线包围的区域,确定眼睛和眼球的重合区域,即该重合区域为眼睛的外轮廓和眼球的外轮廓均包含的区域。
S1043,将确定出的重合区域确定为人脸图像中眼球在眼睛中的实际显示区域。
具体的,如图4a所示,对应于图2a中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系,以眼球的中心点O1为起点,在径向i上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m)和眼球的外轮廓上标识为n的描点(x2n,y2n),确定在径向i上距离中心点最近的描点为眼球的外轮廓上描点(x2n,y2n);
以眼球的中心点O1为起点,在径向j上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m),确定在径向j上距离中心点最近的描点为眼睛的外轮廓上描点(x1m,y1m);
依次类推,确定出各径向上距离眼球的中心点O1最近的描点,将确定出的各最近的描点之间的连接线包围的区域,确定眼睛和眼球的重合区域,其中,图4a中阴影区域为眼球的实际显示区域。
具体的,如图4b所示,对应于图2b中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系,以眼球的中心点O2为起点,在径向i上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m)和眼球的外轮廓上标识为n的描点(x2n,y2n),确定在径向i上距离中心点最近的描点为眼球的外轮廓上描点(x2n,y2n);
以眼球的中心点O2为起点,在径向j上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m),确定在径向j上距离中心点最近的描点为眼睛的外轮廓上描点(x1m,y1m);
依次类推,确定出各径向上距离眼球的中心点O2最近的描点,将确定出的各最近的描点之间的连接线包围的区域,确定眼睛和眼球的重合区域,其中,图4b中阴影区域为眼球的实际显示区域。
具体的,如图4c所示,对应于图2c中眼睛的外轮廓与眼球的外轮廓之间的相对位置关系,以眼球的中心点O3为起点,在径向i上的坐标点包括眼睛的外轮廓上标识为m的描点(x1m,y1m),确定在径向i上距离中心点最近的描点为眼睛的外轮廓上描点(x1m,y1m);
以眼球的中心点O3为起点,在径向k上的坐标点包括眼球的外轮廓上标识为n的描点(x2n,y2n),确定在径向k上距离中心点最近的描点为眼球的外轮廓上描点(x2n,y2n);
依次类推,确定出各径向上距离眼球的中心点O3最近的描点,将确定出的各最近的描点之间的连接线包围的区域,确定眼睛和眼球的重合区域,其中,图4c中阴影区域为眼球的实际显示区域。
其中,在准确地确定出人脸图像中眼球的实际显示区域之后,自动对目标图像中的人脸图像进行美瞳处理,具体的,如图5所示,上述S105根据确定出的实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像,具体包括:
S1051,在指定的美瞳物料中,根据眼球的实际显示区域和眼球的中心点截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料,其中,眼球的中心点与指定的美瞳物料的中心点重合;
具体的,待截取的指定的美瞳物料可以是预先设定的,也可以是结合目标图像智能匹配的,为了使得人眼美瞳效果与人脸图像的妆容更加匹配,提升目标图像的整体协调性和美化度,可以采用结合目标图像智能匹配指定的美瞳物料。
例如,对应于图4a中所示的重合区域作为确定出的眼球的实际显示区域,如图6a所示,将指定的美瞳物料的中心点P与眼球的实际显示区域中眼球的中心点O1进行对齐,截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料,再将目标美瞳物料贴合于眼球的实际显示区域;
又如,对应于图4c中所示的重合区域作为确定出的眼球的实际显示区域,如图6b所示,将指定的美瞳物料的中心点P与眼球的实际显示区域中眼球的中心点O3进行对齐,截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料,再将目标美瞳物料贴合于眼球的实际显示区域;
其中,目标美瞳物料的面积可以等于眼球的实际显示区域的面积,为了达到增大眼球的效果,目标美瞳物料的面积也可以大于眼球的实际显示区域的面积,并且针对眼球显示不完全的情况,为了保证美瞳效果的真实性,目标美瞳物料所在位置位于眼睛的外轮廓所包围的区域内。
S1052,基于截取的目标美瞳物料对眼球进行美瞳处理,得到美化处理后的目标图像;
具体的,在基于眼球的实际显示区域截取到目标美瞳物料后,需要将目标美瞳物料融合于目标图像中人脸图像的相应位置,并进行图形渲染,得到美化处理后的目标图像,其中,针对目标图像中存在多个人脸图像的情况,需要基于上述方法分别为各眼球匹配目标美瞳物料,再将各目标美瞳物料融合于目标图像中对应的眼球的实际显示区域。
在本申请实施例中,通过将眼球的中心点与指定的美瞳物料的中心点重合,并基于确定出的眼球的实际显示区域对美瞳物料进行裁剪,得到待融合于人脸图像中眼球所在位置的实际所需的美瞳物料,不仅使得实际使用的美瞳物料的形状与人眼眼球的实际显示区域相匹配,还使得实际使用的美瞳物料上各位置点与人眼眼球上各位置点一一对应,从而保证人眼美瞳效果的美观度和自然性。
另外,考虑到针对非正视拍摄得到的目标图像,该目标图像包含的人脸图像中的眼睛和眼球形状可能发生变化,即实际构建出的眼球的外轮廓的完整图像不是圆形,可能是椭圆形,因此,为了保证美瞳效果的真实性和自然性,需要先对选取出的指定的美瞳物料的形状进行匹配调整,再在调整后的指定的美瞳物料中,截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料,具体为:
在S1051在指定的美瞳物料中,根据眼球的实际显示区域和眼球的中心点截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料之前,还包括:
确定目标图像中人脸图像的拍摄角度,具体的,识别目标图像中人脸图像的整体偏转角度,将该偏转角度作为拍摄角度;
根据确定出的拍摄角度,确定指定的美瞳物料的修正参数,其中,该修正系数用于保证调整后的指定的美瞳物料的形状与眼球形状一致;
根据确定出的修正系数,对指定的美瞳物料的形状进行调整,得到调整后的指定的美瞳物料。
其中,为了实现将目标美瞳物料与眼球完美贴合的效果,达到美瞳效果叠加后完美融合不同颜色的眼球的目的,进一步提高人眼美瞳效果的真实度和自然度,上述S1052基于截取的目标美瞳物料对眼球进行美瞳处理,得到美化处理后的目标图像,具体包括:
步骤一,获取人脸图像中眼球的实际颜色,以及获取截取的目标美瞳物料的颜色,具体的,通过颜色识别算法,自动识别人脸图像中未美瞳处理的眼球的实际颜色,以及根据选取的指定的美瞳物料的类型确定目标美瞳物料的颜色;
步骤二,将目标美瞳物料的颜色与眼球的实际颜色进行滤色处理,确定美瞳处理后眼球的显示颜色;
具体的,根据目标美瞳物料的颜色与眼球的实际颜色以及如下计算公式,确定美瞳处理后眼球的显示颜色,该计算公式为:
κ=255-[(255-η)×(255-λ)]/255
其中,κ表示美瞳处理后眼球的显示颜色,η表示眼球的实际颜色,λ表示目标美瞳物料的颜色,基于上述计算公式计算得到的美瞳处理后眼球的显示颜色满足预设条件,该预设条件为任何颜色与白色复合产生白色,任何颜色与黑色复合保持不变,该预设条件能够解决美瞳效果叠加后眼球的扩散问题,使得美瞳处理后眼球的显示颜色达到更亮的效果,同时在眼球为黑色的情况下,准确地显示美瞳物料的颜色,而在眼球为除黑色外的其他颜色的情况下,显示眼球与美瞳物料的复合色,达到提亮眼球显示颜色的效果。
具体的,当λ=0时,即目标美瞳物料的颜色为黑色,不论眼球的实际颜色是什么,美瞳处理后眼球的显示颜色为眼球的实际颜色,即任何颜色与黑色复合保持不变,从而达到提亮眼睛颜色的效果;
当λ=255时,即目标美瞳物料的颜色为白色,不论眼球的实际颜色是什么,美瞳处理后眼球的显示颜色为白色,即任何颜色与白色复合产生白色,从而达到提亮眼睛颜色的效果;
步骤三,将目标美瞳物料贴合于眼球的实际显示区域,以及基于确定出的眼球的显示颜色对实际显示区域进行图形渲染,得到美化处理后的目标图像。
具体的,利用图形渲染引擎中的滤色模式根据目标美瞳物料的颜色与眼球的实际颜色,确定美瞳处理后眼球的显示颜色,其中,针对移动终端而言,利用Open GL(OpenGraphics Library,开放图形库)中的滤色模式对眼球图层和美瞳物料图层进行滤色处理,得到美化处理后的目标图像;针对电脑端设备而言,利用PS(Photoshop,图像处理软件)中的滤色模式对眼球图层和美瞳物料图层进行滤色处理,得到美化处理后的目标图像。
在本申请实施例中,通过将眼球图层与美瞳物料图层进行滤色处理,解决美瞳效果叠加后眼球的扩散问题,使得美瞳处理后眼球的显示颜色达到更亮的效果,同时在眼球为黑色的情况下,准确地显示美瞳物料的颜色,而在眼球为除黑色外的其他颜色的情况下,显示眼球与美瞳物料的复合色,达到提亮眼球显示颜色的效果,并且能够实现将目标美瞳物料与眼球完美贴合的效果,达到美瞳效果叠加后完美融合不同颜色的眼球的目的,进一步提高人眼美瞳效果的真实度和自然度。
进一步的,为了使得人眼美瞳效果与人脸图像的妆容更加匹配,从而提升目标图像的整体协调性和美化度,基于此,如图7所示,在S1051根据眼球的实际显示区域和眼球的中心点截取与人脸图像中眼球的实际显示形状匹配的目标美瞳物料之前,还包括:
S1053,获取人脸图像中至少一个目标区域的颜色,其中,该目标区域包括:头发、脸颊、嘴唇、上眼皮;
S1054,在多个备选美瞳物料中,根据获取到的目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
在本申请提供的实施例中,由于预先存储多个备选美瞳物料,且两两备选美瞳物料的颜色是不同的,保证了美瞳物料颜色的多样性和可选择性,这样能够结合人脸图像中目标区域的颜色,来选取最终用于人眼美瞳的美瞳物料,从而使得人眼美瞳效果与人脸图像的妆容更加匹配,从而提升目标图像的整体协调性和美化度。
具体的,当参考多个目标区域的颜色确定美瞳物料的颜色时,为了保证能够选取出最优的指定的美瞳物料,具体为:
针对每个目标区域的颜色,基于预设美瞳选取规则,分别确定与该目标区域的颜色匹配的美瞳物料的颜色;
判断针对所有目标区域是否存在同一匹配的美瞳物料的颜色;
若是,则在多个备选美瞳物料中,根据该美瞳物料的颜色,选取一个备选美瞳物料作为指定的美瞳物料;
若否,则在多个备选美瞳物料中,根据优先级最高的目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
进一步的,考虑到可能存在由于确定出的第二描点信息的准确度低,而导致最终确定出的眼球的实际显示区域的准确度低的问题,或者,可能存在由于用户在拍照过程中眼睛视线异常,而导致拍摄得到的目标图像中的眼球歪斜的情况,又考虑到通常情况下,眼球的中心点在垂直于眼睛的中心线方向上与中心线的偏离距离保持在预设范围内,因此,结合眼球的中心点在垂直于眼睛的中心线方向上与中心线的偏离程度来识别是否存在描点获取异常或拍摄异常,基于此,在获取到第一描点信息和第二描点信息之后,还包括:
根据确定出的第一描点信息,确定人脸图像中眼睛的中心线上各特征点的坐标信息,具体的,根据确定出的第一描点信息确定眼睛的最左描点的坐标信息和最右描点的坐标信息,将眼睛的最左描点与最右描点的连接线确定为人脸图像中眼睛的中心线;
根据中心线上各特征点的坐标信息和眼球的中心点的坐标信息,确定眼球的中心点在垂直于眼睛的中心线方向上与中心线的偏离程度,具体的,计算眼球的中心点到眼睛的中心线的垂直距离,将该垂直距离确定为眼球的偏离程度;
若偏离程度大于既定阈值,则重新确定第一描点信息和第二描点信息、和/或生成相应的提示信息,具体的,当偏离程度大于既定阈值时,可能由于确定出的第二描点信息的不准确,也可能由于用户在拍照过程中眼睛视线异常,导致确定出的眼球中心点严重偏离眼睛中心线,因此,需要采取相应的处理措施,以保证最终得到的人眼美瞳效果;
若偏离程度不大于既定阈值,则执行根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域的步骤,具体的,当偏离程度不大于既定阈值时,可以直接基于第一描点信息和第二描点信息,确定眼球的实际显示区域。
另外,考虑到同一个目标用户的左眼球和右眼球的半径基本相同,因此,目标图像中某一人脸图像中左眼球和右眼球的半径基本一致,基于此,在获取到第一描点信息和第二描点信息之后,还包括:
针对每个人脸图像,确定该人脸图像中左眼球的中心点到左眼球的外轮廓的第一距离,以及确定该人脸图像中右眼球的中心点到右眼球的外轮廓的第二距离;
判断第一距离与第二距离的差值是否大于预设阈值;
若差值大于预设阈值,则重新确定第一描点信息和第二描点信息、和/或生成相应的提示信息;
若差值不大于预设阈值,则执行根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域的步骤。
进一步的,保险起见,可以既对眼球的中心点在垂直于眼睛的中心线方向上与中心线的偏离程度进行验证,又对同一人脸图像中的左眼球半径和右眼球半径进行验证,从而达到双重验证的效果,提高眼球的中心点确定的准确度,进而保证最终确定出的眼球的实际显示区域的准确度,基于此,在获取到第一描点信息和第二描点信息之后,还包括:
在确定目标眼球的实际显示区域之前,根据该目标眼球对应的眼睛的中心线上各特征点的坐标信息和该目标眼球的中心点的坐标信息,确定该目标眼球的中心点在垂直于眼睛的中心线方向上与中心线的偏离程度;以及,
确定该目标眼球的中心点到其外轮廓的第一距离,以及确定与该目标眼球属于同一人脸图像的关联眼球的中心点到其外轮廓的第二距离;
若偏离程度大于既定阈值和/或差值大于预设阈值,则重新确定第一描点信息和第二描点信息、和/或生成相应的提示信息;
若偏离程度不大于既定阈值且差值不大于预设阈值,则执行根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域的步骤。
本申请实施例中的图像处理方法,获取包含至少一个人脸图像的目标图像;利用预设人脸识别方法确定眼睛对应的第一描点信息;以及确定眼球对应的第二描点信息;根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;根据实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像。在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
对应上述图1至图7描述的图像处理方法,基于相同的技术构思,本申请实施例还提供了一种图像处理装置,图8为本申请实施例提供的图像处理装置的模块组成示意图,该装置用于执行图1至图7描述的图像处理方法,如图8所示,该装置包括:
图像获取模块801,用于获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
第一描点确定模块802,用于利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
第二描点确定模块803,用于利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
显示区域确定模块804,用于根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
图像处理模块805,用于根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例中,在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
可选地,所述显示区域确定模块804,具体用于:
遍历所述眼睛的外轮廓上各描点的坐标信息和所述眼球的外轮廓上各描点的坐标信息,以所述眼球的中心点为起点,确定在各径向上距离所述中心点最近的描点;
根据由确定出的各所述最近的描点构建的轮廓,确定所述眼睛和所述眼球的重合区域,其中,所述重合区域包含所述眼球的中心点;
将所述重合区域确定为所述人脸图像中所述眼球在所述眼睛中的实际显示区域。
可选地,所述图像处理模块805,具体用于:
在指定的美瞳物料中,根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料,其中,所述眼球的中心点与所述指定的美瞳物料的中心点重合;
基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像。
可选地,所述图像处理模块805,进一步具体用于:
获取所述人脸图像中眼球的实际颜色,以及获取截取的所述目标美瞳物料的颜色;
将所述目标美瞳物料的颜色与所述眼球的实际颜色进行滤色处理,确定美瞳处理后眼球的显示颜色;
将所述目标美瞳物料贴合于所述眼球的实际显示区域,以及基于确定出的所述眼球的显示颜色对所述实际显示区域进行图形渲染,得到美化处理后的目标图像。
可选地,上述装置还包括:
美瞳物料选取模块,用于获取所述人脸图像中至少一个目标区域的颜色,其中,所述目标区域包括:头发、脸颊、嘴唇、上眼皮;在多个备选美瞳物料中,根据获取到的所述目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
可选地,上述装置还包括:
眼睛中心线确定模块,用于根据所述第一描点信息,确定所述人脸图像中所述眼睛的中心线上各特征点的坐标信息;
偏离程度确定模块,用于根据所述中心线上各特征点的坐标信息和所述眼球的中心点的坐标信息,确定所述眼球的中心点在垂直于所述眼睛的中心线方向上与所述中心线的偏离程度;
第一控制模块,用于若所述偏离程度大于既定阈值,则重新确定第一描点信息和第二描点信息,和/或生成相应的提示信息;
第二控制模块,用于若所述偏离程度不大于既定阈值,则执行根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域的步骤。
本申请实施例中的图像处理装置,获取包含至少一个人脸图像的目标图像;利用预设人脸识别方法确定眼睛对应的第一描点信息;以及确定眼球对应的第二描点信息;根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;根据实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像。在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
需要说明的是,本申请实施例提供的图像处理装置与本申请实施例提供的图像处理方法基于同一发明构思,因此该实施例的具体实施可以参见前述图像处理方法的实施,重复之处不再赘述。
进一步地,对应上述图1至图7所示的方法,基于相同的技术构思,本申请实施例还提供了一种图像处理设备,该设备用于执行上述的图像处理方法,图9为本申请实施例提供的图像处理设备的结构示意图。
如图9所示,图像处理设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上的处理器901和存储器902,存储器902中可以存储有一个或一个以上存储应用程序或数据。其中,存储器902可以是短暂存储或持久存储。存储在存储器902的应用程序可以包括一个或一个以上模块(图示未示出),每个模块可以包括对图像处理设备中的一系列计算机可执行指令。更进一步地,处理器901可以设置为与存储器902通信,在图像处理设备上执行存储器902中的一系列计算机可执行指令。图像处理设备还可以包括一个或一个以上电源903,一个或一个以上有线或无线网络接口904,一个或一个以上输入输出接口905,一个或一个以上键盘906等。
在一个具体的实施例中,图像处理设备包括有存储器,以及一个或一个以上的程序,其中一个或者一个以上程序存储于存储器中,且一个或者一个以上程序可以包括一个或一个以上模块,且每个模块可以包括对图像处理设备中的一系列计算机可执行指令,且经配置以由一个或者一个以上处理器执行该一个或者一个以上程序包含用于进行以下计算机可执行指令:
获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
本申请实施例中,在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
可选地,计算机可执行指令在被执行时,所述根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域,包括:
遍历所述眼睛的外轮廓上各描点的坐标信息和所述眼球的外轮廓上各描点的坐标信息,以所述眼球的中心点为起点,确定在各径向上距离所述中心点最近的描点;
根据由确定出的各所述最近的描点构建的轮廓,确定所述眼睛和所述眼球的重合区域,其中,所述重合区域包含所述眼球的中心点;
将所述重合区域确定为所述人脸图像中所述眼球在所述眼睛中的实际显示区域。
可选地,计算机可执行指令在被执行时,所述根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像,包括:
在指定的美瞳物料中,根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料,其中,所述眼球的中心点与所述指定的美瞳物料的中心点重合;
基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像。
可选地,计算机可执行指令在被执行时,所述基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像,包括:
获取所述人脸图像中眼球的实际颜色,以及获取截取的所述目标美瞳物料的颜色;
将所述目标美瞳物料的颜色与所述眼球的实际颜色进行滤色处理,确定美瞳处理后眼球的显示颜色;
将所述目标美瞳物料贴合于所述眼球的实际显示区域,以及基于确定出的所述眼球的显示颜色对所述实际显示区域进行图形渲染,得到美化处理后的目标图像。
可选地,计算机可执行指令在被执行时,还包含用于进行以下计算机可执行指令:
在根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料之前,还包括:
获取所述人脸图像中至少一个目标区域的颜色,其中,所述目标区域包括:头发、脸颊、嘴唇、上眼皮;
在多个备选美瞳物料中,根据获取到的所述目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
可选地,计算机可执行指令在被执行时,还包含用于进行以下计算机可执行指令:
根据所述第一描点信息,确定所述人脸图像中所述眼睛的中心线上各特征点的坐标信息;
根据所述中心线上各特征点的坐标信息和所述眼球的中心点的坐标信息,确定所述眼球的中心点在垂直于所述眼睛的中心线方向上与所述中心线的偏离程度;
若所述偏离程度大于既定阈值,则重新确定第一描点信息和第二描点信息、和/或生成相应的提示信息;
若所述偏离程度不大于既定阈值,则执行根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域的步骤。
本申请实施例中的图像处理设备,获取包含至少一个人脸图像的目标图像;利用预设人脸识别方法确定眼睛对应的第一描点信息;以及确定眼球对应的第二描点信息;根据第一描点信息和第二描点信息,确定人脸图像中眼球在眼睛中的实际显示区域;根据实际显示区域对目标图像中的人脸图像进行美瞳处理,得到美化处理后的目标图像。可见,通过本申请实施例中的图像处理设备在自动对目标图像中的人眼进行美瞳处理时,结合眼睛的描点信息和眼球的描点信息,综合确定眼球在眼睛轮廓内的实际显示区域,在确定出的该眼球的实际显示区域处进行美瞳处理,这样能够提高识别出的眼球实际所在位置的准确度,进而提高了人眼美瞳效果的准确度和真实度,提升了用户图像美化使用体验。
优选的,本申请实施例还提供一种图像处理设备,包括处理器901,存储器902,存储在存储器902上并可在处理器901上运行的计算机程序,该计算机程序被处理器901执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
进一步地,对应上述图1至图7所示的方法,基于相同的技术构思,本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-OnlyMemory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (12)

1.一种图像处理方法,其特征在于,包括:
获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域,包括:
遍历所述眼睛的外轮廓上各描点的坐标信息和所述眼球的外轮廓上各描点的坐标信息,以所述眼球的中心点为起点,确定在各径向上距离所述中心点最近的描点;
根据由确定出的各所述最近的描点构建的轮廓,确定所述眼睛和所述眼球的重合区域,其中,所述重合区域包含所述眼球的中心点;
将所述重合区域确定为所述人脸图像中所述眼球在所述眼睛中的实际显示区域。
3.根据权利要求1所述的方法,所述根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像,包括:
在指定的美瞳物料中,根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料,其中,所述眼球的中心点与所述指定的美瞳物料的中心点重合;
基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像。
4.根据权利要求3所述的方法,其特征在于,所述基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像,包括:
获取所述人脸图像中眼球的实际颜色,以及获取截取的所述目标美瞳物料的颜色;
将所述目标美瞳物料的颜色与所述眼球的实际颜色进行滤色处理,确定美瞳处理后眼球的显示颜色;
将所述目标美瞳物料贴合于所述眼球的实际显示区域,以及基于确定出的所述眼球的显示颜色对所述实际显示区域进行图形渲染,得到美化处理后的目标图像。
5.根据权利要求3所述的方法,其特征在于,在根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料之前,还包括:
获取所述人脸图像中至少一个目标区域的颜色,其中,所述目标区域包括:头发、脸颊、嘴唇、上眼皮;
在多个备选美瞳物料中,根据获取到的所述目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
6.根据权利要求1所述的方法,其特征在于,还包括:
根据所述第一描点信息,确定所述人脸图像中所述眼睛的中心线上各特征点的坐标信息;
根据所述中心线上各特征点的坐标信息和所述眼球的中心点的坐标信息,确定所述眼球的中心点在垂直于所述眼睛的中心线方向上与所述中心线的偏离程度;
若所述偏离程度大于既定阈值,则重新确定第一描点信息和第二描点信息、和/或生成相应的提示信息;
若所述偏离程度不大于既定阈值,则执行根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域的步骤。
7.一种图像处理装置,其特征在于,包括:
图像获取模块,用于获取待美化处理的目标图像,其中,所述目标图像中包含至少一个人脸图像;
第一描点确定模块,用于利用预设人脸识别方法提取所述人脸图像中的眼睛特征,确定眼睛对应的第一描点信息,其中,所述第一描点信息用于标记所述眼睛的外轮廓;以及,
第二描点确定模块,用于利用预设人脸识别方法提取所述眼睛特征中的眼球特征,确定眼球对应的第二描点信息,其中,所述第二描点信息用于标记所述眼球的外轮廓以及确定所述眼球的中心点;
显示区域确定模块,用于根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域;
图像处理模块,用于根据所述实际显示区域对所述目标图像中的所述人脸图像进行美瞳处理,得到美化处理后的目标图像。
8.根据权利要求7所述的装置,其特征在于,所述显示区域确定模块,具体用于:
遍历所述眼睛的外轮廓上各描点的坐标信息和所述眼球的外轮廓上各描点的坐标信息,以所述眼球的中心点为起点,确定在各径向上距离所述中心点最近的描点;
根据由确定出的各所述最近的描点构建的轮廓,确定所述眼睛和所述眼球的重合区域,其中,所述重合区域包含所述眼球的中心点;
将所述重合区域确定为所述人脸图像中所述眼球在所述眼睛中的实际显示区域。
9.根据权利要求7所述的装置,所述图像处理模块,具体用于:
在指定的美瞳物料中,根据所述实际显示区域和所述眼球的中心点截取与所述人脸图像中所述眼球的实际显示形状匹配的目标美瞳物料,其中,所述眼球的中心点与所述指定的美瞳物料的中心点重合;
基于截取的所述目标美瞳物料对所述眼球进行美瞳处理,得到美化处理后的目标图像。
10.根据权利要求9所述的装置,其特征在于,所述图像处理模块,进一步具体用于:
获取所述人脸图像中眼球的实际颜色,以及获取截取的所述目标美瞳物料的颜色;
将所述目标美瞳物料的颜色与所述眼球的实际颜色进行滤色处理,确定美瞳处理后眼球的显示颜色;
将所述目标美瞳物料贴合于所述眼球的实际显示区域,以及基于确定出的所述眼球的显示颜色对所述实际显示区域进行图形渲染,得到美化处理后的目标图像。
11.根据权利要求9所述的装置,其特征在于,还包括:
美瞳物料选取模块,用于获取所述人脸图像中至少一个目标区域的颜色,其中,所述目标区域包括:头发、脸颊、嘴唇、上眼皮;在多个备选美瞳物料中,根据获取到的所述目标区域的颜色,选取一个备选美瞳物料作为指定的美瞳物料。
12.根据权利要求8所述的装置,其特征在于,还包括:
眼睛中心线确定模块,用于根据所述第一描点信息,确定所述人脸图像中所述眼睛的中心线上各特征点的坐标信息;
偏离程度确定模块,用于根据所述中心线上各特征点的坐标信息和所述眼球的中心点的坐标信息,确定所述眼球的中心点在垂直于所述眼睛的中心线方向上与所述中心线的偏离程度;
第一控制模块,用于若所述偏离程度大于既定阈值,则重新确定第一描点信息和第二描点信息,和/或生成相应的提示信息;
第二控制模块,用于若所述偏离程度不大于既定阈值,则执行根据所述第一描点信息和所述第二描点信息,确定所述人脸图像中所述眼球在所述眼睛中的实际显示区域的步骤。
CN201810433926.8A 2018-05-08 2018-05-08 一种图像处理方法及装置 Active CN108564531B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810433926.8A CN108564531B (zh) 2018-05-08 2018-05-08 一种图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810433926.8A CN108564531B (zh) 2018-05-08 2018-05-08 一种图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN108564531A true CN108564531A (zh) 2018-09-21
CN108564531B CN108564531B (zh) 2022-07-08

Family

ID=63538385

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810433926.8A Active CN108564531B (zh) 2018-05-08 2018-05-08 一种图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN108564531B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109246345A (zh) * 2018-10-23 2019-01-18 Oppo广东移动通信有限公司 美瞳拍摄方法、装置、存储介质及移动终端
CN109543646A (zh) * 2018-11-30 2019-03-29 深圳市脸萌科技有限公司 人脸图像处理方法、装置、电子设备及计算机存储介质
CN109785259A (zh) * 2019-01-09 2019-05-21 成都品果科技有限公司 一种实时美瞳方法及装置
CN110378839A (zh) * 2019-06-28 2019-10-25 北京字节跳动网络技术有限公司 人脸图像处理方法、装置、介质及电子设备
CN111083441A (zh) * 2019-12-18 2020-04-28 广州穗能通能源科技有限责任公司 工地监控方法、装置、计算机设备和存储介质
CN111091610A (zh) * 2019-11-22 2020-05-01 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
CN111401223A (zh) * 2020-03-13 2020-07-10 北京新氧科技有限公司 一种脸型对比方法、装置及设备
CN111582268A (zh) * 2020-04-13 2020-08-25 浙江大华技术股份有限公司 一种车牌图像处理方法、装置以及计算机存储介质
CN113596314A (zh) * 2020-04-30 2021-11-02 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
US11403788B2 (en) 2019-11-22 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium
WO2023125181A1 (zh) * 2021-12-30 2023-07-06 北京字跳网络技术有限公司 图像处理方法、装置、电子设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106373155A (zh) * 2016-08-31 2017-02-01 北京云图微动科技有限公司 眼球中心定位方法、装置及系统
CN107578380A (zh) * 2017-08-07 2018-01-12 北京金山安全软件有限公司 一种图像处理方法、装置、电子设备及存储介质
CN107679447A (zh) * 2017-08-17 2018-02-09 平安科技(深圳)有限公司 面部特征点检测方法、装置及存储介质
CN107679448A (zh) * 2017-08-17 2018-02-09 平安科技(深圳)有限公司 眼球动作分析方法、装置及存储介质
CN107909057A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106373155A (zh) * 2016-08-31 2017-02-01 北京云图微动科技有限公司 眼球中心定位方法、装置及系统
CN107578380A (zh) * 2017-08-07 2018-01-12 北京金山安全软件有限公司 一种图像处理方法、装置、电子设备及存储介质
CN107679447A (zh) * 2017-08-17 2018-02-09 平安科技(深圳)有限公司 面部特征点检测方法、装置及存储介质
CN107679448A (zh) * 2017-08-17 2018-02-09 平安科技(深圳)有限公司 眼球动作分析方法、装置及存储介质
CN107909057A (zh) * 2017-11-30 2018-04-13 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
九天视觉主编: "《Photoshop数码照片处理与精修高手秘笈158招》", 31 December 2013 *
叶龙宝: ""基于人脸识别的图像美化系统设计与实现"", 《中国优秀硕士学位论文全文数据库 (基础科学辑)》 *
牛星: ""人脸特征点提取研究及其在漫画软件中的应用"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109246345B (zh) * 2018-10-23 2021-06-08 Oppo广东移动通信有限公司 美瞳拍摄方法、装置、存储介质及移动终端
CN109246345A (zh) * 2018-10-23 2019-01-18 Oppo广东移动通信有限公司 美瞳拍摄方法、装置、存储介质及移动终端
CN109543646A (zh) * 2018-11-30 2019-03-29 深圳市脸萌科技有限公司 人脸图像处理方法、装置、电子设备及计算机存储介质
CN109785259A (zh) * 2019-01-09 2019-05-21 成都品果科技有限公司 一种实时美瞳方法及装置
CN110378839A (zh) * 2019-06-28 2019-10-25 北京字节跳动网络技术有限公司 人脸图像处理方法、装置、介质及电子设备
CN111091610A (zh) * 2019-11-22 2020-05-01 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
CN111091610B (zh) * 2019-11-22 2023-04-11 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
US11403788B2 (en) 2019-11-22 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium
CN111083441A (zh) * 2019-12-18 2020-04-28 广州穗能通能源科技有限责任公司 工地监控方法、装置、计算机设备和存储介质
CN111401223A (zh) * 2020-03-13 2020-07-10 北京新氧科技有限公司 一种脸型对比方法、装置及设备
CN111401223B (zh) * 2020-03-13 2023-09-19 北京新氧科技有限公司 一种脸型对比方法、装置及设备
CN111582268A (zh) * 2020-04-13 2020-08-25 浙江大华技术股份有限公司 一种车牌图像处理方法、装置以及计算机存储介质
CN111582268B (zh) * 2020-04-13 2023-05-12 浙江大华技术股份有限公司 一种车牌图像处理方法、装置以及计算机存储介质
CN113596314A (zh) * 2020-04-30 2021-11-02 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
WO2021218118A1 (zh) * 2020-04-30 2021-11-04 北京达佳互联信息技术有限公司 图像处理方法及装置
CN113596314B (zh) * 2020-04-30 2022-11-11 北京达佳互联信息技术有限公司 图像处理方法、装置及电子设备
WO2023125181A1 (zh) * 2021-12-30 2023-07-06 北京字跳网络技术有限公司 图像处理方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN108564531B (zh) 2022-07-08

Similar Documents

Publication Publication Date Title
CN108564531A (zh) 一种图像处理方法及装置
TW202234341A (zh) 圖像處理方法及裝置、電子設備、儲存媒體和程式產品
CN107273837B (zh) 虚拟化妆的方法和系统
CN103180873B (zh) 图像处理装置及图像处理方法
CN106485275A (zh) 一种实现盖板玻璃与液晶屏定位贴合的方法
CN109977949A (zh) 边框微调的文本定位方法、装置、计算机设备及存储介质
CN106548455A (zh) 用于调整图像的亮度的设备和方法
CN107507216A (zh) 图像中局部区域的替换方法、装置及存储介质
US10964070B2 (en) Augmented reality display method of applying color of hair to eyebrows
US20110194757A1 (en) Image processing apparatus using the difference among scaled images as a layered image and method thereof
CN106855797A (zh) 一种界面元素颜色的设置方法及装置
KR20130101058A (ko) 화상 처리 장치, 화상 처리 방법, 및 제어 프로그램이 기록된 기록 매체
CN106919906A (zh) 一种图像互动方法及互动装置
CN107507217A (zh) 证件照的制作方法、装置及存储介质
CN109255763A (zh) 图像处理方法、装置、设备及存储介质
CN106774856A (zh) 基于唇语的交互方法以及交互装置
CN109949237A (zh) 图像处理方法及装置、图像设备及存储介质
CN105005390A (zh) 终端的调节方法、终端的调节装置和终端
CN103440633A (zh) 一种数字图像自动祛除斑点的方法
CN109886144A (zh) 虚拟试发方法、装置、计算机设备和存储介质
CN109919030A (zh) 黑眼圈类型识别方法、装置、计算机设备和存储介质
CN110378839A (zh) 人脸图像处理方法、装置、介质及电子设备
CN109948454A (zh) 表情数据库的增强方法、训练方法、计算设备及存储介质
CN109523593A (zh) 用于服装图像的数据处理方法及装置
CN106156739B (zh) 一种基于脸部轮廓分析的证件照耳朵检测与提取方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant