CN109167914A - 一种图像处理方法及移动终端 - Google Patents
一种图像处理方法及移动终端 Download PDFInfo
- Publication number
- CN109167914A CN109167914A CN201811116936.5A CN201811116936A CN109167914A CN 109167914 A CN109167914 A CN 109167914A CN 201811116936 A CN201811116936 A CN 201811116936A CN 109167914 A CN109167914 A CN 109167914A
- Authority
- CN
- China
- Prior art keywords
- image
- face template
- feature point
- target
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
Abstract
本发明实施例提供了一种图像处理方法及移动终端,涉及通信技术领域,以解决现有的图像处理方法操作难度高、操作繁琐的问题。其中,所述图像处理方法,包括:获取摄像头采集的目标人脸图像;获取与所述目标人脸图像匹配的N个人脸模板;基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;其中,N为正整数。本发明实施例中的图像处理方法应用于移动终端中。
Description
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种图像处理方法及移动终端。
背景技术
随着移动终端的普及,越来越多的用户使用移动终端进行拍照,尤其是对人物进行拍照,比如自拍。为了满足用户对照片中人物形象的高要求,出现了很多的图像处理方法。
例如,在美颜模式下,输出的图像中人脸区域皮肤白皙;又如,用户使用photoshop(简称PS)对图像中的人脸区域进行微调整,达到美化人物形象的目的。
其中,美颜模式对所有的用户而言,达到的处理效果都是一样的;而PS图像处理不仅需要用户手动修图,还要求用户掌握精湛的PS技术,即使可达到不同的处理效果,但操作难度高、操作繁琐。
发明内容
本发明实施例提供一种图像处理方法,以解决现有的图像处理方法操作难度高、操作繁琐的问题。
为了解决上述技术问题,本发明是这样实现的:一种图像处理方法,其特征在于,包括:获取摄像头采集的目标人脸图像;获取与所述目标人脸图像匹配的N个人脸模板;基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;其中,N为正整数。
第一方面,本发明实施例还提供了一种移动终端,包括:图像获取模块,用于获取摄像头采集的目标人脸图像;模板获取模块,用于获取与所述目标人脸图像匹配的N个人脸模板;图像处理模块,用于基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;其中,N为正整数。
第二方面,本发明实施例还提供了一种移动终端,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现所述图像处理方法的步骤。
第三方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现所述图像处理方法的步骤。
本发明实施例中的图像处理方法可应用于移动终端。用户使用移动终端拍摄人物,摄像头采集人脸图像,从而移动终端获取摄像头采集的目标人脸图像。基于获取的目标人脸图像,进一步获取与目标人脸图像匹配的N个人脸模板,并分别以每个人脸模板作为标准,对目标人脸图像进行N次图像处理,最终生成N个经图像处理后的备选图像,同时显示N张备选图像,供用户参考。可见,区别于美颜模式中采用统一的瘦脸模板等,本实施例中的图像处理方法能够基于与目标人脸图像匹配的N个人脸模板,对目标人脸图像进行图像处理,从而不仅可满足用户的个性化需求,还避免了用户进行复杂的手动修图,操作简单。
附图说明
图1是本发明实施例的图像处理方法的流程图之一;
图2是本发明实施例的图像处理方法的流程图之二;
图3是本发明实施例的图像处理方法的流程图之三;
图4是本发明实施例的图像处理示意图;
图5是本发明实施例的图像处理方法的流程图之四;
图6是本发明实施例的图像处理方法的流程图之五;
图7是本发明实施例的移动终端的显示界面的示意图之一;
图8是本发明实施例的图像处理方法的流程图之六;
图9是本发明实施例的移动终端的显示界面的示意图之二;
图10是本发明实施例的移动终端的显示界面的示意图之三;
图11是本发明实施例的移动终端的显示界面的示意图之四;
图12是本发明实施例的移动终端的框图之一;
图13是本发明实施例的移动终端的框图之二。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
随着移动终端的智能化,越来越多的用户使用移动终端进行拍摄,尤其是应用在人物拍摄,比如自拍。自拍时,用户通常会开启美颜模式,在这种模式下,传统的美颜功能已经无法满足用户的需求,用户更重视面部形状的改变,希望面部形状有所改变,但又不失真实。这就需要对图像中的人脸形状进行微弱的调整,也就是微整形。
参见图1,示出了本发明一个实施例的图像处理方法的流程图,图像处理方法优选应用于移动终端,包括:
步骤110:获取摄像头采集的目标人脸图像。
示例性地,用户使用移动终端拍摄人物照,摄像头所采集到的人物图像中包含人脸区域,可称人物图像中包含的人脸区域为目标人脸图像。
需要说明的是,本实施例可用于对人脸图像的处理,以满足用户的微整形需求,而在更多的实施例中,图像处理方法不仅仅限于对人脸图像的处理,还可扩展至更多方面的图像处理。
步骤120:获取与目标人脸图像匹配的N个人脸模板。
优选地,在数据库中存储有大量的人脸模板,如“心形脸”人脸模板、“椭圆形脸”人脸模板、“方形脸”人脸模板、“长方形脸”人脸模板、“圆形脸”人脸模板等等。这些人脸模板的来源至少包括用户手动添加、终端自动添加、终端固定设置这三种途径。例如,用户看到喜欢的人脸图像,可作为人脸模板添加至数据库中;如终端根据后台的大数据添加补充人脸模板;如终端本身自带常用人脸模板。
进一步地,移动终端还可根据用户的使用量的埋点数据进行调整迭代,不断更新数据库,为用户的微整形需求提供更多更优的解决方案。
在该步骤中,可基于目标人脸图像的属性信息等,获取与目标人脸图像匹配的N个人脸模板。
步骤130:基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像并显示。
将获取的N个人脸模板最为图像处理的参考,以对目标人脸图像进行图像处理,从而使得图像处理后的目标人脸图像接近人脸模板,达到修饰目标人脸图像的目的。
在图像处理的过程中,分别基于获取的每个人脸模板对目标人脸图像进行图像处理,从而可输出与N个人脸模板一一对应的N个图像处理后的目标人脸图像,作为备选图像,并将输出的N张备选图像显示在显示界面,供用户参考。
其中,N为正整数。
本发明实施例中的图像处理方法可应用于移动终端。用户使用移动终端拍摄人物,摄像头采集人脸图像,从而移动终端获取摄像头采集的目标人脸图像。基于获取的目标人脸图像,进一步获取与目标人脸图像匹配的N个人脸模板,并分别以每个人脸模板作为标准,对目标人脸图像进行N次图像处理,最终生成N个经图像处理后的备选图像,同时显示N张备选图像,供用户参考。可见,区别于美颜模式中采用统一的瘦脸模板等,本实施例中的图像处理方法能够基于与目标人脸图像匹配的N个人脸模板,对目标人脸图像进行图像处理,从而不仅可满足用户的个性化需求,还避免了用户进行复杂的手动修图,操作简单。
在图1所示实施例的基础上,图2示出了本发明另一个实施例的图像处理方法的流程图,步骤120包括:
步骤1201:识别目标人脸图像中的至少1个第一特征点和第一人脸模板中的至少1个第二特征点。
第一特征点为能够体现出目标人脸图像主要特征的关键点。
例如,第一特征点包括脸部轮廓点。可利用人脸特征点检测算法,计算得到目标人脸图像当前帧中的至少1个第一特征点的坐标。其中,N1表示识别到的第一特征点的个数,第一特征点可表示为T0,每个第一特征点表示为T0i(i=1,…N1)。
相应地,人脸模板包括至少1个第二特征点,为了便于说明,仅以第一人脸模板为例。第二特征点包括脸部轮廓点,其中,N2表示第二特征点的个数,第二特征点可表示为T,每个第二特征点可表示为Ti((i=1,…N2)。
需要说明的是,N1和N2为正整数,且N1和N2所表示的数值可相同,也可不相同。
进一步地,N个人脸模板的第二特征点的集合为T1i,T2i,…TNi(i=1,…N2)。
优选地,因第一特征点和第二特征点均包括脸部轮廓点,因此可进一步限定每个脸部轮廓点的位置,从而识别的每个第一特征点,在第一人脸模板的相应位置处,均对应有第二特征点。可以想到,N个人脸模板时,同一位置上的第一特征点对应的第二特征点包括N个,若该位置上的第二特征点为T1,则N个人脸模板中在该位置的第二特征点包括:T11,T12,…T1N。
这里所说的同一位置不限于表示某一个位置点,更偏向于表示一个区域。例如,脸部轮廓点包括额头区域的轮廓点,以根据这些轮廓点体现出脸部的上轮廓,而不同的人脸,额头区域的轮廓不一定在同一位置,但一定是在同一区域内的。
需要说明的是,识别的目标人脸图像中的第一特征点也是后面进行插值点计算和三角剖分变形的前置条件,插值点计算和三角剖分变形都是图像处理的关键算法。
优选地,特征点还可包括脸部轮廓点以外的特征点,比如人脸中心位置的特征点。
步骤1202:在至少1个第一特征点与至少1个第二特征点满足预设条件的情况下,确定第一人脸模板与目标人脸图像匹配。
为了实现该步骤,可对预设条件进行提前设定。
结合上述内容提及的第一特征点与第二特征点的之间的对应关系,可将目标人脸图像中的至少1个第一特征点与第一人脸模板中对应位置的第二特征点进行一一比较。具体地,可将目标人脸图像和第一人脸模板放入同一坐标系,首先对个别第一特征点和对应第二特征点的坐标进行比较,若坐标接近,则该第一特征点和对应第二特征点的相似度较高,若相似度大于第一阈值,则认为满足预设条件。
进一步地,还可增加预设条件,例如,若满足相似度大于第一阈值的第一特征点的数量大于第二阈值,则认为满足预设条件。
即若人脸模板中的特征点与目标人脸图像中的特征点相似,则可认为人脸模板与目标人脸图像匹配;进一步地,若人脸模板中有多个特征点与目标人脸图像中的特征点相似,则可认为人脸模板与目标人脸图像匹配。
步骤1203:获取第一人脸模板。
依据上述的方法,可获取N个与目标人脸图像匹配的人脸模板。
在本实施例中,基于目标人脸图像,可获取与目标人脸图像匹配的N个人脸模板,从而使得人脸模板与目标人脸图像的相关度较高,以适用于用户的个性化需要,进而基于这些人脸模板对目标人脸图像进行处理,使得处理后的目标人脸图像更加自然。
进一步地,对于第一特征点T01,在对应的N个第二特征点T11,T12,…T1N中,可确定与T01的相似度最大的第二特征点,将该第二特征点作为与第一特征点T01最接近的第二特征点,从而将该第二特征点对应的人脸模板作为最接近的人脸模板。
进一步地,第一特征点T01可以是较为重要的一个特征点,还可以是多个特征点。即结合多个特征点,得到其综合考虑后的相似度最大,则确定为最接近的人脸模板。
在步骤130的显示方案中,可优选显示最接近的人脸模板对应的备选图像,以使备选图像尽可能地接近用户本身的容貌,避免失真。
进一步地,还可根据预设规则的不同,在数据库中获取N个最接近的人脸模板,而不仅限于一个最接近的人脸模板,这样还可提供给用户更多的选择。
在图2所示实施例的基础上,图3示出了本发明另一个实施例的图像处理方法的流程图,步骤130包括:
步骤1301:在至少1个第一特征点中的第一目标特征点与至少1个第二特征点中对应位置的第二目标特征点的相似度大于预设值的情况下,将第一目标特征点与第二目标特征点对齐。
在图2所示实施例的基础上,可将相似度大于第一阈值(即该步骤中的预设值)的第一特征点和对应的第二特征点分别作为第一目标特征点和第二目标特征点。优选地,还可在该步骤中重新设定预设值。
参见图4,在同一坐标系中,将第一目标特征点1和第二目标特征点2重合对齐。
第一目标特征点和第二目标特征点的数量不限定。
步骤1302:基于至少1个第一特征点和至少1个第二特征点,得到目标人脸图像相比于第一人脸模板的变形区域和非变形区域。
步骤1303:将变形区域逐像素映射到非变形区域内。
参见图4,在同一坐标系中,将第一目标特征点1和第二目标特征点2对齐,得到其它第一特征点相比于对应第二特征点的变形方向和幅度,进一步利用人脸比例关系,对变形的方向和幅度进行一定的约束(图4中箭头所指方向表示约束方向)。同时结合面部轮廓点,以及其它特征点等,计算目标人脸图像所对应的插值点,之后利用三角剖分算法将目标人脸图像中的变形区域逐像素映射到非变形区域内,也就是将目标人脸图像中需要进行变形处理的区域逐像素映射到人脸模板中,从而使得目标人脸图像接近人脸模板,完成图像处理。
其中,人脸比例关系可依据三庭五眼的比例关系。
另外,三角剖分算法可实现面部微整形,这里指的三角剖分算法是首先利用模板点集生成多个三角形,依据这些三角形信息,将目标人脸图像的变形区域逐像素映射到人脸模板,即非变形区域。
在图1所示实施例的基础上,图5示出了本发明另一个实施例的图像处理方法的流程图,步骤130包括:
步骤1304:基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像。
步骤1305:获取N个人脸模板中每个人脸模板的权值。
步骤1306:按照每个人脸模板的权值从大到小的顺序,对N个人脸模板对应的N张备选图像进行排序。
步骤1307:显示排序后的N张备选图像。
在本实施例中,可参考用户历史数据中经常选用的人脸模板,默认推荐备选图像。具体地,可针对用户的个人使用情况进行相应的权值加载,例如:每隔一段时间,会调整数据库中各人脸模板的权值,如人脸模板A的权值=Q(现权值)+q(权值参数)*num(调用次数),然后在对确定的N个人脸模板的权值进行排序,更新推荐顺序,为用户推荐最合适的人脸模板,达到智能自适应的脸型“微整容”调整,让用户的照片看起来美好但又真实,达到私人订制的美颜效果。
在图1所示实施例的基础上,图6示出了本发明另一个实施例的图像处理方法的流程图,步骤130包括:
步骤1308:基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像。
步骤1309:将N张备选图像以环形列表的形式进行显示。
参见图7,在本实施例中,可将最接近的人脸模板对应的备选图像显示在显示界面的中心区域,其它人脸模板对应的备选图像以环形列表显示在显示界面的两侧区域。进一步地,N张备选图像还可按照与目标人脸图像的相似度由大到小的顺序呈现给用户。
进一步地,用户可在显示界面左右滑动屏幕,以切换显示在显示界面的中心区域的备选图像。
本实施例提供了一种显示备选图像的方案,图7中的N张备选图像3以环形列表的形式进行显示,不仅可以提高显示备选图像的趣味性,还可使用户能够清楚地查看任一备选图像3。
在更多的实施例中,还可基于用户的使用习惯,在显示界面上仅显示最优选的备选图像。而用户想要获取更多的备选图像,可在移动终端上执行相应的操作。例如,用户可长按屏幕启动推荐模式,在推荐模式下显示环形分布的多个选择框,每个对应选择框对应显示一张备选图像。
在图1所示实施例的基础上,图8示出了本发明另一个实施例的图像处理方法的流程图,步骤130之后还包括:
步骤140:接收用户的第一输入。
步骤150:响应于第一输入,在N张备选图像中选取目标图像。
步骤160:接收用户的第二输入。
步骤170:响应于第二输入,对目标图像执行第二输入对应的编辑操作。
第一输入、第二输入包括长按输入、点击输入等。
当屏幕显示N张备选图像后,用户可通过第一输入选取其中的一张备选图像作为目标图像,以对目标图像进行保存、编辑等操作。
例如,响应于用户的第一输入,显示界面上仅显示选取的目标图像;或者,响应于用户的第一输入,选取的目标图像的编辑状态被激活;或者,响应于用户的第一输入,选取的目标图像显示在环形列表的中心区域。
又如,用户对所选取的目标图像中某些调节项不满意,可通过第二输入进行调节。参见图9,若用户对目标图像的目标区域(如额头区域)不满意,可长按目标区域,从而目标区域显示修图工具4,用户可拖动修图工具4进行调节。同时,还可在显示界面的下方显示目标区域的调节界面,调节界面可用于修图工具4的形状、目标区域的亮度、目标区域的颜色等等。
又如,用户对所选取的目标图像,或者调节后的目标图像表示满意,可通过第二输入选中喜爱符号5(图9中的心形符号),从而目标图像会被罗列在显示界面下方的列表中(如图10)。优选地,被用户标注喜爱的备选图像对应的人脸模板会在之后的图像处理中被优先选用。
在图10所示的显示界面中,N张备选图像3以环形列表的形式进行显示,图中组成环形列表的每个方框用于表示一张备选图像3;在环形列表的下方,显示有被用户标注喜爱的备选图像3的列表,如图中所示的两个方框用于表示两个被用户标注喜爱的备选图像3。
进一步地,用户还可通过第二输入将显示界面下方的列表中的备选图像显示在显示界面的中心区域。
又如,用户可通过第二输入将N张备选图像中的若干张备选图像同时显示在显示界面上(如图11),从而用户可对选取的多张备选图像进行比对;进一步地,还可通过第二输入将最为中意的备选图像占用较大的显示面积。
在图11所示的显示界面中,显示有三个方框,每个方框用于表示一张备选图像,且这三张备选图像是用于用户从N张备选图像中选取出来的,以用于显示在同一界面进行比对。而显示界面左侧区域所显示的较大的方框用于表示用户最为中意的备选图像,或者表示用户需要仔细查看的备选图像,显示界面右侧区域所显示的较小的两个方框用于表示其它两个备选图像,用户还可将右侧区域的任一备选图像与左侧区域的备选图像进行位置互换。
可见,本实施例在能够实现自动微整形的基础上,还可接收用户的操作,以进一步满足用户的个性化需求。
综上所述,在具体应用中,移动终端能够采取一定的算法得到所采集的用户的面部特征点,从而能够从数据库中智能优选出与当前用户脸型最匹配的N个人脸模板,然后利用N个人脸模板对用户脸型进行微调整,并将微调整后的备选图像按照匹配程度,以环形选择框呈现给用户。其中,具体的微调整方向是,先利用人脸模板与用户面部的个别点进行匹配对齐,得到其余点的变形方向和幅度,并利用人脸比例关系,对变形的方向和幅度进行一定的约束;在把用户脸型往人脸模板靠近的同时,依据脸型的正常比例关系,进一步优化脸型的调整方向和幅度,使变形后的脸型不仅比例协调,而且具有自适应,让人看起来好像没有做过调整,同时该算法复杂度较低,可以减少用户获得好照片的成本,让用户可以一键达到类似于微整形的效果。
而相比于现有技术中,利用一些基于图像局部平移变形的瘦脸算法进行微整形,主要原理是对设定圆内的区域进行调整,该圆区域内各个像素点的调整幅度和方向与该点到圆心的距离强相关,这种方法对所有脸型的缩小方式是一样的,缺乏对不同脸型的自适应调整,而且其时间复杂度比较高。还有些利用PS技术进行微整形,其复杂度也比较高。本发明实施例中的微整形能够简单快速地满足用户的个性化需求。
参见图12,示出了本发明另一个实施例的移动终端的框图,包括:
图像获取模块10,用于获取摄像头采集的目标人脸图像;
模板获取模块20,用于获取与目标人脸图像匹配的N个人脸模板;
图像处理模块30,用于基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像并显示;
其中,N为正整数。
本发明实施例中的图像处理方法可应用于移动终端。用户使用移动终端拍摄人物,摄像头采集人脸图像,从而移动终端获取摄像头采集的目标人脸图像。基于获取的目标人脸图像,进一步获取与目标人脸图像匹配的N个人脸模板,并分别以每个人脸模板作为标准,对目标人脸图像进行N次图像处理,最终生成N个经图像处理后的备选图像,同时显示N张备选图像,供用户参考。可见,区别于美颜模式中采用统一的瘦脸模板等,本实施例中的图像处理方法能够基于与目标人脸图像匹配的N个人脸模板,对目标人脸图像进行图像处理,从而不仅可满足用户的个性化需求,还避免了用户进行复杂的手动修图,操作简单。
优选地,模板获取模块20包括:
特征点识别单元,用于识别目标人脸图像中的至少1个第一特征点和第一人脸模板中的至少1个第二特征点;
人脸模板确定单元,用于在至少1个第一特征点与至少1个第二特征点满足预设条件的情况下,确定第一人脸模板与目标人脸图像匹配;
人脸模板获取单元,用于获取第一人脸模板。
进一步地,图像处理模块30包括:
特征点对齐单元,用于在至少1个第一特征点中的第一目标特征点与至少1个第二特征点中对应位置的第二目标特征点的相似度大于预设值的情况下,将第一目标特征点与第二目标特征点对齐;
变形区域得到单元,用于基于至少1个第一特征点和至少1个第二特征点,得到目标人脸图像相比于第一人脸模板的变形区域和非变形区域;
变形区域处理单元,用于将变形区域逐像素映射到非变形区域内。
优选地,图像处理模块30包括:
第一图像生成单元,用于基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像;
第一图像显示单元,用于将N张备选图像以环形列表的形式进行显示。
优选地,图像处理模块30包括:
第二图像生成单元,用于基于N个人脸模板,对目标人脸图像进行图像处理,生成N张备选图像;
权值获取单元,用于获取N个人脸模板中每个人脸模板的权值;
权值排序单元,用于按照每个人脸模板的权值从大到小的顺序,对N个人脸模板对应的N张备选图像进行排序;
第二图像显示单元,用于显示排序后的N张备选图像。
优选地,移动终端还包括:
第一输入接收模块,用于接收用户的第一输入;
第一输入响应模块,用于响应于第一输入,在N张备选图像中选取目标图像;
第二输入接收模块,用于接收用户的第二输入;
第二输入响应模块,用于响应于第二输入,对目标图像执行第二输入对应的编辑操作。
本发明实施例提供的移动终端能够实现图1至图11的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
图13为实现本发明各个实施例的一种移动终端的硬件结构示意图,该移动终端100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器1010、以及电源111等部件。本领域技术人员可以理解,图13中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器1010,用于获取摄像头采集的目标人脸图像;获取与所述目标人脸图像匹配的N个人脸模板;基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;其中,N为正整数。
本发明实施例中的图像处理方法可应用于移动终端。用户使用移动终端拍摄人物,摄像头采集人脸图像,从而移动终端获取摄像头采集的目标人脸图像。基于获取的目标人脸图像,进一步获取与目标人脸图像匹配的N个人脸模板,并分别以每个人脸模板作为标准,对目标人脸图像进行N次图像处理,最终生成N个经图像处理后的备选图像,同时显示N张备选图像,供用户参考。可见,区别于美颜模式中采用统一的瘦脸模板等,本实施例中的图像处理方法能够基于与目标人脸图像匹配的N个人脸模板,对目标人脸图像进行图像处理,从而不仅可满足用户的个性化需求,还避免了用户进行复杂的手动修图,操作简单。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器1010处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
移动终端100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在移动终端100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器1010,接收处理器1010发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器1010以确定触摸事件的类型,随后处理器1010根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图13中,触控面板1071与显示面板1061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与移动终端100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器1010是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器1010可包括一个或多个处理单元;优选的,处理器1010可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
移动终端100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端100包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器1010,存储器109,存储在存储器109上并可在所述处理器1010上运行的计算机程序,该计算机程序被处理器1010执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (14)
1.一种图像处理方法,其特征在于,包括:
获取摄像头采集的目标人脸图像;
获取与所述目标人脸图像匹配的N个人脸模板;
基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;
其中,N为正整数。
2.根据权利要求1所述的方法,其特征在于,所述获取与所述目标人脸图像匹配的N个人脸模板,包括:
识别所述目标人脸图像中的至少1个第一特征点和第一人脸模板中的至少1个第二特征点;
在所述至少1个第一特征点与所述至少1个第二特征点满足预设条件的情况下,确定所述第一人脸模板与所述目标人脸图像匹配;
获取所述第一人脸模板。
3.根据权利要求2所述的方法,其特征在于,所述基于所述N个人脸模板,对所述目标人脸图像进行图像处理,包括:
在所述至少1个第一特征点中的第一目标特征点与所述至少1个第二特征点中对应位置的第二目标特征点的相似度大于预设值的情况下,将所述第一目标特征点与所述第二目标特征点对齐;
基于所述至少1个第一特征点和所述至少1个第二特征点,得到所述目标人脸图像相比于所述第一人脸模板的变形区域和非变形区域;
将所述变形区域逐像素映射到所述非变形区域内。
4.根据权利要求1所述的方法,其特征在于,所述基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示,包括:
基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像;
将所述N张备选图像以环形列表的形式进行显示。
5.根据权利要求1所述的方法,其特征在于,所述基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示,包括:
基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像;
获取所述N个人脸模板中每个人脸模板的权值;
按照所述每个人脸模板的权值从大到小的顺序,对所述N个人脸模板对应的N张备选图像进行排序;
显示排序后的所述N张备选图像。
6.根据权利要求1所述的方法,其特征在于,所述基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示之后,还包括:
接收用户的第一输入;
响应于所述第一输入,在所述N张备选图像中选取目标图像;
接收所述用户的第二输入;
响应于所述第二输入,对所述目标图像执行所述第二输入对应的编辑操作。
7.一种移动终端,其特征在于,包括:
图像获取模块,用于获取摄像头采集的目标人脸图像;
模板获取模块,用于获取与所述目标人脸图像匹配的N个人脸模板;
图像处理模块,用于基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像并显示;
其中,N为正整数。
8.根据权利要求7所述的移动终端,其特征在于,所述模板获取模块包括:
特征点识别单元,用于识别所述目标人脸图像中的至少1个第一特征点和第一人脸模板中的至少1个第二特征点;
人脸模板确定单元,用于在所述至少1个第一特征点与所述至少1个第二特征点满足预设条件的情况下,确定所述第一人脸模板与所述目标人脸图像匹配;
人脸模板获取单元,用于获取所述第一人脸模板。
9.根据权利要求8所述的移动终端,其特征在于,所述图像处理模块包括:
特征点对齐单元,用于在所述至少1个第一特征点中的第一目标特征点与所述至少1个第二特征点中对应位置的第二目标特征点的相似度大于预设值的情况下,将所述第一目标特征点与所述第二目标特征点对齐;
变形区域得到单元,用于基于所述至少1个第一特征点和所述至少1个第二特征点,得到所述目标人脸图像相比于所述第一人脸模板的变形区域和非变形区域;
变形区域处理单元,用于将所述变形区域逐像素映射到所述非变形区域内。
10.根据权利要求7所述的移动终端,其特征在于,所述图像处理模块包括:
第一图像生成单元,用于基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像;
第一图像显示单元,用于将所述N张备选图像以环形列表的形式进行显示。
11.根据权利要求7所述的移动终端,其特征在于,所述图像处理模块包括:
第二图像生成单元,用于基于所述N个人脸模板,对所述目标人脸图像进行图像处理,生成N张备选图像;
权值获取单元,用于获取所述N个人脸模板中每个人脸模板的权值;
权值排序单元,用于按照所述每个人脸模板的权值从大到小的顺序,对所述N个人脸模板对应的N张备选图像进行排序;
第二图像显示单元,用于显示排序后的所述N张备选图像。
12.根据权利要求7所述的移动终端,其特征在于,所述移动终端还包括:
第一输入接收模块,用于接收用户的第一输入;
第一输入响应模块,用于响应于所述第一输入,在所述N张备选图像中选取目标图像;
第二输入接收模块,用于接收所述用户的第二输入;
第二输入响应模块,用于响应于所述第二输入,对所述目标图像执行所述第二输入对应的编辑操作。
13.一种移动终端,其特征在于,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至6中任一项所述的图像处理方法的步骤。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的图像处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811116936.5A CN109167914A (zh) | 2018-09-25 | 2018-09-25 | 一种图像处理方法及移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811116936.5A CN109167914A (zh) | 2018-09-25 | 2018-09-25 | 一种图像处理方法及移动终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109167914A true CN109167914A (zh) | 2019-01-08 |
Family
ID=64880383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811116936.5A Pending CN109167914A (zh) | 2018-09-25 | 2018-09-25 | 一种图像处理方法及移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109167914A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109978996A (zh) * | 2019-03-28 | 2019-07-05 | 北京达佳互联信息技术有限公司 | 生成表情三维模型的方法、装置、终端及存储介质 |
CN109978757A (zh) * | 2019-03-20 | 2019-07-05 | 维沃移动通信有限公司 | 一种图像处理方法及终端设备 |
CN110956595A (zh) * | 2019-11-29 | 2020-04-03 | 广州酷狗计算机科技有限公司 | 一种人脸美型处理的方法、装置、系统及存储介质 |
CN112233014A (zh) * | 2020-10-16 | 2021-01-15 | 陈晶晶 | 基于大数据和人工智能的人脸处理方法和人脸处理平台 |
CN112785488A (zh) * | 2019-11-11 | 2021-05-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像处理方法、装置、存储介质及终端 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102486868A (zh) * | 2010-12-06 | 2012-06-06 | 华南理工大学 | 一种基于平均脸的美丽人脸合成方法 |
JP2014041459A (ja) * | 2012-08-22 | 2014-03-06 | Ge Medical Systems Global Technology Co Llc | 施設用コミュニケーションシステムおよびプログラム |
CN104574299A (zh) * | 2014-12-25 | 2015-04-29 | 小米科技有限责任公司 | 人脸图片处理方法及装置 |
CN106709931A (zh) * | 2015-07-30 | 2017-05-24 | 中国艺术科技研究所 | 一种脸谱映射至人脸的方法、脸谱映射装置 |
CN106780315A (zh) * | 2016-12-30 | 2017-05-31 | 李聪 | 虚拟整容软件方法 |
CN107085823A (zh) * | 2016-02-16 | 2017-08-22 | 北京小米移动软件有限公司 | 人脸图像处理方法及装置 |
CN107122727A (zh) * | 2017-04-20 | 2017-09-01 | 北京旷视科技有限公司 | 用于脸部整形的方法、装置及系统 |
CN107730445A (zh) * | 2017-10-31 | 2018-02-23 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、存储介质和电子设备 |
CN107995415A (zh) * | 2017-11-09 | 2018-05-04 | 深圳市金立通信设备有限公司 | 一种图像处理方法、终端及计算机可读介质 |
CN108305146A (zh) * | 2018-01-30 | 2018-07-20 | 杨太立 | 一种基于图像识别的发型推荐方法及系统 |
-
2018
- 2018-09-25 CN CN201811116936.5A patent/CN109167914A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102486868A (zh) * | 2010-12-06 | 2012-06-06 | 华南理工大学 | 一种基于平均脸的美丽人脸合成方法 |
JP2014041459A (ja) * | 2012-08-22 | 2014-03-06 | Ge Medical Systems Global Technology Co Llc | 施設用コミュニケーションシステムおよびプログラム |
CN104574299A (zh) * | 2014-12-25 | 2015-04-29 | 小米科技有限责任公司 | 人脸图片处理方法及装置 |
CN106709931A (zh) * | 2015-07-30 | 2017-05-24 | 中国艺术科技研究所 | 一种脸谱映射至人脸的方法、脸谱映射装置 |
CN107085823A (zh) * | 2016-02-16 | 2017-08-22 | 北京小米移动软件有限公司 | 人脸图像处理方法及装置 |
CN106780315A (zh) * | 2016-12-30 | 2017-05-31 | 李聪 | 虚拟整容软件方法 |
CN107122727A (zh) * | 2017-04-20 | 2017-09-01 | 北京旷视科技有限公司 | 用于脸部整形的方法、装置及系统 |
CN107730445A (zh) * | 2017-10-31 | 2018-02-23 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、存储介质和电子设备 |
CN107995415A (zh) * | 2017-11-09 | 2018-05-04 | 深圳市金立通信设备有限公司 | 一种图像处理方法、终端及计算机可读介质 |
CN108305146A (zh) * | 2018-01-30 | 2018-07-20 | 杨太立 | 一种基于图像识别的发型推荐方法及系统 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109978757A (zh) * | 2019-03-20 | 2019-07-05 | 维沃移动通信有限公司 | 一种图像处理方法及终端设备 |
CN109978757B (zh) * | 2019-03-20 | 2023-08-22 | 维沃移动通信有限公司 | 一种图像处理方法及终端设备 |
CN109978996A (zh) * | 2019-03-28 | 2019-07-05 | 北京达佳互联信息技术有限公司 | 生成表情三维模型的方法、装置、终端及存储介质 |
CN112785488A (zh) * | 2019-11-11 | 2021-05-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像处理方法、装置、存储介质及终端 |
CN110956595A (zh) * | 2019-11-29 | 2020-04-03 | 广州酷狗计算机科技有限公司 | 一种人脸美型处理的方法、装置、系统及存储介质 |
CN110956595B (zh) * | 2019-11-29 | 2023-11-24 | 广州酷狗计算机科技有限公司 | 一种人脸美型处理的方法、装置、系统及存储介质 |
CN112233014A (zh) * | 2020-10-16 | 2021-01-15 | 陈晶晶 | 基于大数据和人工智能的人脸处理方法和人脸处理平台 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107580184B (zh) | 一种拍摄方法及移动终端 | |
CN107566728A (zh) | 一种拍摄方法、移动终端及计算机可读存储介质 | |
CN109167914A (zh) | 一种图像处理方法及移动终端 | |
CN108540724A (zh) | 一种拍摄方法及移动终端 | |
CN107835364A (zh) | 一种拍照辅助方法及移动终端 | |
CN107835367A (zh) | 一种图像处理方法、装置及移动终端 | |
CN108712603B (zh) | 一种图像处理方法及移动终端 | |
CN109788204A (zh) | 拍摄处理方法及终端设备 | |
CN108062400A (zh) | 基于智能镜的试妆方法、智能镜及存储介质 | |
CN109461117A (zh) | 一种图像处理方法及移动终端 | |
CN107592459A (zh) | 一种拍照方法及移动终端 | |
CN107948499A (zh) | 一种图像拍摄方法及移动终端 | |
CN107833177A (zh) | 一种图像处理方法及移动终端 | |
CN108377339A (zh) | 一种拍照方法及拍照装置 | |
CN107644396B (zh) | 一种唇色调整方法和装置 | |
CN111047511A (zh) | 一种图像处理方法及电子设备 | |
CN108989672A (zh) | 一种拍摄方法及移动终端 | |
CN107786811B (zh) | 一种拍照方法及移动终端 | |
CN109461124A (zh) | 一种图像处理方法及终端设备 | |
CN107845057A (zh) | 一种拍照预览方法及移动终端 | |
CN110072012A (zh) | 一种用于屏幕状态切换的提醒方法及移动终端 | |
CN109409244A (zh) | 一种物体摆放方案的输出方法和移动终端 | |
CN109062411A (zh) | 一种屏幕亮度调节方法及移动终端 | |
CN109712090A (zh) | 一种图像处理方法、装置和移动终端 | |
CN109448069A (zh) | 一种模板生成方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190108 |