WO2016131226A1 - 智能终端及其图像处理方法和装置 - Google Patents

智能终端及其图像处理方法和装置 Download PDF

Info

Publication number
WO2016131226A1
WO2016131226A1 PCT/CN2015/085966 CN2015085966W WO2016131226A1 WO 2016131226 A1 WO2016131226 A1 WO 2016131226A1 CN 2015085966 W CN2015085966 W CN 2015085966W WO 2016131226 A1 WO2016131226 A1 WO 2016131226A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
template
user
dimensional
preset
Prior art date
Application number
PCT/CN2015/085966
Other languages
English (en)
French (fr)
Inventor
韩晶
Original Assignee
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中兴通讯股份有限公司 filed Critical 中兴通讯股份有限公司
Publication of WO2016131226A1 publication Critical patent/WO2016131226A1/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了一种智能终端及其图像处理方法和装置,用于智能终端的图像处理方法包括:通过智能终端的摄像头获取拍摄对象的三维图像;从预设模板库中获取与三维图像相适用的预设图像模板;以及输出三维图像和预设图像模板的三维合成图像。通过本发明,解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。

Description

智能终端及其图像处理方法和装置 技术领域
本发明涉及图像处理领域,具体而言,涉及一种智能终端及其图像处理方法和装置。
背景技术
目前,手机、Pad等智能终端为人们的生活提供越来越多的方便,尤其是智能终端安装摄像头满足了人们拍照的需求。随着智能终端的广泛使用,自拍技术也得到了推广,由此扩展的美图工具,包括化妆镜,发型设计、妆容设计等功能也越来越受到众多用户的认可和使用。当前的化妆镜通过使用智能终端的前置摄像头,将前置摄像头设置为全屏预览来实现。当前的发型设计、妆容设计等美图功能一般需要用户选择一张已有照片或者重新拍摄新照片来确定设计之前的原始照片,用户确定之后,再从已有的发型模板库或者妆容模板库中选择自己喜好的发型模板或者妆容模板,则已选择的模板会适用到用户所确定的原始照片上,用户经过细微调整后便可完成发型或者妆容设计,用户也可以对已完成的发型或妆容设计图进行保存以及导出。
但是,当前的化妆镜只是给用户提供前置摄像头来进行图像预览的功能。对于发型、妆容的设计功能,也只能将已有的发型模板或者妆容模板适用到已有的照片上。由于设计之前的照片是静态二维图像,并且,用户可调整的范围和程度都比较小,因而通过美图工具设计出来的发型、妆容效果很不理想,导致图片生硬、不自然,出现不真实的效果。不仅仅是自拍化妆镜的应用,对于其他的拍照应用也存在类似的问题,即,基于拍照设计的图像是二维图像,导致图像效果设计不真实的问题。
针对相关技术中基于拍照设计的图像不真实的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种智能终端及其图像处理方法和装置,以至少解决相关技术中基于拍照设计的图像不真实的问题。
根据本发明实施例的一个方面,提供了一种用于智能终端的图像处理方法,包括:通过智能终端的摄像头获取拍摄对象的三维图像;从预设模板库中获取与三维图像相适用的预设图像模板;以及输出三维图像和预设图像模板的三维合成图像。
进一步地,通过智能终端的摄像头获取拍摄对象的三维图像包括通过智能终端的摄像头获取用户面部的三维图像,从预设模板库中获取与三维图像相适用的预设图像模板包括:从第一预设模板库中获取与用户面部的三维图像相适用的发型模板;以及从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板,其中,输出三维图像和预设图像模板的三维合成图像包括:输出用户面部的三维图像、发型模板和妆容模板的三维合成图像。
进一步地,在从第一预设模板库中获取与用户面部的三维图像相适用的发型模板之后,方法还包括:接收用户对发型模板的调整结果,得到调整后的发型模板,其中,输出三维图像、发型模板和妆容模板的三维合成图像包括:输出三维图像、调整后的发型模板和妆容模板的三维合成图像。
进一步地,在从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板之后,方法还包括:接收用户对妆容模板的调整结果,得到调整后的妆容模板,其中,输出三维图像、发型模板和妆容模板的三维合成图像包括:输出三维图像、发型模板和调整后的妆容模板的三维合成图像。
进一步地,通过智能终端的摄像头获取用户面部的三维图像包括:通过智能终端的取景界面引导用户将面部的图像对应到预设位置;以及在面部的图像对应到预设位置之后,记录面部的三维图像。
进一步地,通过智能终端的摄像头获取用户面部的三维图像包括:从多个角度采集面部的图像,其中,多个角度包括第一角度和第二角度,从第一角度采集面部的图像时,用户处于第一位置,拍摄的得到的图像为第一图像,从第二角度采集面部的图像时,用户处于第二位置,拍摄的得到的图像为第二图像,第一位置和第二位置之间的距离为M,第一位置和第二位置距离摄像头的距离均为S,其中,当距离S和距离M的比值为预设比值时,获取第一图像和第二图像的合成图像,作为三维合成图像。
根据本发明实施例的另一方面,提供了一种用于智能终端的图像处理装置装置,包括:第一获取单元,设置为通过智能终端的摄像头获取拍摄对象的三维图像;第二获取单元,设置为从预设模板库中获取与三维图像相适用的预设图像模板;以及输出单元,设置为输出三维图像和预设图像模板的三维合成图像。
进一步地,第一获取单元设置为通过智能终端的摄像头获取用户面部的三维图像,第二获取单元包括:第一获取模块,设置为从第一预设模板库中获取与用户面部的三维图像相适用的发型模板;以及第二获取模块,设置为从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板,其中,输出单元设置为输出三维图像、发型模板和妆容模板的三维合成图像。
根据本发明实施例的另一方面,提供了一种智能终端,包括:摄像头,设置为获取拍摄对象的三维图像;处理器,设置为从预设模板库中获取与三维图像相适用的预设图像模板,并得到三维图像和预设图像模板的三维合成图像;以及输出机构,设置为输出三维图像和预设图像模板的三维合成图像。
进一步地,摄像头设置为获取用户面部的三维图像,处理器设置为从第一预设模板库中获取与用户面部的三维图像相适用的发型模板,从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板,得到三维图像、发型模板和妆容模板的三维合成图像,输出机构设置为输出三维图像、发型模板和妆容模板的三维合成图像。
通过本发明,采用通过智能终端的摄像头获取拍摄对象的三维图像;从预设模板库中获取与三维图像相适用的预设图像模板;以及输出三维图像和预设图像模板的三维合成图像。解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的智能终端的示意图;
图2是根据本发明第一实施例的智能终端的图像处理方法的流程图;
图3是根据本发明实施例的智能终端的图像处理方法的示意图;
图4是根据本发明第二实施例的智能终端的图像处理方法的流程图;
图5是根据本发明第一实施例的智能终端的图像处理装置的示意图;以及
图6是根据本发明第二实施例的智能终端的图像处理装置的示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本实施例中提供了一种智能终端,图1是根据本发明实施例的智能终端的示意图,如图1所示,该智能终端包括摄像头10,处理器20和输出机构30。
摄像头10,安装在智能终端上,设置为对拍摄对象进行拍照,获取拍摄对象的三维图像。智能终端在确定所要拍摄的对象之后,通过摄像头10对其进行拍摄,从而得到拍摄对象的图 像。摄像头10可以是智能终端的前置摄像头,也可以是智能终端的后置摄像头。优选地,在本发明实施例中,摄像头10是智能终端的前置摄像头,从而方便自拍的时候使用。智能终端通过置于屏幕中心的摄像头取景界面可以清晰、流畅地输出当前捕捉到的动态视频帧,采集视频帧中的信息。通过前置摄像头的取景界面,用户可以对所拍摄到的对象进行预览、查看以及调整。
优选地,拍摄对象可以是人体的面部区域,拍摄对象的图像包括用户面部的三维图像,摄像头10采集用户的人体特征包括头部、面部信息以及活动方向。前置摄像头的取景界面会有一个人体影像区的引导,引导用户将头部、身体对应到相应的位置。在用户动态调整好位置的过程中,摄像头10通过前置摄像头的取景界面对用户面部的三维图像进行预览,同时,也可以通过前置摄像头对具体的美化部位,比如发型、妆容等进行动态查看,以使用户根据自己的满意度进行调整。
处理器20,设置为从预设模板库中获取与三维图像相适用的预设图像模板。摄像头10获取拍摄对象的三维图像,此三维图像为设计的原始图像。由于受拍摄场地的光线和智能终端的拍摄角度等众多因素的影响,拍摄对象的效果并不是用户心仪的效果,比如,用户图像的发型和妆容效果。处理器20可以根据摄像头10采集到的用户动态视频帧,对其进行分析以获取用户的头部、面部信息和活动方向。在用户确定好调整位置后,处理器20对其信息进行记录。
为了使用户在调整好位置后对原始图像进行美化,处理器20可以从智能终端的数据库里找到相匹配的模板对用户的原始图像进行设计,具体而言,智能终端的数据库包含预设模板库,预设模板库存储有不同类型的预设图像模板。优选地,预设模板库包括针对发型模板的第一预设模板库以及针对妆容模板的第二预设模板库。
用户从第一预设模板库中选择与用户面部的三维图像相适用的发型模板,用户可以在发型模板中选择自己心仪的发型,处理器20在获取发型模板之后,结合原始图像再进一步实时调整,比如调整发量、头发的长短、头发的弧度、头发的亮度、头发的颜色等,该模板会根据已获取的用户头部信息自动适用到合适的位置;用户从第二预设模板库中选择与用户面部的三维图像相适用的妆容模板,用户可以在妆容模板中选择自己心仪的妆容部件,处理器20在获取妆容模板之后,结合原始图像再进一步实时调整,比如调整眼影、眼线、眉毛的颜色和范围,修改眉形等,该模板会根据已获取的用户面部信息自动适用到合适的位置。处理器20对用户的头部、面部、活动方向以及所选取的发型模板、妆容模板进行分析,处理生成红蓝合成效果图,也即,三维发型、妆容效果图。
通过处理器20从预设模板库中获取与三维图像相适用的预设图像模板,从而得到了三维图像、发型模板和妆容模板的三维合成图像。
输出机构30,设置为输出三维图像和预设图像模板的三维合成图像。为了使用户直观地看到根据自己的喜好设计的图像,输出机构30设置为将设计好的图像输出。优选地,处理器20从预设模板库中获取与三维图像相适用的预设图像模板得到三维图像、发型模板和妆容模 板的三维合成图像之后,输出机构30输出三维图像、发型模板和妆容模板的三维合成图像,使用户可以直观地看到根据自己喜好的发型或妆容设计的三维图像。
可选地,输出机构30通过显示模块生成三维发型、妆容效果图,并将设计好的三维图像输出,用户佩戴红蓝眼镜便可以欣赏到设计好的三维发型和妆容效果图。
该实施例的智能终端,包括摄像头,设置为获取拍摄对象的三维图像;处理器,设置为从预设模板库中获取与三维图像相适用的预设图像模板,并得到三维图像和预设图像模板的三维合成图像;以及输出机构,设置为输出三维图像和预设图像模板的三维合成图像,解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。
本发明实施例还提供了一种智能终端的图像处理方法,需要说明的是,该实施例的智能终端的图像处理方法可以用于本发明实施例的智能终端。图2是根据本发明第一实施例的智能终端的图像处理方法的流程图,如图2所示,该流程包括如下步骤:
步骤S102,通过智能终端的摄像头获取拍摄对象的三维图像。
智能终端的摄像头可以获取拍摄对象的三维图像。在开启摄像头后,置于屏幕中心的摄像头的取景界面可以清晰、流畅地输出当前捕捉到的动态视频帧,采集视动态频帧中的信息。通过前置摄像头的取景界面,用户可以对所拍摄到的对象进行预览、查看以及调整。
优选地,通过智能终端的摄像头获取拍摄对象的三维图像包括通过智能终端的摄像头获取用户面部的三维图像。通过智能终端的取景界面引导用户将面部的图像对应到预设位置。具体而言,摄像头可以采集用户的人体特征包括头部、面部信息以及活动方向。在摄像头的取景界面有一个人体影像区的引导,引导用户将头部、身体对应到预设位置。在用户面部的图像对应到预设位置之后,智能终端记录面部的三维图像,进一步分析用户的头部、面部信息。在用户动态调整好位置的过程中,通过摄像头的取景界面对用户面部的三维图像进行预览。
步骤S104,从预设模板库中获取与三维图像相适用的预设图像模板。
通过智能终端的摄像头获取拍摄对象的三维图像之后,由于受拍摄场地的光线和智能终端的拍摄角度等众多因素的影响,拍摄对象的原始效果并不是用户心仪的效果,比如,用户图像的发型和妆容效果。为了使用户在调整好位置后对原始图像进行美化,可以从智能终端的数据库里找到相匹配的模板对用户的原始图像进行设计,具体而言,智能终端的数据库包含预设模板库,预设模板库存储有不同类型的预设图像模板,预设模板库包括针对发型模板的第一预设模板库以及针对妆容模板的第二预设模板库。
优选地,从第一预设模板库中选择与用户面部的三维图像相适用的发型模板,第一预设模板库收集了当前主流的发型模板,用户可以在发型模板中选择与自己心仪的发型对应的模板,选择的模板根据已获取的用户头部信息自动适用到合适的头部位置。用户再结合原始图像进一步实时调整,比如,调整发量、头发的长短、头发的弧度、头发的亮度、头发的颜色 等,可选地,通过输入颜色标准(Red Green Blue,简称为RGB)值来调整发色,用户可以动态查看调整结果,根据调整结果决定是否再次调整,最终使得所选择的发型前、后、左、右都贴合设计对象,以便于后续输出三维效果图。在模板适用到合适的头部位置并调整之后,用户需要根据自己的满意度确定是发型模板调整是否已经完成,当用户确定发型模板调整已经完成之后,智能终端接收用户对发型模板的调整结果,对调整结果进行保存,得到调整后的发型模板。
优选地,从第二预设模板库中选择与用户面部的三维图像相适用的妆容模板,第二预设模板库收集了当前主流的妆容部件,用户还可以新增及编辑新的妆容部件,用户在妆容模板中选择自己心仪的妆容部件对应的模板,选择的模板会根据已获取的用户面部信息自动适用到合适的脸部位置。用户再结合原始图像进一步实时调整,比如,调整眼影、眼线、眉毛的颜色和范围,修改眉形等,用户可以动态查看调整结果,根据调整结果决定是否再次调整,最终使妆容部件完全贴合设计对象,以便于后续输出三维效果图。在模板适用到合适的脸部位置并调整之后,用户需要根据自己的满意度确定妆容模板调整是否已经完成,当用户确定妆容模板调整已经完成之后,智能终端接收用户对妆容模板的调整结果,对调整结果进行保存,得到调整后的妆容模板。
在用户调整发型模板和妆容模板之前,采集用户的头部和面部信息。图3是根据本发明实施例的智能终端的图像处理方法的示意图,在智能终端的取景界面引导用户将面部的图像对应到预设位置之后,如图所示,拍摄对象和摄像头之间的距离S基本就确定了。
为了智能终端的摄像头获取用户面部的三维图像,从多个角度采集面部的图像,包括采集用户的头部、面部信息,其中,多个角度包括第一角度和第二角度,从第一角度采集面部的图像时,用户处于第一位置,记为C1位置,拍摄的得到的图像为第一图像,并记录C1位置对应的图片帧信息。在用户调整发型模板和妆容模板,设计结束并对用户面部的三维图像、发型模板和妆容模板进行保存之后,为第二角度采集面部的图像,此时,用户处于第二位置,记为C2位置,拍摄的得到的图像为第二图像,记录C2位置对应的图片帧信息。第一位置和第二位置之间的距离为M,第一位置和第二位置距离摄像头的距离均为S,其中,当距离S和距离M的比值为预设比值时,智能终端获取第一图像和第二图像的合成图像,作为三维合成图像。优选地,该预设比值可以设置为30:1,此时,当S:M≈30:1时,此时两张图片帧合成处理后的3D图片立体效果最强,从而获得较真实的三维发型、妆容设计效果图。
步骤S106,输出三维图像和预设图像模板的三维合成图像。
在用户从第一预设模板库中选择与用户面部的三维图像相适用的发型模板,对其进行调整,以及从第二预设模板库中选择与用户面部的三维图像相适用的妆容模板,对其进行调整后,为了使用户查看根据自己的喜好对图像设计后的结果,需要将设计后的图像输出。在图像输出之前,用户需要确定图像设计是否已经完成,当用户确定图像设计已经完成后,智能终端对设计结果进行保存。进一步地,设计后的图像是三维图像和预设图像模板的三维合成图像。具体地,输出三维图像和预设图像模板的三维合成图像包括:输出用户面部的三维图像、发型模板和妆容模板的三维合成图像。
可选地,用户在发型模板中选择了自己心仪的发型,则智能终端从第一预设模板库中获取了与三维图像相适用的发型模板,用户结合原始图像进一步实时调整发型,智能终端接收用户对发型模板的调整结果,从而得到调整后的发型模板,输出用户面部的三维图像、调整后的发型模板和妆容模板的三维合成图像,以使用户查看。
可选地,用户在发型模板中选择了自己心仪的妆容,则从第二预设模板库中获取了与三维图像相适用的妆容模板,用户结合原始图像进一步实时调整妆容,智能终端接收用户对妆容模板的调整结果,从而得到调整后的妆容模板,输出用户面部的三维图像、发型模板和调整后的妆容模板的三维合成图像,以使用户查看。
输出的三维合成图像是对用户头部、面部、活动方向以及所选取的发型模板、妆容模板进行分析后,处理生成的红蓝合成效果图,也即,三维发型、妆容效果图。用户可以佩戴红蓝眼镜欣赏设计好的三维发型和妆容效果图。
该实施例的智能终端的图像处理方法采用通过智能终端的摄像头获取拍摄对象的三维图像;从预设模板库中获取与三维图像相适用的预设图像模板;以及输出三维图像和预设图像模板的三维合成图像,解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。
图4是根据本发明第二实施例的智能终端的图像处理方法的流程图,需要说明的是,图4实施例可以作为图2所示实施例的优选实施方式,如图4所示,该智能终端的图像处理方法包括如下步骤:
步骤S201,开启摄像头。
智能终端的摄像头可以获取拍摄对象的三维图像,优选地,摄像头为前置摄像头。在开启摄像头后,置于屏幕中心的摄像头的取景界面可以清晰、流畅地输出当前捕捉到的动态视频帧,采集视动态频帧中的信息。通过前置摄像头的取景界面,用户可以对所拍摄到的对象进行预览、查看以及调整。在摄像头的取景界面有一个人体影像区的引导,引导用户将头部、身体对应到预设位置。在用户面部的图像对应到预设位置之后,智能终端记录面部的三维图像,进一步分析用户的头部、面部信息。在用户动态调整好位置的过程中,通过摄像头的取景界面对用户面部的三维图像进行预览。
步骤S202,选择发型模板。
根据步骤S101中用户调整好的位置,用户选取心仪的发型模板,并适用到对应的头部位置。用户选择心仪的发型模板,适用到视频帧对应的头部后,用户可动态调整发型的弧度,发量,输入RGB值来调整发色等,使得选择的发型前、后、左、右都贴合造型对象,方便后续输出三维效果图。
步骤S203,选择妆容模板。
根据步骤S101中用户调整好的位置,用户选取心仪的妆容部件,并适用到对应的脸部位 置。用户选择心仪的妆容部件,适用到视频帧对应的面部后,比如眼妆,用户还可调整眼影,眼线部分的色彩及范围等,使得该妆容部件完全贴合设计对象。
在执行步骤S201后,用户还可以根据自己喜好先执行步骤S203,选择妆容模板,对妆容模板调整之后,再执行步骤S202,选择发型模板,对发型模板进行调整。
步骤S204,图像处理。
经过S202或者S203用户选取发型或者妆容模板后,图像处理模块开始采集用户的头部、面部信息。用户设计完成并选择保存后,图像处理模块将采集的信息和最后的图片帧合成输出红蓝合成效果图,即三维发型、妆容效果图。一旦用户根据引导区确定好位置后,如图3所示,那么设计对象和摄像头之间的距离S基本就确定了。此时,图像处理模块从视频帧中采集用户的头部、面部信息,多角度采集后确定C1位置,并记录C1位置对应的图片帧信息。用户设计结束选择保存后,确定C2位置,记录C2位置对应的图片帧信息,使得S:M≈30:1,此时两张图片帧合成处理后的3D图片立体效果最强,从而获得较真实的三维发型、妆容设计效果图。
步骤S205,图像显示。
通过显示模块,用户佩戴红蓝眼镜即可欣赏设计后的三维发型、妆容效果图。
该实施例的智能终端的图像处理方法采用开启摄像头,选择发型模板,选择妆容模板,图像处理以及图像显示,可以实现动态成像。通过前置摄像头的预览取景界面来提供用户动态查看当前发型和妆容。用户选取发型或妆容部件后,根据图像处理模板采集确认的用户头部、面部信息适用到合适的头部或面部部位,然后用户可以实时进行调整设计。用户动态调整完成后,选择保存,则可以根据用户设计过程中采集的视频帧信息及最终设计的视频帧信息生成红蓝合成效果图,即三维发型、妆容效果图。最后,通过图像显示,用户可以佩戴红蓝眼镜便可以欣赏该三维图像设计效果图,该三维效果图能够更加直观地展现用户的新造型,从而避免了采用静态图片设计的不真实问题。
本发明实施例提供了一种智能终端的图像处理装置,需要说明的是,本发明实施例的智能终端的图像处理装置可以用于执行本发明实施例的智能终端的图像处理方法。
图5是根据本发明第一实施例的智能终端的图像处理装置的示意图。如图3所示,该智能终端的图像处理装置包括:第一获取单元40,第二获取单元50和输出单元60。
第一获取单元40,设置为通过智能终端的摄像头获取拍摄对象的三维图像。智能终端的摄像头可以获取拍摄对象的三维图像。在开启摄像头后,置于屏幕中心的摄像头的取景界面可以清晰、流畅地输出当前捕捉到的动态视频帧,采集视动态频帧中的信息。通过前置摄像头的取景界面,用户可以对所拍摄到的对象进行预览、查看以及调整。
优选地,通过智能终端的摄像头获取拍摄对象的三维图像包括通过智能终端的摄像头获取用户面部的三维图像。通过智能终端的取景界面引导用户将面部的图像对应到预设位置。 具体而言,摄像头可以采集用户的人体特征包括头部、面部信息以及活动方向。在摄像头的取景界面有一个人体影像区的引导,引导用户将头部、身体对应到预设位置。在用户面部的图像对应到预设位置之后,智能终端记录面部的三维图像,进一步分析用户的头部、面部信息。在用户动态调整好位置的过程中,通过摄像头的取景界面对用户面部的三维图像进行预览。
第二获取单元50,设置为从预设模板库中获取与三维图像相适用的预设图像模板。通过第一获取单元40,利用智能终端的摄像头获取拍摄对象的三维图像之后,由于受拍摄场地的光线和智能终端的拍摄角度等众多因素的影响,拍摄对象的原始效果并不是用户心仪的效果,比如,用户图像的发型和妆容效果。为了使用户在调整好位置后对原始图像进行美化,可以从智能终端的数据库里获取到相匹配的模板对用户的原始图像进行设计,具体而言,智能终端的数据库包含预设模板库,预设模板库存储有不同类型的预设图像模板,预设模板库包括针对发型模板的第一预设模板库以及针对妆容模板的第二预设模板库。
输出单元60,设置为输出三维图像和预设图像模板的三维合成图像。在用户通过第二获取单元50,从第一预设模板库中选择与用户面部的三维图像相适用的发型模板,对其进行调整,以及从第二预设模板库中选择与用户面部的三维图像相适用的妆容模板,对其进行调整后,为了使用户查看根据自己的喜好对图像设计后的结果,需要将设计后的图像输出。在图像输出之前,用户需要确定图像设计是否已经完成,当用户确定图像设计已经完成后,智能终端对设计结果进行保存。进一步地,设计后的图像是三维图像和预设图像模板的三维合成图像。具体地,输出三维图像和预设图像模板的三维合成图像包括:输出用户面部的三维图像、发型模板和妆容模板的三维合成图像。
可选地,用户在发型模板中选择了自己心仪的发型,则智能终端从第一预设模板库中获取了与三维图像相适用的发型模板,用户结合原始图像进一步实时调整发型,智能终端接收用户对发型模板的调整结果,从而得到调整后的发型模板,输出用户面部的三维图像、调整后的发型模板和妆容模板的三维合成图像,以使用户查看。
可选地,用户在发型模板中选择了自己心仪的妆容,则从第二预设模板库中获取了与三维图像相适用的妆容模板,用户结合原始图像进一步实时调整妆容,智能终端接收用户对妆容模板的调整结果,从而得到调整后的妆容模板,输出用户面部的三维图像、发型模板和调整后的妆容模板的三维合成图像,以使用户查看。
输出的三维合成图像是对用户头部、面部、活动方向以及所选取的发型模板、妆容模板进行分析后,处理生成的红蓝合成效果图,也即,三维发型、妆容效果图。用户可以佩戴红蓝眼镜欣赏设计好的三维发型和妆容效果图。
图6是根据本发明第二实施例的智能终端的图像处理装置的示意图,如图所示,该智能终端的图像处理装置包括:第一获取单元40,第二获取单元50和输出单元60。其中,第二获取单元包括50:第一获取模块51和第二获取模块52。
第一获取模块51,设置为从第一预设模板库中获取与用户面部的三维图像相适用的发型 模板。第一预设模板库收集了当前主流的发型模板,用户可以在发型模板中选择与自己心仪的发型对应的模板,选择的模板根据已获取的用户头部信息自动适用到合适的头部位置。用户再结合原始图像进一步实时调整,比如,调整发量、头发的长短、头发的弧度、头发的亮度、头发的颜色等,可选地,通过输入RGB值来调整发色,用户可以动态查看调整结果,根据调整结果决定是否再次调整,最终使得所选择的发型前、后、左、右都贴合设计对象,以便于后续输出三维效果图。
优选地,第一获取模块51还包括接收模块。在模板适用到合适的头部位置并调整之后,用户需要根据自己的满意度确定是发型模板调整是否已经完成,当用户确定发型模板调整已经完成之后,接收模块接收用户对发型模板的调整结果,对调整结果进行保存,得到调整后的发型模板。
第二获取模块52,设置为从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板。第二预设模板库收集了当前主流的妆容部件,用户还可以新增及编辑新的妆容部件,用户在妆容模板中选择自己心仪的妆容部件对应的模板,选择的模板会根据已获取的用户面部信息自动适用到合适的脸部位置。用户再结合原始图像进一步实时调整,比如,调整眼影、眼线、眉毛的颜色和范围,修改眉形等,用户可以动态查看调整结果,根据调整结果决定是否再次调整,最终使妆容部件完全贴合设计对象,以便于后续输出三维效果图。
优选地,第二获取模块52还包括接收模块。在模板适用到合适的脸部位置并调整之后,用户需要根据自己的满意度确定妆容模板调整是否已经完成,当用户确定妆容模板调整已经完成之后,接收模块接收用户对妆容模板的调整结果,对调整结果进行保存,得到调整后的妆容模板。
优选地,输出单元60,设置为输出三维图像、发型模板和妆容模板的三维合成图像,包括输出三维图像、调整后的发型模板和妆容模板的三维合成图像,以及输出三维图像、发型模板和调整后的妆容模板的三维合成图像。
优选地,第一获取单元40还包括引导模块,设置为在用户调整发型模板和妆容模板之前,通过智能终端的取景界面引导用户将面部的图像对应到预设位置,以及在面部的图像对应到预设位置之后,记录面部的三维图像。
优选地,第一获取单元40还包括采集模块。采集模块从多个角度采集面部的图像,其中,多个角度包括第一角度和第二角度。在用户调整发型模板和妆容模板之前,采集模块从第一角度采集面部的图像时,用户处于第一位置,拍摄的得到的图像为第一图像。在用户调整发型模板和妆容模板,设计结束并对用户面部的三维图像、发型模板和妆容模板进行保存之后,采集模块从第二角度采集面部的图像时,用户处于第二位置,拍摄的得到的图像为第二图像,第一位置和第二位置之间的距离为M,第一位置和第二位置距离摄像头的距离均为S,其中,当距离S和距离M的比值为预设比值时,获取第一图像和第二图像的合成图像,作为三维合成图像,通过输出单元60输出三维合成图像。
该实施例的智能终端的图像处理装置采用第一获取单元40,通过智能终端的摄像头获取 拍摄对象的三维图像,通过第二获取单元50从预设模板库中获取与三维图像相适用的预设图像模板,通过输出单元60输出三维图像和预设图像模板的三维合成图像,并且通过第一获取模块51从第一预设模板库中获取与用户面部的三维图像相适用的发型模板,通过第二获取模块52从第二预设模板库中获取与用户面部的三维图像相适用的妆容模板,解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。
本发明的实施例,当用户需要尝试新发型或者新妆容时,可以先用本发明的动态成像装置,自选心仪的发型或者妆容,并且保存输出三维发型或者妆容效果图,从而避免了采用静态图片设计的不真实问题,可以清晰、直观地将自己的设计想法展现给专业造型师,使得发型、妆容设计不会再出现想法和造型结果完全不符的情况,提升用户体验。另一方面,用户不需要使用复杂的三维扫描设备等,在移动终端上就可已实现动态发型、妆容等,并可保存输出具有三维效果的设计图片,大大简化了设备复杂性及降低了成本。进一步地,本发明解决了现有技术中基于拍照设计的图像不真实的问题,进而达到了清晰、直观地展现设计图片的效果。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台智能终端(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
工业实用性
如上所述,本发明实施例提供的一种智能终端及其图像处理方法和装置具有以下有益效果:当用户需要尝试新发型或者新妆容时,可以先用本发明的动态成像装置,自选心仪的发型或者妆容,并且保存输出三维发型或者妆容效果图,从而避免了采用静态图片设计的不真 实问题,可以清晰、直观地将自己的设计想法展现给专业造型师,使得发型、妆容设计不会再出现想法和造型结果完全不符的情况,提升用户体验。此外,如果用户不需要使用复杂的三维扫描设备等,则在移动终端上就可已实现动态发型、妆容等,并可保存输出具有三维效果的设计图片,大大简化了设备复杂性及降低了成本,进而避免了基于拍照设计的图像不真实,可以达到清晰、直观地展现设计图片的效果。

Claims (10)

  1. 一种用于智能终端的图像处理方法,包括:
    通过智能终端的摄像头获取拍摄对象的三维图像;
    从预设模板库中获取与所述三维图像相适用的预设图像模板;以及
    输出所述三维图像和所述预设图像模板的三维合成图像。
  2. 根据权利要求1所述的方法,其中,通过智能终端的摄像头获取拍摄对象的三维图像包括通过所述智能终端的摄像头获取用户面部的三维图像,从所述预设模板库中获取与所述三维图像相适用的预设图像模板包括:
    从第一预设模板库中获取与所述用户面部的三维图像相适用的发型模板;以及
    从第二预设模板库中获取与所述用户面部的三维图像相适用的妆容模板,
    其中,输出所述三维图像和所述预设图像模板的三维合成图像包括:输出所述用户面部的三维图像、所述发型模板和所述妆容模板的三维合成图像。
  3. 根据权利要求2所述的方法,其中,在从第一预设模板库中获取与所述用户面部的三维图像相适用的发型模板之后,所述方法还包括:
    接收用户对所述发型模板的调整结果,得到调整后的发型模板,
    其中,输出所述三维图像、所述发型模板和所述妆容模板的三维合成图像包括:输出所述三维图像、所述调整后的发型模板和所述妆容模板的三维合成图像。
  4. 根据权利要求2所述的方法,其中,在从第二预设模板库中获取与所述用户面部的三维图像相适用的妆容模板之后,所述方法还包括:
    接收用户对所述妆容模板的调整结果,得到调整后的妆容模板,
    其中,输出所述三维图像、所述发型模板和所述妆容模板的三维合成图像包括:输出所述三维图像、所述发型模板和所述调整后的妆容模板的三维合成图像。
  5. 根据权利要求2所述的方法,其中,通过所述智能终端的摄像头获取用户面部的三维图像包括:
    通过所述智能终端的取景界面引导用户将面部的图像对应到预设位置;以及
    在面部的图像对应到所述预设位置之后,记录面部的三维图像。
  6. 根据权利要求2所述的方法,其中,通过所述智能终端的摄像头获取用户面部的三维图像包括:
    从多个角度采集面部的图像,其中,所述多个角度包括第一角度和第二角度,从所述第一角度采集面部的图像时,用户处于第一位置,拍摄的得到的图像为第一图像,从 所述第二角度采集面部的图像时,用户处于第二位置,拍摄的得到的图像为第二图像,所述第一位置和所述第二位置之间的距离为M,所述第一位置和所述第二位置距离所述摄像头的距离均为S,
    其中,当所述距离S和所述距离M的比值为预设比值时,获取第一图像和所述第二图像的合成图像,作为所述三维合成图像。
  7. 一种用于智能终端的图像处理装置,包括:
    第一获取单元,设置为通过智能终端的摄像头获取拍摄对象的三维图像;
    第二获取单元,设置为从预设模板库中获取与所述三维图像相适用的预设图像模板;以及
    输出单元,设置为输出所述三维图像和所述预设图像模板的三维合成图像。
  8. 根据权利要求7所述的装置,其中,所述第一获取单元设置为通过所述智能终端的摄像头获取用户面部的三维图像,所述第二获取单元包括:
    第一获取模块,设置为从第一预设模板库中获取与所述用户面部的三维图像相适用的发型模板;以及
    第二获取模块,设置为从第二预设模板库中获取与所述用户面部的三维图像相适用的妆容模板,
    其中,所述输出单元设置为输出所述三维图像、所述发型模板和所述妆容模板的三维合成图像。
  9. 一种智能终端,包括:
    摄像头,设置为获取拍摄对象的三维图像;
    处理器,设置为从预设模板库中获取与所述三维图像相适用的预设图像模板,并得到所述三维图像和所述预设图像模板的三维合成图像;以及
    输出机构,设置为输出所述三维图像和所述预设图像模板的三维合成图像。
  10. 根据权利要求9所述的智能终端,其中,所述摄像头设置为获取用户面部的三维图像,所述处理器设置为从第一预设模板库中获取与所述用户面部的三维图像相适用的发型模板,从第二预设模板库中获取与所述用户面部的三维图像相适用的妆容模板,得到所述三维图像、所述发型模板和所述妆容模板的三维合成图像,所述输出机构设置为输出所述三维图像、所述发型模板和所述妆容模板的三维合成图像。
PCT/CN2015/085966 2015-07-01 2015-08-03 智能终端及其图像处理方法和装置 WO2016131226A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201510381091.2A CN106327588B (zh) 2015-07-01 2015-07-01 智能终端及其图像处理方法和装置
CN201510381091.2 2015-07-01

Publications (1)

Publication Number Publication Date
WO2016131226A1 true WO2016131226A1 (zh) 2016-08-25

Family

ID=56689157

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2015/085966 WO2016131226A1 (zh) 2015-07-01 2015-08-03 智能终端及其图像处理方法和装置

Country Status (2)

Country Link
CN (1) CN106327588B (zh)
WO (1) WO2016131226A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107330971A (zh) * 2017-06-26 2017-11-07 新生医疗美容有限公司 一种用于发型设计的三维模拟成像系统
CN111580788B (zh) * 2019-02-15 2024-04-09 阿里巴巴集团控股有限公司 模板搭配信息推荐方法、装置及电子设备
CN111933024B (zh) * 2020-08-10 2021-02-02 张峻豪 一种视觉传达设计用的展示装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001297333A (ja) * 2000-04-13 2001-10-26 Sony Corp 画像処理装置および方法、並びに記録媒体
CN101370152A (zh) * 2007-08-15 2009-02-18 星友科技股份有限公司 于远程使用立体影像的系统及方法
TW201140496A (en) * 2010-05-14 2011-11-16 Univ Far East Real-time 3D hairstyle display method using photographing and its device
TW201301190A (zh) * 2011-06-28 2013-01-01 Hon Hai Prec Ind Co Ltd 服裝試穿系統及服裝試穿方法
CN202904582U (zh) * 2012-07-18 2013-04-24 浙江国自机器人技术有限公司 一种基于体感识别装置的虚拟试衣系统
US8525828B1 (en) * 2010-05-05 2013-09-03 Amazon Technologies, Inc. Visualization of fit, flow, and texture of clothing items by online consumers
CN103731583A (zh) * 2013-12-17 2014-04-16 四川金手指时代投资管理有限公司 用于拍照智能化合成、打印的一体化设备及其处理方法
CN104461006A (zh) * 2014-12-17 2015-03-25 卢晨华 一种基于自然用户界面的互联网智能镜
CN104618819A (zh) * 2015-03-05 2015-05-13 广州新节奏智能科技有限公司 基于电视终端的3d体感购物系统及方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL155525A0 (en) * 2003-04-21 2009-02-11 Yaron Mayer System and method for 3d photography and/or analysis of 3d images and/or display of 3d images
FR2857131A1 (fr) * 2003-07-01 2005-01-07 Thomson Licensing Sa Procede de recalage automatique d'un modele geometrique d'une scene sur une image de la scene, dispositif de mise en oeuvre et support de programmation.
CN100515018C (zh) * 2005-04-06 2009-07-15 英华达(南京)科技有限公司 直接于拍摄时调整肖像的方法
CN101582143A (zh) * 2008-05-16 2009-11-18 杨政宪 一种终端试穿戴仿真系统及生成试穿戴图像的方法
GB201102794D0 (en) * 2011-02-17 2011-03-30 Metail Ltd Online retail system
GB201302194D0 (en) * 2013-02-07 2013-03-27 Crisalix Sa 3D platform for aesthetic simulation
CN103593870B (zh) * 2013-11-12 2016-08-17 杭州摩图科技有限公司 一种基于人脸的图像处理装置及其方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001297333A (ja) * 2000-04-13 2001-10-26 Sony Corp 画像処理装置および方法、並びに記録媒体
CN101370152A (zh) * 2007-08-15 2009-02-18 星友科技股份有限公司 于远程使用立体影像的系统及方法
US8525828B1 (en) * 2010-05-05 2013-09-03 Amazon Technologies, Inc. Visualization of fit, flow, and texture of clothing items by online consumers
TW201140496A (en) * 2010-05-14 2011-11-16 Univ Far East Real-time 3D hairstyle display method using photographing and its device
TW201301190A (zh) * 2011-06-28 2013-01-01 Hon Hai Prec Ind Co Ltd 服裝試穿系統及服裝試穿方法
CN202904582U (zh) * 2012-07-18 2013-04-24 浙江国自机器人技术有限公司 一种基于体感识别装置的虚拟试衣系统
CN103731583A (zh) * 2013-12-17 2014-04-16 四川金手指时代投资管理有限公司 用于拍照智能化合成、打印的一体化设备及其处理方法
CN104461006A (zh) * 2014-12-17 2015-03-25 卢晨华 一种基于自然用户界面的互联网智能镜
CN104618819A (zh) * 2015-03-05 2015-05-13 广州新节奏智能科技有限公司 基于电视终端的3d体感购物系统及方法

Also Published As

Publication number Publication date
CN106327588B (zh) 2022-04-29
CN106327588A (zh) 2017-01-11

Similar Documents

Publication Publication Date Title
CN106161939B (zh) 一种照片拍摄方法及终端
JP6101397B2 (ja) 写真出力方法および装置
US20070252831A1 (en) Methods and Systems for Compositing Images
JP2017531950A (ja) 撮影テンプレートデータベースを構築し、且つ撮影推薦情報を提供するための方法及び装置
WO2019214574A1 (zh) 图像拍摄方法、装置及电子终端
CN107862653B (zh) 图像显示方法、装置、存储介质和电子设备
KR102407190B1 (ko) 영상 촬영 장치 및 그 동작 방법
WO2007128117A1 (en) Method. system and computer program product for automatic and semi-automatic modification of digital images of faces
CN109218630B (zh) 一种多媒体信息处理方法及装置、终端、存储介质
KR101717748B1 (ko) 헤어스타일 3차원 시뮬레이션 장치 및 방법
WO2021164162A1 (zh) 拍摄图像的方法、装置及设备
WO2022110837A1 (zh) 图像处理方法及装置
WO2016131226A1 (zh) 智能终端及其图像处理方法和装置
WO2016184285A1 (zh) 物品图像处理方法、装置和系统
CN113012082A (zh) 图像显示方法、装置、设备及介质
KR20150091064A (ko) 단일의 카메라를 이용하여 3d 이미지를 캡쳐하는 방법 및 시스템
CN113572982A (zh) 一种自助共享式旅拍视频获取方法及系统
WO2023016214A1 (zh) 视频处理方法、装置、移动终端
KR101303279B1 (ko) 다중 카메라를 이용한 이미지 합성 장치 및 방법
CN108337427B (zh) 一种图像处理方法及电子设备
KR101507410B1 (ko) 모바일 단말의 라이브 메이크업 촬영 방법 및 장치
CN113395456B (zh) 辅助拍摄方法、装置、电子设备及计算机可读存储介质
CN105898030B (zh) 一种图片处理方法、装置及手机
CN110798614A (zh) 一种照片拍摄方法、装置、设备及存储介质
CN113298956A (zh) 图像处理方法、美甲方法、美妆方法和装置、终端设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15882365

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15882365

Country of ref document: EP

Kind code of ref document: A1