CN115393552A - 一种提供数字化试妆、化妆方法的美妆交互平台 - Google Patents

一种提供数字化试妆、化妆方法的美妆交互平台 Download PDF

Info

Publication number
CN115393552A
CN115393552A CN202210917380.XA CN202210917380A CN115393552A CN 115393552 A CN115393552 A CN 115393552A CN 202210917380 A CN202210917380 A CN 202210917380A CN 115393552 A CN115393552 A CN 115393552A
Authority
CN
China
Prior art keywords
makeup
user
product
parameter
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210917380.XA
Other languages
English (en)
Inventor
徐迎庆
席雪宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN202210917380.XA priority Critical patent/CN115393552A/zh
Publication of CN115393552A publication Critical patent/CN115393552A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种提供数字化试妆、化妆方法的美妆交互平台,包括:美妆交互模块,用于与用户进行交互,采集用户面部信息,接收所述用户的操作指令,基于用户人脸图像,显示与所述用户人脸图像贴合的美妆妆效;云计算模块,用于根据所述美妆交互模块采集的用户面部信息以及所述操作指令进行计算,向所述美妆交互模块返回计算结果;数据库存储模块,与所述云计算模块通信连接,用于所述用户面部信息、以及所述计算结果的存储。

Description

一种提供数字化试妆、化妆方法的美妆交互平台
技术领域
本申请涉及美妆领域,尤其涉及一种提供数字化试妆、化妆方法的美妆交互平台。
背景技术
在美妆场景中,为了提供更丰富的功能类别,很多智能试妆设备则采用一个较大的电子平板作为“试妆镜”,为用户提供AR妆效预览的服务。
多数美妆镜虽然可以根据AR效果在镜面或屏幕中显示妆容,但是,由于多数人在化妆之初并不了解各个妆容的步骤,无法知道自身适合的妆效,也无法根据自己的肤质选择合适的产品。
目前市场上的美妆镜等产品功能单一、局限性大,并不能很好的为用户提供个性化服务。
同样提供AR妆效预览的还有线上平台,在这种线上场景中,智能美妆更偏向于使用手机软件的前置摄像头,从而使用AR试妆功能,在这个过程中用户的使用姿态更接近于使用手机进行自拍,通过在手机界面中点击、滑动进行妆效的挑选,软件通过AR贴图的形式为用户提供预览。
由于手机等移动设备的屏幕尺寸有限,用户无法获得良好的参照体验,同样的用户也无法通过单手操作完成化妆,如果使用手机支架等辅助设备将手机架在用户面前,又会涉及到屏幕与用户之间距离的变化以及能否清晰看到界面中的文字等内容的问题,所以基于手机等移动设备进行试妆、化妆都有较大的局限,使用户体验不足。
发明内容
本申请提供了一种提供数字化试妆、化妆方法的美妆交互平台,解决了当前市场上美妆镜产品功能单一,无法系统地进行美妆辅助,从而导致无法为用户提供个性化服务的问题。
一种美妆交互平台,包括:
美妆交互模块,用于与用户进行交互,采集用户面部信息,接收所述用户的操作指令,基于用户人脸图像,显示与所述用户人脸图像贴合的美妆妆效;
云计算模块,用于根据所述美妆交互模块采集的用户面部信息以及所述操作指令进行计算,向所述美妆交互模块返回计算结果;
数据库存储模块,与所述云计算模块通信连接,用于所述用户面部信息、以及所述计算结果的存储。
在本申请的一种实施例中,所述美妆交互模块包括:高清显示器、控制单元、电源、摄像头模组;所述高清显示器为4k高清显示器,与所述摄像头模组连接;所述控制单元为蓝牙mesh,用于向支持蓝牙mesh协议的设备发送或接收来自所述设备的指令;所述摄像头模组的焦距包括56mm和77mm,位于所述高清显示器上边缘的中间位置,用于采集用户人脸图像;所述电源用于为所述美妆交互模块供电。
在本申请的一种实施例中,所述云计算模块分析所述用户的面部数据,根据所述用户的面部数据生成对应美妆数据,将所述美妆数据下发到所述美妆交互模块。
在本申请的一种实施例中,所述美妆交互模块还包括外壳、光源;所述外壳为厚度2mm的透光外壳;所述光源为led三色可变光灯带,围绕在所述外壳周围,用于根据环境光强自动调节亮度和色温。
在本申请的一种实施例中,所述美妆交互模块还包括数据存储单元和终端设备;所述数据存储单元,与所述摄像头模组连接,用于本地存储用户从所述数据库存储模块下载的美妆妆效;终端设备,与所述数据存储单元连接,用于将用户产品上传到所述数据库存储模块中。
在本申请的一种实施例中,所述美妆交互模块还包括角度传感器;所述角度传感器安装在用户的化妆产品上,用于向所述控制单元发送用户操作的角度信号;所述控制单元将所述角度信号传送到所述云计算模块,所述云计算模块根据所述角度信号指导用户上妆规范。
在本申请的一种实施例中,所述美妆交互模块还包括温度传感器,用于获取环境温度。
在本申请的一种实施例中,所述美妆交互模块还包括湿度传感器,用于获取环境湿度。
在本申请的一种实施例中,所述云计算模块还用于根据用户下单的产品链接对应购物平台。
在本申请的一种实施例中,所述云计算模块还用于根据所述美妆交互平台获取的用户面部信息生成对应的皮肤检测报告。
一种数字化试妆、化妆方法,包括:
获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
在本申请的一种实施例中,所述获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品,具体包括:获取所述目标妆容的化妆步骤;获取所述化妆步骤中使用到的第一产品,获取所述第一产品的第一参数;根据所述第一参数查询终端设备中与所述化妆步骤中使用到的第一产品相同的第二产品。
在本申请的一种实施例中,所述获取所述目标妆容的第一参数后,所述方法还包括:根据所述第一参数确定对应所述目标妆容的第一产品;在数据库中查找与所述第一产品相同的第二产品,若没有匹配到与所述第一产品相同的第二产品,则查询是否存在与所述第一产品具有相同参数的产品,作为第二产品;若是,根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;若否,基于用户操作确定美妆妆效。
在本申请的一种实施例中,所述根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效后,所述方法还包括:基于用户操作,根据所述第二参数确定预设参数范围以及所述预设参数范围内对应的第三产品;或基于用户选择确定第三产品,根据所述第三产品的第三参数生成与所述人脸图像贴合的美妆妆效。
在本申请的一种实施例中,所述根据所述第二参数确定预设参数范围以及所述预设参数范围内对应的第三产品后,所述方法还包括:确定所述第三产品的第三参数,所述第三参数至少包括以下一种:质地参数、颜色参数;获取用户的面部信息参数,所述面部信息参数至少包括以下一种:肤质参数、肤色参数;基于用户选择的第三产品,将所述用户选择的第三产品的质地参数与所述肤质参数匹配,得到肤质匹配效果;将所述颜色参数与所述肤色参数匹配,得到颜色匹配效果。
在本申请的一种实施例中,所述生成对应所述美妆妆效的化妆流程,具体包括:获取对应所述美妆妆效的化妆视频,对所述化妆视频进行识别后确定化妆节点,根据所述化妆节点对所述化妆视频进行分段,得到分段视频;对所述分段视频中的语言描述内容以及肢体动作内容进行识别,生成表格内容;根据所述表格内容进行搜索得到对应的化妆参数,并对照评估参数对所述化妆参数进行调整;根据调整完成的化妆参数生成每个化妆节点的画法流程。
在本申请的一种实施例中,所述生成对应所述美妆妆效的化妆流程后,所述方法还包括:在用户上妆过程中,实时获取用户面部信息;根据所述用户面部信息与所述化妆参数进行对比,得到参数差值;根据所述参数差值确定用户妆效是否合格。
在本申请的一种实施例中,所述方法还包括:获取用户拥有的美妆产品,将所述用户拥有的美妆产品存储至数据库中;当用户根据所述目标妆容中包含的第一产品匹配相同的第二产品时,优先将所述数据库中存储的美妆产品在终端设备显示。
一种数字化试妆、化妆装置,包括:
显示模块,用于获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
匹配模块,用于响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
美妆生成模块,用于根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
流程生成模块,用于基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
一种非易失性存储介质,存储有计算机可执行指令,所述计算机可执行指令由处理器执行,以实现下述步骤:
获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
本申请提供了一种提供数字化试妆、化妆方法的美妆交互平台,至少包括以下有益效果:用户通过美妆交互模块能够最大程度的还原用户在照镜子时候的人脸图像,使屏幕中显示的人脸图像更加真实、清晰;通过获取并分析用户的面部信息,使用户能够更加清楚自己的肤质,也能够根据用户肤质匹配符合其肤质的产品;通过在屏幕中显示贴合人脸的美妆特效,能够让用户自己浏览适合的美妆或选择自己喜欢的美妆,最大程度地为用户提供了个性化服务。通过本申请提供的方案,用户可以根据系统内置的面部识别、数据提取方案获得真实有效的面部区域画法指导,可以进行真实的、贴合度高的、色彩还原度高的试妆效果预览、可以根据试妆后心仪的妆效开始进行化妆、根据系统拆解的详细化妆流程与用户自己拥有的产品参数的匹配,用户可以完成整个化妆流程并获得较高的满意度、用户可以在系统中获得自己未拥有的化妆品的推荐和已拥有化妆品的使用介绍和推荐。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本申请实施例提供的一种美妆交互平台结构示意图;
图2为本申请实施例提供的美妆交互模块组成示意图;
图3为本申请实施例提供的美妆交互平台的功能实现说明示意图;
图4为本申请实施例提供的一种数字化试妆、化妆方法步骤示意图;
图5a为本申请实施例提供的识别视频语音后获得的文字图;
图5b为本申请实施例提供的识别文字中的关键词示意图;
图5c为本申请实施例提供的视频关键词过滤示意图;
图5d为本申请实施例提供的根据视频关键词生成表格示意图;
图5e为本申请实施例提供的表格内容说明图;
图6为本申请实施例提供的系统生成的眼妆区域的画法示意图;
图7为本申请实施例提供的根据产品参数生成对应妆容的化妆步骤流程图;
图8为本申请实施例提供的试完整妆容流程示意图;
图9为本申请实施例提供的试局部妆容流程示意图;
图10为本申请实施例提供的试产品流程示意图;
图11为本申请实施例提供的工具类产品参数信息示意图;
图12为本申请实施例提供的美妆交互平台功能架构图;
图13为本申请实施例提供的化妆过程的流程示意图;
图14为本申请实施例提供的试妆、化妆的效果示意图;
图15为本申请实施例提供的一种数字化试妆、化妆装置示意图;
图16为本申请实施例提供的一种数字化试妆、化妆设备示意图。
附图标记
高清显示屏1、灯带2、蓝牙mesh3、电源4、摄像头模组5。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例对本申请进行清楚、完整的描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
现有市场上产品使用镜面屏幕可以为用户同时提供镜面反射成像即虚拟的数字信息显示,但是这种情况将为用户带来双向信息的损失,为了良好的呈现数字信息,镜面屏幕一般选用颜色较暗的单向镜,很容易呈现偏暗的环境色及用户的肤色,影响用户准确的观察自己的面部。数字信息将一直保持过亮的状态,并且无法与镜面反射成像进行良好的融合,妆效信息将浮于镜面表面,并且存在较严重的位置便宜,导致用户无法更具数字提示获取精准定位,不利于进行试妆及化妆。
本申请提出一种利用高清显示屏、led灯光辅助、摄像头模组辅助的数字化妆镜作为美妆交互平台的美妆交互模块,这种数字化妆镜更加注重用户在使用过程中的整体体验,帮助用户完成试妆、试产品、化妆流程,解决了目前市面上存在的一些体验不足的问题。
从交互式系统设计流程出发,除了为数字美妆场景提供硬件原型设备支持外,本申请提出一种美妆交互平台,建立平台型产品,梳理平台基础架构,进而为用户提供数字化美妆场景下的更多服务。
通过场景、设备方案、产品类型、功能支持、交互方式的划分,本申请将不同类型的代表性产品进行对比,发现大部分产品体验流程中都不涉及详细的化妆辅助流程或不将其作为体验重点进行设计,提供试妆的产品也由于显示设备、光线条件因素的差异使得AR试妆效果不够真实、不够贴合。就这一问题我们通过提供高清显示屏、摄像头参数矫正、搭建光线环境为用户提供更具真实感、显示效果优质的美妆方案,并为用户提供试妆、化妆两大核心服务,在试妆过程中提供试完整妆容、试局部妆容、试产品的服务,结合用户的试妆结果和用户的自主挑选提供化妆流程拆解,通过数字化辅助区域显示、产品搭配、画法解析、实时效果对比反馈,指导用户完成化妆流程。
硬件终端服务应满足用户试妆、化妆、试产品的流程需求,以摄像头捕捉画面为界面背景,以人像作为界面信息显示的参考,完整妆容、部分妆容按照用户已持有产品的搭配妆容和更多用户未尝试过的妆容分为两大类,用户可以查看已有产品的不同搭配方法和使用建议,进入化妆步骤,也可以通过选择想要使用的产品查看可以实现的妆容来实现化妆流程;对于更多没有尝试过的妆容效果,用户可以进行试妆,妆容根据“新”、“热”程度进行分类,用户可以挑选自己喜欢的妆容并查看能够实现妆容的相关产品,根据自己的喜好选择是否要进行购买,或根据系统(美妆交互平台)给出的产品相似度建议进行产品混用,通过已有产品的不同使用方法达到类似妆容的效果。本申请提供的美妆交互平台的智能化和人性化在于能够根据系统内已有的数据和信息,将合适的经验、方法、产品推荐给用户,帮助用户合理地解决问题。下面进行具体说明。
图1为本申请实施例提供的一种美妆交互平台示意图,可以包括以下模块:
美妆交互模块110,用于与用户进行交互,采集用户面部信息,接收所述用户的操作指令,基于用户人脸图像,显示与所述用户人脸图像贴合的美妆妆效;
在本申请的一种实施例中,所述美妆交互模块110美妆交互模块110可以为美妆镜、化妆镜、高清显示屏幕等,本申请通过摄像头模组采集用户人脸信息,从而进行数字试妆。也可以包括:高清显示器、控制单元、电源、摄像头模组。
具体地,所述高清显示器为4k高清显示器,与所述摄像头模组连接;4K分辨率属于超高清分辨率。在此分辨率下,用户将可以看清画面中的每一个细节。
例如在美妆过程中获取皮肤纹理材质,为了使用户能够更加清楚地根据自己的皮肤状况上妆,就需要对皮肤的毛孔、纹理、痘印进行清晰地显示,4K分辨率的显示屏幕完全可以满足用户需求。
所述控制单元为蓝牙mesh,用于向支持蓝牙mesh协议的设备发送或接收来自所述设备的指令。蓝牙mesh可设置在美妆交互模块110不影响高清显示器使用的任意处。比如,如图2所示为美妆交互模块组成示意图,包括高清显示屏1、设置在高清显示屏边缘上的灯带2、蓝牙mesh3、电源4、摄像头模组5,电源和蓝牙mesh设置在美妆交互模块的高清显示器背部,在图中用虚线表示。传统的蓝牙,往往是一个蓝牙与一个终端固定配对,并且受限于蓝牙的传输特点,蓝牙无法克服墙体复杂的遥控环境和较远距离传输,本申请使用蓝牙mesh可以在智能家居之间进行组网,形成蓝牙mesh网络,可将不同设备之间的数据进行转发,提高了信息传输的效率。
所述摄像头模组可以为单个摄像头,也可以为多个,其焦距包括56mm和77mm,可以位于所述高清显示器上边缘的中间位置,用于采集用户人脸图像;根据人体尺度与室内空间的关系,我们在实验场景中设定人与屏幕之间的初始距离和摄像头焦距,以2020年更新的我国18-44岁男性和女性的平均身高分别为169.7cm和158.0cm的标准数值作为参考,坐姿化妆台场景下人眼与镜面的距离应在40-61cm之间,桌面坐姿场景下人通常手作业区域半径大约为39cm,考虑到化妆场景中桌面化妆品的放置,我们将人眼与屏幕的初始距离设置在50cm,以标准人头高度23cm为例,实现屏幕显示人像与本人面部等大,摄像头需采用56mm焦段。
所以,本申请摄像头使用56mm焦段,能够在屏幕中最优的呈现出照镜子的人脸图像。
与以往研究不同的是,本申请构建的美妆交互平台坚持以体验设计为中心,从用户的在美妆场景中的各环节需求出发以构建整体的设计和技术架构。整个系统基于摄像头为用户提供实时反馈,并提供可操作用户界面,相较于传统化妆场景中用户使用镜子来进行面部及妆容的查看,数字化的显示方式有很多现存缺陷,摄像头成像存在较严重的镜头畸变使得成像与真实镜面反射成像不符,因而本申请提供的美妆交互平台对摄像头参数及成像素质进行优化以实现流畅完整的系统体验。
本申请还能够通过摄像头进行产品识别及录入,通过云计算模块120帮助用户进行产品分析。
所述电源安装在高清显示屏幕背部,用于为所述美妆交互模块110供电。
在本申请的一种实施例中,所述美妆交互模块110还包括外壳、光源;所述外壳为厚度2mm的透光外壳;所述光源为led三色可变光灯带,围绕在所述外壳周围,可通过光线传感器根据环境光强自动调节亮度和色温。
具体地,光源可采用灯泡、灯带等。
例如,可以采用两个led灯泡组(每组五个灯泡)作主光源,但结合化妆场景中利用人造光源辅助化妆的整个过程,用户面对直射光源的时间长度有明显的特征,使用灯泡作为光源会影响到用户整个过程的舒适度和眼部疲劳度。
人的视网膜能承受的最高亮度为106cd/m2[93],超过此亮度可能会使视网膜受损引起识别障碍。化妆场景中的光环境搭建可以参考室内光环境设计的共性理论并与用户反馈进行结合,由此,主光源(直射光)可以有显示屏幕光X1(3840X2160分辨率,4K,27英寸,外边缘59.6X33.5cm,色数10.7亿,亮度350cd/m2)、led灯泡X10(4.5w-40w,470ml,色温3000k-6500k,光效105lm/w)两种。
更优选的,结合用户对镜子外形和光源强度的反馈,大部分用户表示不喜欢裸露的灯泡和刺眼的光线,所以我们将主光源更换成了led灯带。通过led三色可变光灯带可以根据环境的光源变化调整光照强弱,从而使光源的光照强度更符合人眼承受范围。
具体地,外壳安装在高清显示器上,设置在外壳边缘部分为led三色可变光灯带,用于发光。
在本申请的一种实施例中,所述美妆交互模块110还包括数据存储单元和终端设备;所述数据存储单元,与所述摄像头模组连接,用于本地存储用户从所述数据库存储模块下载的美妆妆效;所述终端设备,与所述数据存储单元连接,用于将用户产品上传到所述数据库存储模块中。
具体地,为了能够快速地响应用户选择的美妆妆效,在用户第一次点击时,将所述美妆妆效下载到本地的数据存储单元中,这样在用户下一次点击同样的美妆妆效时,可以直接从本地获取,快速显示对应的美妆妆效。
终端设备可以为手机、扫码机等终端,终端设备服务应满足用户日常使用的便利,辅助用户进行化妆品信息录入、化妆品分类,对用户持有的化妆品信息进行整理,满足用户对化妆品的再次查看,为用户提供相关必要信息。化妆产品在界面中的呈现应保持清晰、简介,化妆品整理的有序性会影响用户识别和找到化妆品的效率,在找寻化妆品的过程中应尽量减少数字化带来的阻碍。化妆品种类繁多、产品本身的形态各异,数字化的化妆品整理界面不应出现太多的界面层级,尽量保证用户在翻阅、滑动界面的过程中不产生迷失感。本申请使用“活动卡片”组件呈现化妆品信息,用户可以通过点击逐步查看更详细的内容,如化妆品识别性图片、名称应处于首要层级;化妆品色号、购入时长、使用限制日期等内容处于次要层级;化妆品的使用建议处于进一步的延申层级,用户需要时即可查看,不占用过多的一级界面空间;支持用户操作的按键应根据其触发频率选择层级,如“一件回购”按键,用户会在产品用完的时候选择是否回购,使用频率相对较低,但又要保持较短的操作链路,因而需将其置于次要层级,不影响用户浏览产品且较容易触达。
在本申请的一种实施例中,所述美妆交互模块110还包括角度传感器;所述角度传感器安装在用户的化妆产品上,用于向控制单元发送用户操作的角度信号;所述控制单元将所述角度信号传送到所述云计算模块120,所述云计算模块120根据所述角度信号指导用户上妆规范。
例如,美妆初学者在根据生成的化妆流程上妆时,容易出现做不规范的情况,上妆时的角度不对会出现上妆不均匀、颜色不一致等问题,导致上妆效果不好。本申请通过配置角度传感器,使用户佩戴在化妆产品上,方便获取用户的操作,通过蓝牙mesh接收传感器信号后传送到云计算模块,当检测到用户的操作角度出现偏差时,提醒用户标准的操作规范,以帮助用户完成妆容。
在本申请的一种实施例中,所述美妆交互模块110还包括温度传感器,用于获取环境温度。
具体地,由于不同地域上的季节变换的不同、气温的不同,用户对护肤产品以及对于美妆产品的要求也会不同,在美妆交互模块110上配备温度传感器,能够实时获取当前的环境温度,然后根据当前用户的肤质、肤色等信息,结合环境气温,匹配对应季节或温度的美妆产品,并向用户推荐,使用户结合自身肤质个性化的上妆,使美妆效果更加持续,提高用户体验。
在本申请的一种实施例中,所述美妆交互模块110还包括湿度传感器,用于获取环境湿度。
具体地,由于不同地域、不同时间的环境湿度不同,用户的护肤以及化妆的妆感、美妆产品的使用量也不同,因此,化妆镜中可以设置湿度传感器,通过湿度传感器获取当前环境的湿度,在用户准备护肤或化妆时,可以根据用户的面部参数,包括肤质、纹理等以及当前的环境湿度给予用户美妆建议信息,并在美妆交互模块110中显示。
例如,当在冬天气温较低时,天气比较干燥,可以提醒用户在化妆前注意补水保湿,当在夏天气温较高时,可以提醒用户注意水油平衡,防止脱妆。
本实施例中,通过获取用户当前所处环境的温度和/或湿度,再根据用户的面部参数,以及温度和/或湿度,获取用户的美妆建议信息并向用户显示美妆建议信息,可以使用户化妆之后的妆容更加完美,提高用户体验。
云计算模块120,用于根据所述美妆交互模块110采集的用户面部信息以及所述操作指令进行计算,向所述美妆交互模块110返回计算结果。
在本申请的一种实施例中,所述云计算模块120分析所述用户的面部数据,根据所述用户的面部数据生成对应美妆数据,将所述美妆数据下发到所述美妆交互模块110。
具体地,云计算模块120根据美妆交互模块110发送来的数据,获取用户的面部参数并分析,根据用户选择的目标妆容生成与所述人脸图像贴合的美妆妆效;基于确认美妆妆效事件的触发,获取对应所述美妆妆效的化妆流程。
用户还可以将个人持有产品通过摄像头或手机等终端拍摄后上传到数据库存储模块130中,在通过云计算模块120对产品进行识别后,对各个产品进行产品分类存储。
在本申请的一种实施例中,所述云计算模块120还用于根据用户下单的产品链接对应购物平台。
具体地,云计算模块120根据用户选择的妆容匹配相应的产品并显示在高清显示屏上,用户在高清显示屏上点击想要的产品链接后,跳转链接到对应的购物平台,方便用户直接下单,而不用再去移动终端搜索相关产品,为用户节省了时间。
在本申请的一种实施例中,所述云计算模块120还用于根据所述美妆交互平台获取的用户面部信息生成对应的皮肤检测报告。
具体地,云计算模块还可以对用户面部信息进行分析,帮助用户更好的了解自己的肤质,选择适合的方法和产品用于护肤、美妆,提高用户体验。
数据库存储模块130,与所述云计算模块120通信连接,用于所述用户面部信息、以及所述计算结果的存储。
具体地,将用户的身份信息与获取的用户面部信息进行对应存储,对用户的选择的产品及订单等进行存储,记录用户的使用记录,可以让用户快速查询历史记录,方便用户使用。
数据库存储模块130还用于将用户录入的产品进行存储,还可以通过云计算模块120分析后获取产品产品参数,进行分类后存储,用户可以通过查询名称、色号、可用日期等获取到相应产品。
接下来介绍本申请所提出的数字化试妆、化妆方法,该数字化试妆、化妆方法可以在本申请提出的美妆交互平台上实现。
如图3所示为数字化美妆场景下的信息需求示意图;结合试妆、化妆两大需求点,进行完成流程所需的信息整理,将信息体系分为化妆流程信息、产品描述信息、前端交互信息、系统反馈信息四大类,这四类信息中存在密切的信息关联,比如产品通过获取产品参数体系建立产品描述信息,化妆流程中的手法显示在前端与用户进行交互等。
目前市面上大部分的智能镜子以及对智能镜子的定义是一种由镜面屏幕作为主显示设备,通过摄像头捕捉,将高清人像显示在显示屏中为用户提供“照镜子”这一基础功能的实现,能够为用户提供一定的信息显示并且可能能够支持语音交互、搭载智能助手的一种智能设备。
在美妆场景中,为了提供更丰富的功能类别,很多智能试妆设备采用一个较大的电子平板作为“试妆镜”,为用户提供AR妆效预览的服务,从而方便用户挑选产品进行购买,在线上场景中,这种方法可以避免用户反复将产品涂抹在脸上带来的不便。
同样提供AR妆效预览的还有线上平台,在这种线上场景中,智能美妆更偏向于一种基于手机的软件(手机APP),软件的使用需要调用手机前置摄像头,从而使用AR试妆功能,在这个过程中用户的使用姿态更接近于使用手机进行自拍,通过在手机界面中点击、滑动进行妆效的挑选,软件通过AR贴图的形式为用户提供预览。此类产品已经拓展到很多品牌及商家的应用,包括本地软件、网页、小程序等形式。
以上的几种方式分别存在一些影响优质体验的弊端因素:
使用镜面屏幕可以为用户同时提供镜面反射成像即虚拟的数字信息显示,但是这种情况将为用户带来双向信息的损失,为了良好的呈现数字信息,镜面屏幕一般选用颜色较暗的单向镜,很容易呈现偏暗的环境色及用户的肤色,影响用户准确的观察自己的面部。数字信息将一直保持过亮的状态,并且无法与镜面反射成像进行良好的融合,妆效信息将浮于镜面表面,并且存在较严重的位置便宜,导致用户无法更具数字提示获取精准定位,不利于进行试妆及化妆。
现有的试妆电子屏幕往往搭载一个屏下摄像头,在这种情况下会存在较严重镜头畸变和视点偏移问题,用户无法在试妆过程中像照镜子一样与自己进行对视,在线下场所中灯光环境也存在多变和不稳定的问题,导致用户无法获取自己的真实肤色,也无法获取自己的肤色与产品到底是否适合的结果。在用户使用电子屏幕的过程中,电子屏幕一般采用触摸屏交互的形式,意味着用户需要不断地点击屏幕,滑动屏幕以进行选择和确认,这种方式对比“照镜子”这一行为来说是及其不自然的,在多位用户不断使用过后,屏幕上也会留有很多的手指印记,不利用用户观看屏幕,造成不良好的体验。
对比妆容的呈现效果,手机平台是目前效果最为真实的,但是具体效果显示也是参差不齐,具体效果受软件、小程序的摄像头调用及算法优化影响较大,一般小程序的预览效果较差,因为手机前置摄像头的镜头畸变较严重,并且同样存在用户所处的环境中灯光条件不统一的问题,同样受用户使用的手机品牌影响也较大,整个的体验中存在较多变量无法被统一,导致体验不整体、不流畅。一般软件中品牌方通过灯光充分、良好拍摄的模特图吸引用户来使用,而用户真正使用的效果与效果图存在较大偏差,这时将为用户带了较大的体验落差,导致用户满意度下降甚至为用户带来负面情绪。由于手机等移动设备的屏幕尺寸有限,用户无法获得良好的参照体验,同样的用户也无法通过单手操作完成化妆,如果使用手机支架等辅助设备将手机架在用户面前,又会涉及到屏幕与用户之间距离的变化以及能否清晰看到界面中的文字等内容的问题,所以基于手机等移动设备进行试妆、化妆都有较大的局限。
为了解决上述问题,本申请提出的美妆场景中的数字化解决方案旨在解决以上一系列的体验不足问题并且为用户带来更自然的交互模式和更充分的利于用户使用的内容,从体验设计出发,本申请在设计一种生活方式、通过产品的使用和化妆的完成,能够为用户提供愉悦感、满足感。
在美妆场景中,我们认为数字化妆镜、智能美妆镜等产品应该将着眼于美妆、化妆流程中为用户提供的体验关注,而不是一味的程式化叠加与美妆不相关的功能,利于天气、日期、日程、新闻等内容,在进行数字化产品设计时,我们应更加关注体验内容及体验本质为用户带来的优质服务,而不是重复所有数字化产品都具备的功能,为用户带来体验负担或重复性体验,本申请认为数字美妆解决方案应着眼于用户的生活方式,将其作为用户生活的一部分,真正考虑如何才能帮助用户试好妆、化好妆。下面结合本申请提出的美妆交互平台进行具体说明。
图4为本申请实施例提供的一种数字化试妆、化妆方法的步骤示意图,可以包括以下步骤:
S410:获取目标使用者的人脸图像,并显示与人脸图像贴合的美妆模板。
具体地,由于现有试妆电子屏幕往往搭载一个屏下摄像头,在这种情况下会存在较严重镜头畸变和视点偏移问题,用户无法在试妆过程中像照镜子一样与自己进行对视,在线下场所中灯光环境也存在多变和不稳定的问题,导致用户无法获取自己的真实肤色,也无法获取自己的肤色与产品到底是否适合的结果。
为了解决上述问题,本申请通过对摄像头模组参数及成像素质进行优化以实现流畅完整的系统体验(本申请所说的系统可以为任何美妆系统,比如手机美妆APP、专用美妆产品、美妆交互平台等)。摄像头素质优化包括对其感光度、焦段、畸变矫正和视点矫正、景深控制等内容的调节,目的是实现面部信息的真实呈现。感光度影响着成像色彩参数是否符合真实空间光线条件下的人脸及面部色调,进而影响面部色调与美妆产品颜色的贴合程度,焦段的选择和调节能够保证成像接近人眼视角从而贴近镜面反射的效果,畸变和视点矫正可在人像移动或偏移时也为用户提供尽可能接近人眼效果的面部形状从而减少普通镜头捕捉人像时的失真感,景深控制实现接近人眼的面部对焦效果,弱化背景对面部信息的影响。
所以,通过本申请的美妆交互模块(可以是手机、显示屏等终端设备)的摄像头模组采集到的人脸图像,能够在终端设备的屏幕中显示与人脸图像更加贴合的美妆模板,使AR试妆效果更加真实、贴合。
S420:响应于用户的操作确定目标妆容,获取目标妆容的第一参数,根据第一参数匹配与目标妆容中包含的第一产品相同的第二产品。
在本申请的一种实施例中,获取用户拥有的美妆产品,将用户拥有的美妆产品存储至数据库中。
具体地,用户在使用之前可以将自己拥有的美妆产品通过拍摄等方式上传到美妆交互平台的数据库存储模块中,以便在美妆过程中可以优先通过云计算模块匹配和选用当下拥有的产品,提高用户体验。
例如,用户可以通过扫描产品外观、上传产品外观图片、扫描产品条形码或跨平台选择购买链接的操作单次、批量录入产品,为保持体验的一致性,产品信息由平台统一整理,结合官方、互联网内容,保证产品与界面呈现信息的一一对应,加入更多使用建议查看的板块为用户提供更丰富的信息选择,保证一定的自由度。通过云计算将产品按照品类进行划分,将品牌信息纳入产品展示首要层级,用户也可以通过产品外观图片轻松识别品牌,用户也可以根据品牌类别来查看自己持有各品牌产品的情况。
在本申请的一种实施例中,获取目标妆容的化妆步骤;获取化妆步骤中使用到的第一产品,获取第一产品的第一参数;根据第一参数查询终端设备中与化妆步骤中使用到的第一产品相同的第二产品。
具体地,用户在使用美妆交互模块时可以通过在界面上滑动或点击等方式选择美妆模板,用户通过浏览各个美妆模板的妆容效果,选定的喜欢的美妆模板作为目标妆容。通过拆解妆容步骤,获取到每个步骤中使用到的第一产品,然后获取第一产品的颜色参数、质地参数等产品参数,通过对照数据库存储模块中的个人信息以及颜色参数、质地参数、个人持有美妆产品等数据,匹配到与第一产品相同的第二产品(本实施例中第二产品为用户所拥有的产品)。
当用户根据目标妆容中包含的第一产品匹配相同的第二产品时,优先将数据库中存储的美妆产品在终端设备显示。
具体地,为了使用户能够预先选用自己拥有的产品。本申请通过用户将自己使用的产品上传到数据库,在产品选择过程中优先显示用户已经拥有的产品,提高用户使用体验。
在本申请的一种实施例中,获取所述目标妆容的第一参数后,根据所述第一参数确定对应所述目标妆容的第一产品,在数据库中查找与第一产品相同的第二产品,若没有匹配到与目标妆容中包含的第一产品相同的第二产品,则查询是否存在与第一产品具有相同参数的产品,作为第二产品;若是,根据第二产品的第二参数生成与人脸图像贴合的美妆妆效;若否,基于用户操作确定美妆妆效。
具体地,当在数据库存储模块中未查询到与第一产品到相同的第二产品时,通过云计算模块可以搜寻具有第一参数的替换产品,作为第二产品。如果有替换产品,则更换对应替换产品效果的妆效,供用户选择。如果没有可替换产品,确定用户是否坚持当前妆容,若不坚持,推荐更换其他妆容。
例如,用户在选定一号妆容后,确定一号妆容中使用到的产品,包括眼影A,粉底B等,如果美妆交互平台未匹配到上述产品,则根据颜色参数、质地参数等搜寻是否有和眼影A相同的产品眼影A’,根据颜色参数、质地参数等搜寻是否有和粉底B相同的产品粉底B’,如果存在,则获取眼影A’、粉底B’的参数,生成对应的美妆妆效。
在本申请的一种实施例中,根据第二产品的第二参数生成与人脸图像贴合的美妆妆效后,基于用户操作,根据第二参数确定预设参数范围以及预设参数范围内对应的第三产品;或基于用户选择确定第三产品,根据第三产品的第三参数生成与人脸图像贴合的美妆妆效。
例如,当用户想查看当前满意妆效下,是否还有其他能够匹配的、性价比高的产品,此时根据当前满意妆效的第二参数,确定在以该第二参数为中心预设范围内的第三产品,用户浏览产品选择后可进行试妆。
在本申请的一种实施例中,根据第二参数确定预设参数范围以及预设参数范围内对应的第三产品后,确定第三产品的第三参数,第三参数至少包括以下一种:质地参数、颜色参数;获取用户的面部信息参数,面部信息参数至少包括以下一种:肤质参数、肤色参数;基于用户选择的第三产品,将用户选择的第三产品的质地参数与肤质参数匹配,得到肤质匹配效果;将颜色参数与肤色参数匹配,得到颜色匹配效果。
具体地,为了用户能够更好地根据自己的肤色、肤质判断适合自己的产品。在用户选定任一第三产品后,通过云计算模块获取该第三产品的第三参数,与用户本身的肤色、肤质相匹配,以确定不同产品的上妆效果。
例如,用户本身的肤色偏黑,肤质偏油,粉底A颜色偏白、质地干爽,用户在选择粉底A后,确定粉底A的颜色和用户肤色匹配的效果偏低、质地效果吻合,可将上妆效果显示在屏幕上以便用户查看。
S430:根据第二产品的第二参数生成与人脸图像贴合的美妆妆效。
具体地,摄像头模组在采集用户人脸图像后,通过云计算模块自动识别人脸器官位置,根据获得的第二参数,包括颜色参数、质地参数等,生成贴合人脸图像的美妆妆效。
S440:基于确认美妆妆效事件的触发,生成对应美妆妆效的化妆流程。
在本申请的一种实施例中,获取对应美妆妆效的化妆视频,对所述化妆视频进行识别后确定化妆节点,根据所述化妆节点对化妆视频进行分段,得到分段视频;对分段视频中的语言描述内容以及肢体动作内容进行识别,生成表格内容;根据表格内容进行搜索得到对应的化妆参数,并对照评估参数对化妆参数进行调整;根据调整完成的化妆参数生成每个化妆节点的画法流程。
具体地,拆解不同的美妆教程的上妆流程,将不同输出者的语言语义进行内容定义,重置本系统所需的内容语义并且将其拆解成流程化、个体化更强的可联通内容节点,整个过程经过人工提取、定义规则到自动生成拆解的过程。首先给视频分段,在每一段视频中找到上妆前、上妆中步骤、上妆后效果的关键节点,将每一段的步骤对应的输出者主观描述内容拆解成表格内容,对表格中对应的内容进行搜索并对照官方内容参数调整内容至细致拆分的节点。其中不同产品或内容所对应的内容拆解结构会有所不同,底妆、修容等步骤注重对面部位置区域信息的获取,对产品材质的关注度较高,眼影、口红等步骤注重颜色体系,大部分产品材质相同,因而关注度集中在了色调、色相、色彩配合等方面,修容步骤需要更换多种工具、对步骤的拆分方法更多。每一步骤的对照评估参数也各不相同。根据初始步骤中识别到的不同用户的面部问题会各不相同,所对应的手法、工具、产品会因此产生整体或部分的调整。
当用户选定目标美妆妆效后,获取对应该美妆妆效的化妆视频,对应目标美妆妆效的海量化妆视频可以预先存储在云端的数据库存储模块,在云计算模块匹配到对应化妆视频后,用户可自行下载拆解,也可以通过用户自定义上传心仪的化妆视频后通过云计算模块拆解化妆视频流程。化妆视频的拆解可以通过预先在美妆交互平台中搭建的视频拆解框架进行拆解,也可以通过调用第三方软件进行视频的拆解。通过拆解互联网中的化妆视频,得到一系列流程拆解并提取相关语义,依据对化妆流程的拆解,可以完成画法语义的设定。
例如,可以通过将化妆视频中拆解得到每一帧的图像,然后识别每一帧的图像中的人物动作,判断当前处于的化妆节点为“眼妆”节点、“眉妆”节点或“唇妆”节点等;或根据视频中的语义对应识别化妆节点,比如,视频中说道:“接下来是眼妆部分”,那么根据该句话的语义,将视频定位到“眼妆”节点,或通过识别视频中字幕的语义及图文注释确定化妆节点。化妆节点可以包括底妆节点、定妆节点、修容节点、眉妆节点、眼妆节点、腮红节点、唇妆节点等。
如图5a为本申请实施例提供的烟熏玫瑰妆视频拆解后得到的包含视频中不同节点的文字内容,图5b为对图5a中的文字内容进行识别后,可以通过不同的颜色标记出符合名称、颜色、质地、用量、工具、位置、手法、效果、目的等类型的关键词,图5c为对图5b中标记出的关键词进行筛选后得到的视频中的关键词以及对关键词进行语义识别后得出的步骤重点,最终得到图5d所示的表格内容,包括步骤顺序、妆容分类、面部区域、目的、产品、产品描述、手法、上妆结果目的、整体感受等部分的说明。如图5e所示,产品描述部分为关于质地、颜色体系等的说明;手法部分为关于用量、工具、具体位置及手法、目的、完成度比较等的说明。
有效试妆后的上妆过程配合实时反馈界面,为用户提供包括步骤、区域、产品、工具、手法在内的详细上妆拆解过程,上妆过程中的体系化信息架构经过系统设计语言的规范化、一体化处理为用户提供一致、流畅的体验。
以眼妆为例,区域、方向、笔划、笔参数、手拿笔姿势、区域走向、完成度对比构成完整的画法。如图6所示,为根据化妆视频对化妆流程拆解后生成的眼妆区域的画法流程。
如图7所示,在产品参数信息中,系统提供包括品牌、称号、物品在内的产品名称信息组;颜色分类、光感、款式、版本、状态、净含量、适用推荐在内的产品规格信息组;官方提供的产品图、产品试色、色彩语义称号在内的产品图片示意;官方提供的产品使用推荐妆容的名称、效果图构成妆容示意;产品用量、工具、步骤拆解在内的妆容画法。
基于以上产品参数体系及流程拆解,系统通过对以上数据进行分析并存储,可以为用户提供详细的化妆步骤拆解及示意,比如,步骤包括:
底妆:妆前、粉底、遮瑕、膏状产品修容、粉状产品修容、定妆;
眉妆:眉笔画法、粉状产品画法、染眉膏画法;
眼妆:粉质单色眼影画法、粉质多色眼影盘画法、液体状眼影画法;
面妆:腮红画法、高光画法;
唇妆:唇线画法、唇周修饰画法、唇部主色画法。
在本申请的一种实施例中,生成对应美妆妆效的化妆流程后,在用户上妆过程中,实时获取用户面部信息;根据用户面部信息与化妆参数进行对比,得到参数差值;根据参数差值确定用户妆效是否合格。
具体地,如果用户出现卡粉、粉底未涂抹均匀的情况,通过摄像头模组采集到用户面部信息,在每一步骤中与正常妆效进行对比,得到用户面部信息与正常妆效的参数差值,如果超出预设范围内,则说明用户操作上妆有误。
例如,粉底均匀涂抹在脸颊上,则该处皮肤的颜色色差应该在合理范围内,否则,即可识别为粉底涂抹不均匀的情况。
如图8所示为试妆流程示意图。用户在美妆设备上试完整妆容,浏览妆容效果,然后根据浏览的妆容效果挑选喜欢的妆容,获取妆容参数,根据获取的参数对照参数组,用于对照的参数组包括颜色参数、质地参数、个人信息、个人持有,匹配到原妆容中的产品。如果匹配到则进行妆效预览,确认为满意妆效后准备化妆;如果未匹配到原妆容中的产品,则匹配可替换产品,如果有可替换产品,则更换屏幕中的妆效后进行妆效预览;如果无可替换产品,若用户坚持原妆容,则进行妆效预览,若不坚持则推荐可匹配妆容后进行妆效预览。如果用户不满意当前妆效,根据参数对照提供参数限制范围内的产品供用户选择,用户浏览产品后认为可行则试产品,若不可行则自定义产品准备化妆。
如图9所示为试局部妆容流程示意图。用户在美妆设备上试局部妆容,比如只试眼妆,然后根据浏览的妆容效果挑选喜欢的妆容,获取妆容参数,根据获取的参数对照参数组,对照的参数组包括个人持有、产品搭配,如果匹配到原妆容中的产品则进行妆效预览,确认为满意妆效后准备化妆;如果未匹配到原妆容中的产品,则匹配数据库中的已有产品(用户拥有的上传至数据库中的产品),获取已有产品的品牌品类、型号款式,从而根据化妆产品中的颜色语义进行颜色搭配,生成标准色,通过使用推荐进行同类关联,根据产品对应的参数生成妆效后进行妆效预览,确认为满意妆效后准备化妆;如果用户不满意当前妆效,根据参数对照提供参数限制范围内的产品供用户选择,用户浏览产品后认为可行则试产品,若不可行则自定义产品准备化妆。
如图10所示为试产品的流程示意图。为了确保用户在购买化妆品时拥有良好的购物体验,做到不错买、不多买。在试产品时需要试质地、试颜色、试手感。通过获取用户面部不同区域的负值、肤色等面部信息参数,将产品的质地参数与肤质匹配生成肤质匹配效果,将产品颜色与用户肤色进行比对显示产品在用户脸上的显色度,得到色差,分别获取薄涂和厚涂时的颜色,通过选择上妆工具,显示比如刷子毛质、粗细软硬、着色度、顺畅度等参数供用户查看。如图11所示,比如可以试手感的工具类产品,参数信息包括笔尖粗细、笔头形状、笔头材质、软硬度、弯折度等信息。用户若确定产品适合、满意、需要后可购买产品。若不适合、不满意、不需要则可返回继续试产品。
为完成以上流程并保证流程中的优质体验,本申请将美妆系统构建成平台型产品,并建立设计中台良好的整合后台数据,建立完善的数据库存储模块并为前台交互流程提供能力支撑。
如图12所示为美妆交互平台的产品功能架构示意图。本申请提供的美妆交互平台能够进行数字试妆,包括试风格、试色调;妆效预览,包括看效果、看感觉;产品试用效果预览,包括试颜色、试质地、试手感;个人持有产品录入,包括产品识别、产品分类组织;个人持有产品查询,包括查询名称、查询色号、查询可用日期;数字化辅助化妆,包括产品识别性示意、区域示意、手法示意、结束对比,区域示意包括大小、边缘、点/线/块,手法示意包括走向、工具、手势、动作(拍/点/按/抹),结果对比包括完成度、实施对比。
如图13所示为用户化妆流程示意图。获取用户的妆容参数、面部信息参数后,进行试妆并通过使用推荐、同类关联获取产品对应参数后进入化妆流程,在生成化妆步骤的过程中允许步骤跳过,即允许用户跳过自己不需要的步骤,然后进入化妆步骤,对产品、化妆区域、化妆手法进行指导,并在用户化妆过程中实时进行完成度的对比。
图14为本申请实施例提供的基于美妆交互平台的使用以及根据本申请提供的美妆方法进行操作后得到的美妆效果图。
以上为本申请实施例提供的一种数字化试妆、化妆方法,基于同样的发明思路,本申请实施例还提供了相应的一种数字化试妆、化妆装置,如图15所示,包括:
显示模块1501,用于获取目标使用者的人脸图像,并显示与人脸图像贴合的美妆模板;
匹配模块1502,用于响应于用户的操作确定目标妆容,获取目标妆容的第一参数,根据第一参数匹配与目标妆容中包含的第一产品相同的第二产品;
美妆生成模块1503,用于根据第二产品的第二参数生成与人脸图像贴合的美妆妆效;
流程生成模块1504,用于基于确认美妆妆效事件的触发,生成对应美妆妆效的化妆流程。
本申请实施例还提供了相应的一种数字化试妆、化妆设备,如图11所示。
本实施例提供了一种数字化试妆、化妆设备,包括:
至少一个处理器1601;以及,
与至少一个处理器1601通过总线1603通信连接的存储器1602;其中,
存储器1602存储有可被至少一个处理器执行的指令,指令被至少一个处理器1601执行,以使至少一个处理器1601能够执行:
获取目标使用者的人脸图像,并显示与人脸图像贴合的美妆模板;
响应于用户的操作确定目标妆容,获取目标妆容的第一参数,根据第一参数匹配与目标妆容中包含的第一产品相同的第二产品;
根据第二产品的第二参数生成与人脸图像贴合的美妆妆效;
基于确认美妆妆效事件的触发,生成对应美妆妆效的化妆流程。
本申请中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于方法和介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请实施例提供的方法和介质与方法是一一对应的,因此,方法和介质也具有与其对应的方法类似的有益技术效果,由于上面已经对方法的有益技术效果进行了详细说明,因此,这里不再赘述方法和介质的有益技术效果。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程方法商品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程方法商品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程方法商品或者方法中还存在另外的相同要素。
以上仅为本申请的实施例而已,并不用于限制本申请。虽然,上文中已经用一般性说明及具体实施方案对本申请作了详尽的描述,但在本申请基础上,可以对之作一些修改或改进,这对本领域技术人员而言是显而易见的。因此,在不偏离本申请精神的基础上所做的这些修改或改进,均属于本申请要求保护的范围。

Claims (20)

1.一种美妆交互平台,其特征在于,包括:
美妆交互模块,用于与用户进行交互,采集用户面部信息,接收所述用户的操作指令,基于用户人脸图像,显示与所述用户人脸图像贴合的美妆妆效;
云计算模块,用于根据所述美妆交互模块采集的用户面部信息以及所述操作指令进行计算,向所述美妆交互模块返回计算结果;
数据库存储模块,与所述云计算模块通信连接,用于所述用户面部信息、以及所述计算结果的存储。
2.根据权利要求1所述的平台,其特征在于,所述美妆交互模块包括:
高清显示器、控制单元、电源、摄像头模组;
所述高清显示器为4k高清显示器,与所述摄像头模组连接;
所述控制单元为蓝牙mesh,用于向支持蓝牙mesh协议的设备发送或接收来自所述设备的指令;
所述摄像头模组的焦距包括56mm和77mm,位于所述高清显示器上边缘的中间位置,用于采集用户人脸图像;
所述电源用于为所述美妆交互模块供电。
3.根据权利要求1所述的平台,其特征在于,所述云计算模块分析所述用户的面部数据,根据所述用户的面部数据生成对应美妆数据,将所述美妆数据下发到所述美妆交互模块。
4.根据权利要求2所述的平台,其特征在于,所述美妆交互模块还包括外壳、光源;
所述外壳为厚度2mm的透光外壳;
所述光源为led三色可变光灯带,围绕在所述外壳周围,用于根据环境光强自动调节亮度和色温。
5.根据权利要求2所述的平台,其特征在于,所述美妆交互模块还包括数据存储单元和终端设备;
所述数据存储单元,与所述摄像头模组连接,用于本地存储用户从所述数据库存储模块下载的美妆妆效;
所述终端设备,与所述数据存储单元连接,用于将用户产品上传到所述数据库存储模块中。
6.根据权利要求2所述的平台,其特征在于,所述美妆交互模块还包括角度传感器;
所述角度传感器安装在用户的化妆产品上,用于向所述控制单元发送用户操作的角度信号;
所述控制单元将所述角度信号传送到所述云计算模块,所述云计算模块根据所述角度信号指导用户上妆规范。
7.根据权利要求2所述的平台,其特征在于,所述美妆交互模块还包括温度传感器,用于获取环境温度。
8.根据权利要求2所述的平台,其特征在于,所述美妆交互模块还包括湿度传感器,用于获取环境湿度。
9.根据权利要求1所述的平台,其特征在于,所述云计算模块还用于根据用户下单的产品,链接对应购物平台。
10.根据权利要求1所述的平台,其特征在于,所述云计算模块还用于根据所述美妆交互平台获取的用户面部信息生成对应的皮肤检测报告。
11.一种数字化试妆、化妆方法,其特征在于,包括:
获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
12.根据权利要求11所述的方法,其特征在于,所述获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品,具体包括:
获取所述目标妆容的化妆步骤;
获取所述化妆步骤中使用到的第一产品,获取所述第一产品的第一参数;
根据所述第一参数查询终端设备中与所述化妆步骤中使用到的第一产品相同的第二产品。
13.根据权利要求11所述的方法,其特征在于,所述获取所述目标妆容的第一参数后,所述方法还包括:
根据所述第一参数确定对应所述目标妆容的第一产品;
在数据库中查找与第一产品相同的第二产品;
若没有匹配到与所述第一产品相同的第二产品,则查询是否存在与所述第一产品具有相同参数的产品,作为第二产品;
若是,根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
若否,基于用户操作确定美妆妆效。
14.根据权利要求11所述的方法,其特征在于,所述根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效后,所述方法还包括:
基于用户操作,根据所述第二参数确定预设参数范围以及所述预设参数范围内对应的第三产品;或
基于用户选择确定第三产品,根据所述第三产品的第三参数生成与所述人脸图像贴合的美妆妆效。
15.根据权利要求14所述的方法,其特征在于,所述根据所述第二参数确定预设参数范围以及所述预设参数范围内对应的第三产品后,所述方法还包括:
确定所述第三产品的第三参数,所述第三参数至少包括以下一种:质地参数和颜色参数;
获取用户的面部信息参数,所述面部信息参数至少包括以下一种:肤质参数和肤色参数;
基于用户选择的第三产品,将所述用户选择的第三产品的质地参数与所述肤质参数匹配,得到肤质匹配效果;
将所述颜色参数与所述肤色参数匹配,得到颜色匹配效果。
16.根据权利要求11所述的方法,其特征在于,所述生成对应所述美妆妆效的化妆流程,具体包括:
获取对应所述美妆妆效的化妆视频,对所述化妆视频进行识别后确定化妆节点,根据所述化妆节点对所述化妆视频进行分段,得到分段视频;
对所述分段视频中的语言描述内容以及肢体动作内容进行识别,生成表格内容;
根据所述表格内容进行搜索得到对应的化妆参数,并对照评估参数对所述化妆参数进行调整;
根据调整完成的化妆参数生成每个化妆节点的画法流程。
17.根据权利要求16所述的方法,其特征在于,所述生成对应所述美妆妆效的化妆流程后,所述方法还包括:
在用户上妆过程中,实时获取用户面部信息;
根据所述用户面部信息与所述化妆参数进行对比,得到参数差值;
根据所述参数差值确定用户妆效是否合格。
18.根据权利要求11所述的方法,其特征在于,所述方法还包括:
获取用户拥有的美妆产品,将所述用户拥有的美妆产品存储至数据库中;
当用户根据所述目标妆容中包含的第一产品匹配相同的第二产品时,优先将所述数据库中存储的美妆产品在终端设备显示。
19.一种数字化试妆、化妆装置,其特征在于,包括:
显示模块,用于获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
匹配模块,用于响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
美妆生成模块,用于根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
流程生成模块,用于基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
20.一种非易失性存储介质,存储有计算机可执行指令,其特征在于,所述计算机可执行指令由处理器执行,以实现下述步骤:
获取目标使用者的人脸图像,并显示与所述人脸图像贴合的美妆模板;
响应于用户的操作确定目标妆容,获取所述目标妆容的第一参数,根据所述第一参数匹配与所述目标妆容中包含的第一产品相同的第二产品;
根据所述第二产品的第二参数生成与所述人脸图像贴合的美妆妆效;
基于确认所述美妆妆效事件的触发,生成对应所述美妆妆效的化妆流程。
CN202210917380.XA 2022-08-01 2022-08-01 一种提供数字化试妆、化妆方法的美妆交互平台 Pending CN115393552A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210917380.XA CN115393552A (zh) 2022-08-01 2022-08-01 一种提供数字化试妆、化妆方法的美妆交互平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210917380.XA CN115393552A (zh) 2022-08-01 2022-08-01 一种提供数字化试妆、化妆方法的美妆交互平台

Publications (1)

Publication Number Publication Date
CN115393552A true CN115393552A (zh) 2022-11-25

Family

ID=84118916

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210917380.XA Pending CN115393552A (zh) 2022-08-01 2022-08-01 一种提供数字化试妆、化妆方法的美妆交互平台

Country Status (1)

Country Link
CN (1) CN115393552A (zh)

Similar Documents

Publication Publication Date Title
US10799010B2 (en) Makeup application assist device and makeup application assist method
US10783672B2 (en) Makeup part generating apparatus, makeup part utilizing apparatus, makeup part generating method, makeup part utilizing method, non-transitory computer-readable recording medium storing makeup part generating program, and non-transitory computer-readable recording medium storing makeup part utilizing program
TWI773096B (zh) 妝容處理方法、裝置、電子設備及儲存媒體
US20090245617A1 (en) System and method for processing image data
US11776187B2 (en) Digital makeup artist
CN108932654B (zh) 一种虚拟试妆指导方法及装置
CN104203042A (zh) 化妆辅助装置、化妆辅助方法、以及化妆辅助程序
US20070052726A1 (en) Method and system for likeness reconstruction
KR102253750B1 (ko) 딥러닝을 이용한 메이크업 추천 및 추천 기반 화장품 구매 서비스 제공 플랫폼
US11961169B2 (en) Digital makeup artist
CN109359317A (zh) 一种口红配色选择的模型构建方法和口红配色选择方法
US20220202168A1 (en) Digital makeup palette
CN103995911A (zh) 基于智能信息终端的美容选配方法与系统
CN112465606A (zh) 一种化妆品定制系统
CN110738620A (zh) 智能美妆方法、化妆镜和存储介质
CN108804064A (zh) 一种智能显示系统及其应用方法
CN115393552A (zh) 一种提供数字化试妆、化妆方法的美妆交互平台
CN110543875A (zh) 一种辅助化妆装置
US11321882B1 (en) Digital makeup palette
CN114494662A (zh) 美妆系统、美妆镜、控制方法、数据处理方法及移动设备
CN114860073A (zh) 智能化妆镜及其智能化妆方法
EP4260172A1 (en) Digital makeup artist
KR20060020999A (ko) 얼굴 인식기반 헤어스타일 성형 방법 및 시스템
WO2022146615A1 (en) Digital makeup palette
CN116347220B (zh) 人像拍摄方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination