CN108171143A - 美妆方法、智能镜及存储介质 - Google Patents
美妆方法、智能镜及存储介质 Download PDFInfo
- Publication number
- CN108171143A CN108171143A CN201711427543.1A CN201711427543A CN108171143A CN 108171143 A CN108171143 A CN 108171143A CN 201711427543 A CN201711427543 A CN 201711427543A CN 108171143 A CN108171143 A CN 108171143A
- Authority
- CN
- China
- Prior art keywords
- face
- user
- dressing
- makeups
- examination adornment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
- A45D44/005—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明提出一种美妆方法,应用于智能镜和App终端构成的美妆系统,所述智能镜与App终端同步关联,在执行时,由智能镜扫描用户的面部图像获取用户的面部数据,然后将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆,最后接收用户在App终端选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。本发明还提出一种智能镜及存储介质。本发明提高了智能镜的个性化美妆效果。
Description
技术领域
本发明涉及智能镜技术领域,尤其涉及一种美妆方法、智能镜及存储介质。
背景技术
随着社会物质生活水平的提高,越来越多的人,尤其是女性群体,开始关注自己的精神面貌,使得镜子成为人们居家生活的必需品。为了赋予镜子除镜像功能之外的其他功能,提出一种智能镜子,从而增加显示实时天气、推送新闻和路况信息等功能。
此外,为了迎合大多数女性群体的化妆需求,在现有智能镜子的基础上增加一种试妆功能,用户在需要化妆时,可以快速地查看到每一款妆容的试妆效果,进而快速地选择自己需要的款式。但是,在用户选择需要的妆容后只能依靠化妆经验实现选择的妆容,对于零化妆基础的用户来说美妆效果较差。而且,现有智能镜提供的试妆妆容适用所有人,无法满足用户的个性化需求,缺乏针对性,美妆效果也相对较差。
发明内容
本发明的主要目的在于提供一种美妆方法,旨在提高智能镜的个性化美妆效果。
为实现上述目的,本发明提出的美妆方法,应用于智能镜和App终端构成的美妆系统,所述智能镜与所述App终端同步关联,所述美妆方法包括以下步骤:
扫描用户的面部图像,以获取用户的面部数据;
将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆;
接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。
进一步地,建立智能镜与App终端的同步关联关系的步骤,包括:
当接收到网络连接成功的反馈信息时,在智能镜的显示区域显示用于获取App终端授权登录的识别码;
当检测到所述识别码被App终端读取时,向所述App终端推送确认同步关联的提示;
当接收到授权指令时,建立与App终端的同步关联关系,并输出已同步关联的提示。
进一步地,在扫描用户的面部图像的步骤之前,还包括:
接收App终端发送的面部扫描指令,基于所述面部扫描指令在智能镜的显示区域显示面部图像采集框,并输出将面部对准在所述采集框内的提示。
进一步地,所述扫描用户的面部图像,以获取用户的面部数据的步骤,包括:
当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;
基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。
进一步地,所述将所述面部数据与预存的预设标准脸模型进行比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆的步骤,包括:
在获取到用户的五官结构比例数据时,生成相应的比对指令;
根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;
将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆。
进一步地,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断的步骤,包括:
将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;
将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;
将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置;且/或,
所述将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆的步骤,包括:
App终端将接收到的比对结果显示于当前显示界面,并基于所述比对结果推荐匹配面部各部位的主题妆容模板和品牌妆容模板;
当接收到用户选择主题妆容模板产生的第一试妆指令时,在当前显示界面显示主题妆容列表,以供用户在进行主题妆容选择后进行面部各部位的试妆;
当接收到用户选择品牌妆容模板产生的第二试妆指令时,在当前显示界面显示品牌妆容列表,以供用户在进行品牌妆容选择后进行面部各部位的试妆;
将用户选择的主题妆容或品牌妆容同步至智能镜。
进一步地,所述接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容的步骤,包括:
在接收到App终端同步的试妆妆容信息后,将所述试妆妆容信息对应的试妆妆容更新至智能镜的妆容列表;
当接收到待化妆指令时,激活所述试妆妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;
当接收到用户选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示与该部位数据匹配的辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出所述试妆妆容。
进一步地,在用户化出所述试妆妆容的步骤之后,还包括:
对用户化出试妆妆容时的面部图像进行拍照保存,并同步至App终端以供分享或上传云端。
本发明进一步提出一种智能镜,该智能镜包括存储器、处理器及存储在所述存储器并可在所述处理器上运行的美妆程序,所述美妆程序被所述处理器执行时实现如上所述的美妆方法的步骤。
本发明还提出一种存储介质,该存储介质存储有美妆程序,所述美妆程序被处理器执行时实现如上所述的美妆方法的步骤。
本发明实施例的美妆方法,应用于智能镜和App终端构成的美妆系统,所述智能镜与App终端同步关联,在执行时,由智能镜扫描用户的面部图像获取用户的面部数据,然后将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆,最后接收用户在App终端选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。该美妆方法,自动匹配与用户面部数据匹配的试妆妆容,由用户选择试妆妆容后,在所选试妆妆容对应的待化妆部位显示用于化妆的辅助线,以便零化妆基础的用户化出选定的试妆妆容,提高了智能镜的个性化美妆效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1为本发明的智能镜一实施例的硬件结构示意图;
图2为本发明的美妆方法第一实施例的流程示意图;
图3为本发明的美妆方法第二实施例的流程示意图;
图4为图2、图3中步骤S20一实施例的流程示意图;
图5为图2、图3中步骤S30一实施例的流程示意图;
图6为图5中步骤S33一实施例的流程示意图;
图7为图2、图3中步骤S40一实施例的流程示意图。
附图标号说明:
标号 | 名称 | 标号 | 名称 |
100 | 智能镜 | 101 | 射频单元 |
102 | WiFi模块 | 103 | 音频输出单元 |
104 | A/V输入单元 | 1041 | 图形处理器 |
1042 | 麦克风 | 105 | 传感器 |
106 | 显示单元 | 1061 | 显示界面 |
107 | 用户输入单元 | 1071 | 操控界面 |
1072 | 其他输入设备 | 108 | 接口单元 |
109 | 存储器 | 110 | 处理器 |
111 | 电源 |
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,“模块”、“部件”或“单元”可以混合地使用。
智能镜可以以各种形式来实施。例如,本发明中描述的智能镜可以由诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant,PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航装置、可穿戴设备、智能手环、计步器等具有显示界面的移动终端实现,也可以由诸如数字TV、台式计算机等具有显示界面的固定终端实现。
后续描述中将以智能镜为例进行说明,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的智能镜。
请参阅图1,其为实现本发明各个实施例的一种智能镜的硬件结构示意图,该智能镜100可以包括:RF(Radio Frequency,射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、显示区域106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图1中示出的智能镜结构并不构成对智能镜的限定,智能镜可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图1对智能镜的各个部件进行具体的介绍:
射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA2000(CodeDivision Multiple Access2000,码分多址2000)、WCDMA(Wideband Code DivisionMultiple Access,宽带码分多址)、TD-SCDMA(Time Division-Synchronous CodeDivision Multiple Access,时分同步码分多址)、FDD-LTE(Frequency DivisionDuplexing-Long Term Evolution,频分双工长期演进)和TDD-LTE(Time DivisionDuplexing-Long Term Evolution,分时双工长期演进)等。
WiFi属于短距离无线传输技术,智能镜通过WiFi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块102,但是可以理解的是,其并不属于智能镜的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。例如本实施例中,智能镜100可以基于WiFi模块102与App终端建立同步关联关系。
音频输出单元103可以在智能镜100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与智能镜100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。如本实施例中,在输出选择无人机飞行控制方式的提示时,该提示可以是语音提示、基于蜂鸣器的震动提示等。
A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示区域106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
智能镜100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示界面1061的亮度,接近传感器可在智能镜100移动到耳边时,关闭显示界面1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
显示区域106用于显示由用户输入的信息或提供给用户的信息。显示区域106可包括显示界面1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示界面1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与智能镜的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107可包括操控界面1071以及其他输入设备1072。操控界面1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在操控界面1071上或在操控界面1071附近的操作),并根据预先设定的程式驱动相应的连接装置。操控界面1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现操控界面1071。除了操控界面1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种,具体此处不做限定。
进一步的,操控界面1071可覆盖显示界面1061,当操控界面1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示界面1061上提供相应的视觉输出。虽然在图1中,操控界面1071与显示界面1061是作为两个独立的部件来实现智能镜的输入和输出功能,但是在某些实施例中,可以将操控界面1071与显示界面1061集成而实现智能镜的输入和输出功能,具体此处不做限定。
接口单元108用作至少一个外部装置与智能镜100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到智能镜100内的一个或多个元件或者可以用于在智能镜100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如美妆功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、控制指令、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是智能镜的控制中心,利用各种接口和线路连接整个智能镜的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行智能镜的各种功能和处理数据,从而对智能镜进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
智能镜100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图1未示出,智能镜100还可以包括可与App终端建立同步关联关系的蓝牙模块等,在此不再赘述。
基于上述智能镜的硬件结构,本发明实施例的智能镜,可应用于智能镜和App终端构成的美妆系统,所述智能镜与App终端同步关联,在应用时,由智能镜扫描用户的面部图像获取用户的面部数据,然后将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆,最后接收用户在App终端选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。该智能镜,自动匹配与用户面部数据匹配的试妆妆容,由用户选择试妆妆容后,在所选试妆妆容对应的待化妆部位显示用于化妆的辅助线,以便零化妆基础的用户化出选定的试妆妆容,提高了智能镜的个性化美妆效果。
如图1所示,作为一种计算机存储介质的存储器109中可以包括操作系统及控制程序。
在图1所示的智能镜100中,WiFi模块102主要用于连接后台服务器或大数据云端,与后台服务器或大数据云端进行数据通信,并可实现与App终端建立同步关联关系;处理器110可以用于调用存储器109中存储的美妆程序,并执行以下操作:
扫描用户的面部图像,以获取用户的面部数据;
将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆;
接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
当接收到网络连接成功的反馈信息时,在智能镜的显示区域显示用于获取App终端授权登录的识别码;
当检测到所述识别码被App终端读取时,向所述App终端推送确认同步关联的提示;
当接收到授权指令时,建立与App终端的同步关联关系,并输出已同步关联的提示。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
接收App终端发送的面部扫描指令,基于所述面部扫描指令在智能镜的显示区域显示面部图像采集框,并输出将面部对准在所述采集框内的提示。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;
基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
在获取到用户的五官结构比例数据时,生成相应的比对指令;
根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;
将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;
将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;
将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
App终端将接收到的比对结果显示于当前显示界面,并基于所述比对结果推荐匹配面部各部位的主题妆容模板和品牌妆容模板;
当接收到用户选择主题妆容模板产生的第一试妆指令时,在当前显示界面显示主题妆容列表,以供用户在进行主题妆容选择后进行面部各部位的试妆;
当接收到用户选择品牌妆容模板产生的第二试妆指令时,在当前显示界面显示品牌妆容列表,以供用户在进行品牌妆容选择后进行面部各部位的试妆;
将用户选择的主题妆容或品牌妆容同步至智能镜。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
在接收到App终端同步的试妆妆容信息后,将所述试妆妆容信息对应的试妆妆容更新至智能镜的妆容列表;
当接收到待化妆指令时,激活所述试妆妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;
当接收到用户选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示与该部位数据匹配的辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出所述试妆妆容。
进一步地,处理器110还可以用于调用存储器109中存储的美妆程序执行以下操作:
对用户化出试妆妆容时的面部图像进行拍照保存,并同步至App终端以供分享或上传云端。
本发明进一步提出一种美妆方法,应用于智能镜与App终端构成的美妆系统。
参照图2,图2为本发明的美妆方法第一实施例的流程示意图。
在本实施例中,所述智能镜与App终端同步关联,所述美妆方法包括以下步骤:
S10:接收App终端发送的面部扫描指令,基于所述面部扫描指令在智能镜的显示区域显示面部图像采集框,并输出将面部对准在所述采集框内的提示;
在本实施例中,智能镜与App终端之间存在同步关联关系,在智能镜开机后自动检测可识别范围内的网络连接信号,一般是WiFi信号,当智能镜为首次连接该WiFi信号时,在智能镜的显示界面显示输入WiFi密码的提示,当用户输入正确的密码时,更新相关数据,如天气数据、应用通知数据等。在智能镜连接上所述WiFi信号后,基于所述WiFi连接与App终端建立同步关联关系,在智能镜与App终端建立同步关联关系之后,用户可以基于App终端实现对智能镜的远程控制,如调节智能镜的显示亮度、控制智能镜的摄像头开关、控制智能镜关机等。当用户通过App终端向智能镜发送面部扫描指令时,智能镜基于接收到的面部扫描指令检测摄像头或图像传感器的运行状态,如当摄像头或图像传感器处于关闭状态时,控制其开启,当其处于运行状态时,将智能镜的显示界面显示摄像头或图像传感器摄取到的图像,并在智能镜的显示区域、也即显示界面显示面部图像采集框,并输出将面部对准在所述图像采集框内的语音提示或文字提示。
S20:扫描用户的面部图像,以获取用户的面部数据;
用户基于所述将面部对准在所述采集框内的语音提示或文字提示,可以调整面部与智能镜的摄像头或图像传感器的相对位置,当用户的面部对准在所述采集框内时,采集该帧用户面部图像,并生成相应的扫描信号,反馈给处理器,由处理器调用存储器中的美妆程序对该帧用户面部图像进行扫描,以获取用户的面部数据。
S30:将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆;
在获取到用户的面部数据之后,调用预存的预设标准脸模型进行比对,主要对用户面部的五官结构进行判断,如对用户的脸型、嘴型、眼型、以及嘴巴和眼睛在面部区域中的相对位置进行比对判断,然后将比对结果同步至App终端,App终端在接收到该比对结果后,根据该比对结果推荐与用户五官结构匹配的试妆妆容,以供用户根据推荐的试妆妆容进行试妆。
S40:接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。
在用户基于所述App终端推荐的试妆妆容进行试妆、并确定要选择的试妆妆容后,在App终端收藏该试妆妆容,并将所述试妆妆容信息同步至智能镜,智能镜接收到App终端同步的用户选择的试妆妆容信息后,将该试妆妆容信息对应的试妆妆容显示于智能镜的当前显示界面,并将其更新至用户的个人妆容列表或用户建立的妆容列表中,当用户选择参照该试妆妆容进行化妆时,根据用户在化妆模板中选择的化妆部位,在所述面部图像上对应的待化妆部位显示用于化妆的辅助线,所述辅助线的形状和大小根据用户的五官结构数据进行匹配,以便用户参照所述辅助线化出所述试妆妆容信息对应的试妆妆容。
本发明实施例的美妆方法,应用于智能镜和App终端构成的美妆系统,所述智能镜与App终端同步关联,在执行时,由智能镜扫描用户的面部图像获取用户的面部数据,然后将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆,最后接收用户在App终端选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。该美妆方法,自动匹配与用户面部数据匹配的试妆妆容,由用户选择试妆妆容后,在所选试妆妆容对应的待化妆部位显示用于化妆的辅助线,以便零化妆基础的用户化出选定的试妆妆容,提高了智能镜的个性化美妆效果。
进一步地,建立智能镜与App终端的同步关联关系的步骤,包括:
当接收到网络连接成功的反馈信息时,在智能镜的显示区域显示用于获取App终端授权登录的识别码;
当检测到所述识别码被App终端读取时,向所述App终端推送确认同步关联的提示;
当接收到授权指令时,建立与App终端的同步关联关系,并输出已同步关联的提示。
在本实施例中,智能镜与App终端在大多数情况下是独立工作的,App终端如手机,时常被用户随身携带,而智能镜作为一种大屏终端,不像手机那样方便用户随身携带,因而智能镜与App终端的同步关联关系并不是一直存在的,当用户需要在App终端获取更多的试妆妆容或用户需要在别的智能镜上同步得到用户收藏或保存的妆容模板时,需要建立智能镜与App终端的同步关联关系。如上所述,当智能镜开机后,自动搜索可连接的网络进行网络连接,当接收到网路连接成功的反馈信息时,在智能镜的显示区域或显示界面显示用于App终端识别读取以获取App终端授权登录的识别码,当App终端装载有对应所述智能镜的App应用、且用户已登录App应用的账号信息时,用户可以使用App终端扫描所述识别码,当智能镜检测到所述识别码被App终端读取时,向所述App终端推送确认同步关联的提示。而当用户用于扫描读取所述识别码的App终端未装载智能镜对应的App试妆使用或用户未登录App账号信号时,向App终端推送所述App应用的下载页面或者App账号信息登录界面。当接收到App终端反馈的授权指令时,与App终端建立同步关联关系,并在智能镜的显示区域显示已同步关联的提示。
进一步地,参照图4,基于上述实施例的美妆方法,步骤S20,包括:
S21:当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;
在本实施例中,在用户根据智能镜输出的将面部对准在面部图像采集框的提示,将面部对准在所述采集框内时,由所述面部图像采集框对采集框内的图像信息进行检测,当检测到用户面部图像对准在所述采集框内时,扫描所述采集框内的面部图像。
S22:基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。
对采集框内的面部图像进行扫描的过程主要是基于卷积操作提取所述面部图像中的五官结构的特征向量,然后将提出的五官各结构的特征向量融合为用户的五官结构特征,在此过程中可以获取用户五官各结构的数据值,如五官中的脸长、脸宽、嘴裂宽、嘴唇厚度等,以及五官各结构之间的比例数据,如脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比,嘴裂宽与脸宽之比等。
进一步地,参照图5,基于上述实施例的美妆方法,步骤S30,包括:
S31:在获取到用户的五官结构比例数据时,生成相应的比对指令;
在本实施例中,在通过扫描用户的面部图像获取用户的五官结构比例数据时,根据存储在存储器中的美妆程序生成相应的比对指令。
S32:根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;
在接收到所述比对指令后,根据所述比对指令从智能镜的存储器中调用预存的预设标准脸模型对用户的脸型、眼型、嘴型进行比对判断,如将脸长大于脸宽的脸型判定为椭圆形脸、将脸长与脸宽近似的脸型判定为圆形脸、将脸宽小于脸长的脸型判定为长形脸、将下颌比较尖的脸型判定为锥形脸;将眼高相对于整个脸长的比率小于标准脸的比率的眼型判定为小眼、将唇裂与脸宽的比值大于预设值的嘴型判定为嘴唇过大。在对眼睛和嘴巴在面部的相对位置进行比对判断时,主要对眼距、眼角度、嘴唇厚度进行判断,如将眼间距与脸宽的比值超过标准脸的比值时判定为眼间距大。
S33:将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆。
在将所述比对结果同步至App终端之后,App终端根据用户的嘴型、眼型、脸型及眼睛和嘴巴在整个面部区域的相对位置推荐适合用户面部的试妆妆容,或向用户推荐适合用户五官各结构的部位妆容,用户可以在App终端根据所述比对结果推荐的妆容模板中选择适用整个面部的试妆妆容或适用面部某一部位的妆容。所述试妆妆容包括主体妆容和品牌妆容,所述主题妆容主要根据妆容的风格、适用场合、潮流类型以及其他款系进行分类,所述品牌妆容主要根据品牌列表及型号进行分类,用户可以根据App终端推荐的主题妆容或品牌妆容选择需要的试妆妆容,也可以进行自行搭配。
进一步地,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断的步骤,包括:
将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;
在本实施例中,在对用户的脸型进行比对判断时,首先将用户的脸长与脸宽之比与标准脸模型的脸长与脸宽的比值进行比较,如本本实施例中预设的标准脸的脸长与脸宽之比为1.62:1,当用户的脸长与脸宽之比与1.62:1相差较远时,如小于4:3时,则进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为方形脸,否则为正三角形脸。
当用户的脸长与脸宽之比大于3:2、小于1.62:1时,进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为椭圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为长形脸,否则为正三角形脸。
当用户的脸长与脸宽之比在4:3~3:2之间时,进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为椭圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为方形脸,否则为正三角形脸。
当用户的脸长与脸宽之比为1.62:1,腮骨、颧骨、颞骨之比为0.82:1:0.68,且三庭之比为1:1:1时,判定用户的脸型为标准脸。
将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;
在判断出用户的脸型之后,需要对用户的眼型进行比对判断,具体为判断用户的眼高与脸长的比值是否小于预设阈值,如本实施例中预设的0.05263,若是,则判定用户为小眼,若否则进一步获取用户的眼间距与脸宽之比,当二者之比小于第一预设值如0.2725时,判定用户的眼距偏大,当二者之比大于第二预设值如0.3236时,判定用户的眼距偏小,当二者之比在0.2725和0.3236之间时,进一步获取内外眦与水平面的夹角,当所述夹角在0~10°时,判定用户的眼型为标准眼;当所述夹角小于0°时,判定用户的眼尾下垂;当所述夹角大于10°时,判定用户的眼尾上扬。
将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置。
在判断出用户的脸型和眼型之后,还需要对用户的嘴型进行比对判断,具体为判断用户的嘴裂宽与脸宽之比是否小于第一预设值0.4494,若是,则直接判定用户的嘴唇过大;若否,则进一步判断嘴厚与脸长之比是否大于第二预设值0.0926,当嘴厚与脸长之比大于0.0926时,判定用户的嘴唇过厚;当嘴厚与脸长之比小于等于0.0926时,进一步获取上唇与下唇之比,当二者之比小于第三预设值1:1.5时,进一步判断下唇与脸长之比是否大于第四预设值1:18,若是,则判定用户的下唇过厚,若否,则判定用户的上唇过薄;当二者之比大于第三预设值1:1.5时,进一步判断下唇与脸长之比是否小于第四预设值1:18,若是,则判定用户的下唇过薄,若否,则判定用户的上唇过厚;当二者之比为第三预设值1:1.5时,进一步判断嘴唇的仰角是否小于10°,若是,则判定用户的嘴唇为椭圆形嘴唇,若否则判定用户的嘴唇为标准嘴。
进一步地,参照图6,基于上述实施例的美妆方法,步骤S33,包括:
S331:App终端将接收到的比对结果显示于当前显示界面,并基于所述比对结果推荐匹配面部各部位的主题妆容模板和品牌妆容模板;
在本实施例中,在智能镜输出用户面部数据的比对结果后,将所述比对结果同步至App终端,App终端在接收到素数比对结果后,将所述比对结果显示于当前显示界面,为了便于用户根据所述比对结果进行妆容选择,在将所述比对结果显示于App终端的当前显示界面时,可以相应地显示对应部位的妆容建议,也可以直接直接在对应部位标注用于试妆的辅助线或参考线,如对于小眼用户推荐扩大眼睛的眼妆,对嘴吧较大的用户推荐对应的唇妆或面部妆容,以缩小嘴巴在整个面部区域中的比例,也即基于所述比对结果推荐匹配面部各部位的主题妆容模板和拼装妆容模板。
S332:当接收到用户选择主题妆容模板产生的第一试妆指令时,在当前显示界面显示主题妆容列表,以供用户在进行主题妆容选择后进行面部各部位的试妆;
所述主题妆容模板包括文艺款、甜美款、校园青春款、职业款,适用晚宴、商务或约会的款型,欧美、日系、韩系风格的款式,以及古装、星座等款型,用户选择主题妆容模板时,根据生成的第一试妆指令,将App终端根据用户的脸型、嘴型、眼型、及眼间距和嘴厚等面部特征推荐的可能包括文艺、职业、星座等主题妆容添加至App终端当前显示界面的主题妆容列表中,当用户选定某一主题妆容模板后,将选定的妆容模板在当前显示界面进行显示,以供用户根据选定的妆容模板进行各部位的试妆。
S333:当接收到用户选择品牌妆容模板产生的第二试妆指令时,在当前显示界面显示品牌妆容列表,以供用户在进行品牌妆容选择后进行面部各部位的试妆;
所述品牌妆容模板包括迪奥、雅漾、自然堂、ZA、兰蔻等品牌,对应的品牌产品包括口红、粉底、唇膏、眼影、眉笔,当用户选择品牌妆容模板是,根据生成的第二试妆指令,将App终端根据用户的脸型、嘴型、眼型、及眼间距和嘴厚等面部特征推荐的口红、粉底、眼影、眉笔等添加至App终端的当前显示界面的品牌妆容列表中,当用户选择某一品牌或某一部位妆容模板后,将选定的妆容模板或品牌产品对应的妆容模板在当前显示界面进行显示,以供用户根据选定的妆容模板或品牌产品对应的妆容模板进行面部各部位的试妆。
S334:将用户选择的主题妆容或品牌妆容同步至智能镜。
在用户试妆过程中可以控制App终端或智能镜的补光灯智能感应进行补光,并可以在显示界面上进行试妆前后的图像比对,最后将用户完成试妆且选定的主题妆容或品牌妆容同步至智能镜,还可以将试妆图像保存为图片,以分享至云端或朋友。在选择妆容模板时,用户可以利用触摸方式进行选择,也可以采用语音方式,以提高试妆过程中的交互性。
进一步地,参照图7,基于上述实施例的美妆方法,步骤S40,包括:
S41:在接收到App终端同步的试妆妆容信息后,将所述试妆妆容信息对应的试妆妆容更新至智能镜的妆容列表;
在本实施例中,在接收到App终端同步的试妆妆容信息后,将所述试妆妆容信息对应的试妆妆容更新至智能镜的妆容列表中,如将App终端根据用户的嘴型、眼型、脸型及眼睛和嘴巴在面部区域的相对位置推荐的适合当前用户的某一主题款或品牌妆容更新至智能镜的妆容列表,在接收到相应指令时智能镜自动从所述妆容列表中调用该主体款妆容或品牌妆容进行显示,以供用户进行参照化妆。
S42:当接收到待化妆指令时,激活所述试妆妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;
当智能镜检测到用户点击智能镜显示界面或显示区域的化妆图标,或接收到用户的语音指令时,生成对应的待化妆指令,并根据所述待化妆指令激活所述试妆妆容对应的妆容模板,当所述妆容模板被激活后,将智能镜的当前显示界面切换为该妆容模板的内容,如包括面部各部位的指示标识、放大显示、参考线显示和辅助线显示的标识,以及透明度调整的标识。
S43:当接收到用户选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示与该部位数据匹配的辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出所述试妆妆容。
为了增加智能镜的智能性,提高用户化妆体验,在接收到用户选择化妆部位产生的化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且在对应部位显示于该部位特征数据匹配的辅助线,如针对长脸型或方脸型用户可以将标示化腮红的化妆区域调成长轴在竖直方向的椭圆形,对于圆脸型用户则可以将标示化腮红的化妆区域调成相对圆润的圆形,以方便用户在所述参考线和辅助线标示出的化妆区域内化出所述试妆妆容。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的图像进行整体放大或局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出所述试妆妆容。
进一步地,参照图3,基于上述实施例的美妆方法,提出美妆方法的第二实施例,在该实施例中,所述美妆方法还包括:
S50:对用户化出试妆妆容时的面部图像进行拍照保存,并同步至App终端以供分享或上传云端。
在本实施例中,在检测到用户完成面部各部位的化妆动作后,可以对用户完成所有化妆动作时的面部图像或用户化出所述试妆妆容是的面部图像进行拍照保存,当然,也可以根据用户输入的拍照指令对用户化出所述试妆妆容是的面部图像进行拍照保存,对应地可以将所述面部图像保存为照片或二维码,并同步至App终端以供用户根据登录的App账号分享给朋友或上传至云端。
进一步地,用户还可以基于App终端实现对智能镜的亮度、运行模式和状态进行调节。而所述智能镜在联网状态下,也可以在其显示界面实现对天气、当前温湿度、空气质量、网络连接状态等进行显示。
此外,本发明实施例还提出一种存储介质,该存储介质存储有美妆程序,所述美妆程序被处理器执行时实现如上所述的美妆方法的步骤。
其中,美妆程序被执行时所实现的方法可参照本发明美妆方法的各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种美妆方法,应用于智能镜和App终端构成的美妆系统,其特征在于,所述智能镜与所述App终端同步关联,所述美妆方法包括以下步骤:
扫描用户的面部图像,以获取用户的面部数据;
将所述面部数据与预存的预设标准脸模型比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆;
接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容。
2.根据权利要求1所述的美妆方法,其特征在于,建立智能镜与App终端的同步关联关系的步骤,包括:
当接收到网络连接成功的反馈信息时,在智能镜的显示区域显示用于获取App终端授权登录的识别码;
当检测到所述识别码被App终端读取时,向所述App终端推送确认同步关联的提示;
当接收到授权指令时,建立与App终端的同步关联关系,并输出已同步关联的提示。
3.根据权利要求1所述的美妆方法,其特征在于,在扫描用户的面部图像的步骤之前,还包括:
接收App终端发送的面部扫描指令,基于所述面部扫描指令在智能镜的显示区域显示面部图像采集框,并输出将面部对准在所述采集框内的提示。
4.根据权利要求3所述的美妆方法,其特征在于,所述扫描用户的面部图像,以获取用户的面部数据的步骤,包括:
当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;
基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。
5.根据权利要求4所述的美妆方法,其特征在于,所述将所述面部数据与预存的预设标准脸模型进行比对,并将比对结果同步至App终端,以供用户在App终端根据所述比对结果进行试妆的步骤,包括:
在获取到用户的五官结构比例数据时,生成相应的比对指令;
根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;
将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆。
6.根据权利要求5所述的美妆方法,其特征在于,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断的步骤,包括:
将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;
将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;
将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置;且/或,
所述将比对结果同步至App终端,以供用户选择App终端根据所述比对结果推荐的妆容模板进行面部各部位的主题试妆或品牌试妆的步骤,包括:
App终端将接收到的比对结果显示于当前显示界面,并基于所述比对结果推荐匹配面部各部位的主题妆容模板和品牌妆容模板;
当接收到用户选择主题妆容模板产生的第一试妆指令时,在当前显示界面显示主题妆容列表,以供用户在进行主题妆容选择后进行面部各部位的试妆;
当接收到用户选择品牌妆容模板产生的第二试妆指令时,在当前显示界面显示品牌妆容列表,以供用户在进行品牌妆容选择后进行面部各部位的试妆;
将用户选择的主题妆容或品牌妆容同步至智能镜。
7.根据权利要求1所述的美妆方法,其特征在于,所述接收App终端同步的用户选择的试妆妆容信息,并在对应的待化妆部位显示用于化妆的辅助线,以供用户根据所述辅助线化出所述试妆妆容信息对应的试妆妆容的步骤,包括:
在接收到App终端同步的试妆妆容信息后,将所述试妆妆容信息对应的试妆妆容更新至智能镜的妆容列表;
当接收到待化妆指令时,激活所述试妆妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;
当接收到用户选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示与该部位数据匹配的辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出所述试妆妆容。
8.根据权利要求1至7任一项所述的美妆方法,其特征在于,在用户化出所述试妆妆容的步骤之后,还包括:
对用户化出试妆妆容时的面部图像进行拍照保存,并同步至App终端以供分享或上传云端。
9.一种智能镜,其特征在于,该智能镜包括存储器、处理器及存储在所述存储器并可在所述处理器上运行的美妆程序,所述美妆程序被所述处理器执行时实现如权利要求1至8任一项所述的美妆方法的步骤。
10.一种存储介质,其特征在于,该存储介质存储有美妆程序,所述美妆程序被处理器执行时实现如权利要求1至8任一项所述的美妆方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711427543.1A CN108171143A (zh) | 2017-12-25 | 2017-12-25 | 美妆方法、智能镜及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711427543.1A CN108171143A (zh) | 2017-12-25 | 2017-12-25 | 美妆方法、智能镜及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108171143A true CN108171143A (zh) | 2018-06-15 |
Family
ID=62520601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711427543.1A Pending CN108171143A (zh) | 2017-12-25 | 2017-12-25 | 美妆方法、智能镜及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108171143A (zh) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109315913A (zh) * | 2018-10-16 | 2019-02-12 | 陕西科技大学 | 穿戴式画眉辅助装置 |
CN109393868A (zh) * | 2018-08-08 | 2019-03-01 | 颜沿(上海)智能科技有限公司 | 一种智能试妆货架及方法 |
CN109671142A (zh) * | 2018-11-23 | 2019-04-23 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109948548A (zh) * | 2019-03-20 | 2019-06-28 | 齐鲁工业大学 | 一种基于机器学习的色彩匹配的口红推荐方法及系统 |
CN110045872A (zh) * | 2019-04-25 | 2019-07-23 | 廖其锋 | 日用智能镜及使用方法 |
CN110738620A (zh) * | 2019-10-16 | 2020-01-31 | 中国联合网络通信集团有限公司 | 智能美妆方法、化妆镜和存储介质 |
CN110929146A (zh) * | 2019-10-23 | 2020-03-27 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、设备和存储介质 |
CN111047384A (zh) * | 2018-10-15 | 2020-04-21 | 北京京东尚科信息技术有限公司 | 智能设备的信息处理方法和智能设备 |
TWI702538B (zh) * | 2019-03-29 | 2020-08-21 | 麗寶大數據股份有限公司 | 運用於化妝輔助裝置的化妝輔助方法 |
CN111783511A (zh) * | 2019-10-31 | 2020-10-16 | 北京沃东天骏信息技术有限公司 | 美妆处理方法、装置、终端以及存储介质 |
CN112188101A (zh) * | 2020-09-30 | 2021-01-05 | 广东艾福斯智慧物联科技有限公司 | 一种智能美妆镜的实现方法和智能美妆镜 |
CN112418132A (zh) * | 2020-12-01 | 2021-02-26 | 江西台德智慧科技有限公司 | 一种智能美妆镜和智能美妆系统 |
CN112801737A (zh) * | 2021-01-27 | 2021-05-14 | 广州微框物联科技有限公司 | 一种智能镜子的口红导购方法及装置 |
CN112819718A (zh) * | 2021-02-01 | 2021-05-18 | 深圳市商汤科技有限公司 | 图像处理方法及装置、电子设备及存储介质 |
US11253045B2 (en) | 2019-07-18 | 2022-02-22 | Perfect Mobile Corp. | Systems and methods for recommendation of makeup effects based on makeup trends and facial analysis |
WO2022042195A1 (zh) * | 2020-08-24 | 2022-03-03 | 华为技术有限公司 | 护肤辅助方法、设备及存储介质 |
CN114900538A (zh) * | 2022-03-28 | 2022-08-12 | 青岛海尔科技有限公司 | 智能镜子的控制方法和装置、存储介质及电子装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106108523A (zh) * | 2016-08-22 | 2016-11-16 | 陈云 | 一种便携式智能化妆镜、化妆辅助系统及方法 |
CN107463936A (zh) * | 2016-06-02 | 2017-12-12 | 宗经投资股份有限公司 | 自动脸部化妆方法 |
-
2017
- 2017-12-25 CN CN201711427543.1A patent/CN108171143A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107463936A (zh) * | 2016-06-02 | 2017-12-12 | 宗经投资股份有限公司 | 自动脸部化妆方法 |
CN106108523A (zh) * | 2016-08-22 | 2016-11-16 | 陈云 | 一种便携式智能化妆镜、化妆辅助系统及方法 |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109393868A (zh) * | 2018-08-08 | 2019-03-01 | 颜沿(上海)智能科技有限公司 | 一种智能试妆货架及方法 |
CN111047384A (zh) * | 2018-10-15 | 2020-04-21 | 北京京东尚科信息技术有限公司 | 智能设备的信息处理方法和智能设备 |
CN109315913A (zh) * | 2018-10-16 | 2019-02-12 | 陕西科技大学 | 穿戴式画眉辅助装置 |
CN109315913B (zh) * | 2018-10-16 | 2022-03-18 | 陕西科技大学 | 穿戴式画眉辅助装置 |
CN109671142A (zh) * | 2018-11-23 | 2019-04-23 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109671142B (zh) * | 2018-11-23 | 2023-08-04 | 南京图玩智能科技有限公司 | 一种智能美妆方法及智能美妆镜 |
CN109948548A (zh) * | 2019-03-20 | 2019-06-28 | 齐鲁工业大学 | 一种基于机器学习的色彩匹配的口红推荐方法及系统 |
TWI702538B (zh) * | 2019-03-29 | 2020-08-21 | 麗寶大數據股份有限公司 | 運用於化妝輔助裝置的化妝輔助方法 |
US10762799B1 (en) | 2019-03-29 | 2020-09-01 | Cal-Comp Big Data, Inc. | Make-up assisting method implemented by make-up assisting device |
CN110045872A (zh) * | 2019-04-25 | 2019-07-23 | 廖其锋 | 日用智能镜及使用方法 |
US11253045B2 (en) | 2019-07-18 | 2022-02-22 | Perfect Mobile Corp. | Systems and methods for recommendation of makeup effects based on makeup trends and facial analysis |
CN110738620A (zh) * | 2019-10-16 | 2020-01-31 | 中国联合网络通信集团有限公司 | 智能美妆方法、化妆镜和存储介质 |
CN110738620B (zh) * | 2019-10-16 | 2022-10-04 | 中国联合网络通信集团有限公司 | 智能美妆方法、化妆镜和存储介质 |
CN110929146A (zh) * | 2019-10-23 | 2020-03-27 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、设备和存储介质 |
CN110929146B (zh) * | 2019-10-23 | 2024-04-02 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、设备和存储介质 |
CN111783511A (zh) * | 2019-10-31 | 2020-10-16 | 北京沃东天骏信息技术有限公司 | 美妆处理方法、装置、终端以及存储介质 |
WO2022042195A1 (zh) * | 2020-08-24 | 2022-03-03 | 华为技术有限公司 | 护肤辅助方法、设备及存储介质 |
CN112188101A (zh) * | 2020-09-30 | 2021-01-05 | 广东艾福斯智慧物联科技有限公司 | 一种智能美妆镜的实现方法和智能美妆镜 |
CN112418132A (zh) * | 2020-12-01 | 2021-02-26 | 江西台德智慧科技有限公司 | 一种智能美妆镜和智能美妆系统 |
CN112801737A (zh) * | 2021-01-27 | 2021-05-14 | 广州微框物联科技有限公司 | 一种智能镜子的口红导购方法及装置 |
CN112819718A (zh) * | 2021-02-01 | 2021-05-18 | 深圳市商汤科技有限公司 | 图像处理方法及装置、电子设备及存储介质 |
CN114900538A (zh) * | 2022-03-28 | 2022-08-12 | 青岛海尔科技有限公司 | 智能镜子的控制方法和装置、存储介质及电子装置 |
CN114900538B (zh) * | 2022-03-28 | 2024-01-26 | 青岛海尔科技有限公司 | 智能镜子的控制方法和装置、存储介质及电子装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108171143A (zh) | 美妆方法、智能镜及存储介质 | |
CN108062400A (zh) | 基于智能镜的试妆方法、智能镜及存储介质 | |
CN108154121A (zh) | 基于智能镜的化妆辅助方法、智能镜及存储介质 | |
CN107566728A (zh) | 一种拍摄方法、移动终端及计算机可读存储介质 | |
CN107832784B (zh) | 一种图像美化的方法和一种移动终端 | |
CN107093418A (zh) | 一种屏幕显示方法、计算机设备及存储介质 | |
CN107835367A (zh) | 一种图像处理方法、装置及移动终端 | |
CN109819167B (zh) | 一种图像处理方法、装置和移动终端 | |
CN109600550A (zh) | 一种拍摄提示方法及终端设备 | |
CN107302662A (zh) | 一种拍照的方法、装置及移动终端 | |
CN107767333A (zh) | 美颜拍照的方法、设备及计算机可存储介质 | |
CN109788204A (zh) | 拍摄处理方法及终端设备 | |
CN108600647A (zh) | 拍摄预览方法、移动终端及存储介质 | |
CN107231470A (zh) | 图像处理方法、移动终端及计算机可读存储介质 | |
CN108920119A (zh) | 一种分享方法及移动终端 | |
CN109461124A (zh) | 一种图像处理方法及终端设备 | |
CN107948430A (zh) | 一种显示控制方法、移动终端及计算机可读存储介质 | |
CN109167914A (zh) | 一种图像处理方法及移动终端 | |
CN107665477A (zh) | 电子设备和控制电子设备的方法 | |
CN107707751A (zh) | 视频播放省电方法及对应的移动终端 | |
CN109194839A (zh) | 一种显示控制方法和终端 | |
CN110113532A (zh) | 一种拍摄控制方法、终端及计算机可读存储介质 | |
CN108052819A (zh) | 一种人脸识别方法、移动终端及计算机可读存储介质 | |
CN108063859A (zh) | 一种自动拍照控制方法、终端及计算机存储介质 | |
CN109448069A (zh) | 一种模板生成方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 518000 14 Nanshan District science and Technology Industrial Park, Shenzhen, Guangdong 201 Applicant after: Shenzhen Meili Control Technology Co., Ltd. Address before: 518000 14 Nanshan District science and Technology Industrial Park, Shenzhen, Guangdong 201 Applicant before: Shenzhen city beauty control Agel Ecommerce Ltd |
|
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180615 |