CN111796662A - 一种基于ar技术的美妆方法及多功能美妆镜系统 - Google Patents

一种基于ar技术的美妆方法及多功能美妆镜系统 Download PDF

Info

Publication number
CN111796662A
CN111796662A CN201910274745.XA CN201910274745A CN111796662A CN 111796662 A CN111796662 A CN 111796662A CN 201910274745 A CN201910274745 A CN 201910274745A CN 111796662 A CN111796662 A CN 111796662A
Authority
CN
China
Prior art keywords
cosmetics
cosmetic
makeup
technology
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910274745.XA
Other languages
English (en)
Inventor
马凯敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maipa Information Technology Shanghai Co ltd
Original Assignee
Maipa Information Technology Shanghai Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maipa Information Technology Shanghai Co ltd filed Critical Maipa Information Technology Shanghai Co ltd
Priority to CN201910274745.XA priority Critical patent/CN111796662A/zh
Publication of CN111796662A publication Critical patent/CN111796662A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D42/00Hand, pocket, or shaving mirrors
    • A45D42/08Shaving mirrors
    • A45D42/10Shaving mirrors illuminated
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于AR技术的美妆方法,包括以下步骤:人脸面部检测,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,然后将分析解决方案传输至云端数据库;化妆品管理,在云端数据库存储管理化妆品的数字化信息与相应图片;AR试妆,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图。本发明依托于AR技术,将美妆与增强现实相结合,用户可以在虚拟环境中尝试各种妆容,较之传统的美妆方式,更加方便快捷,同时也大大降低了美妆成本;还能够对用户的脸部皮肤进行分析,进而针对性的使用相应的化妆品,避免出现误用,造成难以预料的后果。

Description

一种基于AR技术的美妆方法及多功能美妆镜系统
技术领域
本发明涉及美妆领域,具体是一种基于AR技术的美妆方法及多功能美妆镜系统。
背景技术
美妆是运用化妆品和工具,采取合乎规则的步骤和技巧,对人的面部、五官及其他部位进行渲染、描画、整理,增强立体印象,调整形色,掩饰缺陷,表现神采,从而达到美容目的。化妆能表现出女性独有的天然丽质,焕发风韵,增添魅力。成功的化妆能唤起女性心理和生理上的潜在活力,增强自信心,使人精神焕发,还有助于消除疲劳,延缓衰老。
传统的美妆方式都是手动进行的,效率较为低下,且当用户需要进行试行不同妆容时,需要不断地进行涂抹-擦拭-再涂抹的操作,这样一来容易对用户的皮肤造成损坏,二来也会造成化妆品的浪费,提高美妆成品。
增强现实(AR)是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。本发明主要是采用AR技术,在屏幕上显示实时的人像,使用者可以选择不同的化妆品,如口红等,即可在屏幕上看到自己上妆的画面,达到虚拟试妆的目的,不必再繁琐的以身试妆。
发明内容
本发明的目的在于提供一种基于AR技术的美妆方法及多功能美妆镜系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
一种基于AR技术的美妆方法,包括以下步骤:
人脸面部检测,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
化妆品管理,在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图。
作为本发明进一步的方案:化妆品管理过程中会扫描化妆品上的二维码以识别该化妆品身份信息并加以记录。
作为本发明进一步的方案:所述云端数据库包括已购置的化妆品信息以及未购置的化妆品信息,匹配过程中优先选择已购置的化妆品进行匹配。
作为本发明进一步的方案:若匹配的化妆品为已购置化妆品,则直接使用,若匹配的化妆品为未购置化妆品,则利用互联网进行一键购买,且在云端数据库中调取与该未购置化妆品效果最接近的已购置化妆品进行替代使用。
一种多功能美妆镜系统,包括镜面显示器、支架、托盘、集成在镜面显示器、支架或托盘中的控制单元以及与控制单元相连的
人脸检测单元,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
化妆品管理单元,用于在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆单元,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图。
作为本发明进一步的方案:所述化妆品管理单元能够利用高清摄像头扫描化妆品上的二维码以识别该化妆品身份信息并加以记录。
作为本发明进一步的方案:所述控制单元的操作方式包括但不限于控制器控制、手势控制和语音控制。
作为本发明进一步的方案:所述镜面主体为配备有支架和托盘的镜面显示器。
作为本发明进一步的方案:所述镜面主体为独立式的镜面显示器。
作为本发明进一步的方案:所述镜面显示器为LED屏幕嵌入镜面式设计。
作为本发明进一步的方案:还包括手机app,用于登录云端数据库,使得用户可以对皮肤检测结果、试妆历史记录等信息进行查询。
作为本发明进一步的方案:还包括气候提醒单元,可实时采集气温、紫外线、雾霾等外界信息,并以语音或者文字显示的方式提醒用户注意事项。
与现有技术相比,本发明的有益效果是:
本发明依托于AR技术,将美妆与增强现实相结合,用户可以在虚拟环境中尝试各种妆容,较之传统的美妆方式,更加方便快捷,同时也大大降低了美妆成本;还能够对用户的脸部皮肤进行分析,进而针对性的使用相应的化妆品,避免出现误用,造成难以预料的后果。
附图说明
图1为多功能美妆镜的主视结构示意图。
图2为多功能美妆镜的侧视结构示意图。
图中:1-镜面主体、101-支架、102-托盘。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中,一种基于AR技术的美妆方法,包括以下步骤:
人脸面部检测,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
具体来说,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法(如通过光谱偏振反应面部纹理);根据使用者性别、年龄、肤质等情况结合大数据进行比对。之后,分别从黑斑、红斑、细纹、皱纹、痘印、黑眼圈、黑头、毛孔等方面显示使用者面部皮肤情况。同时,将分析结果传输至云端服务器,经过大数据分析、现有医美数据和使用者历史检测数据,生成相应的治疗护理方案并依据云端数据库中的信息匹配相应化妆品;
化妆品管理,在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图;
例如,王某脸部皮肤毛孔较为粗大,则调取云端数据库中适用于毛孔粗大的某化妆品并推荐给用户,该化妆品可以为王某已购置的化妆品,也可以为王某未购置的化妆品;
由于匹配的化妆品可能为已购置的化妆品,也可能为未购置的化妆品,则需分情况进行下一步,具体来说,若匹配的化妆品为已购置化妆品,则直接使用,若匹配的化妆品为未购置化妆品,则利用互联网进行一键购买,且在云端数据库中调取与该未购置化妆品效果最接近的已购置化妆品进行替代使用;
例如,李某匹配到的用于眼妆的化妆品为AAA品牌的,但AAA品牌的化妆品属于李某的未购置化妆品,则直接在互联网上购买AAA品牌的化妆品,同时在云端数据库中调取与AAA品牌的化妆品使用效果接近的BBB品牌化妆品供李某代替使用,待AAA品牌化妆品到货以后,则停止使用BBB品牌化妆品,转而使用AAA品牌的化妆品。
本实施例还提供一种多功能美妆镜系统,包括包括镜面主体、集成在镜面主体中的控制单元以及与控制单元相连的
人脸检测单元,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
化妆品管理单元,用于在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆单元,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图;
进一步的,所述化妆品管理单元能够利用高清摄像头扫描化妆品上的二维码以识别该化妆品身份信息并加以记录。
进一步的,所述控制单元的操作方式包括但不限于控制器控制、手势控制和语音控制;
如图2所示,所述镜面主体可以为配备有支架101和托盘102的镜面显示器,也可以为独立式的镜面显示器,所述镜面显示器的具体结构不限限定,可以为圆形、方形等。
进一步的,所述镜面显示器为LED屏幕嵌入镜面式设计;
进一步的,本实施例中,所述多功能美妆镜系统,还包括
手机app,用于登录云端数据库,使得用户可以对皮肤检测结果、试妆历史记录等信息进行查询;
气候提醒单元,可实时采集气温、紫外线、雾霾等外界信息,并以语音或者文字显示的方式提醒用户注意事项;
例如,当室外紫外线强度较高时,气候单元会以发出注意事项播放或者在镜面显示器上显示相关信息,从而提醒用户做好防晒工作。
本发明的工作原理是:
本发明将美妆与增强现实相结合,利用高清摄像头对识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,即可以根据使用者性别、年龄、肤质等情况结合大数据进行比对,然后分别从黑斑、红斑、细纹、皱纹、痘印、黑眼圈、黑头、毛孔等方面显示使用者面部皮肤情况,然后将分析结果传输至云端数据库,便于用于对自己的面部皮肤状况进行掌握;同时利用了AR技术,加之存储的化妆品的数字化信息和相应图片,用户可以在虚拟环境中尝试各种妆容,较之传统的美妆方式,更加方便快捷,同时也大大降低了美妆成本;且能够根据化妆品的购置与否进行智能选择,不回因为化妆品未购置而影响用户的使用,更加人性化;还能够对用户的脸部皮肤进行分析,进而针对性的使用相应的化妆品,避免出现误用,造成难以预料的后果。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
此外,应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。

Claims (12)

1.一种基于AR技术的美妆方法,其特征在于,包括以下步骤:
人脸面部检测,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
化妆品管理,在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图。
2.根据权利要求1所述的基于AR技术的美妆方法,其特征在于,化妆品管理过程中会扫描化妆品上的二维码以识别该化妆品身份信息并加以记录。
3.根据权利要求2所述的基于AR技术的美妆方法,其特征在于,所述云端数据库包括已购置的化妆品信息以及未购置的化妆品信息,匹配过程中优先选择已购置的化妆品进行匹配。
4.根据权利要求3所述的基于AR技术的美妆方法,其特征在于,若匹配的化妆品为已购置化妆品,则直接使用,若匹配的化妆品为未购置化妆品,则利用互联网进行一键购买,且在云端数据库中调取与该未购置化妆品效果最接近的已购置化妆品进行替代使用。
5.一种多功能美妆镜系统,其特征在于,包括镜面主体、集成在镜面主体中的控制单元以及与控制单元相连的
人脸检测单元,通过高清摄像头识别人脸数据并以图像的方式进行显示,同时将使用者面部各数据采集并分析,分析过程包括但不限于存在于人脸不同区域的不同肌肤问题所需的不同算法,然后将分析解决传输至云端数据库;
化妆品管理单元,用于在云端数据库存储管理化妆品的数字化信息与相应图片;
AR试妆单元,利用AR技术,依据人脸数据匹配相对应的化妆品,并进行影像合成,生成妆容效果图。
6.根据权利要求5所述的多功能美妆镜系统,其特征在于,所述化妆品管理单元能够利用高清摄像头扫描化妆品上的二维码以识别该化妆品身份信息并加以记录。
7.根据权利要求5所述的多功能美妆镜系统,其特征在于,所述控制单元的操作方式包括但不限于控制器控制、手势控制和语音控制。
8.根据权利要求5所述的多功能美妆镜系统,其特征在于,所述镜面主体为配备有支架和托盘的镜面显示器。
9.根据权利要求5所述的多功能美妆镜系统,其特征在于,所述镜面主体为独立式的镜面显示器。
10.根据权利要求5所述的多功能美妆镜系统,其特征在于,所述镜面显示器为LED屏幕嵌入镜面式设计。
11.根据权利要求5-10任一所述的多功能美妆镜系统,其特征在于,还包括手机app,用于登录云端数据库,使得用户可以对皮肤检测结果、试妆历史记录等信息进行查询。
12.根据权利要求11所述的多功能美妆镜系统,其特征在于,还包括气候提醒单元,可实时采集气温、紫外线、雾霾等外界信息,并以语音或者文字显示的方式提醒用户注意事项。
CN201910274745.XA 2019-04-08 2019-04-08 一种基于ar技术的美妆方法及多功能美妆镜系统 Withdrawn CN111796662A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910274745.XA CN111796662A (zh) 2019-04-08 2019-04-08 一种基于ar技术的美妆方法及多功能美妆镜系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910274745.XA CN111796662A (zh) 2019-04-08 2019-04-08 一种基于ar技术的美妆方法及多功能美妆镜系统

Publications (1)

Publication Number Publication Date
CN111796662A true CN111796662A (zh) 2020-10-20

Family

ID=72805108

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910274745.XA Withdrawn CN111796662A (zh) 2019-04-08 2019-04-08 一种基于ar技术的美妆方法及多功能美妆镜系统

Country Status (1)

Country Link
CN (1) CN111796662A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112418132A (zh) * 2020-12-01 2021-02-26 江西台德智慧科技有限公司 一种智能美妆镜和智能美妆系统
CN112422817A (zh) * 2020-10-28 2021-02-26 维沃移动通信有限公司 图像处理方法及装置
CN112785355A (zh) * 2021-03-12 2021-05-11 上海思得安环境科技有限公司 一种车载智能美妆系统
CN116486054A (zh) * 2023-06-25 2023-07-25 四川易景智能终端有限公司 一种ar虚拟美妆镜及其工作方法
JP7496946B2 (ja) 2022-04-21 2024-06-07 株式会社Zozo 情報処理装置、情報処理方法及び情報処理プログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112422817A (zh) * 2020-10-28 2021-02-26 维沃移动通信有限公司 图像处理方法及装置
CN112418132A (zh) * 2020-12-01 2021-02-26 江西台德智慧科技有限公司 一种智能美妆镜和智能美妆系统
CN112785355A (zh) * 2021-03-12 2021-05-11 上海思得安环境科技有限公司 一种车载智能美妆系统
JP7496946B2 (ja) 2022-04-21 2024-06-07 株式会社Zozo 情報処理装置、情報処理方法及び情報処理プログラム
CN116486054A (zh) * 2023-06-25 2023-07-25 四川易景智能终端有限公司 一种ar虚拟美妆镜及其工作方法
CN116486054B (zh) * 2023-06-25 2023-09-12 四川易景智能终端有限公司 一种ar虚拟美妆镜及其工作方法

Similar Documents

Publication Publication Date Title
CN111796662A (zh) 一种基于ar技术的美妆方法及多功能美妆镜系统
US10945514B2 (en) Information processing apparatus, information processing method, and computer-readable storage medium
CN109377557B (zh) 基于单帧人脸图像的实时三维人脸重建方法
CN104105953B (zh) 用于颜色校准的装置和方法
US20160042557A1 (en) Method of applying virtual makeup, virtual makeup electronic system, and electronic device having virtual makeup electronic system
CN105455522A (zh) 一种智能美容镜
WO2018014540A1 (zh) 虚拟化妆系统
CN109671142A (zh) 一种智能美妆方法及智能美妆镜
CN105913416A (zh) 一种自动分割三维人脸模型区域的方法
KR20170085477A (ko) 가상 현실 환경을 위한 가려진 얼굴 부분 재구성 방법 및 시스템
US20220044311A1 (en) Method for enhancing a user's image while e-commerce shopping for the purpose of enhancing the item that is for sale
CN109982616B (zh) 用于支持至少一个用户执行个人护理活动的装置和方法
CN204576413U (zh) 一种基于自然用户界面的互联网智能镜
CN202662016U (zh) 一种实时虚拟试衣装置
CN103854303A (zh) 基于体感传感器的三维立体发型设计系统及设计方法
CN106991712A (zh) 一种基于hmds的医学成像系统
CN103995911A (zh) 基于智能信息终端的美容选配方法与系统
EP3121744A1 (en) System and method for virtual treatments based on aesthetic procedures
CN111528807A (zh) 基于多光谱和3d模型重建的人脸图像分析系统及其方法
JP2012152389A (ja) ミラー付什器
JP2015197710A (ja) 化粧支援装置およびプログラム
CN117495664B (zh) 一种智能辅助化妆系统
CN109658167A (zh) 试妆镜设备及其控制方法、装置
KR101719927B1 (ko) 립 모션을 이용한 실시간 메이크업 미러 시뮬레이션 장치
JP5782540B2 (ja) 美容カウンセリング方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20201020

WW01 Invention patent application withdrawn after publication