CN107317974A - 一种美妆拍照方法和装置 - Google Patents

一种美妆拍照方法和装置 Download PDF

Info

Publication number
CN107317974A
CN107317974A CN201710728314.7A CN201710728314A CN107317974A CN 107317974 A CN107317974 A CN 107317974A CN 201710728314 A CN201710728314 A CN 201710728314A CN 107317974 A CN107317974 A CN 107317974A
Authority
CN
China
Prior art keywords
makeups
user
effect
product
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710728314.7A
Other languages
English (en)
Other versions
CN107317974B (zh
Inventor
王莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201710728314.7A priority Critical patent/CN107317974B/zh
Publication of CN107317974A publication Critical patent/CN107317974A/zh
Application granted granted Critical
Publication of CN107317974B publication Critical patent/CN107317974B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Library & Information Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Accounting & Taxation (AREA)
  • General Engineering & Computer Science (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种美妆拍照方法和装置，该方法包括：当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域；当接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上；否则，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上；接收到用户输入的拍照指令时，进行拍照并存储叠加美妆效果的照片。该技术方案能够增强设备的拍照功能，并提高用户体验。

Description

一种美妆拍照方法和装置
技术领域
本发明涉及图像处理技术领域，特别涉及一种美妆拍照方法和装置。
背景技术
随着智能移动设备的普及和拍照功能的完善，越来越多的人选择智能移动设备进行日常的拍摄，使用美颜模式美化拍摄效果。
当前的主流技术是通过滤镜美化整个画面，仅仅是对照片的美化，虽然可以分享给他人照片，但并非真实的美颜.
市场上有部分美妆应用，可以提供美妆的功能，但是只是查看一些已有产品的效果，需要用户自己在列表中选择并且选择有限。
已有的实现通常仅是通过问卷调查了解用户习惯或者外置装备确认皮肤状态，根据调查结果或皮肤状态推荐美妆效果。
现有实现中的美妆应用虽然可以提供推荐功能并查看使用效果，但是步骤繁琐，必须用户自主选择产品查看效果，并且单次拍摄只能查看一个产品的上妆效果，不能组合查看多个类型的产品，无法自主学习和推荐。
已有的模式不提供推荐功能，或者只能根据问卷调查结果或者外置装备的测量结果推荐，不能自主搜集用户的喜好和习惯，推荐用户满意的美妆效果。
发明内容
有鉴于此，本申请提供一种美妆拍照方法和装置，能够增强设备的拍照功能，并提高用户体验。
为解决上述技术问题，本申请的技术方案是这样实现的：
一种美妆拍照方法，所述方法包括：
当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域；
当接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上；否则，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上；
接收到用户输入的拍照指令时，进行拍照并存储叠加美妆效果的照片。
一种美妆拍照装置，所述装置包括：识别单元、接收单元、处理单元、拍照单元和存储单元
所述识别单元，用于当处于美妆模式拍照时，进行人脸识别，并定位美妆区域；
所述接收单元，用于接收用户输入的美妆方式；接收用户输入的拍照指令；
所述处理单元，用于当所述接收单元接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果；否则，根据所述识别单元获得的人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果；
所述显示单元，用于将所述处理单元选择的美妆效果显示在定位的美妆区域上；
所述拍照单元，用于当所述接收单元接收到用户输入的拍照指令时，进行拍照；
所述存储单元，用于存储所述拍照单元拍摄的叠加美妆效果的照片。
由上面的技术方案可知，本申请中，通过人脸识别技术，在用户使用一键美妆拍照时，如果用户使用美妆拍照次数达到一定阈值时，为该用户选择已使用过次数最多的美妆效果显示给用户；否则，从云端数据库中为该用户选择与该用户人脸最匹配的用户使用次数最多的美妆效果。该技术方案能够自动为用户提供适合用户喜好和面部特点的美妆效果，进而增强设备的拍照功能，并提高用户体验。
附图说明
图1为本申请实施例中美妆拍照流程示意图；
图2为本申请实施例中使用一键美妆模式拍照流程示意图；
图3为本申请实施例中手动美妆流程示意图；
图4为本申请实施例中进入美妆模式示意图；
图5为本申请实施例中进入美妆模式后美妆方式选择示意图；
图6为本申请实施例中护肤产品推荐流程示意图；
图7为本申请实施例中美妆产品推荐流程示意图；
图8为本申请实施例中推荐产品的示意图；
图9为本申请实施例中护肤建议推荐流程示意图；
图10为本申请实施例中美妆建议推荐流程示意图；
图11为本申请实施例中美妆建议示意图；
图12为本申请实施例中产品和建议同时显示的方式；
图13为本申请实施例中应用于上述技术的装置结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，下面结合附图并举实施例，对本发明的技术方案进行详细说明。
本申请实施例中提供一种美妆拍照方法，通过人脸识别技术，在用户使用一键美妆拍照时，如果用户使用美妆拍照次数达到一定阈值时，为该用户选择已使用过次数最多的美妆效果显示给用户；否则，从云端数据库中为该用户选择与该用户人脸最匹配的用户使用次数最多的美妆效果。该技术方案能够自动为用户提供适合用户喜好和面部特点的美妆效果，进而增强设备的拍照功能，并提高用户体验。
下面结合附图，详细说明本申请实施例中美妆拍照过程。
参见图1，图1为本申请实施例中美妆拍照流程示意图。具体步骤为：
步骤101，当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域。
当拍照设备处于美妆模式拍照时，即同不使用美妆，也就是一般拍照，或美颜拍照等其他拍照的区别。
拍照设备在处于美妆模式拍照时，先对拍照对象进行灰度识别，确定人脸局部灰度纹理特征，通过HOG、HAAR或LBP特征进行人脸检测，并利用Graph cut或者Grab Cut图像分割算法确定头部的轮廓；即将人的头部从镜头中的整个图像中定位出来。头部包括：五官、脸部轮廓、头发等。
拍照设备端存储并维护人脸对齐算法的数据训练集。当头部轮廓确认以后，通过ASM/AAM等人脸对齐算法，输入获取的头部的灰度纹理特征，与样本数据训练集中的特征点进行逼近模拟，输出拍照对象的头部的特征点信息，编码获取二进制文件，即头部的特征点数据。
拍照设备根据特征点数据，进行人脸匹配，以及根据特征点标定的区域，进行后续美妆效果的叠加。
数据训练集是由人工事先采集多张人脸图像，并对特征点进行标注获取的二进制文件。在用户使用后，添加用户特征点数据至数据训练集中，进一步提高下次使用人脸对齐算法的效率和精确度。
步骤102，当拍照设备接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，执行步骤103；否则，执行步骤104。
步骤103，该拍照设备选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上，执行步骤105。
当用户使用美妆模式拍照次数大于第一预设阈值时，使用本地数据库中存储的相关信息为用户提供美妆效果，实现该步骤需要在用户每次使用美妆拍照时将用户使用的美妆效果存储，以及使用对应美妆效果的次数。
这样就能根据用户的喜好为该用户推荐美妆效果。
步骤104，该拍照设备根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上。
云端数据库中维护大量用户已使用过的美妆效果，以及使用对应美妆效果的次数。
根据人脸识别结果，如特征点数据，在云端数据库中进行匹配，匹配与该用户人脸最接近的用户，即与当前拍照的人脸相似度最大的人脸，则将该用户使用次数最多的美妆效果推荐给当前拍照的用户。
步骤105，该拍照设备接收到用户输入的拍照指令时，进行拍照并存储叠加美妆效果的照片。
本申请实施例中给出了美妆拍照，以及产品推荐、护肤建议的详细实现过程：
首先针对美妆拍照的两种方式：“一键美妆”和“手动美妆”，分别进行描述。
第一种，一键美妆：
参见图2，图2为本申请实施例中使用一键美妆模式拍照流程示意图。具体步骤为：
步骤201，当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域。
步骤202，当拍照设备接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，执行步骤203；否则，执行步骤208。
步骤203，该拍照设备选择该用户使用次数最多的美妆效果。
步骤204，该拍照设备将选择的美妆效果显示在定位的美妆区域上。
步骤205，该拍照设备确定第一预设时间内是否接收到用户输入的拍照指令，如果是，执行步骤211；否则，执行步骤206。
步骤206，该拍照设备确定是否存在比当前选择的美妆效果使用次数次多的美妆效果，如果是，执行步骤207；否则，执行步骤208。
步骤207，该拍照设备选择比当前使用美妆效果使用次数次多的美妆效果，执行步骤204。
步骤208，该拍照设备确定云端数据库中的使用美妆的用户的个数是否大于第二预设阈值，如果是，执行步骤209；否则，执行步骤211。
步骤209，该拍照设备根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上。
步骤210，该拍照设备确定第一预设时间内是否接收到用户输入的拍照指令，如果是，执行步骤212；否则，执行步骤211。
步骤211，该拍照设备在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果并显示在定位的美妆区域上。
步骤212，该拍照设备进行拍照并存储叠加美妆效果的照片。
第二种，手动美妆：
参见图3，图3为本申请实施例中手动美妆流程示意图。具体步骤为：
步骤301，当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域。
步骤302，当该拍照设备接收到用户输入的美妆方式为手动美妆时，打开并显示面部特征列表。
步骤303，当该拍照设备接收到用户选择的面部特征时，显示对应的面部特征所对应的美妆效果。
步骤304，当该拍照设备接收到用户选择的面部特征对应的美妆效果时，针对该面部特征生成美妆效果并显示在定位的美妆区域上。
步骤305，该拍照设备接收到用户输入的拍照指令时，进行拍照并存储叠加美妆效果的照片。
上述两种方式，无论使用哪种方式拍照，都需要在本地数据库中记录使用所述美妆效果的次数，以备本申请为该用户拍照时，推荐美妆效果；并将本用户使用所述美妆效果的次数上传到云端数据库中，以备为与该用户相似度大的用户在拍照时，提供美妆效果。
参见图4，图4为本申请实施例中进入美妆模式示意图。图4中，通过选择的方式为用户提供选择。
当用户使用拍照设备进行拍照时，若点击，或触摸美妆模式选项时，则进入美妆拍照模式。
参见图5，图5为本申请实施例中进入美妆模式后美妆方式选择示意图。图5中给出一种“一键美妆”，以及“手动美妆”的选择方式，当用户点击或触摸一键美妆时进入一键美妆模式，自动为用户显示美妆效果；当用户选择头部部位列表选项中的任一选项，如脸、眼睛，眉毛、鼻子、头发等，则在美妆效果选项的位置显示针对选择的部位显示对应的美妆效果，如果对应的美妆效果较多，可以采用分页显示的方式，每页显示几个美妆效果，可以由用户自行设置；选择某一个效果后，显示在对应的人脸区域。
当选择多个部位进行美妆时，将每个部位的美妆效果都显示在对应的位置。
图4和图5仅给出一种模式选择示意图，具体实现不限于图中所给出的实现方式。
本申请实施例中，用户在使用叠加美妆效果进行拍照，并存储时，还可以为用户提供是否查看建议和产品的提示。
在具体实现时，可以为用户显示护肤建议、护肤产品，以及美妆建议和美妆产品的查看询问。
用户可以选择其中一项查看，也可以同时选择多项查看。
当拍照设备提示用户是否查看下述参数之一或任意组合对应的信息：护肤建议、护肤产品，美妆建议、美妆产品。
当第二预设时间内未接收到用户输入的请求时，关闭提示。
下面针对护肤建议、护肤产品，美妆建议和美妆产品的推荐实现分别进行描述：
参见图6，图6为本申请实施例中护肤产品推荐流程示意图。具体步骤为：
步骤601，当拍照设备接收到用户输入的查看护肤产品的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态。
步骤602，当该拍照设备使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较。
步骤603，该拍照设备若确定存在面部状态的任一参数值不一致，则将不一致的面部状态的参数作为关键字，搜索护肤产品，并以链接列表的形式为用户显示搜索到的护肤产品。
用户可以根据需要打开某一产品的链接，进入购买该产品的页面，也可以关闭当前显示的内容。
参见图7，图7为本申请实施例中美妆产品推荐流程示意图。具体步骤为：
步骤701，当拍照设备接收到用输入的查看美妆产品的请求时，关闭提示。
步骤702，该拍照设备将当前存储的照片叠加的美妆效果对应的面部特征作为关键字，搜索美妆产品。
如当前美妆效果中针对唇部进行了美妆，则搜索唇部对应的美妆产品。
步骤703，该拍照设备通过图像识别，在搜索出的美妆产品中识别出与美妆效果对应的面部特征最匹配的美妆产品。
在具体实现时，也可以选择N个与美妆效果图像匹配的美妆产品。
步骤704，该拍照设备将识别出的美妆产品以链接列表的形式为用户显示美妆产品，并在数据库中存储该美妆效果对应的美妆产品。
本步骤中该拍照设备将识别出的美妆产品以链接列表的形式为用户显示美妆产品时，确定云端数据库中是否存在该美妆效果对应的美妆产品列表，如果存在，则将云端数据库中存储的美妆效果对应的美妆产品和识别出的美妆产品一同以产品链接列表的形式显示给用户。
本申请具体实现时，云端数据库可以预先为每种美妆效果配置美妆产品链接列表，也可以是为每个用户根据美妆效果搜索美妆产品并推荐后，将选择的美妆产品的产品链接与对应的美妆效果绑定存储，或者两种结合使用。
如果同时在链接列表中显示云端数据库中存储的美妆产品，以及为用户搜索的美妆产品时，可以将所有确定的都显示，也可以分别在两种获取美妆产品的方式中选择几个进行显示，哪些美妆产品显示在前，哪些美妆产品显示在后，均不作具体限制，也可以根据实际应用配置具体显示顺序。
参见图8，图8为本申请实施例中推荐产品的示意图。图8中给出的可以是护肤产品，也可以是美妆产品的推荐，针对不同的部位给出不同的产品推荐。
参见图9，图9为本申请实施例中护肤建议推荐流程示意图。具体步骤为：
步骤901，当拍照设备接收到用户输入的查看护肤建议的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态。
步骤902，该拍照设备使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较。
步骤903，该拍照设备若确定存在面部状态的任一参数值不一致，则为用户提供达到数据库中的对应面部状态的参数值的护肤建议，并显示。
比如确定用户的皮肤的色差低于数据库中存储的皮肤的标准值，则提示用户注意清洁、注意防晒、保证睡眠等。
比如两颊区域豆痘印数高于存储的标准值，提示注意补水保湿等。
参见图10，图10为本申请实施例中美妆建议推荐流程示意图。具体步骤为：
步骤1001，当拍照设备接收到用户输入的查看美妆建议的请求时，关闭提示。
步骤1002，该拍照设备根据当前存储的照片叠加的美妆效果为用户提供美妆建议，并显示。
云端数据库预先存储每种美妆效果对应的美妆建议。
如根据美妆效果确定用户选择的是暖色调的唇色，提示可选用暖色调的唇膏；用户选择亮白类型的肤色，提示可以选择购买亮白色类型的粉底等。
参见图11，图11为本申请实施例中美妆建议示意图。图11中给出了一种美妆建议的示意，具体实现时，不限于图11中所示显示方式。
参见图12，图12为本申请实施例中产品和建议同时显示的方式。在具体实现时，如果用户同时输入了查看产品和建议的请求时，则根据用户输入的请求为用户同时显示相关内容，如果一页不能显示，可以分页显示，每页显示几条信息，用户均可自己设定。
基于同样的发明构思，本申请还提出一种美妆拍照装置。参见图13，图13为本申请实施例中应用于上述技术的装置结构示意图。该装置包括：识别单元1301、接收单元1302、处理单元1303、显示单元1304、拍照单元1305和存储单元1306；
识别单元1301，用于当处于美妆模式拍照时，进行人脸识别，并定位美妆区域；
接收单元1302，用于接收用户输入的美妆方式；接收用户输入的拍照指令；
处理单元1303，用于当接收单元1302接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果；否则，根据识别单元1301获得的人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果；
显示单元1304，用于将处理单元1303选择的美妆效果显示在定位的美妆区域上；
拍照单元1305，用于当接收单元1302接收到用户输入的拍照指令时，进行拍照；
存储单元1306，用于存储拍照单元1305拍摄的叠加美妆效果的照片。
较佳地，
处理单元1303，进一步用于选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上之后，当第一预设时间内所述接收单元未接收到用户输入的拍照指令时，选择该用户使用次数次多的美妆效果；或，已不存在该用户使用过的美妆效果时，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上；
拍照单元1305，进一步用于所述接收单元等待用户指令；直到接收到用户输入的拍照指令时，进行拍照。
较佳地，
处理单元1303，进一步用于选择与该用户人脸最匹配的用户使用次数最多的美妆效果并由显示单元1304显示在定位的美妆区域上之后，当所述接收单元在第一预设时间内未接收到用户输入的拍照指令时，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果；
显示单元1304，用于将处理单元1303选择的美妆效果显示在定位的美妆区域上。
较佳地，，
处理单元1303，进一步用于在根据人脸识别结果在云端数据库中进行匹配之前，确定云端数据库中使用美妆的用户的个数是否大于第二预设阈值，如果是，根据人脸识别结果在云端数据库中进行匹配；否则，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果并触发显示单元1304显示在定位的美妆区域上。
较佳地，
显示单元1304，用于当所述接收单元接收到用户输入的美妆方式为手动美妆时，打开并显示面部特征列表；当所述接收单元接收到用户选择的面部特征时，显示对应的面部特征所对应的美妆效果；当所述接收单元接收到用户选择的面部特征对应的美妆效果时，针对该面部特征生成美妆效果并显示在定位的美妆区域上。
较佳地，
存储单元1306，进一步用于存储叠加美妆效果的照片时，在本地数据库中记录使用对应美妆效果的次数；并将本用户使用所述美妆效果的次数上传到云端数据库中。
较佳地，
显示单元1304，进一步用于存储单元1306存储叠加美妆效果的照片时，提示用户是否查看下述任一参数或任意组合：护肤产品、护肤建议、美妆产品、美妆建议；
处理单元1303，用于当所述接收单元在第二预设时间内未接收到用户输入的请求时，关闭提示。
较佳地，
处理单元1303，进一步用于当所述接收单元接收到用户输入的查看护肤产品的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；若存在面部状态的任一参数值不一致，则将不一致的面部状态的参数作为关键字，搜索护肤产品，并触发显示单元1304以链接列表的形式为用户显示搜索到的护肤产品。
较佳地，
处理单元1303，进一步用于当接收单元1302接收到用输入的查看美妆产品的请求时，关闭提示，将当前存储的照片叠加的美妆效果对应的面部特征作为关键字，搜索美妆产品；通过图像识别，在搜索出的美妆产品中识别出与美妆效果对应的面部特征最匹配的美妆产品；并触发显示单元1304将识别出的美妆产品以链接列表的形式为用户显示美妆产品，触发存储单元1306在数据库中存储该美妆效果对应的美妆产品。
较佳地，
处理单元1303，进一步用于显示单元1304将识别出的美妆产品以链接列表的形式为用户显示美妆产品之前，确定云端数据库中是否存在该美妆效果对应的美妆产品列表，如果是，触发显示单元1304将云端数据库中存储的美妆效果对应的美妆产品和识别出的美妆产品一同以产品链接列表的形式显示给用户；否则，触发显示单元1304将识别出的美妆产品以链接列表的形式为用户显示美妆产品。
较佳地，
处理单元1303，进一步用于当接收到用户输入的查看护肤建议的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；若存在面部状态的任一参数值不一致，则为用户提供达到数据库中的对应面部状态的参数值的护肤建议，并触发显示单元1304显示。
较佳地，
处理单元1303，进一步用于当所述接收单元接收到用户输入的查看美妆建议的请求时，关闭提示，并根据当前存储的照片叠加的美妆效果为用户提供美妆建议，并触发显示单元1304显示；其中，云端数据库预先存储每种美妆效果对应的美妆建议。
上述实施例的单元可以集成于一体，也可以分离部署；可以合并为一个单元，也可以进一步拆分成多个子单元。
综上所述，本申请通过人脸识别技术，在用户使用一键美妆拍照时，如果用户使用美妆拍照次数达到一定阈值时，为该用户选择已使用过次数最多的美妆效果显示给用户；否则，从云端数据库中为该用户选择与该用户人脸最匹配的用户使用次数最多的美妆效果。该技术方案能够自动为用户提供适合用户喜好和面部特点的美妆效果，进而增强设备的拍照功能，并提高用户体验。
并且可以根据人脸识别结果确定用户的面部状态，为用户提供适合用户的护肤建议、护肤产品；根据用户拍照选择的美妆效果为用户提供适合用户的美妆建议和美妆产品。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (24)

1.一种美妆拍照方法，其特征在于，所述方法包括：
当拍照设备处于美妆模式拍照时，进行人脸识别，并定位美妆区域；
当接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上；否则，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上；
接收到用户输入的拍照指令时，进行拍照并存储叠加美妆效果的照片。
2.根据权利要求1所述的方法，其特征在于，所述选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上之后，所述方法进一步包括：
当第一预设时间内未接收到用户输入的拍照指令时，选择该用户使用次数次多的美妆效果并显示在定位的美妆区域上；
等待用户指令；
直到接收到用户输入的拍照指令时，进行拍照；
或，已不存在该用户使用过的美妆效果时，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上。
3.根据权利要求1所述的方法，其特征在于，所述选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上之后，所述方法进一步包括：
当第一预设时间内未接收到用户输入的拍照指令时，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果并显示在定位的美妆区域上。
4.根据权利要求1所述的方法，其特征在于，所述根据人脸识别结果在云端数据库中进行匹配之前，所述方法进一步包括：
确定云端数据库中使用美妆的用户的个数是否大于第二预设阈值，如果是，根据人脸识别结果在云端数据库中进行匹配；否则，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果并显示在定位的美妆区域上。
5.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：
当接收到用户输入的美妆方式为手动美妆时，打开并显示面部特征列表；
接收到用户选择的面部特征时，显示对应的面部特征所对应的美妆效果；
接收到用户选择的面部特征对应的美妆效果时，针对该面部特征生成美妆效果并显示在定位的美妆区域上。
6.根据权利要求1所述的方法，其特征在于，所述存储叠加美妆效果的照片时，所述方法进一步包括：
在本地数据库中记录使用对应美妆效果的次数；
并将本用户使用所述美妆效果的次数上传到云端数据库中。
7.根据权利要求1-6任一项所述的方法，其特征在于，所述存储叠加美妆效果的照片时，所述方法进一步包括：
提示用户是否查看下述任一参数或任意组合：护肤产品、护肤建议、美妆产品、美妆建议；
当第二预设时间内未接收到用户输入的请求时，关闭提示。
8.根据权利要求7所述的方法，其特征在于，所述方法进一步包括：
当接收到用户输入的查看护肤产品的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；
使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；
若存在面部状态的任一参数值不一致，则将不一致的面部状态的参数作为关键字，搜索护肤产品，并以链接列表的形式为用户显示搜索到的护肤产品。
9.根据权利要求7所述的方法，其特征在于，所述方法进一步包括：
当接收到用输入的查看美妆产品的请求时，关闭提示；
将当前存储的照片叠加的美妆效果对应的面部特征作为关键字，搜索美妆产品；
通过图像识别，在搜索出的美妆产品中识别出与美妆效果对应的面部特征最匹配的美妆产品；
将识别出的美妆产品以链接列表的形式为用户显示美妆产品，并在数据库中存储该美妆效果对应的美妆产品。
10.根据权利要求9所述的方法，其特征在于，所述将识别出的美妆产品以链接列表的形式为用户显示美妆产品之前，所述方法进一步包括：
确定云端数据库中是否存在该美妆效果对应的美妆产品列表，如果是，将云端数据库中存储的美妆效果对应的美妆产品和识别出的美妆产品一同以产品链接列表的形式显示给用户；否则，将识别出的美妆产品以链接列表的形式为用户显示美妆产品。
11.根据权利要求7所述的方法，其特征在于，所述方法进一步包括：
当接收到用户输入的查看护肤建议的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；
使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；
若存在面部状态的任一参数值不一致，则为用户提供达到数据库中的对应面部状态的参数值的护肤建议，并显示。
12.根据权利要求7所述的方法，其特征在于，所述方法进一步包括：
当接收到用户输入的查看美妆建议的请求时，关闭提示，并根据当前存储的照片叠加的美妆效果为用户提供美妆建议，并显示；其中，云端数据库预先存储每种美妆效果对应的美妆建议。
13.一种美妆拍照装置，其特征在于，所述装置包括：识别单元、接收单元、处理单元、拍照单元和存储单元
所述识别单元，用于当处于美妆模式拍照时，进行人脸识别，并定位美妆区域；
所述接收单元，用于接收用户输入的美妆方式；接收用户输入的拍照指令；
所述处理单元，用于当所述接收单元接收到用户输入的美妆方式为一键美妆时，在本地数据库中确定该用户使用美妆模式拍照次数是否大于第一预设阈值，如果是，选择该用户使用次数最多的美妆效果；否则，根据所述识别单元获得的人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果；
所述显示单元，用于将所述处理单元选择的美妆效果显示在定位的美妆区域上；
所述拍照单元，用于当所述接收单元接收到用户输入的拍照指令时，进行拍照；
所述存储单元，用于存储所述拍照单元拍摄的叠加美妆效果的照片。
14.根据权利要求13所述的装置，其特征在于，
所述处理单元，进一步用于选择该用户使用次数最多的美妆效果并显示在定位的美妆区域上之后，当第一预设时间内所述接收单元未接收到用户输入的拍照指令时，选择该用户使用次数次多的美妆效果；或，已不存在该用户使用过的美妆效果时，根据人脸识别结果在云端数据库中进行匹配，选择与该用户人脸最匹配的用户使用次数最多的美妆效果并显示在定位的美妆区域上；
所述拍照单元，进一步用于所述接收单元等待用户指令；直到接收到用户输入的拍照指令时，进行拍照。
15.根据权利要求13所述的装置，其特征在于，
所述处理单元，进一步用于选择与该用户人脸最匹配的用户使用次数最多的美妆效果并由所述显示单元显示在定位的美妆区域上之后，当所述接收单元在第一预设时间内未接收到用户输入的拍照指令时，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果；
所述显示单元，用于将所述处理单元选择的美妆效果显示在定位的美妆区域上。
16.根据权利要求13所述的装置，其特征在于，
所述处理单元，进一步用于在根据人脸识别结果在云端数据库中进行匹配之前，确定云端数据库中使用美妆的用户的个数是否大于第二预设阈值，如果是，根据人脸识别结果在云端数据库中进行匹配；否则，在云端数据库中按照预设随机函数为当前拍照的用户生成美妆效果并触发所述显示单元显示在定位的美妆区域上。
17.根据权利要求13所述的装置，其特征在于，
所述显示单元，用于当所述接收单元接收到用户输入的美妆方式为手动美妆时，打开并显示面部特征列表；当所述接收单元接收到用户选择的面部特征时，显示对应的面部特征所对应的美妆效果；当所述接收单元接收到用户选择的面部特征对应的美妆效果时，针对该面部特征生成美妆效果并显示在定位的美妆区域上。
18.根据权利要求13所述的装置，其特征在于，
所述存储单元，进一步用于存储叠加美妆效果的照片时，在本地数据库中记录使用对应美妆效果的次数；并将本用户使用所述美妆效果的次数上传到云端数据库中。
19.根据权利要求13-18任一项所述的装置，其特征在于，
所述显示单元，进一步用于所述存储单元存储叠加美妆效果的照片时，提示用户是否查看下述任一参数或任意组合：护肤产品、护肤建议、美妆产品、美妆建议；
所述处理单元，用于当所述接收单元在第二预设时间内未接收到用户输入的请求时，关闭提示。
20.根据权利要求19所述的装置，其特征在于，
所述处理单元，进一步用于当所述接收单元接收到用户输入的查看护肤产品的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；若存在面部状态的任一参数值不一致，则将不一致的面部状态的参数作为关键字，搜索护肤产品，并触发所述显示单元以链接列表的形式为用户显示搜索到的护肤产品。
21.根据权利要求19所述的装置，其特征在于，
所述处理单元，进一步用于当所述接收单元接收到用输入的查看美妆产品的请求时，关闭提示，将当前存储的照片叠加的美妆效果对应的面部特征作为关键字，搜索美妆产品；通过图像识别，在搜索出的美妆产品中识别出与美妆效果对应的面部特征最匹配的美妆产品；并触发所述显示单元将识别出的美妆产品以链接列表的形式为用户显示美妆产品，触发所述存储单元在数据库中存储该美妆效果对应的美妆产品。
22.根据权利要求21所述的装置，其特征在于，
所述处理单元，进一步用于所述显示单元将识别出的美妆产品以链接列表的形式为用户显示美妆产品之前，确定云端数据库中是否存在该美妆效果对应的美妆产品列表，如果是，触发所述显示单元将云端数据库中存储的美妆效果对应的美妆产品和识别出的美妆产品一同以产品链接列表的形式显示给用户；否则，触发所述显示单元将识别出的美妆产品以链接列表的形式为用户显示美妆产品。
23.根据权利要求19所述的装置，其特征在于，
所述处理单元，进一步用于当接收到用户输入的查看护肤建议的请求时，关闭提示，并对当前存储的照片对应的未叠加美妆效果的图片检测面部状态；使用检测出的面部状态的各参数值与数据库中存储的面部状态的各参数值进行比较；若存在面部状态的任一参数值不一致，则为用户提供达到数据库中的对应面部状态的参数值的护肤建议，并触发所述显示单元显示。
24.根据权利要求19所述的装置，其特征在于，
所述处理单元，进一步用于当所述接收单元接收到用户输入的查看美妆建议的请求时，关闭提示，并根据当前存储的照片叠加的美妆效果为用户提供美妆建议，并触发所述显示单元显示；其中，云端数据库预先存储每种美妆效果对应的美妆建议。
CN201710728314.7A 2017-08-23 2017-08-23 一种美妆拍照方法和装置 Active CN107317974B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710728314.7A CN107317974B (zh) 2017-08-23 2017-08-23 一种美妆拍照方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710728314.7A CN107317974B (zh) 2017-08-23 2017-08-23 一种美妆拍照方法和装置

Publications (2)

Publication Number Publication Date
CN107317974A true CN107317974A (zh) 2017-11-03
CN107317974B CN107317974B (zh) 2020-02-21

Family

ID=60176070

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710728314.7A Active CN107317974B (zh) 2017-08-23 2017-08-23 一种美妆拍照方法和装置

Country Status (1)

Country Link
CN (1) CN107317974B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108625098A (zh) * 2018-04-04 2018-10-09 青岛海尔洗衣机有限公司 一种识别人脸图像选择洗涤程序的洗衣机及方法
CN109190574A (zh) * 2018-09-13 2019-01-11 郑州云海信息技术有限公司 一种基于大数据的发型推荐方法、装置、终端及存储介质
CN109272473A (zh) * 2018-10-26 2019-01-25 维沃移动通信（杭州）有限公司 一种图像处理方法及移动终端
CN111031179A (zh) * 2019-12-19 2020-04-17 上海传英信息技术有限公司 界面显示方法、设备及计算机可读存储介质
CN112819718A (zh) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 图像处理方法及装置、电子设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130046772A1 (en) * 2011-08-16 2013-02-21 Alibaba Group Holding Limited Recommending content information based on user behavior
CN103413270A (zh) * 2013-08-15 2013-11-27 北京小米科技有限责任公司 一种图像的处理方法、装置和终端设备
CN104992402A (zh) * 2015-07-02 2015-10-21 广东欧珀移动通信有限公司 一种美颜处理方法及装置
CN105005613A (zh) * 2015-07-15 2015-10-28 广东欧珀移动通信有限公司 一种动态推送美颜模式的方法和装置
CN105279161A (zh) * 2014-06-10 2016-01-27 腾讯科技（深圳）有限公司 图片处理应用的滤镜排序方法和装置
CN105872447A (zh) * 2016-05-26 2016-08-17 努比亚技术有限公司 一种视频图像处理装置和方法
CN106210150A (zh) * 2016-09-21 2016-12-07 成都创慧科达科技有限公司 一种基于行为分析的内容推送系统及方法
CN106649465A (zh) * 2016-09-26 2017-05-10 珠海格力电器股份有限公司 一种美妆信息的推荐和获取方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130046772A1 (en) * 2011-08-16 2013-02-21 Alibaba Group Holding Limited Recommending content information based on user behavior
CN103413270A (zh) * 2013-08-15 2013-11-27 北京小米科技有限责任公司 一种图像的处理方法、装置和终端设备
CN105279161A (zh) * 2014-06-10 2016-01-27 腾讯科技（深圳）有限公司 图片处理应用的滤镜排序方法和装置
CN104992402A (zh) * 2015-07-02 2015-10-21 广东欧珀移动通信有限公司 一种美颜处理方法及装置
CN105005613A (zh) * 2015-07-15 2015-10-28 广东欧珀移动通信有限公司 一种动态推送美颜模式的方法和装置
CN105872447A (zh) * 2016-05-26 2016-08-17 努比亚技术有限公司 一种视频图像处理装置和方法
CN106210150A (zh) * 2016-09-21 2016-12-07 成都创慧科达科技有限公司 一种基于行为分析的内容推送系统及方法
CN106649465A (zh) * 2016-09-26 2017-05-10 珠海格力电器股份有限公司 一种美妆信息的推荐和获取方法及装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108625098A (zh) * 2018-04-04 2018-10-09 青岛海尔洗衣机有限公司 一种识别人脸图像选择洗涤程序的洗衣机及方法
CN109190574A (zh) * 2018-09-13 2019-01-11 郑州云海信息技术有限公司 一种基于大数据的发型推荐方法、装置、终端及存储介质
CN109272473A (zh) * 2018-10-26 2019-01-25 维沃移动通信（杭州）有限公司 一种图像处理方法及移动终端
CN109272473B (zh) * 2018-10-26 2021-01-15 维沃移动通信（杭州）有限公司 一种图像处理方法及移动终端
CN111031179A (zh) * 2019-12-19 2020-04-17 上海传英信息技术有限公司 界面显示方法、设备及计算机可读存储介质
CN112819718A (zh) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 图像处理方法及装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN107317974B (zh) 2020-02-21

Similar Documents

Publication Publication Date Title
CN107317974A (zh) 一种美妆拍照方法和装置
Heusch et al. Deep models and shortwave infrared information to detect face presentation attacks
US10799010B2 (en) Makeup application assist device and makeup application assist method
Kashem et al. Face recognition system based on principal component analysis (PCA) with back propagation neural networks (BPNN)
CN104203042B (zh) 化妆辅助装置、化妆辅助方法、以及记录介质
KR20200003402A (ko) 겉보기 피부 나이를 결정하기 위한 시스템 및 방법
Phillips et al. The good, the bad, and the ugly face challenge problem
KR102316723B1 (ko) 인공지능을 이용한 신체 맞춤형 코디 시스템
CN109690617A (zh) 用于数字化妆镜的系统和方法
CN109685713B (zh) 化妆模拟控制方法、装置、计算机设备及存储介质
US11010894B1 (en) Deriving a skin profile from an image
CN107820591A (zh) 控制方法、控制器、智能镜子和计算机可读存储介质
CN107340856A (zh) 控制方法、控制器、智能镜子和计算机可读存储介质
CN105210110A (zh) 美容辅助装置、美容辅助系统、美容辅助方法以及美容辅助程序
CN109359317A (zh) 一种口红配色选择的模型构建方法和口红配色选择方法
CN108846792A (zh) 图像处理方法、装置、电子设备及计算机可读介质
CN108537126A (zh) 一种人脸图像处理系统及方法
CN108182232A (zh) 基于电子书的人物展示方法、电子设备及计算机存储介质
CN108932654A (zh) 一种虚拟试妆指导方法及装置
CN107346419A (zh) 虹膜识别方法、电子装置和计算机可读存储介质
Park et al. An automatic virtual makeup scheme based on personal color analysis
CN118673210A (zh) 用于使用深度学习来提供个性化产品推荐的系统和方法
CN109376661A (zh) 用于输出信息的方法和装置
JPWO2018029963A1 (ja) メイクアップ支援装置およびメイクアップ支援方法
CN107835373A (zh) 一种移动终端及其拍照美化方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant