TW202129524A - 妝容處理方法、裝置、電子設備及儲存媒體 - Google Patents

妝容處理方法、裝置、電子設備及儲存媒體 Download PDF

Info

Publication number
TW202129524A
TW202129524A TW110102170A TW110102170A TW202129524A TW 202129524 A TW202129524 A TW 202129524A TW 110102170 A TW110102170 A TW 110102170A TW 110102170 A TW110102170 A TW 110102170A TW 202129524 A TW202129524 A TW 202129524A
Authority
TW
Taiwan
Prior art keywords
makeup
face image
face
area
image
Prior art date
Application number
TW110102170A
Other languages
English (en)
Other versions
TWI773096B (zh
Inventor
林小雅
郭枳彤
羅澤豐
魯小鳳
盧逸如
Original Assignee
大陸商深圳市商湯科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商深圳市商湯科技有限公司 filed Critical 大陸商深圳市商湯科技有限公司
Publication of TW202129524A publication Critical patent/TW202129524A/zh
Application granted granted Critical
Publication of TWI773096B publication Critical patent/TWI773096B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • G06V10/806—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of extracted features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007—Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Educational Administration (AREA)
  • Business, Economics & Management (AREA)
  • Educational Technology (AREA)
  • Image Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本發明提供一種妝容處理方法、裝置、電子設備及儲存媒體，該方法包括：展示採集的人臉圖像；在一個或多個妝容中選擇一個妝容作為第一妝容；識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示針對人臉部位區域的妝容操作內容；在採集的人臉圖像中，檢測人臉部位區域內的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件。

Description

妝容處理方法、裝置、電子設備及儲存媒體
本發明是有關於一種電腦技術，且特別是有關於一種妝容處理方法、裝置、電子設備及儲存媒體。
化妝的教學和練習，是依賴化妝學習者使用化妝品在臉上進行實際操作的，對化妝者的經驗和技術手法有一定的要求，需要反復的教學、理解和練習。
有鑑於此，本發明至少提供一種妝容處理方法、裝置、電子設備及儲存媒體。
第一方面，本發明提供了一種妝容處理方法，其特徵在於，包括：展示採集的人臉圖像；在一個或多個妝容中選擇一個妝容作為第一妝容；識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示針對人臉部位區域的妝容操作內容；在採集的人臉圖像中，檢測人臉部位區域內的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件。採用上述方法，可以為通過識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示人臉部位區域的妝容操作內容，使得使用者可以按照指示的妝容操作內容進行妝容處理，並檢測人臉部位區域內的像素變化資訊，直到像素變化資訊符合第一妝容的妝容效果條件，使得用戶可以基於檢測到的像素變化資訊，確定妝容處理的進程，使得妝容的處理過程較為直觀。
第二方面，本發明提供了一種妝容處理裝置，包括：展示模組，用於展示採集的人臉圖像；選擇模組，用於在一個或多個妝容中選擇一個妝容作為第一妝容；識別模組，用於識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示針對人臉部位區域的妝容操作內容；檢測模組，用於在採集的人臉圖像中，檢測人臉部位區域內的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件。
第三方面，本發明提供一種電子設備，包括：處理器、記憶體和匯流排，記憶體儲存有處理器可執行的機器可讀指令，當電子設備運行時，處理器與記憶體之間通過匯流排通訊，機器可讀指令被處理器執行時執行如上述第一方面或任一實施方式的妝容處理方法的步驟。
第四方面，本發明提供一種電腦可讀儲存媒體，該電腦可讀儲存媒體上儲存有電腦程式，該電腦程式被處理器運行時執行如上述第一方面或任一實施方式的妝容處理方法的步驟。
為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
為使本發明實施例的目的、技術方案和優點更加清楚，下面將結合本發明實施例中的附圖，對本發明實施例中的技術方案進行清楚、完整地描述，顯然，所描述的實施例僅僅是本發明一部分實施例，而不是全部的實施例。通常在此處附圖中描述和示出的本發明實施例的元件可以以各種不同的配置來佈置和設計。因此，以下對在附圖中提供的本發明的實施例的詳細描述並非旨在限制要求保護的本發明的範圍，而是僅僅表示本發明的選定實施例。基於本發明的實施例，所屬領域具通常知識者在沒有做出創造性勞動的前提下所獲得的所有其他實施例，都屬於本發明保護的範圍。
目前，化妝已成為用戶日常生活的一部分。用戶的化妝過程包括多個妝容處理，通過對多個妝容進行處理，完成對人臉進行渲染、描畫、整理，達到美化視覺感受的目的。示例性的，多個妝容可以包括底妝、眉妝、眼妝、唇妝等。
在化妝教學這一領域，可以使用圖文、影片的教學形式，通過圖像、文字、音訊對化妝步驟進行講解，對化妝學習者進行指導和教學。這種教學形式存在理解和學習的門檻，不能直觀地進行化妝的實際操作練習，同時對於化妝的初學者而言也很難理解到這些化妝的方式是否真實適合自己，故期望一種直觀且具備針對性的妝容處理方案。
有鑑於此，本發明提出的妝容處理方法，用戶可以獲得每個妝容處理後的即時效果，完成化妝過程。
為便於對本發明實施例進行理解，首先對本發明實施例所公開的一種妝容處理方法進行詳細介紹。
本發明實施例提供的妝容處理方法可適用於支援顯示功能的終端設備。例如，終端設備可以是電腦、智慧手機、平板電腦、個人數文書處理（Personal Digital Assistant，PDA）、智慧電視等，本發明對此並不限定。
圖1所示為本發明實施例所提供的一種妝容處理方法的流程示意圖，其中，該方法包括以下幾個步驟：S101，展示採集的人臉圖像；S102，在一個或多個妝容中選擇一個妝容作為第一妝容；S103，根據使用者選擇的第一妝容，識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示針對人臉部位區域的妝容操作內容；S104，檢測人臉部位區域內的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件。
基於上述步驟，通過識別人臉圖像中與第一妝容匹配的人臉部位區域，並指示人臉部位區域的妝容操作內容，使得使用者可以按照指示的妝容操作內容進行妝容處理，並檢測人臉部位區域內的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件，使得用戶可以基於檢測到的像素變化資訊，確定妝容處理的進程，使得妝容的處理過程較為直觀。
以下對S101~S104分別進行說明。針對S101：本發明實施例中，可以通過終端設備上設置的攝像模組採集使用者的人臉圖像，並將採集到的人臉圖像展示在終端設備的顯示模組上。該人臉圖像可以是一張照片，也可以是影片流中的一幀圖像，本申請對此不作限制。
針對S102：本發明實施例中，妝容可以為底妝、眼妝、眉妝、唇妝等。例如，可以由用戶選擇任一妝容作為第一妝容，例如用戶可以手動在操作介面選擇某一妝容，使用者還可以通過語音輸入選擇某一妝容，本申請對此不作限制。又例如，可以由終端設備按照化妝的順序、使用者的習慣等，推薦某一妝容作為第一妝容。
針對S103：人臉部位區域為人臉圖像中與第一妝容匹配的區域，比如，若第一妝容為底妝，則人臉部位區域可以為整個臉部區域；若第一妝容為眼妝，則人臉部位區域可以為眼部區域；若第一妝容為眉妝時，則人臉部位區域可以為眉部區域。可以理解的是，在步驟S101所採集到人臉圖像不同，則在步驟S103中同一第一妝容對應的人臉部位區域的形狀、位置等特徵可能不同。也就是說，本發明提供的妝容處理方法可以適用於各個使用者不同的面部特徵。
以第一妝容為眉妝進行說明，可以從人臉圖像中識別出眉部區域，並在識別到眉部區域之後，指示人臉部位區域（眉部區域）的妝容操作內容。示例性的，眉部區域的妝容操作內容可以包括但不限於以下內容：選擇眉筆顏色；用眉筆勾勒出眉毛輪廓；用眉粉進行內部的填充；用眉筆的刺頭在眉頭進行自然暈染等。
具體來說，不同人臉部位區域的妝容對應不同的妝容操作內容，以及同一人臉部位區域的妝容由於妝容顯示效果的不同，對應的妝容操作內容可能也不相同，因此，妝容操作內容可以根據妝容的要求進行設置。
一種可能的實施方式中，指示針對人臉部位區域的妝容操作內容，包括：展示用於指示人臉部位區域內的妝容操作範圍的標記資訊。
本發明實施例中，妝容操作範圍為妝容操作內容對應的操作區域。其中，妝容操作內容可以包括一個或多個操作步驟。示例性的，若妝容操作內容為一個操作步驟時，可以為該操作步驟設置一妝容操作範圍。比如，妝容操作內容可以為畫眼線，則對應的操作步驟可以為貼合睫毛根部由內向外畫眼線，該操作步驟對應的妝容操作範圍可以為上眼瞼和下眼瞼。在妝容操作內容包括多個操作步驟時，可以為每個操作步驟分別對應一妝容操作範圍，也可以為不同的操作步驟設置不同的妝容操作範圍。比如，妝容操作內容可以為畫眼影，則對應的操作步驟可以包括：步驟一、用顏色A的眼影在眼窩的位置上打底，從睫毛根部少量多次開始慢慢往上暈染；步驟二、用顏色B的眼影在上眼皮靠近睫毛的二分之一眼窩位置上少量多次慢慢暈染。具體來說，可以為步驟一與步驟二設置同一個妝容操作範圍，比如，將眼窩的位置設置為步驟一與步驟二的妝容操作範圍；或者，可以為步驟一與步驟二分別設置一妝容操作範圍，比如，將眼窩的位置設置為步驟一對應的妝容操作範圍，將上眼皮靠近睫毛的二分之一眼窩位置設置為步驟二對應的妝容操作範圍。其中，妝容操作範圍可以根據實際情況進行設置。
示例性的，妝容操作範圍的標記資訊可以包括但不限於妝容引導圖形和/或動作指導圖形。
如圖2示出了妝容處理方法中展示標記資訊的介面示意圖。圖2中包括眉部區域對應的妝容引導圖形22（即圖中虛線所構成的圖形）以及動作指導圖形23（即圖中的手形狀的圖形），妝容引導圖形22表徵使用者可以在妝容引導圖形對應的區域內進行妝容處理，動作指導圖形23可以從妝容引導圖形的左上方處移動至右下角處，使得使用者可以按照動作指導圖形指示的動作完成妝容處理。
上述步驟，展示妝容操作範圍的標記資訊，使得使用者可以直觀的按照妝容操作內容以及妝容操作範圍的標記資訊完成妝容處理操作，妝容處理過程一目了然，妝容處理過程簡單易操作，進而可以提高用戶妝容處理的效率。
針對S104：本發明實施例中，由於用戶在妝容處理過程中，對應的人臉部位區域的像素會發生改變，故可以通過即時採集到的人臉圖像，來檢測人臉部位區域內像素變化資訊，判斷人臉部位區域的第一妝容是否處理完成。
本發明實施例中，可以通過終端設備上設置的攝像模組按一定的幀率即時採集使用者的人臉圖像，並將採集到的人臉圖像即時展示在終端設備的顯示模組上。幀率可以根據不同的終端設備的硬體水準進行設定。
在檢測人臉部位區域的像素變化資訊時，可以對即時採集的每幀圖像進行檢測，也可以對即時採集的多幀圖像，每n幀圖像選擇一幀圖像進行檢測，n為大於1的正整數。
一種可能的實施方式中，檢測人臉部位區域的像素變化資訊，確定像素變化資訊是否符合第一妝容的妝容效果條件，包括：檢測妝容操作範圍內的第一圖像區域的像素變化資訊，確定像素變化資訊是否符合妝容效果條件。
本發明實施例中，妝容操作範圍內的第一圖像區域可以為第一妝容對應的人臉部位區域，也可以為從第一妝容對應的人臉部位區域中選擇的部分區域。在檢測到妝容操作範圍內的第一圖像區域的像素變化資訊符合妝容效果條件時，則認為第一妝容已完成；在檢測到妝容操作範圍內的第一圖像區域的像素變化資訊不符合妝容效果條件時，則認為第一妝容未完成。例如，妝容效果條件可以為第一圖像區域中的多個像素的加權平均變化值達到設置的閾值，則在檢測到該加權平均變化值（可以將多個像素的加權平均變化值作為像素變化資訊）達到設置的閾值時，認為第一妝容已完成。
在一種實施方式中，檢測妝容操作範圍內的第一圖像區域的像素變化資訊，確定像素變化資訊滿足妝容效果條件，包括：檢測妝容操作範圍內的第一圖像區域與人臉圖像的第二圖像區域之間的像素差異值，確定像素差異值是否大於第一妝容對應的第一設定值。
本發明實施例中，第二圖像區域可以為人臉圖像中除第一妝容對應的人臉部位區域之外的任一區域，例如，若與第一妝容匹配的人臉部位區域為眉部區域，則第一圖像區域可以為從眉部區域中選擇的部分區域，第二圖像區域可以為人臉圖像中除眉部區域之外的其他任一區域，比如臉部區域、額頭區域等。
在具體實施時，在同一時刻下，檢測到妝容操作範圍內的第一圖像區域與第二圖像區域之間的像素差異值大於第一妝容的第一設定值時，則認為第一妝容已完成。其中，第一設定值可以根據第一妝容的妝容效果進行確定。該像素差異值可以是第一圖像區域內多個像素的均值與第二圖像區域內多個像素的均值之間的差值。
上述實施方式中，由於人臉圖像中經過第一妝容處理後的人臉部位區域，與人臉圖像中未經第一妝容處理的第二圖像區域之間像素值不同，故基於檢測到的同一時刻下人臉圖像中不同區域之間的像素差異值，確定第一妝容的妝容效果時，具有對比性以及直觀性。
在另一種實施方式中，人臉圖像為在一段時間內採集到的多幀人臉圖像；檢測妝容操作範圍內的第一圖像區域的像素變化資訊，確定像素變化資訊是否符合妝容效果條件，包括：檢測當前幀人臉圖像中第一圖像區域，與當前幀之前的其它幀人臉圖像中第一圖像區域之間的像素差異值，確定像素差異值是否大於第一妝容對應的第二設定值。
本發明實施例中，當前幀之前的其他幀人臉圖像可以為第一妝容未處理之前的一幀人臉圖像（即多幀人臉圖像中的第一幀人臉圖像），或者，還可以為與當前幀間隔預設時間的任一幀，該預設時間可以根據該第一妝容處理所需的時間確定，例如在當前幀前1分鐘採集的一幀人臉圖像、在當前幀前2分鐘採集的一幀人臉圖像等。第二設定值可以根據第一妝容的妝容效果以及選擇的其他幀人臉圖像對應的像素值進行確定。
上述實施方式中，由於第一妝容處理過程中，人臉圖像中不同時刻下的第一圖像區域對應的像素值不同，故基於檢測到的不同時刻下人臉圖像中同一區域之間的像素差異值，確定第一妝容的妝容效果時，準確度較高。
一種可能的實施方式中，在確定像素變化資訊符合第一妝容的妝容效果條件之後，該方法還包括：在多個妝容中選擇另一個妝容作為第二妝容；識別所述人臉圖像中與所述第二妝容匹配的新的人臉部位區域，並指示針對所述新的人臉部位區域的妝容操作內容；檢測所述新的人臉部位區域內的像素變化資訊，確定所述像素變化資訊是否符合所述第二妝容的妝容效果條件。
本發明實施例中，在像素變化資訊符合第一妝容的妝容效果條件時，則認為第一妝容已處理完成，進而可以對採集的人臉圖像中與第二妝容對應的人臉部位區域指示妝容操作內容。其中第二妝容可以為化妝過程中除第一妝容之外的其他妝容。示例性的，若化妝過程包括底妝、眉妝、眼妝、唇妝、定妝，則第一妝容可以為底妝，第二妝容可以為眉妝，在第一妝容完成後，可以對採集的人臉圖像中與第二妝容對應的人臉部位區域指示妝容操作內容。其中，第二妝容的處理過程與第一妝容的處理過程相似，具體過程可參考上述第一妝容的處理過程，本發明實施例在此不進行贅述。
示例性的，還可以將眼妝作為第三妝容、唇妝作為第四妝容、定妝作為第五妝容。在第二妝容完成之後，可以先對採集的人臉圖像中與第三妝容對應的人臉部位區域指示妝容操作內容，依次類推，直到化妝過程全部完成為止，即直到第五妝容完成為止。其中，化妝過程中包括的具體的妝容操作內容，可以根據實際情況進行設置。
上述實施方式中，通過將化妝的步驟拆分為多個妝容處理過程，分別對不同的妝容進行處理，完成化妝過程，實現將較複雜的化妝處理過程簡化為多個較簡單的妝容處理過程，可以方便初學者練習妝容處理，降低了練習的難度。
一種可能的實施方式中，在像素變化資訊符合第一妝容的妝容效果條件之後，該方法還包括：展示人臉部位區域已完成妝容處理的提示資訊。
本發明實施例中，提示資訊可以為圖形、文字、語音、圖像等資訊中的一種或多種。例如，提示資訊可以為開心的圖像，或者，提示資訊可以為“妝容已完成，請進行下一步操作”等。具體來說，提示資訊的形式及內容，可以根據實際需要進行設置。
上述實施方式中，通過展示提示資訊，提示使用者妝容已完成，使得用戶可以進行下一步操作，減少用戶無法及時獲知第一妝容的完成資訊，而繼續對第一妝容進行處理浪費的時間。
一種可能的實施方式中，展示人臉部位區域已完成妝容處理的提示資訊，包括：將妝容處理進度的顯示狀態由第一狀態切換為第二狀態。
本發明實施例中，第一狀態可以為第一妝容對應的狀態，第二狀態可以為第一妝容已完成的狀態，也可以為第二妝容對應的狀態。示例性的，顯示狀態由第一狀態轉換為第二狀態時，可以在顯示介面上，將第一狀態對應的顯示內容直接切換為第二狀態對應的顯示內容，例如，第一狀態對應的顯示內容可以為第一妝容對應的妝容操作內容，第二狀態對應的顯示內容可以為第二妝容對應的妝容操作內容；和/或，顯示狀態可以為圖形元素，則第一狀態切換為第二狀態，可以為在顯示介面上，將第一狀態對應的圖形轉換為第二狀態對應的圖形；例如，參見圖2所示，圖2中的第一狀態對應的圖形為微笑圖形21，則第二狀態對應的圖形可以為大笑圖形，或者其它狀態的圖像等；和/或，顯示狀態還可以為文字元素，則第一狀態切換為第二狀態，可以為在顯示介面上，將第一狀態對應的文字轉換為第二狀態對應的文字；例如，第一狀態對應的文字可以為“第一狀態進行中”，則第二狀態對應的文字元素可以為“第二狀態進行中”。其中，顯示狀態的形式以及內容可以根據實際需要進行設置。
上述實施方式中，通過在妝容處理完成後，改變顯示狀態，以提示使用者進行下一步操作，顯示效果較為靈活，提高了用戶的體驗。
一種可能的實施方式中，該方法還包括：回應於第一觸發操作，顯示妝容處理前的人臉圖像與妝容處理後的人臉圖像以進行妝容對比。
本發明實施例中，第一觸發操作可以為點擊妝容對比區域，或者，第一觸發操作還可以為接收到預設的觸發音訊資料，例如，觸發的音訊資料可以為：“請開始妝容對比”。在接收到第一觸發操作後，在顯示介面上顯示妝容處理前的人臉圖像以及妝容處理後的人臉圖像以進行妝容對比。
參見圖2所示，圖2所示的介面示意圖中還包括位於介面左側的“向右拉動對比”的操作選項，在接收到使用者觸發該向右拉動對比的操作選項時，在介面上顯示妝容處理前的人臉圖像、以及觸發向右拉動對比的操作選項的當前時刻的人臉圖像，即回應使用者觸發的向右拉動對比的操作選項，顯示的介面示意圖如圖3所示，圖中左側區域可以為顯示妝容處理前的人臉圖像，圖中右側區域可以為顯示妝容處理後的人臉圖像。
圖2和圖3所示的介面示意圖中還包括位於介面左側下方的操作文本顯示區域，該操作文本顯示區域中顯示的是待處理妝容對應的操作提示文本。該介面示意圖中還包括位於介面右側上方的影片顯示區域、以及位於影片顯示區域下方的顯示狀態欄域，其中，影片顯示區域中可以顯示待處理妝容對應的操作提示影片。顯示狀態區域中可以顯示待處理妝容的顯示狀態，圖中的微笑圖形21即為當前時刻對應的待處理妝容的顯示狀態。該介面示意圖中還包括位於介面右側下方的基礎功能選項，例如基礎功能選項可以包括：開始/暫停選項、拍照選項、攝像選項、設置選項。
上述實施方式中，通過對妝容處理前的人臉圖像與妝容處理後的人臉圖像進行比對，使得用戶可以直觀的查看妝容處理前後的人臉圖像，確定妝容效果。
一種可能的實施方式中，指示人臉部位區域的妝容操作內容，包括：展示待處理妝容的操作提示內容，操作提示內容包括操作提示文本和/或操作提示影片。
本發明實施例中，操作提示影片為待處理妝容對應的影片資料，例如，若待處理妝容為眼妝時，則操作提示影片為眼妝影片，操作提示文本可以為眼妝提示文本。
本發明實施例中，在妝容處理完成後，可以在終端設備的顯示介面上顯示已處理完成的妝容的基本資訊，和/或，使用者的基本資訊，和/或，用戶完成該妝容所花費的時間，和/或，與已處理完成的妝容搭配的人臉的其他部位對應的妝容。其中，已處理完成的妝容的基本資訊可以包括妝容的步驟總數、妝容的難度等級等。使用者的基本資訊可以包括使用者頭像、用戶名稱、使用者等級（使用者等級可以表徵使用者完成妝容的次數或頻率）、使用者完成該妝容的時間等。若已處理完成妝容為眼妝時，則與該妝容搭配的人臉的其他部位對應的妝容可以為唇妝、和/或眉妝等。
示例性的，圖4示出了妝容處理方法中妝容完成後的介面顯示圖。該圖中包括位於介面左上方區域的妝容的名稱以及用戶完成該妝容的次數。該圖中還包括位於介面下方區域的資訊顯示區域以及妝容推薦區域，可以將資訊顯示區域設置在妝容推薦區域的上方，也可以將資訊顯示區域設置在妝容推薦區域的下方。圖4中顯示的是資訊顯示區域設置在妝容推薦區域的上方，資訊顯示區域中從左至右依次為使用者圖像、用戶名稱、使用者完成妝容的時間、用戶完成該妝容所花費的時間、用戶完成該妝容所處理的步驟的數量、以及使用者等級。妝容推薦區域中包括與已完成的妝容搭配的、人臉的其他部位對應的多種推薦妝容。
上述實施方式中，通過展示操作提示文本和/或操作提示影片，使得使用者可以按照操作提示文本和/或操作提示影片進行妝容處理，方便初學者學習和/或練習妝容處理。
一種可能的實施方式中，參見圖5所示，展示採集的人臉圖像，包括：S500，採集人臉圖像；S501，根據所述人臉圖像，獲取設定妝容類型的妝容描述資訊；S502，基於妝容描述資訊，展示妝容詳情介面；S503，回應于妝容詳情介面的上妝選項被觸發，將妝容詳情介面切換為妝容處理介面，妝容處理介面中展示有採集的人臉圖像。
本發明實施例中，在妝容處理介面展示採集的人臉圖像之前，獲取設定妝容類型的妝容描述資訊。妝容描述資訊可以為對妝容類型進行描述的資訊，其中，妝容描述資訊可以根據妝容類型以及妝容類型對應的妝容效果進行設置。例如，妝容描述資訊可以為水凝貼光妝、復古妝等。
本發明實施例中，可以發起針對妝容描述資訊的觸發操作，回應針對妝容描述資訊的觸發操作，展示妝容詳情介面，以便使用者基於展示的妝容詳情介面中包括的妝容詳情資訊，瞭解設定妝容類型的資訊。進一步的，在檢測到妝容詳情介面上設置的上妝選項被觸發時，將妝容詳情介面切換為妝容處理介面，妝容處理介面中展示有採集的所述人臉圖像。
本發明實施例中，在妝容處理介面中展示有採集的人臉圖像之後，可以通過本發明中描述的妝容處理方法針對展示的人臉圖像指示妝容操作內容，以使使用者完成妝容處理過程，具體過程在此不進行贅述。
上述實施方式中，通過展示設定妝容類型的妝容詳情介面，使得使用者可以基於妝容詳情介面，瞭解設定妝容類型，進而使得用戶可以確定該設定妝容類型是否符合需求，在符合需求的情況下觸發上妝選項。
一種可能的實施方式中，妝容詳情介面包括以下至少一個區域：妝容工具介紹區域、妝容步驟介紹區域。
本發明實施例中，妝容工具介紹區域中包括設定妝容的處理過程中，待使用的工具。例如，若設定妝容為眉妝時，則妝容工具介紹區域中包括眉筆、眉刷等。妝容步驟介紹區域中包括設定妝容中包括的化妝步驟。
圖6示出了妝容處理方法中顯示妝容詳情的介面示意圖。該圖中包括位於介面左上方的妝容影片播放區域、位於介面右上方的妝容步驟介紹區域、位於左下方區域的妝容工具介紹區域、以及位於右下方區域的與妝容影片播放區域播放的影片中包括的示範使用者的資訊展示區域。其中，妝容影片播放區域下方還包括播放或待播放的影片的基本資訊，例如，影片的基本資訊包括影片時長、影片名稱、該影片被點贊的次數等。該介面示意圖中還可以包括開始上妝的操作選項，該開始上妝的操作選項可以設置在介面的任一區域，例如，可以設置在影片的基本資訊的右方區域。
上述實施方式中，在妝容詳情介面中設置妝容工具介紹區域和/或妝容步驟介紹區域，使得使用者可以對妝容工具以及妝容步驟進行詳細的瞭解，方便用戶學習。
一種可能實施例中，參見圖7所示，獲取設定妝容類型的妝容描述資訊，包括：S701，識別人臉圖像的人臉屬性；S702，基於人臉圖像的人臉屬性，確定人臉圖像匹配的設定妝容類型並獲取設定妝容類型的妝容描述資訊。
示例性的，人臉屬性可以包括肌膚能力，肌膚能力包括：血液迴圈力、抗糖化力、抗光化力、肌膚保水力、抗曬傷力、抵禦粉刺力中的至少一種。人臉屬性還可以包括五官分析，五官分析可以包括臉型分析、眼型分析、眉形分析、鼻子分析、嘴唇分析中的至少一種，示例性的，臉型類型可以包括方形臉、圓形臉、鵝蛋臉、瓜子臉、三角臉；眼型類型包括桃花眼、杏眼、小鹿眼、柳葉眼、丹鳳眼；眉形類型包括：偏彎眉、偏直眉、粗平眉、柳葉眉、小挑眉；鼻子類型包括：窄鼻子、寬鼻子、朝天鼻、蒜頭鼻、高鼻子；嘴唇類型包括：標準唇、薄嘴唇、厚嘴唇、小嘴唇、大嘴唇。和/或，人臉屬性還可以包括皮膚膚色、和/或皮膚膚質等；皮膚膚色可以包括從多個等級，例如，多個等級可以為透白、偏白、自然、偏黑、黝黑等；或者，皮膚膚色還可以包括多個分值，例如，若皮膚膚色為透白色，則皮膚對應的分值可以為10分，若皮膚膚色為自然色，則皮膚對應的分值可以為5分，若皮膚膚色為黝黑色，則皮膚對應的分值可以為1分。皮膚膚質類型可以包括：油性、幹性、混合型。
示例性的，可以將採集到的人臉圖像輸入至訓練後的第一神經網路模型中，確定人臉圖像對應的肌膚能力。還可以分別為每種人臉屬性訓練一對應的神經網路模型，比如，臉型分類模型、鼻型分類模型、眼型分類模型、眉型分類模型、唇型分類模型等，則將採集到的人臉圖像輸入至訓練後的臉型分類模型中，確定人臉圖像對應的臉型；將採集到的人臉圖像輸入至訓練後的鼻型分類模型中，確定人臉圖像對應的鼻型，同理，可確定人臉圖像對應的眼型、眉型、唇形等。所述神經網路可以為卷積神經網路（CNN）或迴圈神經網路（RNN）等。
本發明實施例中，在確定人臉圖像對應的人臉屬性之後，可以基於人臉圖像對應的人臉屬性，確定人臉圖像匹配的至少一個妝容類型。若匹配到的妝容類型的數量為一個時，則匹配到的妝容類型即為設定妝容類型；若匹配到的妝容類型的數量為多個時，則可以基於每個匹配到的妝容類型與人臉屬性的匹配程度值，顯示多個妝容類型，以便用戶可以基於每個妝容類型的匹配程度值，從多個妝容類型中選擇一妝容類型確定為設定妝容類型；或者，也可以多個匹配到的妝容類型中，選擇匹配程度最大的妝容類型，作為設定妝容類型。
參見圖8所示，圖中示出的是一種試妝介面示意圖，可以通過觸發介面圖中的識別人臉屬性的操作選項（即圖中包括笑臉的圓形圖形81），對人臉圖像的人臉屬性進行檢測。
在一些實施例中，首先，可以對人臉圖像的人臉屬性進行檢測，基於人臉圖像的人臉屬性，確定對應的設定妝容類型，並獲取設定妝容類型的妝容描述資訊。其次，在獲取設定妝容類型的妝容描述資訊之後，可以通過本發明中描述的實施例對設定妝容類型的妝容描述資訊進行處理，實現將妝容詳情介面切換為妝容處理介面，並在妝容處理介面中展示有採集的人臉圖像。最後，在展示採集的人臉圖像之後，可以通過本發明中描述的實施例針對展示的人臉圖像指示妝容操作內容，以使使用者完成妝容處理過程，具體過程在此不進行贅述。
上述方法中，通過識別到的人臉屬性，為人臉圖像匹配設定妝容類型，使得設定妝容類型與人臉圖像的人臉屬性相符合，進而使得用戶基於匹配到的設定妝容上妝後的妝容效果較好。
一種可能實施例中，參見圖9所示，獲取設定妝容類型的妝容描述資訊，包括：S901，展示妝容推薦介面，妝容推薦介面包括不同妝容類型的妝容選項；S902，回應于任一妝容選項被觸發，將被觸發的妝容選項確定為設定妝容類型，並獲取設定妝容類型的妝容描述資訊。
本發明實施例中，妝容推薦介面中包括預設的多種妝容類型，例如，妝容類型可以包括全妝、底妝、眼妝、眉妝、唇妝、卸妝、護膚中的至少一種。每種妝容類型下包括多個妝容選項，例如，全妝類型下包括：秋日必備元氣滿滿日雜妝容、水凝貼妝容、復古妝容等。
本發明實施例中，在檢測到任一妝容被觸發時，則回應該觸發，將被觸發的妝容選項確定設定妝容類型。並在確定設定妝容類型之後，可以通過本發明中描述的實施例二對設定妝容類型的妝容描述資訊進行處理，實現將妝容詳情介面切換為妝容處理介面，並在妝容處理介面中展示有採集的人臉圖像。最後，在展示採集的人臉圖像之後，可以通過本發明中描述的實施例針對展示的人臉圖像指示妝容操作內容，以使使用者完成妝容處理過程，具體過程在此不進行贅述。
上述實施方式中，通過為使用者推薦妝容，使得用戶可以按照感興趣程度，從推薦的妝容中選擇一妝容作為設定妝容類型，完成妝容處理，具有趣味性。
一種可能的實施方式中，參見圖10所示，該方法還包括：S1001，展示試妝介面，試妝介面包括不同妝容類型的妝容選項；S1002，回應于任一妝容選項被觸發，基於被觸發的妝容選項的效果圖，對人臉圖像進行融合處理，得到妝容處理後的人臉圖像。
本發明實施例中，試妝介面上包括的妝容類型可以包括推薦、全妝、眼妝、唇妝、眉妝、底妝中的至少一個。每種妝容類型下包括多個妝容選項，例如，底妝類型下包括多個不同色號的妝容選項。在任一妝容選項被觸發後，將被觸發的妝容選項的效果圖以及人臉圖像進行融合，得到妝容處理後的人臉圖像。示例性的，可以將人臉圖像對應的像素特徵值與被觸發的妝容選項的效果圖對應的像素特徵值加權求和，得到融合後的人臉圖像。
圖11示出了妝容處理方法中的試妝介面示意圖，該介面示意圖中可以包括妝容類型顯示區域（即圖中顯示推薦、全妝等妝容類型的區域），還可以包括妝容選項對應的參考產品展示區域；和/或，還可以包括妝容選項對應的效果圖（即介面示意圖中右側方形框中顯示的圖片）；和/或，還可以包括功能選項，例如，位於介面示意圖下方的拍照功能選項、人工智慧（Artificial Intelligence，AI）比照上妝、識別人臉屬性的操作選項，即圖中包括笑臉的圓形圖形81。
上述實施方式中，可以將人臉圖像與被觸發的妝容選項的效果圖進行融合，得到妝容處理後的人臉圖像，使得使用者可以基於融合後的人臉圖像，判斷被觸發的妝容選項的妝容效果是否與用戶的需求一致，可以避免被觸發的妝容選項的妝容效果與用戶的需求不一致，或得到的妝容效果不滿足使用者的審美的情況發生，提高了使用者的體驗度。
一種可能的實施方式中，基於被觸發的妝容選項的效果圖，對人臉圖像進行融合處理，得到妝容處理後的人臉圖像，包括：識別人臉圖像的多個關鍵點；基於多個關鍵點，將人臉圖像劃分為多個人臉部位對應的圖像區域；將各人臉部位對應的圖像區域分別與被觸發的妝容選項的各人臉部位的效果圖進行融合，得到融合處理後的人臉圖像。
本發明實施例中，可以基於多個關鍵點，將人臉圖像劃分為多個人臉部位對應的圖像區域，例如，將人臉圖像劃分為眼部區域、眉形區域、唇部區域、鼻子區域等，其中，關鍵點的數量可以根據實際情況進行確定，例如，關鍵點的數量可以為240個。
在具體實施時，可以將各人臉部位對應的圖像區域分別與被觸發的妝容選項的各人臉部位的效果圖進行融合，例如，可以基於人臉圖像中的人臉區域，將選擇的底妝色號對應的效果圖進行截取，使得截取後的效果圖與人臉區域一致，將截取後的效果圖與人臉區域進行融合；在基於人臉圖像中的眼部區域，將被觸發的妝容選項的眼部的效果圖進行截取，使得截取後的眼部的效果圖與人臉圖像中的眼部區域一致，將截取後的眼部的效果圖與人臉區域進行融合，其中唇部區域、眉部區域、鼻部區域的融合過程與眼部區域的相同，進而可分別對各人臉部位對應的圖像區域與對應的效果融合，得到融合處理後的人臉圖像。
上述實施方式中，將人臉圖像劃分為多個人臉部位對應的圖像區域，分別將人臉部位對應的圖像區域與對應效果圖進行融合，通過分區域的融合方式，可以提高融合後的圖像效果。
一種可能的實施方式中，在得到妝容處理後的人臉圖像後，還包括：接收被觸發的妝容選項對應的妝容處理請求；將被觸發的妝容選項對應的妝容類型作為設定妝容類型。
本發明實施例中，在得到妝容處理後的人臉圖像後，若融合後的人臉圖像符合使用者的需求時，則可以針對被觸發的妝容選項發起妝容處理請求，將被觸發的妝容選項對應的妝容類型確定為設定妝容類型。若融合後的人臉圖像不符合使用者的需求時，則可以返回至試妝介面，使得使用者重新選擇並觸發感興趣的妝容選項。
進一步的，在確定設定妝容類型之後，可以通過本發明中描述的實施例對設定妝容類型的妝容描述資訊進行處理，實現將妝容詳情介面切換為妝容處理介面，並在妝容處理介面中展示有採集的人臉圖像。最後，在展示採集的人臉圖像之後，可以通過本發明中描述的實施例針對展示的人臉圖像指示妝容操作內容，以使使用者完成妝容處理過程，具體過程在此不進行贅述。
上述實施方式中，由於使用者已直觀的查看了融合後的人臉圖像，如果融合後的人臉圖像滿足使用者需求，那麼用戶可直接觸發對應的妝容類型，進行妝容處理過程，提高了用戶的體驗度。
所屬領域具通常知識者可以理解，在具體實施方式的上述方法中，各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定，各步驟的具體執行順序應當以其功能和可能的內在邏輯確定。
基於相同的構思，本發明實施例還提供了一種妝容處理裝置，參見圖12所示，為本發明實施例提供的一種妝容處理裝置的架構示意圖，包括展示模組1201、選擇模組1202、以及識別模組1203、檢測模組1204，具體來說：展示模組1201，用於展示採集的人臉圖像；選擇模組1202，用於在一個或多個妝容中選擇一個妝容作為第一妝容；識別模組1203，用於識別所述人臉圖像中與第一妝容匹配的人臉部位區域，並針對指示所述人臉部位區域的妝容操作內容；檢測模組1204，用於在採集的所述人臉圖像中，檢測所述人臉部位區域內的像素變化資訊，確定所述像素變化資訊是否符合所述第一妝容的妝容效果條件。
一種可能的實施方式中，所述識別模組在指示針對所述人臉部位區域的妝容操作內容的情況下，包括：展示用於指示所述人臉部位區域內的妝容操作範圍的標記資訊。
一種可能的實施方式中，所述在採集的所述人臉圖像中，檢測模組在檢測人臉部位區域的像素變化資訊，確定所述像素變化資訊是否符合所述第一妝容的妝容效果條件的情況下，包括：在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域的像素變化資訊，確定所述像素變化資訊是否符合所述妝容效果條件。
一種可能的實施方式中，所述檢測模組在採集的所述人臉圖像中，檢測人臉部位區域的像素變化資訊，確定所述像素變化資訊是否符合所述第一妝容的妝容效果條件的情況下，包括：在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域與所述人臉圖像的第二圖像區域之間的像素差異值，確定所述像素差異值是否大於所述第一妝容對應的第一設定值。
一種可能的實施方式中，所述檢測模組所述在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域的像素變化資訊，確定所述像素變化資訊是否符合所述妝容效果條件的情況下，包括：檢測當前幀人臉圖像中所述第一圖像區域，與當前幀之前的其它幀人臉圖像中所述第一圖像區域之間的像素差異值，確定所述像素差異值是否大於所述第一妝容對應的第二設定值。
一種可能的實施方式中，所述裝置還包括：處理模組，用於在多個妝容中選擇不同於所述第一妝容的另一個妝容作為第二妝容；識別所述人臉圖像中與所述第二妝容匹配的新的人臉部位區域，並指示針對所述新的人臉部位區域的妝容操作內容；在採集的所述人臉圖像中，檢測所述新的人臉部位區域內的像素變化資訊，確定所述像素變化資訊是否符合所述第二妝容的妝容效果條件。
一種可能的實施方式中，所述裝置還包括：提示資訊展示模組，用於展示所述人臉部位區域已完成妝容處理的提示資訊。
一種可能的實施方式中，所述提示資訊展示模組在展示所述人臉部位區域已完成妝容處理的提示資訊，包括：將妝容處理進度的顯示狀態由第一狀態切換為第二狀態。
一種可能的實施方式中，所述裝置還包括：比對顯示模組，用於回應於第一觸發操作，顯示妝容處理前的人臉圖像與妝容處理後的人臉圖像以進行妝容對比。
一種可能的實施方式中，所述識別模組在指示所述人臉部位區域的妝容操作內容的情況下，包括：展示所述待處理妝容的操作提示內容，所述操作提示內容包括操作提示文本和/或操作提示影片。
一種可能的實施方式中，所述展示模組在展示採集的人臉圖像的情況下，包括：採集所述人臉圖像；獲取設定妝容類型的妝容描述資訊；基於所述妝容描述資訊，展示妝容詳情介面；回應于所述妝容詳情介面的上妝選項被觸發，將所述妝容詳情介面切換為妝容處理介面，所述妝容處理介面中展示有採集的所述人臉圖像。
一種可能的實施方式中，所述妝容詳情介面包括以下至少一個區域：妝容工具介紹區域、妝容步驟介紹區域。
一種可能的實施方式中，所述展示模組在獲取設定妝容類型的妝容描述資訊的情況下，包括：識別所述人臉圖像的人臉屬性；基於所述人臉圖像的人臉屬性，確定所述人臉圖像匹配的所述設定妝容類型並獲取所述設定妝容類型的妝容描述資訊。
一種可能的實施方式中，所述展示模組在獲取設定妝容類型的妝容描述資訊的情況下，包括：展示妝容推薦介面，所述妝容推薦介面包括不同妝容類型的妝容選項；回應于任一所述妝容選項被觸發，將被觸發的妝容選項確定為所述設定妝容類型，並獲取所述設定妝容類型的妝容描述資訊。
一種可能的實施方式中，所述裝置還包括：試妝介面展示模組，用於展示試妝介面，所述試妝介面包括不同妝容類型的妝容選項；融合模組，用於回應于任一所述妝容選項被觸發，基於被觸發的所述妝容選項的效果圖，對所述人臉圖像進行融合處理，得到妝容處理後的人臉圖像。
一種可能的實施方式中，所述融合模組在基於被觸發的所述妝容選項的效果圖，對所述人臉圖像進行融合處理，得到妝容處理後的人臉圖像的情況下，包括：識別所述人臉圖像的多個關鍵點；基於所述多個關鍵點，將所述人臉圖像劃分為多個人臉部位對應的圖像區域；將各人臉部位對應的圖像區域分別與被觸發的所述妝容選項的各人臉部位的效果圖進行融合，得到融合處理後的人臉圖像。
一種可能的實施方式中，所述裝置還包括：接收模組，用於接收被觸發的所述妝容選項對應的妝容處理請求；將被觸發的所述妝容選項對應的妝容類型作為設定妝容類型。
在一些實施例中，本發明實施例提供的裝置具有的功能或包含的範本可以用於執行上文方法實施例描述的方法，其具體實現可以參照上文方法實施例的描述，為了簡潔，這裡不再贅述。
基於同一技術構思，本發明實施例還提供了一種電子設備。參照圖13所示，為本發明實施例提供的電子設備的結構示意圖，包括處理器1301、記憶體1302、和匯流排1303。其中，記憶體1302用於儲存執行指令，包括內部記憶體13021和外部記憶體13022；這裡的內部記憶體13021也稱內存，用於暫時存放處理器1301中的運算資料，以及與硬碟等外部記憶體13022交換的資料，處理器1301通過內部記憶體13021與外部記憶體13022進行資料交換，當電子設備1300運行時，處理器1301與記憶體1302之間通過匯流排1303通訊，使得處理器1301在執行以下指令：展示採集的人臉圖像；識別所述人臉圖像中與第一妝容匹配的人臉部位區域，並指示所述人臉部位區域的妝容操作內容；檢測所述人臉部位區域內的像素變化資訊，直到所述像素變化資訊符合所述第一妝容的妝容效果條件。
此外，本發明實施例還提供一種電腦可讀儲存媒體，該電腦可讀儲存媒體上儲存有電腦程式，該電腦程式被處理器運行時執行上述方法實施例中所述的妝容處理方法的步驟。
本發明實施例所提供的妝容處理方法的電腦程式產品，包括儲存了程式碼的電腦可讀儲存媒體，所述程式碼包括的指令可用於執行上述方法實施例中所述的妝容處理方法的步驟，具體可參見上述方法實施例，在此不再贅述。
所屬領域具通常知識者可以清楚地瞭解到，為描述的方便和簡潔，上述描述的系統和裝置的具體工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。在本發明所提供的幾個實施例中，應該理解到，所揭露的系統、裝置和方法，可以通過其它的方式實現。以上所描述的裝置實施例僅僅是示意性的，例如，所述單元的劃分，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，又例如，多個單元或元件可以結合或者可以內建到另一個系統，或一些特徵可以忽略，或不執行。另一點，所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是通過一些通訊介面，裝置或單元的間接耦合或通訊連接，可以是電性，機械或其它的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位於一個地方，或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例方案的目的。
另外，在本發明各個實施例中的各功能單元可以內建在一個處理單元中，也可以是各個單元單獨物理存在，也可以兩個或兩個以上單元內建在一個單元中。
所述功能如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時，可以儲存在一個處理器可執行的非揮發的電腦可讀取儲存媒體中。基於這樣的理解，本發明的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的部分可以以軟體產品的形式體現出來，該電腦軟體產品儲存在一個儲存媒體中，包括若干指令用以使得一台電腦設備（可以是個人電腦，伺服器，或者網路設備等）執行本發明各個實施例所述方法的全部或部分步驟。而前述的儲存媒體包括：USB隨身碟、移動硬碟、唯讀記憶體（Read-Only Memory，ROM）、隨機存取記憶體（Random Access Memory，RAM）、磁碟或者光碟等各種可以儲存程式碼的媒體。
以上僅為本發明的具體實施方式，但本發明的保護範圍並不局限於此，任何熟悉本技術領域的技術人員在本發明揭露的技術範圍內，可輕易想到變化或替換，都應涵蓋在本發明的保護範圍之內。因此，本發明的保護範圍應以權利要求的保護範圍為准。
21:微笑圖形 22:妝容引導圖形 23:動作指導圖形 81:包括笑臉的圓形圖形 1201:展示模組 1202:選擇模組 1203:識別模組 1204:檢測模組 1300:電子設備 1301:處理器 1302:記憶體 1303:匯流排 13021:內部記憶體 13022:外部記憶體 S101、S102、S103、S104、S500、S501、S502、S503、S701、S702、S901、S902、S1001、S1002:步驟
圖1示出了本發明實施例所提供的一種妝容處理方法的流程示意圖。 圖2示出了本發明實施例所提供的一種妝容處理方法中，展示標記資訊的介面示意圖。 圖3示出了本發明實施例所提供的一種妝容處理方法中，妝容對比的介面示意圖。 圖4示出了本發明實施例所提供的一種妝容處理方法中，妝容完成後的介面顯示圖。 圖5示出了本發明實施例所提供的一種妝容處理方法中，展示採集的人臉圖像的流程示意圖。 圖6示出了本發明實施例所提供的一種妝容處理方法中，顯示妝容詳情的介面示意圖。 圖7示出了本發明實施例所提供的一種妝容處理方法中，獲取設定妝容類型的妝容描述資訊的流程示意圖。 圖8示出了本發明實施例所提供的一種妝容處理方法中，試妝介面示意圖。 圖9示出了本發明實施例所提供的一種妝容處理方法中，獲取設定妝容類型的妝容描述資訊的流程示意圖。 圖10示出了本發明實施例所提供的一種妝容處理方法中，試妝過程的流程示意圖。 圖11示出了本發明實施例所提供的一種妝容處理方法中，試妝介面示意圖。 圖12示出了本發明實施例所提供的一種妝容處理裝置的架構示意圖。 圖13示出了本發明實施例所提供的一種電子設備的結構示意圖。
S101、S102、S103、S104:步驟

Claims (15)

  1. 一種妝容處理方法，適用於終端設備，包括： 展示採集的人臉圖像； 在一個或多個妝容中選擇一個妝容作為第一妝容； 識別所述人臉圖像中與所述第一妝容匹配的人臉部位區域，並指示針對所述人臉部位區域的妝容操作內容；以及 在採集的所述人臉圖像中，檢測所述人臉部位區域內的像素變化資訊，確定所述像素變化資訊是否符合所述第一妝容的妝容效果條件。
  2. 如請求項1所述的妝容處理方法，其中所述指示針對所述人臉部位區域的妝容操作內容，包括： 展示用於指示所述人臉部位區域內的妝容操作範圍的標記資訊；以及 所述在採集的所述人臉圖像中，檢測人臉部位區域的像素變化資訊，確定所述像素變化資訊是否符合所述第一妝容的妝容效果條件，包括： 在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域的像素變化資訊，確定所述像素變化資訊是否符合所述妝容效果條件。
  3. 如請求項2所述的妝容處理方法，其中所述在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域的像素變化資訊，確定所述像素變化資訊是否符合所述妝容效果條件，包括： 在所述採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域與所述人臉圖像的第二圖像區域之間的像素差異值，確定所述像素差異值是否大於所述第一妝容對應的第一設定值；或者 所述在採集的所述人臉圖像中，檢測所述妝容操作範圍內的第一圖像區域的像素變化資訊，確定所述像素變化資訊是否符合所述妝容效果條件，包括： 檢測當前幀人臉圖像中所述第一圖像區域與當前幀之前的其它幀人臉圖像中所述第一圖像區域之間的像素差異值，確定所述像素差異值是否大於所述第一妝容對應的第二設定值。
  4. 如請求項1至3任意一項所述的妝容處理方法，其中在確定所述像素變化資訊符合所述第一妝容的妝容效果條件之後，所述方法還包括： 在多個妝容中選擇不同於所述第一妝容的另一個妝容作為第二妝容； 識別所述人臉圖像中與所述第二妝容匹配的新的人臉部位區域，並指示針對所述新的人臉部位區域的妝容操作內容；以及 在採集的所述人臉圖像中，檢測所述新的人臉部位區域內的像素變化資訊，確定所述像素變化資訊是否符合所述第二妝容的妝容效果條件。
  5. 如請求項1至3任意一項所述的妝容處理方法，在確定所述像素變化資訊符合所述第一妝容的妝容效果條件之後，所述方法更包括： 展示所述人臉部位區域已完成妝容處理的提示資訊；以及 所述展示所述人臉部位區域已完成妝容處理的提示資訊，包括： 將妝容處理進度的顯示狀態由第一狀態切換為第二狀態。
  6. 如請求項1至3任意一項所述的妝容處理方法，所述方法更包括： 回應於第一觸發操作，顯示妝容處理前的人臉圖像與妝容處理後的人臉圖像以進行妝容對比。
  7. 如請求項1至3任意一項所述的妝容處理方法，其中所述指示所述人臉部位區域的妝容操作內容，包括： 展示所述妝容的操作提示內容，所述操作提示內容包括操作提示文本和/或操作提示影片。
  8. 如請求項1至3任意一項所述的妝容處理方法，其中所述展示採集的人臉圖像，包括： 採集所述人臉圖像； 獲取設定妝容類型的妝容描述資訊； 基於所述妝容描述資訊，展示妝容詳情介面；以及 回應于所述妝容詳情介面的上妝選項被觸發，將所述妝容詳情介面切換為妝容處理介面， 其中所述妝容處理介面中展示有採集的所述人臉圖像，且所述妝容詳情介面包括以下至少一個區域：妝容工具介紹區域、妝容步驟介紹區域。
  9. 如請求項8所述的妝容處理方法，其中所述獲取設定妝容類型的妝容描述資訊，包括： 識別所述人臉圖像的人臉屬性；以及 基於所述人臉圖像的人臉屬性，確定所述人臉圖像匹配的所述設定妝容類型並獲取所述設定妝容類型的妝容描述資訊。
  10. 如請求項8所述的妝容處理方法，其中所述獲取設定妝容類型的妝容描述資訊，包括： 展示妝容推薦介面，所述妝容推薦介面包括不同妝容類型的妝容選項；以及 回應于任一所述妝容選項被觸發，將被觸發的所述妝容選項確定為所述設定妝容類型，並獲取所述設定妝容類型的妝容描述資訊。
  11. 如請求項1至3任意一項所述的妝容處理方法，更包括： 展示試妝介面，所述試妝介面包括不同妝容類型的妝容選項；以及 回應于任一所述妝容選項被觸發，基於被觸發的所述妝容選項的效果圖，對所述人臉圖像進行融合處理，以得到妝容處理後的人臉圖像。
  12. 如請求項11所述的妝容處理方法，其中所述基於被觸發的所述妝容選項的效果圖，對所述人臉圖像進行融合處理，以得到妝容處理後的所述人臉圖像，包括： 識別所述人臉圖像的多個關鍵點； 基於所述多個關鍵點，將所述人臉圖像劃分為多個人臉部位對應的圖像區域；以及 將各人臉部位對應的圖像區域分別與被觸發的所述妝容選項的各人臉部位的效果圖進行融合，得到融合處理後的人臉圖像。
  13. 如請求項11所述的妝容處理方法，其中在得到妝容處理後的人臉圖像後，還包括： 接收被觸發的所述妝容選項對應的妝容處理請求；以及 將被觸發的所述妝容選項對應的妝容類型作為設定妝容類型。
  14. 一種電子設備，包括：處理器、記憶體和匯流排，所述記憶體儲存有所述處理器可執行的機器可讀指令，當電子設備運行時，所述處理器與所述記憶體之間通過匯流排通訊，所述機器可讀指令被所述處理器執行時執行如請求項1至13任一所述的妝容處理方法的步驟。
  15. 一種電腦可讀儲存媒體，其特徵在於，該電腦可讀儲存媒體上儲存有電腦程式，該電腦程式被處理器運行時執行如請求項1至13任一所述的妝容處理方法的步驟。
TW110102170A 2020-01-20 2021-01-20 妝容處理方法、裝置、電子設備及儲存媒體 TWI773096B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010065043.3A CN111291642B (zh) 2020-01-20 2020-01-20 一种妆容处理方法、装置、电子设备及存储介质
CN202010065043.3 2020-01-20

Publications (2)

Publication Number Publication Date
TW202129524A true TW202129524A (zh) 2021-08-01
TWI773096B TWI773096B (zh) 2022-08-01

Family

ID=71024304

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110102170A TWI773096B (zh) 2020-01-20 2021-01-20 妝容處理方法、裝置、電子設備及儲存媒體

Country Status (7)

Country Link
US (1) US20220110435A1 (zh)
EP (1) EP3979128A4 (zh)
JP (1) JP2022522667A (zh)
KR (1) KR20210118149A (zh)
CN (1) CN111291642B (zh)
TW (1) TWI773096B (zh)
WO (1) WO2021147920A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111291642B (zh) * 2020-01-20 2023-11-28 深圳市商汤科技有限公司 一种妆容处理方法、装置、电子设备及存储介质
CN113450248A (zh) * 2020-08-24 2021-09-28 北京新氧科技有限公司 基于图像的操作引导方法、装置、设备及可读存储介质
CN112712479A (zh) * 2020-12-24 2021-04-27 厦门美图之家科技有限公司 妆容处理方法、系统、移动终端及存储介质
CN112819718A (zh) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 图像处理方法及装置、电子设备及存储介质
CN113837016A (zh) * 2021-08-31 2021-12-24 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
CN113837020B (zh) * 2021-08-31 2024-02-02 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
CN113837018A (zh) * 2021-08-31 2021-12-24 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
CN113837017B (zh) * 2021-08-31 2022-11-04 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
CN113837019B (zh) * 2021-08-31 2024-05-10 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
CN115761827A (zh) * 2021-08-31 2023-03-07 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质
KR102515436B1 (ko) 2022-08-01 2023-03-29 주식회사 어썸커머스 인공지능 기반 얼굴 메이크업 처리 방법, 장치 및 시스템

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000311248A (ja) * 1999-04-28 2000-11-07 Sharp Corp 画像処理装置
US7039222B2 (en) * 2003-02-28 2006-05-02 Eastman Kodak Company Method and system for enhancing portrait images that are processed in a batch mode
JP5991536B2 (ja) * 2013-02-01 2016-09-14 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
CN105210110A (zh) * 2013-02-01 2015-12-30 松下知识产权经营株式会社 美容辅助装置、美容辅助系统、美容辅助方法以及美容辅助程序
JP2014149678A (ja) * 2013-02-01 2014-08-21 Panasonic Corp 美容支援装置、美容支援システム、美容支援方法、並びに美容支援プログラム
EP3040939B1 (en) * 2013-08-30 2018-10-10 Panasonic Intellectual Property Management Co., Ltd. Makeup support device, makeup support method, and makeup support program
US20160357578A1 (en) * 2015-06-03 2016-12-08 Samsung Electronics Co., Ltd. Method and device for providing makeup mirror
CN109407912A (zh) * 2017-08-16 2019-03-01 丽宝大数据股份有限公司 电子装置及其提供试妆信息方法
CN108256432A (zh) * 2017-12-20 2018-07-06 歌尔股份有限公司 一种指导化妆的方法及装置
CN108920490A (zh) * 2018-05-14 2018-11-30 京东方科技集团股份有限公司 辅助化妆的实现方法、装置、电子设备以及存储介质
CN108765268A (zh) * 2018-05-28 2018-11-06 京东方科技集团股份有限公司 一种辅助化妆方法、装置及智能镜
CN108932654B (zh) * 2018-06-12 2021-03-26 苏州诚满信息技术有限公司 一种虚拟试妆指导方法及装置
CN109064388A (zh) * 2018-07-27 2018-12-21 北京微播视界科技有限公司 人脸图像效果生成方法、装置和电子设备
CN109446365A (zh) * 2018-08-30 2019-03-08 新我科技(广州)有限公司 一种智能化妆交换方法及存储介质
CN111291642B (zh) * 2020-01-20 2023-11-28 深圳市商汤科技有限公司 一种妆容处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN111291642B (zh) 2023-11-28
EP3979128A4 (en) 2022-09-07
CN111291642A (zh) 2020-06-16
EP3979128A1 (en) 2022-04-06
US20220110435A1 (en) 2022-04-14
TWI773096B (zh) 2022-08-01
KR20210118149A (ko) 2021-09-29
WO2021147920A1 (zh) 2021-07-29
JP2022522667A (ja) 2022-04-20

Similar Documents

Publication Publication Date Title
WO2021147920A1 (zh) 一种妆容处理方法、装置、电子设备及存储介质
JP6435516B2 (ja) メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
US20190130652A1 (en) Control method, controller, smart mirror, and computer readable storage medium
TWI573093B (zh) 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體
CN108958610A (zh) 基于人脸的特效生成方法、装置和电子设备
CN108932654B (zh) 一种虚拟试妆指导方法及装置
BR102012033722A2 (pt) Sistema e método para simulação de maquiagem em dispositivos portáteis equipados com câmera digital
CN108694736B (zh) 图像处理方法、装置、服务器及计算机存储介质
CN108920490A (zh) 辅助化妆的实现方法、装置、电子设备以及存储介质
CN111968248A (zh) 基于虚拟形象的智能化妆方法、装置、电子设备及存储介质
CN110866139A (zh) 一种化妆处理方法、装置及设备
CN116830073A (zh) 数字彩妆调色板
US11961169B2 (en) Digital makeup artist
CN112819718A (zh) 图像处理方法及装置、电子设备及存储介质
Borges et al. A virtual makeup augmented reality system
CN116744820A (zh) 数字彩妆师
US20190254408A1 (en) Information processing apparatus and information processing method, and program
CN110458751B (zh) 一种基于粤剧图片的面部替换方法、设备及介质
CN112083863A (zh) 图像处理方法、装置、电子设备及可读存储介质
KR102066892B1 (ko) 메이크업 평가 시스템 및 그의 동작 방법
TW202016881A (zh) 程式、資訊處理裝置、定量化方法及資訊處理系統
CN113033250A (zh) 脸部肌肉状态分析与评价方法
Rivera et al. Development of an automatic expression recognition system based on facial action coding system
TW201411506A (zh) 自動彩妝之資訊系統及其進行上妝方法
Wood Gaze Estimation with Graphics