TW201743282A - 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體 - Google Patents

建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體 Download PDF

Info

Publication number
TW201743282A
TW201743282A TW105118506A TW105118506A TW201743282A TW 201743282 A TW201743282 A TW 201743282A TW 105118506 A TW105118506 A TW 105118506A TW 105118506 A TW105118506 A TW 105118506A TW 201743282 A TW201743282 A TW 201743282A
Authority
TW
Taiwan
Prior art keywords
make
makeup
features
style
image
Prior art date
Application number
TW105118506A
Other languages
English (en)
Other versions
TWI573093B (zh
Inventor
鄭義錡
孫聰敏
Original Assignee
華碩電腦股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 華碩電腦股份有限公司 filed Critical 華碩電腦股份有限公司
Priority to TW105118506A priority Critical patent/TWI573093B/zh
Application granted granted Critical
Publication of TWI573093B publication Critical patent/TWI573093B/zh
Priority to US15/620,827 priority patent/US10360710B2/en
Publication of TW201743282A publication Critical patent/TW201743282A/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships

Abstract

本案揭示一種建立虛擬彩妝資料的方法、電子裝置及非暫態電腦可讀取記錄媒體。此方法包括:調整第一影像中的已上妝臉部,使其大小符合預設影像中預設臉部的大小;在調整後的已上妝臉部上定義多個區域,且每一個區域對應至一彩妝類別;擷取彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵;比對屬於相同的目標彩妝類別的第一彩妝特徵與資料庫中的多個第二彩妝特徵;以及當第一彩妝特徵不同於第二彩妝特徵時,在資料庫中的目標彩妝類別中新增由第一彩妝特徵所組成的第一彩妝樣式。

Description

建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體
本案是有關於一種資料建立方法、電子裝置以及非暫態電腦可讀取記錄媒體,且特別是有關於一種建立虛擬彩妝資料的方法、具備虛擬彩妝資料建立方法之電子裝置以及其非暫態電腦可讀取記錄媒體。
隨著通訊技術的發展,影像傳輸與即時影像通訊需求日增。現在使用者不僅可經由顯示裝置直接看到影像資訊,且可進一步經由控制元件(例如,顯示裝置上的觸控面板)來選擇或調整影像資訊,例如可透過電子裝置調整影像的虛擬彩妝系統。目前的虛擬彩妝系統是透過在臉部的二維影像上找尋特徵點(例如,眼睛、嘴唇等),以在此二維影像上的對應位置提供虛擬彩妝(例如,虛擬眼影、虛擬唇膏等)。
本案提出一種建立虛擬彩妝資料的方法,其適用於一電子裝置,此方法包括:接收具已上妝臉部的第一影像,並偵測此第一影像中的已上妝臉部;調整所述第一影像中的已上妝臉部,使已上妝臉部的大小符合預設影像中預設臉部的大小;在所述第一影像中調整後的已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,所述彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵;擷取所述彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵;比對此些第一彩妝特徵與資料庫中的多個第二彩妝特徵以分類此些第一彩妝特徵,其中所述第二彩妝特徵所屬的目標彩妝類別相同於所述第一彩妝特徵所屬的目標彩妝類別;以及當判定所述第一彩妝特徵不同於所述第二彩妝特徵時,在資料庫中的目標彩妝類別中新增由所述第一彩妝特徵所組成的第一彩妝樣式。
本案另提出一種具備虛擬彩妝資料建立方法之電子裝置,包括:儲存裝置以及處理器。儲存裝置儲存資料庫與多個模組,以及處理器耦接所述儲存裝置,載入並執行儲存於儲存裝置中的模組。此些模組包括:輸入模組,影像處理模組,彩妝特徵擷取模組,彩妝特徵比對模組以及彩妝特徵分類模組。輸入模組接收具已上妝臉部的第一影像,且影像處理模組偵測此第一影像中的已上妝臉部。影像處理模組調整此第一影像中的已上妝臉部,使已上妝臉部的大小符合預設影像中預設臉部的大小。彩妝特徵擷取模組在第一影像中的調整後的已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,所述彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵。此外,彩妝特徵擷取模組更用以擷取所述彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵。彩妝特徵比對模組比對此些第一彩妝特徵與資料庫中的多個第二彩妝特徵以分類此些第一彩妝特徵,其中所述第二彩妝特徵所屬的目標彩妝類別相同於所述第一彩妝特徵所屬的目標彩妝類別。當彩妝特徵比對模組判定此些第一彩妝特徵不同於所述第二彩妝特徵時,彩妝特徵分類模組在資料庫中的目標彩妝類別中新增由此些第一彩妝特徵所組成的第一彩妝樣式。
本案另提出一種非暫態電腦可讀取記錄媒體,所述非暫態電腦可讀取記錄媒體記錄至少一程式指令,所述至少一程式指令在載入一電子裝置後,執行下列步驟:接收具已上妝臉部的第一影像,並偵測此第一影像中的已上妝臉部;調整所述第一影像中的已上妝臉部,使已上妝臉部的大小符合預設影像中預設臉部的大小;在所述第一影像中調整後的已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,所述彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵;擷取所述彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵;比對此些第一彩妝特徵與資料庫中的多個第二彩妝特徵以分類此些第一彩妝特徵,其中所述第二彩妝特徵所屬的目標彩妝類別相同於所述第一彩妝特徵所屬的目標彩妝類別;以及當判定所述第一彩妝特徵不同於所述第二彩妝特徵時,在資料庫中的目標彩妝類別中新增由所述第一彩妝特徵所組成的第一彩妝樣式。
基於上述,本案之實施例所提出的建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及非暫態電腦可讀取記錄媒體能夠根據使用者輸入的影像與資料庫中現有的彩妝樣式來自動地擴充資料庫中的彩妝樣式,據此,可有效地提升具備建立虛擬彩妝資料之方法的電子裝置的實用性並提供使用者更方便的操作體驗。
為讓本案的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
圖1是根據本案一實施例所繪示之具備虛擬彩妝資料建立平台之電子裝置的方塊圖。必須了解的是,圖1的範例僅是為了方便說明,並不用以限制本發明。
請參照圖1,電子裝置100包括儲存裝置102、處理器104以及顯示裝置106。在本實施例中,電子裝置100可以是行動裝置、個人數位助理(Personal Digital Assistant,PDA)、筆記型電腦、平板電腦等具有攝影功能的電子裝置,例如,數位相機、攝影機、通訊裝置、音訊播放器或視訊播放器等系統。然而,本發明並不限於此,例如,在另一實施例中,電子裝置100亦可以是不具有攝影功能的電子裝置。
儲存裝置102可以是任何型態的固定式或可移動式隨機存取記憶體(random access memory,RAM)、唯讀記憶體(read-only memory,ROM)、快閃記憶體(flash memory)、固態硬碟(Solid State Drive,SSD)或類似元件或上述元件的組合。在本實施例中,儲存裝置102用以儲存虛擬彩妝平台108,而虛擬彩妝平台108包括輸入模組110、影像處理模組120、彩妝特徵擷取模組130、彩妝特徵比對模組140、彩妝特徵分類模組150以及資料庫160等軟體程式。
處理器104係耦接至儲存裝置102。處理器104可以是具有單核心或多核心的中央處理單元(Central Processing Unit,CPU),或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor,DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuit,ASIC)或其他類似元件或上述元件的組合。在本實施例中,處理器104用以存取並執行上述儲存裝置102中所記錄的模組以運行虛擬彩妝平台108,藉以實現本發明實施例的建立虛擬彩妝資料的方法。
顯示裝置106耦接至儲存裝置102與處理器104,顯示裝置106可以是觸控螢幕,例如,電阻式(resistive)觸控面板、電容式(capacitive)觸控面板、光學式(optical)觸控面板、聲波式(acoustic wave)觸控面板、電磁式(electromagnetic)觸控面板等。此外,顯示裝置106亦可以是非觸控螢幕,例如,液晶螢幕、電漿螢幕或投影螢幕。
圖2是依照本案一實施例所繪示的建立虛擬彩妝資料的方法流程圖。圖3A至圖3D是根據本發明一實施例所繪示之虛擬彩妝平台對已上妝影像進行處理的示意圖。圖4是依照本案一實施例所繪示的擷取彩妝特徵的範例示意圖。本實施例的方法適用於上述的電子裝置100,為了更清楚地描述電子裝置100及其虛擬彩妝平台108的運作,以下將搭配圖1中電子裝置100的各項元件,說明本實施例方法的詳細流程。
請參照圖2與圖3A,在步驟S201中,輸入模組110會接收具已上妝臉部的影像300(亦稱為第一影像300),且影像處理模組120會偵測此第一影像300中的已上妝臉部30a。具體而言,在本實施例中,使用者可透過具攝影功能的電子裝置100來拍攝具已上妝臉部的影像以獲得包含其所欲模擬之妝容效果的影像。例如,使用者啟動電子裝置100後,可進一步透過電子裝置100的攝像單元(未繪示)實際拍攝已化妝的人物,或者翻拍雜誌、網站等任何平面影像中已上妝臉部以獲得其所欲模擬之妝容效果的影像300。然而,本發明並不限於此,例如,在另一實施例中,電子裝置100更包括通訊單元(未繪示),通訊單元可透過網路從其他的電子裝置或雲端伺服器接收或下載具已上妝臉部的影像300。
請參照圖2與圖3A~圖3C,在步驟S203中,影像處理模組120會調整第一影像300中的已上妝臉部30a,例如對已上妝臉部30a進行變形處理(Morphing process),使已上妝臉部的大小符合預設影像302中預設臉部30b的大小,調整後的已上妝臉部30c如圖3C所示。
請再參照圖3B與圖3C,在步驟S205中,彩妝特徵擷取模組130會在第一影像300中的調整後的已上妝臉部30c上定義多個區域。具體而言,預設影像302具有對應預設臉部30b的多個特徵點3的分布位置,所述特徵點包括五官資訊,例如,眉毛30、眼睛32、臉頰34、鼻子36、嘴巴38、耳朵與臉部輪廓等資訊,而彩妝特徵擷取模組130會取得對應預設臉部30b的多個特徵點3,並進一步根據此些特徵點3的分布位置,在調整後的已上妝臉部30c上定義出對應五官資訊的多個區域。更詳細地說,如圖3C所示,彩妝特徵擷取模組130依據這些特徵點3並使用一演算法(亦稱為第一演算法)在調整後的已上妝臉部30c辨識出五官資訊,例如眉毛40、眼睛42、臉頰44、鼻子46、嘴巴48、耳朵與臉部輪廓等資訊,而彩妝特徵擷取模組130在辨識出這些五官資訊之後,可以經過計算眉眼距離、兩眼間距、嘴巴寬度等等的資訊建構出對應此些五官資訊的區域。
具體而言,上述第一演算法例如是尺度不變特徵轉換(Scale-invariant feature transform,SIFT)或者加速穩健特徵(Speeded Up Robust Features,SURF) 。
尺度不變特徵轉換是一種電腦視覺的演算法,其用來偵測與描述影像中的局部性特徵,透過此演算法可在空間尺度中尋找極值點,並提取出其位置、尺度、旋轉不變數。例如,若使用兩個影像的特徵點來比對,可發現越相似的影像,特徵點符合數越多,由此可判斷兩個影像的相似度。此外,SIFT的作用在於,透過局部影像之特徵點的描述與偵測可有效地辨識物體,例如,其是基於物體上局部外觀的特徵點來辨識物體,而非基於影像的大小和旋轉來辨識物體。特別是,SIFT對於光線、雜訊、些微視角改變的容忍度也相當高。基於上述特性,使用SIFT可在龐大的特徵資料庫中,透過其高度顯著且相對容易擷取的特性,有效地辨識出物體並減少誤判。
SURF是一種穩健的圖像識別和描述演算法,此演算法亦可被用於電腦視覺任務,例如,物件識別與3D影像重建。SURF演算法的概念與步驟是以SIFT為基礎,但詳細的流程略有不同。例如,SURF的演算法包含以下三個步驟:特徵點偵測、特徵鄰近描述以及描述子配對,透過此些步驟,SURF的穩健性(Robustness)相較於SIFT可提升數倍。
在本案一實施例中,在步驟S205中所定義出的每一個區域會對應至一個彩妝類別,其中彩妝類別至少可以為眉妝、眼妝、臉頰以及唇妝,例如,眉毛40的區域對應的彩妝類別為眉妝,眼睛42的區域對應的彩妝類別為眼妝,臉頰44的區域對應的彩妝類別為臉頰,而嘴巴48的區域對應的彩妝類別為唇妝。特別是,每一彩妝類別可更包括多個目標彩妝類別,且每一個目標彩妝類別包含具有多個彩妝特徵的彩妝樣式。舉例而言,眼妝至少包括眼影、眼線與睫毛(例如,假睫毛或睫毛膏)等目標彩妝類別,臉頰至少包括腮紅與修容樣式等目標彩妝類別,而眉妝僅包括眉毛造型一個目標彩妝類別,以及唇妝僅包括唇部造型一個目標彩妝類別。換言之,目標彩妝類別即為彩妝類別所包括的子類別。值得一提的是,本案並不欲加以限制每一彩妝類別所包括的目標彩妝類別的數量與型態,例如,在另一實施例中,使用者可對每一彩妝類別進行定義以新增或刪除對應每一彩妝類別的目標彩妝類別。此外,彩妝特徵至少包括顏色特徵、形狀特徵、範圍特徵、材質特徵以及長度特徵,對於一個目標彩妝類別而言,不同彩妝特徵之組合所呈現的妝容效果即為對應此目標彩妝類別的多種彩妝樣式。
接著,在步驟S207中,彩妝特徵擷取模組130會識別對應五官資訊之區域中每一個區域所對應的彩妝類別的至少一目標彩妝類別,並利用上述第一演算法擷取對應所述至少一目標彩妝類別的多個彩妝特徵(亦稱為第一彩妝特徵)。在此,以對應眼睛42的區域為例,彩妝特徵擷取模組130會識別對應眼睛42之區域的彩妝類別為眼妝,而眼妝更至少包括眼影、眼線與睫毛(例如,假睫毛或睫毛膏)等,據此,彩妝特徵擷取模組130會將眼影、眼線與睫毛定義為目標彩妝類別。
之後,彩妝特徵擷取模組130會將對應此些目標彩妝類別的彩妝特徵擷取出來,如圖4所示,在調整後的已上妝臉部30c的眼影部分,彩妝特徵擷取模組130會擷取出顏色特徵、形狀特徵、範圍特徵與材質特徵,例如,顏色特徵為藍色與紫色漸層,形狀特徵為眼影輪廓,範圍特徵為眼皮區域但未超出眼睛寬度,以及材質特徵為含有亮片與亮粉的眼影,特別是,由此些彩妝特徵所呈現的眼影彩妝效果即為屬於眼影的一種彩妝樣式410。
在調整後的已上妝臉部30c的眼線部分,彩妝特徵擷取模組130會擷取出顏色特徵、形狀特徵與範圍特徵,例如,顏色特徵為黑色,形狀特徵為眼睛的輪廓,以及範圍特徵為整個眼睛四周的輪廓,由此些彩妝特徵所呈現的眼線彩妝效果即為屬於眼線的一種彩妝樣式420。而在調整後的已上妝臉部30c的睫毛部分,彩妝特徵擷取模組130會擷取出顏色特徵、形狀特徵、材質特徵與長度特徵,例如,顏色特徵為黑色,形狀特徵為眼睛的輪廓與睫毛的線條,材質特徵為塑膠,以及長度特徵為0.8公分,類似地,由此些彩妝特徵所呈現的睫毛彩妝效果即為屬於睫毛的一種彩妝樣式430。值得一提的是,圖4所示的目標彩妝類別及其對應的彩妝特徵僅為方便說明彩妝特徵之擷取操作的一個範例示意圖,而非用以限制本發明。
類似地,彩妝特徵擷取模組130會在調整後的已上妝臉部30c分別識別出對應眉毛40之區域的彩妝類別(即,眉妝)所包括的目標彩妝類別為眉毛造型類別,對應臉頰44之區域的彩妝類別(即,臉頰)所包括的目標彩妝類別為腮紅類別與修容樣式類別,以及對應嘴巴48之區域的彩妝類別(即,唇妝)所包括的目標彩妝類別為唇部造型類別。並且,彩妝特徵擷取模組130亦會將眉毛造型類別、腮紅類別、修容樣式類別與唇部造型類別所分別具有的彩妝特徵擷取出來,而彩妝特徵擷取模組130擷取眉毛造型類別、腮紅類別、修容樣式類別與唇部造型類別所分別對應的彩妝特徵的操作相同於上述擷取眼影、眼線與睫毛所分別對應的彩妝特徵的操作,因此在此不再重述。請參照圖3D,圖3D繪示為彩妝特徵擷取模組130對已上妝臉部30c的每一個區域所擷取之彩妝特徵所呈現的所有彩妝樣式。在此,對調整後的已上妝臉部30c上之各個目標彩妝類別所擷取出的彩妝特徵皆稱為第一彩妝特徵。
之後,彩妝特徵比對模組140會比對彩妝特徵擷取模組130所擷取的第一彩妝特徵與資料庫160中的彩妝特徵(亦稱為第二彩妝特徵)以分類第一彩妝特徵。如上所述,對於一個目標彩妝類別而言,不同彩妝特徵之組合所呈現的妝容效果即為對應此目標彩妝類別的多種彩妝樣式,換言之,一個目標彩妝類別可具有多種不同的彩妝樣式,且每一種彩妝樣式是由至少一彩妝特徵所組成。在本實施例中,資料庫160中會儲存有每一目標彩妝類別所具有的多種彩妝樣式,且所儲存之每一彩妝樣式皆不相同,亦即,資料庫160中所儲存的每一彩妝樣式各是以不同的彩妝特徵所組成。
在比對彩妝特徵擷取模組130所擷取的第一彩妝特徵與資料庫160中的第二彩妝特徵的操作中,第二彩妝特徵所屬的目標彩妝類別相同於第一彩妝特徵所屬的目標彩妝類別,換言之,彩妝特徵比對模組140是依據目標彩妝類別來比對第一彩妝特徵與第二彩妝特徵。如步驟S209所示,彩妝特徵比對模組140會根據另一演算法(亦稱為第二演算法)來判斷第一彩妝特徵與資料庫160中的第二彩妝特徵之間的差異是否小於一差異門檻值。
於一實施例中,彩妝特徵比對模組140會將圖4中目標彩妝類別為眼影的第一彩妝特徵數位化,並從資料庫160中讀取目標彩妝類別為眼影的所有彩妝樣式,之後,彩妝特徵比對模組140會將目標彩妝類別為眼影的第一彩妝特徵與資料庫160中對應眼影之所有彩妝樣式的第二彩妝特徵一一比對。在此,第二演算法例如是支持向量機(Support Vector Machines, SVM),決策樹(Decision Tree),類神經網路(Neural Networks)以及 k-平均演算法。舉例而言,SVM是一種分類(Classification)演算法,透過機器學習(Machine learning)與監督式學習的方法,以輸入物件做為訓練資料以建立出一個模式或函數,並依此模式或函數預測輸出結果。例如,輸出結果可以為一個分類標籤(亦稱作分類)。
在第二演算法為SVM的例子中,訓練資料例如是資料庫160中每一種目標彩妝類別所對應的彩妝樣式,透過此些訓練資料所建立出的函數可以將彩妝特徵擷取模組130所擷取之所有第一彩妝特徵分類為分別對應眼影、眼線、睫毛、眉毛造型、腮紅、修容樣式以及唇部造型等目標彩妝類別的第一彩妝特徵。在此,以對應眼影的第一彩妝特徵為例,彩妝特徵比對模組140會更進一步地使用訓練資料所建立出的函數對屬於眼影的第一彩妝特徵與資料庫160中對應眼影之所有彩妝樣式的第二彩妝特徵一一進行比對,以獲得輸出結果,例如,此輸出結果即為對應眼影的第一彩妝特徵與資料庫160中對應眼影之所有彩妝樣式的第二彩妝特徵之間的差異。
當對應眼影之第一彩妝特徵與資料庫160中對應眼影之所有彩妝樣式所對應的第二彩妝特徵之間的差異非小於差異門檻值時,在步驟S211中,彩妝特徵分類模組150會判定第一彩妝特徵不同於第二彩妝特徵,並在資料庫160中的目標彩妝類別(即,眼影)中新增一個由此些第一彩妝特徵所組成之新的彩妝樣式(亦稱為第一彩妝樣式)。
反之,當對應眼影之第一彩妝特徵與資料庫160中對應眼影之至少一彩妝樣式所對應的第二彩妝特徵之間的差異小於差異門檻值時,在步驟S213中,彩妝特徵分類模組150會判定第一彩妝特徵相同於資料庫160中對應眼影之至少一彩妝樣式所對應的第二彩妝特徵,並以資料庫160中與第一彩妝樣式相同的至少一彩妝樣式(亦稱為第二彩妝樣式)標記此第一彩妝樣式,亦即,用資料庫中既有的第二彩妝樣式來表示第一彩妝樣式,其中第二彩妝樣式由所述第二彩妝特徵所組成。
據此,在步驟S215中,彩妝特徵分類模組150會根據新增至資料庫160的第一彩妝樣式或第二彩妝樣式,將對已上妝臉部30c包含的所有彩妝樣式定義為一個整體彩妝樣式,並儲存此整體彩妝樣式於資料庫160之中。
如此一來,透過上述電子裝置100及其虛擬彩妝資料建立平台108所運行的建立虛擬彩妝資料的方法,可根據使用者的需求自動地新增彩妝樣式至虛擬彩妝資料建立平台的資料庫中,而資料庫中對應每一目標彩妝類別的所有彩妝樣式皆不會重複,並且使用者可在之後再次使用與傳播。
另一方面,在本發明實施例中,電子裝置100及其虛擬彩妝資料建立平台108還可根據使用者的指令來呈現虛擬彩妝。圖5A至圖5F是根據本發明一實施例所繪示之虛擬彩妝資料建立平台根據輸入訊號在輸出影像上呈現虛擬彩妝的示意圖。請參照圖5A,虛擬彩妝資料建立平台108的輸入模組110接收一臉部50a的影像500(亦稱為第二影像500),且透過影像處理模組120偵測此第二影像500中的臉部50a。類似地,使用者可透過具攝影功能的電子裝置100來拍攝具有臉部的影像,例如,使用者可透過電子裝置100的攝像單元(未繪示)實際拍攝未上妝或已上妝的人物。或者,在另一實施例中,電子裝置100更包括通訊單元(未繪示),通訊單元可透過網路從其他的電子裝置或雲端伺服器接收或下載具有臉部的第二影像500,其中臉部50a可以是使用者自己的臉部或他人的臉部。例如,在電子裝置100為行動裝置或平板電腦的例子中,電子裝置100的顯示裝置106例如是觸控螢幕,據此,如圖5B所示,第二影像500進一步被顯示於電子裝置100的顯示裝置106上。
請參照圖5B~圖5D,虛擬彩妝資料建立平台108例如會在顯示裝置106上顯示具有對應各個彩妝類別(即,眉妝、眼妝、臉頰與唇妝)的選項,整體彩妝選項以及自訂彩妝選項的工具列510,以提供使用者選擇所欲模擬的彩妝效果。舉例而言,當使用者點選工具列510中的眼妝的彩妝類別時,電子裝置100會透過虛擬彩妝資料建立平台108將資料庫160中眼妝所包括的目標彩妝類別(例如,眼影、眼線與睫毛等)的所有彩妝樣式皆顯示在眼妝樣式介面512中。在此,假設使用者選擇對應睫毛之多個彩妝樣式中的彩妝樣式512c-1(亦稱為第三彩妝樣式512c-1),則如圖5D所示,影像處理模組120會根據輸入模組110所接收的對應第三彩妝樣式512c-1的輸入訊號,將資料庫160中的第三彩妝樣式512c-1套用至第二影像500中的臉部50a以產生輸出影像,並在顯示裝置106顯示此輸出影像。值得注意的是,本發明並不加以限制第三彩妝樣式的來源,例如,第三彩妝樣式可以是使用者先前自訂的彩妝樣式(例如,第一彩妝樣式),或者資料庫160內建或原有的彩妝樣式(例如,第二彩妝樣式)。
請參照圖5E與圖5F,在另一實施例中,當使用者點選工具列510中的整體彩妝選項時,電子裝置100會透過虛擬彩妝資料建立平台108將資料庫160中所記錄的所有整體彩妝樣式皆顯示在整體彩妝樣式介面514中。例如,整體彩妝樣式514e-1即為使用者先前所輸入之其所欲模擬的具已上妝臉部的影像300的縮圖,當使用者選擇此整體彩妝樣式514e-1時,則如圖5F所示,影像處理模組120會根據輸入模組110所接收的對應整體彩妝樣式514e-1的輸入訊號,將資料庫160中對應整體彩妝樣式514e-1的所有彩妝樣式套用至第二影像500中的臉部50a以產生輸出影像,並在顯示裝置106顯示此輸出影像。此外,當使用者點選工具列510中的自訂選項時,則虛擬彩妝資料建立平台108會指示使用者可輸入所欲模擬的具已上妝臉部的影像,而透過電子裝置100及其虛擬彩妝資料建立平台108建立虛擬彩妝資料的詳細說明已於上述實施例中說明,在此不再重述。
圖6是本發明建立虛擬彩妝資料的方法流程圖。
請參照圖6,在步驟S601中,輸入模組110接收具已上妝臉部的第一影像,而影像處理模組120偵測第一影像中的已上妝臉部。
在步驟S603中,影像處理模組120調整第一影像中的已上妝臉部,使已上妝臉部的大小符合預設影像中預設臉部的大小。
在步驟S605中,彩妝特徵擷取模組130在第一影像中調整後的已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,所述彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵。
在步驟S607中,彩妝特徵擷取模組130擷取彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵。
接著,在步驟S609中,彩妝特徵比對模組140比對所述第一彩妝特徵與資料庫160中的多個第二彩妝特徵以分類所述第一彩妝特徵,其中所述第二彩妝特徵所屬的目標彩妝類別相同於所述第一彩妝特徵所屬的目標彩妝類別。
之後,在步驟S611中,當彩妝特徵比對模組140判定所述第一彩妝特徵不同於所述第二彩妝特徵時,彩妝特徵分類模組150會在資料庫160中的所述目標彩妝類別中新增由所述第一彩妝特徵所組成的第一彩妝樣式。
另外,上述方法可以非暫態電腦可讀取記錄媒體來實施。非暫態電腦可讀取記錄媒體記錄至少一程式指令,此至少一程式指令在載入電子裝置後,用以執行下列步驟:接收具已上妝臉部的第一影像,並偵測此第一影像中的已上妝臉部;調整所述第一影像中的已上妝臉部,使已上妝臉部的大小符合預設影像中預設臉部的大小;在所述第一影像中調整後的已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,所述彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵;擷取所述彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵;比對此些第一彩妝特徵與資料庫中的多個第二彩妝特徵以分類此些第一彩妝特徵,其中所述第二彩妝特徵所屬的目標彩妝類別相同於所述第一彩妝特徵所屬的目標彩妝類別;以及當判定所述第一彩妝特徵不同於所述第二彩妝特徵時,在資料庫中的目標彩妝類別中新增由所述第一彩妝特徵所組成的第一彩妝樣式。
然而,圖6中各步驟已詳細說明如上,在此便不再贅述。值得注意的是,圖6中各步驟可以實作為多個程式碼或是電路,本發明不加以限制。此外,圖6的方法可以搭配以上實施例使用,也可以單獨使用,本發明不加以限制。
綜上所述,本發明實施例的建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料的方法之電子裝置以及非暫態電腦可讀取記錄媒體是透過比對使用者輸入之已上妝臉部影像所擷取出的彩妝樣式與虛擬彩妝資料建立平台中現有的彩妝樣式以自動地將與系統中現有彩妝樣式不同的彩妝樣式新增至虛擬彩妝資料建立平台的資料庫中,由此可擴充資料庫中的彩妝樣式,且資料庫中對應每一目標彩妝類別的所有彩妝樣式皆不會重複。如此一來,使用者可在之後重複使用與傳播此些彩妝樣式,並可依其需求模擬使用者所自訂的虛擬彩妝。此外,本發明的建立虛擬彩妝資料的方法以及具備此方法之電子裝置還可彈性地根據使用者的指令來呈現局部或整體的虛擬彩妝樣式。綜上,本發明有效地解決傳統的虛擬彩妝系統中虛擬彩妝樣式為固定的,且無法因應使用者的需求來擴充其彩妝樣式的問題,從而提升虛擬彩妝資料建立平台的實用性與使用者操作體驗的便利性。
雖然本案已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100‧‧‧電子裝置 102‧‧‧儲存裝置 104‧‧‧處理器 106‧‧‧顯示裝置 108‧‧‧虛擬彩妝資料建立平台 110‧‧‧輸入模組 120‧‧‧影像處理模組 130‧‧‧彩妝特徵擷取模組 140‧‧‧彩妝特徵比對模組 150‧‧‧彩妝特徵分類模組 160‧‧‧資料庫 3‧‧‧特徵點 30、40‧‧‧眉毛 32、42‧‧‧眼睛 34、44‧‧‧臉頰 36、46‧‧‧鼻子 38、48‧‧‧嘴巴 30a‧‧‧已上妝臉部 30b‧‧‧預設臉部 30c‧‧‧調整後的已上妝臉部 300‧‧‧第一影像 302‧‧‧預設影像 410、420、430‧‧‧彩妝樣式 50a‧‧‧臉部 500‧‧‧第二影像 510‧‧‧工具列 512‧‧‧眼妝樣式介面 512c-1‧‧‧第三彩妝樣式 514‧‧‧整體彩妝樣式介面 514e-1‧‧‧整體彩妝樣式 S201、S203、S205、S207、S209、S211、S213、S215、S601、S603、S605、S607、S609、S611‧‧‧建立虛擬彩妝資料的方法的步驟
圖1是根據本案一實施例所繪示之具備虛擬彩妝資料建立平台之電子裝置的方塊圖。 圖2是依照本案一實施例所繪示的建立虛擬彩妝資料的方法流程圖。 圖3A至圖3D是根據本案一實施例所繪示之虛擬彩妝資料建立平台對已上妝影像進行處理的示意圖。 圖4是依照本案一實施例所繪示的擷取彩妝特徵的範例示意圖。 圖5A至圖5F是根據本案一實施例所繪示之虛擬彩妝資料建立平台根據輸入訊號在輸出影像上呈現虛擬彩妝的示意圖。 圖6是本案建立虛擬彩妝資料的方法流程圖。
S601、S603、S605、S607、S609、S611‧‧‧建立虛擬彩妝資料的方法的步驟

Claims (20)

  1. 一種建立虛擬彩妝資料的方法,適用於一電子裝置,該方法包括: 接收具一已上妝臉部的一第一影像,並偵測該第一影像中的該已上妝臉部; 調整該第一影像中的該已上妝臉部,使該已上妝臉部的大小符合一預設影像中一預設臉部的大小; 在該第一影像中調整後的該已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,該彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵; 擷取該彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵; 比對該些第一彩妝特徵與一資料庫中的多個第二彩妝特徵以分類該些第一彩妝特徵,其中該些第二彩妝特徵所屬的一目標彩妝類別相同於該些第一彩妝特徵所屬的該目標彩妝類別;以及 當判定該些第一彩妝特徵不同於該些第二彩妝特徵時,在該資料庫中的該目標彩妝類別中新增由該些第一彩妝特徵所組成的一第一彩妝樣式。
  2. 如申請專利範圍第1項所述的建立虛擬彩妝資料的方法,更包括: 當判定該些第一彩妝特徵相同於該些第二彩妝特徵時,以該資料庫中由該些第二彩妝特徵組成的一第二彩妝樣式來表示由該些第一彩妝特徵所組成的該第一彩妝樣式。
  3. 如申請專利範圍第2項所述的建立虛擬彩妝資料的方法,更包括: 根據新增至該資料庫的該第一彩妝樣式或該第二彩妝樣式,將對該已上妝臉部包含的所有彩妝樣式定義為一整體彩妝樣式,並儲存該整體彩妝樣式於該資料庫之中。
  4. 如申請專利範圍第1項所述的建立虛擬彩妝資料的方法,其中該預設臉部具有多個特徵點,且該些特徵點包括五官資訊,其中在該第一影像中的調整後的該已上妝臉部上定義該些區域的步驟包括: 取得對應該預設臉部的該些特徵點;以及 根據一第一演算法與該些特徵點的分布位置,在調整後的該已上妝臉部上定義出該些區域。
  5. 如申請專利範圍第1項所述的建立虛擬彩妝資料的方法,其中擷取該彩妝類別的該至少一目標彩妝類別的該些第一彩妝特徵的步驟包括: 識別該些區域中每一個區域所對應的該彩妝類別的該至少一目標彩妝類別,並根據該第一演算法擷取該至少一目標彩妝類別的該些第一彩妝特徵。
  6. 如申請專利範圍第1項所述的建立虛擬彩妝資料的方法,其中比對該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵以分類該些第一彩妝特徵的步驟包括: 根據一第二演算法判斷該些第一彩妝特徵與該資料庫中該些第二彩妝特徵之間的差異是否小於一差異門檻值,且當該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵之間的差異非小於該差異門檻值時,判定該些第一彩妝特徵不同於該些第二彩妝特徵。
  7. 如申請專利範圍第3項所述的建立虛擬彩妝資料的方法,其中在根據新增至該資料庫的該第一彩妝樣式或該第二彩妝樣式,將對該已上妝臉部包含的所有彩妝樣式定義為該整體彩妝樣式,並儲存該整體彩妝樣式於該資料庫之中的步驟之後,更包括: 接收具一臉部的一第二影像,並偵測該第二影像中的該臉部; 接收一輸入訊號,且根據該輸入訊號將該資料庫中對應該輸入訊號的一第三彩妝樣式或對應該第一影像中的該已上妝臉部的該整體彩妝樣式套用至該第二影像中的該臉部以產生一輸出影像,其中該第三彩妝樣式為新增至該資料庫的該第一彩妝樣式與該第二彩妝樣式的至少其中之一;以及 顯示該輸出影像。
  8. 一種具備虛擬彩妝資料建立方法之電子裝置,包括: 一儲存裝置,儲存一資料庫與多個模組;以及 一處理器,耦接該儲存裝置,載入並執行儲存於該儲存裝置中的該些模組,該些模組包括:一輸入模組,一影像處理模組,一彩妝特徵擷取模組,一彩妝特徵比對模組以及一彩妝特徵分類模組, 其中該輸入模組接收具一已上妝臉部的一第一影像,且該影像處理模組偵測該第一影像中的該已上妝臉部, 其中該影像處理模組調整該第一影像中的該已上妝臉部,使該已上妝臉部的大小符合一預設影像中一預設臉部的大小, 其中該彩妝特徵擷取模組在該第一影像中的調整後的該已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,該彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有至多個彩妝特徵, 其中該彩妝特徵擷取模組更用以擷取對應該彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵, 其中該彩妝特徵比對模組比對該些第一彩妝特徵與該資料庫中的多個第二彩妝特徵以分類該些第一彩妝特徵,其中該些第二彩妝特徵所屬的一目標彩妝類別相同於該些第一彩妝特徵所屬的該目標彩妝類別, 其中當該彩妝特徵比對模組判定該些第一彩妝特徵不同於該些第二彩妝特徵時,該彩妝特徵分類模組在該資料庫中的該目標彩妝類別中新增由該些第一彩妝特徵所組成的一第一彩妝樣式。
  9. 如申請專利範圍第8項所述的電子裝置,其中當判定該些第一彩妝特徵相同於該些第二彩妝特徵時,該彩妝特徵分類模組以該資料庫中由該些第二彩妝特徵組成的一第二彩妝樣式來表示由該些第一彩妝特徵所組成的該第一彩妝樣式。
  10. 如申請專利範圍第9項所述的電子裝置,其中該彩妝特徵分類模組更用以根據新增至該資料庫的該第一彩妝樣式或該第二彩妝樣式,將對該已上妝臉部包含的所有彩妝樣式定義為一整體彩妝樣式,並儲存該整體彩妝樣式於該資料庫之中。
  11. 如申請專利範圍第8項所述的電子裝置,其中該彩妝特徵擷取模更用以識別該些區域中每一個區域所對應的該彩妝類別的該至少一目標彩妝類別,並根據該第一演算法擷取對應該至少一目標彩妝類別的該些第一彩妝特徵。
  12. 如申請專利範圍第8項所述的電子裝置,其中該彩妝特徵比對模組根據一第二演算法判斷該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵之間的差異是否小於一差異門檻值,且當該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵之間的差異非小於該差異門檻值時,該彩妝特徵比對模組判定該些第一彩妝特徵不同於該些第二彩妝特徵。
  13. 如申請專利範圍第10項所述的電子裝置,其中該電子裝置更包括一顯示裝置,耦接該處理器, 其中該輸入模組更用以接收具一臉部的一第二影像,並透過該影像處理模組偵測該第二影像中的該臉部, 其中該影像處理模組更用以根據該輸入模組所接收的一輸入訊號,將該資料庫中對應該輸入訊號的一第三彩妝樣式或對應該第一影像中的該已上妝臉部的該整體彩妝樣式套用至該第二影像中的該臉部以產生一輸出影像,其中該第三彩妝樣式為新增至該資料庫的該第一彩妝樣式與該第二彩妝樣式的至少其中之一。
  14. 一種非暫態電腦可讀取記錄媒體,該非暫態電腦可讀取記錄媒體記錄至少一程式指令,該至少一程式指令在載入一電子裝置後,執行下列步驟: 接收具一已上妝臉部的一第一影像,並偵測該第一影像中的該已上妝臉部; 調整該第一影像中的該已上妝臉部,使該已上妝臉部的大小符合一預設影像中一預設臉部的大小; 在該第一影像中調整後的該已上妝臉部上定義多個區域,其中每一個區域對應至一彩妝類別,該彩妝類別包括多個目標彩妝類別,且每一個目標彩妝類別具有多個彩妝特徵; 擷取該彩妝類別的至少一目標彩妝類別的多個第一彩妝特徵; 比對該些第一彩妝特徵與一資料庫中的多個第二彩妝特徵以分類該些第一彩妝特徵,其中該些第二彩妝特徵所屬的一目標彩妝類別相同於該些第一彩妝特徵所屬的該目標彩妝類別;以及 當判定該些第一彩妝特徵不同於該些第二彩妝特徵時,在該資料庫中的該目標彩妝類別中新增由該些第一彩妝特徵所組成的一第一彩妝樣式。
  15. 如申請專利範圍第14項所述的非暫態電腦可讀取記錄媒體,其執行步驟更包括: 當判定該些第一彩妝特徵相同於該些第二彩妝特徵時,以該資料庫中由該些第二彩妝特徵組成的一第二彩妝樣式來表示由該些第一彩妝特徵所組成的該第一彩妝樣式。
  16. 如申請專利範圍第15項所述的非暫態電腦可讀取記錄媒體,其執行步驟更包括: 根據新增至該資料庫的該第一彩妝樣式或該第二彩妝樣式,將對該已上妝臉部包含的所有彩妝樣式定義為一整體彩妝樣式,並儲存該整體彩妝樣式於該資料庫之中。
  17. 如申請專利範圍第14項所述的非暫態電腦可讀取記錄媒體,其中該預設臉部具有多個特徵點,且該些特徵點包括五官資訊,其中在該第一影像中的調整後的該已上妝臉部上定義該些區域的步驟包括: 取得對應該預設臉部的該些特徵點;以及 根據一第一演算法與該些特徵點的分布位置,在調整後的該已上妝臉部上定義出該些區域。
  18. 如申請專利範圍第14項所述的非暫態電腦可讀取記錄媒體,其中擷取該彩妝類別的該至少一目標彩妝類別的該些第一彩妝特徵的步驟包括: 識別該些區域中每一個區域所對應的該彩妝類別的該至少一目標彩妝類別,並根據該第一演算法擷取該至少一目標彩妝類別的該些第一彩妝特徵。
  19. 如申請專利範圍第14項所述的非暫態電腦可讀取記錄媒體,其中比對該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵以分類該些第一彩妝特徵的步驟包括: 根據一第二演算法判斷該些第一彩妝特徵與該資料庫中該些第二彩妝特徵之間的差異是否小於一差異門檻值,且當該些第一彩妝特徵與該資料庫中的該些第二彩妝特徵之間的差異非小於該差異門檻值時,判定該些第一彩妝特徵不同於該些第二彩妝特徵。
  20. 如申請專利範圍第16項所述的非暫態電腦可讀取記錄媒體,其中在根據新增至該資料庫的該第一彩妝樣式或該第二彩妝樣式,將對該已上妝臉部包含的所有彩妝樣式定義為該整體彩妝樣式,並儲存該整體彩妝樣式於該資料庫之中的步驟之後,更包括: 接收具一臉部的一第二影像,並偵測該第二影像中的該臉部; 接收一輸入訊號,且根據該輸入訊號將該資料庫中對應該輸入訊號的一第三彩妝樣式或對應該第一影像中的該已上妝臉部的該整體彩妝樣式套用至該第二影像中的該臉部以產生一輸出影像,其中該第三彩妝樣式為新增至該資料庫的該第一彩妝樣式與該第二彩妝樣式的至少其中之一;以及 顯示該輸出影像。
TW105118506A 2016-06-14 2016-06-14 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體 TWI573093B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW105118506A TWI573093B (zh) 2016-06-14 2016-06-14 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體
US15/620,827 US10360710B2 (en) 2016-06-14 2017-06-13 Method of establishing virtual makeup data and electronic device using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW105118506A TWI573093B (zh) 2016-06-14 2016-06-14 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體

Publications (2)

Publication Number Publication Date
TWI573093B TWI573093B (zh) 2017-03-01
TW201743282A true TW201743282A (zh) 2017-12-16

Family

ID=58766244

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105118506A TWI573093B (zh) 2016-06-14 2016-06-14 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體

Country Status (2)

Country Link
US (1) US10360710B2 (zh)
TW (1) TWI573093B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109299636A (zh) * 2017-07-25 2019-02-01 丽宝大数据股份有限公司 可标示腮红区域的身体信息分析装置
KR102339223B1 (ko) * 2017-08-22 2021-12-15 삼성전자주식회사 전자 장치 및 전자 장치에서 카메라 기능과 연관된 콘텐트 제공 방법
CN110136270A (zh) * 2018-02-02 2019-08-16 北京京东尚科信息技术有限公司 制作容妆数据的方法和装置
US10936175B2 (en) * 2018-02-02 2021-03-02 Perfect Corp. Systems and methods for implementing a pin mechanism in a virtual cosmetic application
JP6566373B1 (ja) * 2018-10-25 2019-08-28 ジャパンモード株式会社 施術支援システム
US10866716B2 (en) * 2019-04-04 2020-12-15 Wheesearch, Inc. System and method for providing highly personalized information regarding products and services
CN110992248B (zh) * 2019-11-27 2021-03-19 腾讯科技(深圳)有限公司 唇妆特效的显示方法、装置、设备及存储介质
CN113496459A (zh) * 2020-04-01 2021-10-12 华为技术有限公司 辅助化妆方法、终端设备、存储介质及程序产品
CN111553221B (zh) * 2020-04-21 2023-10-31 海信集团有限公司 一种数据处理方法及智能设备
CN112199018A (zh) * 2020-10-14 2021-01-08 维沃移动通信有限公司 图像处理方法、装置
CN112422817B (zh) * 2020-10-28 2022-04-12 维沃移动通信有限公司 图像处理方法及装置
USD965004S1 (en) * 2021-01-11 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
KR20230147649A (ko) * 2021-02-23 2023-10-23 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드 이미지 처리 방법, 장치, 전자 기기 및 기억 매체
CN114418837B (zh) * 2022-04-02 2023-06-13 荣耀终端有限公司 一种妆容迁移方法及电子设备
US11837019B1 (en) * 2023-09-26 2023-12-05 Dauntless Labs, Llc Evaluating face recognition algorithms in view of image classification features affected by smart makeup

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3912834B2 (ja) * 1997-03-06 2007-05-09 有限会社開発顧問室 顔画像の修正方法、化粧シミュレーション方法、化粧方法、化粧サポート装置及びファンデーション転写膜
TWI227444B (en) * 2003-12-19 2005-02-01 Inst Information Industry Simulation method for make-up trial and the device thereof
CN101557487B (zh) 2009-05-08 2014-08-13 上海银晨智能识别科技有限公司 具有人脸图像抓取功能的硬盘录像机及人脸图像抓取方法
CA2769583A1 (en) * 2009-08-04 2011-02-10 Vesalis Image-processing method for correcting a target image with respect to a reference image, and corresponding image-processing device
CN201726494U (zh) 2009-12-31 2011-01-26 新谊整合科技股份有限公司 利用图像色彩信息执行图像比对的装置与系统
JP2012181688A (ja) * 2011-03-01 2012-09-20 Sony Corp 情報処理装置、情報処理方法、情報処理システムおよびプログラム
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
CN103714225A (zh) * 2012-09-28 2014-04-09 由田新技股份有限公司 自动彩妆的信息系统及其进行上妆方法
US10321747B2 (en) * 2013-02-01 2019-06-18 Panasonic Intellectual Property Management Co., Ltd. Makeup assistance device, makeup assistance system, makeup assistance method, and makeup assistance program
JP6008323B2 (ja) * 2013-02-01 2016-10-19 パナソニックIpマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
JP6128309B2 (ja) * 2013-02-01 2017-05-17 パナソニックIpマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
GB2518589B (en) * 2013-07-30 2019-12-11 Holition Ltd Image processing
EP3039990B1 (en) * 2013-08-30 2019-07-24 Panasonic Intellectual Property Management Co., Ltd. Makeup assistance device, makeup assistance system, makeup assistance method, and makeup assistance program
US20160042557A1 (en) * 2014-08-08 2016-02-11 Asustek Computer Inc. Method of applying virtual makeup, virtual makeup electronic system, and electronic device having virtual makeup electronic system
KR102214918B1 (ko) * 2014-10-21 2021-02-10 삼성전자주식회사 얼굴 인식 방법 및 장치
US20160357578A1 (en) * 2015-06-03 2016-12-08 Samsung Electronics Co., Ltd. Method and device for providing makeup mirror

Also Published As

Publication number Publication date
TWI573093B (zh) 2017-03-01
US10360710B2 (en) 2019-07-23
US20170358116A1 (en) 2017-12-14

Similar Documents

Publication Publication Date Title
TWI573093B (zh) 建立虛擬彩妝資料的方法、具備建立虛擬彩妝資料之方法的電子裝置以及其非暫態電腦可讀取記錄媒體
US10726601B2 (en) System for beauty, cosmetic, and fashion analysis
JP7200139B2 (ja) 仮想顔化粧の除去、高速顔検出およびランドマーク追跡
JP6956389B2 (ja) メイクアップ支援装置およびメイクアップ支援方法
Wood et al. A 3d morphable eye region model for gaze estimation
JP4435809B2 (ja) 仮想化粧装置及びその方法
CN106682632B (zh) 用于处理人脸图像的方法和装置
TWI773096B (zh) 妝容處理方法、裝置、電子設備及儲存媒體
Kollias et al. Photorealistic facial synthesis in the dimensional affect space
WO2020078119A1 (zh) 模拟用户穿戴服装饰品的方法、装置和系统
US10452896B1 (en) Technique for creating avatar from image data
CN108846792B (zh) 图像处理方法、装置、电子设备及计算机可读介质
CN105210110A (zh) 美容辅助装置、美容辅助系统、美容辅助方法以及美容辅助程序
KR20230025906A (ko) 개선된 얼굴 속성 분류 및 그것의 사용을 위한 시스템들 및 방법들
US20220202168A1 (en) Digital makeup palette
CN111612897B (zh) 三维模型的融合方法、装置、设备及可读存储介质
KR20230110787A (ko) 개인화된 3d 머리 및 얼굴 모델들을 형성하기 위한 방법들 및 시스템들
US11321882B1 (en) Digital makeup palette
Khan et al. Digital makeup from internet images
KR20200071008A (ko) 2차원 이미지 처리 방법 및 이 방법을 실행하는 디바이스
Yi et al. Artistic stylization of face photos based on a single exemplar
CN111557022B (zh) 二维图像处理方法及执行所述方法的设备
US20230101374A1 (en) Augmented reality cosmetic design filters
KR20240032981A (ko) 아이브로우 디자인의 프리젠테이션 생성을 위한 시스템
WO2023066843A1 (en) Neural rendering of makeup based on in vitro cosmetic analysis