JP2018185784A - 頬紅案内装置及びその方法 - Google Patents

頬紅案内装置及びその方法 Download PDF

Info

Publication number
JP2018185784A
JP2018185784A JP2017166815A JP2017166815A JP2018185784A JP 2018185784 A JP2018185784 A JP 2018185784A JP 2017166815 A JP2017166815 A JP 2017166815A JP 2017166815 A JP2017166815 A JP 2017166815A JP 2018185784 A JP2018185784 A JP 2018185784A
Authority
JP
Japan
Prior art keywords
blusher
intersection
point
face
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017166815A
Other languages
English (en)
Other versions
JP6738780B2 (ja
Inventor
軾榮 沈
Shyh-Yong Shen
軾榮 沈
敏昶 季
Min-Chang Chi
敏昶 季
承軒 ▲蔡▼
承軒 ▲蔡▼
Cheng-Hsuan Tsai
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cal Comp Big Data Inc
Original Assignee
Cal Comp Big Data Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cal Comp Big Data Inc filed Critical Cal Comp Big Data Inc
Publication of JP2018185784A publication Critical patent/JP2018185784A/ja
Application granted granted Critical
Publication of JP6738780B2 publication Critical patent/JP6738780B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/02Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment

Abstract

【課題】ユーザに頬紅を塗るように案内する頬紅案内装置を提供する。【解決手段】頬紅案内装置100は、画像取込装置110、処理装置130及びディスプレイ装置120を含む。画像取込装置は、ユーザの顔の画像を取込む。処理装置は、ユーザの顔の画像を受信し、ユーザの顔の画像により複数の顔の特徴点を取得する。処理装置は、少なくとも1つの頬紅案内ブロックを得るために、顔の特徴点により、計算を実施する。ディスプレイ装置は、ユーザの顔の画像及び対応する頬紅案内ブロックを表示し、頬紅案内ブロックにより、ユーザに化粧をするように案内する。【選択図】図2

Description

本発明は顔の特徴認識技術に関するものであり、特に顔の認識に基づく頬紅案内装置及びその方法に関するものである。
美への愛情は女性の気質であり、多くの女性は化粧により顔の特徴を強める。しかしながら、化粧の技術は生来のものではなく、化粧の効果は多くの美容の練習後に向上することができる。
誰か化粧の技術を学びたい場合、学習者はインターネット上の画像から化粧の技術を学ぶことができる。しかしながら、画像から学んだ化粧の技術は、実地に、ずれがある。したがって、近代的装置により化粧の技術を学ぶ方法は、製造業者により関心のある技術的課題である。
本発明は、頬紅案内装置及び頬紅案内方法を提供し、ユーザの顔の画像により、頬紅案内ブロックが計算され、表示され、それゆえに、便利な対話型化粧教育を提供するように、頬紅案内装置により提供されるプロンプトにより、ユーザは化粧することができる。
本発明の実施態様は、画像取込装置、処理装置及びディスプレイ装置を含む頬紅案内装置を提供する。画像取込装置は、ユーザの顔の画像を取込み、処理装置は、前記ユーザの顔の画像を受信し、前記ユーザの顔の画像により複数の顔の特徴点を取得する。さらに、処理装置は、少なくとも1つの頬紅案内ブロックを得るために、前記顔の特徴点により、計算を実施する。ディスプレイ装置は、前記ユーザの顔の画像及び対応する前記頬紅案内ブロックを、表示し、前記頬紅案内ブロックにより、前記ユーザに化粧をするように案内する。
本発明の実施態様は、以下のステップを含む頬紅案内方法を提供する。ユーザの顔の画像を取り込み、前記ユーザの顔の画像により複数の顔の特徴点を取得する。少なくとも1つの頬紅案内ブロックを得るために、前記顔の特徴点により、計算を実施し、前記ユーザの顔の画像、対応する前記頬紅案内ブロックを、表示し、前記頬紅案内ブロックにより、前記ユーザに化粧をするように案内する。
上述の説明により、本発明の頬紅案内装置及び頬紅案内方法は、ユーザの顔の画像により、頬紅案内ブロックを計算して表示することができる。したがって、ユーザは、頬紅を塗るべき顔の領域を学び、化粧プロセスにおいて、頬紅の位置を明確に知る。その上、頬紅案内装置は、更に、ユーザに頬紅を塗るスタイル及び方法を指示するように、頬紅案内線を提供することができる。このように、たとえ、ユーザが化粧に精通していなくとも、ユーザは、便利な会話型化粧教育の提供となるように、頬紅案内装置により提供されるプロンプトにより、なお、化粧をすることができる。
本発明の上述の及び他の特徴と利点を理解できるようにするために、以下、幾つかの例示的実施形態を挙げて図面と共に詳細な内容を説明する。
本発明の実施形態による頬紅案内装置のディスプレイ・インターフェースの模式図である。 本発明の実施形態による頬紅案内装置のシステムブロック図である。 本発明の実施形態による頬紅案内ブロックの模式図である。 本発明の別の実施形態による頬紅案内ブロックの模式図である。 本発明の実施形態による頬紅案内線の模式図である。 本発明の実施形態による頬紅案内方法を例示するフローチャートである。 本発明の実施形態による頬紅案内ブロックを得るための詳細なフローチャートである。 本発明の別の実施形態による頬紅案内ブロックを得るための詳細なフローチャートである。
図1は、本発明の実施形態による頬紅案内装置のディスプレイ・インターフェースの模式図であり、図2は、本発明の実施形態による頬紅案内装置のシステムブロック図である。図1及び図2を参照するに、本実施形態において、リップ・グロス案内装置100は、画像取込装置110、マルチメディアディスプレイ装置120及び処理装置130を含む。
画像取込装置110は、ユーザの画像、特に、ユーザの顔の画像を取込むために用いられる。画像取込装置110は、本開示に限定されないけれども、例えば、ディスプレイ装置120及び処理装置130に有線又は無線方法で接続された内蔵カメラ、外部携帯電話、外部カメラである。
ディスプレイ装置120は、マルチメディア情報及びユーザの顔の画像をリアルタイムで表示することができる。例えば、ディスプレイ装置120は、ユーザの顔の画像及びユーザが選択するための頬紅のオプションのタイプ及び色を表示する。本例示的実施形態において、ディスプレイ装置120は、高反射性を有する材料(例えば、鏡)の後ろに配置され、有機発光ダイオード(OLED)で作られている。このように、本発明は以下のようには限定されないけれども、ユーザは自身の顔を鏡により見ることができ、ディスプレイ装置120は、ユーザが見て選択のタッチをするための、鏡の上の関連情報を表示することができる。本実施形態の頬紅案内装置100は、化粧台の上に配置される装置とすることができ、頬紅案内装置100のディスプレイ装置120は、鏡の後ろに配置することができ、ディスプレイ装置120により表示されるテキスト又は画像はユーザが見るために、鏡を通過することができる。他の実施形態において、頬紅案内装置100は、また、スマートフォン、タブレットPCなどのような消費電子製品又はポータブル鏡と結合したポータブル鏡ボックスであり得る。
処理装置130は、ユーザの顔のプロファイルに関連する複数のユーザの顔の特徴点を得るように、画像取込装置110により取込んだユーザの顔の画像により、計算を実施する。本例示的実施形態の実施において、処理装置130は、中央処理装置(CPU)、マイクロプロセッサ、特定用途向け集積回路(ASIC)、プログラム可能論理回路(PLD)又は他の類似の装置とすることができる。処理装置130は、頬紅案内ブロックを提供するために、様々な必要なソフトウェアプログラム及び/又は命令セットを実行するように構成される。本実施形態において、処理装置130は、ユーザの顔の194の特徴点を検出し解析するために、Dlibの顔のランドマークを用いるシステムを実行する。他の場合において、ユーザの顔の特徴点は、ユーザの顔の194の特徴点を解析することだけにより、又は、顔の特徴点を検出するために他のアルゴリズムを用いることにより、得ることができる。
本実施形態において、ユーザが鏡をのぞき込みながら化粧する時に、ディスプレイ装置120は、ユーザの顔画像を表示し、リアルタイムで顔の特徴点を解析することができる。本発明の便利な会話型頬紅案内装置を提供するために、ディスプレイ装置120は、頬紅を塗るためにユーザに位置及び方法を指示するために、頬紅案内ブロックを、更に表示する。このように、ディスプレイ装置120により表示された頬紅案内ブロックの案内により、ユーザの顔の対応する位置に、ユーザは頬紅を塗ることができる。
具体的に言うと、図3を参照するに、図3は本発明の実施形態による頬紅案内ブロックの模式図である。画像取込装置110がユーザの顔画像を取込んだ後に、処理装置130は、ユーザの顔画像により、ユーザの顔の複数の特徴点を得る。例えば、ユーザの顔の左側を取ると、処理装置130により得たユーザの顔の特徴点は、少なくとも、顔の点FP0、目の正面点FP1(すなわち、目の涙管)、目尻点FP2、鼻翼点FP3を含む。さらに、なお、本例示的実施形態の顔の点FP0は、ユーザの顔の周辺に配置され、目尻点FP2に平行である。例えば、本実施形態において、処理装置130がユーザの顔の特徴点を得た後に、処理装置130は、顔の特徴点の座標(x、y)を指定し、顔の点FP0及び目尻点FP2のy座標の値は、同じである。
処理装置130により得たユーザの顔の特徴点は、それらに限定されない。他の実施形態において、処理装置130により得た顔の特徴点の数は、119、194などとすることができる。さらに、例えば、194の顔の特徴点の実装において、処理装置130は、例えば、顔の点FP0の番号は0であり、目の正面点FP1の番号は39であり、目尻点FP2の番号は36であり、鼻翼点FP3の番号は39であるが、顔の特徴点の全てに0〜139により番号を付けるように、顔の特徴点の各々に番号を付けることができる。目の中間点は、目の正面点FP1(番号39)及び目尻点FP2(番号36)の中央に配置される。しかしながら、本発明は、それらに限定されない。
顔の特徴点が得られた後に、処理装置130は、顔の特徴点の位置により、更に、ユーザに適切な頬紅案内ブロックA1を設定することができる。例えば、本発明の一実施形態において、処理装置130は、目の正面点FP1及び目尻点FP2の座標により、目の正面点FP1及び目尻点FP2の目の中間点FP4を計算し、目の中間点FP4により、目の中間点FP4を通過する第1の垂直線L1(すなわち、第1の垂直線L1のx座標の値は、目の中間点FP4のx座標の値に等しい)を計算する。次いで、処理装置130は、鼻翼点FP3により、鼻翼点FP3を通過する第2の水平線L2(すなわち、第2の水平線L2のy座標の値は、鼻翼点FP3のy座標の値に等しい)を計算する。処理装置130は、頬紅案内ブロックA1を、第1の垂直線L1、第2の水平線L2及び顔の点FP0に囲まれて配置されたブロックであるように設定し、頬紅案内ブロックA1をディスプレイ装置120に表示する。すなわち、図3の実施形態において、頬紅案内ブロックA1の位置は、第1の垂直線L1の左で、第2の水平線L2の上に配置されるが、顔の点FP0の位置を越えない。このように、化粧に精通していないユーザでも、また、頬紅案内ブロックA1に対応する位置の顔の上に、頬紅を塗ることができる。
なお、ユーザの右の顔を例として取る場合、処理装置130は、頬紅案内ブロックの位置を計算するために、右の目の正面点、目尻点及び右の顔の鼻翼点により、第1の垂直線及び第2の水平線を計算することができる。したがって、頬紅案内ブロックの位置は、第1の垂直線の右で、第2の水平線の上に配置されるが、顔の点の位置を越えない。
図4は、本発明の別の実施形態による頬紅案内ブロックの模式図である。図3に類似する図4を参照するに、処理装置130は、目の正面点FP1、目尻点FP2及び鼻翼点FP3により、第1の垂直線L1及び第2の水平線L2を計算することができる。その差異は、処理装置130が、更に、顔の点FP0及び鼻翼点FP3を通過する第3の直線L3、並びに、目尻点FP2を通過し第3の直線L3に垂直な第4の直線L4を計算することができることである。次いで、処理装置130は、第3の直線L3及び第1の垂直線L1の交差点を計算し、その交差点を第1の交差点P1として設定する。さらに、処理装置130は、また、第4の直線L4及び第3の直線L3の交差点を計算し、その交差点を第2の交差点P2として設定する。第2の交差点P2の取得後に、処理装置130は、第2の交差点P2と顔の点FP0との間の中間点を計算し、第3の交差点P3を取得することができる。処理装置130は、また、第1の交差点P1と第3の交差点P3との間の中間点を計算し、第4の交差点P4を取得することができる。処理装置130は、第1の交差点P1、第3の交差点P3及び第4の交差点P4により、楕円の領域を得るが、処理装置130は、第1の交差点P1及び第3の交差点P3を楕円の領域の長軸の2つの端点として取り、第4の交差点P4を楕円の領域の中心として取り、第4の直線L4のある長さを楕円の領域の短軸として取る。このように、処理装置130は、第1の交差点P1、第3の交差点P3及び第4の交差点P4により形成される楕円の領域を、頬紅案内ブロックA2として設定する。すなわち、図4の実施形態により得られる頬紅案内ブロックA2は楕円方程式を満たす。

(h、k)は中間点P4の(x、y)座標である。「a」は楕円の長軸の半分であり、すなわち、第1の交差点P1と第3の交差点P3との間の長さの半分である。「b」は楕円の短軸の半分である。このように、化粧に精通していないユーザでも、また、頬紅案内ブロックA2に対応する位置の顔の上に、頬紅を塗ることができる。
本発明において、ユーザの動作をより容易にさせるために、頬紅を塗る技術を指示するように、頬紅案内線を頬紅案内ブロックに、更に、設定する。ユーザは、ディスプレイ装置120において、好ましい頬紅を塗る方法を選択することができ、又は、処理装置130は、ユーザの顔の形状に適切な頬紅を塗る方法を選択する。図5は、本発明の実施形態による頬紅案内線の模式図である。図5に示すように、処理装置130は、頬紅案内ブロックA内に、ユーザにより選択した頬紅案内線BLを表示することができる。例えば、本実施形態において、頬紅案内ブロックA内の頬紅案内線BLは、本発明はそれに限定されないけれども、持ち上げ三角塗り方法である。
図6は、本発明の実施形態による頬紅案内方法を例示するフローチャートである。図2及び図6を参照するに、ユーザが、頬紅案内装置100により、頬紅を塗るための案内を得たい時に、最初に、ステップS610において、画像取込装置110は、ユーザの顔の画像を取込み、取込んだユーザの顔の画像を処理装置130へ送信する。次いで、ステップS620において、処理装置130は、複数の顔の特徴点を得るために、取込んだユーザの顔の画像を計算する。さらに、ステップS630において、処理装置130は、ユーザの顔に対応する頬紅案内ブロックを得るために、顔の特徴点を計算する。最後に、ステップS640において、処理装置130は、画像取込装置110により取込んだユーザの顔の画像、及び、処理装置130により計算した頬紅案内ブロックを、ディスプレイ装置120へ送信し、ディスプレイ装置120は、ユーザの顔の画像、頬紅案内ブロック及び頬紅案内線を表示する。
なお、本例示的実施形態において、頬紅案内方法は、ユーザの顔の画像を取込んで、頬紅案内ブロックを、リアルタイムの方法で、計算することであるため、ステップS610からステップS640までは、ユーザが動作を中止するまで、繰り返し実行される。
さらに、本例示的実施形態の頬紅案内方法は、ユーザにより選択されるオプションにより、頬紅案内線のパターンを調整することができる。さらに、ユーザは、また、ディスプレイ装置120において表示される、頬紅の色、テクスチャーを、クリックし、選択することができ、ディスプレイ装置120で、同じものをプレビューする。他の例示的実施形態において、処理装置130は、ユーザにより選択された色及びテクスチャーにより、頬紅案内ブロックを細かく調整することができ、又は、頬紅案内線のパターンを変更することができ、同じものをディスプレイ装置120に表示することができる。
図7及び図8は、本発明の異なる実施形態による頬紅案内ブロックを得るための、それぞれ、詳細なフローチャートである。本例示的実施形態において、図3及び図7を参照するに、ステップS630において、処理装置130が頬紅案内ブロックA1を得るために、顔の特徴点を計算する時、最初にステップS710が実行され、ステップS710により、処理装置130は、目の正面点FP1及び目尻点FP2により、目の中間点FP4を計算する。次いで、ステップS720において、処理装置130は、更に、目の中間点FP4により、目の中間点FP4を通過する第1の垂直線L1を計算する。ステップS730において、処理装置130は、鼻翼点FP3により、鼻翼点FP3を通過する第2の水平線L2を計算する。ステップS740において、処理装置130は、第1の垂直線L1及び第2の水平線L2により、頬紅案内ブロックA1を計算する。詳細な計算方法は、図3の実施形態において、説明されているので、それらの詳細は繰り返さない。図7の流れにより、処理装置130は、頬紅案内ブロックA1を計算することができる。したがって、ユーザは、ディスプレイ装置120により、計算した頬紅案内ブロックA1を見ることができ、頬紅案内ブロックA1に対応する位置の顔の上に頬紅を塗ることができる。
別の例示的実施形態において、図4及び図8を参照するに、ステップS630において、処理装置130が頬紅案内ブロックA2を得るために、顔の特徴点を計算する時、ステップS710からS730までは、図7と同じなので、それらの詳細は繰り返さない。その差異は、本例示的実施形態において、第1の垂直線L1及び第2の水平線L2により、頬紅案内ブロックA1が得られるだけでなく、ステップS840において、処理装置130は、更に、顔の点FP0及び鼻翼点FP3を通過する第3の直線L3を計算し、第3の直線L3及び第1の垂直線L1の交差点を第1の交差点P1として設定する。ステップS850において、処理装置130は、目尻点FP2を通過し第3の直線L3に垂直な第4の直線L4を計算し、第4の直線L4及び第3の直線L3の交差点を第2の交差点P2として設定する。次いで、ステップS860において、処理装置130は、第2の交差点P2と顔の点FP0との間の中間点を計算し、その中間点を第3の交差点P3として設定する。処理装置130は、第3の交差点P3と第1の交差点P1との間の中間点を第4の交差点P4として設定する。最後に、ステップS870において、処理装置130は、第1の交差点P1、第3の交差点P3及び第4の交差点P4により、頬紅案内ブロックA2を計算する。それらの詳細な計算方法は、図4の実施形態において、説明されているので、その詳細は繰り返さない。図8のフローにより、処理装置130は、頬紅案内ブロックA2を計算することができる。したがって、ユーザは、計算された頬紅案内ブロックA2をディスプレイ装置120により見ることができ、頬紅案内ブロックA2に対応する位置で、顔の上に頬紅を塗ることができる。
要約すれば、本発明の頬紅案内装置及び頬紅案内方法は、ユーザが、頬紅を塗るべき顔の領域を学ぶことができ、化粧プロセスにおいて、頬紅の位置を明確に知るように、ユーザの顔の画像により、頬紅案内ブロックを計算して表示することができる。その上、頬紅案内装置は、更に、ユーザに頬紅を塗るスタイル及び方法を指示するように、頬紅案内線を提供することができる。このように、たとえ、ユーザが化粧に精通していなくとも、ユーザは、便利な会話型化粧教育の提供となるように、頬紅案内装置により提供されるプロンプトにより、なお、化粧をすることができる。
本発明の範囲と精神を逸脱しない範囲で、様々な変更や修正を本発明の構造にすることができることは、当業者には明らかであろう。上述に鑑みて、本発明は提供された本開示の変更や修正をカバーし、それらは、以下の特許の請求範囲及びそれらの均等物の範囲内に収まることを意図している。
本発明は、頬紅案内装置及び頬紅案内方法を提供し、ユーザの顔の画像により、頬紅案内ブロックが計算され、表示され、それゆえに、便利な対話型化粧教育を提供するように、頬紅案内装置により提供されるプロンプトにより、ユーザは化粧することができる。
100 頬紅案内装置
110 画像取込装置
120 マルチメディアディスプレイ装置
130 処理装置
S610〜S640 頬紅案内方法のステップ
S710〜S740、S840〜S870 頬紅案内ブロックを得るステップ
A、A1、A2 頬紅案内ブロック
BL 頬紅案内線
FP0 顔の点
FP1 目の正面点
FP2 目尻点
FP3 鼻翼点
FP4 目の中間点
L1 第1の垂直線
L2 第2の水平線
L3 第3の直線
L4 第4の直線
P1〜P4 交差点

Claims (10)

  1. ユーザの顔の画像を取込む、画像取込装置と、
    前記ユーザの顔の画像を受信し、前記ユーザの顔の画像により複数の顔の特徴点を取得し、少なくとも1つの頬紅案内ブロックを得るために、前記顔の特徴点により、計算を実施する、処理装置と、
    前記ユーザの顔の画像及び対応する前記頬紅案内ブロックを、表示し、前記頬紅案内ブロックにより、前記ユーザに化粧をするように案内する、ディスプレイ装置と、を備える、頬紅案内装置。
  2. 前記顔の特徴点は、鼻翼点、目の正面点、目尻点、顔の点を少なくとも備え、該顔の点は、ユーザの顔の周辺に配置され、前記目尻点に平行であり、
    前記処理装置は、前記目の正面点及び前記目尻点により、目の中間点を計算し、該目の中間点により、前記目の中間点を通過する第1の垂直線を計算し、かつ、前記鼻翼点により、前記鼻翼点を通過する第2の水平線を計算し、
    前記処理装置は、前記第1の垂直線、前記第2の水平線及び前記顔の点に囲まれた領域を頬紅案内ブロックとして設定する、請求項1に記載の頬紅案内装置。
  3. 前記処理装置は、前記顔の点及び前記鼻翼点を通過する第3の直線を取得し、該第3の直線及び前記第1の垂直線の交差点を第1の交差点として設定し、
    前記処理装置は、前記第3の直線に垂直であり前記目尻点を通過する第4の直線を計算し、該第4の直線及び前記第3の直線の交差点を第2の交差点として設定し、
    前記処理装置は、前記第2の交差点と前記顔の点との間の中間点を計算し、第3の交差点を取得し、前記処理装置は、前記第1の交差点と前記第3の交差点との間の中間点を計算し、第4の交差点を取得し、
    前記処理装置は、前記第1の交差点、前記第3の交差点及び前記第4の交差点により楕円の領域を取得し、該楕円の領域を前記頬紅案内ブロックとして設定し、前記第1の交差点と前記第3の交差点との間の接続線は楕円の領域の長軸であり、前記第4の交差点は楕円の領域の中心である、請求項2に記載の頬紅案内装置。
  4. 前記ディスプレイ装置は、前記頬紅案内ブロック内に、頬紅案内線を表示する、請求項1に記載の頬紅案内装置。
  5. 前記画像取込装置は、前記頬紅案内ブロックを取得し、前記ユーザの顔の画像を表示するように、前記ユーザの顔の画像をリアルタイムで取り込み、前記顔の特徴点をリアルタイムで計算する、請求項1に記載の頬紅案内装置。
  6. ユーザの顔の画像を取り込むステップと、
    前記ユーザの顔の画像により複数の顔の特徴点を取得するステップと、
    少なくとも1つの頬紅案内ブロックを得るために、前記顔の特徴点により、計算を実施するステップと、
    前記顔の画像及び対応する前記頬紅案内ブロックを、表示し、前記頬紅案内ブロックにより、前記ユーザに化粧をするように案内するステップと、を有する、頬紅案内方法。
  7. 前記顔の特徴点は、鼻翼点、目の正面点、目尻点、顔の点を少なくとも備え、該顔の点は、ユーザの顔の周辺に配置され、前記目尻点に平行であり、
    前記頬紅案内ブロックを得るために、前記顔の特徴点により、計算を実施する前記ステップは、
    目の正面点及び前記目尻点により、目の中間点を計算し、該目の中間点により、前記目の中間点を通過する第1の垂直線を計算するステップと、
    前記鼻翼点により、前記鼻翼点を通過する第2の水平線を計算するステップと、
    前記第1の垂直線、前記第2の水平線及び前記顔の点に囲まれた領域を前記頬紅案内ブロックとして設定するステップと、を有する、請求項6に記載の頬紅案内方法。
  8. 前記顔の点及び前記鼻翼点を通過する第3の直線を取得するステップであって、該第3の直線及び前記第1の垂直線の交差点を第1の交差点として設定する、ステップと、
    前記第3の直線に垂直であり前記目尻点を通過する第4の直線を計算するステップであって、該第4の直線及び前記第3の直線の交差点を第2の交差点として設定する、ステップと、
    前記第2の交差点と前記顔の点との間の中間点を計算し、第3の交差点を取得するステップと、
    前記第1の交差点と前記第3の交差点との間の中間点を計算し、第4の交差点を取得するステップと、
    前記第1の交差点、前記第3の交差点及び前記第4の交差点により楕円の領域を取得し、該楕円の領域を前記頬紅案内ブロックとして設定するステップと、を更に有し、前記第1の交差点と前記第3の交差点との間の接続線は楕円の領域の長軸であり、前記第4の交差点は楕円の領域の中心である、請求項7に記載の頬紅案内方法。
  9. 前記頬紅案内ブロック内に、頬紅案内線を表示するステップを更に有する、請求項7に記載の頬紅案内方法。
  10. 前記頬紅案内ブロックを取得し、前記ユーザの顔の画像を表示するように、前記ユーザの顔の画像をリアルタイムで取り込み、前記顔の特徴点をリアルタイムで計算する、請求項7に記載の頬紅案内方法。
JP2017166815A 2017-04-24 2017-08-31 頬紅案内装置及びその方法 Expired - Fee Related JP6738780B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201710270472.2 2017-04-24
CN201710270472.2A CN108734070A (zh) 2017-04-24 2017-04-24 腮红指引装置及方法

Publications (2)

Publication Number Publication Date
JP2018185784A true JP2018185784A (ja) 2018-11-22
JP6738780B2 JP6738780B2 (ja) 2020-08-12

Family

ID=59626429

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017166815A Expired - Fee Related JP6738780B2 (ja) 2017-04-24 2017-08-31 頬紅案内装置及びその方法

Country Status (5)

Country Link
US (1) US10607503B2 (ja)
EP (1) EP3396586A1 (ja)
JP (1) JP6738780B2 (ja)
KR (1) KR102152296B1 (ja)
CN (1) CN108734070A (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7139638B2 (ja) * 2018-03-22 2022-09-21 カシオ計算機株式会社 報知装置、報知方法及び報知プログラム
CN109949237A (zh) * 2019-03-06 2019-06-28 北京市商汤科技开发有限公司 图像处理方法及装置、图像设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010211308A (ja) * 2009-03-06 2010-09-24 Fujifilm Corp メイクアップアドバイス装置、メイクアップアドバイス方法及びプログラム
JP2012113747A (ja) * 2007-08-10 2012-06-14 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
US20130169827A1 (en) * 2011-12-28 2013-07-04 Samsung Eletronica Da Amazonia Ltda. Method and system for make-up simulation on portable devices having digital cameras
JP2014023127A (ja) * 2012-07-23 2014-02-03 Sharp Corp 情報表示装置、情報表示方法、制御プログラム、および記録媒体
JP2015197710A (ja) * 2014-03-31 2015-11-09 株式会社メガチップス 化粧支援装置およびプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009064423A (ja) * 2007-08-10 2009-03-26 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
JP5991536B2 (ja) * 2013-02-01 2016-09-14 パナソニックIpマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
EP2953090A4 (en) * 2013-02-01 2016-05-25 Panasonic Ip Man Co Ltd MAKEUP AID, MAKEUP AID, MAKEUP ASSISTANCE AND MAKEUP ASSISTANCE
US20160042224A1 (en) * 2013-04-03 2016-02-11 Nokia Technologies Oy An Apparatus and Associated Methods
CN104380339B (zh) * 2013-04-08 2018-11-30 松下电器(美国)知识产权公司 图像处理装置、图像处理方法、以及介质
CN104599297B (zh) * 2013-10-31 2018-07-10 厦门美图网科技有限公司 一种对人脸自动上腮红的图像处理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012113747A (ja) * 2007-08-10 2012-06-14 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
JP2010211308A (ja) * 2009-03-06 2010-09-24 Fujifilm Corp メイクアップアドバイス装置、メイクアップアドバイス方法及びプログラム
US20130169827A1 (en) * 2011-12-28 2013-07-04 Samsung Eletronica Da Amazonia Ltda. Method and system for make-up simulation on portable devices having digital cameras
JP2014023127A (ja) * 2012-07-23 2014-02-03 Sharp Corp 情報表示装置、情報表示方法、制御プログラム、および記録媒体
JP2015197710A (ja) * 2014-03-31 2015-11-09 株式会社メガチップス 化粧支援装置およびプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
波川千晶, 外2名: ""実践型の3次元メイクアップアドバイスシステム"", VISUAL COMPUTING グラフィクスとCAD 合同シンポジウム2003 予稿集, JPN6020011093, 19 June 2003 (2003-06-19), JP, pages 81 - 86, ISSN: 0004238839 *

Also Published As

Publication number Publication date
EP3396586A1 (en) 2018-10-31
CN108734070A (zh) 2018-11-02
US10607503B2 (en) 2020-03-31
JP6738780B2 (ja) 2020-08-12
KR102152296B1 (ko) 2020-09-07
US20180308384A1 (en) 2018-10-25
KR20180119085A (ko) 2018-11-01

Similar Documents

Publication Publication Date Title
US20210177124A1 (en) Information processing apparatus, information processing method, and computer-readable storage medium
US10342317B2 (en) Eyebrow shape guide device and method thereof
CN110363867B (zh) 虚拟装扮系统、方法、设备及介质
US8988686B2 (en) Systems, devices, and methods for providing products and consultations
KR102172988B1 (ko) 아이라이너-착용 가이드 장치 및 방법
WO2017130158A1 (en) Virtually trying cloths on realistic body model of user
US10446052B2 (en) Lip gloss guide and method thereof
CN109471533B (zh) 一种vr/ar教室内的学生端系统及其使用方法
JP6731896B2 (ja) リップ・グロス案内装置及びその方法
KR20120066773A (ko) 휴대용 단말기를 이용한 가상 화장 방법
JP6738780B2 (ja) 頬紅案内装置及びその方法
KR20170090057A (ko) 화장품 테스트 시스템 및 방법
JP2015197710A (ja) 化粧支援装置およびプログラム
KR20190046592A (ko) 신체 정보 분석 장치 및 얼굴형 모의 방법
KR101719927B1 (ko) 립 모션을 이용한 실시간 메이크업 미러 시뮬레이션 장치
CN112912925A (zh) 程序、信息处理装置、定量化方法以及信息处理系统
JP6761407B2 (ja) 身体情報分析装置および顔形診断方法
CN115171182A (zh) 一种妆容指导方法、装置、设备及介质
CN115187703A (zh) 一种眉妆指导方法、装置、设备及介质
CN113486695A (zh) 一种化妆镜的妆容辅助方法及化妆镜
KR20240009440A (ko) 컴퓨터-기반 신체 부위 분석 방법들 및 시스템들
JPWO2016051430A1 (ja) 入出力装置、入出力プログラム、および入出力方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200324

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200618

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200707

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200720

R150 Certificate of patent or registration of utility model

Ref document number: 6738780

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees