JP2019037746A - アイライナー描画ガイド装置および方法 - Google Patents

アイライナー描画ガイド装置および方法 Download PDF

Info

Publication number
JP2019037746A
JP2019037746A JP2018038387A JP2018038387A JP2019037746A JP 2019037746 A JP2019037746 A JP 2019037746A JP 2018038387 A JP2018038387 A JP 2018038387A JP 2018038387 A JP2018038387 A JP 2018038387A JP 2019037746 A JP2019037746 A JP 2019037746A
Authority
JP
Japan
Prior art keywords
eyeliner
eye
point
feature points
points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018038387A
Other languages
English (en)
Other versions
JP6612913B2 (ja
Inventor
軾榮 沈
Shyh-Yong Shen
軾榮 沈
敏昶 季
Min-Chang Chi
敏昶 季
承軒 ▲蔡▼
承軒 ▲蔡▼
Cheng-Hsuan Tsai
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cal Comp Big Data Inc
Original Assignee
Cal Comp Big Data Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cal Comp Big Data Inc filed Critical Cal Comp Big Data Inc
Publication of JP2019037746A publication Critical patent/JP2019037746A/ja
Application granted granted Critical
Publication of JP6612913B2 publication Critical patent/JP6612913B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • G06V40/175Static expression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D2200/00Details not otherwise provided for in A45D
    • A45D2200/10Details of applicators
    • A45D2200/1072Eyeliners
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Ophthalmology & Optometry (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

【課題】アイライナー描画ガイド装置によって提供される助言に従ってアイライナーを引き、簡素かつ相互作用的に化粧を教示することができるアイライナー描画ガイド装置および方法を提供する。【解決手段】アイライナー描画ガイド装置は、画像撮像装置110、プロセッサおよび表示装置を含む。画像撮像装置110によりユーザの顔画像を撮像する。プロセッサにより、ユーザの顔画像に従って複数の目の特徴点を取得し、目の特徴点およびアイライナータイプに従って計算を実施することにより、アイライナーガイド領域を取得する。表示装置により、ユーザの顔画像および対応するアイライナーガイド領域を表示して、アイライナーガイド領域に従ってユーザの化粧を誘導する。【選択図】図1

Description

本発明は、顔の特徴認識技術に関するものであり、より具体的には、アイライナー描画ガイド装置および方法に関する。
女性の生まれながらの本能として、美容への関心が挙げられる。多くの女性が顔の特徴を化粧を通じて強調させている。例えば、唇、目、眉毛等のような場所に化粧をすることによって見た目が強調または変化させることができる。しかしながら、化粧は生来のスキルのうちの1つではない。化粧による効果を向上させたい者は、多くを学ぶと共に定期的に実践することで、向上させることができる。
現在、化粧を学ぶ者は、関連する画像/動画をインターネットから得ることによって化粧に関する情報を取得することができる。それにも関わらず、関連する画像/動画をインターネットから取得する学習アプローチは、実践では、予測した結果からのズレまたは失敗に繋がる場合が多い。特に、目の周囲にアイシャドウまたはアイライナーを引く際にズレまたは失敗が発生しやすい。従って、現代的な装置によって化粧を学ぶための方法の発見が、新規な技術の開発を通じて製造者によって解決されるべき課題の1つである。
本発明は、アイライナー描画ガイド装置および方法を提供するものであり、これを使用して、ユーザの顔画像に従って好適なアイライナー描画ガイド領域を表示することで、ユーザは、アイライナー描画ガイド装置によって提供される助言に従ってアイライナーを引くことができる。結果として、簡素かつ相互作用的に化粧を教示することができる。
本発明のアイライナー描画ガイド装置は、画像撮像装置、プロセッサおよび表示装置を含む。画像撮像装置は、少なくともユーザの目の部分を含むユーザの顔画像を撮像する。プロセッサは、顔画像を受信し、顔画像に従って複数の目の特徴点を取得し、また目の特徴点およびアイライナータイプに従って計算を実施することによってアイライナーガイド領域を取得するように構成する。表示装置は、ユーザの顔画像および対応するアイライナーガイド領域を表示して、アイライナーガイド領域に従って化粧をするためにユーザを誘導する。
本発明のアイライナー描画ガイド方法は、以下のステップを含む。少なくともユーザの目の部分を含むユーザの顔画像を撮像する。ユーザの顔画像に従って複数の目の特徴点を取得し、目の特徴点およびアイライナータイプに従って計算を実施することによってアイライナーガイド領域を取得する。更に、ユーザの顔画像およびそれに対応するアイライナーガイド領域を表示して、アイライナーガイド領域に従って化粧をするためにユーザを誘導する。
上記の内容に基づいて、本発明によって提供されるアイライナー描画ガイド装置およびアイライナー描画ガイド方法によって、ユーザの顔画像における目の部分に従ってアイライナーガイド領域を計算し表示することで、ユーザは、化粧のためのより好適なアイライナー描画領域を認識することができ、これによりユーザは適切にアイライナーを引くことができる。2つの隣接する瞼の特徴点およびアイライナータイプに対応するアイライナー幅値を利用することによって生成されるアイライナーガイド領域に加えて、目尻の特徴点およびアイライナータイプに対応する目尻のアイライナー幅を利用することによって、異なるアイライナータイプに対応するアイライナー端部ガイド点を作成することもでき、アイライナーガイド領域により、異なる形状の目尻を表示することができる。この方法では、ユーザが化粧に慣れていなくとも、ユーザは、アイライナー描画ガイド装置によって提供される助言に従ってアイライナーを引くことができる。結果として、簡素かつ相互作用的に化粧を教示することができる。
本発明の上記の特徴および利点をより理解しやすくするために、図面を伴う複数の実施形態を以下に詳細に説明する。
本発明の一実施形態における、アイライナー描画ガイド装置の概略図である。 本発明の一実施形態における、アイライナー描画ガイド装置のシステムブロック図である。 本発明の一実施形態における、アイライナータイプの概略図である。 本発明の一実施形態における、アイライナー描画ガイド方法のフローチャートである。 図4のステップS420の詳細なフローチャートである。 図5のステップS510の概略図である。 図5のステップS520の概略図である。 本発明の別の実施形態における、アイライナーガイド領域における上瞼ガイドラインの概略図である。 本発明の別の実施形態における、アイライナーガイド領域における上瞼ガイドラインおよび下瞼ガイドラインの概略図である。
次に、実施例を添付図面に示した本発明の好適な実施形態を詳細に説明する。可能な限り、同一または類似の部分を指すために、図面および説明では同一の参照符号を使用する。
図1は、本発明の一実施形態におけるアイライナー描画ガイド装置の概略図を示しており、また図2は、本発明の一実施形態におけるアイライナー描画ガイド装置のシステムブロック図を示している。図1および図2を併せて参照すると、この例示的な実施形態では、アイライナー描画ガイド装置100は、画像撮像装置110、表示装置140およびプロセッサ135を有する。
画像撮像装置110は、ユーザの顔画像を撮像するように構成する。この実施形態は、ユーザの顔画像における目の部分を撮像することによって、アイライナーを引くのに理想的な位置を計算することを目標としている。従って、ユーザの顔画像には、顔の左半分のアイライナーまたは顔の右半分のアイライナーにおいて好適な相対位置を計算することができるように、顔の左半分または顔の右半分の目の部分が含まれる必要がある。画像撮像装置110は、例えば、外部に接続される埋め込み式カムコーダー(もしくはカメラ)または携帯電話(もしくはカメラ)が挙げられるが、これは本開示によって特に制限されるものではない。
表示装置140は、マルチメディア情報およびユーザの顔画像をリアルタイムで表示することができる。例えば、表示装置140は、ユーザの顔画像を表示し、ユーザが選択するために、複数のアイライナータイプ、対応するアイライナータイプの各アイライナーに対する距離調整(例えば、目尻のアイライナーまたはアイライナーの幅全体の伸長または短縮)、およびアイライナーの色調を含むオプションを提供することができる。この例示的な実施形態では、表示装置140は、(例えば鏡等の)反射率が高い材料の後方に配置され、OLED(有機発光ダイオード)と組み合わせて製造される表示装置であってもよい。従って、ユーザは、彼/彼女自身の顔を鏡を通じて見ることができ、表示装置140は、ユーザが確認、タッチおよび選択するための関連情報も鏡上に表示することができる。しかしながら、本発明は上記に限定されるものではない。この実施形態のアイライナー描画ガイド装置100は、化粧台上に配置される装置であってもよい。アイライナー描画ガイド装置100のスクリーンを鏡の後方に配置して、ユーザが鏡を通じて見るためのテキストまたは画像を表示することができる。別の実施形態では、アイライナー描画ガイド装置100は、消費家電製品(例えば、スマートフォン、タブレットコンピュータ等)であってもよく、またはポータブルミラーと組み合わせて形成されたポータブルミラーボックスであってもよい。
プロセッサ135により、画像撮像装置110によって撮像されたユーザの顔画像に従って計算を実施することで、ユーザの顔に関連するユーザの複数の顔の特徴点(特に、上瞼部分、下瞼部分および目尻部分における目の特徴点)を撮像することができる。続いて、目の特徴点およびアイライナータイプに従って、プロセッサ135により計算を実施することでアイライナーガイド領域を取得後、ユーザの顔画像およびアイライナーガイド領域が表示装置140によって表示されることで、アイライナーガイド領域を参照して、ユーザの化粧を誘導することができる。上述した「アイライナータイプ」は、ユーザによってカスタマイズされてもよく、または、顔画像から取得したユーザの顔形状に従って、プロセッサ135の支援によってユーザにより所定のアイライナータイプを選択してもよい。この実施形態におけるアイライナーガイド領域は、点線によって示されるアイライナーガイド領域である。この実施形態を適用する者は、上瞼/下瞼ガイドライン、方向矢印ガイドライン等の方法によって示されるアイライナーガイド領域も得ることができる。
プロセッサ135は、中央処理装置(CPU)、マイクロプロセッサ、特定用途向け集積回路(ASIC)、プログラマブル論理装置(PLD)または他の類似する装置であることができる。プロセッサ135は、アイライナー表示領域を提供するために必要とされる多様なソフトウエアプログラムおよび/または命令セットを実行するように構成する。この例示的な実施形態では、プロセッサ135は、Dlibに基づくデータベース(「Dlib Face Landmark」とも称される)を実行して、ユーザの顔における194個の顔の特徴点を検出および分析する顔検出システムである。これらの顔の特徴点を使用して、目、眉毛、鼻、唇、顎の輪郭等を含む多様な顔部分を表す。別のケースでは、ユーザの顔のうち119個のみの顔の特徴点を分析することも可能である。あるいは、ユーザの顔の特徴点は、顔の特徴点を検出するための他のアルゴリズムを使用することによって取得することもできる。この実施形態および以下の実施形態は、実施例として、ユーザの左目の特徴点を使用して説明する。例えば、左目の特徴点を、(上瞼の特徴点を)点114〜点123、(下瞼の特徴点を)点125〜点133、および(目尻の特徴点を)点124と番号付けしている。この実施形態を適用する者は、左目の特徴点に対して多様な計算方法および実施例を適用することができるはずである。この実施形態は、左目に対応するアイライナーガイド領域の実現のみに限定されものではなく、両目に対応するアイライナーガイド領域も実現することができる。
この実施形態では、アイライナー描画ガイド装置100を実行している間にユーザが鏡に対面している場合、表示装置140によりユーザの顔画像を表示し、リアルタイムで顔画像における各特徴点を分析する。アイライナーを引くためのガイド装置との相互作用を容易化するために、本発明では、ユーザの目の部分の位置に基づいて、化粧をするのにより良好なビジュアルデザインを有するアイライナーガイド領域を更に算出する。続いて、このようなアイライナーガイド領域を、表示装置140によってユーザの顔画像上に表示することで、アイライナーを描画するためにユーザを位置付ける。更に、ユーザは、図1に示される表示装置インタフェースを介して、アイライナーガイド領域の厚み、位置、形状、および瞼間の所定の距離を調整することができ、ユーザの要望を満たすことができる。この方法では、ユーザは、表示装置140によって表示されるアイライナーガイド領域の誘導により、ユーザの実際の目の部分上にアイライナーを引くことができる。
図3は、本発明の一実施形態におけるアイライナータイプの概略図を示す。図3に示すように、この実施形態において使用されるアイライナータイプは、下向きに曲がったアイライナー(downturned eyeliner)(別名ドッグアイライナー)、上向きに曲がったアイライナー(upturned eyeliner)(別名キャットアイライナー)、丸みを帯びたアイライナー(rounded eyeliner)、長いアイライナー(long eyeliner)、間隔の狭いアイライナー(close-set eyeliner)、および間隔の広いアイライナー(wide-set eyeliner)、または上記の組み合わせのうちの1つを含む。ユーザは、所望のアイライナータイプを要望に基づいて選択することができ、またはアイライナー描画ガイド装置100によりユーザに似合うアイライナータイプを薦めさせることもできる。アイライナー描画ガイド装置100は、異なるアイライナータイプに従って、アイライナーガイド領域310−1〜310−6を異なる形状で表示することができる。この実施形態における各アイライナータイプは、各々のアイライナー幅表に対応している。アイライナー幅は、以下の表1〜表6に、本発明の実施形態を実現させるための実施例としてそれぞれ記載されている。
表1〜表6の各アイライナー幅表は、上瞼の特徴点および下瞼の特徴点のそれぞれに対応する、対応するアイライナー幅値が設けられている。表1〜表6における「特徴点の番号」とは、左目の特徴点114〜133を表し、「アイライナー幅」とは、各瞼の特徴点(点114〜123および125〜133)または目尻の特徴点(点124)に対応するアイライナーの幅値を表す。「アイライナー幅」の値は、センチメートル(cm)である。この実施形態を適用する者は、単位としてピクセルを使用することもできる。この実施形態における各ピクセルの幅は、0.04cmとすることができ、各センチメートルは25ピクセルの幅と同等である。
図4は、本発明の一実施形態におけるアイライナー描画ガイド方法のフローチャートを示す。図2および図4を参照すると、ステップS410において、画像撮像装置110により、少なくともユーザの目の部分を含むユーザの顔画像を撮像する。ステップS420では、プロセッサ135により画像撮像装置110からの顔画像を受信し、顔画像に従って複数の目の特徴点を取得し、また目の特徴点およびアイライナータイプに従って計算を実施することによってアイライナーガイド領域を取得する。この実施形態では、顔画像は、一方の目の部分のみを含む(例えば、左目または右目のみを含む)ことができ、または両目部分を含むことができる。プロセッサ135により、画像撮像装置110を通じて、対応するアイライナーガイド領域を算出するために、一方の目の部分のみを取得することができ、また、目の部分に対応するアイライナーガイド領域を同時に算出することもできる。ステップS430では、プロセッサ135は表示装置140を使用して、顔画像および対応するアイライナーガイド領域(例えば、図3のアイライナーガイド領域310−1〜310−6)を表示して、アイライナーガイド領域に従ってユーザの化粧を誘導する。
ステップS420の詳細なプロセスは、図5〜図7を参照して以下に説明する。図5は、図4のステップS420の詳細なフローチャートである。図6および図7は、ぞれぞれ、図5のステップS510およびステップS520の概略図である。図6および図7において、ユーザの左目E1は、本発明のこの実施形態の一実施例としての役割を果たす。
図5を参照すると、ステップS510では、図2のプロセッサ135により、上瞼の特徴点(例えば、点114〜点123)および下瞼の特徴点(例えば、点125〜点134)のうちの2つの隣接する瞼の特徴点、並びに、アイライナータイプに応じて取得される2つの隣接する瞼の特徴点のアイライナー幅値に従って、2つの隣接する瞼の特徴点に対応する各アイライナー基準点を計算する。詳しくは、図6を参照すると、2つの隣接する上瞼の特徴点114および115が、対応するアイライナー基準点B1を算出するための一例として使用されている。上瞼の特徴点114および115が配置されている領域610をより明白に説明するために、領域610を拡大し、図6の左目E1の下方に示した。この実施形態では、2つの隣接する瞼の特徴点114および115を点Aおよび点Cと称する。
ステップS510を以下に詳細に説明する。プロセッサ135により、2つの隣接する瞼の特徴点(点Aおよび点C)の間の距離を取得することができ、また(この距離を半分に分割することによって)距離eおよび2つの隣接する瞼の特徴点(点Aおよび点C)の中間における第1指示点P1の座標を取得することができる。続いて、プロセッサ135により、2つの隣接する瞼の特徴点(点Aおよび点C)のアイライナータイプに対応するアイライナー幅表を確認することで、点Aおよび点Cに対応するアイライナー幅値を取得するようにする。ここでは、このアイライナータイプが、表1に対応する「下向きに曲がったアイライナー」であることが想定される。このように、表1によれば、点A(114)および点C(115)のアイライナー幅はいずれも、0.1であることが分かる。従って、隣接する瞼の特徴点(点Aおよび点C)のアイライナー幅値d1は、この実施形態では0.1と設定される。この実施形態を適用する者の要望に基づいて、2つの隣接する瞼の特徴点に対応するアイライナー幅が異なるケースでは、2つのアイライナー幅の間の平均値並びに2つのアイライナー幅における最大値または最小値をアイライナー幅値d1とすることができる。換言すると、アイライナータイプのアイライナー幅表に従って、隣接する瞼の特徴点に対応するアイライナー幅値を取得する。
距離eおよびアイライナー幅値d1を取得後、プロセッサ135により、半分の距離eおよびアイライナー幅値d1に従って角度θを計算することができる。角度θは、2つの隣接する瞼の特徴点AおよびCを連結することによって形成される第1ラインセグメントL1と、アイライナー基準点(例えば、点B1)を2つの隣接する瞼の特徴点(例えば、点A)に連結することによって形成される第2ラインセグメントL2と、の内角である。角度θを算出するための方程式を以下のように提供する。
方程式(1)
続いて、プロセッサ135により、角度θおよび2つの隣接する瞼の特徴点AおよびCの中間における第1指示点P1に従って、アイライナー基準点B1の座標を計算することができる。アイライナー基準点B1の座標を計算するための方程式を以下のように提供する。
方程式(2)
他方の隣接する瞼の特徴点(例えば、点115および116、点116および117、点117および118;点125および126、点126および127、点127および128)も点Aおよび点Cとすることで、プロセッサ135により、上述した方程式に従って、隣接する上瞼の特徴点および隣接する下瞼の特徴点に対応する瞼の基準点(例えば、点B2、B3、B4;点B11、B12、B13)を算出するようにすることができる点にも留意すべきである。点B2〜B10は、それぞれ、隣接する上瞼の特徴点115〜123のアイライナー基準点であり、点B11〜B20は、それぞれ、隣接する下瞼の特徴点125〜134のアイライナー基準点である。
図5に戻ると、ステップS520では、図2のプロセッサ135により、目尻の特徴点(例えば、点124)に従って、アイライナー端部誘導点、並びに、目尻の特徴点(例えば、点124)に隣接する第1の上瞼の特徴点(例えば、点123)および第1の下瞼の特徴点(例えば、点125)を計算する。アイライナータイプの一部(例えば、間隔の狭いアイライナーおよび丸みを帯びたアイライナー)においては、左目E1の目尻部分には、アイライナーを引く必要がない場合またはより短いアイライナーのみを引く必要がある場合がある点に留意すべきである。このようなケースでは、アイライナーガイド領域全体を完結するためにアイライナー端部誘導点を算出するステップS520は、必要でない場合がある。換言すると、本発明に沿ったいくつかの実施形態では、アイライナーガイド領域は、ステップS520を実施することなく、ステップS510に記載されているように、アイライナー基準点B1〜B20を連結することによって直接的に生成することができる。図5および図7を併せて参照すると、目尻の特徴点(点124)が配置されている領域710をより明白に説明するために、領域710を拡大し、図7の左目E1の下方に示した。
先ず、プロセッサ135により、第1の上瞼の特徴点123および第1の下瞼の特徴点125の中間の第2基準点P2を計算する。更に、プロセッサ135により、目尻の特徴点124のアイライナータイプ(例えば、長いアイライナー)に対応するアイライナー幅表(例えば、表4)に従って、目尻のアイライナー幅値d2(例えば、1.2cm)を取得する。続いて、プロセッサ135により、目尻の特徴点124から目尻のアイライナー幅値d2だけDLの方向に、第2指示点P2から目尻の特徴点に向けて離れた目尻の基準点PFを形成する。
次に、プロセッサ135により、アイライナータイプおよび目尻の基準点PFに従って、アイライナー端部誘導点を形成する。アイライナータイプが長いアイライナー/下向きに曲がったアイライナー/間隔の広いアイライナーである場合には、これらのアイライナータイプの目尻は上方に曲がらない故に、目尻の基準点PFがアイライナー端部誘導点となる。一方、アイライナータイプが上向きに曲がったアイライナーである場合には、目尻が上方に曲がる故に、プロセッサ135により、目尻PFおよび所定の上向きの角度αに従って、アイライナー端部誘導点PF1を計算することができる。アイライナー端部誘導点PF1を計算するための方程式を以下のように提供する。
方程式(3)

図5に戻ると、ステップS530では、プロセッサ135により、目の基準点(例えば、点B1〜B20)およびアイライナー端部誘導点(例えば、点PFまたは点PF1)を順番に連結することによってアイライナーガイド領域を形成する。所謂「連結」とは、これらの点を順番に直接的に連結することを表している。しかしながら、このように示されたアイライナーガイド領域は、視覚効果が低い。用語「連結」とは、ソフトウエアプログラムによって実行される、アイライナー基準点およびアイライナー端部誘導点を通過可能な弧の計算も表す。この方法では、弧と上瞼/下瞼との間の領域が、アイライナーガイド領域としての役割を果たす。この実施形態を適用する者は、多様な顔アルゴリズムまたはユーザ設定を利用して、アイライナーガイド領域の位置または領域のサイズを僅かに調整することもできる。例えば、アイライナーガイド領域を数ピクセルだけ前後に移動させることができ、またはアイライナーガイド領域の正面端部を数ピクセルだけ前方に延長させることができる。
図5〜図7は、本発明におけるアイライナーガイド領域の実装形態の1つ示している。本発明におけるアイライナーガイド領域の別の実装形態を、図8および図9を参照して以下に開示する。図8は、本発明の別の実施形態におけるアイライナーガイド領域における上瞼ガイドラインの概略図を示す。図9は、本発明の別の実施形態におけるアイライナーガイド領域における上瞼ガイドラインおよび下瞼ガイドラインの概略図を示す。図8および図9におけるE1およびE2は、それぞれ、ユーザの目の位置(左目および右目)を示す。
図8および図9を含む本実施形態と、前述した実施形態と間の主な違いを以下に説明する。この実施形態では、図4のステップS420における「目の特徴点およびアイライナータイプに従って、計算を実施することによるアイライナーガイド領域の取得」に関するプロセスは、図8に示すように、上瞼の特徴点NF1およびNF2のそれぞれを、所定の第1距離D1だけ上方に直接的に移動させることによって複数のアイライナー基準点を形成し、上側アイライナー基準点を連結することによってアイライナーガイド領域に上側アイライナーガイドラインEL1およびEL2を形成することにより実現される。図9では、上瞼の特徴点NF1およびNF2のそれぞれを所定の第2距離D2だけ上方に移動させることによって、上側アイライナーガイドラインEL1およびEL2を形成する以外に、プロセッサにより、下瞼の特徴点NF3およびNF4のそれぞれを所定の第2距離D3だけ下方に移動させることによって、複数の下瞼の基準点を更に形成し、下側アイライナー基準点を連結することによって、アイライナーガイド領域に下側アイライナーガイドラインEL3およびEL4を形成する。
上瞼の特徴点NF1は、「Dlib Face Landmark」において、114〜124個目の左目E1の特徴点となり、上瞼の特徴点NF2は、「Dlib Face Landmark」において、134〜144個目の右目の特徴点となり得る。下瞼の特徴点NF3は、「Dlib Face Landmark」において、125〜133個目の左目の特徴点となり、下瞼の特徴点NF4は、「Dlib Face Landmark」において、145〜153個目の右目の特徴点となり得る。所定の第1距離D1、所定の第2距離D2または所定の第3距離D3は、1、5、8または10ピクセルの間隔とすることができる。この実施形態を適用する者は、所定の第1距離D1、所定の第2距離D2または所定の第3距離D3を、要望に基づいて調整することができ、また、所定の第1距離D1、所定の第2距離D2または所定の第3距離D3の値を、ユーザの調整に従って変更することもできる。所定の距離D1、D2およびD3は、前述した実施形態において使用される表によって表すこともでき、上瞼の特徴点または下瞼の特徴点のそれぞれを異なる距離に対応させることも可能である。この方法では、上側アイライナーガイドラインEL1およびEL2並びに下側アイライナーガイドラインEL3およびEL4は、異なるアイライナータイプに従って、異なる形状で生成することができる。
図4のステップS430では、プロセッサ135により表示装置140を使用して、顔画像および対応するアイライナーガイド領域(例えば、図8および図9における上側アイライナーガイドラインEL1およびEL2並びに下側アイライナーガイドラインEL3およびEL4)を表示し、アイライナーガイド領域に従ってユーザの化粧を誘導する。
要約すると、本発明によって提供されるアイライナー描画ガイド装置およびアイライナー描画ガイド方法によって、ユーザの顔画像の目の部分に従ってアイライナーガイド領域を計算し表示することで、ユーザは化粧をするためにより好適なアイライナー描画領域を認識することができ、これによりユーザは適切にアイライナーを引くことができる。2つの隣接する瞼の特徴点およびアイライナータイプに対応するアイライナー幅値を利用することによって生成されるアイライナーガイド領域に加えて、目尻の特徴点およびアイライナータイプに対応する目尻のアイライナー幅を利用することによって、異なるアイライナータイプに対応するアイライナー端部誘導点も生成することで、アイライナーガイド領域に異なる形状の目尻を表示することができる。この方法では、ユーザが化粧に慣れていなくとも、ユーザはアイライナー描画ガイド装置によって提供される助言に従ってアイライナーを引くことができる。結果として、簡素かつ相互作用的に化粧を教示することができる。
本発明の範囲または精神から逸脱することなく、本発明の構造に対して多様な変更および変形が可能であることは、当業者には明らかであろう。上記を考慮して、本発明は、本発明の変更および変形を、添付の特許請求の範囲およびそれらの等価物の範囲内に含むものとする。
本発明のアイライナー描画ガイド装置およびアイライナー描画ガイド方法は、携帯機器、家電機器、またはアイライナー描画ガイド方法を実行するためのソフトウエアに適用することができる。
100 アイライナー描画ガイド装置
110 画像撮像装置
140 表示装置
114〜123 上瞼の特徴点
124 目尻の特徴点
125〜133 下瞼の特徴点
135 プロセッサ
310−1〜310−6 アイライナーガイド領域
S410〜S430,S510〜S550 ステップ
610,710 領域
A,C 隣接する瞼の特徴点
B1〜B20 アイライナー基準点
e 隣接する瞼の特徴点の間の半分の距離
d1 隣接する瞼の特徴点のアイライナー幅値
d2 目尻のアイライナー幅値
L1 第1ラインセグメント
L2 第2ラインセグメント
P1 第1指示点
P2 第2指示点
PF 目尻の基準点/アイライナー端部誘導点
PF1 アイライナー端部誘導点
DL 第2指示点から目尻の特徴点に向かう方向
θ 角度
α 上向きの角度
E1,E2 目の部分
NF1,NF2 上瞼の特徴点
NF3,NF4 下瞼の特徴点
EL1,EL2 上側アイライナーガイドライン
EL3,EL4 下側アイライナーガイドライン

Claims (10)

  1. アイライナー描画ガイド装置であって、
    少なくともユーザの目の部分を含む、ユーザの顔画像を撮像するよう構成された画像撮像装置と、
    前記顔画像を受信し、前記顔画像に従って複数の目の特徴点を取得し、かつ、前記目の特徴点およびアイライナータイプに従って計算を実施することによって、アイライナーガイド領域を取得するよう構成されたプロセッサと、
    ユーザの前記顔画像および対応する前記アイライナーガイド領域を表示して、前記アイライナーガイド領域に従ってユーザの化粧を誘導するように構成された表示装置と、
    を含む、アイライナー描画ガイド装置。
  2. 請求項1に記載のアイライナー描画ガイド装置であって、前記目の特徴点は、目の部分に対応する複数の上瞼の特徴点および複数の下瞼の特徴点を含み、
    前記プロセッサにより、前記上瞼の特徴点または前記下瞼の特徴点のうち2つの隣接する瞼の特徴点およびアイライナータイプに応じて取得される前記2つの隣接する瞼の特徴点のアイライナー幅値に従って計算し、各アイライナー基準点は、前記2つの隣接する瞼の特徴点に対応しており、
    前記プロセッサにより、前記アイライナー基準点を連結することによって、前記アイライナーガイド領域を形成する、アイライナー描画ガイド装置。
  3. 請求項2に記載のアイライナー描画ガイド装置であって、前記アイライナータイプは、対応するアイライナー幅表と共に提供され、前記アイライナー幅表は、前記上瞼の特徴点および前記下瞼の特徴点のそれぞれに応じて、対応するアイライナー幅値と共に提供され、
    前記2つの隣接する瞼の特徴点に対応するアイライナー幅値は、前記アイライナータイプのアイライナー幅表を通じて取得される、アイライナー描画ガイド装置。
  4. 請求項2に記載のアイライナー描画ガイド装置であって、前記プロセッサにより、前記2つの隣接する瞼の特徴点の間の半分の距離および前記アイライナー幅値に従って角度を計算し、前記角度は、前記2つの隣接する瞼の特徴点を連結することによって形成される第1ラインセグメントと、前記アイライナー基準点を前記2つの隣接する瞼の特徴点の一方と連結することによって形成される第2ラインセグメントとの間の内角であり、
    前記プロセッサにより、前記角度および前記2つの隣接する瞼の特徴点の中間における第1指示点に従って、前記アイライナー基準点を計算する、アイライナー描画ガイド装置。
  5. 請求項2に記載のアイライナー描画ガイド装置であって、前記目の特徴点は、前記目の部分に対応する目尻の特徴点を更に含み、
    前記プロセッサにより、前記目尻の特徴点、並びに前記目尻の特徴点に隣接する第1の上瞼の特徴点および第1の下瞼の特徴点に従ってアイライナー端部誘導点を計算し、
    前記プロセッサにより、前記目の基準点および前記アイライナー端部誘導点を順番に連結することによって前記アイライナーガイド領域を形成する、アイライナー描画ガイド装置。
  6. 請求項5に記載のアイライナー描画ガイド装置であって、各目の幅表に、前記目尻の特徴点に対応する目尻のアイライナー幅値を更に設け、
    前記プロセッサにより、前記第1の上瞼の特徴点および前記第1の下瞼の特徴点の中間の第2指示点を計算し、前記目尻の特徴点から前記目尻のアイライナー幅値だけ、前記第2指示点から前記目尻の特徴点に向けた方向に離れた目尻の基準点を形成し、また、前記アイライナータイプおよび前記目尻の基準点に従って前記アイライナー端部誘導点を形成する、アイライナー描画ガイド装置。
  7. 請求項1に記載のアイライナー描画ガイド装置であって、前記画像撮像装置により、リアルタイムでユーザの顔画像を撮像し、前記プロセッサにより、前記アイライナーガイド領域をリアルタイムで計算し、前記表示装置により、前記顔画像およびそれに対応する前記アイライナーガイド領域をリアルタイムで表示する、アイライナー描画ガイド装置。
  8. 請求項1に記載のアイライナー描画ガイド装置であって、前記目の特徴点は、前記目の部分に対応する複数の上瞼の特徴点を含み、
    前記プロセッサにより、前記上瞼の特徴点を所定の第1距離だけ上方に移動させることによって複数のアイライナー基準点を形成し、また、前記アイライナー基準点を連結することによって前記アイライナーガイド領域を形成する、アイライナー描画ガイド装置。
  9. 請求項8に記載のアイライナー描画ガイド装置であって、前記目の特徴点は、複数の下瞼の特徴点を更に含み、
    前記プロセッサにより、前記下瞼の特徴点を所定の第2距離だけ下方に移動させることによって複数の下側アイライナー基準点を形成し、また、前記下側アイライナー基準点を連結することによって前記アイライナーガイド領域に下側アイライナーガイドラインを形成する、アイライナー描画ガイド装置。
  10. 請求項1に記載のアイライナー描画ガイド装置であって、前記アイライナータイプは、下向きに曲がったアイライナー、上向きに曲がったアイライナー、丸みを帯びたアイライナー、長いアイライナー、間隔の狭いアイライナー、および間隔の広いアイライナー、または上記の組み合わせのうちの1つを含む、アイライナー描画ガイド装置。
JP2018038387A 2017-08-24 2018-03-05 アイライナー描画ガイド装置および方法 Expired - Fee Related JP6612913B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201710733033.0A CN109426767A (zh) 2017-08-24 2017-08-24 眼线描绘指引装置及其方法
CN201710733033.0 2017-08-24

Publications (2)

Publication Number Publication Date
JP2019037746A true JP2019037746A (ja) 2019-03-14
JP6612913B2 JP6612913B2 (ja) 2019-11-27

Family

ID=61132247

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018038387A Expired - Fee Related JP6612913B2 (ja) 2017-08-24 2018-03-05 アイライナー描画ガイド装置および方法

Country Status (5)

Country Link
US (1) US20190059561A1 (ja)
EP (1) EP3446592B1 (ja)
JP (1) JP6612913B2 (ja)
KR (1) KR102172988B1 (ja)
CN (1) CN109426767A (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018033137A1 (zh) * 2016-08-19 2018-02-22 北京市商汤科技开发有限公司 在视频图像中展示业务对象的方法、装置和电子设备
TWI657799B (zh) * 2016-09-29 2019-05-01 麗寶大數據股份有限公司 電子裝置與其提供膚質檢測資訊的方法
CN109165571B (zh) * 2018-08-03 2020-04-24 北京字节跳动网络技术有限公司 用于插入图像的方法和装置
US11922540B2 (en) 2020-02-14 2024-03-05 Perfect Mobile Corp. Systems and methods for segment-based virtual application of facial effects to facial regions displayed in video frames
US11404086B2 (en) 2020-02-14 2022-08-02 Perfect Mobile Corp. Systems and methods for segment-based virtual application of makeup effects to facial regions displayed in video frames
US11212483B2 (en) 2020-02-14 2021-12-28 Perfect Mobile Corp. Systems and methods for event-based playback control during virtual application of makeup effects
CN113486692A (zh) * 2020-06-02 2021-10-08 海信集团有限公司 一种眼部妆容展示方法以及电子设备
CN113850708A (zh) * 2020-06-28 2021-12-28 华为技术有限公司 交互方法、交互装置、智能镜子
CN112347979B (zh) * 2020-11-24 2024-03-15 郑州阿帕斯科技有限公司 一种眼线绘制方法和装置
US20230101374A1 (en) * 2021-09-30 2023-03-30 L'oreal Augmented reality cosmetic design filters
US11825184B1 (en) 2022-05-09 2023-11-21 Perfect Mobile Corp. Systems and methods for event-based playback control during virtual application of accessories

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004030007A (ja) * 2002-06-24 2004-01-29 Digital Fashion Ltd 化粧シミュレーション装置、化粧シミュレーション方法、化粧シミュレーションプログラム及びそのプログラムを記録した記録媒体
JP2009064423A (ja) * 2007-08-10 2009-03-26 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
JP2016181280A (ja) * 2016-06-20 2016-10-13 株式会社メイクソフトウェア 画像処理装置、画像処理方法及びコンピュータプログラム

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6109921A (en) * 1998-06-30 2000-08-29 Yau; Peter Make-up mannequin head and make-up mannequin kit for use therewith
JP4188487B2 (ja) * 1999-03-29 2008-11-26 株式会社資生堂 目元メーキャップシミュレーションシステム
US7082211B2 (en) * 2002-05-31 2006-07-25 Eastman Kodak Company Method and system for enhancing portrait images
JP4789408B2 (ja) * 2003-06-30 2011-10-12 株式会社 資生堂 目の形態分類方法及び形態分類マップ並びに目の化粧方法
JP2005339288A (ja) * 2004-05-27 2005-12-08 Toshiba Corp 画像処理装置及びその方法
JP4449723B2 (ja) * 2004-12-08 2010-04-14 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
EP1975870B1 (en) * 2006-01-17 2020-08-26 Shiseido Co., Ltd. Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program
US20090125050A1 (en) * 2007-10-29 2009-05-14 Linda Dixon Intradermal device introducing method and apparatus
JP4833322B2 (ja) * 2009-06-26 2011-12-07 株式会社バンダイナムコゲームス 画像生成装置及びプリントシール製造方法
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
JP5372275B1 (ja) * 2013-03-22 2013-12-18 パナソニック株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
CN104822292B (zh) * 2013-08-30 2019-01-04 松下知识产权经营株式会社 化妆辅助装置、化妆辅助系统、化妆辅助方法以及化妆辅助程序
US9635924B1 (en) * 2013-11-04 2017-05-02 Rachel Lorraine Herrera Cat eye makeup applicator
JP6331515B2 (ja) * 2014-03-13 2018-05-30 パナソニックIpマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法
WO2015137788A1 (en) * 2014-03-14 2015-09-17 Samsung Electronics Co., Ltd. Electronic apparatus for providing health status information, method of controlling the same, and computer-readable storage medium
US9928422B2 (en) * 2014-10-15 2018-03-27 Samsung Electronics Co., Ltd. User terminal apparatus and IRIS recognition method thereof
US9760762B2 (en) * 2014-11-03 2017-09-12 Anastasia Soare Facial structural shaping
US20170303665A1 (en) * 2015-03-31 2017-10-26 Dana Rae, LLC Eyeliner with application guide cap
US20160357578A1 (en) * 2015-06-03 2016-12-08 Samsung Electronics Co., Ltd. Method and device for providing makeup mirror
WO2018012136A1 (ja) * 2016-07-14 2018-01-18 パナソニックIpマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法
US11315173B2 (en) * 2016-09-15 2022-04-26 GlamST LLC Applying virtual makeup products
EP3530142A4 (en) * 2016-10-24 2019-10-30 Panasonic Intellectual Property Management Co., Ltd. PICTURE PROCESSING DEVICE, PICTURE PROCESSING METHOD AND PICTURE PROCESSING PROGRAM
JP6753276B2 (ja) * 2016-11-11 2020-09-09 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
CN108875462A (zh) * 2017-05-16 2018-11-23 丽宝大数据股份有限公司 眉毛造型指引装置及其方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004030007A (ja) * 2002-06-24 2004-01-29 Digital Fashion Ltd 化粧シミュレーション装置、化粧シミュレーション方法、化粧シミュレーションプログラム及びそのプログラムを記録した記録媒体
JP2009064423A (ja) * 2007-08-10 2009-03-26 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
JP2016181280A (ja) * 2016-06-20 2016-10-13 株式会社メイクソフトウェア 画像処理装置、画像処理方法及びコンピュータプログラム

Also Published As

Publication number Publication date
US20190059561A1 (en) 2019-02-28
EP3446592B1 (en) 2020-10-14
CN109426767A (zh) 2019-03-05
KR102172988B1 (ko) 2020-11-03
KR20190120835A (ko) 2019-10-25
JP6612913B2 (ja) 2019-11-27
EP3446592A1 (en) 2019-02-27

Similar Documents

Publication Publication Date Title
JP6612913B2 (ja) アイライナー描画ガイド装置および方法
CN108519676B (zh) 一种头戴式助视装置
US11450075B2 (en) Virtually trying cloths on realistic body model of user
TWI704501B (zh) 可由頭部操控的電子裝置與其操作方法
KR102132367B1 (ko) 눈썹 모습 가이드 디바이스 및 방법
US7853050B2 (en) System and method for operation without touch by operators
JP5197777B2 (ja) インターフェイス装置、方法、およびプログラム
US9563975B2 (en) Makeup support apparatus and method for supporting makeup
US10446052B2 (en) Lip gloss guide and method thereof
US20140275948A1 (en) Information terminal device
JP6731896B2 (ja) リップ・グロス案内装置及びその方法
RU2016107189A (ru) Устройства, системы и способы виртуализации зеркала
JP2019058367A (ja) 爪輪郭検出装置、爪輪郭検出方法及び爪輪郭検出プログラム
JP2015084221A (ja) 電子文書にマーキングするための方法および装置
KR20170027266A (ko) 영상 촬영 장치 및 그 동작 방법
JP2019037742A (ja) 身体情報分析装置およびそのリップメイクの分析方法
JP5103682B2 (ja) インタラクティブ看板システム
US10607503B2 (en) Blush guide device and method thereof
WO2017202110A1 (zh) 用于显示图像的方法、装置和系统
TWI824440B (zh) 顯示裝置及顯示方法
US11675428B2 (en) Determining a gaze direction using depth information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190604

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190903

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191015

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191031

R150 Certificate of patent or registration of utility model

Ref document number: 6612913

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees