JP6803348B2 - 拡張現実を結合した身体情報分析装置およびその眉型プレビュー方法 - Google Patents
拡張現実を結合した身体情報分析装置およびその眉型プレビュー方法 Download PDFInfo
- Publication number
- JP6803348B2 JP6803348B2 JP2018007219A JP2018007219A JP6803348B2 JP 6803348 B2 JP6803348 B2 JP 6803348B2 JP 2018007219 A JP2018007219 A JP 2018007219A JP 2018007219 A JP2018007219 A JP 2018007219A JP 6803348 B2 JP6803348 B2 JP 6803348B2
- Authority
- JP
- Japan
- Prior art keywords
- eyebrow
- image
- model
- feature points
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000004709 eyebrow Anatomy 0.000 title claims description 388
- 238000000034 method Methods 0.000 title claims description 38
- 230000003190 augmentative effect Effects 0.000 title claims description 11
- 238000012545 processing Methods 0.000 claims description 94
- 238000004458 analytical method Methods 0.000 claims description 27
- 239000002131 composite material Substances 0.000 claims description 26
- 238000004364 calculation method Methods 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 8
- 230000001815 facial effect Effects 0.000 claims description 6
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 5
- 238000003786 synthesis reaction Methods 0.000 claims description 5
- 238000013519 translation Methods 0.000 claims description 5
- 230000001131 transforming effect Effects 0.000 claims description 3
- 210000001217 buttock Anatomy 0.000 claims 2
- GNFTZDOKVXKIBK-UHFFFAOYSA-N 3-(2-methoxyethoxy)benzohydrazide Chemical compound COCCOC1=CC=CC(C(=O)NN)=C1 GNFTZDOKVXKIBK-UHFFFAOYSA-N 0.000 claims 1
- 210000001508 eye Anatomy 0.000 description 45
- 238000012937 correction Methods 0.000 description 40
- 230000000875 corresponding effect Effects 0.000 description 31
- 238000005516 engineering process Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 8
- 230000001276 controlling effect Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 210000001331 nose Anatomy 0.000 description 2
- CHMCGURUGMDZCH-JXMROGBWSA-N CCC(C)(C)CN(C)/C(/C)=C/C Chemical compound CCC(C)(C)CN(C)/C(/C)=C/C CHMCGURUGMDZCH-JXMROGBWSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000002537 cosmetic Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 210000000088 lip Anatomy 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A62—LIFE-SAVING; FIRE-FIGHTING
- A62B—DEVICES, APPARATUS OR METHODS FOR LIFE-SAVING
- A62B35/00—Safety belts or body harnesses; Similar equipment for limiting displacement of the human body, especially in case of sudden changes of motion
- A62B35/0006—Harnesses; Accessories therefor
- A62B35/0012—Sit harnesses
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
- A45D44/005—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- A—HUMAN NECESSITIES
- A41—WEARING APPAREL
- A41F—GARMENT FASTENINGS; SUSPENDERS
- A41F1/00—Fastening devices specially adapted for garments
- A41F1/02—Buttonholes; Eyelets for buttonholes
-
- A—HUMAN NECESSITIES
- A41—WEARING APPAREL
- A41F—GARMENT FASTENINGS; SUSPENDERS
- A41F3/00—Braces
- A41F3/04—Means for joining the strips, tongues, or the like, to the body of the braces
-
- A—HUMAN NECESSITIES
- A41—WEARING APPAREL
- A41F—GARMENT FASTENINGS; SUSPENDERS
- A41F9/00—Belts, girdles, or waistbands for trousers or skirts
-
- A—HUMAN NECESSITIES
- A62—LIFE-SAVING; FIRE-FIGHTING
- A62B—DEVICES, APPARATUS OR METHODS FOR LIFE-SAVING
- A62B35/00—Safety belts or body harnesses; Similar equipment for limiting displacement of the human body, especially in case of sudden changes of motion
- A62B35/0006—Harnesses; Accessories therefor
- A62B35/0025—Details and accessories
-
- E—FIXED CONSTRUCTIONS
- E04—BUILDING
- E04G—SCAFFOLDING; FORMS; SHUTTERING; BUILDING IMPLEMENTS OR AIDS, OR THEIR USE; HANDLING BUILDING MATERIALS ON THE SITE; REPAIRING, BREAKING-UP OR OTHER WORK ON EXISTING BUILDINGS
- E04G21/00—Preparing, conveying, or working-up building materials or building elements in situ; Other devices or measures for constructional work
- E04G21/32—Safety or protective measures for persons during the construction of buildings
- E04G21/3204—Safety or protective measures for persons during the construction of buildings against falling down
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/167—Detection; Localisation; Normalisation using comparisons between temporally consecutive images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Textile Engineering (AREA)
- Geometry (AREA)
- Architecture (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Ophthalmology & Optometry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Structural Engineering (AREA)
- Civil Engineering (AREA)
- Mechanical Engineering (AREA)
- Image Analysis (AREA)
- Surgery (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Tourism & Hospitality (AREA)
- Image Processing (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Processing Or Creating Images (AREA)
Description
通常、使用者は鏡の前に座って眉補正を行い、またはスマートフォンのカメラおよびスクリーンを鏡の代わりにして眉補正を行う。
実施例において、分析装置1の無線伝送モジュール16はWi−Fi通信技術、ブルートゥース(登録商標)通信技術、Zigbee通信技術、無線周波数(RF)通信技術、赤外線通信技術、光通信技術、音声通信技術、および/またはその他無線通信技術を介して電子装置2とデータ伝送を行うことができる。
分析装置1はさらに、複数のボタン13を備えてもよい。本実施例において、複数のボタン13は実体ボタン(button)またはタッチキー(touch key)でもよいが、限定しない。
5.複数枚のイメージを単一の合成イメージに合成するための合成モジュール105。
実施例において、顔部分析モジュール101は、顔部イメージにおいて各眉毛イメージの複数の眉毛特徴点を識別する。算出モジュール102は、眉毛偏移量を算出し、かつ眉毛偏移量に基づき投影位置を算出する。
ステップS100:分析装置1の処理ユニット10は、手本眉毛イメージ(例えば図11に示す手本眉毛イメージ81〜82)を取得し、かつこの手本眉毛イメージに対応する眉型輪郭パターン(例えば図12に示す眉型輪郭パターン71〜72)を取得する。
具体的には、本発明における分析装置1は、選択的に先ずステップ100またはステップ102を実行でき(即ち、先ず使用者が手本眉毛イメージを選択するようにするか、または先ず使用者の顔部イメージを取得する)、上述に開示された順序に制限しない。
実施例において、処理ユニット10は、顔部分析モジュール101により顔部イメージ51を分析することで顔部の複数の部位(例えば、顔の輪郭、眼、眉、鼻、唇、耳、および顔部のその他部位)のイメージを識別し、かつ眼部イメージを選択して後続の処理を行う。
これにより、本発明は、複数の特徴点6の番号、形状、順序などの情報に基づき、顔部イメージ51において各部位の位置を確定することで、特定部位を識別できる。本発明において、分析装置1は主に、複数の特徴点6を介して少なくとも顔部イメージ51において左眉と右眉(眉毛イメージに対応する)、左眼と右眼(眼部イメージに対応する)などの部位を識別するが、これに限定されない。
実施例において、分析装置1のメモリ17は、複数の眉毛偏移量を記憶しており、各眉毛偏移量は各手本眉毛イメージにそれぞれ対応し、使用者がステップS100においてそのうちの1組の手本眉毛イメージを選択した後、分析装置1は対応する眉毛偏移量をリアルタイムに取得できる。
ステップ108:処理ユニット10は、分析装置1がプレビューモードまたは補助モードに入るか否かを判断する。
さらに、本発明の分析装置1により、使用者はミラースクリーン11で自身のリアルタイム顔部イメージと選択された眉型輪郭パターン71〜72、およびその推奨位置を同時に見ることができ、直観的かつ正確に眉補正を行うことができ、かつ眉補正の技術的難易度を大幅に下げ、かつ眉補正の成功確率を高めることができる。
ステップS200:分析装置1の処理ユニット10が使用者の操作または所定のスケジュール(例えば、毎日午前7時)に基づきプレビューモードに入るステップ。
ステップS202:処理ユニット10が使用者の選択操作、選択指令、またはプリセット値に基づき、複数の手本眉毛イメージからそのうちの1つを選択するステップ。
ステップS206:処理ユニット10が取得された顔部イメージ51に顔部分析処理を行うことで、顔部イメージ51において眼部イメージを識別するステップ。
例を挙げると、図13に示すように、顔部分析処理を実行した後、処理ユニット10は、眼部イメージの複数の眼部特徴点62および眉毛イメージの複数の眉毛特徴点61を取得でき、ここで複数の眼部特徴点62は眼部の異なる特徴にそれぞれ対応し、複数の眉毛特徴点61は眉毛の異なる特徴にそれぞれ対応する。
ステップS210:処理ユニット10は、眼部イメージの位置、および眉毛偏移量に基づき手本眉毛イメージおよび眉型輪郭イメージの投影位置を算出する。
言及に値するのは、図13から図15は、左眉と左眼との間の眉毛偏移量を算出することを例として説明しているが、右眉と右眼との間の眉毛偏移量を用いてもよく、これに限定されないということである。また、本発明の処理ユニット10は、選択的に先ず左眉と左眼との間の眉毛偏移量を算出してもよく、または先ず右眉と右眼との間の眉毛偏移量を算出してもよく、複数の処理により2組の眉毛偏移量を同時に算出してもよく、これに限定されない。
使用者が電子装置2により確認指令を送信し、または入力インターフェース15により確認操作を入力した後、処理ユニット10は、使用者が現在選択されている手本イメージに基づき眉補正を行う意思があると判断し、かつ自動的にプレビューモードから離脱できる。そうでなければ、処理ユニット10は、分析装置1がプレビューモードから離脱していないと判断し、かつ再度ステップS202−S212を繰り返すことで使用者が他の手本眉毛イメージを選択し、プレビューできるようにする。
ステップS218:処理ユニット10は、確認された手本眉毛イメージに対応する眉型輪郭パターンを取得する。
実施例において、手本眉毛イメージには予め複数の手本特徴点が設定され、処理ユニット10は、描画モジュール104により複数の特徴点を繋げることで、対応する眉型輪郭パターンを描く。
続いて、処理ユニット10は、ステップS228を実行する。処理ユニット10は、表示モジュール111により使用者の顔部イメージを表示するとともに、投影位置に眉型輪郭パターンを表示する。
使用者が眉補正を完了し、かつ電子装置2によりオフ指令が送信され、または入力インターフェース15によりオフ操作が入力された後、処理ユニット10は、使用者が眉補正を完了させたと判断し、かつ自動的に補助モードから離脱できる。そうでなければ、処理ユニット10は、分析装置1が補助モードから離脱していないと判断し、かつステップS218〜S228を繰り返すことで、引き続き使用者に眉補正の補助を提供する。
ステップS30:処理ユニット10は、手本データセットおよび基準としての眉毛データセットに基づき眉毛の調整パラメータ群を算出する(本例においては、右眉に対応する手本データセットおよび第1眉毛データセットに基づき右眉の調整パラメータ群を算出する)。
もちろん、本発明はその他の多種の実施例をさらに有してもよく、本発明の精神およびその実質に反しない状況で、当業者は本発明に基づき各種の対応する変更および変形を行うことができるが、これら対応する変更および変形はいずれも本発明に付属する特許請求の範囲の保護範囲に属するものとする。
10 処理ユニット
101 顔部分析モジュール
102 算出モジュール
103 調整モジュール
104 描画モジュール
105 合成モジュール
11 ミラースクリーン
111 表示モジュール
12 イメージ取得モジュール
13 ボタン
14 センサ
15 入力インターフェース
16 無線伝送モジュール
17 メモリ
2 電子装置
21 ソフトウェア
3 無線ルータ
4 インターネット
5 ミラーイメージ
51 顔部イメージ
52−54 表示画面
6 特徴点
61 眉毛特徴点
610 眉尻特徴点
62 眼部特徴点
620 眼尻特徴点
630〜632、640〜642 眉毛特徴点
650〜652 手本特徴点
650’〜652’ 調整後の手本特徴点
71〜72 眉型輪郭パターン
73 投影位置
74〜75 眉毛イメージ
81〜82 手本眉毛イメージ
90〜92 パターン
D 垂直距離
S100〜S112 第1眉型プレビューステップ
S200〜S230 第2眉型プレビュー対比ステップ
S30〜S34 調整ステップ
Claims (11)
- 身体情報分析装置に応用される拡張現実を結合した眉型プレビュー方法であって、
a)前記身体情報分析装置のイメージ取得モジュールが顔部イメージを取得するよう制御するステップと、
b)前記身体情報分析装置の処理ユニットが顔部イメージにおいて眼部イメージを取得し、前記眼部イメージの複数の眼部特徴点を識別し、ここで前記複数の眼部特徴点は眼部の異なる特徴にそれぞれ対応するよう制御するステップと、
c)前記処理ユニットが前記顔部イメージにおいて眉毛イメージの複数の眉毛特徴点を識別し、ここで前記複数の眉毛特徴点は眉毛の異なる特徴にそれぞれ対応するステップと、
d)前記処理ユニットが前記眼部イメージの位置および眉毛偏移量に基づき投影位置を算出するステップと、
e)前記処理ユニットが眉毛の同一の特徴にそれぞれ対応する各前記眉毛特徴点および手本眉毛イメージに設けられた複数の手本特徴点に基づき調整パラメータ群を算出し、ここで前記調整パラメータ群は並進パラメータ、回転パラメータ、および縮小拡大パラメータを含むステップと、
f)前記処理ユニットが前記調整パラメータ群の前記並進パラメータに基づき、前記手本眉毛イメージに設けられた前記複数の手本特徴点の位置を調整することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを並進させ、前記調整パラメータ群の前記回転パラメータに基づき、前記複数の手本特徴点の位置を調整することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを回転させ、前記調整パラメータ群の前記縮小拡大パラメータに基づき、前記複数の手本特徴点の位置を変換することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを拡大縮小させ、これにより、前記手本眉毛イメージを調整し、その調整後の前記手本眉毛イメージが、前記手本眉毛イメージよりも前記眉毛イメージに相似させるステップと、
g)プレビューモードで、前記処理ユニットが前記投影位置に基づき前記顔部イメージと、調整後の前記手本眉毛イメージを合成することで合成イメージを生成し、かつ前記身体情報分析装置の表示モジュールが前記合成イメージを表示するよう制御するステップと、
h)補助モードで、前記処理ユニットが調整後の前記複数の手本特徴点の位置に基づき眉型輪郭パターンを描くステップと、前記表示モジュールが前記顔部イメージを表示し、かつ前記投影位置に前記手本眉毛イメージに対応する前記眉型輪郭パターンを表示するよう制御するステップと、を含む眉型プレビュー方法。 - 前記複数の眼部特徴点は眼尻に対応する眼尻特徴点を含み、かつ前記ステップd)は、
d1)前記眉毛偏移量を取得するステップと、
d2)前記眼尻特徴点から上方向に前記眉毛偏移量を垂直移動させることで、前記投影位置を取得するステップと、を含む請求項1に記載の眉型プレビュー方法。 - 前記ステップd)の前にステップi)選択指令または選択操作に基づき複数の前記手本眉毛イメージのうちの1つを選択するステップをさらに含み、ここで、前記ステップg)は前記選択指令または前記選択操作により選択された調整後の前記手本眉毛イメージを表示し、ここで前記複数の手本眉毛イメージは異なる前記眉毛偏移量にそれぞれ対応するステップである請求項2に記載の眉型プレビュー方法。
- 前記複数の眉毛特徴点は眉尻に対応する眉尻特徴点を含み、かつ前記ステップd1)はステップd11)前記眉尻特徴点と前記眼尻特徴点との間の距離を算出して前記眉毛偏移量とするステップを含む請求項2に記載の眉型プレビュー方法。
- 前記ステップd11)は前記眉尻特徴点と前記眼尻特徴点との間の垂直距離を算出して前記眉毛偏移量とするステップである請求項4に記載の眉型プレビュー方法。
- 3つの前記眉毛特徴点および3つの前記手本特徴点は眉毛の眉頭、眉山、および眉尻にそれぞれ対応する請求項5に記載の眉型プレビュー方法。
- 拡張現実を結合した身体情報分析装置であって、
顔部イメージを取得するためのイメージ取得モジュールと、
前記イメージ取得モジュールに電気的に接続される処理ユニットと、
プレビューモードで合成イメージを表示し、かつ、補助モードで前記顔部イメージを表示し、かつ投影位置に手本眉毛イメージに対応する眉型輪郭パターンを表示する表示モジュールと、を含み、
前記処理ユニットは、顔部分析モジュールと、合成モジュールと、調整モジュール及び描画モジュールとを含み、前記処理ユニットは、前記顔部分析モジュールにより、前記顔部イメージにおいて眉毛イメージの複数の眉毛特徴点を識別し、かつ眼部イメージの複数の眼部特徴点を識別し、ここで前記複数の眼部特徴点は眼部の異なる特徴にそれぞれ対応し、前記複数の眉毛特徴点は眉毛の異なる特徴にそれぞれ対応し、前記処理ユニットは、前記眼部イメージの位置および眉毛偏移量に基づき投影位置を算出し、前記処理ユニットは、前記調整モジュールにより、眉毛の同一の特徴にそれぞれ対応する各前記眉毛特徴点及び手本眉毛イメージに設けられた複数の手本特徴点に基づき調整パラメータ群を算出し、前記調整パラメータ群に基づき、前記手本眉毛イメージに設けられた前記複数の手本特徴点の位置を調整することで前記手本眉毛イメージを調整し、ここで前記調整パラメータ群は並進パラメータ、回転パラメータ、および縮小拡大パラメータを含み、前記複数の手本特徴点は、眉毛の異なる特徴にそれぞれ対応し、前記処理ユニットは、前記合成モジュールにより、プレビューモードで、前記投影位置に基づき前記顔部イメージと調整後の前記手本眉毛イメージとを合成イメージとして合成し、前記処理ユニットは、前記描画モジュールにより、補助モードで、調整後の前記複数の手本特徴点の位置に基づき前記眉型輪郭パターンを描き、その前記処理ユニットが前記調整パラメータ群の前記並進パラメータに基づき、前記手本眉毛イメージに設けられた前記複数の手本特徴点の位置を調整することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを並進させ、前記調整パラメータ群の前記回転パラメータに基づき、前記複数の手本特徴点の位置を調整することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを回転させ、前記調整パラメータ群の前記縮小拡大パラメータに基づき、前記複数の手本特徴点の位置を変換することで、前記複数の手本特徴点により囲まれてなる前記手本眉毛イメージを拡大縮小させ、これにより、前記手本眉毛イメージを調整し、その調整後の前記手本眉毛イメージが、前記手本眉毛イメージよりも前記眉毛イメージに相似させる身体情報分析装置。 - 前記複数の眼部特徴点は眼尻に対応する眼尻特徴点を含み、かつ前記処理ユニットは、前記眼尻特徴点から上方向に前記眉毛偏移量を垂直移動させることで前記投影位置を取得する算出モジュールをさらに含む請求項7に記載の身体情報分析装置。
- 前記処理ユニットに電気的に接続され、複数の前記手本眉毛イメージを記憶し、ここで前記複数の手本眉毛イメージは異なる前記眉毛偏移量にそれぞれ対応するメモリと、
前記処理ユニットに電気的に接続され、前記複数の手本眉毛イメージのうちの1つを選択する選択操作を受け入れるための入力インターフェースと、
電子装置に接続され、前記電子装置から前記複数の手本眉毛イメージのうちの1つを選択する選択指令を受け入れるための無線伝送モジュールと、をさらに含み、
ここで前記処理ユニットは、前記表示モジュールが前記選択操作または前記選択指令により選択された前記手本眉毛イメージを表示するよう制御する請求項7に記載の身体情報分析装置。 - 前記処理ユニットは、眉尻に対応する前記眉毛特徴点と眼尻に対応する眼尻特徴点との間の垂直距離を算出して前記眉毛偏移量とする算出モジュールをさらに含む請求項7に記載の身体情報分析装置。
- ここで3つの前記眉毛特徴点および3つの前記手本特徴点は眉毛の眉頭、眉山、および眉尻にそれぞれ対応する請求項7に記載の身体情報分析装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710897603.X | 2017-09-28 | ||
CN201710897603.XA CN109583263A (zh) | 2017-09-28 | 2017-09-28 | 结合扩增实境的身体信息分析装置及其眉型预览方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019063480A JP2019063480A (ja) | 2019-04-25 |
JP6803348B2 true JP6803348B2 (ja) | 2020-12-23 |
Family
ID=61526554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018007219A Expired - Fee Related JP6803348B2 (ja) | 2017-09-28 | 2018-01-19 | 拡張現実を結合した身体情報分析装置およびその眉型プレビュー方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10528796B2 (ja) |
EP (1) | EP3462375A1 (ja) |
JP (1) | JP6803348B2 (ja) |
KR (1) | KR102045219B1 (ja) |
CN (1) | CN109583263A (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109288233A (zh) * | 2017-07-25 | 2019-02-01 | 丽宝大数据股份有限公司 | 可标示修容区域的身体信息分析装置 |
CN109002796B (zh) * | 2018-07-16 | 2020-08-04 | 阿里巴巴集团控股有限公司 | 一种图像采集方法、装置和系统以及电子设备 |
CN109165571B (zh) * | 2018-08-03 | 2020-04-24 | 北京字节跳动网络技术有限公司 | 用于插入图像的方法和装置 |
CN111091610B (zh) * | 2019-11-22 | 2023-04-11 | 北京市商汤科技开发有限公司 | 图像处理方法及装置、电子设备和存储介质 |
US11403788B2 (en) | 2019-11-22 | 2022-08-02 | Beijing Sensetime Technology Development Co., Ltd. | Image processing method and apparatus, electronic device, and storage medium |
US12051268B2 (en) * | 2019-12-18 | 2024-07-30 | L'oreal | Browblade adapter mechanism |
CN113256694B (zh) * | 2020-02-13 | 2024-06-18 | 北京沃东天骏信息技术有限公司 | 一种眉笔绘制方法和装置 |
CN113949834B (zh) * | 2021-09-01 | 2024-06-04 | 北京新氧万维科技咨询有限公司 | 一种视频展示方法、装置、电子设备及存储介质 |
JP2024125241A (ja) * | 2023-03-04 | 2024-09-17 | Kindler株式会社 | 接客支援装置、接客支援方法及び接客支援プログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3671260B2 (ja) * | 1995-05-10 | 2005-07-13 | カシオ計算機株式会社 | 画像作成装置および画像作成制御方法 |
JP3444148B2 (ja) | 1997-07-07 | 2003-09-08 | 株式会社ナビタイムジャパン | 眉描画方法 |
JPH11143352A (ja) * | 1997-11-13 | 1999-05-28 | Onishi Netsugaku Kogyosho:Kk | 化粧シミュレーション自動描画方法および装置 |
JP3773657B2 (ja) | 1998-06-18 | 2006-05-10 | 株式会社資生堂 | 眉変形システム |
JP2006247012A (ja) * | 2005-03-09 | 2006-09-21 | Takako Aono | 眉毛の化粧補助具、及び化粧方法 |
US20070047761A1 (en) * | 2005-06-10 | 2007-03-01 | Wasilunas Elizabeth A | Methods Of Analyzing Human Facial Symmetry And Balance To Provide Beauty Advice |
JP4793823B2 (ja) * | 2006-04-26 | 2011-10-12 | 株式会社メガチップス | メークアップアシスト装置および眉毛描画アシスト装置 |
KR20100058280A (ko) * | 2008-11-24 | 2010-06-03 | 삼성전자주식회사 | 휴대 단말기를 이용한 영상 촬영 방법 및 장치 |
WO2015029392A1 (ja) * | 2013-08-30 | 2015-03-05 | パナソニックIpマネジメント株式会社 | メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム |
JP6287170B2 (ja) * | 2013-12-20 | 2018-03-07 | カシオ計算機株式会社 | 眉生成装置、眉生成方法及びプログラム |
US9760935B2 (en) * | 2014-05-20 | 2017-09-12 | Modiface Inc. | Method, system and computer program product for generating recommendations for products and treatments |
CN107292812A (zh) * | 2016-04-01 | 2017-10-24 | 掌赢信息科技(上海)有限公司 | 一种表情迁移的方法及电子设备 |
CN107292220B (zh) * | 2016-04-01 | 2020-11-03 | 掌赢信息科技(上海)有限公司 | 一种眉毛位置的初始化方法及电子设备 |
US10292483B2 (en) * | 2017-03-21 | 2019-05-21 | Nisan Shlomov | Eyebrow shaping method |
CN107464253B (zh) * | 2017-07-10 | 2020-11-20 | 北京小米移动软件有限公司 | 眉毛定位方法及装置 |
CN109427075A (zh) * | 2017-08-24 | 2019-03-05 | 丽宝大数据股份有限公司 | 身体信息分析装置及其眼影分析方法 |
-
2017
- 2017-09-28 CN CN201710897603.XA patent/CN109583263A/zh active Pending
-
2018
- 2018-01-14 US US15/870,987 patent/US10528796B2/en not_active Expired - Fee Related
- 2018-01-15 KR KR1020180005063A patent/KR102045219B1/ko active IP Right Grant
- 2018-01-19 JP JP2018007219A patent/JP6803348B2/ja not_active Expired - Fee Related
- 2018-02-26 EP EP18158600.9A patent/EP3462375A1/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
US20190095697A1 (en) | 2019-03-28 |
KR102045219B1 (ko) | 2019-11-15 |
US10528796B2 (en) | 2020-01-07 |
EP3462375A1 (en) | 2019-04-03 |
KR20190037051A (ko) | 2019-04-05 |
CN109583263A (zh) | 2019-04-05 |
JP2019063480A (ja) | 2019-04-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6803348B2 (ja) | 拡張現実を結合した身体情報分析装置およびその眉型プレビュー方法 | |
JP6761824B2 (ja) | 身体情報分析装置およびその眉型比較補助方法 | |
US10516830B2 (en) | Guided image composition on mobile devices | |
JP6547013B2 (ja) | 生体情報解析装置及びその頬紅解析方法 | |
JP6568606B2 (ja) | 身体情報分析装置およびそのアイシャドウの分析方法 | |
CN106468917B (zh) | 一种可触摸现场实时视频图像的远程呈现交互方法和系统 | |
JPWO2014208168A1 (ja) | 情報処理装置、制御方法、プログラム、および記憶媒体 | |
KR20170027266A (ko) | 영상 촬영 장치 및 그 동작 방법 | |
WO2012119371A1 (zh) | 一种用户交互系统和方法 | |
KR102045228B1 (ko) | 신체 정보 분석 장치 및 얼굴형 모의 방법 | |
JP2019037742A (ja) | 身体情報分析装置およびそのリップメイクの分析方法 | |
WO2024027661A1 (zh) | 数字人驱动方法、装置、设备及存储介质 | |
KR102147930B1 (ko) | 포즈 인식 방법 및 장치 | |
JP6761407B2 (ja) | 身体情報分析装置および顔形診断方法 | |
KR102045217B1 (ko) | 인체 정보 분석장치 및 메이크업 파운데이션 분석 방법 | |
CN111880422B (zh) | 设备控制方法及装置、设备、存储介质 | |
CN105302310B (zh) | 一种手势识别装置、系统及方法 | |
KR20230062999A (ko) | 주변 환경 구조와 사용자 선호도를 반영한 인공지능 기반의 증강현실 아바타 포즈 제안 장치 및 방법 | |
TWI570594B (zh) | 控制裝置、系統及方法 | |
RU2703327C1 (ru) | Способ обработки двухмерного изображения и реализующее его вычислительное устройство пользователя | |
US9860480B2 (en) | Method for processing information and electronic device | |
CN116055708B (zh) | 一种感知可视交互式球幕三维立体成像方法及系统 | |
JP2020013200A (ja) | 絵画支援システム、絵画支援データ作成プログラムおよび絵画支援データ | |
JPH09186923A (ja) | 撮像方法とその装置 | |
CN115379195A (zh) | 视频生成方法、装置、电子设备和可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190314 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190618 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190909 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200428 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200804 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201023 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201130 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6803348 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |