JP5555073B2 - 美容支援装置及び美容カウンセリング方法 - Google Patents
美容支援装置及び美容カウンセリング方法 Download PDFInfo
- Publication number
- JP5555073B2 JP5555073B2 JP2010148644A JP2010148644A JP5555073B2 JP 5555073 B2 JP5555073 B2 JP 5555073B2 JP 2010148644 A JP2010148644 A JP 2010148644A JP 2010148644 A JP2010148644 A JP 2010148644A JP 5555073 B2 JP5555073 B2 JP 5555073B2
- Authority
- JP
- Japan
- Prior art keywords
- line
- subject
- sight
- beauty
- tracking data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003796 beauty Effects 0.000 title claims description 202
- 238000000034 method Methods 0.000 title claims description 80
- 238000009223 counseling Methods 0.000 title claims description 43
- 238000000926 separation method Methods 0.000 claims description 67
- 238000003384 imaging method Methods 0.000 claims description 33
- 238000003860 storage Methods 0.000 claims description 30
- 230000007704 transition Effects 0.000 claims description 22
- 239000002131 composite material Substances 0.000 claims description 14
- 230000010365 information processing Effects 0.000 claims description 12
- 210000003128 head Anatomy 0.000 description 131
- 210000001508 eye Anatomy 0.000 description 42
- 238000013500 data storage Methods 0.000 description 20
- 210000004209 hair Anatomy 0.000 description 19
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 14
- 238000012545 processing Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000012360 testing method Methods 0.000 description 7
- 238000009826 distribution Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 239000002537 cosmetic Substances 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 230000037308 hair color Effects 0.000 description 4
- 208000019901 Anxiety disease Diseases 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 230000036506 anxiety Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000004907 flux Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 238000012356 Product development Methods 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 230000000155 isotopic effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000000214 mouth Anatomy 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 210000001331 nose Anatomy 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Images
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
Description
さらに、本発明の美容カウンセリング方法および視線追跡データ取得方法は、複数の工程が個々に相違するタイミングで実行されることに限定されず、ある工程の実行中に他の工程が発生すること、ある工程の実行タイミングと他の工程の実行タイミングとの一部ないし全部が重複していてもよい。
(美容支援装置)
図1は本発明の第一の実施形態にかかる美容支援装置100の一例を示す構成図である。筐体10は、説明のため一部を切り欠いて図示している。また、図2は本実施形態の美容支援装置100の機能ブロック図である。
被験者Sの美容行為を支援する本実施形態の美容支援装置100は、光束分離部12、撮像部14、視線取得部20、視点位置情報調整部(調整部)76および出力部40を備えている。
光束分離部12は、入射光の一部を透過して他の一部を反射する。
撮像部14は、光束分離部12を透過した被験者Sの頭部画像52を撮像する。
視線取得部20は、光束分離部12で反射された被験者の鏡像50を目視する被験者Sの視点VPの推移を示す視線追跡データ62を取得する。
調整部76は、頭部画像52における頭部位置情報と、視線追跡データ62が示す視点位置情報と、を互いに対応づける。
出力部40は、頭部画像52に対応づけられた視線追跡データ62を出力する。
また、美容支援装置100の各種の構成要素は、コンピュータプログラムを読み取って対応する処理動作を実行できるように、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、I/F(Interface)ユニット、等の汎用デバイスで構築されたハードウェア、所定の処理動作を実行するように構築された専用の論理回路、これらの組み合わせ、等として実施することができる。
なお、美容支援装置100においてコンピュータプログラムに対応した各種動作を処理装置に実行させるとは、各種デバイスを処理装置に動作制御させることを含む。
本実施形態の美容支援装置100は、ユーザに対して美容カウンセリングを提供する装置である。美容支援装置100のユーザが被カウンセラーにあたる。なお、視線追跡データ62が取得される被験者Sと、視線追跡データ62が提示される被カウンセラーは、共通であってもよく、または異なってもよい。また、被験者Sは、美容に関する素人であってもよく、美容専門家であってもよい。本実施形態では、美容支援装置100のユーザ(被カウンセラー)と被験者Sとを同一とする。したがって、本実施形態の場合、視線取得部20で取得される視線追跡データ62は、美容支援装置100のユーザの視線を示すデータとなる。なお、被カウンセラーと被験者Sとが異なる場合については後述する。
また、図1に示すように、バスライン80には、美容支援装置100に対する各種操作を受け付ける操作部72と、頭部画像52や視線追跡データ62のデータ処理を実行するCPU70とが接続されている。
本実施形態の撮像部14は、信号線16を介してバスライン80と電気的に接続されている。撮像部14は、撮像した被験者Sの頭部画像52を、信号線16およびバスライン80を介して画像蓄積部31に格納する。ただし、本発明においては信号線16に代えて記憶媒体を用いて頭部画像52の電子データを撮像部14から画像蓄積部31に移送してもよい。
また、頭部画像52における頭部位置情報とは、頭部画像52に含まれる頭部60の位置を示す情報である。本実施形態では、頭部画像52における、頭部60のうち両眼の瞳の中央位置などの特徴点が存在する位置をもって、頭部画像52における頭部位置情報を規定することができる。正確に頭部位置情報を規定する観点から、特徴点は2箇所以上あることが好ましい。
視線取得部20は、光束分離部12に正対する被験者Sに対向して、かつ鏡像50を目視する被験者Sの視野範囲外に配置され、鏡像50を目視する被験者Sの視線を遮ることはない。視線取得部20は、被験者Sの頭部60に向かって赤外線などの光ビーム24を照射するとともに、その反射光を受光する。視線取得部20は、受光光を画像化し、画素のコントラストに基づいて被験者Sの瞳孔位置を算出することで、被験者Sの目の位置を検出してその視点位置(視線方向)を数値データまたは画像データとして取得する。
本実施形態の視線取得部20は、赤外線ダイオードを用いて被験者Sに赤外線波長域の光ビーム24を照射する。光ビーム24の強度は、被験者Sによる鏡像50の自然な目視を妨げない程度に抑制されている。
なお、図1及び図3において視線取得部20が光束分離部12前面下部に配置されているが、被験者Sの頭部60に向かって赤外線などの光ビーム24を照射でき、その反射光を受光できれば、別の位置に配置されても良い。例えば、被験者Sが自らの姿を良く見ようとする際に、光束分離部12(半透過鏡)に近づきがちとなる。一方、視線取得部20の性能上、被験者Sとの距離を適正範囲に保つ必要がある(一例として、上記のアイトラッカーの場合には45〜75cm)。かかる場合には、視線取得部20を図3に示す位置よりさらに下げるか、筐体10の下に配置すれば良い。また、被験者Sが自らの姿の全身を見ようとする際には、光束分離部12(半透過鏡)から遠ざかる必要が生じる場合がある。かかる場合には、視線取得部20と、被験者Sとの距離を適正範囲に保つ為に、視線取得部20を光束分離部12前方に配置しても良い。
そして、視線取得部20は、光束分離部12に鏡像50として映る自らの頭部60のメイクの似合いを判断する被験者Sの視線LOSを視線追跡データ62として取得する。被験者Sの視線LOSは、鏡像50の頭部60の一部または全部に対して連続的に向けられる。
このように、被験者Sの目線を視線取得部20で追跡して視線追跡データ62を時刻歴データとして取得することで、被験者Sの視線LOSの初期位置データや、視点VPの頻度データなど、多様なデータを取得することができる。
図1に示すように、本実施形態の視線追跡データ62は、視点VPの座標の時系列データであり、視点VPを経時的に線分で結ぶことで視点VPの軌跡を示す、折れ線状、または曲線状のプロット図をなしている。
このように、遮光性の筐体10の内部に撮像部14を収容することで、光束分離部12を被験者Sが目視した際に、筐体10の内部(撮像部14)を被験者Sは見ることができない。これにより、撮像部14は、光束分離部12に映る鏡像50を目視する被験者Sの視線LOSを遮ることなく、被験者Sの頭部60に正対して静止画像(頭部画像52)を撮像することができる。
よって、光束分離部12に映る鏡像50を目視した被験者Sの視線追跡データ62を、撮像部14で撮像した頭部画像52と正確に重ね合わせることができる。
格納部33に記憶される合成画像64には、被験者Sを識別する固有の識別番号と、視線追跡データ62を取得した日時を示す日時情報とがヘッダー領域に記録されている。
また、美容支援装置100は、美容アドバイザーまたは被験者Sからの各種要求を示す入力情報を受け付ける要求受付部78を備えている。要求受付部78は、操作部72とCPU70とで構成されている。
これにより、出力部40に表示された頭部画像52(合成画像64)は鏡像50と同じ左右反転画像であって、かつ視線追跡データ62が画像合成されたものとなる。
よって、合成画像64を目視した被験者Sは、通常の鏡に映る被験者Sの鏡像50に対して、自らの視線追跡データ62が重畳された像を知得することができる。
図4は、本実施形態の美容支援装置100を用いておこなう美容カウンセリング方法(以下、本方法という場合がある)のフローチャートである。図1〜3を適宜参照しつつ、図4を用いて本方法を説明する。
取得工程S10では、被験者Sの頭部画像52を被験者Sに正対して撮像するとともに、被験者Sの鏡像50を目視する被験者Sの視点VPの推移を示す視線追跡データ62を取得する。
位置合わせ工程S20では、頭部画像52における頭部位置情報と、視線追跡データ62が示す視点位置情報と、を互いに対応づける。
出力工程S30では、頭部画像52に位置合わせされた視線追跡データ62を出力する。
撮像工程S12では、光束分離部12を通過した、被験者Sの頭部画像52を撮像部14で撮像する。
視線追跡工程S14では、光束分離部12に映る鏡像50を目視してメイクの似合いを判断している被験者Sの視線追跡データ62を、視線取得部20を用いて取得する。本方法で取得される視線追跡データ62は、視点VPの座標の時系列データである。
また、被験者Sと光束分離部12との距離L(図3を参照)と被験者S自身の大きさに応じて決まる鏡像50と頭部画像52とは所定の変換比率の乗算によって互いに寸法が調整される。
かかる寸法調整された頭部画像52における基準位置を視線追跡データ62と位置合わせすると、頭部画像52の各部位(目、鼻、髪等)に対して、被験者Sから距離2Lの焦点位置にある鏡像50に向けられた視点VPの座標位置を重ね合わせることができる。
本実施形態の美容支援装置100では、調整部76(CPU70)によって、左右反転された頭部画像52に対して視線追跡データ62が画像合成されて合成画像64が生成される。
以上により、本実施形態の美容支援装置100による視線追跡データ62の出力までの一連の処理が行われる。
取得工程S10では、被験者Sの頭部画像52を被験者Sに正対して撮像するとともに、被験者Sの鏡像50を目視する当該被験者Sの視点VPの推移を示す視線追跡データ62を取得する。
位置合わせ工程S20では、頭部画像52における頭部位置情報と、視線追跡データ62が示す視点位置情報と、を情報処理装置(美容支援装置100)によって互いに対応づける。
図5は本実施形態にかかる美容支援装置100の構成図である。筐体10は、説明のため一部を切り欠いて図示している。また、図6は本実施形態の美容支援装置100の機能ブロック図である。
一方、視線データ蓄積部32が視線提供者の視線追跡データ63を保存しているとは、本実施形態の美容支援装置100が、少なくとも被験者により使用されるときに視線提供者の視線追跡データを記憶している状態となる機能を有することを意味している。このため、視線データ蓄積部32がサプライヤから出荷される時点で視線提供者の視線追跡データが登録されていることのほか、出荷されるときには登録されていない視線提供者の視線追跡データが、被験者に使用されるまでに登録されることも許容する。
サンプル画像55は、複数のカテゴリに分類されて画像蓄積部31に保存されている。
サンプル画像55の分類は種々の観点でおこなうことができるが、たとえば、髪型のボリューム感の分布の特徴、顔型、顔パーツの相対位置、肌色の分類、虹彩色の分類、年齢などの観点で分類することができる。
髪型のボリューム感の分布とは、たとえば、正面頭部画像に水平線を二段に引き、上側の水平線より上部における毛髪領域の面積(髪トップ面積)と、上下の水平線の間における毛髪領域の面積(髪ミドル面積)と、下側の水平線より下部における毛髪領域の面積(髪ボトム面積)との比率をいう。かかる比率の大小によってサンプル画像55を複数のカテゴリに分類することができる。
顔型とは、丸顔、四角顔、三角顔、面長顔、卵顔などに分類される顔の外形形状である。
顔パーツの相対位置とは、顔における髪、眉、目、鼻、口、耳などの部位の相対的な位置関係をいう。かかる相対位置が互いに類似する顔のサンプル画像55を同一のカテゴリに分類することができる。
ここで肌色の分類とは、黄味か青味か、暖色か寒色か、などの分類である。
また虹彩色の分類とは、濃褐色、淡褐色、琥珀色、緑色、灰色、青色などの分類である。
そして、出力部40は、被験者Sの頭部画像52に対してともに対応づけられた被験者Sの視線追跡データ62と他の視線追跡データ63とを、それぞれ被験者Sの頭部画像52または鏡像50に重畳して出力する。
視線データ蓄積部32には、これらサンプル画像55の個々に対する、美容専門家SPの視線に関する専門家視線データと、異性OPの視線に関する異性視線データと、著名人CEの視線に関する著名人視線データとが記憶されている。
そして、出力部40を構成する表示駆動部42および光束分離部12は、抽出されたサンプル画像55に対応づけられた視線追跡データ63を、鏡像50に重畳して表示出力する。
これにより、被験者Sは、あたかも美容専門家SP、異性OPまたは著名人CEが被験者Sを目視したかのように、視線追跡データ63を自己の鏡像50に重畳して目視することができる。
本実施形態においては、被験者Sの頭部画像52は表示出力されず、被験者Sの視線追跡データ62と鏡像50との位置合わせ、および鏡像50とサンプル画像55との一致度の判定に用いられる。
図7は、本方法のフローチャートである。図5、6を適宜参照しつつ、図7を用いて本方法を説明する。なお、本方法は視線追跡データ取得方法を包含する。
視線追跡データ62における視点VPの基準位置は、調整部76によって頭部画像52の頭部60と位置合わせがされて(ステップS20)、視線データ蓄積部32に保存される。
この場合、CPU70は、画像蓄積部31よりサンプル画像55を一枚呼び出して表示駆動部42に転送し、これを光束分離部12で表示させる(ステップS52)。
視線取得部20は、光束分離部12で表示されたサンプル画像55を目視してそのメイクの似合いを判断する視線提供者の視線追跡データ63を取得する(ステップS54)。
取得された視線追跡データ63は視線データ蓄積部32に記憶される。
新たなサンプル画像55は光束分離部12で表示される(ステップS52)。視線取得部20は、当該新たなサンプル画像55に対する視線提供者の視線追跡データ63を取得する(ステップS54)。
まず、美容支援装置100の操作部72(図1を参照)より、いずれの視線追跡データ62、63を出力するかを選択する(ステップS60)。
被験者Sの視線追跡データ62を出力する場合(ステップS60:N)、CPU70および表示駆動部42は、位置合わせ工程(ステップS20)で頭部画像52と位置合わせされた視線追跡データ62を、光束分離部12に映る鏡像50に重畳して出力する(ステップS30)。
このとき、視線追跡データ62は、鏡像50と頭部画像52との寸法調整比率である変換比率を乗算してから光束分離部12で出力するとよい。
この工程は、具体的にはCPU70によるサンプル画像55の検索処理によって行われる。
上述のように、画像蓄積部31に記憶されているサンプル画像55は、複数のカテゴリに分類されている。一例として、CPU70は、撮像部14がステップS12で撮像した被験者Sの頭部画像52を、サンプル画像55と同様にカテゴリ分類し、頭部画像52と同一カテゴリに分類されているサンプル画像55を選択する。
このほか、ステップS62では、CPU70は、髪型のボリューム感の分布の特徴、顔型、顔パーツの相対位置などの観点から、頭部画像52ともっとも類似度の高いサンプル画像55を検索してもよい。
具体的には、CPU70は、視線追跡データ63に対応づけられたサンプル画像55と頭部画像52とにそれぞれ含まれる頭部60のサイズを正規化し、さらに、頭部画像52と鏡像50との間の変換比率を視線追跡データ63に乗じる。正規化の基準としては、たとえば、両目の中心を結んだライン上での顔幅を採ればよい。調整部76によって視点位置情報が調整された視線追跡データ63は、格納部33に格納されたうえで光束分離部12で表示出力される。
これにより、美容専門家SPや異性OP、著名人CEに提示したサンプル画像55と、被験者Sの頭部画像52とが異なるものであっても、専門家視線データ、異性視線データおよび著名人視線データを鏡像50に重ね合わせて表示出力することが可能となる。
すなわち、美容専門家SP、異性OPおよび著名人CEの視線追跡データ63を、有限枚のサンプル画像55に対して取得しておくだけで、不特定の被験者Sの鏡像50に対して視線追跡データ63を重畳して光束分離部12で表示出力することができる。
本方法によれば、美容アドバイザーおよび被験者Sは、かかる光束分離部12を目視して、被験者Sの視線と美容専門家SPや異性OP、著名人CEの視線とを対照して視点VPの傾向を把握することができる。
このとき、視線追跡データ62、63と頭部画像52とを画像合成してから光束分離部12で出力してもよく、または視線追跡データ62、63と頭部画像52とを個別のデータとして光束分離部12上で重畳的に表示してもよい。
そして、美容アドバイザーまたは被験者Sの操作によって、視線提供者とサンプル画像55の識別番号をそれぞれ要求受付部78(操作部72)より入力する。すると、CPU70は、対応するサンプル画像55に対する当該視線提供者の視線追跡データ63を格納部33から呼び出して、出力部40で表示出力させる。これにより、被験者Sは、光束分離部12で鏡像50と重畳表示される自らの視線追跡データ62と、サンプル画像55に重ね合わされてディスプレイ装置で表示出力される視線追跡データ63とを交互に対照することが可能となる。
これにより、過去の被験者S自身の視線追跡データを、現在の被験者Sの視線追跡データ62とともに出力部40で出力することにより、被験者Sは、メイクの似合いの判断時の着目点に関する自己の変化や成長を確認することができる。
そして、被験者Sが鏡像50における化粧メイクの似合いを判断する場合には、被験者Sの視線追跡データ62とともに、メイク専門家視線データを表示出力してもよい。また、被験者Sが鏡像50におけるヘアメイクやヘアカラーの似合いを判断する場合には、被験者Sの視線追跡データ62とともに、ヘア専門家視線データを表示出力してもよい。
上述のように、被験者Sを被カウンセラーとして美容アドバイスを提供する場合を例に本発明を説明した。しかしながら、以下に例示するように被験者Sと被カウンセラーとが異なることで、独自の効果を発揮する美容カウンセリング方法が提供される。
(1)被験者の美容行為を支援する美容支援装置であって、
入射光の一部を透過して他の一部を反射する光束分離手段と、
前記光束分離手段を透過した前記被験者の頭部画像を撮像する撮像手段と、
前記光束分離手段で反射された前記被験者の鏡像を目視する当該被験者の視点の推移を示す視線追跡データを取得する視線取得手段と、
前記頭部画像における頭部位置情報と、前記視線追跡データが示す視点位置情報と、を互いに対応づける視点位置情報調整手段と、
前記頭部画像に対応づけられた前記視線追跡データを出力する出力手段と、
を備える美容支援装置。
(2)前記視点位置情報調整手段により互いに対応づけられた前記頭部画像と前記視線追跡データとを記憶する記憶手段をさらに備える(1)に記載の美容支援装置。
(3)前記光束分離手段が半透過鏡である(1)または(2)に記載の美容支援装置。
(4)前記視点位置情報調整手段が、前記頭部画像と前記視線追跡データとを合成した合成画像を生成し、
前記出力手段が、前記合成画像を出力することを特徴とする(1)から(3)のいずれかに記載の美容支援装置。
(5)前記出力手段が、前記鏡像と前記頭部画像とを互いに位置合わせして、前記視線追跡データを前記鏡像に重畳して出力することを特徴とする(1)から(3)のいずれかに記載の美容支援装置。
(6)前記視点位置情報調整手段が、前記頭部画像を左右反転させて前記頭部位置情報と前記視点位置情報とを対応づける(1)から(5)のいずれかに記載の美容支援装置。
(7)前記被験者の前記頭部画像または他の画像を目視する視線提供者の視点位置の推移を示す他の視線追跡データを保存する蓄積手段をさらに備え、
前記出力手段が、前記他の視線追跡データをさらに出力することを特徴とする(1)から(6)のいずれかに記載の美容支援装置。
(8)前記視点位置情報調整手段が、前記被験者の前記頭部画像における前記頭部位置情報と、前記他の視線追跡データが示す前記視点位置情報と、を互いに対応づけ、
前記出力手段が、前記頭部画像に対してともに対応づけられた前記被験者の前記視線追跡データと前記他の視線追跡データとを、それぞれ前記被験者の前記頭部画像または前記鏡像に重畳して出力する(7)に記載の美容支援装置。
(9)前記他の視線追跡データが、美容専門家の視線に関する専門家視線データである(7)または(8)に記載の美容支援装置。
(10)前記他の視線追跡データが、前記被験者と異なる性別の前記視線提供者の視線に関する異性視線データ、または著名人の視線に関する著名人視線データである(7)から(9)のいずれかに記載の美容支援装置。
(11)情報処理装置を用いて被験者の美容行為を支援する美容アドバイス方法であって、
前記被験者の頭部画像を前記被験者に正対して撮像するとともに、前記被験者の鏡像を目視する当該被験者の視点の推移を示す前記視線追跡データを取得する工程と、
前記頭部画像における頭部位置情報と、前記視線追跡データが示す視点位置情報と、を前記情報処理装置によって互いに対応づける工程と、
前記頭部画像に対応づけられた前記視線追跡データを出力する工程と、
を含む美容アドバイス方法。
(12)前記被験者の前記頭部画像または他の頭部画像を目視する視線提供者の視点位置の推移を示す他の視線追跡データを取得する工程と、
前記被験者の前記頭部画像における前記頭部位置情報と、前記他の視線追跡データが示す前記視点位置情報と、を互いに対応づける工程と、
前記被験者の前記頭部画像に対してともに対応づけられた前記被験者の前記視線追跡データと前記他の視線追跡データとを、前記被験者の前記頭部画像または前記鏡像に重畳して出力する工程と、
をさらに含む(11)に記載の美容アドバイス方法。
12 光束分離部
14 撮像部
16 信号線
18 画像提示部
20 視線取得部
22 信号線
24 光ビーム
30 記憶部
31 画像蓄積部
32 視線データ蓄積部
33 格納部
40 出力部
42 表示駆動部
50 鏡像
52 頭部画像
55 サンプル画像
60 頭部
62、63 視線追跡データ
64 合成画像
70 CPU
72 操作部
74 抽出部
76 調整部
78 要求受付部
80 バスライン
100 美容支援装置
S 被験者
VP 視点
LOS 視線
SP 美容専門家
OP 異性
CE 著名人
Claims (15)
- 入射光の一部を透過して他の一部を反射する光束分離手段と、
前記光束分離手段を透過した被験者の頭部画像を撮像する撮像手段と、
前記光束分離手段で反射された前記被験者の鏡像を目視する当該被験者の視点の推移を示す視線追跡データを取得する視線取得手段と、
前記頭部画像における頭部位置情報と、前記視線追跡データが示す視点位置情報と、を互いに対応づける視点位置情報調整手段と、
前記頭部画像に対応づけられた前記視線追跡データを出力する出力手段と、
を備える美容支援装置。 - 前記視点位置情報調整手段により互いに対応づけられた前記頭部画像と前記視線追跡データとを記憶する記憶手段をさらに備える請求項1に記載の美容支援装置。
- 前記光束分離手段が半透過鏡である請求項1または2に記載の美容支援装置。
- 前記視点位置情報調整手段が、前記頭部画像と前記視線追跡データとを合成した合成画像を生成し、
前記出力手段が、前記合成画像を出力することを特徴とする請求項1から3のいずれか一項に記載の美容支援装置。 - 前記出力手段が、前記鏡像と前記頭部画像とを互いに位置合わせして、前記視線追跡データを前記鏡像に重畳して出力することを特徴とする請求項1から3のいずれか一項に記載の美容支援装置。
- 前記視点位置情報調整手段が、前記頭部画像を左右反転させて前記頭部位置情報と前記視点位置情報とを対応づける請求項1から5のいずれか一項に記載の美容支援装置。
- 前記被験者の前記頭部画像または他の画像を目視する視線提供者の視点位置の推移を示す他の視線追跡データを保存する蓄積手段をさらに備え、
前記出力手段が、前記他の視線追跡データをさらに出力することを特徴とする請求項1から6のいずれか一項に記載の美容支援装置。 - 前記視点位置情報調整手段が、前記被験者の前記頭部画像における前記頭部位置情報と、前記他の視線追跡データが示す前記視点位置情報と、を互いに対応づけ、
前記出力手段が、前記頭部画像に対してともに対応づけられた前記被験者の前記視線追跡データと前記他の視線追跡データとを、それぞれ前記被験者の前記頭部画像または前記鏡像に重畳して出力する請求項7に記載の美容支援装置。 - 前記他の視線追跡データが、美容専門家の視線に関する専門家視線データである請求項7または8に記載の美容支援装置。
- 前記他の視線追跡データが、前記被験者と異なる性別の前記視線提供者の視線に関する異性視線データ、または著名人の視線に関する著名人視線データである請求項7から9のいずれか一項に記載の美容支援装置。
- 情報処理装置を用いて被カウンセラーの美容行為を支援する美容カウンセリング方法であって、
被験者の頭部画像を前記被験者に正対して撮像するとともに、前記被験者の鏡像を目視する当該被験者の視点の推移を示す視線追跡データを取得する工程と、
前記頭部画像における頭部位置情報と、前記視線追跡データが示す視点位置情報と、を前記情報処理装置によって互いに対応づける工程と、
前記頭部画像に対応づけられた前記視線追跡データを出力する工程と、
を含む美容カウンセリング方法。 - 出力される前記視線追跡データを、前記被カウンセラーに提示することを特徴とする請求項11に記載の美容カウンセリング方法。
- 前記被験者が前記被カウンセラーである請求項12に記載の美容カウンセリング方法。
- 前記被験者と前記被カウンセラーとが異なる請求項12に記載の美容カウンセリング方法。
- 前記被験者が美容専門家である請求項14に記載の美容カウンセリング方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010148644A JP5555073B2 (ja) | 2009-10-02 | 2010-06-30 | 美容支援装置及び美容カウンセリング方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009230566 | 2009-10-02 | ||
JP2009230566 | 2009-10-02 | ||
JP2010148644A JP5555073B2 (ja) | 2009-10-02 | 2010-06-30 | 美容支援装置及び美容カウンセリング方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011092691A JP2011092691A (ja) | 2011-05-12 |
JP5555073B2 true JP5555073B2 (ja) | 2014-07-23 |
Family
ID=44110298
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010148644A Active JP5555073B2 (ja) | 2009-10-02 | 2010-06-30 | 美容支援装置及び美容カウンセリング方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5555073B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5503432B2 (ja) * | 2009-10-02 | 2014-05-28 | 花王株式会社 | 美容カウンセリングシステム |
JP6027764B2 (ja) * | 2012-04-25 | 2016-11-16 | キヤノン株式会社 | ミラーシステム、および、その制御方法 |
JP7346869B2 (ja) * | 2019-03-27 | 2023-09-20 | 富士通株式会社 | 画像処理プログラム、画像処理装置及び画像処理方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0449943A (ja) * | 1990-06-14 | 1992-02-19 | A T R Shichiyoukaku Kiko Kenkyusho:Kk | 眼球運動分析装置 |
JP2000005130A (ja) * | 1998-06-19 | 2000-01-11 | Nippon Hoso Kyokai <Nhk> | 眼球運動測定方法および装置 |
JP2001228785A (ja) * | 2000-02-15 | 2001-08-24 | Hitachi Ltd | コンピュータ支援情報伝達方法およびコンピュータ支援情報伝達装置 |
JP2004120377A (ja) * | 2002-09-26 | 2004-04-15 | Nikon Corp | 画像表示装置および画像表示システムの利用方法 |
JP2004357099A (ja) * | 2003-05-30 | 2004-12-16 | Pioneer Electronic Corp | 映像情報管理提供システム、サーバ装置及びシミュレーションエンジン装置 |
JP2007319327A (ja) * | 2006-05-31 | 2007-12-13 | Hitachi Medical Corp | 読影支援システム |
-
2010
- 2010-06-30 JP JP2010148644A patent/JP5555073B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2011092691A (ja) | 2011-05-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107847226B (zh) | 视觉认知测定系统、服务器控制方法 | |
EP2829221B1 (en) | Asperger's diagnosis assistance device | |
CN109645955B (zh) | 基于vr和眼动追踪的多功能视觉功能检测装置及方法 | |
JP7106569B2 (ja) | ユーザーの健康状態を評価するシステム | |
EP3182362A1 (en) | Method and sytem for evaluating fitness between eyeglasses wearer and eyeglasses worn thereby | |
de Almeida et al. | Computational methodology for automatic detection of strabismus in digital images through Hirschberg test | |
JP6450085B2 (ja) | 健康状態検査装置 | |
CN113467619B (zh) | 画面显示方法、装置和存储介质及电子设备 | |
AU2014234955B2 (en) | Automatic detection of task transition | |
JP5555073B2 (ja) | 美容支援装置及び美容カウンセリング方法 | |
Malaspina et al. | What do eye movements tell us about the visual perception of individuals with congenital prosopagnosia? | |
JP6471559B2 (ja) | 診断装置並びに当該診断装置における画像処理方法、画像処理システム及びそのプログラム | |
JP5782540B2 (ja) | 美容カウンセリング方法 | |
Villanueva et al. | Determination of pupillary distance using YOLO algorithm | |
Zheng et al. | An automatic stimulus and synchronous tracking system for strabismus assessment based on cover test | |
Nadella | Eyes detection and tracking and eye gaze estimation | |
EP4325517A1 (en) | Methods and devices in performing a vision testing procedure on a person | |
Kasprowski | Eye tracking hardware: past to present, and beyond | |
WO2018142425A1 (en) | A system and method for tracking eye in vestibular evaluation | |
Vigário et al. | Towards a mobile phone pupillometer | |
Diethei et al. | The usability and trustworthiness of medical eye images | |
JP6007543B2 (ja) | 変位測定装置、変位測定方法、及びプログラム | |
CN110333756B (zh) | 用于气质美学设计咨询的全息增强现实系统 | |
CN114863093B (zh) | 基于眼动技术的神经网络训练方法及建筑设计方法和系统 | |
Mariakakis et al. | Ocular symptom detection using smartphones |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130318 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131025 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131129 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140314 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20140408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140527 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140530 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5555073 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |