JP2019037742A - 身体情報分析装置およびそのリップメイクの分析方法 - Google Patents

Abstract

【課題】使用者が化粧を行うときに、唇部位のイメージ分析を提供してガイドすることで使用者が迅速に、かつさらに完璧に化粧動作を行うよう補助できる身体情報分析装置、およびそのリップメイクの分析方法を提供する。【解決手段】身体情報分析装置およびそのリップメイクの分析方法であって、リップメイクの分析方法は、身体情報分析装置のイメージ取得モジュールを介して外部イメージを取得し、外部イメージにおいて人の顔を認識したとき、人の顔の各部位を位置決めすることＳ１６と、位置決め完了後に唇の位置を取得することＳ１８と、リップメイクの平均色数値を分析することＳ２２と、リップメイクの平均色数値をプリセット色数値と対比することＳ２４と、身体情報分析装置の表示モジュールに対比結果を表示することＳ２６と、補助動作完了まで上述のステップを繰り返して実行すること３４と、を含む。【選択図】図６Ｂ

Description

本発明は分析装置および分析方法に関し、特に身体情報分析装置およびそのリップメイクの分析方法に関する。

女性にとって化粧は、ほとんど毎日必須の動作の１つといってよい。
通常、使用者は鏡の前に座って化粧を行い、またはスマートフォン、タブレットなどのデバイスのカメラレンズやスクリーンにより化粧を行う。
ただ、使用者の化粧が均一であるか否か、色が適切であるか否かなどの問題は、往々にして使用者が肉眼で自ら観察、確認するしかない。従って、経験不足の一部の使用者には、化粧の速度が遅く、またはうまく化粧できないといった悩みがある。

これに鑑み、本技術分野においては、使用者が迅速に化粧動作を完了できるよう効果的に補助し、かつ経験不足の使用者の化粧を最適化するよう補助できる補助装置が非常に必要とされる。

本発明は、使用者が化粧を行うときに、唇部位のイメージ分析を提供してガイドすることで使用者が迅速に、かつさらに完璧に化粧動作を行うよう補助できる身体情報分析装置、およびそのリップメイクの分析方法を提供する。

本発明の実施例において、リップメイクの分析方法は、身体情報分析装置のイメージ取得モジュールを介して外部イメージを取得し、外部イメージにおいて人の顔を認識したとき、人の顔の各部位を位置決めするステップと、位置決め完了後に唇の位置を取得するステップと、リップメイクの平均色数値を分析するステップと、唇の平均色数値をプリセット色数値と対比するステップと、身体情報分析装置の表示モジュールに対比結果を表示するステップと、補助動作を完了するまで上述ステップを繰り返して実行するステップと、を含む。

本発明の実施例において、身体情報分析装置は少なくとも、イメージ取得モジュール、表示モジュール、および処理ユニットを含み、ここで、イメージ取得モジュールは外部イメージを取得することに用いられ、処理ユニットは外部イメージを認識する。処理ユニットが外部イメージにおいて人の顔を認識したとき、人の顔の各部位を位置決めすることで唇の位置を取得する。続いて、処理ユニットはリップメイクの平均色数値を分析し、かつ平均色数値をプリセット色数値と対比して対比結果を生成する。ここで、表示モジュールは対比結果を表示することに用いられる。

関連技術と比較して到達可能な本発明の技術効果は、使用者が身体情報分析装置の補助により化粧動作を行うとき、自身の顔部の容貌を見ることができる他、唇位置のイメージ分析を直接得て、これによりさらに迅速に、かつさらに完璧に化粧動作を行えることである。

本発明の第１の具体的実施例におけるシステム構造図である。 本発明の第１の具体的実施例における分析装置の概略図である。 本発明の第２の具体的実施例における分析装置の概略図である。 本発明の第１の具体的実施例における分析装置のブロック図である。 本発明の第１の具体的実施例における処理ユニットの概略図である。 本発明の第１の具体的実施例における第１リップメイク分析フロー図である。 本発明の第１の具体的実施例における第２リップメイク分析フロー図である。 顔部位置決め概略図である。 本発明の第１の具体的実施例におけるプリセット数値分析フロー図である。 本発明の第３の具体的実施例における分析装置の概略図である。

本発明の好適な実施例につき、図面を踏まえて以下に詳細に説明する。
先ず、図１を参照されたい。本発明の第１の具体的実施例におけるシステム構造図である。本発明は、身体情報分析装置（以下、分析装置という）を開示し、分析装置は主にリップメイクの分析方法（以下、分析方法という）を実行することに用いられることで、使用者が迅速に、かつ完璧に唇部分の化粧動作を行うよう補助する。

実施例において、使用者は、モバイル装置２への操作により分析装置１へ設定を行うことができる。図１に示すように、モバイル装置２内にはアプリケーションプログラム２１がインストールされ、かつモバイル装置２は分析装置１と有線または無線で接続されることができる。具体的には、アプリケーションプログラム２１は、分析装置１と相互接続可能なアプリケーションプログラム２１である（例えば、分析装置１のメーカーにより開発され、かつ提供されたアプリケーションプログラムであってよい）。本発明において、使用者はアプリケーションプログラム２１への操作により分析装置１と接続を確立し、かつ分析装置１での各種設定動作（例えば、顔部情報の登録の設定、各種プリセット値の設定など）を完了させることができる。

実施例において、分析装置１は、所在領域内の無線ルータ３に接続することで、無線ルータ３を介してインターネット４へ接続してもよい。これにより、分析装置１は、インターネット４を介してファームウェアの更新、データのアップロードとダウンロードなどの動作を行うことができる。かつ、分析装置１はさらに、インターネット４により使用者の身体情報をリモート端末のコンピュータデバイス（図示せず）へ伝送することで、使用者にリモート端末で検索させ、またはこれにより他の場所でのバックアップという目的を実現するようにできる。

同時に図２および３を参照されたい。それぞれ本発明の第１の具体的実施例および第２の具体的実施例における分析装置の概略図である。本発明の分析装置１は主に使用者５の寝室またはメイクルームに設けられることで、使用者５が身体情報（例えば、顔部、頸部、手部の皮膚状況）の検出と分析を行い易くする。

分析装置１はミラースクリーン１１を有する。分析装置１が起動するとき、ミラースクリーン１１を介してグラフィカルユーザーインターフェース（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ，ＧＵＩ）を表示し、かつグラフィカルユーザーインターフェースにより使用者５とインタラクションを行うことができる。また、分析装置１がオフになったとき、ミラースクリーン１１を単純なミラーとして使用することで使用者５の容貌を反射することもきる。本発明は主に分析装置１を介して使用者５が化粧動作を行うことを補助し、従って、ミラースクリーン１１はグラフィカルユーザーインターフェースを表示するとともに、使用者５の容貌を反射可能であることで、使用者５が化粧時に使用者５の容貌を分析することに有利であり、かつ同時に補助（後述）を提供する。実施例において、ミラースクリーン１１はタッチ式スクリーンであってよく、使用者５はミラースクリーン１１を介して分析装置１にデータの入力動作を行うことができる。

分析装置１はさらに、分析装置１に設けられ、かつ角度の調整を受け入れ可能であるイメージ取得モジュール１２を有する。実施例において、イメージ取得モジュール１２は使用者５に対して高解像度イメージ（例えば、顔部イメージ、頸部イメージ、手部イメージなど）を撮影でき、分析装置１はイメージにより使用者５の身体情報および化粧の進捗を分析できる。他の実施例において、イメージ取得モジュール１２は外部情報（例えば、一次元コード、二次元コードなど）を取得することで、情報の内容から対応するデータを取得できる。

分析装置１はさらに、複数のボタン１３を備えてもよい。本実施例において、複数のボタン１３は実体ボタン（ｂｕｔｔｏｎ）またはタッチキー（ｔｏｕｃｈ ｋｅｙ）でもよいが、限定しない。使用者５は、ボタン１３を触発することで上述のグラフィカルユーザーインターフェースを操作制御し（例えば、グラフィカルユーザーインターフェースが、トップページへ戻る、前のページへ移動、または、次のページへ移動などを制御する）、または分析装置１が対応する機能（例えば、ミラースクリーン１１をオンにする、ミラースクリーン１１をオフにする、イメージ取得モジュール１２を起動するなど）を迅速に実行するようにできる。

分析装置１はさらに、１つまたは複数のセンサ１４（例えば、温度センサ、湿度センサなど）を有してもよく、分析装置１の所在環境の環境データを検知し、これにより使用者５の身体情報に対する分析装置１の検出と分析の正確率を高める。例えば、センサ１４が焦電式赤外線センサ（Ｐｙｒｏｅｌｅｃｔｒｉｃ Ｉｎｆｒａｒｅｄ Ｒａｄｉａｌ ｓｅｎｓｏｒ，ＰＩＲ ｓｅｎｓｏｒ）の場合、使用者５が分析装置１の使用領域へ入ることを随時検出でき、対応してスタンバイモードから離脱し、かつイメージ取得モジュール１２を起動して使用者５に対して顔部イメージなどの撮影を試み、分析プロセスを開始する。

他の実施例において、センサ１４はさらにモーションセンサ（ｍｏｔｉｏｎ ｓｅｎｓｏｒ）であってもよく、分析装置１はモーションセンサにより使用者５の移動ジェスチャー（例えば、左フリック、右フリック、上フリック、下フリック、前に押す、または後ろへ引っ張るなど）を検知できる。このように、使用者５はジェスチャーにより分析装置１へデータ入力動作を行うことができ、上述ミラースクリーン１１またはボタン１３に触れる必要がないことで指紋が残ることを防ぐ。

引き続き、図４を参照されたい。本発明の第１の具体的実施例における分析装置ブロック図である。図４に示すように、分析装置１は主に処理ユニット１０と、処理ユニット１０に電気的に接続された表示モジュール１１１と、イメージ取得モジュール１２と、入力インターフェース１５と、無線伝送モジュール１６とを含む。

実施例において、イメージ取得モジュール１２はカメラであり、外部イメージおよび外部情報を取得することに用いられる。分析装置１は外部イメージを介して使用者を認識（例えば、顔部認識、頸部認識、手部認識など）することで使用者の顔部、頸部、手部などの部位を分析し、または外部情報の内容を介して対応する動作を行うことができる。

表示モジュール１１１は、上述のグラフィカルユーザーインターフェースを表示することに用いられる。実施例において、表示モジュール１１１はミラースクリーン１１の中に装着されている。表示モジュール１１１がイネーブルにされると、表示モジュール１１１の光源はミラースクリーン１１を透過し、かつグラフィカルユーザーインターフェースをミラースクリーン１１に表示できる。表示モジュール１１１がディセーブルにされると、使用者はミラースクリーンを通常のミラーとして使用できる。

分析装置１は、入力インターフェース１５を介して使用者の外部入力を受け入れ、これにより使用者はグラフィカルユーザーインターフェースとインタラクションを行うことができ、または必要な設定動作を行うことができる。実施例において、入力インターフェース１５は上述のセンサ１４であってよく、使用者のジェスチャー入力を検知することに用いられる。他の実施例において、入力インターフェース１５は上述のイメージ取得モジュール１２であってよく、外部イメージまたは外部情報を取得することに用いられる。

さらに他の実施例において、入力インターフェース１５はタッチスクリーンまたはボタン１３であってよく、使用者の入力動作を受け入れることに用いられる。さらに別の実施例において、入力インターフェース１５はマイクであってよく、外部音声情報を受け入れることに用いられる。

無線伝送モジュール１６はインターネット４へ接続することに用いられる。具体的には、使用者はインターネット４によりリモート端末から分析装置１へ接続することで分析装置１に記録された各種データ（例えば、身体情報）を随時検索できる。

処理ユニット１０は表示モジュール１１１、イメージ取得モジュール１２、入力インターフェース１５、および無線伝送モジュール１６に接続され、かつ処理ユニット１０はコンピュータで実行可能なソースプログラム（図示せず）を含む。コンピュータで実行可能なソースプログラムの実行を介して、処理ユニット１０は本発明の分析方法をさらに実現できる。

同時に図５を参照されたい。本発明の第１の具体的実施例における処理ユニットの概略図である。具体的には、処理ユニット１０は主に上述コンピュータで実行可能なソースプログラムを介して本発明の分析方法における各機能を実行し、かつ異なる機能に基づき、上述コンピュータで実行可能なソースプログラムを以下のいくつかの機能モジュールに分けることができる。

１．イメージ取得モジュール１２により取得された外部イメージを認識することで、外部イメージに人の顔が存在するか否かを分析するための顔部認識モジュール１０１。
２．アルゴリズムにより外部イメージにおける人の顔を位置決めすることで、人の顔の各部位（例えば、眉毛、目、鼻、唇など）の位置を取得する位置決めモジュール１０２であり、本発明において位置決めモジュール１０２は主に人の顔から唇の位置を取得する。
３．唇の位置をイメージ分析することで使用者の現在の唇のリップメイクの状況（例えば、色の明るさ、色の分布率など）を取得する分析モジュール１０３。
４．使用者の現在のリップメイクの状況をプリセット値と対比して、使用者に対比結果（例えば、色が明るすぎる、色が暗すぎる、色が均一でないなど）を通知することで使用者に対して化粧の補助を行う対比モジュール１０４。

引き続き、図６Ａおよび６Ｂを参照されたい。それぞれ本発明の第１の具体的実施例における第１リップメイク分析フロー図および第２リップメイク分析フロー図である。図６Ａおよび図６Ｂは、本発明の分析方法の各ステップを説明することに用いられ、かつ主に図１から図５までに示される分析装置１に応用される。具体的には、本発明の分析装置１は、処理ユニット１０を介して上述のコンピュータで実行可能なソースプログラムを実行して下述の各ステップを実現する。

図６Ａに示すように、本発明の分析装置１により上述分析方法を実行することで使用者の化粧動作を補助するには、先ず、使用者は分析装置１をオンにする必要がある（ステップＳ１０）。実施例において、使用者はタッチスクリーンまたはボタン１３を触発することで分析装置１をオンにできる。他の実施例において、分析装置１は通電後に自動でスタンバイモードに入り、かつ使用者はイメージ取得モジュール１２またはセンサ１４によりジェスチャーを入力することで分析装置１を起動できるが、限定しない。

具体的には、本発明の分析装置１は異なる機能を提供するための異なるモードを有し、本実施例は、オンになると、使用者の化粧動作を補助する補助モードに分析装置１を自動で入らせる。その他の実施例において、分析装置１はオンになった後にスタンバイモードに入り、かつ使用者の指令を受け取った後に補助モードに入ってもよい。

分析装置１がオンになった後、イメージ取得モジュール１２を介して外部イメージを取得し続け（ステップＳ１２）、かつ、処理ユニット１０は取得された外部イメージに人の顔が存在するか否かを判断し続ける（ステップＳ１４）。実施例において、処理ユニット１０はイメージ取得モジュール１２から外部イメージを取得し、かつ上述の顔部認識モジュール１０１により外部イメージに対して顔部認識を行うことで外部イメージに人の顔が存在するか否かを判断する。

外部イメージに人の顔が存在しない場合、分析装置１は再度ステップＳ１２とステップＳ１４を実行することで外部イメージの取得と分析を行い続ける。例を挙げると、外部イメージに床、ドア、椅子などの物品しか存在しない（寝室に人が存在しないことを表す）可能性がある場合、または使用者の身体または背部しか存在しない（使用者は化粧動作を行おうとしていないことを表す）場合、この状況では分析装置１は本発明の分析方法を主体的に実行しない。

引き続き図６Ｂに示すように、処理ユニット１０が認識した後に、外部イメージに人の顔が存在すると判断した場合、さらに人の顔の各部位（主に使用者の五官）を位置決めする（ステップＳ１６）。実施例において、処理ユニット１０は外部イメージに人の顔が存在すると判断した後に、さらに人の顔のサイズが特定の比率より大きいか否か（例えば、外部イメージの４０％以上を占める）を判断する。かつ、処理ユニット１０は、人の顔のサイズが特定の比率よりも大きいときにのみ、人の顔の各部位を位置決めする。このようにすると、処理ユニット１０の作業量を低減させ、かつ使用者が分析装置１の上述補助モードを誤って触発させることを効果的に防ぐことができる。

実施例において、処理ユニット１０が外部イメージに人の顔が存在すると判断した後、人の顔のイメージを上述の位置決めモジュール１０２へ引き渡し、位置決めモジュール１０２により人の顔のイメージを位置決めすることで人の顔の各部位の実際位置を取得する。本実施例において、位置決めモジュール１０２は主に位置決め完了後に人の顔から使用者の唇の位置を少なくとも取得する（ステップＳ１８）。

言及に値するのは、本実施例において、位置決めモジュール１０２は主に、Ｄｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムを介して該人の顔の各部位を位置決めするが、これに限定しないということである。

同時に図７を参照されたい。顔部の位置決め概略図である。処理ユニット１０が外部イメージに人の顔が存在すると認識した後、さらに上述Ｄｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムにより顔部５１のイメージを分析する。Ｄｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムは本分野における常用される技術的手段であり、それは分析完了後に顔部５１のイメージに複数の位置決めポイント６を生成できる。これにより、Ｄｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムは複数の位置決めポイント６の番号、形状、順序などの情報に基づき、顔部５１のイメージにおいて各部位の位置を確定することで位置決め動作を完了できる。

本実施例において、位置決めモジュール１０２は、位置決め後に顔部５１において唇５２周縁に分布された複数の位置決めポイント６（例えば、１１９個の位置決めポイント６）を取得する。続いて、この複数の位置決めポイント６を?げることで１つまたは複数の位置決め補助線を形成する。最後に、位置決め補助線により囲まれた領域で顔部５１の唇５２の位置を確定する。

図６Ｂに戻る。本発明の実施例において、処理ユニット１０は主に、使用者の唇イメージをプリセットイメージと対比することで使用者の現在の唇のリップメイクの状態を判断する。従って、本実施例において、分析装置１は、処理ユニット１０により採用された１つの対比イメージを表示モジュール１１１により選択的に表示できる（ステップＳ２０）。本実施例において、上述の対比イメージは例えば、分析装置１に予め記憶された拡張現実（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ，ＡＲ）イメージであってよいが、限定しない。

他の実施例において、使用者は分析装置１に予め記憶されたリップメイク製品（例えば、口紅のブランド、型番号）またはリップメイク効果を自身で選択し、または使用したいリップメイク製品を自身で入力することで分析装置１が対応する効果を自動で生成するようにできる。拡張現実イメージは、分析装置１がイメージ取得モジュール１２を介して使用者の現在のイメージをリアルタイムに取得し、かつ対応して前述の使用者が自身で選択した対応する効果を使用者の唇のイメージに重ね合わせるものである。かつ、使用者が上述の選択された対応する効果に満足する場合、この対応する効果および拡張現実イメージを分析装置１に記憶するようさらに選択することもできる。

実施例において、分析装置１は製造時に複数種の拡張現実イメージを内蔵し、かつ使用者により入力インターフェース１５を介して少なくともそのうちの１つを選択することで、上述の対比イメージとできる。他の実施例において、使用者は周辺デバイスまたはネットワークを介して好みの拡張現実イメージを分析装置１内に入力して記憶でき、これにより処理ユニット１０は使用者が自身で入力した拡張現実イメージを採用することで上述対比動作を実行できる。本実施例において、拡張現実イメージは主に顔部イメージであり、または少なくとも唇部位を含む顔部局部イメージであるが、限定しない。

ただ、他の実施例において、分析装置１は対比したい各項データ（例えば、後述のプリセット色数値）を直接予め記憶できる。この場合、分析装置１は上述の対比イメージを記憶する必要はなく、かつ上述ステップＳ２０を実行する必要はない。

ステップＳ１８の後、処理ユニット１０は少なくとも使用者の唇の位置を取得した。続いて、処理ユニット１０は唇のイメージに基づき唇のリップメイクの平均色数値を分析する（ステップＳ２２）。実施例において、処理ユニット１０は唇のイメージを前述分析モジュール１０３へ引き渡し、分析モジュール１０３により唇のリップメイクの平均色数値を分析する。実施例において、分析モジュール１０３は関連技術における１種または複数種のイメージ分析アルゴリズムを採用することで唇のイメージにより使用者の現在のリップメイクの平均色数値を分析できる。

具体的には、上述の平均色数値の算出は、処理ユニット１０により、取得された唇のイメージに対して異なるカラースペース形式で表示および分析することでもよい。例を挙げると、カラースペースは、ＲＧＢカラースペース、ＨＳＶカラースペース、ＨＳＬカラースペースなどであってもよいが、制限しない。ひいては、処理ユニット１０により採用された分析方法の必要に基づき、同時に２種類のカラースペース形式を採用して表示および分析してもよく、その中から成分を抜き取って分析することも可能である。

例を挙げると、カラーイメージのカラースペース形式がＨＳＶカラースペースであると仮定すると、イメージにおける各画素の色は「色相成分（Ｈｕｅ）」、「彩度成分（Ｓａｔｕｒａｔｉｏｎ）」、「明度成分（Ｖａｌｕｅ）」により表示されることができる。カラーイメージのカラースペース形式がＲＧＢカラースペースの場合、イメージにおける各画素の色は「赤色成分（Ｒｅｄ）」、「緑色成分（Ｇｒｅｅｎ）」、「青色成分（Ｂｌｕｅ）」により表示されることができる。

ステップＳ２２の後、処理ユニット１０はプリセット色数値を取得し、かつリップメイクの平均色数値をプリセット色数値と対比して対比結果を生成する（ステップＳ２４）。

実施例において、処理ユニット１０は、分析モジュール１０３により上述対比イメージ（例えば、使用者が選択した拡張現実イメージ）に対してイメージ分析を行う（主に、唇位置にイメージ分析を行う）ことで、プリセット色数値を取得する。これにより、処理ユニット１０はリップメイクの平均色数値およびプリセット色数値を対比モジュール１０４へ引き渡し、かつ対比モジュール１０４により平均色数値およびプリセット色数値を対比して対比結果を生成する。

他の実施例において、処理ユニット１０は、前述の対比モジュール１０４により直接、プリセット色数値を記憶し、かつステップＳ２２の後、平均色数値を対比モジュール１０４に引き渡す。これにより、対比モジュール１０４は直接、リップメイクの平均色数値をプリセット色数値と対比して対比結果を生成する。

この実施例において、プリセット色数値は分析装置１に予め記憶された標準色若しくは明るさを直接記録でき、または、使用者が予め設定した理想の色若しくは明るさを記録でき、分析装置１において上述の対比イメージを追加で記録する必要はなく、分析装置１の記憶空間を節約できる。

ステップＳ２４の後、分析装置１は表示モジュール１１１を介して上述対比結果をミラースクリーン１１へ表示する（ステップＳ２６）ことで、使用者がミラースクリーン１１から現在の唇のリップメイクの状況（例えば、色が標準明るさよりも明るい（対比イメージの明るさよりも明るい）、または色が標準明るさよりも暗い（対比イメージの明るさよりも暗い））を取得するようにし、これにより分析装置１から化粧補助を得るようにする。

実施例において、前述平均色数値とプリセット色数値は０〜２５５の画素値であり、対比結果はパーセンテージ比であり、かつ対比モジュール１０４は、次式（数１）の計算式に基づき対比結果を生成する。ただ、上述は、本発明のそのうちの１つの実施例に過ぎず、上述により制限されるわけではない。

実施例において、処理ユニット１０はさらに、唇のイメージに基づきリップメイクの標準偏差（Ｓｔａｎｄａｒｄ Ｄｅｖｉａｔｉｏｎ，ＳＤ）を分析する（ステップＳ２８）。実施例において、処理ユニット１０は唇のイメージを分析モジュール１０３へ引き渡すことで分析モジュール１０３により唇のリップメイクの標準偏差を分析する。同様に、分析モジュール１０３は関連技術における１つまたは複数種のイメージ分析アルゴリズムを採用することで唇のイメージをイメージ分析してリップメイクの標準偏差を算出できる。具体的には、本実施例において、上述標準偏差とはリップメイクの色の標準偏差である。

ステップＳ２８の後、処理ユニット１０はプリセット標準偏差を取得し、かつリップメイクの標準偏差をプリセット標準偏差と対比して第２対比結果を生成する（ステップＳ３０）。

実施例において、処理ユニット１０は、分析モジュール１０３により上述対比イメージをイメージ分析することでプリセット標準偏差を取り出し、かつ前述の対比モジュール１０４により、リップメイクの平均標準偏差およびプリセット標準偏差を対比して上述第２対比結果を生成する。

他の実施例において、処理ユニット１０は、前述の対比モジュール１０４によりプリセット標準偏差を予め記憶し、かつステップＳ２８の後に唇の標準偏差を対比モジュール１０４へ引き渡す。これにより、対比モジュール１０４によりリップメイクの標準偏差を予め記憶されたプリセット標準偏差と直接対比することで上述第２対比結果を生成する。

ステップＳ３０の後、分析装置１は、表示モジュール１１１を介して上述第２対比結果をミラースクリーン１１に表示する（ステップＳ３２）ことで、使用者がリップメイクに色の不均一さの現象（例えば、色分布状況が標準分布状況より低い（例えば、対比イメージにおける唇位置の色分布状況よりも低い）があるか否かを直接検索し、ひいてはさらに補正を行うようにする。

言及に値するのは、ステップＳ２２からステップＳ２６とステップＳ２８からステップＳ３２は実行上の順序関係を有しているわけではなく、分析装置１は、選択可能として、先ず、上述対比結果または上述第２対比結果を算出して表示でき、または、複数の処理により上述対比結果および上述第２対比結果を同時に算出して表示でき、図６Ｂに示すステップ順序には限らないことである。

実施例において、前述標準偏差は前述平均色数値に相似し、０〜２５５の画素値でよく、かつ第２対比結果は前述対比結果に相似し、パーセンテージ比であってよい。実施例において、対比モジュール１０４は、次式（数２）の計算式に基づき第２対比結果を算出する。ただ、上述は、本発明のそのうちの１つの実施例に過ぎず、上述により制限されるわけではない。

続いて、分析装置１は今回の補助動作が完了するか否かを判断し（ステップＳ３４）、かつ補助動作完了までにステップＳ１６からステップＳ３２までを繰り返して実行することで、使用者の顔部を認識し続け、五官を位置決めし続け、唇の位置およびイメージを取得し続け、唇のリップメイクの平均色数値および標準偏差を分析し続け、かつ対比結果および第２対比結果を生成して表示し続ける。分析装置１が今回の補助動作を完了したと判断した場合、今回の分析方法を終了する。上述ステップＳ１６からＳ３２までを繰り返して実行することで、本発明の分析装置１および分析方法はリアルタイム（ｒｅａｌ ｔｉｍｅ）の化粧補助機能を実現できる。

具体的には、分析装置１は使用者の顔部５１を分析し、かつ表示された対比結果において使用者のリップメイクの色が標準色よりも５％暗いことを指摘する。対比結果に基づき、使用者はリップメイクを補強できる。使用者が補強するとともに、分析装置１は使用者の顔部５１を分析し続け、かつ対比結果を補正し、使用者のリップメイクの色が標準色よりも３％暗いことを表示する。

上述の対比結果に基づき、使用者はリップメイクを引き続き補強でき、かつ分析装置１は使用者の顔部５１を分析し続ける。続いて、分析装置１は再度、対比結果を補正し、使用者の唇の色が標準色よりも１．５％暗いことを表示し、その後もこれに類推する。これにより、使用者は、リップメイクの色／明るさが標準色／明るさに等しくなる、または近似するまでリップメイクを補強し続けることができる。ここでの標準色／明るさとは、分析装置１に予め記憶された色／明るさであり、または使用者が選択した拡張現実イメージの唇位置の色／明るさであるが、限定しない。

実施例において、分析装置１はステップＳ３４で、分析装置１をオフにするか否かを判断する。本実施例において、分析装置１をオフにするまでステップＳ１６からステップＳ３２までを繰り返して実行し、かつオフにした後に今回の分析方法を終了する。これにより、分析装置１はオンにした後に上述の化粧補助機能にとどまることができる。

他の実施例において、分析装置１はステップＳ３４において、対比結果（および第２対比結果）が化粧完了基準に適合するか否かを判断する。例を挙げると、分析装置１は前述の対比結果および第２対比結果に基づき、リップメイクの平均色数値がプリセット色数値に等しいまたは近似するか否かを判断し、およびリップメイクの標準偏差がプリセット標準偏差に等しいまたは近似するか否かを判断する。かつ、分析装置１は、リップメイクの平均色数値がプリセット色数値に等しく、または近似し、かつリップメイクの標準偏差がプリセット標準偏差に等しく、または近似しているとき、対比結果（および第２対比結果）が化粧完了基準に適合していると判断する。

同様に、本実施例において、分析装置１は対比結果（および第２対比結果）が化粧完了基準に適合するまでステップＳ１６からステップＳ３２までを繰り返して実行し、かつ適合した後に今回の分析方法を終了する。

引き続き図８を参照されたい。本発明の第１の具体的実施例におけるプリセット数値の分析フロー図である。図８は、上述のプリセット色数値およびプリセット標準偏差をさらに説明することに用いられる。

具体的には、本実施例において、分析装置１は処理ユニット１０を介して上述複数の対比イメージ（例えば、拡張現実イメージ）のうちの１つを読み取り（ステップＳ４０）、かつ位置決めモジュール１０２により、選択された対比イメージを位置決めすることで、対比イメージ上で唇位置の唇イメージを取得する（ステップＳ４２）。本実施例において、処理ユニット１０がステップＳ４０において読み取った対比イメージには、少なくとも唇イメージを含む顔部イメージまたは顔部局部イメージを含む。

続いて、処理ユニット１０は分析モジュール１０３を介して唇イメージを分析することで唇イメージの平均色数値を取得するとともに唇イメージの平均色数値を上述のプリセット色数値とする（ステップＳ４４）。また、処理ユニット１０はさらに、分析モジュール１０３を介して唇イメージの標準偏差を取得して唇イメージの標準偏差を上述のプリセット標準偏差とする（ステップＳ４６）。本実施例において、分析モジュール１０３は、関連技術における１種または複数種のイメージ分析アルゴリズムを採用することで唇イメージによりプリセット色数値およびプリセット標準偏差を分析する。

本発明において、使用者は化粧前に先ず、分析装置１を操作し、分析装置１が表示モジュール１１１に複数の対比イメージを表示するようにし、かつ入力インターフェース１５を介してそのうちの１つを選択することがきる。これにより、使用者は、化粧前に先ず、ミラースクリーン１１を介して選択された対比イメージを検索することで化粧完了後の容貌を確認し、かつ化粧を行うか否かを決定できる。また、分析装置１は上述の補助モードにおいて、使用者の現在のリップメイクを選択された対比イメージと対比し、従って使用者が対比イメージと同一のリップメイクを迅速に完了するよう効果的に補助できる。

引き続き図９を参照されたい。本発明の第３の具体的実施例における分析装置の概略図である。前述のとおり、本発明における分析装置１は、リアルタイムに使用者５の顔部イメージを取得し、かつ使用者５の現在の唇５２の状況を分析し、かつ、分析装置１はミラースクリーン１１に対比イメージ表示領域１１１１を提供することで、リアルタイムに使用者５の唇５２と対比するための対比イメージ７（例えば、拡張現実イメージ）を表示できる。

具体的には、分析装置１は、複数の対比イメージから使用者５により選択された、対比を行うための対比イメージ７を読み取り、かつ処理後に（例えば、拡大処理を行う）表示モジュール１１１が対比イメージ表示領域１１１１に対比イメージ７を完全に表示し、または対比イメージ７の唇位置のクローズアップイメージを局部表示するよう制御する。

図９に示すように、ミラースクリーン１１にはさらに、情報表示領域１１１２を有し、分析装置１は、表示モジュール１１１が前述対比結果（および第２対比結果）をミラースクリーン１１の情報表示領域１１１２に表示するよう制御できる。

本実施例において、使用者５はミラースクリーン１１を介して自身の顔部および唇５２の反射イメージを見ることができ、対比イメージ表示領域１１１１を介して対比に用いられる対比イメージ７を見ることができ、かつ情報表示領域１１１２を介して現在の唇５２のリップメイクの色と分布状況が標準に適合するか否かをはっきりと理解できる（例えば、表示された対比イメージ７と異なるなど）。

例を挙げると、図９の実施例において、対比結果は現在のリップメイクの色の明るさが対比イメージ７の明るさよりも６．７％明るいことを表示し、かつ現在の唇の色分布率が対比イメージ７の色分布率よりも２％低いことを表示する。これにより、分析装置１は、使用者５が唇５２部位の化粧動作を行うことを効果的に補助でき、ひいては使用者５の化粧速度を向上させ、かつ化粧効果を最適化する。

本発明の分析装置１および分析方法を介して、使用者５が化粧動作を行うとき、ミラースクリーン１１上で自身の顔の外観を見られる他、さらに唇５２部位のイメージ分析を直接取得することができ、これによりさらに迅速に、さらに完璧に化粧動作を行うことができる。

以上は本発明の好適な実施例に過ぎず、これにより本発明の特許請求項の範囲を制限するわけではなく、本発明の内容を運用してなされたすべての等価の変更は、いずれも同じ理由から本発明の範囲内に含まれることを説明する。

１ 身体情報分析装置
１０ 処理ユニット
１０１ 顔部認識モジュール
１０２ 位置決めモジュール
１０３ 分析モジュール
１０４ 対比モジュール
１１ ミラースクリーン
１１１ 表示モジュール
１１１１ 対比イメージ表示領域
１１１２ 情報表示領域
１２ イメージ取得モジュール
１３ ボタン
１４ センサ
１５ 入力インターフェース
１６ 無線伝送モジュール
２ モバイル装置
２１ アプリケーションプログラム
３ 無線ルータ
４ インターネット
５ 使用者
５１ 顔部
５２ 唇
６ 位置決めポイント
７ 対比イメージ
Ｓ１０〜Ｓ１４ 分析ステップ
Ｓ１６〜Ｓ３４ 分析ステップ
Ｓ４０〜Ｓ４６ 分析ステップ

Claims (16)

1. 身体情報分析装置に応用されるリップメイクの分析方法であって、
   ａ）前記身体情報分析装置のイメージ取得モジュールが外部イメージを取得することと、
   ｂ）前記身体情報分析装置の処理ユニットが、前記外部イメージにおいて人の顔を認識したとき、前記人の顔の各部位を位置決めすることと、
   ｃ）ステップｂの後、前記人の顔から唇の位置を取得することと、
   ｄ）前記処理ユニットにより前記唇のリップメイクの平均色数値を分析することと、
   ｅ）前記平均色数値をプリセット色数値と対比して対比結果を生成することと、
   ｆ）前記身体情報分析装置の表示モジュールにより前記対比結果を表示すること、を含む方法。
2. ステップｅの前に、
   ｅ０１）顔部イメージである対比イメージを読み取るステップと、
   ｅ０２）前記顔部イメージを位置決めすることで唇イメージを取得するステップと、
   ｅ０３）前記唇イメージの平均色数値を分析することで前記プリセット色数値とするステップと、をさらに含む請求項１に記載のリップメイクの分析方法。
3. 前記表示モジュールにより前記対比イメージを表示し、ここで、前記対比イメージは拡張現実イメージであるステップｇ、をさらに含む請求項２に記載のリップメイクの分析方法
4. ｈ１）前記身体情報分析装置をオフにするか否かを判断するステップと、
   ｈ２）前記身体情報分析装置をオフにするまでステップｂからステップｆまでを繰り返して実行するステップと、をさらに含む請求項１に記載のリップメイクの分析方法。
5. ｉ１）前記対比結果が化粧完了基準に適合しているか否かを判断するステップと、
   ｉ２）前記対比結果が前記化粧完了基準に適合するまでステップｂからステップｆまでを繰り返して実行するステップと、をさらに含む請求項１に記載のリップメイクの分析方法。
6. ｊ）前記処理ユニットにより前記唇の前記リップメイクの標準偏差（Ｓｔａｎｄａｒｄ Ｄｅｖｉａｔｉｏｎ，ＳＤ）を分析するステップと、
   ｋ）前記標準偏差を前記プリセット標準偏差と対比して第２対比結果を生成するステップと、
   ｌ）前記表示モジュールに前記第２対比結果を表示するステップと、をさらに含む請求項１に記載のリップメイクの分析方法。
7. ステップｋの前に、
   ｋ０１）顔部イメージである対比イメージを読み取るステップと、
   ｋ０２）前記顔部イメージを位置決めすることで唇イメージを取得するステップと、
   ｋ０３）前記唇イメージの標準偏差を分析することで前記プリセット標準偏差とするステップと、をさらに含む請求項６に記載のリップメイクの分析方法。
8. 前記表示モジュールにより前記対比イメージを表示し、ここで前記対比イメージは拡張現実イメージであるステップｍ、をさらに含む請求項７に記載のリップメイクの分析方法。
9. ステップｂは、Ｄｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムを介して前記人の顔の各部位を位置決めする請求項１に記載のリップメイクの分析方法。
10. 身体情報分析装置であって、
    外部イメージを取得するためのイメージ取得モジュールと、
    表示モジュールと、
    前記イメージ取得モジュールおよび前記表示モジュールに電気的に接続され、前記外部イメージを認識し、前記外部イメージにおいて人の顔を認識したとき、前記人の顔の各部位を位置決めすることで前記人の顔から唇の位置を取得する処理ユニットと、を含み、
    ここで、前記処理ユニットは前記唇のリップメイクの平均色数値を分析し、また前記平均色数値をプリセット色数値と対比して対比結果を生成し、
    ここで、前記表示モジュールは前記対比結果を表示する、装置。
11. 前記処理ユニットは、
    前記外部イメージを認識することで前記外部イメージに前記人の顔が存在するか否かを判断する顔部認識モジュールと、
    前記人の顔を位置決めすることで前記唇の位置を取得する位置決めモジュールと、
    アルゴリズムにより前記唇の前記リップメイクの前記平均色数値を分析する分析モジュールと、
    前記平均色数値を前記プリセット色数値と対比して前記対比結果を生成する対比モジュールと、を含む請求項１０に記載の身体情報分析装置。
12. 前記処理ユニットは、対比イメージを読み取り、前記位置決めモジュールが前記対比イメージを位置決めすることで唇イメージを取得するよう制御し、かつ前記分析モジュールが前記唇イメージを分析することで前記唇イメージの平均色数値を取得して前記プリセット色数値とするよう制御し、ここで、前記対比イメージは顔部イメージである請求項１１に記載の身体情報分析装置。
13. 前記対比イメージは拡張現実イメージである請求項１２に記載の身体情報分析装置。
14. 前記処理ユニットはさらに、前記分析モジュールが前記唇の前記リップメイクの標準偏差（Ｓｔａｎｄａｒｄ Ｄｅｖｉａｔｉｏｎ，ＳＤ）を分析するよう制御し、かつ前記標準偏差をプリセット標準偏差と対比して第２対比結果を生成し、かつ前記表示モジュールが前記第２対比結果を表示するよう制御する請求項１１に記載の身体情報分析装置。
15. 前記処理ユニットは、対比イメージを読み取り、前記位置決めモジュールが前記対比イメージを位置決めすることで唇イメージを取得するよう制御し、かつ前記分析モジュールが前記唇イメージを分析することで前記唇イメージの標準偏差を取得して前記プリセット標準偏差とするよう制御し、ここで、前記対比イメージは顔部イメージである請求項１４に記載の身体情報分析装置。
16. 前記位置決めモジュールはＤｌｉｂ Ｆａｃｅ Ｌａｎｄｍａｒｋシステムを介して前記人の顔の各部位を位置決めする請求項１１に記載の身体情報分析装置。

Images