JP2007293649A - メークアップアシスト装置および眉毛描画アシスト装置 - Google Patents

Abstract

【課題】豊富なバリエーションと自由度の高い操作性を有するメークアップアシスト装置を提供することを課題とする。
【解決手段】眉毛描画アシスト装置のメモリにはテンプレート画像データが格納されている。利用者は、テンプレート画像を切り替えて表示させることで、モデルやタレントの眉毛から好みのタイプのものを選択する。アシスト装置は撮像部を備え、利用者の顔映像をリアルタイムでディスプレイに表示させる。そして、利用者の顔映像にテンプレートの眉毛を合成表示させる。利用者が合成映像を見てテンプレートの決定を行うと、利用者の実際の眉毛領域とテンプレートの眉毛領域の差分領域が明示される。たとえば、眉毛を描画すべき領域が赤色に表示され、眉毛を剃る領域が青色で表示される。
【選択図】図７

Description

本発明は、眉毛書きなどのメークアップをアシストする装置に関する。

眉毛の色、形、位置によって人の表情は大きく変わる。女性の多くは、自分の顔に合った眉毛を整えるために、あるいは自分をより美しく見せるために、アイブローペンシルで眉毛を描画したり、眉毛の一部を剃ったりして眉毛の形や色を整えている。

しかし、眉毛を整える作業は非常に難しい作業である。鏡を覗きこんで、一人で眉毛を剃ったり描いたりする作業は、慣れている人でも簡単な作業ではない。そこで、このような作業をアシストするための技術が特許文献１や特許文献２で開示されている。

特許文献１は、理美容用鏡に関する発明である。この理美容用鏡には、顔、目、鼻、口、眉などの輪郭がエッチングされている。たとえば、エッチングされた口の形状を参考にしながら口紅を塗ることができる。特許文献２は、眉毛書き用のプレートに関するものである。このプレートには眉毛の形状が打ち抜かれており、また、目尻に対応する位置にガイドラインが記されている。利用者は、ガイドラインを参照して目尻の位置を合わせつつ、打ち抜かれた眉毛形状に沿って眉毛を描くことができる。

特開平８−１４０７３４号公報 特開平９−１００３４号公報

上記特許文献１や特許文献２で示したように、眉毛書きなどの化粧を行う作業をアシストするための器具が考えられている。しかし、これらの器具を利用する場合、あらかじめ用意された形状に合わせて眉毛や口紅を塗るため、自由度が低いという問題がある。眉毛の形や位置は微妙に変化するだけでも表情が大きく異なる。また、ある人にとっては美しく映る形状であっても、別の人に適用すると全く似合わないという場合もある。したがって、全てのユーザにぴったりとマッチする形状や位置が設定された器具を製作するということは困難である。様々な形状のものを用意するというのも現実的でない。

そこで、本発明は前記問題点に鑑み、豊富なバリエーションと自由度の高い操作性を有するメークアップアシスト装置を提供することを目的とする。

上記課題を解決するため、請求項１記載の発明は、顔を撮像する撮像手段と、メークアップの対象となる所定の要素についてテンプレートデータを蓄積する手段と、前記撮像手段より入力した顔画像に含まれる前記所定の要素の実領域と前記テンプレートデータより設定される前記所定の要素のテンプレート領域との差分領域を前記顔画像に合成して表示する合成表示手段と、を備えることを特徴とする。

請求項２記載の発明は、請求項１に記載のメークアップアシスト装置において、前記差分領域のうち、前記実領域であって前記テンプレート領域でない領域と、前記テンプレート領域であって前記実領域でない領域とは異なる態様で表示されることを特徴とする。

請求項３記載の発明は、請求項１または請求項２に記載のメークアップアシスト装置において、前記実領域には既にメークアップにより描画されている領域が含まれることを特徴とする。

請求項４記載の発明は、請求項１ないし請求項３のいずれかに記載のメークアップアシスト装置において、さらに、前記顔画像から前記所定の要素を消去した上で前記テンプレートデータより生成される前記所定の要素のテンプレート画像を前記顔画像に合成表示することでテンプレートの適用イメージを確認する手段、を備えることを特徴とする。

請求項５記載の発明は、請求項４に記載のメークアップアシスト装置において、さらに、前記顔画像に合成させている前記テンプレート画像の色、濃さ、形状、目元からの相対的位置のうちいずれか１つまたは複数を調整する調整手段、を備えることを特徴とする。

請求項６記載の発明は、請求項５に記載のメークアップアシスト装置において、前記合成表示手段は、前記調整手段により調整された前記テンプレート画像に対して前記テンプレート領域を決定し、決定されたテンプレート領域に対応して前記差分領域を合成表示することを特徴とする。

請求項７記載の発明は、請求項１ないし請求項６のいずれかに記載のメークアップアシスト装置において、前記合成表示手段は、表示する合成画像を拡大または縮小する機能を備えることを特徴とする。

請求項８記載の発明は、顔を撮像する撮像手段と、テンプレート眉毛データを蓄積する手段と、前記撮像手段より入力した顔画像に含まれる実眉毛領域と前記テンプレート眉毛データより設定されるテンプレート眉毛領域との差分領域を前記顔画像に合成して表示する合成表示手段と、を備えることを特徴とする。

請求項９記載の発明は、請求項８に記載の眉毛描画アシスト装置において、前記差分領域のうち、前記実眉毛領域であって前記テンプレート眉毛領域でない領域と、前記テンプレート眉毛領域であって前記実眉毛領域でない領域とは異なる態様で表示されることを特徴とする。

請求項１０記載の発明は、請求項８または請求項９に記載の眉毛描画アシスト装置において、前記実眉毛領域には眉墨が描画された領域が含まれることを特徴とする。

請求項１１記載の発明は、請求項８ないし請求項１０のいずれかに記載の眉毛描画アシスト装置において、さらに、前記顔画像から眉毛を消去した上で前記テンプレート眉毛データより設定されるテンプレート眉毛画像を前記顔画像に合成して表示することでテンプレートの適用イメージを確認する手段、を備えることを特徴とする。

請求項１２記載の発明は、請求項１１に記載の眉毛描画アシスト装置において、さらに、前記顔画像に合成させている前記テンプレート眉毛画像の色、濃さ、形状、目元からの相対的位置のうちいずれか１つまたは複数を調整する調整手段、を備えることを特徴とする。

請求項１３記載の発明は、請求項１２に記載の眉毛描画アシスト装置において、前記合成表示手段は、前記調整手段により調整されたテンプレート眉毛画像に対して前記テンプレート眉毛領域を決定し、決定した前記テンプレート眉毛領域に対して前記差分領域を合成表示することを特徴とする。

請求項１４記載の発明は、請求項８ないし請求項１３のいずれかに記載の眉毛描画アシスト装置において、前記合成表示手段は、表示する合成画像を拡大または縮小する機能を備えることを特徴とする。

本発明のメークアップアシスト装置は、撮像手段より入力した顔画像に含まれる所定の要素の実領域とテンプレートデータより設定される所定の要素のテンプレート領域との差分領域を顔画像に合成して表示する。これにより、テンプレートにあわせて容易にメークアップすることが可能である。

また、テンプレートデータを多数用意すれば、多数のバリエーションのメークアップパターンを楽しむことが可能である。たとえば、お気に入りのモデルやタレントのテンプレートデータを用意すれば、モデルやタレントと同じメークを行うことが可能である。また、メーク作業をアシストするためのガイドプレートや補助器具を装着したり、携帯したりする必要がなく、使い勝手もよい。

本発明のメークアップアシスト装置は、また、実領域であってテンプレート領域でない領域と、テンプレート領域であって実領域でない領域とは異なる態様で表示される。これにより、描画すべき部分と削るべき部分とが明確になり、メーク作業を行い易い。

また、実領域には既にメークアップにより描画されている領域が含まれる。したがって、メーク作業を行うにつれて描画すべき領域の表示が変化するので、描画すべき部分が、より明確になり、メーク作業を行い易い。

また、撮影された顔画像から所定の要素を消去した上でテンプレートデータより生成される所定の要素のテンプレート画像を顔画像に合成表示する。これにより、たとえばモデルやタレントのメークアップを自分の顔に適用させた場合のイメージを確認することが可能である。

｛装置構成および各処理部の概略｝
以下、図面を参照しつつ本発明の実施の形態について説明する。図１は、本発明の実施の形態に係る眉毛描画アシスト装置１の正面図である。この眉毛描画アシスト装置１は、装置前面に撮像部１１、液晶表示ディスプレイ１２、操作部１３を備えている。眉毛描画アシスト装置１は、液晶表示ディスプレイ１２等が配置される装置本体部１Ｌと、装置本体部１Ｌの下端に連設された把持部１Ｍとから構成されている。装置本体部１Ｌは、正面視が略長方形状で薄型の形状をしており、その下端に丸みを帯びた細長形状の把持部１Ｍが連設されることで全体として手鏡のようなシルエットとなっている。

また、眉毛描画アシスト装置１は、メモリカードスロットを備えており、メモリカード２を装着することで、メモリカード２に格納されたデータやプログラムにアクセスすることが可能である。

利用者は、化粧品とともにこの眉毛描画アシスト装置１を携帯することで、外出先においても、美しい眉毛を描画することができるのである。したがって、眉毛描画アシスト装置１は、携帯可能な程度の小型の装置となっている。たとえば、液晶表示ディスプレイ１２は、携帯電話機のディスプレイと同程度の表示面積を有するものを使用すればよい。もちろん、携帯電話機が備えるディスプレイよりも大きめのディスプレイで構成し、メークが行い易いようにしてもよい。

図２は、眉毛描画アシスト装置１のブロック図である。撮像部１１は、光学部材、撮像素子、アナログ信号処理回路、Ａ／Ｄ変換器などを備えている。撮像素子としては、ＣＣＤやＣＭＯＳが利用される。撮像部１１から出力されたデジタルの画像信号は、画像解析部１４、画像合成部１５、テンプレート作成部１７に出力される。

操作部１３は、上下左右方向へ回動可能な操作部材から構成されている。利用者は、この操作部材を上下左右方向へ回動させることで、４種類（たとえば上下左右方向への移動）の操作指示を行うことが可能である。また、利用者は、この操作部材を後方に押下することで（つまり、装置の奥に向かって押し込む操作を行うことで）、所定の操作指示（たとえば決定操作）を行うことが可能である。

画像解析部１４、画像合成部１５、描画データ生成部１６、テンプレート作成部１７、テンプレート選択部１８は、眉毛描画アシスト機能を実行するための処理部である。これら処理部は画像処理回路あるいはソフトウェアにより実現する機能である。つまり、眉毛描画アシスト装置１は、図示せぬ画像処理用ＬＳＩ，ＣＰＵ、ＲＡＭなどのハードウェアを備えており、眉毛描画アシストを実行するプログラムがこれらハードウェアを利用することで、各処理部１４〜１８として機能する。これらプログラムは、たとえば、メモリカード２に格納されて供給される。

画像解析部１４は、撮像部１１から入力した利用者の顔の画像を解析し、顔画像から目の位置を検出する。また、画像解析部１４は、目の位置を基準として眉毛の領域を検出する。

画像合成部１５は、撮像部１１から入力した顔画像に描画データ（眉毛画像）を合成する。画像合成部１５は、合成画像を液晶表示ディスプレイ１２に出力する。また、画像合成部１５は、合成画像を拡大・縮小する機能を備えている。したがって、液晶表示ディスプレイ１２には、眉毛画像が合成された顔画像の一部を拡大して表示させることが可能である。

描画データ生成部１６は、顔画像に合成する描画データ（眉毛画像）を生成する。描画データ生成部１６は、メモリカード２に格納されているテンプレート設定データ２１やテンプレート画像データ２２に基づいて描画データを生成する。また、描画データ生成部１６は、操作部１３から入力された操作指示に従い顔画像に合成する描画データを生成する。

テンプレート作成部１７は、テンプレート設定データ２１あるいはテンプレート画像データ２２を作成する。ここで、テンプレート設定データ２１あるいはテンプレート画像データ２２とは、様々なバリエーションの眉毛の情報が含まれるデータベースである。以下の説明において、適宜、テンプレート設定データ２１およびテンプレート画像データ２２を総称してテンプレートデータ２０と呼ぶことにする。メモリカード２には、様々な種類のテンプレートデータ２０が格納されている。各テンプレートデータ２０により設定される眉毛は、色、濃さ、形状、目元からの相対位置が異なっている。したがって、利用者は、自分の顔に合ったテンプレートデータ２０を選択することや、その日の気分に合ったテンプレートデータ２０を選択することができる。テンプレート選択部１８は、利用者の指示に従い、メモリカード２に格納されているテンプレートデータ２０のいずれかを選択する。

ここで、テンプレート設定データ２１は、眉毛の色、濃さ、形状、目元からの相対的位置を数値化したデータである。これに対してテンプレート画像データ２２は、顔画像データである。描画データ生成部１６は、テンプレート設定データ２１に基づいて描画データ（眉毛画像）を生成する。また、テンプレート画像データ２２については、テンプレート作成部１７により一旦テンプレート設定データ２１に変換された後、描画データ生成部１６によって描画データ（眉毛画像）が生成される。

たとえば、利用者が何度も利用し、仕上がりイメージの確認が不要な場合には、テンプレート設定データ２１を直接利用すると便利である。一方、利用者がテンプレート画像データ２２を利用する場合には、そのテンプレートを使用するかどうかを決定する前に、眉毛のイメージを液晶表示ディスプレイ１２に表示して確認することが可能である。

つまり、テンプレート画像データ２２は、眉毛を含む顔全体の画像データであるので、液晶表示ディスプレイ１２に表示させることで、眉毛のイメージを確認することができるのである。たとえば、テンプレート画像データ２２として、モデルや女性タレントの顔画像データを記録しておけば、モデルや女性タレントの眉毛を参照し、好きなタイプのものを選択することが可能である。あるいは、自分でメークアップした眉毛が気に入ったときは、そのときの自分の顔を撮像し、テンプレート画像データ２２として保存しておけばよい。

｛テンプレート｝
次に、テンプレートについて詳しく説明する。テンプレートデータ２０の取得方法としては、コンテンツプロバイダから取得する方法と、自分で作成する方法とがある。コンテンツプロバイダから供給される場合には、メモリカード２にテンプレート設定データ２１あるいはテンプレート画像データ２２が格納されて供給される。あるいは、各テンプレートについてテンプレート設定データ２１とテンプレート画像データ２２の両方がセットで格納されて供給される。

たとえば、化粧品メーカがテンプレートデータ２０の格納されたメモリカード２の販売を行う。あるいは、化粧品メーカは、アイブローペンシルなどの化粧品の販売を促進する目的で、テンプレートデータ２０を無償で提供してもよい。また、化粧品メーカは、テンプレートデータ２０とともにキャンペーン情報などをメモリカード２に格納して提供することもできる。

また、コンテンツプロバイダは、テンプレートデータ２０をダウンロード可能に提供してもよい。眉毛描画アシスト装置１は、図２に示すように、通信処理部１９を備えている。通信処理部１９は、インターネットなどのネットワークに接続し、サーバとの間でデータの送受信などを行う。したがって、眉毛描画アシスト装置１は、たとえば化粧品メーカによって運営されているサーバからテンプレートデータ２０をダウンロードしてメモリに格納することもできる。ダウンロード可能なテンプレートデータ２０は、テンプレート設定データ２１であってもよいし、テンプレート画像データ２２であってもよい。また、各テンプレートについて両方のデータ２１，２２がセットでダウンロード可能であってもよい。

利用者がテンプレートデータ２０を作成する方法には２通りの方法がある。１つの方法は、利用者自身の顔画像を撮像部１１で撮像する方法である。この場合、テンプレート作成部１７は、撮像部１１が撮像した顔画像をテンプレート画像データ２２としてメモリカード２に格納する。

もう１つの方法は、利用者自身が操作部１３を操作して描画したデータからテンプレート設定データ２１を作成する方法である。具体的には、撮像部１１で撮像した利用者の顔画像を液晶表示ディスプレイ１２に表示させている状態で、操作部１３を操作して画面上の顔画像に重ねて眉毛を描画することが可能なユーザインタフェースが準備されている。そして、この描画されたデータをテンプレート設定データ２１として保存するのである。

具体的には、撮像部１１により撮像された利用者の顔画像に含まれる眉毛は、画像合成部１５により消去される。したがって、液晶表示ディスプレイ１２には、最初眉毛のない状態の利用者の顔が表示される。そして、利用者が操作部１３を操作して眉毛を描く操作を行うと、この操作に応じて描画データ生成部１６が描画データ（眉毛画像）を生成する。そして、画像合成部１５が、眉毛が消去された撮影画像に描画データを合成して表示するのである。そして、眉毛の描画が終えたところで、利用者が終了指示を行うと、テンプレート作成部１７が、描画データ生成部１６が生成している描画データからテンプレート設定データ２１を作成して、メモリカード２に格納するのである。

以上のように、コンテンツプロバイダから取得することにより、あるいは自分で作成することによりテンプレートデータ２０が格納されたメモリカード２が眉毛描画アシスト装置１にセットされるのである。なお、本実施の形態においては、テンプレートデータ２０を、着脱可能なメモリカード２に格納するようにしているが、テンプレートデータ２０を内蔵メモリに格納する形態であってもよい。

｛眉毛描画手順｝
次に、眉毛描画の手順について説明する。眉毛描画手順は、
（第１ステップ）テンプレートの選択ステップ
（第２ステップ）テンプレート確認ステップ
（第３ステップ）メークアップステップ
の３つのステップからなる。

（第１ステップ）
第１ステップは、テンプレートの選択ステップである。上述したように、メモリカード２には、複数のテンプレートデータ２０が格納されている。利用者は、この中から今から利用するテンプレートデータ２０を選択するのである。利用者は、テンプレートを選択するために、図３に示すように、テンプレート画像データ２２を切り替えつつ液晶表示ディスプレイ１２に表示させる。

具体的には、利用者は、操作部１３を操作してテンプレート選択メニューを表示させる。これにより、テンプレート選択部１８は、液晶表示ディスプレイ１２にテンプレートデータ２０の一覧を表示させる。この中で利用者がいずれかのテンプレート画像データ２２を選択すると、テンプレート選択部１８は、選択されたテンプレート画像データ２２を液晶表示ディスプレイ１２に表示する。これにより、図３に示すように、モデルあるいは女性タレントの顔画像が表示されるのである。ここでは、テンプレートＡ〜テンプレートＤの４つのテンプレートを次々に選択して表示させている様子を示している。また、利用者が過去にメークした自分自身の顔画像をテンプレート画像データ２２として保存している場合には、図に示すように前回のメークとして表示させることも可能である。また、テンプレート選択部１８は、液晶表示ディスプレイ１２に表示させるテンプレート画像を拡大・縮小する機能を備えている。利用者は、操作部１３を操作してテンプレート画像の拡大・縮小指示を行うことで、より鮮明にテンプレート画像を確認することができる。

次に、ユーザは、液晶表示ディスプレイ１２に表示させたテンプレート画像データ２２から好みの画像を選択する。つまり、これらからメークしたい眉毛、今の気分に合った眉毛を選択するのである。ここでは、図４に示すように、テンプレートＢの画像が表示されているところで、利用者がテンプレート選択の決定操作を行ったものとする。

利用者がテンプレート画像データ２２を選択すると、テンプレート作成部１７が、選択されたテンプレート画像データ２２に含まれる顔画像を解析する。まず、目の位置を検出し、次に、目の位置を基準として眉毛領域を検出する。そして、テンプレート画像データ２２に含まれる眉毛の色、濃さ、形状、目元からの相対位置のデータを取得し、テンプレート設定データ２１を作成する。このテンプレート作成データ２１は、一時的にメモリカード２に格納される（今後生成処理を省略できるように保存してもよいが）。このようにして、選択したテンプレート画像データ２２に対するテンプレート設定データ２１が作成されると、次の第２ステップに移行する。

ここで、テンプレート画像データ２２に含まれるモデルやタレントの顔画像が真正面を向いた画像でない場合、たとえば少し斜めを向いた画像である場合などには、瞳間の距離、瞳を結ぶ直線の傾きなどから、作成するテンプレート設定データ２１のデータを補正するようにすればよい。あるいは、三角法により斜めからの映像についても正規投影の画像に補正した後、瞳間の距離から大きさを調整してテンプレート設定データ２１を作成するようにすればよい。

また、テンプレート画像データ２２からテンプレート設定データ２１を作成する場合、右あるいは左の一方の眉毛から、眉毛の色、濃さ、形状、目元からの相対位置のデータを取得し、このデータから左右対称の眉毛のデータを作成するようにしてもよい。これにより、左右対称の眉毛データが設定されたテンプレート設定データ２１を作成することができる。

なお、利用者が使用したいテンプレートデータ２０としてテンプレート設定データ２１のみがメモリカード２に格納されている場合、つまり、テンプレート画像データ２２が存在しない場合には、直接テンプレート設定データ２１を選択する。この場合には、第１ステップをスキップして第２ステップから開始する。あるいは、テンプレート画像データ２２が存在している場合であっても、確認が不要な場合には、利用者は第２ステップから操作を開始してもよい。

（第２ステップ）
第１ステップにおいて使用するテンプレート設定データ２１が決定すると、図５（ａ）に示すように、液晶表示ディスプレイ１２の表示が自分自身の現在の映像に切り替えられる。つまり、撮像部１１から出力される画像信号が画像合成部１５に入力され、画像合成部１５は、利用者の顔画像をそのまま液晶表示ディスプレイ１２に表示させる。この利用者の顔画像はリアルタイム表示される。つまり、液晶表示ディスプレイ１２には、利用者の顔画像が動画として表示される。

次に、画像解析部１４が、撮像部１１から出力される顔画像を解析し、目の位置を検出する。さらに、目の位置を基準として眉毛領域を検出する。画像合成部１５は、画像解析部１４から眉毛領域の情報を入力すると、図５（ｂ）に示すように眉毛を消去する。つまり、眉毛の色を周囲の肌の色で置き換えるのである。

続いて、描画データ生成部１６が、テンプレート設定データ２１に基づいて合成する描画データ（眉毛画像）を生成すると、画像合成部１５が、眉毛を消去している利用者の顔画像に、テンプレート設定データ２１から生成された描画データを合成する。そして、描画データが合成された顔画像が図５（ｃ）に示すように液晶表示ディスプレイ１２に表示されるのである。

つまり、図５（ｃ）は、現在の自分のリアルタイムの映像に、選択したテンプレートＢの眉毛が合成されている映像である。自分の顔画像はリアルタイムで画像解析部１４において解析され、目の位置や眉毛の位置が検出され、その目の位置に基づいてテンプレートＢの眉毛が合成される。したがって、自分の顔画像の動きに追随するように合成眉毛も移動する。もし、利用者の顔が撮像部１１から離れたり近づいたりした場合、あるいは角度が変化した場合、利用者の撮像画像の大きさや角度も変化するが、この変化に伴って目の間の距離や座標が変化する。画像合成部１５は、利用者の撮像画像から目の位置を検出し、その検出結果にしたがって描画データを合成しているので、テンプレートの眉毛がずれることなく合成表示される。

ここで、利用者は、操作部１３を操作して、合成している眉毛画像を微調整することができる。たとえば、上下左右に眉毛を移動させたり、あるいは、中心点を指定した上で眉毛を回転させたりすることもできる。また、眉毛の形状を拡大、縮小させたり、眉毛の形状自体を変形させたりすることもできる。また、眉毛の色や濃さについても変更することで、イメージを確認することもできる。利用者が眉毛画像を微調整した後、調整完了の指示を行うと、この調整結果がテンプレート設定データ２１に反映される。上述したように、画像合成部１５は、表示する合成画像を拡大・縮小する機能を備えている。したがって、利用者は、合成画像を拡大させて、眉毛部分を詳細に参照しながら微調整を行うことができる。

このようにして、自分自身の映像に選択したテンプレートの眉毛を合成することで、選択したテンプレートで問題ないかどうかの確認を行うことができる。もし、合成された映像を見てイメージが異なれば、再び第１ステップに戻り別のテンプレートデータ２０を選択する。もし、選択しているテンプレートデータ２０が気に入ったのであれば、決定操作を行い、第３ステップに移行する。

（第３ステップ）
第２ステップで使用するテンプレートが決定されると、画像合成部１５は、現在の利用者の顔画像に含まれる眉毛領域と、テンプレートから生成されている眉毛領域の差分領域を表示する。図６は、利用者の顔画像の映像に眉毛領域の差分領域が表示された状態を示す図である。この差分領域は、利用者が眉毛をアイブローペンシルなどで描画すべき領域と、剃刀で削る領域とを指定したものである。なお、第２ステップで利用者がテンプレートを微調整している場合には、微調整が反映されたテンプレートに対して差分領域が表示される。

図７は、図６で示した顔画像の右眉毛部分の拡大図である。図の黒色に塗られた領域３１は、アイブローペンシルで描画する必要のある領域である。つまり、テンプレート設定データ２１より生成された眉毛画像の領域であって、利用者の実際（現在）の眉毛領域ではない領域である。そして、図の斜線でハッチングされた領域３２は、剃刀で削る必要のある領域である。つまり、利用者の実際（現在）の眉毛領域であって、テンプレート設定データ２１より生成された眉毛画像の領域ではない領域である。ここでは、領域３１と領域３２を黒色と斜線ハッチングで示しているが、実際には、領域３１が赤色、領域３２が青色など、分かり易い色で表示される。また、図において白抜きの領域は、利用者の実際（現在）の眉毛領域であり、かつ、テンプレートの眉毛領域でもあり、特に何もする必要のない領域である。この領域についても、黄色など分かり易い色で表示させるとよい。

利用者は、液晶表示ディスプレイ１２に表示され領域３１、領域３２を見ながらメークを行うのである。つまり、領域３１で表示されている部分にアイブローペンシルなどを利用して眉書きを行い、領域３２で表示される領域の眉毛を削るのである。そして、画像解析部１４および画像合成部１５は、リアルタイムで上記の合成処理を実行しているので、利用者が領域３１に対して眉を書く作業を行うと、それに従って領域３１の表示が消えていくのである。つまり、利用者は、領域３１を消すようなイメージで眉書きの作業を行えばよいのである。これは、利用者が眉を描けば、この描かれた眉（眉墨が塗られた領域）も利用者の実際（現在）の眉として認識されるので、領域３１と見なされなくなるからである。同様に、利用者は、領域３２を消すようなイメージで眉を削る作業を行えばよいのである。

また、テンプレート設定データ２１には、眉毛の色や濃さのデータも含まれている。したがって、利用者が描画した眉毛の色や濃さがテンプレートと異なる場合には、注意メッセージが表示される。これにより、利用者は、色や濃さについても、テンプレートに近づくようにメークすることができるのである。そして、利用者がメーク作業を行い、利用者の眉毛がテンプレートと一致すれば、その時点で領域３１、３２の表示が消え、終了メッセージが表示されるのである。上述したように、画像合成部１５は、表示する合成画像を拡大・縮小する機能を備えている。したがって、利用者は、合成画像を拡大させて、眉毛部分を詳細に参照しながらメーク作業を行うことができる。

このように、本実施の形態の眉毛描画アシスト装置１を利用することで、利用者は、モデルや女性タレントなどのお気に入りの眉毛とそっくりのメークアップを行うことが可能である。あるいは、過去に自分でメークしたときの状態や、メークアップアーティストにメークしてもらった状態をテンプレート画像データ２２として保存しておけば、そのときと同じ眉毛を描画することが可能である。

ガイドプレートなどの器具を利用する場合と異なり、本実施の形態においては、テンプレートのデータを利用して眉書き作業をアシストするので、多数のテンプレートデータ２０を保有することができ、実質的には無制限にバリエーションを楽しむことが可能である。また、メーク作業をアシストするためのガイドプレートや補助器具を装着したり、携帯したりする必要がなく、使い勝手もよい。

｛変形例｝
上記のように、眉毛描画アシスト装置１は持ち運び可能な携帯タイプの装置である。したがって、乗り物の中においても眉毛描画アシスト装置１を利用してメークをすることが可能である。そこで、この眉毛描画アシスト装置１に手振れ補正機能を搭載するようにしてもよい。たとえば、電車の中に乗っている場合、電車の揺れに伴い顔画像が小刻みに揺れるとメーク作業が行い難い。そこで、手振れ補正機能を搭載することで、小さな振動、揺れに対しては画像がぶれないように補正すると便利である。

本実施の形態においては、図１等で示したように、眉毛描画アシスト装置１として、手鏡形状の専用の装置を例に説明した。もちろん、これは一例であり、装置の形状は自由である。たとえば、コンパクト型の装置とすれば乗り物の中で使う場合にもお洒落である。また、このように専用の装置を利用する他、眉毛描画アシスト装置１として携帯電話機を利用することも可能である。図８は、眉毛描画アシスト装置１Ａとして機能する携帯電話機を示す図である。携帯電話機には、撮像部１１、液晶表示ディスプレイ１２、操作部１３が備わっているので、眉毛描画アシスト機能を実行するプログラムをメモリカードに格納して携帯電話機にセットするようにすればよい。

また、本実施の形態においては、眉毛描画をアシストする装置を説明したが、本発明の技術思想を利用すれば、眉毛描画以外の用途にも利用可能である。たとえば、アイシャドー、チークカラー、口紅などのメークをアシストする装置としても適用可能である。この場合にも、お気に入りのモデルや女性タレントとそっくりのメークを楽しむことが可能である。

実施の形態に係る眉毛描画アシスト装置の概観図である。 眉毛描画アシスト装置のブロック図である。 テンプレート画像を切り替えて表示している様子を示す図である。 選択されたテンプレート画像を表示している様子を示す図である。 テンプレート画像から生成された眉毛画像を利用者の顔画像に合成させるプロセスを示す図である。 眉毛の差分領域が顔画像に合成表示された様子を示す図である。 眉毛の差分領域表示を詳細に示す図である。 携帯電話機を眉毛描画アシスト装置として利用した変形例を示す図である。

符号の説明

１ 眉毛描画アシスト装置
２ メモリカード
１１ 撮像部
１２ 液晶表示ディスプレイ
１３ 操作部
１４ 画像解析部
１５ 画像合成部
１６ 描画データ生成部
１７ テンプレート作成部
１８ テンプレート選択部
２０ テンプレートデータ
２１ テンプレート設定データ
２２ テンプレート画像データ

Claims (14)

1. 顔を撮像する撮像手段と、
   メークアップの対象となる所定の要素についてテンプレートデータを蓄積する手段と、
   前記撮像手段より入力した顔画像に含まれる前記所定の要素の実領域と前記テンプレートデータより設定される前記所定の要素のテンプレート領域との差分領域を前記顔画像に合成して表示する合成表示手段と、
   を備えることを特徴とするメークアップアシスト装置。
2. 請求項１に記載のメークアップアシスト装置において、
   前記差分領域のうち、前記実領域であって前記テンプレート領域でない領域と、前記テンプレート領域であって前記実領域でない領域とは異なる態様で表示されることを特徴とするメークアップアシスト装置。
3. 請求項１または請求項２に記載のメークアップアシスト装置において、
   前記実領域には既にメークアップにより描画されている領域が含まれることを特徴とするメークアップアシスト装置。
4. 請求項１ないし請求項３のいずれかに記載のメークアップアシスト装置において、さらに、
   前記顔画像から前記所定の要素を消去した上で前記テンプレートデータより生成される前記所定の要素のテンプレート画像を前記顔画像に合成表示することでテンプレートの適用イメージを確認する手段、
   を備えることを特徴とするメークアップアシスト装置。
5. 請求項４に記載のメークアップアシスト装置において、さらに、
   前記顔画像に合成させている前記テンプレート画像の色、濃さ、形状、目元からの相対的位置のうちいずれか１つまたは複数を調整する調整手段、
   を備えることを特徴とするメークアップアシスト装置。
6. 請求項５に記載のメークアップアシスト装置において、
   前記合成表示手段は、前記調整手段により調整された前記テンプレート画像に対して前記テンプレート領域を決定し、決定されたテンプレート領域に対応して前記差分領域を合成表示することを特徴とするメークアップアシスト装置。
7. 請求項１ないし請求項６のいずれかに記載のメークアップアシスト装置において、
   前記合成表示手段は、表示する合成画像を拡大または縮小する機能を備えることを特徴とするメークアップアシスト装置。
8. 顔を撮像する撮像手段と、
   テンプレート眉毛データを蓄積する手段と、
   前記撮像手段より入力した顔画像に含まれる実眉毛領域と前記テンプレート眉毛データより設定されるテンプレート眉毛領域との差分領域を前記顔画像に合成して表示する合成表示手段と、
   を備えることを特徴とする眉毛描画アシスト装置。
9. 請求項８に記載の眉毛描画アシスト装置において、
   前記差分領域のうち、前記実眉毛領域であって前記テンプレート眉毛領域でない領域と、前記テンプレート眉毛領域であって前記実眉毛領域でない領域とは異なる態様で表示されることを特徴とする眉毛描画アシスト装置。
10. 請求項８または請求項９に記載の眉毛描画アシスト装置において、
    前記実眉毛領域には眉墨が描画された領域が含まれることを特徴とする眉毛描画アシスト装置。
11. 請求項８ないし請求項１０のいずれかに記載の眉毛描画アシスト装置において、さらに、
    前記顔画像から眉毛を消去した上で前記テンプレート眉毛データより設定されるテンプレート眉毛画像を前記顔画像に合成して表示することでテンプレートの適用イメージを確認する手段、
    を備えることを特徴とする眉毛描画アシスト装置。
12. 請求項１１に記載の眉毛描画アシスト装置において、さらに、
    前記顔画像に合成させている前記テンプレート眉毛画像の色、濃さ、形状、目元からの相対的位置のうちいずれか１つまたは複数を調整する調整手段、
    を備えることを特徴とする眉毛描画アシスト装置。
13. 請求項１２に記載の眉毛描画アシスト装置において、
    前記合成表示手段は、前記調整手段により調整されたテンプレート眉毛画像に対して前記テンプレート眉毛領域を決定し、決定した前記テンプレート眉毛領域に対して前記差分領域を合成表示することを特徴とする眉毛描画アシスト装置。
14. 請求項８ないし請求項１３のいずれかに記載の眉毛描画アシスト装置において、
    前記合成表示手段は、表示する合成画像を拡大または縮小する機能を備えることを特徴とする眉毛描画アシスト装置。
    

Images