JP2000285099A - 口元メーキャップシミュレーションシステム - Google Patents

Abstract

(57)【要約】 【課題】 本発明は、メーキャップイメージタイプを選
択するだけで、選択したタイプに応じて顔画像の口の輪
郭をリップペンで描画して表示する口元メーキャップシ
ミュレーションシステムを提供することを目的とする。 【解決手段】 複数のメーキャップイメージタイプから
所望のタイプを選択するタイプ選択手段４１Ａ，４１
Ｂ，４１Ｃ，４１Ｄと、選択されたメーキャップイメー
ジタイプに応じて顔画像の口の輪郭近傍にリップペンで
描画する形状を設定するリップペン描画形状設定手段Ｓ
３２と、リップペン描画形状設定手段で設定された形状
でリップペンによる描画を行うリップペン描画手段Ｓ３
４〜Ｓ６８とを有する。このため、所望のタイプを選択
するだけで、選択したメーキャップイメージタイプに応
じて口の輪郭近傍をリップペンで描画して表示すること
ができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は口元メーキャップシ
ミュレーションシステムに係り、特に、人の顔画像にア
イラインやリップペンを塗布して表示する口元メーキャ
ップシミュレーションシステムに関する。

【０００２】

【従来の技術】メーキャップによるイメージの演出法
は、造形理論を応用したもので、形の特徴や目に映った
ときどのようにどの様な印象を受けるかを把握してい
る。例えば、直線はシャープあるいは静的なイメージを
演出させ、曲線はソフトあるいは動的なイメージを演出
する。したがって、直線的又は曲線的なメーキャップす
ることにより、それぞれ、シャープなイメージを演出し
たりソフトなイメージを演出したりすることができる。
同様に、下降線を使用して落ちついたイメージを出した
り、太い線を使用してたくましいイメージを演出するこ
とができる。

【０００３】このようなメーキャップによるイメージ演
出をコンピュータシステムの画像処理技術を用いて実現
することが考えられている。従来のコンピュータシステ
ムの画像処理技術では、単に形状を直線的又は曲線的に
変形させることが行われている。

【０００４】

【発明が解決しようとする課題】しかし、従来のコンピ
ュータシステムの画像処理技術では、口の輪郭をリップ
ペンで修正するシミュレーションを行う場合、オペレー
タが顔画像におけるリップペンを塗る領域の指定、ぼか
しの度合い、リップペンの色の修正、等を細かに入力し
なければならず、また、操作には画像処理の専門的な知
識を必要とし、手間及び時間がかかるという問題があっ
た。

【０００５】本発明は、上記の点に鑑みなされたもの
で、メーキャップイメージタイプを選択するだけで、選
択したタイプに応じて顔画像の口の輪郭をリップペンで
描画して表示する口元メーキャップシミュレーションシ
ステムを提供することを目的とする。

【０００６】

【課題を解決するための手段】請求項１に記載の発明
は、顔画像の口の輪郭をリップペンで描画する口元メー
キャップシミュレーションシステムであって、複数のメ
ーキャップイメージタイプから所望のタイプを選択する
タイプ選択手段と、選択されたメーキャップイメージタ
イプに応じて顔画像の口の輪郭近傍にリップペンで描画
する形状を設定するリップペン描画形状設定手段と、前
記リップペン描画形状設定手段で設定された形状でリッ
プペンによる描画を行うリップペン描画手段とを有す
る。

【０００７】このように、複数のメーキャップイメージ
タイプから所望のタイプを選択すると、選択されたメー
キャップイメージタイプに応じてリップペンで描画する
形状を設定し、設定された形状でリップペンによる描画
を行うため、所望のタイプを選択するだけで、選択した
メーキャップイメージタイプに応じて口の輪郭近傍をリ
ップペンで描画して表示することができる。

【０００８】請求項２に記載の発明は、請求項１記載の
口元メーキャップシミュレーションシステムにおいて、
前記リップペン描画手段は、前記リップペンを描画する
際に前記顔画像の口の輪郭からの縦方向距離が大なるほ
どリップペンの色を薄くするグラデュエーションをつけ
るグラデュエーション付加手段を有する。

【０００９】このように、口の輪郭からの縦方向距離が
大なるほどリップペンの色を薄くするグラデュエーショ
ンをつけるため、描画したリップペンが顔画像の肌色と
なじんで違和感のないリップペンを表示できる。

【００１０】

【発明の実施の形態】図１は本発明の口元メーキャップ
シミュレーションシステムの一実施例のブロック図を示
す。同図中、中央処理装置（ＣＰＵ）１０には、バス１
５を介して入力装置２０、記憶装置３０、表示装置４
０、印刷装置５０、通信装置６０それぞれが接続されて
いる。入力装置２０としてはキーボード２１，タッチセ
ンサ２２，デジタルカメラ（またはＣＣＤカメラ）２３
等が設けられており、記憶装置３０としてはＲＡＭ３
１、ＲＯＭ３２、ハードディスク装置３３、フレキシブ
ルディスク装置３４等が設けられている。表示装置４０
としては例えばＣＲＴが用いられ、ＣＲＴの前面に透明
のタッチセンサ２２を設置する。

【００１１】ＣＰＵ１０は、記憶装置３０に記憶されて
いる各種処理プログラムを実行し、その結果を記憶装置
３０に記憶すると共に、表示装置４０に表示し、印刷装
置５０で印刷して出力する。記憶装置３０には顔画像の
画像データ等が記憶されると共に、各種処理プログラム
が予め格納されている。図２は本発明システムで実行す
る口元メーキャップシミュレーションのメインルーチン
の一実施例のフローチャートを示す。同図中、ステップ
Ｓ１０で記憶装置３０内に作業用顔画像領域を確保す
る。次に、ステップＳ１２で、確保した作業用顔画像領
域にデジタルカメラ２３で撮像した被験者の顔画像（カ
ラー顔画像）の画像データをコピーする。なお、被験者
の顔画像の画像データは、既に記憶装置３０内の所定領
域に格納されている。

【００１２】ステップＳ１４では上記の画像データから
顔画像の特徴点を抽出する。ここでは、先ず、顔画像に
対し顔位置の認識を行って顔領域のラベリングを行うと
共に、顔の輪郭の特徴点を抽出する。なお、顔画像は左
上隅を原点として、横方向をＸ軸、縦方向をＹ軸とする
ＸＹ座標で位置を表す。更に、顔領域のエッジ画像（２
値画像）を作成し、このエッジ画像をＹ軸に投影してエ
ッジのヒストグラムを作成するＹ投影を行う。そして、
Ｙ投影によるヒストグラムから顔の各部位、つまり、
眉、目、鼻、口それぞれのＹ座標を検索する。更に、顔
のエッジ画像における目及び鼻を含むＹ座標位置で、目
及び鼻の特徴点及びこれに付随する特徴点を抽出し、口
を含むＹ座標位置で、口の特徴点及びこれに付随する特
徴点を抽出し、眉を含むＹ座標位置で、眉の特徴点及び
これに付随する特徴点を抽出する。

【００１３】これによって、図３に示すＹ軸座標が最大
の点Ｃ３と、Ｙ軸座標が最小の点Ｃ２と、点Ｃ２，Ｃ３
を通る直線と髪の生え際との交点Ｆ１とが顔の特徴点と
して抽出され、瞳ＰＬ，ＰＲ、目尻ＥＬ１，ＥＲ１、目
頭ＥＬ４，ＥＲ４、瞳の上下の目の輪郭ＥＬ５，ＥＲ
５，ＥＬ３，ＥＲ３、鼻の輪郭Ｎ１，Ｎ２，Ｎ３、口の
上端Ｍ２，Ｍ４、左右端Ｍ１，Ｍ５、下端Ｍ６、眉山Ｂ
Ｌ２，ＢＲ２、眉頭ＢＬ３，ＢＲ３、眉尻ＢＬ１，ＢＲ
１、眉底ＢＬ４，ＢＲ４等の各種特徴点が抽出される。

【００１４】次に、ステップＳ１６で、顔画像の中の例
えば頬に対応する領域の複数の画像データを平均化する
ことにより、被験者の肌色データを得る。また、ステッ
プＳ１８で、スイート、クール、キュート、フレッシュ
の４つのメーキャップイメージタイプうち、いずれのメ
ーキャップイメージタイプを被験者がタッチセンサ２２
によって選択したかを読み取り、また、ステップＳ２０
でリップペンの色としてどの色を被験者がタッチセンサ
２２によって選択したかを読み取る。

【００１５】なお、この口元メーキャップシミュレーシ
ョンを実行する際には、図４に示すような画面が表示装
置４０に表示されている。この画面中央には被験者の顔
画像が表示され、選択ボックス４１Ａ，４１Ｂ，４１
Ｃ，４１Ｄによってスイート、クール、キュート、フレ
ッシュの４つのメーキャップイメージタイプを選択で
き、リップペンの選択ボックス４５にタッチすることに
より、複数のリップペンの色がリップペンの選択ボック
ス４５内に表示され、所望のリップペンの色を選択でき
る。

【００１６】この後、ステップＳ２２でリップペン描画
処理を実行し、この処理が終了すると、ステップＳ２４
に進んで、ステップＳ１０で確保していた作業用顔画像
領域を解放し、この処理を終了する。図５及び図６は、
ステップＳ２２で実行するリップペン描画処理の一実施
例のフローチャートを示す。図５において、先ず、ステ
ップＳ３０で口を囲む矩形領域の顔画像を取得すると共
に、口の輪郭データを取得する。この口の輪郭データ
は、ステップＳ１４で特徴点抽出を行った際に得られた
ものである。

【００１７】次のステップＳ３２では被験者が選択した
メーキャップイメージタイプに応じて曲線描画区間と直
線描画区間とを設定する。ところで、図７に口を囲む矩
形領域の顔画像を示す。この図では、口（上唇）の上端
Ｍ２，Ｍ４、口の左右端Ｍ１，Ｍ５、口（下唇）の下端
Ｍ６、それぞれの特徴点の他に、口（下唇）の下縁にお
ける左端Ｍ１から口幅（Ｍ１，Ｍ５間距離）の１／３の
距離にある点Ｍ７と、口（下唇）の下縁における右端Ｍ
５から口幅（Ｍ１，Ｍ５間距離）の１／３の距離にある
点Ｍ８とを示している。

【００１８】選択されたメーキャップイメージタイプが
フレッシュの場合、区間Ｍ１〜Ｍ２、区間Ｍ４〜Ｍ５そ
れぞれを曲線で描画し、区間Ｍ２〜Ｍ３、区間Ｍ３〜Ｍ
４それぞれを直線で描画する。これによって、図８
（Ａ）の描画イメージに示すように、上唇に丸みを持た
せるリップペン描画が行われ、下唇についてはリップペ
ン描画を行われない。

【００１９】選択されたメーキャップイメージタイプが
スイートの場合、区間Ｍ１〜Ｍ２、区間Ｍ４〜Ｍ５、区
間Ｍ１〜Ｍ６〜Ｍ５それぞれを曲線で描画し、区間Ｍ２
〜Ｍ３、区間Ｍ３〜Ｍ４それぞれを直線で描画する。こ
れによって、図８（Ｂ）の描画イメージに示すように、
上唇及び下唇に丸みを持たせるリップペン描画が行われ
る。

【００２０】選択されたメーキャップイメージタイプが
キュートの場合、区間Ｍ１〜Ｍ７、区間Ｍ７〜Ｍ８、区
間Ｍ８〜Ｍ５それぞれを直線で描画する。これによっ
て、図８（Ｃ）の描画イメージに示すように、下唇を直
線的にするリップペン描画が行われ、上唇についてはリ
ップペン描画を行われない。選択されたメーキャップイ
メージタイプがクールの場合、区間Ｍ２〜Ｍ４を曲線で
描画し、区間Ｍ１〜Ｍ２、区間Ｍ４〜Ｍ５、区間Ｍ１〜
Ｍ７、区間Ｍ７〜Ｍ８、区間Ｍ８〜Ｍ５それぞれを直線
で描画する。これによって、図８（Ｃ）の描画イメージ
に示すように、上唇及び下唇を直線的にするリップペン
描画が行われる。

【００２１】次のステップＳ３４のループ処理でｘ座標
値を０（口の左端Ｍ１位置）から画素単位で最大値（口
の右端Ｍ５位置）まで順次増加させる。なお、ｘ座標は
図７に示す口を囲む矩形領域において右側に増加し、ｙ
座標は上側に増加するものとする。このループ内のステ
ップＳ３６で曲線描画区間か否かを判別し、曲線描画区
間でなければ、ステップＳ３４に戻りｘ座標値を増加さ
せる。曲線描画区間であれば、ステップＳ３８に進み、
図９に示すオフセット曲線をｘ座標値で参照して、当該
ｘ座標に対するオフセット値を求める。この図９に示す
オフセットは上唇の上縁を上に（鼻側に）持ち上げて口
を大きく見せるために用いられ、下唇の下縁については
オフセット値＝０とされている。

【００２２】次に、ステップＳ４０のループ処理を行
う。ここでは、ｙ座標値を、口の輪郭データのｙ座標＋
オフセット値−βから口の輪郭データのｙ座標＋オフセ
ット値＋βまで、画素単位で順次増加させて、以下の処
理を行う。このβは、リップペンのペン幅の１／２（例
えば数ｍｍに相当）である。ステップＳ４０のループ内
のステップＳ４２では、当該ｘｙ座標に対応する画素の
ＲＧＢ値から所定の演算式を用いて彩度（Ｓ），色相
（Ｈ），明度（Ｖ）それぞれを算出する。そして、ステ
ップＳ４４で、口の輪郭データのｙ座標と当該ｙ座標と
の差（最大でオフセット値＋β）に基づいて、リップペ
ンの色のＨＳＶ値を上記差に比例して薄くなるように補
正してグラデュエーションをつけた後、ステップＳ４２
で得た当該ｘｙ座標に対応する画素のＨＳＶ値に加算す
る。この後、ステップＳ４６で上記当該ｘｙ座標に対応
する画素のＨＳＶ値をＲＧＢ値に変換し、ステップＳ４
８でこのＲＧＢ値を用いて当該ｘｙ座標に対応する画素
を上書きして更新することによりリップペンの描画を行
う。

【００２３】なお、このステップＳ４０は図８（Ａ）の
描画イメージでは曲線描画区間が上唇の上縁だけである
ため１回しか実行されないが、図８（Ｂ）の描画イメー
ジでは曲線描画区間が上唇の上縁と下唇の下縁とがある
ため２回実行される。下唇の下縁を描画する際には図９
のオフセット値は負の値として取り扱う。ステップＳ３
４のループ処理を終了すると、ステップＳ５２に進んで
各直線描画区間の直線の関数を求める。次のステップＳ
５４のループ処理でｘ座標値を０（口の左端Ｍ１位置）
から画素単位で最大値（口の右端Ｍ５位置）まで順次増
加させる。

【００２４】このループ内のステップＳ５６で直線描画
区間か否かを判別し、直線描画区間でなければ、ステッ
プＳ５４に戻りｘ座標値を増加させる。直線描画区間で
あれば、ステップＳ５８に進み、直線の関数を用いて、
当該ｘ座標に対応する直線のｙ座標Ｙ（Ｌ）を求める。
次に、ステップＳ６０のループ処理を行う。ここでは、
ｙ座標値を、Ｙ（Ｌ）−βからＹ（Ｌ）＋βまで、画素
単位で順次増加させて、以下の処理を行う。このβは、
リップペンのペン幅の１／２（例えば数ｍｍに相当）で
ある。

【００２５】ステップＳ６０のループ内のステップＳ６
２では、当該ｘｙ座標に対応する画素のＲＧＢ値から所
定の演算式を用いて彩度（Ｓ），色相（Ｈ），明度
（Ｖ）それぞれを算出する。そして、ステップＳ６４
で、Ｙ（Ｌ）と当該ｙ座標との差（最大でβ）に基づい
て、リップペンの色のＨＳＶ値を上記差に比例して薄く
なるように補正してグラデュエーションをつけた後、ス
テップＳ６２で得た当該ｘｙ座標に対応する画素のＨＳ
Ｖ値に加算する。この後、ステップＳ６６で上記当該ｘ
ｙ座標に対応する画素のＨＳＶ値をＲＧＢ値に変換し、
ステップＳ６８でこのＲＧＢ値を用いて当該ｘｙ座標に
対応する画素を上書きして更新することによりリップペ
ンの描画を行う。

【００２６】なお、このステップＳ６０は図８（Ｃ）の
描画イメージでは曲線描画区間が上唇の上縁だけである
ため１回しか実行されないが、図８（Ｄ）の描画イメー
ジでは曲線描画区間が上唇の上縁と下唇の下縁とがある
ため２回実行される。ステップＳ５４のループ処理を終
了すると、ステップＳ７０に進んでリップペンを描画し
た顔画像を表示装置４０に表示して、この処理を終了す
る。

【００２７】このように、複数のメーキャップイメージ
タイプから所望のタイプを選択すると、選択されたメー
キャップイメージタイプに応じてリップペンで描画する
形状を設定し、設定された形状でリップペンによる描画
を行うため、所望のタイプを選択するだけで、選択した
メーキャップイメージタイプに応じて口の輪郭近傍をリ
ップペンで描画して表示することができる。

【００２８】また、口の輪郭からの縦方向距離が大なる
ほどリップペンの色を薄くするグラデュエーションをつ
けるため、描画したリップペンが顔画像の肌色となじん
で違和感のないリップペンを表示できる。なお、選択ボ
ックス４１Ａ，４１Ｂ，４１Ｃ，４１Ｄが特許請求の範
囲に記載のタイプ選択手段に対応し、ステップＳ３２が
リップペン描画形状設定手段に対応し、ステップＳ３４
〜Ｓ６８がリップペン描画手段に対応し、ステップＳ４
４，Ｓ６４がグラデュエーション付加手段に対応する。

【００２９】

【発明の効果】上述の如く、請求項１に記載の発明は、
複数のメーキャップイメージタイプから所望のタイプを
選択するタイプ選択手段と、選択されたメーキャップイ
メージタイプに応じて顔画像の口の輪郭近傍にリップペ
ンで描画する形状を設定するリップペン描画形状設定手
段と、前記リップペン描画形状設定手段で設定された形
状でリップペンによる描画を行うリップペン描画手段と
を有する。

【００３０】このように、複数のメーキャップイメージ
タイプから所望のタイプを選択すると、選択されたメー
キャップイメージタイプに応じてリップペンで描画する
形状を設定し、設定された形状でリップペンによる描画
を行うため、所望のタイプを選択するだけで、選択した
メーキャップイメージタイプに応じて口の輪郭近傍をリ
ップペンで描画して表示することができる。

【００３１】請求項２に記載の発明では、リップペン描
画手段は、前記リップペンを描画する際に前記顔画像の
口の輪郭からの縦方向距離が大なるほどリップペンの色
を薄くするグラデュエーションをつけるグラデュエーシ
ョン付加手段を有する。このように、口の輪郭からの縦
方向距離が大なるほどリップペンの色を薄くするグラデ
ュエーションをつけるため、描画したリップペンが顔画
像の肌色となじんで違和感のないリップペンを表示でき
る。

【図面の簡単な説明】

【図１】本発明の口元メーキャップシミュレーションシ
ステムの一実施例のブロック図である。

【図２】本発明システムで実行する口元メーキャップシ
ミュレーションのメインルーチンの一実施例のフローチ
ャートである。

【図３】顔画像の特徴点を示す図である。

【図４】口元メーキャップシミュレーション実行の際の
表示画面の一実施例を示す図である。

【図５】リップペン描画処理の一実施例のフローチャー
トである。

【図６】リップペン描画処理の一実施例のフローチャー
トである。

【図７】口を囲む矩形領域を示す図である。

【図８】描画イメージを示す図である。

【図９】オフセット曲線を示す図である。

【符号の説明】

１０ 中央処理装置（ＣＰＵ） ２０ 入力装置 ２１ キーボード ２２ タッチセンサ ２３ デジタルカメラ ３０ 記憶装置 ３１ ＲＡＭ ３２ ＲＯＭ ３３ ハードディスク装置 ３４ フレキシブルディスク装置 ４０ 表示装置 ４１Ａ，４１Ｂ，４１Ｃ，４１Ｄ 選択ボックス ４５ 選択ボックス ５０ 印刷装置

Claims (2)

【特許請求の範囲】
1. 【請求項１】 顔画像の口の輪郭をリップペンで描画す
   る口元メーキャップシミュレーションシステムであっ
   て、 複数のメーキャップイメージタイプから所望のタイプを
   選択するタイプ選択手段と、 選択されたメーキャップイメージタイプに応じて顔画像
   の口の輪郭近傍にリップペンで描画する形状を設定する
   リップペン描画形状設定手段と、 前記リップペン描画形状設定手段で設定された形状でリ
   ップペンによる描画を行うリップペン描画手段とを有す
   ることを特徴とする口元メーキャップシミュレーション
   システム。
2. 【請求項２】 請求項１記載の口元メーキャップシミュ
   レーションシステムにおいて、 前記リップペン描画手段は、前記リップペンを描画する
   際に前記顔画像の口の輪郭からの縦方向距離が大なるほ
   どリップペンの色を薄くするグラデュエーションをつけ
   るグラデュエーション付加手段を有することを特徴とす
   る口元メーキャップシミュレーションシステム。