JP2023005345A - メイク支援装置、メイク支援方法、及びメイク支援プログラム - Google Patents

Abstract

【課題】ユーザが所望のメイクを行なえるように支援する技術を提供する。【解決手段】メイク支援装置が、メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、前記混色比率を示す混色情報を出力することとを実行する制御部を備えた。【選択図】図１

Description

本発明は、メイク支援装置、メイク支援方法、及びメイク支援プログラムに関する。

従来、ファンデーションや口紅などの化粧料は、様々な色のものが用意され、各ユーザが好みや、T．P．O（Time Place Occasion）に応じて選択できるように販売されていた。

しかし、需要の少ない色の製品を予め用意したのでは、無駄になることが多く、用意できる色の種類には限界があった。このため、ユーザのニーズが多様化し、各色の需要が分散すると、ユーザのニーズを満たすのが難しくなってくる。そこで、特許文献１では、所望の配合を消費者から獲得し、この配合に基づいて、添加物を混合し、個別の化粧品組成物を形成する装置が提案されている。

特表２０２１－５０８７２６号公報 特表２０１９－５１１９３３号公報

引用文献１のように、添加物を混合することで、色の自由度が高まったとしても、ユーザが適切に混合比を設定し、自分に合ったメイクを行なえるとは限らないという問題があった。例えば、ユーザの肌の色は個々に異なるため、他の人と同じ配合比でメイクをしても同じ結果にはならず、他の人の配合比が参考にならない。

そこで、本発明は、ユーザが所望のメイクを行なえるように支援する技術の提供を目的とする。

上記課題を解決するため、本発明に係るメイク支援装置は、
メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
前記混色比率を示す混色情報を出力することと、
を実行する制御部を備える。

前記メイク支援装置は、前記制御部が、
前記サンプリング位置毎の三次元座標を示す三次元情報を更に含む前記ユーザ情報を取得し、
前記三次元情報に基づいてメイク領域を決定し、
前記メイク領域毎に前記ユーザの顔に塗布する化粧料の色を決定し、
前記メイク領域毎に前記混色情報を出力してもよい。

前記メイク支援装置は、前記制御部が、
メイク後の印象を示す複数の印象モードのうち、ユーザによって選択された印象モードを取得し、
前記印象モードに基づいて前記ユーザの顔に塗布する化粧料の色又は領域を決定してもよい。

前記メイク支援装置は、前記基本色の化粧料を内蔵したメイクデバイスを更に備え、
前記メイクデバイスが、前記混色情報に基づいて前記基本色の化粧料を混色し、混色後の化粧料を出力してもよい。
前記混色情報が前記化粧料を塗布する位置を示す位置情報を含み、
前記メイクデバイスが、前記ユーザの顔に対し、前記位置情報が示す位置に前記混色後の化粧料を塗布してもよい。

前記メイク支援装置は、前記メイクデバイスが、前記位置情報が示す位置に前記混色後の化粧料を吹き付けてもよい。

前記メイク支援装置は、前記ユーザのメイク対象面においてサンプリング位置毎の色を測定し、前記ユーザ情報として前記制御部へ提供する測定デバイスを更に備えてもよい。

前記メイク支援装置は、前記ユーザの顔に対してメイクを施す動作を撮影した撮影画像を取得することと、
前記撮影画像に基づいて前記目標情報を生成することと、
を前記制御部が更に実行してもよい。

前記メイク支援装置において、
前記制御部が、前記メイクを施す動作に基づいて、前記メイクデバイスに対する制御信号を生成し、
前記メイクデバイスが、前記制御情報に基づいて前記化粧料の塗布を行ってもよい。

前記メイク支援装置において、
前記目標情報に基づいてメイク後の色が徐々に変化する領域をグラデーション領域として特定することと、
前記グラデーション領域において前記色が変化する方向と、前記方向における位置毎の変化の割合とを示すパラメータを決定することと、
を前記制御部が更に実行してもよい。

上記課題を解決するため、本発明に係るメイク支援方法は、
メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
前記混色比率を示す混色情報を出力することと、
を制御部が実行する。

上記課題を解決するため、本発明に係るメイク支援プログラムは、
メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
前記混色比率を示す混色情報を出力することと、
を制御部に実行させる。

本発明によれば、ユーザが所望のメイクを行なえるように支援する技術を提供できる。

実施形態に係るメイク支援システムの構成を示す図である。 管理サーバの構成を示す図である。 ユーザ端末の構成を示す図である。 メイクデバイスの外観図である。 メイクデバイスの構成を示す図である。 管理サーバの制御部が、メイク支援プログラムに基づいて実行するメイク支援方法の処理手順を示す図である。 メイクデバイスの制御部が実行する処理手順を示す図である。 ガイド情報の一例を示す図である。 メイクデバイスの変形例を示す図である。 アイメイクのパラメータ決定に用いる目標情報の例を示す図である。 グラデーションを施す領域を示す図である。 グラデーションを施す領域の割合を示す図である。 ユーザの顔の形を求める例の説明図である。 ユーザの顔の形応じてパラメータを決定する例を示す図である。 チークを入れる領域の座標を示す図である。 印象モードに応じてパラメータを決定する例を示す図である。 メイクデバイスの変形例を示す図である。

以下、本発明の実施の形態について、図面に基づいて説明する。なお、実施の形態は本発明の一例であり、本発明の構成は以下の例には限られない。以下、本発明のメイク支援装置（メイク支援システム）、メイク支援方法、及びメイク支援プログラムの実施の形態について、図面を参照して説明する。

図１は、本実施形態に係るメイク支援システム１００の構成を示す図である。図１に示すように、メイク支援システム１００は、管理サーバ１０、ユーザ端末２０、メイクデバイス３０を有している。メイク支援システム１００は、メイク対象とするユーザの顔の情報（ユーザ情報）を取得すると共に、ユーザが目標とする顔の情報（目標情報）を取得し、ユーザの顔が目標の顔に近づくように化粧料の混合比率を決定し、この混合比率でメイクを行わせる。管理サーバ１０は、ユーザ情報及び目標情報に基づいて化粧料の混合比率を決定するなどの情報処理を行う装置である。

ユーザ端末２０は、管理サーバ１０及びメイクデバイス３０と通信して情報を伝達する通信インタフェースとしての機能や、ユーザへ情報を提供するユーザインタフェースとし
ての機能を有する装置である。メイクデバイス３０は、ユーザ情報を取得する機能や、ユーザの顔に化粧料を塗布する機能を有する装置である。

このように本実施形態のメイク支援システム１００では、管理サーバ１０、ユーザ端末２０、メイクデバイス３０を別体としたが、これらを一体とした装置であってもよい。また、管理サーバ１０とユーザ端末２０とを一体とし、メイクデバイス３０を別体とした構成であっても、ユーザ端末２０とメイクデバイス３０とを一体とし、管理サーバ１０を別体とした構成であってもよい。本実施形態のメイク支援システム１００は、メイク支援装置の一形態である。

＜管理サーバ＞
図２は、管理サーバ１０の構成を示す図である。管理サーバ１０は、所謂コンピュータであって、制御部１１、記憶部１２、入出力部１４、及び通信部１５を備える。管理サーバ１０は、例えばインターネット等の公衆回線Ｎを介して複数のユーザのユーザ端末２０やメイクデバイス３０からユーザ情報等の情報を取得し、処理結果を取得元へ返信するクラウド上のサーバである。また、管理サーバ１０は、ユーザ宅内に配置され、ＬＡＮ等の公衆回線Ｎを介してユーザ端末２０やメイクデバイス３０からユーザ情報等の情報を取得し、処理結果を取得元へ返信するローカルコンピュータであってもよい。

制御部１１は、管理サーバ１０全体の動作を制御し、管理サーバ１０が有する各種の機能を実現する。制御部１１は、例えば、プロセッサ及びメモリを備える。プロセッサは、管理サーバ１０の動作を統括的に制御する。プロセッサは、ＣＰＵ又はＭＰＵ等とも呼ばれる。メモリは、例えばＲＯＭ及びＲＡＭである。ＲＯＭは、各種プログラム又はデータを記憶する記憶媒体である。ＲＡＭは、各種プログラム又はデータを一時的に記憶する記憶媒体である。ＲＡＭは、プロセッサから直接アクセス可能とし、メインメモリとして機能してもよい。

記憶部１２は、ＨＤＤ又はＳＳＤなどの記憶装置である。記憶部１２は、制御部１１の外部記憶装置として機能する。

入出力部１４は、オペレータ等からの操作の受け付け及びオペレータへの情報の出力を行う手段であり、例えば、ボタン、キーボード、タッチパネル、表示部、又はスピーカ等である。通信部１５は、通信回線を介して外部装置と通信を行うための通信インタフェースである。

制御部１１は、プロセッサが、ＲＡＭをワークエリア（作業領域）とし、ＲＯＭ又は記憶部１２等に格納されたプログラムを実行する。例えば、メイク支援プログラムを実行することにより、制御部１１は、ユーザ情報取得部１１１、目標情報取得部１１２、メイク決定部１１３、制御信号生成部１１４、出力制御部１１５等の機能部として機能する。制御部１１は、これら複数の機能部の機能を複数のプロセッサ又は単一のプロセッサに含まれる複数のコアによって、それぞれ実現してもよい。また、制御部１１は、これら複数の機能部の機能をマルチタスク又はマルチスレッドといった技術で単一のプロセッサが実現してもよい。

ユーザ情報取得部１１１は、メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報をユーザ端末２０又はメイクデバイス３０から取得する。

目標情報取得部１１２は、メイクの目標とする顔において、サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得する。

メイク決定部１１３は、ユーザ情報と目標情報とに基づいて、ユーザの顔に塗布する化粧料の色や、化粧料を塗布する範囲など、メイクに係るパラメータを決定する。

制御信号生成部１１４は、メイクデバイス３０により塗布する化粧料の色や塗布位置等を制御する制御信号を生成する。例えば、メイクデバイス３０が備える基本色の化粧料を混色することで、メイク決定部１１３で決定した色となるように、各基本色の混色比率を求め、この混色比率を示す混色情報や、塗布位置を示す塗布位置情報を含む制御信号を生成する。また、制御信号生成部１１４は、ユーザにメイクデバイス３０の使い方等を提示するガイド情報を生成し、制御信号に含めてもよい。
出力制御部１１５は、制御信号をユーザ端末２０又はメイクデバイス３０へ出力する。

＜ユーザ端末＞
図３は、ユーザ端末２０の構成を示す図である。ユーザ端末２０は、所謂コンピュータであって、制御部２１、記憶部２２、入出力部２４、及び通信部２５を備える。

制御部２１は、ユーザ端末２０全体の動作を制御し、ユーザ端末２０が有する各種の機能を実現する。制御部２１は、例えば、プロセッサ及びメモリを備える。プロセッサは、ユーザ端末２０の動作を統括的に制御する。プロセッサは、ＣＰＵ又はＭＰＵ等とも呼ばれる。メモリは、例えばＲＯＭ及びＲＡＭである。ＲＯＭは、各種プログラム又はデータを記憶する記憶媒体である。ＲＡＭは、各種プログラム又はデータを一時的に記憶する記憶媒体である。ＲＡＭは、プロセッサから直接アクセス可能とし、メインメモリとして機能してもよい。

記憶部２２は、ＨＤＤ又はＳＳＤなどの記憶装置である。記憶部２２は、制御部２１の外部記憶装置として機能する。

入出力部２４は、入力手段からの情報の入力、ユーザによる操作の受け付け、及びユーザへの情報の出力を行う。例えば、センサ、カメラ、ボタン、キーボード、タッチパネル、等の入力手段からの入力や、表示部、スピーカ等の出力手段からの出力を行う。通信部２５は、通信回線を介して、管理サーバ１０やメイクデバイス３０等の外部装置と通信を行うための通信インタフェースである。

制御部２１は、プロセッサが、ＲＡＭをワークエリア（作業領域）とし、ＲＯＭ又は記憶部２２等に格納されたプログラムを実行する。例えば、メイク支援プログラムを実行することにより、制御部２１は、ユーザ情報提供部２１１、目標設定部２１２、制御信号取得部２１３、ガイド情報提示部２１４等の機能部として機能する。制御部２１は、これら複数の機能部の機能を複数のプロセッサ又は単一のプロセッサに含まれる複数のコアによって、それぞれ実現してもよい。また、制御部２１は、これら複数の機能部の機能をマルチタスク又はマルチスレッドといった技術で単一のプロセッサが実現してもよい。

ユーザ情報提供部２１１は、メイクデバイス３０からユーザ情報を取得し、このユーザ情報を管理サーバ１０へ提供（送信）する。ユーザ情報提供部２１１は、メイクデバイス３０から取得したユーザ情報を記憶部２２に記憶させておき、記憶部２２から読み出して管理サーバ１０へ提供してもよい。また、ユーザ情報提供部２１１は、ユーザ端末２０のセンサやカメラによってユーザ情報を取得し、このユーザ情報を管理サーバ１０へ提供してもよい。

目標設定部２１２は、ユーザの操作によって、メイクの目標とする顔を設定し、この設定情報を管理サーバ１０へ送信する。例えば、ユーザ端末２０のカメラによって撮影した
顔の画像や、Webページなどに掲載されている顔の画像をユーザが選択した場合に、目標設定部２１２は、この画像を設定情報として管理サーバ１０へ送信する。また、目標設定部２１２は、管理サーバ１０から、モデルとする顔の画像を複数取得し、表示部に表示させ、この中から目標とする顔の画像をユーザが選択した場合に、この選択結果を設定情報として管理サーバ１０へ送信してもよい。

制御信号取得部２１３は、管理サーバ１０から制御信号を取得し、メイクデバイス３０へ送信する。

ガイド情報提示部２１４は、管理サーバ１０からガイド情報を取得した場合、例えば制御信号にガイド情報が含まれていた場合に、このガイド情報を表示部に表示させることや、スピーカから音声出力させることによりユーザに提示する。

＜メイクデバイス＞
図４は、メイクデバイス３０の外観図、図５は、メイクデバイス３０の構成を示す図である。メイクデバイス３０は、図４に示すように、一方向に延伸したペン型であり、ユーザが筐体３１の側部を把持し、先端３Ｆを顔に近づけた際に、先端３Ｆから顔表面へ化粧料を吹き付けて塗布する。

メイクデバイス３０は、筐体３１内に、センサユニット３２、ノズルユニット３３、ブロワ３４、バルブ３５、化粧料カードリッジ３６、通信部３７、操作部３８及び制御部３９を備えている。

センサユニット３２は、ユーザ情報を検出するセンサや、メイクデバイス３０の位置を検出するセンサを有している。ユーザ情報を検出するセンサとしては、例えば、ユーザの顔表面の三次元形状を検出する三次元レーザスキャナや、ＴｏＦセンサ、及び顔表面の色を検出する撮像素子やカメラが挙げられる。この三次元レーザスキャナやＴｏＦセンサにより、顔表面を所定単位に区分し、各所定単位の三次元座標（サンプリング位置）を検出すると共に、撮像素子やカメラにより、所定単位毎の色を検出してユーザ情報とする。また、センサユニット３２は、加速度センサを備え、メイクデバイス３０の姿勢や移動速度などを検出してもよい。本実施形態のメイクデバイス３０は、ユーザ情報を測定する測定デバイスの機能を備える。なお、測定デバイスは、メイクデバイス３０から独立した装置であってもよい。

ノズルユニット３３は、メイクデバイス３０の先端３Ｆに配置された複数のノズル３３１を備えている。各ノズル３３１は、化粧料の供給管３６１を介して化粧料カードリッジ３６と接続され、化粧料カードリッジ３６から化粧料が供給される。供給管３６１には、バルブ３５が設けられ、制御部３９の制御により、化粧料の供給量が調整される。

ブロワ３４は、ノズル３３１に空気を供給し、この空気と共に化粧料をノズル３３１から噴き出させる。

化粧料カードリッジ３６は、基本色の化粧料を格納したカートリッジである。基本色の化粧料とは、例えば、シアン、マゼンタ、イエロー、ブラックの化粧料が挙げられる。また、基本色の化粧料として、白色や灰色といった無彩色の化粧料や、ゴールド、シルバー、パール、ラメなど、特定の光沢を有した化粧料を備えてもよい。更に、マットやグロス等の化粧料を備えてもよい。

通信部３７は、ユーザ端末２０や、管理サーバ１０等、他の装置と通信する多面の通信インタフェースである。

操作部３８は、ユーザによって操作される入力手段であり、例えば、電源ボタンや、操作ボタン、選択スイッチ等である。

制御部３９は、センサユニット３２で検出したユーザ情報をユーザ端末２０又は管理サーバ１０へ送信すると共に、ユーザ端末２０を介して管理サーバ１０から取得した制御信号に基づいてバルブ３５やブロワ３４を制御して、ユーザの顔に吹き付ける化粧料を調整する。

＜メイク支援方法＞
次にメイク支援システム１００を用いてユーザのメイクを支援する方法について説明する。

≪ユーザ情報の取得≫
ユーザ情報は、例えばメイクデバイス３０の先端３Ｆに設けられたセンサユニット３２をユーザの正面から当該ユーザの顔に向けて配置し、顔表面の三次元形状及び色を測定することにより取得される。なお、正面に限らず、上下、左右など、複数方向から撮影した画像を合成することによってユーザ情報を作成してもよい。

また、ユーザ端末２０が、カメラやＴｏＦセンサを備えている場合、このカメラやＴｏＦセンサを用いて上記メイクデバイス３０と同様にユーザ情報を取得してもよい。

ユーザ情報は、顔全体の情報を所得したのち、この情報から目元や口唇など各パーツの情報を抽出してもよいし、パーツ毎に検出した情報を組み合わせてユーザ情報を構成してもよい。

パーツ毎に情報を検出する場合、例えばメイクデバイス３０のカメラでパーツを撮影し、この撮影画像とガイドラインをユーザ端末２０の表示部に表示させると共に、「目の横幅をこのガイドラインに合わせて撮影してください」、「唇の輪郭をこのガイドラインの内側に収まるように撮影してください」のようにガイド情報を表示することで、各パーツを適切に撮影させ、ユーザ情報とする。また、メイクデバイスとは別に、カメラやＴｏＦセンサを備えた測定デバイスを用い、上記と同様にユーザ情報を取得し、ユーザ端末２０又は管理サーバ１０へ提供してもよい。

≪目標情報の取得≫
ユーザがWebページなどで目標としたい顔の画像を見つけた場合、ユーザ端末２０上でこの画像を選択することで、ユーザ端末２０が、この画像を目標情報として管理サーバ１０へ送信する。また、ユーザ端末２０のカメラで目標としたい人の顔や、メイク後のユーザの顔を撮影し、この撮影画像を目標情報として管理サーバ１０へ送信してもよい。例えば、メイク後の顔を日々撮影し、これらの画像から平均的な色や位置の情報を求めて目標情報を作成してもよい。

更に、ユーザの顔に対してメイクを施す動作をユーザ端末２０やメイクデバイス３０のカメラで撮影し、この撮影画像に基づいて目標情報を生成してもよい。例えば上記ユーザ情報の取得と同様にユーザ端末２０やメイクデバイス３０のカメラをユーザの顔に向けて配置し、ユーザ自身やメイクアップアーティスト等がメイクを施す際、アイシャドウやチーク等の化粧料を塗布する速度（手や筆が動く速度）、化粧料を塗布する方向、範囲など、メイクを施す動作を動画で撮影する。そして、この撮影画像（動画像）から、化粧料を塗布する速度、方向、範囲などの情報を抽出して目標情報に反映させる。

≪管理サーバの動作≫
図６は、管理サーバ１０の制御部１１が、メイク支援プログラムに基づいて実行するメイク支援方法の処理手順を示す図である。

ステップＳ１０にて、制御部１１は、ユーザ端末２０からユーザ情報を取得する。
ステップＳ２０にて、制御部１１は、メイクの目標とする顔を示す設定情報をユーザ端末２０から受信する。例えば、ユーザ端末２０のカメラによって撮影した顔の画像や、Webページなどに掲載されている顔の画像を受信する。また、モデルとする顔の画像の中からユーザが目標とする顔の画像を選択した場合に、この選択結果を設定情報として受信する。

ステップＳ３０にて、制御部１１は、ステップＳ２０で受信した設定情報に基づき、ユーザが目標とする顔の画像から、目標情報を取得する。

ステップＳ４０にて、制御部１１は、ユーザ情報及び目標情報を目元、眉、頬（チーク）、鼻、口唇等のパーツに分割する。

ステップＳ４５にて、制御部１１は、ユーザの顔に対し、過去にメイクを施した際の動作を撮影した動画像に基づいて目標情報を補正する。例えば、ステップＳ２０で設定した目標の顔に加え、ユーザが過去にメイクした際の手技に基づいてメイクの方向や範囲、塗り重ね方などに合わせて目標情報を補正する。これにより、ユーザが実際に行ったメイクや、日々行っているメイクに近づくように目標を設定している。

ステップＳ５０にて、制御部１１は、パーツ毎に、ユーザ情報と目標情報とを比較し、この差分からユーザの顔に塗布する化粧料の色や、化粧料を塗布する範囲など、メイクに係るパラメータを決定する。

ステップＳ６０にて、制御部１１は、全てのパーツについてパラメータの決定が完了したか否かを判定する。なお、各パーツにおける具体的なパラメータの決定手法については後述する。ステップＳ６０にて、否定判定の場合、制御部１１は、ステップＳ５０に戻り、まだ決定していなパラメータについて決定を行い、肯定判定となった場合、ステップＳ７０へ移行する。なお、全てのパーツとは、顔を構成するパーツ全てに限らず、メイクの対象としたものであってもよい。即ち、目元と口唇のみをメイク対象とした場合、目元と口唇についてパラメータの決定が完了すれば、肯定判定とする。

ステップＳ７０にて、制御部１１は、メイクデバイス３０により塗布する化粧料の色や塗布位置、塗り重ね回数、塗布速度、塗布の密度等を制御する制御信号を生成する。なお、本例では、ステップＳ４５で、過去のメイク動作に基づいて目標情報を補正しているので、ステップＳ７０で生成される制御信号にも当該メイク動作が反映されている。また、ステップＳ４５で、目標情報を補正するのではなく、ステップＳ７０で生成される制御信号を当該メイク動作に基づいて補正することで、メイク動作を反映させてもよい。

ステップＳ８０にて、制御部１１は、ステップＳ７０で生成した制御信号をユーザ端末２０へ送信し、ユーザ端末２０を介してメイクデバイス３０へ送り、制御信号に基づくメイクを行わせる。

図７Ａは、メイクデバイス３０の制御部３９が実行する処理手順を示す図である。
ステップＳ１１０にて、制御部３９は、ユーザ端末２０から制御信号を取得する。

ステップＳ１２０にて、制御部３９は、制御信号に基づき、メイク対象とするパーツを
特定し、このパーツを示す情報をユーザ端末２０に通知し、このパーツのメイクを行う旨のガイド情報を出力させる。図７Ｂは、ガイド情報の一例を示す図である。図７Ｂでは、開始位置から終了位置へ移動させてチークを塗布する例を示している。また、ガイド情報は、「ゆっくり」「素早く」など、メイクデバイス３０を移動させる速度（塗布速度）を指示する情報を含んでもよい。

ステップＳ１３０にて、制御部３９は、センサユニット３２により、ユーザの顔に対するメイクデバイス３０の相対位置を検出する。

ステップＳ１４０にて、制御部３９は、制御信号の位置情報及び混色情報に基づき、ステップＳ１３０で検出した位置に対し、混色情報に応じて比率で化粧料を吹き付ける。また、制御部３９は、ステップＳ４５で目標情報に反映させた速度や塗布範囲、塗布の密度等の情報に基づいて化粧料を吹き付ける。

ステップＳ１５０にて、制御部３９は、化粧料を吹き付けた後の色をセンサユニット３２により検出する。

ステップＳ１６０にて、制御部３９は、メイクが完了したか否かを判定する。ステップＳ１５０で検出した色が目標の色になっていない場合や、メイクが完了していないパーツがある場合、所定の塗り重ね回数に達していない場合には、否定判定とし、制御部３９は、ステップＳ１２０へ戻って完了していないパーツのメイクを行う。そして、ステップＳ１６０で肯定判定となった場合、制御部３９は、図７Ａの処理を終了する。

≪ユーザ端末の動作≫
図８は、ユーザ端末２０の制御部２１が、メイク後のユーザの顔を撮影し、管理サーバ１０へ送信する処理手順を示す図である。ユーザ端末２０の制御部２１は、メイクデバイス３０による図７Ａの処理が終了した場合に、図８の処理を開始する。

ステップＳ２１０にて、制御部２１は、表示部に「メイクを修正しますか？」のようにメッセージを表示させ、ユーザに修正を行うか否かの選択を促す。

ステップＳ２２０にて、制御部２１は、修正が選択されたか否かを判定し、ステップＳ２１０でユーザが修正を行うことを選択した場合に肯定判定し（Ｓ２２０、Ｙｅｓ）、ステップＳ２３０へ移行する。

ステップＳ２３０にて、制御部２１は、撮影を開始する旨のガイド情報を表示すると共に撮影を開始する。これにより、メイクデバイス３０でメイクを行った後、ユーザ自身が仕上げや微調整等を行う際の手技を撮影する。

ステップＳ２４０にて、制御部２１は、制御部２１は、表示部に「メイクが完了しましたか？」のようにメッセージを表示させ、ユーザにメイクが完了したか否かの選択を促す。

ステップＳ２５０にて、制御部２１は、完了が選択されたか否かを判定し、ステップＳ２４０でユーザが完了を選択した場合に肯定判定し（Ｓ２５０、Ｙｅｓ）、ステップＳ２７０へ移行する。

一方、ステップＳ２２０で否定判定であった場合、制御部２１は、ステップＳ２６０にてメイクデバイス３０でメイクを行った後のユーザの顔を撮影し、ステップＳ２７０へ移行する。

ステップＳ２７０にて、制御部２１は、ステップＳ２３０，２６０で撮影した撮影画像を管理サーバ１０へ送信する。これにより、ユーザが好みに応じてメイクを修正した場合（Ｓ２２０、Ｙｅｓ）に、この手技を撮影した画像や、修正が必要ないと判断（Ｓ２２０、Ｎｏ）した状態の画像を管理サーバ１０に送り、目標情報に反映させることができる。

＜アイメイク＞
図９～図１１は、アイメイクの具体例を示す図である。管理サーバ１０の制御部１１は、ステップＳ５０にて、目元のパラメータを決定する場合、図９のように目標情報から目元の画像を取得し、グラデーションの方向を求める。図９の例では、瞼の下側が濃く、上側が薄いため、濃い側を開始点、薄い側を終了点とするように、パターンＰ１が選択される。

次に、パターンＰ１で塗布する領域を所定数（例えば１～６）で分割する。図１０では、４つに分割し、分割した各領域の色を求め、ユーザ情報と比較して、この差分から各領域について、ＣＭＹＫの混合比率を求める。

更に、図１１に示すように、全体の幅に対して、分割された各領域の幅の割合を求め、この割合で変化するようにサンプリング位置毎の色を決定し、制御信号を生成する。

このように、位置に応じて混合比率を変化させた制御信号をメイクデバイス３０へ送信するので、メイクデバイス３０は、この制御信号に基づいて、目標のグラデーションとなるようにメイクを行うことができる。

＜チーク＞
図１２～図１５は、チークの具体例を示す図である。管理サーバ１０の制御部１１は、ステップＳ５０にて、チークのパラメータを決定する場合、図１２のようにユーザ情報からユーザの顔の形を求める。例えば、「眉から口までの縦の長さ」と「口の位置における正面からみた顔の横幅の長さ」との比率が、１：１であれば卵顔、２：３であれば丸顔、１：２であれば四角型、３：２であれば面長顔とする。

また、「小鼻と耳中央を結ぶ線」と「黒目外側から下へ向かう直線」が交わる場所を起点とし、この起点に対して、チークを入れる領域の始点を示す座標と、終点を示す座標と、領域の形状を図１３のデータテーブルから求める。なお、座標の縦軸は、図１４に示すように、目の縦幅中央から小鼻までの縦幅までの5等分とし、起点から上をy+、下をｙ-と表す。座標の横軸は、鼻筋から左右それぞれ顔の最大横幅までの横幅を５等分とし、起点から左をx-、右をx+と表す。

そして、このように定めた領域において、目標情報とユーザ情報と比較して、この差分から各領域について、ＣＭＹＫの混合比率を求め、制御信号を生成する。

このように、ユーザの顔の形に応じてチークを入れる領域を定めて制御信号を生成し、メイクデバイス３０へ送信するので、メイクデバイス３０は、この制御信号に基づいて、ユーザの顔の形に適したチークとなるようにメイクを行うことができる。

図１５は、印象モードに応じてパラメータを決定する例を示す図である。ユーザが、キュート、フレッシュ、クール、エレガントなど、所望の印象モードを選択した場合、制御部１１は、図１３のデータテーブルに代えて、図１５のデータテーブルに基づいて、チークを入れる領域の始点を示す座標と、終点を示す座標と、領域の形状を定めてもよい。

このようにユーザが選択した印象モードに応じてチークを入れる領域を定めて制御信号を生成し、メイクデバイス３０へ送信することで、メイクデバイス３０は、この制御信号に基づいて、ユーザが所望する印象に適したチークとなるようにメイクを行うことができる。

以上のように、本実施形態によれば、化粧料を混色し、ユーザに適した色やグラデーションでメイクを行うことができる。

＜変形例＞
図１６は、メイクデバイス３０Ａの変形例を示す図である。図１６のメイクデバイス３０Ａは、前述のメイクデバイス３０と比べ、ブロワ３４を排し、ローラ３３０を備え、ローラ３３０を介して化粧料を塗布する構成が異なっている。なお、その他の構成は、前述の実施形態と同じであるため、同一の要素には同符号を付すなどして再度の説明を省略する。

ローラ３３０は、メイクデバイス３０Ａの長手方向と直交する方向に回転軸を有し、回転可能に保持されている。ユーザがローラ３３０を顔表面に当てた状態でメイクデバイス３０Ａを移動させると、顔表面との摩擦によりローラ３３０が回転する。メイクデバイス３０Ａは、制御部３９の制御によりノズル３３１から化粧料が吐出されると、この化粧料がローラ３３０の外周に担持され、ローラ３３０の回転に伴って、この化粧料が顔表面に塗布される。

このように、ローラ３３０を介して化粧料を塗布する構成であっても適切にメイクを行うことができる。また、化粧料を担持する部材は、ローラ３３０に限らず、筆状の部材など、他の形状の部材であってもよい。

１０ 管理サーバ
１１ 制御部
１２ 記憶部
１３ 表示部
１４ 入出力部
１５ 通信部
２０ ユーザ端末
２１ 制御部
２２ 記憶部
２３ 表示部
２４ 入出力部
２５ 通信部
３０ メイクデバイス
３１ 筐体
３２ センサユニット
３３ ノズルユニット
３４ ブロワ
３５ バルブ
３６ 化粧料カードリッジ
３７ 通信部
３８ 操作部
３８ 制御部
３９ 制御部
１００ メイク支援システム
１１１ ユーザ情報取得部
１１２ 目標情報取得部
１１３ メイク決定部
１１４ 制御信号生成部
１１５ 出力制御部
２１１ ユーザ情報提供部
２１２ 目標設定部
２１３ 制御信号取得部
２１４ 制御信号生成部
３３１ ノズル
３６１ 供給管

Claims (12)

1. メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
   メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
   前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
   所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
   前記混色比率を示す混色情報を出力することと、
   を実行する制御部を備えたメイク支援装置。
2. 前記制御部が、
   前記サンプリング位置毎の三次元座標を示す三次元情報を更に含む前記ユーザ情報を取得し、
   前記三次元情報に基づいてメイク領域を決定し、
   前記メイク領域毎に前記ユーザの顔に塗布する化粧料の色を決定し、
   前記メイク領域毎に前記混色情報を出力する
   請求項１に記載のメイク支援装置。
3. 前記制御部が、
   メイク後の印象を示す複数の印象モードのうち、ユーザによって選択された印象モードを取得し、
   前記印象モードに基づいて前記ユーザの顔に塗布する化粧料の色又は領域を決定する、請求項２に記載のメイク支援装置。
4. 前記基本色の化粧料を内蔵したメイクデバイスを更に備え、
   前記メイクデバイスが、前記混色情報に基づいて前記基本色の化粧料を混色し、混色後の化粧料を出力する、
   請求項１～３の何れか１項に記載のメイク支援装置。
5. 前記混色情報が前記化粧料を塗布する位置を示す位置情報を含み、
   前記メイクデバイスが、前記ユーザの顔に対し、前記位置情報が示す位置に前記混色後の化粧料を塗布する
   請求項４に記載のメイク支援装置。
6. 前記メイクデバイスが、前記位置情報が示す位置に前記混色後の化粧料を吹き付ける請求項５に記載のメイク支援装置。
7. 前記ユーザのメイク対象面においてサンプリング位置毎の色を測定し、前記ユーザ情報として前記制御部へ提供する測定デバイスを更に備える
   請求項１から６の何れか１項に記載のメイク支援装置。
8. 前記ユーザの顔に対してメイクを施す動作を撮影した撮影画像を取得することと、
   前記撮影画像に基づいて前記目標情報を生成することと、
   を前記制御部が更に実行する
   請求項１から７の何れか１項に記載のメイク支援装置。
9. 前記制御部が、前記メイクを施す動作に基づいて、前記メイクデバイスに対する制御信
   号を生成し、
   前記メイクデバイスが、前記制御情報に基づいて前記化粧料の塗布を行う請求項５又は６を引用する請求項８に記載のメイク支援装置。
10. 前記目標情報に基づいてメイク後の色が徐々に変化する領域をグラデーション領域として特定することと、
    前記グラデーション領域において前記色が変化する方向と、前記方向における位置毎の変化の割合とを示すパラメータを決定することと、
    を前記制御部が更に実行する
    請求項１から９の何れか１項に記載のメイク支援装置。
11. メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
    メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
    前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
    所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
    前記混色比率を示す混色情報を出力することと、
    を制御部が実行するメイク支援方法。
12. メイク対象とするユーザの顔においてサンプリング位置毎の色を示す情報を含むユーザ情報を取得することと、
    メイクの目標とする顔において前記サンプリング位置と対応する位置毎の色を示す色情報を含む目標情報を取得することと、
    前記ユーザ情報と前記目標情報とに基づいて前記ユーザの顔に塗布する化粧料の色を決定することと、
    所定の基本色の化粧料を混色することで、前記塗布する化粧料の色となる各基本色の混色比率を求めることと、
    前記混色比率を示す混色情報を出力することと、
    を制御部に実行させるためのメイク支援プログラム。

Images