JP6652184B2 - ネイルプリント装置、ネイルプリント装置の動作制御方法及びネイルプリント装置の動作制御プログラム - Google Patents

Description

本発明は、ネイルプリント装置、ネイルプリント装置の動作制御方法及びネイルプリント装置の動作制御プログラムに関する。

指の爪にネイルデザインを描画するネイルプリント装置において、インクジェット方式等の印刷ヘッドによる描画機能を備えて爪にデザインを施すものがある。この種のネイルプリント装置では、インクジェット方式で使用するインクが透過性であるため、印刷ヘッドで印刷する領域に下地となる白色インクを塗布しておく必要がある。

ところで、ネイルプリント装置では、ネイルデザインの施術範囲を特定するために、施術しようとする指の画像をカメラで取得し、取得した画像から施術領域を検出することが行われる。ここで、何も塗布されていない爪の領域や、爪に塗布された下地の領域を検出する方法としては、図１３に示すような方法が知られている。

図１３は、ネイルプリント装置において、爪の領域や爪に塗布された下地の領域の検出方法の従来の技術を説明する図である。

図１３（ａ）に示すように、爪１０２の領域全体を検出する方法には、例えば、指１０１の肌と爪１０２の色の違い利用した方法や爪１０２の特徴を利用した方法がある。爪１０２の特徴を利用した方法としては、例えば、爪先に刺激を与えて、変色した部分を爪領域として検出する方法がある（特許文献１参照）。

一方、図１３（ｂ）に示すように、爪に塗布された下地形成領域１０３（二点鎖線で囲われる領域）を検出する場合においては、爪に塗布されたものであるため、上記のような爪領域を検出する方法を適用することはできない。ここで、下地形成領域１０３としては、例えば、爪１０２の全面の領域や、爪１０２の一部の領域（爪先側にデザインを施すフレンチタイプや、爪１０２に部分的なデザインを施すワンポイントタイプ）などがある。このような下地形成領域１０３を検出する方法においては、下地は通常、白色であるため、爪１０２内における白色部分を検出することになる。しかし、撮影装置で爪１０２を撮影する際に照明光を爪１０２に照射することにより、この照明光が反射して白く光る部分が生じて、これを白色領域として認識したり、爪先側の白い部分を白色領域として認識したりして、下地でない部分を下地形成領域１０３として誤検出するおそれがあった。

このため、ネイルプリント装置において、下地形成領域１０３を検出する際の誤検出をなくし、下地形成領域１０３を正しく検出するための適切な検出技術が要望されている。

特開２０１２−５６１８号公報

本発明は、上記のような事情に鑑みなされたものであり、下地形成領域を検出する際の誤検出をなくし、下地形成領域を正確に検出可能なネイルプリント装置、ネイルプリント装置の動作制御方法及びネイルプリント装置の動作制御プログラムを提供することを目的とする。

本発明は、以下の構成によって把握される。
本発明のネイルプリント装置は、照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源と、前記第１の光源及び前記第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得部と、前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析部と、を備え、前記解析部は、前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断することを特徴とする。

本発明のネイルプリント装置の動作制御方法は、照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得ステップと、前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析ステップと、を含み、前記解析ステップにおいて、前記画像取得ステップにより前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断することを特徴とする。

本発明のネイルプリント装置用の動作制御プログラムは、コンピュータに、照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む前記指を撮影させて、前記爪を含む、複数の画素を有する画像を取得させ、前記画像の前記爪の部分の前記複数の画素の各々の状態を解析させ、前記解析において、前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断させることを特徴とする。

本発明によれば、下地形成領域を検出する際の誤検出をなくし、下地形成領域を正確に検出可能なネイルプリント装置、ネイルプリント装置の動作制御方法及びネイルプリント装置の動作制御プログラムを提供することができる。

本発明の実施形態に係るネイルプリント装置の外観を斜視図である。 実施形態に係る表示部の平面図である。 実施形態に係る制御の構成を示すブロック図である。 実施形態に係る指受け入れ部周辺の側断面を模式的に示す図である。 実施形態に係る色情報を説明する図である。 実施形態に係る白の輝度値及び色相の範囲を説明する図である。 実施形態に係るフローチャート１を説明する図である。 実施形態に係るフローチャート２を説明する図である。 実施形態に係るフローチャート３を説明する図である。 実施形態に係るフローチャート４を説明する図である。 実施形態に係る注目画素の領域の一部を抜き出して示す図である。 実施形態に係る下地描画後の注目画素の領域を説明する図である。 ペン及び印刷ヘッドを備えたネイルプリント装置を用いて、描画及び印刷を行う従来の技術を説明する図である。

以下、添付図面を参照して、本発明を実施するための形態（以下、「実施形態」と称する）について詳細に説明する。なお、実施形態の説明の全体を通して同じ要素には同じ番号を付している。また、以下の説明において、「前」、「後」は、各々、ネイルプリント装置に正対したときの「手前側」、「奥側」を示し、「左」、「右」は、各々、ネイルプリント装置に正対したときの「左側」、「右側」を示す。

また、以下の実施形態では、ネイルプリント装置は手の指の爪の表面を描画対象面として、これに描画するものとして説明するが、本発明の描画対象面は手の指の爪の表面に限るものではなく、例えば足の指の爪の表面を描画対象面としてもよい。

（実施形態の構成）
ネイルプリント装置の基本構成を図１、図２に基づいて説明する。図１はネイルプリント装置の外観を概念的に示す図、図２は表示部の平面図である。

図１に示すように、ネイルプリント装置１０は、印刷部２４による描画機能及び描画部２１による描画機能を備え、これらを組み合わせて人の指の爪１１にネイルデザインＤ（図２参照）を施す装置である。ネイルプリント装置１０は、ケース本体４０と、このケース本体４０の内部に設けられる描画部２１及び印刷部２４と、ケース本体４０の上面（天板）に設けられる表示部３２と、ケース本体４０の前面に開口して設けられる指受け入れ部４５ａとを備える。また、ケース本体４０には、制御装置５１（図３参照）及び撮影部４６（図３参照）が収容される。

指受け入れ部４５ａは、デザインを描く爪１１に対応する指（以下、「描画指１２」と称する）を受け入れる。

図２に示すように、表示部３２は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機エレクトロルミネッセンスディスプレイなど各種のフラットディスプレイである。また、表示部３２は、操作部３１を兼ね備えたタッチパネル式となっており、例えば、指先やスタイラスペン又は先の尖った棒状の筆記具などによって表示部３２の表面を触るタッチ操作によって、ユーザーからの指示を取り込むことができる。

表示部３２の左右一側（この例では、右側）には、描画指１２を撮影した指画像Ｐ、指画像Ｐに含まれる爪領域Ｔ（爪１１の輪郭線等の画像）を確認することができるデザイン確認部３２ａが設けられる。一方、表示部３２の左右他側（この例では、左側）には、複数のネイルデザインＤ１〜Ｄ９（ネイルデザインＤ２〜Ｄ９では具体的なデザインの図示を省略する）が表示されるデザイン選択部３２ｂが設けられる。なお、以下の説明において、複数のネイルデザインＤ１，Ｄ２，Ｄ３・・・を総じて称する場合は、数字を後続せずに「ネイルデザインＤ」と記載する。

デザイン選択部３２ｂでは、表示された複数のネイルデザインＤの中から爪１１に描画するネイルデザインＤをタッチ操作によって選択可能である。また、デザイン確認部３２ａの左右に設けられる三角形のボタン３２ｃを押すことで、デザイン確認部３２ａに表示されていない別のネイルデザインＤを表示させることができる。

さらに、表示部３２には、爪１１への印刷を開始する印刷ボタン３２ｄと、指画像Ｐを取得するための指画像取得ボタン３２ｅと、描画指１２における爪領域（爪１１の輪郭）Ｔの検出あるいは爪１１の下地の検出を開始する検出開始ボタン３２ｆと、が設けられる。

続いて、ネイルプリント装置１０の制御の構成を図３、図４に基づいて説明する。図３は制御の構成を示すブロック図、図４は指受け入れ部周辺の側断面を模式的に示す図である。

図３に示すように、制御装置５１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）により構成される制御部５２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などで構成される記憶部５３とを備える。

制御部５２は、撮影制御部５８、解析部６２、爪領域検出部５９、表示制御部６０、描画制御部６１、印刷制御部６３、画像処理部６４を備える。これら撮影制御部５８、解析部６２、爪領域検出部５９、表示制御部６０、描画制御部６１、印刷制御部６３、画像処理部６４の機能は、制御部５２のＣＰＵと記憶部５３のＲＯＭに記憶されたプログラムとの共働によって実現される。また、制御装置５１には、操作部３１、表示部３２、撮影部４６、描画部２１及び印刷部２４が接続される。

図４に示すように、撮影部４６は、指受け入れ部４５ａ内に挿入された描画指１２の爪１１の上方に位置するカメラ４６ａ及び光源４６ｂを備える。カメラ４６ａは、指受け入れ部４５ａ内に挿入された描画指１２及びその爪１１を撮影するものであり、例えば、２００万画素程度又はそれ以上の画素数を有するものを好適に用いることができる。光源４６ｂは、互いに異なる位置に少なくとも２つ設けられており、カメラ４６ａによる撮影の際に描画指１２の爪１１を照明する。光源４６ｂには、白色ＬＥＤなどを好適に用いることができる。

図３に戻る。図３示すように、描画部２１は、爪１１にペン２２と、ペン２２を移動させるモータなどで構成される移動手段２３とを備える。ペン２２は、例えば下地用の白色のインクを内部に有していて、そのペン先が爪１１に接触したときに、このインクにより爪１１に下地を描画することができる下地用のものである。描画部２１は、移動手段２３によって前後方向、左右方向、上下方向（図１において破線の矢印で示す方向）に移動可能であり、爪１１の表面に下降したペン２２のペン先で下地を描画する。なお、描画部２１は、ペン２２として、上記の下地用のものだけでなく、更に、種々の色や種々の種類のインクを有する描画用のものを備え、これを用いて爪１１に種々の絵柄を描画することもできるものであってもよい。

印刷部２４は、インクジェット方式等の印刷ヘッド２５と、印刷ヘッド２５を移動させるモータなどで構成される移動手段２６とを備え、爪１１の下地が形成された部分に印刷ヘッド２５によりネイルデザインＤの印刷を行う。印刷部２４は、移動手段２６によって前後方向、左右方向、上下方向（図１において破線の矢印で示す方向）に移動可能であり、爪１１の表面に下降した印刷ヘッド２５で所望のデザインを印刷する。

撮影制御部５８は、撮影部４６のカメラ４６ａ及び光源４６ｂを制御してカメラ４６ａにより、指受け入れ部４５ａに挿入されて描画指載置部４５ａ１（図４参照）に載置された描画指１２を撮影し、爪１１を含む指画像Ｐ（図２参照）を取得する。

解析部６２は、指画像Ｐにおける爪１１の部分の複数の画素の各々の状態を各画素の輝度値及び色相に基づいて解析する。

爪領域検出部５９は、指受け入れ部４５ａに挿入され、カメラ４６ａで撮影された描画指１２の爪１１の画像に基づいて、描画指１２の爪１１についての爪情報を検出する。ここで、爪情報は、爪１１の輪郭（爪形状と水平位置）や爪１１の曲率（爪曲率）である。

表示制御部６０は、表示部３２を制御して表示部３２に各種の画面を表示させる。表示制御部６０は、例えば、デザイン選択部３２ｂやデザイン確認部３２ａ、指画像Ｐなどの各種の表示画面や、印刷ボタン３２ｄ、指画像取得ボタン３２ｅ、検出開始ボタン３２ｆなどの各種ボタンを表示部３２に表示させる。

描画制御部６１は、移動手段２３を介してペン２２の動作を制御し、ペン２２によって爪１１に白色の下地を描画する。より具体的には、解析部６２による解析結果に基づき、指画像Ｐの爪１１の部分に下地が形成されていないと判断された場合、ペン２２によって爪１１に下地を描画・形成する。

印刷制御部６３は、移動手段２６を介して印刷ヘッド２５の動作を制御し、印刷ヘッド２５によって爪１１にネイルデザインＤの印刷を行う。より具体的には、指画像Ｐの爪１１の部分の画素に下地が発見された場合、爪１１の下地が形成されている部分にネイルデザインＤの印刷を印刷部２４で行う。また、描画部２１によって爪１１に下地が形成された後、爪１１の下地が形成された部分にネイルデザインＤの印刷を印刷部２４で行う。

画像処理部６４は、指画像Ｐにおける爪領域Ｔの大きさに合わせて、ユーザーにより選択されたネイルデザインＤの縮小・拡大を行い、描画データを生成する。

記憶部５３には、ネイルプリント装置１０を動作させるための各種プログラムや各種データが格納されている。記憶部５３のＲＯＭには、光源４６ｂに光を描画指１２に照射させる機能と、撮影部４６に指画像Ｐを撮影させる機能と、解析部６２に指画像Ｐの複数の画素の各々の状態を当該画素の輝度値及び色相に基づいて解析部６２に解析させる機能を、少なくとも実現するプログラム（本発明の「ネイルプリント装置の動作制御プログラム」に相当）などの各種プログラムが格納されており、これらのプログラムが制御装置５１によって実行されることで、ネイルプリント装置１０の各部が統括制御される。

また、記憶部５３には、撮影部４６によって取得されたユーザーの爪領域Ｔを記憶する爪画像記憶部５５、後述する色情報を記憶する色情報記憶部５６、及び、複数のネイルデザインＤを記憶するネイルデザイン記憶部５７が設けられている。

ここで、色情報記憶部５６に記憶される色情報を図５、図６に基づいて説明する。図５は色情報を説明する図、図６は白の輝度値及び色相の範囲を説明する図である。

図５（ａ）に示すように、爪１１は、例えば、Ｐ１で示すハート形の領域に下地用のインクが塗布されているものとする。また、Ｐ２で示す楕円形の領域は、爪１１の表面で照明光が反射して、白く光って見えている領域を示し、Ｐ３で示す略円弧状の領域は爪１１の先端側（爪先側）の爪先部であって、爪１１の爪先部以外の非爪先部の部分より白くなっている領域を示している。この爪先部は、爪が爪床（皮膚部分）から離れて不透明になっている部分である。ここで、上記Ｐ１の領域に対応する画素を下地形成画素部とし、上記Ｐ２の領域に対応する画素を白飛び画素部とし、上記Ｐ３の領域に対応する画素を爪先画素部とする。これにより、爪１１を撮影して取得された指画像Ｐの爪１１の各画素は、図５（ｂ）の表に示すように、（１）下地形成画素部、（２）白飛び画素部、（３）爪先画素部、及び、（４）これらの部分のいずれにも該当しない画素部、のいずれかに分類される。本発明者は、下地形成画素部、白飛び画素部及び爪先画素部のそれぞれに特徴づけられる輝度値及び色相に着目した。

ここで、輝度値の算出には、「ＮＴＳＣ係数による加重平均法（ＮＴＳＣ Ｃｏｅｆｆｃｉｅｎｔｓ ｍｅｔｈｏｄ）」を用いることができる。ＮＴＳＣ係数による加重平均法は、Ｒ（赤）、Ｇ（緑）、Ｂ（青）のそれぞれの画素値に重み付けをして３で割り、平均をとりグレースケール化する方法であり、重み付けの係数（ＮＴＳＣ Ｃｏｅｆｆｃｉｅｎｔｓ）は、一般にテレビ放送で利用されている輝度信号（明るさ）の分離方法と同じである。Ｒ、Ｇ、Ｂの３つの画素値が０〜２５５の任意の整数をとるものとすると、グレースケール変換後の値Ｙ（値の範囲は０〜２５５の任意の整数とする）は、Ｙ＝０．３０Ｒ＋０．５９Ｇ＋０．１１Ｂで求められ、このＹの値を本実施形態における輝度値とした。なお、本発明にいう「輝度値」の算出方法は、この例に格別に限定されるものではなく各種の算出方法から任意に選択可能である。

白飛び画素部は、照明光が反射して白く光っている領域（白飛びしている領域）に対応している。この領域では輝度が非常に高いため、輝度値がその上限値を超えていて、白飛びしている。このような白飛び画素部では、指画像Ｐの爪１１の部分における画素の輝度値が２５５付近であり、かつ、Ｒ、Ｇ、Ｂの３つの値の差が小さい（例えば、互いの差が５以下）色相を示す。解析部では、このように輝度値が２５５付近であり、かつ、Ｒ、Ｇ、Ｂの３つの値の互いの差が小さい色相である場合、その画素は白飛び画素部であって、下地形成画素部ではないと判断する。

爪先画素部は、爪１１の爪先部の白い領域に対応した画素である。このような爪先画素部では、指画像Ｐの爪１１の部分における画素の輝度値が例えば１６０以下であり、かつ、Ｒの値が最も高い色相、又は、Ｒ、Ｇ、Ｂの３つの値の互いの差が比較的小さい（例えば、互いの差が１０以下）色相を示す。解析部では、このように輝度値が１６０以下であり、かつ、Ｒの値が最も高い色相、又は、Ｒ、Ｇ、Ｂの３つの値の互いの差が比較的小さい色相である場合、その画素は爪先画素部であって、下地形成画素部ではないと判断する。

そして、下地形成画素部は、爪１１に下地とする白いインクが塗布された領域であり、既に下地が形成されている検出すべき領域である。図６に示すように、下地形成画素部と検出すべき白色は、そこに用いられている白色のインクが１種類だけではなく、色が互いに多少異なる複数の種類のインクのいずれかが使用されることになる。このため、使用されるインクに応じて、「白Ａ」、「白Ｂ」・・・「白Ｘ」に分類することができ、これら「白Ａ」、「白Ｂ」・・・「白Ｘ」それぞれに、特有の輝度値の範囲及び色相の条件が特徴づけられる。例えば、爪１１の部分における画素の輝度値がおよそ１６０〜２４０であると共に、Ｂ＞Ｒ＋１０でかつＢ＞Ｇ＋１０の色相である場合、その画素の色を「白Ａ」と定める。また、爪１１の部分における画素の輝度値が２００〜２４０であると共に、Ｇ＞ＢでかつＧ＞Ｒ＋１５の色相である場合、その画素の色を「白Ｂ」と定める。解析部では、輝度値及び色相の値が「白Ａ」、「白Ｂ」・・・「白Ｘ」の条件のいずれかに適合する場合、その画素は下地形成画素部であると判断する。なお、図５（ｂ）の表では、ハート形の部分Ｐ１における画素が、「白Ａ」の下地形成画素部であると判定された場合を例示している。

以上のように、解析部６２（図３参照）では、色情報に基づいて、指画像Ｐの爪１１の部分の複数の画素の各々が、白飛び画素部、爪先画素部、下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるのかを解析して判断する。すなわち、解析部６２による解析は、各画素の輝度値及び色相と、色情報記憶部５６に記憶された白飛び画素部、爪先画素部及び下地形成画素部のそれぞれの場合の輝度値の範囲及び色相の値との比較に基づいて、各画素の輝度値及び色相が、色情報記憶部５６に記憶された白飛び画素部、爪先画素部及び下地形成画素部のいずれの場合の輝度値の範囲及び色相の値に適合するのかを判断することによって行われる。

さらに、白飛び画素部が下地形成画素部の中に存在している可能性もある。そこで、これを確認するため、解析部６２では、指画像Ｐの爪１１に白飛び画素部の画素がある場合、その画像を撮影するときに使用した光源４６ｂと異なる光源４６ｂを用いて再度撮影して、先に白飛び画素部とした画素が、爪先画素部、下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるのかを、再度、解析して判断する。

なお、色情報とは別に、爪先画素部など下地ではないと判定して欲しい領域の色情報を色情報記憶部５６に記録しておき、下地を判定する際に参照するようにしてもよい。このようにすることで、下地の判定をより精度よく行うことができる。

（実施形態の動作）
続いて、ネイルプリント装置１０を用いてネイルデザインＤを爪１１に形成する方法を図７〜図１０に基づいて説明する。図７はフローチャート１を説明する図、図８はフローチャート２を説明する図、図９はフローチャート３を説明する図、図１０はフローチャート４を説明する図である。図１１は注目画素の領域の一部を抜き出して示す図、図１２は下地描画後の注目画素の領域を説明する図である。

図７に示すように、まず、フローチャート１では、ステップＳＡ１において、ユーザーが、表示部３２に表示される複数のネイルデザインＤの中から印刷したいデザインを選択する。

次に、ステップＳＡ２において、ユーザーが指画像取得ボタン３２ｅを押すことにより、撮影制御部５８が、光源４６ｂを点灯させ、カメラ４６ａで指画像Ｐを撮影し、フローチャート２に進む。

次に、図８に示すように、フローチャート２のステップＳＢ１では、指画像Ｐにおける爪１１の部分の複数の画素のいずれかを注目画素に指定し、ユーザーが検出開始ボタン３２ｆを押すことにより、ステップＳＢ２において、解析部６２が色情報に基づいて注目画素が白飛び画素部であるか否かを判断する。注目画素が白飛び画素部であると判断された場合、ステップＳＢ３で、注目画素が白飛び画素部であるとしてその画素位置を記憶し、ステップＳＢ８に進む。一方、注目画素が白飛び画素部であると判断されない場合、ステップＳＢ４に進む。

ステップＳＢ４では、解析部６２が色情報に基づいて注目画素が爪先画素部に対応しているか否かを判断する。注目画素が爪先画素部であると判断された場合、ステップＳＢ８に進む。一方、注目画素が爪先画素部であると判断されない場合、ステップＳＢ５に進む。

ステップＳＢ５では、解析部６２が色情報に基づいて注目画素が白Ａであるか否かを判断する。注目画素が白Ａであると判断された場合、ステップＳＢ７で、注目画素が白Ａであるとしてその画素位置を記憶し、ステップＳＢ８に進む。一方、注目画素が白Ａであると判断されない場合、ステップＳＢ６で、注目画素が白Ｘであるか否かを順次判断し、白Ｘであると判断された場合、ステップＳＢ７で、注目画素が下地形成画素部であるとしてその画素位置を記憶し、ステップＳＢ８に進む。注目画素が白Ｘであると判断されない場合、ステップＳＢ８に進む。

ステップＳＢ８では、爪１１の全ての画素を注目画像としたか否かを判断する。爪１１の全ての画素を注目画像としたと判断された場合、ステップＳＢ９に進む。一方、爪１１の全ての画素を注目画像としたと判断されない場合、ステップＳＢ１０で、注目画素を爪１１の部分で注目画素の未指定の画素に変更し、ステップＳＢ２に戻る。

ステップＳＢ９では、白飛び画素部の画素があるか否かを判断する。白飛び画素部の画素があると判断された場合、フローチャート３（図９参照）に進む。一方、白飛び画素部の画素があると判断されない場合、ステップＳＢ１１に進む。

ステップＳＢ１１では、解析部６２が、下地形成画素部であると判断された画素の数から、下地形成画素部の面積が所定の閾値面積（例えば、４ｍｍ２）以上である否かを判断する。下地形成画素部の面積が閾値面積以上であると判断された場合、ステップＳＢ１２に進み、下地形成画素部とした注目画素７１（図１１参照）を集めた領域を下地形成領域７２（図１１参照）に設定して「下地有り」と判定し、フローチャート１（図７参照）のステップＳＡ３に戻る。一方、下地形成画素部の面積が閾値面積以上であると判断されない場合、ステップＳＢ１３で「下地無し」と判定し、フローチャート１のステップＳＡ３に戻る。

図７に戻る。フローチャート１のステップＳＡ３では、「下地無し」の判定か否かを判断する。「下地無し」の判定でない場合、すなわち下地がある場合、ステップＳＡ７に進み、ユーザーが印刷ボタン３２ｄを押すと、印刷制御部６３により、下地形成領域７２にネイルデザインＤを印刷ヘッド２５で印刷する。爪１１への印刷が完了すると、一連の処理が終了する。

一方、ステップＳＡ３において、「下地無し」の判定である場合、すなわち下地がない場合、ステップＳＡ４で、描画制御部６１により描画部２１の下地用のペン２２で爪１１に白で下地を描画する。そして、ステップＳＡ５で、撮影制御部５８が光源４６ｂを点灯させてカメラ４６ａで指画像Ｐを撮影し、さらに、ステップＳＡ６で、注目画素とする画素の領域７３（図１２参照）を指定し、フローチャート４に進む。

このステップＳＡ６で指定される、注目画素とする画素の領域７３（図１２参照）は、ペン２２によって実際に下地が形成されている範囲７４（図１２参照）よりもやや広い範囲に設定される。注目画素とする画素の領域７３を、実際に下地が形成されている範囲７４（図１２参照）に対してどの程度広い範囲とするかは、予め制御装置５１に設定されている。後述するフローチャート４では、このようにやや広い範囲に設定される、注目画素とする画素の領域７３（図１２参照）について、解析部６２による注目画素の解析がなされる。

図９に示すように、フローチャート３では、ステップＳＣ１において、撮影制御部５８が、光源４６ｂを別のものに変更してカメラ４６ａで指画像Ｐを撮影する。このステップＳＣ２では、前回、フローチャート２（又は後述するフローチャート４）で白飛び画素部となっていた画素を白飛び画素部にならない状態で撮影するために、前回の撮影するときに使用した光源４６ｂと異なる位置に設けた光源４６ｂを使用する。

次に、ステップＳＣ２で、前回、白飛び画素部とされた注目画素のいずれかと同じ位置の画素を注目画素に指定し、ステップＳＣ３に進む。

ステップＳＣ３では、解析部６２が色情報に基づいて注目画素が爪先画素部であるか否かを判断する。注目画素が爪先画素部であると判断される場合、ステップＳＣ７に進む。注目画素が爪先画素部であると判断されない場合、ステップＳＣ４に進む。

ステップＳＣ４では、解析部６２が色情報に基づいて注目画素が白Ａであるか否かを判断する。注目画素が白Ａと判断された場合、ステップＳＣ６で、注目画素が白Ａであるとしてその画素位置を記憶し、ステップＳＣ７に進む。注目画素が白Ａであると判断されない場合、ステップＳＣ５で、注目画素が白Ｘであるか否かを順次判断し、白Ｘと判断された場合、ステップＳＣ６で、注目画素が下地形成画素部であるとしてその画素位置を記憶し、ステップＳＣ７に進む。注目画素が白Ｘであると判断されない場合、ステップＳＣ７に進む。

ステップＳＣ７では、前回、白飛び画素部とされた全ての画素を注目画像としたか否かを判断する。前回、白飛び画素部とされた全ての画素を注目画像としたと判断されたときは、ステップＳＣ８に進み、全ての画素を注目画像としたと判断されない場合、ステップＳＣ９に進む。

ステップＳＣ９では、注目画素を、前回、白飛び画素部とされた注目画素で、今回、注目画素に未指定の画素に変更し、ステップＳＣ３に戻る。

ステップＳＣ８では、本フローチャート３の開始がフローチャート２である場合は、フローチャート２のＳＢ１１（図８参照）に戻り、本フローチャート３の開始がフローチャート４である場合は、フローチャート４のＳＤ１１（図１０参照）に戻る。

なお、フローチャート３における注目画素の解析では、前回、白飛び画素部であると判定された画素についてのみ行うため、白飛び画素部であるか否かの判断は行わない。

図１０に示すように、フローチャート４では、ステップＳＤ１において、指定された注目画素とする領域の１つの画素を注目画素に指定し、ステップＳＤ２において、解析部６２が色情報に基づいて注目画素が白飛び画素部であるか否かを判断する。注目画素が白飛び画素部であると判断された場合、ステップＳＤ３で、注目画素が白飛び画素部であるとしてその画素位置を記憶し、ステップＳＤ８に進む。一方、注目画素が白飛び画素部であると判断されない場合、ステップＳＤ４に進む。

ステップＳＤ４では、解析部６２が色情報に基づいて注目画素が爪先画素部であるか否かを判断する。注目画素が爪先画素部であると判断される場合、ステップＳＤ８に進む。一方、注目画素が爪先画素部であると判断されない場合、ステップＳＤ５に進む。

ステップＳＤ５では、解析部６２が色情報に基づいて注目画素が白Ａであるか否かを判断する。注目画素が白Ａと判断された場合、ステップＳＤ７で、注目画素が白Ａであるとしてその画素位置を記憶し、ステップＳＤ８に進む。一方、注目画素が白Ａであると判断されない場合、ステップＳＤ８で、注目画素が白Ｘであるか否かを順次判断し、白Ｘと判断された場合、ステップＳＤ７で、注目画素が下地形成画素部であるとしてその画素位置を記憶し、ステップＳＤ８に進む。注目画素が白Ｘであると判断されない場合、ステップＳＤ８に進む。

ステップＳＤ８では、指定された注目画素とする領域の全ての画素を注目画像としたか否かを判断する。爪１１の全ての画素を注目画像としたと判断されない場合、ステップＳＤ９に進み、注目画素を、指定された注目画素とする領域の中で、まだ、注目画素に未指定の画素に変更し、ステップＳＤ２に戻る。

一方、ステップＳＤ８において、爪１１の全ての画素を注目画像としたと判断された場合、ステップＳＤ１０で、白飛び画素部の画素があるか否かを判断する。白飛び画素部の画素があると判断された場合、フローチャート３に戻る。白飛び画素部の画素があると判断されない場合、ステップＳＤ１１で、下地形成画素部とした注目画素７１の領域を下地形成領域７２とし、フローチャート１のステップＳＡ７（図７参照）に進み、ユーザーが印刷ボタン３２ｄを押すと、印刷制御部６３により、下地形成領域７２にネイルデザインＤを印刷ヘッド２５で印刷する。爪１１への印刷が完了すると、一連の処理が終了する。

なお、以上のフローチャート１〜４において、ステップＳＡ２，ＳＡ５，ＳＣ１は、本発明にいう「画像取得ステップ」に相当し、ステップＳＢ１〜ＳＢ１０、ステップＳＣ２〜ＳＣ９及びステップＳＤ１〜ＳＤ１０は、本発明にいう「解析ステップ」に相当する。

また、フローチャート４では、下地を描画した後の処理であり、必ず下地形成画素部である注目画素が存在するため、下地形成画素部の面積が閾値面積以上か否かの判断は行わない。

また、前述したフローチャート１〜４では、下地形成画素部の有無を自動判断して、下地形成画素部の検出及びペン２２による下地形成画素部の描画を必要に応じて行った後、印刷ヘッド２５によるネイルデザインＤの印刷を行う動作を例示した。しかし、予め、爪１１における下地形成画素部の有無をユーザーが把握している場合、例えば、最初に行う下地形成画素部の自動検出を省略しても差し支えない。この場合、下地形成画素部の検出、ペン２２による下地形成領域の描画、印刷ヘッド２５によるネイルデザインＤの印刷の各種動作を必要に応じて選択的に実行可能な複数のモードをネイルプリント装置１０に設定することができる。
また、本実施形態においては、ネイルプリント装置１０が、印刷部２４による描画機能と描画部２１による描画機能とを備え、描画部２１が備える下地用のペン２２によって爪１１に下地を描画する構成としたが、本発明はこの構成に限るものではない。例えば、ネイルプリント装置１０が描画部２１を備えず、爪１１への下地の描画をユーザーが手動で行うものであってもよい。この場合、最初に行う下地形成画素部の自動検出を省略してもよい。また、ペン２２による下地形成領域の描画も省略される。

（実施形態の効果）
以上、説明した実施形態によれば、解析部６２により、爪１１の部分の注目画素の状態を注目画素の輝度値及び色相に基づいて解析し、下地形成領域７２を検出することができる。したがって、下地形成領域７２を検出する際の誤検出をなくし、下地形成領域７２を正確に検出可能なネイルプリント装置１０、ネイルプリント装置の動作制御方法及びネイルプリント装置の動作制御プログラムを提供することができる。

以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
＜請求項１＞
照明用の光を照射する、互いに異なる位置に設けられた複数の光源と、
前記複数の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得部と、
前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析部と、
を備え、
前記解析部は、前記複数の画素における、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素を白飛び画素部とし、前記爪先部に対応した画素を爪先画素部とし、下地用のインクが塗布されている前記爪の領域に対応した画素を下地形成画素部として、前記各画素の輝度値及び色相に基づいて、前記各画素が、前記白飛び画素部、前記爪先画素部、前記下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるのかを判断することを特徴とするネイルプリント装置。
＜請求項２＞
前記解析部は、前記複数の光源のうちの第１の光源から前記爪に前記照明用の光を照射している状態で前記画像取得部により取得された第１の画像の前記複数の画素における第１の画素が前記白飛び部であると判断したとき、更に、前記複数の光源のうちの前記第１の光源と異なる位置に設けられた第２の光源から前記爪に前記照明用の光を照射している状態で前記画像取得部により取得された第２の画像の前記複数の画素における、前記第１の画像における前記第１の画素と同じ位置にある第２の画素について、前記爪先画素部、前記下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるかの判断を行うことを特徴とする請求項１に記載のネイルプリント装置。
＜請求項３＞
前記白飛び画素部とする前記輝度値の範囲及び前記色相の値と、前記爪先画素部とする前記輝度値の範囲及び前記色相の値と、前記下地形成画素部とする前記輝度値の範囲及び前記色相の値と、を判定値として記憶した記憶部を備え、
前記解析は、前記各画素の前記輝度値及び前記色相と前記判定値との比較に基づいて前記判断を行うことを特徴とする請求項１又は２に記載のネイルプリント装置。
＜請求項４＞
前記解析部は、前記下地形成画素部であると判断される特定の画素がある領域の面積が、予め設定された閾値面積以上であるときに、前記特定の画素は前記下地形成画素部であると判断し、前記面積が前記閾値面積未満であるときには前記特定の画素は前記下地形成画素部ではないと判断することを特徴とする請求項１から請求項３のいずれか１項に記載のネイルプリント装置。
＜請求項５＞
前記爪に印刷を行うことができる印刷部を備え、
前記爪の、前記解析部により前記下地形成画素部であると判断された前記画素に対応する領域に、前記印刷部によりネイルデザインの印刷を行うことを特徴とする請求項１乃至４のいずれかに記載のネイルプリント装置。
＜請求項６＞
前記下地用のインクを前記爪に塗布することができる描画用具を有する描画部と、
前記爪に前記印刷を行うことができる印刷部と、を備え、
前記爪に前記描画部の前記描画用具により前記下地用のインクが塗布された後に、前記爪の前記解析部により前記下地形成画素部であると判断された画素に対応する領域に、前記印刷部によりネイルデザインの印刷を行うことを特徴とする請求項１乃至４のいずれかに記載のネイルプリント装置。
＜請求項７＞
照明用の光を照射する、互いに異なる位置に設けられた複数の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得ステップと、
前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析ステップと、
を含み、
前記解析ステップにおいて、前記複数の画素における、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素を白飛び画素部とし、前記爪先部に対応した画素を爪先画素部とし、下地用のインクが塗布されている前記爪の領域に対応した画素を下地形成画素部として、前記各画素の輝度値及び色相に基づいて、前記各画素が、前記白飛び画素部、前記爪先画素部、前記下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるのかを判断することを特徴とするネイルプリント装置の動作制御方法。
＜請求項８＞
コンピュータに、
照明用の光を照射する、互いに異なる位置に設けられた複数の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む前記指を撮影させて、前記爪を含む、複数の画素を有する画像を取得させ、
前記画像の前記爪の部分の前記複数の画素の各々の状態を解析させ、
前記解析において、前記複数の画素における、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素を白飛び画素部とし、前記爪先部に対応した画素を爪先画素部とし、下地用のインクが塗布されている前記爪の領域に対応した画素を下地形成画素部として、前記各画素の輝度値及び色相に基づいて、前記各画素が、前記白飛び画素部、前記爪先画素部、前記下地形成画素部、及び、これらのいずれにも該当しない画素部、のいずれであるのかを判断させることを特徴とするネイルプリント装置用の動作制御プログラム。

１０ ネイルプリント装置
１１ 爪
１２ 描画指
２１ 描画部
２４ 印刷部
３１ 操作部
３２ 表示部
４６ 撮影部
４６ａ カメラ
４６ｂ 光源
５１ 制御装置
５２ 制御部
５３ 記憶部
５６ 色情報記憶部
６２ 解析部
Ｄ ネイルデザイン
Ｐ 指画像

Claims (6)

1. 照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源と、
   前記第１の光源及び前記第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得部と、
   前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析部と、
   を備え、
   前記解析部は、前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断することを特徴とするネイルプリント装置。
2. 前記白飛び画素部とする輝度値の範囲及び色相の値と、前記下地形成画素部とする輝度値の範囲及び色相の値と、を判定値として記憶した記憶部を備え、
   前記解析は、前記各画素の前記輝度値及び前記色相と前記判定値との比較に基づいて前記判断を行うことを特徴とする請求項１に記載のネイルプリント装置。
3. 前記爪に印刷を行うことができる印刷部を備え、
   前記爪の、前記解析部により前記下地形成画素部であると判断された前記画素に対応する領域に、前記印刷部によりネイルデザインの印刷を行うことを特徴とする請求項１又は２に記載のネイルプリント装置。
4. 前記下地用のインクを前記爪に塗布することができる描画用具を有する描画部と、
   前記爪に前記印刷を行うことができる印刷部と、を備え、
   前記爪に前記描画部の前記描画用具により前記下地用のインクが塗布された後に、前記爪の前記解析部により前記下地形成画素部であると判断された画素に対応する領域に、前記印刷部によりネイルデザインの印刷を行うことを特徴とする請求項１又は２に記載のネイルプリント装置。
5. 照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む指を撮影した、前記爪を含む、複数の画素を有する画像を取得する画像取得ステップと、
   前記画像の前記爪の部分の前記複数の画素の各々の状態を解析する解析ステップと、
   を含み、
   前記解析ステップにおいて、前記画像取得ステップにより前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断することを特徴とするネイルプリント装置の動作制御方法。
6. コンピュータに、
   照明用の光を照射する、互いに異なる位置に設けられた第１の光源及び第２の光源のいずれかから、爪先部と非爪先部とを有する爪を含む指に前記照明用の光を照射している状態で、前記爪を含む前記指を撮影させて、前記爪を含む、複数の画素を有する画像を取得させ、
   前記画像の前記爪の部分の前記複数の画素の各々の状態を解析させ、
   前記解析において、前記第１の光源から前記照明用の光を照射している状態で取得された第１の画像の前記複数の画素の中に、前記爪の表面で前記照明用の光が反射して光っている前記爪の領域に対応した画素である白飛び画素部とみなす画素があると判断した場合、前記第２の光源から前記照明用の光を照射している状態で取得された第２の画像の複数の画素のうち、前記爪先部に対応した爪先画素部を除く前記白飛び画素部の画素の位置と同じ位置の画素が、下地用のインクが塗布されている前記爪の領域に対応した画素である下地形成画素部であるか否かを判断させることを特徴とするネイルプリント装置用の動作制御プログラム。