JP2023169706A - プログラム、情報処理装置、ネイルプリント装置、および制御方法 - Google Patents

Abstract

【課題】爪への画像の印刷が正常に行われないこと。【解決手段】プログラムは、被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置を、前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得手段と、前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御手段と、として機能させることを特徴とするプログラム。【選択図】図７

Description

本開示は、ネイルアートを爪に印刷するための技術に関する。

近年、プリンタを使用して爪にネイルアートを印刷する方法が提案されている。以下、爪にネイルアートを印刷するためのプリンタをネイルプリント装置と称する。

特許文献１には、爪に画像が印刷される被印刷者の指を置くホルダーを有する装置が記載されている。

国際公開第０１/０９１５９８号

被印刷者の爪に画像が印刷されるまでにホルダー上の被印刷者の爪の位置が動いてしまうと、被印刷者の爪への画像の印刷が失敗してしまう虞がある。

本開示の技術は、爪への画像の印刷が正常に行われないことを抑制することを目的とする。

本開示のプログラムは、被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置を、前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得手段と、前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御手段と、として機能させることを特徴とする。

本開示によれば、爪への画像の印刷が正常に行われないことを抑制することができる。

システム構成を示す概略図である。 プリンタの内部構成を示す上面図である。 ネイルアートの選択画面を示すＵＩ画面を説明する図である。 ネイル画像データ設定画面を示すＵＩ画面を説明する図である。 印刷データ作成画面を示すＵＩ画面を説明する図である。 印刷領域を設定する例を説明する図である。 爪領域位置ガイドの一例を示す図である。 情報処理装置の機能ブロックの一例を示す図である。 処理の一例を示すシーケンス図である。 プリンタの内部構成を示す正面図である。 爪領域の位置ずれ検出処理を示すフローチャートである。 爪領域位置ガイドからのズレの通知方法の一例を説明するための図である。

以下、本開示の技術の実施形態を詳細に説明する。なお、以下の実施形態は、本開示の技術を説明するための例示であり、本開示の技術を以下の実施形態のみに限定する趣旨ではない。また、本開示の技術は、その要旨を逸脱しない限り、様々な変形が可能である。

＜＜実施形態１＞＞
＜システムの構成＞
本実施形態は、情報処理装置とプリンタとを含むシステムによって構成される形態である。本実施形態では、情報処理装置としてタブレット端末を例に挙げて説明する。なお、情報処理装置は、タブレット端末に限定されるものではない。情報処理装置として、携帯端末、ノートＰＣ、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、またはデジタルカメラなど、種々のものを適用可能である。また、本実施形態では、プリンタとして、例えば、インクジェットプリンタ、３Ｄプリンタなどを適用することができる。その他、本実施形態のプリンタは、複写機能、ＦＡＸ機能、および印刷機能などの複数の機能を備える複合機であってもよい。本実施形態のプリンタは、人の手の爪に直接描画する機能を持つものである。

図１は、本実施形態の情報処理装置１０１およびプリンタ１５１を含むシステムを説明する図である。図１（ａ）には、情報処理装置１０１およびプリンタ１５１のブロック図が示されている。図１（ｂ）には、プリンタ１５１の外観の模式図が示されている。以下、図１を用いて情報処理装置１０１およびプリンタ１５１の制御に係る構成を説明する。

＜情報処理装置＞
図１（ａ）に示すように、情報処理装置１０１は、入力インターフェース１０２、ＣＰＵ１０３、ＲＯＭ１０４、ＲＡＭ１０５、外部記憶装置１０６、出力インターフェース１０７、通信部１０９、及びＧＰＵ１１０を有する。これらはシステムバスを介して互いに接続されている。

入力インターフェース１０２は、物理キーボード、ボタン、およびタッチパネルなどの操作部（不図示）を介して、ユーザからのデータ入力および操作指示を受け付けるためのインターフェースである。なお、本実施形態では、後述の表示部１０８に操作部の少なくとも一部が含まれるものとして説明する。例えば、ユーザの少なくとも一部の操作は、表示部１０８に表示されている画面を介して受け付けられるように構成されているものとして説明する。

ＣＰＵ１０３は、システム制御部であり、プログラムの実行およびハードウェアの起動等の情報処理装置１０１の全体を制御する。ＲＯＭ１０４は、ＣＰＵ１０３が実行する制御プログラム、データテーブル、組み込みオペレーティングシステム（以下、ＯＳという。）、およびプログラムなどのデータを格納する。本実施形態では、ＲＯＭ１０４に格納されている各制御プログラムは、ＲＯＭ１０４に格納されている組み込みＯＳの管理下で、例えば、スケジューリング、タスクスイッチ、および割り込み処理などのソフトウエア実行制御を行う。

ＲＡＭ１０５は、ＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）またはＤＲＡＭ（Ｄｉｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などで構成される。なお、ＲＡＭ１０５は、図示しないデータバックアップ用の１次電池によってデータが保持されていてもよい。その場合、ＲＡＭ１０５は、プログラム制御変数などのデータを揮発させずに格納することができる。また、ＲＡＭ１０５には、情報処理装置１０１の設定情報および情報処理装置１０１の管理データなどを格納するメモリエリアも設けられている。また、ＲＡＭ１０５は、ＣＰＵ１０３の主メモリおよびワークメモリとしても用いられる。

外部記憶装置１０６は、印刷実行機能を提供するアプリケーション、および、プリンタ１５１が解釈可能な印刷情報を生成する印刷情報生成プログラムなどを保存している。また、外部記憶装置１０６は、通信部１０９を介して接続しているプリンタ１５１との間で情報を送受信する情報送受信制御プログラムなどの各種プログラム、および、これらのプログラムが使用する各種情報を保存している。

出力インターフェース１０７は、表示部１０８によるデータの表示および情報処理装置１０１の状態の通知などの制御を行うインターフェースである。

表示部１０８は、ＬＥＤ（発光ダイオード）またはＬＣＤ（液晶ディスプレイ）などから構成され、データの表示および情報処理装置１０１の状態の通知などを行う。なお、表示部１０８上に、数値入力キー、モード設定キー、決定キー、取り消しキー、電源キーなどのキーを備えるソフトキーボードを設置することで、表示部１０８を介してユーザからの入力を受け付けてもよい。また、表示部１０８は、前述のように、タッチパネルディスプレイとして構成されていてもよい。表示部１０８は、出力インターフェース１０７を通じてシステムバスと接続されている。

通信部１０９は、プリンタ１５１などの外部装置と接続して、データ通信を実行するように構成されている。通信部１０９は、例えば、プリンタ１５１内のアクセスポイント（不図示）に接続可能である。通信部１０９とプリンタ内のアクセスポイント（不図示）とが接続することで、情報処理装置１０１およびプリンタ１５１は、相互に無線通信が可能となる。なお、通信部１０９は、無線通信でプリンタ１５１とダイレクトに通信してもよいし、外部のアクセスポイント（アクセスポイント１３１）を介して通信してもよい。無線通信方式としては、例えば、Ｗｉ－Ｆｉ（ＷｉｒｅｌｅｓｓＦｉｄｅｌｉｔｙ）（登録商標）、およびＢｌｕｅｔｏｏｔｈ（登録商標）などが挙げられる。また、外部のアクセスポイント１３１としては、例えば、無線ＬＡＮルーターなどの機器などが挙げられる。本実施形態において、情報処理装置１０１とプリンタ１５１とが外部のアクセスポイント１３１を介さずにダイレクトに接続する方式をダイレクト接続方式という。また、情報処理装置１０１とプリンタ１５１とが外部のアクセスポイント１３１を介して接続する方式をインフラストラクチャー接続方式という。なお、情報処理装置１０１とプリンタ１５１とは、ＵＳＢケーブルなどの有線で接続される形態でもよい。

ＧＰＵ１１０は、データをより多く並列処理して効率的な演算を行うことができる。このため、ディープラーニングのような学習モデルを処理する場合にはＧＰＵ１１０で処理を行うことが有効である。そこで本実施形態では、学習モデルを使用する処理に関してＣＰＵ１０３に加えてＧＰＵ１１０を用いる。具体的には、学習モデルを含む学習プログラムを実行する場合に、ＣＰＵ１０３およびＧＰＵ１１０が協働して演算を行うことで学習モデルを処理する。なお、学習モデルを使用する処理はＣＰＵ１０３またはＧＰＵ１１０のみにより演算が行われてもよい。

本実施形態では、情報処理装置１０１は、ＲＯＭ１０４または外部記憶装置１０６などに所定のアプリケーションを格納しているものとする。所定のアプリケーションとは、例えば、ユーザからの操作に応じて、ネイルアートデータを印刷させるための印刷ジョブを、プリンタ１５１に送信するためのアプリケーションプログラムである。このような機能を有するアプリケーションを、以後ネイルアプリという。なお、ネイルアプリは、印刷機能以外に、他の機能を備えていてもよい。例えば、本実施形態におけるネイルアプリは、プリンタ１５１と通信して、プリンタ１５１の撮影部１５７のカメラを起動する機能を備えていてもよい。すなわち、ネイルアプリは、印刷ジョブ以外に、カメラ起動ジョブをプリンタ１５１に送信する機能等を有していてもよい。また、ＲＯＭ１０４または外部記憶装置１０６などに格納されている所定のアプリケーションは、ネイルアプリに限定されず、印刷以外の機能を備えているアプリケーションプログラムであってもよい。

＜プリンタ＞
プリンタ１５１は、ＲＯＭ１５２、ＲＡＭ１５３、ＣＰＵ１５４、プリントエンジン１５５、通信部１５６、および撮影部１５７を有する。これらは、システムバスを介して互いに接続されている。図１（ｂ）は、プリンタ１５１の外観を示す概略図である。図１（ｂ）に示すように、プリンタ１５１には、印刷対象を挿入するための空間である印刷対象挿入部１５８が設けられている。図１（ｂ）では、印刷対象挿入部１５８に、ユーザ（被印刷者）が自身の手を入れている様子を示している。このように、本実施形態において、印刷対象挿入部１５８には、人間の手が挿入されることを想定している。また、本実施形態において印刷対象は、爪である。印刷対象挿入部１５８には指を載せるための４本の指置台（レール）が搭載されており、１～４本の指を挿入することができる。

図２は、本実施形態におけるプリンタ１５１の筐体内の上面を模式的に示した図である。プリンタ１５１は、プリントヘッド２３０をＹ軸に沿う方向である前後方向に移動させる為のＹ方向レールガイド２１１、２１２を有する。また、プリントヘッド２３０をＸ軸に沿う方向である左右方向に移動させる為のＸ方向レールガイド２２０を有する。

プリントヘッド２３０の下方（－Ｚ方向）には、ヒーターボード２３１が装着されている。ヒーターボード２３１上には、以下のインク吐出用ノズルが配置されている。
・シアンインク吐出用ノズル２３２
・マゼンタインク吐出用ノズル２３３
・イエローインク吐出用ノズル２３４

本実施形態のプリントヘッド２３０が移動可能な移動方向は、左右方向だけでなく前後方向も含まれる。例えば、走査方向を左右方向とした場合、プリントヘッド２３０が左右方向に移動しながら各色のインク吐出用ノズル２３２～２３４からインクを吐出して１回分の記録走査を行う。次にプリントヘッド２３０が前後方向に移動してから次の記録走査を行うことで爪に画像を印刷することができる。このため本実施形態では、印刷対象の爪の位置は、爪の領域が検出されてから爪への画像の印刷終了まで固定されていることが望ましい。

Ｘ方向レールガイド２２０の一端にはレーザセンサ発光部２２１が設けられており、Ｘ方向レールガイド２２０の他端にはレーザセンサ受光部２２２が備えつけられている。このため、レーザセンサ発光部２２１およびレーザセンサ受光部２２２は、プリントヘッド２３０の前後方向への移動に同期して、前後方向に移動するように構成されている。またレーザセンサ発光部２２１およびレーザセンサ受光部２２２は、インク吐出用ノズル２３２～２３４から下方向に離れた位置に備えられている。レーザセンサ発光部２２１はＸ方向のレーザセンサ受光部２２２に向けてレーザを発光する。レーザセンサ発光部２２１およびレーザセンサ受光部２２２をまとめてレーザセンサ２０６とよぶことがある。レーザセンサ２０６はレール２５１～２５４の高さ調整に用いられる。高さ調整については後述する。

プリンタ１５１の天井部の内側には、指を撮影する為のカメラである撮影部１５７が設置されている。撮影部１５７の下部側にはレンズ２４１が配置されている。

プリンタ１５１の床側には、手のひらを置くための手置台２５０、および指位置を固定する為の４本のレール２５１～２５４が配置されている。プリンタ１５１は、レール２５１～２５４のＺ軸方向の位置（高さ）を、それぞれ独立して調整する制御を行うことが可能である。即ち、レール２５１～２５４は、爪に印刷を行っているプリントヘッド２３０に対向する方向にそれぞれ独立して移動可能に構成されている。

図２では、被印刷者の手の甲２６０と指２６１～２６４とを模式的に示している。レール２５１～２５４には被印刷者の指が前後方向に延在するように置かれる。図２の例では、被印刷者の手は、右手とする。右手の甲２６０は、手置台２５０上に置かれる。右手の人差し指２６１がレール２５１に、中指２６２がレール２５２に、薬指２６３がレール２５３に、および小指２６４がレール２５４に、それぞれ置かれるものとする。

４本のレール２５１～２５４は各々独立しており、各レールが昇降することで印刷に最適な高さに爪の高さを調整することが可能である。この昇降動作はネイルアプリからの指示で実行され、ネイルアプリから受け取ったレール番号に基づいて対象のレールの昇降動作が行われる。なお、本実施形態では手の爪を印刷対象とする例を示すが、手に限らず足の爪を印刷対象としてもよい。

図１（ａ）に戻ってプリンタ１５１の制御構成の説明を続ける。ＲＯＭ１５２は、ＣＰＵ１５４が実行する制御プログラム、データテーブル、およびＯＳプログラムなどのデータを格納する。本実施形態では、ＲＯＭ１５２に格納されている各制御プログラムは、ＲＯＭ１５２に格納されている組み込みＯＳの管理下で、スケジューリング、タスクスイッチ、および割り込み処理などのソフトウエア実行制御を行う。

ＲＡＭ１５３は、ＳＲＡＭまたはＤＲＡＭなどで構成される。なお、ＲＡＭ１５３は、図示しないデータバックアップ用の１次電池によってデータが保持されていてもよい。この場合、ＲＡＭ１５３には、プログラム制御変数などデータを揮発させずに格納することができる。また、プリンタ１５１の設定情報およびプリンタ１５１の管理データなどを格納するメモリエリアもＲＡＭ１５３に設けられている。また、ＲＡＭ１５３は、ＣＰＵ１５４の主メモリおよびワークメモリとしても用いられ、情報処理装置１０１から受信した印刷情報および各種情報などを一旦保存することができる。

ＣＰＵ１５４は、システム制御部であり、プログラムの実行およびハードウェアの起動により、プリンタ１５１の全体を制御する。プリントエンジン１５５は、プリントヘッド２３０にインクなどの記録剤を印刷領域に付与させることで、印刷対象挿入部１５８に挿入されている爪に画像を形成させる。ＲＡＭ１５３に保存された情報または情報処理装置１０１から受信した印刷ジョブに基づき印刷が実行される。

通信部１５６は、プリンタ１５１内部のアクセスポイントとして、情報処理装置１０１などの外部装置と接続するためのアクセスポイントを有している。このアクセスポイントは、情報処理装置１０１の通信部１０９に接続可能である。通信部１５６は、無線通信で情報処理装置１０１とダイレクトに通信してもよいし、外部のアクセスポイント１３１を介して通信してもよい。また、通信部１５６は、アクセスポイントとして機能するハードウェアを備えていてもよいし、アクセスポイントとして機能させるためのソフトウエアにより、アクセスポイントとして動作してもよい。

撮影部１５７は、撮影機能を有するデバイスである。撮影部１５７は、印刷対象挿入部１５８に挿入される印刷対象（爪）を含む所定の領域を撮影し、撮影して得られた撮影画像（静止画または動画）をリアルタイムに情報処理装置１０１に送る機能を有する。撮影部１５７内の撮影機能を有するデバイスは、少なくともレンズ２４１およびイメージセンサー（不図示）により構成されるカメラモジュールである。レンズ２４１は、印刷対象挿入部１５８に挿入される印刷対象を写してイメージセンサー上に結像する。イメージセンサー（不図示）は、レンズ２４１が写した光をＣＰＵ１５４が処理できる電気信号に変換する。このような機能を有していれば、撮影機能を有するデバイスとしてスマートフォン、携帯端末、またはデジタルカメラなどが代用して用いられてもよい。

なお、プリンタ１５１には、外付けＨＤＤまたはＳＤカードなどのメモリが装着されてもよく、プリンタ１５１に保存される情報は、当該メモリに保存されてもよい。また、図１に示す構成は、一例に過ぎず、情報処理装置１０１およびプリンタ１５１には、これ以外の構成も含み得るが、ここでの説明は省略する。

＜用語の定義＞
次に、本実施形態で使用する用語を説明する。本実施形態は、主に爪にネイルアートを印刷する形態である。また、本実施形態は、片方の手の各爪にネイルアートを施す（印刷する）形態である。一般的に、各爪に施されるネイルアートは、同一のコンセプトであるが、個々の爪に施されるネイルアートは、完全に同一のネイルアートではない場合がある。例えば、デザインＡのネイルアートセットには、１０個のネイルアート（１０本の各爪に対応するネイルアート）が含まれており、その１０個のネイルアートは、相互に共通のデザインコンセプトのものであるが、完全に同一の模様などになっていないことがある。以上の点を踏まえて、本実施形態では、以下のように用語を扱うものとする。
・「ネイル画像データ」：１つの爪に施されるネイルアートの画像データのことである。
・「ネイルアートデータ」：複数のネイル画像データの集合体の画像データである。つまり、ネイルアートデータは、複数のネイル画像データのデータセットともいえる。典型的には、右手、左手合わせて１０本の爪のネイルアートに対応する各ネイル画像データの画像を集約した画像データである。ネイルアートデータは、１０本の各ネイル画像データが集まったデータ（つまり、１０個の画像データのセット）でもよいし、１０本の各ネイル画像データを合成して１つの画像とした画像データでもよい。

このように、本実施形態では、「ネイル画像データ」と称する場合、個別の爪のネイルアートの画像のデータを指し、ネイルアートデータと称する場合、１０本分のネイルアートの画像のセットのデータのことを指すものとする。

＜ネイルアートの印刷の概要＞
本実施形態では、情報処理装置１０１のＣＰＵ１０３が、ＲＯＭ１０４または外部記憶装置１０６に記憶されているネイルアプリのプログラムを実行することで、ネイルアプリを起動する。そして、ネイルアプリを用いることで、ユーザは、自身が選択したネイルアートデータのネイル画像データを印刷領域に反映して、爪にネイルアートを印刷することができる。つまり、以下の一例の動作がネイルアプリを用いて行われる。

（１）ユーザが、ネイルアプリ上でネイル画像データのセット（すなわち、ネイルアートデータ）を選択する。（２）ネイルアプリが、プリンタ１５１の内部にある撮影部１５７を起動する。（３）ネイルアプリは、プリンタ１５１から送信されたカメラ画像を表示する。（４）ユーザが、プリンタ１５１に手を挿入する。（５）ネイルアプリがカメラ画像から爪の領域を検出し、ネイルアートを印刷する印刷領域を設定する。（６）ネイルアプリは、設定した印刷領域に、ネイルアートデータに含まれるネイル画像データを反映させる。（７）ネイルアプリは、設定した印刷領域を調整する場合は、印刷領域を編集する。

（８）ネイルアプリは、検出した爪の領域に基づき爪領域位置ガイドを表示する。本実施形態でのプリンタ１５１のプリントヘッド２３０は、前後方向および左右方向に移動して、設定された印刷領域にネイル画像を印刷する。このため、設定された印刷領域の位置から爪が動いてしまうと、爪へのネイル画像の印刷が失敗してしまう虞がある。そこで本実施形態では、この工程（８）において、位置ずれを抑制するために爪領域位置ガイドを表示する。さらに、本実施形態では、位置ずれを検出した際にユーザに通知する。

（９）ネイルアプリは、反映された画像データを用いてプリンタ１５１に印刷を実行させる。なお、プリンタ１５１に手を入れるユーザ（被印刷者）と、ネイルアプリを操作するユーザは、同一のユーザであってもよいし、異なるユーザであってもよい。

＜ネイルアプリのユーザインターフェース＞
理解を容易にするために、ネイルアプリで表示されるユーザインターフェース（以下、ＵＩという）画面を先に説明することにする。以下で説明するＵＩ画面は、ネイルアプリを実行するＣＰＵ１０３によって、表示部１０８に表示されるものである。また、入力インターフェース１０２は、表示部１０８と一体となった操作部として機能するものとして説明する。本実施形態におけるネイルアプリのＵＩ画面は、大きく３種類存在する。第一ＵＩ画面は、図３に示すネイルアートデータの選択画面である。第二ＵＩ画面は、図４に示すネイル画像データ設定画面である。第三ＵＩ画面は、図５に示す印刷データ作成画面である。以下、各画面を用いてネイルアプリのＵＩ画面を説明する。

図３は、ネイルアートデータの選択画面３０１を示すＵＩ画面（第一ＵＩ画面）を説明する図である。図３に示すネイルアートデータの選択画面３０１は、ネイルアートデータ表示領域３０２と、ネイルアートデータ決定ボタン３０４とを有する。

ネイルアートデータ表示領域３０２には、各爪に印刷するネイルアートの各デザインコンセプトに対応したネイルアートデータが複数表示される。具体的には、図３の画面上では、ネイルアートデータ３０３が４つ分表示されている。１つのネイルアートデータ３０３には、親指、人差し指、中指、薬指、小指のそれぞれの左手および右手の爪に対応する１０種類のネイル画像データが含まれている。ユーザは、１つもしくは複数のネイルアートデータ３０３を選択できる。ユーザは、選択したネイルアートデータ３０３を解除することもできる。ユーザがネイルアートデータ３０３を選択または解除する方法の一例として、ユーザがネイルアートデータ３０３を１回タップすることでネイルアートデータ３０３を選択することができる。また、選択済みのネイルアートデータ３０３をユーザがもう一度タップすると、選択状態を解除することができる。

ネイルアートデータ決定ボタン３０４は、ユーザがネイルアートデータ表示領域３０２から１つもしくは複数のネイルアートデータ３０３を選択した後に押下することで、図４に示すネイル画像データ設定画面４０１に遷移させる機能を有する。

なお、本実施形態では、各種のボタンを操作する際には「押下」と称し、各領域を操作するときは、タッチパネルの操作であるとして、「タップ」、「タッチ」、「ピンチイン」、「ピンチアウト」などと説明するが、これらは例示に過ぎない。例えば、タッチパネル上の各種のボタンをタッチすることで各種のボタンの押下動作が実現されてもよい。また、各領域の操作は、例えばマウスなどを用いたカーソル操作によって各領域の操作が行われてもよい。また、入力インターフェース１０２が各種の方向指示ボタンを備えており、その方向指示ボタンによって各領域の操作が行われてもよい。

図４は、ネイル画像データ設定画面４０１を示すＵＩ画面（第二ＵＩ画面）を説明する図である。図４に示すネイル画像データ設定画面４０１は、ネイルアートデータ表示領域４０２と、左手プレビュー領域４０３と、右手プレビュー領域４０４と、選択モード切り替えボタン４０５と、選択解除ボタン４０６と、設定完了ボタン４０７を有している。

ネイルアートデータ表示領域４０２は、ユーザがネイルアートデータの選択画面３０１で選択したネイルアートデータを表示する領域である。

左手プレビュー領域４０３および右手プレビュー領域４０４は、親指から小指まで計５つの爪設定領域４０８をそれぞれ保持している。ユーザがネイルアートデータ表示領域４０２からネイルアートデータもしくはネイル画像データを選択することで、左手プレビュー領域４０３および右手プレビュー領域４０４の爪設定領域４０８にネイル画像データが反映するように設定される。

選択モード切り替えボタン４０５は、左手プレビュー領域４０３および右手プレビュー領域４０４が保持する爪設定領域４０８に反映させるネイルアートデータまたはネイル画像データを選択する方法を切り替えるボタンである。一括選択モードがＯＮになっている場合、ユーザがネイルアートデータ表示領域４０２から選択したネイルアートデータを、左手プレビュー領域４０３および右手プレビュー領域４０４が保持する爪設定領域４０８に一括で反映させることができる。一括選択モードがＯＦＦになっている場合、ユーザがネイルアートデータ表示領域４０２から選択したネイル画像データを、左手プレビュー領域４０３または右手プレビュー領域４０４が保持する爪設定領域４０８のいずれかに反映させることができる。

選択解除ボタン４０６は、既に左手プレビュー領域４０３および右手プレビュー領域４０４が保持する爪設定領域４０８に１つでもネイル画像データを反映させている場合に選択できるボタンである。選択解除ボタン４０６が押下されると、反映されているすべてのネイル画像データが解除される。

設定完了ボタン４０７は、左手プレビュー領域４０３および右手プレビュー領域４０４が保持する爪設定領域４０８に、ユーザが１つでもネイル画像データを反映させている場合に選択できるボタンである。設定完了ボタン４０７が押下されると、図５に示す印刷データ作成画面５０１に遷移する。

図５は、印刷データ作成画面５０１を示すＵＩ画面（第三ＵＩ画面）を説明する図である。図５に示す印刷データ作成画面５０１は、設定データ表示領域５０２と、印刷対象表示領域５０３と、プリンタ検索ボタン５０４と、プリンタ名表示領域５０５とを有している。また、撮影ボタン５０６と、プレビュー領域５０７と、印刷領域設定ボタン５０８と、印刷ボタン５１０とを有している。プレビュー領域５０７には、後述する印刷領域５０９が含まれる。

設定データ表示領域５０２は、図４に示すネイル画像データ設定画面４０１で設定したネイル画像データを、左手のデータおよび右手のデータのように、と最大４つに分けて表示する領域である。設定データの分け方として、例えば、左手の人差し指、中指、薬指、小指の４本で１つ、左手の親指で１つ、右手の人差し指、中指、薬指、小指の４本で１つ、右手の親指で１つ、の組み合わせで表示する。図５の設定データ表示領域５０２では、左手および右手のすべての爪にネイル画像データが設定されている場合の表示を示している。即ち、設定データ表示領域５０２ａには、設定されている左手の人差し指、中指、薬指、および小指のネイル画像データが示されている。設定データ表示領域５０２ｂには、設定されている左手の親指のネイル画像データが示されている。同様に、設定データ表示領域５０２ｃには、設定されている右手の人差し指、中指、薬指、および小指のネイル画像データが、設定データ表示領域５０２ｄには、設定されている右手の親指のネイル画像データが、それぞれ示されている。尚、１つの設定データ表示領域には、４つのネイル画像データをいれるスロットが設けられている。設定データ表示領域のそれぞれに設定されたネイル画像データのそれぞれを総称して設定データともいう。

印刷対象表示領域５０３は、設定データ表示領域５０２ａ～ｄが、どの爪の設定データ表示領域であるかを示す最大４つのアイコン群で構成される。印刷対象表示領域５０３は、設定データ表示領域５０２と同様に、左手の人差し指、中指、薬指、および小指の４本で１つ、左手の親指で１つ、右手の人差し指、中指、薬指、および小指の４本で１つ、右手の親指で１つの組み合わせで表示されている。図５の印刷対象表示領域５０３では、左手および右手のすべての爪にネイル画像データが設定されている場合の表示を示している。即ち、印刷対象表示領域５０３ａには、左手の人差し指、中指、薬指、および小指を印刷対象として表示している。同様に、印刷対象表示領域５０３ｂには、左手の親指を、印刷対象表示領域５０３ｃには、右手の人差し指、中指、薬指、および小指を、印刷対象表示領域５０３ｄには、右手の親指を、印刷対象としてそれぞれ表示している。

プリンタ検索ボタン５０４は、ユーザによって押下されると、ネイルアプリと通信可能なプリンタ１５１を検索する機能を実施するためのボタンである。検索の結果、プリンタ１５１が発見された場合、ネイルアプリは、発見したプリンタ１５１を特定する情報を表示する。発見したプリンタ１５１を特定する情報はリスト表示され、ユーザはリストから任意のプリンタ１５１を１つ選択することができ、選択されたプリンタ１５１の名前は、プリンタ名表示領域５０５に表示される。なお、プリンタのリストは、プリンタ検索ボタン５０４を押下した場合以外の場合でも表示されてもよい。例えば、プリンタ１５１が未登録の状態で印刷データ作成画面５０１に遷移した場合、ネイルアプリが自動でプリンタ１５１を検索し、プリンタのリストを表示してもよい。

撮影ボタン５０６がユーザによって押下されることで、ネイルアプリは、プリンタ名表示領域５０５に表示されたプリンタ１５１と通信し、プリンタ１５１の撮影部１５７によって撮影された動画をリアルタイムで受け取る。プレビュー領域５０７には、撮影部１５７によって撮影されたリアルタイムの動画が表示される。本実施形態では、印刷対象挿入部１５８に人間の手を入れることを想定している。このため、例えば、被印刷者であるユーザが片方の手を入れて、他方の手で、撮影ボタン５０６を押下することで、爪を含む被印刷者の手先の画像がプレビュー領域５０７にリアルタイムで表示される。プレビュー領域５０７に動画を表示するのは撮影ボタン５０６を押下したときだけでなく、プリンタ１５１が既に登録されている状態で印刷データ作成画面５０１に遷移したときでもよい。この場合、ネイルアプリは印刷データ作成画面５０１遷移時にプリンタ１５１と通信し、プリンタ１５１と通信可能である場合に、プリンタ１５１の撮影部１５７で撮影された動画を受け取ることができる。

なお、この使い方は一例であり、例えば、ネイルサロンの利用客が片方の手を入れて、ネイルサロンの従業員が印刷データ作成画面５０１上で撮影ボタン５０６を押下してもよい。

印刷領域設定ボタン５０８は、プレビュー領域５０７に動画が表示されているときにユーザによって押下されることで、印刷領域５０９を設定する領域設定モードに移行するためのボタンである。

図６は、印刷領域設定ボタン５０８が押下されたことに応じて、ネイルアプリが印刷領域５０９を設定可能な領域設定モードに遷移し、動画または静止画から爪の領域を自動検出して自動的に印刷領域５０９を設定する例を説明する図である。図６を用いて、爪の領域を自動検出する方法の一例を説明する。まず、ユーザは、印刷領域設定ボタン５０８を押下してプレビュー領域５０７を領域設定モードにする。その際、ネイルアプリは、撮影部１５７から被印刷者の爪を含む手の静止画を取得して、その静止画から爪の領域を自動検出する。そして、自動的に印刷領域５０９を設定する。自動検出された爪の領域のことを爪領域とよぶ。

爪領域を自動的に検出する方法の一例として、撮影した静止画において所定の色値の画素を爪領域として検出することができる。または、撮影した静止画に対してエッジ検出処理を行い、その結果得られた情報を用いてもよい。あるいは、機械学習で生成した学習モデルを使用して爪領域を決定してもよい。ここで使用する学習モデルは、爪を含む静止画を入力すると、入力された静止画に対応する爪領域を出力する学習モデルである。ネイルアプリは、検出した爪領域を、自動的に印刷領域５０９として設定する。爪領域の検出は指ごとにおこなわれる。例えば、４本の指の爪を検出する場合は、爪領域の検出が４回行われる。爪検出結果である印刷領域５０９を表示する際は、指ごとにプレビュー領域５０７に指画像が表示される。例えば４本の指を爪検出した場合は、４つの指画像がプレビュー領域５０７に表示される。印刷領域５０９は指画像上に表示され、１つの指画像につき、１つの印刷領域５０９が表示される。

印刷領域５０９の設定後に、設定データ表示領域５０２からユーザが選択したネイル画像データを自動的に印刷領域５０９に挿入（反映）する。

ユーザは、自動的に設定された印刷領域５０９の大きさを自由に変更することができる。また、ユーザは、設定した印刷領域５０９を削除することもできる。ユーザがネイルアートを施したい爪は、手の全ての指の爪である場合もあれば、一部の指の爪である場合もあり得る。このため、本実施形態では、ユーザが、自動的に設定された印刷領域５０９を手動で編集することが可能となっている。また、本実施形態において画像を反映する印刷対象の領域である印刷領域５０９は、被印刷者の爪を想定している。このため、設定されている印刷領域５０９の大きさは、各々異なるサイズとなり得る。従って、本実施形態では、プリンタ１５１内に被印刷者が手を挿入して、実際の爪の画像を確認しながら、印刷領域５０９を設定することで適切な爪の位置にネイルアートを印刷することができる。

なお、ネイルアプリは、一度設定した印刷領域５０９は、画像認識処理などによって追従させてもよい。例えば、ユーザが印刷領域５０９を設定した後に、プリンタ１５１内で指（または爪）の位置がずれた場合には、設定された印刷領域５０９の画像領域を追従して、自動的に印刷領域５０９が変わってもよい。

図５に戻り、印刷データ作成画面５０１の説明を続ける。印刷ボタン５１０は、印刷開始を指示するボタンである。印刷ボタン５１０が押下されると、ネイルアプリは、爪に印刷するための印刷データを、印刷領域５０９に反映されたネイル画像データに基づき生成する。そしてネイルアプリは、生成した印刷データをプリンタ名表示領域５０５に表示されたプリンタ１５１に送信する。図５の場合、プレビュー領域５０７から４つの印刷領域５０９が抽出されて印刷データが作成される。プリンタ１５１はネイルアプリから送られた印刷データに基づき被印刷者の爪に印刷する。

＜爪領域位置ガイドについて＞
図７は、爪領域位置ガイドの表示を説明するための図である。爪領域位置ガイドは、印刷領域５０９の設定完了後、検出された爪領域に基づき生成される。プリントヘッド２３０は、爪検出の結果に基づき設定された印刷領域の位置に移動して印刷領域にネイル画像を印刷する。このため、爪検出から印刷までに爪の位置が動いでしまうと。印刷が失敗してしまう虞がある。即ち、所望とする領域からずれた状態で印刷が行われてしまうことになる。

このため、本実施形態では、レール２５１～２５５上の印刷対象の爪の位置を案内し、被印刷者が自身の爪の位置がずれていないかを確認するための案内画像として爪領域位置ガイドを表示する。本実施形態では、印刷データ作成画面５０１のプレビュー領域５０７に爪領域位置ガイドが表示されるものとして説明するが、爪領域位置ガイドが表示される画面は、印刷データ作成画面５０１に限られない。

図７（ａ）は、撮影部１５７が撮影して得られるリアルタイムの動画に、爪領域位置ガイド７１０を重畳して表示させる例を示している。図７（ａ）では、爪領域位置ガイド７１０を点線の枠線として表示している。図７（ａ）において点線の枠線として表示される爪領域位置ガイド７１０は、爪検出で検出された爪領域を表している。また、爪領域位置ガイド７１０は、ユーザに、印刷対象の爪が位置すべき領域の位置を案内するためのものであるため、爪領域が検出された位置に固定して表示される。爪領域位置ガイド７１０ａは、右手の人差し指の爪の位置を案内するために、点線の枠線として表示されている。同様に、爪領域位置ガイド７１０ｂは、右手の中指の爪の位置を、爪領域位置ガイド７１０ｃは、右手の薬指の爪の位置を、爪領域位置ガイド７１０ｄは、右手の小指の爪の位置をそれぞれ案内するために点線の枠線として表示されている。

図７（ｂ）は、リアルタイム動画に重畳される爪領域位置ガイドの他の例を示す図である。図７（ｂ）の爪領域位置ガイド７１０は、被印刷者の指の輪郭を太線の枠線として表示している。被印刷者の指の位置および輪郭は、例えば、静止画像から爪領域の検出を行う際に指領域の検出も行って、検出された指領域に基づき決定される。静止画像から指領域を検出する方法として、例えば、レール２５１～２５４の色を黒色にしておいて、静止画像から黒以外の領域を指領域として検出すればよい。または、機械学習によって指の形状を学習させた学習済みモデルを用いて指領域を検出してもよい。図７（ｂ）の爪領域位置ガイド７１０は、指領域が検出された位置に固定して表示される。

図７（ｃ）は、図７（ａ）は図７（ｂ）とは異なり、爪領域位置ガイド７１０を示す画像に、撮影部１５７が撮影して得られるリアルタイムの動画から切り出された被印刷者の指の画像が重畳して表示されている例を示している。図７（ｃ）の爪領域位置ガイド７１０は、爪検出の際に用いられた静止画像である。右手の人差し指７２１は、リアルタイムで受信している動画から切り出された右手の人差し指のみの画像である。同様に、右手の中指７２２、右手の薬指７２３、右手の小指７２４は、それぞれリアルタイム動画から切り出された被印刷者の指のみの画像である。リアルタイム動画から指の領域を切り出す方法は、前述した方法で指領域を検出して検出した指領域を切り出せばよい。

＜情報処理装置の構成＞
図８は、上述した機能を実現するための情報処理装置１０１の機能ブロックの一例を示す図である。情報処理装置１０１は、ネイルアプリ８００を備えている。ネイルアプリ８００は、情報処理装置１０１のＣＰＵ１０３が、ＲＯＭ１０４または外部記憶装置１０６に記憶されているネイルアプリ８００のプログラムを実行することで、ＣＰＵ１０３にネイルアプリ８００の機能を実行させることが可能となる。なお、図８に示すネイルアプリ８００の機能の一部または全部はＡＳＩＣまたは電子回路などのハードウェアで実現されてもよい。

ネイルアプリ８００は、表示制御部８１０を有する。表示制御部８１０は、図３に示すネイルアートデータの選択画面３０１および図４に示すネイル画像データ設定画面４０１および図５に示す印刷データ作成画面５０１を含む各ＵＩ画面を、表示部１０８に表示させる機能を有する。また、表示制御部８１０は、入力インターフェース１０２の機能を有しており、ユーザから入力される操作指示に応じて各種の制御を行う。

表示制御部８１０は、ネイルアートデータ選択受付部８１１、ネイル画像データ設定部８１２、撮影指示部８１３、画像表示制御部８１４、爪検出部８１５、印刷領域設定部８１６、反映データ受付部８１７を有する。さらに、反映実行部８１８、印刷指示部８１９、および位置ずれ検出部８２０を有する。

ネイルアートデータ選択受付部８１１は、図３に示すように、ユーザからのネイルアートデータ３０３の選択を受け付け、選択されたネイルアートデータ３０３を取得する。

ネイル画像データ設定部８１２は、図４に示すように、左手プレビュー領域４０３および右手プレビュー領域４０４の爪設定領域４０８に設定されたネイル画像データを取得する。

撮影指示部８１３は、図５の撮影ボタン５０６の押下の検知またはプリンタ１５１が登録されている状態での印刷データ作成画面５０１への遷移に応じて、プリンタ１５１に動画の撮影を指示する。

画像表示制御部８１４は、プリンタ１５１から送信された動画の画像データを、プレビュー領域５０７にリアルタイムに表示する。また、爪領域位置ガイド７１０を表示するための制御を行う
爪検出部８１５は、爪検出処理をおこない、検出した被印刷者の爪領域を出力する。

印刷領域設定部８１６は、ユーザからの指示に従って、検出した爪領域に基づき印刷領域５０９を設定する。

反映データ受付部８１７は、印刷対象表示領域５０３に表示されている指と、設定データ表示領域５０２に表示されるユーザが選択したネイル画像データとの対応付けを行う。そして、ユーザが選択した設定データ表示領域５０２のネイル画像データを受け付ける。

反映実行部８１８は、設定データ表示領域５０２からユーザが選択したネイル画像データを、対応する印刷領域５０９に反映させる。

印刷指示部８１９は、印刷領域５０９に反映されたネイル画像データを含む印刷データを生成し、生成した印刷データをプリンタ１５１に送信する。

位置ずれ検出部８２０は、印刷対象の爪の位置が、爪領域位置ガイド７１０が案内する位置からずれているかを検出する。位置ずれ検出部８２０は、撮影部１５７が被印刷者の指を撮影して得られた画像から爪領域の位置を検出して位置ずれが発生しているかを検出する。位置ずれ検出部８２０の処理の詳細は後述する。

通知制御部８３０は、ユーザに所定の通知を行うための制御を行う。例えば、位置ずれ検出部８２０によって位置ずれが検出されたらユーザに通知をする。画面を介して通知を行う場合、通知制御部８３０は、表示制御部８１０に含まれていてもよい。

＜処理の流れ＞
図９は、本実施形態の処理の一例を示すシーケンス図である。図９のネイルアプリ８００の処理は、情報処理装置１０１のＣＰＵ１０３がＲＯＭ１０４または外部記憶装置１０６に記憶されているプログラムコードをＲＡＭ１０５に展開し実行することにより行われる。あるいはまた、図９におけるステップの一部または全部の機能をＡＳＩＣまたは電子回路などのハードウェアで実現してもよい。なお、各処理の説明における記号「Ｓ」は、ステップであることを意味する。図９においては、ユーザがネイルアプリ８００を起動し、ネイルアプリ８００の制御によって、印刷対象挿入部１５８に挿入された爪にプリントエンジン１５５がネイルアートを印刷する流れを説明する。

Ｓ９０１において、ユーザによってネイルアプリ８００が起動されると、表示制御部８１０は、図３に示す選択画面３０１を表示する。ネイルアートデータ選択受付部８１１は、選択画面３０１のネイルアートデータ表示領域３０２から１つまたは複数のネイルアートデータ３０３の選択を受け付ける。ユーザが、１つまたは複数のネイルアートデータ３０３を選択後、ネイルアートデータ決定ボタン３０４を押下すると、表示制御部８１０は、ボタン押下を検知し、図４に示すネイル画像データ設定画面４０１を表示部１０８に表示する。ネイルアートデータ表示領域４０２に、ユーザが選択したネイルアートデータが表示されたネイル画像データ設定画面４０１が表示部１０８に表示される。そして、ネイル画像データ設定部８１２はユーザが選択したネイル画像データを爪設定領域４０８に設定する。

Ｓ９０２において、ユーザが設定完了ボタン４０７を押下すると、表示制御部８１０はボタン押下を検知し、図５に示す印刷データ作成画面５０１を表示部１０８に表示する。ユーザによって設定完了ボタン４０７が押下されることで、ネイル画像データの設定が完了する。そして、図５に示す印刷データ作成画面５０１が表示部１０８に表示されると、印刷データ作成画面５０１中の設定データ表示領域５０２に、ユーザによって設定された１つまたは複数のネイル画像データが表示される。

プリンタ１５１が登録されていない場合、ネイルアプリ８００は、ネイルアプリ８００と通信可能なプリンタ１５１を検索する。表示制御部８１０は、検索結果を示すプリンタリストを表示部１０８に表示する。

Ｓ９０３において表示制御部８１０は、プリンタリストを表示部１０８に表示させる。ユーザによってプリンタリストからプリンタ１５１が指定されると、表示制御部８１０は、ユーザによって指定されたプリンタ１５１を選択する。

Ｓ９０４において撮影指示部８１３は、Ｓ９０４で選択されたプリンタ１５１と通信する。そして、撮影指示部８１３は、プリンタ１５１に対して、撮影部１５７による撮影を指示する。なお、Ｓ９０４において撮影指示部８１３は、プリンタ１５１に対してカメラ起動ジョブを送信してもよい。そして、プリンタ１５１は、このカメラ起動ジョブの受信に基づいて、撮影部１５７を起動して撮影を開始してもよい。

Ｓ９０５においてプリンタ１５１は、撮影部１５７で撮影している動画をネイルアプリ８００に送信する。画像表示制御部８１４は、この動画を、図５に示す印刷データ作成画面５０１のプレビュー領域５０７に表示させる。原則として、撮影部１５７で撮影された動画は、印刷終了まで、ほぼリアルタイムでプレビュー領域５０７に表示される。被印刷者の手が既に挿入されている場合は、プレビュー領域５０７には、印刷対象挿入部１５８に挿入された被印刷者の指先の動画が表示されている状態となる。

Ｓ９０６において、ユーザが設定データ表示領域５０２の中から爪に印刷する設定データを１つ選択すると、ネイルアートデータ選択受付部８１１は、選択された１つの設定データの選択を受け付ける。表示制御部８１０は、ユーザによって選択された設定データをハイライト表示する。

Ｓ９０７において、プリンタ１５１に設けられた印刷対象挿入部１５８に、被印刷者の手を挿入する。このとき、Ｓ９０２で設定されたネイル画像データをより精彩に印刷するために、あらかじめ被印刷者の爪にジェル状の液体（ベースコート）を塗布しておく。このベースコートの色は、複数存在し、例えば白、半透明などがある。また、ネイルアプリ８００は、Ｓ９０６の後に、プリンタ１５１に手を挿入することを促すメッセージを表示してもよい。

Ｓ９０８において、Ｓ９０５の結果としてプレビュー領域５０７にリアルタイム動画が表示されている状態でユーザは、印刷領域設定ボタン５０８を押下する。表示制御部８１０が印刷領域設定ボタン５０８を受け付けると、印刷領域設定処理Ｓ９０９～Ｓ９１３が行われる。印刷領域設定処理では、爪検出部８１５によってプレビュー領域５０７上における爪領域が自動で検出され、検出された爪領域に基づいて印刷領域５０９が自動で設定される。本フローチャートの説明では、設定可能な印刷領域５０９の数が予め所定値に規定されているものとする。本実施形態は、片手の人差し指、中指、薬指、小指の爪の数に対応しているので、所定値は、「４」として規定されている。この所定値は、印刷対象挿入部１５８に搭載されたレールの本数および設定データに含まれるネイル画像データの数に対応する。本実施形態においては、ユーザが、この所定値と同じ数の印刷領域５０９を設定する形態を例に挙げて説明する。つまり、本実施形態では、印刷領域５０９が４つ設定されるものとする。ここで設定された印刷領域５０９の数は、第一の値としてＲＡＭ１０５に保存される。つまり、本実施形態では、第一の値は、「４」である。

Ｓ９０９において撮影指示部８１３は、静止画の撮影指示をプリンタ１５１に送る。撮影指示には、撮影対象となる爪に対応するレール番号も含めて送る。例えば４本のレール２５１～２５１を左から１～４の番号とした場合、左手の小指を撮影する際は「１」、左手の人差し指を撮影する際は「４」、右手の人差し指を撮影する際は「１」、右手の小指を撮影する際は「４」の番号を送る。

Ｓ９１０においてプリンタ１５１は、レール２５１～２５４のうち、受信したレール番号に対応するレールのみを上昇させて、爪がプリンタ１５１のプリントヘッド２３０と近接する高さとなるように調整する。プリントヘッド２３０に近接する高さに爪を配置することで、インクジェットプリンタであればプリントヘッド２３０から吐出されるインクが確実に爪に着弾できるようになる。

爪の高さ調整には、プリンタ１５１に搭載された可動型のレーザセンサ２０６が用いられる。図２に示すようにレーザセンサ２０６をプリントヘッド２３０と近接した高さに設置し、レーザが遮断されないぎりぎりの高さまで爪の高さを上げるようレール２５１～２５４が制御される。爪の高さ調整では、爪のおおよその位置を把握した上でレーザセンサ２０６での稼働範囲を爪の範囲に絞った方が指全体を可動範囲とするよりも効率的に高さ調整を行える。そのため、爪の高さ調整を行う前に事前に爪検出を行い、Ｓ９０９の撮影指示と合わせて爪の位置情報をネイルアプリ８００からプリンタ１５１に送るようにするとよい。

本実施形態では、このような事前の爪検出のことをプレ爪検出と呼ぶことにする。プレ爪検出を行う場合は、Ｓ９０９よりも以前にネイルアプリ８００からプリンタ１５１に撮影指示を送信する。プレ爪検出では爪の高さ調整は行わないため、送信する撮影指示には前述したレール番号は含まなくてよい。プリンタ１５１はプレ爪検出のための撮影指示を受信したら、撮影部１５７で静止画の撮影を行う。撮影が終了したら、プリンタ１５１は撮影画像をネイルアプリ８００に送信する。ネイルアプリ８００は受信した撮影画像内の爪を検出し、検出した全ての爪の爪位置情報を保持しておく。そして、Ｓ９０９で撮影指示する場合はレール番号と合わせて撮影対象の爪の位置情報をプリンタ１５１に送信する。プリンタ１５１は、受信した爪位置情報に基づきレーザセンサ２０６の可動範囲を絞って対象の爪の高さを調整する。

Ｓ９１１において撮影部１５７は、対象の爪の高さ調整が終了したら、静止画の撮影を行う。

Ｓ９１２でプリンタ１５１は、撮影が終了したら対象のレールの高さを初期値に戻し、ネイルアプリ８００に静止画の撮影画像のデータを送信する。リアルタイムで受信している動画像のフレームを切り出して静止画の代わりとしてもよい。その場合は、撮影指示部８１３は、Ｓ９０９で静止画の撮影指示を送らなくてもよい。

Ｓ９１３においてネイルアプリ８００の爪検出部８１５は、受信した撮影画像から爪領域を検出する。本ステップによる爪領域の検出を第１の爪検出とよぶ。Ｓ９１３の第１の爪検出で検出された爪領域に基づき印刷領域５０９が決定される。また、爪領域位置ガイド７１０として図７（ｂ）のように指領域の位置を表示する場合は、Ｓ９１３の第１の爪検出に合わせて指領域の検出が行われる。このように本ステップによって、爪領域位置ガイド７１０を表示するための爪または指などの対象物が検出される。

爪の検出の一手法として、爪に塗布したベースコートの白色を画像処理で検出する方法がある。具体的には撮影画像のＲＧＢ値から所定の閾値（例えばＲ＞２００、Ｇ＞２００、Ｂ＞２００）を超える画素を検出し、検出した領域を爪領域と判定する方法がある。爪検出の際に指の下にあるレール２５１～２５４を爪と誤検出しないように、レール２５１～２５４は黒などの白以外の色にするとよい。またライトの反射で撮影画像が白飛びした部分を誤検出しないように、光が乱反射する素材でレール２５１～２５４を構成するのが望ましい。また画像処理による検出ではベースコートが半透明の場合に検出が困難になるため、別の検出方法として機械学習を用いてもよい。機械学習で学習させる画像に、白または半透明のベースコートが塗布された爪を含んだ指画像を用いることで、白だけでなく半透明のベースコートであっても爪領域の検出が可能になる。機械学習では、用意した学習画像のどこに爪があるかを学習させていき、学習モデルを構築する。構築した学習モデルはネイルアプリ８００に組み込まれ、ＣＰＵ１０３またはＧＰＵ１１０によって処理され、撮影画像から爪領域を検出するのに利用される。肌の色および爪の形は個人によって異なるため、学習画像に多くの手のパターンを用意し学習させていくことで、様々な爪を検出できるようにする。機械学習には数多くのフレームワークが存在しており、既存のフレームワークを利用することで機械学習を実現することができる。

Ｓ９０９～Ｓ９１３の印刷領域設定処理は、撮影対象（印刷対象）の爪の数だけ繰り返し行われる。例えば、左手の小指から人差し指の４つの爪が対象になる場合、指ごとに撮影、撮影データ送信、および爪検出が繰り返し行われ、撮影画像は合計４枚になる。

Ｓ９１４において印刷領域設定部８１６は、Ｓ９１３の第１の爪領域で検出された爪領域に基づき印刷領域５０９を設定する。例えば、各撮影画像から対象の爪を含む指が撮影された部分が切り出されてプレビュー領域５０７に表示される。つまり、プレビュー領域５０７には切り出された４枚の指画像が並べられて表示され、印刷領域設定部８１６は、各指画像に対応する印刷領域５０９を設定する。

そして、反映データ受付部８１７は、印刷領域設定部８１６によって印刷領域５０９が設定された後、印刷領域５０９に反映させる反映データとして、設定データに設定されている４種類のネイル画像データを受け付ける。そして、反映データ受付部８１７は、設定データに設定されている４種類のネイル画像データと設定された４つの印刷領域５０９との対応付けを行う。そして、反映実行部８１８は、この対応付けに基づいて印刷領域５０９に設定データを反映する。

Ｓ９１５において、ユーザは必要に応じて印刷領域５０９を編集する。例えばユーザは印刷領域５０９の大きさ等を調整する場合には、印刷領域５０９を編集することもできる。この場合、反映データ受付部８１７が編集の受け付けを行い、反映実行部８１８が編集した結果の反映を行う。

Ｓ９１６において画像表示制御部８１４は、Ｓ９１３の第１の爪検出の結果に基づき爪領域位置ガイド７１０を生成する。そして、図７に示すように、表示制御部８１０は、生成された爪領域位置ガイド７１０を、Ｓ９０５の結果取得しているリアルタイム動画と組み合わせて表示する。爪領域位置ガイド７１０は、後述するＳ９２７で被印刷者の爪へ画像が印刷されるまで表示される。

Ｓ９１７において、ユーザが印刷領域５０９における設定データの反映状態を確認した後に印刷ボタン５１０を押下すると、印刷指示部８１９は、設定データ（ネイル画像データ）を印刷領域５０９に反映した印刷データを作成する。このとき、通知制御部８３０は、「プリンタに挿入されている手を動かさないでください」という主旨の通知が行われるように制御を行ってもよい。

次のＳ９１８～Ｓ９２７の処理は印刷処理である。印刷処理は、印刷対象の爪ごとに行われる。

Ｓ９１８はＳ９０９と同様の処理であり、撮影指示部８１３は、静止画の撮影指示をプリンタ１５１に送る。その際、撮影指示には、撮影対象である印刷対象の爪に対応するレール番号も含めて送られる。印刷処理では、初めに、現在の印刷対象の爪の位置が、Ｓ９１３の第１の爪検出処理の結果の検出された爪領域の位置からずれていないかを判定される。この判定ために用いる撮影画像（静止画）を得るために、本ステップでは撮影指示がプリンタ１５１に送られる。

Ｓ９１９においてプリンタ１５１は、レール２５１～２５４のうち、受信したレール番号に対応するレールのみを、Ｓ９１０で調整された高さまで上昇させて、今回の印刷対象の爪がプリンタ１５１のプリントヘッド２３０と近接する高さとなるようにする。印刷対象以外の指が置かれているその他の番号のレールは降下させた状態のままにする。

次のＳ９２０およびＳ９２１は、Ｓ９１８の結果送信した印刷対象のレール番号が２本目以降の爪の指が置かれているレールである場合の処理である。１回目の印刷処理の場合は、Ｓ９２０およびＳ９２１はスキップされる。Ｓ９２０においてネイルアプリ８００は、プリントヘッド２３０を退避させる命令をプリンタ１５１に送信する。

Ｓ９２１においてプリンタ１５１は、ネイルアプリ８００から退避命令を受信すると、その命令に基づきプリントヘッド２３０を退避させる。

図１０は、レール２５１～２５４に置かれた指の先端側から見たプリンタ１５１の模式図である。図１０を用いて、プリントヘッド２３０の退避について説明する。図１０（ａ）は、撮影部１５７であるカメラが撮影可能な画角の領域１００２を図示している。プリントヘッド２３０はＸ方向レールガイド２２０に沿ってＸ方向に進行する。撮影部１５７の画角の領域１００２の内部に、被印刷者の右手の小指１００４、薬指１００５、中指１００６、人差し指１００７が図示されている。また、それぞれの指１００４～１００７の上部に爪領域１００８が図示されている。図１０（ｂ）は、プリントヘッド２３０が右手の小指１００４の上部に存在し、プリントヘッド２３０が、右手の小指１００４の爪領域１００８に印刷を行っている状態を示している。

図１０（ｃ）は、プリンタ１５１がヘッド退避命令を受け取った後、プリントヘッド２３０が撮影部１５７の画角の領域１００２外に位置するように左方向（＋Ｘ方向）に退避している状態を示している。図１０（ｄ）は、プリンタ１５１がヘッド退避命令を受け取った後、プリントヘッド２３０が撮影部１５７の画角の領域１００２外に位置するように右方向（－Ｘ方向）に退避している状態を示している。

Ｓ９２１におけるヘッドの退避方向を右方向とするか左方向とするかは、退避命令を受けた際のプリントヘッド２３０の位置に応じて決定すればよい。例えば、プリントヘッド２３０の右方向にレールが上昇された印刷対象の爪の指がある場合は、退避方向は左方向と決定すればよい。プリントヘッド２３０の左方向にレールが上昇された印刷対象の爪の指がある場合は、退避方向は右方向と決定すればよい。

印刷対象の爪の指が置かれたレール以外のレールを降下させた状態のままにする理由は、Ｓ９２１におけるプリントヘッド２３０を退避させる際、被印刷者の爪がプリントヘッド２３０に当接するのを防ぐためである。

Ｓ９２２において撮影部１５７は、静止画の撮影を行う。Ｓ９０５の結果取得されプレビュー領域５０７に表示されているリアルタイム動画からフレームを切り出して得られた画像を静止画としてもよい。この場合、できるだけ現在に近い時刻のフレームを切り出すのが好ましい。

Ｓ９２３でプリンタ１５１は、撮影が終了したら印刷対象の爪の指が置かれたレールの高さを初期値に戻し、ネイルアプリ８００に撮影データを送信する。

Ｓ９２４において爪検出部８１５は、Ｓ９２２の撮影の結果得られた撮影画像である静止画から爪検出を行う。ここで行われる爪検出を第２の爪検出とよぶ。爪検出の方法は、Ｓ９１３の第１の爪検出と同様の方法で行えばよい。

Ｓ９２５において位置ずれ検出部８２０は、Ｓ９１３で行った第１の爪検出の結果とＳ９２４で行った第２の爪検出の結果と、を比較し、現在レールに置かれている指のうちの印刷対象の爪の位置がずれているか検出する処理（位置ずれ検出処理）を行う。

図１１は、Ｓ９２５における位置ずれ検出処理の詳細を説明するためのフローチャートである。

Ｓ１１０１において位置ずれ検出部８２０は、Ｓ９１３における第１の爪検出の結果得られた爪領域のうち、現在の印刷対象の爪の爪領域の位置を表す座標を取得する。爪領域の位置を表す座標として、爪領域の先端の座標が取得される。原点を左上とすると、爪領域の座標のうち縦方向の成分値が最小である座標を、爪領域の先端の座標として取得すればよい。第１の爪検出の結果に基づき印刷領域および爪領域位置ガイド７１０は生成されている。このため、本ステップで取得される第１の爪検出の結果得られた爪領域の位置は、図７で示した爪領域位置ガイド７１０における爪の位置に対応する。

Ｓ１１０２において位置ずれ検出部８２０は、Ｓ９２４における第２の爪検出の結果得られた現在の印刷対象の爪の爪領域の位置を表す座標を取得する。本ステップでも、爪領域の位置を表す座標として、爪領域の先端の座標が取得される。

Ｓ１１０３において位置ずれ検出部８２０は、Ｓ１１０１で取得された爪領域の位置とＳ１１０２で取得された爪領域の位置との距離を算出する。

Ｓ１１０４において位置ずれ検出部８２０は、Ｓ１１０３で得られた距離が閾値以下かを判定をする。例えば閾値を３ｍｍとした場合、Ｓ１１０４では、算出された距離が３ｍｍ以下であるかが判定される。

爪領域の距離が閾値より大きい場合（Ｓ１１０４がＹＥＳ）、Ｓ１１０５において通知制御部８３０は、位置ずれを通知する。

図１２は、爪領域の位置ずれの通知方法を説明する画面の一例を示す図である。爪領域位置ガイドは、第１の爪検出の結果得られた爪領域に対応する位置を示すものであるため、Ｓ１１０５では、プレビュー領域５０７に表示される爪領域位置ガイドからの位置ずれが通知されることになる。

図１２（ａ）および図１２（ｂ）は、右手の人差し指の位置ずれの通知方法を説明するための図である。図１２（ａ）および図１２（ｂ）は、爪領域位置ガイドを表示している状態において、さらに位置ずれを通知する方法を示している。図１２（ａ）は位置ずれを検出する前のプレビュー領域５０７に表示される爪領域位置ガイドの図であり、枠線１２０１は、図７（ｂ）の爪領域位置ガイド７１０ａに対応する。図１２（ａ）、図１２（ｂ）では、爪領域位置ガイド７１０ａ～ｄのうち、現在の印刷対象である右手の人差し指の爪領域位置ガイド７１０ａのみが表示されている。このように、Ｓ９１８～Ｓ９２７が行われている最中においてプレビュー領域５０７に表示される爪領域位置ガイドは、現在の印刷対象の爪またはその爪の指の位置を案内する爪領域位置ガイドのみが表示されるようにしてもよい。

その後、印刷対象の右手の人差し指が動いてＳ９２５で位置ずれが検出された場合、例えば図１２（ｂ）に示すように、爪領域位置ガイドを点線の枠線１２０２に置き換えることで、位置ずれが発生していることが視覚的に通知される。図７（ａ）、図７（ｃ）の爪領域位置ガイド７１０の場合も同様に、爪領域位置ガイド７１０の色、模様などを変更すことで、爪領域位置ガイド７１０から現在の印刷対象の爪の位置がずれていることを視覚的に通知すればよい。

図１２（ｃ）および図１２（ｄ）は右手の人差し指の位置ずれを通知する他の例を説明するための図である。図１２（ｃ）のプレビュー領域５０７には、位置ずれが発生していないときのリアルタイム動画が表示されているものとする。この場合、例えば、右手の人差し指１２０３上に位置ずれが発生していないことを示す第１のアイコン１２０４を表示させることで、位置ずれが発生していないことを示している。

一方、図１２（ｄ）のプレビュー領域５０７には、位置ずれを検出した場合におけるにリアルタイム動画が表示されているものとする。図１２（ｄ）に示すように、位置ずれが発生していること示すアイコンとして、第１のアイコン１２０４とは異なる第２のアイコン１２０５を表示させることで、現在の印刷対象の爪の位置が爪領域位置ガイドからずれていることを視覚的に通知してもよい。第１のアイコン１２０４または第２のアイコン１２０５は、図７（ａ）～（ｃ）の爪領域位置ガイド７１０が表示されているプレビュー領域５０７に表示することができる。

なお、位置ずれを通知するためのアイコンは、図１２（ｄ）の第２のアイコン１２０５に限られない。位置ずれを検出する前後でアイコンが変化して、位置ずれが発生したことをユーザに通知できれば、他のアイコンでもよい。また、図１２（ｃ）および（ｄ）では、第１のアイコン１２０４および第２のアイコン１２０５は指に重畳させて表示されるものとして図示しているが、これは一例に過ぎない。第１のアイコン１２０４および第２のアイコン１２０５の位置は、位置ずれが発生している爪の指がユーザに伝わる位置であればどこでもよい。

なお、本実施形態では、指一本ずつ位置ずれの検出を行うものとしている。このため、図１２（ｂ）および図１２（ｄ）では、今回の印刷対象となる爪の指が右手の人差し指であるものとして、位置ずれを通知する方法の例を図示している。印刷対象となる爪の指が右手の人差し指以外も、図１２（ｂ）および図１２（ｄ）と同様に位置ずれの通知が行われればよい。

また、通知制御部８３０は、視覚的に位置ずれを通知する方法以外の方法で位置ずれを通知してもよい。例えば、通知制御部８３０は、位置ずれ検出部８２０が位置ずれを検出した後、情報処理装置１０１またはプリンタ１５１が有している不図示の発音手段に警告音を鳴らすように制御を行ってもよい。または、通知制御部８３０は、位置ずれ検出部８２０が位置ずれを検出した後、情報処理装置１０１またはプリンタ１５１が有している不図示の振動手段によって振動を発生させるように制御を行ってもよい。また、画面の表示、音、振動などの方法のうちの２つ以上の方法を組み合わせて位置ずれの通知が行われてもよい。

Ｓ１１０４において位置ずれを検出して、Ｓ１１０５で位置ずれの通知を行った場合、図９では、Ｓ９２５からＳ９２２に処理を戻す。そして、現在の印刷対象の爪の爪領域の位置と、第１の爪検出の結果得られた爪領域の位置と、の距離が閾値以下のとなるまで、Ｓ９２２～Ｓ９２５の処理が繰り返し行われる。

一方、爪領域の距離が閾値以下となった場合（Ｓ１１０４がＹＥＳ）、図９では、Ｓ９２５Ｓから９２６に進む。ネイルアプリ８００は、印刷ボタン５１０を押下可能な状態にする。

Ｓ９２６においてネイルアプリ８００は、印刷ボタン５１０の押下を受け付けると、印刷データをプリンタ１５１に送信する。

Ｓ９２７においてプリンタ１５１は、送信された印刷データに基づいて、今回の印刷対象の指に対応する印刷領域に印刷を行うことで、印刷対象の爪に印刷を行う。この結果、被印刷者の爪にネイル画像が印刷されることになる。

Ｓ９１８～Ｓ９２７のステップは印刷対象の爪の数だけ繰り返し行われる。例えば、左手の小指から人差し指の４つの爪が対象になる場合、指ごとに印刷データの送信から印刷までの処理が繰り返し行われる。プリントヘッド２３０が爪の根本から爪先に向かって印刷する場合、指の配置の関係で小指→薬指→中指→人差し指の順番で印刷した方がプリントヘッド２３０の移動距離は少なくて済む。逆にプリントヘッド２３０が爪先から爪の根本に向かって印刷する場合、人差し指→中指→薬指→小指の順番で印刷した方がプリントヘッド２３０の移動距離が少なくて済む。このように印刷対象の指の配置（左手／右手）に応じて、印刷する指の順番を変えることでプリントヘッド２３０の移動距離を短縮することができ、印刷時間の短縮に繋がる。

なお、撮影部１５７は、印刷中も爪の撮影を継続し、印刷中においても印刷対象の爪の位置ずれが発生しているかが検出されてもよい。例えば、印刷が完了する前に印刷対象の爪のある手がプリンタ１５１から離れたかをネイルアプリ８００が検知可能に構成されてもよい。そして、印刷が完了する前に印刷対象の爪のある手がプリンタ１５１から離れたことが検知された場合、ネイルアプリ８００はプリンタ１５１に印刷の停止を指示してもよい。また、Ｓ９１６で爪領域位置ガイドを表示する前に、Ｓ９２２～Ｓ９２５と同様の爪領域の位置ずれ検出処理を行ってもよい。

以上説明したように本実施形態では、被印刷者ごとに爪領域の検出を行うことで、被印刷者に適した爪または手の位置を案内することで位置ずれを抑制することができる。このため、本実施形態によれば、印刷領域の設定から実際に印刷領域に印刷が行われるまでの間に爪の位置がずれることによる被印刷者の爪への画像の印刷が失敗することを抑制することができる。

＜＜その他の実施形態＞＞
上述した実施形態においては、印刷対象挿入部１５８に片手の手を入れる形態のプリンタ１５１を例に挙げて説明したが、これに限られない。例えば、店舗などに設置されるようなプリンタで、両手を入れるようなものでもよい。この場合、操作は、店員などが行えばよい。

また、上述した各実施形態では、主に、ネイルアートとして画像（模様）を印刷する例を挙げて説明したが、３次元構造物などを示す形状データと画像データとを用いて、模様を含む構造物をネイルアートとして形成するような形態でもよい。

また、上述した各実施形態では、手をプリンタ１５１に挿入し、爪に直接印刷する形態で説明したが、別の形態でも構わない。例えば、シール等の爪に装着するオブジェクトに対して印刷を行うプリンタを使って印刷する場合に、上述した各実施形態の発明が適用されても構わない。

上述した実施形態では、情報処理装置１０１とプリンタ１５１とを別の装置として説明するが、両者の機能を一体的に含む装置を用いる形態でもよい。例えば情報処理装置１０１に含まれるネイルアプリ８００の機能を有するプリンタ１５１であってもよい。

本開示は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

＜＜その他＞＞
上述した実施形態の開示は、以下の構成を含む。

（構成１）
被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置を、
前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得手段と、
前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御手段と、
として機能させることを特徴とするプログラム。

（構成２）
前記案内画像は、前記被印刷者に応じた前記印刷対象の爪が位置すべき領域を案内する画像である
ことを特徴とする構成１に記載のプログラム。

（構成３）
前記案内画像は、
前記案内画像と組み合わされる第１の撮影画像を得るための撮影より以前に、前記撮影装置が前記指置台に置かれた前記被印刷者の指の爪を撮影して得られた第２の撮影画像に基づく画像である
ことを特徴とする構成１に記載のプログラム。

（構成４）
前記情報処理装置を
撮影画像から爪および指の少なくとも一方を対象物として検出する検出手段としてさらに機能させる
ことを特徴とする構成３に記載のプログラム。

（構成５）
前記案内画像は、前記検出手段が前記第２の撮影画像から検出した前記対象物を囲む線である
ことを特徴とする構成４に記載のプログラム。

（構成６）
前記案内画像は、前記第２の撮影画像であり、
前記表示制御手段は、
前記第１の撮影画像から切り出された指の領域を前記案内画像に重畳させることで前記画面を表示させる
ことを特徴とする構成３に記載のプログラム。

（構成７）
前記プリントヘッドがインクを付与して印刷する印刷領域が、前記第２の撮影画像から検出された爪の領域に基づき決定され、
前記案内画像が案内する前記印刷対象の爪が位置すべき領域は、前記印刷領域に対応する領域である
ことを特徴とする構成３から６のいずれか１項に記載のプログラム。

（構成８）
前記情報処理装置を
前記案内画像が案内する前記印刷対象の爪が位置すべき領域の位置と、前記指置台に置かれている前記被印刷者の指の爪の位置と、の距離が閾値より大きい場合、所定の通知をする制御をする通知制御手段としてさらに機能させる
ことを特徴とする構成１から７のいずれか１項に記載のプログラム。

（構成９）
前記情報処理装置を
前記撮影装置が撮影して得られた撮影画像から爪を検出する検出手段としてさらに機能させ、
前記指置台に置かれている前記被印刷者の指の爪の位置は、前記検出手段が検出した爪の位置である
ことを特徴とする構成８に記載のプログラム。

（構成１０）
前記通知制御手段は、
前記所定の通知として、前記案内画像を異なる画像に変更する
ことを特徴とする構成８または９に記載のプログラム。

（構成１１）
前記通知制御手段は、
前記所定の通知として、前記撮影装置が撮影して得られた撮影画像にアイコンを重畳して表示する
ことを特徴とする構成８または９に記載のプログラム。

（構成１２）
前記通知制御手段は、
前記所定の通知として、音の発生および振動の発生の少なくとも一方が行われるように制御する
ことを特徴とする構成８または９に記載のプログラム。

（構成１３）
被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置であって、
構成１から１２のいずれか１項に記載のプログラムによって実現される各手段を有することを特徴とする情報処理装置。

（構成１４）
被印刷者の爪に画像を印刷するプリントヘッドと、
前記被印刷者の指を置く指置台と、
前記指置台に置かれた指を撮影する撮影装置と、を有し、
構成１から１２のいずれか１項に記載のプログラムによって実現される各手段を有する情報処理装置と接続されている
ことを特徴とするネイルプリント装置。

（構成１５）
被印刷者の爪に画像を印刷するプリントヘッドと、
前記被印刷者の指を置く指置台と、
前記指置台に置かれた指を撮影する撮影装置と、を有し、
構成１から１２のいずれか１項に記載のプログラムによって実現される各手段を有する情報処理装置を含む
ことを特徴とするネイルプリント装置。

（構成１６）
被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置の制御方法であって、
前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得ステップと、
前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御ステップと、
を含むことを特徴とする制御方法。

８００ ネイルアプリ
８１０ 表示制御部

Claims (16)

1. 被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置を、
   前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得手段と、
   前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御手段と、
   として機能させることを特徴とするプログラム。
2. 前記案内画像は、前記被印刷者に応じた前記印刷対象の爪が位置すべき領域を案内する画像である
   ことを特徴とする請求項１に記載のプログラム。
3. 前記案内画像は、
   前記案内画像と組み合わされる第１の撮影画像を得るための撮影より以前に、前記撮影装置が前記指置台に置かれた前記被印刷者の指の爪を撮影して得られた第２の撮影画像に基づく画像である
   ことを特徴とする請求項１に記載のプログラム。
4. 前記情報処理装置を
   撮影画像から爪および指の少なくとも一方を対象物として検出する検出手段としてさらに機能させる
   ことを特徴とする請求項３に記載のプログラム。
5. 前記案内画像は、前記検出手段が前記第２の撮影画像から検出した前記対象物を囲む線である
   ことを特徴とする請求項４に記載のプログラム。
6. 前記案内画像は、前記第２の撮影画像であり、
   前記表示制御手段は、
   前記第１の撮影画像から切り出された指の領域を前記案内画像に重畳させることで前記画面を表示させる
   ことを特徴とする請求項３に記載のプログラム。
7. 前記プリントヘッドがインクを付与して印刷する印刷領域が、前記第２の撮影画像から検出された爪の領域に基づき決定され、
   前記案内画像が案内する前記印刷対象の爪が位置すべき領域は、前記印刷領域に対応する領域である
   ことを特徴とする請求項３に記載のプログラム。
8. 前記情報処理装置を
   前記案内画像が案内する前記印刷対象の爪が位置すべき領域の位置と、前記指置台に置かれている前記被印刷者の指の爪の位置と、の距離が閾値より大きい場合、所定の通知をする制御をする通知制御手段としてさらに機能させる
   ことを特徴とする請求項１に記載のプログラム。
9. 前記情報処理装置を
   前記撮影装置が撮影して得られた撮影画像から爪を検出する検出手段としてさらに機能させ、
   前記指置台に置かれている前記被印刷者の指の爪の位置は、前記検出手段が検出した爪の位置である
   ことを特徴とする請求項８に記載のプログラム。
10. 前記通知制御手段は、
    前記所定の通知として、前記案内画像を異なる画像に変更する
    ことを特徴とする請求項８に記載のプログラム。
11. 前記通知制御手段は、
    前記所定の通知として、前記撮影装置が撮影して得られた撮影画像にアイコンを重畳して表示する
    ことを特徴とする請求項８に記載のプログラム。
12. 前記通知制御手段は、
    前記所定の通知として、音の発生および振動の発生の少なくとも一方が行われるように制御する
    ことを特徴とする請求項８に記載のプログラム。
13. 被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置を制御する情報処理装置であって、
    請求項１から１２のいずれか１項に記載のプログラムによって実現される各手段を有することを特徴とする情報処理装置。
14. 被印刷者の爪に画像を印刷するプリントヘッドと、
    前記被印刷者の指を置く指置台と、
    前記指置台に置かれた指を撮影する撮影装置と、を有し、
    請求項１から１２のいずれか１項に記載のプログラムによって実現される各手段を有する情報処理装置と接続されている
    ことを特徴とするネイルプリント装置。
15. 被印刷者の爪に画像を印刷するプリントヘッドと、
    前記被印刷者の指を置く指置台と、
    前記指置台に置かれた指を撮影する撮影装置と、を有し、
    請求項１から１２のいずれか１項に記載のプログラムによって実現される各手段を有する情報処理装置を含む
    ことを特徴とするネイルプリント装置。
16. 被印刷者の爪に画像を印刷するプリントヘッドと前記被印刷者の指を置く指置台とを有するネイルプリント装置の制御方法であって、
    前記指置台に置かれた指を撮影する撮影装置によって撮影された撮影画像を取得する取得ステップと、
    前記撮影画像と、前記指置台において印刷対象の爪が位置すべき領域を案内する案内画像と、が組み合わされた画面を表示装置に表示させる表示制御ステップと、
    を含むことを特徴とする制御方法。

Images