JP7342413B2 - 爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラム - Google Patents

Description

本発明は、爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムに関する。

従来から、ユーザの爪形状を計測し、オーダーメイドのネイルチップを提供するサービスが知られている。このサービスでは、ユーザの爪の３次元形状を得るために、３種類の手法が用意されている。
第１の手法では、スキャン登録会の会場において、ユーザの爪形状の３Ｄスキャンが行われる。第２の手法では、スキャン登録会の会場において、歯科用の印象材と硬化剤とを用いたユーザの爪形状の型取りが行われる。
https://hintos.jp/articles/opennail_20171028/
ところで、スキャン登録会の会場においてユーザの爪の３次元形状が得られる従来のサービスでは、ユーザがスキャン登録会の会場に出向く必要があり、移動時間および交通費がかかってしまう。
第３の手法では、ユーザが、ポリエチレン樹脂素材の型取りキットを利用して、自宅で爪の型取りを行う。
https://make.dmm.com/easy/nailchip/
ところで、第３の手法では、型取りに不慣れなユーザが自分で爪の型取りを行うと、失敗したり、長時間を要したりするおそれがある。また、ユーザは、ネイルチップを作成可能な程度に適切な型取りが行われたか否かを、自宅において判断することができない。更に、返送時に、硬化した型取りキットが破損したり、紛失したりするおそれもある。

また、従来から、ユーザが自分の指爪画像を所望のネイルデザインと共に送るだけで、ユーザ本人の爪部の形状に合う合成爪画像の提供および付け爪（ネイルチップ）の提供を受けることができる付け爪サービス提供装置および端末装置が知られている（特許文献１参照）。特許文献１に記載された技術では、１０円コイン等を含むユーザの指爪画像が利用される。
ところで、特許文献１に記載された技術では、撮影部によって、寸法の基準となる１０円コイン等と共にユーザの爪部を含む対象指の指爪が撮影され、その指爪画像が用いられる。詳細には、特許文献１に記載された技術では、例えば爪甲の側のような、１方向のみから撮影された指爪画像が用いられる。そのため、特許文献１に記載された技術では、爪の立体的形状を正確に把握することができず、高精度な爪の３次元形状を得ることができない。

また、従来から、ネイルチップの３次元データ作成方法が知られている（特許文献２参照）。特許文献２に記載された技術では、模型作成工程において、ネイルチップが取り付けられる自爪を含む指先部分の型取りが行われる。また、データ作成工程において、３Ｄ測定器によって、被測定対象物体の三次元形状が測定され、被測定対象物体の３次元データが出力される。
ところで、特許文献２に記載された技術では、型取りを行う必要があるため、上述した型取りの問題点が生じてしまう。また、特許文献２に記載され技術では、３Ｄ測定器が用いられるため、ユーザは、３Ｄ測定器が設置されている会場に出向く必要がある。

特開２０１２－２３２０４２号公報 特開２０１１－０６７３８５号公報

本発明者等は、鋭意研究において、手または足の甲側から撮像された爪の画像と、爪先の側から撮像された爪の画像と、右側爪甲縁または左側爪甲縁の側から撮像された爪の画像とがあれば、それらの画像を用いることによって爪の３次元形状を簡易に推定できることを見い出した。
そこで、本発明は、３次元レーザスキャナ、型取り用シリコンゲルなどを用いる必要なく高精度な爪の３次元形状を得ることができる爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムを提供することを目的とする。

本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記指標は前記第１画像に含められ、前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出部と、前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出部と、前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出部とを更に備え、前記爪３次元形状推定部は、前記第１算出部によって算出された幅寸法の実寸法と、前記第２算出部によって算出された曲率または曲率半径の実寸法と、前記第３算出部によって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、爪３次元形状推定システムである。
本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類部を更に備える、爪３次元形状推定システムである。

本発明の一態様の爪３次元形状推定システムは、前記指標を含む前記第１画像、前記第２画像および前記第３画像の少なくともいずれかに対する偏位修正を実行する補正部を更に備えてもよい。

本発明の一態様の爪３次元形状推定システムは、前記爪の領域と前記爪以外の領域とを含む前記第１画像、前記第２画像および前記第３画像から前記爪の領域を抽出する抽出部と、前記爪の領域と前記爪以外の領域とを含む教師画像と、前記教師画像から抽出される前記爪の領域との組である教師データに基づいて、前記抽出部の教師あり学習を実行する機械学習部とを更に備えてもよい。

本発明の一態様の爪３次元形状推定システムでは、前記爪３次元形状推定部は、前記爪の３次元形状に基づいて、前記爪の３次元形状データを生成してもよい。

本発明の一態様は、前記爪３次元形状推定部によって生成された前記爪の３次元形状データは、ネイルチップの作成に利用される、爪３次元形状推定システムの利用方法である。

本発明の一態様の爪３次元形状推定システムの利用方法では、０．５ｍｍ～１ｍｍの厚さの前記ネイルチップが作成されてもよい。

本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記指標は前記第１画像に含められ、前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出部と、前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出部と、前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出部とを更に備え、前記爪３次元形状推定部は、前記第１算出部によって算出された幅寸法の実寸法と、前記第２算出部によって算出された曲率または曲率半径の実寸法と、前記第３算出部によって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、端末装置である。
本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類部を更に備える、端末装置である。

本発明の一態様の端末装置は、前記第１画像と前記第２画像と前記第３画像とを撮像する撮像部と、通信部とを更に備え、前記爪３次元形状推定部は、前記爪の３次元形状に基づいて、前記爪の３次元形状データを生成し、前記通信部は、前記爪３次元形状推定部によって生成された前記爪の３次元形状データを前記端末装置の外部に送信してもよい。

本発明の一態様の端末装置は、前記第１画像、前記第２画像および前記第３画像のいずれかが前記撮像部によって撮像される時に前記撮像部による撮像対象の画像を表示する表示部を更に備え、前記表示部は、前記第１画像、前記第２画像および前記第３画像のいずれかが前記撮像部によって撮像される時に、前記撮像対象の画像を表示すると共に、ガイドを表示してもよい。

本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記指標は前記第１画像に含められ、前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出ステップと、前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出ステップと、前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出ステップとを更に備え、前記爪３次元形状推定ステップでは、前記第１算出ステップによって算出された幅寸法の実寸法と、前記第２算出ステップによって算出された曲率または曲率半径の実寸法と、前記第３算出ステップによって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、爪３次元形状推定方法である。
本発明の一態様は、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを備え、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類ステップを更に備える、爪３次元形状推定方法である。

本発明の一態様は、コンピュータに、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを実行させるためのプログラムであって、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記指標は前記第１画像に含められ、前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出ステップと、前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出ステップと、前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出ステップとを実行させるためのプログラムであって、前記爪３次元形状推定ステップでは、前記第１算出ステップによって算出された幅寸法の実寸法と、前記第２算出ステップによって算出された曲率または曲率半径の実寸法と、前記第３算出ステップによって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、プログラムである。
本発明の一態様は、コンピュータに、手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを実行させるためのプログラムであって、前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類ステップを実行させるための、プログラムである。

本発明によれば、３次元レーザスキャナ、型取り用シリコンゲルなどを用いる必要なく高精度な爪の３次元形状を得ることができる爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムを提供することができる。

爪および指の構造を説明するための図である。 第１実施形態の爪３次元形状推定システムの概略構成の一例を示す図である。 ユーザの右手の甲側から撮像部によって撮像されたユーザの右手の親指の爪を含む画像（第１画像）の一例を示す図である。 ユーザの右手の甲側から撮像部によって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪を含む画像（第１画像）、および、ユーザの左手の甲側から撮像部によって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪を含む画像（第１画像）の一例を示す図である。 ユーザの右手の親指の爪先の側から撮像部によって撮像されたユーザの右手の親指の爪を含む画像（第２画像）の一例を示す図である。 ユーザの右手の指の爪先の側から撮像部によって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪を含む画像（第２画像）、および、ユーザの左手の指の爪先の側から撮像部によって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪を含む画像（第２画像）の一例を示す図である。 ユーザの右手の親指の左側爪甲縁の側から撮像部によって撮像されたユーザの右手の親指の爪を含む画像（第３画像）の一例を示す図である。 ユーザの右手の指の左側爪甲縁Ｎの側から撮像部によって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪Ｎを含む画像（第３画像）、および、ユーザの左手の指の右側爪甲縁の側から撮像部によって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪Ｎを含む画像（第３画像）の一例を示す図である。 補正部による偏位修正が必要な第１画像の一例を示す図である。 抽出部によって図３に示す第１画像から抽出された爪の領域を示す図である。 抽出部によって図５に示す第２画像から抽出された爪の領域を示す図である。 抽出部によって図７に示す第３画像から抽出された爪の領域を示す図である。 第１実施形態の爪３次元形状推定システムにおいて実行される処理の一例を説明するためのシーケンス図である。 第１実施形態の爪３次元形状推定システムの第１適用例において実行される処理の一例を説明するための図である。 第１実施形態の爪３次元形状推定システムの第２適用例において実行される処理の一例を説明するための図である。 第２実施形態の端末装置の概略構成の一例を示す図である。 第２実施形態の端末装置において実行される処理の一例を説明するためのフローチャートである。

本発明の爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムの実施形態を説明する前に、本発明の爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムが適用される爪および爪を有する指の構造について説明する。

図１は爪Ｎおよび指Ｆの構造を説明するための図である。詳細には、図１（Ａ）は手の甲側から見た爪Ｎおよび指Ｆを示している。図１（Ｂ）は図１（Ａ）のＡ－Ａ線に沿った断面図、図１（Ｃ）は図１（Ａ）のＢ－Ｂ線に沿った断面図である。
図１に示すように、指Ｆは、爪Ｎと、爪母（ネイルマトリクス）Ｆ１と、爪床（ネイルベッド）Ｆ２と、後爪郭（ネイルフォルド）Ｆ３と、側爪郭（サイドウォール）Ｆ４と、爪溝（ネイルグルーブ）Ｆ５と、爪下皮（ハイポニキウム）Ｆ６と、爪上皮（エポニキウム）Ｆ７と、末節骨Ｆ８と、中節骨Ｆ９と、側骨間靭帯Ｆ１０とを備えている。
爪Ｎは、爪根（ネイルルート）Ｎ１と、爪甲（ネイルプレート）Ｎ２と、爪半月（ヌルーラ）Ｎ３と、爪先（フリーエッジ）Ｎ４と、黄線（イエローライン）Ｎ５と、右側爪甲縁（右サイドライン）Ｎ６と、左側爪甲縁（左サイドライン）Ｎ７とを備えている。

爪母Ｆ１は、爪Ｎを形成する部分であり、血管と神経とが通っている。爪床Ｆ２は、皮下組織の一部であり、爪Ｎの爪甲Ｎ２を支える役割を有する。後爪郭Ｆ３は、爪Ｎの爪根Ｎ１を覆って保護する皮膚の部分であり、爪Ｎの爪甲Ｎ２を根元で固定する役割を有する。側爪郭Ｆ４は、爪Ｎの右側（図１（Ａ）および図１（Ｃ）の右側）および左側（図１（Ａ）および図１（Ｃ）の左側）に位置する皮膚の部分であり、爪Ｎを支える役割と、爪Ｎを衝撃から保護する役割とを有する。爪溝Ｆ５は、爪床Ｆ２と側爪郭Ｆ４との間に位置する溝であり、爪Ｎを支える役割を有する。
爪下皮Ｆ６は、爪床Ｆ２と爪Ｎの爪甲Ｎ２との間に位置する皮膚の部分であり、細菌などの侵入を防ぐ役割を有する。爪上皮Ｆ７は、後爪郭Ｆ３に隣接する皮膚の部分であり、後爪郭Ｆ３を保護し、細菌などの侵入を防ぐ役割を有する。末節骨Ｆ８は、指Ｆの先端の骨である。中節骨Ｆ９は、末節骨Ｆ８よりも指Ｆの根元側（図１（Ｂ）の左側）に位置する骨である。側骨間靭帯Ｆ１０は、末節骨Ｆ８に沿って指Ｆの根元側の側に延びている靭帯である。
爪根Ｎ１は、爪Ｎの根元の部分である。爪甲Ｎ２は、爪Ｎのうちの爪床Ｆ２の上に位置する部分である。爪半月Ｎ３は、爪甲Ｎ２のうちの根元側（図１（Ａ）の下側、図１（Ｂ）の左側）の端に位置する部分であり、水分含有量が多い乳白色の部分である。爪先Ｎ４は、爪Ｎのうちの爪床Ｆ２から離れて指Ｆの先端側（図１（Ａ）の上側、図１（Ｂ）の右側）に突出している部分であり、水分含有量が少なく不透明の部分である。黄線Ｎ５は、爪甲Ｎ２のうちの爪先Ｎ４の根元側（図１（Ａ）の下側、図１（Ｂ）の左側）に位置する部分であり、黄白色を帯びた弓状の線である。右側爪甲縁Ｎ６は、爪甲Ｎ２の右側面に相当する部分である。左側爪甲縁Ｎ７は、爪甲Ｎ２の左側面に相当する部分である。

以下、本発明の爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムの実施形態について説明する。

＜第１実施形態＞
図２は第１実施形態の爪３次元形状推定システム１の概略構成の一例を示す図である。
図２に示す例では、爪３次元形状推定システム１が、端末装置１１と、サーバ装置１２とを備えている。
端末装置１１は、撮像部１１Ａと、通信部１１Ｂと、表示部１１Ｅとを備えている。撮像部１１Ａは、例えば爪Ｎ（図１参照）を含む画像（つまり、指Ｆ（図１参照）を含む画像）を撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、第１画像としての、ユーザの右手の親指の爪Ｎを含む画像を、ユーザの右手の甲側から撮像する。
図２に示す例では、撮像部１１Ａが、静止画モードにおいて撮影を行うが、他の例では、撮像部１１Ａが、動画モードにおいて撮影を行ってもよい。

図３はユーザの右手の甲側から撮像部１１Ａによって撮像されたユーザの右手の親指の爪Ｎを含む画像（第１画像）の一例を示す図である。
図３に示す例では、ユーザの右手の甲側から撮像部１１Ａによって撮像された画像（第１画像）に、ユーザの右手の親指の爪Ｎが含まれるのみならず、親指のうちの爪以外の部分も含まれる。また、ユーザの右手の甲側から撮像部１１Ａによって撮像された画像には、ユーザの右手の親指の爪Ｎの実寸法の算出に利用される指標Ｄ１～Ｄ４が含められる。
図３に示す例では、４個の円形の指標Ｄ１と円形の指標Ｄ２と円形の指標Ｄ３と円形の指標Ｄ４とが用いられているが、他の例では、例えば特許文献１に記載されている指標のように、任意の数かつ任意の形状の公知の指標を用いてもよい。

図４はユーザの右手の甲側から撮像部１１Ａによって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪Ｎを含む画像（第１画像）、および、ユーザの左手の甲側から撮像部１１Ａによって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪Ｎを含む画像（第１画像）の一例を示す図である。詳細には、図４（Ａ）はユーザの右手の人差し指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｂ）はユーザの右手の中指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｃ）はユーザの右手の薬指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｄ）はユーザの右手の小指の爪Ｎを含む画像（第１画像）を示している。図４（Ｅ）はユーザの左手の親指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｆ）はユーザの左手の人差し指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｇ）はユーザの左手の中指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｈ）はユーザの左手の薬指の爪Ｎを含む画像（第１画像）を示しており、図４（Ｉ）はユーザの左手の小指の爪Ｎを含む画像（第１画像）を示している。

第１実施形態の爪３次元形状推定システム１によってユーザの右手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の甲側から、ユーザの右手の人差し指の爪Ｎを含む画像（図４（Ａ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の甲側から、ユーザの右手の中指の爪Ｎを含む画像（図４（Ｂ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の甲側から、ユーザの右手の薬指の爪Ｎを含む画像（図４（Ｃ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の甲側から、ユーザの右手の小指の爪Ｎを含む画像（図４（Ｄ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の甲側から、ユーザの左手の親指の爪Ｎを含む画像（図４（Ｅ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の甲側から、ユーザの左手の人差し指の爪Ｎを含む画像（図４（Ｆ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の甲側から、ユーザの左手の中指の爪Ｎを含む画像（図４（Ｇ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の甲側から、ユーザの左手の薬指の爪Ｎを含む画像（図４（Ｈ）参照）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の甲側から、ユーザの左手の小指の爪Ｎを含む画像（図４（Ｉ）参照）を第１画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の甲側から、ユーザの右足の親指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の甲側から、ユーザの右足の人差し指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の甲側から、ユーザの右足の中指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の甲側から、ユーザの右足の薬指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の甲側から、ユーザの右足の小指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の甲側から、ユーザの左足の親指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の甲側から、ユーザの左足の人差し指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の甲側から、ユーザの左足の中指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の甲側から、ユーザの左足の薬指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の甲側から、ユーザの左足の小指の爪Ｎを含む画像（図示せず）を第１画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、第２画像としての、ユーザの右手の親指の爪Ｎを含む画像を、ユーザの右手の親指の爪先Ｎ４（図１参照）の側から撮像する。
図５はユーザの右手の親指の爪先Ｎ４の側から撮像部１１Ａによって撮像されたユーザの右手の親指の爪Ｎを含む画像（第２画像）の一例を示す図である。
図５に示す例では、ユーザの右手の親指の爪先Ｎ４の側から撮像部１１Ａによって撮像された画像（第２画像）に、ユーザの右手の親指の爪Ｎが含まれるのみならず、親指のうちの爪以外の部分なども含まれる。

図６はユーザの右手の指の爪先Ｎ４の側から撮像部１１Ａによって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪Ｎを含む画像（第２画像）、および、ユーザの左手の指の爪先Ｎ４の側から撮像部１１Ａによって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪Ｎを含む画像（第２画像）の一例を示す図である。詳細には、図６（Ａ）はユーザの右手の人差し指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｂ）はユーザの右手の中指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｃ）はユーザの右手の薬指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｄ）はユーザの右手の小指の爪Ｎを含む画像（第２画像）を示している。図６（Ｅ）はユーザの左手の親指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｆ）はユーザの左手の人差し指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｇ）はユーザの左手の中指の爪Ｎを含む画像（第２画像）を示しており、図６（Ｈ）はユーザの左手の薬指の爪Ｎを含む画像を示しており、図６（Ｉ）はユーザの左手の小指の爪Ｎを含む画像（第２画像）を示している。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の人差し指の爪先Ｎ４の側から、ユーザの右手の人差し指の爪Ｎを含む画像（図６（Ａ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の中指の爪先Ｎ４の側から、ユーザの右手の中指の爪Ｎを含む画像（図６（Ｂ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の薬指の爪先Ｎ４の側から、ユーザの右手の薬指の爪Ｎを含む画像（図６（Ｃ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の小指の爪先Ｎ４の側から、ユーザの右手の小指の爪Ｎを含む画像（図６（Ｄ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の親指の爪先Ｎ４の側から、ユーザの左手の親指の爪Ｎを含む画像（図６（Ｅ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の人差し指の爪先Ｎ４の側から、ユーザの左手の人差し指の爪Ｎを含む画像（図６（Ｆ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の中指の爪先Ｎ４の側から、ユーザの左手の中指の爪Ｎを含む画像（図６（Ｇ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の薬指の爪先Ｎ４の側から、ユーザの左手の薬指の爪Ｎを含む画像（図６（Ｈ）参照）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の小指の爪先Ｎ４の側から、ユーザの左手の小指の爪Ｎを含む画像（図６（Ｉ）参照）を第２画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の親指の爪先Ｎ４の側から、ユーザの右足の親指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の人差し指の爪先Ｎ４の側から、ユーザの右足の人差し指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の中指の爪先Ｎ４の側から、ユーザの右足の中指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の薬指の爪先Ｎ４の側から、ユーザの右足の薬指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の小指の爪先Ｎ４の側から、ユーザの右足の小指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の親指の爪先Ｎ４の側から、ユーザの左足の親指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の人差し指の爪先Ｎ４の側から、ユーザの左足の人差し指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の中指の爪先Ｎ４の側から、ユーザの左足の中指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の薬指の爪先Ｎ４の側から、ユーザの左足の薬指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の小指の爪先Ｎ４の側から、ユーザの左足の小指の爪Ｎを含む画像（図示せず）を第２画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、第３画像としての、ユーザの右手の親指の爪Ｎを含む画像を、ユーザの右手の親指の左側爪甲縁Ｎ７（図１参照）の側から撮像する。
図７はユーザの右手の親指の左側爪甲縁Ｎ７の側から撮像部１１Ａによって撮像されたユーザの右手の親指の爪Ｎを含む画像（第３画像）の一例を示す図である。
図７に示す例では、ユーザの右手の親指の左側爪甲縁Ｎ７の側から撮像部１１Ａによって撮像された画像（第３画像）に、ユーザの右手の親指の爪Ｎが含まれるのみならず、親指のうちの爪以外の部分なども含まれる。
他の例では、第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の親指の爪Ｎの３次元形状を得る場合に、撮像部１１Ａが、第３画像としての、ユーザの右手の親指の爪Ｎを含む画像を、ユーザの右手の親指の右側爪甲縁Ｎ６（図１参照）の側から撮像してもよい。

図８はユーザの右手の指の左側爪甲縁Ｎ７の側から撮像部１１Ａによって撮像されたユーザの右手の人差し指、中指、薬指、小指の爪Ｎを含む画像（第３画像）、および、ユーザの左手の指の右側爪甲縁Ｎ６の側から撮像部１１Ａによって撮像されたユーザの左手の親指、人差し指、中指、薬指、小指の爪Ｎを含む画像（第３画像）の一例を示す図である。詳細には、図８（Ａ）はユーザの右手の人差し指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｂ）はユーザの右手の中指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｃ）はユーザの右手の薬指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｄ）はユーザの右手の小指の爪Ｎを含む画像（第３画像）を示している。図８（Ｅ）はユーザの左手の親指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｆ）はユーザの左手の人差し指の爪Ｎを含む画（第３画像）像を示しており、図８（Ｇ）はユーザの左手の中指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｈ）はユーザの左手の薬指の爪Ｎを含む画像（第３画像）を示しており、図８（Ｉ）はユーザの左手の小指の爪Ｎを含む画像（第３画像）を示している。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の人差し指の左側爪甲縁Ｎ７の側から、ユーザの右手の人差し指の爪Ｎを含む画像（図８（Ａ）参照）を第３画像として撮像するか、あるいは、ユーザの右手の人差し指の右側爪甲縁Ｎ６の側から、ユーザの右手の人差し指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の中指の左側爪甲縁Ｎ７の側から、ユーザの右手の中指の爪Ｎを含む画像（図８（Ｂ）参照）を第３画像として撮像するか、あるいは、ユーザの右手の中指の右側爪甲縁Ｎ６の側から、ユーザの右手の中指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の薬指の左側爪甲縁Ｎ７の側から、ユーザの右手の薬指の爪Ｎを含む画像（図８（Ｃ）参照）を第３画像として撮像するか、あるいは、ユーザの右手の薬指の右側爪甲縁Ｎ６の側から、ユーザの右手の薬指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右手の小指の左側爪甲縁Ｎ７の側から、ユーザの右手の小指の爪Ｎを含む画像（図８（Ｄ）参照）を第３画像として撮像するか、あるいは、ユーザの右手の小指の右側爪甲縁Ｎ６の側から、ユーザの右手の小指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の親指の右側爪甲縁Ｎ６の側から、ユーザの左手の親指の爪Ｎを含む画像（図８（Ｅ）参照）を第３画像として撮像するか、あるいは、ユーザの左手の親指の左側爪甲縁Ｎ７の側から、ユーザの左手の親指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の人差し指の右側爪甲縁Ｎ６の側から、ユーザの左手の人差し指の爪Ｎを含む画像（図８（Ｆ）参照）を第３画像として撮像するか、あるいは、ユーザの左手の人差し指の左側爪甲縁Ｎ７の側から、ユーザの左手の人差し指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の中指の右側爪甲縁Ｎ６の側から、ユーザの左手の中指の爪Ｎを含む画像（図８（Ｇ）参照）を第３画像として撮像するか、あるいは、ユーザの左手の中指の左側爪甲縁Ｎ７の側から、ユーザの左手の中指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の薬指の右側爪甲縁Ｎ６の側から、ユーザの左手の薬指の爪Ｎを含む画像（図８（Ｈ）参照）を第３画像として撮像するか、あるいは、ユーザの左手の薬指の左側爪甲縁Ｎ７の側から、ユーザの左手の薬指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左手の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左手の小指の右側爪甲縁Ｎ６の側から、ユーザの左手の小指の爪Ｎを含む画像（図８（Ｉ）参照）を第３画像として撮像するか、あるいは、ユーザの左手の小指の左側爪甲縁Ｎ７の側から、ユーザの左手の小指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の親指の左側爪甲縁Ｎ７の側または右側爪甲縁Ｎ６の側から、ユーザの右足の親指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の人差し指の左側爪甲縁Ｎ７の側または右側爪甲縁Ｎ６の側から、ユーザの右足の人差し指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の中指の左側爪甲縁Ｎ７の側または右側爪甲縁Ｎ６の側から、ユーザの右足の中指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の薬指の左側爪甲縁Ｎ７の側または右側爪甲縁Ｎ６の側から、ユーザの右足の薬指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの右足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの右足の小指の左側爪甲縁Ｎ７の側または右側爪甲縁Ｎ６の側から、ユーザの右足の小指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。

第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の親指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の親指の右側爪甲縁Ｎ６の側または左側爪甲縁Ｎ７の側から、ユーザの左足の親指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の人差し指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の人差し指の右側爪甲縁Ｎ６の側または左側爪甲縁Ｎ７の側から、ユーザの左足の人差し指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の中指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の中指の右側爪甲縁Ｎ６の側または左側爪甲縁Ｎ７の側から、ユーザの左足の中指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の薬指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の薬指の右側爪甲縁Ｎ６の側または左側爪甲縁Ｎ７の側から、ユーザの左足の薬指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。
第１実施形態の爪３次元形状推定システム１によって例えばユーザの左足の小指の爪Ｎの３次元形状を得る場合には、撮像部１１Ａが、ユーザの左足の小指の右側爪甲縁Ｎ６の側または左側爪甲縁Ｎ７の側から、ユーザの左足の小指の爪Ｎを含む画像（図示せず）を第３画像として撮像する。

図２に示す例では、通信部１１Ｂが、例えば撮像部１１Ａによって撮像された爪Ｎを含む画像（第１画像、第２画像および第３画像）のデータを、例えばネットワーク（図示せず）を介してサーバ装置１２に送信する。
表示部１１Ｅは、例えば爪Ｎを含む画像（第１画像、第２画像および第３画像のいずれか）の撮像時に、爪Ｎを含む画像（撮像対象の画像）と、ガイド（例えばガイドライン、ガイド枠など）とを表示する。端末装置１１の利用者は、表示部１１Ｅに表示されている爪Ｎとガイドとを確認しながら、撮像部１１Ａによって爪Ｎ（つまり、可能な限り拡大された状態の爪Ｎ）を含む画像を撮像することができる。
図２に示す例では、端末装置１１が通信部１１Ｂを備えているが、他の例では、端末装置１１が通信部１１Ｂを備えていなくてもよい。この例では、撮像部１１Ａによって撮像された爪Ｎを含む画像のデータが、端末装置１１とは別個に設けられた通信装置（図示せず）によって、例えばネットワークを介してサーバ装置１２に送信される。

図２に示す例では、サーバ装置１２が、通信部１２Ａと、機械学習部１２Ｂと、第１画像取得部１２Ｃ１と、第２画像取得部１２Ｃ２と、第３画像取得部１２Ｃ３と、演算部１２Ｄとを備えている。
通信部１２Ａは、例えば端末装置１１から送信された爪Ｎを含む画像（第１画像、第２画像および第３画像）（図３～図８参照）のデータなどを受信する。機械学習部１２Ｂは、後述する教師あり学習を実行する。

第１画像取得部１２Ｃ１は、端末装置１１の撮像部１１Ａによって撮像された第１画像を取得する。
詳細には、第１実施形態の爪３次元形状推定システム１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１が、撮像部１１Ａによってユーザの右手の甲側から撮像された、ユーザの右手の親指の爪Ｎ（図３参照）と指標Ｄ１～Ｄ４（図３参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の人差し指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの右手の甲側から撮像された、ユーザの右手の人差し指の爪Ｎ（図４（Ａ）参照）と指標Ｄ１～Ｄ４（図４（Ａ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の中指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの右手の甲側から撮像された、ユーザの右手の中指の爪Ｎ（図４（Ｂ）参照）と指標Ｄ１～Ｄ４（図４（Ｂ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の薬指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの右手の甲側から撮像された、ユーザの右手の薬指の爪Ｎ（図４（Ｃ）参照）と指標Ｄ１～Ｄ４（図４（Ｃ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の小指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの右手の甲側から撮像された、ユーザの右手の小指の爪Ｎ（図４（Ｄ）参照）と指標Ｄ１～Ｄ４（図４（Ｄ）参照）とを含む第１画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの左手の親指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左手の甲側から撮像された、ユーザの左手の親指の爪Ｎ（図４（Ｅ）参照）と指標Ｄ１～Ｄ４（図４（Ｅ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の人差し指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左手の甲側から撮像された、ユーザの左手の人差し指の爪Ｎ（図４（Ｆ）参照）と指標Ｄ１～Ｄ４（図４（Ｆ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の中指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左手の甲側から撮像された、ユーザの左手の中指の爪Ｎ（図４（Ｇ）参照）と指標Ｄ１～Ｄ４（図４（Ｇ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の薬指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左手の甲側から撮像された、ユーザの左手の薬指の爪Ｎ（図４（Ｈ）参照）と指標Ｄ１～Ｄ４（図４（Ｈ）参照）とを含む第１画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の小指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左手の甲側から撮像された、ユーザの左手の小指の爪Ｎ（図４（Ｉ）参照）と指標Ｄ１～Ｄ４（図４（Ｉ）参照）とを含む第１画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの右足の甲側から撮像された、ユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎ（図示せず）と指標Ｄ１～Ｄ４（図示せず）とを含む第１画像をそれぞれ取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第１画像取得部１２Ｃ１は、撮像部１１Ａによってユーザの左足の甲側から撮像された、ユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎ（図示せず）と指標Ｄ１～Ｄ４（図示せず）とを含む第１画像をそれぞれ取得する。

第２画像取得部１２Ｃ２は、端末装置１１の撮像部１１Ａによって撮像された第２画像を取得する。
詳細には、第１実施形態の爪３次元形状推定システム１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２が、撮像部１１Ａによってユーザの右手の親指の爪先Ｎ４（図１参照）の側から撮像された、ユーザの右手の親指の爪Ｎ（図５参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の人差し指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右手の人差し指の爪先Ｎ４の側から撮像された、ユーザの右手の人差し指の爪Ｎ（図６（Ａ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の中指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右手の中指の爪先Ｎ４の側から撮像された、ユーザの右手の中指の爪Ｎ（図６（Ｂ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の薬指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右手の薬指の爪先Ｎ４の側から撮像された、ユーザの右手の薬指の爪Ｎ（図６（Ｃ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の小指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右手の小指の爪先Ｎ４の側から撮像された、ユーザの右手の小指の爪Ｎ（図６（Ｄ）参照）を含む第２画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの左手の親指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左手の親指の爪先Ｎ４（図１参照）の側から撮像された、ユーザの左手の親指の爪Ｎ（図６（Ｅ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の人差し指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左手の人差し指の爪先Ｎ４の側から撮像された、ユーザの左手の人差し指の爪Ｎ（図６（Ｆ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の中指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左手の中指の爪先Ｎ４の側から撮像された、ユーザの左手の中指の爪Ｎ（図６（Ｇ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の薬指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左手の薬指の爪先Ｎ４の側から撮像された、ユーザの左手の薬指の爪Ｎ（図６（Ｈ）参照）を含む第２画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の小指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左手の小指の爪先Ｎ４の側から撮像された、ユーザの左手の小指の爪Ｎ（図６（Ｉ）参照）を含む第２画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右足の指の爪先Ｎ４（図１参照）の側から撮像された、ユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎ（図示せず）を含む第２画像をそれぞれ取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの左足の指の爪先Ｎ４の側から撮像された、ユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎ（図示せず）を含む第２画像をそれぞれ取得する。

第３画像取得部１２Ｃ３は、端末装置１１の撮像部１１Ａによって撮像された第３画像を取得する。
詳細には、第１実施形態の爪３次元形状推定システム１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３が、撮像部１１Ａによってユーザの右手の親指の左側爪甲縁Ｎ７（図１参照）の側から撮像されたユーザの右手の親指の爪Ｎ（図７参照）を含む第３画像、または、撮像部１１Ａによってユーザの右手の親指の右側爪甲縁Ｎ６（図１参照）の側から撮像されたユーザの右手の親指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の人差し指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの右手の人差し指の左側爪甲縁Ｎ７の側から撮像されたユーザの右手の人差し指の爪Ｎ（図８（Ａ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの右手の人差し指の右側爪甲縁Ｎ６の側から撮像されたユーザの右手の人差し指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の中指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの右手の中指の左側爪甲縁Ｎ７の側から撮像されたユーザの右手の中指の爪Ｎ（図８（Ｂ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの右手の中指の右側爪甲縁Ｎ６の側から撮像されたユーザの右手の中指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の薬指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの右手の薬指の左側爪甲縁Ｎ７の側から撮像されたユーザの右手の薬指の爪Ｎ（図８（Ｃ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの右手の薬指の右側爪甲縁Ｎ６の側から撮像されたユーザの右手の薬指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの右手の小指の爪Ｎの３次元形状を得る場合に、第２画像取得部１２Ｃ２は、撮像部１１Ａによってユーザの右手の小指の左側爪甲縁Ｎ７の側から撮像されたユーザの右手の小指の爪Ｎ（図８（Ｄ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの右手の小指の右側爪甲縁Ｎ６の側から撮像されたユーザの右手の小指の爪Ｎを含む第３画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの左手の親指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左手の親指の右側爪甲縁Ｎ６（図１参照）の側から撮像されたユーザの左手の親指の爪Ｎ（図８（Ｅ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの左手の親指の左側爪甲縁Ｎ７（図１参照）の側から撮像されたユーザの左手の親指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の人差し指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左手の人差し指の右側爪甲縁Ｎ６の側から撮像されたユーザの左手の人差し指の爪Ｎ（図８（Ｆ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの左手の人差し指の左側爪甲縁Ｎ７の側から撮像されたユーザの左手の人差し指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の中指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左手の中指の右側爪甲縁Ｎ６の側から撮像されたユーザの左手の中指の爪Ｎ（図８（Ｇ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの左手の中指の左側爪甲縁Ｎ７の側から撮像されたユーザの左手の中指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の薬指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左手の薬指の右側爪甲縁Ｎ６の側から撮像されたユーザの左手の薬指の爪Ｎ（図８（Ｈ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの左手の薬指の左側爪甲縁Ｎ７の側から撮像されたユーザの左手の薬指の爪Ｎを含む第３画像を取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左手の小指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左手の小指の右側爪甲縁Ｎ６の側から撮像されたユーザの左手の小指の爪Ｎ（図８（Ｉ）参照）を含む第３画像、または、撮像部１１Ａによってユーザの左手の小指の左側爪甲縁Ｎ７の側から撮像されたユーザの左手の小指の爪Ｎを含む第３画像を取得する。

第１実施形態の爪３次元形状推定システム１によってユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの右足の指の左側爪甲縁Ｎ７（図１参照）の側から撮像されたユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎを含む第３画像をそれぞれ取得するか、あるいは、撮像部１１Ａによってユーザの右足の指の右側爪甲縁Ｎ６（図１参照）の側から撮像されたユーザの右足の親指、人差し指、中指、薬指および小指の爪Ｎを含む第３画像をそれぞれ取得する。
第１実施形態の爪３次元形状推定システム１によってユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎの３次元形状を得る場合に、第３画像取得部１２Ｃ３は、撮像部１１Ａによってユーザの左足の指の右側爪甲縁Ｎ６の側から撮像されたユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎを含む第３画像をそれぞれ取得するか、あるいは、撮像部１１Ａによってユーザの左足の指の左側爪甲縁Ｎ７の側から撮像されたユーザの左足の親指、人差し指、中指、薬指および小指の爪Ｎを含む第３画像をそれぞれ取得する。

図３～図８に示す例では、爪Ｎの実寸法の算出に利用される指標Ｄ１～Ｄ４が第１画像に含められているが、他の例では、指標Ｄ１～Ｄ４が第２画像に含められてもよい。更に他の例では、指標Ｄ１～Ｄ４が第３画像に含められてもよい。望ましいのは第１画像に含められることである。

図２に示す例では、演算部１２Ｄが、第１画像取得部１２Ｃ１によって取得された第１画像と、第２画像取得部１２Ｃ２によって取得された第２画像と、第３画像取得部１２Ｃ３によって取得された第３画像とに基づいて、ユーザの指の爪Ｎの３次元形状を得るために必要な演算を行う。演算部１２Ｄは、補正部１２Ｄ１と、抽出部１２Ｄ２と、第１算出部１２Ｄ３１と、第２算出部１２Ｄ３２と、第３算出部１２Ｄ３３と、分類部１２Ｄ４と、爪３次元形状推定部１２Ｄ５とを備えている。
補正部１２Ｄ１は、指標Ｄ１～Ｄ４（図３および図４参照）を含む第１画像に対する偏位修正を実行する。詳細には、補正部１２Ｄ１は、例えば「独立偏位修正法による多重撮影画像の特徴探索」（https://www.jstage.jst.go.jp/article/jsprs1975/47/2/47_2_16/_pdf/-char/ja）、「平面より構成された被写体のディジタル偏位修正写真の段階的作成」
（http://library.jsce.or.jp/jsce/open/00037/476/476-121558.pdf）などに記載されている公知の技術と同様の偏位修正を、指標Ｄ１～Ｄ４を含む第１画像に対して実行する。

図９は補正部１２Ｄ１による偏位修正が必要な第１画像の一例を示す図である。
図９に示す第１画像は、端末装置１１の撮像部１１Ａの光軸と、指標Ｄ１～Ｄ４が印刷されたシートの法線とが平行になっていない状態で、撮像部１１Ａによって撮像されたものである。仮に、図９に示す第１画像がそのまま用いられると、爪３次元形状推定システム１によって不正確な爪Ｎの３次元形状が推定されてしまう。
そこで、第１実施形態の爪３次元形状推定システム１では、補正部１２Ｄ１が、図９に示すような第１画像に対して偏位修正を実行する。その結果、図９に示すような第１画像から、図３および図４に示すような第１画像が得られる。
つまり、第１実施形態の爪３次元形状推定システム１では、図９に示すような第１画像に対して偏位修正を実行することによって得られる図３および図４に示すような第１画像を用いて、爪Ｎの３次元形状が推定される。そのため、第１実施形態の爪３次元形状推定システム１では、偏位修正が実行されない場合よりも高精度な爪Ｎの３次元形状を得ることができる。

図２に示す例では、抽出部１２Ｄ２が、爪Ｎ（図３および図４参照）の領域と爪以外の領域とを含む第１画像から爪Ｎの領域を抽出する。
図１０は抽出部１２Ｄ２によって図３に示す第１画像（爪Ｎの領域と爪以外の領域とを含む第１画像）から抽出された爪Ｎの領域を示す図である。
詳細には、抽出部１２Ｄ２が、図３に示す爪Ｎの領域と爪以外の領域とを含む第１画像から、図１０に示す爪Ｎの領域を抽出する前に、機械学習部１２Ｂが、抽出部１２Ｄ２の教師あり学習を実行する。機械学習部１２Ｂは、爪Ｎの領域と爪以外の領域とを含む教師画像（図示せず）と、教師画像から抽出される爪Ｎの領域（つまり、正解）との組である教師データに基づいて、抽出部１２Ｄ２の教師あり学習を実行する。

また、抽出部１２Ｄ２は、爪Ｎ（図５および図６参照）の領域と爪以外の領域とを含む第２画像から爪Ｎの領域を抽出する。
図１１は抽出部１２Ｄ２によって図５に示す第２画像（爪Ｎの領域と爪以外の領域とを含む第２画像）から抽出された爪Ｎの領域を示す図である。
抽出部１２Ｄ２が、図５に示す爪Ｎの領域と爪以外の領域とを含む第２画像から、図１１に示す爪Ｎの領域を抽出する前に、機械学習部１２Ｂは、上述した抽出部１２Ｄ２の教師あり学習を実行する。

また、抽出部１２Ｄ２は、爪Ｎ（図７および図８参照）の領域と爪以外の領域とを含む第３画像から爪Ｎの領域を抽出する。
図１２は抽出部１２Ｄ２によって図７に示す第３画像（爪Ｎの領域と爪以外の領域とを含む第３画像）から抽出された爪Ｎの領域を示す図である。
抽出部１２Ｄ２が、図７に示す爪Ｎの領域と爪以外の領域とを含む第３画像から、図１２に示す爪Ｎの領域を抽出する前に、機械学習部１２Ｂは、上述した抽出部１２Ｄ２の教師あり学習を実行する。

図２に示す例では、第１算出部１２Ｄ３１が、図１０に示す第１画像（爪Ｎの領域の抽出後の第１画像）と、図１１に示す第２画像（爪Ｎの領域の抽出後の第２画像）とに基づいて、爪Ｎの幅寸法ＷＮ（図１０参照）の実寸法を算出する。
第２算出部１２Ｄ３２は、図１０に示す第１画像（爪Ｎの領域の抽出後の第１画像）と、図１２に示す第３画像（爪Ｎの領域の抽出後の第３画像）とに基づいて、図１２に示す第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
第３算出部１２Ｄ３３は、図１０に示す第１画像（爪Ｎの領域の抽出後の第１画像）と、図１１に示す第２画像（爪Ｎの領域の抽出後の第２画像）とに基づいて、図１１に示す第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

分類部１２Ｄ４は、図３および図１０に示す第１画像に含まれる爪Ｎの爪甲Ｎ２（図１参照）と爪上皮Ｆ７（図１参照）との境界線ＢＤ（図３参照）の形状を分類する。詳細には、分類部１２Ｄ４は、境界線ＢＤの形状を、四角形状、丸形状および尖り形状など予め決められたカテゴリーのいずれかに分類する。
詳細には、分類部１２Ｄ４が分類を実行する前に、機械学習部１２Ｂが、分類部１２Ｄ４の教師あり学習を実行する。機械学習部１２Ｂは、爪Ｎの爪甲Ｎ２と爪上皮Ｆ７とそれらの境界線ＢＤとを含む教師画像（図示せず）と、教師画像に対する分類結果（つまり、正解）との組である教師データに基づいて、分類部１２Ｄ４の教師あり学習を実行する。

爪３次元形状推定部１２Ｄ５は、第１算出部１２Ｄ３１によって算出された幅寸法ＷＮの実寸法と、第２算出部１２Ｄ３２によって算出された曲率または曲率半径の実寸法と、第３算出部１２Ｄ３３によって算出された曲率または曲率半径の実寸法とに基づいて、図１０に示す第１画像と図１１に示す第２画像と図１２に示す第３画像とに含まれる爪Ｎの３次元形状を推定する。つまり、爪３次元形状推定部１２Ｄ５は、図３および図１０に示す第１画像と、図５および図１１に示す第２画像と、図７および図１２に示す第３画像とに基づいて、爪Ｎの３次元形状を推定する。
更に、爪３次元形状推定部１２Ｄ５は、爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。

図１３は第１実施形態の爪３次元形状推定システム１において実行される処理の一例を説明するためのシーケンス図である。詳細には、図１３は第１実施形態の爪３次元形状推定システム１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合に実行される処理の一例を説明するためのシーケンス図である。
図１３に示す例では、ステップＳ１１において、端末装置１１の撮像部１１Ａが、図３に示す指標Ｄ１～Ｄ４を含む第１画像と、図５に示す第２画像と、図７に示す第３画像とを撮像する。
次いで、ステップＳ１２では、端末装置１１の通信部１１Ｂが、ステップＳ１１において撮像された第１画像のデータと、第２画像のデータと、第３画像のデータとをサーバ装置１２に送信する。

次いで、ステップＳ１３Ａでは、サーバ装置１２の第１画像取得部１２Ｃ１が、ステップＳ１１において撮像された図３に示す指標Ｄ１～Ｄ４を含む第１画像を取得する。
また、ステップＳ１３Ｂでは、サーバ装置１２の第２画像取得部１２Ｃ２が、ステップＳ１１において撮像された図５に示す第２画像を取得する。
また、ステップＳ１３Ｃでは、サーバ装置１２の第３画像取得部１２Ｃ３が、ステップＳ１１において撮像された図７に示す第３画像を取得する。

次いで、ステップＳ１４では、サーバ装置１２の補正部１２Ｄ１が、ステップＳ１３Ａにおいて取得された指標Ｄ１～Ｄ４を含む第１画像に対する偏位修正を実行する。
次いで、ステップＳ１５Ａでは、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の抽出部１２Ｄ２が、ステップＳ１４において偏位修正が実行された第１画像（爪Ｎ（図３参照）の領域と爪以外の領域とを含む第１画像）から爪Ｎの領域を抽出し、図１０に示す抽出後の第１画像を得る。
また、ステップＳ１５Ｂでは、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ１３Ｂにおいて取得された第２画像（爪Ｎ（図５参照）の領域と爪以外の領域とを含む第２画像）から爪Ｎの領域を抽出し、図１１に示す抽出後の第２画像を得る。
また、ステップＳ１５Ｃでは、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ１３Ｃにおいて取得された第３画像（爪Ｎ（図７参照）の領域と爪以外の領域とを含む第３画像）から爪Ｎの領域を抽出し、図１２に示す抽出後の第３画像を得る。

次いで、ステップＳ１６Ａでは、サーバ装置１２の第１算出部１２Ｄ３１が、ステップＳ１５Ａにおいて得られた爪Ｎ（図１０参照）の領域の抽出後の第１画像と、ステップＳ１５Ｂにおいて得られた爪Ｎ（図１１参照）の領域の抽出後の第２画像とに基づいて、爪Ｎの幅寸法ＷＮ（図１０参照）の実寸法を算出する。
また、ステップＳ１６Ｂでは、サーバ装置１２の第２算出部１２Ｄ３２が、ステップＳ１５Ａにおいて得られた爪Ｎの領域の抽出後の第１画像と、ステップＳ１５Ｃにおいて得られた爪Ｎ（図１２参照）の領域の抽出後の第３画像とに基づいて、図１２に示す第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
また、ステップＳ１６Ｃでは、サーバ装置１２の第３算出部１２Ｄ３３が、ステップＳ１５Ａにおいて得られた爪Ｎの領域の抽出後の第１画像と、ステップＳ１５Ｂにおいて得られた爪Ｎの領域の抽出後の第２画像とに基づいて、図１１に示す第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

次いで、ステップＳ１７では、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の分類部１２Ｄ４が、図３および図１０に示す第１画像に含まれる爪Ｎの爪甲Ｎ２と爪上皮Ｆ７（図１参照）との境界線ＢＤ（図３参照）の形状を分類する。
次いで、ステップＳ１８Ａでは、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、ステップＳ１６Ａにおいて算出された幅寸法ＷＮの実寸法と、ステップＳ１６Ｂにおいて算出された曲率または曲率半径の実寸法と、ステップＳ１６Ｃにおいて算出された曲率または曲率半径の実寸法とに基づいて、図１０に示す第１画像と図１１に示す第２画像と図１２に示す第３画像とに含まれる爪Ｎの３次元形状を推定する。
次いで、ステップＳ１８Ｂでは、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、ステップＳ１８Ａにおいて推定された爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。

＜適用例＞
上述した第１実施形態の爪３次元形状推定システム１は、３次元形状の推定が行われた爪Ｎにフィットするネイルチップの作成に利用される。つまり、サーバ装置１２の爪３次元形状推定部１２Ｄ５によって生成された爪Ｎの３次元形状データが、ネイルチップ（図示せず）の作成に利用される。具体的には、サーバ装置１２の爪３次元形状推定部１２Ｄ５によって生成された爪Ｎの３次元形状データを利用することによって、例えば０．５ｍｍ～１ｍｍの厚さのネイルチップが作成される。

図１４は第１実施形態の爪３次元形状推定システム１の第１適用例において実行される処理の一例を説明するための図である。
図１４に示す例では、ステップＳ１０１において、端末装置１１の爪計測アプリが起動する。
次いで、ステップＳ１０２では、端末装置１１の撮像部１１Ａが、例えばユーザの右手および左手のそれぞれの指について、爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像と、爪Ｎを含む第２画像と、爪Ｎを含む第３画像とを撮像する。
次いで、ステップＳ１０３では、端末装置１１が、ユーザによるネイルデザインの選択の入力を受け付ける。
次いで、ステップＳ１０４では、端末装置１１の通信部１１Ｂが、ステップＳ１０２において撮像された第１画像のデータと第２画像のデータと第３画像のデータとを、サーバ装置１２を有するネイルチップ提供サービス部に送信する。
また、ステップＳ１０４では、端末装置１１の通信部１１Ｂが、ステップＳ１０３において入力されたネイルデザインの情報を、サーバ装置１２を有するネイルチップ提供サービス部に送信する。

次いで、ステップＳ２０１では、サーバ装置１２を有するネイルチップ提供サービス部が、ステップＳ１０４において送信された第１画像のデータと第２画像のデータと第３画像のデータとネイルデザインの情報とを受信する。
次いで、ステップＳ２０２では、サーバ装置１２の第１画像取得部１２Ｃ１が、ステップＳ１０２において撮像された爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像を取得する。
また、ステップＳ２０２では、サーバ装置１２の第２画像取得部１２Ｃ２が、ステップＳ１０２において撮像された爪Ｎを含む第２画像を取得する。
また、ステップＳ２０２では、サーバ装置１２の第３画像取得部１２Ｃ３が、ステップＳ１０２において撮像された爪Ｎを含む第３画像を取得する。

次いで、ステップＳ２０３では、サーバ装置１２の補正部１２Ｄ１が、ステップＳ２０２において取得された爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像に対する偏位修正を実行する。
次いで、ステップＳ２０４では、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の抽出部１２Ｄ２が、ステップＳ２０３において偏位修正が実行された第１画像（爪Ｎの領域と爪以外の領域とを含む第１画像）から爪Ｎの領域を抽出し、抽出後の第１画像を得る。
また、ステップＳ２０４では、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ２０２において取得された第２画像（爪Ｎの領域と爪以外の領域とを含む第２画像）から爪Ｎの領域を抽出し、抽出後の第２画像を得る。
また、ステップＳ２０４では、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ２０２において取得された第３画像（爪Ｎの領域と爪以外の領域とを含む第３画像）から爪Ｎの領域を抽出し、抽出後の第３画像を得る。

次いで、ステップＳ２０５では、サーバ装置１２の第１算出部１２Ｄ３１が、ステップＳ２０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第２画像とに基づいて、爪Ｎの幅寸法ＷＮの実寸法を算出する。
また、ステップＳ２０５では、サーバ装置１２の第２算出部１２Ｄ３２が、ステップＳ２０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第３画像とに基づいて、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
また、ステップＳ２０５では、サーバ装置１２の第３算出部１２Ｄ３３が、ステップＳ２０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第２画像とに基づいて、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

次いで、ステップＳ２０６では、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の分類部１２Ｄ４が、第１画像に含まれる爪Ｎの爪甲Ｎ２と爪上皮Ｆ７との境界線ＢＤの形状を分類する。
次いで、ステップＳ２０７では、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、ステップＳ２０５において算出された幅寸法ＷＮの実寸法と、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法と、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法とに基づいて、第１画像と第２画像と第３画像とに含まれる爪Ｎの３次元形状を推定する。
また、ステップＳ２０７では、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。
更に、ステップＳ２０７では、ネイルチップ提供サービス部のＣＡＤモデル作成部が、爪Ｎの３次元形状データと、ステップＳ２０６における分類の結果とに基づいて、ネイルチップのＣＡＤモデルを作成する。
次いで、ステップＳ２０８では、ネイルチップ提供サービス部のネイルチップ作成部（例えば３Ｄプリンタ）が、ネイルチップのＣＡＤモデルに基づいて、ネイルチップを作成する。

図１５は第１実施形態の爪３次元形状推定システム１の第２適用例において実行される処理の一例を説明するための図である。
図１５に示す例では、図示しないステップにおいて、図１４に示すステップＳ１０１～ステップＳ１０４と同様の処理が実行される。

次いで、ステップＳ３０１では、サーバ装置１２を有するネイルチップ提供サービス部が、ステップＳ１０４において送信された第１画像のデータと第２画像のデータと第３画像のデータとネイルデザインの情報とを受信する。
次いで、ステップＳ３０１Ａでは、サーバ装置１２のデータベース部が、ステップＳ３０１において受信された第１画像のデータと第２画像のデータと第３画像のデータとを取り込む。
次いで、ステップＳ３０２では、サーバ装置１２の第１画像取得部１２Ｃ１が、ステップＳ１０２において撮像された爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像をデータベース部から取得する。
また、ステップＳ３０２では、サーバ装置１２の第２画像取得部１２Ｃ２が、ステップＳ１０２において撮像された爪Ｎを含む第２画像をデータベース部から取得する。
また、ステップＳ３０２では、サーバ装置１２の第３画像取得部１２Ｃ３が、ステップＳ１０２において撮像された爪Ｎを含む第３画像をデータベース部から取得する。

次いで、ステップＳ３０３では、サーバ装置１２の補正部１２Ｄ１が、ステップＳ３０２において取得された爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像に対する偏位修正を実行する。
次いで、ステップＳ３０４では、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の抽出部１２Ｄ２が、ステップＳ３０３において偏位修正が実行された第１画像（爪Ｎの領域と爪以外の領域とを含む第１画像）から爪Ｎの領域を抽出し、抽出後の第１画像を得る。
また、ステップＳ３０４では、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ３０２において取得された第２画像（爪Ｎの領域と爪以外の領域とを含む第２画像）から爪Ｎの領域を抽出し、抽出後の第２画像を得る。
また、ステップＳ３０４では、サーバ装置１２の学習後の抽出部１２Ｄ２が、ステップＳ３０２において取得された第３画像（爪Ｎの領域と爪以外の領域とを含む第３画像）から爪Ｎの領域を抽出し、抽出後の第３画像を得る。

次いで、ステップＳ３０５Ａでは、サーバ装置１２の第１算出部１２Ｄ３１が、ステップＳ３０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第２画像とに基づいて、爪Ｎの幅寸法ＷＮの実寸法を算出する。
次いで、ステップＳ３０５Ｂでは、サーバ装置１２の第２算出部１２Ｄ３２が、ステップＳ３０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第３画像とに基づいて、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
また、ステップＳ３０５Ｂでは、サーバ装置１２の第３算出部１２Ｄ３３が、ステップＳ３０４において得られた爪Ｎの領域の抽出後の第１画像と爪Ｎの領域の抽出後の第２画像とに基づいて、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

次いで、ステップＳ３０６では、サーバ装置１２の機械学習部１２Ｂによる教師あり学習が実行された後（学習後）の分類部１２Ｄ４が、第１画像に含まれる爪Ｎの爪甲Ｎ２と爪上皮Ｆ７との境界線ＢＤの形状を分類する。
次いで、ステップＳ３０７では、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、ステップＳ３０５において算出された幅寸法ＷＮの実寸法と、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法と、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法とに基づいて、第１画像と第２画像と第３画像とに含まれる爪Ｎの３次元形状を推定する。
また、ステップＳ３０７では、サーバ装置１２の爪３次元形状推定部１２Ｄ５が、爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。
更に、ステップＳ３０７では、ネイルチップ提供サービス部のＣＡＤモデル作成部が、爪Ｎの３次元形状データと、ステップＳ２０６における分類の結果とに基づいて、ネイルチップのＣＡＤモデルを作成する。
次いで、ステップＳ３０８では、ネイルチップ提供サービス部のネイルチップ作成部（例えば３Ｄプリンタ）が、ネイルチップのＣＡＤモデルに基づいて、ネイルチップベースを作成する。
次いで、ステップＳ３０９では、ステップＳ３０８において作成されたネイルチップベースに対し、ステップＳ１０３において選択されたネイルデザインがデコレートされ、ネイルチップが完成する。

上述したように第１実施形態の爪３次元形状推定システム１では、爪３次元形状推定部１２Ｄ５が、ユーザの手または足の甲側から撮像された爪Ｎの画像である第１画像と、爪先Ｎ４の側から撮像された爪Ｎの画像である第２画像と、右側爪甲縁Ｎ６または左側爪甲縁Ｎ７の側から撮像された爪Ｎの画像である第３画像とに基づいて、爪Ｎの３次元形状を推定する。また、第１画像、第２画像および第３画像の少なくともいずれかには、爪Ｎの実寸法の算出に利用される指標Ｄ１～Ｄ４が含められる。
そのため、第１実施形態の爪３次元形状推定システム１では、３次元レーザスキャナ、型取り用シリコンゲルなどを用いる必要なく高精度な爪Ｎの３次元形状を得ることができる。

また、第１実施形態の爪３次元形状推定システム１では、抽出部１２Ｄ２が、爪Ｎの領域と爪以外の領域とを含む第１画像から爪Ｎの領域を抽出し、爪Ｎの領域と爪以外の領域とを含む第２画像から爪Ｎの領域を抽出し、爪Ｎの領域と爪以外の領域とを含む第３画像から爪Ｎの領域を抽出する。また、機械学習部１２Ｂが、爪Ｎの領域と爪以外の領域とを含む教師画像と、教師画像から抽出される（抽出すべき）爪Ｎの領域との組である教師データに基づいて、抽出部１２Ｄ２の教師あり学習を実行する。
そのため、第１実施形態の爪３次元形状推定システム１では、爪Ｎの領域と爪以外の領域とを含む第１画像、第２画像および第３画像から爪Ｎの領域を適切に抽出することができ、その結果、高精度な爪Ｎの３次元形状を得ることができる。

また、第１実施形態の爪３次元形状推定システム１では、第１算出部１２Ｄ３１が、指標Ｄ１～Ｄ４が含められている第１画像と、第２画像とに基づいて、爪Ｎの幅寸法ＷＮの実寸法を算出し、第２算出部１２Ｄ３２が、第１画像と第３画像とに基づいて、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出し、第３算出部１２Ｄ３３が、第１画像と第２画像とに基づいて、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。また、爪３次元形状推定部１２Ｄ５が、爪Ｎの幅寸法ＷＮの実寸法と、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法と、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法とに基づいて、爪Ｎの３次元形状を推定する。
そのため、第１実施形態の爪３次元形状推定システム１では、３次元レーザスキャナなどが用いられる場合よりも演算量を抑制しつつ、高精度な爪Ｎの３次元形状を得ることができる。

＜第２実施形態＞
以下、本発明の爪３次元形状推定システム、爪３次元形状推定システムの利用方法、端末装置、爪３次元形状推定方法およびプログラムの第２実施形態について説明する。
第２実施形態の端末装置１１は、後述する点を除き、上述した第１実施形態の爪３次元形状推定システム１の端末装置１１と同様に構成されている。従って、第２実施形態の端末装置１１によれば、後述する点を除き、上述した第１実施形態の爪３次元形状推定システム１の端末装置１１と同様の効果を奏することができる。

図１６は第２実施形態の端末装置１１の概略構成の一例を示す図である。
図１６に示す例では、端末装置１１が、撮像部１１Ａと、通信部１１Ｂと、第１画像取得部１１Ｃ１と、第２画像取得部１１Ｃ２と、第３画像取得部１１Ｃ３と、演算部１１Ｄと、表示部１１Ｅとを備えている。
上述したように、図２に示す例では、通信部１１Ｂが、例えば撮像部１１Ａによって撮像された爪Ｎを含む画像（第１画像、第２画像および第３画像）のデータを、例えばネットワーク（図示せず）を介してサーバ装置１２に送信する。
一方、図１６に示す例では、通信部１１Ｂが、端末装置１１において生成された爪Ｎの３次元形状データなどをネイルチップ提供サービス部に送信する。
他の例では、通信部１１Ｂが、端末装置１１において算出された爪Ｎの幅寸法ＷＮの実寸法のデータと、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法のデータと、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法のデータとをネイルチップ提供サービス部に送信してもよい。

図１６に示す例では、図２に示す例と同様に、表示部１１Ｅが、例えば爪Ｎを含む画像（第１画像、第２画像および第３画像のいずれか）の撮像時に、爪Ｎを含む画像（撮像対象の画像）と、ガイド（例えばガイドライン、ガイド枠など）とを表示する。

図１６に示す例では、第１画像取得部１１Ｃ１が、撮像部１１Ａによってユーザの手または足の甲側から撮像された爪Ｎと指標Ｄ１～Ｄ４とを含む第１画像を取得する。第２画像取得部１１Ｃ２は、撮像部１１Ａによって爪先Ｎ４の側から撮像された爪Ｎを含む第２画像を取得する。第３画像取得部１１Ｃ３は、撮像部１１Ａによって右側爪甲縁Ｎ６または左側爪甲縁Ｎ７の側から撮像された爪Ｎを含む第３画像を取得する。
演算部１１Ｄは、補正部１１Ｄ１と、抽出部１１Ｄ２と、第１算出部１１Ｄ３１と、第２算出部１１Ｄ３２と、第３算出部１１Ｄ３３と、分類部１１Ｄ４と、爪３次元形状推定部１１Ｄ５とを備えている。
補正部１１Ｄ１は、図２に示すサーバ装置１２の演算部１２Ｄの補正部１２Ｄ１と同等の機能を有する。つまり、補正部１１Ｄ１は、第１画像取得部１１Ｃ１によって取得された指標Ｄ１～Ｄ４を含む第１画像に対する偏位修正を実行する。
抽出部１１Ｄ２は、図２に示すサーバ装置１２の機械学習部１２Ｂによる教師ありが実行された後の演算部１２Ｄの抽出部１２Ｄ２と同等の機能を有する。つまり、抽出部１１Ｄ２は、補正部１１Ｄ１よって偏位修正が実行された後の第１画像に含まれる爪Ｎの領域を抽出する。また、抽出部１１Ｄ２は、第２画像取得部１１Ｃ２によって取得された第２画像に含まれる爪Ｎの領域を抽出する。更に、抽出部１１Ｄ２は、第３画像取得部１１Ｃ３によって取得された第３画像に含まれる爪Ｎの領域を抽出する。

図１６に示す例では、第１算出部１１Ｄ３１が、図２に示すサーバ装置１２の演算部１２Ｄの第１算出部１２Ｄ３１と同等の機能を有する。つまり、第１算出部１１Ｄ３１は、抽出部１１Ｄ２によって第１画像から抽出された爪Ｎの領域と第２画像から抽出された爪Ｎの領域とに基づいて、爪Ｎの幅寸法ＷＮの実寸法を算出する。
第２算出部１１Ｄ３２は、図２に示すサーバ装置１２の演算部１２Ｄの第２算出部１２Ｄ３２と同等の機能を有する。つまり、第２算出部１１Ｄ３２は、抽出部１１Ｄ２によって第１画像から抽出された爪Ｎの領域と第３画像から抽出された爪Ｎの領域とに基づいて、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
第３算出部１１Ｄ３３は、図２に示すサーバ装置１２の演算部１２Ｄの第３算出部１２Ｄ３３と同等の機能を有する。つまり、第３算出部１１Ｄ３３は、抽出部１１Ｄ２によって第１画像から抽出された爪Ｎの領域と第２画像から抽出された爪Ｎの領域とに基づいて、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

図１６に示す例では、分類部１１Ｄ４が、図２に示すサーバ装置１２の機械学習部１２Ｂによる教師ありが実行された後の演算部１２Ｄの分類部１２Ｄ４と同等の機能を有する。つまり、分類部１１Ｄ４は、第１画像に含まれる爪Ｎの爪甲Ｎ２と爪上皮Ｆ７（図１参照）との境界線ＢＤ（図３参照）の形状を分類する。

図１６に示す例では、爪３次元形状推定部１１Ｄ５が、図２に示すサーバ装置１２の演算部１２Ｄの爪３次元形状推定部１２Ｄ５と同等の機能を有する。つまり、爪３次元形状推定部１１Ｄ５は、第１算出部１１Ｄ３１によって算出された幅寸法ＷＮの実寸法と、第２算出部１１Ｄ３２によって算出された曲率または曲率半径の実寸法と、第３算出部１１Ｄ３３によって算出された曲率または曲率半径の実寸法とに基づいて、第１画像と第２画像と第３画像とに含まれる爪Ｎの３次元形状を推定する。つまり、爪３次元形状推定部１１Ｄ５は、第１画像取得部１１Ｃ１によって取得された第１画像と、第２画像取得部１１Ｃ２によって取得された第２画像と、第３画像取得部１１Ｃ３によって取得された第３画像とに基づいて、爪Ｎの３次元形状を推定する。
更に、爪３次元形状推定部１１Ｄ５は、爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。
上述したように、通信部１１Ｂは、爪３次元形状推定部１１Ｄ５によって生成された爪Ｎの３次元形状データを、端末装置１１の外部のネイルチップ提供サービス部に送信する。また、通信部１１Ｂは、分類部１１Ｄ４による分類の結果を、端末装置１１の外部のネイルチップ提供サービス部に送信する。
図１６に示す例では、第１画像のデータと第２画像のデータと第３画像のデータとが端末装置１１から端末装置１１の外部に送信される場合よりも端末装置１１からの通信量を抑制しつつ、端末装置１１においてネイルチップの作成に利用される爪Ｎの３次元形状データを生成することができる。

図１６に示す例では、演算部１１Ｄが、分類部１１Ｄ４と爪３次元形状推定部１１Ｄ５とを備えているが、他の例では、演算部１１Ｄが、分類部１１Ｄ４および爪３次元形状推定部１１Ｄ５の少なくともいずれかを備えていなくてもよい。
演算部１１Ｄが分類部１１Ｄ４および爪３次元形状推定部１１Ｄ５を備えていない例では、通信部１１Ｂが、第１算出部１１Ｄ３１によって算出された幅寸法ＷＮの実寸法のデータと、第２算出部１１Ｄ３２によって算出された曲率または曲率半径の実寸法のデータと、第３算出部１１Ｄ３３によって算出された曲率または曲率半径の実寸法のデータとを、端末装置１１の外部のネイルチップ提供サービス部に送信する。
この例では、第１画像のデータと第２画像のデータと第３画像のデータとが端末装置１１から端末装置１１の外部に送信される場合よりも端末装置１１からの通信量を抑制しつつ、端末装置１１において爪Ｎの３次元形状の推定に利用される爪Ｎの幅寸法ＷＮの実寸法と、第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法と、第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法とを算出することができる。

図１７は第２実施形態の端末装置１１において実行される処理の一例を説明するためのフローチャートである。詳細には、図１７は第２実施形態の端末装置１１によってユーザの右手の親指の爪Ｎの３次元形状を得る場合に実行される処理の一例を説明するためのフローチャートである。
図１７に示す例では、ステップＳ６１において、端末装置１１の撮像部１１Ａが、図３に示す指標Ｄ１～Ｄ４を含む第１画像と、図５に示す第２画像と、図７に示す第３画像とを撮像する。

次いで、ステップＳ６３Ａでは、端末装置１１の第１画像取得部１１Ｃ１が、ステップＳ６１において撮像された図３に示す指標Ｄ１～Ｄ４を含む第１画像を取得する。
また、ステップＳ６３Ｂでは、端末装置１１の第２画像取得部１１Ｃ２が、ステップＳ６１において撮像された図５に示す第２画像を取得する。
また、ステップＳ６３Ｃでは、端末装置１１の第３画像取得部１１Ｃ３が、ステップＳ６１において撮像された図７に示す第３画像を取得する。

次いで、ステップＳ６４では、端末装置１１の補正部１１Ｄ１が、ステップＳ６３Ａにおいて取得された指標Ｄ１～Ｄ４を含む第１画像に対する偏位修正を実行する。
次いで、ステップＳ６５Ａでは、端末装置１１の抽出部１１Ｄ２が、ステップＳ６４において偏位修正が実行された第１画像（爪Ｎ（図３参照）の領域と爪以外の領域とを含む第１画像）から爪Ｎの領域を抽出し、図１０に示す抽出後の第１画像を得る。
また、ステップＳ６５Ｂでは、抽出部１１Ｄ２が、ステップＳ６３Ｂにおいて取得された第２画像（爪Ｎ（図５参照）の領域と爪以外の領域とを含む第２画像）から爪Ｎの領域を抽出し、図１１に示す抽出後の第２画像を得る。
また、ステップＳ６５Ｃでは、抽出部１１Ｄ２が、ステップＳ６３Ｃにおいて取得された第３画像（爪Ｎ（図７参照）の領域と爪以外の領域とを含む第３画像）から爪Ｎの領域を抽出し、図１２に示す抽出後の第３画像を得る。

次いで、ステップＳ６６Ａでは、端末装置１１の第１算出部１１Ｄ３１が、ステップＳ６５Ａにおいて得られた爪Ｎ（図１０参照）の領域の抽出後の第１画像と、ステップＳ６５Ｂにおいて得られた爪Ｎ（図１１参照）の領域の抽出後の第２画像とに基づいて、爪Ｎの幅寸法ＷＮ（図１０参照）の実寸法を算出する。
また、ステップＳ６６Ｂでは、端末装置１１の第２算出部１１Ｄ３２が、ステップＳ６５Ａにおいて得られた爪Ｎの領域の抽出後の第１画像と、ステップＳ６５Ｃにおいて得られた爪Ｎ（図１２参照）の領域の抽出後の第３画像とに基づいて、図１２に示す第３画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。
また、ステップＳ６６Ｃでは、端末装置１１の第３算出部１１Ｄ３３が、ステップＳ６５Ａにおいて得られた爪Ｎの領域の抽出後の第１画像と、ステップＳ６５Ｂにおいて得られた爪Ｎの領域の抽出後の第２画像とに基づいて、図１１に示す第２画像に含まれる爪Ｎの爪甲Ｎ２の曲率または曲率半径の実寸法を算出する。

次いで、ステップＳ６７では、端末装置１１の分類部１１Ｄ４が、図３および図１０に示す第１画像に含まれる爪Ｎの爪甲Ｎ２と爪上皮Ｆ７（図１参照）との境界線ＢＤ（図３参照）の形状を分類する。
次いで、ステップＳ６８Ａでは、端末装置１１の爪３次元形状推定部１１Ｄ５が、ステップＳ６６Ａにおいて算出された幅寸法ＷＮの実寸法と、ステップＳ６６Ｂにおいて算出された曲率または曲率半径の実寸法と、ステップＳ６６Ｃにおいて算出された曲率または曲率半径の実寸法とに基づいて、図１０に示す第１画像と図１１に示す第２画像と図１２に示す第３画像とに含まれる爪Ｎの３次元形状を推定する。
次いで、ステップＳ６８Ｂでは、端末装置１１の爪３次元形状推定部１１Ｄ５が、ステップＳ６８Ａにおいて推定された爪Ｎの３次元形状に基づいて、爪Ｎの３次元形状データを生成する。

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形および置換を加えることができる。上述した各実施形態および各例に記載の構成を適宜組み合わせてもよい。

なお、上述した実施形態における爪３次元形状推定システム１が備える各部の機能全体あるいはその一部は、これらの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現しても良い。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶部のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでも良い。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。

１…爪３次元形状推定システム、１１…端末装置、１１Ａ…撮像部、１１Ｂ…通信部、１１Ｃ１…第１画像取得部、１１Ｃ２…第２画像取得部、１１Ｃ３…第３画像取得部、１１Ｄ…演算部、１１Ｄ１…補正部、１１Ｄ２…抽出部、１１Ｄ３１…第１算出部、１１Ｄ３２…第２算出部、１１Ｄ３３…第３算出部、１１Ｄ４…分類部、１１Ｄ５…爪３次元形状推定部、１１Ｅ…表示部、１２…サーバ装置、１２Ａ…通信部、１２Ｂ…機械学習部、１２Ｃ１…第１画像取得部、１２Ｃ２…第２画像取得部、１２Ｃ３…第３画像取得部、１２Ｄ…演算部、１２Ｄ１…補正部、１２Ｄ２…抽出部、１２Ｄ３１…第１算出部、１２Ｄ３２…第２算出部、１２Ｄ３３…第３算出部、１２Ｄ４…分類部、１２Ｄ５…爪３次元形状推定部、Ｄ１、Ｄ２、Ｄ３、Ｄ４…指標、ＢＤ…境界線、Ｆ…指、Ｆ１…爪母（ネイルマトリクス）、Ｆ２…爪床（ネイルベッド）、Ｆ３…後爪郭（ネイルフォルド）、Ｆ４…側爪郭（サイドウォール）、Ｆ５…爪溝（ネイルグルーブ）、Ｆ６…爪下皮（ハイポニキウム）、Ｆ７…爪上皮（エポニキウム）、Ｆ８…末節骨、Ｆ９…中節骨、Ｆ１０…側骨間靭帯、Ｎ…爪、Ｎ１…爪根（ネイルルート）、Ｎ２…爪甲（ネイルプレート）、Ｎ３…爪半月（ヌルーラ）、Ｎ４…爪先（フリーエッジ）、Ｎ５…黄線（イエローライン）、Ｎ６…右側爪甲縁（サイドライン）、Ｎ７…左側爪甲縁（サイドライン）

Claims (15)

1. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、
   爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、
   右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、
   前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、
   前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
   前記指標は前記第１画像に含められ、
   前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出部と、
   前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出部と、
   前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出部とを更に備え、
   前記爪３次元形状推定部は、前記第１算出部によって算出された幅寸法の実寸法と、前記第２算出部によって算出された曲率または曲率半径の実寸法と、前記第３算出部によって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、
   爪３次元形状推定システム。
2. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、
   爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、
   右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、
   前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、
   前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
   前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類部を更に備える、
   爪３次元形状推定システム。
3. 前記指標を含む前記第１画像、前記第２画像および前記第３画像の少なくともいずれかに対する偏位修正を実行する補正部を更に備える、
   請求項１または２に記載の爪３次元形状推定システム。
4. 前記爪の領域と前記爪以外の領域とを含む前記第１画像、前記第２画像および前記第３画像から前記爪の領域を抽出する抽出部と、
   前記爪の領域と前記爪以外の領域とを含む教師画像と、前記教師画像から抽出される前記爪の領域との組である教師データに基づいて、前記抽出部の教師あり学習を実行する機械学習部とを更に備える、
   請求項１から請求項３のいずれか一項に記載の爪３次元形状推定システム。
5. 前記爪３次元形状推定部は、前記爪の３次元形状に基づいて、前記爪の３次元形状データを生成する、
   請求項１から請求項４のいずれか一項に記載の爪３次元形状推定システム。
6. 請求項５に記載の爪３次元形状推定システムの利用方法であって、
   前記爪３次元形状推定部によって生成された前記爪の３次元形状データは、ネイルチップの作成に利用される、
   爪３次元形状推定システムの利用方法。
7. ０．５ｍｍ～１ｍｍの厚さの前記ネイルチップが作成される、
   請求項６に記載の爪３次元形状推定システムの利用方法。
8. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、
   爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、
   右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、
   前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、
   前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
   前記指標は前記第１画像に含められ、
   前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出部と、
   前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出部と、
   前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出部とを更に備え、
   前記爪３次元形状推定部は、前記第１算出部によって算出された幅寸法の実寸法と、前記第２算出部によって算出された曲率または曲率半径の実寸法と、前記第３算出部によって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、
   端末装置。
9. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得部と、
   爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得部と、
   右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得部と、
   前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定部とを備え、
   前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
   前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類部を更に備える、
   端末装置。
10. 前記第１画像と前記第２画像と前記第３画像とを撮像する撮像部と、通信部とを更に備え、
    前記爪３次元形状推定部は、前記爪の３次元形状に基づいて、前記爪の３次元形状データを生成し、
    前記通信部は、前記爪３次元形状推定部によって生成された前記爪の３次元形状データを前記端末装置の外部に送信する、
    請求項８または請求項９に記載の端末装置。
11. 前記第１画像、前記第２画像および前記第３画像のいずれかが前記撮像部によって撮像される時に前記撮像部による撮像対象の画像を表示する表示部を更に備え、
    前記表示部は、前記第１画像、前記第２画像および前記第３画像のいずれかが前記撮像部によって撮像される時に、前記撮像対象の画像を表示すると共に、ガイドを表示する、
    請求項１０に記載の端末装置。
12. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、
    爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、
    右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、
    前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを備え、
    前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
    前記指標は前記第１画像に含められ、
    前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出ステップと、
    前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出ステップと、
    前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出ステップとを更に備え、
    前記爪３次元形状推定ステップでは、前記第１算出ステップによって算出された幅寸法の実寸法と、前記第２算出ステップによって算出された曲率または曲率半径の実寸法と、前記第３算出ステップによって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、
    爪３次元形状推定方法。
13. 手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、
    爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、
    右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、
    前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップとを備え、
    前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
    前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類ステップを更に備える、
    爪３次元形状推定方法。
14. コンピュータに、
    手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、
    爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、
    右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、
    前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップと
    を実行させるためのプログラムであって、
    前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
    前記指標は前記第１画像に含められ、
    前記第１画像と前記第２画像とに基づいて、前記爪の幅寸法の実寸法を算出する第１算出ステップと、
    前記第１画像と前記第３画像とに基づいて、前記第３画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第２算出ステップと、
    前記第１画像と前記第２画像とに基づいて、前記第２画像に含まれる前記爪の爪甲の曲率または曲率半径の実寸法を算出する第３算出ステップとを実行させるためのプログラムであって、
    前記爪３次元形状推定ステップでは、前記第１算出ステップによって算出された幅寸法の実寸法と、前記第２算出ステップによって算出された曲率または曲率半径の実寸法と、前記第３算出ステップによって算出された曲率または曲率半径の実寸法とに基づいて、前記爪の３次元形状を推定する、
    プログラム。
15. コンピュータに、
    手または足の甲側から撮像された爪の画像である第１画像を取得する第１画像取得ステップと、
    爪先の側から撮像された前記爪の画像である第２画像を取得する第２画像取得ステップと、
    右側爪甲縁または左側爪甲縁の側から撮像された前記爪の画像である第３画像を取得する第３画像取得ステップと、
    前記第１画像と前記第２画像と前記第３画像とに基づいて前記爪の３次元形状を推定する爪３次元形状推定ステップと
    を実行させるためのプログラムであって、
    前記第１画像、前記第２画像および前記第３画像の少なくともいずれかには、前記爪の実寸法の算出に利用される指標が含められ、
    前記第１画像に含まれる前記爪の爪甲と爪上皮との境界線の形状を分類する分類ステップを実行させるための、
    プログラム。

Images