JP7420884B1 - 端末装置、ならびに、プログラム - Google Patents

Abstract

【課題】複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことのできる端末装置等を提供する。【解決手段】記憶部３３０は、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報３３１を記憶する。取得部３４１は、カメラ３１０によって撮影された人物の顔部を含む撮影画像を取得する。認識部３４２は、取得部３４１によって取得された撮影画像と、ユーザ情報３３１に含まれる各顔画像との類似度をそれぞれ算定することにより、複数のユーザの中から該当ユーザを認識する。表示部３５０は、認識部３４２によって認識された該当ユーザが受けようとするサービスを申請するための申請フォームであり、該当ユーザのプロファイルに基づいて一部の内容が入力済みの申請フォームを表示する。送受信部３２０は、受付部３４４が受け付けた入力操作を反映した申請フォームを、管理サーバへ送信する。【選択図】図４

Description

本発明は、端末装置、申請方法、ならびに、プログラムに関する。

近年、各種の施設に対する予約申請を、インターネット等を介して、ユーザ（顧客）の端末装置から行うことのできる予約システム（予約申請システム）が普及している。このような予約システムを利用するユーザの中には、例えば、家族内における複数のユーザのうち、何れかのユーザ（子供ユーザ等）についてのサービスの申請を、代表ユーザ（親ユーザ）が行う場合もある。

一例として、特許文献１には、保育施設に子供を預けるための予約申請を行う予約システム（保育施設予約システム）の発明が開示されている。この予約システムでは、親が使用する端末装置（利用者端末）から、子供についての情報を入力して予約申請を行っている。
この他にも、美容施設、音楽教室、スポーツ教室、語学教室等の予約システムにおいて、子供にサービスを受けさせる場合に、親の端末装置から、子供についての情報を入力して予約申請を行っている。

特許第６３３８３１０号公報

上述した特許文献１等に記載された従来の予約システムでは、代表ユーザ（親ユーザ）が、他のユーザ（子供ユーザ等）についての情報を入力する必要があり、煩雑であった。特に、子供が複数人いる家庭では、サービスを受けさせる子供毎に異なる情報を入力することになるため、入力の誤り等も発生し易かった。
また、美容室などの美容施設を家族（例えば、母親と未成年の娘等）で利用する場合も多いが、その際、美容施設の予約システムにおいて、ユーザ毎に予約申請を行う必要があり、やはり煩雑であった。
更に、このような予約申請だけでなく、公共機関等に対して、各種サービスを受けるための登録申請を行うシステムを利用する場合でも、上記と同様の問題があった。

このような実情から、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことのできる技術が求められていた。

本発明は、上記実状に鑑みてなされたもので、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことのできる端末装置、申請方法、ならびに、プログラムを提供することを目的とする。

本発明の第１の観点に係る端末装置は、
カメラを有する端末装置であって、
複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部と、
前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得部と、
前記取得部によって取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識部と、
前記認識部によって認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを表示する表示部と、
前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付部と、
前記受付部が受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信部と、
を備えることを特徴とする。

また、上記観点に係る端末装置は、
前記該当ユーザの前記ユーザ情報に、前記撮影画像を新たな顔画像として追加若しくは入れ換えて記憶させる更新部を更に備えるようにしてもよい。

また、上記観点に係る端末装置において、
前記送信部は、前記申請フォームと共に、前記取得部によって取得された前記撮影画像を、前記サーバへ送信するようにしてもよい。

また、上記観点に係る端末装置は、
前記認識部により、前記複数のユーザの中から前記撮影画像に含まれる人物が認識されなかった場合に、前記複数のユーザのうちで予め定められた代表ユーザの前記プロファイルに基づいて一部の内容を設定したプロファイルと前記撮影画像とを含む新たなユーザ情報を、前記記憶部に登録する登録部を更に備えるようにしてもよい。

また、上記観点に係る端末装置において、
前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
前記取得部は、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
前記認識部は、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
前記表示部は、前記認識部が前記第１該当ユーザだけを認識した場合に、前記第１該当ユーザについての前記申請フォームを表示し、前記認識部が前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第２該当ユーザについての前記申請フォームを表示するようにしてもよい。

また、上記観点に係る端末装置において、
前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
前記取得部は、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
前記認識部は、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
前記表示部は、前記認識部が前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第１該当ユーザ及び前記第２該当ユーザについての申請をまとめた前記申請フォームを表示するようにしてもよい。

本発明の第２の観点に係る申請方法は、
カメラと、表示部と、複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部とを有する端末装置が実行する申請方法であって、
前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得ステップと、
前記取得ステップにて取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識ステップと、
前記認識ステップにて認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを前記表示部に表示する表示ステップと、
前記表示ステップにて前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付ステップと、
前記受付ステップにて受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信ステップと、
を備えることを特徴とする。

本発明の第３の観点に係るプログラムは、
カメラと、表示部と、複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部とを有するコンピュータに、
前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得手順、
前記取得手順にて取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識手順、
前記認識手順にて認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを前記表示部に表示する表示手順、
前記表示手順にて前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付手順、
前記受付手順にて受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信手順、
を実行させることを特徴とする。

上記プログラムは、当該プログラムが実行されるコンピュータとは独立して、コンピュータ通信網を介して配布・販売することができる。
更に、上記プログラムを記録する情報記録媒体は、非一時的な（non-transitory）記録媒体であり、コンピュータとは独立して配布・販売することができる。ここで、非一時的な記録媒体とは、有形な（tangible）記録媒体をいう。非一時的な記録媒体は、例えば、コンパクトディスク、フレキシブルディスク、ハードディスク、光磁気ディスク、ディジタルビデオディスク、磁気テープ、半導体メモリ等である。また、一時的な（transitory）記録媒体とは、伝送媒体（伝搬信号）それ自体を示す。一時的な記録媒体は、例えば、電気信号、光信号、電磁波等である。なお、一時的な（temporary）記憶領域とは、データやプログラムを一時的に記憶するための領域であり、例えば、ＲＡＭ（Random Access Memory）等の揮発性メモリである。

本発明によれば、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことができる。

本実施形態に係る申請システムの全体構成の一例を示すブロック図である。 本実施形態に係る端末装置の外観の一例を示す模式図であって、（ａ）が前面側の模式図であり，（ｂ）が背面側の模式図である。 本実施形態に係る端末装置等が実現される典型的な情報処理装置の概要構成の一例を示すブロック図である。 本実施形態に係る端末装置の機能構成の一例を示すブロック図である。 ユーザ情報の一例を示す模式図である。 （ａ），（ｂ）共に、具体的な撮影の様子を説明するための模式図である。 表示の開始時点における申請フォームの一例を示す模式図である。 代表ユーザによる入力操作を反映した申請フォームの一例を示す模式図である。 本実施形態に係る申請処理を説明するためのフローチャートである。 他の実施形態に係る申請フォームを説明するための模式図である。

以下に本発明の実施形態を説明する。本発明の実施形態では、美容についてのサービスをユーザに提供する美容施設（美容室等）に対して、予約申請を行う申請システムを一例として説明するが、このような美容施設に限られず、各種のサービスをユーザに提供する他の施設（医療施設、音楽教室、スポーツ教室、語学教室等）に対して、予約申請を行う申請システムにおいても適用可能である。また、予約申請以外にも、公共機関等に対して、各種サービスを受けるための登録申請を行う申請システムにおいても適用可能である。
また、本発明の実施形態では、家族内における複数のユーザ（親ユーザ、子供ユーザ）のうち、何れかのユーザ（子供ユーザ等）についてのサービスの申請を、代表ユーザ（親ユーザ）が行う場合を一例として説明するが、このような家族内に限られず、親しい友人グループ内における複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが行う場合においても適用可能である。
なお、以下の実施形態は説明のためのものであり、本願発明の範囲を制限するものではない。したがって、当業者であればこれら各要素の何れかまたは全要素をこれと均等なものに置換した実施形態を採用することが可能であるが、これらの実施形態も本発明の範囲に含まれる。

（全体構成）
本発明の実施形態に係る申請システム１００は、美容についてのサービスをユーザに提供する美容施設に対して、ユーザが受けようとするサービスを予約申請するシステムであり、図１に示すように、管理サーバ２００と、端末装置３００とを含んで構成される。
なお、管理サーバ２００と、端末装置３００とは、インターネット９００を介して通信可能に接続されている。また、図１には、端末装置３００を３台だけ示しているが、発明の理解を容易にするためであり、実際には、ユーザ数（代表ユーザの数）に応じて、膨大な数の端末装置３００が含まれているものとする。

管理サーバ２００は、例えば、サーバ用のコンピュータであり、美容施設の情報を管理すると共に、代表ユーザが使用する端末装置３００との間で必要な情報を送受信することで、家族内における複数のユーザのうち、何れかのユーザが受けようとするサービスの予約申請に応じた処理を実行する。

端末装置３００は、例えば、カメラを有するスマートフォンや携帯型のゲーム装置等であり、家族で美容施設を利用しようとする代表ユーザに使用される。
一例として、端末装置３００は、図２（ａ），（ｂ）に示すような外観を有している。図２（ａ）は、端末装置３００の前面側（操作面側）を示しており、その前面側には前面カメラ３１１と、表示部３５０とが配置されている。また、図２（ｂ）は、端末装置３００の裏面側（背面側）を示しており、その裏面側には背面カメラ３１２が配置されている。
詳細については後述するが、前面カメラ３１１、及び／又は、背面カメラ３１２から撮影した人物の顔部を含む撮影画像を基に、端末装置３００は、家族内の複数のユーザから該当ユーザを認識可能となっている。

（情報処理装置の概要構成）
本実施形態に係る端末装置３００等が実現される典型的な情報処理装置４００について説明する。

情報処理装置４００は、図３に示すように、ＣＰＵ（Central Processing Unit）４０１と、ＲＯＭ（Read Only Memory）４０２と、ＲＡＭ（Random Access Memory）４０３と、ＮＩＣ（Network Interface Card）４０４と、画像処理部４０５と、音声処理部４０６と、補助記憶部４０７と、インターフェース４０８と、撮影ユニット４０９と、操作ユニット４１０と、表示ユニット４１１と、を備える。

ＣＰＵ ４０１は、情報処理装置４００全体の動作を制御し、各構成要素と接続され制御信号やデータをやりとりする。

ＲＯＭ ４０２には、電源投入直後に実行されるＩＰＬ（Initial Program Loader）が記録され、これが実行されることにより、補助記憶部４０７に記憶されたプログラムをＲＡＭ ４０３に読み出してＣＰＵ ４０１による当該プログラムの実行が開始される。

ＲＡＭ ４０３は、データやプログラムを一時的に記憶するためのもので、補助記憶部４０７から読み出されたプログラムやデータ、その他、通信に必要なデータ等が保持される。

ＮＩＣ ４０４は、情報処理装置４００をインターネット等のコンピュータ通信網に接続するためのものであり、ＬＡＮ（Local Area Network）を構成する際に用いられる１０ＢＡＳＥ－Ｔ／１００ＢＡＳＥ－Ｔ規格にしたがうものや、電話回線を用いてインターネットに接続するためのアナログモデム、ＩＳＤＮ（Integrated Services Digital Network）モデム、ＡＤＳＬ（Asymmetric Digital Subscriber Line）モデム、ケーブルテレビジョン回線を用いてインターネットに接続するためのケーブルモデム等から構成される。

画像処理部４０５は、補助記憶部４０７等から読み出された画像データをＣＰＵ ４０１や画像処理部４０５が備える画像演算プロセッサ（図示せず）によって加工処理した後、これを画像処理部４０５が備えるフレームメモリ（図示せず）に記録する。フレームメモリに記録された画像情報は、所定の同期タイミングでビデオ信号に変換され、インターフェース４０８等を介して表示ユニット４１１に出力される。つまり、画像処理部４０５は、ＣＰＵ ４０１の制御の下、情報処理装置４００が行う処理の進行の中で必要となる画像を生成し、その画像を表示ユニット４１１に表示させる。

音声処理部４０６は、補助記憶部４０７等から読み出された音声データを音声信号に変換し、インターフェース４０８を介してスピーカに出力する。つまり、音声処理部４０６は、ＣＰＵ ４０１の制御の下、情報処理装置４００が行う処理の進行の中で発生させるべき音声を生成し、その音声をスピーカから出力させる。

補助記憶部４０７は、ハードディスク等であり、情報処理装置４００全体の動作制御に必要な各種のプログラムや各種のデータを記憶する。例えば、補助記憶部４０７には、本実施形態に係る端末装置３００を実現するためのプログラムが記憶される。そして、ＣＰＵ ４０１の制御によって、補助記憶部４０７は、記憶されたプログラムやデータを適宜読み出し、これらをＲＡＭ ４０３等に一時的に記憶させる。

インターフェース４０８には、撮影ユニット４０９、操作ユニット４１０、及び、表示ユニット４１１が接続される。なお、インターフェース４０８は、この他に接続された外部機器との間で必要な情報を送受信してもよい。

撮影ユニット４０９は、例えば、単焦点のレンズ、及び、所定画素数の撮像素子（ＣＭＯＳ；Complementary Metal Oxide SemiconductorやＣＣＤ；Charge Coupled Device）等であり、静止画又は動画を撮影する。

操作ユニット４１０は、情報処理装置４００を利用する作業者等の操作入力を受け付ける。

表示ユニット４１１は、画像処理部４０５により出力された画像データに応じた画像を描画し、情報処理装置４００を利用する作業者等に提示する。

この他に、情報処理装置４００は、補助記憶部４０７の代わりに、ＤＶＤ（Digital Versatile Disc）－ＲＯＭ等のドライブユニットを備えるようにしてもよい。この場合、情報処理装置４００は、ドライブユニットに装着されるＤＶＤ－ＲＯＭ等からプログラムやデータを読み出して、上記と同様に動作する。

（実施形態）
以下、本実施形態に係る端末装置３００の機能構成等について、図４～図８を参照して説明する。この端末装置３００は、上記の情報処理装置４００により実現される。例えば、情報処理装置４００に電源が投入されると、端末装置３００として機能させるプログラムが実行され、本実施形態に係る端末装置３００が実現される。
なお、管理サーバ２００も同様に、情報処理装置４００によって実現されるが、こちらについては説明を省略し、本実施形態において最も特徴的な端末装置３００について、以下説明する。

（端末装置の機能構成）
図４は、本実施形態に係る端末装置３００の機能構成の一例を示すブロック図である。図示するように、端末装置３００は、カメラ３１０と、送受信部３２０と、記憶部３３０と、制御部３４０と、表示部３５０とを備える。

カメラ３１０は、表示部３５０と同じ面に設けられた前面カメラ３１１と、表示部３５０の裏面に設けられた背面カメラ３１２とを備える。つまり、カメラ３１０は、上述した図２（ａ）に示すような前面側に配置された前面カメラ３１１と、図２（ｂ）に示すような裏面側に配置された背面カメラ３１２とから構成される。
なお、以下の説明では、これらの前面カメラ３１１と背面カメラ３１２とを同時に動作させる（撮影する）ことのできない端末装置３００を前提として、短時間（一例として、数百ミリ秒）毎に、前面カメラ３１１と背面カメラ３１２とを交互に動作させる（撮影動作を交互に切り替える）場合について説明するが、前面カメラ３１１と背面カメラ３１２とを同時に動作させることのできる端末装置３００であれば、並行して２方向の撮影画像（後述する第１影画像、及び、第２撮影画像）を同時に取得するようにしてもよい。

なお、上述した撮影ユニット４０９が、このようなカメラ３１０として機能しうる。

送受信部３２０は、インターネット９００を介した管理サーバ２００との間で種々の情報を送受信する。
例えば、送受信部３２０は、管理サーバ２００にアクセスし、ユーザが受けようとするサービスを申請するための申請フォーム（詳細については後述する）を、管理サーバ２００から受信する。
また、送受信部３２０は、後述するように、必要な情報が全て記入（セット）された申請フォームを、管理サーバ２００へ送信する。

なお、上述したＮＩＣ ４０４等が、このような送受信部３２０として機能しうる。

記憶部３３０は、端末装置３００における処理に必要な種々の情報を記憶する。例えば、記憶部３３０は、家族内における複数のユーザについてのユーザ情報３３１を記憶する。

ユーザ情報３３１は、一例として、図５に示すような情報を含んでいる。つまり、ユーザ情報３３１には、ユーザＩＤ３３１ａ、ユーザ名３３１ｂ、住所３３１ｃ、電話番号３３１ｄ、年齢３３１ｅ、性別３３１ｆ、及び、顔画像３３１ｇ等の情報が含まれている。なお、ユーザ名３３１ｂ～性別３３１ｆが、ユーザのプロファイルの一例である。また、顔画像３３１ｇは、記憶部３３０内の所定のフォルダに格納される顔画像（ユーザの顔部を含む撮影画像）のファイル名である。なお、顔画像３３１ｇは、ユーザ毎に１つに限られず、複数であってもよい。

このようなユーザ情報３３１の他にも、記憶部３３０は、申請システム１００を利用するために必要となる代表ユーザのアカウント情報や決済情報等を記憶する。

なお、上述した補助記憶部４０７等が、このような記憶部３３０として機能しうる。

図４に戻って、制御部３４０は、端末装置３００全体を制御する。この制御部３４０は、取得部３４１、認識部３４２、表示制御部３４３、受付部３４４、更新部３４５、及び、登録部３４６含んでいる。

取得部３４１は、カメラ３１０によって撮影された人物の顔部を含む撮影画像を取得する。より詳細に、取得部３４１は、前面カメラ３１１により撮影された第１撮影画像と、背面カメラ３１２により撮影された第２撮影画像との取得を試みる。
具体的に、取得部３４１は、短時間（一例として、数百ミリ秒）毎に、前面カメラ３１１と背面カメラ３１２とを交互に動作させ（撮影動作を切り替え）ながら、第１撮影画像と第２撮影画像との取得を試みる。
なお、端末装置３００において、前面カメラ３１１と背面カメラ３１２とを同時に動作させることができる場合に、取得部３４１は、並行して、第１撮影画像と第２撮影画像との取得を試みてもよい。

ところで、代表ユーザが端末装置３００を使用して、実際に予約申請を行う際には、以下に述べるような複数の場面が想定される。
まず、代表ユーザが自分で美容施設を利用しようとする場面では、例えば、図６（ａ）に示すように、端末装置３００の背面側（図示せぬ背面カメラ３１２側）に他のユーザが存在しない状態で端末装置３００を操作することになる。この場合、取得部３４１は、前面カメラ３１１によって撮影された人物Ｈ１（代表ユーザ）の顔部を含む第１撮影画像を取得する。なお、取得部３４１は、背面カメラ３１２によって撮影された撮影画像も取得することになるが、こちらの撮影画像には人物（顔部）が含まれていないため、第２撮影画像としては活用されない。
次に、代表ユーザが、他のユーザ（一例として、子供ユーザ）に美容施設を利用させようとする場面では、例えば、図６（ｂ）に示すように、端末装置３００の背面側（図示せぬ背面カメラ３１２側）に対象のユーザ（子供ユーザ）が存在する状態で端末装置３００を操作することになる。この場合、取得部３４１は、前面カメラ３１１によって撮影された人物Ｈ１（代表ユーザ）の顔部を含む第１撮影画像と、背面カメラ３１２によって撮影された人物Ｈ２（子供ユーザ）の顔部を含む第２撮影画像とを取得する。この場合、後述するように、第２撮影画像を用いた認識が優先されることになる。
なお、他のユーザが、代表ユーザに代わって端末装置３００を操作することも現実にはあり得るが、発明の理解を容易にするために、本実施形態では、端末装置３００は、代表ユーザによって操作されることを前提として説明する。

図４に戻って、認識部３４２は、上記の取得部３４１によって取得された撮影画像と、記憶部３３０に記憶されたユーザ情報３３１に含まれる各顔画像３３１ｇとの類似度をそれぞれ算定することにより、家族内における複数のユーザの中から該当ユーザを認識する。例えば、各顔画像３３１ｇのうち、何れかの顔画像３３１ｇと撮影画像との類似度が最も高く、かつ、その類似度が認識要件を満たす基準値よりも高い場合に、認識部３４２は、撮影画像に含まれる人物（カメラ３１０で撮影した人物）が、その顔画像３３１ｇに該当する（一致する）ユーザであると認識する。

より詳細に、認識部３４２は、前面カメラ３１１によって撮影された第１撮影画像に基づいて第１該当ユーザを認識すると共に、背面カメラ３１２によって撮影された第２撮影画像に基づいて第２該当ユーザを認識する。
例えば、上述した図６（ａ）に示すような場面において、認識部３４２は、取得部３４１によって取得された第１撮影画像と、ユーザ情報３３１に含まれる各顔画像３３１ｇとの類似度をそれぞれ算定することにより、家族内における複数のユーザの中から第１該当ユーザ（代表ユーザ）を認識する。なお、この場面では、背面カメラ３１２によって撮影された撮影画像には人物が含まれていないため、認識部３４２は、そのような撮影画像を第２撮影画像として活用しないものとする。
また、上述した図６（ｂ）に示すような場面において、認識部３４２は、取得部３４１によって取得された第１撮影画像及び第２撮影画像と、ユーザ情報３３１に含まれる各顔画像３３１ｇとの類似度をそれぞれ算定することにより、家族内における複数のユーザの中から第１該当ユーザ（代表ユーザ）及び第２該当ユーザ（子供ユーザ等）を認識する。なお、第１該当ユーザと第２該当ユーザとを共に認識した場合には、後述するように、第２該当ユーザの方が優先される。

ところで、図６（ｂ）に示すような場面において、人物Ｈ２の情報（顔画像等）がユーザ情報３３１に登録されていない状況も起こり得る。例えば、末っ子の子供ユーザに初めて美容施設を利用させようとする際に、その子供ユーザの情報がユーザ情報３３１に登録されていないこともある。つまり、第２撮影画像に人物（人物Ｈ２）の顔部が含まれているにも拘わらず、認識部３４２が、家族内における複数のユーザの中から該当ユーザを認識できない場合である。この場合、認識部３４２は、第１該当ユーザの認識をキャンセルした上で、第２撮影画像に含まれる人物の情報が未登録である旨を認識結果として出力するものとする。

表示制御部３４３は、上記の認識部３４２によって該当ユーザが認識された場合に、その該当ユーザが受けようとするサービスを申請するための申請フォームを、表示部３５０に表示する。その際、表示制御部３４３は、ユーザ情報３３１における該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）に基づいて、一部の内容に値等をセットした申請フォームを表示部３５０に表示する。
例えば、表示制御部３４３は、図７に示すような申請フォーム５１０を表示部３５０に表示する。この申請フォーム５１０には、氏名５１１、電話番号５１２、住所５１３、大人／子供５１４、男性／女性５１５、希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８からなる設定内容と、送信ボタンＳＢとが含まれている。そして、表示制御部３４３は、このような申請フォーム５１０を最初に表示する際に、認識部３４２によって認識された該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）に基づいて、氏名５１１～男性／女性５１５に値等をセットした上で、表示部３５０に表示する。

なお、認識部３４２によって、第１該当ユーザと第２該当ユーザとが共に認識された場合には、第２該当ユーザの方が優先される。これは、上述した図６（ｂ）に示すような場面（代表ユーザが他のユーザに美容施設を利用させようとする場面）であると想定されるため、表示制御部３４３は、ユーザ情報３３１における第２該当ユーザのプロファイルに基づいて、一部の内容に値をセットした申請フォーム（図７に示すような申請フォーム５１０）を表示部３５０に表示する。

また、表示制御部３４３は、認識部３４２によって該当ユーザが認識された際において、直ちに、申請フォームを表示部３５０に表示するのではなく、認識された該当ユーザのプロファイルの一部（例えば、図４のユーザ名３３１ｂ等）が含まれる確認画面を表示部３５０にポップアップ表示させるなどして、代表ユーザからの確認を経た後に、申請フォームを表示部３５０に表示するようにしてもよい。

図４に戻って、受付部３４４は、表示部３５０に表示された申請フォームに対して、内容を追加若しくは変更するための入力操作を代表ユーザから受け付ける。
つまり、受付部３４４は、上述した図７に示すような一部の内容に値等がセットされた申請フォーム５１０に対する、代表ユーザからの入力操作を受け付ける。例えば、図７の申請フォーム５１０において、希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８の設定内容が未入力（未設定）であるため、代表ユーザは、これらの内容に値等をセットするために、入力操作を行うことになる。そして、受付部３４４は、このような入力操作を受け付ける。なお、受付部３４４は、既に設定済み（記入済み）の内容を変更するための入力操作を受け付けてもよい。
また、上述した表示制御部３４３は、この受付部３４４が受け付けた入力操作に応じて、内容を反映させた申請フォームを表示部３５０に表示する。例えば、表示制御部３４３は、図８に示すような、未入力だった内容（希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８）に値等がセットされた申請フォーム５１０を表示する。この状態で、送信ボタンＳＢが代表ユーザによって押下されると、上述した送受信部３２０は、全ての内容に値等がセットされた申請フォーム５１０（より詳細には、申請フォーム５１０の内容に応じて情報が羅列されたデータ）を管理サーバ２００へ送信することになる。

図４に戻って、更新部３４５は、認識部３４２によって認識された該当ユーザのユーザ情報に、撮影画像を新たな顔画像として追加若しくは入れ換えて記憶させる。例えば、更新部３４５は、上述した図８に示すような申請フォーム５１０の送信ボタンＳＢが代表ユーザによって押下された場合に、カメラ３１０によって撮影された撮影画像が正しく認識されたと判断できるため、ユーザ情報３３１における認識された該当ユーザの顔画像３３１ｇに、その撮影画像を新たな顔画像として追加若しくは入れ換えて記憶させる。より詳細に、更新部３４５は、撮影画像に名前を付けて所定のフォルダに格納し、その撮影画像の名前（ファイル名）を顔画像３３１ｇに追加若しくは入れ換えて記憶させる。
なお、認識部３４２によって第１該当ユーザと第２該当ユーザとが共に認識された場合には、上述したように、第２撮影画像の方を優先するため、第２該当ユーザのユーザ情報に、その第２撮影画像を新たな顔画像として追加若しくは入れ換えて記憶させるものとする。
このように、更新部３４５が、該当ユーザの顔画像３３１ｇを更新（追加、若しくは、入れ換え）することにより、例えば、子供ユーザの顔付きが、成長に伴って徐々に変化して行くような状況にも対応可能となる。つまり、子供ユーザについての予約申請の度に（子供ユーザに美容施設を利用させる間隔で）、更新部３４５が、その子供ユーザの顔画像３３１ｇを更新するため、成長期の子供ユーザを撮影する場合でも、正しく認識されることが期待できる。

登録部３４６は、認識部３４２により、ユーザ情報３３１の各顔画像３３１ｇの中から、撮影画像に含まれる人物が認識されなかった場合に、その撮影画像を用いた新たなユーザ情報を記憶部３３０に登録する。
例えば、ユーザ情報３３１に登録していないユーザ（顔部）をカメラ３１０で撮影した場合に、上述した認識部３４２が、撮影画像に含まれる人物の情報が未登録である旨を認識結果として出力するため、登録部３４６は、図４のユーザ情報３３１に新たなレコードを追加と共に、撮影画像に名前を付けて記憶部３３０内の所定のフォルダへ格納する。そして、登録部３４６は、追加したレコードの住所３３１ｃ、電話番号３３１ｄ等へ、代表ユーザのレコード（一例として、先頭レコード）の住所３３１ｃ、電話番号３３１ｄ等から同じ情報をコピーすると共に、追加したレコードの顔画像３３１ｇへ撮影画像のファイル名をセットする。

なお、上述したＣＰＵ ４０１等が、このような構成からなる制御部３４０として機能しうる。

表示部３５０は、表示制御部３４３に制御され、上述した図７や図８に示すような申請フォーム５１０を表示する。
また、表示部３５０は、上述した認識部３４２が該当ユーザの認識を試みている間に、カメラ３１０が撮影している撮影画像を表示するようにしてもよい。

なお、上述した表示ユニット４１１が、このような表示部３５０として機能しうる。

（端末装置の動作）
以下、このような構成の端末装置３００の動作について図９を参照して説明する。図９は、端末装置３００が実行する申請処理の流れを示すフローチャートである。この申請処理は、例えば、代表ユーザの端末装置３００から管理サーバ２００にアクセスし、目的の美容施設の予約ページで、予約申請について要求した後に開始される。

まず、端末装置３００は、管理サーバ２００から、空白の申請フォームを受信する（ステップＳ１１）。
すなわち、制御部３４０は、送受信部３２０を制御して、管理サーバ２００から送られる初期の申請フォーム（全ての内容が未記入の申請フォーム）を受信する。

端末装置３００は、カメラ３１０によって撮影された撮影画像を取得する（ステップＳ１２）。
すなわち、制御部３４０（取得部３４１）は、カメラ３１０によって撮影された人物の顔部を含み得る撮影画像を取得する。より詳細に、制御部３４０は、前面カメラ３１１により撮影された第１撮影画像と、背面カメラ３１２により撮影された第２撮影画像とを取得する。

端末装置３００は、撮影画像に人物（顔部）が含まれているか否かを判別する（ステップＳ１３）。
すなわち、制御部３４０は、上記のステップＳ１２にて撮影された撮影画像に人物の顔部が含まれているかどうかを判別する。より詳細に、制御部３４０は、前面カメラ３１１により撮影された第１撮影画像と、背面カメラ３１２により撮影された第２撮影画像との少なくとも何れか一方に人物の顔部が含まれているかどうかを判別する。

端末装置３００は、撮影画像に人物が含まれていないと判別すると（ステップＳ１３；Ｎｏ）、上述したステップＳ１２に処理を戻す。

一方、撮影画像に人物が含まれていると判別した場合（ステップＳ１３；Ｙｅｓ）に、端末装置３００は、撮影画像とユーザ情報３３１の各顔画像３３１ｇとの類似度をそれぞれ算定する（ステップＳ１４）。
例えば、制御部３４０（認識部３４２）は、図６（ａ）に示すような場面（代表ユーザが自分で美容施設を利用しようとする場面）では、上記のステップＳ１２にて取得した第１撮影画像と、ユーザ情報３３１に含まれる各顔画像３３１ｇとの類似度をそれぞれ算定する。なお、この場面では、背面カメラ３１２によって撮影された撮影画像には人物が含まれていないため、制御部３４０は、そのような撮影画像を第２撮影画像として活用しないものとする。
また、制御部３４０は、図６（ｂ）に示すような場面（代表ユーザが他のユーザに美容施設を利用させようとする場面）では、上記のステップＳ１２にて取得した第１撮影画像及び第２撮影画像と、ユーザ情報３３１に含まれる各顔画像３３１ｇとの類似度をそれぞれ算定する。

端末装置３００は、該当ユーザを認識したか否かを判別する（ステップＳ１５）。
例えば、各顔画像３３１ｇのうち、何れかの顔画像３３１ｇと撮影画像との類似度が最も高く、かつ、その類似度が認識要件を満たす基準値よりも高い場合に、制御部３４０（認識部３４２）は、撮影画像に含まれる人物（カメラ３１０で撮影した人物）が、その顔画像３３１ｇに該当する（一致する）ユーザであると認識する。

端末装置３００は、該当ユーザを認識したと判別すると（ステップＳ１５；Ｙｅｓ）、後述するステップＳ１７に処理を進める。

一方、該当ユーザを認識していないと判別した場合（ステップＳ１５；Ｙｅｓ）に、撮影画像を用いて、新たなユーザ情報を登録する（ステップＳ１６）。
一例として、図６（ｂ）に示すような場面において、人物Ｈ２の情報（顔画像等）がユーザ情報３３１に登録されていない状況も起こり得る。つまり、第２撮影画像に人物（人物Ｈ２）の顔部が含まれているにも拘わらず、制御部３４０（認識部３４２）が、家族内における複数のユーザの中から該当ユーザを認識できない場合である。
この場合、上述したステップＳ１２にて撮影された撮影画像に含まれる人物の情報が未登録であるため、制御部３４０（登録部３４６）は、その撮影画像を用いた新たなユーザ情報を記憶部３３０に登録する。例えば、制御部３４０は、図４のユーザ情報３３１に新たなレコードを追加と共に、撮影画像に名前を付けて記憶部３３０内の所定のフォルダへ格納する。そして、制御部３４０は、追加したレコードの住所３３１ｃ、電話番号３３１ｄ等へ、代表ユーザのレコード（一例として、先頭レコード）の住所３３１ｃ、電話番号３３１ｄ等から同じ情報をコピーすると共に、追加したレコードの顔画像３３１ｇへ撮影画像のファイル名をセットする。

端末装置３００は、一部の内容に値をセットした申請フォームを表示部３５０に表示する（ステップＳ１７）。
すなわち、制御部３４０（表示制御部３４３）は、ユーザ情報３３１における該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）に基づいて、一部の内容に値等をセットした申請フォームを表示部３５０に表示する。
例えば、制御部３４０は、図７に示すような申請フォーム５１０を表示部３５０に表示する。つまり、制御部３４０は、認識された該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）に基づいて、氏名５１１～男性／女性５１５に値等をセットした申請フォーム５１０を、表示部３５０に表示する。

端末装置３００は、入力操作に応じて、内容を反映させた申請フォームを表示部３５０に表示する（ステップＳ１８）。
例えば、図７の申請フォーム５１０において、希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８の設定内容が未入力（未設定）であるため、代表ユーザは、これらの内容に値等をセットするために、入力操作を行うことになる。
そのため、制御部３４０（表示制御部３４３）は、代表ユーザからの入力操作に応じて、内容を反映させた申請フォームを表示部３５０に表示する。例えば、制御部３４０は、図８に示すような、未入力だった内容（希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８）に値等がセットされた申請フォーム５１０を表示する。

端末装置３００は、送信ボタンが押下されたか否かを判別する（ステップＳ１９）。
すなわち、制御部３４０は、図８に示すような申請フォーム５１０において、送信ボタンＳＢが代表ユーザによって押下されたかどうかを判別する。

端末装置３００は、送信ボタンが押下されていないと判別すると（ステップＳ１９；Ｎｏ）、上述したステップＳ１８に処理を戻す。

一方、送信ボタンが押下されたと判別した場合（ステップＳ１９；Ｙｅｓ）に、端末装置３００は、申請フォームを管理サーバ２００へ送信する（ステップＳ２０）。
すなわち、制御部３４０は、送受信部３２０を制御し、全ての内容に値等がセットされた申請フォーム５１０（より詳細には、申請フォーム５１０の内容に応じて情報が羅列されたデータ）を管理サーバ２００へ送信する。

このような申請処理によって、代表ユーザが端末装置３００のカメラ３１０で対象のユーザを撮影するだけで、そのユーザのプロファイルに基づいて一部の内容が記入された申請フォームが表示部３５０に表示されることになる。また、その際、代表ユーザは、前面カメラ３１１と背面カメラ３１２との切り換え等を行う必要がなく、対象のユーザを前面カメラ３１１若しくは背面カメラ３１２で撮影するだけで、そのユーザのプロファイルに基づいて一部の内容が記入された申請フォームが表示部３５０に表示されることになる。
この状態から、代表ユーザは、未記入の内容を記入するだけで、申請フォームの入力が完了し、後は送信ボタンを押下するだけで完了した申請フォームを管理サーバ２００へ送信することが可能となる。

この結果、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことができる。

（他の実施形態）
上記の実施形態では、図６（ｂ）に示すような場面で、背面カメラ３１２によって撮影された第２撮影画を用いて認識した第２該当ユーザを優先する場合について説明したが、第１該当ユーザと第２該当ユーザとを認識した場合に、両方のユーザについての予約申請を一括して行うようにしてもよい。

例えば、認識部３４２によって、第１該当ユーザと第２該当ユーザとが共に認識された場合に、表示制御部３４３は、ユーザ情報３３１における第１該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）と、第２該当ユーザのプロファイルとに基づいて、一部の内容に値等をセットした申請フォーム（複数人用の申請フォーム）を表示部３５０に表示する。

具体的に、表示制御部３４３は、図１０に示すような申請フォーム５２０を表示部３５０に表示する。この申請フォーム５２０は、タブＴＢで、各該当ユーザの内容（氏名５１１～希望するサービス５１６）が切り換えて表示できるようになっており、このうち、氏名５１１～男性／女性５１５は、認識された該当ユーザのプロファイル（一例として、図４のユーザ名３３１ｂ～性別３３１ｆ等）に基づいて値等がセットされている。
なお、この申請フォーム５２０では、予約したい日５１７、及び、予約したい時刻５１８を共有にしているが、これら予約したい日５１７、及び、予約したい時刻５１８を該当ユーザ毎にセットできるようにしてもよい。

この場合も、代表ユーザは、未記入の設定内容（各該当ユーザの希望するサービス５１６、予約したい日５１７、及び、予約したい時刻５１８）に値等をセットするだけで、申請フォーム５２０が完成し、その後、送信ボタンＳＢを押下するだけで、完成した申請フォーム５２０を管理サーバ２００へ送信することができる。

この場合も、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行うことができる。

上記の実施形態では、美容施設に対して、予約申請を行う申請システム１００を一例として説明したが、このような美容施設に限られず、各種のサービスをユーザに提供する他の施設（医療施設、音楽教室、スポーツ教室、語学教室等）に対して、予約申請を行う申請システムにおいても適用可能である。
また、予約申請以外にも、公共機関等に対して、各種サービスを受けるための登録申請を行う申請システムにおいても適用可能である。

また、上記の実施形態では、家族内における複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが行う場合について説明したが、このような家族内に限られず、親しい友人グループ内における複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが行う場合においても適用可能である。

以上説明したように、本発明によれば、複数のユーザのうち、何れかのユーザについてのサービスの申請を、代表ユーザが容易に行える端末装置、申請方法、ならびに、プログラムを提供することができる。

１００ 申請システム
２００ 管理サーバ
３００ 端末装置
３１０ カメラ
３１１ 前面カメラ
３１２ 背面カメラ
３２０ 送受信部
３３０ 記憶部
３３１ ユーザ情報
３４０ 制御部
３４１ 取得部
３４２ 認識部
３４３ 表示制御部
３４４ 受付部
３４５ 更新部
３４６ 登録部
４００ 情報処理装置
４０１ ＣＰＵ
４０２ ＲＯＭ
４０３ ＲＡＭ
４０４ ＮＩＣ
４０５ 画像処理部
４０６ 音声処理部
４０７ 補助記憶部
４０８ インターフェース
４０９ 撮影ユニット
４１０ 操作ユニット
４１１ 表示ユニット
９００ インターネット

Claims (8)

1. カメラを有する端末装置であって、
   複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部と、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得部と、
   前記取得部によって取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識部と、
   前記認識部によって認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを表示する表示部と、
   前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付部と、
   前記受付部が受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信部と、
   前記認識部により、前記複数のユーザの中から前記撮影画像に含まれる人物が認識されなかった場合に、前記複数のユーザのうちで予め定められた代表ユーザの前記プロファイルに基づいて一部の内容を設定したプロファイルと前記撮影画像とを含む新たなユーザ情報を、前記記憶部に登録する登録部と、
   を備えることを特徴とする端末装置。
2. カメラを有する端末装置であって、
   複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部と、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得部と、
   前記取得部によって取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識部と、
   前記認識部によって認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを表示する表示部と、
   前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付部と、
   前記受付部が受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信部と、を備え、
   前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
   前記取得部は、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
   前記認識部は、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
   前記表示部は、前記認識部が前記第１該当ユーザだけを認識した場合に、前記第１該当ユーザについての前記申請フォームを表示し、前記認識部が前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第２該当ユーザについての前記申請フォームを表示する、
   ことを特徴とする端末装置。
3. カメラを有する端末装置であって、
   複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部と、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得部と、
   前記取得部によって取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識部と、
   前記認識部によって認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを表示する表示部と、
   前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付部と、
   前記受付部が受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信部と、を備え、
   前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
   前記取得部は、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
   前記認識部は、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
   前記表示部は、前記認識部が前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第１該当ユーザ及び前記第２該当ユーザについての申請をまとめた前記申請フォームを表示する、
   ことを特徴とする端末装置。
4. 前記該当ユーザの前記ユーザ情報に、前記撮影画像を新たな顔画像として追加若しくは入れ換えて記憶させる更新部を更に備える、
   ことを特徴とする請求項１から３の何れか１項に記載の端末装置。
5. 前記送信部は、前記申請フォームと共に、前記取得部によって取得された前記撮影画像を、前記管理サーバへ送信する、
   ことを特徴とする請求項１から３の何れか１項に記載の端末装置。
6. カメラと、表示部と、複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部とを有するコンピュータに、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得手順、
   前記取得手順にて取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識手順、
   前記認識手順にて認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを前記表示部に表示する表示手順、
   前記表示手順にて前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付手順、
   前記受付手順にて受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信手順、
   前記認識手順にて、前記複数のユーザの中から前記撮影画像に含まれる人物が認識されなかった場合に、前記複数のユーザのうちで予め定められた代表ユーザの前記プロファイルに基づいて一部の内容を設定したプロファイルと前記撮影画像とを含む新たなユーザ情報を、前記記憶部に登録する登録手順、
   を実行させることを特徴とするプログラム。
7. カメラと、表示部と、複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部とを有するコンピュータに、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得手順、
   前記取得手順にて取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識手順、
   前記認識手順にて認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを前記表示部に表示する表示手順、
   前記表示手順にて前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付手順、
   前記受付手順にて受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信手順、を実行させ、
   前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
   前記取得手順では、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
   前記認識手順では、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
   前記表示手順では、前記認識手順にて前記第１該当ユーザだけを認識した場合に、前記第１該当ユーザについての前記申請フォームを表示し、前記認識手順にて前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第２該当ユーザについての前記申請フォームを表示する、
   ことを特徴とするプログラム。
8. カメラと、表示部と、複数のユーザについての各ユーザ情報であり、ユーザのプロファイルとユーザの顔画像とを含むユーザ情報をそれぞれ記憶する記憶部とを有するコンピュータに、
   前記カメラによって撮影された人物の顔部を含む撮影画像を取得する取得手順、
   前記取得手順にて取得された前記撮影画像と、前記記憶部に記憶された前記各ユーザ情報に含まれる各顔画像との類似度をそれぞれ算定することにより、前記複数のユーザの中から該当ユーザを認識する認識手順、
   前記認識手順にて認識された前記該当ユーザが受けようとするサービスを申請するための申請フォームであり、前記該当ユーザの前記プロファイルに基づいて一部の内容が入力済みの前記申請フォームを前記表示部に表示する表示手順、
   前記表示手順にて前記表示部に表示された前記申請フォームに対して、内容を追加若しくは変更するための入力操作を受け付ける受付手順、
   前記受付手順にて受け付けた前記入力操作を反映した前記申請フォームを、前記サービスの管理を行う管理サーバへ送信する送信手順、を実行させ、
   前記カメラは、前記表示部と同じ面に設けられた前面カメラと、前記表示部の裏面に設けられた背面カメラとから構成され、
   前記取得手順では、前記前面カメラにより撮影された第１撮影画像と、前記背面カメラにより撮影された第２撮影画像との取得を試み、
   前記認識手順では、前記第１撮影画像に基づいて第１該当ユーザを認識すると共に、前記第２撮影画像に基づいて第２該当ユーザを認識し、
   前記表示手順では、前記認識手順にて前記第１該当ユーザ及び前記第２該当ユーザを認識した場合に、前記第１該当ユーザ及び前記第２該当ユーザについての申請をまとめた前記申請フォームを表示する、
   ことを特徴とするプログラム。

Images