JP6756399B2 - 携帯端末、本人確認システム及びプログラム - Google Patents

Description

本発明は、本人確認処理に用いる携帯端末、本人確認システム及びプログラムに関する。

従来、銀行等において、インターネット等の通信ネットワークを介して、顧客に対していわゆるインターネットバンキングのサービスを提供することが行われている。インターネットバンキングのサービスでは、携帯端末等の顧客が所持する端末を使用して本人であることの確認を行うために、例えば、生体情報を利用したものが考えられている。一例として、免許証等のＩＣカードに記憶された顔画像と、端末の操作者である顧客の顔画像とを用いた顔認証により、本人確認を行う方法が開示されている（例えば、特許文献１）。

特開２０１５−８８０８０号公報

特許文献１に記載のものは、ＩＣカードのチップに記憶された顔画像データを用いるものであるため、情報端末には、ＩＣカードを読み取るためのリーダを備えている必要があった。
銀行等のサービスに限らず、様々な金融機関等のサービスに対する取引利用開始の申込時に、携帯端末を使用して利用するためには、電子データで本人確認ができる必要があり、ＩＣカードの読取以外の方法で利用できる仕組みが求められている。

そこで、本発明は、ＩＣカードの読取以外の方法で得た電子データを用いた本人確認を行うための携帯端末、本人確認サーバ、本人確認システム及びプログラムを提供することを目的とする。

本発明は、以下のような解決手段により、前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。また、符号を付して説明した構成は、適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。

第１の発明は、撮影部（２３）を有する携帯端末（１）であって、サービス開始時におけるユーザの本人確認に必要なデータを、前記ユーザが所持する前記携帯端末のみを用いて取得するものであり、顔写真が掲載された本人確認書類（３）の画像である本人確認画像を、前記撮影部から取得する本人確認画像取得手段（１３）と、前記本人確認書類と、前記本人確認書類を所持した所持者の顔との両方を含む画像である保存画像を、前記撮影部から取得する保存画像取得手段（１５）と、前記所持者の顔を含む画像である照合画像を、前記撮影部から取得する照合画像取得手段（１６）と、前記本人確認画像取得手段により取得した前記本人確認画像と、前記照合画像取得手段により取得した前記照合画像とを、画像を用いて本人確認を行う本人確認サーバ（４）に送信する照合用画像送信手段（１６）と、を備える携帯端末である。
第２の発明は、第１の発明の携帯端末（１）において、前記撮影部（２３）による撮影範囲の画像を表示する表示部（２５）と、前記本人確認書類（３）及び前記所持者の顔の配置範囲を示すガイド画像を、前記表示部に出力するガイド画像出力手段（１４）と、を備えること、を特徴とする携帯端末である。
第３の発明は、第２の発明の携帯端末（１）において、前記ガイド画像出力手段（１４）は、前記本人確認書類（３）の配置範囲を、前記顔の位置に重ならないランダムな位置であり、かつ、所定以上の大きさの範囲で示した前記ガイド画像を、前記表示部（２５）に出力すること、を特徴とする携帯端末である。
第４の発明は、第２の発明又は第３の発明の携帯端末（１）において、前記保存画像取得手段（１５）により取得した前記保存画像に含まれる前記本人確認書類（３）の画像と、前記所持者の顔画像との位置を、前記ガイド画像出力手段（１４）により出力した前記ガイド画像に基づいて確認する保存画像確認手段（１５）を備えること、を特徴とする携帯端末である。
第５の発明は、第１の発明から第４の発明までのいずれかの携帯端末（１）において、前記保存画像取得手段（１６）は、前記本人確認書類（３）の配置位置が異なる複数の前記保存画像を、前記撮影部（２３）から取得すること、を特徴とする携帯端末である。
第６の発明は、第１の発明から第５の発明までのいずれかの携帯端末（１）において、前記本人確認画像取得手段（１３）により取得した前記本人確認画像から顔写真画像を抽出する顔写真画像抽出手段（１３）を備え、前記照合用画像送信手段（１６）は、前記本人確認サーバ（４）に対して、前記顔写真画像抽出手段により抽出した前記顔写真画像と前記照合画像とを送信すること、を特徴とする携帯端末である。
第７の発明は、第１の発明から第６の発明までのいずれかの携帯端末（１）に対して通信可能に接続され、本人確認処理を行う本人確認サーバ（４）であって、前記携帯端末から受信した前記照合画像と前記本人確認画像に含まれる顔写真画像とを照合する顔照合手段（４３）と、前記顔照合手段による照合結果情報を、前記携帯端末に送信する結果送信手段（４４）と、を備える本人確認サーバである。
第８の発明は、第１の発明から第６の発明までのいずれかの携帯端末（１）と、第７の発明の本人確認サーバ（４）と、を備えた本人確認システム（１００）であって、前記携帯端末は、本人確認がされていない場合に、前記本人確認画像取得手段（１３）、前記保存画像取得手段（１５）、前記照合画像取得手段（１６）及び前記照合用画像送信手段（１６）による処理を実行し、前記照合結果情報に基づいて、前記携帯端末及び前記本人確認サーバに対して通信可能に接続され、サービス処理を行うサービス提供サーバ（７）との間でサービス処理を開始するか否かを判定するサービス開始判定手段（１８）を備えること、を特徴とする本人確認システムである。
第９の発明は、撮影部（２３）を有し、サービス開始時におけるユーザの本人確認に用いる、前記ユーザが所持するコンピュータ（１）を、顔写真が掲載された本人確認書類（３）の画像である本人確認画像を、前記撮影部から取得する本人確認画像取得手段と、前記本人確認書類と、前記本人確認書類を所持した所持者の顔との両方を含む画像である保存画像を、前記撮影部から取得する保存画像取得手段と、前記所持者の顔を含む画像である照合画像を、前記撮影部から取得する照合画像取得手段と、前記本人確認画像取得手段によって取得した前記本人確認画像と、前記照合画像取得手段により取得した前記照合画像とを、画像を用いて本人確認を行う本人確認サーバ（４）に送信する照合用画像送信手段と、して機能させるためのプログラム（２１ｂ）である。

本発明によれば、ＩＣカードの読取以外の方法で得た電子データを用いた本人確認を行うための携帯端末、本人確認サーバ、本人確認システム及びプログラムを提供することができる。

第１実施形態に係る本人確認システムの全体構成を示す図である。 第１実施形態に係る携帯端末の機能ブロック図である。 第１実施形態に係る本人確認サーバの機能ブロック図である。 第１実施形態に係る携帯端末でのサービス開始処理を示すフローチャートである。 第１実施形態に係る携帯端末での本人確認処理を示すフローチャートである。 第１実施形態に係る本人確認システムでの本人確認画像処理を示すフローチャートである。 第１実施形態に係る本人確認システムでの保存画像処理を示すフローチャートである。 第１実施形態に係る携帯端末での表示例を示す図である。 第１実施形態に係る携帯端末での表示例を示す図である。 第１実施形態に係る本人確認システムでの照合画像処理を示すフローチャートである。 第２実施形態に係る本人確認システムの全体構成図並びに携帯端末及び本人確認サーバの機能ブロック図である。 第２実施形態に係る本人確認システムでの本人確認画像処理を示すフローチャートである。 第３実施形態に係る本人確認システムにおける携帯端末の機能ブロック図である。 第３実施形態に係る本人確認システムでの本人確認画像処理を示すフローチャートである。 第３実施形態に係る携帯端末での表示例を示す図である。 第３実施形態に係る携帯端末に表示する書類位置ガイド画像の例を示す図である。 第３実施形態に係る本人確認システムでの保存画像処理を示すフローチャートである。 第３実施形態に係る本人確認システムでの照合画像処理を示すフローチャートである。 第３実施形態に係る携帯端末での照合画像の取得処理を示すフローチャートである。 第３実施形態に係る携帯端末での表示例を示す図である。

以下、本発明を実施するための形態について、図を参照しながら説明する。なお、これは、あくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

（第１実施形態）
図１は、第１実施形態に係る本人確認システム１００の全体構成を示す図である。
図２は、第１実施形態に係る携帯端末１の機能ブロック図である。
図３は、第１実施形態に係る本人確認サーバ４の機能ブロック図である。
図１に示す本人確認システム１００は、各種サービスの初回のサービス開始時に必要な本人確認を、携帯端末１のみによって行うためのシステムである。また、本人確認システム１００は、２回目以降のサービス開始時に必要な本人認証を、携帯端末１のみによって行うシステムである。

ここで、各種サービスとは、例えば、銀行での口座開設や各種の銀行業務に係るサービス、カーシェアサービス、不動産の賃貸等に係るサービス等であり、本人確認が必要な様々なサービスをいう。現在、銀行の口座開設等においての本人確認の手段としては、口座開設を申し込んだ申込本人宅に、転送不要郵便を送付することにより行われている。昨今、オンラインでの本人確認を完結させる方法が、金融機関において検討されている。本発明における本人確認とは、口座開設等の金融機関との取引を始めるにあたり、携帯端末等を利用したオンラインでの手続きを可能とするための確認処理をいう。他方、本人認証とは、既に本人確認ができている状態であって、２回目以降のサービス開始時等に、なりすまし等を防ぐためのものをいう。
以下の説明において、携帯端末１を使用して、本人確認や本人認証が必要なサービスを開始する場合を例に説明する。

本人確認システム１００は、携帯端末１と、本人確認サーバ４とを備える。携帯端末１は、例えば、無線通信の基地局Ｒを介して通信ネットワークＮに接続可能である。また、本人確認サーバ４は、通信ネットワークＮを介して通信可能に接続されている。
本人確認システム１００は、通信ネットワークＮを介して、サービス提供サーバ７に対して接続されている。サービス提供サーバ７は、携帯端末１との間でサービス処理を行うためのサーバである。

携帯端末１は、例えば、サービス提供サーバ７によるサービスの提供を受けようとする者が所有する端末である。以下、サービスの提供を受けようとする者のことを、ユーザという。携帯端末１は、例えば、スマートフォンやタブレットに代表されるコンピュータの機能を併せ持った携帯型の装置である。
図２に示すように、携帯端末１は、制御部１０と、記憶部２０と、カメラ２３（撮影部）と、タッチパネルディスプレイ２５と、通信インタフェース部２９とを備える。

制御部１０は、携帯端末１の全体を制御するＣＰＵ（中央処理装置）である。制御部１０は、記憶部２０に記憶されているオペレーティングシステム（ＯＳ）や各種アプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
制御部１０は、アプリ起動部１１と、本人確認部１２と、本人認証部１７と、サービス開始判定部１８（サービス開始判定手段）とを備える。

アプリ起動部１１は、取引アプリ２１ａを実行した際に、取引アプリ２１ａに対応して処理を行うサービス提供サーバ７から本人認証の要求を受信して、本人確認アプリ２１ｂ（プログラム）を起動させる。
本人確認部１２は、本人確認処理を行う制御部である。本人確認部１２は、本人確認画像処理部１３（本人確認画像取得手段、顔写真画像抽出手段）と、ガイド画像出力部１４（第２のガイド画像出力手段）と、保存画像処理部１５（保存画像取得手段、第２の画像確認手段）と、照合画像処理部１６（照合画像取得手段、照合用画像送信手段）とを備える。

本人確認画像処理部１３は、ユーザがカメラ２３を操作して、自身の本人確認書類を撮影することで、本人確認書類の画像である本人確認画像を取得する。ここで、本人確認書類とは、ユーザの顔写真が掲載された、公的に認められた身分証明書である。本人確認書類の一例として、図１には、運転免許証３が示されている。なお、本人確認書類としては、他に、ユーザの顔写真が掲載されたマイナンバーカード等であってもよい。
そして、本人確認画像処理部１３は、取得した本人確認画像から顔写真画像を抽出する。その後、本人確認画像処理部１３は、抽出した顔写真画像を記憶部２０に記憶させる。

ガイド画像出力部１４は、本人確認書類と、本人確認書類を所持したユーザ（所持者）の顔との両方を含む画像を取得するためのガイド画像（第２のガイド画像）を、タッチパネルディスプレイ２５に出力する。ガイド画像は、配置範囲を示した補助的な画像であり、本人確認書類と、ユーザの顔とを、指示通りの位置に配置した画像を取得するためのガイドとなるものである。

保存画像処理部１５は、ユーザがカメラ２３を操作して、本人確認書類と、本人確認書類を所持したユーザの顔との両方を含む画像である保存画像を取得する。その際、ユーザは、自身の携帯端末１を操作して、本人確認書類と、本人確認書類を所持したユーザの顔との両方を、ガイド画像により示されたガイド位置に収まるようにする。
保存画像処理部１５は、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、ガイド画像の範囲に収まっていることを確認する。そして、保存画像処理部１５は、保存画像の確認ができた場合に、保存画像を記憶部２０に記憶させる。

照合画像処理部１６は、ユーザがカメラ２３を操作して、自身の顔を撮影することで、ユーザの顔画像であり、照合に用いる照合画像を取得する。
そして、照合画像処理部１６は、取得した照合画像と、記憶部２０に記憶された顔写真画像とを、本人確認サーバ４に対して送信する。

本人認証部１７は、本人認証を行う制御部である。本人認証部１７は、ユーザがカメラ２３を操作して、自身の顔を撮影することで、ユーザの顔画像であり、照合に用いる照合画像を取得し、取得した照合画像と、記憶部２０に記憶された顔写真画像とを、本人確認サーバ４に対して送信する。
サービス開始判定部１８は、本人確認サーバ４から照合結果（照合結果情報）を受信して、受信した照合結果に基づいてサービスの開始が可能か否かを判定する。

記憶部２０は、制御部１０が各種の処理を実行するために必要なプログラム、データ等を記憶するための半導体メモリ素子等の記憶領域である。
記憶部２０は、プログラム記憶部２１を備える。プログラム記憶部２１は、各種のアプリケーションプログラム（以下、アプリケーションプログラムのことを、アプリケーション、アプリ、又はプログラム等という。）を記憶する記憶領域である。プログラム記憶部２１は、取引アプリ２１ａと、本人確認アプリ２１ｂとを記憶している。なお、本実施形態では、以下において、取引アプリ２１ａと、本人確認アプリ２１ｂとを用いるものを説明するが、２つのアプリの機能が一体になったアプリを用いるものであってもよい。

取引アプリ２１ａ及び本人確認アプリ２１ｂは、予め携帯端末１にインストールされ、又は、通信ネットワークＮを介して図示しないアプリ配信サーバに対して通信をすることで、携帯端末１にダウンロードされる。
取引アプリ２１ａは、サービス提供サーバ７との間でのサービス処理を行うためのプログラムである。
本人確認アプリ２１ｂは、携帯端末１の制御部１０が実行する本人確認及び本人認証の各種機能を行うためのプログラムである。

カメラ２３は、撮影装置である。カメラ２３は、インカメラ２３ａと、アウトカメラ２３ｂとを有する。インカメラ２３ａは、携帯端末１のタッチパネルディスプレイ２５の側に有するカメラである。アウトカメラ２３ｂは、携帯端末１の背面側に有するカメラである。
タッチパネルディスプレイ２５は、液晶パネル等で構成される表示部としての機能と、ユーザの指による各種操作入力を行う入力部としての機能とを有する。
通信インタフェース部２９は、通信ネットワークＮを介して各種のサーバとの通信を行うためのインタフェースであり、送信部及び受信部の役割を行う。

図１に戻り、運転免許証３は、カード形状のものであり、上述したように、公的な身分証明書である。運転免許証３の表面には、ユーザの住所、氏名、生年月日と、ユーザの顔写真とを含むユーザの個人情報が記載されている。携帯端末１のユーザは、本人確認システム１００において、自身の運転免許証３等を、携帯端末１を用いて撮影する。

本人確認サーバ４は、携帯端末１との間でオンラインでの手続きによる本人確認を行い、顔認証によって本人認証を行うサーバである。本人確認サーバ４は、サービスを提供する企業とは異なる企業が有する。なお、本人確認サーバ４は、サービスを提供する企業が有してもよい。
図３に示すように、本人確認サーバ４は、制御部４０と、記憶部５０と、通信インタフェース部５９とを備える。

制御部４０は、本人確認サーバ４の全体を制御するＣＰＵである。制御部４０は、記憶部５０に記憶されているＯＳやアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
制御部４０は、顔照合部４３（顔照合手段）と、照合結果送信部４４（結果送信手段）とを備える。

顔照合部４３は、携帯端末１が送信した照合画像と、顔写真画像とを受信する。そして、顔照合部４３は、受信した照合画像と顔写真画像とを照合する。ここで、顔照合部４３は、照合画像と顔写真画像との照合結果を、スコアによって示してもよい。例えば、顔照合部４３は、画像照合処理を行い、顔写真画像の一致度合いをスコアとして算出する。ここで、スコアは、例えば、０〜１００までの数値により表されるものであり、一致度合いが高いほど数値が高い。
照合結果送信部４４は、照合結果を、携帯端末１に対して送信する。

記憶部５０は、制御部４０が各種の処理を実行するために必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶領域である。
記憶部５０は、プログラム記憶部５１を備える。プログラム記憶部５１は、各種のプログラムを記憶する記憶領域である。プログラム記憶部５１は、本人確認プログラム５１ａを記憶する。
本人確認プログラム５１ａは、本人確認サーバ４の制御部４０が実行する各種機能を行うためのプログラムである。
通信インタフェース部５９は、通信ネットワークＮを介してサービス提供サーバ７等の各種サーバ及び携帯端末１との間の通信を行うためのインタフェースである。

ここで、コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、携帯端末１及び本人確認サーバ４は、それぞれ制御部、記憶部等を備えた情報処理装置であり、コンピュータの概念に含まれる。

図１に示すサービス提供サーバ７は、サービス処理を行うためのサーバである。図１において、本人確認システム１００は、サービス提供サーバ７を１つのみ記載しているが、サービスごとに複数のサーバを備えてもよい。
なお、サービス提供サーバ７は、図示しないが、制御部、記憶部、通信インタフェース部等を備える。

図１に示す基地局Ｒは、無線通信の基地局であって、携帯端末１が各種のサーバとの間の通信をするための中継を行う。基地局Ｒは、例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）の基地局や、通信事業者の携帯端末通信網用の基地局である。
通信ネットワークＮは、各種のサーバ間や各種のサーバと基地局Ｒとの間のネットワークであり、インターネット回線や携帯端末通信網等である。

次に、本人確認システム１００の処理について説明する。
図４は、第１実施形態に係る携帯端末１でのサービス開始処理を示すフローチャートである。
まず、サービスを開始したいユーザは、例えば、自身の携帯端末１のタッチパネルディスプレイ２５に表示されている取引アプリ２１ａのアイコン（図示せず）を選択するタップ等のタッチ操作をする。そうすることで、携帯端末１の制御部１０は、取引アプリ２１ａを実行する。

取引アプリ２１ａが実行されると、携帯端末１のタッチパネルディスプレイ２５には、取引アプリ２１ａのメイン画面（図示せず）が表示される。そこで、ユーザがメイン画面からサービス開始のための操作（例えば、メニューを選択する操作）を行うと、図４のステップＳ１０（以下、単に「Ｓ」という。）において、携帯端末１の制御部１０は、サービス開始操作を受け付ける。
次に、Ｓ１１において、制御部１０（アプリ起動部１１）は、本人確認アプリ２１ｂを起動させる。

Ｓ１２において、制御部１０は、本人確認済であるか否かを判断する。本人確認済である場合とは、当該取引アプリ２１ａを使用したサービスを既に行っており、そのため、本人確認処理が既に行われている場合をいう。よって、本人確認済である場合は、２回目以降のサービス開始を受け付けた場合に該当する。また、本人確認済ではない場合とは、初めて当該取引アプリ２１ａを使用したサービス開始を受け付けた場合に該当する。
なお、制御部１０は、本人確認済であるか否かを、例えば、本人確認アプリ２１ｂに、本人確認済の取引アプリ２１ａを対応付けて記憶していて、それをもとに判断してもよい。また、本人確認済である場合には、記憶部２０に顔写真画像が記憶されているので、制御部１０は、記憶部２０に顔写真画像が記憶されているか否かによって判断してもよい。
本人確認済である場合（Ｓ１２：ＹＥＳ）には、制御部１０は、処理をＳ１４に移す。他方、本人確認済ではない場合（Ｓ１２：ＮＯ）には、制御部１０は、処理をＳ１３に移す。
Ｓ１３において、制御部１０（本人確認部１２）は、本人確認処理を行う。本人確認処理については、後述する。その後、制御部１０は、処理をＳ１５に移す。

他方、Ｓ１４において、制御部１０（本人認証部１７）は、本人認証処理を行う。制御部１０は、まず、インカメラ２３ａをアクティブにし、ユーザに自身の顔を撮影させることで、ユーザの顔画像である照合画像を取得する。そして、制御部１０は、取得した照合画像と、記憶部２０に記憶されている本人確認書類から得た顔写真画像とを、本人確認サーバ４に対して送信する。なお、本人確認サーバ４では、制御部４０（顔照合部４３、照合結果送信部４４）が、照合画像と顔写真画像とを照合し、携帯端末１に対して照合結果を送信する。

Ｓ１５において、制御部１０（サービス開始判定部１８）は、照合結果によって認証ができたか否かを判定する。照合結果として得られた、例えば、スコアが閾値以上である場合に、制御部１０は、認証ができたと判定する。認証ができたと判定された場合（Ｓ１５：ＹＥＳ）には、制御部１０は、処理をＳ１６に移す。他方、認証ができたと判定されなかった場合（Ｓ１５：ＮＯ）には、制御部１０は、処理をＳ１８に移す。
Ｓ１６において、制御部１０は、本人確認アプリ２１ｂの実行を終了する。
Ｓ１７において、制御部１０は、取引アプリ２１ａに対応したサービス提供サーバ７との間でサービス処理を行う。その後、制御部１０は、本処理を終了する。

他方、Ｓ１８において、制御部１０は、認証エラーの旨を、タッチパネルディスプレイ２５に出力する。
Ｓ１９において、制御部１０は、本人確認アプリ２１ｂの実行を終了する。その後、制御部１０は、本処理を終了する。

次に、携帯端末１で行う本人確認処理について説明する。
図５は、第１実施形態に係る携帯端末１での本人確認処理を示すフローチャートである。
図６は、第１実施形態に係る本人確認システム１００での本人確認画像処理を示すフローチャートである。
図７は、第１実施形態に係る本人確認システム１００での保存画像処理を示すフローチャートである。
図８及び図９は、第１実施形態に係る携帯端末１での表示例を示す図である。
図１０は、第１実施形態に係る本人確認システム１００での照合画像処理を示すフローチャートである。

図５のＳ３０において、携帯端末１の制御部１０（本人確認画像処理部１３）は、本人確認画像処理を行う。
ここで、本人確認画像処理について、図６に基づき説明する。
図６のＳ４０において、携帯端末１の制御部１０は、アウトカメラ２３ｂを起動させ、タッチパネルディスプレイ２５にアウトカメラ２３ｂのスルー画像（撮影範囲の画像）を表示させて、本人確認書類を撮影可能にする。そして、ユーザが、本人確認書類をスルー画像に写り込むようにして、図示しない撮影ボタンをタップすることで、制御部１０は、本人確認画像を取得する。

その際、制御部１０は、まず、本人確認書類として何を撮影するのか（運転免許証３又はマイナンバーカード）を選択するための身分証明書選択画面（図示せず）を表示させ、ユーザに本人確認書類の種類を選択させてもよい。そして、制御部１０は、本人確認書類の種類に応じて、撮影をさせるための案内を変えてもよい。例えば、運転免許証３の場合には、表面と裏面とを撮影する必要がある。他方、マイナンバーカードであれば、表面のみを撮影すれば足りる。
さらに、制御部１０は、本人確認書類が、正規のものであることを確認するため、本人確認書類の側面であるカードの厚みが分かるような方向からの画像を、本人確認画像の一部として取得させてもよい。
さらにまた、制御部１０は、複数枚の静止画像ではなく、一連の動作を録画した動画を取得してもよい。

Ｓ４１において、制御部１０は、本人確認画像から顔写真画像を抽出する。制御部１０は、例えば、本人確認画像を解析して、本人確認書類を特定する。そして、制御部１０は、本人確認書類から顔写真の画像位置を特定して、特定した画像位置の画像を抽出する。
Ｓ４２において、制御部１０は、抽出した顔写真画像を、記憶部２０に記憶させる。その後、制御部１０は、処理を図５のＳ３１に移す。

図５のＳ３１において、制御部１０は、保存画像処理を行う。
ここで、保存画像処理について、図７に基づき説明する。
図７のＳ５０において、制御部１０は、保存画像を撮影するための説明画面を、タッチパネルディスプレイ２５に表示させる。
図８（Ａ）は、説明画面８０の例である。説明画面８０は、ユーザの顔と、本人確認書類とを一緒に撮影するものである旨を説明する画面である。

図７のＳ５１において、制御部１０（ガイド画像出力部１４）は、ガイド画像を特定し、特定したガイド画像を、タッチパネルディスプレイ２５に表示させる。
図８（Ｂ）は、ガイド画像８１の例である。ガイド画像８１は、ユーザの顔を配置させる顔位置領域８１ａと、本人確認書類を配置させる書類位置領域８１ｂとを含む画像である。

ここで、制御部１０は、予め複数用意した書類位置領域が異なるガイド画像から、１つのガイド画像を無作為（ランダム）に指定して、タッチパネルディスプレイ２５に表示させてもよい。ここで、書類位置領域は、顔位置領域に重ならない位置に設けられる。また、書類位置領域は、本人確認書類が視認できる程度の所定以上の大きさの領域である。
なお、ガイド画像は、静止画像に限定するものではなく、動画であってもよい。さらに、書類位置領域の位置が異なるガイド画像としては、書類位置領域の位置が、撮影位置に対して上下左右方向に異なるものの他、撮影位置に対して奥行方向が異なるものを含む。

図７のＳ５２において、制御部１０（保存画像処理部１５）は、インカメラ２３ａを起動させ、タッチパネルディスプレイ２５にインカメラ２３ａのスルー画像を、ガイド画像と共に表示させる。
ユーザは、図９に示すように、自分の顔がガイド画像８１の顔位置領域８１ａに写りこむようにし、また、本人確認書類がガイド画像８１の書類位置領域８１ｂに写りこむように顔の位置及び本人確認書類の位置を調整する。そして、ユーザが、撮影ボタン８１ｃをタップすることで、制御部１０は、インカメラ２３ａが撮影したユーザの顔と、本人確認書類とを含む保存画像を取得する。

ここで、制御部１０は、書類位置領域の位置が異なる複数のガイド画像を順番に表示させて、ユーザに複数の保存画像を取得するようにしてもよい。また、制御部１０は、動画のガイド画像にしたがって、ユーザに動画の保存画像を取得するようにしてもよい。つまり、制御部１０は、本人確認の都度、異なるガイド画像を出力する。そこで、ユーザは、出力されたガイド画像に対応した保存画像を取得するために、顔の位置と、本人確認書類の位置とを、ガイド画像に対応させる。

図７のＳ５３において、制御部１０（保存画像処理部１５）は、取得した保存画像を確認する。具体的には、制御部１０は、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、ガイド画像の範囲に大体合っていることを確認する。
Ｓ５４において、制御部１０（保存画像処理部１５）は、保存画像の確認ができたことを条件に、保存画像を記憶部２０に記憶させる。なお、保存画像の確認ができなかった場合、つまり、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、ガイド画像の範囲に収まっていない場合等には、エラーとし、以降の処理を行わないようにしてもよいし、Ｓ５１からの処理を再度行ってもよい。その後、制御部１０は、処理を図５のＳ３２に移す。

図５のＳ３２において、制御部１０（照合画像処理部１６）は、照合画像処理を行う。
ここで、照合画像処理について、図１０に基づき説明する。
図１０のＳ６０において、携帯端末１の制御部１０は、インカメラ２３ａを起動させ、タッチパネルディスプレイ２５にインカメラ２３ａのスルー画像を表示させる。そして、ユーザが、自身の顔をスルー画像に写り込むようにして、図示しない撮影ボタンをタップすることで、制御部１０は、照合画像を取得する。

Ｓ６１において、制御部１０は、記憶部２０に記憶した顔写真画像と共に、取得した照合画像を、本人確認サーバ４に対して送信する。ここで、記憶部２０に記憶した顔写真画像とは、本人確認画像処理において携帯端末１が取得及び記憶したものである。
Ｓ６２において、本人確認サーバ４の制御部４０（顔照合部４３）は、照合画像と、顔写真画像とを、携帯端末１から受信する。

Ｓ６３において、制御部４０（顔照合部４３）は、照合画像と顔写真画像とを照合する顔照合処理を行う。制御部４０は、画像照合処理を行い、例えば、照合画像と顔写真画像との一致度合いをスコアとして算出する。
Ｓ６４において、制御部４０（照合結果送信部４４）は、照合結果を、携帯端末１に対して送信する。その後、制御部４０は、本処理を終了する。
Ｓ６５において、携帯端末１の制御部１０（照合画像処理部１６）は、照合結果を受信する。その後、制御部１０は、処理を図４のＳ１５に移し、上述したように、照合結果によって認証できたか否かを判定する判定処理を行う。
なお、判定処理によって認証できないと判定された場合（図４のＳ１５がＮＯ）に、制御部１０は、記憶部２０に記憶させた顔写真画像や保存画像を削除することが望ましい。

このように、第１実施形態によれば、本人確認システム１００は、以下のような効果がある。
（１）携帯端末１を用いたサービスを行う場合に、携帯端末１にカメラ２３を有していれば、携帯端末１のみを用いて本人確認を行うことができる。よって、携帯端末１がリーダ等の読取機能を有していなくても、一般的な携帯端末１であれば有しているであろうカメラ２３によって本人確認を行うことができて、便利である。そして、ユーザは、窓口等に行くという煩わしさがなく、いつでも、どこでも本人確認を行う環境をユーザに提供できる。また、生体情報を用いた本人確認であるため、セキュリティ性が高い。さらに、指紋等のように、予め生体情報を登録しておく必要がなく、利便性が高い。

（２）本人確認書類から取得した顔写真画像と、ユーザが撮影した自身の顔画像とを照合して本人認証と、本人確認書類及びユーザの顔の両方を含む保存画像を取得する本人確認とを、１つの流れで行うことができるので、便利である。
（３）保存画像は、ガイド画像の指示に従ったもののみを許容する。そして、ガイド画像は、本人確認書類の配置範囲と、ユーザの顔の配置範囲とを示すので、ユーザに分かりやすく示すことができる。さらに、ガイド画像は、本人確認画像の配置位置が異なるものをランダムに出力する。そのため、予め撮影した画像等を使用できない仕組みになり、不正を働きにくいものにできる。

（第２実施形態）
第２実施形態では、本人確認書類による処理の一部を、本人確認サーバで行うものを説明する。なお、以降の説明において、上述した第１実施形態と同様の機能を果たす部分には、同一の符号又は末尾に同一の符号を付して、重複する説明を適宜省略する。

図１１は、第２実施形態に係る本人確認システム２００の全体構成図並びに携帯端末２０１及び本人確認サーバ２０４の機能ブロック図である。
本人確認システム２００は、携帯端末２０１と、本人確認サーバ２０４とを備え、図示しない通信ネットワークＮ及び基地局Ｒを介して通信可能に接続される。なお、図示しないが、本人確認システム２００は、通信ネットワークＮを介してサービス提供サーバ７に対して接続されている。
携帯端末２０１は、制御部２１０と、記憶部２２０と、カメラ２３と、タッチパネルディスプレイ２５と、通信インタフェース部２９とを備える。

制御部２１０は、アプリ起動部１１と、本人確認部２１２と、本人認証部１７と、サービス開始判定部１８とを備える。
本人確認部２１２は、本人確認画像処理部２１３と、ガイド画像出力部１４と、保存画像処理部１５と、照合画像処理部１６とを備える。
本人確認画像処理部２１３は、ユーザがカメラ２３を操作して本人確認画像を取得する。そして、本人確認画像処理部２１３は、取得した本人確認画像から顔写真画像を抽出し、記憶部２２０に顔写真画像を記憶させる。さらに、本人確認画像処理部２１３は、取得した本人確認画像を、本人確認サーバ２０４に対して送信する。

記憶部２２０は、プログラム記憶部２２１を備える。プログラム記憶部２２１は、取引アプリ２１ａと、本人確認アプリ２２１ｂとを記憶している。本人確認アプリ２２１ｂは、携帯端末２０１の制御部２１０が実行する本人確認及び本人認証の各種機能を行うためのプログラムである。

本人確認サーバ２０４は、制御部２４０と、記憶部２５０と、通信インタフェース部５９とを備える。
制御部２４０は、本人確認画像解析部２４１と、顔照合部４３と、照合結果送信部４４とを備える。
本人確認画像解析部２４１は、運転免許証３を撮影して得られた本人確認画像を、携帯端末２０１から受信する。そして、本人確認画像解析部２４１は、ＯＣＲ（光学式文字認識）によって、本人確認書類に含まれる文字をテキスト化する。その後、本人確認画像解析部２４１は、テキスト化した文字列を、携帯端末２０１に送信する。
記憶部２５０は、プログラム記憶部２５１を備える。プログラム記憶部２５１は、本人確認サーバ２０４の制御部２４０が実行する各種機能を行うためのプログラムである本人確認プログラム２５１ａを記憶する。

次に、本人確認システム２００の処理について説明する。
サービス開始処理及び本人確認処理については、第１実施形態（図４及び図５）と同様である。
本人確認処理で行う本人確認画像処理について、図１２に基づき説明する。
図１２は、第２実施形態に係る本人確認システム２００での本人確認画像処理を示すフローチャートである。
Ｓ２４０からＳ２４２までの処理は、第１実施形態（図６）のＳ４０からＳ４２までの処理と同様である。
Ｓ２４３において、携帯端末２０１の制御部２１０は、取得した本人確認画像を、本人確認サーバ２０４に対して送信する。
なお、Ｓ２４１及びＳ２４２の処理と、Ｓ２４３の処理とは、順番に前後はなく、Ｓ２４１とＳ２４３との処理を並行して行ってもよいし、Ｓ２４３の処理をＳ２４１の処理より先に行ってもよい。

Ｓ２４４において、本人確認サーバ２０４の制御部２４０は、本人確認画像を受信する。
Ｓ２４５において、制御部２４０（本人確認画像解析部２４１）は、受信した本人確認画像に含まれる本人確認書類をテキスト化した文字情報を取得する。
Ｓ２４６において、制御部２４０は、取得した文字情報を、携帯端末２０１に送信する。その後、制御部２４０は、本処理を終了する。

Ｓ２４７において、携帯端末２０１の制御部２１０（本人確認部２１２）は、文字情報を受信し、タッチパネルディスプレイ２５に受信した文字情報を表示させる。なお、携帯端末２０１の制御部２１０は、表示された文字情報を修正する機能を有してもよい。そして、取得した文字情報は、例えば、本人確認ができた場合に、サービス提供サーバ７に対して送信することができる。その後、制御部２１０は、処理を本人確認処理の保存画像処理（図５のＳ３１に相当する処理）に移す。
保存画像処理及び照合画像処理は、第１実施形態（図７及び図１０）と同様である。

このように、第２実施形態によれば、本人確認システム２００は、以下のような効果がある。
（１）携帯端末２０１が、取得した本人確認画像を本人確認サーバ２０４に送信することで、本人確認サーバ２０４では、本人確認画像に含まれる文字情報をテキスト化して、携帯端末２０１に送信する。よって、ユーザがサービスを利用する際に必要になる氏名等を、テキスト化された文字情報を用いればよく、ユーザが入力する手間を省くことができる。
（２）携帯端末２０１が受信した文字情報を修正可能にすることで、誤変換であったり、本人確認書類に記載の氏名や住所が変更になったりした場合であっても、変更箇所のみを変更すればよく、利便性が高いものにできる。

（第３実施形態）
第３実施形態では、携帯端末を用いてユーザが行う各種の撮影態様について、セキュリティ性を向上させる工夫をしたものを説明する。

図１３は、第３実施形態に係る本人確認システム３００における携帯端末３０１の機能ブロック図である。
本人確認システム３００は、携帯端末３０１を備える。なお、図示しないが、本人確認システム３００では、携帯端末３０１が、図示しない通信ネットワークＮ及び基地局Ｒを介して本人確認サーバ４及びサービス提供サーバ７に対して接続されている（図１参照）。
携帯端末３０１は、制御部３１０と、記憶部３２０と、カメラ２３と、タッチパネルディスプレイ２５と、通信インタフェース部２９とを備える。
制御部３１０は、アプリ起動部１１と、本人確認部３１２と、本人認証部１７と、サービス開始判定部１８とを備える。

本人確認部３１２は、本人確認画像処理部３１３（第１のガイド画像出力手段、本人確認画像取得手段、第１の繰り返し手段、第１の画像確認手段、顔写真画像抽出手段）と、保存画像処理部３１５（第２のガイド画像出力手段、保存画像取得手段、第２の繰り返し手段、第２の画像確認手段、保存画像送信手段）と、照合画像処理部３１６（指示出力手段、照合画像取得手段、照合用画像送信手段、第３の繰り返し手段、第３の画像確認手段）とを備える。

本人確認画像処理部３１３は、書類位置ガイド画像（第１のガイド画像）を、タッチパネルディスプレイ２５に出力させる。書類位置ガイド画像は、顔写真を確認可能な撮影方向と、本人確認画像の大きさを含む本人確認書類の配置位置とを指定する画像である。ユーザは、自身の携帯端末３０１を操作して、書類位置ガイド画像により示されたガイド位置にしたがって、自身の本人確認書類を写しこむ。そして、ユーザがカメラ２３を操作して撮影することで、本人確認画像処理部３１３は、本人確認書類の画像である本人確認画像を取得する。

本人確認画像処理部３１３は、次に、先ほどとは撮影方向及び配置位置の異なる書類位置ガイド画像を出力して、書類位置ガイド画像にしたがって、ユーザに本人確認画像を取得させる処理を行う。本人確認画像処理部３１３は、この書類位置ガイド画像を出力し、ユーザに本人確認書類を撮影させる処理を、複数回繰り返す。そして、本人確認画像処理部３１３は、取得した本人確認画像を、記憶部３２０に記憶させる。ここで、本人確認画像処理部３１３が出力する書類位置ガイド画像のうちの１つは、本人確認書類の顔写真を含む面に対して垂直の撮影方向である、本人確認書類の正面から本人確認書類を撮影させるためのものである。

本人確認画像処理部３１３は、記憶した複数の本人確認画像のうち１つの本人確認画像から顔写真画像を抽出する。その際、本人確認画像処理部３１３は、本人確認書類の正面から本人確認書類が撮影されることで得られた本人確認画像を使用して、顔写真画像を抽出するのが望ましい。そのようにすることで、制御部３１０は、例えば、取得した顔写真画像の歪み補正をする等の追加処理を行わずに済む。その後、本人確認画像処理部３１３は、抽出した顔写真画像を記憶部３２０に記憶させる。

さらに、本人確認画像処理部３１３は、取得した本人確認画像を、取得時に使用した書類位置ガイド画像に基づいて確認する。本人確認画像処理部３１３は、本人確認画像を分析して、例えば、書類位置ガイド画像が示す枠内に、指定の撮影方向から顔写真が掲載された本人確認書類が撮影されていることを確認する。

保存画像処理部３１５は、ユーザがカメラ２３を操作して、本人確認書類と、本人確認書類を所持したユーザの顔との両方を含む画像である保存画像を取得する。その際、保存画像処理部３１５は、複数位置ガイド画像（第２のガイド画像）をタッチパネルディスプレイ２５に出力する。ユーザは、自身の携帯端末３０１を操作して、本人確認書類と、本人確認書類を所持したユーザの顔との両方を、複数位置ガイド画像により示されたガイド位置に収まるようにする。保存画像処理部３１５は、本人確認書類のガイド位置（配置位置）の異なる複数位置ガイド画像を複数記憶した記憶部３２０から、ランダムに複数位置ガイド画像を取得して出力してもよい。

保存画像処理部３１５は、本人確認書類のガイド位置の異なる複数位置ガイド画像を出力して、複数位置ガイド画像にしたがって、保存画像を取得させる処理を複数回繰り返す。そして、保存画像処理部３１５は、取得した保存画像を記憶部３２０に記憶させる。
保存画像処理部３１５は、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、複数位置ガイド画像のガイド範囲に収まっていることを確認する。そして、保存画像処理部３１５は、保存画像の確認ができた場合に、保存画像を記憶部３２０に記憶させる。
さらに、保存画像処理部３１５は、取得した保存画像を、本人確認サーバ４に対して送信してもよい。

照合画像処理部３１６は、自身の顔を撮影することで、ユーザの顔画像である、照合に用いる照合画像を取得する。
照合画像処理部３１６は、まず、自身の正面の顔を撮影するための顔撮影ガイド画像（指示情報）を、タッチパネルディスプレイ２５に出力させる。ユーザは、自身の携帯端末３０１を操作してインカメラ２３ａを起動させて自身の顔の向きを正面方向にし、顔撮影ガイド画像により示されたガイド位置に収まるようにする。そして、ユーザがカメラ２３を操作して撮影することで、照合画像処理部３１６は、照合画像を取得する。

照合画像処理部３１６は、次に、ユーザの顔の向きを変える指示を、タッチパネルディスプレイ２５に出力させると共に、例えば、携帯端末３０１の図示しないスピーカから指示を出力する。顔の向きを変えた場合には、ユーザは、タッチパネルディスプレイ２５を視認できないため、音声による指示は有効である。そして、照合画像処理部３１６は、例えば、カウントダウンを音声出力した上で、撮影タイミングになった時にカメラ２３を制御して、照合画像を取得する。
なお、照合画像処理部３１６は、ユーザの顔の向きを、例えば、上下左右方向に変えさせて照合画像を撮影する処理を、複数回行ってもよい。
そして、照合画像処理部３１６は、取得した照合画像を記憶部３２０に記憶させる。

また、照合画像処理部３１６は、取得した照合画像が撮影条件を満たしたものであるか、つまり、その前に出力した指示内容にしたがったものであるか否かを確認する。
さらに、照合画像処理部３１６は、取得した複数の照合画像と、記憶部３２０に記憶された顔写真画像とを、本人確認サーバ４に対して送信する。
なお、本人確認サーバ４では、携帯端末３０１から受信した複数の照合画像のうち、例えば、ユーザの正面の顔を撮影した照合画像と、顔写真画像とを照合する。

記憶部３２０は、プログラム記憶部３２１を備える。プログラム記憶部３２１は、取引アプリ２１ａと、本人確認アプリ３２１ｂとを記憶している。本人確認アプリ３２１ｂは、携帯端末３０１の制御部３１０が実行する本人確認及び本人認証の各種機能を行うためのプログラムである。

次に、本人確認システム３００の処理について説明する。
サービス開始処理及び本人確認処理については、第１実施形態（図４及び図５）と同様である。
本人確認処理で行う本人確認画像処理について、図１４に基づき説明する。
図１４は、第３実施形態に係る本人確認システム３００での本人確認画像処理を示すフローチャートである。
図１５は、第３実施形態に係る携帯端末３０１での表示例を示す図である。
図１６は、第３実施形態に係る携帯端末３０１に表示する書類位置ガイド画像の例を示す図である。

図１４のＳ３４０において、携帯端末３０１の制御部３１０（本人確認画像処理部３１３）は、アウトカメラ２３ｂを起動させ、タッチパネルディスプレイ２５にアウトカメラ２３ｂのスルー画像を表示させる。また、制御部３１０は、例えば、図１５（Ａ）に示すような、本人確認書類の正面を撮影方向にした書類位置ガイド画像３５０を、タッチパネルディスプレイ２５に出力する。
図１５（Ａ）に示す書類位置ガイド画像３５０は、本人確認書類を配置させる書類位置領域３５０ａと、撮影ボタン３５０ｂとを含む画像である。また、書類位置ガイド画像３５０は、透過性を有する画像である。これは、アウトカメラ２３ｂのスルー画像と共に出力するためであり、少なくとも書類位置領域３５０ａは、透過性を有する必要がある。

ユーザが、本人確認書類を書類位置領域３５０ａに写り込むように配置して、撮影ボタン３５０ｂをタップすることで、図１４のＳ３４１において、制御部３１０（本人確認画像処理部３１３）は、本人確認画像を取得する。そして、制御部３１０は、取得した本人確認画像を、記憶部３２０に記憶させる。
Ｓ３４２において、制御部３１０（本人確認画像処理部３１３）は、アウトカメラ２３ｂを再度起動させて、タッチパネルディスプレイ２５にアウトカメラ２３ｂのスルー画像を再度表示させる。そして、制御部３１０は、例えば、図１５（Ｂ）に示すような、本人確認書類の側面を含む、本人確認画像の撮影を指示する書類位置ガイド画像３５１を、タッチパネルディスプレイ２５に出力する。

図１５（Ｂ）に示す書類位置ガイド画像３５１は、本人確認書類を配置させる書類位置領域３５１ａと、撮影ボタン３５１ｂとを含む画像である。また、上述した書類位置ガイド画像３５０と同様に、書類位置ガイド画像３５１は、透過性を有する画像である。書類位置領域３５１ａは、本人確認書類の顔写真が確認でき、かつ、本人確認書類の長辺の厚さが確認できるように、斜め方向からの撮影方向を指示したものである。そのため、書類位置領域３５１ａは、底辺が長い台形状で示している。
なお、これは、一例であって、例えば、書類位置領域３５１ａは、枠線で示すものではなく、本人確認書類の２つの長辺の位置を線で示すものであってもよい。また、書類位置領域３５１ａは、本人確認書類の短辺の厚さを確認するためのものにしてもよい。

ユーザが、本人確認書類を書類位置領域３５１ａに写り込むように配置して、撮影ボタン３５１ｂをタップすることで、図１４のＳ３４３において、制御部３１０（本人確認画像処理部３１３）は、本人確認画像を取得する。そして、制御部３１０は、取得した本人確認画像を、記憶部３２０に記憶させる。

Ｓ３４４において、制御部３１０（本人確認画像処理部３１３）は、書類位置ガイド画像に基づき、取得した本人確認画像を確認する。
制御部３１０は、例えば、本人確認書類が書類位置領域３５０ａ内に収まっており、かつ、所定の大きさで本人確認画像が取得できていることや、取得した本人確認画像が、本人確認書類であること（例えば、運転免許証３の表面であること）を確認する。制御部３１０は、この確認を、取得した本人確認画像の全てにおいて行う。また、制御部３１０は、取得した本人確認画像の解像度が所定の条件を満たすか否かを確認する。例えば、手振れ等により、また、光量が不足したりしている場合には、本人確認画像の解像度が所定の条件を満たさなくなる。

なお、制御部３１０は、本人確認画像の確認により確認ができなかった場合、つまり、本人確認画像としての条件を満たさない場合には、所定のリトライ回数まで再度Ｓ３４０からの処理を行うようにしてもよい。また、制御部３１０は、例えば、所定のリトライ回数を超えた場合には、エラーとして以降の処理を行わないようにしてもよい。

Ｓ３４５において、制御部３１０（本人確認画像処理部３１３）は、本人確認画像から顔写真画像を抽出する。制御部３１０は、例えば、Ｓ３４１で取得した本人確認書類を正面から撮影した本人確認画像から、顔写真画像を抽出する。
Ｓ３４６において、制御部３１０（本人確認画像処理部３１３）は、抽出した顔写真画像を、記憶部３２０に記憶させる。その後、制御部３１０は、次に説明する保存画像処理（図５のＳ３１を参照）を行う。

なお、この例では、まず本人確認書類の正面を撮影方向にした書類位置ガイド画像３５０を出力して撮影してから、異なる撮影方向及び撮影位置の書類位置ガイド画像３５１を出力して撮影させるものを例に説明したが、これに限定されない。複数回の本人確認書類の撮影のうちの１回を、本人確認書類の正面を撮影方向にしたものにすれば、順番は限定されない。また、撮影回数は、２回に限定されるものではなく、３回以上であってもよい。

さらに、本人確認システム３００では、様々な撮影方向及び撮影位置の書類位置ガイド画像を、記憶部３２０に記憶させておいて、制御部３１０は、その中からランダムに書類位置ガイド画像を選択して、出力するようにしてもよい。様々な撮影方向及び撮影位置の書類位置ガイド画像は、例えば、図１６（Ａ）に示す書類位置ガイド画像３６１から図１６（Ｄ）に示す書類位置ガイド画像３６４までである。

図１６（Ａ）に示す書類位置ガイド画像３６１は、本人確認書類の厚みを撮影可能な撮影方向であり、近距離で画面上部に本人確認書類を配置させて撮影させるための書類位置領域３６１ａを含む。
図１６（Ｂ）に示す書類位置ガイド画像３６２は、本人確認書類の厚みを撮影可能な撮影方向であり、近距離で画面下部に本人確認書類を配置させて撮影させるための書類位置領域３６２ａを含む。
他方、図１６（Ｃ）に示す書類位置ガイド画像３６３及び図１６（Ｄ）に示す書類位置ガイド画像３６４は、本人確認書類の厚みを撮影可能な撮影方向であり、遠距離で画面上部又は下部に本人確認書類を配置させて撮影させるための書類位置領域３６３ａ及び３６４ａを含む。
なお、記憶部３２０には、その他、画面中央に書類位置領域を配置させるようにして撮影させる書類位置ガイド画像を記憶してもよい。

また、この例では、複数回、異なる撮影方向から本人確認書類を撮影した後に、本人確認画像を確認するものであるが、これに限定されない。制御部３１０は、本人確認画像を取得した都度、本人確認画像を確認してもよい。また、制御部３１０は、本人確認画像を取得した後、ユーザに本人確認画像を確認させて、ユーザが保存する指示を入力した場合に、取得した本人確認画像を記憶するようにし、ユーザの確認によって取り直しを可能にしてもよい。

次に、本人確認処理で行う保存画像処理について、図１７に基づき説明する。
図１７は、第３実施形態に係る本人確認システム３００での保存画像処理を示すフローチャートである。
Ｓ３５０は、第１実施形態（図７）のＳ５０の処理と同様である。
Ｓ３５１において、制御部３１０（保存画像処理部３１５）は、例えば、記憶部３２０に記憶された複数の書類位置ガイド画像の中から書類位置ガイド画像を１つ特定し、特定した書類位置ガイド画像を、タッチパネルディスプレイ２５に表示させる。ここで、記憶部３２０に記憶された複数の書類位置ガイド画像は、本人確認書類のガイド位置が異なるものであって、本人確認書類のガイド位置が顔画像のガイド位置に重ならないようになっているものである。
Ｓ３５２は、第１実施形態（図７）のＳ５０の処理と同様である。

Ｓ３５３において、制御部３１０（保存画像処理部３１５）は、記憶部３２０に記憶された複数の書類位置ガイド画像の中から先に特定した１つの書類位置ガイド画像を除いて、書類位置ガイド画像を１つ特定し、特定した書類位置ガイド画像を、タッチパネルディスプレイ２５に表示させる。
Ｓ３５４は、Ｓ３５２の処理と同様である。
Ｓ３５５において、制御部３１０（保存画像処理部３１５）は、取得した複数の保存画像を確認する。具体的には、制御部３１０は、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、各々の書類位置ガイド画像のガイド範囲に大体合っていることを確認する。

Ｓ３５６において、制御部３１０（保存画像処理部３１５）は、保存画像の確認ができたことを条件に、保存画像を記憶部３２０に記憶させる。なお、保存画像の確認ができなかった場合、つまり、取得した保存画像に含まれる本人確認書類の画像と、ユーザの顔画像とが、ガイド画像のガイド範囲に収まっていない場合等には、エラーとし、以降の処理を行わないようにしてもよいし、Ｓ３５１やＳ３５３からの処理を再度行ってもよい。その際、制御部３１０は、今まで出力した書類位置ガイド画像とは異なる書類位置ガイド画像を出力してもよいし、エラーになった書類位置ガイド画像を再度出力してもよい。

Ｓ３５７において、制御部３１０（保存画像処理部３１５）は、記憶部３２０に記憶された保存画像を、本人確認サーバ４に送信する。そうすることで、本人確認サーバ４においても、保存画像について確認処理を行ってもよい。その後、制御部３１０は、次に説明する照合画像処理（図５のＳ３２を参照）を行う。

次に、本人確認処理で行う照合画像処理について、図１８に基づき説明する。
図１８は、第３実施形態に係る本人確認システム３００での照合画像処理を示すフローチャートである。
図１９は、第３実施形態に係る携帯端末３０１での照合画像の取得処理を示すフローチャートである。
図２０は、第３実施形態に係る携帯端末３０１での表示例を示す図である。
図１８のＳ３５０において、携帯端末３０１の制御部３１０（照合画像処理部３１６）は、照合画像の取得処理を行う。

ここで、照合画像の取得処理について、図１９に基づき説明する。
図１９のＳ３７０において、制御部３１０（照合画像処理部３１６）は、インカメラ２３ａを起動させ、タッチパネルディスプレイ２５にインカメラ２３ａのスルー画像を表示させる。そして、制御部３１０は、例えば、図２０（Ａ）に示すような、顔撮影ガイド画像３７０を、タッチパネルディスプレイ２５に出力する。
図２０（Ａ）に示す顔撮影ガイド画像３７０は、ユーザの正面からの顔画像を取得させるためのものである。また、顔撮影ガイド画像３７０は、ユーザ自身の顔の位置を特定する顔位置領域３７０ａを含む画像である。

図１９のＳ３７１において、制御部３１０（照合画像処理部３１６）は、照合画像を取得し、記憶部３２０に記憶させる。照合画像の取得は、ユーザが、自身の顔を顔位置領域３７０ａに写り込むように携帯端末３０１の位置を移動させて、図示しない撮影ボタンをタップすることで、制御部３１０が撮影するように制御して、ユーザの顔画像を取得するようにしてもよい。また、制御部３１０は、顔撮影ガイド画像３７０を出力してから所定時間（例えば、５秒等）を経過後に自動的に撮影するように制御して、ユーザの顔画像を取得してもよい。さらに、制御部３１０に顔及び目の瞬きを検出する機能を有しておき、制御部３１０が瞬きを検出した後に撮影するように制御して、ユーザの顔画像を取得してもよい。

Ｓ３７２において、制御部３１０（照合画像処理部３１６）は、ユーザに対して顔の向きを変える指示を出力する。ここで、制御部３１０による指示は、例えば、図２０（Ｂ）に示す顔撮影ガイド画像３７１のように表示するものの他、例えば、図示しないスピーカから音声出力してもよい。図２０（Ｂ）に示す顔撮影ガイド画像３７１は、ユーザに右を向かせるものであるが、ユーザの顔を、例えば、上下左右のいずれかの方向に向かせるものであってもよい。

Ｓ３７３において、制御部３１０（照合画像処理部３１６）は、照合画像を取得し、記憶部３２０に記憶させる。この撮影では、ユーザの顔の向きが携帯端末３０１のタッチパネルディスプレイ２５に向いていないため、ユーザが図示しない撮影ボタンをタップするのは難しい。そこで、制御部３１０は、顔撮影ガイド画像３７１を出力してから所定時間（例えば、５秒等）を音声によりカウントした後に、自動的に撮影するように制御して、ユーザの顔画像を取得してもよい。また、制御部３１０は、顔撮影ガイド画像３７１を出力してから所定時間（例えば、５秒等）内に、顔位置領域３７１ａに顔が写り込んでいることを検出したことに応じて自動的に撮影するように制御して、ユーザの顔画像を取得してもよい。

Ｓ３７４において、制御部３１０（照合画像処理部３１６）は、取得した照合画像が、対応する指示内容にしたがったものであるか否かを確認する。そして、制御部３１０は、確認ができた場合には、処理を図１８のＳ３６１に移す。なお、確認ができなかった場合には、制御部３１０は、以降の処理を行わないようにしてもよい。
図１８のＳ３６１からＳ３６５までの処理は、第１実施形態（図１０）のＳ６１からＳ６５までの処理と同様である。

このように、第３実施形態によれば、本人確認システム３００は、以下のような効果がある。
（１）携帯端末３０１は、顔写真が確認可能な複数の異なる撮影方向から本人確認書類を撮影して、複数の本人確認画像を得るようにした。そして、複数の本人確認画像のうちの少なくとも１つは、本人確認書類の厚さを確認できるものであるようにした。よって、真の本人確認書類であることを、本人確認画像によって判別できるようになり、セキュリティ性が向上したものにできる。
（２）携帯端末３０１は、本人確認画像を取得するための書類位置ガイド画像を出力させるようにした。そして、書類位置ガイド画像は、顔写真を確認可能な撮影方向と、本人確認画像の大きさを含む本人確認書類の配置位置とを指定する画像であるため、ユーザに書類ガイド画像にしたがって本人確認書類を撮影させることができる。また、撮影方向と配置位置とが指定されているため、その場で本人確認書類を用意して撮影しなければならないものになり、予め用意した画像を用いる等の不正行為を防ぐことができる。
（３）携帯端末３０１は、指示情報に基づいてユーザの顔の向きを変えさせて、ユーザの顔画像を撮影するものを含むようにした。よって、指示情報にしたがった撮影が必要にあり、予め用意した画像を用いる等の不正行為を防ぐことができる。
また、ユーザの顔の向きを変えた場合には、音声による指示や、自動での撮影をするようにした。よって、ユーザが撮影するための操作をするのが困難な場合にも、対応できるものにでき、利便性に優れたものにできる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。

（変形形態）
（１）各実施形態では、本人確認サーバが、画像照合処理を行い、第２実施形態では、本人確認サーバが文字認識処理を行うものを例に説明したが、これに限定されない。例えば、本人確認サーバに対して通信可能に接続された画像照合サーバと、ＯＣＲサーバとを備え、画像照合サーバを用いて顔画像の照合をし、ＯＣＲサーバを用いて文字認識処理をするものであってもよい。
（２）各実施形態では、本人確認サーバと、携帯端末とを用いた処理を説明したが、本人確認サーバと、携帯端末との処理内容は、これに限定されない。携帯端末で行う画像取得以外の処理を、本人確認サーバが行ってもよいし、本人確認サーバが行っている処理を、携帯端末で行ってもよい。例えば、取得した各画像の確認処理を、本人確認サーバで行ってもよい。また、本人確認サーバと、携帯端末との両方で、各画像の確認処理を行ってもよい。

（３）各実施形態では、本人確認処理として、本人確認画像の処理をしてから、保存画像の処理をするものを例に説明したが、処理の順番は、逆であってもよい。
（４）各実施形態では、取引アプリを実行してから、本人確認アプリを起動させるものを例に説明したが、これに限定されない。本人確認アプリを単独で実行するものであってもよい。
（５）各実施形態では、本人確認画像に含まれる本人確認書類と、保存画像に含まれる本人確認書類とに関して、特段の処理を行っていないが、同じであるかの照合を行ってもよい。また、各処理にて複数の画像を取得した場合に、被写体が同一のものである確認を行ってもよい。

（６）第３実施形態では、複数の本人確認画像を取得し、正面から撮影した本人確認画像から顔写真画像を抽出するものを例に説明したが、これに限定されない。本人確認書類の厚さが確認できる撮影方向からの撮影により取得した本人確認画像から顔写真画像を抽出してもよい。その場合、例えば、公知の画像補正技術を用いて正面から撮影したような画像に歪みを補正して、顔照合処理に用いる画像にしてもよい。また、この補正技術を用いて、複数の本人確認画像が同一の本人確認書類を撮影した画像であることを確認してもよい。

（７）第３実施形態では、撮影の際にガイド画像を出力するものを説明した。その際、ガイド画像を出力してから撮影するまでの時間について、特段記載していないが、制御部は、所定の時間内に撮影されなかった場合には、エラーとして以降の処理を行わないようにしてもよい。

（８）各実施形態での本人確認及び本人認証を行うサービスについては、様々なものが該当する。例えば、銀行業務であれば、口座開設及び口座の紐付け処理や、ＡＴＭを用いた現金引き出し等の処理等に用いることができる。ＡＴＭを用いるものとしては、携帯端末で本人認証を行って、認証された場合にＱＲコード（登録商標）を表示させて、ＡＴＭに読み取らせることで、携帯端末を、キャッシュカードの代わりとすることができる。また、窓口での業務で、代理人が本人に代わって行う場合に、本人による本人認証がされたことを証明する情報を代理人が受信等することで、委任状等を予め用意せずに済む。

１，２０１，３０１ 携帯端末
３ 運転免許証
４，２０４ 本人確認サーバ
７ サービス提供サーバ
１０，４０，２１０，２４０，３１０ 制御部
１２，２１２，３１２ 本人確認部
１３，２１３，３１３ 本人確認画像処理部
１４ ガイド画像出力部
１５，３１５ 保存画像処理部
１６，３１６ 照合画像処理部
１７ 本人認証部
１８ サービス開始判定部
２０，５０，２２０，２５０，３２０ 記憶部
２１ａ 取引アプリ
２１ｂ，２２１ｂ，３２１ｂ 本人確認アプリ
２３ カメラ
２５ タッチパネルディスプレイ
４３ 顔照合部
４４ 照合結果送信部
１００，２００，３００ 本人確認システム
２４１ 本人確認画像解析部

Claims (14)

1. 撮影部と、
   前記撮影部による撮影範囲の画像を表示する表示部と、
   を有する携帯端末であって、
   サービス開始時におけるユーザの本人確認に必要なデータを、前記ユーザが所持する前記携帯端末のみを用いて取得するものであり、
   顔写真が掲載された本人確認書類の画像である本人確認画像を、前記撮影部から取得する本人確認画像取得手段と、
   前記本人確認書類及び前記本人確認書類を所持した所持者の顔の配置範囲を示す第２のガイド画像を、前記表示部に出力する第２のガイド画像出力手段と、
   前記本人確認書類と、前記所持者の顔との両方を含む画像である保存画像を、前記撮影部から取得する保存画像取得手段と、
   前記保存画像取得手段により取得した前記保存画像に含まれる前記本人確認書類の画像と、前記所持者の顔画像との位置を、前記第２のガイド画像出力手段により出力した前記第２のガイド画像に基づいて確認する第２の画像確認手段と、
   前記第２の画像確認手段による確認ができた場合に、前記保存画像を記憶部に記憶する保存画像処理手段と、
   前記所持者の顔を含む画像である照合画像を、前記撮影部から取得する照合画像取得手段と、
   前記保存画像取得手段により取得した前記保存画像が前記記憶部に記憶されていることを条件として、前記本人確認画像取得手段により取得した前記本人確認画像と、前記照合画像取得手段により取得した前記照合画像とを、画像を用いて本人確認を行う本人確認サーバに送信する照合用画像送信手段と、
   を備える携帯端末。
2. 請求項１に記載の携帯端末において、
   前記本人確認画像取得手段は、前記本人確認書類の前記顔写真を含む面に対して垂直の撮影方向を含む、前記顔写真を確認可能な複数の異なる撮影方向から前記本人確認書類を撮影した複数の前記本人確認画像を、前記撮影部から取得し、
   前記照合用画像送信手段は、前記本人確認画像取得手段により取得した前記複数の本人確認画像のうち少なくとも１つ以上の前記本人確認画像と、前記照合画像とを前記本人確認サーバに送信すること、
   を特徴とする携帯端末。
3. 請求項２に記載の携帯端末において、
   前記本人確認画像取得手段により取得する前記複数の本人確認画像のうち少なくとも１つの前記本人確認画像は、前記顔写真と共に前記本人確認書類の厚みを確認可能なものであること、
   を特徴とする携帯端末。
4. 請求項２又は請求項３に記載の携帯端末において、
   前記撮影方向を指定し、及び、前記本人確認画像の大きさを含む前記本人確認書類の配置位置を指定する第１のガイド画像を、前記表示部に出力する第１のガイド画像出力手段と、
   前記第１のガイド画像出力手段と、前記本人確認画像取得手段とによる処理を所定回数繰り返す第１の繰り返し手段と、
   を備え、
   前記第１のガイド画像出力手段が出力する前記第１のガイド画像は、出力の都度、前記撮影方向の指定及び前記配置位置の指定が異なるものであること、
   を特徴とする携帯端末。
5. 請求項４に記載の携帯端末において、
   前記本人確認画像取得手段により取得した前記本人確認画像を、前記第１のガイド画像出力手段により出力した前記第１のガイド画像に基づいて確認する第１の画像確認手段を備えること、
   を特徴とする携帯端末。
6. 請求項１から請求項５までのいずれかに記載の携帯端末において、
   前記第２のガイド画像出力手段は、前記本人確認書類の配置範囲を、前記顔の位置に重ならないランダムな位置であり、かつ、所定以上の大きさの範囲で示した前記第２のガイド画像を、前記表示部に出力すること、
   を特徴とする携帯端末。
7. 請求項１から請求項６までのいずれかに記載の携帯端末において、
   前記第２のガイド画像出力手段と、前記保存画像取得手段とによる処理を所定回数繰り返す第２の繰り返し手段を備え、
   前記第２のガイド画像出力手段が出力する前記第２のガイド画像は、出力の都度、前記前記本人確認書類の配置範囲を示す配置位置が異なるものであること、
   を特徴とする携帯端末。
8. 請求項７に記載の携帯端末において、
   前記保存画像取得手段により取得した複数の前記保存画像を、前記本人確認サーバに送信する保存画像送信手段を備えること、
   を特徴とする携帯端末。
9. 請求項１から請求項８までのいずれかに記載の携帯端末において、
   前記所持者の顔の向きに関する指示である指示情報を出力する指示出力手段を備え、
   前記照合画像取得手段は、前記指示出力手段による前記指示情報を出力後、撮影条件を満たしたことに応じて、前記照合画像を取得すること、
   を特徴とする携帯端末。
10. 請求項９に記載の携帯端末において、
    前記指示出力手段と、前記照合画像取得手段とによる処理を複数回繰り返す第３の繰り返し手段を備え、
    前記指示出力手段が出力する前記指示情報の１つは、前記所持者の顔の向きを正面方向にさせる指示に関するものであること、
    を特徴とする携帯端末。
11. 請求項９又は請求項１０に記載の携帯端末において、
    前記照合画像取得手段により取得した前記照合画像を、前記指示出力手段により出力した前記指示情報に基づいて確認する第３の画像確認手段を備えること、
    を特徴とする携帯端末。
12. 請求項１から請求項１１までのいずれかに記載の携帯端末において、
    前記本人確認画像取得手段により取得した前記本人確認画像から顔写真画像を抽出する顔写真画像抽出手段を備え、
    前記照合用画像送信手段は、前記本人確認サーバに対して、前記顔写真画像抽出手段により抽出した前記顔写真画像と前記照合画像とを送信すること、
    を特徴とする携帯端末。
13. 請求項１から請求項１２までのいずれかに記載の携帯端末と、
    前記携帯端末に対して通信可能に接続され、本人確認処理を行う本人確認サーバと、
    を備えた本人確認システムであって、
    前記本人確認サーバは、
    前記携帯端末から受信した前記照合画像と前記本人確認画像に含まれる顔写真画像とを照合する顔照合手段と、
    前記顔照合手段による照合結果情報を、前記携帯端末に送信する結果送信手段と、
    を備え、
    前記携帯端末は、
    本人確認がされていない場合に、前記本人確認画像取得手段、前記第２のガイド画像出力手段、前記保存画像取得手段、前記第２の画像確認手段、前記保存画像処理手段、前記照合画像取得手段及び前記照合用画像送信手段による処理を実行し、
    前記照合結果情報に基づいて、前記携帯端末及び前記本人確認サーバに対して通信可能に接続され、サービス処理を行うサービス提供サーバとの間でサービス処理を開始するか否かを判定するサービス開始判定手段を備えること、
    を特徴とする本人確認システム。
14. 撮影部と、前記撮影部による撮影範囲の画像を表示する表示部とを有し、サービス開始時におけるユーザの本人確認に用いる、前記ユーザが所持するコンピュータを、
    顔写真が掲載された本人確認書類の画像である本人確認画像を、前記撮影部から取得する本人確認画像取得手段と、
    前記本人確認書類及び前記本人確認書類を所持した所持者の顔の配置範囲を示す第２のガイド画像を、前記表示部に出力する第２のガイド画像出力手段と、
    前記本人確認書類と、前記所持者の顔との両方を含む画像である保存画像を、前記撮影部から取得する保存画像取得手段と、
    前記保存画像取得手段により取得した前記保存画像に含まれる前記本人確認書類の画像と、前記所持者の顔画像との位置を、前記第２のガイド画像出力手段により出力した前記第２のガイド画像に基づいて確認する第２の画像確認手段と、
    前記第２の画像確認手段による確認ができた場合に、前記保存画像を記憶部に記憶する保存画像処理手段と、
    前記所持者の顔を含む画像である照合画像を、前記撮影部から取得する照合画像取得手段と、
    前記保存画像取得手段により取得した前記保存画像が前記記憶部に記憶されていることを条件として、前記本人確認画像取得手段により取得した前記本人確認画像と、前記照合画像取得手段により取得した前記照合画像とを、画像を用いて本人確認を行う本人確認サーバに送信する照合用画像送信手段と、
    して機能させるためのプログラム。

Images