JP7310522B2

JP7310522B2 - Personal authentication system, authenticator, program and personal authentication method

Info

Publication number: JP7310522B2
Application number: JP2019185611A
Authority: JP
Inventors: 薫平松田; 将太稲垣; 雅則木村
Original assignee: Dai Nippon Printing Co Ltd
Current assignee: Dai Nippon Printing Co Ltd
Priority date: 2018-11-14
Filing date: 2019-10-09
Publication date: 2023-07-19
Anticipated expiration: 2038-11-14
Also published as: JP2020087438A

Description

本発明は、本人認証システム、認証器、プログラム及び本人認証方法に関する。 The present invention relates to a personal authentication system, an authenticator, a program, and a personal authentication method.

従来、銀行等において、インターネット等の通信ネットワークを介して、顧客に対していわゆるインターネットバンキングのサービスを提供することが行われている。インターネットバンキングのサービスでは、携帯端末等の顧客が所持する端末を使用して本人であることの確認を行うために、例えば、生体情報を利用したものが考えられている。一例として、免許証等のＩＣカードに記憶された顔画像と、端末の操作者である顧客の顔画像とを用いた顔認証により、本人確認を行う方法が開示されている（例えば、特許文献１）。 2. Description of the Related Art Conventionally, banks and the like provide so-called Internet banking services to customers via communication networks such as the Internet. In Internet banking services, for example, biometric information is used to confirm the identity of a customer using a terminal such as a mobile terminal owned by the customer. As an example, disclosed is a method of verifying a person's identity by face authentication using a face image stored in an IC card such as a driver's license and a face image of a customer who is the operator of a terminal (see, for example, Patent Document 1).

特開２０１５－８８０８０号公報JP 2015-88080 A

特許文献１に記載のものは、ＩＣカードのチップに記憶された顔画像データを用いるものであるため、情報端末には、ＩＣカードを読み取るためのリーダを備えている必要があった。
また、サービス利用時には、本人確認がされたユーザのみの利用を許容するために、毎回本人認証を行う必要がある。特許文献１に記載のものは、顔画像を用いた顔認証をサーバ側で行っているが、顔画像に代表される生体情報が、サービスを利用する都度、通信回線を介して送信されることになるため、データのセキュリティ性に問題があった。 Since the device described in Patent Document 1 uses face image data stored in a chip of an IC card, the information terminal must be equipped with a reader for reading the IC card.
Also, when using the service, it is necessary to authenticate the user each time in order to allow use only by users whose identity has been verified. In Patent Document 1, face authentication using face images is performed on the server side, but biometric information represented by face images is transmitted via a communication line each time the service is used. Therefore, there was a problem with data security.

そこで、本発明は、セキュリティ性を向上させた本人認証システム、認証器、プログラム及び本人認証方法を提供することを目的とする。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide a personal authentication system, an authenticator, a program, and a personal authentication method with improved security.

本発明は、以下のような解決手段により、前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。また、符号を付して説明した構成は、適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。 The present invention solves the above problems by means of the following solutions. In order to facilitate understanding, reference numerals corresponding to the embodiments of the present invention will be used for explanation, but the present invention is not limited thereto. Also, the configurations described with reference numerals may be improved as appropriate, and at least a part of them may be replaced with other components.

第１の発明は、ユーザが所持する撮影部（３４）を備えた認証器（１）と、前記認証器に対して通信可能に接続された本人認証サーバ（４）と、を備えた本人認証システム（１００）であって、前記認証器は、ユーザの本人確認の際に前記撮影部を介して取得した、本人確認書類（３）の画像である本人確認画像に含まれる顔写真画像と、前記本人確認書類を所持した所持者の顔の画像である顔画像とのうち少なくとも一方である照合画像を、照合画像記憶部（３２）に記憶させる画像記憶処理手段（１６ａ）と、サービス利用時に、前記撮影部を介してサービス利用者の顔画像を取得し、前記照合画像記憶部に記憶された前記照合画像と照合する顔画像照合手段（１８）と、前記顔画像照合手段による照合結果を、前記本人認証サーバに送信する照合結果送信手段（１９）と、を備え、前記本人認証サーバは、前記照合結果に基づいて、サービスの利用を許可する許可手段（４４）を備えること、を特徴とする本人認証システムである。
第２の発明は、第１の発明の本人認証システム（１００）において、前記認証器（１）に対して通信可能に接続された本人確認サーバ（４）を備え、前記認証器は、前記本人確認書類（３）と、前記顔画像とを、前記本人確認サーバに対して送信することで、前記本人確認サーバに本人確認を依頼する本人確認依頼手段（１４）を備え、前記画像記憶処理手段（１６ａ）は、前記本人確認サーバから本人確認ができた旨を受信した場合に、前記照合画像を、前記照合画像記憶部（３２）に記憶させること、を特徴とする本人認証システムである。
第３の発明は、第１の発明又は第２の発明の本人認証システム（１００）において、前記認証器（１）は、秘密鍵及び公開鍵からなる鍵ペアを生成する鍵生成手段（１６ｂ）と、前記鍵生成手段により生成した前記鍵ペアに含まれる前記公開鍵を、前記本人認証サーバ（４）に送信する鍵送信手段（１６ｂ）と、を備え、前記照合結果送信手段（１９）は、前記鍵生成手段により生成した前記鍵ペアに含まれる前記秘密鍵で署名した前記照合結果を送信し、前記本人認証サーバは、前記公開鍵を受信して記憶部（５３）に記憶する鍵記憶手段（４２）を備え、前記許可手段（４４）は、受信した前記照合結果を、前記鍵記憶手段が記憶した前記公開鍵で署名検証し、署名検証できた場合に、サービスの利用を許可すること、を特徴とする本人認証システムである。
第４の発明は、第３の発明の本人認証システム（１００）において、前記認証器（１）は、前記本人認証サーバ（４）に、利用開始要求を送信する要求送信手段（１７）を備え、前記本人認証サーバは、前記利用開始要求を受信したことに応じて、乱数を利用して発生させたチャレンジコードを送信するコード送信手段（４３）を備え、前記認証器の前記照合結果送信手段（１９）は、前記顔画像照合手段（１８）により照合できた場合に、前記チャレンジコードを前記秘密鍵で署名した前記照合結果を送信すること、を特徴とする本人認証システムである。
第５の発明は、ユーザが所持する、撮影部（３４）を備えた認証器（１）であって、ユーザの本人確認の際に前記撮影部を介して取得した、本人確認書類（３）の画像である本人確認画像に含まれる顔写真画像と、前記本人確認書類を所持した所持者の顔の画像である顔画像とのうち少なくとも一方である照合画像を、照合画像記憶部（３２）に記憶させる画像記憶処理手段（１６ａ）と、サービス利用時に、前記撮影部を介してサービス利用者の顔画像を取得し、前記照合画像記憶部に記憶された前記照合画像と照合する顔画像照合手段（１８）と、前記顔画像照合手段による照合結果を、通信可能に接続され本人認証を行う本人認証サーバ（４）に送信する照合結果送信手段（１９）と、を備えること、を特徴とする認証器である。
第６の発明は、ユーザが所持する、撮影部（３４）を備えたコンピュータ（１）を、ユーザの本人確認の際に前記撮影部を介して取得した、本人確認書類の画像である本人確認画像に含まれる顔写真画像と、前記本人確認書類を所持した所持者の顔の画像である顔画像とのうち少なくとも一方である照合画像を、照合画像記憶部（３２）に記憶させる画像記憶処理手段と、サービス利用時に、前記撮影部を介してサービス利用者の顔画像を取得し、前記照合画像記憶部に記憶された前記照合画像と照合する顔画像照合手段と、前記顔画像照合手段による照合結果を、通信可能に接続され本人認証を行う本人認証サーバ（４）に送信する照合結果送信手段と、して機能させるためのプログラム（３１ｃ）である。
第７の発明は、ユーザが所持する撮影部（３４）を備えた認証器（１）が、前記認証器に対して通信可能に接続された本人認証サーバ（４）を用いた本人認証の前に行うユーザの本人確認の際に前記撮影部を介して取得した、本人確認書類（３）の画像である本人確認画像に含まれる顔写真画像と、前記本人確認書類を所持した所持者の顔の画像である顔画像とのうち少なくとも一方である照合画像を、照合画像記憶部（３２）に記憶させる画像記憶ステップと、前記認証器が、サービス利用時に、前記撮影部を介してサービス利用者の顔画像を取得し、前記照合画像記憶部に記憶された前記照合画像と照合する顔画像照合ステップと、前記認証器が、前記顔画像照合ステップによる照合結果を、前記本人認証サーバに送信する照合結果送信ステップと、を含み、前記本人認証サーバが、前記照合結果に基づいて、サービスの利用を許可する許可ステップを含むこと、を特徴とする本人認証方法である。 A first aspect of the present invention is a personal authentication system comprising an authenticator (1) equipped with a photographing unit (34) owned by a user and a personal authentication server (4) communicably connected to the authenticator. A system (100), wherein the authenticator includes a face photograph image included in an identity verification image, which is an image of an identity verification document (3), acquired via the photographing unit at the time of identity verification of a user; image storage processing means (16a) for storing a matching image, which is at least one of a face image of a person possessing the identity verification document, in a matching image storage unit (32); a facial image collating means (18) for acquiring a facial image of the service user through the photographing unit and collating it with the collated image stored in the collated image storage unit; , verification result transmission means (19) for transmitting to said personal authentication server, and said personal authentication server comprises permission means (44) for permitting use of the service based on said verification result. It is a personal authentication system that
A second invention is the personal authentication system (100) of the first invention, comprising a personal identification server (4) communicably connected to the authenticator (1), wherein the authenticator Personal identification request means (14) for requesting personal identification to the personal identification server by transmitting confirmation documents (3) and the face image to the personal identification server, and the image storage processing unit. (16a) is the identity authentication system characterized by storing the collation image in the collation image storage unit (32) when receiving from the identity confirmation server that the identity has been verified.
In a third invention, in the personal authentication system (100) of the first invention or the second invention, the authenticator (1) includes key generation means (16b) for generating a key pair consisting of a private key and a public key. and key transmission means (16b) for transmitting the public key included in the key pair generated by the key generation means to the personal authentication server (4), wherein the verification result transmission means (19) and transmitting the verification result signed by the private key included in the key pair generated by the key generating means, and the authentication server receives the public key and stores it in a storage unit (53). means (42), wherein said permitting means (44) verifies the signature of said collation result received with said public key stored in said key storage means, and permits use of the service when the signature is verified. This personal identification system is characterized by:
In a fourth invention based on the personal authentication system (100) of the third invention, the authenticator (1) comprises a request transmission means (17) for transmitting a use start request to the personal authentication server (4). , the authentication server includes code transmission means (43) for transmitting a challenge code generated using a random number in response to receiving the use start request, and the verification result transmission means of the authenticator. (19) is a person authentication system characterized by transmitting the result of verification in which the challenge code is signed with the secret key when verification is successful by the face image verification means (18).
A fifth aspect of the invention is an authentication device (1) possessed by a user and equipped with a photographing unit (34), wherein an identity verification document (3) is obtained through the photographing unit when verifying the identity of the user. A matching image, which is at least one of a facial photograph image included in the identity verification image that is the image of the identity verification document and a face image that is the face image of the holder of the identity verification document, is stored in a verification image storage unit (32) and image storage processing means (16a) for acquiring a face image of the service user through the photographing unit when using the service and matching the face image with the matching image stored in the matching image storage unit. means (18); and matching result transmission means (19) for transmitting a result of matching by the face image matching means to a person authentication server (4) connected in a communicable manner and performing person authentication. It is an authenticator that
According to a sixth aspect of the present invention, a computer (1) possessed by a user and equipped with a photographing unit (34) is obtained through said photographing unit when verifying the identity of the user. Image storage processing for storing in a collation image storage unit (32) a collation image, which is at least one of a face photograph image included in the image and a face image that is the face image of the holder of the identification document. means, face image collation means for acquiring a face image of a service user through the imaging unit when using the service and collating it with the collation image stored in the collation image storage unit, and the face image collation means It is a program (31c) for functioning as a verification result transmitting means for transmitting a verification result to a personal authentication server (4) which is communicatively connected and performs personal verification.
In a seventh aspect of the invention, an authenticator (1) equipped with a photographing unit (34) owned by a user performs personal authentication using a personal authentication server (4) communicably connected to the authenticator. The face photograph image included in the identity verification image, which is the image of the identity verification document (3), acquired via the photographing unit when the identity verification of the user performed in the above, and the face of the owner who possesses the identity verification document an image storage step of storing a matching image, which is at least one of a face image that is an image of a face image, in a matching image storage unit (32); a face image matching step of obtaining a face image of the face image and matching it with the matching image stored in the matching image storage unit; and a matching result transmission step, and the authentication server includes a permitting step of permitting use of the service based on the matching result.

本発明によれば、セキュリティ性を向上させた本人認証システム、認証器、プログラム及び本人認証方法を提供することができる。 According to the present invention, it is possible to provide a personal authentication system, an authenticator, a program, and a personal authentication method with improved security.

本実施形態に係る本人認証システムの全体構成を示す図である。1 is a diagram showing the overall configuration of a personal authentication system according to this embodiment; FIG. 本実施形態に係る携帯端末の機能ブロック図である。3 is a functional block diagram of the mobile terminal according to the embodiment; FIG. 本実施形態に係る本人認証サーバの機能ブロック図である。3 is a functional block diagram of the personal authentication server according to this embodiment; FIG. 本実施形態に係る携帯端末でのサービス開始処理を示すフローチャートである。6 is a flowchart showing service start processing in the mobile terminal according to the embodiment; 本実施形態に係る携帯端末での本人確認処理を示すフローチャートである。4 is a flowchart showing personal identification processing in the mobile terminal according to the embodiment; 本実施形態に係る本人認証システムでの本人確認画像処理を示すフローチャートである。4 is a flow chart showing identity verification image processing in the identity verification system according to the present embodiment. 本実施形態に係る本人認証システムでの照合画像処理を示すフローチャートである。5 is a flow chart showing matching image processing in the personal authentication system according to the present embodiment. 本実施形態に係る本人認証システムでの本人認証処理を示すフローチャートである。4 is a flow chart showing personal authentication processing in the personal authentication system according to the present embodiment. 図８の続きである。FIG. 8 is continued.

以下、本発明を実施するための形態について、図を参照しながら説明する。なお、これは、あくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。 EMBODIMENT OF THE INVENTION Hereafter, the form for implementing this invention is demonstrated, referring a figure. This is just an example, and the technical scope of the present invention is not limited to this.

（実施形態）
図１は、本実施形態に係る本人認証システム１００の全体構成を示す図である。
図２は、本実施形態に係る携帯端末１の機能ブロック図である。
図３は、本実施形態に係る本人認証サーバ４の機能ブロック図である。
図１に示す本人認証システム１００は、各種サービスにおける初回のサービス開始時に必要な本人確認を、携帯端末１（認証器）のみによって行い、２回目以降のサービス開始時に必要な本人認証を、携帯端末１のみによって安全に行うためのシステムである。 (embodiment)
FIG. 1 is a diagram showing the overall configuration of a personal authentication system 100 according to this embodiment.
FIG. 2 is a functional block diagram of the mobile terminal 1 according to this embodiment.
FIG. 3 is a functional block diagram of the personal authentication server 4 according to this embodiment.
The personal authentication system 100 shown in FIG. 1 performs personal identification necessary when starting various services for the first time using only the mobile terminal 1 (authentication device), and personal identification necessary when starting the second and subsequent services is performed using the mobile terminal 1 (authentication device). It is a system for doing safely by only 1.

ここで、各種サービスとは、例えば、銀行での口座開設や各種の銀行業務に係るサービス、カーシェアサービス、不動産の賃貸等に係るサービス等であり、本人確認及び本人認証が必要な様々なサービスをいう。現在、銀行の口座開設等においての本人確認の手段としては、口座開設を申し込んだ申込本人宅に、転送不要郵便を送付することにより行われている。昨今、オンラインでの本人確認を完結させる方法が、金融機関において検討されている。本発明における本人確認とは、口座開設等の金融機関との取引を始めるにあたり、携帯端末等を利用したオンラインでの手続きを可能とするための確認処理をいい、初回のサービス開始の際に必ず行うものである。本人確認では、例えば、運転免許証等の公的な証明書を用いた確認を行う。他方、本人認証とは、既に本人確認ができている状態であって、２回目以降のサービス開始時等に、なりすまし等を防ぐための確認をいう。
以下において、携帯端末１を使用して、本人確認や本人認証が必要なサービスを開始する場合を例に、本人認証システム１００について説明する。 Here, various services include, for example, services related to opening bank accounts and various banking operations, car sharing services, services related to real estate leasing, etc., and various services that require personal identification and personal authentication. Say. At present, as a means of personal identification when opening a bank account, etc., mail that does not require forwarding is sent to the home of the applicant who applied for the opening of the account. Recently, financial institutions are considering a method of completing identity verification online. Identity verification in the present invention refers to confirmation processing to enable online procedures using a mobile terminal or the like when starting transactions with a financial institution such as opening an account. It is something to do. In identity verification, for example, verification using a public certificate such as a driver's license is performed. On the other hand, identity authentication is a state in which identity verification has already been completed, and means confirmation to prevent spoofing and the like when the service is started for the second time and thereafter.
In the following, the personal authentication system 100 will be described using the mobile terminal 1 as an example to start a service that requires personal identification or personal authentication.

本人認証システム１００は、携帯端末１と、本人認証サーバ４（本人確認サーバ、本人認証サーバ）とを備える。携帯端末１は、例えば、無線通信の基地局Ｒを介して通信ネットワークＮに接続可能である。また、本人認証サーバ４は、通信ネットワークＮを介して通信可能に接続されている。
本人認証システム１００は、通信ネットワークＮを介して、サービス提供サーバ７に対して接続されている。サービス提供サーバ７は、携帯端末１との間でサービス処理を行うためのサーバである。 The personal authentication system 100 includes a portable terminal 1 and a personal authentication server 4 (personal identification server, personal authentication server). The mobile terminal 1 can be connected to a communication network N via a base station R for wireless communication, for example. Also, the personal authentication server 4 is connected via a communication network N so as to be able to communicate therewith.
The personal authentication system 100 is connected to the service providing server 7 via the communication network N. FIG. The service providing server 7 is a server for performing service processing with the mobile terminal 1 .

携帯端末１は、例えば、サービス提供サーバ７によるサービスの提供を受けようとする者が所有する端末である。以下、サービスの提供を受けようとする者のことを、ユーザという。携帯端末１は、例えば、スマートフォンやタブレットに代表されるコンピュータの機能を併せ持った携帯型の装置である。
図２に示すように、携帯端末１は、制御部１０と、記憶部３０と、カメラ３４（撮影部）と、タッチパネルディスプレイ３５と、通信インタフェース部３９とを備える。 The mobile terminal 1 is, for example, a terminal owned by a person who wants to receive the service provided by the service providing server 7 . Hereinafter, a person who intends to receive the provision of services is referred to as a user. The mobile terminal 1 is, for example, a mobile device having the functions of a computer represented by a smart phone or a tablet.
As shown in FIG. 2 , the mobile terminal 1 includes a control section 10 , a storage section 30 , a camera 34 (capturing section), a touch panel display 35 and a communication interface section 39 .

制御部１０は、携帯端末１の全体を制御するＣＰＵ（中央処理装置）である。制御部１０は、記憶部３０に記憶されているオペレーティングシステム（ＯＳ）や各種アプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
制御部１０は、アプリ起動部１１と、本人確認部１２と、本人認証部１５と、サービス処理部２０とを備える。 The control unit 10 is a CPU (central processing unit) that controls the entire mobile terminal 1 . The control unit 10 reads and executes an operating system (OS) and various application programs stored in the storage unit 30 as appropriate, thereby cooperating with the above-described hardware and executing various functions.
The control unit 10 includes an application activation unit 11 , an identity confirmation unit 12 , an identity authentication unit 15 , and a service processing unit 20 .

アプリ起動部１１は、取引アプリ３１ａを実行した際に、例えば、取引アプリ３１ａに対応して処理を行うサービス提供サーバ７から本人確認済であるか否かによって、本人確認アプリ３１ｂや本人認証アプリ３１ｃ（プログラム）を起動させる。
本人確認部１２は、本人確認処理を行う制御部である。本人確認部１２は、画像取得部１３と、本人確認依頼部１４（本人確認依頼手段）とを備える。 When the transaction application 31a is executed, the application activation unit 11 determines whether the identity confirmation application 31b or the authentication application 31c (program) is started.
The personal identification unit 12 is a control unit that performs personal identification processing. The identity confirmation unit 12 includes an image acquisition unit 13 and an identity confirmation requesting unit 14 (personal identification requesting means).

画像取得部１３は、ユーザがカメラ３４を操作して、自身の本人確認書類を撮影することで、本人確認書類の画像である本人確認画像を取得する。ここで、本人確認書類とは、ユーザの顔写真が掲載された、公的に認められた身分証明書である。本人確認書類の一例として、図１には、運転免許証３が示されている。なお、本人確認書類としては、他に、ユーザの顔写真が掲載されたマイナンバーカード等であってもよい。
そして、画像取得部１３は、取得した本人確認画像から顔写真画像を抽出する。その後、画像取得部１３は、抽出した顔写真画像を記憶部３０に記憶させる。
また、画像取得部１３は、ユーザがカメラ３４を操作して、自身の顔を撮影することで、ユーザの顔画像であり、照合に用いる照合画像を取得する。
本人確認依頼部１４は、記憶部３０に記憶された顔写真画像と、取得した照合画像とを、本人認証サーバ４に対して送信し、本人確認を依頼する。 The image acquisition unit 13 acquires an identity verification image, which is an image of the identity verification document, when the user operates the camera 34 to photograph his/her identity verification document. Here, the personal identification document is an officially recognized identification card on which the user's facial photograph is printed. A driver's license 3 is shown in FIG. 1 as an example of an identification document. It should be noted that the personal identification document may also be a My Number card or the like on which the user's facial photograph is printed.
Then, the image acquisition unit 13 extracts a facial photograph image from the acquired personal identification image. Thereafter, the image acquisition unit 13 causes the storage unit 30 to store the extracted face photograph image.
In addition, the image acquisition unit 13 acquires a matching image, which is the face image of the user and used for matching, by the user operating the camera 34 to photograph his or her own face.
The personal identification requesting unit 14 transmits the face photograph image stored in the storage unit 30 and the acquired verification image to the personal identification server 4 to request personal identification.

本人認証部１５は、サービスの利用開始時に毎回行う本人認証に関する制御部である。本人認証部１５は、事前処理部１６と、要求送信部１７（要求送信手段）と、顔画像取得照合部１８（顔画像照合手段）と、照合結果送信部１９（照合結果送信手段）とを備える。
事前処理部１６は、本人確認が行えた場合に、１度だけ行う処理である。事前処理部１６は、画像記憶処理部１６ａ（画像記憶処理手段）と、鍵処理部１６ｂ（鍵生成手段、鍵送信手段）とを備える。 The personal authentication unit 15 is a control unit related to personal authentication that is performed each time use of the service is started. The personal authentication unit 15 includes a preprocessing unit 16, a request transmission unit 17 (request transmission means), a face image acquisition/collation unit 18 (face image collation means), and a verification result transmission unit 19 (verification result transmission means). Prepare.
The pre-processing unit 16 is a process that is performed only once when the identity verification is completed. The preprocessing unit 16 includes an image storage processing unit 16a (image storage processing means) and a key processing unit 16b (key generation means, key transmission means).

画像記憶処理部１６ａは、本人確認部１２によって本人確認ができた場合に、本人確認部１２の処理で取得した顔画像を、以降に行う本人認証時に照合に用いる照合画像として、照合画像記憶部３２に記憶させる。
鍵処理部１６ｂは、本人認証サーバ４との間での確認で用いる鍵ペアを生成する。鍵ペアは、秘密鍵と公開鍵とからなる。そして、鍵処理部１６ｂは、生成した秘密鍵を、鍵記憶部３３に記憶させる。また、鍵処理部１６ｂは、生成した公開鍵を、本人認証サーバ４に送信する。 The image storage processing unit 16a stores the face image acquired by the processing of the identity verification unit 12 as a verification image to be used for verification at the time of subsequent identity verification when the identity verification unit 12 successfully verifies the identity. 32.
The key processing unit 16b generates a key pair used for confirmation with the personal authentication server 4. FIG. A key pair consists of a private key and a public key. Then, the key processing unit 16b causes the key storage unit 33 to store the generated secret key. Further, the key processing unit 16b transmits the generated public key to the personal authentication server 4. FIG.

要求送信部１７は、サービスの利用開始時に毎回行う処理である利用開始要求を、本人認証サーバ４に対して送信する。利用開始要求は、例えば、サービス提供サーバ７にログインするためのログイン要求であってもよい。
顔画像取得照合部１８は、ユーザ（サービス利用者）がカメラ３４を操作して、自身の顔を撮影することで、ユーザの顔画像を取得する。そして、顔画像取得照合部１８は、取得した顔画像と、照合画像記憶部３２に記憶された照合画像とを照合し、同一人物であるか否かを確認する。
照合結果送信部１９は、顔画像取得照合部１８による照合結果として、利用開始要求を送信することで本人認証サーバ４から受信したチャレンジコードを、鍵記憶部３３に記憶された秘密鍵で署名して、本人認証サーバ４に送信する。
サービス処理部２０は、本人認証サーバ４から受信した署名検証結果が、サービス利用を許可したものである場合に、サービス提供サーバ７との間でサービス処理を行う。 The request transmission unit 17 transmits a use start request to the personal authentication server 4, which is a process performed every time the use of the service is started. The usage start request may be, for example, a login request for logging into the service providing server 7 .
The face image acquisition/collation unit 18 acquires a face image of the user (service user) by operating the camera 34 and photographing the user's own face. Then, the facial image acquisition/collation unit 18 collates the acquired facial image with the collation image stored in the collation image storage unit 32 to confirm whether or not they are the same person.
The matching result transmitting unit 19 signs the challenge code received from the personal authentication server 4 by transmitting the usage start request as the matching result by the face image acquisition matching unit 18 with the private key stored in the key storage unit 33 . and transmits it to the personal authentication server 4.
The service processing unit 20 performs service processing with the service providing server 7 when the signature verification result received from the personal authentication server 4 permits the use of the service.

記憶部３０は、制御部１０が各種の処理を実行するために必要なプログラム、データ等を記憶するための半導体メモリ素子等の記憶領域である。
記憶部３０は、プログラム記憶部３１と、照合画像記憶部３２と、鍵記憶部３３とを備える。
プログラム記憶部３１は、各種のアプリケーションプログラム（以下、アプリケーションプログラムのことを、アプリケーション、アプリ、又はプログラム等という。）を記憶する記憶領域である。プログラム記憶部３１は、取引アプリ３１ａと、本人確認アプリ３１ｂと、本人認証アプリ３１ｃとを記憶している。なお、本実施形態では、以下において、取引アプリ３１ａと、本人確認アプリ３１ｂと、本人認証アプリ３１ｃとを用いるものを説明するが、複数のアプリの機能が一体になったアプリを用いるものであってもよい。 The storage unit 30 is a storage area such as a semiconductor memory device for storing programs, data, etc. necessary for the control unit 10 to execute various processes.
The storage unit 30 includes a program storage unit 31 , a matching image storage unit 32 and a key storage unit 33 .
The program storage unit 31 is a storage area that stores various application programs (hereinafter, application programs are referred to as applications, applications, programs, or the like). The program storage unit 31 stores a transaction application 31a, an identity confirmation application 31b, and an identity authentication application 31c. In the present embodiment, an application using the transaction application 31a, the personal identification application 31b, and the personal authentication application 31c will be described below, but an application that integrates the functions of a plurality of applications is used. may

取引アプリ３１ａと、本人確認アプリ３１ｂと、本人認証アプリ３１ｃとは、予め携帯端末１にインストールされ、又は、通信ネットワークＮを介して図示しないアプリ配信サーバに対して通信をすることで、携帯端末１にダウンロードされる。
取引アプリ３１ａは、サービス提供サーバ７との間でのサービス処理を行うためのプログラムである。
本人確認アプリ３１ｂは、携帯端末１の制御部１０が実行する本人確認の各種機能を行うためのプログラムである。
本人認証アプリ３１ｃは、携帯端末１の制御部１０が実行する本人認証の各種機能を行うためのプログラムである。 The transaction application 31a, the identity verification application 31b, and the identity verification application 31c are pre-installed in the mobile terminal 1, or communicate with an application distribution server (not shown) via the communication network N so that the mobile terminal 1 is downloaded.
The transaction application 31 a is a program for performing service processing with the service providing server 7 .
The personal identification application 31b is a program for performing various functions of personal identification executed by the control unit 10 of the mobile terminal 1 .
The personal authentication application 31c is a program for performing various functions of personal authentication executed by the control unit 10 of the mobile terminal 1 .

照合画像記憶部３２は、本人認証に用いる画像を、照合画像として記憶する記憶領域である。照合画像記憶部３２には、本人確認ができた場合に、本人確認で使用した顔画像が記憶される。
鍵記憶部３３は、本人認証で用いる秘密鍵を記憶する記憶領域である。鍵記憶部３３には、本人確認ができた場合に、本人認証アプリ３１ｃを実行することによって生成した鍵ペアのうち、秘密鍵が記憶される。 The matching image storage unit 32 is a storage area that stores an image used for personal authentication as a matching image. The face image used for personal identification is stored in the matching image storage unit 32 when the personal identification is successful.
The key storage unit 33 is a storage area that stores a private key used for personal authentication. The key storage unit 33 stores the private key of the key pair generated by executing the personal authentication application 31c when the personal identification is successful.

カメラ３４は、撮影装置である。カメラ３４は、インカメラ３４ａと、アウトカメラ３４ｂとを有する。インカメラ３４ａは、携帯端末１のタッチパネルディスプレイ３５の側に有するカメラである。アウトカメラ３４ｂは、携帯端末１の背面側に有するカメラである。
タッチパネルディスプレイ３５は、液晶パネル等で構成される表示部としての機能と、ユーザの指による各種操作入力を行う入力部としての機能とを有する。
通信インタフェース部３９は、通信ネットワークＮを介して各種のサーバとの通信を行うためのインタフェースであり、送信部及び受信部の役割を行う。 Camera 34 is a photographing device. The camera 34 has an in-camera 34a and an out-camera 34b. The in-camera 34 a is a camera provided on the side of the touch panel display 35 of the mobile terminal 1 . The out-camera 34b is a camera provided on the back side of the mobile terminal 1 .
The touch panel display 35 has a function as a display section configured by a liquid crystal panel or the like, and a function as an input section for performing various operation inputs with a user's finger.
The communication interface unit 39 is an interface for communicating with various servers via the communication network N, and functions as a transmitting unit and a receiving unit.

図１に戻り、運転免許証３は、カード形状のものであり、上述したように、公的な身分証明書である。運転免許証３の表面には、ユーザ（所持者）の住所、氏名、生年月日と、ユーザの顔写真とを含むユーザの個人情報が記載されている。携帯端末１のユーザは、本人認証システム１００において、自身が所持する運転免許証３等を、携帯端末１を用いて撮影する。 Returning to FIG. 1, the driver's license 3 is card-shaped and, as described above, is an official identification card. On the surface of the driver's license 3, user's personal information including the user's (holder's) address, name, date of birth, and user's facial photograph is written. The user of the mobile terminal 1 uses the mobile terminal 1 to take an image of the driver's license 3 or the like that the user owns in the personal identification system 100 .

本人認証サーバ４は、サービス開始時に、本人確認及び本人認証を行うサーバである。本人認証サーバ４は、サービスを提供する企業とは異なる企業が有する。なお、本人認証サーバ４は、サービスを提供する企業が有してもよい。
図３に示すように、本人認証サーバ４は、制御部４０と、記憶部５０と、通信インタフェース部５９とを備える。 The personal authentication server 4 is a server that performs personal identification and personal authentication at the start of service. The personal authentication server 4 is owned by a company different from the company that provides the service. Note that the personal authentication server 4 may be owned by a company that provides services.
As shown in FIG. 3 , the personal authentication server 4 includes a control section 40 , a storage section 50 and a communication interface section 59 .

制御部４０は、本人認証サーバ４の全体を制御するＣＰＵである。制御部４０は、記憶部５０に記憶されているＯＳやアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。
制御部４０は、本人確認処理部４１と、鍵受信処理部４２（鍵記憶手段）と、コード生成送信部４３（コード送信手段）と、サービス利用許可部４４（許可手段）とを備える。 The control unit 40 is a CPU that controls the entire personal authentication server 4 . The control unit 40 reads and executes the OS and application programs stored in the storage unit 50 to cooperate with the above-described hardware and execute various functions.
The control unit 40 includes an identity verification processing unit 41, a key reception processing unit 42 (key storage means), a code generation/transmission unit 43 (code transmission means), and a service usage permission unit 44 (permission means).

本人確認処理部４１は、本人確認処理を行う。
具体的には、本人確認処理部４１は、顔画像と、顔写真画像とを、携帯端末１から受信する。そして、本人確認処理部４１は、受信した顔画像と顔写真画像とを照合する。ここで、本人確認処理部４１は、顔画像と顔写真画像との照合結果を、スコアによって示してもよい。例えば、本人確認処理部４１は、画像照合処理を行い、顔写真画像の一致度合いをスコアとして算出する。ここで、スコアは、例えば、０～１００までの数値により表されるものであり、一致度合いが高いほど数値が高い。
その後、本人確認処理部４１は、照合結果を、携帯端末１に送信する。 The personal identification processing unit 41 performs personal identification processing.
Specifically, the personal identification processing unit 41 receives the face image and the face photograph image from the mobile terminal 1 . Then, the personal identification processing unit 41 collates the received face image with the face photograph image. Here, the personal identification processing unit 41 may indicate the matching result between the facial image and the facial photograph image by a score. For example, the personal identification processing unit 41 performs image collation processing, and calculates the degree of matching between face photograph images as a score. Here, the score is represented by a numerical value from 0 to 100, for example, and the higher the degree of matching, the higher the numerical value.
After that, the personal identification processing unit 41 transmits the collation result to the mobile terminal 1 .

鍵受信処理部４２は、携帯端末１から本人認証で用いる公開鍵を受信し、受信した公開鍵を鍵記憶部５３に記憶する。
コード生成送信部４３は、利用開始要求を受信したことに応じて、乱数を利用してチャレンジコードを発生させる。また、コード生成送信部４３は、発生させたチャレンジコードを、携帯端末１に送信する。
サービス利用許可部４４は、携帯端末１から受信した署名を検証し、検証できた場合に、サービス利用を許可した署名検証結果を、携帯端末１に送信する。 The key reception processing unit 42 receives a public key used for personal authentication from the mobile terminal 1 and stores the received public key in the key storage unit 53 .
The code generator/transmitter 43 uses random numbers to generate a challenge code in response to receiving the use start request. Also, the code generation/transmission unit 43 transmits the generated challenge code to the mobile terminal 1 .
The service use permitting unit 44 verifies the signature received from the mobile terminal 1 , and transmits to the mobile terminal 1 the result of signature verification that permits the use of the service when the verification is successful.

記憶部５０は、制御部４０が各種の処理を実行するために必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶領域である。
記憶部５０は、プログラム記憶部５１と、鍵記憶部５３とを備える。
プログラム記憶部５１は、各種のプログラムを記憶する記憶領域である。プログラム記憶部５１は、本人確認プログラム５１ａと、本人認証プログラム５１ｂとを記憶する。
本人確認プログラム５１ａは、本人認証サーバ４の制御部４０が実行する本人確認処理部４１の機能を行うためのプログラムである。
本人認証プログラム５１ｂは、本人認証サーバ４の制御部４０が実行する鍵受信処理部４２からサービス利用許可部４４までの機能を行うためのプログラムである。
なお、本実施形態では、以下において、本人確認プログラム５１ａと、本人認証プログラム５１ｂとを用いるものを説明するが、２つのプログラムの機能が一体になったプログラムを用いるものであってもよい。
通信インタフェース部５９は、通信ネットワークＮを介してサービス提供サーバ７等の各種サーバ及び携帯端末１との間の通信を行うためのインタフェースである。 The storage unit 50 is a storage area such as a hard disk or a semiconductor memory device for storing programs, data, etc. necessary for the control unit 40 to execute various processes.
The storage unit 50 includes a program storage unit 51 and a key storage unit 53 .
The program storage unit 51 is a storage area that stores various programs. The program storage unit 51 stores an identity verification program 51a and an identity verification program 51b.
The personal identification program 51 a is a program for performing the function of the personal identification processing unit 41 executed by the control unit 40 of the personal identification server 4 .
The personal authentication program 51b is a program for performing the functions from the key reception processing unit 42 to the service usage permission unit 44 which are executed by the control unit 40 of the personal authentication server 4 .
In addition, in this embodiment, although the following describes the case of using the identity verification program 51a and the identity verification program 51b, it is also possible to use a program in which the functions of the two programs are integrated.
The communication interface unit 59 is an interface for performing communication between various servers such as the service providing server 7 and the mobile terminal 1 via the communication network N. FIG.

ここで、コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、携帯端末１及び本人認証サーバ４は、それぞれ制御部、記憶部等を備えた情報処理装置であり、コンピュータの概念に含まれる。 Here, the computer refers to an information processing device having a control unit, a storage device, etc., and the mobile terminal 1 and the personal authentication server 4 are information processing devices having a control unit, a storage unit, etc., respectively. included in the concept.

図１に示すサービス提供サーバ７は、サービス処理を行うためのサーバである。図１において、本人認証システム１００は、サービス提供サーバ７を１つのみ記載しているが、サービスごとに複数のサーバを備えてもよい。
なお、サービス提供サーバ７は、図示しないが、制御部、記憶部、通信インタフェース部等を備える。 The service providing server 7 shown in FIG. 1 is a server for performing service processing. In FIG. 1, the personal authentication system 100 has only one service providing server 7, but may have a plurality of servers for each service.
Note that the service providing server 7 includes a control unit, a storage unit, a communication interface unit, etc., although not shown.

図１に示す基地局Ｒは、無線通信の基地局であって、携帯端末１が各種のサーバとの間の通信をするための中継を行う。基地局Ｒは、例えば、無線ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）の基地局や、通信事業者の携帯端末通信網用の基地局である。
通信ネットワークＮは、各種のサーバ間や各種のサーバと基地局Ｒとの間のネットワークであり、インターネット回線や携帯端末通信網等である。 A base station R shown in FIG. 1 is a base station for wireless communication, and performs a relay for communication between the mobile terminal 1 and various servers. The base station R is, for example, a wireless LAN (Local Area Network) base station or a mobile terminal communication network base station of a carrier.
The communication network N is a network between various servers or between various servers and the base station R, such as an Internet line or a mobile terminal communication network.

次に、本人認証システム１００の処理について説明する。
図４は、本実施形態に係る携帯端末１でのサービス開始処理を示すフローチャートである。
まず、サービスを開始したいユーザは、例えば、自身の携帯端末１のタッチパネルディスプレイ３５に表示されている取引アプリ３１ａのアイコン（図示せず）を選択するタップ等のタッチ操作をする。そうすることで、携帯端末１の制御部１０は、取引アプリ３１ａを実行する。 Next, processing of the personal authentication system 100 will be described.
FIG. 4 is a flowchart showing service start processing in the mobile terminal 1 according to this embodiment.
First, a user who wants to start a service performs a touch operation such as tapping to select an icon (not shown) of the transaction application 31a displayed on the touch panel display 35 of his/her mobile terminal 1, for example. By doing so, the control unit 10 of the mobile terminal 1 executes the transaction application 31a.

取引アプリ３１ａが実行されると、携帯端末１のタッチパネルディスプレイ３５には、取引アプリ３１ａのメイン画面（図示せず）が表示される。そこで、ユーザがメイン画面からサービス開始のための操作（例えば、メニューを選択する操作）を行うと、図４のステップＳ１０（以下、単に「Ｓ」という。）において、携帯端末１の制御部１０は、サービス開始操作を受け付ける。 When the transaction application 31a is executed, the touch panel display 35 of the mobile terminal 1 displays a main screen (not shown) of the transaction application 31a. Therefore, when the user performs an operation (for example, an operation to select a menu) for starting the service from the main screen, in step S10 (hereinafter simply referred to as "S") in FIG. accepts the service start operation.

次に、Ｓ１１において、制御部１０は、本人確認処理がされているか否かを判断する。一例として、制御部１０は、照合画像記憶部３２を参照して、照合画像が記憶されていれば、本人確認処理がされていると判断する。本人確認処理がされている場合（Ｓ１１：ＹＥＳ）には、制御部１０は、処理をＳ１２に移す。他方、本人確認がされていない場合（Ｓ１１：ＮＯ）には、制御部１０は、処理をＳ１３に移す。
Ｓ１２において、制御部１０は、本人認証処理（後述する図８参照）を行う。その後、制御部１０は、本処理を終了する。
他方、Ｓ１３において、制御部１０は、本人確認処理（後述する図５参照）を行う。その後、制御部１０は、本処理を終了する。 Next, in S11, the control unit 10 determines whether or not personal identification processing has been performed. As an example, the control unit 10 refers to the collation image storage unit 32 and determines that the identity confirmation process has been performed if the collation image is stored. If the personal identification process has been performed (S11: YES), the control unit 10 shifts the process to S12. On the other hand, if the person has not been verified (S11: NO), the control unit 10 shifts the process to S13.
In S12, the control unit 10 performs personal authentication processing (see FIG. 8, which will be described later). After that, the control unit 10 terminates this process.
On the other hand, in S13, the control unit 10 performs an identity verification process (see FIG. 5, which will be described later). After that, the control unit 10 terminates this process.

次に、本人確認処理について説明する。
図５は、本実施形態に係る携帯端末１での本人確認処理を示すフローチャートである。
図６は、本実施形態に係る本人認証システム１００での本人確認画像処理を示すフローチャートである。
図７は、本実施形態に係る本人認証システム１００での照合画像処理を示すフローチャートである。 Next, the personal identification process will be described.
FIG. 5 is a flowchart showing personal identification processing in the mobile terminal 1 according to this embodiment.
FIG. 6 is a flowchart showing identity verification image processing in the identity verification system 100 according to this embodiment.
FIG. 7 is a flow chart showing verification image processing in the personal authentication system 100 according to this embodiment.

図５のＳ２０において、制御部１０（アプリ起動部１１）は、本人確認アプリ３１ｂを起動させる。
Ｓ２１において、携帯端末１の制御部１０（本人確認部１２）は、本人確認画像処理を行う。
ここで、本人確認画像処理について、図６に基づき説明する。
図６のＳ５０において、携帯端末１の制御部１０（画像取得部１３）は、アウトカメラ３４ｂを起動させ、タッチパネルディスプレイ３５にアウトカメラ３４ｂのスルー画像（撮影範囲の画像）を表示させて、本人確認書類を撮影可能にする。そして、ユーザが、本人確認書類をスルー画像に写り込むようにして、図示しない撮影ボタンをタップすることで、制御部１０は、本人確認画像を取得する。 In S20 of FIG. 5, the control unit 10 (application activation unit 11) activates the identity verification application 31b.
In S21, the control unit 10 (identity verification unit 12) of the mobile terminal 1 performs identity verification image processing.
Here, the personal identification image processing will be described with reference to FIG.
In S50 of FIG. 6, the control unit 10 (image acquisition unit 13) of the mobile terminal 1 activates the out-camera 34b, displays the through image (image of the shooting range) of the out-camera 34b on the touch panel display 35, and Allows photographing of confirmation documents. Then, the user captures the identity verification document in the through image and taps a shooting button (not shown), whereby the control unit 10 acquires the identity verification image.

その際、制御部１０は、まず、本人確認書類として何を撮影するのか（運転免許証又はマイナンバーカード）を選択するための身分証明書選択画面（図示せず）を表示させ、ユーザに本人確認書類の種類を選択させてもよい。そして、制御部１０は、本人確認書類の種類に応じて、撮影をさせるための案内を変えてもよい。例えば、運転免許証３の場合には、表面と裏面とを撮影する必要がある。他方、マイナンバーカードであれば、表面のみを撮影すれば足りる。 At that time, the control unit 10 first displays an identification card selection screen (not shown) for selecting what to photograph as an identification document (driver's license or My Number card), and prompts the user to confirm his/her identity. The type of document may be selected. Then, the control unit 10 may change guidance for photographing according to the type of identity verification document. For example, in the case of the driver's license 3, it is necessary to photograph both the front side and the back side. On the other hand, if it is a My Number card, it is sufficient to photograph only the front side.

Ｓ５１において、制御部１０（画像取得部１３）は、本人確認画像から顔写真画像を抽出する。制御部１０は、例えば、本人確認画像を解析して、本人確認書類を特定する。そして、制御部１０は、本人確認書類から顔写真の画像位置を特定して、特定した画像位置の画像を抽出する。
Ｓ５２において、制御部１０（画像取得部１３）は、抽出した顔写真画像を、記憶部３０に一時記憶させる。その後、制御部１０は、処理を図５のＳ２２に移す。 In S51, the control unit 10 (image acquisition unit 13) extracts a facial photograph image from the personal identification image. The control unit 10, for example, analyzes the identity verification image and identifies the identity verification document. Then, the control unit 10 specifies the image position of the facial photograph from the personal identification document, and extracts the image at the specified image position.
In S52 , the control unit 10 (image acquiring unit 13 ) causes the storage unit 30 to temporarily store the extracted face photograph image. After that, the control unit 10 shifts the processing to S22 in FIG.

図５のＳ２２において、制御部１０（本人確認部１２）は、照合画像処理を行う。
ここで、照合画像処理について、図７に基づき説明する。
図７のＳ６０において、携帯端末１の制御部１０（画像取得部１３）は、インカメラ３４ａを起動させ、タッチパネルディスプレイ３５にインカメラ３４ａのスルー画像を表示させる。そして、ユーザが、自身の顔をスルー画像に写り込むようにして、図示しない撮影ボタンをタップすることで、制御部１０は、照合画像（顔画像）を取得する。 In S22 of FIG. 5, the control unit 10 (identity verification unit 12) performs verification image processing.
Here, the matching image processing will be described with reference to FIG.
In S60 of FIG. 7, the control unit 10 (image acquisition unit 13) of the mobile terminal 1 activates the in-camera 34a and causes the touch panel display 35 to display the through image of the in-camera 34a. Then, the user taps a shooting button (not shown) with his/her own face reflected in the through image, and the control unit 10 acquires a collation image (face image).

Ｓ６１において、制御部１０（本人確認依頼部１４）は、記憶部３０に一時記憶した顔写真画像と共に、取得した照合画像を、本人認証サーバ４に対して送信する。ここで、記憶部３０に記憶した顔写真画像とは、本人確認画像処理において携帯端末１が取得及び記憶したものである。
Ｓ６２において、本人認証サーバ４の制御部４０（本人確認処理部４１）は、照合画像と、顔写真画像とを、携帯端末１から受信する。 In S61 , the control unit 10 (identity verification requesting unit 14 ) transmits the acquired verification image together with the face photograph image temporarily stored in the storage unit 30 to the identity authentication server 4 . Here, the facial photograph image stored in the storage unit 30 is obtained and stored by the mobile terminal 1 in the personal identification image processing.
In S62 , the control unit 40 (personal identification processing unit 41 ) of the personal identification server 4 receives the verification image and the face photograph image from the mobile terminal 1 .

Ｓ６３において、制御部４０（本人確認処理部４１）は、照合画像と顔写真画像とを照合する顔照合処理を行う。制御部４０は、画像照合処理を行い、例えば、照合画像と顔写真画像との一致度合いをスコアとして算出する。
Ｓ６４において、制御部４０（本人確認処理部４１）は、照合結果を、携帯端末１に対して送信する。その後、制御部４０は、本処理を終了する。
Ｓ６５において、携帯端末１の制御部１０（本人確認部１２）は、照合結果を受信する。その後、制御部１０は、処理を図５のＳ２３に移す。 In S63, the control unit 40 (identity verification processing unit 41) performs face verification processing for verifying the verification image and the facial photograph image. The control unit 40 performs image collation processing and, for example, calculates the degree of matching between the collation image and the facial photograph image as a score.
In S64 , the control unit 40 (personal identification processing unit 41 ) transmits the collation result to the mobile terminal 1 . After that, the control unit 40 terminates this process.
In S65, the control unit 10 (identity verification unit 12) of the mobile terminal 1 receives the verification result. After that, the control unit 10 shifts the processing to S23 in FIG.

図５のＳ２３において、制御部１０（本人確認部１２）は、照合結果によって認証ができたか否かを判定する。照合結果として得られた、例えば、スコアが閾値以上である場合に、制御部１０は、認証ができたと判定する。認証ができたと判定された場合（Ｓ２３：ＹＥＳ）には、制御部１０は、処理をＳ２４に移す。他方、認証ができたと判定されなかった場合（Ｓ２３：ＮＯ）には、制御部１０は、処理をＳ２９に移す。 In S23 of FIG. 5, the control unit 10 (personal identification unit 12) determines whether or not the authentication is successful based on the collation result. For example, when the score obtained as a collation result is equal to or greater than a threshold value, the control unit 10 determines that the authentication is successful. If it is determined that the authentication was successful (S23: YES), the control unit 10 shifts the process to S24. On the other hand, if it is determined that the authentication was not successful (S23: NO), the control unit 10 shifts the process to S29.

Ｓ２４において、制御部１０は、本人認証アプリ３１ｃを起動させる。
Ｓ２５において、制御部１０（画像記憶処理部１６ａ）は、本人確認処理で取得した顔画像を、照合画像として照合画像記憶部３２に記憶させる。
Ｓ２６において、制御部１０（鍵処理部１６ｂ）は、鍵ペアを生成し、生成した鍵ペアのうちの公開鍵を、本人認証サーバ４へ送信する。そうすることで、本人認証サーバ４の制御部４０（鍵受信処理部４２）は、公開鍵を受信し、鍵記憶部５３に受信した公開鍵を記憶させる。
Ｓ２７において、制御部１０（サービス処理部２０）は、取引アプリ３１ａに対応したサービス提供サーバ７との間でサービス処理を行う。その後、制御部１０は、処理を図４に移し、本処理を終了する。 In S24, the control unit 10 activates the personal authentication application 31c.
In S25, the control unit 10 (image storage processing unit 16a) causes the matching image storage unit 32 to store the face image acquired in the personal identification process as a matching image.
In S26 , the control unit 10 (key processing unit 16 b ) generates a key pair and transmits the public key of the generated key pair to the personal authentication server 4 . By doing so, the control unit 40 (key reception processing unit 42) of the personal authentication server 4 receives the public key and causes the key storage unit 53 to store the received public key.
In S27, the control unit 10 (service processing unit 20) performs service processing with the service providing server 7 corresponding to the transaction application 31a. After that, the control unit 10 shifts the process to FIG. 4 and ends this process.

他方、Ｓ２９において、制御部１０は、認証エラーの旨を、タッチパネルディスプレイ３５に出力する。その後、制御部１０は、処理を図４に移し、本処理を終了する。 On the other hand, in S29 , the control unit 10 outputs to the touch panel display 35 that there is an authentication error. After that, the control unit 10 shifts the process to FIG. 4 and ends this process.

次に、本人認証処理について説明する。
図８及び図９は、本実施形態に係る本人認証システム１００での本人認証処理を示すフローチャートである。
図８のＳ３０において、携帯端末１の制御部１０（アプリ起動部１１）は、本人認証アプリ３１ｃを起動させる。
Ｓ３１において、制御部１０（要求送信部１７）は、利用開始要求を、本人認証サーバ４に送信する。 Next, the personal authentication process will be described.
8 and 9 are flowcharts showing the personal authentication process in the personal authentication system 100 according to this embodiment.
In S30 of FIG. 8, the control unit 10 (application activation unit 11) of the mobile terminal 1 activates the personal authentication application 31c.
In S31 , the control unit 10 (request transmission unit 17 ) transmits a usage start request to the personal authentication server 4 .

Ｓ３２において、本人認証サーバ４の制御部４０は、利用開始要求を受信する。
Ｓ３３において、制御部４０（コード生成送信部４３）は、乱数を発生させてチャレンジコードを生成し、携帯端末１に生成したチャレンジコードを送信する。その後、制御部４０は、本処理を終了する。
Ｓ３４において、携帯端末１の制御部１０は、チャレンジコードを受信する。
Ｓ３５において、制御部１０（顔画像取得照合部１８）は、顔画像を取得する。制御部１０は、インカメラ３４ａをアクティブにし、ユーザに自身の顔を撮影させることで、ユーザの顔画像を取得する。 At S32, the control unit 40 of the personal authentication server 4 receives the usage start request.
In S33 , the control unit 40 (code generation/transmission unit 43 ) generates a random number to generate a challenge code, and transmits the generated challenge code to the mobile terminal 1 . After that, the control unit 40 terminates this process.
At S34, the control unit 10 of the mobile terminal 1 receives the challenge code.
In S35, the control unit 10 (face image acquisition/collation unit 18) acquires a face image. The control unit 10 acquires the face image of the user by activating the in-camera 34a and allowing the user to photograph his/her own face.

Ｓ３６において、制御部１０（顔画像取得照合部１８）は、取得したユーザの顔画像と、照合画像記憶部３２に記憶された照合画像とを照合する。この画像を照合する画像照合処理は、本人認証サーバ４が本人確認の際に行ったものと同じロジックのものであってよい。制御部１０は、画像照合処理により、例えば、顔画像と照合画像との一致度合いをスコアとして算出する。
Ｓ３７において、制御部１０（顔画像取得照合部１８）は、照合できたか否かを判定する。例えば、スコアが閾値以上である場合に、制御部１０は、照合ができたと判定する。照合ができたと判定された場合（Ｓ３７：ＹＥＳ）には、制御部１０は、処理をＳ３８に移す。他方、照合ができたと判定されなかった場合（Ｓ３７：ＮＯ）には、制御部１０は、処理をＳ３９に移す。 In S36 , the control unit 10 (face image acquisition/collation unit 18 ) collates the acquired face image of the user with the collation image stored in the collation image storage unit 32 . The image collation processing for collating the images may be of the same logic as that performed by the personal authentication server 4 in personal identification. The control unit 10 calculates, for example, the degree of matching between the face image and the matching image as a score in the image matching process.
In S37, the control unit 10 (face image acquisition/collation unit 18) determines whether or not the collation was successful. For example, when the score is equal to or greater than the threshold, the control unit 10 determines that matching has been completed. If it is determined that the collation was successful (S37: YES), the control unit 10 shifts the process to S38. On the other hand, if it is determined that the collation was not successful (S37: NO), the control unit 10 shifts the process to S39.

Ｓ３８において、制御部１０（照合結果送信部１９）は、Ｓ３４で受信したチャレンジコードを、鍵記憶部３３に記憶された秘密鍵で署名する。その後、制御部１０は、処理を図９のＳ４０に移す。
他方、Ｓ３９において、制御部１０は、認証エラーの旨を、タッチパネルディスプレイ３５に出力する。その後、制御部１０は、処理を図４に移し、本処理を終了する。 In S38 , the control unit 10 (verification result transmission unit 19 ) signs the challenge code received in S34 with the secret key stored in the key storage unit 33 . After that, the control unit 10 shifts the process to S40 in FIG.
On the other hand, in S39 , the control unit 10 outputs an authentication error message to the touch panel display 35 . After that, the control unit 10 shifts the process to FIG. 4 and ends this process.

図９のＳ４０において、制御部１０（照合結果送信部１９）は、署名したデータを、本人認証サーバ４に送信する。
Ｓ４１において、本人認証サーバ４の制御部４０は、署名したデータを受信する。
Ｓ４２において、制御部４０は、鍵記憶部５３に有する公開鍵を用いた署名検証処理を行う。公開鍵を用いて署名検証ができた場合に、制御部４０は、本人認証ができたと判定する。 In S40 of FIG. 9 , the control unit 10 (verification result transmission unit 19 ) transmits the signed data to the personal authentication server 4 .
At S41, the control unit 40 of the personal authentication server 4 receives the signed data.
At S42 , the control unit 40 performs signature verification processing using the public key stored in the key storage unit 53 . If the signature verification is successful using the public key, the control unit 40 determines that the person has been authenticated.

Ｓ４３において、制御部４０は、署名検証ができたか否かを判定する。署名検証ができた場合（Ｓ４３：ＹＥＳ）には、制御部４０は、処理をＳ４４に移す。他方、署名検証ができなかった場合（Ｓ４３：ＮＯ）には、制御部４０は、本処理を終了する。
Ｓ４４において、制御部４０（サービス利用許可部４４）は、署名検証結果を、携帯端末１に送信する。その後、制御部４０は、本処理を終了する。 In S43, the control unit 40 determines whether or not signature verification has been completed. If the signature verification is successful (S43: YES), the control unit 40 shifts the process to S44. On the other hand, if the signature could not be verified (S43: NO), the control unit 40 terminates this process.
In S44 , the control unit 40 (service use permission unit 44 ) transmits the signature verification result to the mobile terminal 1 . After that, the control unit 40 terminates this process.

Ｓ４５において、携帯端末１の制御部１０は、署名検証結果を受信したか否かを判定する。署名検証結果を受信した場合（Ｓ４５：ＹＥＳ）には、制御部１０は、処理をＳ４６に移す。他方、署名検証結果を受信していない場合（Ｓ４５：ＮＯ）には、制御部１０は、処理をＳ４９に移す。なお、署名したデータを送信（Ｓ４０）後、所定時間内に署名検証結果を受信しない場合に、制御部１０は、署名検証結果を受信しなかったと判定してもよい。
Ｓ４６において、制御部１０（サービス処理部２０）は、取引アプリ３１ａに対応したサービス提供サーバ７との間でサービス処理を行う。その後、制御部１０は、処理を図４に移し、本処理を終了する。 In S45, the control unit 10 of the mobile terminal 1 determines whether or not the signature verification result has been received. If the signature verification result has been received (S45: YES), the control unit 10 shifts the process to S46. On the other hand, if the signature verification result has not been received (S45: NO), the control unit 10 shifts the process to S49. Note that the control unit 10 may determine that the signature verification result has not been received if the signature verification result is not received within a predetermined time after the signed data is transmitted (S40).
In S46, the control unit 10 (service processing unit 20) performs service processing with the service providing server 7 corresponding to the transaction application 31a. After that, the control unit 10 shifts the process to FIG. 4 and ends this process.

他方、Ｓ４９において、制御部１０は、認証エラーの旨を、タッチパネルディスプレイ３５に出力する。その後、制御部１０は、処理を図４に移し、本処理を終了する。 On the other hand, in S49 , the control unit 10 outputs to the touch panel display 35 that there is an authentication error. After that, the control unit 10 shifts the process to FIG. 4 and ends this process.

このように、本実施形態によれば、本人認証システム１００は、以下のような効果がある。
（１）本人確認で取得した顔画像を、携帯端末１に記憶しておき、サービス利用時に都度行う本人認証での照合に、記憶した顔画像を用いる。よって、通信ネットワークＮに本人認証で用いる顔画像である生体情報を送信することがなく、セキュリティ性を向上させることができる。つまり、本人確認処理から本人認証処理を一連の処理として、又は、連続した処理として行えることは、セキュリティを高めることになる。また、本人認証のために、再度照合元になる顔画像を取得するものではなく、本人確認で取得した顔画像を流用するので、１度照合用の画像を取得すれば足り、ユーザにとって、より利便性が良いものにできる。 Thus, according to this embodiment, the personal authentication system 100 has the following effects.
(1) Store a face image acquired in identity verification in the mobile terminal 1, and use the stored face image for verification in identity verification performed each time the service is used. Therefore, biometric information, which is a face image used for personal authentication, is not transmitted to the communication network N, and security can be improved. In other words, the security can be enhanced by performing the identity verification process and the identity authentication process as a series of processes or as continuous processes. In addition, for personal authentication, the facial image that is used as the reference for verification is not acquired again, but the facial image acquired for personal identification is diverted. It can be made convenient.

（２）特に、金融機関のオンライン取引に関する本人認証の処理においては、従来からのパスワード認証から、より一層の利便性及びセキュリティ性の向上のため、生体認証へと移行しつつある。生体認証において、例えば、顔画像を用いて照合をする場合には、照合元になる顔画像は、極力、外部に出力（又は送信）したものではなく、携帯端末１の内部にのみ保持した画像を利用することが好ましい。生体認証において、本人の生体情報を登録する際に、顔画像等の本人データが流用されることがなく、より強固な環境でセキュリティを維持することが可能になる。
（３）本人確認で取得した顔画像は、本人確認ができた場合に、本人認証時の照合用の画像として携帯端末１に記憶させる。よって、顔画像を記憶させる行為を、本人認証時の最初にだけ行うものにできる。 (2) In particular, in the processing of identity authentication for online transactions at financial institutions, the conventional password authentication is being replaced by biometric authentication in order to further improve convenience and security. In biometric authentication, for example, when matching is performed using a face image, the face image used as the matching source is an image held only inside the mobile terminal 1 rather than being output (or transmitted) to the outside as much as possible. is preferred. In biometric authentication, when registering the biometric information of the person, the person's data such as a face image is not used, and security can be maintained in a stronger environment.
(3) The face image obtained in identity verification is stored in the portable terminal 1 as an image for verification at the time of identity verification when the identity verification is successful. Therefore, the act of storing the face image can be performed only at the beginning of personal authentication.

（４）携帯端末１から本人認証サーバ４に対して、秘密鍵で署名した本人認証の照合結果を送信するので、よりセキュリティ性を向上できる。
（５）本人認証サーバ４から携帯端末１に、チャレンジコードを送信し、携帯端末１から本人認証サーバ４には、チャレンジコードを秘密鍵で署名した照合結果を送信するので、本人認証サーバ４では、本人認証を行う携帯端末１の同一性を確保でき、セキュリティ性が向上する。 (4) Since the mobile terminal 1 transmits to the personal authentication server 4 the verification result of the personal authentication signed with the private key, the security can be further improved.
(5) The personal authentication server 4 sends the challenge code to the mobile terminal 1, and the mobile terminal 1 sends the verification result of the challenge code signed with the private key to the personal authentication server 4. Therefore, the personal authentication server 4 , the identity of the mobile terminal 1 that performs personal authentication can be ensured, and security is improved.

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。 Although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments. Moreover, the effects described in the embodiments are merely enumerations of the most suitable effects produced by the present invention, and the effects of the present invention are not limited to those described in the embodiments. The above-described embodiments and modifications described later can be used in combination as appropriate, but detailed description thereof will be omitted.

（変形形態）
（１）本実施形態では、携帯端末が本人確認の際に取得した顔画像を、本人認証の際の照合に用いる画像とするものを例に説明したが、これに限定されない。携帯端末が本人確認の際に取得した本人確認画像から得られた顔写真画像を、本人認証の際の照合に用いる画像としてもよい。しかし、携帯端末が本人確認の際に取得した顔画像は、本人認証の際に撮影して取得する顔画像と同じインカメラを用いて撮影された画像であり、両者は類似した撮影条件で取得した画像になる。そのため、携帯端末が本人確認の際に取得した顔画像の方が、照合時の精度が良くなる可能性がある。
（２）本実施形態では、本人確認の処理として、本人確認書類から得た顔写真画像と、顔画像とを、本人認証サーバで照合し、照合できた場合に、本人確認ができたものとして説明したがこれに限定されない。本人確認の処理として、他の確認処理を含めてもよい。 (deformed form)
(1) In the present embodiment, an example has been described in which a face image acquired by a mobile terminal during identity verification is used as an image for verification during identity verification, but the present invention is not limited to this. A facial photograph image obtained from an identity verification image acquired by the portable terminal when identity verification is performed may be used as an image used for verification during identity verification. However, the face image acquired by the mobile terminal during identity verification is an image taken using the same in-camera as the face image acquired during identity verification, and both are acquired under similar shooting conditions. image. Therefore, there is a possibility that the face image acquired by the mobile terminal when verifying the person's identity will have better accuracy during matching.
(2) In the present embodiment, as the process of identity verification, the identity verification server compares the face photograph image obtained from the identity verification document with the face image. Illustrated but not limited to. Other confirmation processes may be included as the personal identification process.

（３）本実施形態では、本人確認の処理で行われる本人確認画像処理を、携帯端末１のみで行うものを例に説明したが、これに限定されない。本人確認画像処理として、本人確認書類による処理の一部を、本人認証サーバで行ってもよい。
具体的には、本人認証サーバの本人確認処理部は、運転免許証を撮影して得られた本人確認画像を、携帯端末から受信する。そして、本人認証サーバの本人確認処理部は、ＯＣＲ（光学式文字認識）によって、本人確認書類に含まれる文字をテキスト化する。その後、本人確認処理部は、テキスト化した文字列を、携帯端末に送信する。携帯端末の本人確認部は、テキスト化した文字列を受信し、タッチパネルディスプレイに文字情報を表示させる。なお、携帯端末は、表示された文字情報を修正する機能を有してもよい。そして、本人認証サーバから取得した文字情報は、例えば、本人確認ができた場合に、サービス提供サーバに対して送信することができる。
このような処理を行うことで、ユーザがサービスを利用する際に必要になる氏名等を、テキスト化された文字情報を用いればよく、ユーザが入力する手間を省くことができる。また、受信した文字情報を携帯端末で修正可能にすることで、誤変換であったり、本人確認書類に記載の氏名や住所が変更になったりした場合であっても、変更箇所のみを変更すればよく、利便性が高いものにできる。 (3) In the present embodiment, an example has been described in which the personal identification image processing performed in the personal identification processing is performed only by the portable terminal 1, but the present invention is not limited to this. As the identity verification image processing, part of the processing using the identity verification documents may be performed by the identity verification server.
Specifically, the identity verification processing unit of the identity verification server receives the identity verification image obtained by photographing the driver's license from the portable terminal. Then, the identity verification processing unit of the identity verification server converts the characters included in the identity verification document into text by OCR (optical character recognition). After that, the personal identification processing unit transmits the text string to the mobile terminal. The personal identification unit of the mobile terminal receives the character string converted into text and causes the touch panel display to display the character information. Note that the mobile terminal may have a function of correcting the displayed character information. The character information acquired from the personal authentication server can be transmitted to the service providing server, for example, when the personal identification is completed.
By performing such processing, it is possible to save the trouble of the user inputting the name and the like required when the user uses the service, by using textual character information. In addition, by making it possible to correct the received text information on a mobile terminal, even if there is a conversion error or the name or address listed on the identity verification document is changed, only the changed part can be changed. It can be made easy and convenient.

（４）本実施形態での本人確認及び本人認証を行うサービスについては、様々なものが該当する。例えば、銀行業務であれば、口座開設及び口座の紐付け処理や、ＡＴＭを用いた現金引き出し等の処理等に用いることができる。ＡＴＭを用いるものとしては、携帯端末で本人認証を行って、認証された場合にＱＲコード（登録商標）を表示させて、ＡＴＭに読み取らせることで、携帯端末を、キャッシュカードの代わりとすることができる。また、窓口での業務で、代理人が本人に代わって行う場合に、本人による本人認証がされたことを証明する情報を代理人が受信等することで、委任状等を予め用意せずに済む。 (4) Various services are applicable to personal identification and personal authentication services in this embodiment. For example, in the case of banking business, it can be used for account opening and account linking processing, cash withdrawal processing using an ATM, and the like. As for those using ATMs, personal authentication is performed on a mobile terminal, and when the authentication is completed, a QR code (registered trademark) is displayed and read by the ATM, so that the mobile terminal can be used as a cash card. can be done. In addition, when an agent performs work on behalf of the person at the counter, the agent can receive information that proves that the person has authenticated the person, without preparing a power of attorney in advance. done.

１携帯端末
３運転免許証
４本人認証サーバ
７サービス提供サーバ
１０，４０制御部
１２本人確認部
１３画像取得部
１４本人確認依頼部
１５本人認証部
１６ａ画像記憶処理部
１６ｂ鍵処理部
１７要求送信部
１８顔画像取得照合部
１９照合結果送信部
２０サービス処理部
３０，５０記憶部
３１ａ取引アプリ
３１ｂ本人確認アプリ
３１ｃ本人認証アプリ
３２照合画像記憶部
３３，５３鍵記憶部
３４カメラ
３５タッチパネルディスプレイ
４１本人確認処理部
４２鍵受信処理部
４３コード生成送信部
４４サービス利用許可部
１００本人認証システム 1 portable terminal 3 driver's license 4 personal authentication server 7 service providing server 10, 40 control unit 12 personal identification unit 13 image acquisition unit 14 personal identification request unit 15 personal identification unit 16a image storage processing unit 16b key processing unit 17 request transmission unit 18 face image acquisition/collation unit 19 verification result transmission unit 20 service processing unit 30, 50 storage unit 31a transaction application 31b identity verification application 31c identity verification application 32 verification image storage unit 33, 53 key storage unit 34 camera 35 touch panel display 41 identity verification Processing unit 42 Key reception processing unit 43 Code generation transmission unit 44 Service use permission unit 100 Personal authentication system

Claims

an authenticator equipped with an imaging unit owned by a user;
a personal authentication server communicably connected to the authenticator;
A personal identification system comprising
The authenticator is
A face photograph image included in an identity verification image, which is an image of an identity verification document, acquired via the photographing unit, in identity verification of a user performed when no image is stored in the collation image storage unit; At least one of the face photograph image and the face image acquired at the time of the identity verification when the identity verification using the face image, which is the image of the face of the possessor of the identity verification document, is successful. an image storage processing means for storing the matching image in the matching image storage unit;
At the time of using the service when the image is stored in the collation image storage unit , the face image of the service user is obtained through the photographing unit and collated with the collation image stored in the collation image storage unit. face image matching means;
a matching result transmitting means for transmitting a matching result obtained by the face image matching means to the personal authentication server;
with
The personal authentication server comprises permission means for permitting use of the service based on the verification result;
A personal identification system characterized by

In the personal authentication system according to claim 1,
The authenticator is
a key generation means for generating a key pair consisting of a private key and a public key;
a key transmission means for transmitting the public key included in the key pair generated by the key generation means to the personal authentication server;
with
The verification result transmission means transmits the verification result signed with the private key included in the key pair generated by the key generation means,
The personal authentication server is
comprising key storage means for receiving the public key and storing it in a storage unit;
The permitting means verifies the signature of the received collation result with the public key stored in the key storage means, and permits the use of the service if the signature can be verified.
A personal identification system characterized by

In the personal authentication system according to claim 2,
The authenticator comprises request transmission means for transmitting a usage start request to the personal authentication server,
The personal authentication server comprises code transmission means for transmitting a challenge code generated using a random number in response to receiving the usage start request,
the verification result transmission means of the authenticator transmits the verification result in which the challenge code is signed with the private key when the face image verification means succeeds in verification;
A personal identification system characterized by

An authenticator possessed by a user and equipped with a photographing unit,
A face photograph image included in an identity verification image, which is an image of an identity verification document, acquired via the photographing unit, in identity verification of a user performed when no image is stored in the collation image storage unit; At least one of the face photograph image and the face image acquired at the time of the identity verification when the identity verification using the face image, which is the image of the face of the possessor of the identity verification document, is successful. an image storage processing means for storing the matching image in the matching image storage unit;
At the time of using the service when the image is stored in the collation image storage unit , the face image of the service user is obtained through the photographing unit and collated with the collation image stored in the collation image storage unit. face image matching means;
a matching result transmitting means for transmitting a matching result to a personal authentication server connected in a communicable manner and performing personal authentication when the face image matching means is successful in matching;
to provide
An authenticator characterized by

An authenticator possessed by a user and equipped with a photographing unit,
A face photograph image included in an identity verification image, which is an image of an identity verification document, acquired via the photographing unit, in identity verification of a user performed when no image is stored in the collation image storage unit; At least one of the face photograph image and the face image acquired at the time of the identity verification when the identity verification using the face image, which is the image of the face of the possessor of the identity verification document, is successful. an image storage processing means for storing the matching image in the matching image storage unit;
At the time of using the service when the image is stored in the collation image storage unit , the face image of the service user is obtained through the photographing unit and collated with the collation image stored in the collation image storage unit. face image matching means;
means for generating a two-dimensional code to be read by an ATM instead of the user's cash card and outputting it to a display unit when the matching by the face image matching means is successful;
to provide
An authenticator characterized by

A computer possessed by a user and equipped with a photographing unit,
A face photograph image included in an identity verification image, which is an image of an identity verification document, acquired via the photographing unit, in identity verification of a user performed when no image is stored in the collation image storage unit; At least one of the face photograph image and the face image acquired at the time of the identity verification when the identity verification using the face image, which is the image of the face of the possessor of the identity verification document, is successful. an image storage processing means for storing the matching image in the matching image storage unit;
At the time of using the service when the image is stored in the collation image storage unit , the face image of the service user is obtained through the photographing unit and collated with the collation image stored in the collation image storage unit. face image matching means;
a matching result transmitting means for transmitting a matching result to a personal authentication server connected in a communicable manner and performing personal authentication when the face image matching means is successful in matching;
program to function as

An authentication device equipped with a photographing unit possessed by a user performs identity verification of a user when no image is stored in the collation image storage unit, and is an image of an identity verification document acquired through the photographing unit. Acquired at the time of the identity verification when the identity verification using the face photo image included in the identity verification image and the face image that is the face image of the person who possesses the identity verification document an image storage step of storing a collation image, which is at least one of the face photograph image and the face image, in the collation image storage unit;
The authenticator acquires the face image of the service user via the photographing unit when using the service when the image is stored in the collation image storage unit, and the face image stored in the collation image storage unit is obtained. a face image matching step of matching with a matching image;
a matching result transmission step in which the authentication device transmits the matching result obtained by the face image matching step to a personal authentication server that is communicatively connected to the authentication device and performs personal authentication;
including
including a permitting step in which the personal authentication server permits use of the service based on the verification result;
A personal authentication method characterized by: