WO2019244663A1 - Facial authentication system, terminal device, facial authentication method, and computer-readable recording medium - Google Patents

Facial authentication system, terminal device, facial authentication method, and computer-readable recording medium Download PDF

Info

Publication number
WO2019244663A1
WO2019244663A1 PCT/JP2019/022642 JP2019022642W WO2019244663A1 WO 2019244663 A1 WO2019244663 A1 WO 2019244663A1 JP 2019022642 W JP2019022642 W JP 2019022642W WO 2019244663 A1 WO2019244663 A1 WO 2019244663A1
Authority
WO
WIPO (PCT)
Prior art keywords
face
image
central portion
server device
terminal device
Prior art date
Application number
PCT/JP2019/022642
Other languages
French (fr)
Japanese (ja)
Inventor
晋 梶野
Original Assignee
Ｎｅｃソリューションイノベータ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｎｅｃソリューションイノベータ株式会社 filed Critical Ｎｅｃソリューションイノベータ株式会社
Priority to JP2020525510A priority Critical patent/JPWO2019244663A1/en
Publication of WO2019244663A1 publication Critical patent/WO2019244663A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Abstract

Provided is a facial authentication system 10 comprising a terminal device 20 and a facial authentication server device 30. The terminal device 20 comprises: an image acquisition part 21 for acquiring an image of a person to be authenticated; an image processing part 22 for identifying the region of the face of the person to be authenticated within the acquired image and cropping an image of the central portion of the face having a narrower range than the contours of the face from the identified region of the face; and a transmission part 23 for transmitting the image of the central portion of the face to the server device 30. The server device 30 comprises: a receiving part 31 for receiving the transmitted image of the central portion of the face; and an authentication processing part 32 for executing a facial authentication process on the basis of the received image of the central portion of the face.

Description

顔認証システム、端末装置、顔認証方法、及びコンピュータ読み取り可能な記録媒体Face authentication system, terminal device, face authentication method, and computer-readable recording medium
　本発明は、顔認証を行うための、顔認証システム、それに用いられる端末装置、及び顔認証方法に関し、更には、これらを実現するためのプログラムを記録したコンピュータ読み取り可能な記録媒体に関する。 The present invention relates to a face authentication system for performing face authentication, a terminal device used for the same, and a face authentication method, and further relates to a computer-readable recording medium recording a program for realizing the same.
　近年、人の顔を用いて認証処理を行う顔認証システムが実用化されている。顔の形状は、個人に固有であり、又、パスワードのように盗まれる可能性は極めて低いことから、顔認証システムによれば、セキュリティ性を高めることが可能となる。また、このような特性から、顔認証システムの需要は、今後増加するものと考えられる。具体的には、以下のような顔認証システムが提案されている。 In recent years, a face authentication system that performs authentication processing using a human face has been put into practical use. The shape of the face is unique to an individual, and is very unlikely to be stolen like a password. Therefore, according to the face authentication system, security can be enhanced. Also, from such characteristics, it is considered that demand for the face authentication system will increase in the future. Specifically, the following face authentication system has been proposed.
　例えば、特許文献１は、複数のカメラ付きの携帯型端末と管理サーバとで構成された顔認証システムを開示している。特許文献１に開示された顔認証システムでは、携帯型端末は、そのカメラによって対象者の顔の撮影が行われると、得られた顔画像と予め登録している登録者の顔データとを用いて、顔認証を実行する。 For example, Patent Literature 1 discloses a face authentication system including a portable terminal with a plurality of cameras and a management server. In the face authentication system disclosed in Patent Literature 1, when an image of a target person's face is taken by the camera, the portable terminal uses the obtained face image and face data of a registrant registered in advance. And perform face authentication.
　また、携帯型端末は、認証が成功した場合は、撮影によって得られた顔画像を管理サーバに送信する。管理サーバは、携帯型端末から、顔画像を受信すると、受信した顔画像を用いて、登録者のデータベースを更新する。 If the authentication is successful, the portable terminal transmits the face image obtained by the photographing to the management server. When receiving the face image from the portable terminal, the management server updates the database of the registrant using the received face image.
　また、特許文献２は、複数のカメラ付きの携帯型端末と認証処理を一括して行うクラウドシステムとで構成された顔認証システムを開示している。特許文献２に開示された認証システムでは、携帯型端末は、顔認証を行わず、撮影された顔画像をクラウドシステムに送信する。クラウドシステムは、各携帯型端末から顔画像が送信されてくると、認証処理を行い、認証結果を、送信元の携帯型端末に送信する。 Patent Document 2 discloses a face authentication system including a portable terminal with a plurality of cameras and a cloud system that performs authentication processing collectively. In the authentication system disclosed in Patent Literature 2, the portable terminal transmits a captured face image to the cloud system without performing face authentication. When a face image is transmitted from each portable terminal, the cloud system performs an authentication process and transmits an authentication result to the portable terminal of the transmission source.
特開２０１６－２２４７５１号公報JP 2016-224751 A 特開２０１６－０５７６７０号公報JP 2016-057670 A
　ところで、特許文献１に開示された認証システムでは、携帯型端末によって顔認証が行われるため、各携帯型端末のリソースを大きく消費してしまうという問題がある。また、悪意のある第三者が携帯型端末を取得すると、認証処理の内容が解析されたり、登録者の顔データが不正に取得されたり、するという問題も発生する。 By the way, in the authentication system disclosed in Patent Literature 1, since face authentication is performed by the portable terminal, there is a problem that resources of each portable terminal are greatly consumed. Further, when a malicious third party acquires the portable terminal, there arises a problem that the contents of the authentication processing are analyzed, and the face data of the registrant is illegally acquired.
　これに対して、特許文献２に開示されたシステムでは、携帯型端末は、顔画像を送信するだけであり、上述の問題点は全て解消されるとも考えられる。しかしながら、特許文献２に開示された認証システムでは、携帯型端末装置からクラウドシステムへと、データ量の大きな顔画像を送信する必要があり、通信回線に負荷をかけてしまう。このため、顔画像の送信処理に時間がかかり、結果的に、特許文献２に開示されたシステムにおいても、認証処理に時間がかかってしまう。 On the other hand, in the system disclosed in Patent Literature 2, the portable terminal only transmits the face image, and it is considered that all the above-mentioned problems are solved. However, in the authentication system disclosed in Patent Literature 2, it is necessary to transmit a face image having a large data amount from the portable terminal device to the cloud system, which places a load on the communication line. For this reason, it takes time to transmit the face image, and as a result, even in the system disclosed in Patent Document 2, it takes time to perform the authentication process.
　本発明の目的の一例は、上記問題を解消し、顔認証において、端末装置における負荷の軽減、顔認証にかかる時間の短縮化、及びセキュリティ性の向上を図り得る、顔認証システム、それに用いられる端末装置、顔認証方法、及びコンピュータ読み取り可能な記録媒体を提供することにある。 One example of an object of the present invention is to solve the above-described problem, and to reduce the load on a terminal device, shorten the time required for face authentication, and improve security in face authentication. A terminal device, a face authentication method, and a computer-readable recording medium are provided.
　上記目的を達成するため、本発明の一側面における顔認証システムは、端末装置と、顔認証用のサーバ装置とを備え、
　前記端末装置は、
認証対象となる人の画像を取得する、画像取得部と、
取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
前記顔の中央部分の画像を、前記サーバ装置に送信する、送信部と、を備え、
　前記サーバ装置は、
送信されてきた前記顔の中央部分の画像を受信する、受信部と、
受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、認証処理部と、を備えている、
ことを特徴とする。 In order to achieve the above object, a face authentication system according to one aspect of the present invention includes a terminal device and a server device for face authentication,
The terminal device,
An image acquisition unit that acquires an image of a person to be authenticated,
An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
A transmitting unit for transmitting an image of the central part of the face to the server device,
The server device,
A receiving unit that receives the transmitted image of the central part of the face,
Performing an authentication process based on the received image of the central portion of the face, comprising: an authentication processing unit.
It is characterized by the following.
　上記目的を達成するため、本発明の一側面における端末装置は、顔認証用のサーバ装置との間でデータ通信を行う端末装置であって、
　認証対象となる人の画像を取得する、画像取得部と、
　取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
　前記顔の中央部分の画像を、前記サーバ装置での顔認証のために、前記サーバ装置に送信する、送信部と、を備えている、
ことを特徴とする。 In order to achieve the above object, a terminal device according to one aspect of the present invention is a terminal device that performs data communication with a server device for face authentication,
An image acquisition unit that acquires an image of a person to be authenticated,
An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
An image of a central portion of the face, for transmitting the face to the server device for face authentication in the server device, comprising: a transmission unit,
It is characterized by the following.
　また、上記目的を達成するため、本発明の一側面における顔認証方法は、端末装置と、顔認証用のサーバ装置とを用いた、顔認証方法であって、
（ａ）前記端末装置によって、認証対象となる人の画像を取得する、ステップと、
（ｂ）前記端末装置によって、取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
（ｃ）前記端末装置によって、前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
（ｄ）前記サーバ装置によって、送信されてきた前記顔の中央部分の画像を受信する、ステップと、
（ｅ）前記サーバ装置によって、受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、ステップと、
を有する、ことを特徴とする。 To achieve the above object, a face authentication method according to one aspect of the present invention is a face authentication method using a terminal device and a server device for face authentication,
(A) obtaining, by the terminal device, an image of a person to be authenticated;
(B) The terminal device specifies an area of the face of the person to be authenticated from the acquired image, and determines, from the specified face area, a central portion of the face in a range narrower than the contour of the face. Step out of the image,
(C) transmitting, by the terminal device, an image of a central portion of the face to the server device;
(D) receiving, by the server device, the transmitted image of the central portion of the face;
(E) executing face authentication processing by the server device based on the received image of the central portion of the face;
Characterized by having
　更に、上記目的を達成するため、本発明の一側面におけるコンピュータ読み取り可能な記録媒体は、コンピュータによって、顔認証用のサーバ装置との間でデータ通信を行うためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
前記コンピュータに、
（ａ）認証対象となる人の画像を取得する、ステップと、
（ｂ）取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
（ｃ）前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
を実行させる命令を含む、プログラムを記録していることを特徴とする。 Further, in order to achieve the above object, a computer-readable recording medium according to one aspect of the present invention is a computer-readable recording medium that records a program for performing data communication with a face authentication server device by a computer. A recording medium,
To the computer,
(A) obtaining an image of a person to be authenticated;
(B) identifying an area of the face of the person to be authenticated from the acquired image, and cutting out an image of a central portion of the face in a range narrower than the outline of the face from the identified area of the face; When,
(C) transmitting an image of the central portion of the face to the server device;
A program including an instruction to execute the program.
　以上のように、本発明によれば、顔認証において、端末装置における負荷の軽減、顔認証にかかる時間の短縮化、及びセキュリティ性の向上を図ることができる。 As described above, according to the present invention, in face authentication, the load on the terminal device can be reduced, the time required for face authentication can be reduced, and the security can be improved.
図１は、本発明の実施の形態における顔認証システム及び端末装置の概略構成を示すブロック図である。FIG. 1 is a block diagram illustrating a schematic configuration of a face authentication system and a terminal device according to an embodiment of the present invention. 図２は、本発明の実施の形態における顔認証システム及び端末装置の構成を具体的に示すブロック図である。FIG. 2 is a block diagram specifically showing the configurations of the face authentication system and the terminal device according to the embodiment of the present invention. 図３は、本発明の実施の形態において端末装置で行われる処理内容を示す図である。FIG. 3 is a diagram illustrating the content of processing performed by the terminal device according to the embodiment of the present invention. 図４は、本発明の実施の形態における端末装置の動作を示すフロー図である。FIG. 4 is a flowchart showing an operation of the terminal device according to the embodiment of the present invention. 図５は、本発明の実施の形態におけるサーバ装置の動作を示すフロー図である。FIG. 5 is a flowchart showing the operation of the server device according to the embodiment of the present invention. 図６は、本発明の実施の形態における端末装置及びサーバ装置を実現可能なコンピュータの一例を示すブロック図である。FIG. 6 is a block diagram illustrating an example of a computer that can implement the terminal device and the server device according to the embodiment of the present invention.
（実施の形態）
　以下、本発明の実施の形態における、顔認証システム、端末装置、顔認証方法、及びプログラムについて、図１～図６を参照しながら説明する。 (Embodiment)
Hereinafter, a face authentication system, a terminal device, a face authentication method, and a program according to an embodiment of the present invention will be described with reference to FIGS.
［システム構成］
　最初に、本実施の形態における、顔認証システム及び端末装置の概略構成について、図１を用いて説明する。図１は、本発明の実施の形態における顔認証システム及び端末装置の概略構成を示すブロック図である。 [System configuration]
First, a schematic configuration of a face authentication system and a terminal device according to the present embodiment will be described with reference to FIG. FIG. 1 is a block diagram illustrating a schematic configuration of a face authentication system and a terminal device according to an embodiment of the present invention.
　図１に示す本実施の形態における顔認証システム１０は、顔認証を行うためのシステムである。図１に示すように、顔認証システム１０は、端末装置２０と、顔認証用のサーバ装置３０とを備えている。 顔 The face authentication system 10 in the present embodiment shown in FIG. 1 is a system for performing face authentication. As shown in FIG. 1, the face authentication system 10 includes a terminal device 20 and a server device 30 for face authentication.
　このうち、端末装置２０は、画像取得部２１と、画像処理部２２と、送信部２３とを備えている。画像取得部２１は、認証対象となる人の画像を取得する。画像処理部２２は、取得された画像から、認証対象となる人の顔の領域を特定し、特定した顔の領域から、顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す。送信部２３は、顔の中央部分の画像を、サーバ装置３０に送信する。 う ち The terminal device 20 includes an image acquisition unit 21, an image processing unit 22, and a transmission unit 23. The image acquisition unit 21 acquires an image of a person to be authenticated. The image processing unit 22 specifies an area of a face of a person to be authenticated from the acquired image, and cuts out an image of a central portion of the face in a range narrower than the contour of the face from the specified face area. The transmitting unit 23 transmits the image of the central part of the face to the server device 30.
　サーバ装置３０は、受信部３１と、認証処理部３２とを備えている。受信部３１は、端末装置２０から送信されてきた顔の中央部分の画像を受信する。認証処理部３２は、受信した顔の中央部分の画像に基づいて、顔認証処理を実行する。 The server device 30 includes a receiving unit 31 and an authentication processing unit 32. The receiving unit 31 receives the image of the central part of the face transmitted from the terminal device 20. The authentication processing unit 32 performs a face authentication process based on the received image of the central part of the face.
　このように、本実施の形態では、認証処理は、端末装置２０ではなく、サーバ装置３０によって実行されるので、端末装置２０で認証処理が行われる場合に比べて、顔認証にかかる時間の短縮化とセキュリティ性の向上とが図られる。また、端末装置２０は、顔画像そのものではなく、顔の中央部分の画像のみを送るので、通信回線にかかる負荷は、顔画像そのものを送る場合に比べて小さくなる。更に、この結果、端末装置２０における負荷の軽減が図られる。 As described above, in the present embodiment, since the authentication process is executed by the server device 30 instead of the terminal device 20, the time required for face authentication can be reduced as compared with the case where the authentication process is performed by the terminal device 20. And security are improved. In addition, since the terminal device 20 transmits only the image of the central part of the face, not the facial image itself, the load on the communication line is smaller than when transmitting the facial image itself. Further, as a result, the load on the terminal device 20 is reduced.
　続いて、図２及び図３を用いて、本実施の形態における顔認証システム及び端末装置の構成及び機能についてより具体的に説明する。図２は、本発明の実施の形態における顔認証システム及び端末装置の構成を具体的に示すブロック図である。図３は、本発明の実施の形態において端末装置で行われる処理内容を示す図である。 Next, the configurations and functions of the face authentication system and the terminal device according to the present embodiment will be described more specifically with reference to FIGS. FIG. 2 is a block diagram specifically showing the configurations of the face authentication system and the terminal device according to the embodiment of the present invention. FIG. 3 is a diagram illustrating the content of processing performed by the terminal device according to the embodiment of the present invention.
　まず、図２に示すように、本実施の形態では、端末装置２０は、オペレーティングシステム２４を備え、オペレーティングシステム２４上でプログラムを実行することができる。画像取得部２１、画像処理部２２、及び送信部２３は、オペレーティングシステム２４で後述するプログラムを実行することによって構築する。具体的には、端末装置２０は、例えば、スマートフォン、タブレット型端末等である。 First, as shown in FIG. 2, in the present embodiment, the terminal device 20 includes an operating system 24, and can execute a program on the operating system 24. The image acquisition unit 21, the image processing unit 22, and the transmission unit 23 are constructed by executing a program described later on the operating system 24. Specifically, the terminal device 20 is, for example, a smartphone, a tablet terminal, or the like.
　また、図２に示すように、端末装置２０は、撮像部２５を備えている。撮像部２５は、具体的には、固体撮像素子及び制御回路で構成されたカメラモジュールである。撮像部２５は、端末装置２０のユーザの操作に応じて撮影を行い、撮影した画像の画像データを画像取得部２１に入力する。画像取得部２１は、入力された画像データを取得する。 端末 Further, as shown in FIG. 2, the terminal device 20 includes an imaging unit 25. The imaging unit 25 is specifically a camera module including a solid-state imaging device and a control circuit. The imaging unit 25 performs shooting in response to a user operation of the terminal device 20, and inputs image data of the shot image to the image acquisition unit 21. The image acquisition unit 21 acquires input image data.
　画像処理部２２は、画像取得部２１で取得された画像データで特定される画像から、人の顔の領域を特定する。具体的には、画像処理部２２は、画像データ全体の特徴量を求め、求めた特徴量と、予め用意されている顔の特徴量とを対比して、顔の領域を特定する。 (4) The image processing unit 22 specifies an area of a human face from the image specified by the image data acquired by the image acquiring unit 21. More specifically, the image processing unit 22 determines a feature amount of the entire image data, compares the obtained feature amount with a previously prepared face feature amount, and specifies a face area.
　また、図３の上段に示すように、画像処理部２２は、本実施の形態では、特定した顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定する。そして、図３の中段に示すように、画像処理部２２は、顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す。 Also, as shown in the upper part of FIG. 3, in the present embodiment, the image processing unit 22 in the specified face region, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower ends of lips, and a right eyebrow And a straight line passing through the right end of the right eye or the right end of the right eye, and a straight line passing through the left end of the left eyebrow or the left end of the left eye. Then, as shown in the middle part of FIG. 3, the image processing unit 22 cuts out the image of the part surrounded by these four straight lines as the image of the central part of the face.
　このようにして画像を切り出せば、顔認証に必要な顔のパーツの情報を損なうことなく、顔認証で用いる画像データのデータ量を小さくすることができる。また、画像処理部２２は、上述した４つの直線を設定せず、代わりに、顔の輪郭を推定し、推定した輪郭に基づいて、この４つの直線で囲まれた領域と同等の領域を切り出しても良い。 ば If the image is cut out in this way, the data amount of the image data used in the face authentication can be reduced without losing the information of the face parts necessary for the face authentication. Further, the image processing unit 22 does not set the above-described four straight lines, but instead estimates the outline of the face, and cuts out an area equivalent to the area surrounded by the four straight lines based on the estimated outline. May be.
　更に、画像処理部２２は、図３の下段に示すように、切り出された顔の中央部分の画像を、左目と右目との間の距離Ｄが設定された距離（目標距離）となるように縮小することもできる。また、この場合、目標距離は、サーバ装置３０による顔認証が困難とならない程度、例えば、７０～１００ピクセル程度に設定される。 Further, as shown in the lower part of FIG. 3, the image processing unit 22 converts the image of the center portion of the cut out face so that the distance D between the left eye and the right eye becomes a set distance (target distance). It can also be reduced. Further, in this case, the target distance is set to such a degree that the face authentication by the server device 30 is not difficult, for example, about 70 to 100 pixels.
　加えて、画像処理部２２は、顔の中央部分の画像が２値の画像となるように画像変換を実行することもできる。具体的には、画像処理部２２は、具体的には、顔の中央部分の画像の画像データから、色情報を削除することができる。 In addition, the image processing unit 22 can execute image conversion so that the image of the central part of the face becomes a binary image. Specifically, the image processing unit 22 can delete the color information from the image data of the image of the central part of the face.
　送信部２３は、インターネット等のネットワーク４０を介して、顔の中央部分の画像の画像データを、サーバ装置に３０送信する。本実施の形態においては、送信部２３は、縮小処理、２値の画像への変換処理、又は両方の処理が行われた後の画像データを送信することもできる。このような処理が行われた画像データを送信する場合は、通信回線にかかる負荷が軽減される。 The transmission unit 23 transmits the image data of the image of the central part of the face to the server device 30 via the network 40 such as the Internet. In the present embodiment, the transmission unit 23 can also transmit image data that has been subjected to reduction processing, binary image conversion processing, or both processing. When transmitting image data that has undergone such processing, the load on the communication line is reduced.
　サーバ装置３０は、上述した受信部３１及び認証処理部３２に加えて、認証データ格納部３３を備えている。認証データ格納部３３は、登録されているユーザの顔認証用のデータを登録している。 The server device 30 includes an authentication data storage unit 33 in addition to the receiving unit 31 and the authentication processing unit 32 described above. The authentication data storage unit 33 registers data for face authentication of a registered user.
　受信部３１は、本実施の形態では、ネットワーク４０を介して、端末装置２０が送信してきた画像データを受信する。また、受信部３１は、受信した画像データを認証処理部３２に渡す。 In this embodiment, the receiving unit 31 receives the image data transmitted from the terminal device 20 via the network 40. The receiving unit 31 passes the received image data to the authentication processing unit 32.
　認証処理部３２は、渡された画像データから、顔認証に必要となる特徴量を抽出し、抽出した特徴量を用いて認証用のデータを作成する。そして、認証処理部３２は、作成した認証用のデータと、認証データ格納部３３に格納されている各データとを対比し、前者が後者のいずれかと一致する場合は、認証を許可し、そうでない場合は、認証を不許可とする。その後、認証処理部３２は、認証の結果を、端末装置２０に送信する。 (4) The authentication processing unit 32 extracts a feature amount necessary for face authentication from the passed image data, and creates authentication data using the extracted feature amount. Then, the authentication processing unit 32 compares the created authentication data with the data stored in the authentication data storage unit 33, and if the former matches one of the latter, permits the authentication. If not, the authentication is not permitted. After that, the authentication processing unit 32 transmits the result of the authentication to the terminal device 20.
［システム動作］
　次に、本発明の実施の形態における顔認証システム１０の動作、即ち、端末装置２０及びサーバ装置３０の動作について図４及び図５を用いて説明する。以下の説明においては、適宜図１～図３を参酌する。また、本実施の形態では、顔認証システム１０を動作させることによって、顔認証方法が実施される。よって、本実施の形態における顔認証方法の説明は、以下の顔認証システム１０の動作説明に代える。 [System operation]
Next, the operation of the face authentication system 10 according to the embodiment of the present invention, that is, the operation of the terminal device 20 and the server device 30 will be described with reference to FIGS. In the following description, FIGS. 1 to 3 are appropriately referred to. In the present embodiment, the face authentication method is performed by operating the face authentication system 10. Therefore, the description of the face authentication method in the present embodiment is replaced with the following description of the operation of the face authentication system 10.
　まず、図４を用いて端末装置２０の動作について説明する。図４は、本発明の実施の形態における端末装置の動作を示すフロー図である。 First, the operation of the terminal device 20 will be described with reference to FIG. FIG. 4 is a flowchart showing an operation of the terminal device according to the embodiment of the present invention.
　まず、前提として、端末装置２０のユーザが認証の対象となっているとする。そして、ユーザが、自身の顔を、自身の端末装置２０の撮像部２５によって撮影すると、撮影された画像の画像データが、画像取得部２１に送られる。これにより、図４に示すように、画像取得部２１は、認証対象となる人の画像データを取得する（ステップＡ１）。また、画像取得部２１は、取得した画像データを画像処理部２２に渡す。 First, it is assumed that the user of the terminal device 20 is to be authenticated. Then, when the user shoots his / her own face with the imaging unit 25 of his / her own terminal device 20, the image data of the shot image is sent to the image acquisition unit 21. Thereby, as shown in FIG. 4, the image acquisition unit 21 acquires image data of a person to be authenticated (step A1). Further, the image acquisition unit 21 passes the acquired image data to the image processing unit 22.
　次に、画像処理部２２は、ステップＡ１で取得された画像データを受け取ると、この画像データから、ユーザの顔の領域を特定し（ステップＡ２）、更に、特定した領域から、眉、目、唇の位置を検出する（ステップＡ３）。 Next, upon receiving the image data acquired in step A1, the image processing unit 22 specifies an area of the user's face from the image data (step A2), and further, from the specified area, eyebrows, eyes, The position of the lips is detected (step A3).
　次に、画像処理部２２は、図３の上段に示すように、ステップＡ３で検出した位置に基づいて、ステップＡ２で特定された領域上に、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定する（ステップＡ４）。 Next, as shown in the upper part of FIG. 3, based on the position detected in step A3, the image processing unit 22 places a straight line passing through the upper ends of both eyebrows on the region specified in step A2, A straight line passing through the lower end, a straight line passing through the right end of the right eyebrow or the right end of the right eye, and a straight line passing through the left end of the left eyebrow or the left end of the left eye are set (step A4).
　次に、画像処理部２２は、ステップＡ２で特定された領域から、図３の中段に示すように、ステップＡ４で設定された４本の直線で囲まれた部分の画像を、顔の中央部分の画像として切り出す（ステップＡ５）。具体的には、画像処理部２２は、ステップＡ２で特定された領域の画像データから、４本の直線で囲まれた部分の画像データを抽出する。 Next, as shown in the middle part of FIG. 3, the image processing unit 22 converts the image of the part surrounded by the four straight lines set in step A4 from the area specified in step A2 into the central part of the face. (Step A5). Specifically, the image processing unit 22 extracts the image data of a portion surrounded by four straight lines from the image data of the area specified in step A2.
　次に、画像処理部２２は、ステップＡ５で切り出された画像に対して画像処理を実行する（ステップＡ６）。具体的には、画像処理部２２は、ステップＡ５で切り出された画像を、左目と右目との間の距離Ｄが目標距離となるように縮小し、更に、縮小後の画像を２値の画像に変換する。 Next, the image processing unit 22 performs image processing on the image cut out in step A5 (step A6). Specifically, the image processing unit 22 reduces the image cut out in step A5 so that the distance D between the left eye and the right eye becomes the target distance, and further reduces the reduced image to a binary image. Convert to
　次に、送信部２３は、ステップＡ６の画像処理が行われた画像（顔の中央部分の画像）の画像データをサーバ装置３０に送信する（ステップＡ７）。 Next, the transmission unit 23 transmits the image data of the image (the image of the central part of the face) on which the image processing of step A6 has been performed to the server device 30 (step A7).
　その後、端末装置２０は、サーバ装置３０から認証結果が送信されてくると、認証結果を、端末装置２０に備えられた画面上に表示する（ステップＡ８）。 After that, when the authentication result is transmitted from the server device 30, the terminal device 20 displays the authentication result on a screen provided in the terminal device 20 (step A8).
　続いて、図５を用いてサーバ装置３０の動作について説明する。図５は、本発明の実施の形態におけるサーバ装置の動作を示すフロー図である。 Next, the operation of the server device 30 will be described with reference to FIG. FIG. 5 is a flowchart showing the operation of the server device according to the embodiment of the present invention.
　図５に示すように、サーバ装置３０において、受信部３１は、上述の図４に示すステップＡ７が実行されて、認証対象となるユーザの顔の中央部分の画像データが送信されてくると、これを受信する（ステップＢ１）。 As illustrated in FIG. 5, in the server device 30, when the receiving unit 31 performs the above-described step A <b> 7 illustrated in FIG. 4 and transmits the image data of the central portion of the face of the user to be authenticated, This is received (step B1).
　次に、認証処理部３２は、ステップＢ１で受信された画像データを用いて、認証処理を実行する（ステップＢ２）。具体的には、認証処理部３２は、画像データから、顔認証に必要となる特徴量を抽出し、抽出した特徴量を用いて認証用のデータを作成する。そして、認証処理部３２は、作成した認証用のデータと、認証データ格納部３３に格納されている各データとを対比し、前者が後者のいずれかと一致する場合は、認証を許可し、そうでない場合は、認証を不許可とする。 Next, the authentication processing unit 32 performs an authentication process using the image data received in step B1 (step B2). Specifically, the authentication processing unit 32 extracts a feature amount necessary for face authentication from the image data, and creates authentication data using the extracted feature amount. Then, the authentication processing unit 32 compares the created authentication data with the data stored in the authentication data storage unit 33, and if the former matches one of the latter, permits the authentication. If not, the authentication is not permitted.
　次に、サーバ装置３０は、ステップＢ２の認証処理の結果を、画像データを送信してきた端末装置２０に送信する（ステップＢ３）。ステップＢ３の実行後、端末装置２０では、上述した図４に示したステップＡ８が実行される。 Next, the server device 30 transmits the result of the authentication processing in step B2 to the terminal device 20 that has transmitted the image data (step B3). After the execution of step B3, the terminal device 20 executes the above-described step A8 shown in FIG.
［実施の形態の効果］
　以上のように、本実施の形態では、端末装置２０は、認証処理を実行可能な必要最小限の画像データを送信するだけで良く、認証処理を実行する必要がない。認証処理は、端末装置２０よりも処理能力の高いサーバ装置３０によって行われる。このため、本実施の形態によれば、端末装置２０における負荷の軽減、顔認証にかかる時間の短縮化、及びセキュリティ性の向上が図られる。 [Effects of Embodiment]
As described above, in the present embodiment, the terminal device 20 only needs to transmit the minimum necessary image data that can execute the authentication process, and does not need to execute the authentication process. The authentication process is performed by the server device 30 having a higher processing capability than the terminal device 20. Therefore, according to the present embodiment, the load on terminal device 20 can be reduced, the time required for face authentication can be reduced, and the security can be improved.
［プログラム］
　本実施の形態における第１のプログラムは、コンピュータに、図４に示すステップＡ１～Ａ８を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態における端末装置２０を実現することができる。この場合、コンピュータのプロセッサは、画像取得部２１、画像処理部２２、及び送信部２３として機能し、処理を行なう。 [program]
The first program in the present embodiment may be any program that causes a computer to execute steps A1 to A8 shown in FIG. The terminal device 20 according to the present embodiment can be realized by installing and executing this program on a computer. In this case, the processor of the computer functions as the image acquisition unit 21, the image processing unit 22, and the transmission unit 23 and performs processing.
　また、本実施の形態における第２のプログラムは、コンピュータに、図５に示すステップＢ１～Ｂ３を実行させるプログラムであれば良い。このプログラムをコンピュータにインストールし、実行することによって、本実施の形態におけるサーバ装置３０を実現することができる。この場合、コンピュータのプロセッサは、受信部３１及び認証処理部３２として機能し、処理を行なう。また、認証データ格納部３３は、コンピュータに備えられたハードディスク等の記憶装置に、認証データを格納することによって実現されている。 The second program in the present embodiment may be any program that causes a computer to execute steps B1 to B3 shown in FIG. By installing and executing this program on a computer, server device 30 in the present embodiment can be realized. In this case, the processor of the computer functions as the receiving unit 31 and the authentication processing unit 32 and performs processing. The authentication data storage unit 33 is realized by storing the authentication data in a storage device such as a hard disk provided in the computer.
　また、本実施の形態における第２のプログラムは、複数のコンピュータによって構築されたコンピュータシステムによって実行されても良い。この場合は、例えば、各コンピュータが、それぞれ、受信部３１及び認証処理部３２のいずれかとして機能しても良い。認証データ格納部３３は第２のプログラムを実行するコンピュータとは別のコンピュータ上に構築されていても良い。 The second program according to the present embodiment may be executed by a computer system configured by a plurality of computers. In this case, for example, each computer may function as one of the receiving unit 31 and the authentication processing unit 32. The authentication data storage unit 33 may be constructed on a computer different from the computer that executes the second program.
　ここで、本実施の形態における第１のプログラムを実行することによって端末装置２０を実現するコンピュータと、第２のプログラムを実行することによってサーバ装置３０を実現するコンピュータとについて図６を用いて説明する。図６は、本発明の実施の形態における端末装置及びサーバ装置を実現可能なコンピュータの一例を示すブロック図である。 Here, a computer that implements the terminal device 20 by executing the first program and a computer that implements the server device 30 by executing the second program according to the present embodiment will be described with reference to FIG. I do. FIG. 6 is a block diagram illustrating an example of a computer that can implement the terminal device and the server device according to the embodiment of the present invention.
　図６に示すように、コンピュータ１１０は、ＣＰＵ１１１と、メインメモリ１１２と、記憶装置１１３と、入力インターフェイス１１４と、表示コントローラ１１５と、データリーダ／ライタ１１６と、通信インターフェイス１１７とを備える。これらの各部は、バス１２１を介して、互いにデータ通信可能に接続される。なお、コンピュータ１１０は、ＣＰＵ１１１に加えて、又はＣＰＵ１１１に代えて、ＧＰＵ（Graphics Processing Unit）、又はＦＰＧＡ（Field-Programmable Gate Array）を備えていても良い。 As shown in FIG. 6, the computer 110 includes a CPU 111, a main memory 112, a storage device 113, an input interface 114, a display controller 115, a data reader / writer 116, and a communication interface 117. These units are connected via a bus 121 so as to be able to perform data communication with each other. Note that the computer 110 may include a GPU (Graphics Processing Unit) or an FPGA (Field-Programmable Gate Array) in addition to or instead of the CPU 111.
　ＣＰＵ１１１は、記憶装置１１３に格納された、本実施の形態におけるプログラム（コード）をメインメモリ１１２に展開し、これらを所定順序で実行することにより、各種の演算を実施する。メインメモリ１１２は、典型的には、ＤＲＡＭ（Dynamic Random Access Memory）等の揮発性の記憶装置である。また、本実施の形態におけるプログラムは、コンピュータ読み取り可能な記録媒体１２０に格納された状態で提供される。なお、本実施の形態におけるプログラムは、通信インターフェイス１１７を介して接続されたインターネット上で流通するものであっても良い。 The CPU 111 performs various operations by expanding the program (code) according to the present embodiment stored in the storage device 113 into the main memory 112 and executing them in a predetermined order. The main memory 112 is typically a volatile storage device such as a DRAM (Dynamic Random Access Memory). Further, the program according to the present embodiment is provided in a state stored in a computer-readable recording medium 120. The program according to the present embodiment may be distributed on the Internet connected via the communication interface 117.
　また、記憶装置１１３の具体例としては、ハードディスクドライブの他、フラッシュメモリ等の半導体記憶装置が挙げられる。入力インターフェイス１１４は、ＣＰＵ１１１と、キーボード及びマウスといった入力機器１１８との間のデータ伝送を仲介する。表示コントローラ１１５は、ディスプレイ装置１１９と接続され、ディスプレイ装置１１９での表示を制御する。 具体 Specific examples of the storage device 113 include a semiconductor storage device such as a flash memory in addition to a hard disk drive. The input interface 114 mediates data transmission between the CPU 111 and an input device 118 such as a keyboard and a mouse. The display controller 115 is connected to the display device 119 and controls display on the display device 119.
　データリーダ／ライタ１１６は、ＣＰＵ１１１と記録媒体１２０との間のデータ伝送を仲介し、記録媒体１２０からのプログラムの読み出し、及びコンピュータ１１０における処理結果の記録媒体１２０への書き込みを実行する。通信インターフェイス１１７は、ＣＰＵ１１１と、他のコンピュータとの間のデータ伝送を仲介する。 The data reader / writer 116 mediates data transmission between the CPU 111 and the recording medium 120, reads out a program from the recording medium 120, and writes a processing result in the computer 110 to the recording medium 120. The communication interface 117 mediates data transmission between the CPU 111 and another computer.
　また、記録媒体１２０の具体例としては、ＣＦ（Compact Flash（登録商標））及びＳＤ（Secure Digital）等の汎用的な半導体記憶デバイス、フレキシブルディスク（Flexible Disk）等の磁気記録媒体、又はＣＤ－ＲＯＭ（Compact Disk Read Only Memory）などの光学記録媒体が挙げられる。 Specific examples of the recording medium 120 include a general-purpose semiconductor storage device such as CF (Compact Flash) and SD (Secure Digital), a magnetic recording medium such as a flexible disk, or a CD-ROM. An optical recording medium such as a ROM (Compact Disk Read Only Memory) may be used.
　なお、本実施の形態における端末装置２０及びサーバ装置３０は、プログラムがインストールされたコンピュータではなく、各部に対応したハードウェアを用いることによっても実現可能である。更に端末装置２０及びサーバ装置３０は、一部がプログラムで実現され、残りの部分がハードウェアで実現されていてもよい。 Note that the terminal device 20 and the server device 30 in the present embodiment can also be realized by using hardware corresponding to each unit instead of a computer in which a program is installed. Furthermore, part of the terminal device 20 and the server device 30 may be realized by a program, and the remaining part may be realized by hardware.
　上述した実施の形態の一部又は全部は、以下に記載する（付記１）～（付記１６）によって表現することができるが、以下の記載に限定されるものではない。 一部 Some or all of the above-described embodiments can be expressed by the following (Appendix 1) to (Appendix 16), but are not limited to the following description.
（付記１）
　端末装置と、顔認証用のサーバ装置とを備え、
　前記端末装置は、
認証対象となる人の画像を取得する、画像取得部と、
取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
前記顔の中央部分の画像を、前記サーバ装置に送信する、送信部と、を備え、
　前記サーバ装置は、
送信されてきた前記顔の中央部分の画像を受信する、受信部と、
受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、認証処理部と、を備えている、
ことを特徴とする顔認証システム。 (Appendix 1)
A terminal device and a server device for face authentication,
The terminal device,
An image acquisition unit that acquires an image of a person to be authenticated,
An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
A transmitting unit for transmitting an image of the central part of the face to the server device,
The server device,
A receiving unit that receives the transmitted image of the central part of the face,
Performing an authentication process based on the received image of the central portion of the face, comprising: an authentication processing unit.
A face authentication system characterized by the following.
（付記２）
付記１に記載の顔認証システムであって、
　前記画像処理部が、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
ことを特徴とする顔認証システム。 (Appendix 2)
The face authentication system according to claim 1, wherein
The image processing unit, in the identified face region, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower end of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, and the left end of the left eyebrow or A straight line passing through the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
A face authentication system characterized by the following.
（付記３）
付記１または２に記載の顔認証システムであって、
　前記画像処理部が、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
　前記送信部が、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする顔認証システム。 (Appendix 3)
The face authentication system according to claim 1 or 2, wherein
The image processing unit reduces the cut-out image of the central portion of the face so that the distance between the left eye and the right eye is a set distance,
The transmitting unit transmits an image of the central portion of the face after reduction to the server device.
A face authentication system characterized by the following.
（付記４）
付記１～３のいずれかに記載の顔認証システムであって、
　前記画像処理部が、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
　前記送信部が、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする顔認証システム。 (Appendix 4)
The face authentication system according to any one of supplementary notes 1 to 3, wherein
The image processing unit performs image conversion such that the image of the central part of the face is a binary image,
The transmitting unit transmits an image of a central portion of the face converted into a binary image to the server device;
A face authentication system characterized by the following.
（付記５）
　顔認証用のサーバ装置との間でデータ通信を行う端末装置であって、
　認証対象となる人の画像を取得する、画像取得部と、
　取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
　前記顔の中央部分の画像を、前記サーバ装置での顔認証のために、前記サーバ装置に送信する、送信部と、を備えている、
ことを特徴とする端末装置。 (Appendix 5)
A terminal device for performing data communication with a server device for face authentication,
An image acquisition unit that acquires an image of a person to be authenticated,
An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
An image of a central portion of the face, for transmitting the face to the server device for face authentication in the server device, comprising: a transmission unit,
A terminal device characterized by the above-mentioned.
（付記６）
付記５に記載の端末装置であって、
　前記画像処理部が、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
ことを特徴とする端末装置。 (Appendix 6)
The terminal device according to Supplementary Note 5, wherein
The image processing unit, in the identified face region, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower end of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, and the left end of the left eyebrow or A straight line passing through the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
A terminal device characterized by the above-mentioned.
（付記７）
付記５または６に記載の端末装置であって、
　前記画像処理部が、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
　前記送信部が、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする端末装置。 (Appendix 7)
The terminal device according to Supplementary Note 5 or 6, wherein
The image processing unit reduces the cut-out image of the central portion of the face so that the distance between the left eye and the right eye is a set distance,
The transmitting unit transmits an image of the central portion of the face after reduction to the server device.
A terminal device characterized by the above-mentioned.
（付記８）
付記５～７のいずれかに記載の端末装置であって、
　前記画像処理部が、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
　前記送信部が、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする端末装置。 (Appendix 8)
The terminal device according to any one of supplementary notes 5 to 7, wherein
The image processing unit performs image conversion such that the image of the central part of the face is a binary image,
The transmitting unit transmits an image of a central portion of the face converted into a binary image to the server device;
A terminal device characterized by the above-mentioned.
（付記９）
　端末装置と、顔認証用のサーバ装置とを用いた、顔認証方法であって、
（ａ）前記端末装置によって、認証対象となる人の画像を取得する、ステップと、
（ｂ）前記端末装置によって、取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
（ｃ）前記端末装置によって、前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
（ｄ）前記サーバ装置によって、送信されてきた前記顔の中央部分の画像を受信する、ステップと、
（ｅ）前記サーバ装置によって、受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、ステップと、
を有する、ことを特徴とする顔認証方法。 (Appendix 9)
A face authentication method using a terminal device and a server device for face authentication,
(A) obtaining, by the terminal device, an image of a person to be authenticated;
(B) The terminal device specifies an area of the face of the person to be authenticated from the acquired image, and determines, from the specified face area, a central portion of the face in a range narrower than the contour of the face. Step out of the image,
(C) transmitting, by the terminal device, an image of a central portion of the face to the server device;
(D) receiving, by the server device, the transmitted image of the central portion of the face;
(E) executing face authentication processing by the server device based on the received image of the central portion of the face;
A face authentication method, comprising:
（付記１０）
付記９に記載の顔認証方法であって、
　前記（ｂ）のステップにおいて、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
ことを特徴とする顔認証方法。 (Appendix 10)
A face authentication method according to attachment 9, wherein
In the step (b), in the specified face area, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower ends of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, A straight line passing through the left end or the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
A face authentication method characterized in that:
（付記１１）
付記９または１０に記載の顔認証方法であって、
　前記（ｂ）のステップにおいて、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
　前記（ｃ）のステップにおいて、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする顔認証方法。 (Appendix 11)
A face authentication method according to attachment 9 or 10, wherein
In the step (b), the cut-out image of the central part of the face is reduced so that the distance between the left eye and the right eye becomes a set distance,
In the step (c), transmitting the image of the central portion of the face after reduction to the server device;
A face authentication method characterized in that:
（付記１２）
付記９～１１のいずれかに記載の顔認証方法であって、
　前記（ｂ）のステップにおいて、更に、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
　前記（ｃ）のステップにおいて、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とする顔認証方法。 (Appendix 12)
A face authentication method according to any one of supplementary notes 9 to 11, wherein
In the step (b), image conversion is further performed so that the image of the central part of the face becomes a binary image.
Transmitting the image of the central part of the face converted into a binary image to the server device in the step (c);
A face authentication method characterized in that:
（付記１３）
　コンピュータによって、顔認証用のサーバ装置との間でデータ通信を行うためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
前記コンピュータに、
（ａ）認証対象となる人の画像を取得する、ステップと、
（ｂ）取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
（ｃ）前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
を実行させる命令を含む、プログラムを記録したコンピュータ読み取り可能な記録媒体。 (Appendix 13)
A computer-readable recording medium recording a program for performing data communication with a server device for face authentication by a computer,
To the computer,
(A) obtaining an image of a person to be authenticated;
(B) identifying an area of the face of the person to be authenticated from the acquired image, and cutting out an image of a central portion of the face in a range narrower than the outline of the face from the identified area of the face; When,
(C) transmitting an image of the central portion of the face to the server device;
A computer-readable recording medium on which a program is recorded, the program including instructions for executing the program.
（付記１４）
付記１３に記載のコンピュータ読み取り可能な記録媒体であって、
　前記（ｂ）のステップにおいて、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
ことを特徴とするコンピュータ読み取り可能な記録媒体。 (Appendix 14)
A computer-readable recording medium according to supplementary note 13, wherein:
In the step (b), in the specified face area, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower ends of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, A straight line passing through the left end or the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
A computer-readable recording medium characterized by the above-mentioned.
（付記１５）
付記１３または１４に記載のコンピュータ読み取り可能な記録媒体であって、
　前記（ｂ）のステップにおいて、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
　前記（ｃ）のステップにおいて、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とするコンピュータ読み取り可能な記録媒体。 (Appendix 15)
A computer-readable recording medium according to claim 13 or 14, wherein
In the step (b), the cut-out image of the central part of the face is reduced so that the distance between the left eye and the right eye becomes a set distance,
In the step (c), transmitting the image of the central portion of the face after reduction to the server device;
A computer-readable recording medium characterized by the above-mentioned.
（付記１６）
付記１３～１５のいずれかに記載のコンピュータ読み取り可能な記録媒体であって、
　前記（ｂ）のステップにおいて、更に、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
　前記（ｃ）のステップにおいて、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
ことを特徴とするコンピュータ読み取り可能な記録媒体。 (Appendix 16)
A computer-readable recording medium according to any one of supplementary notes 13 to 15, wherein
In the step (b), image conversion is further performed so that the image of the central part of the face becomes a binary image.
Transmitting the image of the central part of the face converted into a binary image to the server device in the step (c);
A computer-readable recording medium characterized by the above-mentioned.
　以上、実施の形態を参照して本願発明を説明したが、本願発明は上記実施の形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。 Although the present invention has been described with reference to the exemplary embodiments, the present invention is not limited to the above exemplary embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
　この出願は、２０１８年６月１８日に出願された日本出願特願２０１８－１１５５２６を基礎とする優先権を主張し、その開示の全てをここに取り込む。 This application claims priority based on Japanese Patent Application No. 2018-115526 filed on June 18, 2018, the disclosure of which is incorporated herein in its entirety.
　以上のように、本発明によれば、顔認証において、端末装置における負荷の軽減、顔認証にかかる時間の短縮化、及びセキュリティ性の向上を図ることができる。本発明は、顔認証を採用する各種システムに有用である。 As described above, according to the present invention, in face authentication, the load on the terminal device can be reduced, the time required for face authentication can be reduced, and the security can be improved. The present invention is useful for various systems employing face authentication.
　１０　顔認証システム
　２０　端末装置
　２１　画像取得部
　２２　画像処理部
　２３　送信部
　２４　オペレーティングシステム
　２５　撮像部
　３０　顔認証用のサーバ装置
　３１　受信部
　３２　認証処理部
　３３　認証データ格納部
　４０　ネットワーク
　１１０　コンピュータ
　１１１　ＣＰＵ
　１１２　メインメモリ
　１１３　記憶装置
　１１４　入力インターフェイス
　１１５　表示コントローラ
　１１６　データリーダ／ライタ
　１１７　通信インターフェイス
　１１８　入力機器
　１１９　ディスプレイ装置
　１２０　記録媒体
　１２１　バス Reference Signs List 10 face authentication system 20 terminal device 21 image acquisition unit 22 image processing unit 23 transmission unit 24 operating system 25 imaging unit 30 face authentication server device 31 reception unit 32 authentication processing unit 33 authentication data storage unit 40 network 110 computer 111 CPU
112 Main memory 113 Storage device 114 Input interface 115 Display controller 116 Data reader / writer 117 Communication interface 118 Input device 119 Display device 120 Recording medium 121 Bus

Claims (16)

  1. 　端末装置と、顔認証用のサーバ装置とを備え、
    　前記端末装置は、
    認証対象となる人の画像を取得する、画像取得部と、
    取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
    前記顔の中央部分の画像を、前記サーバ装置に送信する、送信部と、を備え、
    　前記サーバ装置は、
    送信されてきた前記顔の中央部分の画像を受信する、受信部と、
    受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、認証処理部と、を備えている、
    ことを特徴とする顔認証システム。     A terminal device and a server device for face authentication,
    The terminal device,
    An image acquisition unit that acquires an image of a person to be authenticated,
    An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
    A transmitting unit for transmitting an image of the central part of the face to the server device,
    The server device,
    A receiving unit that receives the transmitted image of the central part of the face,
    Performing an authentication process based on the received image of the central portion of the face, comprising: an authentication processing unit.
    A face authentication system characterized by the following.
  2. 請求項１に記載の顔認証システムであって、
    　前記画像処理部が、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
    ことを特徴とする顔認証システム。     The face authentication system according to claim 1, wherein
    The image processing unit, in the identified face region, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower end of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, and the left end of the left eyebrow or A straight line passing through the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
    A face authentication system characterized by the following.
  3. 請求項１または２に記載の顔認証システムであって、
    　前記画像処理部が、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
    　前記送信部が、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする顔認証システム。     The face authentication system according to claim 1 or 2,
    The image processing unit reduces the cut-out image of the central portion of the face so that the distance between the left eye and the right eye is a set distance,
    The transmitting unit transmits an image of the central portion of the face after reduction to the server device.
    A face authentication system characterized by the following.
  4. 請求項１～３のいずれかに記載の顔認証システムであって、
    　前記画像処理部が、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
    　前記送信部が、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする顔認証システム。     The face authentication system according to any one of claims 1 to 3,
    The image processing unit performs image conversion such that the image of the central part of the face is a binary image,
    The transmitting unit transmits an image of a central portion of the face converted into a binary image to the server device;
    A face authentication system characterized by the following.
  5. 　顔認証用のサーバ装置との間でデータ通信を行う端末装置であって、
    　認証対象となる人の画像を取得する、画像取得部と、
    　取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、画像処理部と、
    　前記顔の中央部分の画像を、前記サーバ装置での顔認証のために、前記サーバ装置に送信する、送信部と、を備えている、
    ことを特徴とする端末装置。     A terminal device for performing data communication with a server device for face authentication,
    An image acquisition unit that acquires an image of a person to be authenticated,
    An image processing unit that specifies an area of the face of the person to be authenticated from the obtained image, and cuts out an image of a central portion of the face in a range narrower than the outline of the face from the specified area of the face; ,
    An image of a central portion of the face, for transmitting the face to the server device for face authentication in the server device, comprising: a transmission unit,
    A terminal device characterized by the above-mentioned.
  6. 請求項５に記載の端末装置であって、
    　前記画像処理部が、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
    ことを特徴とする端末装置。     The terminal device according to claim 5, wherein
    The image processing unit, in the identified face region, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower end of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, and the left end of the left eyebrow or A straight line passing through the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
    A terminal device characterized by the above-mentioned.
  7. 請求項５または６に記載の端末装置であって、
    　前記画像処理部が、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
    　前記送信部が、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする端末装置。     The terminal device according to claim 5, wherein:
    The image processing unit reduces the cut-out image of the central portion of the face so that the distance between the left eye and the right eye is a set distance,
    The transmitting unit transmits an image of the central portion of the face after reduction to the server device.
    A terminal device characterized by the above-mentioned.
  8. 請求項５～７のいずれかに記載の端末装置であって、
    　前記画像処理部が、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
    　前記送信部が、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする端末装置。     The terminal device according to any one of claims 5 to 7,
    The image processing unit performs image conversion such that the image of the central part of the face is a binary image,
    The transmitting unit transmits an image of a central portion of the face converted into a binary image to the server device;
    A terminal device characterized by the above-mentioned.
  9. 　端末装置と、顔認証用のサーバ装置とを用いた、顔認証方法であって、
    （ａ）前記端末装置によって、認証対象となる人の画像を取得する、ステップと、
    （ｂ）前記端末装置によって、取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
    （ｃ）前記端末装置によって、前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
    （ｄ）前記サーバ装置によって、送信されてきた前記顔の中央部分の画像を受信する、ステップと、
    （ｅ）前記サーバ装置によって、受信した前記顔の中央部分の画像に基づいて、顔認証処理を実行する、ステップと、
    を有する、ことを特徴とする顔認証方法。     A face authentication method using a terminal device and a server device for face authentication,
    (A) obtaining, by the terminal device, an image of a person to be authenticated;
    (B) The terminal device specifies an area of the face of the person to be authenticated from the acquired image, and determines, from the specified face area, a central portion of the face in a range narrower than the contour of the face. Step out of the image,
    (C) transmitting, by the terminal device, an image of a central portion of the face to the server device;
    (D) receiving, by the server device, the transmitted image of the central portion of the face;
    (E) executing face authentication processing by the server device based on the received image of the central portion of the face;
    A face authentication method, comprising:
  10. 請求項９に記載の顔認証方法であって、
    　前記（ｂ）のステップにおいて、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
    ことを特徴とする顔認証方法。     The face authentication method according to claim 9, wherein
    In the step (b), in the specified face area, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower ends of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, A straight line passing through the left end or the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
    A face authentication method characterized in that:
  11. 請求項９または１０に記載の顔認証方法であって、
    　前記（ｂ）のステップにおいて、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
    　前記（ｃ）のステップにおいて、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする顔認証方法。     The face authentication method according to claim 9 or 10, wherein
    In the step (b), the cut-out image of the central part of the face is reduced so that the distance between the left eye and the right eye becomes a set distance,
    In the step (c), transmitting the image of the central portion of the face after reduction to the server device;
    A face authentication method characterized in that:
  12. 請求項９～１１のいずれかに記載の顔認証方法であって、
    　前記（ｂ）のステップにおいて、更に、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
    　前記（ｃ）のステップにおいて、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とする顔認証方法。     The face authentication method according to any one of claims 9 to 11, wherein
    In the step (b), image conversion is further performed so that the image of the central part of the face becomes a binary image.
    Transmitting the image of the central part of the face converted into a binary image to the server device in the step (c);
    A face authentication method characterized in that:
  13. 　コンピュータによって、顔認証用のサーバ装置との間でデータ通信を行うためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
    前記コンピュータに、
    （ａ）認証対象となる人の画像を取得する、ステップと、
    （ｂ）取得された画像から、前記認証対象となる人の顔の領域を特定し、特定した前記顔の領域から、前記顔の輪郭よりも狭い範囲の顔の中央部分の画像を切り出す、ステップと、
    （ｃ）前記顔の中央部分の画像を、前記サーバ装置に送信する、ステップと、
    を実行させる命令を含む、プログラムを記録しているコンピュータ読み取り可能な記録媒体。     A computer-readable recording medium recording a program for performing data communication with a server device for face authentication by a computer,
    To the computer,
    (A) obtaining an image of a person to be authenticated;
    (B) identifying an area of the face of the person to be authenticated from the acquired image, and cutting out an image of a central portion of the face in a range narrower than the outline of the face from the identified area of the face; When,
    (C) transmitting an image of the central portion of the face to the server device;
    And a computer-readable recording medium storing a program including instructions for executing the program.
  14. 請求項１３に記載のコンピュータ読み取り可能な記録媒体であって、
    　前記（ｂ）のステップにおいて、特定した前記顔の領域において、両方の眉の上端を通る直線と、唇の下端を通る直線と、右眉の右端又は右目の右端を通る直線と、左眉の左端又は左目の左端を通る直線とを設定し、前記顔の中央部分の画像として、これら４つの直線で囲まれた部分の画像を切り出す、
    ことを特徴とするコンピュータ読み取り可能な記録媒体。     A computer-readable recording medium according to claim 13,
    In the step (b), in the specified face area, a straight line passing through the upper ends of both eyebrows, a straight line passing through the lower ends of the lips, a straight line passing through the right end of the right eyebrow or the right end of the right eye, A straight line passing through the left end or the left end of the left eye is set, and an image of a portion surrounded by these four straight lines is cut out as an image of the central portion of the face,
    A computer-readable recording medium characterized by the above-mentioned.
  15. 請求項１３または１４に記載のコンピュータ読み取り可能な記録媒体であって、
    　前記（ｂ）のステップにおいて、切り出された前記顔の中央部分の画像を、左目と右目との間の距離が設定された距離となるように縮小し、
    　前記（ｃ）のステップにおいて、縮小後の前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とするコンピュータ読み取り可能な記録媒体。     A computer-readable recording medium according to claim 13 or claim 14,
    In the step (b), the cut-out image of the central part of the face is reduced so that the distance between the left eye and the right eye becomes a set distance,
    In the step (c), transmitting the image of the central portion of the face after reduction to the server device;
    A computer-readable recording medium characterized by the above-mentioned.
  16. 請求項１３～１５のいずれかに記載のコンピュータ読み取り可能な記録媒体であって、
    　前記（ｂ）のステップにおいて、更に、前記顔の中央部分の画像が２値の画像となるように画像変換を実行し、
    　前記（ｃ）のステップにおいて、２値の画像に変換された前記顔の中央部分の画像を、前記サーバ装置に送信する、
    ことを特徴とするコンピュータ読み取り可能な記録媒体。     A computer-readable recording medium according to any one of claims 13 to 15, wherein
    In the step (b), image conversion is further performed so that the image of the central part of the face becomes a binary image.
    Transmitting the image of the central part of the face converted into a binary image to the server device in the step (c);
    A computer-readable recording medium characterized by the above-mentioned.
PCT/JP2019/022642 2018-06-18 2019-06-06 Facial authentication system, terminal device, facial authentication method, and computer-readable recording medium WO2019244663A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020525510A JPWO2019244663A1 (en) 2018-06-18 2019-06-06 Face recognition system, terminal device, face recognition method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018115526 2018-06-18
JP2018-115526 2018-06-18

Publications (1)

Publication Number Publication Date
WO2019244663A1 true WO2019244663A1 (en) 2019-12-26

Family

ID=68983977

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/022642 WO2019244663A1 (en) 2018-06-18 2019-06-06 Facial authentication system, terminal device, facial authentication method, and computer-readable recording medium

Country Status (2)

Country Link
JP (1) JPWO2019244663A1 (en)
WO (1) WO2019244663A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005285102A (en) * 2004-03-05 2005-10-13 Jgs:Kk Device for computing personal specific information, personal identification apparatus, automatic transaction apparatus, and program
JP2006031387A (en) * 2004-07-15 2006-02-02 Yamaha Motor Co Ltd Image recognition device, image recognition method, image recognition program, and recording medium to which the image recognition program is recorded
JP2006221282A (en) * 2005-02-08 2006-08-24 Kashiko Kodate Face authentication device and system
JP2014074972A (en) * 2012-10-03 2014-04-24 Hitachi Ltd Personal authentication supporting system with face image
JP2014174707A (en) * 2013-03-08 2014-09-22 Synchro Co Ltd Card settlement system employing biometric authentication terminal and authentication/card number providing center server

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005285102A (en) * 2004-03-05 2005-10-13 Jgs:Kk Device for computing personal specific information, personal identification apparatus, automatic transaction apparatus, and program
JP2006031387A (en) * 2004-07-15 2006-02-02 Yamaha Motor Co Ltd Image recognition device, image recognition method, image recognition program, and recording medium to which the image recognition program is recorded
JP2006221282A (en) * 2005-02-08 2006-08-24 Kashiko Kodate Face authentication device and system
JP2014074972A (en) * 2012-10-03 2014-04-24 Hitachi Ltd Personal authentication supporting system with face image
JP2014174707A (en) * 2013-03-08 2014-09-22 Synchro Co Ltd Card settlement system employing biometric authentication terminal and authentication/card number providing center server

Also Published As

Publication number Publication date
JPWO2019244663A1 (en) 2021-06-24

Similar Documents

Publication Publication Date Title
JP6756037B2 (en) User identity verification methods, devices and systems
KR102299847B1 (en) Face verifying method and apparatus
US10439818B2 (en) Captcha image generation method and apparatus, and server
CN108804884B (en) Identity authentication method, identity authentication device and computer storage medium
US11444774B2 (en) Method and system for biometric verification
US10482325B2 (en) User authentication method and electronic device supporting the same
CN110995994B (en) Image shooting method and related device
US11263441B1 (en) Systems and methods for passive-subject liveness verification in digital media
CN111783146B (en) Image processing method and device based on privacy protection and electronic equipment
KR20190053602A (en) Face verifying method and apparatus
US11373449B1 (en) Systems and methods for passive-subject liveness verification in digital media
US10929961B2 (en) Electronic device and method for correcting images using external electronic device
JP2015115079A (en) Method and apparatus for input verification
KR102404763B1 (en) Method and system for personal identification using homomorphic encryption
US10504289B2 (en) Method and apparatus for securely displaying private information using an augmented reality headset
CN114612986A (en) Detection method, detection device, electronic equipment and storage medium
US10805501B2 (en) Converting biometric data into two-dimensional images for use in authentication processes
JP6354253B2 (en) Image processing apparatus, image processing system, image processing method, and image processing program
US20160094547A1 (en) Image capture challenge access
US11704395B2 (en) Methods for augmented reality data decryption and devices thereof
WO2019244663A1 (en) Facial authentication system, terminal device, facial authentication method, and computer-readable recording medium
KR102380426B1 (en) Method and apparatus for verifying face
US11810399B2 (en) Information processing device, information processing method, and program
JP2018151782A (en) Image processing device, image processing system and control method
WO2019026722A1 (en) Image processing device and control program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19822636

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020525510

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19822636

Country of ref document: EP

Kind code of ref document: A1