WO2023139786A1 - 認証装置、システム、方法、及びコンピュータ可読媒体 - Google Patents

認証装置、システム、方法、及びコンピュータ可読媒体 Download PDF

Info

Publication number
WO2023139786A1
WO2023139786A1 PCT/JP2022/002418 JP2022002418W WO2023139786A1 WO 2023139786 A1 WO2023139786 A1 WO 2023139786A1 JP 2022002418 W JP2022002418 W JP 2022002418W WO 2023139786 A1 WO2023139786 A1 WO 2023139786A1
Authority
WO
WIPO (PCT)
Prior art keywords
authentication
image
face
authenticated
person
Prior art date
Application number
PCT/JP2022/002418
Other languages
English (en)
French (fr)
Inventor
雄太 清水
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to PCT/JP2022/002418 priority Critical patent/WO2023139786A1/ja
Publication of WO2023139786A1 publication Critical patent/WO2023139786A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Definitions

  • the present disclosure relates to authentication devices, systems, methods, and computer-readable media.
  • Patent Document 1 discloses an authentication device.
  • the authentication device described in Patent Literature 1 acquires a plurality of consecutive images in time series, in which a subject is captured, from an imaging device.
  • the authentication device compares each of the plurality of images with the registered image and determines whether each image matches the registered image. If the number of consecutive determinations of matching is equal to or greater than the set number, the authentication device registers the images that were not determined to match in association with the registered image.
  • the photographing device continuously photographs a certain person A, and continuously acquires face image data of the person A in chronological order.
  • the authentication device acquires face image data of N persons A from the imaging device, where N is an arbitrary natural number.
  • the authentication device collates each of the N pieces of face image data with the person A's master (registered image).
  • the authentication device authenticates that the photographed person is the person A when the feature of each face image data from N-2 to N consecutive in time series matches the feature of the master of the person A.
  • the authentication device calculates the match rate between each face image data before N-3 and the face image data of N-2.
  • the authentication device additionally registers, in the master of person A, face image data whose matching rate is equal to or higher than a threshold among the face image data for which authentication has failed.
  • the authentication device additionally registers, in the registered image, face image data that has a high match rate with successfully authenticated face image data among face image data that has failed authentication.
  • the probability of authentication failure can be reduced and the authentication rate can be improved.
  • a plurality of registered images are constantly used for each person to be authenticated. For this reason, the number of verification processes in authentication increases, and the time required for authentication increases.
  • the present disclosure aims to provide an authentication device, system, method, and computer-readable medium capable of reducing the probability of authentication failure without increasing the number of verifications.
  • the present disclosure provides an authentication device as a first aspect.
  • the authentication device includes face image acquisition means for acquiring a face image of the person to be authenticated from a photographed image acquired by an imaging device that photographs the person to be authenticated, and authentication means for performing a first authentication for comparing the acquired face image of the person to be authenticated or a feature amount extracted from the face image with a registered image of the person to be authenticated or a feature amount extracted from the registered image.
  • the authentication means stores the face image of the person to be authenticated or the feature amount extracted from the face image in the face information storage unit as face information of the successfully authenticated person.
  • the authenticating means performs second authentication including comparing the face image of the person to be authenticated or the feature amount extracted from the face image with the successfully authenticated face information stored in the face information storage unit.
  • An authentication system includes an imaging device that captures an image of a person to be authenticated, and an authentication device that acquires a captured image from the imaging device and authenticates the person to be authenticated.
  • the authentication device includes face image acquisition means for acquiring the face image of the person to be authenticated from the captured image, and authentication means for performing a first authentication for comparing the acquired face image of the person to be authenticated or a feature quantity extracted from the face image with a registered image of the registrant or a feature quantity extracted from the registered image.
  • the authentication means stores the face image of the person to be authenticated or the feature amount extracted from the face image in the face information storage unit as face information of the successfully authenticated person.
  • the authenticating means performs second authentication including comparing the face image of the person to be authenticated or the feature amount extracted from the face image with the successfully authenticated face information stored in the face information storage unit.
  • the present disclosure provides an authentication method as a third aspect.
  • the authentication method includes acquiring a face image of the person to be authenticated from an image captured by an imaging device that captures an image of the person to be authenticated, performing first authentication in which the acquired face image of the person to be authenticated or a feature amount extracted from the face image is compared with a registered image of the person to be authenticated or the feature amount extracted from the registered image, determining whether the first authentication is successful, and if it is determined that the first authentication is successful, the face image of the person to be authenticated or the feature amount extracted from the face image
  • This includes storing face information of the registrant successfully authenticated in a face information storage unit, and performing a second authentication including matching the face image of the person to be authenticated or a feature amount extracted from the face image with the face information of the successfully authenticated person stored in the face information storage unit when it is determined that the first authentication has failed.
  • the present disclosure provides a computer-readable medium as a fourth aspect.
  • the computer-readable medium acquires a face image of the person to be authenticated from an image captured by an imaging device that photographs the person to be authenticated, performs first authentication in which the acquired face image of the person to be authenticated or a feature amount extracted from the face image is compared with a registered image of the person to be authenticated or the feature amount extracted from the registered image, determines whether the first authentication is successful, and if the first authentication is determined to be successful, the face image of the person to be authenticated or the feature amount extracted from the face image.
  • a second authentication including collating the face image of the person to be authenticated or a feature amount extracted from the face image with the successfully authenticated face information stored in the face information storage unit is stored.
  • the authentication device, system, method, and computer-readable medium according to the present disclosure can reduce the probability of authentication failure without increasing the number of verifications.
  • FIG. 1 is a block diagram schematically showing an authentication system according to the present disclosure
  • FIG. 1 is a block diagram showing an authentication system according to an embodiment of the present disclosure
  • FIG. 4 is a diagram showing an example of face information stored in a face information storage unit
  • 4 is a flow chart showing an operation procedure in the authentication device
  • FIG. 4 is a schematic diagram schematically showing first face authentication
  • FIG. 2 is a block diagram showing an example of the hardware configuration of an authentication device;
  • FIG. 1 schematically shows an authentication system according to the present disclosure.
  • the authentication system 10 has an authentication device 20 and an imaging device 30 .
  • the imaging device 30 photographs the person to be authenticated.
  • the authentication device 20 acquires the captured image from the imaging device 30 and authenticates the person to be authenticated.
  • the authentication device 20 has face image acquisition means 21 and authentication means 22 .
  • the face image obtaining means 21 obtains the face image of the person to be authenticated from the captured image of the imaging device 30 .
  • the authentication means 22 performs the first authentication and compares the face image of the person to be authenticated with the registered image of the registrant. In the first authentication, the authenticating means 22 may collate the feature amount extracted from the face image of the person to be authenticated with the feature amount extracted from the registered image of the registrant.
  • the authentication means 22 stores the face image of the person to be authenticated or the feature amount extracted from the face image in the face information storage unit 23 as face information of the successfully authenticated registrant.
  • the authenticating means 22 performs the second authentication when the first authentication fails.
  • the authentication means 22 collates the face image or feature amount of the person to be authenticated with the face image or feature amount of the successfully authenticated person stored in the face information storage unit 23 .
  • the authentication means 22 stores in the face information storage unit 23 the face image or feature amount of the person to be authenticated who has succeeded in the first authentication.
  • the authentication means 22 acquires the face image or the feature amount of the person to be authenticated who has succeeded in the first authentication in the past from the face information storage part 23, and compares the face image or the feature amount of the person to be authenticated with the face image or the feature amount acquired from the face information storage part 23.
  • the face image acquired from the face information storage unit 23 is an image that has successfully passed the first authentication in the past and is an image captured using the imaging device 30 .
  • a face image or feature amount stored in the face information storage unit 23 when the first authentication fails is used. Therefore, it is possible to reduce the probability of authentication failure while suppressing an increase in the number of verifications, compared to the case of constantly using images or feature amounts that have been successfully authenticated in the past.
  • FIG. 2 shows an authentication system according to one embodiment of the present disclosure.
  • the authentication system 100 has an authentication device 110 and a camera 130 .
  • An example in which the authentication system 100 is used for vehicle interior entry in a vehicle such as an automobile will be described below.
  • the authentication system 100 can be applied to authentication in various systems, not limited to vehicle interior entry.
  • Authentication system 100 corresponds to authentication system 10 shown in FIG.
  • the camera 130 photographs the person to be authenticated (subject). In this embodiment, it is assumed that the camera 130 photographs a subject outdoors.
  • the camera 130 photographs, for example, a person trying to get into the vehicle.
  • a vehicle is a mobile object, such as a car, taxi, or van.
  • the camera 130 is mounted on a vehicle, for example, and photographs a subject outside the vehicle from inside the vehicle.
  • the camera 130 may be installed outside the vehicle and photograph the subject approaching the vehicle.
  • the number of cameras 130 in the authentication system 100 is not limited to one.
  • Authentication system 100 may have multiple cameras 130 .
  • Camera 130 corresponds to imaging device 30 shown in FIG.
  • the authentication device 110 is a device that acquires the subject's image from the camera 130 and performs authentication using the acquired image.
  • the authentication device 110 is mounted on a vehicle, for example.
  • the authentication device 110 has an image acquisition unit 111 , a face detection unit 112 , a face information storage unit 113 and a matching unit 114 .
  • the authentication device 110 is configured as a device including, for example, one or more processors and one or more memories. At least part of the function of each unit in authentication device 110 can be realized by executing processing according to a program read from memory by the processor.
  • Authentication device 110 corresponds to authentication device 20 shown in FIG.
  • the image acquisition unit 111 acquires a video (image) captured by the camera 130 .
  • the image acquisition unit 111 sequentially acquires the latest image data captured by the camera 130 .
  • the face detection unit 112 detects a face area (face image) from the image data acquired by the image acquisition unit 111 .
  • the face detection unit 112 corresponds to the face image acquisition unit 21 shown in FIG.
  • the face information storage unit 113 stores face information of each of one or more users (registrants) to be authenticated. Each user registers his or her own face image in authentication device 110 .
  • the face information storage unit 113 stores the registered face image as a master.
  • a face image registered by a user is also called a registered image.
  • the face information storage unit 113 may store the feature amount extracted from the registered image as a master.
  • the face information storage unit 113 stores, for each user, in addition to the registered image, the face image of the subject whose face has been successfully authenticated. For example, when the subject is identified as a user whose face has been successfully authenticated, the face information storage unit 113 stores the face image detected by the face detection unit 112 as a face image whose face has been successfully authenticated in the past. The face information storage unit 113 stores, for example, a face image of each user whose face has been successfully authenticated in the most recent face authentication.
  • the face image that has undergone successful face authentication stored in the face information storage unit 113 is not limited to the face image that has undergone successful face authentication in the most recent face authentication.
  • the face information storage unit 113 may store, for each user, face images for which face authentication has been successful in past multiple face authentications.
  • the face information storage unit 113 does not necessarily have to be included in the authentication device 20.
  • the face information storage unit 113 may be configured using, for example, a storage device connected to the authentication device 20 via a network.
  • the face information storage section 113 corresponds to the face information storage section 23 shown in FIG.
  • the matching unit 114 uses the face image detected by the face detection unit 112 to authenticate the face of the person to be authenticated.
  • the face authentication performed by the matching unit 114 includes first face authentication (first authentication) and second face authentication (second authentication).
  • Collation unit 114 collates the face image detected by face detection unit 112 with the registered image registered in face information storage unit 113 in the first face authentication.
  • the matching unit 114 acquires a registered image of each user from the face information storage unit 113 in the first face authentication.
  • the collation unit 114 collates the face image detected by the face detection unit 112 with the acquired registered image of each user. For example, the matching unit 114 extracts a facial feature amount from the face image detected by the face detection unit 112, and compares the extracted feature amount with the feature amount extracted from the registered image.
  • the matching unit 114 calculates a matching score indicating the degree of matching or similarity between the face image of the subject and the registered image. In the following description, it is assumed that the higher the degree of matching or the degree of similarity, the higher the matching score.
  • the matching unit 114 calculates a matching score for each of the one or more users. The matching unit 114 determines whether or not the first face authentication is successful based on the matching score. The matching unit 114 compares, for example, the matching score calculated for each user with a first threshold value, and determines whether or not the first face authentication is successful based on the comparison result.
  • the matching unit 114 determines that the first face authentication has succeeded. If the first face authentication is successful, the matching unit 114 identifies the subject as the registrant with the highest matching score. When the first face authentication is successful, the matching unit 114 stores the face image detected by the face detection unit 112 in the face information storage unit 113 as the face image for which the face authentication is successful. When the face information storage unit 113 already stores a face image for which face authentication has succeeded, the face image for which face authentication has succeeded may be overwritten with a face image for which face authentication has succeeded in the latest face authentication. The matching unit 114 may store the feature amount extracted from the face image in the face information storage unit 113 instead of or in addition to the face image.
  • the matching unit 114 determines that the first face authentication has failed when the matching score is smaller than the first threshold. In this case, the collation unit 114 performs the second face authentication using the face image stored in the face information storage unit 113 and for which the face authentication has been successful. In the second face authentication, the matching unit 114 acquires from the face information storage unit 113 a face image that has successfully passed the first face authentication in the past or a feature amount thereof. The collation unit 114 collates the subject's face image or its feature quantity with each of one or more user's registered images or its feature quantity, and the acquired face image or its feature quantity for which face authentication was successful in the past.
  • the matching unit 114 acquires a face image for which face authentication has succeeded from the face information storage unit 113 based on the matching score of each user in the first face authentication. For example, the matching unit 114 identifies a user with a high matching score in the first face authentication, and acquires from the face information storage unit 113 the face image of the identified user whose face authentication has been successful in the past. In the second face authentication, the matching unit 114 temporarily adds the acquired face image, which was successfully face-authenticated in the past, to the registered image, and matches the registered image and the face image, which was face-authenticated in the past, with the subject's face image.
  • the matching unit 114 calculates a matching score for each user to be matched in the second face authentication.
  • the matching score calculation method for the second face authentication may be the same as the matching score calculation method for the first face authentication.
  • the matching unit 114 determines whether or not the second face authentication is successful based on the calculated matching score.
  • the matching unit 114 determines that the second face authentication has been successful when the matching score with the registered image of any user or the face image for which the face authentication has been successful in the past is equal to or higher than the first threshold. Verification unit 114 corresponds to authentication unit 22 shown in FIG.
  • the authentication device 110 outputs the authentication result to a device (not shown) such as an ECU (Electronic Control Unit) that controls the vehicle.
  • a device such as an ECU (Electronic Control Unit) that controls the vehicle.
  • ECU Electronic Control Unit
  • the ECU unlocks the doors of the vehicle and permits the user to board the vehicle.
  • the ECU will not unlock the vehicle doors unless the subject is authenticated as a pre-registered user.
  • FIG. 3 shows an example of face information stored in the face information storage unit 113.
  • a user ID (Identifier) indicates an ID for identifying each user.
  • the face information storage unit 113 stores registered images and face images for which face authentication has been successful in the past for each user.
  • the registered image may be an image captured using the camera 130 or an image captured using an imaging device different from the camera 130 .
  • a face image for which face authentication has succeeded in the past is an image captured by the camera 130 when the first face authentication was successful.
  • the matching unit 114 collates the face image detected by the face detection unit 112 with each user's registered image registered in the face information storage unit 113 .
  • the collation unit 114 identifies the user ID corresponding to the registered image with the highest collation score with the face image detected by the face detection unit 112, for example. If the matching score is equal to or greater than the first threshold, matching unit 114 determines that the first face authentication has succeeded. In that case, the matching unit 114 identifies the subject as the user identified by the identified user ID.
  • the matching unit 114 performs the second face authentication when the first face authentication fails, that is, when the matching score is smaller than the first threshold.
  • the matching unit 114 acquires, from the face information storage unit 113, a face image for which face authentication has been successful in the past, corresponding to the specified user ID.
  • the matching unit 114 matches the face image detected by the face detection unit 112 with the registered image of each user and the face image for which face authentication was successful in the past, corresponding to the specified user ID.
  • the matching unit 114 identifies the registered image with the highest matching score with the face image detected by the face detection unit 112 or the user ID corresponding to the face image for which face authentication has been successful in the past. If the matching score is equal to or greater than the first threshold, matching unit 114 determines that the second face authentication has succeeded. In that case, the matching unit 114 identifies the subject as the user identified by the specified user ID.
  • FIG. 4 shows an operation procedure (authentication method) in the authentication device 110.
  • the image acquisition unit 111 acquires a camera image from the camera 130 (step S1).
  • the image acquisition unit 111 periodically performs step S1 and acquires camera images in time series from the camera 130 that shoots moving images.
  • the face detection unit 112 detects a face area from the camera image acquired by the image acquisition unit 111 (step S2).
  • the face detection unit 112 outputs the image of the face area (face image) detected in step S2 to the matching unit 114 .
  • the matching unit 114 performs first face authentication on the face image input from the face detection unit 112 (step S3).
  • first face authentication collation unit 114 collates the face image input from face detection unit 112 with each registered image registered in face information storage unit 113 .
  • the collation unit 114 calculates a collation score between each registered image and the face image input from the face detection unit 112 .
  • the matching unit 114 determines whether or not the first face authentication is successful based on the calculated matching score (step S4).
  • matching unit 114 compares the matching score calculated for each registered image with a first threshold value, and determines whether or not the matching score is equal to or greater than the first threshold value.
  • the matching unit 114 determines that the first face authentication has succeeded in step S4.
  • the matching unit 114 stores the face image matched with the registered image in the face information storage unit 113 as a face image for which face authentication was successful in the past (step S5).
  • the matching unit 114 also outputs a message indicating that the face authentication has succeeded (step S6).
  • the collation unit 114 also outputs the user ID corresponding to the registered image with the highest collation score with the face image input from the face detection unit 112 .
  • the matching unit 114 determines that the first face authentication has failed in step S4. In this case, the matching unit 114 acquires a face image that has been successfully authenticated in past face authentication from the face information storage unit 113 (step S7). In step S7, the matching unit 114 acquires a face image for which face authentication has been successful in the past, corresponding to the user with the highest matching score calculated in the first face authentication.
  • the matching unit 114 performs second face authentication on the face image input from the face detection unit 112 (step S8).
  • the collation unit 114 collates the face image input from the face detection unit 112 with the registered image of each user and the face image acquired in step S7.
  • the collation unit 114 calculates a collation score between each registered image and the face image acquired in step S7 and the face image input from the face detection unit 112 .
  • the matching unit 114 determines whether or not the second face authentication has succeeded based on the calculated matching score (step S9).
  • step S9 the matching unit 114 compares the matching score calculated for each registered image and the face image acquired in step S7 with a first threshold value, and determines whether or not the matching score is equal to or greater than the first threshold value. If the matching score is equal to or greater than the first threshold, matching unit 114 determines that the second face authentication has succeeded. In that case, the matching unit 114 proceeds to step S6 and outputs a message indicating that face authentication has succeeded.
  • the matching unit 114 determines that the second face authentication has failed in step S9. In that case, the matching unit 114 outputs a message indicating that face authentication has failed (step S10). If the second face authentication fails, the authentication device 110 may return to step S1 and restart the face authentication from the beginning.
  • FIG. 5 schematically shows the first face recognition.
  • the authentication target image indicates the subject's face image detected by the face detection unit 112 .
  • Three registered images indicate registered images of users with user IDs: 001, 002, and 003 registered in the face information storage unit 113 .
  • the matching unit 114 calculates matching scores between the authentication target image and each of the three registered images.
  • the match score between the image to be authenticated and the registered image of the user with user ID: 001 is 0.55. It is also assumed that the match score between the image to be authenticated and the registered image of the user with user ID: 002 is 0.45. Assume that the matching score between the image to be authenticated and the registered image of the user with user ID: 003 is 0.40. In this example, the matching score between the image to be authenticated and the registered image of the user with ID: 001 is the highest.
  • the authentication score threshold (first threshold) for determining whether face authentication has succeeded is 0.6.
  • Collation unit 114 determines whether or not the collation score is equal to or greater than the authentication score threshold. In this example, the match score for any registered image is less than the authentication score threshold. Therefore, the matching unit 114 determines that the first face authentication has failed.
  • the matching unit 114 determines that the first face authentication has succeeded, and identifies the subject as the user with user ID: 001. In this case, the matching unit 114 stores the authentication target image, which is matched with the registered image, in the face information storage unit 113 as the face image of the user with the user ID 001 whose face authentication has been successful in the past.
  • FIG. 6 schematically shows the second face authentication.
  • the matching unit 114 acquires, from the face information storage unit 113, the face image of the user with the user ID: 001 whose matching score was the highest in the first face authentication and which was successfully authenticated in the previous face authentication.
  • the matching unit 114 calculates a matching score between the authentication target image acquired at the time of performing the second face authentication and each of the three registered images.
  • the matching unit 114 calculates a matching score between the authentication target image and the face image that was successfully authenticated in the previous face authentication of the user with the user ID: 001.
  • the match score between the image to be authenticated and the registered image of the user with user ID: 001 is 0.57. It is also assumed that the matching score between the image to be authenticated and the registered image of the user with user ID: 002 is 0.43. Assume that the matching score between the image to be authenticated and the registered image of the user with user ID: 003 is 0.38. Further, it is assumed that the matching score between the image to be authenticated and the face image of user ID: 001 whose face authentication was successful in the previous time is 0.61. In this example, the match score between the image to be authenticated and the face image of user ID: 001 whose face was successfully authenticated last time exceeds the authentication score threshold. Therefore, in the second face authentication, the subject is identified as the user with user ID:001.
  • the authentication system 100 when used for vehicle interior entry, it is conceivable that the image captured by the camera 130 and the image captured as the registered image are different in the shooting environment.
  • face authentication may fail depending on the lighting environment around the camera 130 even if the subject is a registered user.
  • the collation unit 114 collates the subject's face image with the registered images of each registered user in the first face authentication.
  • the matching unit 114 stores the face image of the user captured by the camera 130 in the face information storage unit 113 as the face image for which the face authentication is successful.
  • the face information storage unit 113 stores, for each user, the most recent face image for which face authentication has succeeded, for example. This face image is an image captured using the camera 130 .
  • the collation unit 114 collates the face image of the subject with the face image stored in the face information storage unit 113, which has been successfully face-authenticated in the past, in the second face authentication.
  • the matching unit 114 temporarily adds face images for which face authentication was successful in the past to matching targets.
  • the subject's face image is matched with the face image captured using the camera 130 .
  • face images captured using the same camera 130 are compared with each other, so the probability of successful face recognition is considered to be higher than in the first face recognition. If the subject's face image is routinely compared with each user's registered image and face images that have been successfully authenticated in the past, the probability of successful authentication can be increased, but the number of checks increases.
  • the present embodiment can reduce the probability of authentication failure while suppressing an increase in the number of verifications, compared to the case where an image for which face authentication has succeeded in the past is constantly used.
  • the matching unit 114 may acquire the face image of the user with the highest matching score that has successfully performed face authentication in the past, and perform the second face authentication.
  • the matching unit 114 may compare the maximum value of the matching score in the first face authentication with a second threshold smaller than the first threshold, and if the matching score is equal to or greater than the second threshold, the facial image of the user with the highest matching score that has been successfully face-authenticated in the past may be acquired. If the maximum matching score is smaller than the second threshold value, the matching unit 114 may redo the first face authentication without performing the second face authentication.
  • a registered image with a low matching score in the first face authentication is considered to be a registered image of a different person from the subject, and is also considered to have a low matching score in the second face authentication.
  • a registered image of a user with a low matching score may be excluded from matching in the second face authentication.
  • the matching unit 114 compares the matching score calculated in the first face authentication with a third threshold smaller than the first threshold.
  • the third threshold may be different from the second threshold, or may be the same value.
  • the third threshold may be greater than or less than the second threshold.
  • the matching unit 114 may match registered images with a matching score equal to or higher than the third threshold in the first face authentication with the face image of the subject. In this case, the number of matching times in the second face authentication can be reduced, and the time required for authentication processing can be reduced.
  • FIG. 7 shows an example of the hardware configuration of the authentication device 110.
  • the authentication device 110 has a processor (CPU: Central Processing Unit) 501 , ROM (read only memory) 502 , and RAM (random access memory) 503 .
  • processor 501 , ROM 502 and RAM 503 are interconnected via bus 504 .
  • the authentication device 110 may include other circuits such as peripheral circuits, communication circuits, and interface circuits.
  • the ROM 502 is a non-volatile storage device.
  • a semiconductor storage device such as a flash memory having a relatively small capacity is used.
  • the ROM 502 stores programs executed by the processor 501 .
  • the program includes a group of instructions (or software code) that, when read into a computer, cause the computer to perform one or more functions described in the embodiments.
  • the program may be stored in a non-transitory computer-readable medium or tangible storage medium.
  • computer readable media or tangible storage media include RAM, ROM, flash memory, solid-state drives (SSDs) or other memory technology, Compact Discs (CDs), digital versatile discs (DVDs), Blu-ray discs or other optical disc storage, magnetic cassettes, magnetic tapes, magnetic disk storage or other magnetic storage devices.
  • the program may be transmitted on a transitory computer-readable medium or communication medium.
  • transitory computer readable media or communication media include electrical, optical, acoustic, or other forms of propagated signals.
  • the RAM 503 is a volatile storage device. Various semiconductor memory devices such as DRAM (Dynamic Random Access Memory) or SRAM (Static Random Access Memory) are used for the RAM 503 .
  • the RAM 503 can be used as an internal buffer that temporarily stores data and the like.
  • the processor 501 expands the program stored in the ROM 502 to the RAM 503 and executes the program.
  • the functions of each unit in the authentication device 110 can be implemented by the CPU 501 executing the program.
  • the authentication device 110 does not necessarily have to be a single device.
  • the authentication device 110 may be configured using a plurality of physically separated devices. Further, when the authentication device 110 is used for vehicle interior entry, the authentication device 110 does not necessarily have all the functions installed in the vehicle. For example, each part of the authentication device 110 may be arranged outside the vehicle. In that case, authentication device 110 may acquire the camera image of camera 130 via the wireless communication network. Authentication device 110 may transmit the authentication result to the vehicle via a wireless communication network.
  • a face image obtaining means for obtaining a face image of the person to be authenticated from an image captured by an imaging device that captures an image of the person to be authenticated; an authenticating means for performing a first authentication that compares the acquired face image of the person to be authenticated or the feature quantity extracted from the face image with the registered image of the registrant or the feature quantity extracted from the registered image;
  • the authentication device stores the face image of the person to be authenticated or a feature amount extracted from the face image as face information of the person successfully authenticated in a face information storage unit when the first authentication is successful, and performs a second authentication including matching the face image of the person to be authenticated or the feature amount extracted from the face image with the face information stored in the face information storage unit that is stored in the face information storage unit and is the feature amount extracted from the face image.
  • Appendix 2 The authentication device according to appendix 1, wherein in the first authentication, the authentication means collates the face image of the person to be authenticated or a feature amount extracted from the face image with one or more registered images of the registrant or feature amounts extracted from each registered image.
  • Appendix 3 The authentication device according to appendix 2, wherein in the first authentication, the authentication means calculates a matching score indicating a degree of matching between the face image of the person to be authenticated and the registered image for each of the one or more registrants, compares the calculated authentication score with a first threshold value, and determines whether or not the first authentication is successful based on the result of the comparison.
  • Appendix 4 The authentication device according to appendix 3, wherein the authentication means determines that the first authentication has succeeded when the matching score of the registrant with the highest matching score is equal to or greater than the first threshold value, and determines that the first authentication has failed when the matching score of the registrant with the highest matching score is smaller than the first threshold value.
  • Appendix 5 The authentication device according to appendix 4, wherein the authentication means identifies the person to be authenticated as the registrant with the highest matching score when the first authentication is successful.
  • Appendix 6 The authentication device according to any one of appendices 3 to 5, wherein in the second authentication, the authentication means acquires the successfully authenticated face information from the face information storage unit based on the authentication score of each registrant in the first authentication, and compares the acquired face information with the face image of the person to be authenticated or a feature amount extracted from the face image.
  • Appendix 7 The authentication device according to appendix 6, wherein the authentication means acquires, from the face information storage unit, face information of a registrant whose matching score was the highest in the first authentication and whose authentication was successful.
  • Appendix 8 The authentication device according to appendix 7, wherein when the first authentication fails, the authentication means compares the matching score of the registrant with the highest matching score in the first authentication with a second threshold smaller than the first threshold, and acquires the successfully authenticated face information from the face information storage unit when the matching score of the registrant with the highest matching score is equal to or higher than the second threshold.
  • Appendix 10 10. The authentication device according to any one of Appendices 2 to 9, wherein in the second authentication, the authentication means collates the face image of the person to be authenticated or a feature amount extracted from the face image with the one or more registered images of the registrant or feature amounts extracted from each registered image, and face information that has been successfully authenticated.
  • Appendix 11 10. The authentication device according to any one of appendices 3 to 9, wherein in the second authentication, the authentication means compares the face image of the person to be authenticated or a feature amount extracted from the face image with a registered image or a feature amount extracted from the registered image of a registrant whose matching score in the first authentication is equal to or higher than a third threshold smaller than the first threshold among the one or more registrants, and the face information for which the authentication is successful.
  • Appendix 12 12. The authentication device according to any one of appendices 1 to 11, wherein the captured image is an image of a person to be authenticated who is outdoors.
  • an imaging device that captures an image of a person to be authenticated
  • An authentication device that acquires a captured image from the imaging device and authenticates the authentication subject,
  • the authentication device a face image obtaining means for obtaining a face image of the person to be authenticated from the captured image;
  • an authenticating means for performing a first authentication for comparing the acquired face image of the person to be authenticated or the feature quantity extracted from the face image with the registered image of the registrant or the feature quantity extracted from the registered image; wherein the authentication means stores the face image of the person to be authenticated or a feature quantity extracted from the face image as face information of the successfully authenticated person in a face information storage unit when the first authentication is successful, and performs a second authentication including collating the face image of the person to be authenticated or the feature quantity extracted from the face image with the face information of the successfully authenticated person stored in the face information storage unit when the first authentication fails.
  • Appendix 14 13 The authentication system according to appendix 13, wherein, in the first authentication, the authentication means collates the face image of the person to be authenticated or a feature amount extracted from the face image with one or more registered images of the registrant or feature amounts extracted from each registered image.
  • Appendix 15 15. The authentication system according to appendix 14, wherein, in the first authentication, the authentication means calculates a matching score indicating the degree of matching between the face image of the person to be authenticated and the registered image for each of the one or more registrants, compares the calculated authentication score with a first threshold value, and determines whether or not the first authentication is successful based on the result of the comparison.
  • Appendix 16 16. The authentication system according to appendix 14 or 15, wherein in the second authentication, the authentication means compares the face image of the person to be authenticated or a feature amount extracted from the face image with the registered images of the one or more registrants or the feature amounts extracted from each registered image, respectively, and face information that has been successfully authenticated.
  • [Appendix 17] obtaining a face image of the person to be authenticated from an image captured by an imaging device that captures an image of the person to be authenticated; performing a first authentication in which the obtained facial image of the person to be authenticated or the feature amount extracted from the facial image is compared with the registered image of the registrant or the feature amount extracted from the registered image; determining whether the first authentication was successful; when it is determined that the first authentication has succeeded, storing the face image of the person to be authenticated or a feature amount extracted from the face image as face information of the successfully authenticated person in a face information storage unit; An authentication method comprising, when it is determined that the first authentication has failed, performing a second authentication including collating the face image of the person to be authenticated or a feature amount extracted from the face image with the successfully authenticated face information stored in the face information storage unit.
  • [Appendix 18] obtaining a face image of the person to be authenticated from an image captured by an imaging device that captures an image of the person to be authenticated; performing a first authentication in which the obtained facial image of the person to be authenticated or the feature amount extracted from the facial image is compared with the registered image of the registrant or the feature amount extracted from the registered image; determining whether the first authentication was successful; when it is determined that the first authentication has succeeded, storing the face image of the person to be authenticated or a feature amount extracted from the face image as face information of the successfully authenticated person in a face information storage unit;
  • a non-temporary computer-readable medium storing a program for causing a computer to perform a second authentication including collating the face image of the person to be authenticated or a feature amount extracted from the face image with the successfully authenticated face information stored in the face information storage unit when the first authentication is determined to be unsuccessful.
  • authentication system 20 authentication device 21: face image acquisition means 22: authentication means 30: imaging device 100: authentication system 110: authentication device 111: image acquisition unit 112: face detection unit 113: face information storage unit 114: verification unit 130: camera 501: processor 502: ROM 503: RAM 504: Bus

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Collating Specific Patterns (AREA)

Abstract

照合回数を増大させることなく、認証に失敗する確率を低減させることを可能とする。顔画像取得手段（２１）は、認証対象者の顔画像を取得する。認証手段（２２）は、認証対象者の顔画像と登録者の登録画像とを照合する第１の認証を実施する。認証手段（２２）は、第１の認証に成功した場合、認証対象者の顔画像を、登録者の認証に成功した顔情報として顔情報記憶部（２３）に記憶する。認証手段（２２）は、第１の認証に失敗した場合、認証対象者の顔画像と、顔情報記憶部（２３）に記憶される認証に成功した顔情報とを照合することを含む第２の認証を実施する。

Description

認証装置、システム、方法、及びコンピュータ可読媒体
　本開示は、認証装置、システム、方法、及びコンピュータ可読媒体に関する。
　関連技術として、特許文献１は、認証装置を開示する。特許文献１に記載の認証装置は、撮像装置から、被写体が映っている、時系列に沿って連続した複数の画像を取得する。認証装置は、複数の画像それぞれと登録画像とを比較し、各画像が登録画像に一致しているか否かを判定する。認証装置は、一致していると連続して判定された回数が設定数以上である場合、一致していると判定されなかった画像を、登録画像に関連付けて登録する。
　例えば、撮影装置は、ある人物Ａを連続して撮影し、人物Ａの顔画像データを時系列に沿って連続して取得する。認証装置は、Ｎを任意の自然数として、撮影装置からＮ個の人物Ａの顔画像データをする。認証装置は、Ｎ個の顔画像データのそれぞれを、人物Ａのマスタ（登録画像）と照合する。認証装置は、時系列に沿って連続しているＮ－２からＮまでの各顔画像データの特徴と、人物Ａのマスタの特徴とが一致した場合、撮影された人物が人物Ａであると認証する。
　Ｎ－２からＮまでの各顔画像データの特徴と、人物Ａのマスタの特徴とが一致している場合、それ以前の時刻において認証に失敗していた場合でも、Ｎ－３以前の顔画像データに映っている人物も、人物Ａである可能性が高い。認証装置は、Ｎ－３以前の各顔画像データと、Ｎ－２の顔画像データとの一致率を算出する。認証装置は、認証に失敗した顔画像データのうち、一致率がしきい値以上の顔画像データを、人物Ａのマスタに追加登録する。
特開２０１８－１６９７７６号公報
　特許文献１において、認証装置は、認証に失敗した顔画像データのうち、認証に成功した顔画像データとの一致率が高い顔画像データを、登録画像に追加で登録する。特許文献１は、登録画像を増やすことで、認証に失敗する確率を減らし、認証率を向上させることができる。しかしながら、特許文献１は、認証対象の人物ごとに、複数の登録画像が定常的に使用される。このため、認証における照合処理の回数が増大し、認証に要する時間が長くなる。
　本開示は、上記事情に鑑み、照合回数を増大させることなく、認証に失敗する確率を低減させることができる認証装置、システム、方法、及びコンピュータ可読媒体を提供することを目的とする。
　上記目的を達成するために、本開示は、第１の態様として、認証装置を提供する。認証装置は、認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを含む。認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶する。認証手段は、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する。
　本開示は、第２の態様として、認証システムを提供する。認証システムは、認証対象者を撮影する撮像装置と、前記撮像装置から撮像画像を取得し、前記認証対象者を認証する認証装置とを含む。認証装置は、前記撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを有する。認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶する。認証手段は、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する。
　本開示は、第３の態様として、認証方法を提供する。認証方法は、認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、前記第１の認証に成功したか否かを判断し、前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを含む。
　本開示は、第４の態様として、コンピュータ可読媒体を提供する。コンピュータ可読媒体は、認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、前記第１の認証に成功したか否かを判断し、前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを含む処理をコンピュータに実施させるためのプログラムを格納する。
　本開示に係る認証装置、システム、方法、及びコンピュータ可読媒体は、照合回数を増大させることなく、認証に失敗する確率を低減させることができる。
本開示に係る認証システムを概略的に示すブロック図。 本開示の一実施形態に係る認証システムを示すブロック図。 顔情報記憶部に記憶される顔情報の例を示す図。 認証装置における動作手順を示すフローチャート。 第１の顔認証を模式的に示す模式図。 第２の顔認証を模式的に示す模式図。 認証装置のハードウェア構成の例を示すブロック図。
　本開示の実施の形態の説明に先立って、本開示の概要を説明する。図１は、本開示に係る認証システムを概略的に示す。認証システム１０は、認証装置２０、及び撮像装置３０を有する。撮像装置３０は、認証対象者を撮影する。認証装置２０は、撮像装置３０から撮像画像を取得し、認証対象者を認証する。
　認証装置２０は、顔画像取得手段２１、及び認証手段２２を有する。顔画像取得手段２１は、撮像装置３０の撮像画像から認証対象者の顔画像を取得する。認証手段２２は、第１の認証実施し、認証対象者の顔画像と登録者の登録画像とを照合する。認証手段２２は、第１の認証では、認証対象者の顔画像から抽出された特徴量と登録者の登録画像から抽出された特徴量とを照合してもよい。
　認証手段２２は、第１の認証に成功した場合、認証対象者の顔画像又は顔画像から抽出された特徴量を、登録者の認証に成功した顔情報として顔情報記憶部２３に記憶する。認証手段２２は、第１の認証に失敗した場合、第２の認証を実施する。認証手段２２は、第２の認証において、認証対象者の顔画像又は特徴量を、顔情報記憶部２３に記憶される認証に成功した顔画像又は特徴量と照合する。
　本開示では、認証手段２２は、第１の認証に成功した認証対象者の顔画像又は特徴量を顔情報記憶部２３に記憶する。認証手段２２は、第１の認証に失敗した場合、過去に第１の認証に成功した認証対象者の顔画像又は特徴量を顔情報記憶部２３から取得し、認証対象者の顔画像又は特徴量と顔情報記憶部２３から取得された顔画像又は特徴量とを照合する。顔情報記憶部２３から取得された顔画像は、過去に第１の認証に成功した画像であり、かつ撮像装置３０を用いて撮影された画像である。第１の認証の失敗時に、このような画像を用いて照合を行うことで、第２の認証において、認証に失敗する確率を低減できる。また、本開示では、第１の認証の失敗時に顔情報記憶部２３に記憶される顔画像又は特徴量が用いられる。このため、定常的に過去に認証に成功した画像又は特徴量を用いる場合に比べて、照合回数の増大を抑えつつ、認証に失敗する確率を低減することができる。
　以下、図面を参照しつつ、本開示の実施の形態を詳細に説明する。なお、以下の記載及び図面は、説明の明確化のため、適宜、省略及び簡略化がなされている。また、以下の各図面において、同一の要素及び同様な要素には同一の符号が付されており、必要に応じて重複説明は省略されている。
　図２は、本開示の一実施形態に係る認証システムを示す。認証システム１００は、認証装置１１０、及びカメラ１３０を有する。以下では、認証システム１００が、自動車などの車両における車室内エントリに用いられる例を説明する。認証システム１００は、車室内エントリに限らず、様々なシステムにおける認証に適用され得る。認証システム１００は、図１に示される認証システム１０に対応する。
　カメラ１３０は、認証対象者（被験者）を撮影する。本実施形態において、カメラ１３０は、屋外にいる被験者を撮影するものとする。カメラ１３０は、例えば車両に乗車しようとする人物を撮影する。車両は、例えば乗用車、タクシー、又はバンなどの移動体である。カメラ１３０は、例えば車両に搭載され、車両の内部から車両外部の被験者を撮影する。カメラ１３０は、車両の外部に設置され、車両に近付く被験者を撮影してもよい。なお、認証システム１００において、カメラ１３０の数は１つには限定されない。認証システム１００は、複数のカメラ１３０を有し得る。カメラ１３０は、図１に示される撮像装置３０に対応する。
　認証装置１１０は、カメラ１３０から被験者の映像を取得し、取得した映像を用いて認証を実施する装置である。認証装置１１０は、例えば車両に搭載される。認証装置１１０は、画像取得部１１１、顔検知部１１２、顔情報記憶部１１３、及び照合部１１４を有する。認証装置１１０は、例えば１以上のプロセッサと１以上のメモリとを含む装置として構成される。認証装置１１０内の各部の機能の少なくとも一部は、プロセッサがメモリから読み出したプログラムに従って処理を実施することで実現され得る。認証装置１１０は、図１に示される認証装置２０に対応する。
　画像取得部１１１は、カメラ１３０が撮影した映像（画像）を取得する。画像取得部１１１は、カメラ１３０が撮影した最新の画像データを、順次に取得する。顔検知部１１２は、画像取得部１１１が取得した画像データから、顔領域（顔画像）を検知する。顔検知部１１２は、図１に示される顔画像取得手段２１に対応する。
　顔情報記憶部１１３は、認証対象の１以上のユーザ（登録者）それぞれの顔情報を記憶する。各ユーザは、自身の顔画像を認証装置１１０に登録する。顔情報記憶部１１３は、登録された顔画像をマスタとして記憶する。ユーザが登録した顔画像は、登録画像とも呼ばれる。顔情報記憶部１１３は、登録画像に加えて、又はこれに代えて、登録画像から抽出された特徴量を、マスタとして記憶してもよい。
　顔情報記憶部１１３は、各ユーザについて、登録画像に加えて、顔認証に成功した被験者の顔画像を記憶する。例えば、顔情報記憶部１１３は、被験者が顔認証に成功してあるユーザであると識別された場合、顔検知部１１２で検知された顔画像を、過去に顔認証に成功した顔画像として記憶する。顔情報記憶部１１３は、例えば各ユーザについて、直近の顔認証において顔認証に成功した顔画像を記憶する。顔情報記憶部１１３が記憶する顔認証に成功した顔画像は、直近の顔認証において顔認証に成功した顔画像には限定されない。顔情報記憶部１１３は、例えば各ユーザについて、過去複数回の顔認証において顔認証に成功した顔画像を記憶してもよい。
　なお、顔情報記憶部１１３は、必ずしも認証装置２０に含まれている必要はない。顔情報記憶部１１３は、例えば、認証装置２０とネットワークを介して接続されたストレージデバイスを用いて構成されていてもよい。顔情報記憶部１１３は、図１に示される顔情報記憶部２３に対応する。
　照合部１１４は、顔検知部１１２で検知された顔画像を用いて、認証対象者を顔認証する。照合部１１４が実施する顔認証は、第１の顔認証（第１の認証）と第２の顔認証（第２の認証）とを含む。照合部１１４は、第１の顔認証において、顔検知部１１２が検知した顔画像と、顔情報記憶部１１３に登録される登録画像とを照合する。照合部１１４は、第１の顔認証では、顔情報記憶部１１３から各ユーザの登録画像を取得する。照合部１１４は、顔検知部１１２が検知した顔画像と、取得した各ユーザの登録画像とを照合する。照合部１１４は、例えば顔検知部１１２が検知した顔画像から顔の特徴量を抽出し、抽出した特徴量と、登録画像から抽出された特徴量とを比較する。
　照合部１１４は、被験者の顔画像と登録画像との一致度、又は類似度を示す照合スコアを計算する。以下では、一致度又は類似度が高いほど、照合スコアが高いものとして説明する。照合部１１４は、１以上のユーザのそれぞれに対して、照合スコアを計算する。照合部１１４は、照合スコアに基づいて、第１の顔認証に成功したか否かを判断する。照合部１１４は、例えば、各ユーザに対して計算された照合スコアと第１のしきい値とを比較し、比較の結果に基づいて、第１の顔認証に成功したか否かを判断する。
　照合部１１４は、例えば、被験者の顔画像と、あるユーザの登録画像との照合スコアが第１のしきい値以上である場合、第１の顔認証に成功したと判断する。照合部１１４は、第１の顔認証に成功した場合、被験者は照合スコアが最も高い登録者であると識別する。照合部１１４は、第１の顔認証に成功した場合、顔情報記憶部１１３に、顔検知部１１２で検知された顔画像を、顔認証に成功した顔画像として記憶する。顔情報記憶部１１３は、既に顔認証に成功した顔画像を記憶している場合、顔認証に成功した顔画像を、最新の顔認証において顔認証に成功した顔画像で上書きしてもよい。照合部１１４は、顔画像に代えて、又はこれに加えて、顔画像から抽出された特徴量を顔情報記憶部１１３に記憶してもよい。
　照合部１１４は、照合スコアが第１のしきい値より小さい場合、第１の顔認証に失敗したと判断する。その場合、照合部１１４は、顔情報記憶部１１３に記憶される顔認証に成功した顔画像を用いて、第２の顔認証を実施する。照合部１１４は、第２の顔認証では、顔情報記憶部１１３から、過去に第１の顔認証に成功した顔画像又はその特徴量を取得する。照合部１１４は、被験者の顔画像又はその特徴量と、１以上のユーザの登録画像又はその特徴量のそれぞれ、及び取得した過去に顔認証に成功した顔画像又はその特徴量とを照合する。
　照合部１１４は、第２の顔認証では、第１の顔認証における各ユーザの照合スコアに基づいて、顔情報記憶部１１３から顔認証に成功した顔画像を取得する。例えば、照合部１１４は、第１の顔認証において照合スコアが高かったユーザを特定し、顔情報記憶部１１３から、特定したユーザの、過去に顔認証に成功した顔画像を取得する。照合部１１４は、第２の顔認証では、登録画像に、取得した過去に顔認証に成功した顔画像を一時的に追加し、登録画像及び過去に顔認証に成功した顔画像と、被験者の顔画像とを照合する。
　照合部１１４は、第２の顔認証において、照合対象のユーザごとに、照合スコアを計算する。第２の顔認証における照合スコアの計算手法は、第１の顔認証における照合スコアの計算手法と同じでよい。照合部１１４は、計算した照合スコアに基づいて、第２の顔認証に成功したか否かを判断する。照合部１１４は、何れかのユーザの登録画像又は過去に顔認証に成功した顔画像との照合スコアが第１のしきい値以上の場合、第２の顔認証に成功したと判断する。照合部１１４は、図１に示される認証手段２２に対応する。
　認証装置１１０は、認証結果を、車両を制御するＥＣＵ（Electronic Control Unit）などの機器（図示せず）に出力する。ＥＣＵは、被験者があらかじめ登録されたユーザであると認証された場合、車両のドアロックを解除し、ユーザの車両への乗車を許可する。ＥＣＵは、被験者があらかじめ登録されたユーザであると認証されなかった場合、車両のドアロックを解除しない。
　図３は、顔情報記憶部１１３に記憶される顔情報の例を示す。図３において、ユーザＩＤ（Identifier）は、各ユーザを識別するためのＩＤを示す。顔情報記憶部１１３は、各ユーザについて、登録画像と、過去に顔認証に成功した顔画像とを記憶する。登録画像は、カメラ１３０を用いて撮影された画像であってもよいし、カメラ１３０とは異なる撮像装置を用いて撮影された画像であってもよい。これに対し、過去に顔認証に成功した顔画像は、第１の顔認証に成功した場合に、カメラ１３０で撮影された画像である。
　照合部１１４は、第１の顔認証では、顔検知部１１２で検知された顔画像と、顔情報記憶部１１３に登録された、各ユーザの登録画像とを照合する。照合部１１４は、例えば顔検知部１１２で検知された顔画像との照合スコアが最も高い登録画像に対応するユーザＩＤを特定する。照合部１１４は、照合スコアが第１のしきい値以上の場合、第１の顔認証に成功したと判断する。その場合、照合部１１４は、被験者は、特定したユーザＩＤで識別されるユーザであると識別する。
　照合部１１４は、第１の顔認証に失敗した場合、すなわち照合スコアが第１のしきい値より小さい場合、第２の顔認証を実施する。照合部１１４は、第２の顔認証では、顔情報記憶部１１３から、上記特定したユーザＩＤに対応する、過去に顔認証に成功した顔画像を取得する。照合部１１４は、第２の顔認証では、顔検知部１１２で検知された顔画像と、各ユーザの登録画像、及び上記特定したユーザＩＤに対応する、過去に顔認証に成功した顔画像とを照合する。
　照合部１１４は、第２の顔認証において、顔検知部１１２で検知された顔画像との照合スコアが最も高い登録画像又は過去に顔認証に成功した顔画像に対応するユーザＩＤを特定する。照合部１１４は、照合スコアが第１のしきい値以上の場合、第２の顔認証に成功したと判断する。その場合、照合部１１４は、被験者は、特定したユーザＩＤで識別されるユーザであると識別する。
　続いて、動作手順を説明する。図４は、認証装置１１０における動作手順（認証方法）を示す。画像取得部１１１は、カメラ１３０からカメラ画像を取得する（ステップＳ１）。画像取得部１１１は、ステップＳ１を周期的に実施し、動画像を撮影するカメラ１３０から、時系列的にカメラ画像を取得する。顔検知部１１２は、画像取得部１１１が取得したカメラ画像から、顔領域を検出する（ステップＳ２）。顔検知部１１２は、ステップＳ２で検出した顔領域の画像（顔画像）を、照合部１１４に出力する。
　照合部１１４は、顔検知部１１２から入力される顔画像に対して、第１の顔認証を実施する（ステップＳ３）。照合部１１４は、第１の顔認証では、顔検知部１１２から入力される顔画像と、顔情報記憶部１１３に登録された登録画像のそれぞれとを照合する。照合部１１４は、各登録画像に対して、顔検知部１１２から入力される顔画像との照合スコアを計算する。照合部１１４は、計算した照合スコアに基づいて、第１の顔認証に成功したか否かを判断する（ステップＳ４）。照合部１１４は、ステップＳ４では、各登録画像に対して計算された照合スコアと第１のしきい値とを比較し、照合スコアが第１のしきい値以上であるか否かを判断する。
　照合部１１４は、照合スコアが第１のしきい値以上である場合、ステップＳ４において第１の顔認証に成功したと判断する。照合部１１４は、第１の顔認証に成功したと判断した場合、登録画像と照合された顔画像を、過去に顔認証に成功した顔画像として、顔情報記憶部１１３に記憶する（ステップＳ５）。また、照合部１１４は、顔認証に成功した旨を示すメッセージを出力する（ステップＳ６）。照合部１１４は、ステップＳ６では、顔検知部１１２から入力される顔画像との照合スコアが最も高い登録画像に対応するユーザＩＤも出力する。
　照合部１１４は、照合スコアが第１のしきい値より小さい場合、ステップＳ４において第１の顔認証に失敗したと判断する。その場合、照合部１１４は、顔情報記憶部１１３から、過去の顔認証において認証に成功した顔画像を取得する（ステップＳ７）。照合部１１４は、ステップＳ７では、第１の顔認証において計算された照合スコアが最も高いユーザに対応する、過去に顔認証に成功した顔画像を取得する。
　照合部１１４は、顔検知部１１２から入力される顔画像に対して、第２の顔認証を実施する（ステップＳ８）。照合部１１４は、第２の顔認証では、顔検知部１１２から入力される顔画像と、各ユーザの登録画像、及びステップＳ７で取得された顔画像のそれぞれとを照合する。照合部１１４は、各登録画像及びステップＳ７で取得された顔画像に対して、顔検知部１１２から入力される顔画像との照合スコアを計算する。
　照合部１１４は、計算した照合スコアに基づいて、第２の顔認証に成功したか否かを判断する（ステップＳ９）。照合部１１４は、ステップＳ９では、各登録画像及びステップＳ７で取得された顔画像に対して計算された照合スコアと第１のしきい値とを比較し、照合スコアが第１のしきい値以上であるか否かを判断する。照合部１１４は、照合スコアが第１のしきい値以上である場合、第２の顔認証に成功したと判断する。その場合、照合部１１４は、ステップＳ６に進み、顔認証に成功した旨を示すメッセージを出力する。
　照合部１１４は、照合スコアが第１のしきい値より小さい場合、ステップＳ９において第２の顔認証に失敗したと判断する。その場合、照合部１１４は、顔認証に失敗した旨を示すメッセージを出力する（ステップＳ１０）。認証装置１１０は、第２の顔認証に失敗した場合、ステップＳ１に戻り、顔認証を最初からやり直してもよい。
　以下、第１の顔認証及び第２の顔認証を、具体例を用いて説明する。図５は、第１の顔認証を模式的に示す。図５において、認証対象画像は、顔検知部１１２で検知された被験者の顔画像を示す。３つの登録画像は、顔情報記憶部１１３に登録された、ユーザＩＤ：００１、００２、及び００３のユーザの登録画像を示す。
　照合部１１４は、認証対象画像と、３つの登録画像それぞれとの照合スコアを計算する。図５において、認証対象画像と、ユーザＩＤ：００１のユーザの登録画像との照合スコアは０．５５であったとする。また、認証対象画像と、ユーザＩＤ：００２のユーザの登録画像との照合スコアは０．４５であったとする。認証対象画像と、ユーザＩＤ：００３のユーザの登録画像との照合スコアは０．４０であったとする。この例では、認証対象画像とＩＤ：００１のユーザの登録画像との照合スコアが最も高い。
　図５の例において、顔認証に成功したか否かを判断するための認証スコアしきい値（第１のしきい値）は、０．６であるとする。照合部１１４は、照合スコアが認証スコアしきい値以上であるか否かを判断する。この例では、何れの登録画像の照合スコアも、認証スコアしきい値よりも小さい。従って、照合部１１４は、第１の顔認証に失敗したと判断する。
　仮に、ユーザＩＤ：００１のユーザの登録画像の照合スコアが認証スコアしきい値以上であったとした場合、照合部１１４は、第１の顔認証に成功したと判断し、被験者はユーザＩＤ：００１のユーザであると識別する。その場合、照合部１１４は、顔情報記憶部１１３に、登録画像と照合された認証対象画像を、ユーザＩＤ：００１のユーザの過去に顔認証に成功した顔画像として記憶する。
　図６は、第２の顔認証を模式的に示す。第１の顔認証に失敗した場合、照合部１１４は、顔情報記憶部１１３から、第１の顔認証において照合スコアが最も高かったユーザＩＤ：００１のユーザの前回の顔認証において認証に成功した顔画像を取得する。第２の顔認証において、照合部１１４は、第２の顔認証を実施する時点において取得された認証対象画像と、３つの登録画像のそれぞれとの照合スコアを計算する。また、照合部１１４は、認証対象画像と、ユーザＩＤ：００１のユーザの前回の顔認証において認証に成功した顔画像との照合スコアを計算する。
　図６において、認証対象画像と、ユーザＩＤ：００１のユーザの登録画像との照合スコアは０．５７であったとする。また、認証対象画像と、ユーザＩＤ：００２のユーザの登録画像との照合スコアは０．４３であったとする。認証対象画像と、ユーザＩＤ：００３のユーザの登録画像との照合スコアは０．３８であったとする。さらに、認証対象画像と、ユーザＩＤ：００１の前回の顔認証に成功した顔画像との照合スコアは０．６１であったとする。この例では、認証対象画像とユーザＩＤ：００１の前回の顔認証に成功した顔画像との照合スコアは、認証スコアしきい値を超えている。従って、第２の顔認証において、被験者は、ユーザＩＤ：００１のユーザであると識別される。
　ここで、認証システム１００を車室内エントリに使用する場合、カメラ１３０で撮影された画像と、登録画像として撮影された画像とでは、撮影環境が異なると考えられる。特にカメラ１３０が屋外にいる被験者を撮影する場合、カメラ１３０の周囲の照明環境などに応じて、被験者が登録ユーザである場合でも、顔認証に失敗する場合があり得る。
　本実施形態では、照合部１１４は、第１の顔認証において、被験者の顔画像と、登録された各ユーザの登録画像とを照合する。照合部１１４は、第１の顔認証に成功した場合、カメラ１３０を用いて撮影された、そのユーザの顔画像を、顔認証に成功した顔画像として顔情報記憶部１１３に記憶する。本実施形態において、顔情報記憶部１１３は、ユーザごとに、例えば直近の顔認証に成功した顔画像を記憶する。この顔画像は、カメラ１３０を用いて撮影された画像である。照合部１１４は、第１の顔認証に失敗した場合、第２の顔認証において、被験者の顔画像と、顔情報記憶部１１３に記憶された、過去に顔認証に成功した顔画像とを照合する。
　本実施形態では、照合部１１４は、第２の顔認証において、一時的に過去に顔認証に成功した顔画像を照合対象に加える。第２の顔認証において、被験者の顔画像は、カメラ１３０を用いて撮影された顔画像と照合される。第２の顔認証では、同じカメラ１３０を用いて撮影された顔画像同士が照合されるため、第１の顔認証に比べて、顔認証に成功する確率が高くなると考えられる。仮に、定常的に、被験者の顔画像を、各ユーザの登録画像、及び、過去に顔認証に成功した顔画像と照合するとした場合、認証に成功する確率を高めることはできるものの、照合回数が増大する。これに対し、本実施形態では、第１の顔認証に失敗した場合に、過去に顔認証に成功した顔画像が一時的に用いられる。従って、本実施形態は、定常的に過去に顔認証に成功した画像が用いられる場合に比べて、照合回数の増大を抑えつつ、認証に失敗する確率を低減することができる。
　なお、上記実施形態では、第１の顔認証において照合スコアが最も高いユーザの過去に顔認証に成功した顔画像が取得される例を説明した。しかしながら、照合スコアが低い場合、被験者が照合スコアが最も高いユーザである確率は低いと考えられる。そこで、照合部１１４は、第１の顔認証における照合スコアと、認証成功か否かの判断に用いられる第１のしきい値との差分がある値以下の場合に、照合スコアが最も高いユーザの過去に顔認証に成功した顔画像を取得し、第２の顔認証を実施してもよい。別の言い方をすれば、照合部１１４は、第１の顔認証における照合スコアの最大値と、第１のしきい値より小さい第２のしきい値とを比較し、照合スコアが第２のしきい値以上の場合、照合スコアが最も高いユーザの過去に顔認証に成功した顔画像を取得してもよい。照合部１１４は、照合スコアの最大値が第２のしきい値より小さい場合、第２の顔認証を実施せずに、第１の顔認証をやり直してもよい。
　また、上記実施形態では、照合部１１４は、第２の顔認証では、第１の顔認証で照合された登録画像に加えて、過去に顔認証に成功した顔画像との照合を行う例を説明した。しかしながら、第１の顔認証において照合スコアが低い登録画像は、被験者とは別人の登録画像であると考えられ、第２の顔認証においても照合スコアが低いと考えられる。第２の顔認証では、登録画像の全てについて被験者の顔画像との照合を行う必要はない。照合スコアが低いユーザの登録画像は、第２の顔認証における照合から除外されてもよい。例えば、照合部１１４は、第１の顔認証において計算された照合スコアを、第１のしきい値より小さい第３のしきい値と比較する。第３のしきい値は、上記第２のしきい値と異なっていてもよいし、同じ値でもよい。第３のしきい値は、第２のしきい値より大きくてもよいし、第２のしきい値より小さくてもよい。照合部１１４は、第２の顔認証において、第１の顔認証における照合スコアが第３のしきい値以上の登録画像を、被験者の顔画像と照合してもよい。その場合、第２の顔認証における照合回数を削減して、認証処理に要する時間を削減できる。
　続いて、認証装置１１０のハードウェア構成を説明する。図７は、認証装置１１０のハードウェア構成の例を示す。認証装置１１０は、プロセッサ（ＣＰＵ：Central Processing Unit）５０１、ＲＯＭ（read only memory）５０２、及びＲＡＭ（random access memory）５０３を有する。認証装置１１０において、プロセッサ５０１、ＲＯＭ５０２、及びＲＡＭ５０３は、バス５０４を介して相互に接続される。認証装置１１０は、図示は省略するが、周辺回路、通信回路、及びインタフェース回路などの他の回路を含み得る。
　ＲＯＭ５０２は、不揮発性の記憶装置である。ＲＯＭ５０２には、例えば比較的容量が少ないフラッシュメモリなどの半導体記憶装置が用いられる。ＲＯＭ５０２は、プロセッサ５０１が実行するプログラムを格納する。
　上記プログラムは、コンピュータに読み込まれた場合に、実施形態で説明された１又はそれ以上の機能をコンピュータに行わせるための命令群（又はソフトウェアコード）を含む。プログラムは、非一時的なコンピュータ可読媒体又は実体のある記憶媒体に格納されてもよい。限定ではなく例として、コンピュータ可読媒体又は実体のある記憶媒体は、ＲＡＭ、ＲＯＭ、フラッシュメモリ、solid-state drive（SSD）又はその他のメモリ技術、Compact Disc (CD)、digital versatile disc（DVD）、Blu-ray（登録商標）ディスク又はその他の光ディスクストレージ、磁気カセット、磁気テープ、磁気ディスクストレージ又はその他の磁気ストレージデバイスを含む。プログラムは、一時的なコンピュータ可読媒体又は通信媒体上で送信されてもよい。限定ではなく例として、一時的なコンピュータ可読媒体又は通信媒体は、電気的、光学的、音響的、またはその他の形式の伝搬信号を含む。
　ＲＡＭ５０３は、揮発性の記憶装置である。ＲＡＭ５０３には、ＤＲＡＭ（Dynamic Random Access Memory）又はＳＲＡＭ（Static Random Access Memory）などの各種半導体メモリデバイスが用いられる。ＲＡＭ５０３は、データなどを一時的に格納する内部バッファとして用いられ得る。
　プロセッサ５０１は、ＲＯＭ５０２に格納されたプログラムをＲＡＭ５０３に展開し、プログラムを実行する。ＣＰＵ５０１がプログラムを実行することで、認証装置１１０内の各部の機能が実現され得る。
　なお、認証装置１１０は、必ずしも単一の装置である必要はない。認証装置１１０は、物理的に分離された複数の装置を用いて構成されていてもよい。また、認証装置１１０が車室内エントリに使用される場合において、認証装置１１０は、必ずしも全ての機能が車両に搭載されている必要はない。例えば、認証装置１１０の各部は、車両の外部に配置されていてもよい。その場合、認証装置１１０は、無線通信ネットワークを介して、カメラ１３０のカメラ画像を取得してもよい。認証装置１１０は、認証結果を、無線通信ネットワークを介して車両に送信してもよい。
　以上、本開示の実施形態を詳細に説明したが、本開示は、上記した実施形態に限定されるものではなく、本開示の趣旨を逸脱しない範囲で上記実施形態に対して変更や修正を加えたものも、本開示に含まれる。
　例えば、上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
［付記１］
　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、
　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを備え、
　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する、認証装置。
［付記２］
　前記認証手段は、前記第１の認証において、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれとを照合する、付記１に記載の認証装置。
［付記３］
　前記認証手段は、前記第１の認証において、前記１以上の登録者のそれぞれに対して、前記認証対象者の顔画像と前記登録画像との一致度を示す照合スコアを計算し、該計算した認証スコアと第１のしきい値とを比較し、該比較の結果に基づいて、前記第１の認証に成功したか否かを判断する、付記２に記載の認証装置。
［付記４］
　前記認証手段は、前記照合スコアが最も高い登録者の照合スコアが前記第１のしきい値以上の場合、前記第１の認証に成功したと判断し、前記照合スコアが最も高い登録者の照合スコアが前記第１のしきい値より小さい場合、前記第１の認証に失敗したと判断する、付記３に記載の認証装置。
［付記５］
　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者は前記照合スコアが最も高い登録者であると識別する、付記４に記載の認証装置。
［付記６］
　前記認証手段は、前記第２の認証では、前記第１の認証における各登録者の認証スコアに基づいて、前記顔情報記憶部から前記認証に成功した顔情報を取得し、該取得した顔情報を、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と照合する、付記３から５何れか１項に記載の認証装置。
［付記７］
　前記認証手段は、前記顔情報記憶部から、前記第１の認証において前記照合スコアが最も高かった登録者の、前記認証に成功した顔情報を取得する、付記６に記載の認証装置。
［付記８］
　前記認証手段は、前記第１の認証に失敗した場合、前記第１の認証における、前記照合スコアが最も高い登録者の照合スコアと、前記第１のしきい値より小さい第２のしきい値とを比較し、前記照合スコアが最も高い登録者の照合スコアが前記第２のしきい値以上の場合、前記顔情報記憶部から前記認証に成功した顔情報を取得する、付記７に記載の認証装置。
［付記９］
　前記認証手段は、前記照合スコアが最も高い登録者の照合スコアが前記第２のしきい値より小さい場合、前記第１の認証をやり直す、付記８に記載の認証装置。
［付記１０］
　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれ、及び前記認証に成功した顔情報とを照合する、付記２から９何れか１項に記載の認証装置。
［付記１１］
　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者のうち、前記第１の認証における前記照合スコアが前記第１のしきい値より小さい第３のしきい値以上の登録者の登録画像又は該登録画像から抽出された特徴量、及び前記認証に成功した顔情報とを照合する、付記３から９何れか１項に記載の認証装置。
［付記１２］
　前記撮像画像は、屋外にいる認証対象者を撮影した画像である、付記１から１１何れか１項に記載の認証装置。
［付記１３］
　認証対象者を撮影する撮像装置と、
　前記撮像装置から撮像画像を取得し、前記認証対象者を認証する認証装置とを備え、
　前記認証装置は、
　前記撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、
　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを有し、
　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する、認証システム。
［付記１４］
　前記認証手段は、前記第１の認証において、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれとを照合する、付記１３に記載の認証システム。
［付記１５］
　前記認証手段は、前記第１の認証において、前記１以上の登録者のそれぞれに対して、前記認証対象者の顔画像と前記登録画像との一致度を示す照合スコアを計算し、該計算した認証スコアと第１のしきい値とを比較し、該比較の結果に基づいて、前記第１の認証に成功したか否かを判断する、付記１４に記載の認証システム。
［付記１６］
　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれ、及び前記認証に成功した顔情報とを照合する、付記１４又は１５に記載の認証システム。
［付記１７］
　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、
　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、
　前記第１の認証に成功したか否かを判断し、
　前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、
　前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを有する認証方法。
［付記１８］
　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、
　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、
　前記第１の認証に成功したか否かを判断し、
　前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、
　前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを有する処理をコンピュータに実施させるためのプログラムを格納する非一時的なコンピュータ可読媒体。
１０：認証システム
２０：認証装置
２１：顔画像取得手段
２２：認証手段
３０：撮像装置
１００：認証システム
１１０：認証装置
１１１：画像取得部
１１２：顔検知部
１１３：顔情報記憶部
１１４：照合部
１３０：カメラ
５０１：プロセッサ
５０２：ＲＯＭ
５０３：ＲＡＭ
５０４：バス

Claims (18)

  1. 　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、
    　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを備え、
    　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する、認証装置。
  2. 　前記認証手段は、前記第１の認証において、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれとを照合する、請求項１に記載の認証装置。
  3. 　前記認証手段は、前記第１の認証において、前記１以上の登録者のそれぞれに対して、前記認証対象者の顔画像と前記登録画像との一致度を示す照合スコアを計算し、該計算した認証スコアと第１のしきい値とを比較し、該比較の結果に基づいて、前記第１の認証に成功したか否かを判断する、請求項２に記載の認証装置。
  4. 　前記認証手段は、前記照合スコアが最も高い登録者の照合スコアが前記第１のしきい値以上の場合、前記第１の認証に成功したと判断し、前記照合スコアが最も高い登録者の照合スコアが前記第１のしきい値より小さい場合、前記第１の認証に失敗したと判断する、請求項３に記載の認証装置。
  5. 　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者は前記照合スコアが最も高い登録者であると識別する、請求項４に記載の認証装置。
  6. 　前記認証手段は、前記第２の認証では、前記第１の認証における各登録者の認証スコアに基づいて、前記顔情報記憶部から前記認証に成功した顔情報を取得し、該取得した顔情報を、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と照合する、請求項３から５何れか１項に記載の認証装置。
  7. 　前記認証手段は、前記顔情報記憶部から、前記第１の認証において前記照合スコアが最も高かった登録者の、前記認証に成功した顔情報を取得する、請求項６に記載の認証装置。
  8. 　前記認証手段は、前記第１の認証に失敗した場合、前記第１の認証における、前記照合スコアが最も高い登録者の照合スコアと、前記第１のしきい値より小さい第２のしきい値とを比較し、前記照合スコアが最も高い登録者の照合スコアが前記第２のしきい値以上の場合、前記顔情報記憶部から前記認証に成功した顔情報を取得する、請求項７に記載の認証装置。
  9. 　前記認証手段は、前記照合スコアが最も高い登録者の照合スコアが前記第２のしきい値より小さい場合、前記第１の認証をやり直す、請求項８に記載の認証装置。
  10. 　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれ、及び前記認証に成功した顔情報とを照合する、請求項２から９何れか１項に記載の認証装置。
  11. 　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者のうち、前記第１の認証における前記照合スコアが前記第１のしきい値より小さい第３のしきい値以上の登録者の登録画像又は該登録画像から抽出された特徴量、及び前記認証に成功した顔情報とを照合する、請求項３から９何れか１項に記載の認証装置。
  12. 　前記撮像画像は、屋外にいる認証対象者を撮影した画像である、請求項１から１１何れか１項に記載の認証装置。
  13. 　認証対象者を撮影する撮像装置と、
    　前記撮像装置から撮像画像を取得し、前記認証対象者を認証する認証装置とを備え、
    　前記認証装置は、
    　前記撮像画像から前記認証対象者の顔画像を取得する顔画像取得手段と、
    　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施する認証手段とを有し、
    　前記認証手段は、前記第１の認証に成功した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、前記第１の認証に失敗した場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施する、認証システム。
  14. 　前記認証手段は、前記第１の認証において、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれとを照合する、請求項１３に記載の認証システム。
  15. 　前記認証手段は、前記第１の認証において、前記１以上の登録者のそれぞれに対して、前記認証対象者の顔画像と前記登録画像との一致度を示す照合スコアを計算し、該計算した認証スコアと第１のしきい値とを比較し、該比較の結果に基づいて、前記第１の認証に成功したか否かを判断する、請求項１４に記載の認証システム。
  16. 　前記認証手段は、前記第２の認証では、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記１以上の前記登録者の登録画像又は各登録画像から抽出された特徴量のそれぞれ、及び前記認証に成功した顔情報とを照合する、請求項１４又は１５に記載の認証システム。
  17. 　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、
    　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、
    　前記第１の認証に成功したか否かを判断し、
    　前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、
    　前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを有する認証方法。
  18. 　認証対象者を撮影する撮像装置から取得された撮像画像から前記認証対象者の顔画像を取得し、
    　前記取得された認証対象者の顔画像又は該顔画像から抽出された特徴量と登録者の登録画像又は該登録画像から抽出された特徴量とを照合する第１の認証を実施し、
    　前記第１の認証に成功したか否かを判断し、
    　前記第１の認証に成功したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量を、前記登録者の認証に成功した顔情報として顔情報記憶部に記憶し、
    　前記第１の認証に失敗したと判断された場合、前記認証対象者の顔画像又は該顔画像から抽出された特徴量と、前記顔情報記憶部に記憶される前記認証に成功した顔情報とを照合することを含む第２の認証を実施することを有する処理をコンピュータに実施させるためのプログラムを格納する非一時的なコンピュータ可読媒体。
PCT/JP2022/002418 2022-01-24 2022-01-24 認証装置、システム、方法、及びコンピュータ可読媒体 WO2023139786A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/002418 WO2023139786A1 (ja) 2022-01-24 2022-01-24 認証装置、システム、方法、及びコンピュータ可読媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/002418 WO2023139786A1 (ja) 2022-01-24 2022-01-24 認証装置、システム、方法、及びコンピュータ可読媒体

Publications (1)

Publication Number Publication Date
WO2023139786A1 true WO2023139786A1 (ja) 2023-07-27

Family

ID=87348458

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/002418 WO2023139786A1 (ja) 2022-01-24 2022-01-24 認証装置、システム、方法、及びコンピュータ可読媒体

Country Status (1)

Country Link
WO (1) WO2023139786A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002259980A (ja) * 2001-03-05 2002-09-13 Omron Corp 生体照合装置、生体照合システム、生体照合方法および登録データ更新方法
JP2013077068A (ja) * 2011-09-29 2013-04-25 Sogo Keibi Hosho Co Ltd 顔認証データベース管理方法、顔認証データベース管理装置及び顔認証データベース管理プログラム
JP2021086346A (ja) * 2019-11-27 2021-06-03 株式会社日立ビルシステム 入退室管理システム及び入退室管理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002259980A (ja) * 2001-03-05 2002-09-13 Omron Corp 生体照合装置、生体照合システム、生体照合方法および登録データ更新方法
JP2013077068A (ja) * 2011-09-29 2013-04-25 Sogo Keibi Hosho Co Ltd 顔認証データベース管理方法、顔認証データベース管理装置及び顔認証データベース管理プログラム
JP2021086346A (ja) * 2019-11-27 2021-06-03 株式会社日立ビルシステム 入退室管理システム及び入退室管理方法

Similar Documents

Publication Publication Date Title
KR101773233B1 (ko) 생체인증 인식불능 반복 상황 처리 방법
KR100860954B1 (ko) 바이오메트릭 영상들의 등록 및 인증 방법 및 장치
US20100079243A1 (en) Authentication system, authentication method, and authentication program
US10769415B1 (en) Detection of identity changes during facial recognition enrollment process
US8972727B2 (en) Method of identification or authorization, and associated system and secure module
US20210134099A1 (en) Access control for access restricted domains using first and second biometric data
US20210216617A1 (en) Biometric authentication device, biometric authentication method, and computer-readable recording medium recording biometric authentication program
KR20180068097A (ko) 사용자 인식 장치 및 방법
JP2006085268A (ja) 生体認証システムおよび生体認証方法
JP6164284B2 (ja) 認証装置、認証方法およびコンピュータプログラム
US20230139161A1 (en) Systems and methods for verifying user activity using behavioral models
US11507690B2 (en) Method of enrolling data to control an identity, and identity-control method
WO2023139786A1 (ja) 認証装置、システム、方法、及びコンピュータ可読媒体
US20150302060A1 (en) Method of identification
KR100882281B1 (ko) 생체인식장치의 사용자 인증 방법
JP2006085289A (ja) 顔認証システムおよび顔認証方法
WO2023166553A1 (ja) 更新通知装置、認証装置、更新通知方法、及びコンピュータ可読媒体
US20230008004A1 (en) Authentication method, non-transitory computer-readable storage medium for storing authentication program, and information processing apparatus
JP2018169776A (ja) 認証装置、認証方法、及びプログラム
WO2014050381A1 (ja) 生体認証装置、生体認証方法、及びコンピュータ読み取り可能な記録媒体
US11977555B2 (en) Biometric data distributed management system, and biometric recognition method using same
WO2023175781A1 (ja) 認証装置、認証方法、プログラム
WO2024127449A1 (ja) 車両ドア制御装置、方法、及びコンピュータ可読媒体
JP2007011710A (ja) 認証装置及び認証方法
US20240201790A1 (en) Information processing apparatus, vehicle controlling system, information processing method, and non-transitory computer-readable medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22921943

Country of ref document: EP

Kind code of ref document: A1