WO2021256099A1 - 顔認証方法 - Google Patents

顔認証方法 Download PDF

Info

Publication number
WO2021256099A1
WO2021256099A1 PCT/JP2021/016855 JP2021016855W WO2021256099A1 WO 2021256099 A1 WO2021256099 A1 WO 2021256099A1 JP 2021016855 W JP2021016855 W JP 2021016855W WO 2021256099 A1 WO2021256099 A1 WO 2021256099A1
Authority
WO
WIPO (PCT)
Prior art keywords
face
person
face recognition
image
exclusion condition
Prior art date
Application number
PCT/JP2021/016855
Other languages
English (en)
French (fr)
Inventor
弘基 横山
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US18/010,098 priority Critical patent/US20230267788A1/en
Priority to JP2022532362A priority patent/JP7400975B2/ja
Publication of WO2021256099A1 publication Critical patent/WO2021256099A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/30—Individual registration on entry or exit not involving the use of a pass
    • G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05B—LOCKS; ACCESSORIES THEREFOR; HANDCUFFS
    • E05B49/00—Electric permutation locks; Circuits therefor ; Mechanical aspects of electronic locks; Mechanical keys therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/10—Movable barriers with registering means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Definitions

  • the present invention relates to a face recognition method, a face recognition device, and a program.
  • one problem is that even if a companion who accompanies the registrant can enter with a tailgating, such as a child of the registrant, the companion is not allowed to enter. Therefore, when a companion enters the venue, it is necessary to register the companion, which complicates the procedure. Further, as another problem, it is necessary to perform face recognition processing for all persons who can be seen by the camera even if they are accompanied, which increases the processing load for calculating the feature amount of the face image. In this way, in a situation where a companion is accompanied by a registrant, if security is improved as described above, the procedure becomes complicated and the load of face recognition processing increases, so that it is smooth. There is a problem that the face recognition process becomes difficult.
  • an object of the present invention is to provide a face recognition method capable of solving the above-mentioned problem that the face recognition process cannot be smoothly performed when a companion is accompanied by a registrant. To do.
  • the face recognition method which is one embodiment of the present invention, is Extract multiple face images in the captured image and Based on at least one of the face images, it is determined whether or not the person in the face image satisfies the exclusion condition of the face recognition process.
  • the face image of a person satisfying the exclusion condition is excluded, and a face authentication process for authenticating whether or not the person in the face image is a person registered in advance with respect to the other face images is performed. It takes the composition.
  • the face recognition device which is one embodiment of the present invention, is Extraction means to extract multiple face images in the captured image, A determination means for determining whether or not the person in the face image satisfies the exclusion condition of the face authentication process based on at least one of the face images.
  • An authentication means that performs face authentication processing for excluding the face image of a person satisfying the exclusion condition and certifying whether or not the person in the face image is a person registered in advance with respect to the other face image. With, It takes the composition.
  • the program which is one form of the present invention is For information processing equipment Extraction means to extract multiple face images in the captured image, A determination means for determining whether or not the person in the face image satisfies the exclusion condition of the face authentication process based on at least one of the face images. An authentication means that performs face authentication processing for excluding the face image of a person satisfying the exclusion condition and certifying whether or not the person in the face image is a person registered in advance with respect to the other face image. To realize, It takes the composition.
  • the present invention is configured as described above, so that the face recognition process can be smoothly performed when a companion is accompanied by the registrant.
  • FIG. 1 It is a figure which shows an example of the whole structure and the usage situation of the face recognition system in Embodiment 1 of this invention. It is a block diagram which shows the structure of the face recognition apparatus disclosed in FIG. It is a figure which shows an example of the processing of the photographed image by the face recognition apparatus disclosed in FIG. It is a figure which shows another example of the usage situation of the face recognition system disclosed in FIG. It is a figure which shows another example of the usage situation of the face recognition system disclosed in FIG. It is a figure which shows the other example of the processing of the photographed image by the face recognition apparatus disclosed in FIG. It is a flowchart which shows the processing operation by the face recognition apparatus disclosed in FIG.
  • FIGS. 1 to 7. are diagrams for explaining the configuration of the face authentication system
  • FIG. 7 is a diagram for explaining the processing operation of the face authentication system.
  • the face recognition system in the present invention is a system used to authenticate a person from a face image of the person in a specific place such as an office, a store, or an event venue, and to restrict or manage the entry and exit of the person.
  • a specific place is an unmanned store, and from the viewpoint of security, a person registered in advance by taking a face image of a person entering in front of a gate G (door) installed at the entrance / exit of the store. It is determined by face recognition whether or not it is, and if the authentication is successful, the gate G is opened to allow the person to enter.
  • the face recognition system of the present invention is not necessarily limited to being installed at the gate G of the store, and may be installed at any place. Further, the face recognition system of the present invention does not necessarily have to open the gate G according to the result of face recognition, and may be used for any processing such as using the result of face recognition for payment.
  • the face recognition system is installed at an arbitrary location, such as a gate G installed in an unmanned store, a camera C which is a photographing device installed next to the gate G, and a display D which is a display device. It is equipped with a face recognition device 1 and the like.
  • the gate G is an automatic door that serves as an entrance / exit to an unmanned store, and is opened / closed in response to a command from the face recognition device 1 as described later.
  • the gate G is dedicated to the entrance to the unmanned store.
  • the camera C is installed at a position where a user who visits an unmanned store, that is, a user standing in front of the gate G, can be photographed.
  • the height and angle of view of the camera C are set so that an image including the face of a user of any height can be captured. Then, the camera C constantly captures an image and transfers the captured image to the face recognition device 1.
  • the position where the camera C is installed is not limited to the above-mentioned position.
  • the display D is installed below the camera C, and is installed at a position where it can be visually recognized by a user who turns his face to the camera C for face recognition. Then, the display D displays, for example, information indicating success or failure of authentication as a result of the face recognition process transmitted from the face recognition device 1 as described later.
  • the position where the display D is installed is not limited to the above-mentioned position.
  • the face recognition device 1 is composed of one or a plurality of information processing devices including an arithmetic unit and a storage device. Then, as shown in FIG. 2, the face recognition device 1 includes an image acquisition unit 11, a face extraction unit 12, an exclusion determination unit 13, a face authentication unit 14, and a gate control unit 15. The functions of the image acquisition unit 11, the face extraction unit 12, the exclusion determination unit 13, the face authentication unit 14, and the gate control unit 15 are such that the arithmetic unit executes a program for realizing each function stored in the storage device. , Can be realized. Further, the face recognition device 1 includes a user information storage unit 16. The user information storage unit 16 is composed of a storage device. Hereinafter, each configuration will be described in detail.
  • the image acquisition unit 11 first acquires a facial image of a user who wishes to be registered in an unmanned store, and stores the facial image in the user information storage unit 16. For example, when the person P1 shown in FIG. 1 wishes to become a registrant of an unmanned store, the face image taken by the person P1 himself or the face image of the person P1 taken by the person in charge of the store is acquired. And store it as user information. As for the face image of the person P1 as a registrant, the feature amount of the face image may be calculated and the feature amount may be stored as described later. Further, the user information includes a name, contact information, payment information, and the like, as well as a face image of the person P1 who is a registrant.
  • the image acquisition unit 11 receives images taken by the camera C in front of the gate G of the unmanned store at regular time intervals. For example, as shown in FIG. 1, when two people P1 and P2 are located in front of the store, as shown in FIG. 3, a photographed image including the facial images of the two people P1 and P2 is captured. It will be acquired.
  • the two persons P1 and P2 shown in FIG. 1 are the registrant P1 of the unmanned store, and the other one is not registered for use in the unmanned store and is a child of the registrant P1. , The companion P2 who visited the unmanned store with the registrant P1.
  • the face extraction unit 12 extracts a person in the photographed image from the shape, color, movement, etc. of the object reflected in the photographed image, and further extracts the face image area of the person. For example, as shown in FIG. 3, the face extraction unit 12 extracts the face image area R1 of the registrant person P1 and the face image area R2 of the companion person P2, respectively. At this time, when a plurality of face images appearing at the same time exist in the captured image, the face extraction unit 12 collectively extracts a plurality of face image areas and associates the plurality of face image areas with each other. For example, as shown in FIG.
  • the exclusion determination unit 13 determines whether or not the persons P1 and P2 in the face image areas R1 and R2 extracted as shown in FIG. 3 satisfy the exclusion condition of the face authentication process described later. At this time, when the plurality of face image areas R1 and R2 are extracted, the exclusion determination unit 13 satisfies the exclusion condition of the face recognition process for each person P1 and P2 in each face image area R1 and R2. Judge whether or not. Specifically, the exclusion determination unit 13 detects the age (age) of each person P1 and P2 as an attribute of each person P1 and P2 based on the face image of each face image area R1 and R2, and the attribute is Determine if the exclusion condition is met.
  • the exclusion determination unit 13 detects the age from the features on the facial images by performing preset analysis processing on the facial images of the persons P1 and P2. For example, when the exclusion determination unit 13 detects an age group such as "old man”, “adult”, or “child”, in the example of FIG. 3, the person P1 is detected as an attribute such as "adult”, and the person P2. Detects as an attribute such as "children”.
  • the exclusion determination unit 13 indicates that the person P1 does not satisfy the exclusion condition of the face authentication process and the person P2 does not satisfy the exclusion condition. It is determined that the exclusion condition of the face recognition process is satisfied.
  • the exclusion determination unit 13 calculates the value of the age of the person based on the face image, and if it is lower than the threshold age that can be determined as a preset child, the exclusion condition of the face authentication process is satisfied. You may judge.
  • the exclusion determination unit 13 determines whether or not the exclusion condition of the face authentication process is satisfied for the person in at least one face image area. May be determined.
  • the attribute may be detected only for the face image area R2 of the person P2, and it may be determined whether or not the person P2 satisfies the exclusion condition of the face authentication process.
  • the face image area R2 of the person P2 satisfies the exclusion condition of the face authentication process, but the face image area R1 of the undetermined person P1 is treated as not satisfying the exclusion condition of the face authentication process.
  • the face recognition process will be performed as described later.
  • the exclusion determination unit 13 is not necessarily limited to detecting an attribute such as the age of a person by using only the face image in the face image area.
  • the attributes of a person may be detected by using the height of the person detected from the captured image, the posture of the person, the size of the face area, and the like.
  • three people P11, P12, and P13 are shown in the captured image, but one person for two people P11 and P12 is combined with age detection by the feature on the face image.
  • the attribute of the person P13 may be determined as "child" based on the height difference of the person P13. Further, in the example of FIG.
  • the face image areas R21 and R22 of the two persons P21 and P22 are extracted, and the attributes of the persons P21 and P22 are determined based on the distances of the face image areas R21 and R22. It may be detected.
  • the two face image areas R21 and R22 are located at extremely short distances and within a preset distance range, it is determined that an adult is holding a child, and one person The attribute of the person P21 may be detected as "adult", and the attribute of the other person P22 may be detected as "child”.
  • the exclusion determination unit 13 may detect the attributes of the persons P21 and P22 by referring to the positional relationship and posture of the persons P21 and P22.
  • the exclusion determination unit 13 may detect not only age but also other attributes as the attributes of the person. For example, the exclusion determination unit 13 may detect an attribute such as the gender of a person based on the characteristics of the face image in the face image area. In this case, the exclusion determination unit 13 determines, for example, that when the unmanned store is a store that handles products for women, a person with a female attribute satisfies the exclusion condition of the face recognition process.
  • the attributes and exclusion conditions detected by the exclusion determination unit 13 described above are examples, and any attributes may be detected and any exclusion conditions may be set.
  • the exclusion determination unit 13 detection processing of a person's attribute, analysis processing is performed on a person image including a person's face image, but the processing load and calculation amount of the analysis processing will be described later. It is smaller than the processing load and the calculation amount at the time of calculating the feature amount of the face image performed at the time of the face recognition processing of the person.
  • the exclusion determination unit 13 exemplifies a case where the face image is analyzed to detect age features and a case where the face distance is calculated, but these analysis processes are face recognition of a person. This processing is less than the processing load and calculation amount in the face image feature amount calculation performed at the time of processing.
  • the face recognition unit 14 excludes the face image area determined to satisfy the exclusion condition of the face recognition process as described above, and only for the face image area determined not to satisfy the exclusion condition. Perform face recognition processing. Therefore, in the example of FIG. 3, the face recognition process is performed on the face image area R1 of the person P1 whose attribute is determined to be "adult", and the face image area R2 of the person P2 whose attribute is determined to be "child” is performed. Face recognition processing is not performed on the face. Specifically, the face recognition unit 14 first calculates the feature amount of the face image in the face image area as the face recognition process.
  • the similarity between the calculated feature amount and the feature amount of the face image of the registrant stored in the user information storage unit 16 is calculated, and the person P1 is the registrant from the similarity degree. Authenticate whether or not. At this time, if the similarity between the features of the face image is equal to or higher than the threshold value, it is determined that the person P1 is the registrant, and it is determined that the face authentication process is successful. However, as described above, the face image area for which the face authentication process is performed by the face authentication unit 14 is treated as not satisfying the exclusion condition because it is not determined whether or not the exclusion condition is satisfied. Will also be included.
  • the face recognition unit 14 performs face recognition processing on the face image areas of the two persons P11 and P12 whose attributes are determined to be "adults", respectively, and the attribute is "children". The face recognition process is not performed on the face image area of the person P13 determined to be. Further, in the example of FIG. 6, the face recognition unit 14 performs face recognition processing on the face image area of the person P21 whose attribute is determined to be "adult", and the person P22 whose attribute is determined to be "child”. Face recognition processing is not performed on the face image area of.
  • the gate control unit 15 controls to open the gate G when the face recognition process described above is successful.
  • the gate control unit 15 opens the gate G without performing the face authentication process of the person P2 who is the companion and registers.
  • the person P1 who is a person and the person P2 who is a companion are allowed to enter the unmanned store.
  • the gate control unit 15 when the persons P11 and P12 are registrants and the face authentication processing of the persons P11 and P12 is successful, the face authentication of the accompanying person P13 is performed.
  • the gate G is opened without any processing, and the registrants P11 and P12 and the accompanying person P13 are allowed to enter the unmanned store.
  • the gate control unit 15 may control to open the gate only when the authentication of all the persons P11 and P12 who have performed the face authentication process is successful, but the gate control unit 15 may control the gate to be opened, but the plurality of persons P11 who have performed the face authentication process.
  • the gate may be opened. That is, if there is even one registrant for a group of a plurality of persons and the face recognition process is successful, the gate may be opened to allow all other companions to enter. Further, in the example of FIG.
  • the gate control unit 15 performs the face authentication process of the person P22 who is the companion. Instead, the gate G is opened to allow the registrant P21 and the companion P22 to enter the unmanned store.
  • the gate control unit 15 may receive the result of the face authentication process and output the information according to the result of the face authentication process to the display D. For example, the gate control unit 15 outputs to indicate that the face recognition process is successful or that the gate G is opened, and if the face recognition process fails, the gate control unit 15 indicates that the authentication has failed. Output to display the information that the gate G cannot be opened.
  • the gate control unit 15 may output any information by any device, such as outputting an alarm to the effect that authentication has failed by turning on a lamp (not shown) installed around the gate G.
  • the face recognition device 1 always acquires an image taken in front of the gate G, which is the entrance of the unmanned store, from the camera C (step S1). Then, the face recognition device 1 extracts a face image area of a person from the acquired photographed image. For example, as shown in FIG. 3, the face recognition device 1 extracts the face image area R1 of the registrant person P1 and the face image area R2 of the companion person P2 (step S2).
  • step S4 when the face recognition device 1 has a plurality of face image areas R1 and R2 extracted as shown in FIG. 3 (Yes in step S3), the face recognition device 1 of each person P1 and P2 in each face image area R1 and R2. Detect age (step S4). For example, in the example of FIG. 3, the ages of the persons P1 and P2 are detected from the features of the face images in the face image areas R1 and R2. Further, in the example of FIG. 6, since the distances of the face image areas R21 and R22 are short, the ages of the persons P1 and P2 are detected.
  • the face recognition device 1 determines that the child person satisfies the exclusion condition of the face authentication process, and determines that the face image area of the person is satisfied. Is excluded from the face recognition process (step S6). For example, in the example of FIG. 3, when the face recognition device 1 detects that the person P1 is the age of an "adult” and the person P2 is the age of a "child", the person P1 satisfies the exclusion condition of the face recognition process. Instead, it is determined that the person P2 satisfies the exclusion condition of the face recognition process. In this way, the face recognition device 1 detects the attribute of the person before calculating the feature amount of the face image for face recognition in the face recognition processing later, and determines whether or not the exclusion condition of the face recognition processing is satisfied. Is determined.
  • the face recognition device 1 performs face recognition processing only on the face image area determined not to satisfy the exclusion condition, excluding the face image area determined to satisfy the exclusion condition of the face recognition processing. Therefore, in the examples of FIGS. 3 and 6, the face recognition process is performed on the face image area R1 of the person P1 whose attribute is determined to be "adult", and the face of the person P2 whose attribute is determined to be "child". Face recognition processing is not performed on the image area R2. Specifically, as the face recognition process, the face recognition device 1 first calculates the feature amount for the face recognition process of the face image in the face image area R1 (step S7).
  • step S8 the similarity between the calculated feature amount and the feature amount of the face image of the registrant registered in advance as user information is calculated, and whether or not the person P1 is a registrant is obtained from the similarity. Authentication is performed (step S8).
  • the face recognition device 1 determines that the person P1 is a registrant, and if the face recognition process is successful (Yes in step S9), the face recognition device 1 controls to open the gate G (step S10). On the other hand, when the face recognition process fails, the face recognition device 1 outputs alarm information indicating that the authentication has failed or that the gate cannot be released (step S11).
  • the face images of a plurality of persons are extracted, it is determined from the face images whether or not the person satisfies the exclusion condition of the face recognition process, and the face image satisfying the exclusion condition is a face.
  • Face recognition processing is performed only for other face images without performing authentication. Therefore, if the companion of the person who is the registrant who should perform face recognition meets the exclusion condition of the face recognition processing such as a child, the face recognition processing of the companion is not performed, so that extra face recognition is performed. It is possible to suppress the processing from being executed.
  • FIGS. 8 to 10 are block diagrams showing the configuration of the face recognition device according to the second embodiment
  • FIG. 10 is a flowchart showing the operation of the face recognition device.
  • the outline of the configuration of the face recognition device and the face recognition method described in the above-described embodiment is shown.
  • the face recognition device 100 is composed of a general information processing device, and is equipped with the following hardware configuration as an example.
  • -CPU Central Processing Unit
  • -ROM Read Only Memory
  • RAM Random Access Memory
  • 103 storage device
  • -Program group 104 loaded in RAM 103
  • a storage device 105 for storing the program group 104.
  • a drive device 106 that reads / writes the storage medium 110 external to the information processing device.
  • -Communication interface 107 that connects to the communication network 111 outside the information processing device.
  • -I / O interface 108 for inputting / outputting data -Bus 109 connecting each component
  • the face recognition device 100 can construct and equip the extraction means 121, the determination means 122, and the authentication means 123 shown in FIG. 9 by acquiring the program group 104 by the CPU 101 and executing the program group 104. ..
  • the program group 104 is stored in, for example, a storage device 105 or a ROM 102 in advance, and the CPU 101 loads the program group 104 into the RAM 103 and executes the program group 104 as needed. Further, the program group 104 may be supplied to the CPU 101 via the communication network 111, or may be stored in the storage medium 110 in advance, and the drive device 106 may read the program and supply the program to the CPU 101.
  • the extraction means 121, the determination means 122, and the authentication means 123 described above may be constructed by a dedicated electronic circuit for realizing such means.
  • FIG. 8 shows an example of the hardware configuration of the information processing device, which is the face recognition device 100, and the hardware configuration of the information processing device is not limited to the above case.
  • the information processing device may be configured from a part of the above-mentioned configuration, such as not having the drive device 106.
  • the face recognition device 100 executes the face recognition method shown in the flowchart of FIG. 10 by the functions of the extraction means 121, the determination means 122, and the authentication means 123 constructed by the program as described above.
  • the face recognition device 100 is Extracting a plurality of face images in the captured image (step S101), Based on at least one of the face images, it is determined whether or not the person in the face image satisfies the exclusion condition of the face authentication process (step S102). The face image of a person satisfying the exclusion condition is excluded, and a face authentication process for authenticating whether or not the person in the face image is a person registered in advance with respect to the other face images is performed (step S103). , Is executed.
  • the present invention is configured as described above, extracts facial images of a plurality of persons, determines whether or not the person satisfies the exclusion condition of the face recognition process from the face image, and satisfies the exclusion condition. Face recognition is not performed for face images, and face recognition processing is performed only for other face images. Therefore, if the companion of the person who is the registrant who should perform face recognition meets the exclusion condition of the face recognition processing, the face recognition processing of the companion is not performed, so that extra face recognition processing is performed. It is possible to suppress the execution and realize smooth face recognition processing.
  • Non-temporary computer-readable media include various types of tangible storage media.
  • Examples of non-temporary computer-readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg, magneto-optical disks), CD-ROMs (ReadOnlyMemory), CD-Rs, Includes CD-R / W, semiconductor memory (eg, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (RandomAccessMemory)).
  • the program may also be supplied to the computer by various types of temporary computer readable medium. Examples of temporary computer-readable media include electrical, optical, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • the invention of the present application has been described above with reference to the above-described embodiments and the like, the invention of the present application is not limited to the above-described embodiments. Various changes that can be understood by those skilled in the art can be made to the structure and details of the present invention within the scope of the present invention. Further, at least one or more of the functions of the extraction means 121, the determination means 122, and the authentication means 123 described above may be executed by an information processing device installed and connected to any place on the network, that is, , May be executed by so-called cloud computing.
  • Appendix 2 The face recognition method described in Appendix 1 An attribute of a person in the face image is detected based on at least one of the face images, and it is determined whether or not the exclusion condition is satisfied based on the attribute. Face recognition method. (Appendix 3) The face recognition method described in Appendix 2, The age of the person in the face image is detected based on at least one of the face images, and it is determined whether or not the exclusion condition is satisfied based on the age. Face recognition method. (Appendix 4) The face recognition method described in Appendix 3 When the age of the person in the facial image is an age that can be determined to be a child according to a preset standard, it is determined that the exclusion condition is satisfied. Face recognition method.
  • Face recognition method Before performing the feature amount calculation for the face image required for the face recognition processing, it is determined whether or not the person in the face image satisfies the exclusion condition based on the face image.
  • Face recognition method (Appendix 7) The face recognition method according to any one of Supplementary note 1 to 6, wherein the face recognition method is used.
  • the face recognition process for at least one other face image excluding the face image of a person who satisfies the exclusion condition is successful among the plurality of face images simultaneously extracted from the captured image, it is predetermined. Control to open the gate of Face recognition method.
  • Appendix 8 The face recognition method described in Appendix 7 When the face recognition process for all the other face images excluding the face image of the person who satisfies the exclusion condition is successful among the plurality of face images simultaneously extracted from the captured image, a predetermined value is specified. Control to open the gate, Face recognition method. (Appendix 9) Extraction means to extract multiple face images in the captured image, A determination means for determining whether or not the person in the face image satisfies the exclusion condition of the face authentication process based on at least one of the face images. An authentication means that performs face authentication processing for excluding the face image of a person satisfying the exclusion condition and certifying whether or not the person in the face image is a person registered in advance with respect to the other face image.
  • Face recognition device equipped with (Appendix 9.1) The face recognition device according to Appendix 9, The determination means detects an attribute of a person in the face image based on at least one face image, and determines whether or not the exclusion condition is satisfied based on the attribute. Face recognition device. (Appendix 9.2) The face recognition device described in Appendix 9.1. The determination means detects the age of a person in the face image based on at least one face image, and determines whether or not the exclusion condition is satisfied based on the age. Face recognition device. (Appendix 9.3) The face recognition device described in Appendix 9.2. The determination means determines that the exclusion condition is satisfied when the age of the person in the face image is an age that can be determined to be a child according to a preset standard.
  • Face recognition device (Appendix 9.4) The face recognition device according to any one of Supplementary note 9 to 9.3.
  • the determination means detects an attribute of at least one person in the face image based on the plurality of face images, and determines whether or not the exclusion condition is satisfied based on the attribute.
  • Face recognition device (Appendix 9.5) The face recognition device described in Appendix 9.4.
  • the determination means detects the age of at least one person in the face image based on the distance of each person in the plurality of face images, and determines whether or not the exclusion condition is satisfied based on the age.
  • Face recognition device (Appendix 9.6) The face recognition device according to any one of Supplementary note 9 to 9.5.
  • the determination means determines whether or not the person in the face image satisfies the exclusion condition based on the face image before performing the feature amount calculation for the face image required for the face recognition processing.
  • Face recognition device (Appendix 9.7) The face recognition device according to any one of Supplementary note 9 to 9.6. When the face authentication process for at least one other face image excluding the face image of a person who satisfies the exclusion condition is successful among the plurality of face images simultaneously extracted from the captured image, a predetermined value is obtained.
  • Gate control means which controls to open the gate of Face recognition device equipped with.
  • Appendix 9.8 The face recognition device described in Appendix 9.7.
  • the gate control means succeeds in the face recognition processing for all the other face images except the face image of the person who satisfies the exclusion condition among the plurality of face images simultaneously extracted from the captured image. If you do, control to open the given gate, Face recognition device. (Appendix 10) For information processing equipment Extraction means to extract multiple face images in the captured image, A determination means for determining whether or not the person in the face image satisfies the exclusion condition of the face authentication process based on at least one of the face images. An authentication means that performs face authentication processing for excluding the face image of a person satisfying the exclusion condition and certifying whether or not the person in the face image is a person registered in advance with respect to the other face image. A program to realize.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本発明の顔認証装置１００は、撮影画像内の複数の顔画像を抽出する抽出手段１２１と、少なくとも１つの顔画像に基づいて顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段１２２と、除外条件を満たす人物の顔画像は除外し、その他の顔画像に対して顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段１２３と、を備える。

Description

顔認証方法
　本発明は、顔認証方法、顔認証装置、プログラムに関する。
　近年、セキュリティや利便性の観点から、人物が予め登録された人物であるか否かを認証するために、顔認証を用いたシステムが普及している。例えば、コンビニエンスストアのような店舗においては、人口減少による従業員の減少という課題を解決するため、無人店舗の実証実験が進んでいるが、このような無人店舗では、店舗への入退や決済に顔認証を用いることが考えられる。そして、顔認証を用いるためには、利用者は事前に顔画像を登録しておく必要がある。
　ここで、店舗などの特定場所に入場しようとする登録者が同行者を伴う場合には、かかる同行者が登録されていない状況であっても、登録者と一緒に入口を通過してしまう共連れが生じることが考えられる。ところが、上述したように無人店舗の入退で顔認証を行う場合には、万引き等セキュリティの観点から、共連れの問題を解決する必要がある。このような問題に対して、特許文献１では、ゲート付近の画像内に存在する人物の人数を計測すると共に、人物の顔画像から登録者である人物の人数を計測し、計測した両方の人数が一致した場合にゲートを開くこととしている。
特開２００６－１３２１９５号公報
　しかしながら、上述したように、セキュリティを向上させるために顔認証を用いて店舗などの特定場所への共連れを禁止する運用とした場合には、以下のような問題が生じる。まず、１つの問題として、登録者に同行する同行者が、登録者の子供というように共連れで入場しても問題ない場合であっても、かかる同行者の入場は許可されない。このため、同行者が入場する場合には、かかる同行者の登録も必要となり、手続きが煩雑となる。また、別の問題として、同行者であってもカメラの映る全ての人物の顔認証処理を行う必要があり、顔画像の特徴量計算などによる処理負荷が増加することとなる。このように、登録者に同行者が同行しているような状況において、上述したようにセキュリティを向上させることとすると、手続きが煩雑となったり、顔認証処理の負荷が増加することから、円滑な顔認証処理が困難となる、という問題が生じる。
　このため、本発明の目的は、上述した課題である、登録者に同行者が同行している場合における顔認証処理を円滑に行うことができない、ことを解決することができる顔認証方法を提供することにある。
　本発明の一形態である顔認証方法は、
　撮影画像内の複数の顔画像を抽出し、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定し、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う、
という構成をとる。
　また、本発明の一形態である顔認証装置は、
　撮影画像内の複数の顔画像を抽出する抽出手段と、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段と、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段と、
を備えた、
という構成をとる。
　また、本発明の一形態であるプログラムは、
　情報処理装置に、
　撮影画像内の複数の顔画像を抽出する抽出手段と、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段と、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段と、
を実現させる、
という構成をとる。
　本発明は、以上のように構成されることにより、登録者に同行者が同行している場合における顔認証処理を円滑に行うことができる。
本発明の実施形態１における顔認証システムの全体構成及び使用状況の一例を示す図である。 図１に開示した顔認証装置の構成を示すブロック図である。 図１に開示した顔認証装置による撮影画像の処理の一例を示す図である。 図１に開示した顔認証システムの使用状況の他の例を示す図である。 図１に開示した顔認証システムの使用状況の他の例を示す図である。 図１に開示した顔認証装置による撮影画像の処理の他の例を示す図である。 図１に開示した顔認証装置による処理動作を示すフローチャートである。 本発明の実施形態２における顔認証装置のハードウェア構成を示すブロック図である。 本発明の実施形態２における顔認証装置の構成を示すブロック図である。 本発明の実施形態２における顔認証装置の動作を示すフローチャートである。
　＜実施形態１＞
　本発明の第１の実施形態を、図１乃至図７を参照して説明する。図１乃至図６は、顔認証システムの構成を説明するための図であり、図７は、顔認証システムの処理動作を説明するための図である。
　［構成］
　本発明における顔認証システムは、オフィスや店舗、イベント会場などの特定場所において、人物の顔画像から当該人物の認証を行い、人物の入退場を制限したり管理するために用いられるシステムである。例えば、本実施形態では、特定場所を無人店舗とし、セキュリティの観点から、店舗の出入口に設置されたゲートＧ（ドア）前にて、入場する人物の顔画像を撮影して予め登録された人物であるか否かを顔認証にて判定し、認証が成功した場合に、ゲートＧを開いて人物の入場を許可する、というものである。但し、本発明の顔認証システムは、必ずしも店舗のゲートＧに設置されることに限定されず、いかなる場所に設置されてもよい。また、本発明の顔認証システムは、顔認証の結果に応じて必ずしもゲートＧを開く必要はなく、顔認証の結果を決済に用いるなど、いかなる処理に用いてもよい。
　図１に示すように、顔認証システムは、無人店舗に設置されたゲートＧと、ゲートＧの隣に設置された撮影装置であるカメラＣ及び表示装置であるディスプレイＤと、任意の場所に設置された顔認証装置１と、を備えている。
　上記ゲートＧは、無人店舗内への出入口となる自動ドアであり、後述するように顔認証装置１からの指令に応じて開閉が行われる。例えば、ゲートＧは、無人店舗内への入口専用である。
　上記カメラＣは、無人店舗に来店した利用者つまりゲートＧの前に立つ利用者を撮影可能な位置に設置されている。特に、カメラＣは、いかなる身長の利用者の顔を含む画像を撮影できるよう、その高さや画角などが設定されている。そして、カメラＣは、常に画像を撮影しており、撮影した撮影画像を顔認証装置１に転送している。但し、カメラＣが設置される位置は、上述した位置に限定されない。
　上記ディスプレイＤは、カメラＣの下方に設置されており、顔認証すべくカメラＣに顔を向けた利用者によって視認される位置に設置されている。そして、ディスプレイＤは、後述するように顔認証装置１から送信される顔認証処理の結果、例えば、認証成功や認証失敗の旨の情報を表示する。但し、ディスプレイＤが設置される位置は、上述した位置に限定されない。
　上記顔認証装置１は、演算装置と記憶装置とを備えた１台又は複数台の情報処理装置にて構成される。そして、顔認証装置１は、図２に示すように、画像取得部１１、顔抽出部１２、除外判定部１３、顔認証部１４、ゲート制御部１５、を備える。画像取得部１１、顔抽出部１２、除外判定部１３、顔認証部１４、ゲート制御部１５の機能は、演算装置が記憶装置に格納された各機能を実現するためのプログラムを実行することにより、実現することができる。また、顔認証装置１は、利用者情報記憶部１６を備える。利用者情報記憶部１６は、記憶装置により構成される。以下、各構成について詳述する。
　上記画像取得部１１は、まず、無人店舗への登録を希望する利用者の顔画像を取得して、かかる顔画像を利用者情報記憶部１６に記憶しておく。例えば、図１に示す人物Ｐ１が無人店舗の登録者となることを希望する場合に、かかる人物Ｐ１が自身で撮影した顔画像や、店舗の担当者によって撮影された人物Ｐ１の顔画像を取得して、利用者情報として記憶しておく。なお、登録者としての人物Ｐ１の顔画像は、後述するように当該顔画像の特徴量が計算されて、かかる特徴量が記憶されていてもよい。また、利用者情報としては、登録者である人物Ｐ１の顔画像と共に、氏名、連絡先、決済情報、などが含まれる。
　また、画像取得部１１は、カメラＣにて撮影された無人店舗のゲートＧの前の撮影画像を一定の時間間隔で受け付ける。例えば、図１に示すように、２人の人物Ｐ１，Ｐ２が店舗前に位置する場合には、図３に示すように、２人の人物Ｐ１，Ｐ２の顔画像が含まれた撮影画像を取得することとなる。なお、図１に示す２人の人物Ｐ１，Ｐ２は、１人が無人店舗の登録者Ｐ１であり、他の１人は無人店舗に利用登録しておらず、登録者Ｐ１の子供であって、登録者Ｐ１に同伴して無人店舗を訪れた同伴者Ｐ２であることとする。
　上記顔抽出部１２（抽出手段）は、撮影画像内に映る物体の形状や色、動きなどから、撮影画像内の人物を抽出し、さらに人物の顔画像領域を抽出する。例えば、顔抽出部１２は、図３に示すように、登録者である人物Ｐ１の顔画像領域Ｒ１と、同伴者である人物Ｐ２の顔画像領域Ｒ２と、をそれぞれ抽出する。このとき、顔抽出部１２は、撮影画像内に同時に映る顔画像が複数存在する場合には、複数の顔画像領域をまとめて抽出し、当該複数の顔画像領域を相互に関連付けておく。例えば、図４に示すように、無人店舗のゲートＧ前に３人の人物Ｐ１１，Ｐ１２，Ｐ１３が訪れた場合には、３つの顔画像領域（図示せず）を抽出することとなる。また、図５に示すように、無人店舗のゲートＧ前に子供である人物Ｐ２２を抱きかかえた人物Ｐ２１が訪れた場合には、図６に示すように２人の人物Ｐ２１，Ｐ２２の顔画像領域Ｒ２１，Ｒ２２をそれぞれ抽出することとなる。
　上記除外判定部１３（判定手段）は、図３に示すように抽出した顔画像領域Ｒ１，Ｒ２の人物Ｐ１，Ｐ２が、後述する顔認証処理の除外条件を満たすか否かを判定する。このとき、除外判定部１３は、複数の顔画像領域Ｒ１，Ｒ２が抽出された場合には、各顔画像領域Ｒ１，Ｒ２の各人物Ｐ１，Ｐ２について、それぞれ顔認証処理の除外条件を満たすか否かを判定する。具体的に、除外判定部１３は、各顔画像領域Ｒ１，Ｒ２の顔画像に基づいて、各人物Ｐ１，Ｐ２の属性として当該各人物Ｐ１，Ｐ２の年齢（年代）を検出し、かかる属性が除外条件を満たすか否かを判定する。このとき、除外判定部１３は、人物Ｐ１，Ｐ２の顔画像に対して予め設定された解析処理を行うことで、当該顔画像上の特徴から年齢を検出する。例えば、除外判定部１３は、「老人」、「大人」、「子供」といった年代を検出する場合には、図３の例では、人物Ｐ１は「大人」といった属性であると検出し、人物Ｐ２は「子供」といった属性であると検出する。そして、ここでは、属性「老人」と「子供」は除外条件を満たす、と設定されていることとすると、除外判定部１３は、人物Ｐ１は顔認証処理の除外条件を満たさず、人物Ｐ２は顔認証処理の除外条件を満たす、と判定する。このとき、除外判定部１３は、顔画像に基づいて人物の年齢の値を算出して、予め設定された子供と判断できる閾値年齢よりも低い場合に、顔認証処理の除外条件を満たす、と判定してもよい。
　ここで、除外判定部１３は、図３に示すように抽出した顔画像領域Ｒ１，Ｒ２が複数であっても、少なくとも１つの顔画像領域の人物について、顔認証処理の除外条件を満たすか否かを判定してもよい。例えば、図３の例では、仮に人物Ｐ２の顔画像領域Ｒ２のみについて属性を検出して、かかる人物Ｐ２が顔認証処理の除外条件を満たすか否かを判定してもよい。その結果、人物Ｐ２の顔画像領域Ｒ２は、顔認証処理の除外条件を満たすこととなるが、判定していない人物Ｐ１の顔画像領域Ｒ１は、顔認証処理の除外条件を満たさないと扱われ、後述するように顔認証処理が行われることとなる。
　なお、除外判定部１３は、必ずしも顔画像領域の顔画像のみを用いて、人物の年齢といった属性を検出することに限定されない。例えば、撮影画像から検出した人物の身長や、人物の姿勢、顔領域の大きさ、などを用いて、人物の属性を検出してもよい。例えば、図４の例では、撮影画像内に３人の人物Ｐ１１，Ｐ１２，Ｐ１３が映ることとなるが、顔画像上の特徴による年齢検出と併せて、２人の人物Ｐ１１，Ｐ１２に対する１人の人物Ｐ１３の身長差にも基づいて、人物Ｐ１３の属性を「子供」と判定してもよい。また、図６の例では、２人の人物Ｐ２１，Ｐ２２の顔画像領域Ｒ２１，Ｒ２２を抽出することとなるが、これら顔画像領域Ｒ２１，Ｒ２２の距離に基づいて、人物Ｐ２１，Ｐ２２の属性を検出してもよい。この場合、２つの顔画像領域Ｒ２１，Ｒ２２は極めて近距離に位置し、予め設定された距離の範囲内に位置していることから、大人が子供を抱きかかえていると判断し、１人の人物Ｐ２１の属性を「大人」、もう１人の人物Ｐ２２の属性を「子供」と検出してもよい。このとき、除外判定部１３は、各人物Ｐ２１，Ｐ２２の位置関係や姿勢なども参照して、人物Ｐ２１，Ｐ２２の属性を検出してもよい。
　なお、除外判定部１３は、人物の属性として、年齢のみならず、他の属性を検出してもよい。例えば、除外判定部１３は、顔画像領域内の顔画像の特徴に基づいて、人物の性別といった属性を検出してもよい。この場合、除外判定部１３は、例えば、無人店舗が女性用の商品を扱う店舗である場合には、属性が女性の人物は、顔認証処理の除外条件を満たす、と判定する。但し、上述した除外判定部１３によって検出する属性や除外条件は一例であって、いかなる属性を検出し、いかなる除外条件が設定されていてもよい。
　また、上述した除外判定部１３による人物の属性の検出処理では、人物の顔画像を含む人物画像に対する解析処理を行うこととしているが、かかる解析処理の処理負荷や計算量は、後述するように人物の顔認証処理時に行う顔画像の特徴量計算時の処理負荷や計算量よりも小さいこととなる。例えば、上記では、除外判定部１３は、顔画像を解析処理して年齢的な特徴を検出する場合や、顔の距離を算出する場合を例示したが、これらの解析処理は、人物の顔認証処理時に行う顔画像の特徴量計算における処理負荷や計算量よりも少ない処理である。
　上記顔認証部１４（認証手段）は、上述したように顔認証処理の除外条件を満たすと判定された顔画像領域は除いて、除外条件を満たさないと判定された顔画像領域のみに対して顔認証処理を行う。このため、図３の例では、属性が「大人」と判定された人物Ｐ１の顔画像領域Ｒ１に対して顔認証処理を行い、属性が「子供」と判定された人物Ｐ２の顔画像領域Ｒ２に対しては顔認証処理は行わない。具体的に、顔認証部１４は、顔認証処理として、まず顔画像領域内の顔画像の特徴量を計算する。そして、この計算した特徴量と、利用者情報記憶部１６に記憶されている登録者の顔画像の特徴量と、の類似度を算出して、かかる類似度から、人物Ｐ１が登録者であるか否かの認証を行う。このとき、顔画像の特徴量間の類似度が閾値以上である場合には、人物Ｐ１が登録者であると判定して、顔認証処理が成功したと判断とする。但し、顔認証部１４にて顔認証処理を行う顔画像領域は、上述したように、除外条件を満たすか否かを判定していないことによって、除外条件を満たさないと扱われた顔画像領域も含むこととする。
　なお、顔認証部１４は、図４の例では、属性が「大人」と判定された２人の人物Ｐ１１，Ｐ１２の顔画像領域に対してはそれぞれ顔認証処理を行い、属性が「子供」と判定された人物Ｐ１３の顔画像領域に対しては顔認証処理は行わない。また、顔認証部１４は、図６の例では、属性が「大人」と判定された人物Ｐ２１の顔画像領域に対しては顔認証処理を行い、属性が「子供」と判定された人物Ｐ２２の顔画像領域に対しては顔認証処理は行わない。
　上記ゲート制御部１５（ゲート制御手段）は、上述した顔認証処理が成功した場合には、ゲートＧを開くよう制御する。図３の例では、ゲート制御部１５は、登録者である人物Ｐ１の顔認証処理が成功した場合には、その同行者である人物Ｐ２の顔認証処理を行うことなくゲートＧを開き、登録者である人物Ｐ１と同行者である人物Ｐ２の無人店舗への入場を許可する。また、図４の例では、ゲート制御部１５は、人物Ｐ１１，Ｐ１２が登録者であり、当該人物Ｐ１１，Ｐ１２の顔認証処理が成功した場合には、その同行者である人物Ｐ１３の顔認証処理を行うことなく、ゲートＧを開き、登録者である人物Ｐ１１，Ｐ１２と同行者である人物Ｐ１３の無人店舗への入場を許可する。このとき、ゲート制御部１５は、顔認証処理を行った全ての人物Ｐ１１，Ｐ１２の認証が成功した場合のみ、ゲートを開くよう制御してもよいが、顔認証処理を行った複数の人物Ｐ１１，Ｐ１２のうち１人のみの認証が成功した場合に、ゲートを開いてもよい。つまり、複数の人物のグループに対して、１人でも登録者がいて顔認証処理が成功した場合には、ゲートを開いて、他の全ての同行者の入場を許可してもよい。また、図６の例では、ゲート制御部１５は、人物Ｐ２１が登録者であり、当該人物Ｐ２１の顔認証処理が成功した場合には、その同行者である人物Ｐ２２の顔認証処理を行うことなく、ゲートＧを開き、登録者である人物Ｐ２１と同行者である人物Ｐ２２の無人店舗への入場を許可する。
　また、ゲート制御部１５は、顔認証処理の結果を受けて、ディスプレイＤに顔認証処理の結果に応じた情報を表示するよう出力してもよい。例えば、ゲート制御部１５は、顔認証処理が成功した場合には、成功の旨やゲートＧを開く旨を表示するよう出力し、顔認証処理が失敗した場合には、認証が失敗した旨やゲートＧを開くことはできない旨の情報を表示するよう出力する。なお、ゲート制御部１５は、ゲートＧの周囲に設置された図示しないランプを点灯させることで、認証が失敗した旨の警報を出力するなど、いかなる装置にていかなる情報を出力してもよい。
　［動作］
　次に、上述した顔認証装置１の動作を、主に図７のフローチャートを参照して説明する。顔認証装置１は、無人店舗の入口となるゲートＧ前の撮影画像を、カメラＣから常に取得する（ステップＳ１）。そして、顔認証装置１は、取得した撮影画像から、人物の顔画像領域を抽出する。例えば、顔認証装置１は、図３に示すように、登録者である人物Ｐ１の顔画像領域Ｒ１と、同伴者である人物Ｐ２の顔画像領域Ｒ２と、をそれぞれ抽出する（ステップＳ２）。
　続いて、顔認証装置１は、図３に示すように抽出した顔画像領域Ｒ１，Ｒ２が複数ある場合には（ステップＳ３でＹｅｓ）、各顔画像領域Ｒ１，Ｒ２の各人物Ｐ１，Ｐ２の年齢を検出する（ステップＳ４）。例えば、図３の例では、各顔画像領域Ｒ１，Ｒ２内の顔画像の特徴から、人物Ｐ１，Ｐ２の年齢を検出する。また、図６の例では、各顔画像領域Ｒ２１，Ｒ２２の距離が近いということから、人物Ｐ１，Ｐ２の年齢を検出する。そして、顔認証装置１は、検出した人物の年齢が子供である場合には（ステップＳ５でＹｅｓ）、子供である人物は顔認証処理の除外条件を満たすと判定し、かかる人物の顔画像領域を顔認証処理から除外する（ステップＳ６）。例えば、図３の例で、顔認証装置１は、人物Ｐ１は「大人」の年齢、人物Ｐ２は「子供」の年齢、と検出した場合には、人物Ｐ１は顔認証処理の除外条件を満たさず、人物Ｐ２は顔認証処理の除外条件を満たす、と判定する。このように、顔認証装置１は、後の顔認証処理で顔認証用に顔画像の特徴量を計算する前に、人物の属性を検出して、顔認証処理の除外条件を満たすか否かを判定する。
　続いて、顔認証装置１は、顔認証処理の除外条件を満たすと判定された顔画像領域は除いて、除外条件を満たさないと判定された顔画像領域のみに対して顔認証処理を行う。このため、図３や図６の例では、属性が「大人」と判定された人物Ｐ１の顔画像領域Ｒ１に対して顔認証処理を行い、属性が「子供」と判定された人物Ｐ２の顔画像領域Ｒ２に対しては顔認証処理は行わない。具体的に、顔認証装置１は、顔認証処理として、まず顔画像領域Ｒ１内の顔画像の顔認証処理用の特徴量を計算する（ステップＳ７）。そして、この計算した特徴量と、予め利用者情報として登録されている登録者の顔画像の特徴量と、の類似度を算出して、かかる類似度から、人物Ｐ１が登録者であるか否かの認証を行う（ステップＳ８）。
　続いて、顔認証装置１は、人物Ｐ１が登録者であると判定して、顔認証処理が成功すると（ステップＳ９でＹｅｓ）、ゲートＧを開くよう制御する（ステップＳ１０）。一方、顔認証装置１は、顔認証処理が失敗すると、認証が失敗した旨やゲートを解放できない旨の警報情報を出力する（ステップＳ１１）。
　以上のように、本発明では、複数の人物の顔画像を抽出して、かかる顔画像から人物が顔認証処理の除外条件を満たすか否かを判定し、除外条件を満たす顔画像については顔認証を行わず、他の顔画像に対してのみ顔認証処理を行うこととしている。このため、顔認証を行うべき登録者である人物の同伴者が子供といった顔認証処理の除外条件を満たす場合には、かかる同伴者の顔認証処理が行われることがないため、余計な顔認証処理が実行されることを抑制できる。そして、登録者のみ顔認証処理を行って、認証が成功した場合にゲートを開くなどの制御を行って同行者の共連れを許可することで、同伴者について顔認証処理用の登録などを行う必要がない。その結果、セキュリティを向上させつつ、円滑な顔認証処理を実現することができる。
　＜実施形態２＞
　次に、本発明の第２の実施形態を、図８乃至図１０を参照して説明する。図８乃至図９は、実施形態２における顔認証装置の構成を示すブロック図であり、図１０は、顔認証装置の動作を示すフローチャートである。なお、本実施形態では、上述した実施形態で説明した顔認証装置及び顔認証方法の構成の概略を示している。
　まず、図８を参照して、本実施形態における顔認証装置１００のハードウェア構成を説明する。顔認証装置１００は、一般的な情報処理装置にて構成されており、一例として、以下のようなハードウェア構成を装備している。
　・ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）１０１（演算装置）
　・ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１０２（記憶装置）
　・ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１０３（記憶装置）
　・ＲＡＭ１０３にロードされるプログラム群１０４
　・プログラム群１０４を格納する記憶装置１０５
　・情報処理装置外部の記憶媒体１１０の読み書きを行うドライブ装置１０６
　・情報処理装置外部の通信ネットワーク１１１と接続する通信インタフェース１０７
　・データの入出力を行う入出力インタフェース１０８
　・各構成要素を接続するバス１０９
　そして、顔認証装置１００は、プログラム群１０４をＣＰＵ１０１が取得して当該ＣＰＵ１０１が実行することで、図９に示す抽出手段１２１と判定手段１２２と認証手段１２３とを構築して装備することができる。なお、プログラム群１０４は、例えば、予め記憶装置１０５やＲＯＭ１０２に格納されており、必要に応じてＣＰＵ１０１がＲＡＭ１０３にロードして実行する。また、プログラム群１０４は、通信ネットワーク１１１を介してＣＰＵ１０１に供給されてもよいし、予め記憶媒体１１０に格納されており、ドライブ装置１０６が該プログラムを読み出してＣＰＵ１０１に供給してもよい。但し、上述した抽出手段１２１と判定手段１２２と認証手段１２３とは、かかる手段を実現させるための専用の電子回路で構築されるものであってもよい。
　なお、図８は、顔認証装置１００である情報処理装置のハードウェア構成の一例を示しており、情報処理装置のハードウェア構成は上述した場合に限定されない。例えば、情報処理装置は、ドライブ装置１０６を有さないなど、上述した構成の一部から構成されてもよい。
　そして、顔認証装置１００は、上述したようにプログラムによって構築された抽出手段１２１と判定手段１２２と認証手段１２３との機能により、図１０のフローチャートに示す顔認証方法を実行する。
　図１０に示すように、顔認証装置１００は、
　撮影画像内の複数の顔画像を抽出し（ステップＳ１０１）、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定し（ステップＳ１０２）、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う（ステップＳ１０３）、
という処理を実行する。
　本発明は、以上のように構成されることにより、複数の人物の顔画像を抽出して、かかる顔画像から人物が顔認証処理の除外条件を満たすか否かを判定し、除外条件を満たす顔画像については顔認証を行わず、他の顔画像に対してのみ顔認証処理を行うこととしている。このため、顔認証を行うべき登録者である人物の同伴者が顔認証処理の除外条件を満たす場合には、かかる同伴者の顔認証処理が行われることがないため、余計な顔認証処理が実行されることを抑制でき、円滑な顔認証処理を実現することができる。
　なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。また、上述した抽出手段１２１と判定手段１２２と認証手段１２３との機能のうちの少なくとも一以上の機能は、ネットワーク上のいかなる場所に設置され接続された情報処理装置で実行されてもよく、つまり、いわゆるクラウドコンピューティングで実行されてもよい。
　＜付記＞
　上記実施形態の一部又は全部は、以下の付記のようにも記載されうる。以下、本発明における顔認証方法、顔認証装置、プログラムの構成の概略を説明する。但し、本発明は、以下の構成に限定されない。
（付記１）
　撮影画像内の複数の顔画像を抽出し、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定し、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う、
顔認証方法。
（付記２）
　付記１に記載の顔認証方法であって、
　少なくとも１つの前記顔画像に基づいて当該顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
顔認証方法。
（付記３）
　付記２に記載の顔認証方法であって、
　少なくとも１つの前記顔画像に基づいて当該顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
顔認証方法。
（付記４）
　付記３に記載の顔認証方法であって、
　前記顔画像の人物の年齢が予め設定された基準により子供と判断できる年齢である場合に、前記除外条件を満たすと判定する、
顔認証方法。
（付記５）
　付記１乃至４のいずれかに記載の顔認証方法であって、
　複数の前記顔画像に基づいて少なくとも１つの前記顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
顔認証方法。
（付記６）
　付記５に記載の顔認証方法であって、
　複数の前記顔画像のそれぞれの人物の距離に基づいて、少なくとも１つの前記顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
顔認証方法。
（付記６．１）
　付記１乃至６のいずれかに記載の顔認証方法であって、
　記顔認証処理に必要な前記顔画像に対する特徴量計算を行う前に、当該顔画像に基づいて、当該顔画像の人物が前記除外条件を満たすか否かを判定する、
顔認証方法。
（付記７）
　付記１乃至６のいずれかに記載の顔認証方法であって、
　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
顔認証方法。
（付記８）
　付記７に記載の顔認証方法であって、
　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
顔認証方法。
（付記９）
　撮影画像内の複数の顔画像を抽出する抽出手段と、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段と、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段と、
を備えた顔認証装置。
（付記９．１）
　付記９に記載の顔認証装置であって、
　前記判定手段は、少なくとも１つの前記顔画像に基づいて当該顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
顔認証装置。
（付記９．２）
　付記９．１に記載の顔認証装置であって、
　前記判定手段は、少なくとも１つの前記顔画像に基づいて当該顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
顔認証装置。
（付記９．３）
　付記９．２に記載の顔認証装置であって、
　前記判定手段は、前記顔画像の人物の年齢が予め設定された基準により子供と判断できる年齢である場合に、前記除外条件を満たすと判定する、
顔認証装置。
（付記９．４）
　付記９乃至９．３のいずれかに記載の顔認証装置であって、
　前記判定手段は、複数の前記顔画像に基づいて少なくとも１つの前記顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
顔認証装置。
（付記９．５）
　付記９．４に記載の顔認証装置であって、
　前記判定手段は、複数の前記顔画像のそれぞれの人物の距離に基づいて、少なくとも１つの前記顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
顔認証装置。
（付記９．６）
　付記９乃至９．５のいずれかに記載の顔認証装置であって、
　前記判定手段は、記顔認証処理に必要な前記顔画像に対する特徴量計算を行う前に、当該顔画像に基づいて、当該顔画像の人物が前記除外条件を満たすか否かを判定する、
顔認証装置。
（付記９．７）
　付記９乃至９．６のいずれかに記載の顔認証装置であって、
　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御するゲート制御手段、
を備えた顔認証装置。
（付記９．８）
　付記９．７に記載の顔認証装置であって、
　前記ゲート制御手段は、撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
顔認証装置。
（付記１０）
　情報処理装置に、
　撮影画像内の複数の顔画像を抽出する抽出手段と、
　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段と、
　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段と、
を実現させるためのプログラム。
（付記１０．１）
　付記１０に記載のプログラムであって、
　前記情報処理装置に、さらに、
　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御するゲート制御手段、
を実現させるためのプログラム。
（付記１０．２）
　付記１０．１に記載のプログラムであって、
　前記ゲート制御手段は、撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
プログラム。
　なお、本発明は、日本国にて２０２０年６月１７日に特許出願された特願２０２０－１０４２６３の特許出願に基づく優先権主張の利益を享受するものであり、当該特許出願に記載された内容は、全て本明細書に含まれるものとする。
１　顔認証装置
１１　画像取得部
１２　顔抽出部
１３　除外判定部
１４　顔認証部
１５　ゲート制御部
１６　利用者情報記憶部
Ｃ　カメラ
Ｄ　ディスプレイ
Ｇ　ゲート
Ｐ１，Ｐ２，Ｐ１１，Ｐ１２，Ｐ１３，Ｐ２１，Ｐ２２　人物
Ｒ１，Ｒ２，Ｒ２１，Ｒ２２　顔画像領域
１００　顔認証装置
１０１　ＣＰＵ
１０２　ＲＯＭ
１０３　ＲＡＭ
１０４　プログラム群
１０５　記憶装置
１０６　ドライブ装置
１０７　通信インタフェース
１０８　入出力インタフェース
１０９　バス
１１０　記憶媒体
１１１　通信ネットワーク
１２１　抽出手段
１２２　判定手段
１２３　認証手段
 

Claims (21)

  1. 　撮影画像内の複数の顔画像を抽出し、
    　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定し、
    　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う、
    顔認証方法。
  2. 　請求項１に記載の顔認証方法であって、
    　少なくとも１つの前記顔画像に基づいて当該顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
    顔認証方法。
  3. 　請求項２に記載の顔認証方法であって、
    　少なくとも１つの前記顔画像に基づいて当該顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
    顔認証方法。
  4. 　請求項３に記載の顔認証方法であって、
    　前記顔画像の人物の年齢が予め設定された基準により子供と判断できる年齢である場合に、前記除外条件を満たすと判定する、
    顔認証方法。
  5. 　請求項１乃至４のいずれかに記載の顔認証方法であって、
    　複数の前記顔画像に基づいて少なくとも１つの前記顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
    顔認証方法。
  6. 　請求項５に記載の顔認証方法であって、
    　複数の前記顔画像のそれぞれの人物の距離に基づいて、少なくとも１つの前記顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
    顔認証方法。
  7. 　請求項１乃至６のいずれかに記載の顔認証方法であって、
    　前記顔認証処理に必要な前記顔画像に対する特徴量計算を行う前に、当該顔画像に基づいて、当該顔画像の人物が前記除外条件を満たすか否かを判定する、
    顔認証方法。
  8. 　請求項１乃至７のいずれかに記載の顔認証方法であって、
    　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
    顔認証方法。
  9. 　請求項８に記載の顔認証方法であって、
    　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
    顔認証方法。
  10. 　撮影画像内の複数の顔画像を抽出する抽出手段と、
    　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定する判定手段と、
    　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う認証手段と、
    を備えた顔認証装置。
  11. 　請求項１０に記載の顔認証装置であって、
    　前記判定手段は、少なくとも１つの前記顔画像に基づいて当該顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
    顔認証装置。
  12. 　請求項１１に記載の顔認証装置であって、
    　前記判定手段は、少なくとも１つの前記顔画像に基づいて当該顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
    顔認証装置。
  13. 　請求項１２に記載の顔認証装置であって、
    　前記判定手段は、前記顔画像の人物の年齢が予め設定された基準により子供と判断できる年齢である場合に、前記除外条件を満たすと判定する、
    顔認証装置。
  14. 　請求項１０乃至１３のいずれかに記載の顔認証装置であって、
    　前記判定手段は、複数の前記顔画像に基づいて少なくとも１つの前記顔画像の人物の属性を検出し、当該属性に基づいて前記除外条件を満たすか否かを判定する、
    顔認証装置。
  15. 　請求項１４に記載の顔認証装置であって、
    　前記判定手段は、複数の前記顔画像のそれぞれの人物の距離に基づいて、少なくとも１つの前記顔画像の人物の年齢を検出し、当該年齢に基づいて前記除外条件を満たすか否かを判定する、
    顔認証装置。
  16. 　請求項１０乃至１５のいずれかに記載の顔認証装置であって、
    　前記判定手段は、記顔認証処理に必要な前記顔画像に対する特徴量計算を行う前に、当該顔画像に基づいて、当該顔画像の人物が前記除外条件を満たすか否かを判定する、
    顔認証装置。
  17. 　請求項１０乃至１６のいずれかに記載の顔認証装置であって、
    　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御するゲート制御手段、
    を備えた顔認証装置。
  18. 　請求項１７に記載の顔認証装置であって、
    　前記ゲート制御手段は、撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
    顔認証装置。
  19. 　情報処理装置に、
    　撮影画像内の複数の顔画像を抽出し、
    　少なくとも１つの前記顔画像に基づいて、当該顔画像の人物が顔認証処理の除外条件を満たすか否かを判定し、
    　前記除外条件を満たす人物の前記顔画像は除外し、その他の前記顔画像に対して当該顔画像の人物が予め登録された人物であるか否かを認証する顔認証処理を行う、
    処理を実行させるためのプログラムを記憶したコンピュータにて読み取り可能な記憶媒体。
  20. 　請求項１９に記載のプログラムを記憶したコンピュータにて読み取り可能な記憶媒体であって、
    　前記情報処理装置に、さらに、
    　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた少なくとも他の１つの前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
    処理を実行させるためのプログラムを記憶したコンピュータにて読み取り可能な記憶媒体。
  21. 　請求項２０に記載のプログラムを記憶したコンピュータにて読み取り可能な記憶媒体であって、
    　前記情報処理装置に、さらに、
    　撮影画像内から同時に抽出された複数の前記顔画像のうち、前記除外条件を満たした人物の前記顔画像を除いた他の全ての前記顔画像に対する前記顔認証処理が成功した場合に、所定のゲートを開くよう制御する、
    処理を実行させるためのプログラムを記憶したコンピュータにて読み取り可能な記憶媒体。
     

     
PCT/JP2021/016855 2020-06-17 2021-04-27 顔認証方法 WO2021256099A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US18/010,098 US20230267788A1 (en) 2020-06-17 2021-04-27 Face authentication method
JP2022532362A JP7400975B2 (ja) 2020-06-17 2021-04-27 顔認証方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020104263 2020-06-17
JP2020-104263 2020-06-17

Publications (1)

Publication Number Publication Date
WO2021256099A1 true WO2021256099A1 (ja) 2021-12-23

Family

ID=79267747

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/016855 WO2021256099A1 (ja) 2020-06-17 2021-04-27 顔認証方法

Country Status (3)

Country Link
US (1) US20230267788A1 (ja)
JP (1) JP7400975B2 (ja)
WO (1) WO2021256099A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023187960A1 (ja) * 2022-03-29 2023-10-05 日本電気株式会社 認証システム、認証方法およびコンピュータ可読媒体

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0773298A (ja) * 1993-09-07 1995-03-17 Sharp Corp 人物認識装置
JP2010061465A (ja) * 2008-09-04 2010-03-18 Sony Corp 画像処理装置、撮像装置、画像処理方法およびプログラム
JP2016146073A (ja) * 2015-02-09 2016-08-12 株式会社日立製作所 入場制御システム
JP2019053674A (ja) * 2017-09-19 2019-04-04 日本電気株式会社 照合システム
JP2019133364A (ja) * 2018-01-31 2019-08-08 日本電気株式会社 情報処理装置
WO2020075308A1 (ja) * 2018-10-12 2020-04-16 日本電気株式会社 情報処理装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0773298A (ja) * 1993-09-07 1995-03-17 Sharp Corp 人物認識装置
JP2010061465A (ja) * 2008-09-04 2010-03-18 Sony Corp 画像処理装置、撮像装置、画像処理方法およびプログラム
JP2016146073A (ja) * 2015-02-09 2016-08-12 株式会社日立製作所 入場制御システム
JP2019053674A (ja) * 2017-09-19 2019-04-04 日本電気株式会社 照合システム
JP2019133364A (ja) * 2018-01-31 2019-08-08 日本電気株式会社 情報処理装置
WO2020075308A1 (ja) * 2018-10-12 2020-04-16 日本電気株式会社 情報処理装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023187960A1 (ja) * 2022-03-29 2023-10-05 日本電気株式会社 認証システム、認証方法およびコンピュータ可読媒体

Also Published As

Publication number Publication date
US20230267788A1 (en) 2023-08-24
JPWO2021256099A1 (ja) 2021-12-23
JP7400975B2 (ja) 2023-12-19

Similar Documents

Publication Publication Date Title
US11734412B2 (en) Information processing device
JP7196932B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2019138688A1 (ja) 顔認証装置
JP4910717B2 (ja) 年齢確認装置、年齢確認方法、及び年齢確認プログラム
WO2022059081A1 (ja) 入力制御装置、入力システム、入力制御方法及び非一時的なコンピュータ可読媒体
JP4899552B2 (ja) 認証装置、認証方法、認証プログラム、これを記録したコンピュータ読み取り可能な記録媒体
JP2013109779A (ja) 監視システム及び共連れ侵入監視方法
WO2021256099A1 (ja) 顔認証方法
JP2018077552A (ja) ゲート管理システムおよび方法
AU2024202070A1 (en) Gate device, authentication system, gate control method, and storage medium
WO2021176593A1 (ja) 滞在管理装置、滞在管理方法、プログラムが格納された非一時的なコンピュータ可読媒体、及び滞在管理システム
KR101674053B1 (ko) 출입통제 장치 및 그 방법
JP7192850B2 (ja) 情報取得システム、情報取得装置、サーバ、情報端末及び情報取得方法
JP6789698B2 (ja) 画像処理装置、画像処理装置の制御方法およびプログラム
KR102426837B1 (ko) 인공지능 기반 약제 관리 방법, 장치 및 시스템
JP7251874B2 (ja) 顔認証装置、顔認証方法、プログラム、および記録媒体
WO2022003852A1 (ja) 認証制御装置、認証制御システム、認証制御方法及び非一時的なコンピュータ可読媒体
JP6767685B2 (ja) 顔認証装置
US20230025272A1 (en) Gate apparatus, server apparatus, emigration and immigration examination system,control method of gate apparatus, and control method of server apparatus
WO2019151116A1 (ja) 情報処理装置
US20230222193A1 (en) Information processing device, permission determination method, and program
WO2023145059A1 (ja) 入場管理装置、入場管理方法およびプログラム記憶媒体
WO2023176167A1 (ja) 登録装置、登録方法及びプログラム
WO2022044274A1 (ja) 認証制御装置、認証システム、認証制御方法及び非一時的なコンピュータ可読媒体
WO2023233457A1 (ja) 画像処理装置、認証システム、画像処理方法、及び非一時的なコンピュータ可読媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21826569

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022532362

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21826569

Country of ref document: EP

Kind code of ref document: A1