WO2020090972A1 - 顔認証装置及び顔認証装置の制御方法 - Google Patents

顔認証装置及び顔認証装置の制御方法 Download PDF

Info

Publication number
WO2020090972A1
WO2020090972A1 PCT/JP2019/042754 JP2019042754W WO2020090972A1 WO 2020090972 A1 WO2020090972 A1 WO 2020090972A1 JP 2019042754 W JP2019042754 W JP 2019042754W WO 2020090972 A1 WO2020090972 A1 WO 2020090972A1
Authority
WO
WIPO (PCT)
Prior art keywords
face
display
camera
person
authentication device
Prior art date
Application number
PCT/JP2019/042754
Other languages
English (en)
French (fr)
Inventor
雄大 市川
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US17/286,637 priority Critical patent/US20210374220A1/en
Priority to JP2020554035A priority patent/JPWO2020090972A1/ja
Priority to EP19879618.7A priority patent/EP3876185A4/en
Publication of WO2020090972A1 publication Critical patent/WO2020090972A1/ja
Priority to JP2022153619A priority patent/JP2022177247A/ja
Priority to US18/090,839 priority patent/US20230140496A1/en
Priority to US18/091,058 priority patent/US20230132575A1/en
Priority to US18/090,977 priority patent/US20230135416A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/34—User authentication involving the use of external additional devices, e.g. dongles or smart cards
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/27—Individual registration on entry or exit involving the use of a pass with central registration

Definitions

  • the present invention is based on the priority claim of Japanese Patent Application: Japanese Patent Application No. 2018-206696 (filed on November 1, 2018), and the entire contents of the application are incorporated by reference in this document. I shall.
  • the present invention relates to a face authentication device and a face authentication device control method.
  • Patent Document 1 discloses a face matching device capable of performing a series of processes including face authentication performed at the time of identity verification in a short time.
  • this face matching device includes a face image of a person to be authenticated or captured face data that is a feature amount of the face image, and a face image that is registered in advance or registered face data that is a feature amount of the face image.
  • the document discloses a configuration in which a display unit and a mirror surface are arranged as an attention target, and the camera is installed in the vicinity of the attention target.
  • Patent Document 2 when capturing a face image of a person to be authenticated, it is possible to efficiently obtain an appropriate face image by irradiating illumination suitable for the person to be authenticated, instead of irradiating with excessively dazzling illumination.
  • a face authentication device that can be used is disclosed.
  • the face authentication device of card combination type exemplified in Patent Document 1
  • the authentication target person authenticatee
  • the face matching device of Patent Document 1 has a configuration in which only a partition panel is provided in the booth, and there is a problem that privacy cannot be maintained in an environment where the booth is difficult to install.
  • the display unit is arranged in front of the face authentication device, and the authentication result may be seen by a third party.
  • the present invention provides a face authentication device and a method for controlling the face authentication device, which can contribute to ensuring both throughput in a card authentication type face authentication device and consideration of the privacy of a person to be authenticated (authenticatee). To aim.
  • a face authentication device provided with a camera which is arranged at a position where it can face an authentication target person and which captures a face image of the authentication target person.
  • the face authentication device further includes a display which is arranged below the camera and displays a face image captured by the camera.
  • the face authentication device further includes a card reader that is arranged below the display and in front of the authentication target person to read a card presented by the authentication target person.
  • the face authentication device further includes at least a wall member that extends from the upper end of the display to the front end of the card reader.
  • a camera that is arranged at a position where it can face the authentication target person and that captures a face image of the authentication target person, and a face image that is disposed below the camera and that is captured by the camera
  • a display for displaying, a lower part of the display, and a card reader that is arranged in front of the person to be authenticated and reads a card presented by the person to be authenticated, and at least from the upper end of the display
  • a control method of a face authentication device including a wall member arranged so as to reach a front end of a card reader, and a light emitting unit arranged at an upper end of the wall member and capable of changing a lighting pattern so that an authentication result can be identified. To be done.
  • the face authentication device performs a step of reading a card with the card reader to identify an authentication target person, and a step of capturing a face image of the authentication target person by the camera. Be seen. Then, the face authentication device compares the face image captured by the camera with the face image of the authentication target person captured in advance and identified by the card reader, and lighting corresponding to the result of the comparison. Lighting the light emitting unit in a pattern.
  • This method is tied to a specific machine, which is a face recognition device that performs face recognition on a one-to-one basis with face images registered in advance.
  • the present invention it is possible to ensure both throughput in a face authentication device that uses a card and consideration of the privacy of the authentication subject (authenticatee). That is, the present invention is to convert the face authentication device shown in the background art into a device that is dramatically improved in terms of both the throughput ensuring and privacy consideration.
  • FIG. 3 is a partial perspective view for explaining the positional relationship between the display and the card reader of the face authentication device according to the first embodiment of the present invention.
  • It is a functional block diagram showing composition of a face recognition device of a 1st embodiment of the present invention. It is a sequence diagram showing operation
  • the computer device is configured to be capable of communicating with a device (including a computer) inside or outside the device via a communication interface, whether wired or wireless.
  • a device including a computer
  • a and / or B is used to mean either A or B, or A and B.
  • the present invention can be realized by a face authentication device 100 including a camera 101, a display 102, and a card reader 103, as shown in FIG. More specifically, the camera 101 is arranged at a position where it can face the authentication target person, and captures a face image of the authentication target person.
  • the display 102 is arranged below the camera 101.
  • the card reader 103 is arranged below the display 102 and in front of the authentication target person, and reads the card presented by the authentication target person.
  • the face authentication device 100 includes at least a wall member (partitioning member) 104 arranged so as to extend from the upper end of the display 102 to the front end of the card reader 103.
  • the wall member 104 blocks the face image and the authentication result displayed on the display 102 in the process of the authentication operation. Therefore, the person to be authenticated can calmly perform the operation, and the throughput is also improved.
  • the camera 101 since the camera 101 is arranged rearward and upward with respect to the card reader 103, a person sitting in a wheelchair and a child are necessarily separated from the camera as shown in FIG.
  • the card reading operation or the like is performed at the position.
  • a wide-angle lens the broken line in FIG. 2 indicates the angle of view of the wide-angle lens
  • a single camera can satisfactorily store face images.
  • FIG. 3 and 4 are a front view and a side view of the face authentication device according to the first embodiment of the present invention.
  • the face authentication device 10 according to the first embodiment of the present invention includes a camera 101 on the top of a cylindrical casing.
  • the camera 101 is installed so as to be able to capture a standing posture, a wheelchair, or a face of a short person, and captures a face image of the authentication target person.
  • the camera 101 itself may be provided with a tilt function or the like for changing the direction of the lens (depression angle) according to the height of the face of the authentication subject.
  • a circular ring light (light for guiding the line of sight) 105 is arranged around the camera 101.
  • the ring light (light for guiding the line of sight) 105 is configured to be turned on when a human sensor 108 mounted below the card reader 103 of the face authentication device 10 detects an approach of a person.
  • the ring light (light for guiding the line of sight) 105 is for guiding the line of sight, but when the surroundings are dark, an LED unit having a light amount that can be used as an auxiliary light source may be used.
  • the display 102 is composed of a liquid crystal display device arranged below the camera, an organic EL (Electro-Luminescence) display, and the like, and displays a face image captured by the camera 101, a result of face authentication, and the like.
  • an organic EL Electro-Luminescence
  • the card reader 103 is arranged below the display 102 and in front of the authentication target person, and reads an IC (Integrated Circuit) built-in card presented by the authentication target person.
  • the display 102 is located diagonally above and rearward of the card reader 103, and the camera 101 is located directly above the display 102.
  • the sub-display 107 is arranged above the card reader 103. On the sub display 107, a message prompting a card reading operation and a card reading result are displayed.
  • the human sensor 108 is arranged below the card reader 103.
  • the human sensor 108 an infrared sensor or the like can be used.
  • the human sensor 108 detects the approach of a person at a position where a good image can be obtained (for example, 2 m from the camera)
  • continuous shooting is performed by the camera 101 to obtain a face image suitable for matching. be able to.
  • the human sensor 108 is used to turn on the ring light (light for guiding the line of sight) 105, and the camera 101 itself continues shooting regardless of the detection result of the human sensor 108. .. Accordingly, in the configuration in which the ring light (light for guiding the line of sight) 105 is omitted or the ring light (light for guiding the line of sight) 105 is always lit, the human sensor 108 itself can be omitted.
  • wall members 104 extending from the upper end of the display 102 to the front end of the card reader 103 are provided on both front sides of the device. At least the upper surface of the wall member 104 is made of a transparent or translucent member and also functions as a display unit for displaying the authentication result and the like by the internal LED 106.
  • the LED (Light Emitting Diode) 106 is controlled by an internal control unit (110 in FIG. 6) of the face authentication device 10, and functions as a light emitting unit that expresses at least three states of authentication success, authentication failure, and card reading error. To do.
  • the above three states are expressed by using an LED unit in which LEDs of three colors of blue, yellow and red are arranged.
  • FIG. 5 is a partial perspective view for explaining the positional relationship between the display and the card reader of the face authentication device according to the first embodiment of the present invention.
  • the card reader 103 of the face authentication device 10 of the present exemplary embodiment is arranged in front of the surface of the display 102 by T2, which is longer than the height T1 of the display.
  • the wall member 104 extends in an arc shape when viewed from the side so as to cover the front end of the card reader 103 from a position above the upper end of the display 102. This makes it possible to hide the display surface of the display 102 from the side surface of the display 102 and the diagonally rearward position.
  • the LED 106 is arranged on the upper end of the wall member 104, it is possible to confirm the operation state of the face authentication device 10.
  • FIG. 6 is a functional block diagram showing the configuration of the face authentication device according to the first embodiment of the present invention. Referring to FIG. 6, there is shown a configuration in which a camera 101, a line-of-sight guidance light 105, a display 102, an LED 106, a card reader 103, a motion sensor 108, a communication unit 130, and a storage unit 120 are connected to a control unit 110. ..
  • the control unit 110 includes a feature extraction unit 111 and a matching unit 112.
  • the feature extraction unit 111 extracts feature data of the face of the authentication target person from the face image data of the authentication target person captured by the camera 101.
  • the collation unit 112 collates the feature data of the face of the authentication target person received from the center server via the communication unit 130 with the feature data extracted by the feature extraction unit 111. Then, the collation unit 112 determines whether or not the person imaged by the camera 101 is the same person as the person read by the card reader 103 by the above collation. As a result of the determination, when it is determined that the person imaged by the camera 101 is the same person as the person read by the card reader, the control unit 110 drives the gate drive device. The control unit 110 also controls the display of the authentication result on the display 102 and the emission of the LED 106 according to the result of the card reading by the card reader 103 and the matching result of the matching unit 112.
  • the communication unit 130 requests the center server (not shown) that holds the facial feature data of the group of authentication subjects registered in advance, for the facial feature data of the individual read from the card.
  • the communication unit 130 receives the facial feature data of the designated individual from the center server, the communication unit 130 sends it to the control unit 110.
  • the storage unit 120 is used as a temporary storage location for the personal face feature data extracted by the feature extraction unit 111 and the personal face feature data received from the center server.
  • the feature data of the faces of these individuals are deleted from the storage unit 120 after the matching is completed.
  • FIG. 7 is a sequence diagram showing the operation of each unit by the control unit 110 of the face authentication device 10 according to the first embodiment of the present invention.
  • the control unit 110 instructs the camera 101 to perform continuous shooting (step S002).
  • the control unit 110 also turns on the line-of-sight guidance light 105 and guides the line of sight of the authentication target person so as to face the camera 101 (step S003). Note that steps S002 and S003 in FIG. 7 may be performed at the same time or in the reverse order.
  • the card reader 103 reads the card and obtains card information including the personal ID of the person to be authenticated (step S004).
  • control unit 110 acquires the facial feature data of the individual corresponding to the personal ID read by the card reader 103 from the center server via the communication unit 130 (step S005).
  • the control unit 110 selects one or more face images satisfying the conditions suitable for matching from the face images captured by the camera 101, calculates the feature amount thereof, and generates feature data.
  • conditions suitable for matching can be selected and set such as the size of the face in the image, the facial expression, the degree of coincidence with the shooting condition when the facial feature data is registered in advance. ..
  • a method of selecting a face image using a face image selection algorithm called a best shot image can also be adopted.
  • control unit 110 compares the facial feature data acquired from the center server with the feature data calculated in step S006, and determines whether the person photographed by the camera 101 is the person specified by the card. It is determined whether or not (step S007).
  • control unit 110 displays a message according to the determination result on the display 102. Similarly, the control unit 110 turns on the LED 106 in a lighting pattern according to the determination result (steps S008 to S010).
  • FIG. 8 shows an example of combinations of display contents and lighting patterns according to the determination results in steps S008 to S010.
  • the control unit 110 displays a message “GO” on the display 102 and turns on the LED 106 in blue.
  • the person to be authenticated judges that his / her own authentication has been completed, and proceeds through the gate.
  • the staff around the face authentication device 10 can also recognize that the authentication has been performed without any problem by turning on the LED in blue.
  • FIG. 9 is a diagram for explaining the operation of the face authentication device 10 when the authentication is successful (determined as the same person).
  • the display 102 displays a face image that has been successfully authenticated (determined to be the same person) and a character “VGO” below the face image.
  • the upper ends of the wall members 104 on both sides of the display 102 are illuminated by the LED 106 in blue.
  • the display surface of the display 102 is visible because it is viewed obliquely from the back, but the display surface of the display 102 is normally hidden by the wall member 104, so that the authentication target person Privacy is protected.
  • the control unit 110 displays a message “RETRY” on the display 102 and turns on the LED 106 in yellow.
  • the authentication target person recognizes that the authentication of himself / herself has failed, and can start shooting according to the guidance of the display 102 or the sub-display 107.
  • the staff around the face authentication device 10 can recognize that the authentication of the authentication target person has failed because the LED lights in yellow.
  • the control unit 110 displays a message "ERROR" on the display 102 and turns on the LED 106 in red.
  • the person to be authenticated can recognize that there is a problem with the card and take an action such as searching for another card or inquiring to the staff.
  • the staff around the face authentication device 10 can recognize that there is a problem with the card of the person to be authenticated by the red LED and can take action such as calling out.
  • the display surface of the display 102 is hidden by the wall member 104, so the privacy of the authentication target person is protected. ..
  • control unit 110 sends an opening / closing instruction to the gate drive device according to the result determined in step S007 (step S011). After that, the control unit 110 discards the feature data used for matching (step S012). As a result, it is possible to prevent unnecessary personal information from being stored in the face authentication device 10.
  • the face authentication device 10 may have a function of detecting duplicate entry depending on whether or not the card information or the like acquired from the center server has duplication. Also in this case, it is preferable that the control unit 110 displays the message "ERROR” on the display 102 and causes the LED 106 to light in red. Further, the detection of the duplicate entry may be performed on the Santa server side. Also in this case, it is preferable that the control unit 110 displays the message "ERROR” on the display 102 and causes the LED 106 to light in red.
  • the face authentication device 10 of the present embodiment it is possible to achieve both throughput assurance in the face authentication device of card combination type and consideration of privacy of the authentication target person (authenticated person). It will be possible.
  • the reason for this is that the human sensor 108, the camera 101, the line-of-sight guidance light 105, and the like are used together to efficiently capture a face image, and the wall member 104 is used to protect personal information and authentication results. There is something I did.
  • the characteristic data of the face of the individual is acquired in step S005, and then the characteristic amount of the image captured by the camera 101 is calculated to generate the characteristic data.
  • the calculation of the feature amount of the image captured in step 1 may be performed first. For example, after the shooting is started in steps S002 to S003, the control unit 110 may select a face image having conditions suitable for matching, calculate the feature amount thereof, and generate the feature data. By doing so, the throughput can be further improved.
  • FIG. 10 is a sequence diagram showing the operation of each unit of the face authentication device according to the second embodiment of the present invention. The difference from the sequence diagram of the first embodiment shown in FIG. 7 is that after the face authentication, the authorization card is requested to be displayed, and it is confirmed whether or not the person to be authenticated has appropriate authority. Is.
  • step S005a of FIG. 10 the authority information given to the relevant person is acquired in addition to the face feature data.
  • This authority information includes information as to whether or not the relevant person has the authority to enter through the gate controlled by the face authentication device.
  • FIG. 11 is a diagram showing an example of messages displayed on the sub-display 107 in step S004 and step S013.
  • control unit 110 displays a message on the display 102 according to the authorization confirmation result. Similarly, the control unit 110 lights the LED 106 in a lighting pattern according to the authority confirmation result (steps S015 to S017).
  • FIG. 12 shows an example of combinations of display contents and lighting patterns according to the determination results in steps S008 to S010 and steps S015 to S017 in FIG.
  • the control unit 110 displays a message “OK” on the display 102 and turns on the LED 106 in yellow.
  • the person to be authenticated determines that his or her own authentication has been completed, and causes the card reader 103 to read the authority card.
  • the staff around the face authentication device 10 can also recognize that the authentication has been performed without problems by using the yellow LED.
  • the control unit 110 displays the message “GO” on the display 102 and turns on the LED 106 in blue.
  • the person to be authenticated can determine that his / her own authority confirmation has been completed, and head to the gate.
  • the staff around the face authentication device 10 can recognize that the authority confirmation has been performed without any problem by using the blue LED.
  • the authentication target person and the staff can recognize the respective states by the display on the display 102 and the LED lighting pattern. (See Figure 12). For example, if the authentication in step S007 fails, the authentication failure state shown in FIG. 12 results. In this case, the control unit 110 displays the character "RETRY" on the display 102 and causes the LED 106 to blink yellow. Further, for example, when it is determined in the authority confirmation in step S014 that the authority is out of the authority range, the state without authority shown in FIG. In this case, the control unit 110 displays the word “STOP” on the display 102 and turns on the LED 106 in red.
  • the control unit 110 displays the word “WAIT” on the display 102 and causes the LED 106 to blink in red.
  • the character "ERROR” can be displayed on the display 102 and the LED 106 can be turned on in red.
  • the lighting state of the LED 106 is the same as the non-authoritative state of FIG. 12, but the lighting pattern of the LED 106 may be changed as necessary. For example, it is possible to adopt a mode in which one of them is lit in another color, or blinks at a higher speed than usual.
  • the present embodiment it is possible to control the opening / closing of the gate using both the personal ID card and the authority card, and to notify the operating state by the display 102 and the LED 106.
  • fine control such that the passage of the gate x and the gate y is permitted to the person A during the period a, and the passage of the gate x is permitted after the passage of the period a but the passage of the gate y is not permitted. It becomes possible to do it.
  • the face authentication device 10 side is described as performing the matching process, but a configuration in which the center server side performs the matching process can also be adopted.
  • the collation unit of the control unit 110a of the face authentication device 10a is omitted.
  • the face authentication device 10a transmits the feature data of the face to the center server side, receives the verification result, and controls the display 102 and the LED 106, respectively.
  • the third embodiment there is an advantage that it is not necessary to transmit the personal face feature data held on the center server side to the face authentication device 10a. As a result, even if the face authentication device 10a receives some kind of attack, there is an advantage that it is not necessary to steal the personal face feature data.
  • the shape of the wall member 104 is not limited to this form.
  • the wall member 104 may be linearly formed when viewed from the side.
  • the wall member 104 is arranged so as to extend from the upper end of the display to the front end of the card reader.
  • the wall member 104 may be formed in a square shape (partition shape) when viewed from the side.
  • the wall member 104 is arranged so as to extend from the upper end of the display to the front end of the card reader.
  • the shape of the wall member 104 is not limited to these, and may be any shape as long as it extends from the upper end of the display to the user side with respect to the virtual line extending to the front end of the card reader. can do.
  • the face authentication device 10 is described as acquiring the facial feature data of an individual from the center server.
  • the facial feature data of the individual is held in the card itself, It is also possible to perform matching using the face feature data. In this case, there is an advantage that the face authentication device 10 does not have to be connected to the network.
  • the ring light that surrounds the lens outer peripheral portion of the camera 101 is used as the line-of-sight guidance light 105, but the form of the line-of-sight guidance light 105 is not limited to this form.
  • a configuration in which a point light source or a small display is arranged near the lens of the camera 101 can also be adopted.
  • the LED 106 is arranged on the upper end of the wall member 104 to function as a light emitting unit, but the configuration of the light emitting unit is not limited to this form.
  • the face authentication device has been described as an application for controlling the gate, but the face authentication device of the present invention can be applied to other than the gate control.
  • it can be applied to an attendance / leaving management system of an employee in a company or the like, or a check-in system in a hotel or the like.
  • the procedures shown in the above-described first to third embodiments can be implemented by a program that causes a computer (9000 in FIG. 15) that functions as the control unit 110 of the face authentication device to realize the function as the control unit 110.
  • a computer is exemplified in the configuration including the CPU (Central Processing Unit) 9010, the communication interface 9020, the memory 9030, and the auxiliary storage device 9040 in FIG. That is, the CPU 9010 of FIG. 15 may execute the control program of each part of the device, the face authentication program, and the like to update the calculation parameters held in the auxiliary storage device 9040 and the like.
  • the respective units (processing means, functions) of the face authentication device shown in the above-described first to third embodiments perform the above-mentioned respective processes by using the hardware of the processor incorporated in the face authentication device. It can be realized by a computer program to be executed.
  • the face recognition device described above further A line-of-sight guiding light arranged near the lens surface of the camera, It is preferable that when a proximity of the authentication target person is detected, a human sensor for turning on the line-of-sight guidance light is provided, and the photographing operation is performed in conjunction with the light emission of the line-of-sight guidance light.
  • a collation unit that collates a face image captured by the camera with a face image of the authentication target person captured in advance and identified by the card reader may be provided.
  • the face recognition device described above It is also possible to adopt a configuration in which the face feature data calculated from the face image taken by the camera is transmitted to a predetermined center server, and the result of face authentication is received from the center server.
  • the upper end of the wall member of the face authentication device described above is formed in an arc shape when viewed from the side.
  • any numerical value or small range included in the range should be construed as specifically described even if not otherwise specified.
  • each disclosure item of the above cited documents is, if necessary, in accordance with the gist of the present invention, as a part of the disclosure of the present invention, a part or all thereof may be used in combination with the description items of the present document, It is considered to be included in the disclosure of the present application.

Abstract

カード併用型の顔認証装置におけるスループットの確保と、認証対象者（被認証者）のプライバシーへの配慮を両立する。顔認証装置は、認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影するカメラと、前記カメラの下方に配置され、前記カメラにより撮影された顔画像を表示するディスプレイと、前記ディスプレイの下方、かつ、前記認証対象者から見て手前に配置され、前記認証対象者から提示されたカードを読み取るカードリーダーと、少なくとも、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置された壁部材と、を備える。

Description

顔認証装置及び顔認証装置の制御方法
　［関連出願についての記載］
　本発明は、日本国特許出願：特願２０１８－２０６６９６号（２０１８年１１月１日出願）の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
　本発明は、顔認証装置及び顔認証装置の制御方法に関する。
　特許文献１に、本人確認時に行う顔認証を含む一連の処理を短時間で行うことができるという顔照合装置が開示されている。同文献によると、この顔照合装置は、被認証者の顔画像又は該顔画像の特徴量である撮像顔データと、予め登録されている顔画像又は該顔画像の特徴量である登録顔データとを照合する顔照合処理を行う。また、同文献には、注目対象として表示部や鏡面を配置し、この注目対象近傍に前記カメラを設置した構成が開示されている。
　特許文献２に、認証対象者の顔画像を撮像する際に、過度にまぶしい照明を照射するのではなく、認証対象者に適合した照明を照射して適正な顔画像を効率良く取得することができるという顔認証装置が開示されている。
特開２０１８－１０９９３５号公報 特開２００７－４６１２号公報
　以下の分析は、本発明者によって与えられたものである。特許文献１に例示されるカード併用型の顔認証装置では、本人のものでないカードの使用や、より適切な顔画像を得るために、認証対象者（被認証者）に顔画像や認証の結果を表示するユーザインターフェースが採られることがある（例えば特許文献１の段落０１４４、０１５５）。しかしながら、特許文献１の顔照合装置では、ブースに仕切パネルを設けただけの構成となっており、ブースを設置困難な環境ではプライバシーが保たれないという問題点がある。
　特許文献２においても表示部は、顔認証装置の前面に配置されており、認証結果が第三者に覗き見られてしまう可能性がある。
　本発明は、カード併用型の顔認証装置におけるスループットの確保と、認証対象者（被認証者）のプライバシーへの配慮の両立に貢献できる顔認証装置及び顔認証装置の制御方法を提供することを目的とする。
　第１の視点によれば、認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影するカメラを備えた顔認証装置が提供される。この顔認証装置は、さらに、前記カメラの下方に配置され、前記カメラにより撮影された顔画像を表示するディスプレイを備える。この顔認証装置は、さらに、前記ディスプレイの下方、かつ、前記認証対象者から見て手前に配置され、前記認証対象者から提示されたカードを読み取るカードリーダーを備える。この顔認証装置は、さらに、少なくとも、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置された壁部材と、を備える。
　第２の視点によれば、認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影するカメラと、前記カメラの下方に配置され、前記カメラにより撮影された顔画像を表示するディスプレイと、前記ディスプレイの下方、かつ、前記認証対象者から見て手前に配置され、前記認証対象者から提示されたカードを読み取るカードリーダーと、少なくとも、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置された壁部材と、前記壁部材の上端に配置され、認証結果を識別できるよう点灯パターンを変更可能な発光部を備えた顔認証装置の制御方法が提供される。この制御方法においては、まず、この顔認証装置が、前記カードリーダーにて、カードを読み取って認証対象者を特定するステップと、前記カメラにより認証対象者の顔画像を撮影するステップと、が行われる。そして、この顔認証装置が、前記カメラにて撮影した顔画像と、事前に撮影され前記カードリーダーにて特定した認証対象者の顔画像とを照合するステップと、前記照合の結果に対応する点灯パターンで、前記発光部を点灯させるステップと、が行われる。本方法は、事前に登録された顔画像による１対１方式の顔認証を行う顔認証装置という、特定の機械に結びつけられている。
　本発明によれば、カード併用型の顔認証装置におけるスループットの確保と、認証対象者（被認証者）のプライバシーへの配慮を両立させることが可能となる。即ち、本発明は、背景技術に示した顔認証装置を、そのスループット確保とプライバシー配慮の双方の面で、飛躍的に改善させたものへと変換するものとなっている。
本発明の一実施形態の顔認証装置を示す図である。 本発明の一実施形態の顔認証装置の利用形態を説明するための図である。 本発明の第１の実施形態の顔認証装置の正面図である。 本発明の第１の実施形態の顔認証装置の側面図である。 本発明の第１の実施形態の顔認証装置のディスプレイとカードリーダーの位置関係を説明するための部分透視図である。 本発明の第１の実施形態の顔認証装置の構成を表した機能ブロック図である。 本発明の第１の実施形態の顔認証装置の各部の動作を表したシーケンス図である。 本発明の第１の実施形態の顔認証装置によるディスプレイ表示と発光部の発光パターンの一例である。 本発明の第１の実施形態の顔認証装置の認証成功時のディスプレイ表示と発光部の発光パターンを表した図である。 本発明の第２の実施形態の顔認証装置の各部の動作を表したシーケンス図である。 本発明の第２の実施形態の顔認証装置のサブディスプレイに表示されるメッセージの一例を示す図である。 本発明の第２の実施形態の顔認証装置によるディスプレイ表示と発光部の発光パターンの一例である。 本発明の第３の実施形態の顔認証装置の構成を表した機能ブロック図である。 本発明の壁部材の変形構成の例を示す図である。 本発明の顔認証装置に搭載されるコンピュータの構成を示す図である。
　はじめに本発明の一実施形態の概要について図面を参照して説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。また、以降の説明で参照する図面等のブロック間の接続線は、双方向及び単方向の双方を含む。一方向矢印については、主たる信号（データ）の流れを模式的に示すものであり、双方向性を排除するものではない。また、図中の各ブロックの入出力の接続点には、ポート乃至インタフェースがあるが図示省略する。プログラムはコンピュータ装置を介して実行され、コンピュータ装置は、例えば、プロセッサ、記憶装置、入力装置、通信インタフェース、及び必要に応じ表示装置を備える。また、コンピュータ装置は、通信インタフェースを介して装置内又は外部の機器（コンピュータを含む）と、有線、無線を問わず、交信可能に構成される。また、以下の説明において、「Ａ及び／又はＢ」は、Ａ又はＢ、又はＡ及びＢのいずれかという意味で用いる。
　本発明は、その一実施形態において、図１に示すように、カメラ１０１と、ディスプレイ１０２と、カードリーダー１０３と、を備えた顔認証装置１００にて実現できる。より具体的には、カメラ１０１は、認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影する。そして、ディスプレイ１０２は、カメラ１０１の下方に配置される。カードリーダー１０３は、ディスプレイ１０２の下方、かつ、前記認証対象者から見て手前に配置され、認証対象者から提示されたカードを読み取る。そして、顔認証装置１００は、少なくとも、前記ディスプレイ１０２の上端部から、前記カードリーダー１０３の前端部に至るように配置された壁部材（仕切り部材）１０４を備える。
　上記のように構成された顔認証装置１００によれば、図２に示すように、壁部材１０４が、認証操作の過程でディスプレイ１０２に表示される顔画像や認証結果を遮ることになる。このため、認証対象者は、落ち着いて操作を行うことが可能となり、スループットも向上することになる。
　また、上記構成によれば、カードリーダー１０３に対して、カメラ１０１を後方上方に配置しているため、図２のように車いすに座っている方や子供は、必然的に、カメラより離れた位置でカードの読み取り操作等を行うことになる。カメラ１０１のレンズとして広角のレンズ（図２の破線は広角レンズの画角を示す。）を用いることで、立った状態で操作している人はもちろんとして、子供や車いすに座っている方についても、単一のカメラで顔画像を良好に収めることができる。
［第１の実施形態］
　続いて、本発明をイベント会場等のゲート制御に適用した第１の実施形態について、図面を参照して詳細に説明する。図３、図４は、本発明の第１の実施形態の顔認証装置の正面図と側面図である。本発明の第１の実施形態の顔認証装置１０は、円柱状の筐体の頂部にカメラ１０１を備えている。
　カメラ１０１は、立った姿勢や車いすや背の低い方の顔を撮影できる方向に向けて設置され、これら認証対象者の顔画像を撮影する。もちろん、カメラ１０１自体に、認証対象者の顔の高さに合わせてレンズの向き（俯仰角）を変更するチルト機能等を設けてもよい。
　カメラ１０１の周囲には、円形のリングライト（視線誘導用ライト）１０５が配置されている。このリングライト（視線誘導用ライト）１０５は、顔認証装置１０のカードリーダー１０３の下方に取り付けられた人感センサー１０８により人の接近を検出すると、点灯するように構成されている。このリングライト（視線誘導用ライト）１０５は、視線誘導用のものであるが、周囲が暗い場合などは、補助光源として利用可能な光量を持つＬＥＤユニットを用いてもよい。
　ディスプレイ１０２は、カメラの下方に配置された液晶表示装置や有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどによって構成され、カメラ１０１により撮影された顔画像や、顔認証の結果等を表示する。
　カードリーダー１０３は、ディスプレイ１０２の下方、かつ、前記認証対象者から見て手前に配置され、認証対象者から提示されたＩＣ（Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）内蔵カード等を読み取る。換言すると、ディスプレイ１０２は、カードリーダー１０３の後方斜め上方に位置し、カメラ１０１はディスプレイ１０２の真上に配置されていることになる。
　本実施形態の顔認証装置１０では、カードリーダー１０３の上段に、サブディスプレイ１０７が配置されている。サブディスプレイ１０７には、カードの読み取り操作を促すメッセージや、カードの読み取りの結果が表示される。
　本実施形態の顔認証装置１０では、カードリーダー１０３の下方に人感センサー１０８が配置されている。この人感センサー１０８としては、赤外線センサー等を用いることができる。例えば、良好な画像が得られる位置（例えば、カメラから２ｍ）にて人感センサー１０８が人の接近を検知すると、カメラ１０１にて、連続撮影を行うことで、照合に適した顔画像を得ることができる。なお、本実施形態では、人感センサー１０８は、リングライト（視線誘導用ライト）１０５の点灯のために使用しており、カメラ１０１自体は人感センサー１０８の検知結果によらず撮影を続けている。従って、リングライト（視線誘導用ライト）１０５を省略した構成や、リングライト（視線誘導用ライト）１０５を常時点灯している構成では、人感センサー１０８自体を省略することもできる。
　本実施形態の顔認証装置１０では、装置の前面両側に、上記ディスプレイ１０２の上端部からカードリーダー１０３の前端部に亘って延在する壁部材１０４が設けられている。この壁部材１０４の少なくとも上面は、透明又は透光性のある部材で構成され、内部のＬＥＤ１０６により認証結果等を表示する表示部としても機能する。
　ＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）１０６は、顔認証装置１０の内部の制御部（図６の１１０）により制御され、認証成功、認証失敗、及び、カード読み取りエラーの少なくとも３状態を表現する発光部として機能する。本実施形態では、青、黄、赤の３色のＬＥＤが配置されたＬＥＤユニットを用いて、上記３状態を表現する。
　図５は、本発明の第１の実施形態の顔認証装置のディスプレイとカードリーダーの位置関係を説明するための部分透視図である。本実施形態の顔認証装置１０のカードリーダー１０３は、ディスプレイ１０２の面よりもディスプレイの高さＴ１より長いＴ２だけ前面に配置されている。そして、壁部材１０４は、ディスプレイ１０２の上端よりも上の位置からカードリーダー１０３の前端をカバーするように側方から見て円弧状に延びている。これにより、ディスプレイ１０２の側面及び斜め後方の位置から、ディスプレイ１０２の表示面を隠すことが可能となっている。
　一方で、壁部材１０４の上端には上記ＬＥＤ１０６が配置されているため、顔認証装置１０の動作状態を確認することは可能となっている。
　続いて、上記顔認証装置１０の内部構成について説明する。図６は、本発明の第１の実施形態の顔認証装置の構成を表した機能ブロック図である。図６を参照すると、カメラ１０１、視線誘導用ライト１０５、ディスプレイ１０２、ＬＥＤ１０６、カードリーダー１０３、人感センサー１０８、通信部１３０及び記憶部１２０が制御部１１０に接続された構成が示されている。
　制御部１１０は、特徴抽出部１１１と、照合部１１２とを備えている。特徴抽出部１１１は、カメラ１０１にて撮影された認証対象者の顔画像データから認証対象者の顔の特徴データを抽出する。
　照合部１１２は、通信部１３０を介してセンターサーバから受信した認証対象者の顔の特徴データと、特徴抽出部１１１にて抽出された特徴データとを照合する。そして、照合部１１２は、前記照合により、カメラ１０１に写された人物が、カードリーダー１０３にて読み取った個人と同一人物であるか否かを判定する。前記判定の結果、カメラ１０１に写された人物が、カードリーダーにて読み取った個人と同一人物であると判定した場合、制御部１１０は、ゲート駆動装置を駆動する。また、制御部１１０は、カードリーダー１０３におけるカード読み取りの結果や、照合部１１２の照合結果に応じて、ディスプレイ１０２の認証結果の表示やＬＥＤ１０６の発光を制御する。
　通信部１３０は、事前に登録された認証対象者群の顔の特徴データを保持するセンターサーバ（図示省略）に対して、カードから読み取られた個人の顔の特徴データを要求する。通信部１３０は、センターサーバから指定した個人の顔の特徴データを受信すると、制御部１１０に送る。
　記憶部１２０は、特徴抽出部１１１で抽出した個人の顔の特徴データやセンターサーバから受信した個人の顔の特徴データの一時保存場所として使用される。これらの個人の顔の特徴データは、照合の完了後、記憶部１２０から削除される。
　その他の構成要素は、図３～図５を参照して説明しているので、説明を省略する。
　続いて、第１の実施形態の顔認証装置１０の動作について図面を参照して詳細に説明する。図７は、本発明の第１の実施形態の顔認証装置１０の制御部１１０による各部の動作を表したシーケンス図である。図７を参照すると、まず、人感センサー１０８が人の接近を検知すると（ステップＳ００１）、制御部１１０は、カメラ１０１に連続撮影を指示する（ステップＳ００２）。
　また、制御部１１０は、視線誘導用ライト１０５を点灯し、カメラ１０１の方向を向くように認証対象者の視線を誘導する（ステップＳ００３）。なお、図７におけるステップＳ００２と、Ｓ００３は、同時に行ってもよいし、また、逆の順序で行ってもよい。
　その後、認証対象者が、カードリーダー１０３にカードをセットすると、カードリーダー１０３はカードを読み取って、認証対象者の個人ＩＤを含むカード情報を取得する（ステップＳ００４）。
　次に、制御部１１０は、通信部１３０を介して、センターサーバから、カードリーダー１０３にて読み取った個人ＩＤに対応する個人の顔の特徴データを取得する（ステップＳ００５）。
　次に、制御部１１０は、カメラ１０１にて撮影された顔画像の中から、照合に適した条件を備えた顔画像を１つ以上選択し、その特徴量を計算し、特徴データを生成する（ステップＳ００６）。ここで、照合に適した条件としては、画像中の顔の大きさ、顔の表情、事前に顔の特徴データを登録した際の撮影条件との一致度などを選択して設定することができる。また、ベストショット画像と呼ばれる顔画像選択アルゴリズムを用いて顔画像を選択する方法も採用可能である。
　次に、制御部１１０は、センターサーバから取得した顔の特徴データと、ステップＳ００６で計算した特徴データとを照合し、カメラ１０１にて撮影された人物が、カードから特定された人物であるか否かを判定する（ステップＳ００７）。
　次に、制御部１１０は、ディスプレイ１０２に判定結果に応じたメッセージを表示する。同様に、制御部１１０は、ＬＥＤ１０６を、判定結果に応じた点灯パターンで点灯させる（ステップＳ００８～Ｓ０１０）。
　図８は、ステップＳ００８～Ｓ０１０における判定結果に応じた表示内容と、点灯パターンの組み合わせの一例を示している。図８の例では、例えば、認証に成功（同一人物と判定）した場合、制御部１１０は、ディスプレイ１０２に「ＧＯ」というメッセージを表示し、ＬＥＤ１０６を青色で点灯させる。これにより、認証対象者は、自身の認証が完了したと判断し、ゲートを進むことになる。また、顔認証装置１０の周囲にいるスタッフも、ＬＥＤが青色に点灯することにより、問題なく認証が行われたと認識できる。
　図９は、認証に成功（同一人物と判定）した場合の顔認証装置１０の動作を説明するための図である。図９の例では、ディスプレイ１０２には、認証に成功（同一人物と判定）した顔画像と、その下に、「Ｖ　ＧＯ」との文字が表示されている。また、ディスプレイ１０２の両脇の壁部材１０４上端はＬＥＤ１０６により青色に光っている。図９の例では、後ろ斜め上から見ているためディスプレイ１０２の表示面が見えてしまっているが、通常は、壁部材１０４により、ディスプレイ１０２の表示面は隠れてしまうため、認証対象者のプライバシーは保護される。
　再度、図８を参照すると、認証に失敗（同一人物でないと判定）した場合、制御部１１０は、ディスプレイ１０２に「ＲＥＴＲＹ」というメッセージを表示し、ＬＥＤ１０６を黄色で点灯させる。これにより、認証対象者は、自身の認証が失敗したことを認識し、ディスプレイ１０２やサブディスプレイ１０７の案内に従って撮影に入ることができる。また、顔認証装置１０の周囲にいるスタッフも、ＬＥＤが黄色に点灯することにより、認証対象者の認証に失敗したことを認識できる。
　さらに、顔画像の事前登録が済んでいないなどの理由で、カードリーダー１０３で読み取ったカードの個人情報に対応する特徴データを取得できない場合も想定される。この場合、制御部１１０は、ディスプレイ１０２に「ＥＲＲＯＲ」というメッセージを表示し、ＬＥＤ１０６を赤色で点灯させる。これにより、認証対象者は、カードに問題があることを認識し、別のカードを探したり、スタッフに問い合わせたりする等といったアクションを採ることができる。また、顔認証装置１０の周囲にいるスタッフも、赤色のＬＥＤにより、認証対象者のカードに問題があることを認識し、声を掛ける等のアクションを採ることができる。
　これらの場合も図９の例と同様に、壁部材１０４により、ディスプレイ１０２の表示面は隠れてしまうため、認証対象者のプライバシーは保護される。　
　次に、制御部１１０は、ステップＳ００７で判定した結果に応じてゲート駆動装置に対し、開閉の指示を送る（ステップＳ０１１）。その後、制御部１１０は、照合に用いた特徴データを破棄する（ステップＳ０１２）。これにより、顔認証装置１０に、必要のない個人情報が溜め込まれることを防ぐことができる。
　また、上記した実施形態において、顔認証装置１０が、センターサーバから取得したカード情報等に重複があるか否か等により、重複入場を検知する機能を備えていてもよい。この場合も、制御部１１０が、ディスプレイ１０２に「ＥＲＲＯＲ」というメッセージを表示し、ＬＥＤ１０６を赤色で点灯させるなどの動作を行うことが好ましい。また、上記重複入場の検知をサンタ－サーバ側で行うようにしてもよい。この場合も、制御部１１０が、ディスプレイ１０２に「ＥＲＲＯＲ」というメッセージを表示し、ＬＥＤ１０６を赤色で点灯させるなどの動作を行うことが好ましい。
　以上説明したように、本実施形態の顔認証装置１０によれば、カード併用型の顔認証装置におけるスループットの確保と、認証対象者（被認証者）のプライバシーへの配慮とを両立させることが可能となる。その理由は、人感センサー１０８、カメラ１０１、視線誘導用ライト１０５等を連携させた効率の良い顔画像の撮影機能と、壁部材１０４による個人情報や認証結果の保護機能を備えた構成を採用したことにある。
　なお、上記した実施形態では、ステップＳ００５で個人の顔の特徴データを取得してから、カメラ１０１にて撮影した画像の特徴量を計算し、特徴データを生成するものとして説明したが、カメラ１０１にて撮影した画像の特徴量の計算を先に実行してもよい。例えば、ステップＳ００２～Ｓ００３で撮影開始後、制御部１１０にて、照合に適した条件を備えた顔画像を選択し、その特徴量を計算し、特徴データを生成してもよい。このようにすることで、スループットをより向上させることもできる。
［第２の実施形態］
　続いて、個人特定用のカードのほかに、事前に設定した権限カードを用いてゲートの開閉制御を行うようにした第２の実施形態について説明する。第２の実施形態の顔認証装置の構成は、第１の実施形態とほぼ同様の構成で実現できるので、その相違点を中心に説明する。
　図１０は、本発明の第２の実施形態の顔認証装置の各部の動作を表したシーケンス図である。図７に示した第１の実施形態のシーケンス図との相違点は、顔認証の後に、権限カードの提示を求め、認証対象者が適切な権限を有しているか否かの確認を行う点である。
　そして、第２の実施形態の顔認証装置では、図１０のステップＳ００５ａにおいて、顔の特徴データに加えて、該当する人物に付与されている権限情報が取得される。この権限情報には、該当する人物が、顔認証装置の制御するゲートから入場できる権限を有しているか否かの情報が含まれている。
　また、図１０のステップＳ０１３～Ｓ０１７に示したとおり、第２の実施形態では、個人特定用のカード（個人ＩＤカード）による顔認証の後、権限カードの読み取りが行われる（ステップＳ０１３）。図１１は、ステップＳ００４と、ステップＳ０１３において、サブディスプレイ１０７に表示されるメッセージの一例を示す図である。
　そして、第２の実施形態の顔認証装置では、図１０のステップＳ０１４において、カードから特定された人物と同一人物だと判定された認証対象者が正当な入場権限を有しているか否かを判定する。
　次に、制御部１１０は、ディスプレイ１０２に権限確認結果に応じたメッセージを表示する。同様に、制御部１１０は、ＬＥＤ１０６を、権限確認結果に応じた点灯パターンで点灯させる（ステップＳ０１５～Ｓ０１７）。
　図１２は、図１０のステップＳ００８～Ｓ０１０及びステップＳ０１５～Ｓ０１７における判定結果に応じた表示内容と、点灯パターンの組み合わせの一例を示している。図１２の例では、例えば、ステップＳ００７の認証に成功（同一人物と判定）した時点で、制御部１１０は、ディスプレイ１０２に「ＯＫ」というメッセージを表示し、ＬＥＤ１０６を黄色で点灯させる。これにより、認証対象者は、自身の認証が完了したと判定し、権限カードをカードリーダー１０３に読み取らせる動作を行うことになる。また、顔認証装置１０の周囲にいるスタッフも黄色のＬＥＤにより、問題なく認証が行われたと認識できる。
　その後、例えば、ステップＳ０１４の権限確認に成功（権限ありと判定）した時点で、制御部１１０は、ディスプレイ１０２に「ＧＯ」というメッセージを表示し、ＬＥＤ１０６を青色で点灯させる。これにより、認証対象者は、自身の権限確認が完了したと判定し、ゲートに向かうことができる。また、顔認証装置１０の周囲にいるスタッフも青色のＬＥＤにより、問題なく権限確認が行われたと認識できる。
　また本実施形態では、ステップＳ００７の認証やステップＳ０１４の権限確認においてそれぞれ問題が生じた場合も、ディスプレイ１０２の表示と、ＬＥＤの点灯パターンで、認証対象者及びスタッフがそれぞれ状態を把握できるようになっている（図１２参照）。例えば、ステップＳ００７の認証に失敗した場合、図１２の認証失敗状態となる。この場合、制御部１１０は、ディスプレイ１０２に「ＲＥＴＲＹ」の文字を表示し、ＬＥＤ１０６を黄色で点滅させる。また例えば、ステップＳ０１４の権限確認で権限範囲外と判定した場合、図１２の権限なし状態となる。この場合、制御部１１０は、ディスプレイ１０２に「ＳＴＯＰ」の文字を表示し、ＬＥＤ１０６を赤色で点灯させる。
　同様に、何らかの理由によりシステムに異常が検知された場合、図１２のシステム異常状態となる。この場合、制御部１１０は、ディスプレイ１０２に「ＷＡＩＴ」の文字を表示し、ＬＥＤ１０６を赤色で点滅させる。また、第１の実施形態と同様に、カードの個人情報に対応する特徴データを取得できない場合等は、ディスプレイ１０２に「ＥＲＲＯＲ」の文字を表示し、ＬＥＤ１０６を赤色で点灯させることができる。なお、この場合、ＬＥＤ１０６の点灯状態は、図１２の権限なし状態と同じとなるが、必要に応じてＬＥＤ１０６の点灯パターンを変えてもよい。例えば、いずれか一方を、別の色で点灯させたり、通常よりも高速で点滅させる態様などを採用することができる。
　以上説明したように、本実施形態によれば、個人ＩＤカードと権限カードを併用したゲートの開閉制御とともに、その動作状態をディスプレイ１０２と、ＬＥＤ１０６で、知らせることが可能となっている。これにより、ある人物Ａに対し、期間ａはゲートｘとゲートｙの通行を認め、期間ａの経過後は、ゲートｘの通行を認める一方、ゲートｙの通行を不許可とするといったきめ細かい制御を行うことが可能となる。
［第３の実施形態］
　上記した第１、第２の実施形態では、顔認証装置１０側で照合処理を行うものとして説明したが、センターサーバ側で照合処理を行う構成も採用可能である。その場合、図１３に示すように、顔認証装置１０ａの制御部１１０ａの照合部は省略されることになる。そして、顔認証装置１０ａは、センターサーバ側に顔の特徴データを送信し、照合結果を受け取り、ディスプレイ１０２及びＬＥＤ１０６をそれぞれ制御することになる。
　このような第３の実施形態によれば、センターサーバ側で保持している個人の顔の特徴データを顔認証装置１０ａに送信しないで済むという利点がある。これにより、顔認証装置１０ａが何らかの攻撃を受けたとしても、個人の顔の特徴データを窃取させずに済むという利点がある。
　以上、本発明の各実施形態を説明したが、本発明は、上記した実施形態に限定されるものではなく、本発明の基本的技術的思想を逸脱しない範囲で、更なる変形・置換・調整を加えることができる。例えば、各図面に示したネットワーク構成、各要素の構成、メッセージの表現形態は、本発明の理解を助けるための一例であり、これらの図面に示した構成に限定されるものではない。
　例えば、上記した実施形態では、壁部材１０４が側方から見て円弧状に形成されている例を挙げて説明したが、壁部材１０４の形状はこの形態に限られない。例えば、図１４（ａ）のように、壁部材１０４が側方から見て直線状に形成されていてもよい。この場合も、壁部材１０４が、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置されていることになる。また、例えば、図１４（ｂ）のように、壁部材１０４が側方から見て四角形状（衝立状）に形成されていてもよい。この場合も、壁部材１０４が、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置されていることになる。壁部材１０４の形状は、これらに限られず、前記ディスプレイの上端部から、前記カードリーダーの前端部に至る仮想線よりも利用者側に張り出した形態であればよく、これらを適宜選択して採用することができる。
　例えば、上記した実施形態では、顔認証装置１０がセンターサーバから個人の顔の特徴データを取得するものとして説明したが、カード自体に個人の顔の特徴データが保持されている場合、この個人の顔の特徴データを用いて照合を行うこともできる。この場合、顔認証装置１０がネットワークに接続されていなくとも済むという利点がある。
　また、上記した実施形態では、視線誘導用ライト１０５として、カメラ１０１のレンズ外周部を囲むリングライトを用いるものとして説明したが、視線誘導用ライト１０５の形態はこの形態に限定されない。例えば、カメラ１０１のレンズの近傍に点光源や小型ディスプレイを配置した構成も採用可能である。
　また、上記した実施形態では、壁部材１０４の上端にＬＥＤ１０６を配置して、発光部として機能させるものとして説明したが、発光部の構成はこの形態に限定されない。例えば、壁部材１０４と独立して、ＬＥＤや回転灯などを配置して、認証結果を識別できるよう点灯パターンを変更可能な発光部として機能させる構成も採用可能である。
　また、上記した実施形態では、顔認証装置がゲートを制御する用途を挙げて説明したが、本発明の顔認証装置は、ゲートの制御以外にも適用可能である。例えば、企業等における従業員の出退勤管理システムやホテルなどにおけるチェックインシステムにも適用することができる。
　また、上記した第１～第３の実施形態に示した手順は、顔認証装置の制御部１１０として機能するコンピュータ（図１５の９０００）に、制御部１１０としての機能を実現させるプログラムにより実現可能である。このようなコンピュータは、図１５のＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）９０１０、通信インタフェース９０２０、メモリ９０３０、補助記憶装置９０４０を備える構成に例示される。すなわち、図１５のＣＰＵ９０１０にて、装置各部の制御プログラムや顔認証プログラム等を実行し、その補助記憶装置９０４０等に保持された各計算パラメーターの更新処理を実施させればよい。
　即ち、上記した第１～第３の実施形態に示した顔認証装置の各部（処理手段、機能）は、顔認証装置に搭載されたプロセッサに、そのハードウェアを用いて、上記した各処理を実行させるコンピュータプログラムにより実現することができる。
　最後に、本発明の好ましい形態を要約する。
［第１の形態］
　（上記第１の視点による顔認証装置参照）
［第２の形態］
　上記した顔認証装置は、
　さらに、前記壁部材の上端に配置され、認証結果を識別できるよう点灯パターンを変更可能な発光部を備えることが好ましい。
［第３の形態］
　上記した顔認証装置の発光部は、
　認証成功、認証失敗、及び、カード読み取りエラーの少なくとも３状態を表現可能に構成されていることが好ましい。
［第４の形態］
　上記した顔認証装置の前記カードリーダーは、
　その前端が、前記ディスプレイの面より、少なくとも前記ディスプレイの面の高さＴ１以上、手前側に位置するよう配置されていることが好ましい。
［第５の形態］
　上記した顔認証装置は、さらに、
　前記カメラのレンズ面の近傍に配置された視線誘導用ライトと、
　前記認証対象者の接近を検知すると、前記視線誘導用ライトを点灯させる人感センサーと、を備え、前記視線誘導用ライトの発光と連動して撮影動作を行うよう構成されていることが好ましい。
［第６の形態］
　上記した顔認証装置は、
　さらに、前記カメラにて撮影した顔画像と、事前に撮影され前記カードリーダーにて特定した認証対象者の顔画像と、を照合する照合部を備えていてもよい。
［第７の形態］
　上記した顔認証装置は、
　所定のセンターサーバに対し、前記カメラにて撮影した顔画像から計算した顔の特徴データを送信し、前記センターサーバから、顔認証の結果を受け取る構成を採ることもできる。
［第８の形態］
　上記した顔認証装置の前記壁部材の上端は、側方から見て円弧状に形成されていることが好ましい。
［第９の形態］
　（上記第２の視点による顔認証装置の制御方法参照）
　なお、上記の特許文献の各開示を、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の開示の枠内において種々の開示要素（各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし選択（部分的削除を含む）が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。さらに、上記引用した文献の各開示事項は、必要に応じ、本発明の趣旨に則り、本発明の開示の一部として、その一部又は全部を、本書の記載事項と組み合わせて用いることも、本願の開示事項に含まれるものとみなされる。
　１０、１０ａ、１０ｂ、１０ｃ、１００　顔認証装置
　１０１　カメラ
　１０２　ディスプレイ
　１０３　カードリーダー
　１０４　壁部材
　１０５　視線誘導用ライト
　１０６　ＬＥＤ（発光部）
　１０７　サブディスプレイ
　１０８　人感センサー
　１１０、１１０ａ　制御部
　１１１　特徴抽出部
　１１２　照合部
　１２０　記憶部
　１３０　通信部
　９０００　コンピュータ
　９０１０　ＣＰＵ
　９０２０　通信インタフェース
　９０３０　メモリ
　９０４０　補助記憶装置

Claims (9)

  1. 　認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影するカメラと、
    　前記カメラの下方に配置され、前記カメラにより撮影された顔画像を表示するディスプレイと、
    　前記ディスプレイの下方、かつ、前記認証対象者から見て手前に配置され、前記認証対象者から提示されたカードを読み取るカードリーダーと、
    　少なくとも、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置された壁部材と、を備えた顔認証装置。
  2. 　さらに、前記壁部材の上端に配置され、認証結果を識別できるよう点灯パターンを変更可能な発光部を備えた請求項１の顔認証装置。
  3. 　前記発光部は、認証成功、認証失敗、及び、カード読み取りエラーの少なくとも３状態を表現可能に構成されている請求項２の顔認証装置。
  4. 　前記カードリーダーの前端が、前記ディスプレイの面より、少なくとも前記ディスプレイの面の高さ以上、手前側に位置する請求項１又は２の顔認証装置。
  5. 　前記カメラのレンズ面の近傍に配置された視線誘導用ライトと、
    　前記認証対象者の接近を検知すると、前記視線誘導用ライトを点灯させる人感センサーと、を備え、
    　前記視線誘導用ライトの発光と連動して撮影動作を行う請求項１から４いずれか一の顔認証装置。
  6. 　さらに、前記カメラにて撮影した顔画像と、事前に撮影され前記カードリーダーにて特定した認証対象者の顔画像と、を照合する照合部を備えた、請求項１から５いずれか一の顔認証装置。
  7. 　所定のセンターサーバに対し、前記カメラにて撮影した顔画像から計算した顔の特徴データを送信し、前記センターサーバから、顔認証の結果を受け取る請求項１から５いずれか一の顔認証装置。
  8. 　前記壁部材の上端が、側方から見て円弧状に形成されている請求項１から７いずれか一の顔認証装置。
  9. 　認証対象者と正対可能な位置に配置され、前記認証対象者の顔画像を撮影するカメラと、
    　前記カメラの下方に配置され、前記カメラにより撮影された顔画像を表示するディスプレイと、
    　前記ディスプレイの下方、かつ、前記認証対象者から見て手前に配置され、前記認証対象者から提示されたカードを読み取るカードリーダーと、
    　少なくとも、前記ディスプレイの上端部から、前記カードリーダーの前端部に至るように配置された壁部材と、
    　前記壁部材の上端に配置され、認証結果を識別できるよう点灯パターンを変更可能な発光部を備えた顔認証装置が、
    　前記カードリーダーにて、カードを読み取って認証対象者を特定するステップと、
    　前記カメラにより認証対象者の顔画像を撮影するステップと、
    　前記カメラにて撮影した顔画像と、事前に撮影され前記カードリーダーにて特定した認証対象者の顔画像とを照合するステップと、
    　前記照合の結果に対応する点灯パターンで、前記発光部を点灯させるステップと、
    　を含む顔認証装置の制御方法。
PCT/JP2019/042754 2018-11-01 2019-10-31 顔認証装置及び顔認証装置の制御方法 WO2020090972A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
US17/286,637 US20210374220A1 (en) 2018-11-01 2019-10-31 Facial authentication apparatus and control method for facial authentication apparatus
JP2020554035A JPWO2020090972A1 (ja) 2018-11-01 2019-10-31 顔認証装置及び顔認証装置の制御方法
EP19879618.7A EP3876185A4 (en) 2018-11-01 2019-10-31 FACIAL AUTHENTICATION DEVICE AND METHOD OF CONTROLLING THE FACIAL AUTHENTICATION DEVICE
JP2022153619A JP2022177247A (ja) 2018-11-01 2022-09-27 顔認証装置及び顔認証装置の制御方法
US18/090,839 US20230140496A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus
US18/091,058 US20230132575A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus
US18/090,977 US20230135416A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-206696 2018-11-01
JP2018206696 2018-11-01

Related Child Applications (4)

Application Number Title Priority Date Filing Date
US17/286,637 A-371-Of-International US20210374220A1 (en) 2018-11-01 2019-10-31 Facial authentication apparatus and control method for facial authentication apparatus
US18/091,058 Continuation US20230132575A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus
US18/090,839 Continuation US20230140496A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus
US18/090,977 Continuation US20230135416A1 (en) 2018-11-01 2022-12-29 Facial authentication apparatus and control method for facial authentication apparatus

Publications (1)

Publication Number Publication Date
WO2020090972A1 true WO2020090972A1 (ja) 2020-05-07

Family

ID=70463326

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/042754 WO2020090972A1 (ja) 2018-11-01 2019-10-31 顔認証装置及び顔認証装置の制御方法

Country Status (4)

Country Link
US (4) US20210374220A1 (ja)
EP (1) EP3876185A4 (ja)
JP (2) JPWO2020090972A1 (ja)
WO (1) WO2020090972A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7481914B2 (ja) 2020-06-15 2024-05-13 株式会社東芝 通行制御装置および通行制御システム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114220204B (zh) * 2021-12-10 2024-01-26 山东黄海智能装备有限公司 一种用于酒店的身份证阅读机

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001034674A (ja) * 1999-07-23 2001-02-09 Matsushita Electric Ind Co Ltd 無人契約装置
JP2005025439A (ja) * 2003-07-01 2005-01-27 Matsushita Electric Ind Co Ltd 目画像撮像装置
JP2006155078A (ja) * 2004-11-26 2006-06-15 Glory Ltd 顔認証装置、顔認証方法および顔認証プログラム。
JP2007004612A (ja) 2005-06-24 2007-01-11 Glory Ltd 顔認証装置及び顔認証方法
JP2008310481A (ja) * 2007-06-13 2008-12-25 Softbank Mobile Corp 販売システム、販売店舗および販売方法
JP2015082194A (ja) * 2013-10-22 2015-04-27 株式会社東芝 認証装置及び認証方法
JP2016053896A (ja) * 2014-09-04 2016-04-14 グローリー株式会社 ゲートシステムおよびゲート通過の制御方法
WO2018061812A1 (ja) * 2016-09-30 2018-04-05 パナソニックＩｐマネジメント株式会社 ゲート装置
JP2018109935A (ja) 2016-12-28 2018-07-12 グローリー株式会社 顔照合装置及び顔照合方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9256720B2 (en) * 2011-05-18 2016-02-09 Nextgenid, Inc. Enrollment kiosk including biometric enrollment and verification, face recognition and fingerprint matching systems
JP6248303B2 (ja) * 2013-08-14 2017-12-20 株式会社北電子 遊技場システム
CN108780266B (zh) * 2016-03-17 2021-01-15 松下知识产权经营株式会社 对照装置
JP6820150B2 (ja) * 2016-03-24 2021-01-27 ローレルバンクマシン株式会社 読取装置
JP6783430B2 (ja) * 2016-03-29 2020-11-11 ナスクインターナショナル株式会社 モバイル端末を用いた資格認証システム、資格認証用ツール、及び、資格認証方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001034674A (ja) * 1999-07-23 2001-02-09 Matsushita Electric Ind Co Ltd 無人契約装置
JP2005025439A (ja) * 2003-07-01 2005-01-27 Matsushita Electric Ind Co Ltd 目画像撮像装置
JP2006155078A (ja) * 2004-11-26 2006-06-15 Glory Ltd 顔認証装置、顔認証方法および顔認証プログラム。
JP2007004612A (ja) 2005-06-24 2007-01-11 Glory Ltd 顔認証装置及び顔認証方法
JP2008310481A (ja) * 2007-06-13 2008-12-25 Softbank Mobile Corp 販売システム、販売店舗および販売方法
JP2015082194A (ja) * 2013-10-22 2015-04-27 株式会社東芝 認証装置及び認証方法
JP2016053896A (ja) * 2014-09-04 2016-04-14 グローリー株式会社 ゲートシステムおよびゲート通過の制御方法
WO2018061812A1 (ja) * 2016-09-30 2018-04-05 パナソニックＩｐマネジメント株式会社 ゲート装置
JP2018109935A (ja) 2016-12-28 2018-07-12 グローリー株式会社 顔照合装置及び顔照合方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
YUASA, SHUICHI; WADAYAMA, YUTAKA; FUJII, AKIHIRO: "Progresses in practical application for biometric authentication technology", OKI TECHNICAL REVIEW, vol. 73, no. 3, 1 July 2006 (2006-07-01), Japan, pages 62 - 65, XP009527804, ISSN: 1346-5961 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7481914B2 (ja) 2020-06-15 2024-05-13 株式会社東芝 通行制御装置および通行制御システム

Also Published As

Publication number Publication date
US20230135416A1 (en) 2023-05-04
US20230132575A1 (en) 2023-05-04
JP2022177247A (ja) 2022-11-30
US20230140496A1 (en) 2023-05-04
US20210374220A1 (en) 2021-12-02
EP3876185A1 (en) 2021-09-08
JPWO2020090972A1 (ja) 2021-09-30
EP3876185A4 (en) 2021-12-15

Similar Documents

Publication Publication Date Title
JP5261009B2 (ja) 顔画像登録装置
JP6888788B2 (ja) マルチ生体データを用いた非接触式マルチ生体認識方法及びマルチ生体認識装置
TWI278782B (en) Personal recognition apparatus
JP5922214B2 (ja) 開眼閉眼状態により制御される認証システム、その携帯型制御装置およびコンピュータ読み取り可能な記録媒体
JP6849200B2 (ja) マルチ生体データを用いた非接触式マルチ生体認識方法及びマルチ生体認識装置
US20100098300A1 (en) Method and system for biometric identification or verification
JP2004164483A (ja) 目画像認証装置ならびにそれを用いた入退出管理装置および情報処理装置
KR101057719B1 (ko) 얼굴 인식을 이용한 사용자 인증 시스템 및 얼굴 인식을 이용한 사용자 인증 방법
CN109979042A (zh) 一种双重解锁的方法、装置以及系统
JP2022177247A (ja) 顔認証装置及び顔認証装置の制御方法
JP2009015518A (ja) 眼画像撮影装置及び認証装置
KR100728657B1 (ko) 다수의 적외선 카메라를 이용한 무인 출입통제 시스템 및그 방법
JP2017004398A (ja) 認証装置及び認証方法
JP4943127B2 (ja) 個人認証装置および個人認証システム
JP2006126899A (ja) 生体判別装置、生体判別方法、およびそれを用いた認証システム
US20220101651A1 (en) System, device and method for authentication with use of information code
WO2021066252A1 (ko) 바이오메트릭스 기반 차량 제어 장치 및 이를 이용한 차량 제어 방법
CN110574031B (zh) 用于电子设备的登记方案
JP2005292994A (ja) 人物認識装置と通行制御装置
WO2023033057A1 (ja) ゲートシステム、セキュリティシステム、及びセンサユニット
JP4131180B2 (ja) 顔認証装置
TWI729679B (zh) 認證系統、認證裝置、及認證方法
JP2006158827A (ja) 眼画像撮影装置および認証装置ならびに誘導方法
JP6358636B1 (ja) 配車システム
JP5405340B2 (ja) 画像監視装置および監視システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19879618

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020554035

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019879618

Country of ref document: EP

Effective date: 20210601