WO2015136938A1 - 情報処理方法および情報処理システム - Google Patents

情報処理方法および情報処理システム Download PDF

Info

Publication number
WO2015136938A1
WO2015136938A1 PCT/JP2015/001359 JP2015001359W WO2015136938A1 WO 2015136938 A1 WO2015136938 A1 WO 2015136938A1 JP 2015001359 W JP2015001359 W JP 2015001359W WO 2015136938 A1 WO2015136938 A1 WO 2015136938A1
Authority
WO
WIPO (PCT)
Prior art keywords
authentication
information
unit
image
person
Prior art date
Application number
PCT/JP2015/001359
Other languages
English (en)
French (fr)
Inventor
廣大 齊藤
助川　寛
Original Assignee
株式会社 東芝
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社 東芝 filed Critical 株式会社 東芝
Priority to JP2016507365A priority Critical patent/JPWO2015136938A1/ja
Priority to EP15760931.4A priority patent/EP3118810A4/en
Publication of WO2015136938A1 publication Critical patent/WO2015136938A1/ja
Priority to US15/263,984 priority patent/US20170070501A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/30—Individual registration on entry or exit not involving the use of a pass
    • G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/30—Individual registration on entry or exit not involving the use of a pass
    • G07C9/38—Individual registration on entry or exit not involving the use of a pass with central registration

Definitions

  • Embodiments described herein relate generally to an information processing method and an information processing system.
  • biometric information is acquired at an entrance of a device such as an escalator where movement of a passerby is restricted, and the passerby is authenticated before the passerby arrives at the exit of the device.
  • a technique for efficiently authenticating passers-by without omission by switching authentication of passers-by to simple processing there is a technique for authenticating a passer-by multiple times and increasing the passer-by authentication accuracy step by step.
  • the technology for obtaining biometric information at the entrance of an apparatus such as an escalator where movement of the passerby is restricted and performing authentication until the passerby reaches the exit improves the efficiency of authentication itself using biometric information. Rather, it is effective when there is a grace period for authentication.
  • the technology for switching the passer-by authentication to a simple one may cause passers to whom strict authentication is not applied, resulting in a decrease in authentication accuracy.
  • the technology that authenticates the passer several times and increases the authentication accuracy step by step cannot be applied in places where there are no restrictions on the passer's passage route. When a passerby is changed on the way, the change of the passerby cannot be detected.
  • the technology for transmitting a photographic image to a second position such as an immigration check at the destination of an airplane makes it possible to use the photographic image for a visual immigration check. Efficient authentication cannot be achieved.
  • person authentication is performed using a person's face image captured and captured while the person is moving through a gate, waiting room, hallway, etc., and a face image read from a personal authentication medium possessed by the person. It is difficult for the technology to stabilize the authentication accuracy due to a variation such as the deterioration of the face image read from the personal authentication medium.
  • An embodiment of the present invention aims to provide an information processing method and an information processing system capable of detecting a change of a passer when the passer changes in the course of a pass of the passer. .
  • the first authentication process for authenticating the passer-by using the second biometric information acquired from the first authentication process and the passer-by authentication by the first authentication process are successful, the first authentication process is used.
  • the third biological information based on at least one of the first biological information and the second biological information is stored in the storage unit, and passes through the second position downstream from the first position in the direction in which the passerby travels.
  • the block diagram which shows the functional structure of the information processing system concerning 1st Embodiment.
  • the flowchart which shows the flow of the authentication process of the passer-by in the 1st authentication apparatus which the information processing system concerning 1st Embodiment has.
  • the flowchart which shows the flow of the authentication process of the passerby in the 2nd authentication apparatus which the information processing system concerning 1st Embodiment has.
  • the figure which shows the example of a display of the authentication result of the passerby in the 2nd authentication apparatus which the information processing system concerning 1st Embodiment has.
  • the block diagram which shows the functional structure of the information processing system concerning 2nd Embodiment.
  • the flowchart which shows the flow of the authentication process of the passerby in the 2nd authentication apparatus which the information processing system concerning 2nd Embodiment has;
  • the figure which shows the structure of the information processing system to which the entrance / exit management system concerning 3rd Embodiment is applied.
  • the face image of the person photographed by the camera and the face image of the person stored in the passport possessed by the passing person are compared and displayed. Display unit as a monitor for managers.
  • the flowchart which shows the flow of the acquisition process of the biometric information by the boarding guidance apparatus which the information processing system concerning 3rd Embodiment has.
  • the flowchart which shows the flow of the authentication process by the 1st authentication apparatus which the information processing system concerning 3rd Embodiment has.
  • the flowchart which shows the flow of the authentication process by the 2nd authentication apparatus which the information processing system concerning 3rd Embodiment has.
  • the flowchart which shows the flow of an authentication process in case the 2nd authentication apparatus which the information processing system concerning 3rd Embodiment has a reading part which can read identification information from a passport.
  • FIG. 1 is a diagram illustrating a configuration of an information processing system to which an information processing method according to the first embodiment is applied.
  • the information processing system 1 includes biometric information (an example of first biometric information) read from a medium M possessed by a passerby who passes through a first position P ⁇ b> 1, 1st authentication which authenticates a passerby using biometric information (an example of the 2nd biometric information) acquired from the 1st picture G1 obtained by picturizing a passerby which passes position P1 with the 1st image pick-up part 11
  • biometric information an example of first biometric information
  • the first biometric information generated based on at least one of the two pieces of biometric information used in the first authentication process when the first authentication device 10 that executes the process and the passer-by authentication by the first authentication process are successful.
  • a server 30 having a feature information storage unit 31 for storing (hereinafter referred to as authentication feature information) and a passer-by who passes through a second position P2 downstream from the first position P1 in the travel direction of the passer-by is second. Obtained by imaging with the imaging unit 21 Using the biometric information (an example of the fourth biometric information) acquired from the second image G2 and the authentication feature information stored in the feature information storage unit 31, a second authentication process for authenticating the passerby is executed. 2 authentication device 20. Furthermore, a second display unit 26 is provided as an administrator monitor that displays the result of the authentication process between the first authentication device 10 and the second authentication device 20 for the administrator.
  • the downstream side of the first position P1 in the traveling direction of the passer is a position that passes after the first position P1 in the pass route of the passer.
  • the information processing system 1 performs the first authentication process on the passerby who passes the first position P1, and then uses the second imaging unit 21 to detect the passerby who passes the second position P2.
  • the second authentication process for authenticating the passerby using the biometric information acquired from the second image G2 obtained by imaging and the authentication feature information stored in the feature information storage unit 31, An identification process is performed to detect whether or not the passer-by passing through the second position P2 is the same person as the passer-by passing through the first position P1.
  • the database of the host device such as the server 30 can be used. It is not necessary to search for biometric information used in the first and second authentication processes, or to switch the passer authentication to a simple one in order to shorten the time required for the first and second authentication processes. Passer authentication can be performed efficiently while preventing a decrease in accuracy.
  • the information processing system 1 includes a first authentication process (so-called 1: 1 verification) executed by the first authentication apparatus 10 and a second authentication process (executed by the second authentication apparatus 20).
  • This is a system for efficiently authenticating a passerby by combining so-called 1: N verification.
  • the 1: 1 verification in the first authentication device 10 is performed before the passerby reaches the second position P2 such as an entrance of a building or an entrance of a security management area.
  • Biological information read from the medium M possessed by a passerby passing through P1 and biological information acquired from the first image G1 obtained by imaging the passer-by passing through the first position P1 by the first imaging unit 11. Is a passer-by authentication process.
  • the 1: N verification in the second authentication device 20 is performed on the authentication feature information stored in the feature information storage unit 31 of the server 30 and a passerby who passes the second position P2.
  • This is a passer-by authentication process using biometric information acquired from the second image G2 obtained by imaging with the second imaging unit 21.
  • the biometric information is not read from the medium M possessed by the passerby, and is acquired from the second image G2 obtained by the imaging of the second imaging unit 21. If the biometric information matches any of the authentication feature information stored in the feature information storage unit 31 of the server 30, it is determined that the passer-by has been successfully authenticated.
  • the 2nd authentication apparatus 20 performs the process for controlling a passerby's passage according to the authentication result by 1: N collation. Specifically, when the authentication by the 1: N verification is successful, the second authentication device 20 opens the entrance gate provided at the second position P2, or the door key provided at the second position P2. The unlocking process is performed to allow the passerby to pass. On the other hand, if the authentication by the 1: N verification fails, the second authentication device 20 prohibits closing the entrance gate provided at the second position P2 or unlocking the door key provided at the second position P2. For example, a process for prohibiting the passage of passersby is executed.
  • the second authentication device 20 sends a message (alarm) for notifying that the authentication has failed to the second display unit 26 as an administrator monitor (see FIG. 1 and (see FIG. 7), notification of the alarm to an external terminal, and storing of an image of a passerby who failed authentication (for example, a face image included in the second image G2). Is executed as a process for prohibiting the passage of passers-by.
  • authentication of a passer-by passing through the second position P2 is performed without reading the biological information from the medium M possessed by the passer-by passing through the second position P2. Since it is not necessary to switch the second authentication process to a simple one in order to reduce the time required for the authentication of the passer-by, the passer-by when a large number of passers pass the second position P2. It is possible to prevent the occurrence of stagnation and the deterioration of passer authentication accuracy.
  • the information processing system 1 can be applied to an entrance / exit management system, a video surveillance system, and the like installed in a facility where many passers-by such as public facilities, important facilities, office buildings, and commercial facilities pass. .
  • an example in which the feature information of the passer's face image is used as the biometric information used in the passer-by authentication process is not limited to this.
  • iris, fingerprint, vein, palm print, ear Information on the body of a passerby such as a model may be used as biometric information.
  • FIG. 2 is a block diagram illustrating a functional configuration of the information processing system according to the first embodiment.
  • the first authentication device 10 has feature information read by a first imaging unit 11 provided so as to be able to image a passerby that passes through a first position P1, and an identification information reading unit 14 described later.
  • the first image acquisition unit 12 that acquires the first image G1 obtained by the imaging of the first imaging unit 11 and the characteristics of the face image of the passerby from the first image G1 acquired by the first image acquisition unit 12
  • Feature information is obtained from a first facial feature extraction unit 13 that acquires (extracts) information (an example of second biological information) and a medium M possessed by a passerby that passes through the first position P1.
  • the identification information reading unit 14 (an example of a reading unit) provided so as to be readable, the feature information acquired by the first face feature extraction unit 13 and the feature information read by the identification information reading unit 14, a passer-by is identified.
  • First passer-by authentication that performs the first authentication process to authenticate And parts 15, and a first output section 16 for outputting the authentication result of the passerby by the first passer authentication section 15, the.
  • the server 30 includes two pieces of feature information (feature information and media acquired from the first image G1) used in the first authentication process by the first authentication device 10 (first passer authentication unit 15).
  • Feature information for authentication based on at least one of feature information read from M) (feature information acquired from the first image G1 or feature information read from the medium M in the present embodiment).
  • Has a feature information storage unit 31 an example of a storage unit).
  • the second authentication device 20 includes a second imaging unit 21 provided so as to be able to image a passerby passing through the second position P ⁇ b> 2, and a second image obtained by imaging of the second imaging unit 21.
  • the second image acquisition unit 22 that acquires the two images G2, and the feature information (an example of the fourth biological information) of the passer's face image is acquired (extracted) from the second image G2 acquired by the second image acquisition unit 22.
  • Second authentication that authenticates a passer-by using the second facial feature extraction unit 23 that performs the processing, the feature information acquired by the second facial feature extraction unit 23, and the feature information for authentication stored in the feature information storage unit 31.
  • a second passer authentication unit 24 that executes processing, and a second output unit 25 that outputs a passer authentication result by the second passer authentication unit 24 are provided.
  • the first output unit 16 of the first authentication device 10 and the second output unit 25 of the second authentication device 20 are connected via the first display unit 17.
  • FIG. 4 is a flowchart illustrating the flow of passer authentication processing in the first authentication device included in the information processing system according to the first embodiment.
  • the identification information reading unit 14 is configured by a card reader or the like, and includes a medium M (for example, an ID card for identifying the passerby, an RFID (Radio Frequency Identification) chip) possessed by the passerby who passes the first position P1.
  • Identification information that can identify one feature information and passer-by from passer-by feature information such as a card, key, identification card, passport, and other public identity verification media) Read (step S401).
  • the identification information includes identification information (ID number), name, gender, age, affiliation, career, height, passer's face image data such as passer identification information. Is included.
  • the identification information reading unit 14 reads the feature information stored (or printed) on the medium M by an external device other than the first authentication device 10, but the feature information can be acquired on the medium M.
  • the image or medium printed on the medium M Feature information may be acquired from an image based on the image data stored in M.
  • the identification information reading unit 14 acquires feature information from an image printed on the medium M or an image based on the image data stored in the medium M in the same manner as the first face feature extracting unit 13 described later. To do.
  • the first image acquisition unit 12 receives the first image G ⁇ b> 1 obtained by the imaging of the first imaging unit 11 (in other words, the feature information is acquired by the identification information reading unit 14.
  • An image obtained by capturing an image of a passerby carrying the read medium M is acquired (step S402).
  • the first imaging unit 11 is configured by, for example, an ITV (Industrial Television) camera or the like, and is a part (in this embodiment) that is necessary for acquiring feature information among the bodies of passers-by passing through the first position P1. , The face of a passerby) can be imaged.
  • the first imaging unit 11 generates image data obtained by digitizing optical information obtained through the lens by an A / D converter at a predetermined frame rate, and generates a first image acquisition unit. 12 is output.
  • the first face feature extraction unit 13 acquires the feature information of the passer's face image included in the first image G1 from the first image G1 acquired by the first image acquisition unit 12 (step S403).
  • the first face feature extraction unit 13 moves the face detection template stored in advance in the first authentication device 10 in the first image G1 while moving the face detection template in the first image G1.
  • a correlation value (correlation coefficient) between the first image G1 and the template is obtained.
  • the first face feature extraction unit 13 detects a position having the highest correlation value with the template as a face image in the first image G1.
  • the first face feature extraction unit 13 detects a face image from the first image G1 using a face detection template stored in advance.
  • a face image may be detected from the first image G1 using a known eigenspace method or subspace method.
  • the first face feature extraction unit 13 includes a plurality of frame images (first image G1) based on image data of a predetermined frame rate output from the first imaging unit 11 and the same passer's face image is continuous. Included, it is necessary to perform a tracking process for detecting the face image as the face image of the same passerby.
  • the first face feature extraction unit 13 uses a method described in Japanese Patent No. 5355446, etc., at which position the face image detected from one frame image exists in the next frame image. By estimating this, a face image continuously included in a plurality of frame images is detected as the face image of the same passerby.
  • the first facial feature extraction unit 13 detects the position of a facial part such as an eye or nose from the detected facial image using a method described in Japanese Patent No. 3279913 or the like.
  • the first face feature extracting unit 13 includes a plurality of images including the face image of the same passer. The position of the face part is detected using a face image detected from any one of the frame images or all of the plurality of frame images.
  • the first face feature extraction unit 13 When detecting the position of the face part, acquires the feature information of the face image of the passer-by based on the detected position of the face part, and quantifies the acquired feature information.
  • the data is output to the first passer authentication unit 15.
  • the first face feature extraction unit 13 cuts out a face image having a predetermined size and a predetermined shape from the first image G1 based on the detected face part, and the shading information of the cut face image. Is acquired as feature information.
  • the first face feature extracting unit 13 uses the m ⁇ n-dimensional feature information of the m-pixel ⁇ n-pixel rectangular face image cut out from the first image G1 based on the detected position of the facial part. Obtained as a vector (an example of feature information).
  • the first face feature extraction unit 13 may acquire, as feature information, a partial space indicating the feature of the face image included in the first image G1 using the partial space method described in Japanese Patent No. 4087953. good.
  • the first passer authentication unit 15 performs a first authentication process for authenticating a passer by using the feature information acquired by the first face feature extraction unit 13 and the feature information read by the identification information reading unit 14. Execute (Step S404). In other words, the first passer authentication unit 15 determines whether or not the feature information acquired from the first image G1 and the feature information read from the medium M by the identification information reading unit 14 are the same person's feature information. To do. Thereby, the feature information used for the first authentication process is searched from the database of the host device such as the server 30, or the passer authentication is switched to a simple one in order to shorten the time required for the first authentication process. Since it is not necessary, the passer-by can be efficiently authenticated while preventing the passer-by authentication accuracy from being lowered.
  • the first passer authentication unit 15 calculates the similarity between the feature information acquired by the first face feature extraction unit 13 and the feature information read by the identification information reading unit 14. Specifically, the first passer authentication unit 15 calculates a similarity index between the feature information acquired by the first feature extraction unit 13 and the feature information read by the identification information reading unit 14.
  • the similarity index refers to feature information such as a feature vector and a partial space extracted by the first face feature extraction unit 13, feature information such as a feature vector and a partial space read by the identification information reading unit 14, and the like. The similarity between two feature vectors based on the simple similarity method or the similarity between subspaces based on the subspace method.
  • the first passer authentication unit 15 normalizes the lengths of the feature vector extracted by the first face feature extraction unit 13 and the feature vector read by the identification information reading unit 14 to “1”.
  • the inner product is calculated as the similarity between feature vectors.
  • the first passer authentication unit 15 uses the partial space method and the compound similarity method described in Japanese Patent No. 40879533 and the partial space and identification information reading unit acquired by the first facial feature extraction unit 13. The angle formed by the partial space read by 14 is calculated as the similarity.
  • the first passer authentication unit 15 uses the first face feature extraction unit 13 as a similarity index other than the similarity between two feature vectors by the simple similarity method and the similarity between the partial spaces by the subspace method. It is also possible to use the similarity between two pieces of feature information based on a distance such as a Euclidean distance or a Mahalanobis distance in a feature space constituted by the acquired feature information and the feature information read by the identification information reading unit 14. When determining the similarity of two feature information based on a distance such as the Euclidean distance or Mahalanobis distance in the feature space, the similarity decreases as the distance increases, and the similarity decreases as the distance decreases. Get higher.
  • the first passer-by authentication unit 15 determines that the passer-by has been successfully authenticated when the calculated similarity exceeds a predetermined first threshold (step S405: Yes). On the other hand, the first passer-by authentication unit 15 determines that the passer-by authentication has failed when the calculated similarity is equal to or less than a predetermined threshold (step S405: No).
  • the first passer authentication unit 15 (an example of a storage control unit) succeeds in authentication of the passerby (step S405: Yes), the authentication feature based on at least one of the two feature information used in the first authentication process. Information is stored (saved) in the feature information storage unit 31 of the server 30 (step S406). On the other hand, when the first passer authentication unit 15 fails to authenticate the passer (step S405: No), the first passer authentication unit 15 prohibits the storage of the authentication feature information in the feature information storage unit 31. In the present embodiment, the first passer authentication unit 15 uses the feature information acquired by the first face feature extraction unit 13 or the feature information read by the identification information reading unit 14 as the feature information for authentication. Remember me.
  • the first passer authentication unit 15 stores the feature information for authentication in the feature information storage unit 31 in association with the identification information read by the identification information reading unit 14.
  • the first passer authentication unit 15 uses the feature information acquired by the first face feature extraction unit 13 or the feature information itself read by the identification information reading unit 14 as feature information for authentication. 31.
  • a feature vector that is an example of feature information or a correlation matrix for calculating a partial space may be stored in the feature information storage unit 31 as authentication feature information.
  • the first passer-by authentication unit 15 associates the identification information read by the identification information reading unit 14 with the authentication feature information and the passer's face image included in the first image G1.
  • the feature information storage unit 31 stores the image data, the time information related to the time when the first authentication process is executed, and the device information that makes it possible to identify the first authentication device 10 that has executed the first authentication process.
  • the second authentication device 20 When the feature information read by the identification information reading unit 14 among the two feature information used in the first authentication process is stored in the feature information storage unit 31 as the authentication feature information, the second authentication device 20 The passer-by is authenticated using the same information (feature information read by the identification information reading unit 14) as the feature information used for authenticating the passer-by who has passed the first position P1. Accordingly, when a passerby is switched between the first position P1 and the second position P2, a passer who has passed the first position P1 is different from a passerby who has passed the second position P2. Since the possibility that it can be detected can be increased, it is possible to improve the security against the change of passers-by.
  • the feature information read from the medium M by the identification information reading unit 14 is generally feature information acquired from an image obtained by imaging a passerby before the time when the first authentication process is executed. is there. Therefore, when the feature information acquired from the image obtained by imaging the passerby changes due to the aging of the passerby or the like, the feature information read from the medium M by the identification information reading unit 14 indicates the passerby. The similarity with the feature information acquired from the image obtained by imaging is reduced. In other words, the feature information read from the medium M by the identification information reading unit 14 is easily affected by the aging of the passerby.
  • the first passer authentication unit 15 causes the feature information storage unit 31 to store the feature information acquired by the first face feature extraction unit 13 as feature information for authentication.
  • the passer-by authentication process in the second authentication device 20 is performed using the feature information acquired from the image (first image G1) obtained by capturing the passer-by when the first authentication process is executed.
  • it is possible to reduce the influence of aging, etc. of passers-by it is possible to improve passer-by authentication accuracy.
  • the aging data as shown in FIG. 3 can be stored as data by associating the face image stored in the passport.
  • FIG. 3 when a face image stored in a passport is photographed, the face matching image at the time of January 1990, and the face matching at the time of February 2000, 10 years later.
  • the passport image and the photographed image are combined and recorded as a history.
  • the degree of similarity is calculated in chronological order.
  • the face image of a passport is x (0)
  • the face images remaining in the history are x (1),..., X (t)
  • the similarity between the face image a and the face image b Is S (a, b)
  • ⁇ is the threshold for similarity that determines whether or not the person is S (x (0), x (1))> ⁇ , S (x (1), x (2))> ⁇ , S (x (2), x (3)> ⁇ , ..., S ( x (t-1), x (t))> ⁇ If it is, it is determined that it is the person. Due to the secular change, S (x (0), x (t)) ⁇ and the error of determining the person as another person can be reduced.
  • the first passer authentication unit 15 when the issue date of the medium M stored (or printed) on the medium M is a date from the date of execution of the first authentication process to a date that is back a predetermined period, The feature information read from the medium M by the identification information reading unit 14 is used as authentication feature information.
  • the first passer authentication unit 15 determines the first face feature extraction unit 13.
  • the feature information acquired by the above may be used as authentication feature information.
  • the first passer authentication unit 15 also includes authentication feature information including both the feature information acquired by the first face feature extraction unit 13 and the feature information read by the identification information reading unit 14, as a feature information storage unit 31.
  • the second authentication device 20 acquires characteristic information (an example of fourth biological information) acquired from the second image G2 obtained by imaging the passerby that has passed the second position P2 by the second imaging unit 21. Is matched with either one of the two pieces of feature information included in the feature information for authentication stored in the feature information storage unit 31, it is determined that the passer-by has been successfully authenticated. Thereby, the possibility that the authentication of the passer-by will fail can be reduced.
  • characteristic information an example of fourth biological information
  • the first passer authentication unit 15 uses, as authentication information, information obtained by updating the feature information read from the medium M by the identification information reading unit 14 based on the first image G1 acquired by the first image acquisition unit 12.
  • the information may be stored in the feature information storage unit 31.
  • the first passer authentication unit 15 includes the feature information acquired from the first image G1 in the feature information read from the medium M by the identification information reading unit 14, thereby reading the feature read from the medium M. Update information.
  • the first passer authentication unit 15 adds the first image G1 to the image used to create the partial space. May be added to update the partial space.
  • the first passer authentication unit 15 may update the feature information read from the medium M by the identification information reading unit 14 with the feature information acquired from the first image G1.
  • the first passer authentication unit 15 performs a process for removing information unnecessary for identification between the authentication feature information for the plurality of authentication feature information stored in the feature information storage unit 31.
  • the first passer authentication unit 15 uses the constrained mutual subspace method described in Japanese Patent No. 4087953, etc., to convert the feature vector stored as the authentication feature information into the feature information storage unit 31. By projecting or converting into space, the identification accuracy between the feature information for authentication stored in the feature information storage unit 31 is increased. Accordingly, it is possible to prevent the second authentication process from being executed using unnecessary information included in the authentication feature information, and thus it is possible to improve passer authentication accuracy by the second authentication process.
  • the first authentication unit 10 When the first output unit 16 successfully authenticates the passer-by by the first passer-authentication unit 15 (step S405: Yes), the first authentication unit 10 sends a message notifying that the passer-by has been successfully authenticated. The information is displayed on the first display unit 17 (see FIGS. 2 and 5) provided and viewed by the administrator (step S407). On the other hand, if the first passer authentication unit 15 fails to authenticate the passerby (step S405: No), the first output unit 16 sends a message notifying that the passer authentication has failed to the first authentication device. 10 is displayed on the first display unit 17 (refer to FIGS. 2 and 5) included in 10 (step S408).
  • FIG. 5 is a diagram illustrating a display example of a passer-by authentication result in the first authentication device included in the information processing system according to the first embodiment.
  • the first output unit 16 as shown in FIG. 5, a message 501 for notifying the success of the passer-by authentication
  • the input image 502 which is a face image included in the first image G1, and the face image from which the feature information read by the identification information reading unit 14 is acquired (in this embodiment, based on image data read as identification information from the medium M).
  • a first screen D1 including a reference image 503 that is a face image) is displayed on the first display unit 17 of the first authentication device 10.
  • the feature information acquired from the face image included in the first image G1 is similar to the feature information read by the identification information reading unit 14, and thus the input image 502
  • the reference image 503 is a similar image.
  • the first output unit 16 sends a message 504 for notifying the passer of authentication failure, an input image 502, a reference image 503, Is displayed on the first display unit 17.
  • the feature information acquired from the face image included in the first image G1 is not similar to the feature information read by the identification information reading unit 14, and thus the input image 502
  • the reference image 503 is also a similar image.
  • the 1st output part 16 displays the 1st screen D1 or the 2nd screen D2 on the 1st display part 17 as a monitor for managers, and a passer's by the 1st passer authentication part 15 is shown.
  • the authentication result is notified, the present invention is not limited to this.
  • a sound is emitted from a speaker (not shown) included in the first authentication device 10 or a higher-level device of the first authentication device 10 (management of the information processing system 1).
  • the authentication result of the passer may be notified by transmitting the authentication result of the passer by wired or wireless communication to a terminal operated by the passer).
  • FIG. 6 is a flowchart illustrating a flow of passer authentication processing in the second authentication device included in the information processing system according to the first embodiment.
  • the second image acquisition unit 22 performs imaging by the second imaging unit 21.
  • the obtained second image G2 is acquired (step S601).
  • the second imaging unit 21 is configured by, for example, an ITV camera or the like, similar to the first imaging unit 11, and is a part necessary for acquiring feature information among the bodies of passers-by passing through the second position P2. (In this embodiment, it is provided so that a face of a passerby can be imaged).
  • the second imaging unit 21 generates image data obtained by digitizing optical information obtained through the lens using an A / D converter at a predetermined frame rate, and generates a second image acquisition unit. 22 to output.
  • the second face feature extraction unit 23 acquires the feature information of the passer's face image included in the second image G2 from the second image G2 acquired by the second image acquisition unit 22 (step S602).
  • the second face feature extraction unit 23 acquires the feature information of the passer's face image included in the second image G2 in the same manner as the first face feature extraction unit 13 included in the first authentication device 10. To do.
  • the second passer authentication unit 24 executes a second authentication process for authenticating the passer by using the feature information acquired by the second face feature extraction unit 23 and the feature information for authentication stored in the feature information storage unit 31. (Step S603).
  • the passer-by who passes the second position P2 can be authenticated without reading the biological information from the medium M possessed by the passer-by who passes the second position P2, and the second position P2. Since it is not necessary to switch the second authentication process to a simple one in order to shorten the time required for authentication of a passerby who passes the road, when a lot of passers pass the second position P2, Occurrence and deterioration of passerby authentication accuracy can be prevented.
  • the second passer authentication unit 24 passes when the feature information acquired by the second face feature extraction unit 23 matches any of the authentication feature information stored in the feature information storage unit 31. It is determined that the user has been successfully authenticated.
  • the term “match” refers to the case where the feature information acquired by the second face feature extraction unit 23 and the feature information for authentication stored in the feature information storage unit 31 completely match or the two feature information are similar. (In this embodiment, it is assumed that the similarity between the two feature information exceeds a predetermined second threshold).
  • the second passer authentication unit 24 in the same way as the first passer authentication unit 15, features information acquired by the second face feature extraction unit 23 and authentication stored in the feature information storage unit 31. Similarity with each feature information is calculated. Then, the second passer authentication unit 24 has the highest similarity with the feature information acquired by the second face feature extraction unit 23 among the authentication feature information stored in the feature information storage unit 31. Is identified.
  • the second passer-by authentication unit 24 passes when the similarity between the feature information acquired by the second face feature extraction unit 23 and the specified authentication feature information exceeds a predetermined second threshold. It is determined that the user has been successfully authenticated. On the other hand, when the similarity between the feature information acquired by the second face feature extraction unit 23 and the specified authentication feature information is equal to or less than the second threshold, the second passer authentication unit 24 It is determined that the authentication of the failed.
  • the second passer authentication unit 24 performs passer authentication in the same manner as the first passer authentication unit 15 included in the first authentication device 10.
  • the second threshold value may be the same value as the first threshold value used for passer-by authentication in the first authentication device 10, or may be a value different from the first threshold value.
  • the second passer authentication unit 24 deletes the authentication feature information that matches the feature information acquired by the second face feature extraction unit 23 from the feature information storage unit 31. At that time, the second passer authentication unit 24 stores identification information, image data, time information, device information, etc. stored in association with the authentication feature information that matches the feature information acquired by the second face feature extraction unit 23. Are also deleted from the feature information storage unit 31.
  • the authentication feature information that matches the feature information acquired by the second face feature extraction unit 23 is used for authentication of other passers-by that is performed thereafter. Therefore, the reliability of the authentication feature information stored in the feature information storage unit 31 can be maintained. Further, when the passerby is successfully authenticated, the authentication feature information that matches the feature information acquired by the second facial feature extraction unit 23 is acquired from the second image G2 obtained by imaging another passerby. Therefore, it is possible to prevent unnecessary judgment processing from being performed, and to improve the passer-by authentication speed and save resources.
  • the second passer authentication unit 24 includes, among the authentication feature information stored in the feature information storage unit 31, the authentication feature information that has been stored for a predetermined time after being stored in the feature information storage unit 31. Delete from 31.
  • the second passer authentication unit 24 indicates that the time indicated by the time information stored in association with the authentication feature information among the authentication feature information stored in the feature information storage unit 31 is the current time. The feature information for authentication that is not the time until the time that is a predetermined time later is deleted from the feature information storage unit 31.
  • the second passer authentication unit 24 uses the authentication feature information stored in the feature information storage unit 31 for authentication of a passer-by in a preset authentication device other than the first authentication device 10.
  • the feature information is deleted from the feature information storage unit 31.
  • the second passer authentication unit 24 preliminarily selects an authentication device indicated by the device information stored in association with the authentication feature information among the authentication feature information stored in the feature information storage unit 31. If the first authentication device 10 is not set, the authentication feature information is deleted from the feature information storage unit 31.
  • the second authentication process of the passerby is executed using the authentication feature information stored in the feature information storage unit 31 after successful authentication in an authentication device other than the preset first authentication device 10. Therefore, the reliability of the authentication feature information stored in the feature information storage unit 31 can be maintained.
  • the second passer authentication unit 24 compares the degree of similarity between the authentication feature information that has been stored in the feature information storage unit 31 and the feature information acquired by the second face feature extraction unit 23 after a predetermined time has elapsed.
  • the second threshold value is compared with the similarity between the feature information for authentication that has not been passed for a predetermined time since being stored in the feature information storage unit 31 and the feature information acquired by the second face feature extraction unit 23 May be higher.
  • step S604: Yes When the second passer authentication unit 24 succeeds in authenticating the passerby (step S604: Yes), the second output unit 25 sends a message notifying that the passer authentication has been successful to the second display unit 26 ( (See FIGS. 1 and 7), so that the administrator can see (step S605).
  • step S604: No when the second passer authentication unit 24 fails to authenticate the passerby (step S604: No), the second output unit 25 notifies the administrator of a message notifying that the passer authentication has failed. In this manner, the second display unit 26 (see FIGS. 1 and 7) displays the image (step S606).
  • FIG. 7 is a diagram illustrating a display example of a passer-by authentication result in the second authentication device included in the information processing system according to the first embodiment.
  • the second output unit 25 as shown in FIG. 7, a message 701 for notifying the passer-by of the authentication success, A predetermined number (three in the present embodiment) of authentication feature information in descending order of similarity between the input image 702 that is a face image included in the second image G2 and the feature information acquired by the second face feature extraction unit 23.
  • Reference images 703 to 705 which are face images from which the authentication feature information is acquired (in this embodiment, face images based on image data included in identification information stored in association with the authentication feature information); Are displayed on the second display unit 26 as an administrator monitor.
  • the second output unit 25 obtains the reference image 703 from which the authentication feature information having the highest similarity among the authentication feature information having the highest similarity with the feature information acquired by the second face feature extraction unit 23 is acquired. Is displayed in a display mode different from that of the other reference images 704 and 705.
  • the second output unit 25 displays the third screen D3 on the second display unit 26 to notify the administrator of the authentication result of the passerby by the second passer authentication unit 24.
  • the present invention is not limited to this.
  • a sound is emitted from a speaker (not shown) included in the second authentication device 20, or a higher-level device of the second authentication device 20 (a terminal operated by an administrator of the information processing system 1).
  • the authentication result of the passer may be notified by transmitting the authentication result of the passer by wired or wireless communication.
  • the second output unit 25 opens the entrance gate provided at the second position P2 or is provided at the second position P2 when the second passer authentication unit 24 succeeds in authentication of the passer-by.
  • the passer authentication result may be notified by unlocking the door key.
  • the second output unit 25 outputs the image data of the face image included in the second image G2 obtained by the imaging of the second imaging unit 21.
  • it may be transmitted to the host device as image data of an unauthorized passer's face image and stored in the host device.
  • the passerby passes through the first position P1 and then passes through the second position P2, the first pass Even if the authentication of the passerby by the authentication process is successful, the authentication of the passerby in the second authentication process fails, so that the replacement of the passerby can be prevented.
  • the time required for searching the feature information used for the first and second authentication processes from the database of the host device such as the server 30 and for the first and second authentication processes is not necessary to switch the passer authentication to a simple one in order to shorten the time, so that the passer authentication can be performed efficiently while preventing the passer authentication accuracy from being lowered.
  • the biometric information when biometric information is read from a medium possessed by a passerby who passes through the second position, the biometric information is read from a medium possessed by a passerby who passes through the second position, instead of the second authentication process.
  • the third authentication process for authenticating the passerby can be executed. It is an example. In the following description, description of the same parts as those in the first embodiment is omitted.
  • FIG. 8 is a block diagram showing a functional configuration of the information processing system according to the second embodiment.
  • the second authentication device 70 includes a card in addition to the second imaging unit 21, the second image acquisition unit 22, the second facial feature extraction unit 23, and the second output unit 25.
  • a second identification information reading unit 71 (second reading unit) configured to be capable of reading characteristic information (an example of fifth biological information) from a medium M possessed by a passerby who passes through the second position P2 and is configured by a reader or the like. 1) and the feature information acquired by the second face feature extraction unit 23 and the feature information read by the second identification information reading unit 71 in place of the second authentication process, And a second passer-by authentication unit 72 capable of executing the authentication process.
  • FIG. 9 is a flowchart showing a flow of passer-by authentication processing in the second authentication apparatus included in the information processing system according to the second embodiment.
  • the second identification information reading unit 71 determines whether or not reading of identification information is instructed by an operation unit (not illustrated) (for example, a numeric keypad or a touch panel) included in the second authentication device 70 (step S901). When the reading of the identification information is not instructed (step S901: No), the second authentication device 70 executes the same processing as steps S601 to S606 shown in FIG.
  • the second identification information reading unit 71 passes through the second position P2 in the same manner as the identification information reading unit 14 included in the first authentication device 10.
  • the feature information and identification information that enables identification of the passer-by are read from the medium M possessed by the passer-by (step S902).
  • the second image acquisition unit 22 performs the second image G2 obtained by imaging by the second imaging unit 21 in the same manner as in step S601 shown in FIG. Is acquired (step S903). Further, the second face feature extraction unit 23 acquires the feature information of the passer's face image included in the second image G2 from the second image G2, similarly to step S602 shown in FIG. 6 (step S904). ).
  • the second passer authentication unit 72 uses the feature information read by the second identification information reading unit 71 and the feature information acquired by the second face feature extraction unit 23 instead of the second authentication process to pass A third authentication process for authenticating the person is performed (step S905).
  • the second passer authentication unit 72 calculates the similarity between the feature information acquired by the second face feature extraction unit 23 and the feature information read by the second identification information reading unit 71. Then, the second passer-by identification unit 72 determines that the passer-by has been successfully authenticated when the calculated similarity exceeds the predetermined third threshold (step S604: Yes). On the other hand, when the calculated similarity is equal to or smaller than the third threshold value, the second passer-by identification unit 72 determines that the passer-by authentication has failed (step S604: No).
  • the third threshold value is preferably higher than the first threshold value used for authentication in the first authentication device 10 to increase the recognition accuracy of the passerby.
  • the second identification information reading unit 71 when the second identification information reading unit 71 is provided, the authentication feature similar to the feature information acquired by the second face feature extraction unit 23 is provided. Even if the information is not stored in the feature information storage unit 31, the second authentication process can be executed, so that special passers-by such as celebrities are exempt from the first authentication process and pass through the first position P1. Even when the second position P2 is reached, the second authentication process can be executed in the same manner as a normal passer other than the special passer-by. Similarly to the first embodiment, when a passerby is switched between passing the first position P1 and before passing the second position P2, authentication of the passerby by the first authentication process is performed. Even if it succeeds, the authentication of the passerby in the second authentication process fails, so that the replacement of the passerby can be prevented.
  • the program executed by the first authentication device 10 and the second authentication device 20 (70) of the present embodiment is provided by being incorporated in advance in a ROM (Read Only Memory) or the like.
  • the program executed by the first authentication device 10 and the second authentication device 20 (70) of the present embodiment is a file in an installable format or an executable format, and is a CD-ROM, a flexible disk (FD), a CD.
  • the recording medium may be recorded on a computer-readable recording medium such as R, DVD (Digital Versatile Disk), or the like.
  • the program executed by the first authentication device 10 and the second authentication device 20 (70) of the present embodiment is provided by being stored on a computer connected to a network such as the Internet and downloaded via the network. You may comprise as follows.
  • the program executed by the first authentication device 10 and the second authentication device 20 (70) of the present embodiment may be configured to be provided or distributed via a network such as the Internet.
  • the program executed by the first authentication device 10 of the present embodiment includes the above-described units (the first image acquisition unit 12, the first face feature extraction unit 13, the first passer authentication unit 15, and the first output unit 16).
  • a CPU Central Processing Unit
  • the program executed by the second authentication device 20 (70) of the present embodiment includes the above-described units (second image acquisition unit 22, second face feature extraction unit 23, second passer authentication unit 24 (72).
  • the second output unit 25) has a module configuration, and as actual hardware, the CPU reads the program from the ROM and executes it to load each unit on the main storage device, thereby obtaining the second image.
  • the unit 22, the second face feature extraction unit 23, the second passer authentication unit 24 (72), and the second output unit 25 are generated on the main storage device.
  • the first authentication device 10 includes the first image acquisition unit 12, the first facial feature extraction unit 13, the first passer authentication unit 15, and the first output unit 16.
  • the second authentication device 20 includes a second image acquisition unit 22, a second facial feature extraction unit 23, a second passer authentication unit 24 (72), and a second output unit 25.
  • Any device in the information processing system 1 may have the above-described units.
  • one device such as the server 30 may include all of the above-described units.
  • Each of the above-described units may be divided and provided in any one of three or more devices in one.
  • FIG. 10 is a diagram showing a configuration of an immigration control system to which the person authentication system according to the third embodiment is applied.
  • the immigration control system according to the present embodiment adjusts the person's imaging condition in the authentication process at the person's destination in accordance with the person's imaging condition in the authentication process at the time of departure. It is a system that makes it possible to improve the accuracy of authentication processing at the destination.
  • the information processing system 1 as a person authentication method and a person authentication system according to the present embodiment is applied to an immigration control system
  • a person such as a public facility, an important facility, an office building, or a commercial facility
  • a system for example, an entrance / exit management system or a video monitoring system
  • the person authentication method and the person authentication system according to the present embodiment are the same as in the output entry management system 1. Applicable.
  • the immigration system As shown in FIG. 10, the immigration system according to the present embodiment combines 1: 1 verification at the immigration counter DC or immigration counter IC and 1: N verification at the boarding gate BG or the baggage receiving place BC.
  • the system for efficiently performing person authentication processing in facilities such as airports.
  • the 1: 1 verification is read from a passport P (an example of a medium) possessed by a person passing through the immigration counter DC or the immigration counter IC before the person reaches the boarding gate BG or the baggage receiving place BC.
  • the authentication process is executed using identification information that enables identification of the person and biometric information acquired from an image obtained by imaging the person.
  • N verification is an authentication process that is executed using biometric information acquired from an image obtained by imaging a person passing through the boarding gate BG or the baggage receiving location BC and a plurality of biometric information stored in advance. .
  • the immigration control system includes a boarding guide device 40, a first authentication device 41, a second authentication device 42, a third authentication device 43, 4 authentication device 44, first storage device 45, and second storage device 46.
  • the boarding guidance device 40 is installed at a check-in counter as the first position P1, reads destination information from an airline ticket T (an example of a medium) possessed by a person boarding an aircraft, etc., and a passport P possessed by the person. And the like, and the biometric information is acquired from the image obtained by the imaging of the camera 101 provided so that the person can be imaged.
  • the destination information is information indicating a destination of a person who passes the check-in counter as the first position P1.
  • the boarding guide device 40 associates the destination information read from the airline ticket T, the identification information read from the passport P, and the biological information acquired from the image obtained by the imaging of the camera 101 with each other. Save in the storage device 45.
  • the first authentication device 41 is installed in the immigration examination counter DC and reads identification information (an example of the first identification information) from the passport P possessed by a person passing through the immigration examination counter DC (an example of the first position). Acquisition of biological information (an example of first biological information) from an image (an example of a first image) obtained by imaging by a camera 111 (an example of a first imaging unit) provided so as to be capable of imaging the person is performed. . Next, the first authentication device 41 uses the identification information read from the passport P held by the person leaving the country and the biometric information acquired from the image obtained by the imaging of the camera 111 to authenticate the person (hereinafter referred to as “person authentication process”). , Referred to as first authentication processing).
  • the first authentication device 41 associates the identification information and the biometric information used in the first authentication process with the device identification information that enables the first authentication device 41 to be identified. Saved in the first storage device 45. Further, when the first authentication process is successful, the first authentication device 41 associates the imaging condition of the camera 111 with the second storage device 46 (an example of a storage device) in association with the identification information used for the first authentication process. Save to. As shown in FIG.
  • the face image of the person photographed by the camera 111, the camera number as the place of photographing (which gate), the photographing date and time are displayed on the left side, and from the passport P possessed by the passing person
  • a display unit for the manager that displays the face image of the person stored in the passport as identification information, the person's name, gender, and age in comparison with the right side.
  • FIGS. 12A to 12E there are cases where the face image of a person stored in the passport P as identification information is inappropriate as a captured image, as shown in FIGS. 12A to 12E.
  • the face is hidden by sunglasses.
  • the face is concealed by hair.
  • the facial expression is changed by opening the mouth as shown in FIG. 12C.
  • the face is facing the side instead of the front.
  • the face is concealed by a hat. If the above is detected, the display unit 105, 116, 121 or the like instructs the passer-by to take a picture again. Alternatively, a warning is issued on the display section for the administrator.
  • the illumination at the time of shooting is too bright or too dark. If compression noise is included when an image is encoded, a warning is given to the display for the administrator, and adjustments are made to make the lighting suitable for shooting.
  • the camera 101, 111, or 121 is adjusted so that the
  • the second authentication device 42 is installed in the boarding gate BG, and acquires biometric information from an image obtained by imaging of the camera 121 provided so that a person passing through the boarding gate BG can be imaged.
  • the second authentication device 42 does not read identification information from the passport P possessed by a person passing through the boarding gate BG.
  • the second authentication device 42 uses the acquired biological information and the biological information stored in the first storage device 45 to execute an authentication process for a person passing through the boarding gate BG.
  • the person can be authenticated without reading the identification information from the passport P. Even if it passes, it is possible to execute the person authentication process without causing any stagnation.
  • the second authentication device 42 boards. Assuming that the authentication processing of the person passing through the gate BG has been successful, the passage of the boarding gate BG is permitted by opening the boarding gate BG or unlocking the door key installed on the boarding gate BG. On the other hand, when the second authentication device 42 does not match the biological information acquired from the image obtained by imaging the person passing through the boarding gate BG with any of the biological information stored in the first storage device 45. The person who passes the boarding gate BG has failed to be authenticated, and the passage of the boarding gate BG is prohibited by not opening the boarding gate BG or unlocking the door key installed on the boarding gate BG. .
  • the second authentication device 42 permits the passage of the boarding gate BG by the following process when a gate or a door key for permitting or prohibiting the passage of the boarding gate BG is not installed. Or do a ban.
  • the second authentication device 42 is obtained by imaging a person passing through the boarding gate BG among the biometric information stored in the first storage device 45 when the authentication process of the person passing through the boarding gate BG is successful.
  • Information indicating that the boarding gate BG has been normally passed is stored in association with the biological information that matches the biological information acquired from the image.
  • the second authentication device 42 when the second authentication device 42 fails in the authentication process of the person passing through the boarding gate BG, the second authentication device 42 provides warning information for notifying the display unit included in the second authentication device 42 that the authentication has failed. Display information, send warning information for notifying the external terminal that authentication has failed, or save an image obtained by imaging a person who has passed the boarding gate BG.
  • the third authentication device 43 is installed at the immigration counter IC (an example of the second position), and reads the identification information (an example of the second identification information) from the passport P possessed by a person passing through the immigration counter IC. Next, the third authentication device 43 reads the imaging conditions stored in association with the identification information that matches the identification information read from the passport P from the second storage device 46. Next, the third authentication device 43 adjusts the imaging conditions of a camera 131 (an example of a second imaging unit) provided to be able to image a person passing through the immigration counter IC according to the read imaging conditions.
  • a camera 131 an example of a second imaging unit
  • the third authentication device 43 acquires biological information (an example of second biological information) from an image (an example of a second image) obtained by imaging with the camera 131 with the imaging conditions adjusted. And the 3rd authentication apparatus 43 uses the identification information read from the passport P, and the biometric information acquired from the image obtained by the imaging of the camera 131, The said person's authentication process (henceforth a 2nd authentication process). ). As a result, the biometric information obtained from the image obtained by the imaging of the camera 131 under the imaging conditions similar to the imaging conditions of the camera 111 when the first authentication process at the immigration counter DC is successful is used. Since two authentication processes can be executed, the accuracy of person authentication at the immigration counter IC can be improved. Then, when the second authentication process is successful, the third authentication apparatus 43 stores the identification information used in the second authentication process and the biological information in association with each other in the second storage device 46.
  • biological information an example of second biological information
  • the fourth authentication device 44 is installed in the baggage receiving place BC, and acquires biometric information from an image obtained by taking an image of a camera 141 provided so as to be able to take an image of a person passing through the baggage receiving place BC.
  • the fourth authentication device 44 uses the acquired biometric information and the biometric information stored in the second storage device 46 to execute an authentication process for a person passing through the package receiving location BC.
  • the person can be authenticated without reading the identification information from the passport P in the final authentication of the person at the time of entry, a large number of persons pass through the package receiving place BC. Even so, it is possible to execute authentication of a person without causing any delay.
  • the fourth authentication device 44 when the biometric information acquired from the image obtained by imaging the person passing through the package receiving location BC matches any of the biometric information stored in the second storage device 46, Assuming that the authentication process for the person passing through the package receiving place BC is successful, the user is permitted to pass through the package receiving place BC. On the other hand, in the fourth authentication device 44, the biometric information acquired from the image obtained by imaging the person passing through the package receiving location BC did not match any of the biometric information stored in the second storage device 46. In this case, it is determined that the authentication process for the person passing through the package receiving place BC has failed, and passage through the package receiving place BC is prohibited.
  • FIG. 13 is a diagram illustrating a functional configuration of the boarding guide device 40, the first authentication device 41, and the second authentication device 42 included in the immigration control system according to the present embodiment.
  • the boarding guide device 40 extracts an image acquisition unit 102 that acquires an image obtained by imaging with the camera 101, and extracts feature information of a face image in the image acquired by the image acquisition unit 102.
  • the facial feature extraction unit 103, the identification information reading unit 104 that reads destination information from the airline ticket T possessed by the person who passes the check-in counter P1, and the reading result information of the destination information from the airline ticket T can be displayed. Display unit 105.
  • the first authentication device 41 includes an image acquisition unit 112 that acquires an image obtained by imaging with the camera 111, and a face image in the image from the image acquired by the image acquisition unit 112.
  • Feature information extraction unit 113 that extracts (acquires) feature information (an example of biometric information)
  • an identification information reading unit 114 that reads identification information from a passport P possessed by a person who passes the immigration counter DC
  • facial feature extraction When the first authentication process of the person who passes the immigration examination counter DC is executed using the feature information extracted by the unit 113 and the identification information read by the identification information reading unit 114, and the first authentication process is successful,
  • a person authentication unit 115 that stores the identification information and feature information used in the first authentication process in association with the device identification information in the first storage device 45, and the person authentication unit 1 5 and the first authentication display unit 116 capable of displaying results of processing by the has.
  • the person authentication unit 115 when the first authentication process for the person passing through the immigration counter DC is successful, the person authentication unit 115 associates the identification information used for the first authentication process with the first authentication process.
  • the imaging condition (an example of the first imaging condition) of the camera 111 that has obtained the used image is stored in the second storage device 46 shown in FIG. 14 as the imaging condition (an example of the second imaging condition) of the camera 131 shown in FIG. To do.
  • the person authentication unit 115 stores the imaging conditions of the camera 111 in the second storage device 46.
  • the imaging conditions of the camera 111 are stored in a storage device accessible by the third authentication device 43 illustrated in FIG.
  • the present invention is not limited to this.
  • the imaging conditions of the camera 111 may be stored in the first storage device 45.
  • the second authentication device 42 extracts an image acquisition unit 122 that acquires an image obtained by imaging with the camera 121, and feature information of a face image in the image acquired by the image acquisition unit 122.
  • the feature information stored in the first storage device 45 and the feature information extracted by the face feature extraction unit 123 to perform a person search that performs an authentication process for a person passing through the boarding gate BG Section 124 and a display section 125 capable of displaying a person authentication result and the like by the person search section 124.
  • the person search unit 124 searches for the person passing through the boarding gate BG. It is determined that the authentication process has been successful, and the passage through the boarding gate BG is permitted. On the other hand, if the feature information extracted by the face feature extraction unit 123 does not match any of the feature information stored in the first storage device 45, the person search unit 124 authenticates the person who passes the boarding gate BG. It is determined that the process has failed, and passage through the boarding gate BG is prohibited.
  • the second authentication device 42 can pass through the boarding gate BG even if a person who has not performed the authentication process in the first authentication device 41 passes through the boarding gate BG. In order to do so, you may have the reading part which is not illustrated which can read identification information from the passport P which the said person has.
  • the person search unit 124 of the second authentication device 42 uses the identification information read by a reading unit (not shown) included in the second authentication device 42 and the feature information extracted by the face feature extraction unit 123, An authentication process for a person passing through the boarding gate BG is executed.
  • FIG. 14 is a diagram illustrating a functional configuration of the third authentication device included in the immigration system according to the present embodiment.
  • the third authentication device 43 includes an identification information reading unit 132 that reads identification information from a passport P possessed by a person passing through the immigration counter IC, and an identification information reading unit from the second storage device 46.
  • An imaging condition adjusting unit 133 that reads out imaging conditions stored in association with identification information that matches the identification information read by 132 and adjusts the imaging conditions of the camera 131 according to the readout imaging conditions, and the imaging conditions are adjusted
  • An image acquisition unit 134 that acquires an image obtained by imaging by the camera 131, and feature information (an example of biological information) of a face image in the image is extracted from the image acquired by the image acquisition unit 134 Acquisition) facial feature extraction unit 135, and feature information extracted by the facial feature extraction unit 135 and identification read by the identification information reading unit 132
  • the identification information and the feature information used in the second authentication process correspond to each other.
  • a person authentication unit 136 that is stored in the second authentication process
  • the imaging condition adjustment unit 133 adjusts the imaging condition of the camera 131 so as to approach the imaging condition read from the second storage device 46.
  • fluctuations in the imaging conditions of the camera 131 based on the imaging conditions of the camera 111 when the first authentication process at the immigration counter DC is successful can be suppressed.
  • the robustness of accuracy can be improved.
  • FIG. 15 is a diagram illustrating a functional configuration of the fourth authentication device included in the immigration system according to the present embodiment.
  • the fourth authentication device 44 includes a first image acquisition unit 142 that acquires an image obtained by imaging of a camera 141 provided so as to be able to image a person passing through the package receiving location BC,
  • the first face feature extraction unit 143 that extracts the feature information of the face image in the image acquired by the first image acquisition unit 142, and the feature information stored in the second storage device 46 and the first face feature extraction unit 143 Using the extracted feature information, a person search unit 144 that executes an authentication process for a person passing through the package receiving location BC, a first display unit 145 that can display a result of the authentication process by the person search unit 144, have.
  • the fourth authentication device 44 acquires a second image acquisition unit 146 that acquires an image obtained by imaging of a camera 141 provided so as to be able to image a person who receives the package at the package receiving location BC.
  • the second face feature extracting unit 147 that extracts the feature information of the face image in the image acquired by the second image acquiring unit 146 and the baggage tag 400 possessed by the person passing the baggage receiving place BC, Is stored in association with tag information reading unit 148 that reads tag information that can identify the owner of the tag, and identification information that matches the tag information read by tag information reading unit 148 in second storage device 46.
  • tag information reading unit 148 that reads tag information that can identify the owner of the tag, and identification information that matches the tag information read by tag information reading unit 148 in second storage device 46.
  • the feature information extracted by the second face feature extraction unit 147 the person who has received the package at the package receiving location BC is authenticated. Having an object authentication section 149, and the person authentication unit 149 the second display unit 150 can display the results of
  • FIG. 16 is a flowchart showing a flow of biometric information acquisition processing by the boarding guide apparatus 40 included in the immigration control system according to the present embodiment.
  • the identification information reading unit 104 reads destination information indicating the destination of the person from the airline ticket T possessed by the person passing through the check-in counter P1 (step S1601). Further, the identification information reading unit 104 reads the feature information of the face image of the holder of the passport P as identification information from the IC chip embedded in the passport P possessed by the person who passes the check-in counter P1 (step S1602). ).
  • the identification information reading unit 104 is configured by a card reader, for example, and can read destination information from the airline ticket T and read identification information from an IC chip embedded in the passport P.
  • the identification information reading unit 104 reads the feature information of the face image of the holder of the passport P as the identification information.
  • the present invention is not limited to this.
  • an ID number for uniquely identifying the holder of the passport P may be read as identification information.
  • biological information of the holder of the passport P for example, a face image, fingerprint, iris, etc.
  • personal information of the holder of the passport P for example, name, Date of birth, sex, age, affiliation, career, etc.
  • the identification information reading unit 104 reads various information such as destination information and identification information from the airline ticket T or the passport P, but the present invention is not limited to this.
  • it may be configured by an input unit capable of inputting various information such as destination information and identification information, such as a numeric keypad and a touch panel.
  • a user of the boarding guide device 40 (for example, a person passing through the check-in counter P1 or the like) operates the identification information reading unit 104 functioning as an input unit and inputs destination information and identification information.
  • the identification information reading unit 104 reads identification information (for example, identification information stored by an external device other than the immigration system) from an IC chip embedded in the passport P.
  • identification information for example, identification information stored by an external device other than the immigration system
  • the present invention is not limited to this as long as it can read the identification information from.
  • the identification information reading unit 104 can read a face image printed on the passport P, and can read feature information of the read face image as identification information.
  • the feature information reading method from the face image is the same as the feature information extraction method by the face feature extraction unit 103 described later.
  • the image acquisition unit 102 controls the camera 101 and images a person passing through the check-in counter P1. Then, the image acquisition unit 102 acquires an image obtained by imaging with the camera 101 (step S1603).
  • the camera 101 is composed of, for example, a video camera or the like, and is provided so as to be able to image a person passing through the check-in counter P1. In the present embodiment, the camera 101 is provided so as to be able to capture the face of a person passing through the check-in counter P1.
  • the camera 101 digitizes and outputs an image obtained by imaging a person passing through the check-in counter P1 by an A / D converter (not shown).
  • the face feature extraction unit 103 detects a face image from the image acquired by the image acquisition unit 102, and extracts feature information of the detected face image (step S1604).
  • the face feature extraction unit 103 first calculates a correlation value between the acquired image and the template while moving a preset face detection template in the image acquired by the image acquisition unit 102. Ask. Then, the face feature extraction unit 103 detects a region having the highest correlation value with the template as a face image in the acquired image.
  • the face feature extraction unit 103 detects a face image from the image acquired by the image acquisition unit 102 using a preset face detection template.
  • a face image can be detected from the image acquired by the image acquisition unit 102 using a known eigenspace method, subspace method, or the like.
  • the face feature extraction unit 103 uses, for example, a method described in Japanese Patent No. 5355446, among a plurality of images acquired by the image acquisition unit 102, a plurality of persons passing through the check-in counter P1. The face image is detected.
  • the face feature extraction unit 103 can also select a face image necessary for extracting feature information from the detected plurality of face images.
  • the facial feature extraction unit 103 detects facial parts such as eyes and nose from the detected facial image using a method described in, for example, Japanese Patent No. 3279913. After that, the face feature extraction unit 103 digitizes and outputs the feature information that can identify the person who passes the check-in counter P1 from the detected face part. Specifically, the face feature extraction unit 103 extracts an area having a predetermined size and a predetermined shape from the face image detected from the image acquired by the image acquisition unit 102 based on the position of the detected face part. cut. Then, the face feature extraction unit 103 extracts the shading information of the clipped area as feature information. The face feature extraction unit 103 uses, for example, a partial space method described in Japanese Patent No. 40879953 or the like, and uses m ⁇ n-dimensional feature vectors (features) of m ⁇ n pixel regions cut out from a face image. Information).
  • the face feature extraction unit 103 stores the extracted feature information in the first storage device 45 in association with the destination information and the identification information read by the identification information reading unit 104 (step S1605).
  • FIG. 17 is a flowchart showing a flow of authentication processing by the first authentication device included in the immigration system according to the present embodiment.
  • the identification information reading unit 114 reads the identification information of the holder of the passport P from the passport P possessed by the person passing through the immigration counter DC (step S1701).
  • the method for reading the identification information from the passport P by the identification information reading unit 114 is the same as the method for reading the identification information from the passport P by the identification information reading unit 104 of the boarding guide device 40.
  • the image acquisition unit 112 controls the camera 111 to image a person passing through the immigration examination counter DC. Then, the image acquisition unit 112 acquires an image obtained by imaging with the camera 111 (step S1702).
  • the camera 111 is composed of, for example, a video camera or the like, and is provided so as to be able to image a person passing through the immigration examination counter DC. In the present embodiment, the camera 111 is provided so as to be able to image the face of a person who passes through the immigration counter DC.
  • the camera 111 digitizes and outputs an image obtained by imaging a person passing through the immigration examination counter DC by an A / D converter (not shown).
  • the face feature extraction unit 113 detects a face image from the image acquired by the image acquisition unit 112, and extracts feature information of the detected face image (step S1703).
  • the method of extracting feature information from the image by the face feature extraction unit 113 is the same as the method of extracting feature information from the image by the face feature extraction unit 103 of the boarding guide device 40.
  • the person authentication unit 115 uses the identification information read by the identification information reading unit 114 and the feature information extracted by the face feature extraction unit 113 to perform a first authentication process (1: 1 collation) is executed (step S1704).
  • the person authentication unit 115 first calculates the similarity between the feature information read as the identification information by the identification information reading unit 114 and the feature information extracted by the face feature extraction unit 113.
  • the person authentication unit 115 calculates a similarity index between the feature information read by the identification information reading unit 114 and the feature information extracted by the face feature extraction unit 113.
  • the similarity index is the similarity between the partial space of feature information read by the identification information reading unit 114 and the partial space of feature information extracted by the face feature extraction unit 113.
  • the person authentication unit 115 extracts the partial space of the feature information read by the identification information reading unit 114 and the facial feature extraction unit 113 by a partial space method or a composite similarity method described in Japanese Patent No. 4087953, for example.
  • the angle formed by the partial space of the feature information is calculated as the similarity between the two partial spaces.
  • the person authentication unit 115 uses the Euclidean distance or the Mahalanobis distance between the feature information read by the identification information reading unit 114 and the feature information extracted by the face feature extraction unit 113 to determine the similarity between the two feature information. You may ask. In this case, the person authentication unit 115 decreases in similarity as the Euclidean distance or Mahalanobis distance between the feature information read by the identification information reading unit 114 and the feature information extracted by the face feature extraction unit 113 increases.
  • the person authentication unit 115 determines that the first authentication process of the person passing through the departure examination counter DC has been successful when the calculated similarity is equal to or greater than a predetermined first threshold. In other words, if the calculated similarity is greater than or equal to the first threshold, the person authentication unit 115 determines that the person who passes the immigration examination counter DC is the person who owns the passport P (step S1705: Yes). ). When it is determined that the person who passes the immigration counter DC is the holder of the passport P, the person authentication unit 115 associates the identification information read by the identification information reading unit 114 with the imaging conditions of the camera 111. Are stored in the second storage device 46 as imaging conditions of the camera 131 (step S1706).
  • the imaging conditions are the imaging conditions of the camera 111 when imaging a person who is determined to be the holder of the passport P.
  • the imaging condition is information relating to an image obtained by imaging with the camera 111 (that is, an image obtained from the feature information used in the first authentication process).
  • the imaging conditions are the face image included in the image obtained by imaging by the camera 111, the height of the person based on the image, and the illumination condition based on the image (in other words, when the image is obtained). At least one of the imaging conditions of the imaging range of the camera 111.
  • the person authentication unit 115 determines that the person who passes the immigration examination counter DC is the holder of the passport P, the person authentication unit 115 identifies the person in association with the device identification information of the first authentication device 41.
  • the identification information read by the information reading unit 114 and the feature information extracted by the face feature extraction unit 113 are stored in the first storage device 45.
  • it is possible to specify which identification information and feature information stored in the first storage device 45 is the information used for the first authentication processing in which first authentication device 41.
  • the authentication process is executed using the identification information and feature information stored in the first storage device 45 in the device 42, the authentication process is performed using the identification information and feature information stored by the predetermined first authentication device 41. Can be executed.
  • the person authentication unit 115 stores the feature information extracted by the face feature extraction unit 113 in the first storage device 45 in association with the feature information read as identification information by the identification information reading unit 114.
  • it corresponds to identification information such as the time indicating the time when the first authentication process was executed, the face image of the name of the passport P, name, date of birth, gender, age, height, etc.
  • the feature information extracted by the face feature extraction unit 113 may be stored in the first storage device 45.
  • the person authentication unit 115 stores the feature vector, subspace, correlation matrix, and the like of the feature information extracted by the face feature extraction unit 113 in the first storage device 45 in association with the identification information read by the identification information reading unit 114. May be saved.
  • the display unit 116 displays information for notifying that the first authentication process by the person authentication unit 115 has been successful (Ste S1707).
  • the person authentication unit 115 determines that the first authentication process for the person passing through the departure examination counter DC has failed. In other words, when the calculated similarity is less than the first threshold, the person authentication unit 115 determines that the person who passes the immigration examination counter DC is not the person who owns the passport P (step S1705: No). If it is determined that the person passing through the immigration counter DC is not the holder of the passport P, the display unit 116 displays information for notifying that the first authentication process by the person authentication unit 115 has failed. (Step S1708).
  • FIG. 18 is a flowchart showing a flow of authentication processing by the second authentication device included in the immigration system according to the present embodiment.
  • the image acquisition unit 122 controls the camera 121 to image a person passing through the boarding gate BG. Then, the image acquisition unit 122 acquires an image obtained by imaging with the camera 121 (step S1801).
  • the camera 121 is composed of, for example, a video camera or the like, and is provided so as to be able to image a person passing through the boarding gate BG. In the present embodiment, the camera 121 is provided so as to be able to capture the face of a person passing through the boarding gate BG.
  • the camera 121 digitizes and outputs an image obtained by imaging a person passing through the boarding gate BG by an A / D converter (not shown).
  • the face feature extraction unit 123 detects a face image from the image acquired by the image acquisition unit 122, and extracts feature information of the detected face image (step S1802).
  • the feature information extraction method from the image by the face feature extraction unit 123 is the same as the feature information extraction method from the image by the face feature extraction unit 103 included in the boarding guide device 40.
  • the person search unit 124 uses the feature information extracted by the face feature extraction unit 123 and the feature information stored in the first storage device 45 to authenticate a person who passes the boarding gate BG (1: N verification). ) Is executed (step S1803). At that time, the person search unit 124 executes an authentication process using the feature information stored in association with the device identification information other than the predetermined device identification information among the feature information stored in the first storage device 45. Is prohibited. Thereby, since the authentication process of the person who passes the boarding gate BG can be executed using the feature information used for the first authentication process of the predetermined first authentication device 41, the person who passes the boarding gate BG. The reliability of the authentication process can be improved.
  • the person search unit 124 calculates the similarity between each piece of feature information stored in the first storage device 45 and the feature information extracted by the face feature extraction unit 123.
  • the similarity calculation method by the person search unit 124 is the same as the similarity calculation method by the person authentication unit 115 included in the first authentication device 41.
  • the person search unit 124 selects feature information having the highest degree of similarity with the feature information extracted by the face feature extraction unit 123 from the feature information stored in the first storage device 45.
  • the person search unit 124 succeeds in the authentication process of the person passing through the boarding gate BG. (In other words, it is determined that the feature information extracted by the face feature extraction unit 123 matches any of the feature information stored in the first storage device 45), and the passage through the boarding gate BG is determined. Permitted (Step S1804: Yes).
  • the display unit 125 displays information for notifying that the authentication process by the person search unit 124 is successful (step S1805).
  • the person search unit 124 stores various pieces of information (for example, stored in association with the identification information of the person who has successfully performed the authentication process) from the first storage device 45. Device identification information, feature information, destination information, etc.).
  • the person search unit 124 also deletes various information stored in association with identification information that has been stored in the first storage device 45 for a predetermined time.
  • the reliability of the feature information stored in the first storage device 45 can be maintained.
  • the person search unit 124 performs an authentication process for a person passing through the boarding gate BG. Is determined to have failed and the passage of the boarding gate BG is prohibited (step S1804: No). Further, when the authentication process for the person passing through the boarding gate BG fails, the display unit 125 displays information for notifying that the authentication process by the person search unit 124 has failed (step S1806).
  • the person search unit 124 can execute a process for removing information unnecessary for identification between the feature information for the plurality of feature information stored in the first storage device 45.
  • the person search unit 124 projects or converts the feature vector stored as the feature information in the first storage device 45 into the subspace using the constrained mutual subspace method described in Japanese Patent No. 4087953. By doing so, the identification accuracy between the feature information memorize
  • the person search unit 124 stores the first storage device. Using the identification information stored in 45 and the feature information extracted by the face feature extraction unit 123, an authentication process for a person passing through the boarding gate BG may be executed. As a result, like the first authentication device 41, the authentication process for the person passing through the boarding gate BG is executed using the feature information read from the passport P as the identification information. Can be secured. However, since the feature information read as identification information from the passport P is generally feature information older than the point in time when the authentication process is executed, the authentication process is easily affected by the secular change of the person to be authenticated. .
  • the person search unit 124 as described above, the feature information stored in the first storage device 45 (feature information extracted by the face feature extraction unit 113 of the first authentication device 41), By performing the authentication process of the person passing through the boarding gate BG using the feature information extracted by the face feature extraction unit 123, the authentication process is affected by the secular change of the person to be authenticated. It can be reduced and the accuracy of authentication of the person can be improved.
  • the person search unit 124 when at least one of the identification information and feature information stored in the first storage device 45 matches the feature information extracted by the face feature extraction unit 123, It may be determined that the authentication process for the person who passes through is successful. Thereby, the failure of the authentication process of the person who passes the boarding gate BG using the information memorize
  • the person search unit 124 detects the congestion level of the boarding gate BG based on the image obtained by the imaging of the camera 121, and the authentication process of the person passing through the boarding gate BG according to the detected congestion level
  • the number of persons passing through the boarding gate BG per unit time is controlled by changing the processing speed (for example, if the detected congestion level is higher than a predetermined value, increasing the processing speed of the authentication process). It is also possible to do.
  • the feature information extracted by the face feature extraction unit 123 is predetermined feature information (for example, feature information of a first class person)
  • the person search unit 124 has a person having the predetermined feature information. May be displayed on the display unit 125 for notifying that the boarding is preferentially boarded.
  • the person search unit 124 also associates the identification information that matches the feature information extracted by the face feature extraction unit 123 in the first storage device 45 when the authentication process of the person passing through the boarding gate BG is successful.
  • the destination information stored in the memory is read out. Then, the person search unit 124 notifies the fact that there is a passenger with a different destination when the destination indicated by the read destination information does not match the destination of the airplane on which the person who has passed the boarding gate BG does not match. Can be displayed on the display unit 125.
  • the person search unit 124 also displays information for instructing boarding using the airline ticket T held by the person passing through the boarding gate BG when the authentication process of the person passing through the boarding gate BG fails. May be displayed.
  • FIG. 19 is a flowchart showing a flow of authentication processing when the second authentication device included in the immigration control system according to the present embodiment includes a reading unit that can read identification information from a passport.
  • the image acquisition unit 122 is operated by an input unit (not shown) included in the second authentication device 42 and receives a reading instruction for instructing reading of identification information from the passport P possessed by a person passing through the boarding gate BG. It is determined whether or not (step S1901). When the reading instruction has not been input (step S1901: No), the second authentication device 42 executes the same processing as steps S1801 to S1806 shown in FIG.
  • step S1901 when a reading instruction is input (step S1901: Yes), the reading unit (not shown) included in the second authentication device 42 identifies the holder of the passport P from the passport P possessed by the person passing through the boarding gate BG. Information is read (step S1902).
  • a method for reading identification information from the passport P by a reading unit (not shown) included in the second authentication device 42 is the same as a method for reading identification information from the passport P by the identification information reading unit 104 included in the boarding guide device 40.
  • the second authentication device 42 executes the same processing as in steps S1801 to S1802 shown in FIG.
  • the person search unit 124 uses the identification information read from the passport P by the reading unit (not shown) included in the second authentication device 42 and the feature information extracted by the face feature extraction unit 123 to pass through the boarding gate BG.
  • the authentication process is executed (step S1903).
  • the person search unit 124 executes an authentication process for a person passing through the boarding gate BG in the same manner as the authentication process performed by the person authentication unit 115 included in the first authentication device 41.
  • the person search unit 124 does not perform the authentication process in the first authentication device 41, so The predetermined second threshold value to be compared with the similarity between the read feature information and the feature information extracted by the face feature extraction unit 123 may be higher than the first threshold value used in the authentication process in the first authentication device 41.
  • the person search unit 124 may set the second threshold value lower than the first threshold value when priority is given to the efficiency of the authentication process of the person passing through the boarding gate BG.
  • FIG. 20 is a flowchart showing a flow of authentication processing by the third authentication device 43 included in the immigration system according to the present embodiment.
  • the identification information reading unit 132 reads the identification information of the holder of the passport P from the passport P possessed by a person passing through the immigration counter IC (step S2001).
  • the method for reading the identification information from the passport P by the identification information reading unit 132 is the same as the method for reading the identification information from the passport P by the identification information reading unit 104 of the boarding guide device 40.
  • the imaging condition adjustment unit 133 reads the imaging conditions stored in association with the identification information that matches the identification information read by the identification information reading unit 132 from the second storage device 46. Then, the imaging condition adjustment unit 133 adjusts the imaging conditions of the camera 131 according to the read imaging conditions (step S2002).
  • the biometric information obtained from the image obtained by the imaging of the camera 131 under the imaging conditions similar to the imaging conditions of the camera 111 when the first authentication process at the immigration counter DC is successful is used. Since two authentication processes can be executed, the accuracy of person authentication at the immigration counter IC can be improved.
  • the imaging condition adjustment unit 133 when the read imaging condition includes height, the imaging condition adjustment unit 133 captures the face of the person passing through the immigration counter IC from the front according to the height. Adjust. In the present embodiment, the imaging condition adjustment unit 133 adjusts the light source that can irradiate the immigration counter IC according to the illumination condition when the read imaging condition includes the illumination condition.
  • the imaging condition adjustment unit 133 displays a first instruction for instructing a facial expression close to the face image on the display unit 137 when the read imaging condition includes a face image. Further, the imaging condition adjusting unit 133 displays a second instruction for instructing wearing of the glasses on the display unit 137 when the read imaging condition includes a face image and the face image is a face image with glasses. To do. In addition, when the read imaging condition includes a face image, the imaging condition adjustment unit 133 can display a third instruction for instructing a hairstyle close to the face image on the display unit 137.
  • the second information is obtained by using the biological information acquired from the image obtained by the imaging of the camera 131 under the imaging condition closer to the imaging condition of the camera 111 when the first authentication process at the immigration counter DC is successful. Since the authentication process can be executed, the accuracy of person authentication at the immigration counter IC can be further improved.
  • the image acquisition unit 134 controls the camera 131 to image a person passing through the immigration counter IC. Then, the image acquisition unit 134 acquires an image obtained by imaging with the camera 131 (step S2003).
  • the camera 131 is composed of, for example, a video camera or the like, and is provided so as to be able to image a person passing through the immigration counter IC. In the present embodiment, the camera 131 is provided so as to be able to capture the face of a person passing through the immigration counter IC.
  • the camera 131 digitizes and outputs an image obtained by imaging a person passing through the immigration counter IC by an A / D converter (not shown).
  • the face feature extraction unit 135 detects a face image from the image acquired by the image acquisition unit 134, and extracts feature information of the detected face image (step S2004).
  • the feature information extraction method from the image by the face feature extraction unit 135 is the same as the feature information extraction method from the image by the face feature extraction unit 103 included in the boarding guide device 40.
  • the person authentication unit 136 uses the identification information read by the identification information reading unit 132 and the feature information extracted by the face feature extraction unit 135 to perform a second authentication process (1: 1 collation) is executed (step S2005).
  • the person authentication method by the person authentication unit 136 is the same as the person authentication method by the person authentication unit 115 of the first authentication device 41.
  • the person authentication unit 136 when the read imaging condition includes height, the person authentication unit 136 has a similarity between the feature information read as identification information by the identification information reading unit 132 and the feature information extracted by the face feature extraction unit 135. It is also possible to determine that the second authentication process has been successful when the height is equal to or greater than the first threshold and the height included in the read imaging condition matches the height of the person based on the image acquired by the image acquisition unit 134. It is. Thereby, in addition to the feature information of the person passing through the immigration counter IC, the second authentication process is executed in consideration of the height of the person, so that the person authentication accuracy by the second authentication process can be improved. it can.
  • the person authentication unit 136 determines that the person who passes the immigration counter IC has succeeded in the second authentication process of the person who passes the immigration counter IC and that the person who passes the immigration counter IC is the holder of the passport P (step S2006: Yes).
  • the feature information extracted by the face feature extraction unit 135 is stored in the second storage device 46 in association with the identification information read by the identification information reading unit 132 (step S2007). Further, when it is determined that the person who passes the immigration counter IC is the holder of the passport P, the display unit 137 displays information for notifying that the second authentication process by the person authentication unit 136 is successful. (Step S2008).
  • step S2006: No when it is determined that the person who passes the immigration counter IC is not the holder of the passport P (step S2006: No), the display unit 137 notifies that the second authentication process by the person authentication unit 136 has failed. Information for displaying is displayed (step S2009).
  • FIG. 21 is a flowchart showing a flow of authentication processing by the fourth authentication device 44 included in the immigration system according to the present embodiment.
  • the first image acquisition unit 142 and the second image acquisition unit 146 are operated by an input unit (not shown) included in the fourth authentication device 44 to operate the tag from the package tag 400 possessed by a person passing through the package receiving place BC. It is determined whether or not a reading instruction for instructing reading of information has been input (step S2101).
  • the first image acquisition unit 142 controls the camera 141 to image a person passing through the package receiving location BC. Then, the first image acquisition unit 142 acquires an image obtained by imaging with the camera 141 (step S2102).
  • the camera 141 is composed of, for example, a video camera or the like, and is provided so as to be able to image a person passing through the package receiving place BC. In the present embodiment, the camera 141 is provided so as to be able to image the face of a person passing through the package receiving place BC.
  • the camera 141 digitizes and outputs an image obtained by imaging a person passing through the package receiving place BC by an A / D converter (not shown).
  • the first face feature extraction unit 143 detects a face image from the image acquired by the first image acquisition unit 142, and extracts feature information of the detected face image (step S2103).
  • the feature information extraction method from the image by the first face feature extraction unit 143 is the same as the feature information extraction method from the image by the face feature extraction unit 103 included in the boarding guide device 40.
  • the person search unit 144 uses the feature information extracted by the first face feature extraction unit 143 and the feature information stored in the second storage device 46 to perform an authentication process (1 : N collation) is executed (step S2104).
  • the authentication process by the person search unit 144 is the same as the authentication process by the person search unit 124 included in the second authentication device 42.
  • the person search unit 144 authenticates the person who passes the package receiving location BC. It is determined that the processing has been successful (in other words, it is determined that the feature information extracted by the first face feature extraction unit 143 matches any of the feature information stored in the second storage device 46), and the package The passage of the receiving place BC is permitted (step S2105: Yes).
  • the first display unit 145 displays information for notifying that the authentication process by the person search unit 144 is successful (step S2106).
  • the person search unit 144 stores various information (stored from the second storage device 46 in association with the identification information of the person who has succeeded in the authentication process) For example, feature information is deleted. Alternatively, the person search unit 144 also deletes various information stored in association with the identification information that has been stored in the second storage device 46 for a predetermined time.
  • the number of feature information for calculating the similarity with the feature information extracted in step S2103 among the feature information stored in the second storage device 46 is reduced. Therefore, useless calculation processing can be omitted, the processing speed of authentication processing can be improved, and resources can be saved. Further, the reliability of the feature information stored in the second storage device 46 can be maintained.
  • the person search unit 144 passes the package receiving location BC. It is determined that the authentication process has failed, and passage through the package receiving location BC is prohibited. Further, when the authentication process for the person passing through the package receiving location BC fails, the first display unit 145 displays information for notifying that the authentication process by the person search unit 144 has failed (step S2107).
  • the tag information reading unit 148 reads the tag information from the package tag 400 possessed by the person passing through the package receiving location BC (step S2108).
  • the method for reading the tag information from the luggage tag 400 by the tag information reading unit 148 is the same as the method for reading the identification information from the passport P by the identification information reading unit 104 of the boarding guide device 40.
  • the second image acquisition unit 146 controls the camera 141 to image a person passing through the package receiving location BC. And the 2nd image acquisition part 146 controls the camera 141, and images the person who passes the package receiving place BC. Then, the second image acquisition unit 146 acquires an image obtained by imaging with the camera 141 (step S2109).
  • the second face feature extraction unit 147 detects a face image from the image acquired by the second image acquisition unit 146, and extracts feature information of the detected face image (step S18210).
  • the method of extracting feature information from the image by the second face feature extracting unit 147 is the same as the method of extracting feature information from the image by the face feature extracting unit 103 included in the boarding guide device 40.
  • the person authentication unit 149 uses the tag information read by the tag information reading unit 148 and the feature information extracted by the second face feature extraction unit 147 to execute an authentication process for a person passing through the package receiving location BC (step S2111). ).
  • the person authentication method by the person authentication unit 149 is the same as the person authentication method by the person authentication unit 115 of the first authentication device 41.
  • the person authentication unit 149 It is determined that the authentication process for the person who passes through (step S2105: Yes) and the person's package passing through the package receiving place BC is shipped (step S2106). At that time, the person authentication unit 149 can also improve the efficiency of receiving the package by shipping the packages of the person passing through the package receiving place BC in the order from the first in which the authentication processing is performed. Further, the person authentication unit 149 causes the second display unit 150 to display the location of the person's package and the waiting time until the package is shipped based on the result of the authentication process of the person passing through the package receiving place BC. It is also possible.
  • the person authentication unit 149 receives the package when the similarity between the tag information read by the tag information reading unit 148 and the feature information extracted by the second face feature extraction unit 147 is less than the first threshold. It is determined that the authentication process for the person passing through the place BC has failed, and the shipment of the package to the person passing through the package receiving place BC is prohibited. Further, when the authentication process for the person passing through the package receiving location BC fails, the second display unit 150 displays information for notifying that the authentication process by the person authentication unit 149 has failed (step S2107).
  • the passer-by had to stop at the time of photographing with the camera, but as the fourth embodiment, it is installed in, for example, the second authentication device 20 even when walking as shown in FIG. In addition, photographing and verification by the second imaging unit 21 can be performed.
  • the operation will be described along the flowchart shown in FIG.
  • the IC image of the passport P is read (step S2301).
  • the second imaging unit 21 captures the face of a person who is walking with the second imaging unit 21 (step S2302).
  • a face is detected and tracked from the obtained captured moving image (step S2303).
  • the gate GT is set. Open and allow the pedestrian to pass (step S2305).
  • the gate GT is closed (step S2306).
  • a warning is issued to the pedestrian (step S2307).
  • the program executed by the boarding guide device 40, the first authentication device 41, the second authentication device 42, the third authentication device 43, and the fourth authentication device 44 of the present embodiment is stored in advance in a ROM (Read Only Memory) or the like. Provided embedded.
  • the program executed by the boarding guide device 40, the first authentication device 41, the second authentication device 42, the third authentication device 43, and the fourth authentication device 44 of the present embodiment is a file in an installable format or an executable format. May be provided by being recorded on a computer-readable recording medium such as a CD-ROM, flexible disk (FD), CD-R, DVD (Digital Versatile Disk).
  • a computer-readable recording medium such as a CD-ROM, flexible disk (FD), CD-R, DVD (Digital Versatile Disk).
  • a computer that is connected to a network such as the Internet for a program executed by the boarding guide device 40, the first authentication device 41, the second authentication device 42, the third authentication device 43, and the fourth authentication device 44 of the present embodiment. You may comprise so that it may provide by being stored and downloaded via a network. Further, the program executed by the boarding guide device 40, the first authentication device 41, the second authentication device 42, the third authentication device 43, and the fourth authentication device 44 of the present embodiment is provided or distributed via a network such as the Internet. You may comprise as follows.
  • the program executed by the boarding guide device 40 has a module configuration including the above-described units (the image acquisition unit 102, the face feature extraction unit 103, and the identification information reading unit 104).
  • the CPU Central Processing Unit
  • the image acquisition unit 102, the facial feature extraction unit 103, and the identification information reading unit 104 are included in the main storage device. It is supposed to be generated above.
  • the program executed by the first authentication device 41 of the present embodiment has a module configuration including the above-described units (image acquisition unit 112, face feature extraction unit 113, identification information reading unit 114, person authentication unit 115).
  • the CPU reads the program from the ROM and executes it, so that the above-described units are loaded on the main storage device, and the image acquisition unit 112, the face feature extraction unit 113, the identification information reading unit 114, the person authentication The unit 115 is generated on the main storage device.
  • the program executed by the second authentication device 42 has a module configuration including the above-described units (the image acquisition unit 122, the face feature extraction unit 123, and the person search unit 124).
  • the CPU reads the program from the ROM and executes it, the above-described units are loaded on the main storage device, and the image acquisition unit 122, the facial feature extraction unit 123, and the person search unit 124 are generated on the main storage device. It has become.
  • the program executed by the third authentication device 43 of the present embodiment includes the above-described units (imaging condition adjustment unit 133, image acquisition unit 134, face feature extraction unit 135, identification information reading unit 132, person authentication unit 136).
  • the CPU reads the program from the ROM and executes it, so that the above-described units are loaded on the main storage device, and the imaging condition adjustment unit 133, the image acquisition unit 134, the facial features An extraction unit 135, an identification information reading unit 132, and a person authentication unit 136 are generated on the main storage device.
  • the program executed by the fourth authentication device 44 of this embodiment includes the above-described units (the first image acquisition unit 142, the first face feature extraction unit 143, the person search unit 144, the second image acquisition unit 146, and the second face.
  • the module configuration includes a feature extraction unit 147, a tag information reading unit 148, and a person authentication unit 149).
  • the CPU reads out the program from the ROM and executes the program so that each unit is a main storage device.
  • the first image acquisition unit 142, the first face feature extraction unit 143, the person search unit 144, the second image acquisition unit 146, the second face feature extraction unit 147, the tag information reading unit 148, and the person authentication unit 149. Are generated on the main memory.
  • the first imaging condition of the first imaging unit that obtains the first image used for the first authentication process of the person passing through the first position is stored in association with the first identification information of the person passing through the first position.
  • An information processing method comprising:
  • the similarity between the facial image feature information as the second identification information and the facial image feature information included in the second image is greater than or equal to a predetermined threshold.
  • the imaging range of the second imaging unit is adjusted so that the face of a person passing through the second position is imaged from the front according to the first height.
  • the first imaging condition includes a face image included in the first image and the face image is a face image with glasses
  • a second instruction for instructing wearing of glasses is displayed on the display unit [ 3] Information processing method.
  • the person A first authentication unit for executing the first authentication process of A storage unit that stores the first imaging condition of the first imaging unit in association with the first identification information when the first authentication process is successful;
  • the first imaging stored in association with the first identification information that matches the second identification information read from the medium possessed by the person passing through the second position different from the first position from the storage unit
  • An adjustment unit that reads a condition and adjusts a second imaging condition of a second imaging unit capable of imaging a person passing through the second position according to the read first imaging condition;
  • Second authentication for executing a second authentication process for a person passing through the second position by using the second identification information and the biological information acquired from the second image obtained by imaging by the second imaging unit.
  • An information processing system comprising:

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Biomedical Technology (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • Collating Specific Patterns (AREA)
  • Lock And Its Accessories (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

　本発明は、通行者が通行する経路の途中で通行者が入れ替わった場合に、通行者の入れ替わりを検知することができる、情報処理方法を提供することを目的とする。　本発明における情報処理方法は、第１位置を通過する通行者が所持する媒体から読み取られた第１生体情報と、前記第１位置を通過する通行者を撮像して得られた画像から取得した第２生体情報とを用いて、通行者を認証する第１認証処理を実行する工程と、前記第１認証処理による通行者の認証に成功した場合、前記第１認証処理に用いた前記第１生体情報および前記第２生体情報の少なくとも一方に基づく第３生体情報を記憶部に記憶する工程と、通行者の進行方向において前記第１位置より下流側の第２位置を通過する通行者を撮像して得られた画像から取得した第４生体情報と、前記記憶部に記憶された前記第３生体情報とを用いて、通行者を認証する第２認証処理を実行する工程とを具備する。

Description

情報処理方法および情報処理システム
　本発明の実施形態は、情報処理方法および情報処理システムに関する。
　重要施設や公共施設等における多数の通行者に対して、生体情報を用いた認証を行う技術がある。例えば、エスカレータ等の通行者の動きが制限される装置の入口において生体情報を取得し、当該装置の出口に通行者がたどり着くまでに通行者の認証を行う技術がある。また、通行者が多い場合に、通行者の認証を簡潔な処理に切り替えることにより、通行者を漏れなくかつ効率良く認証する技術がある。また、通行者に対して複数回認証を行いかつ通行者の認証精度を段階的に高くする技術がある。
　しかしながら、通行者の動きが制限されるエスカレータ等の装置の入口において生体情報を取得して当該通行者が出口にたどり着くまでに認証を行う技術は、生体情報を用いた認証自体を効率化するものではなく、認証に時間的な猶予がある場合に有効である。また、通行者が多い場合に通行者の認証を簡潔なものに切り替える技術は、厳密な認証が適用されない通行者が発生して認証精度が低下する可能性がある。また、通行者に対して複数回認証を行いかつ認証精度を段階的に高くする技術は、通行者の通行経路に制限がない場所においては適用することができず、通行者が通行する経路の途中で通行者が入れ替わった場合に、通行者の入れ替わりを検知することができない。
　また、重要施設や公共施設の多数の人物に対して、生体情報を使った人物の認証処理を行う場合に、高精度に人物の認証処理を適用すると、当該認証処理の処理時間が長くなってしまうため、人物の通行が滞ることがある。そこで、出国審査等の第１位置を通過する人物の身体全体の写真撮影を行って得た写真画像を、飛行機の到着先の入国審査等の第２位置に送信して、当該写真画像を目視での入国審査に使用可能とする技術、ゲートや待合室や廊下等を移動している人物を撮像して取得した当該人物の顔画像と、当該人物が所持する個人認証用媒体から読み取った顔画像とを用いて、人物の認証を行う技術等がある。
　また、飛行機の到着先の入国審査等の第２位置に写真画像を送信する技術は、当該写真画像を目視での入国審査に使用可能とするものであり、第２位置での人物の自動的な認証を効率化することができない。また、人物がゲートや待合室や廊下等を移動している間に撮像して取得した人物の顔画像と、人物が所持する個人認証用媒体から読み取った顔画像とを用いて人物の認証を行う技術は、個人認証用媒体から読み取った顔画像の経劣化等の変動によって、認証精度の安定化を図ることが難しい。
特開２００３－１８４３８１号公報 特開２００７－１５６５４１号公報 特開２００５－１００３６９号公報 特開２００３－２９６５１７号公報 特開２００７－２４９８１９号公報
　本発明の実施形態は、通行者が通行する経路の途中で通行者が入れ替わった場合に、通行者の入れ替わりを検知することができる、情報処理方法および情報処理システムを提供することを目的とする。
　本発明の実施形態における情報処理方法は、第１位置を通過する通行者が所持する媒体から読み取られた第１生体情報と、前記第１位置を通過する通行者を撮像して得られた画像から取得した第２生体情報とを用いて、通行者を認証する第１認証処理を実行する工程と、前記第１認証処理による通行者の認証に成功した場合、前記第１認証処理に用いた前記第１生体情報および前記第２生体情報の少なくとも一方に基づく第３生体情報を記憶部に記憶する工程と、通行者の進行する方向において前記第１位置より下流側の第２位置を通過する通行者を撮像して得られた画像から取得した第４生体情報と、前記記憶部に記憶された前記第３生体情報とを用いて、通行者を認証する第２認証処理を実行する工程と、前記第２認証処理により認証された場合、前記第２位置を通行することを許可する認証工程とを備える。
第１の実施形態にかかる情報処理方法を適用した情報処理システムの構成を示す図。 第１の実施形態にかかる情報処理システムの機能的構成を示すブロック図。 第１の実施形態にかかる情報処理システムにおいて、人物の経年変化に対応した照合形態を示す図。 第１の実施形態にかかる情報処理システムが有する第１認証装置における通行者の認証処理の流れを示すフローチャート。 第１の実施形態にかかる情報処理システムが有する第１認証装置における通行者の認証結果の表示例を示す図。 第１の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証処理の流れを示すフローチャート。 第１の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証結果の表示例を示す図。 第２の実施形態にかかる情報処理システムの機能的構成を示すブロック図。 第２の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証処理の流れを示すフローチャート； 第３実施形態にかかる出入管理システムを適用した情報処理システムの構成を示す図。 第３実施形態にかかる出入管理システムを適用した情報処理システムにおいて、カメラで撮影された人物の顔画像と、通過する人物が所持する旅券に保存されている人物の顔画像とを対比して表示する管理者用モニタとしての表示部。 ～ 第３実施形態にかかる出入管理システムにおいて、撮影画像として不適切な例を示す図。 第３実施形態にかかる情報処理システムが有する搭乗案内装置、第１認証装置、および第２認証装置の機能的な構成を示す図。 第３実施形態にかかる情報処理システムが有する第３認証装置の機能的な構成を示す図。 第３実施形態にかかる情報処理システムが有する第４認証装置の機能的な構成を示す図。 第３実施形態にかかる情報処理システムが有する搭乗案内装置による生体情報の取得処理の流れを示すフローチャート。 第３実施形態にかかる情報処理システムが有する第１認証装置による認証処理の流れを示すフローチャート。 第３実施形態にかかる情報処理システムが有する第２認証装置による認証処理の流れを示すフローチャート。 第３実施形態にかかる情報処理システムが有する第２認証装置が旅券から識別情報を読取可能な読取部を備える場合の認証処理の流れを示すフローチャート。 第３実施形態にかかる情報処理システムが有する第３認証装置による認証処理の流れを示すフローチャート。 第３実施形態にかかる情報処理システムが有する第４認証装置による認証処理の流れを示すフローチャート。 第４実施形態にかかる歩行中の情報処理システムを示す斜視図。 第４実施形態にかかる情報処理システムによる認証処理の流れを示すフローチャート。
　以下、添付の図面を用いて、本実施形態にかかる情報処理方法および情報処理システムについて説明する。
　（第１の実施形態）
　図１は、第１の実施形態にかかる情報処理方法を適用した情報処理システムの構成を示す図である。本実施形態にかかる情報処理システム１は、図１に示すように、第１位置Ｐ１を通過する通行者が所持する媒体Ｍから読み取られた生体情報（第１生体情報の一例）と、第１位置Ｐ１を通過する通行者を第１撮像部１１により撮像して得られた第１画像Ｇ１から取得した生体情報（第２生体情報の一例）とを用いて、通行者を認証する第１認証処理を実行する第１認証装置１０と、第１認証処理による通過者の認証に成功した場合、第１認証処理に用いられた２つの生体情報の少なくとも一方に基づいて生成された第３生体情報（以下、認証用特徴情報と言う）を記憶する特徴情報記憶部３１を有するサーバ３０と、通行者の進行方向において第１位置Ｐ１より下流側の第２位置Ｐ２を通過する通行者を第２撮像部２１により撮像して得られた第２画像Ｇ２から取得した生体情報（第４生体情報の一例）と、特徴情報記憶部３１に記憶された認証用特徴情報とを用いて、通行者を認証する第２認証処理を実行する第２認証装置２０と、を備えている。更に、第１認証装置１０と第２認証装置２０との認証処理の結果を、管理者向けに表示する管理者モニタとしての第２表示部２６を備えている。
ここで、通行者の進行方向において第１位置Ｐ１より下流側とは、通行者の通行経路において第１位置Ｐ１よりも後に通過する位置である。
　すなわち、本実施形態にかかる情報処理システム１は、第１位置Ｐ１を通過する通行者に対して第１認証処理を実行した後、第２位置Ｐ２を通過する通行者を第２撮像部２１により撮像して得られた第２画像Ｇ２から取得した生体情報と特徴情報記憶部３１に記憶された認証用特徴情報とを用いて、通行者を認証する第２認証処理を実行することで、第２位置Ｐ２を通過する通行者が第１位置Ｐ１を通過した通行者と同一人物であるか否かを検出する同定処理を行う。
　これにより、第１位置Ｐ１を通過した後、第２位置Ｐ２を通過するまでの間に通行者が入れ替わった場合、第１認証処理による認証に成功したとしても、第２認証処理による認証に失敗するため、通行者の入れ替わりを防止することができる。また、第１位置Ｐ１を通過する通行者が所持する媒体Ｍから読み取られた生体情報を用いて第１認証処理および第２認証処理を実行することにより、サーバ３０等の上位機器が有するデータベースから第１，２認証処理に用いる生体情報を検索したり、第１，２認証処理に要する時間の短縮のために通行者の認証を簡潔なものに切り替えたりする必要がなくなるので、通行者の認証精度の低下を防止しつつ効率的に通行者の認証を行うことができる。
　言い換えると、本実施形態にかかる情報処理システム１は、第１認証装置１０において実行される第１認証処理（所謂１：１照合）と、第２認証装置２０において実行される第２認証処理（所謂１：Ｎ照合）とを組み合わせることにより、効率的に通行者の認証を行うシステムである。ここで、第１認証装置１０における１：１照合は、図１に示すように、例えば建物の入口やセキュリティ管理エリアの入口等の第２位置Ｐ２に通行者が到達する前に、第１位置Ｐ１を通過する通行者が所持する媒体Ｍから読み取った生体情報と、第１位置Ｐ１を通過する通過者を第１撮像部１１により撮像して得られた第１画像Ｇ１から取得した生体情報とを用いた通行者の認証処理である。
　一方、第２認証装置２０における１：Ｎ照合は、図１に示すように、サーバ３０の特徴情報記憶部３１に記憶されている認証用特徴情報と、第２位置Ｐ２を通過する通行者を第２撮像部２１により撮像して得られた第２画像Ｇ２から取得した生体情報とを用いた通行者の認証処理である。つまり、第２認証装置２０における１：Ｎ照合では、通行者が所持する媒体Ｍからの生体情報の読み取りを行わずに、第２撮像部２１の撮像により得られた第２画像Ｇ２から取得した生体情報が、サーバ３０の特徴情報記憶部３１に記憶されている認証用特徴情報のいずれかと一致すれば、通行者の認証に成功したと判断する。
　そして、第２認証装置２０は、１：Ｎ照合による認証結果に従って、通行者の通行を制御するための処理を実行する。具体的には、第２認証装置２０は、１：Ｎ照合による認証に成功した場合、第２位置Ｐ２に設けられた入口ゲートをオープンしたり、第２位置Ｐ２に設けられた扉の鍵を開錠したりして、通行者の通行を許可する処理を実行する。一方、第２認証装置２０は、１：Ｎ照合による認証に失敗した場合、第２位置Ｐ２に設けられた入口ゲートを閉じたり、第２位置Ｐ２に設けられた扉の鍵の開錠を禁止したりして、通行者の通行を禁止する処理を実行する。第２認証装置２０は、第２位置Ｐ２に入口ゲートや扉が設けられていない場合、認証に失敗したことを通知するためのメッセージ（警報）を管理者モニタとしての第２表示部２６（図１及び図７参照）に表示させたり、外部端末に当該警報を通知したり、認証に失敗した通行者の画像（例えば、第２画像Ｇ２に含まれる顔画像）を記憶しておく等の処理を、通行者の通行を禁止する処理として実行する。
　本実施形態にかかる情報処理システム１によれば、第２位置Ｐ２を通過する通行者が所持する媒体Ｍからの生体情報の読み取りを行わずに、第２位置Ｐ２を通過する通行者の認証を行うことができ、かつ通行者の認証に要する時間の短縮のために第２認証処理を簡潔なものに切り替える必要がなくなるので、多数の通行者が第２位置Ｐ２を通過する場合に、通行者の滞りの発生および通行者の認証精度の低下を防止することができる。
　本実施形態にかかる情報処理システム１は、公共施設、重要施設、オフィスビル、商業施設などの多数の通行者が通行する施設に設置される入退室管理システムや映像監視システム等に適用可能である。以下の説明では、通行者の認証処理に用いる生体情報として通行者の顔画像の特徴情報を用いる例について説明するが、これに限定するものではなく、例えば、虹彩，指紋，静脈，掌紋，耳型などの通行者の身体の情報を生体情報として用いても良い。
　次に、図２を用いて、本実施形態にかかる情報処理システム１の機能的構成について説明する。図２は、第１の実施形態にかかる情報処理システムの機能的構成を示すブロック図である。
　第１認証装置１０は、図２に示すように、第１位置Ｐ１を通過する通行者を撮像可能に設けられた第１撮像部１１と、後述する識別情報読取部１４により特徴情報が読み取られた際に第１撮像部１１の撮像により得られた第１画像Ｇ１を取得する第１画像取得部１２と、第１画像取得部１２により取得した第１画像Ｇ１から通行者の顔画像の特徴情報（第２生体情報の一例）を取得（抽出）する第１顔特徴抽出部１３と、第１位置Ｐ１を通過する通行者が所持する媒体Ｍから特徴情報（第１生体情報の一例）を読取可能に設けられた識別情報読取部１４（読取部の一例）と、第１顔特徴抽出部１３により取得した特徴情報と識別情報読取部１４により読み取った特徴情報とを用いて、通行者を認証する第１認証処理を実行する第１通行者認証部１５と、当該第１通行者認証部１５による通行者の認証結果を出力する第１出力部１６と、を備えている。
　サーバ３０は、図２に示すように、第１認証装置１０（第１通行者認証部１５）による第１認証処理に用いられた２つ特徴情報（第１画像Ｇ１から取得した特徴情報および媒体Ｍから読み取られた特徴情報）の少なくとも一方に基づく第３生体情報の一例である認証用特徴情報（本実施形態では、第１画像Ｇ１から取得した特徴情報または媒体Ｍから読み取られた特徴情報）を記憶する特徴情報記憶部３１（記憶部の一例）を有している。
　第２認証装置２０は、図２に示すように、第２位置Ｐ２を通過する通行者を撮像可能に設けられた第２撮像部２１と、当該第２撮像部２１の撮像により得られた第２画像Ｇ２を取得する第２画像取得部２２と、当該第２画像取得部２２により取得した第２画像Ｇ２から通行者の顔画像の特徴情報（第４生体情報の一例）を取得（抽出）する第２顔特徴抽出部２３と、当該第２顔特徴抽出部２３により取得した特徴情報と特徴情報記憶部３１に記憶された認証用特徴情報とを用いて、通行者を認証する第２認証処理を実行する第２通行者認証部２４と、当該第２通行者認証部２４による通行者の認証結果を出力する第２出力部２５と、を備えている。なお、第１認証装置１０の第１出力部１６と、第２認証装置２０の第２出力部２５とは第１表示部１７を介して接続されている。
　次に、図２および図４を用いて、本実施形態にかかる情報処理システム１が有する第１認証装置１０における通行者の認証処理について詳細に説明する。図４は、第１の実施形態にかかる情報処理システムが有する第１認証装置における通行者の認証処理の流れを示すフローチャートである。
　識別情報読取部１４は、カードリーダ等により構成され、第１位置Ｐ１を通過する通行者が所持する媒体Ｍ（例えば、通行者を識別するためのＩＤカード、ＲＦＩＤ（Radio　Frequency　Identification）チップを備えたカード、鍵、身分証明書やパスポート等の公的な本人確認用媒体など、通行者の特徴情報を読み取り可能とする媒体）から、１つの特徴情報および通行者を識別可能とする識別情報を読み取る（ステップＳ４０１）。本実施形態では、識別情報には、通行者の識別番号（ＩＤ番号），氏名，性別，年齢，所属，経歴，身長，通行者の顔画像の画像データなど当該通行者を識別可能とする情報が含まれる。
　また、本実施形態では、識別情報読取部１４は、第１認証装置１０以外の外部装置によって媒体Ｍに記憶（または印刷）された特徴情報を読み取っているが、媒体Ｍに特徴情報を取得可能な画像（例えば、通行者の顔画像など）が印刷されていたり若しくは媒体Ｍに特徴情報を取得可能な画像の画像データが記憶されていたりする場合には、媒体Ｍに印刷された画像若しくは媒体Ｍに記憶されている画像データに基づく画像から、特徴情報を取得しても良い。その際、識別情報読取部１４は、後述する第１顔特徴抽出部１３と同様にして、媒体Ｍに印刷された画像若しくは媒体Ｍに記憶されている画像データに基づく画像から、特徴情報を取得する。
　第１画像取得部１２は、識別情報読取部１４により識別情報が読み取られた際に第１撮像部１１の撮像により得られた第１画像Ｇ１（言い換えると、識別情報読取部１４により特徴情報が読み取られた媒体Ｍを所持する通行者を撮像して得られた画像）を取得する（ステップＳ４０２）。本実施形態では、第１撮像部１１は、例えばＩＴＶ（Industrial　Television）カメラ等により構成され、第１位置Ｐ１を通過する通行者の身体のうち特徴情報の取得に必要な部位（本実施形態では、通行者の顔）を撮像可能に設けられている。また、本実施形態では、第１撮像部１１は、レンズを通して得られた光学的な情報を、Ａ／Ｄ変換器によりデジタル化した画像データを所定のフレームレートで生成して第１画像取得部１２に出力する。
　第１顔特徴抽出部１３は、第１画像取得部１２により取得された第１画像Ｇ１から、当該第１画像Ｇ１に含まれる通行者の顔画像の特徴情報を取得する（ステップＳ４０３）。本実施形態では、第１顔特徴抽出部１３は、取得した第１画像Ｇ１内において、第１認証装置１０に予め記憶された顔検出用のテンプレートを当該第１画像Ｇ１内で移動させながら当該第１画像Ｇ１とテンプレート間の相関値（相関係数）を求める。そして、第１顔特徴抽出部１３は、第１画像Ｇ１内において、テンプレートとの相関値が最も高い位置を顔画像として検出する。本実施形態では、第１顔特徴抽出部１３は、予め記憶された顔検出用のテンプレートを用いて、第１画像Ｇ１から顔画像を検出しているが、これに限定するものではなく、例えば周知の固有空間法や部分空間法を用いて、第１画像Ｇ１から顔画像を検出しても良い。
　また、第１顔特徴抽出部１３は、第１撮像部１１から出力された所定のフレームレートの画像データに基づく複数のフレーム画像（第１画像Ｇ１）に同一の通行者の顔画像が連続して含まれている場合、その顔画像を、同一の通行者の顔画像として検出する追跡処理を行う必要がある。本実施形態では、第１顔特徴抽出部１３は、日本特許第５３５５４４６号等に記載される方法を用いて、一のフレーム画像から検出した顔画像が、次のフレーム画像においてどの位置に存在するかを推定することにより、複数のフレーム画像に連続して含まれる顔画像を、同一の通行者の顔画像として検出する。
　次いで、第１顔特徴抽出部１３は、日本特許第３２７９９１３号等に記載される方法を用いて、検出した顔画像から、目や鼻等の顔の部位の位置を検出する。第１顔特徴抽出部１３は、上述した追跡処理によって複数のフレーム画像に連続して含まれる顔画像を同一の通行者の顔画像として検出した場合、同一の通行者の顔画像を含む複数のフレーム画像のうちいずれか若しくは当該複数のフレーム画像の全てから検出された顔画像を用いて、顔の部位の位置を検出する。
　第１顔特徴抽出部１３は、顔の部位の位置を検出すると、検出した顔の部位の位置に基づいて、通行者の顔画像の特徴情報を取得し、当該取得した特徴情報を数値化して第１通行者認証部１５に出力する。具体的には、第１顔特徴抽出部１３は、検出した顔の部位に基づいて、第１画像Ｇ１から、所定の大きさおよび所定の形状の顔画像を切り出し、切り出した顔画像の濃淡情報を特徴情報として取得する。例えば、第１顔特徴抽出部１３は、検出した顔の部位の位置に基づいて第１画像Ｇ１から切り出したｍピクセル×ｎピクセルの矩形形状の顔画像の濃淡情報を、ｍ×ｎ次元の特徴ベクトル（特徴情報の一例）として取得する。
　また、第１顔特徴抽出部１３は、日本特許第４０８７９５３号等に記載された部分空間方法を用いて、第１画像Ｇ１が含む顔画像の特徴を示す部分空間を特徴情報として取得しても良い。
　第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報と、識別情報読取部１４により読み取られた特徴情報とを用いて、通行者を認証する第１認証処理を実行する（ステップＳ４０４）。言い換えると、第１通行者認証部１５は、第１画像Ｇ１から取得した特徴情報と、識別情報読取部１４により媒体Ｍから読み取った特徴情報とが同一人物の特徴情報であるか否かを判定する。これにより、サーバ３０等の上位機器が有するデータベースから第１認証処理に用いる特徴情報を検索したり、第１認証処理に要する時間の短縮のために通行者の認証を簡潔なものに切り替えたりする必要がなくなるので、通行者の認証精度の低下を防止しつつ効率的に通行者の認証を行うことができる。
　本実施形態では、第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報と、識別情報読取部１４により読み取られた特徴情報との類似度を算出する。具体的には、第１通行者認証部１５は、第１特徴抽出部１３により取得された特徴情報と、識別情報読取部１４により読み取られた特徴情報との類似性指標の算出を行う。ここで、類似性指標とは、第１顔特徴抽出部１３により抽出された特徴ベクトルや部分空間等の特徴情報と、識別情報読取部１４により読み取られた特徴ベクトルや部分空間等の特徴情報とに基づく、単純類似度法による２つの特徴ベクトル間の類似度または部分空間法による部分空間同士の類似度である。
　例えば、第１通行者認証部１５は、第１顔特徴抽出部１３により抽出された特徴ベクトルおよび識別情報読取部１４により読み取られた特徴ベクトルそれぞれの長さを「１」とするように正規化し、その内積を特徴ベクトル間の類似度として算出する。また、第１通行者認証部１５は、日本特許第４０８７９５３号に記載の部分空間法，複合類似度法等を用いて、第１顔特徴抽出部１３により取得された部分空間と識別情報読取部１４により読み取られた部分空間のなす角度を類似度として算出する。
　また、第１通行者認証部１５は、単純類似度法による２つの特徴ベクトル間の類似度および部分空間法による部分空間同士の類似度以外の類似性指標として、第１顔特徴抽出部１３により取得された特徴情報および識別情報読取部１４により読み取られた特徴情報により構成される特徴空間におけるユークリッド距離やマハラノビス距離等の距離に基づく、２つの特徴情報の類似度を用いることも可能である。特徴空間におけるユークリッド距離やマハラノビス距離等の距離に基づいて、２つの特徴情報の類似度を判断する場合、距離の値が大きくなるに従って類似度が低くなり、距離の値が小さくなるに従い類似度が高くなる。
　そして、第１通行者認証部１５は、算出した類似度が所定の第１閾値を超えている場合には、通行者の認証に成功したと判断する（ステップＳ４０５：Ｙｅｓ）。一方、第１通行者認証部１５は、算出した類似度が所定の閾値以下である場合には、通行者の認証に失敗したと判断する（ステップＳ４０５：Ｎｏ）。
　第１通行者認証部１５（記憶制御部の一例）は、通行者の認証に成功した場合（ステップＳ４０５：Ｙｅｓ）、第１認証処理に用いた２つの特徴情報の少なくとも一方に基づく認証用特徴情報を、サーバ３０の特徴情報記憶部３１に記憶（保存）する（ステップＳ４０６）。一方、第１通行者認証部１５は、通行者の認証に失敗した場合（ステップＳ４０５：Ｎｏ）、認証用特徴情報の特徴情報記憶部３１への記憶を禁止する。本実施形態では、第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報または識別情報読取部１４により読み取られた特徴情報を認証用特徴情報として特徴情報記憶部３１に記憶させる。その際、第１通行者認証部１５は、識別情報読取部１４により読み取られた識別情報と対応付けて、認証用特徴情報を特徴情報記憶部３１に記憶させる。本実施形態では、第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報または識別情報読取部１４により読み取られた特徴情報そのものを認証用特徴情報として特徴情報記憶部３１に記憶させているが、特徴情報の一例である特徴ベクトルや部分空間を算出するための相関行列を認証用特徴情報として特徴情報記憶部３１に記憶させても良い。
　また、本実施形態では、第１通行者認証部１５は、識別情報読取部１４により読み取られた識別情報に対応付けて、認証用特徴情報と、第１画像Ｇ１に含まれる通行者の顔画像の画像データと、第１認証処理を実行した時刻に関する時刻情報と、第１認証処理を実行した第１認証装置１０を識別可能とする装置情報と、を特徴情報記憶部３１に記憶させる。
　ところで、第１認証処理に用いた２つの特徴情報のうち識別情報読取部１４により読み取られた特徴情報を認証用特徴情報として特徴情報記憶部３１に記憶させた場合、第２認証装置２０は、第１位置Ｐ１を通過した通行者の認証に用いた特徴情報と同一の情報（識別情報読取部１４により読み取られた特徴情報）を用いて、通行者の認証を行うことになる。これにより、第１位置Ｐ１と第２位置Ｐ２との間で通行者の入れ替わりが発生した場合に、第１位置Ｐ１を通過した通行者と第２位置Ｐ２を通過した通行者とが異なることを検出できる可能性を高くすることができるので、通行者の入れ替わりに対するセキュリティ性を高めることができる。
　しかしながら、識別情報読取部１４により媒体Ｍから読み取られる特徴情報は、一般的に、第１認証処理が実行された時点よりも前に通行者を撮像して得られた画像から取得した特徴情報である。そのため、通行者の経年変化等の影響によって通行者を撮像して得られる画像から取得される特徴情報が変化した場合、識別情報読取部１４により媒体Ｍから読み取られた特徴情報は、通行者を撮像して得られる画像から取得される特徴情報との類似度が下がる。すなわち、識別情報読取部１４により媒体Ｍから読み取られる特徴情報は、通行者の経年変化等の影響を受けやすい。
　よって、この場合、第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報を認証用特徴情報として特徴情報記憶部３１に記憶させる。これにより、第２認証装置２０における通行者の認証処理が、第１認証処理を実行した際に通行者を撮像して得られた画像（第１画像Ｇ１）から取得した特徴情報を用いて行われ、通行者の経年変化等の影響を軽減することができるので、通行者の認証精度を向上させることができる。
　本実施の形態では、通行者の経年変化の影響を軽減するために、図３に示すような経年変化データを旅券に保存された顔画像を紐付してデータとして保存することが出来る。図３に示すように、旅券に保存された顔画像に対して、撮影した時が、１９９０年１月の時の顔の照合画像、それから１０年後の２０００年２月の時の顔の照合画像、更に５０年後の２０５０年３月の時の顔の照合画像が変化してくる。このように人物の経年変化に対応するため、旅券画像と撮影画像とを合わせて履歴として記録する。本人照合時は、類似度を時系列順に算出し、それぞれ閾値以上であれば本人とする。例えば、旅券の顔画像をx(0)、履歴に残された顔画像を時系列順にx(1),・・・・・, x(t)、顔画像ａと顔画像ｂとの類似度をS(a, b)、本人であるかどうかを判定する類似度に対する閾値をθとすると、
S(x(0), x(1))>θ, S(x(1), x(2))>θ, S(x(2), x(3)>θ, ・・・, S(x(t-1), x(t))>θ
のときは本人であると判定する。経年変化によってS(x(0), x(t))<θとなって本人を別人と判定する誤りを低減することができる。
　例えば、第１通行者認証部１５は、媒体Ｍに記憶（または印刷）された当該媒体Ｍの発行日が、第１認証処理を実行した日から所定期間遡った日までの日にちである場合、識別情報読取部１４により媒体Ｍから読み取られた特徴情報を認証用特徴情報とする。一方、第１通行者認証部１５は、媒体Ｍの発行日が、第１認証処理を実行した日から所定期間遡った日よりも前の日にちである場合には、第１顔特徴抽出部１３により取得した特徴情報を認証用特徴情報としても良い。また、第１通行者認証部１５は、第１顔特徴抽出部１３により取得された特徴情報および識別情報読取部１４により読み取られた特徴情報の両方を含む認証用特徴情報を特徴情報記憶部３１に記憶させても良い。この場合、第２認証装置２０は、第２位置Ｐ２を通過した通行者を第２撮像部２１により撮像して得られた第２画像Ｇ２から取得される特徴情報（第４生体情報の一例）が、特徴情報記憶部３１に記憶された認証用特徴情報に含まれる２つの特徴情報のうちいずれか一方と一致した場合に、通行者の認証に成功したと判断する。これにより、通行者の認証に失敗する可能性を低くすることができる。
　また、第１通行者認証部１５は、識別情報読取部１４により媒体Ｍから読み取った特徴情報を、第１画像取得部１２により取得した第１画像Ｇ１に基づいて更新した情報を認証用情報として特徴情報記憶部３１に記憶させても良い。これにより、特徴情報記憶部３１に記憶された認証用特徴情報を用いた認証処理の際に通行者の経年変化等の影響を軽減することができるので、通行者の認証精度を向上させることができる。
　具体的には、第１通行者認証部１５は、識別情報読取部１４により媒体Ｍから読み取った特徴情報に、第１画像Ｇ１から取得した特徴情報を含めることにより、当該媒体Ｍから読み取った特徴情報を更新する。または、第１通行者認証部１５は、識別情報読取部１４により媒体Ｍから読み取られた特徴情報が部分空間である場合には、当該部分空間の作成に用いられた画像に、第１画像Ｇ１を追加して当該部分空間を更新しても良い。または、第１通行者認証部１５は、識別情報読取部１４により媒体Ｍから読み取った特徴情報を、第１画像Ｇ１から取得した特徴情報により置き換えることにより更新しても良い。
　また、第１通行者認証部１５は、特徴情報記憶部３１に記憶されている複数の認証用特徴情報に対して、当該認証用特徴情報間の識別に不必要な情報を取り除くための処理を実行する。例えば、第１通行者認証部１５は、日本特許第４０８７９５３号等に記載された制約相互部分空間法を用いて、特徴情報記憶部３１に認証用特徴情報として記憶されている特徴ベクトルを、部分空間に射影または変換することにより、特徴情報記憶部３１に記憶されている認証用特徴情報間の識別精度を高める。これにより、認証用特徴情報に含まれる不必要な情報を用いて、第２認証処理が実行されることを防止できるので、第２認証処理による通行者の認証精度を向上させることができる。
　第１出力部１６は、第１通行者認証部１５による通行者の認証に成功した場合（ステップＳ４０５：Ｙｅｓ）、通行者の認証に成功したことを通知するメッセージを、第１認証装置１０が備える第１表示部１７（図２及び５参照）に表示させ管理者が見る（ステップＳ４０７）。一方、第１出力部１６は、第１通行者認証部１５による通行者の認証に失敗した場合（ステップＳ４０５：Ｎｏ）、通行者の認証に失敗したことを通知するメッセージを、第１認証装置１０が備える第１表示部１７（図２及び５参照）に表示させる（ステップＳ４０８）。
　図５は、第１の実施形態にかかる情報処理システムが有する第１認証装置における通行者の認証結果の表示例を示す図である。本実施形態では、第１出力部１６は、第１通行者認証部１５による通行者の認証に成功した場合、図５に示すように、通行者の認証成功を通知するためのメッセージ５０１と、第１画像Ｇ１に含まれる顔画像である入力画像５０２と、識別情報読取部１４により読み取った特徴情報の取得元の顔画像（本実施形態では、媒体Ｍから識別情報として読み取った画像データに基づく顔画像）である参照画像５０３と、を含む第１画面Ｄ１を、第１認証装置１０が有する第１表示部１７に表示させる。第１通行者認証部１５による認証に成功した場合、第１画像Ｇ１に含まれる顔画像から取得した特徴情報と、識別情報読取部１４により読み取った特徴情報とが類似するため、入力画像５０２と参照画像５０３も類似する画像となる。
　一方、第１出力部１６は、第１通行者認証部１５による通行者の認証に失敗した場合、通行者の認証失敗を通知するためのメッセージ５０４と、入力画像５０２と、参照画像５０３と、を含む第２画面Ｄ２を第１表示部１７に表示させる。第１通行者認証部１５による認証に失敗した場合、第１画像Ｇ１に含まれる顔画像から取得した特徴情報と、識別情報読取部１４により読み取った特徴情報とが類似しないため、入力画像５０２と参照画像５０３も類似しない画像となる。
　本実施形態では、第１出力部１６は、第１画面Ｄ１または第２画面Ｄ２を管理者用モニタとしての第１表示部１７に表示させることにより、第１通行者認証部１５による通行者の認証結果を通知しているが、これに限定するものではなく、例えば、第１認証装置１０が備える図示しないスピーカから音を発したり、第１認証装置１０の上位機器（情報処理システム１の管理者が操作する端末）に対して通行者の認証結果を有線または無線通信により送信したりすることにより、通行者の認証結果を通知しても良い。
　次に、図２および図５を用いて、本実施形態にかかる情報処理システム１が有する第２認証装置２０における通行者の認証処理について詳細に説明する。図６は、第１の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証処理の流れを示すフローチャートである。
　第２画像取得部２２は、第２認証装置２０が有する図示しない人感センサや赤外線センサ等のセンサによって第２位置Ｐ２を通過する通行者が検知されると、第２撮像部２１の撮像により得られた第２画像Ｇ２を取得する（ステップＳ６０１）。本実施形態では、第２撮像部２１は、第１撮像部１１と同様に、例えばＩＴＶカメラ等により構成され、第２位置Ｐ２を通過する通行者の身体のうち特徴情報の取得に必要な部位（本実施形態では、通行者の顔）を撮像可能に設けられている。また、本実施形態では、第２撮像部２１は、レンズを通して得られた光学的な情報を、Ａ／Ｄ変換器によりデジタル化した画像データを所定のフレームレートで生成して第２画像取得部２２に出力する。
　第２顔特徴抽出部２３は、第２画像取得部２２により取得された第２画像Ｇ２から、当該第２画像Ｇ２に含まれる通行者の顔画像の特徴情報を取得する（ステップＳ６０２）。本実施形態では、第２顔特徴抽出部２３は、第１認証装置１０が有する第１顔特徴抽出部１３と同様にして、第２画像Ｇ２に含まれる通行者の顔画像の特徴情報を取得する。
　第２通行者認証部２４は、第２顔特徴抽出部２３により取得した特徴情報および特徴情報記憶部３１に記憶された認証用特徴情報を用いて、通行者を認証する第２認証処理を実行する（ステップＳ６０３）。これにより、第２位置Ｐ２を通過する通行者が所持する媒体Ｍからの生体情報の読み取りを行わずに、第２位置Ｐ２を通過する通行者の認証を行うことができ、かつ第２位置Ｐ２を通過する通行者の認証に要する時間の短縮のために第２認証処理を簡潔なものに切り替える必要がなくなるので、多数の通行者が第２位置Ｐ２を通過する場合に、通行者の滞りの発生および通行者の認証精度の低下を防止することができる。
　本実施形態では、第２通行者認証部２４は、第２顔特徴抽出部２３により取得した特徴情報が、特徴情報記憶部３１に記憶された認証用特徴情報のいずれかと一致した場合に、通行者の認証に成功したと判断する。ここで、一致とは、第２顔特徴抽出部２３により取得した特徴情報と特徴情報記憶部３１に記憶された認証用特徴情報とが完全に一致する場合および当該２つの特徴情報が類似する場合（本実施形態では、当該２つの特徴情報の類似度が所定の第２閾値を超えた場合）を含むものとする。
　具体的には、第２通行者認証部２４は、第１通行者認証部１５と同様にして、第２顔特徴抽出部２３により取得した特徴情報と、特徴情報記憶部３１に記憶された認証用特徴情報それぞれとの類似度を算出する。そして、第２通行者認証部２４は、特徴情報記憶部３１に記憶された認証用特徴情報のうち、第２顔特徴抽出部２３により取得した特徴情報との類似度が最も高い認証用特徴情報を特定する。
　そして、第２通行者認証部２４は、第２顔特徴抽出部２３により取得した特徴情報と、特定した認証用特徴情報との類似度が所定の第２閾値を超えている場合には、通行者の認証に成功したと判断する。一方、第２通行者認証部２４は、第２顔特徴抽出部２３により取得した特徴情報と、特定した認証用特徴情報との類似度が第２閾値以下となっている場合には、通行者の認証に失敗したと判断する。第２通行者認証部２４は、第１認証装置１０が有する第１通行者認証部１５と同様にして、通行者の認証を行う。ここで、第２閾値は、第１認証装置１０における通行者の認証に用いた第１閾値と同じ値としても良いし、第１閾値とは異なる値としても良い。
　また、第２通行者認証部２４は、通行者の認証に成功した場合、当該第２顔特徴抽出部２３により取得した特徴情報と一致した認証用特徴情報を特徴情報記憶部３１から消去する。その際、第２通行者認証部２４は、第２顔特徴抽出部２３により取得した特徴情報と一致した認証用特徴情報と対応付けて記憶された識別情報や画像データや時刻情報や装置情報等の付帯情報も特徴情報記憶部３１から消去する。
　これにより、通行者の認証に成功した場合に、第２顔特徴抽出部２３により取得した特徴情報と一致した認証用特徴情報が、その後に行われる他の通行者の認証に用いられて当該他の通行者の認証が誤って成功することを防止できるので、特徴情報記憶部３１に記憶された認証用特徴情報の信頼性を維持することができる。また、通行者の認証に成功した場合に、第２顔特徴抽出部２３により取得した特徴情報と一致した認証用特徴情報を、他の通行者を撮像して得られた第２画像Ｇ２から取得した特徴情報と一致するか否かの判断対象となることを防止できるので、無駄な判断処理が行われることを防止でき、通行者の認証速度の向上およびリソースの節約を図ることができる。
　また、第２通行者認証部２４は、特徴情報記憶部３１に記憶された認証用特徴情報のうち、特徴情報記憶部３１に記憶されてから所定時間経過した認証用特徴情報を特徴情報記憶部３１から消去する。本実施形態では、第２通行者認証部２４は、特徴情報記憶部３１に記憶された認証用特徴情報のうち、当該認証用特徴情報と対応付けて記憶された時刻情報が示す時刻が現在時刻から所定時間遡った時刻までの時刻でない認証用特徴情報を特徴情報記憶部３１から削除する。
　これにより、第２顔特徴抽出部２３により取得した特徴情報と一致するか否かの判断対象となる可能性が低い認証用特徴情報を消去することができるので、特徴情報記憶部３１に記憶された認証用特徴情報の信頼性を維持することができる。また、第２顔特徴抽出部２３により取得した特徴情報と一致するか否かの判断する際に、無駄な判断処理が行われることを防止でき、通行者の認証速度の向上およびリソースの節約を図ることができる。
　また、第２通行者認証部２４は、特徴情報記憶部３１に記憶された認証用特徴情報のうち、予め設定された第１認証装置１０以外の認証装置における通行者の認証に用いられた認証用特徴情報を特徴情報記憶部３１から消去する。本実施形態では、第２通行者認証部２４は、特徴情報記憶部３１に記憶された認証用特徴情報のうち、当該認証用特徴情報と対応付けて記憶された装置情報が示す認証装置が予め設定された第１認証装置１０でない場合、当該認証用特徴情報を特徴情報記憶部３１から消去する。これにより、予め設定された第１認証装置１０以外の認証装置における認証に成功して、特徴情報記憶部３１に記憶された認証用特徴情報を用いて通行者の第２認証処理が実行されることを防止できるので、特徴情報記憶部３１に記憶された認証用特徴情報の信頼性を維持することができる。
　さらに、第２通行者認証部２４は、特徴情報記憶部３１に記憶されてから所定時間経過している認証用特徴情報と第２顔特徴抽出部２３により取得した特徴情報との類似度と比較する第２閾値を、特徴情報記憶部３１に記憶されてから所定時間経過していない認証用特徴情報と第２顔特徴抽出部２３により取得した特徴情報との類似度と比較する第２閾値よりも高くしても良い。これにより、特徴情報記憶部３１に記憶されてから所定時間経過した信頼性の低い認証用特徴情報を用いて通行者の認証が成功する可能性を低くできるので、通行者の認証精度を向上させることができる。
　第２出力部２５は、第２通行者認証部２４による通行者の認証に成功した場合（ステップＳ６０４：Ｙｅｓ）、通行者の認証に成功したことを通知するメッセージを、第２表示部２６（図１及び７参照）に管理者が見られるように表示させる（ステップＳ６０５）。一方、第２出力部２５は、第２通行者認証部２４による通行者の認証に失敗した場合（ステップＳ６０４：Ｎｏ）、通行者の認証に失敗したことを通知するメッセージを、管理者に通知するように第２表示部２６（図１及び７参照）に表示させる（ステップＳ６０６）。
　図７は、第１の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証結果の表示例を示す図である。本実施形態では、第２出力部２５は、第２通行者認証部２４による通行者の認証に成功した場合、図７に示すように、通行者の認証成功を通知するためのメッセージ７０１と、第２画像Ｇ２に含まれる顔画像である入力画像７０２と、第２顔特徴抽出部２３により取得した特徴情報との類似度が高い認証用特徴情報から順に所定数（本実施形態では、３つ）の当該認証用特徴情報の取得元の顔画像（本実施形態では、当該認証用特徴情報と対応付けて記憶された識別情報が含む画像データに基づく顔画像）である参照画像７０３～７０５と、を含む第３画面Ｄ３を管理者モニタとしての第２表示部２６に表示させる。その際、第２出力部２５は、第２顔特徴抽出部２３により取得した特徴情報との類似度が高い認証用特徴情報のうち最も類似度が高い認証用特徴情報の取得元の参照画像７０３を点滅させる等して、他の参照画像７０４，７０５とは異なる表示態様で表示させる。
　本実施形態では、第２出力部２５は、第３画面Ｄ３を第２表示部２６に表示させることにより、第２通行者認証部２４による通行者の認証結果を管理者に通知しているが、これに限定するものではなく、例えば、第２認証装置２０が備える図示しないスピーカから音を発したり、第２認証装置２０の上位機器（情報処理システム１の管理者が操作する端末）に対して通行者の認証結果を有線または無線通信により送信したりすることにより、通行者の認証結果を通知しても良い。また、第２出力部２５は、第２通行者認証部２４による通行者の認証に成功した場合には、第２位置Ｐ２に設けられた入口ゲートを開けたり、第２位置Ｐ２に設けられた扉の鍵を開錠したりすることにより、通行者の認証結果を通知しても良い。また、第２出力部２５は、第２通行者認証部２４による通行者の認証に失敗した場合、第２撮像部２１の撮像により得られた第２画像Ｇ２に含まれる顔画像の画像データを、不正な通行者の顔画像の画像データとして上位機器に送信して、当該上位機器に記憶させても良い。
　このように、第１の実施形態の情報処理システム１によれば、第１位置Ｐ１を通行者が通過した後、第２位置Ｐ２を通過するまでの間に通行者が入れ替わった場合、第１認証処理による通行者の認証に成功したとしても、第２認証処理における通行者の認証に失敗するため、通行者の入れ替わりを防止することができる。
　また、第１の実施形態の情報処理システム１によれば、サーバ３０等の上位機器が有するデータベースから第１，２認証処理に用いる特徴情報を検索したり、第１，２認証処理に要する時間の短縮のために通行者の認証を簡潔なものに切り替えたりする必要がなくなるので、通行者の認証精度の低下を防止しつつ効率的に通行者の認証を行うことができる。
　（第２の実施形態）
　本実施形態は、第２位置を通過する通行者が所持する媒体から生体情報が読み取られた場合、第２認証処理に代えて、第２位置を通過する通行者が所持する媒体から読み取られた生体情報と、第２位置を通過する通行者を撮像部によって撮像して得られた第２画像から取得した生体情報と、を用いて、通行者を認証する第３認証処理を実行可能とする例である。以下の説明では、第１の実施形態と同様の箇所については説明を省略する。
　図８は、第２の実施形態にかかる情報処理システムの機能的構成を示すブロック図である。本実施形態では、第２認証装置７０は、図８に示すように、第２撮像部２１、第２画像取得部２２、第２顔特徴抽出部２３および第２出力部２５に加えて、カードリーダ等により構成され、第２位置Ｐ２を通過する通行者が所持する媒体Ｍから特徴情報（第５生体情報の一例）を読取可能に設けられた第２識別情報読取部７１（第２読取部の一例）と、第２認証処理に代えて、第２顔特徴抽出部２３により取得した特徴情報と第２識別情報読取部７１により読み取った特徴情報とを用いて、通行者を認証する第３認証処理を実行可能な第２通行者認証部７２と、を備えている。
　図９は、第２の実施形態にかかる情報処理システムが有する第２認証装置における通行者の認証処理の流れを示すフローチャートである。第２識別情報読取部７１は、第２認証装置７０が有する図示しない操作部（例えば、テンキーやタッチパネル等）によって識別情報の読み取りが指示されたか否かを判断する（ステップＳ９０１）。識別情報の読み取りが指示されなかった場合（ステップＳ９０１：Ｎｏ）、第２認証装置７０は、図６に示すステップＳ６０１～ステップＳ６０６と同様の処理を実行する。
　一方、識別情報の読み取りが指示された場合（ステップＳ９０１：Ｙｅｓ）、第２識別情報読取部７１は、第１認証装置１０が有する識別情報読取部１４と同様にして、第２位置Ｐ２を通過する通行者が所持する媒体Ｍから、特徴情報および通行者を識別可能とする識別情報を読み取る（ステップＳ９０２）。
　第２画像取得部２２は、第２識別情報読取部７１により識別情報が読み取られた際、図６に示すステップＳ６０１と同様にして、第２撮像部２１の撮像により得られた第２画像Ｇ２を取得する（ステップＳ９０３）。また、第２顔特徴抽出部２３は、図６に示すステップＳ６０２と同様にして、第２画像Ｇ２から、当該第２画像Ｇ２に含まれる通行者の顔画像の特徴情報を取得する（ステップＳ９０４）。
　第２通行者認証部７２は、第２認証処理に代えて、第２識別情報読取部７１により読み取られた特徴情報と第２顔特徴抽出部２３により取得された特徴情報とを用いて、通行者を認証する第３認証処理を行う（ステップＳ９０５）。本実施形態では、第２通行者認証部７２は、第２顔特徴抽出部２３により取得された特徴情報と、第２識別情報読取部７１により読み取られた特徴情報との類似度を算出する。そして、第２通行者認識部７２は、算出した類似度が所定の第３閾値を超えている場合には、通行者の認証に成功したと判断する（ステップＳ６０４：Ｙｅｓ）。一方、第２通行者認識部７２は、算出した類似度が第３閾値以下である場合には、通行者の認証に失敗したと判断する（ステップＳ６０４：Ｎｏ）。第３閾値は、第１認証装置１０における認証に用いる第１閾値よりも高い値にして通行者の認識精度を高くすることが好ましい。
　このように、第２の実施形態にかかる情報処理システムによれば、第２識別情報読取部７１が設けられている場合、第２顔特徴抽出部２３により取得した特徴情報と類似する認証用特徴情報が特徴情報記憶部３１に記憶されていなくても、第２認証処理を実行することができるので、著名人等の特別な通行者が第１認証処理を免除されて第１位置Ｐ１を通過せずに、第２位置Ｐ２に到達した場合でも、当該特別な通行者以外の通常の通行者と同様にして第２認証処理を実行することができる。また、前記第１の実施形態と同様に第１位置Ｐ１を通行者が通過した後、第２位置Ｐ２を通過するまでの間に通行者が入れ替わった場合、第１認証処理による通行者の認証に成功したとしても、第２認証処理における通行者の認証に失敗するため、通行者の入れ替わりを防止することができる。
　なお、本実施形態の第１認証装置１０および第２認証装置２０（７０）で実行されるプログラムは、ＲＯＭ（Read only Memory）等に予め組み込まれて提供される。
　また、本実施形態の第１認証装置１０および第２認証装置２０（７０）で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
　さらに、本実施形態の第１認証装置１０および第２認証装置２０（７０）で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の第１認証装置１０および第２認証装置２０（７０）で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
　本実施形態の第１認証装置１０で実行されるプログラムは、上述した各部（第１画像取得部１２、第１顔特徴抽出部１３、第１通行者認証部１５、第１出力部１６）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（Central　Processing　Unit）が上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、第１画像取得部１２、第１顔特徴抽出部１３、第１通行者認証部１５、第１出力部１６が主記憶装置上に生成されるようになっている。
　また、本実施形態の第２認証装置２０（７０）で実行されるプログラムは、上述した各部（第２画像取得部２２、第２顔特徴抽出部２３、第２通行者認証部２４（７２）、第２出力部２５）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、第２画像取得部２２、第２顔特徴抽出部２３、第２通行者認証部２４（７２）、第２出力部２５が主記憶装置上に生成されるようになっている。
　また、本実施形態の情報処理システム１では、第１認証装置１０が、第１画像取得部１２、第１顔特徴抽出部１３、第１通行者認証部１５および第１出力部１６を有し、第２認証装置２０（７０）が、第２画像取得部２２、第２顔特徴抽出部２３、第２通行者認証部２４（７２）および第２出力部２５を有する構成となっているが、情報処理システム１内のいずれかの機器が、上述した各部を有していれば良く、例えば、サーバ３０等の１つの機器に上述した各部の全てを備えさせても良いし、情報処理システム１内の３以上の機器のいずれかに上述した各部を分割して備えさせても良い。
　（第３の実施形態）
　以下、添付の図面を用いて、第３の実施形態にかかる人物認証方法および人物認証システムについて説明する。なお、人物認証方法は情報処理方法に含まれ、人物認証システムは情報処理システムに含まれる。
　図１０は、第３の実施形態にかかる人物認証システムを適用した出入国管理システムの構成を示す図である。本実施形態にかかる出入国管理システムは、図１０に示すように、出国時の認証処理における人物の撮像条件に従って、当該人物の行先での認証処理における人物の撮像条件を調整することによって、当該人物の行先での認証処理の精度を向上させることを可能とするシステムである。
　ここでは、本実施形態にかかる人物認証方法および人物認証システムとしての情報処理システム１を、出入国管理システムに適用した例について説明するが、公共施設，重要施設，オフィスビル，商業施設等の人物が通行する際に認証処理を実行するシステム（例えば、入退室管理システムや映像監視システムなど）であれば、出力入国管理システム１と同様にして、本実施形態にかかる人物認証方法および人物認証システムを適用可能である。
　本実施形態にかかる出入国管理システムは、図１０に示すように、出国審査カウンターＤＣまたは入国審査カウンターＩＣにおける１：１照合と、搭乗ゲートＢＧまたは荷物受取場所ＢＣにおける１：Ｎ照合とを組み合わせることにより、空港等の施設における人物の認証処理を効率的に実施するシステムである。
　ここで、１：１照合は、搭乗ゲートＢＧまたは荷物受取場所ＢＣに人物が到達する前に、出国審査カウンターＤＣまたは入国審査カウンターＩＣを通過する人物が所持する旅券Ｐ（媒体の一例）から読み取った当該人物を識別可能とする識別情報と、当該人物を撮像して得られた画像から取得した生体情報とを用いて実行する認証処理である。１：Ｎ照合は、搭乗ゲートＢＧまたは荷物受取場所ＢＣを通過する人物を撮像して得られた画像から取得した生体情報と、予め記憶した複数の生体情報とを用いて実行する認証処理である。
　具体的には、本実施形態にかかる出入国管理システムは、図１０に示すように、搭乗案内装置４０と、第１認証装置４１と、第２認証装置４２と、第３認証装置４３と、第４認証装置４４と、第１記憶装置４５と、第２記憶装置４６と、を有している。
　搭乗案内装置４０は、第１位置Ｐ１としてのチェックインカウンターに設置され、航空機等に搭乗する人物が所持する航空券Ｔ（媒体の一例）からの行先情報の読み取り、当該人物が所持する旅券Ｐからの識別情報の読み取り、当該人物を撮像可能に設けられたカメラ１０１の撮像により得られた画像からの生体情報の取得等を行う。ここで、行先情報は、第１位置Ｐ１としてのチェックインカウンターを通過する人物の行先を示す情報である。そして、搭乗案内装置４０は、航空券Ｔから読み取った行先情報と、旅券Ｐから読み取った識別情報と、カメラ１０１の撮像により得られた画像から取得した生体情報と、を対応付けて、第１記憶装置４５に保存する。
　第１認証装置４１は、出国審査カウンターＤＣに設置され、出国審査カウンターＤＣ（第１位置の一例）を通過する人物が所持する旅券Ｐからの識別情報（第１識別情報の一例）の読み取り、当該人物を撮像可能に設けられたカメラ１１１（第１撮像部の一例）の撮像により得られた画像（第１画像の一例）からの生体情報（第１生体情報の一例）の取得等を行う。次いで、第１認証装置４１は、出国する人物が保持する旅券Ｐから読み取った識別情報と、カメラ１１１の撮像により得られた画像から取得した生体情報とを用いて、当該人物の認証処理（以下、第１認証処理と言う）を実行する。そして、第１認証装置４１は、第１認証処理が成功した場合、当該第１認証処理に用いた識別情報および生体情報を、第１認証装置４１を識別可能とする装置識別情報に対応付けて第１記憶装置４５に保存する。さらに、第１認証装置４１は、第１認証処理が成功した場合、当該第１認証処理に用いた識別情報に対応付けて、カメラ１１１の撮像条件を第２記憶装置４６（記憶装置の一例）に保存する。第１１図に示すようにカメラ１１１で撮影された人物の顔画像と、撮影した場所（どのゲートか）としてのカメラ番号、撮影日時を左側に表示し、通過する人物が所持する旅券Ｐからの識別情報として旅券に保存されている人物の顔画像、その人物の氏名、性別、年齢を右側に対比して表示する管理者用の表示部が設けられている。上記の第１認証処理の結果、すなわち撮影した顔画像と、旅券に保存されている顔画像とを比較しての類似度(Similarity)を、カメラ１１１で撮影された顔画像の下に表示する。類似度が低い場合には通過する人物へ自動的に警告を発する。
　なお、識別情報として旅券Ｐに保存されている人物の顔画像に対して、図１２Ａ～図１２Ｅに示すように、撮影画像として不適切な場合がある。例えば、図１２Ａに示すように、サングラスによって顔を隠ぺいしている。図１２Ｂに示すように、毛髪によって顔を隠ぺいしている。図１２Ｃに示すように口を開くことによって表情が変化している。図１２Ｄに示すように顔が正面でなく横を向いている。図１２Ｅに示すように帽子によって顔を隠ぺいしている。以上のことが検出された場合には、表示部１０５、１１６或いは１２１などで通行者に対して再撮影を指示する。または、管理者への表示部に警告を発する。更に、図示しないが、撮影時の照明が明るすぎる或いは暗すぎる。また、画像を符号化した際に圧縮ノイズが含まれてしまっている場合には、管理者への表示部に警告を発して、撮影時の照明を適切にする調整を行い、圧縮ノイズが含まれないようにカメラ１０１、１１１、或いは１２１の調整を行う。
　第２認証装置４２は、搭乗ゲートＢＧに設置され、当該搭乗ゲートＢＧを通過する人物を撮像可能に設けられたカメラ１２１の撮像により得られた画像からの生体情報の取得等を行う。第２認証装置４２は、原則として、搭乗ゲートＢＧを通過する人物が所持する旅券Ｐからの識別情報の読み取りを行わないものとする。次いで、第２認証装置４２は、取得した生体情報と、第１記憶装置４５に記憶された生体情報とを用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行する。これにより、人物が出国する際の当該人物の最終的な認証において、旅券Ｐからの識別情報の読み取りを行うことなく、当該人物の認証を行うことができるので、多数の人物が搭乗ゲートＢＧを通過する場合であっても滞りが発生することなく人物の認証処理を実行することができる。
　そして、第２認証装置４２は、搭乗ゲートＢＧを通過する人物を撮像して得られた画像から取得した生体情報が、第１記憶装置４５に記憶された生体情報のいずれかと一致した場合、搭乗ゲートＢＧを通過する人物の認証処理が成功したものとして、搭乗ゲートＢＧをオープンしたり搭乗ゲートＢＧに設置された扉の鍵を開錠したりすることにより、搭乗ゲートＢＧの通過を許可する。一方、第２認証装置４２は、搭乗ゲートＢＧを通過する人物を撮像して得られた画像から取得した生体情報が、第１記憶装置４５に記憶された生体情報のいずれとも一致しなかった場合、搭乗ゲートＢＧを通過する人物の認証処理が失敗したものとして、搭乗ゲートＢＧのオープンまたは搭乗ゲートＢＧに設置された扉の鍵の開錠を行わないことにより、搭乗ゲートＢＧの通過を禁止する。
　本実施形態では、第２認証装置４２は、搭乗ゲートＢＧの通過を許可または禁止するためのゲートや扉の鍵等が設置されていない場合には、以下の処理によって搭乗ゲートＢＧの通過の許可または禁止を行う。第２認証装置４２は、搭乗ゲートＢＧを通過する人物の認証処理に成功した場合、第１記憶装置４５に記憶された生体情報のうち、搭乗ゲートＢＧを通過する人物を撮像して得られた画像から取得した生体情報と一致した生体情報に対応付けて、搭乗ゲートＢＧを正常に通過したことを示す情報を保存する。一方、第２認証装置４２は、搭乗ゲートＢＧを通過する人物の認証処理に失敗した場合、当該第２認証装置４２が備える表示部に対して認証が失敗したことを通知するための警告情報を表示させたり、外部端末に対して認証が失敗したことを通知するための警告情報を送信したり、搭乗ゲートＢＧを通過した人物を撮像して得られた画像を保存したりする。
　第３認証装置４３は、入国審査カウンターＩＣ（第２位置の一例）に設置され、入国審査カウンターＩＣを通過する人物が所持する旅券Ｐから識別情報（第２識別情報の一例）を読み取る。次いで、第３認証装置４３は、第２記憶装置４６から、旅券Ｐから読み取った識別情報と一致する識別情報と対応付けて記憶された撮像条件を読み出す。次に、第３認証装置４３は、読み出した撮像条件に従って、入国審査カウンターＩＣを通過する人物を撮像可能に設けられたカメラ１３１（第２撮像部の一例）の撮像条件を調整する。
　さらに、第３認証装置４３は、撮像条件を調整したカメラ１３１の撮像により得られた画像（第２画像の一例）から生体情報（第２生体情報の一例）を取得する。そして、第３認証装置４３は旅券Ｐから読み取った識別情報と、カメラ１３１の撮像により得られた画像から取得した生体情報とを用いて、当該人物の認証処理（以下、第２認証処理と言う）を実行する。これにより、出国審査カウンターＤＣでの第１認証処理に成功した場合のカメラ１１１の撮像条件と同様の撮像条件の下でのカメラ１３１の撮像により得られた画像から取得した生体情報を用いて第２認証処理を実行できるので、入国審査カウンターＩＣでの人物の認証精度を向上させることができる。そして、第３認証装置４３は、第２認証処理が成功した場合、第２認証処理に用いた識別情報と生体情報とを対応付けて第２記憶装置４６に保存する。
　第４認証装置４４は、荷物受取場所ＢＣに設置され、当該荷物受取場所ＢＣを通過する人物を撮像可能に設けられたカメラ１４１の撮像により得られた画像からの生体情報の取得等を行う。次いで、第４認証装置４４は、取得した生体情報と、第２記憶装置４６に記憶された生体情報とを用いて、荷物受取場所ＢＣを通過する人物の認証処理を実行する。これにより、入国時における人物の最終的な認証において、旅券Ｐからの識別情報の読み取りを行うことなく、当該人物の認証を行うことができるので、多数の人物が荷物受取場所ＢＣを通過する場合であっても滞りが発生することなく人物の認証を実行することができる。
　そして、第４認証装置４４は、荷物受取場所ＢＣを通過する人物を撮像して得られた画像から取得した生体情報が、第２記憶装置４６に記憶された生体情報のいずれかと一致した場合、荷物受取場所ＢＣを通過する人物の認証処理が成功したものとして、荷物受取場所ＢＣの通過を許可する。一方、第４認証装置４４は、荷物受取場所ＢＣを通過する人物を撮像して得られた画像から取得した生体情報が、第２記憶装置４６に記憶された生体情報のいずれとも一致しなかった場合、荷物受取場所ＢＣを通過する人物の認証処理が失敗したものとして、荷物受取場所ＢＣの通過を禁止する。
　次に、図１３を用いて、本実施形態にかかる出入国管理システムが有する搭乗案内装置４０、第１認証装置４１、および第２認証装置４２の機能的な構成について説明する。図１３は、本実施形態にかかる出入国管理システムが有する搭乗案内装置４０、第１認証装置４１、および第２認証装置４２の機能的な構成を示す図である。
　搭乗案内装置４０は、図１３に示すように、カメラ１０１の撮像により得られた画像を取得する画像取得部１０２と、当該画像取得部１０２により取得された画像内の顔画像の特徴情報を抽出する顔特徴抽出部１０３と、チェックインカウンターＰ１を通過する人物が所持する航空券Ｔから行先情報の読み取りを行う識別情報読取部１０４と、航空券Ｔからの行先情報の読取結果情報を表示可能な表示部１０５と、を有している。
　第１認証装置４１は、図１３に示すように、カメラ１１１の撮像により得られた画像を取得する画像取得部１１２と、当該画像取得部１１２により取得された画像から、当該画像内の顔画像の特徴情報（生体情報の一例）を抽出（取得）する顔特徴抽出部１１３と、出国審査カウンターＤＣを通過する人物が所持する旅券Ｐから識別情報を読み取る識別情報読取部１１４と、顔特徴抽出部１１３により抽出した特徴情報および識別情報読取部１１４により読み取った識別情報を用いて、出国審査カウンターＤＣを通過する人物の第１認証処理を実行し、かつ当該第１認証処理が成功した場合、装置識別情報に対応付けて、第１認証処理に用いた識別情報および特徴情報を第１記憶装置４５に保存する人物認証部１１５と、当該人物認証部１１５による第１認証処理の結果等を表示可能な表示部１１６と、を有している。
　本実施形態では、人物認証部１１５は、出国審査カウンターＤＣを通過する人物の第１認証処理が成功した場合、当該第１認証処理に用いた識別情報と対応付けて、当該第１認証処理に用いた画像を得たカメラ１１１の撮像条件（第１撮像条件の一例）を、図１４に示すカメラ１３１の撮像条件（第２撮像条件の一例）として図１４に示す第２記憶装置４６に保存する。本実施形態では、人物認証部１１５は、カメラ１１１の撮像条件を第２記憶装置４６に保存しているが、図１４に示す第３認証装置４３がアクセス可能な記憶装置にカメラ１１１の撮像条件を保存するものであれば、これに限定するものではなく、例えば、カメラ１１１の撮像条件を第１記憶装置４５に保存しても良い。
　第２認証装置４２は、図１３に示すように、カメラ１２１の撮像により得られた画像を取得する画像取得部１２２と、当該画像取得部１２２により取得した画像内の顔画像の特徴情報を抽出する顔特徴抽出部１２３と、第１記憶装置４５に記憶された特徴情報および顔特徴抽出部１２３により抽出された特徴情報を用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行する人物検索部１２４と、当該人物検索部１２４による人物の認証結果等を表示可能な表示部１２５と、を有している。
　本実施形態では、人物検索部１２４は、顔特徴抽出部１２３により抽出された特徴情報が、第１記憶装置４５に記憶された特徴情報のいずれかと一致した場合、搭乗ゲートＢＧを通過する人物の認証処理に成功したと判断して、搭乗ゲートＢＧの通過を許可する。一方、人物検索部１２４は、顔特徴抽出部１２３により抽出された特徴情報が、第１記憶装置４５に記憶された特徴情報のいずれとも一致しなかった場合、搭乗ゲートＢＧを通過する人物の認証処理に失敗したと判断して、搭乗ゲートＢＧの通過を禁止する。
　また、本実施形態では、第２認証装置４２は、第１認証装置４１における認証処理を実行していない人物が搭乗ゲートＢＧを通過する場合であっても、当該人物が搭乗ゲートＢＧを通過できるようにするために、当該人物が所持する旅券Ｐから識別情報を読取可能な図示しない読取部を有していても良い。この場合、第２認証装置４２の人物検索部１２４は、第２認証装置４２が有する図示しない読取部により読み取られた識別情報と、顔特徴抽出部１２３により抽出された特徴情報とを用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行する。
　次に、図１４を用いて、本実施形態にかかる出入国管理システムが有する第３認証装置４３の機能的な構成について説明する。図１４は、本実施形態にかかる出入国管理システムが有する第３認証装置の機能的な構成を示す図である。
　第３認証装置４３は、図１４に示すように、入国審査カウンターＩＣを通過する人物が所持する旅券Ｐから識別情報を読み取る識別情報読取部１３２と、第２記憶装置４６から、識別情報読取部１３２により読み取られた識別情報と一致する識別情報に対応付けて記憶された撮像条件を読み出し、かつ当該読み出した撮像条件に従ってカメラ１３１の撮像条件を調整する撮像条件調整部１３３と、撮像条件が調整されたカメラ１３１の撮像により得られた画像を取得する画像取得部１３４と、当該画像取得部１３４により取得された画像から、当該画像内の顔画像の特徴情報（生体情報の一例）を抽出（取得）する顔特徴抽出部１３５と、当該顔特徴抽出部１３５により抽出した特徴情報および識別情報読取部１３２により読み取った識別情報とを用いて、入国審査カウンターＩＣを通過する人物の第２認証処理を実行し、かつ当該第２認証処理が成功した場合、当該第２認証処理に用いた識別情報と特徴情報とを対応付けて第２記憶装置４６に保存する人物認証部１３６と、当該人物認証部１３６による第２認証処理の結果を表示する表示部１３７と、を有している。
　本実施形態では、撮像条件調整部１３３は、第２記憶装置４６から読み出した撮像条件に近づくように、カメラ１３１の撮像条件を調整する。これにより、出国審査カウンターＤＣでの第１認証処理に成功した場合のカメラ１１１の撮像条件を基準とする、カメラ１３１の撮像条件の変動を抑制することができるので、入国審査カウンターＩＣでの認証精度のロバスト性を向上させることができる。
　次に、図１５を用いて、本実施形態にかかる出入国管理システムが有する第４認証装置４４の機能的な構成について説明する。図１５は、本実施形態にかかる出入国管理システムが有する第４認証装置の機能的な構成を示す図である。
　第４認証装置４４は、図１５に示すように、荷物受取場所ＢＣを通過する人物を撮像可能に設けられたカメラ１４１の撮像により得られた画像を取得する第１画像取得部１４２と、当該第１画像取得部１４２により取得された画像内の顔画像の特徴情報を抽出する第１顔特徴抽出部１４３と、第２記憶装置４６に記憶された特徴情報および第１顔特徴抽出部１４３により抽出された特徴情報を用いて、荷物受取場所ＢＣを通過する人物の認証処理を実行する人物検索部１４４と、当該人物検索部１４４による認証処理の結果を表示可能な第１表示部１４５と、を有している。
　また、第４認証装置４４は、図１５に示すように、荷物受取場所ＢＣにおいて荷物を受け取る人物を撮像可能に設けられたカメラ１４１の撮像により得られた画像を取得する第２画像取得部１４６と、当該第２画像取得部１４６により取得された画像内の顔画像の特徴情報を抽出する第２顔特徴抽出部１４７と、荷物受取場所ＢＣを通過する人物が所持する荷物タグ４００から、荷物の所有者を識別可能とする情報であるタグ情報を読み取るタグ情報読取部１４８と、第２記憶装置４６においてタグ情報読取部１４８により読み取られたタグ情報と一致する識別情報と対応付けて記憶された特徴情報および第２顔特徴抽出部１４７により抽出された特徴情報を用いて、荷物受取場所ＢＣにおいて荷物を受け取った人物の認証処理を実行する人物認証部１４９と、当該人物認証部１４９による認証処理の結果を表示可能な第２表示部１５０と、を有する。
　次に、図１６を用いて、本実施形態にかかる出入国管理システムが有する搭乗案内装置４０による生体情報の取得処理について説明する。図１６は、本実施形態にかかる出入国管理システムが有する搭乗案内装置４０による生体情報の取得処理の流れを示すフローチャートである。
　まず、識別情報読取部１０４は、チェックインカウンターＰ１を通過する人物が所持する航空券Ｔから、当該人物の行先を示す行先情報を読み取る（ステップＳ１６０１）。さらに、識別情報読取部１０４は、チェックインカウンターＰ１を通過する人物が所持する旅券Ｐに埋め込まれたＩＣチップから、当該旅券Ｐの名義人の顔画像の特徴情報を識別情報として読み取る（ステップＳ１６０２）。
　本実施形態では、識別情報読取部１０４は、例えばカードリーダ等により構成され、航空券Ｔからの行先情報の読み取りおよび旅券Ｐに埋め込まれたＩＣチップからの識別情報の読み取りが可能である。本実施形態では、識別情報読取部１０４は、旅券Ｐの名義人の顔画像の特徴情報を識別情報として読み取っているが、旅券Ｐの名義人を識別可能とする識別情報を読み取るものであれば、これに限定するものではない。例えば、旅券Ｐの名義人を一意に特定するためのＩＤ番号、旅券Ｐの名義人の生体情報（例えば、顔画像や指紋や虹彩等）、旅券Ｐの名義人の個人情報（例えば、氏名，生年月日，性別，年齢，所属，経歴等）などを識別情報として読み取っても良い。
　本実施形態では、識別情報読取部１０４は、航空券Ｔまたは旅券Ｐから、行先情報や識別情報等の各種情報を読み取っているが、これに限定するものではなく、識別情報読取部１０４を、例えばテンキー，タッチパネル等、行先情報や識別情報等の各種情報を入力可能な入力部により構成することも可能である。この場合、搭乗案内装置４０のユーザ（例えば、チェックインカウンターＰ１を通過する人物など）は、入力部として機能する識別情報読取部１０４を操作して、行先情報や識別情報を入力する。
　本実施形態では、識別情報読取部１０４が、旅券Ｐに埋め込まれたＩＣチップから識別情報（例えば、出入国管理システム以外の外部機器によって保存された識別情報）を読み取る例について説明するが、旅券Ｐから識別情報を読み取るものであれば、これに限定するものではない。例えば、識別情報読取部１０４は、旅券Ｐに印刷された顔画像を読み取り、読み取った顔画像の特徴情報を識別情報として読み取ることも可能である。顔画像からの特徴情報の読取方法は、後述する顔特徴抽出部１０３による特徴情報の抽出方法と同様である。
　行先情報および識別情報が読み取られると、画像取得部１０２は、カメラ１０１を制御して、チェックインカウンターＰ１を通過する人物を撮像する。そして、画像取得部１０２は、カメラ１０１の撮像により得られた画像を取得する（ステップＳ１６０３）。ここで、カメラ１０１は、例えばビデオカメラ等により構成され、チェックインカウンターＰ１を通過する人物を撮像可能に設けられている。本実施形態では、カメラ１０１は、チェックインカウンターＰ１を通過する人物の顔を撮像可能に設けられている。そして、カメラ１０１は、チェックインカウンターＰ１を通過する人物の撮像により得られた画像を、図示しないＡ／Ｄ変換器によってデジタル化して出力する。
　次いで、顔特徴抽出部１０３は、画像取得部１０２により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ１６０４）。本実施形態では、顔特徴抽出部１０３は、まず、画像取得部１０２により取得された画像内において、予め設定された顔検出用のテンプレートを移動させながら、取得した画像とテンプレート間の相関値を求める。そして、顔特徴抽出部１０３は、取得した画像内において、テンプレートとの相関値が最も高い領域を顔画像として検出する。
　本実施形態では、顔特徴抽出部１０３は、画像取得部１０２により取得された画像から、予め設定された顔検出用のテンプレートを用いて顔画像を検出しているが、これに限定するものではなく、例えば周知の固有空間法や部分空間法等を用いて、画像取得部１０２により取得された画像から顔画像を検出することも可能である。また、顔特徴抽出部１０３は、例えば日本特許第５３５５４４６号等に記載される方法を用いて、画像取得部１０２により取得された複数の画像の中から、チェックインカウンターＰ１を通過する人物の複数の顔画像を検出する。次いで、顔特徴抽出部１０３は、検出した複数の顔画像から特徴情報の抽出に必要な顔画像を選択することも可能である。
　次に、顔特徴抽出部１０３は、検出した顔画像から、例えば日本特許第３２７９９１３号等に記載される方法を用いて目や鼻等の顔の部位を検出する。その後、顔特徴抽出部１０３は、検出した顔の部位から、チェックインカウンターＰ１を通過する人物を識別可能とする特徴情報を数値化して出力する。具体的には、顔特徴抽出部１０３は、検出した顔の部位の位置に基づいて、画像取得部１０２により取得された画像から検出した顔画像から、所定の大きさおよび所定の形状の領域を切り出す。そして、顔特徴抽出部１０３は、切り出した領域の濃淡情報を、特徴情報として抽出する。顔特徴抽出部１０３は、例えば日本特許第４０８７９５３号等に記載された部分空間法を用いて、顔画像から切り出したｍ×ｎ画素の領域の濃淡情報を、ｍ×ｎ次元の特徴ベクトル（特徴情報）とする。
　次いで、顔特徴抽出部１０３は、識別情報読取部１０４により読み取った行先情報および識別情報に対応付けて、抽出した特徴情報を第１記憶装置４５に保存する（ステップＳ１６０５）。
　次に、図１７を用いて、本実施形態にかかる出入国管理システムが有する第１認証装置４１による認証処理について説明する。図１７は、本実施形態にかかる出入国管理システムが有する第１認証装置による認証処理の流れを示すフローチャートである。
　まず、識別情報読取部１１４は、出国審査カウンターＤＣを通過する人物が所持する旅券Ｐから、旅券Ｐの名義人の識別情報を読み取る（ステップＳ１７０１）。識別情報読取部１１４による旅券Ｐからの識別情報の読取方法は、搭乗案内装置４０が有する識別情報読取部１０４による旅券Ｐからの識別情報の読取方法と同様である。
　識別情報が読み取られると、画像取得部１１２は、カメラ１１１を制御して、出国審査カウンターＤＣを通過する人物を撮像する。そして、画像取得部１１２は、カメラ１１１の撮像により得られた画像を取得する（ステップＳ１７０２）。ここで、カメラ１１１は、例えばビデオカメラ等により構成され、出国審査カウンターＤＣを通過する人物を撮像可能に設けられている。本実施形態では、カメラ１１１は、出国審査カウンターＤＣを通過する人物の顔を撮像可能に設けられている。そして、カメラ１１１は、出国審査カウンターＤＣを通過する人物の撮像により得られた画像を、図示しないＡ／Ｄ変換器によってデジタル化して出力する。
　次いで、顔特徴抽出部１１３は、画像取得部１１２により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ１７０３）。顔特徴抽出部１１３による画像からの特徴情報の抽出方法は、搭乗案内装置４０が有する顔特徴抽出部１０３による画像からの特徴情報の抽出方法と同様である。
　次に、人物認証部１１５は、識別情報読取部１１４により読み取った識別情報および顔特徴抽出部１１３により抽出した特徴情報を用いて、出国審査カウンターＤＣを通過する人物の第１認証処理（１：１照合）を実行する（ステップＳ１７０４）。本実施形態では、人物認証部１１５は、まず、識別情報読取部１１４によって識別情報として読み取った特徴情報と、顔特徴抽出部１１３により抽出した特徴情報との類似度を算出する。
　具体的には、人物認証部１１５は、識別情報読取部１１４により読み取った特徴情報と、顔特徴抽出部１１３により抽出した特徴情報との類似性指標の算出を行う。ここで、類似性指標は、識別情報読取部１１４により読み取った特徴情報の部分空間と、顔特徴抽出部１１３により抽出した特徴情報の部分空間との類似度とする。人物認証部１１５は、例えば日本特許第４０８７９５３号等に記載された部分空間法や複合類似度法等によって、識別情報読取部１１４により読み取った特徴情報の部分空間と、顔特徴抽出部１１３により抽出した特徴情報の部分空間とがなす角度を、当該２つの部分空間同士の類似度として算出する。
　または、人物認証部１１５は、識別情報読取部１１４により読み取った特徴情報と顔特徴抽出部１１３により抽出した特徴情報とのユークリッド距離やマハラノビス距離等を用いて、当該２つの特徴情報の類似度を求めても良い。この場合、人物認証部１１５は、識別情報読取部１１４により読み取った特徴情報と顔特徴抽出部１１３により抽出した特徴情報とのユークリッド距離やマハラノビス距離が大きくなるに従って類似度が低くなる。
　人物認証部１１５は、算出した類似度が所定の第１閾値以上である場合には、出国審査カウンターＤＣを通過する人物の第１認証処理が成功したと判断する。言い換えると、人物認証部１１５は、算出した類似度が第１閾値以上である場合には、出国審査カウンターＤＣを通過する人物が、旅券Ｐの名義人本人であると判断する（ステップＳ１７０５：Ｙｅｓ）。そして、出国審査カウンターＤＣを通過する人物が旅券Ｐの名義人本人であると判断した場合、人物認証部１１５は、識別情報読取部１１４により読み取った識別情報と対応付けて、カメラ１１１の撮像条件を、カメラ１３１の撮像条件として第２記憶装置４６に保存する（ステップＳ１７０６）。
　ここで、撮像条件は、旅券Ｐの名義人本人であると判断した人物を撮像した際のカメラ１１１の撮像条件である。本実施形態では、撮像条件は、カメラ１１１の撮像により得られた画像（すなわち、第１認証処理に用いた特徴情報を取得した画像）に関する情報である。具体的には、撮像条件は、カメラ１１１の撮像により得られた画像に含まれる顔画像、当該画像に基づく人物の身長、および当該画像に基づく照明条件（言い換えると、当該が画像を得た際のカメラ１１１の撮像範囲の照明条件）の少なくとも１つを含む。
　また、本実施形態では、人物認証部１１５は、出国審査カウンターＤＣを通過する人物が旅券Ｐの名義人本人であると判断した場合、第１認証装置４１の装置識別情報に対応付けて、識別情報読取部１１４によって読み取った識別情報および顔特徴抽出部１１３により抽出した特徴情報を第１記憶装置４５に保存する。これにより、第１記憶装置４５に記憶された識別情報および特徴情報が、いずれの第１認証装置４１における第１認証処理に用いられた情報であるかを特定することができるので、第２認証装置４２において、第１記憶装置４５に記憶された識別情報および特徴情報を用いて認証処理を実行する際に、所定の第１認証装置４１によって保存された識別情報および特徴情報を用いて認証処理を実行することができる。
　本実施形態では、人物認証部１１５は、識別情報読取部１１４によって識別情報として読み取った特徴情報に対応付けて、顔特徴抽出部１１３によって抽出した特徴情報を第１記憶装置４５に保存しているが、これに限定するものではなく、例えば、第１認証処理を実行した時刻を示す時刻、旅券Ｐの名義人の顔画像，氏名，生年月日，性別，年齢，身長などの識別情報に対応付けて、顔特徴抽出部１１３によって抽出した特徴情報を第１記憶装置４５に保存しても良い。また、人物認証部１１５は、識別情報読取部１１４によって読み取った識別情報に対応付けて、顔特徴抽出部１１３によって抽出した特徴情報の特徴ベクトル，部分空間，相関行列等を第１記憶装置４５に保存しても良い。
　出国審査カウンターＤＣを通過する人物が旅券Ｐの名義人本人であると判断した場合、表示部１１６は、人物認証部１１５による第１認証処理が成功したことを通知するための情報を表示する（ステップＳ１７０７）。
　一方、人物認証部１１５は、算出した類似度が第１閾値未満である場合には、出国審査カウンターＤＣを通過する人物の第１認証処理が失敗したと判断する。言い換えると、人物認証部１１５は、算出した類似度が第１閾値未満である場合、出国審査カウンターＤＣを通過する人物が、旅券Ｐの名義人本人ではないと判断する（ステップＳ１７０５：Ｎｏ）。そして、出国審査カウンターＤＣを通過する人物が旅券Ｐの名義人本人でないと判断した場合、表示部１１６は、人物認証部１１５による第１認証処理が失敗したことを通知するための情報を表示する（ステップＳ１７０８）。
　次に、図１８を用いて、本実施形態にかかる出入国管理システムが有する第２認証装置４２による認証処理について説明する。図１８は、本実施形態にかかる出入国管理システムが有する第２認証装置による認証処理の流れを示すフローチャートである。
　まず、画像取得部１２２は、カメラ１２１を制御して、搭乗ゲートＢＧを通過する人物を撮像する。そして、画像取得部１２２は、カメラ１２１の撮像により得られた画像を取得する（ステップＳ１８０１）。ここで、カメラ１２１は、例えばビデオカメラ等により構成され、搭乗ゲートＢＧを通過する人物を撮像可能に設けられている。本実施形態では、カメラ１２１は、搭乗ゲートＢＧを通過する人物の顔を撮像可能に設けられている。そして、カメラ１２１は、搭乗ゲートＢＧを通過する人物の撮像により得られた画像を、図示しないＡ／Ｄ変換器によってデジタル化して出力する。
　顔特徴抽出部１２３は、画像取得部１２２により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ１８０２）。顔特徴抽出部１２３による画像からの特徴情報の抽出方法は、搭乗案内装置４０が有する顔特徴抽出部１０３による画像からの特徴情報の抽出方法と同様である。
　人物検索部１２４は、顔特徴抽出部１２３により抽出された特徴情報と、第１記憶装置４５に記憶された特徴情報とを用いて、搭乗ゲートＢＧを通過する人物の認証処理（１：Ｎ照合）を実行する（ステップＳ１８０３）。その際、人物検索部１２４は、第１記憶装置４５に記憶された特徴情報のうち、所定の装置識別情報以外の装置識別情報と対応付けて記憶された特徴情報を用いた、認証処理の実行を禁止する。これにより、所定の第１認証装置４１の第１認証処理に使用された特徴情報を用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行することができるので、搭乗ゲートＢＧを通過する人物の認証処理の信頼性を向上させることができる。
　本実施形態では、人物検索部１２４は、第１記憶装置４５に記憶された各特徴情報と、顔特徴抽出部１２３により抽出された特徴情報との類似度を算出する。ここで、人物検索部１２４による類似度の算出方法は、第１認証装置４１が有する人物認証部１１５による類似度の算出方法と同様である。次いで、人物検索部１２４は、第１記憶装置４５に記憶された特徴情報のうち、顔特徴抽出部１２３により抽出された特徴情報との類似度が最も高い特徴情報を選択する。そして、人物検索部１２４は、選択した特徴情報と顔特徴抽出部１２３により抽出された特徴情報との類似度が第１閾値以上である場合に、搭乗ゲートＢＧを通過する人物の認証処理が成功したと判断して（言い換えると、顔特徴抽出部１２３により抽出された特徴情報が、第１記憶装置４５に記憶された特徴情報のいずれかと一致したと判断して）、搭乗ゲートＢＧの通過を許可する（ステップＳ１８０４：Ｙｅｓ）。
　さらに、搭乗ゲートＢＧを通過する人物の認証処理が成功した場合、表示部１２５は、人物検索部１２４による認証処理が成功したことを通知するための情報を表示する（ステップＳ１８０５）。また、搭乗ゲートＢＧを通過する人物の認証処理が成功した場合、人物検索部１２４は、第１記憶装置４５から、認証処理が成功した人物の識別情報と対応付けて記憶された各種情報（例えば、装置識別情報、特徴情報、行先情報など）を消去する。また、人物検索部１２４は、第１記憶装置４５に保存されてから所定時間経過した識別情報と対応付けて記憶された各種情報も消去する。これにより、搭乗ゲートＢＧを通過する人物の認証処理において、第１記憶装置４５に記憶された特徴情報のうち、ステップＳ１８０２において抽出した特徴情報との類似度を算出する特徴情報の数を減らすことができるので、無駄な算出処理を省略することができ、認証処理の処理速度の向上およびリソースの節約を図ることができる。また、第１記憶装置４５に記憶された特徴情報の信頼性を維持することができる。
　一方、人物検索部１２４は、選択した特徴情報と、顔特徴抽出部１２３により抽出された特徴情報との類似度が、第１閾値未満である場合に、搭乗ゲートＢＧを通過する人物の認証処理が失敗したと判断して、搭乗ゲートＢＧの通過を禁止する（ステップＳ１８０４：Ｎｏ）。さらに、搭乗ゲートＢＧを通過する人物の認証処理が失敗した場合、表示部１２５は、人物検索部１２４による認証処理が失敗したことを通知するための情報を表示する（ステップＳ１８０６）。
　人物検索部１２４は、第１記憶装置４５に記憶されている複数の特徴情報に対して、当該特徴情報間の識別に不必要な情報を取り除くための処理を実行可能である。例えば、人物検索部１２４は、日本特許第４０８７９５３号等に記載された制約相互部分空間法を用いて、第１記憶装置４５に特徴情報として記憶されている特徴ベクトルを、部分空間に射影または変換することにより、第１記憶装置４５に記憶されている特徴情報間の識別精度を高める。これにより、特徴情報に含まれる不必要な情報を用いて、認証処理が実行されることを防止できるので、認証処理による通行者の認証精度を向上させることができる。
　本実施形態では、人物検索部１２４は、第１認証装置４１の識別情報読取部１１４により旅券Ｐから読み取られた識別情報が特徴情報（生体情報の一例）である場合には、第１記憶装置４５に記憶された識別情報と、顔特徴抽出部１２３により抽出された特徴情報とを用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行しても良い。これにより、第１認証装置４１と同様に、旅券Ｐから識別情報として読み取った特徴情報を用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行することになるので、搭乗ゲートＢＧのセキュリティ性を確保することができる。ただし、旅券Ｐから識別情報として読み取られる特徴情報は、一般的に、認証処理を実行する時点よりも古い特徴情報であるため、認証処理が、認証対象の人物の経年変化等の影響を受け易い。
　そこで、本実施形態では、人物検索部１２４は、上述したように、第１記憶装置４５に記憶された特徴情報（第１認証装置４１の顔特徴抽出部１１３により抽出された特徴情報）と、顔特徴抽出部１２３により抽出された特徴情報とを用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行することにより、認証処理が、認証対象の人物の経年変化等の影響を受けることを軽減でき、かつ当該人物の認証精度を向上させることができる。
　若しくは、人物検索部１２４は、第１記憶装置４５に記憶された識別情報および特徴情報のうち少なくともいずれか一方と、顔特徴抽出部１２３により抽出された特徴情報が一致した場合に、搭乗ゲートＢＧを通過する人物の認証処理に成功したと判断しても良い。これにより、第１記憶装置４５に記憶された情報を用いた、搭乗ゲートＢＧを通過する人物の認証処理の失敗を減らすことができる。
　また、人物検索部１２４は、カメラ１２１の撮像により得られた画像等に基づいて、搭乗ゲートＢＧの混雑度を検知し、検知した混雑度に応じて、搭乗ゲートＢＧを通過する人物の認証処理の処理速度を変更（例えば、検出した混雑度が所定値より高い場合には、認証処理の処理速度を上げるなど）することにより、単位時間当たりに、搭乗ゲートＢＧを通過する人物の数を制御することも可能である。さらに、人物検索部１２４は、顔特徴抽出部１２３により抽出された特徴情報が所定の特徴情報（例えば、ファーストクラスの人物の特徴情報など）である場合には、当該所定の特徴情報を有する人物を優先的に搭乗させることを通知するための情報を表示部１２５に表示させても良い。
　また、人物検索部１２４は、搭乗ゲートＢＧを通過する人物の認証処理が成功した場合に、第１記憶装置４５において、顔特徴抽出部１２３により抽出された特徴情報と一致する識別情報と対応付けて記憶された行先情報を読み出す。そして、人物検索部１２４は、読み出した行先情報が示す行先が、搭乗ゲートＢＧを通過した人物が搭乗する飛行機の行先と一致しない場合、行先が違う搭乗者が存在することを通知するための情報を表示部１２５に表示させることが可能である。
　また、人物検索部１２４は、搭乗ゲートＢＧを通過する人物の認証処理が失敗した場合、搭乗ゲートＢＧを通過する人物が保持する航空券Ｔを用いた搭乗を指示するための情報を表示部１２５に表示させても良い。
　次に、図１９を用いて、本実施形態にかかる出入国管理システムが有する第２認証装置４２が旅券Ｐから識別情報を読取可能な読取部を備える場合の認証処理について説明する。図１９は、本実施形態にかかる出入国管理システムが有する第２認証装置が旅券から識別情報を読取可能な読取部を備える場合の認証処理の流れを示すフローチャートである。
　まず、画像取得部１２２は、第２認証装置４２が備える図示しない入力部が操作されて、搭乗ゲートＢＧを通過する人物が所持する旅券Ｐからの識別情報の読み取りを指示する読取指示が入力されたか否かを判断する（ステップＳ１９０１）。読取指示が入力されなかった場合（ステップＳ１９０１：Ｎｏ）、第２認証装置４２は、図１８に示すステップＳ１８０１～ステップＳ１８０６と同様の処理を実行する。
　一方、読取指示が入力された場合（ステップＳ１９０１：Ｙｅｓ）、第２認証装置４２が備える図示しない読取部は、搭乗ゲートＢＧを通過する人物が所持する旅券Ｐから、旅券Ｐの名義人の識別情報を読み取る（ステップＳ１９０２）。第２認証装置４２が備える図示しない読取部による旅券Ｐからの識別情報の読取方法は、搭乗案内装置４０が有する識別情報読取部１０４による旅券Ｐからの識別情報の読取方法と同様である。次いで、第２認証装置４２は、図１８に示すステップＳ１８０１～ステップＳ１８０２と同様の処理を実行する。
　次に、人物検索部１２４は、第２認証装置４２が有する図示しない読取部によって旅券Ｐから読み取った識別情報および顔特徴抽出部１２３により抽出した特徴情報を用いて、搭乗ゲートＢＧを通過する人物の認証処理を実行する（ステップＳ１９０３）。本実施形態では、人物検索部１２４は、第１認証装置４１が備える人物認証部１１５による認証処理と同様にして、搭乗ゲートＢＧを通過する人物の認証処理を実行する。
　ただし、第２認証装置４２が有する図示しない読取部によって旅券Ｐから識別情報を読み取った場合、第１認証装置４１における認証処理を行っていないため、人物検索部１２４は、旅券Ｐから識別情報として読み取った特徴情報と顔特徴抽出部１２３により抽出した特徴情報との類似度と比較する所定の第２閾値を、第１認証装置４１における認証処理において用いた第１閾値より高くしても良い。若しくは、人物検索部１２４は、搭乗ゲートＢＧを通過する人物の認証処理の効率化を優先する場合には、第２閾値を第１閾値よりも低くしても良い。
　次に、図２０を用いて、本実施形態にかかる出入国管理システムが有する第３認証装置４３による認証処理について説明する。図２０は、本実施形態にかかる出入国管理システムが有する第３認証装置４３による認証処理の流れを示すフローチャートである。
　まず、識別情報読取部１３２は、入国審査カウンターＩＣを通過する人物が所持する旅券Ｐから、旅券Ｐの名義人の識別情報を読み取る（ステップＳ２００１）。識別情報読取部１３２による旅券Ｐからの識別情報の読取方法は、搭乗案内装置４０が有する識別情報読取部１０４による旅券Ｐからの識別情報の読取方法と同様である。
　識別情報が読み取られると、撮像条件調整部１３３は、第２記憶装置４６から、識別情報読取部１３２により読み取った識別情報と一致する識別情報と対応付けて記憶された撮像条件を読み出す。そして、撮像条件調整部１３３は、読み出した撮像条件に従って、カメラ１３１の撮像条件を調整する（ステップＳ２００２）。これにより、出国審査カウンターＤＣでの第１認証処理に成功した場合のカメラ１１１の撮像条件と同様の撮像条件の下でのカメラ１３１の撮像により得られた画像から取得した生体情報を用いて第２認証処理を実行できるので、入国審査カウンターＩＣでの人物の認証精度を向上させることができる。
　本実施形態では、撮像条件調整部１３３は、読み出した撮像条件が身長を含む場合、当該身長に従って、入国審査カウンターＩＣを通過する人物の顔が正面から撮像されるように、カメラ１３１の撮像範囲を調整する。また、本実施形態では、撮像条件調整部１３３は、読み出した撮像条件が照明条件を含む場合、当該照明条件に従って、入国審査カウンターＩＣに光を照射可能な光源を調整する。
　また、本実施形態では、撮像条件調整部１３３は、読み出した撮像条件が顔画像を含む場合、当該顔画像に近い表情を指示するための第１指示を表示部１３７に表示する。また、撮像条件調整部１３３は、読み出した撮像条件が顔画像を含みかつ当該顔画像が眼鏡をかけた顔画像である場合、眼鏡の着用を指示するための第２指示を表示部１３７に表示する。また、撮像条件調整部１３３は、読み出した撮像条件が顔画像を含む場合、当該顔画像に近い髪型を指示するための第３指示を表示部１３７に表示することも可能である。これにより、出国審査カウンターＤＣでの第１認証処理に成功した場合のカメラ１１１の撮像条件により近い撮像条件の下でのカメラ１３１の撮像により得られた画像から取得した生体情報を用いて第２認証処理を実行できるので、入国審査カウンターＩＣでの人物の認証精度をさらに向上させることができる。
　次に、カメラ１３１の撮像条件が調整された後、画像取得部１３４は、カメラ１３１を制御して、入国審査カウンターＩＣを通過する人物を撮像する。そして、画像取得部１３４は、カメラ１３１の撮像により得られた画像を取得する（ステップＳ２００３）。ここで、カメラ１３１は、例えばビデオカメラ等により構成され、入国審査カウンターＩＣを通過する人物を撮像可能に設けられている。本実施形態では、カメラ１３１は、入国審査カウンターＩＣを通過する人物の顔を撮像可能に設けられている。そして、カメラ１３１は、入国審査カウンターＩＣを通過する人物の撮像により得られた画像を、図示しないＡ／Ｄ変換器によってデジタル化して出力する。
　次いで、顔特徴抽出部１３５は、画像取得部１３４により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ２００４）。顔特徴抽出部１３５による画像からの特徴情報の抽出方法は、搭乗案内装置４０が有する顔特徴抽出部１０３による画像からの特徴情報の抽出方法と同様である。
　次に、人物認証部１３６は、識別情報読取部１３２により読み取った識別情報および顔特徴抽出部１３５により抽出した特徴情報を用いて、入国審査カウンターＩＣを通過する人物の第２認証処理（１：１照合）を実行する（ステップＳ２００５）。人物認証部１３６による人物の認証方法は、第１認証装置４１が有する人物認証部１１５による人物の認証方法と同様である。
　本実施形態では、人物認証部１３６は、読み出した撮像条件が身長を含む場合、識別情報読取部１３２により識別情報として読み取った特徴情報と顔特徴抽出部１３５により抽出した特徴情報との類似度が第１閾値以上であり、かつ読み出した撮像条件が含む身長と画像取得部１３４により取得された画像に基づく人物の身長とが一致した場合に、第２認証処理が成功したと判断することも可能である。これにより、入国審査カウンターＩＣを通過する人物の特徴情報に加えて、当該人物の身長を考慮して第２認証処理が実行されるので、第２認証処理による人物の認証精度を向上させることができる。
　人物認証部１３６は、入国審査カウンターＩＣを通過する人物の第２認証処理が成功して、入国審査カウンターＩＣを通過する人物が旅券Ｐの名義人本人であると判断した場合（ステップＳ２００６：Ｙｅｓ）、識別情報読取部１３２により読み取った識別情報と対応付けて、顔特徴抽出部１３５により抽出した特徴情報を第２記憶装置４６に保存する（ステップＳ２００７）。さらに、入国審査カウンターＩＣを通過する人物が旅券Ｐの名義人本人であると判断した場合、表示部１３７は、人物認証部１３６による第２認証処理が成功したことを通知するための情報を表示する（ステップＳ２００８）。
　一方、入国審査カウンターＩＣを通過する人物が旅券Ｐの名義人本人でないと判断した場合（ステップＳ２００６：Ｎｏ）、表示部１３７は、人物認証部１３６による第２認証処理が失敗したことを通知するための情報を表示する（ステップＳ２００９）。
　次に、図２１を用いて、本実施形態にかかる出入国管理システム１が有する第４認証装置４４による認証処理について説明する。図２１は、本実施形態にかかる出入国管理システムが有する第４認証装置４４による認証処理の流れを示すフローチャートである。
　まず、第１画像取得部１４２および第２画像取得部１４６は、第４認証装置４４が備える図示しない入力部が操作されて、荷物受取場所ＢＣを通過する人物が所持する荷物タグ４００からのタグ情報の読み取りを指示する読取指示が入力されたか否かを判断する（ステップＳ２１０１）。
　読取指示が入力されなかった場合（ステップＳ２１０１：Ｎｏ）、第１画像取得部１４２は、カメラ１４１を制御して、荷物受取場所ＢＣを通過する人物を撮像する。そして、第１画像取得部１４２は、カメラ１４１の撮像により得られた画像を取得する（ステップＳ２１０２）。ここで、カメラ１４１は、例えばビデオカメラ等により構成され、荷物受取場所ＢＣを通過する人物を撮像可能に設けられている。本実施形態では、カメラ１４１は、荷物受取場所ＢＣを通過する人物の顔を撮像可能に設けられている。そして、カメラ１４１は、荷物受取場所ＢＣを通過する人物の撮像により得られた画像を、図示しないＡ／Ｄ変換器によってデジタル化して出力する。
　第１顔特徴抽出部１４３は、第１画像取得部１４２により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ２１０３）。第１顔特徴抽出部１４３による画像からの特徴情報の抽出方法は、搭乗案内装置４０が有する顔特徴抽出部１０３による画像からの特徴情報の抽出方法と同様である。
　人物検索部１４４は、第１顔特徴抽出部１４３により抽出された特徴情報と、第２記憶装置４６に記憶された特徴情報とを用いて、荷物受取場所ＢＣを通過する人物の認証処理（１：Ｎ照合）を実行する（ステップＳ２１０４）。人物検索部１４４による認証処理は、第２認証装置４２が有する人物検索部１２４による認証処理と同様である。
　そして、人物検索部１４４は、選択した特徴情報と第１顔特徴抽出部１４３により抽出された特徴情報との類似度が第１閾値以上である場合に、荷物受取場所ＢＣを通過する人物の認証処理が成功したと判断して（言い換えると、第１顔特徴抽出部１４３により抽出された特徴情報が、第２記憶装置４６に記憶された特徴情報のいずれかと一致したと判断して）、荷物受取場所ＢＣの通過を許可する（ステップＳ２１０５：Ｙｅｓ）。
　さらに、荷物受取場所ＢＣを通過する人物の認証処理が成功した場合、第１表示部１４５は、人物検索部１４４による認証処理が成功したことを通知するための情報を表示する（ステップＳ２１０６）。また、荷物受取場所ＢＣを通過する人物の認証処理が成功した場合、人物検索部１４４は、第２記憶装置４６から、認証処理が成功した人物の識別情報と対応付けて記憶された各種情報（例えば、特徴情報など）を消去する。または、人物検索部１４４は、第２記憶装置４６に保存されてから所定時間経過した識別情報と対応付けて記憶された各種情報も消去する。
　これにより、荷物受取場所ＢＣを通過する人物の認証処理において、第２記憶装置４６に記憶された特徴情報のうち、ステップＳ２１０３において抽出した特徴情報との類似度を算出する特徴情報の数を減らすことができるので、無駄な算出処理を省略することができ、認証処理の処理速度の向上およびリソースの節約を図ることができる。また、第２記憶装置４６に記憶された特徴情報の信頼性を維持することができる。
　一方、人物検索部１４４は、選択した特徴情報と、第１顔特徴抽出部１４３により抽出された特徴情報との類似度が、第１閾値未満である場合に、荷物受取場所ＢＣを通過する人物の認証処理が失敗したと判断して、荷物受取場所ＢＣの通過を禁止する。さらに、荷物受取場所ＢＣを通過する人物の認証処理が失敗した場合、第１表示部１４５は、人物検索部１４４による認証処理が失敗したことを通知するための情報を表示する（ステップＳ２１０７）。
　読取指示が入力された場合（ステップＳ２１０１：Ｙｅｓ）、タグ情報読取部１４８は、荷物受取場所ＢＣを通過する人物が所持する荷物タグ４００から、タグ情報を読み取る（ステップＳ２１０８）。タグ情報読取部１４８による荷物タグ４００からのタグ情報の読取方法は、搭乗案内装置４０が有する識別情報読取部１０４による旅券Ｐからの識別情報の読取方法と同様である。
　識別情報が読み取られると、第２画像取得部１４６は、カメラ１４１を制御して、荷物受取場所ＢＣを通過する人物を撮像する。そして、第２画像取得部１４６は、カメラ１４１を制御して、荷物受取場所ＢＣを通過する人物を撮像する。そして、第２画像取得部１４６は、カメラ１４１の撮像により得られた画像を取得する（ステップＳ２１０９）。
　第２顔特徴抽出部１４７は、第２画像取得部１４６により取得された画像から顔画像を検出し、当該検出した顔画像の特徴情報を抽出する（ステップＳ１８２１１０）。第２顔特徴抽出部１４７による画像からの特徴情報の抽出方法は、搭乗案内装置４０が有する顔特徴抽出部１０３による画像からの特徴情報の抽出方法と同様である。
　人物認証部１４９は、タグ情報読取部１４８により読み取ったタグ情報および第２顔特徴抽出部１４７により抽出した特徴情報を用いて、荷物受取場所ＢＣを通過する人物の認証処理を実行する（ステップＳ２１１１）。人物認証部１４９による人物の認証方法は、第１認証装置４１が有する人物認証部１１５による人物の認証方法と同様である。
　そして、人物認証部１４９は、タグ情報読取部１４８により読み取ったタグ情報と第２顔特徴抽出部１４７により抽出された特徴情報との類似度が第１閾値以上である場合に、荷物受取場所ＢＣを通過する人物の認証処理が成功したと判断して（ステップＳ２１０５：Ｙｅｓ）、荷物受取場所ＢＣを通過する人物の荷物を出荷する（ステップＳ２１０６）。その際、人物認証部１４９は、認証処理を実行した順番が早いものから順に、荷物受取場所ＢＣを通過する人物の荷物を出荷することにより、荷物の受け取りを効率化することも可能である。また、人物認証部１４９は、荷物受取場所ＢＣを通過する人物の認証処理の結果に基づいて、当該人物の荷物の所在や荷物が出荷されるまでの待ち時間を第２表示部１５０に表示させることも可能である。
　一方、人物認証部１４９は、タグ情報読取部１４８により読み取ったタグ情報と、第２顔特徴抽出部１４７により抽出された特徴情報との類似度が、第１閾値未満である場合に、荷物受取場所ＢＣを通過する人物の認証処理が失敗したと判断して、荷物受取場所ＢＣを通過する人物への荷物の出荷を禁止する。さらに、荷物受取場所ＢＣを通過する人物の認証処理が失敗した場合、第２表示部１５０は、人物認証部１４９による認証処理が失敗したことを通知するための情報を表示する（ステップＳ２１０７）。
　（第４の実施形態）
　以上の実施例では、通行者はカメラによる撮影時には立ち止まっていなければならなかったが、第４の実施形態として、図２２に示すように歩行中であっても例えば第２認証装置２０に設置された第２撮像部２１による撮影及び照合が行える。
　すなわち、第２３図に示すフローチャートに沿って動作を説明する。歩行者がゲートＧＴ入場時に旅券ＰのＩＣ画像を読み取る（ステップＳ２３０１）。第２撮像部２１によって歩行中の人物の顔を第２撮像部２１によって撮影する（ステップＳ２３０２）。得られた撮影動画像から顔を検出及び追跡を行う（ステップＳ２３０３）。追跡された複数の顔画像から少なくとも１枚の顔画像を用いて本人であるかの照合を行い、その照合による類似度が閾値以上であれば（ステップＳ２３０４；Yes）であれば、ゲートＧＴを開いて歩行者の通過を許可する（ステップＳ２３０５）。照合による類似度が閾値以下である場合（ステップＳ２３０４；Ｎｏ）にはゲートＧＴは閉じる（ステップＳ２３０６）。そして歩行者に対して警告を発する（ステップＳ２３０７）
　このように、本実施形態にかかる出入国管理システムによれば、入国審査カウンターＩＣでの人物の認証精度を向上させることができる。
　なお、本実施形態の搭乗案内装置４０，第１認証装置４１，第２認証装置４２，第３認証装置４３，第４認証装置４４で実行されるプログラムは、ＲＯＭ（Read　Only　Memory）等に予め組み込まれて提供される。
　本実施形態の搭乗案内装置４０，第１認証装置４１，第２認証装置４２，第３認証装置４３，第４認証装置４４で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital　Versatile　Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成しても良い。
　さらに、本実施形態の搭乗案内装置４０，第１認証装置４１，第２認証装置４２，第３認証装置４３，第４認証装置４４で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の搭乗案内装置４０，第１認証装置４１，第２認証装置４２，第３認証装置４３，第４認証装置４４で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
　本実施形態の搭乗案内装置４０で実行されるプログラムは、上述した各部（画像取得部１０２、顔特徴抽出部１０３、識別情報読取部１０４）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（Central　Processing　Unit）が上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像取得部１０２、顔特徴抽出部１０３、識別情報読取部１０４が主記憶装置上に生成されるようになっている。
　本実施形態の第１認証装置４１で実行されるプログラムは、上述した各部（画像取得部１１２、顔特徴抽出部１１３、識別情報読取部１１４、人物認証部１１５）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像取得部１１２、顔特徴抽出部１１３、識別情報読取部１１４、人物認証部１１５が主記憶装置上に生成されるようになっている。
　本実施形態の第２認証装置４２で実行されるプログラムは、上述した各部（画像取得部１２２、顔特徴抽出部１２３、人物検索部１２４）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像取得部１２２、顔特徴抽出部１２３、人物検索部１２４が主記憶装置上に生成されるようになっている。
　本実施形態の第３認証装置４３で実行されるプログラムは、上述した各部（撮像条件調整部１３３、画像取得部１３４、顔特徴抽出部１３５、識別情報読取部１３２、人物認証部１３６）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、撮像条件調整部１３３、画像取得部１３４、顔特徴抽出部１３５、識別情報読取部１３２、人物認証部１３６が主記憶装置上に生成されるようになっている。
　本実施形態の第４認証装置４４で実行されるプログラムは、上述した各部（第１画像取得部１４２、第１顔特徴抽出部１４３、人物検索部１４４、第２画像取得部１４６、第２顔特徴抽出部１４７、タグ情報読取部１４８、人物認証部１４９）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭからプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、第１画像取得部１４２、第１顔特徴抽出部１４３、人物検索部１４４、第２画像取得部１４６、第２顔特徴抽出部１４７、タグ情報読取部１４８、人物認証部１４９が主記憶装置上に生成されるようになっている。
　本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
　以下に本実施形態の課題を解決する手段は次の通りである。
　[１]
　第１位置を通過した人物の第１識別情報と対応付けて、前記第１位置を通過する人物の第１認証処理に用いた第１画像を得た第１撮像部の第１撮像条件を記憶する記憶装置から、前記第１位置とは異なる第２位置を通過する人物が所持する媒体から読み取られた第２識別情報と一致する前記第１識別情報と対応付けて記憶された前記第１撮像条件を読み出す工程と、
　読み出した前記第１撮像条件に従って、前記第２位置を通過する人物を撮像可能な第２撮像部の第２撮像条件を調整する工程と、
　前記第２識別情報と、前記第２撮像部の撮像により得られた第２画像から取得した生体情報とを用いて、前記第２位置を通過する人物の第２認証処理を実行する工程と、
を具備する情報処理方法。
　[２]
　前記第１撮像条件は、前記第１画像に関する情報である[１]の情報処理方法。
　[３]
　前記第１撮像条件は、前記第１画像に含まれる顔画像、前記第１画像に基づく人物の第１身長、および前記第１画像に基づく照明条件の少なくとも１つを含む[２]の情報処理方法。
　[４]
　前記第１撮像条件が前記第１身長を含む場合、前記第２識別情報としての顔画像の特徴情報と前記第２画像に含まれる顔画像の特徴情報との類似度が所定の閾値以上であり、かつ前記第１身長と前記第２画像に基づく人物の第２身長とが一致した場合に、前記第２認証処理が成功したものとする[３]の情報処理方法。
　[５]
　前記第１撮像条件が前記第１身長を含む場合、当該第１身長に従って、前記第２位置を通過する人物の顔が正面から撮像されるように、前記第２撮像部の撮像範囲を調整する[３]の情報処理方法。
　[６]
　前記第１撮像条件が前記照明条件を含む場合、当該照明条件に従って、前記第２撮像部の撮像範囲に光を照射可能な光源を調整する[３]の情報処理方法。
　[７]
　前記第１撮像条件が前記第１画像に含まれる顔画像を含む場合、当該顔画像に近い表情を指示するための第１指示を表示部に表示する[３]の情報処理方法。
　[８]
　前記第１撮像条件が前記第１画像に含まれる顔画像を含みかつ当該顔画像が眼鏡をかけた顔画像である場合、眼鏡の着用を指示するための第２指示を表示部に表示する[３]の情報処理方法。
　[９]
　前記第１撮像条件が前記第１画像に含まれる顔画像を含む場合、当該顔画像に近い髪型を指示するための第３指示を表示部に表示する[３]の情報処理方法。
　[１０]
　第１位置を通過する人物が所持する媒体から読み取った第１識別情報と当該人物を第１撮像部によって撮像して得られた第１画像から取得した第１生体情報とを用いて、当該人物の第１認証処理を実行する第１認証部と、
　前記第１認証処理が成功した場合、前記第１識別情報と対応付けて、前記第１撮像部の第１撮像条件を記憶する記憶部と、
　前記記憶部から、前記第１位置とは異なる第２位置を通過する人物が所持する媒体から読み取られた第２識別情報と一致する前記第１識別情報と対応付けて記憶された前記第１撮像条件を読み出し、読み出した前記第１撮像条件に従って、前記第２位置を通過する人物を撮像可能な第２撮像部の第２撮像条件を調整する調整部と、
　前記第２識別情報と、前記第２撮像部の撮像により得られた第２画像から取得した生体情報とを用いて、前記第２位置を通過する人物の第２認証処理を実行する第２認証部と、
を具備する情報処理システム。
　１…情報処理システム
１０…第１認証装置
１１…第１撮像部
１２…第１画像取得部
１３…第１顔特徴抽出部
１４…識別情報読取部
１５…第１通行者認証部
１６…第１出力部
１７…第１表示部
２０…第２認証装置
２１…第２撮像部
２２…第２画像取得部
２３…第２顔特徴抽出部
２４…第２通行者認証部
２５…第２出力部
２６…第２表示部
３０…サーバ
３１…特徴情報記憶部

Claims (16)

  1. 　第１位置を通過する通行者が所持する媒体から読み取られた第１生体情報と、前記第１位置を通過する通行者を撮像して得られた画像から取得した第２生体情報とを用いて、通行者を認証する第１認証処理を実行する工程と、
    　前記第１認証処理による通行者の認証に成功した場合、前記第１認証処理に用いた前記第１生体情報および前記第２生体情報の少なくとも一方に基づく第３生体情報を記憶部に記憶する工程と、
    　通行者の進行する方向において前記第１位置より下流側の第２位置を通過する通行者を撮像して得られた画像から取得した第４生体情報と、前記記憶部に記憶された前記第３生体情報とを用いて、通行者を認証する第２認証処理を実行する工程と、
    　前記第２認証処理により認証された場合、前記第２位置を通行することを許可する認証工程と
    を具備する情報処理方法。
  2. 　前記第１認証処理を実行した結果もしくは第２認証処理を実行した結果を管理者用モニタに表示する工程を更に有する請求項１に記載の情報処理方法。
  3. 　前記第１生体情報または前記第２生体情報を前記第３生体情報として前記記憶部に記憶する工程を有する請求項１に記載の情報処理方法。
  4. 　前記第２認証処理は、前記第４生体情報が前記記憶部に記憶された前記第３生体情報のいずれかと一致した場合、通行者の認証に成功したと判断する工程を有する請求項１に記載の情報処理方法。
  5. 　前記第２認証処理による通行者の認証に成功した場合、前記第４生体情報と一致した前記第３生体情報を前記記憶部から消去する工程を有する請求項４に記載の情報処理方法。
  6. 　前記記憶部に記憶されている複数の前記第３生体情報に対して、前記第３生体情報間の識別に不必要な情報を取り除くための処理を実行する工程を有する請求項１に記載の情報処理方法。
  7. 　前記第２位置を通過する通行者が所持する媒体から第５生体情報が読み取られた場合、前記第２認証処理に代えて、前記第４生体情報と前記第５生体情報とを用いて、通行者を認証する第３認証処理を実行する工程を有する請求項１に記載の情報処理方法。
  8. 　前記第２位置を通過する歩行中の通行者を撮像する工程を有する請求項１に記載の情報処理方法。
  9. 　第１位置を通過する通行者が所持する媒体から第１生体情報を読取可能に設けられた読取部と、
    　前記第１位置を通過する通行者を撮像可能に設けられた第１撮像部と、
    　前記読取部により読み取られた前記第１生体情報と当該第１生体情報が読み取られた際に前記第１撮像部の撮像により得られた第１画像から取得した第２生体情報とを用いて、通行者を認証する第１認証処理を実行する第１認証部と、
    　前記第１認証処理による通行者の認証に成功した場合、前記第１認証処理に用いた前記第１生体情報および前記第２生体情報の少なくとも一方に基づく第３生体情報を記憶部に記憶させ、かつ前記第１認証処理による通行者の認証に失敗した場合、前記第３生体情報の前記記憶部への記憶を禁止する記憶制御部と、
    　通行者の進行方向において前記第１位置より下流側の第２位置を通過する通行者を撮像可能に設けられた第２撮像部と、
    　前記第２撮像部の撮像により得られた画像から取得した第４生体情報と、前記記憶部に記憶された前記第３生体情報とを用いて、通行者を認証する第２認証処理を実行する第２認証部と、
    を具備する情報処理システム。
  10. 　前記第１認証処理を実行した結果もしくは第２認証処理を実行した結果を表示する管理者用モニタを更に具備する請求項９記載の情報処理システム。
  11. 　前記第２撮像部は、前記第２位置を通過する歩行中の通行者を撮像する請求項９に記載の情報処理システム。
  12. 　第１位置を通過する人物が所持する媒体から読み取った第１識別情報と当該人物を第１撮像部によって撮像して得られた第１画像から取得した第１生体情報とを用いて、当該人物の第１認証処理を実行する工程と、
    　前記第１認証処理が成功した場合、前記第１識別情報と対応付けて、前記第１撮像部の第１撮像条件を、前記第１位置とは異なる第２位置を通過する人物の第２認証処理に用いる第２生体情報を取得するための第２画像を得る第２撮像部の第２撮像条件として記憶装置に保存する工程と、
    を具備する情報処理方法。
  13. 　前記第１撮像条件は、前記第１画像に関する情報である請求項１２に記載の情報処理方法。
  14. 　前記第１撮像条件は、前記第１画像に含まれる顔画像、前記第１画像に基づく人物の第１身長、および前記第１画像に基づく照明条件の少なくとも１つを含む請求項１３に記載の情報処理方法。
  15. 前記第１認証処理を実行した結果もしくは第２認証処理を実行した結果を管理者用モニタに表示する工程を更に具備する請求項１２に記載の情報処理方法。
  16. 　前記第２撮像部は、前記第２位置を通過する歩行中の通行者を撮像する工程を具備する請求項１２に記載の情報処理方法。
    　
PCT/JP2015/001359 2014-03-14 2015-03-12 情報処理方法および情報処理システム WO2015136938A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016507365A JPWO2015136938A1 (ja) 2014-03-14 2015-03-12 情報処理方法および情報処理システム
EP15760931.4A EP3118810A4 (en) 2014-03-14 2015-03-12 Information processing method and information processing system
US15/263,984 US20170070501A1 (en) 2014-03-14 2016-09-13 Information processing method and information processing system

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2014051808 2014-03-14
JP2014-051808 2014-03-14
JP2014-183596 2014-09-09
JP2014183596 2014-09-09

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/263,984 Continuation US20170070501A1 (en) 2014-03-14 2016-09-13 Information processing method and information processing system

Publications (1)

Publication Number Publication Date
WO2015136938A1 true WO2015136938A1 (ja) 2015-09-17

Family

ID=54071394

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/001359 WO2015136938A1 (ja) 2014-03-14 2015-03-12 情報処理方法および情報処理システム

Country Status (4)

Country Link
US (1) US20170070501A1 (ja)
EP (1) EP3118810A4 (ja)
JP (1) JPWO2015136938A1 (ja)
WO (1) WO2015136938A1 (ja)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018185679A (ja) * 2017-04-26 2018-11-22 株式会社テイパーズ 顔認証システム
JP2019101779A (ja) * 2017-12-04 2019-06-24 京セラドキュメントソリューションズ株式会社 店舗用情報管理システムおよび店舗用情報管理プログラム
JP2019139340A (ja) * 2018-02-07 2019-08-22 株式会社ケアコム 徘徊検出システム
WO2020026368A1 (ja) 2018-07-31 2020-02-06 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JPWO2020188714A1 (ja) * 2019-03-18 2020-09-24
WO2021029046A1 (ja) * 2019-08-14 2021-02-18 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JP2021106001A (ja) * 2016-08-29 2021-07-26 パナソニックＩｐマネジメント株式会社 システム及び方法
JPWO2021186628A1 (ja) * 2020-03-18 2021-09-23
WO2021205844A1 (ja) * 2020-04-09 2021-10-14 Ｎｅｃソリューションイノベータ株式会社 認証装置
WO2022014562A1 (ja) * 2020-07-13 2022-01-20 アクティア株式会社 情報処理システム、情報処理装置、情報処理方法、及びプログラム
WO2022038709A1 (ja) * 2020-08-19 2022-02-24 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JP2022067133A (ja) * 2020-06-30 2022-05-02 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
WO2022154093A1 (ja) * 2021-01-14 2022-07-21 富士フイルム株式会社 真正性照合システム及び真正性照合方法
JP7243900B1 (ja) 2022-06-17 2023-03-22 三菱電機株式会社 認証システム及び認証装置
WO2023162041A1 (ja) * 2022-02-22 2023-08-31 日本電気株式会社 サーバ装置、システム、サーバ装置の制御方法及び記憶媒体
US11914035B2 (en) 2021-03-19 2024-02-27 Nec Corporation Inspection system for inspecting contents of a target person, and inspection method thereof
JP7487827B2 (ja) 2022-03-10 2024-05-21 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018110334A1 (ja) * 2016-12-16 2018-06-21 パナソニックＩｐマネジメント株式会社 ゲートシステム制御装置、及び、ゲートシステムの制御方法
US20190034934A1 (en) 2017-07-28 2019-01-31 Alclear, Llc Biometric payment
JP7220373B2 (ja) * 2018-06-28 2023-02-10 パナソニックＩｐマネジメント株式会社 ゲート装置及びシステム
JP7310112B2 (ja) * 2018-10-02 2023-07-19 日本電気株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP7006804B2 (ja) * 2018-10-12 2022-01-24 日本電気株式会社 情報処理装置、情報処理方法及びプログラム
CN109934978B (zh) * 2019-03-15 2020-12-11 上海华铭智能终端设备股份有限公司 闸机设备的控制方法、终端、闸机设备及系统
JP7276591B2 (ja) * 2020-02-18 2023-05-18 日本電気株式会社 ゲート装置
WO2021199338A1 (ja) * 2020-03-31 2021-10-07 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
US20220327188A1 (en) * 2020-07-30 2022-10-13 Nec Corporation Authentication system, authentication apparatus, authentication method and computer program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005129016A (ja) * 2003-09-29 2005-05-19 Fuji Photo Film Co Ltd 認証システム、プログラム、及び建築物
WO2005055151A1 (ja) * 2003-12-03 2005-06-16 Hitachi, Ltd. 搭乗セキュリティチェックシステムおよび方法ならびにコンピュータプログラム
JP2010287124A (ja) * 2009-06-12 2010-12-24 Glory Ltd 生体照合システムおよび生体照合方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7641108B2 (en) * 2004-04-02 2010-01-05 K-Nfb Reading Technology, Inc. Device and method to assist user in conducting a transaction with a machine
TWI336054B (en) * 2006-02-15 2011-01-11 Toshiba Kk Person identification device and person identification method
US20100031626A1 (en) * 2008-03-21 2010-02-11 Robert Oehrlein Carbon-Kevlar uni-body rocket engine and method of making same
US7855529B2 (en) * 2008-07-16 2010-12-21 ConvenientPower HK Ltd. Inductively powered sleeve for mobile electronic device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005129016A (ja) * 2003-09-29 2005-05-19 Fuji Photo Film Co Ltd 認証システム、プログラム、及び建築物
WO2005055151A1 (ja) * 2003-12-03 2005-06-16 Hitachi, Ltd. 搭乗セキュリティチェックシステムおよび方法ならびにコンピュータプログラム
JP2010287124A (ja) * 2009-06-12 2010-12-24 Glory Ltd 生体照合システムおよび生体照合方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3118810A4 *

Cited By (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021106001A (ja) * 2016-08-29 2021-07-26 パナソニックＩｐマネジメント株式会社 システム及び方法
JP7065350B2 (ja) 2016-08-29 2022-05-12 パナソニックＩｐマネジメント株式会社 システム及び方法
JP2018185679A (ja) * 2017-04-26 2018-11-22 株式会社テイパーズ 顔認証システム
JP2019101779A (ja) * 2017-12-04 2019-06-24 京セラドキュメントソリューションズ株式会社 店舗用情報管理システムおよび店舗用情報管理プログラム
JP2019139340A (ja) * 2018-02-07 2019-08-22 株式会社ケアコム 徘徊検出システム
US11610438B2 (en) 2018-07-31 2023-03-21 Nec Corporation Information processing apparatus, information processing method, and storage medium
US10963716B2 (en) 2018-07-31 2021-03-30 Nec Corporation Information processing apparatus, information processing method, and storage medium
WO2020026368A1 (ja) 2018-07-31 2020-02-06 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JPWO2020188714A1 (ja) * 2019-03-18 2020-09-24
WO2020188714A1 (ja) * 2019-03-18 2020-09-24 日本電気株式会社 情報処理装置、サーバ装置、情報処理方法及び記録媒体
JP7215566B2 (ja) 2019-03-18 2023-01-31 日本電気株式会社 情報処理装置、サーバ装置、情報処理方法及びプログラム
WO2021029046A1 (ja) * 2019-08-14 2021-02-18 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JPWO2021029046A1 (ja) * 2019-08-14 2021-02-18
JP7235123B2 (ja) 2019-08-14 2023-03-08 日本電気株式会社 情報処理装置、情報処理方法及びプログラム
JPWO2021186628A1 (ja) * 2020-03-18 2021-09-23
WO2021186628A1 (ja) * 2020-03-18 2021-09-23 日本電気株式会社 ゲート装置、認証システム、ゲート制御方法及び記憶媒体
JP7218837B2 (ja) 2020-03-18 2023-02-07 日本電気株式会社 ゲート装置、認証システム、ゲート装置の制御方法及びプログラム
JP7414327B2 (ja) 2020-04-09 2024-01-16 Ｎｅｃソリューションイノベータ株式会社 認証装置
JPWO2021205844A1 (ja) * 2020-04-09 2021-10-14
WO2021205844A1 (ja) * 2020-04-09 2021-10-14 Ｎｅｃソリューションイノベータ株式会社 認証装置
JP2022067133A (ja) * 2020-06-30 2022-05-02 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JP7300095B2 (ja) 2020-06-30 2023-06-29 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JPWO2022014562A1 (ja) * 2020-07-13 2022-01-20
WO2022014562A1 (ja) * 2020-07-13 2022-01-20 アクティア株式会社 情報処理システム、情報処理装置、情報処理方法、及びプログラム
JP7158692B2 (ja) 2020-07-13 2022-10-24 アクティア株式会社 情報処理システム、情報処理装置、情報処理方法、及びプログラム
WO2022038709A1 (ja) * 2020-08-19 2022-02-24 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
WO2022154093A1 (ja) * 2021-01-14 2022-07-21 富士フイルム株式会社 真正性照合システム及び真正性照合方法
US11914035B2 (en) 2021-03-19 2024-02-27 Nec Corporation Inspection system for inspecting contents of a target person, and inspection method thereof
WO2023162041A1 (ja) * 2022-02-22 2023-08-31 日本電気株式会社 サーバ装置、システム、サーバ装置の制御方法及び記憶媒体
JP7487827B2 (ja) 2022-03-10 2024-05-21 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体
JP7243900B1 (ja) 2022-06-17 2023-03-22 三菱電機株式会社 認証システム及び認証装置
JP2023184029A (ja) * 2022-06-17 2023-12-28 三菱電機株式会社 認証システム及び認証装置

Also Published As

Publication number Publication date
JPWO2015136938A1 (ja) 2017-04-06
EP3118810A1 (en) 2017-01-18
US20170070501A1 (en) 2017-03-09
EP3118810A4 (en) 2017-11-08

Similar Documents

Publication Publication Date Title
WO2015136938A1 (ja) 情報処理方法および情報処理システム
US10796514B2 (en) System and method for optimizing a facial recognition-based system for controlling access to a building
CN107958258B (zh) 用于追踪限定区域中的对象的方法和系统
US9875392B2 (en) System and method for face capture and matching
JP6151582B2 (ja) 顔認証システム
JP4836633B2 (ja) 顔認証装置、顔認証方法および入退場管理装置
US8064651B2 (en) Biometric determination of group membership of recognized individuals
KR100831122B1 (ko) 얼굴 인증 장치, 얼굴 인증 방법, 및 출입 관리 장치
JP2016170700A (ja) 人物認証方法
JP2008108243A (ja) 人物認識装置および人物認識方法
JP2006236260A (ja) 顔認証装置、顔認証方法および入退場管理装置
WO2020115890A1 (ja) 情報処理システム、情報処理装置、情報処理方法、およびプログラム
JP5955056B2 (ja) 顔画像認証装置
JP4855180B2 (ja) 画像処理システム
JP2004118359A (ja) 人物認識装置、人物認識方法および通行制御装置
US20220198861A1 (en) Access control system screen capture facial detection and recognition
KR20140060081A (ko) 원거리 얼굴인식 기반 스피드 게이트 통제 방법 및 장치
JP7379213B2 (ja) 画像照合装置
US20230222193A1 (en) Information processing device, permission determination method, and program
US20220028197A1 (en) Access control solution for a passage device
KR20220087908A (ko) 마스크 착용 얼굴 인식 기능을 갖는 출입관리방법
JP2022138548A (ja) 画像照合装置、画像照合方法、およびプログラム
Patil et al. A Review: Office Monitoring and Surveillance System
KR20230031496A (ko) 얼굴 인증을 통한 출입 관리 방법 및 시스템
JP2010086350A (ja) 認証装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15760931

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016507365

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2015760931

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015760931

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE