WO2020026368A1 - 情報処理装置、情報処理方法及び記録媒体 - Google Patents
情報処理装置、情報処理方法及び記録媒体 Download PDFInfo
- Publication number
- WO2020026368A1 WO2020026368A1 PCT/JP2018/028764 JP2018028764W WO2020026368A1 WO 2020026368 A1 WO2020026368 A1 WO 2020026368A1 JP 2018028764 W JP2018028764 W JP 2018028764W WO 2020026368 A1 WO2020026368 A1 WO 2020026368A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- user
- procedure
- status
- cpu
- Prior art date
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 96
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 628
- 238000012795 verification Methods 0.000 claims description 87
- 238000012545 processing Methods 0.000 claims description 23
- 239000000284 extract Substances 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 8
- 238000007689 inspection Methods 0.000 description 100
- 230000006870 function Effects 0.000 description 81
- 238000010586 diagram Methods 0.000 description 51
- 238000004891 communication Methods 0.000 description 46
- 229910052751 metal Inorganic materials 0.000 description 27
- 239000002184 metal Substances 0.000 description 27
- 230000008569 process Effects 0.000 description 23
- 238000001514 detection method Methods 0.000 description 19
- 238000012544 monitoring process Methods 0.000 description 13
- 238000012790 confirmation Methods 0.000 description 12
- 238000001914 filtration Methods 0.000 description 10
- 230000032258 transport Effects 0.000 description 10
- 238000010295 mobile communication Methods 0.000 description 8
- 238000000151 deposition Methods 0.000 description 7
- 241000287107 Passer Species 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 101100055224 Anemone leveillei AL10 gene Proteins 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 150000002739 metals Chemical class 0.000 description 3
- 238000012015 optical character recognition Methods 0.000 description 3
- 210000003462 vein Anatomy 0.000 description 3
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 2
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- WABPQHHGFIMREM-UHFFFAOYSA-N lead(0) Chemical compound [Pb] WABPQHHGFIMREM-UHFFFAOYSA-N 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000005389 magnetism Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0635—Risk analysis of enterprise or organisation activities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/02—Reservations, e.g. for tickets, services or events
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
- G06Q50/265—Personal security, identity or safety
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/50—Maintenance of biometric data or enrolment thereof
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/20—Individual registration on entry or exit involving the use of a pass
- G07C9/28—Individual registration on entry or exit involving the use of a pass the pass enabling tracking or indicating presence
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
Definitions
- the present invention relates to an information processing device, an information processing method, and a recording medium.
- Patent Document 1 describes that a traceability check of a passenger is performed by an authentication information registration unit, an action tracking management unit and a network camera monitoring unit provided in an airport server, and a network camera installed in an airport. I have.
- a passenger image captured by a network camera at an arbitrary location in an airport is compared with an image including a passenger face image stored as personal authentication information. Further, the behavior of the passenger is tracked and managed based on the position information of the installation location of the network camera and the time stamp of the captured image.
- Patent Document 2 describes an information processing method for detecting a change of a passer when the passer changes along the route along which the passer passes.
- the information processing method described in Patent Literature 1 is based on a first biological information read from a medium possessed by a passer passing the first position and an image obtained by imaging the passer passing the first position.
- a first authentication process for authenticating a passerby is executed.
- the storage unit stores third biometric information based on the first biometric information and the like used in the first authentication process.
- a second authentication process for authenticating the user is executed.
- An object of the present invention is to provide an information processing apparatus, an information processing method, and a recording medium that can improve the matching accuracy of biological information in view of the above-described problem.
- an information management unit that registers boarding information and boarding information related to boarding of the user acquired by a user check-in procedure in association with each other, and one of the users Having a matching unit for matching target biometric information, which is biometric information acquired during the procedure up to the boarding, with registered biometric information, which is the biometric information registered by the information management unit,
- An information processing apparatus is provided, wherein the unit selects the registered biometric information to be collated with the target biometric information based on a status relating to the procedure up to the boarding of the user corresponding to the registered biometric information.
- an information management unit that registers boarding information and biometric information relating to the boarding of the user acquired by a check-in procedure of the user, and a procedure up to the boarding of the user.
- a transmitting unit that transmits, to the device, verification information obtained by comparing the biometric information received from the performing device and the biometric information whose status regarding the procedure is not completed, and receiving status information indicating that the procedure is completed from the device.
- a status management unit that updates the status relating to the procedure.
- the boarding information on the boarding of the user and the biometric information of the user acquired by the check-in procedure of the user are registered in association with each other, and the The registered biometric information to be compared with the target biometric information, which is the biometric information acquired in the procedure up to boarding, and the registered biometric information, which is the biometric information registered by the information management unit.
- An information processing method is provided for selecting information based on a status relating to the procedure up to the boarding of the user corresponding to the registered biometric information.
- the computer registers, in association with each other, boarding information regarding the boarding of the user and biometric information of the user, which are obtained through a check-in procedure of the user, and registers the one of the usages.
- the target biometric information which is the biometric information obtained during the procedure up to the boarding of the person, is compared with the registered biometric information, which is the biometric information registered by the information management unit, and is compared with the target biometric information.
- a recording medium is provided that records a program for executing the selection of the registered biometric information based on a status relating to the procedure up to the boarding of the user corresponding to the registered biometric information.
- the situation of the user scheduled to board can be grasped in more detail.
- FIG. 1 is a schematic diagram showing the overall configuration of the information processing system according to the first embodiment of the present invention.
- FIG. 2 is a block diagram illustrating an example of a hardware configuration of the check-in terminal according to the first embodiment of the present invention.
- FIG. 3 is a block diagram showing an example of a hardware configuration of the automatic baggage storage according to the first embodiment of the present invention.
- FIG. 4 is a block diagram illustrating an example of a hardware configuration of the security inspection device according to the first embodiment of the present invention.
- FIG. 5 is a block diagram illustrating an example of a hardware configuration of the automation gate device according to the first embodiment of the present invention.
- FIG. 6 is a block diagram illustrating an example of a hardware configuration of the signage terminal according to the first embodiment of the present invention.
- FIG. 1 is a schematic diagram showing the overall configuration of the information processing system according to the first embodiment of the present invention.
- FIG. 2 is a block diagram illustrating an example of a hardware configuration of the check-in terminal according to the first
- FIG. 7 is a block diagram illustrating an example of a hardware configuration of the boarding gate device according to the first embodiment of the present invention.
- FIG. 8 is a block diagram illustrating an example of a hardware configuration of the management server according to the first embodiment of the present invention.
- FIG. 9 is a block diagram illustrating an example of a hardware configuration of the business terminal according to the first embodiment of the present invention.
- FIG. 10 is a sequence diagram showing operations of the check-in terminal and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 11 is a sequence diagram showing operations of the automatic baggage storage and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 12 is a sequence diagram showing operations of the security inspection device and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 13 is a sequence diagram showing operations of the automation gate device and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 14 is a sequence diagram illustrating operations of the signage terminal and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 15 is a sequence diagram illustrating operations of the boarding gate device and the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 16 is a schematic diagram illustrating an example of the user information database of the management server according to the first embodiment of the present invention.
- FIG. 17 is a schematic diagram illustrating an example of the first collation information database of the management server according to the first embodiment of the present invention.
- FIG. 18 is a schematic diagram illustrating an example of the second collation information database of the management server according to the first embodiment of the present invention.
- FIG. 19 is a schematic diagram illustrating an example of the third matching information database of the management server according to the first embodiment of the present invention.
- FIG. 20 is a schematic diagram illustrating an example of the fourth matching information database of the management server according to the first embodiment of the present invention.
- FIG. 21 is a schematic diagram illustrating an example of the fifth matching information database of the management server according to the first embodiment of the present invention.
- FIG. 22 is a schematic diagram showing an example of the expiration time of each procedure set by the management server according to the first embodiment of the present invention.
- FIG. 23 is a flowchart (part 1) illustrating an operation including a status management operation and an alert operation of the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 24 is a flowchart (part 2) illustrating operations including a status management operation and an alert operation of the management server in the information processing system according to the first embodiment of the present invention.
- FIG. 25 is a schematic diagram illustrating an example of an alert displayed on the business terminal according to the first embodiment of the present invention.
- FIG. 25B is a schematic diagram illustrating an example of a status confirmation screen displayed on the business terminal according to the first embodiment of the present invention.
- FIG. 25C is a schematic diagram illustrating an example of a status confirmation screen displayed on the business terminal according to the first embodiment of the present invention.
- FIG. 26 is a flowchart showing an alert operation of the management server according to the second embodiment of the present invention.
- FIG. 27 is a block diagram illustrating a configuration of an information processing apparatus according to another embodiment of the present invention.
- FIG. 28 is a block diagram illustrating a configuration of an information processing apparatus according to another embodiment of the present invention.
- FIG. 1 is a schematic diagram showing the entire configuration of the information processing system according to the present embodiment.
- the information processing system 1 includes a management server 10, a check-in terminal 20, an automatic baggage storage device 30, a security inspection device 40, an automated gate device 50, and a signage terminal 60. , A boarding gate device 70, and a business terminal 80.
- the information processing system 1 according to the present embodiment is, for example, a tracking system that grasps and manages the situation in the airport A of a user U who is scheduled to board an aircraft at the airport A and tracks the user U.
- the information processing system 1 grasps and manages the situation in the facility of the user who is going to board the transportation means in the facility for boarding the transportation means in addition to the user U who is going to board the aircraft at the airport A. Anything should do.
- the information processing system 1 may grasp and manage the situation in a seaport of a user who plans to board a ship at the seaport.
- the information processing system 1 may be a system that grasps and manages a situation in a station of a user who plans to board a train at the station.
- the management server 10 is installed in facilities such as an airport company and an airline operated by the airport A, for example.
- the check-in terminal 20 is installed in a check-in lobby P1 in the airport A.
- the automatic baggage storage machine 30 is installed at a baggage counter P2 in the airport A.
- the security inspection device 40 is installed at a security inspection site P3 in the airport A.
- the automated gate device 50 is installed in the immigration control area P4 in the airport A.
- the signage terminal 60 is installed in the passage P5 in the airport A.
- the passage P5 is a passage communicating between the immigration control area P4 and the boarding gate P6.
- the boarding gate device 70 is installed at the boarding gate P6 in the airport A.
- the user U can board the aircraft from the boarding gate P6.
- the business terminal 80 is carried by, for example, a staff member of an airline company, a staff member of an airport company, or the like. Further, the business terminal 80 may be installed at a business place such as a counter where the staff
- the user U After arriving at the airport A, the user U who will be boarding an international flight receives a check-in lobby P1, a baggage counter P2, a security checkpoint P3, a security checkpoint P3, an immigration checkpoint P4, and a passage P5, which are points where various procedures are performed or passed. , And board the aircraft at the boarding gate P6.
- the user U performs a check-in procedure (boarding procedure) at the check-in terminal 20 in the check-in lobby P1. Further, the user U performs a baggage deposit procedure with the automatic baggage depositing machine 30 at the baggage counter P2 as necessary. After the check-in procedure and the necessary baggage deposit procedure, the user U undergoes a security inspection procedure by the security inspection device 40 at the security inspection station P3.
- the user U undergoes the immigration control procedure by the automated gate device 50 at the immigration control station P4.
- the user U who has left the immigration center P4 passes through the passage P5 where the signage terminal 60 is installed and reaches the boarding gate P6.
- the user U passes through the boarding gate device 70 at the boarding gate P6 to board the aircraft.
- the user U may be not only a person who plans to board an international flight but also a person who plans to board a domestic flight. In the case of the user U who is scheduled to board a domestic flight, the immigration control at the immigration control center P4 is not performed.
- a plurality of surveillance cameras 90 are installed at various places.
- the monitoring cameras 90 are installed in, for example, the check-in lobby P1, the baggage counter P2, the security inspection area P3, the immigration area P4, the passage P5, and the boarding gate P6.
- the specification of the location of the user U using the monitoring camera 90 will be described in a second embodiment.
- the management server 10, the check-in terminal 20, the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, the signage terminal 60, the boarding gate device 70, and the monitoring camera 90 are connected to the network NW.
- the network NW includes a LAN (Local Area Network) including a local communication network of the airport A, a WAN (Wide Area Network), a mobile communication network, and the like.
- the business terminal 80 can be connected to the network NW by a wireless method or a wired method.
- the management server 10 and each of the check-in terminal 20, the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, the signage terminal 60, and the boarding gate device 70, the business terminal 80, and the monitoring camera 90 are connected to the network NW. It is possible to communicate via.
- FIG. 2 is a block diagram illustrating a hardware configuration of the check-in terminal 20.
- the check-in terminal 20 is an automatic check-in terminal in which the user U operates himself to perform a check-in procedure (boarding procedure).
- the check-in terminal 20 may be a check-in terminal installed at a manned counter operated by an airline staff.
- the check-in procedure (boarding procedure) is a procedure for inputting at least information for identifying a user U who is scheduled to board the aircraft. Specifically, for example, as described below, this is a procedure for inputting to register user information including the identity information, face information, and boarding information of the user U.
- the check-in terminal 20 has a CPU (Central Processing Unit) 202, a RAM (Random Access Memory) 204, a storage device 206, an input device 208, and a display 210. Further, the check-in terminal 20 includes a medium reading device 212, a biological information acquiring device 214, and a communication unit 216.
- the CPU 202, the RAM 204, the storage device 206, the input device 208, the display 210, the medium reading device 212, the biological information acquisition device 214 and the communication unit 216 are connected to a bus line 218.
- the CPU 202 operates by executing a program stored in the storage device 206, and functions as a control unit that controls the operation of the entire check-in terminal 20. Further, the CPU 202 executes the application program stored in the storage device 206 to execute various processes as the check-in terminal 20.
- the RAM 204 provides a memory area necessary for the operation of the CPU 202.
- the CPU 202 functions as a matching unit that matches the face image of the user U who performs the check-in procedure using the check-in terminal 20.
- the CPU 202 as a collation unit includes a passport face image that is a face image obtained from the passport of the user U by the medium reading device 212 and a captured face image that is a face image obtained by the biometric information obtaining device 214 during the check-in procedure. And.
- the CPU 202 can match both face images by comparing the face feature amount extracted from the passport face image with the face feature amount extracted from the captured face image. it can.
- the CPU 202 is configured to request the external server such as the management server 10 to collate the face image of the user U and obtain the collation result from the external server instead of functioning as the collating unit. You can also. In this case, the CPU 202 can transmit the passport face image and the captured face image of the user U to the external server and request the face image to be compared.
- the CPU 202 also functions as a user information transmitting unit that transmits the user information of the user U to the management server 10.
- the CPU 202 as the user information transmitting unit, when the verification of the passport face image of the user U and the captured face image match and succeeds in the identification of the user U, stores the user information of the user U in the management server. Send to 10.
- the user information of the user U includes the identification information, the face information, and the boarding information of the user U associated with each other.
- the identity information is information on the user U, such as the name, nationality, gender, and date of birth of the user U.
- the identity information is obtained from the passport or airline ticket medium of the user U by the medium reading device 212.
- the identity information may include passport information such as a passport number and a passport issuing country acquired by the medium reading device 212 from the passport of the user U.
- the face information is a captured face image or a passport face image of the user U that has been verified by the CPU 202. Further, the face information may be either one of the captured face image and the passport face image, or may be both images. The face information may not be the captured face image or the passport face image itself, but may be a face feature amount extracted from the captured face image or the passport face image.
- the boarding information is information about the flight scheduled to be used by the user U, such as the airline, flight number, departure place, arrival place, departure date, and arrival date and time of the aircraft scheduled to board the user U. Further, the boarding information may include a boarding time at which the boarding of the user U on the aircraft is closed. The boarding information is obtained from the air ticket medium of the user U by the medium reading device 212.
- the user information of the user U transmitted to the management server 10 is registered in a user information database (DB, Database) 106a in the management server 10 as described later.
- DB, Database user information database
- the user information of the user U transmitted to the management server 10 is also registered in the first to fifth information DBs 106b1, 106b2, 106b3, 106b4, and 106b5 for collation and used for collation as described later.
- the CPU 202 functions as a status information transmitting unit that transmits status information that is information relating to the status of the user U.
- the CPU 202 as the status information transmitting unit transmits status information indicating that the check-in procedure of the user U is completed to the management server 10. I do.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the CPU 202 only needs to transmit at least the information for identifying the user U who is scheduled to board the aircraft and the status information on the check-in procedure.
- the boarding information of the user U may be registered in the DB of a server such as the management server 10 in advance.
- the CPU 202 also functions as a display control unit that causes the display 210 to display a screen for guidance, notification, and the like for the user U.
- the CPU 202 as a display control unit causes the display 210 to display a guidance screen for guiding the use of the check-in terminal 20.
- the CPU 202 notifies the user U that the identification has failed.
- a notification screen is displayed on the display 210.
- the storage device 206 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 206 stores a program executed by the CPU 202, data referred to by the CPU 202 when the program is executed, and the like.
- the input device 208 is, for example, a touch panel incorporated in the display 210.
- the input device 208 functions as an input unit that receives an input of an instruction from the user U.
- the user U can input various information to the check-in terminal 20 or input an instruction to execute a process via the input device 208.
- the display 210 functions as a display unit that displays various screens for the user U using the check-in terminal 20. For example, the display 210 displays a guidance screen for guiding the usage of the check-in terminal 20 and a notification screen for the user U.
- the medium reading device 212 functions as an information acquisition unit that reads the passport and airline ticket medium of the user U and obtains information recorded on the passport and airline ticket.
- the air ticket medium is, for example, a paper air ticket, a mobile terminal that displays an e-ticket copy, or the like.
- the medium reading device 212 includes, for example, a code reader, an image scanner, a non-contact IC (Integrated Circuit) reader, an OCR (Optical Character Reader) device, and the like, and acquires information from various media held over the reading unit.
- the medium reading device 212 reads and acquires the identity information and the passport information of the user U displayed on the passport face by the OCR device. Further, for example, the medium reading device 212 reads and acquires the passport face image of the user U displayed on the passport face by the image scanner. In the case of an IC passport, the medium reading device 212 reads and acquires the user U's identity information, passport information, passport face image, and the like recorded on the IC chip of the IC passport using a non-contact IC reader. In addition, for example, the medium reader 212 reads a barcode and a QR code (registered trademark) displayed on the air ticket medium with a code reader, and acquires the identity information and boarding information of the user U from the air ticket medium. .
- a QR code registered trademark
- the check-in terminal 20 can acquire not only the ID information and the boarding information from the air ticket medium but also the ID information and the boarding information by another method.
- the CPU 202 queries the airline server for airline ticket reservation purchase information based on the user U's credit card number, reservation number, confirmation number, etc., and the user's U identity information and boarding information from the airline server. Can be obtained.
- the biometric information acquisition device 214 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U performing the check-in procedure.
- the biological information acquisition device 214 is, for example, a digital camera that captures the face of the user U standing in front of the check-in terminal 20, and captures the face image of the user U by capturing the face.
- the communication unit 216 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 216 performs communication with the management server 10 and the like under the control of the CPU 202.
- the check-in terminal 20 is configured.
- FIG. 3 is a block diagram illustrating an example of a hardware configuration of the automatic baggage storage device 30.
- the automatic baggage storage device 30 is a device that is operated by the user U and stores baggage that is not carried into the aircraft. The user U can perform a procedure for depositing baggage with the automatic baggage storage machine 30 as necessary.
- the automatic baggage storage device 30 includes a CPU 302, a RAM 304, a storage device 306, an input device 308, and a display 310. Further, the automatic baggage storage device 30 includes a biological information acquisition device 312, a baggage transport device 314, an output device 316, and a communication unit 318.
- the CPU 302, the RAM 304, the storage device 306, the input device 308, the display 310, the biological information acquisition device 312, the baggage transport device 314, the output device 316, and the communication unit 318 are connected to the bus line 320.
- the CPU 302 operates by executing the program stored in the storage device 306, and functions as a control unit that controls the operation of the entire automatic baggage storage device 30. In addition, the CPU 302 executes the application program stored in the storage device 306 to execute various processes as the automatic baggage storage 30.
- the RAM 304 provides a memory area necessary for the operation of the CPU 302.
- the CPU 302 functions as a collation request unit that requests collation of the face image of the user U who performs the baggage deposit procedure using the automatic baggage depositing machine 30.
- the CPU 302 serving as the matching request unit includes a target face image that is a face image of the user U captured by the biometric information acquisition device 312, and a plurality of registered face images registered in the first matching information DB 106b1 of the management server 10. Is requested to the management server 10 for 1: N. For this reason, the CPU 302 transmits the target face image captured by the biological information acquiring device 312 to the management server 10 together with the collation request as the target biological information.
- the CPU 302 may transmit a face feature amount, which is a feature amount extracted from the target face image, and request verification.
- the CPU 302 replaces the target face image of the user U with the registered face image associated with the information of the user U's passport, boarding pass, or QR code. Can be requested to the management server 10.
- the management server 10 registers the photographed face image or passport face image of the user U acquired by the check-in terminal 20 in the user information DB 106a as a registered face image
- the management server 10 transmits the passport and boarding information of the user U. Register in association with ticket or QR code information.
- the CPU 302 reads the information of the user U's passport, boarding pass or QR code using a medium reading device (not shown), and transmits the read information to the management server 10 together with the target face image.
- the management server 10 acquires from the user information DB 106a a registered face image associated with the passport, boarding pass or QR code information that matches the passport, boarding pass or QR code information transmitted from the automatic baggage storage 30. .
- the management server 10 compares the target face image transmitted from the automatic baggage storage 30 with the registered information face image acquired from the user information DB 106a on a 1: 1 basis.
- the management server 10 can also acquire the registered face image associated with the information on the passport, the boarding pass, or the QR code from the first verification information DB 106b1.
- the CPU 302 also functions as a collation result acquisition unit that acquires collation result information indicating the collation result requested from the management server 10 from the management server 10.
- the collation result information indicates that a registered face image that matches the target face image was found as a result of the collation, and that the identity of user U who performed the baggage check-in procedure was successfully determined, or that the registered identity matched. This indicates that the identification of the user U has failed without the face image being found.
- the collation result information indicates that the identity of the user U who performs the baggage check-in procedure in accordance with the target face image and the registered face image matches with the target face image or has been successfully used. This indicates that the identification of the person U has failed.
- the CPU 302 outputs the comparison result information by performing the 1: N or 1: 1 comparison between the target face image and the registered face image as described above, instead of functioning as the matching request unit and the matching result acquisition unit. It can also be configured to function as a collating unit that performs the matching. In this case, the CPU 302 refers to the first collation information DB 106b1 of the management server 10 or refers to the collation information DB stored in the storage device 306 in synchronization with the first collation information DB 106b1 to generate a face image. Collation can be performed.
- the CPU 302 controls the baggage transport device 314 to receive and transport the baggage of the user U.
- the CPU 302 functions as a status information transmitting unit that transmits status information that is information relating to the situation of the user U.
- the CPU 302 as the status information transmitting unit, when the baggage receiving and carrying by the baggage carrying device 314 is completed and the baggage depositing procedure is completed, the status information indicating that the baggage depositing procedure of the user U is completed. Send to 10.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the CPU 302 also functions as a display control unit that causes the display 310 to display a screen for guidance, notification, and the like for the user U.
- the CPU 302 as a display control unit causes the display 310 to display a guidance screen for guiding how to use the automatic baggage storage 30.
- the CPU 302 causes the display 310 to display a notification screen for notifying the user U that the personal identification has failed.
- the storage device 306 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 306 stores a program executed by the CPU 302, data referred to by the CPU 302 when the program is executed, and the like.
- the input device 308 is, for example, a touch panel incorporated in the display 310.
- the input device 308 functions as an input unit that receives an input of an instruction from the user U.
- the user U can input various kinds of information to the automatic baggage storage 30 or input an instruction to execute processing via the input device 308.
- the display 310 functions as a display unit that displays various screens for the user U who uses the automatic baggage storage 30. For example, the display 310 displays a guidance screen for guiding the usage of the automatic baggage storage 30 and a notification screen for the user U.
- the biometric information acquisition device 312 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U who performs the baggage check-in procedure.
- the biometric information acquisition device 312 is, for example, a digital camera that photographs in front of the automatic baggage storage device 30 and detects the face of the user U standing in front of the automatic baggage storage device 30 in images that are constantly or periodically captured. Then, the face of the user U is photographed to acquire the face image.
- the baggage transport device 314 transports the baggage to the aircraft on which the user U is boarding in order to load the baggage.
- the baggage transport device 314 transports the baggage, which is placed in the receiving section by the user U and has a baggage tag attached thereto, toward the cargo handling area.
- the output device 316 outputs a baggage tag attached to the baggage to be checked, and also outputs a baggage exchange certificate required for baggage exchange upon arrival.
- the user U attaches the baggage tag output from the output device 316 to the checked baggage. Further, the user U receives the baggage redemption certificate output from the output device 316 to receive the baggage upon arrival.
- the baggage tag is associated with at least one of the user information of the user U or face information, passport information, and boarding information included in the user information in the management server 10.
- the communication unit 318 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 318 performs communication with the management server 10 and the like under the control of the CPU 302.
- the automatic baggage storage device 30 is configured.
- FIG. 4 is a block diagram illustrating an example of a hardware configuration of the security inspection device 40.
- the security inspection device 40 is a device that checks whether or not the user U is wearing metal that can be a dangerous material by the metal detection gate 414 that is a metal detector.
- the security inspection device 40 may be a metal detector such as the metal detection gate 414 or the like, or may be an X-ray inspection device or the like for confirming the presence or absence of dangerous substances in baggage or the like brought into the cabin.
- the security inspection device 40 includes a CPU 402, a RAM 404, a storage device 406, an input device 408, a display 410, a biological information acquisition device 412, a metal detection gate 414, and a communication unit 416.
- the CPU 402, the RAM 404, the storage device 406, the input device 408, the display 410, the biological information acquisition device 412, the metal detection gate 414, and the communication unit 416 are connected to the bus line 418.
- the CPU 402 operates by executing a program stored in the storage device 406, and functions as a control unit that controls the operation of the entire security inspection device 40. Further, the CPU 402 executes an application program stored in the storage device 406 to execute various processes as the security inspection device 40.
- the RAM 404 provides a memory area necessary for the operation of the CPU 402.
- the CPU 402 functions as a verification request unit that requests verification of the face image of the user U who undergoes the security inspection procedure by the security inspection device 40.
- the CPU 402 serving as the matching request unit includes a target face image that is a face image of the user U captured by the biological information acquisition device 412, and a plurality of registered face images registered in the second matching information DB 106b2 of the management server 10. Is requested to the management server 10 for 1: N. For this reason, the CPU 402 transmits the target face image captured by the biological information acquisition device 412 to the management server 10 together with the collation request as the target biological information. Note that, instead of transmitting the target face image as the target biometric information, the CPU 402 may transmit a face feature amount, which is a feature amount extracted from the target face image, and request verification.
- the CPU 402 instead of requesting the above-mentioned 1: N collation, the CPU 402 associates the target face image of the user U with the information on the code symbol of the user U such as a passport, a boarding pass or a QR code. It is also possible to request the management server 10 to collate with the registered face image. In this case, when the management server 10 registers the photographed face image or passport face image of the user U acquired by the check-in terminal 20 in the user information DB 106a as a registered face image, the management server 10 transmits the passport and boarding information of the user U. It is registered in association with information on a ticket or a code symbol.
- the CPU 402 reads information of the user U's passport, boarding pass or code symbol by a medium reading device (not shown), and transmits the read information to the management server 10 together with the target face image.
- the management server 10 acquires from the user information DB 106a a registered face image associated with the information on the passport, boarding pass or code symbol that matches the information on the passport, boarding pass or code symbol transmitted from the security inspection device 40.
- the management server 10 matches the target face image transmitted from the security inspection device 40 with the registered information face image acquired from the user information DB 106a on a 1: 1 basis.
- the management server 10 can also acquire the registered face image associated with the information on the passport, the boarding pass, or the QR code from the second verification information DB 106b2.
- the CPU 402 also functions as a collation result acquisition unit that acquires collation result information indicating the collation result requested from the management server 10 from the management server 10.
- the collation result information indicates that a registered face image matching the target face image was found as a result of the collation, and that the identity of the user U who has undergone the security inspection procedure has been successfully identified, or that the matching registration information has been registered. This indicates that the identification of the user U has failed without the face image being found.
- the collation result information indicates that the identity of the user U who has undergone the security inspection procedure in accordance with the target face image and the registered face image matches the target face image or the registered face image has been successfully used, or that the user has not been used. This indicates that the identification of the person U has failed.
- the CPU 402 outputs the matching result information by matching the target face image with the registered face image at 1: N or 1: 1 as described above, instead of functioning as the matching request unit and the matching result obtaining unit. It can also be configured to function as a collating unit that performs the matching. In this case, the CPU 402 refers to the second collation information DB 106b2 of the management server 10 or refers to the collation information DB stored in the storage device 406 in synchronization with the second collation information DB 106b2, and Collation can be performed.
- the CPU 402 causes the metal detection gate 414 to continue the inspection.
- the CPU 402 functions as a status information transmitting unit that transmits status information that is information relating to the situation of the user U.
- the CPU 402 as the status information transmitting unit transmits status information indicating that the security inspection procedure of the user U is completed to the management server 10.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the CPU 402 also functions as a display control unit that causes the display 410 to display a screen for guidance, notification, and the like for the user U.
- the CPU 402 as a display control unit causes the display 410 to display a screen that prompts the user U to pass through the metal detection gate 414.
- the CPU 402 causes the display 410 to display a notification screen for notifying the user U that the identification has failed.
- the CPU 402 displays a notification screen for confirming whether there is no metal in the belongings worn and instructing to pass the metal detection gate 414 again. Displayed at 410.
- the storage device 406 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 406 stores a program executed by the CPU 402, data referred to by the CPU 402 when the program is executed, and the like.
- the input device 408 is, for example, a touch panel incorporated in the display 410.
- the input device 408 functions as an input unit that receives an input of an instruction from the user U.
- the user U can input various information to the security inspection device 40 via the input device 408, and can input an instruction to execute processing.
- the display 410 functions as a display unit that displays various screens for the user U who undergoes the security inspection procedure by the security inspection device 40. For example, the display 410 displays a screen urging the user U to pass through the metal detection gate 414 and a notification screen for the user U.
- the biometric information acquisition device 412 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U who undergoes a security inspection procedure.
- the biological information acquisition device 412 is, for example, a digital camera that photographs in front of the metal detection gate 414, and detects the face of the user U standing in front of the metal detection gate 414 in an image that is constantly or periodically captured. The face of the user U is photographed to acquire the face image.
- the metal detection gate 414 is a gate-type metal detector, and detects metals worn by the user U passing through the metal detection gate 414.
- the communication unit 416 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 416 performs communication with the management server 10 and the like under the control of the CPU 402.
- the security inspection device 40 is configured.
- FIG. 5 is a block diagram showing an example of a hardware configuration of the automation gate device 50.
- the automatic gate device 50 is a device that automatically performs the immigration examination procedure of the user U.
- the user U who can use the immigration control procedure by the automated gate device 50 is, for example, a person who has undergone examination by prior application and has been registered as a user of the automated gate device 50, and can be used based on travel history such as the number of times of travel. And those who have received user registration based on agreements between countries.
- the automation gate device 50 includes a CPU 502, a RAM 504, a storage device 506, an input device 508, a display 510, a biological information acquisition device 512, a gate 514, and a communication unit 516. are doing.
- the CPU 502, the RAM 504, the storage device 506, the input device 508, the display 510, the biological information acquisition device 512, the gate 514, and the communication unit 516 are connected to the bus line 518.
- the CPU 502 operates by executing the program stored in the storage device 506, and functions as a control unit that controls the operation of the entire automation gate device 50. Further, the CPU 502 executes an application program stored in the storage device 506 to execute various processes as the automation gate device 50.
- the RAM 504 provides a memory area necessary for the operation of the CPU 502.
- the CPU 502 functions as a verification requesting unit that requests the verification of the face image of the user U who undergoes the immigration control procedure using the automated gate device 50.
- the CPU 502 serving as the matching request unit includes a target face image that is a face image of the user U captured by the biometric information acquisition device 512, a plurality of registered face images registered in the third matching information DB 106b3 of the management server 10, Is requested to the management server 10 for 1: N. For this reason, the CPU 502 transmits the target face image captured by the biological information acquisition device 512 to the management server 10 together with the collation request as the target biological information.
- the CPU 502 may transmit a face feature amount, which is a feature amount extracted from the target face image, and request verification.
- the CPU 502 instead of requesting the above-mentioned 1: N collation, the CPU 502 associates the target face image of the user U with the information on the code symbol of the user U such as a passport, a boarding pass or a QR code. It is also possible to request the management server 10 to collate with the registered face image. In this case, when the management server 10 registers the photographed face image or passport face image of the user U acquired by the check-in terminal 20 in the user information DB 106a as a registered face image, the management server 10 transmits the passport and boarding information of the user U. It is registered in association with information on a ticket or a code symbol.
- the CPU 502 reads the information of the user U's passport, boarding pass or code symbol by a medium reading device (not shown), and transmits the read information to the management server 10 together with the target face image.
- the management server 10 acquires from the user information DB 106a a registered face image associated with the information on the passport, boarding pass or code symbol that matches the information on the passport, boarding pass or code symbol transmitted from the automation gate device 50.
- the management server 10 compares the target face image transmitted from the automation gate device 50 with the registered information face image acquired from the user information DB 106a on a 1: 1 basis.
- the management server 10 can also acquire a registered face image associated with information on a passport, a boarding pass, or a QR code from the third verification information DB 106b3.
- the CPU 502 also functions as a collation result acquisition unit that acquires collation result information indicating the collation result requested from the management server 10 from the management server 10.
- the matching result information indicates that the registered face image matching the target face image was found as a result of the matching, and that the identity of the user U who undergoes the immigration procedure was successfully confirmed, or that the matching registration information was matched. This indicates that the identification of the user U has failed without the face image being found.
- the collation result information indicates that the identity of the user U who undergoes the immigration procedure has been successfully matched with the target face image and the registered face image as a result of the collation, or used without a match. This indicates that the identification of the person U has failed.
- the CPU 502 outputs the comparison result information by performing the 1: N or 1: 1 comparison between the target face image and the registered face image as described above, instead of functioning as the matching request unit and the matching result acquisition unit. It can also be configured to function as a collating unit that performs the matching. In this case, the CPU 502 refers to the third collation information DB 106b3 of the management server 10 or refers to the collation information DB stored in the storage device 506 in synchronization with the third collation information DB 106b3, and Collation can be performed.
- the CPU 502 controls the gate 514 to permit the user U to pass through the gate 514.
- the CPU 502 functions as a status information transmitting unit that transmits status information that is information relating to the situation of the user U.
- the CPU 502 as a status information transmitting unit transmits status information indicating that the user U has completed the immigration control procedure to the management server. Send to 10.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the CPU 502 also functions as a display control unit that causes the display 510 to display a screen for guidance, notification, and the like for the user U.
- the CPU 502 as a display control unit causes the display 510 to display a guidance screen for guiding the usage of the automation gate device 50.
- the CPU 502 causes the display 510 to display a notification screen for notifying the user U that the personal identification has failed.
- the storage device 506 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 506 stores a program executed by the CPU 502, data referred to by the CPU 502 when the program is executed, and the like.
- the input device 508 is, for example, a touch panel incorporated in the display 510.
- the input device 508 functions as an input unit that receives an input of an instruction from the user U.
- the user U can input various information to the automation gate device 50 via the input device 508, and can input an instruction to execute processing.
- the display 510 functions as a display unit that displays various screens for the user U who undergoes immigration procedures using the automated gate device 50.
- the display 510 displays a guidance screen for guiding the usage of the automated gate device 50, a notification screen for the user U, and the like.
- the biometric information acquisition device 512 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U who undergoes the immigration checkup procedure.
- the biological information acquisition device 512 is, for example, a digital camera that photographs in front of the automation gate device 50, and detects the face of the user U standing in front of the automation gate device 50 in an image that is constantly or periodically captured, The face of the user U is photographed to acquire the face image.
- the gate 514 is controlled by the CPU 502 when the identity of the user U in the automated gate device 50 has been successfully passed and the user U has passed immigration control.
- the state shifts to an open state where the traffic of the user U is permitted.
- the type of the gate 514 is not particularly limited, and is, for example, a flapper gate that opens and closes a flapper provided from one side or both sides of the passage, and a turn style gate that rotates three bars.
- the communication unit 516 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 516 performs communication with the management server 10 and the like under the control of the CPU 502.
- the automated gate device 50 is configured.
- FIG. 6 is a block diagram illustrating an example of a hardware configuration of the signage terminal 60.
- the signage terminal 60 is a terminal that displays a guide to the boarding gate P6, an advertisement, and the like.
- the signage terminal 60 includes a CPU 602, a RAM 604, a storage device 606, a display 608, a biological information acquisition device 610, and a communication unit 612.
- the CPU 602, the RAM 604, the storage device 606, the display 608, the biological information acquisition device 610, and the communication unit 612 are connected to a bus line 614.
- the CPU 602 operates by executing a program stored in the storage device 606, and functions as a control unit that controls the operation of the entire signage terminal 60. Further, the CPU 602 executes an application program stored in the storage device 606 to execute various processes as the signage terminal 60.
- the RAM 604 provides a memory area necessary for the operation of the CPU 602.
- the CPU 602 functions as a face information transmission unit that transmits a face image of the user U in front of the signage terminal 60 to the management server 10.
- the user U in front of the signage terminal 60 is, for example, a user who is located in front of the signage terminal 60 and checks the guidance displayed on the signage terminal 60, a user U who passes in front of the signage terminal 60, and the like. is there.
- the CPU 602 as a face information transmitting unit transmits, to the management server 10, a target face image that is a face image of the user U captured by the biological information acquisition device 610 as target biological information.
- the CPU 602 may transmit a face feature amount, which is a feature amount extracted from the target face image, as the target biometric information, instead of transmitting the target face image.
- the management server 10 that has received the target face image from the signage terminal 60 collates the received target face image with a plurality of registered face images registered in the fourth verification information DB 106b4 at 1: N.
- the CPU 602 also functions as a display control unit that causes the display 608 to display a screen for guiding a guide to the boarding gate P6, an advertisement, and the like.
- the CPU 602 of the signage terminal 60 can also function as a collation request unit, a collation result acquisition unit, and a status information transmission unit, as described below, like the CPU 302 of the automatic baggage storage 30.
- the CPU 602 can function as a collation requesting unit that requests collation of the face image of the user U located in front of the signage terminal 60 or passing in front of the signage terminal 60.
- the CPU 602 serving as a matching request unit includes a target face image that is a face image of the user U captured by the biometric information acquisition device 610, and a plurality of registered face images registered in the fourth matching information DB 106b4 of the management server 10. Is requested to the management server 10 for 1: N. For this reason, the CPU 602 transmits the target face image captured by the biological information acquisition device 610 to the management server 10 together with a collation request as target biological information. Note that, instead of transmitting the target face image as the target biometric information, the CPU 602 may transmit a face feature amount, which is a feature amount extracted from the target face image, and request verification.
- the CPU 602 associates the target face image of the user U with the information of the user U's code symbol such as a passport, a boarding pass or a QR code. It is also possible to request the management server 10 to collate with the registered face image. In this case, when the management server 10 registers the photographed face image or passport face image of the user U acquired by the check-in terminal 20 in the user information DB 106a as a registered face image, the management server 10 transmits the passport and boarding information of the user U. It is registered in association with information on a ticket or a code symbol.
- the CPU 602 reads the information of the user U's passport, boarding pass or code symbol using a medium reader (not shown), and transmits the read information to the management server 10 together with the target face image.
- the management server 10 acquires, from the user information DB 106a, a registered face image associated with the information on the passport, boarding pass or code symbol that matches the information on the passport, boarding pass or code symbol transmitted from the signage terminal 60.
- the management server 10 collates the target face image transmitted from the signage terminal 60 with the registered information face image acquired from the user information DB 106a on a 1: 1 basis.
- the management server 10 can also acquire the registered face image associated with the information on the passport, the boarding pass, or the QR code from the fourth verification information DB 106b4.
- the CPU 602 can also function as a collation result acquisition unit that acquires collation result information indicating the collation result requested from the management server 10 from the management server 10.
- the matching result information indicates that the registered face image that matches the target face image was found as a result of the matching, and the identity of the user U in front of the signage terminal 60 was successfully confirmed or matched. This indicates that the identification of the user U has failed because the registered face image has not been found.
- the collation result information indicates that the identity of the user U in front of the signage terminal 60 has been successfully confirmed by matching the target face image and the registered face image as a result of the collation, or without matching. This indicates that the identification of the user U has failed.
- the CPU 602 collates the target face image with the registered face image at 1: N or 1: 1 and outputs the collation result information instead of functioning as the collation request unit and the collation result acquisition unit. It can also be configured to function as a collating unit that performs the matching.
- the CPU 602 refers to the fourth matching information DB 106b4 of the management server 10 or refers to the matching information DB stored in the storage device 606 in synchronization with the user information DB 106a to perform face image matching. It can be carried out.
- the CPU 602 functions as a status information transmitting unit that transmits status information that is information relating to the status of the user U.
- the CPU 602 as the status information transmission unit transmits status information indicating that the location of the user U in front of the signage terminal 60 or completion of the passage is completed. Send to 10.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the storage device 606 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 606 stores a program executed by the CPU 602, data referred to by the CPU 602 when the program is executed, and the like.
- the display 608 functions as a display unit that displays various screens.
- the display 608 displays a screen for guiding a guide to the boarding gate P6, an advertisement, and the like.
- the lead guidance, advertisement, and the like displayed on the display 608 correspond to, for example, an individual identified as the user U in front of the signage terminal 60.
- the biometric information acquisition device 610 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U in front of the signage terminal 60.
- the biometric information acquisition device 610 is, for example, a digital camera that photographs in front of the signage terminal 60.
- the face of the user U in front of the signage terminal 60 is detected in an image that is constantly or periodically photographed, the user The face of U is photographed and the face image is acquired.
- the communication unit 612 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 612 performs communication with the management server 10 and the like under the control of the CPU 602.
- the signage terminal 60 is configured.
- FIG. 7 is a block diagram illustrating an example of a hardware configuration of the boarding gate device 70.
- the boarding gate device 70 is a device that confirms that the user U is a passenger of an aircraft that can be boarded from the boarding gate P6 where the boarding gate device 70 is installed.
- the boarding gate device 70 includes a CPU 702, a RAM 704, a storage device 706, an input device 708, a display 710, a biological information acquisition device 712, a gate 714, and a communication unit 716. are doing.
- the CPU 702, the RAM 704, the storage device 706, the input device 708, the display 710, the biological information acquisition device 712, the gate 714, and the communication unit 716 are connected to the bus line 718.
- the CPU 702 operates by executing the program stored in the storage device 706, and functions as a control unit that controls the operation of the entire boarding gate device 70. Further, the CPU 702 executes an application program stored in the storage device 706 to execute various processes as the boarding gate device 70.
- the RAM 704 provides a memory area necessary for the operation of the CPU 702.
- the CPU 702 functions as a verification request unit that requests verification of the face image of the user U boarding the aircraft from the boarding gate P6 and confirmation of the boarding information.
- the CPU 702 serving as a matching request unit includes a target face image that is a face image of the user U captured by the biometric information acquisition device 712, and a plurality of registered face images registered in the fifth matching information DB 106b5 of the management server 10. Is requested to the management server 10 for 1: N. For this reason, the CPU 702 transmits the target face image captured by the biological information acquisition device 712 to the management server 10 as a target biological information together with a collation request. Note that, instead of transmitting the target face image as the target biometric information, the CPU 702 may transmit a face feature amount, which is a feature amount extracted from the target face image, and request verification.
- the CPU 702 associates the target face image of the user U with the information on the code symbol of the user U such as a passport, a boarding pass or a QR code. It is also possible to request the management server 10 to collate with the registered face image. In this case, when the management server 10 registers the photographed face image or passport face image of the user U acquired by the check-in terminal 20 in the user information DB 106a as a registered face image, the management server 10 transmits the passport and boarding information of the user U. It is registered in association with information on a ticket or a code symbol.
- the CPU 702 reads information of the user U's passport, boarding pass or code symbol using a medium reading device (not shown), and transmits the read information to the management server 10 together with the target face image.
- the management server 10 acquires, from the user information DB 106a, a registered face image associated with the information on the passport, the boarding pass or the code symbol that matches the information on the passport, the boarding pass or the code symbol transmitted from the boarding gate device 70.
- the management server 10 compares the target face image transmitted from the boarding gate device 70 with the registered information face image acquired from the user information DB 106a on a 1: 1 basis.
- the management server 10 can also acquire the registered face image associated with the information of the passport, the boarding pass, or the QR code from the fifth verification information DB 106b5.
- the CPU 702 serving as the collation requesting unit instructs the management server 10 to confirm that the boarding information associated with the registered face image that matches the target face image is related to an aircraft that can be boarded from the boarding gate P6. Request.
- the CPU 702 also functions as a collation result acquisition unit that acquires collation result information indicating the collation result requested from the management server 10 from the management server 10.
- the matching result information indicates that the registered face image matching the target face image was found as a result of the matching, and the identity of the user U who boarded the aircraft was successfully confirmed or matched. This indicates that the identification of the user U has failed because the registered face image has not been found.
- the collation result information indicates that the boarding information has been confirmed to be related to the aircraft and the boarding information has been successfully confirmed, or that the boarding information has not been confirmed without being confirmed to be related.
- the collation result information indicates that the identity of the user U who has boarded the aircraft has succeeded or has not coincided with the target face image and the registered face image as a result of the collation. This indicates that the identification of the user U has failed.
- the CPU 702 performs the 1: N or 1: 1 comparison between the target face image and the registered face image in the fifth matching information DB 106b5 as described above, instead of functioning as the matching request unit and the matching result obtaining unit. It can also be configured to function as a collating unit that outputs collation result information. Further, the CPU 702 may be configured to confirm that the boarding information associated with the registered face image that matches the target face image is related to an aircraft that can be boarded from the boarding gate P6. In these cases, the CPU 702 refers to the fifth collation information DB 106b5 of the management server 10 or refers to the collation information DB stored in the storage device 706 in synchronization with the fifth collation information DB 106b5. And boarding information can be checked.
- the CPU 702 controls the gate 714 to notify the user U of the gate 714. Allow traffic.
- the CPU 702 also functions as a status information transmitting unit that transmits status information that is information on the status of the user U.
- the CPU 702 as a status information transmitting unit allows the user U to pass through the gate 714 and, when the user U completes boarding the aircraft, notifies that the user U has completed boarding the aircraft.
- the status information is transmitted to the management server 10.
- the status information is associated with the user information of the user U or at least one of face information, passport information, and boarding information included in the user information in the management server 10.
- the CPU 702 also functions as a display control unit that causes the display 710 to display a screen for guidance, notification, and the like for the user U.
- the CPU 702 as a display control unit causes the display 710 to display a guidance screen for guiding the usage of the boarding gate device 70.
- the CPU 702 causes the display 710 to display a notification screen for notifying the user U that the personal identification has failed.
- the verification result information indicates that boarding information check has failed
- CPU 702 causes display 710 to display a notification screen notifying user U that boarding information check has failed.
- the storage device 706 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 706 stores a program executed by the CPU 702, data referred to by the CPU 702 when the program is executed, and the like.
- the input device 708 is, for example, a touch panel incorporated in the display 710.
- the input device 708 functions as an input unit that receives an input of an instruction from the user U.
- the user U can input various information to the boarding gate device 70 via the input device 708 or input an instruction to execute a process.
- the display 710 functions as a display unit that displays various screens for the user U boarding the aircraft from the boarding gate P6.
- the display 710 displays a guidance screen for guiding the usage of the boarding gate device 70, a notification screen for the user U, and the like.
- the biometric information acquisition device 712 functions as a biometric information acquisition unit that acquires a face image of the user U from the boarding gate P6 as biometric information of the user U boarding the aircraft.
- the biological information acquisition device 712 is, for example, a digital camera that captures an image in front of the boarding gate device 70, and detects the face of the user U standing in front of the boarding gate device 70 in an image that is constantly or periodically captured. The face of the user U is photographed to acquire the face image.
- the gate 714 is controlled by the CPU 702 to change from the closed state during standby to block the traffic of the user U to the traffic of the user U. Move to the open state to allow.
- the type of the gate 714 is not particularly limited, and is, for example, a flapper gate that opens and closes a flapper provided from one side or both sides of the passage, a turn style gate that rotates three bars, and the like.
- the communication unit 716 is connected to the network NW, and transmits and receives data via the network NW.
- the communication unit 716 performs communication with the management server 10 and the like under the control of the CPU 702.
- the boarding gate device 70 is configured.
- FIG. 8 is a block diagram illustrating an example of a hardware configuration of the management server 10.
- the management server 10 manages the user information and status of the user U, and in response to the face image matching request, the target face image and a plurality of registered faces in any of the first to fifth matching information DBs 106b1 to 106b5. This is an information processing device that matches an image.
- the function of the management server 10 may be realized by a single server, or may be realized by a plurality of server devices.
- the management server 10 includes a CPU 102, a RAM 104, a storage device 106, and a communication unit 108, as shown in FIG.
- the CPU 102, the RAM 104, the storage device 106, and the communication unit 108 are connected to a bus line 110.
- the CPU 102 operates by executing a program stored in the storage device 106, and functions as a control unit that controls the operation of the entire management server 10. Further, the CPU 102 executes an application program stored in the storage device 106 to execute various processes as the management server 10.
- the RAM 104 provides a memory area necessary for the operation of the CPU 102.
- the CPU 102 functions as an information management unit that records and manages the user information of the user U received from the check-in terminal 20 in the storage device 106.
- the CPU 102 as an information management unit registers and manages the user information received from the check-in terminal 20 in a user information DB 106a stored in the storage device 106.
- the CPU 102 registers the received user information in the user information DB 106a.
- the user information of the user U includes the identification information, the face information, and the boarding information of the user U associated with each other.
- the face information is a photographed face image or a passport face image acquired by the check-in terminal 20.
- the registered face image which is a photographed face image or a passport face image registered in the user information DB 106a, is used to confirm the identity of the user U in the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, and the boarding gate device 70. Is used for face image matching.
- the CPU 102 functions as a status management unit that records and manages the status of the user U in the storage device 106 with respect to a plurality of procedures until the user U boardes the aircraft.
- the CPU 102 as a status management unit records and manages the status of the user U in the user information DB 106a in association with the user information of the user U. Based on the status information received from the check-in terminal 20, the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, and the boarding gate device 70 which are external devices, the CPU 102 to manage.
- the CPU 102 manages the status regarding the location of the user U in front of the signage terminal 60 or the status regarding the passage of the user U, which is the procedure of the user U, based on the result of matching the target face image received from the signage terminal 60.
- the CPU 102 manages the status of each procedure of the user U, together with a time limit, which is a time limit set as described later, for a plurality of procedures until the user U boardes the aircraft.
- the CPU 102 manages the status regarding the check-in procedure of the user U. That is, when receiving the status information indicating that the check-in procedure of the user U has been completed from the check-in terminal 20, the CPU 102 changes the status regarding the check-in procedure of the user U in the user information DB 106a from incomplete to completed. Update.
- the CPU 102 manages the status relating to the baggage deposit procedure of the user U. That is, when the CPU 102 receives the status information indicating that the baggage check-up procedure of the user U is completed from the automatic baggage storage machine 30, the CPU 102 completes the status regarding the baggage check-up procedure of the user U from the incomplete state in the user information DB 106a. Update to Note that the baggage check-in procedure of the user U is an arbitrary procedure performed when it is necessary to check baggage. For this reason, the status regarding the baggage deposit procedure of the user U may remain incomplete. This is intended for the case where some users U have few baggage and cannot keep their baggage.
- the CPU 102 manages the status of the security check procedure of the user U. That is, when receiving the status information indicating that the security inspection procedure of the user U is completed from the security inspection device 40, the CPU 102 changes the status regarding the security inspection procedure of the user U in the user information DB 106a from incomplete to completed. Update.
- the CPU 102 manages the status relating to the immigration control procedure of the user U. That is, when receiving the status information indicating that the immigration control procedure of the user U is completed from the automation gate device 50, the CPU 102 changes the status relating to the immigration control procedure of the user U in the user information DB 106a from incomplete to completed. Update.
- the CPU 102 manages the status relating to the user U boarding the aircraft. That is, when the CPU 102 receives the status information indicating that the boarding of the user U on the aircraft has been completed from the boarding gate device 70, the CPU 102 changes the status regarding the boarding of the user U on the aircraft in the user information DB 106a from incomplete. Update to done.
- the CPU 102 also manages the status of the user U in front of the signage terminal 60 or the passage.
- the CPU 102 upon receiving the target face image from the signage terminal 60, the CPU 102 checks the received target face image against a plurality of registered face images in the user information DB 106a. When the matching registered face image is found as a result of the comparison, the CPU 102 updates the status of the user U in the user information DB 106a regarding the previous location or passage of the signage terminal 60 from incomplete to complete.
- the CPU 102 as the status management unit performs a plurality of procedures up to the boarding of the user U, such as a check-in procedure, a baggage deposit procedure, a security check procedure, a departure examination procedure, a location or passage in front of the signage terminal 60, and an aircraft. Manage your boarding status.
- the CPU 102 manages the status of each procedure of the user U based on the result of the collation between the target face image acquired at the time of each procedure and the registered face image. That is, when the collation between the target face image acquired in each procedure and the registered face image matches, the CPU 102 updates the status of each procedure of the user U from incomplete to complete.
- One procedure included in the plurality of procedures at the airport A and another procedure following the one procedure means, for example, two adjacent procedures in the order of the plurality of procedures from check-in procedure to boarding the aircraft.
- another procedure following one procedure means the next procedure after the one procedure.
- the security check procedure is one procedure
- the immigration procedure is another procedure following the one procedure.
- the CPU 102 does not necessarily need to manage the status of the user U with respect to all of the plurality of procedures, but can manage the status of the user U with respect to any one or a plurality of procedures among these procedures.
- the CPU 102 as the information management unit and the status management unit registers the user information and the status of the user U in the first to fifth verification information DBs 106b1 to 106b5 together with or instead of the user information DB 106a.
- Manage The CPU 102 updates and manages the status of the user U registered in the first to fifth collation information DBs 106b1 to 106b5 in the same manner as in the user information DB 106a.
- the CPU 102 stores the user information and the status of the user U in any of the first to fifth collation information DBs 106b1 to 106b5 according to the status of the user U updated according to the procedure of the user U as described above. register.
- the user information registered in the first to fifth matching information DBs 106b1 to 106b5 has, for example, the same content as the user information registered in the user information DB 106a, but includes at least a registered face image. I just need.
- the CPU 102 registers the user information and the status of the user U whose status related to the check-in procedure is completed and the status related to other procedures is not completed in the first verification information DB 106b1.
- the status relating to the other procedures referred to herein is the status relating to baggage deposit procedures, security inspection procedures, immigration procedures, location or passage in front of the signage terminal 60, and boarding an aircraft.
- the CPU 102 moves and registers the user information and the status of the user U. I do. That is, the CPU 102 moves and registers the user information and status of the user U from the first collation information DB 106b1 to the second collation information DB 106b2.
- the CPU 102 registers the user information and the status of the user U whose status regarding the check-in procedure and the baggage deposit procedure has been completed and the status regarding other procedures has not been completed in the second verification information DB 106b2.
- the status relating to the other procedures referred to here is a security inspection procedure, an immigration procedure, a status relating to the location or passage in front of the signage terminal 60, and boarding an aircraft.
- the CPU 102 moves and registers the user information and the status of the user U. I do. That is, the CPU 102 moves and registers the user information and status of the user U from the second collation information DB 106b2 to the third collation information DB 106b3.
- the CPU 102 registers the user information and the status of the user U whose status regarding the check-in procedure, the baggage deposit procedure and the security check procedure is completed, and the status regarding other procedures is not completed, in the third verification information DB 106b3.
- the status relating to the other procedures referred to here is the status relating to the immigration procedure, the location or passage in front of the signage terminal 60, and the boarding of the aircraft.
- the CPU 102 moves and registers the user information and the status of the user U. I do. That is, the CPU 102 moves and registers the user information and status of the user U from the third matching information DB 106b3 to the fourth matching information DB 106b4.
- the CPU 102 checks the user information and the status of the user U who has completed the status regarding the check-in procedure, the baggage deposit procedure, the security check procedure and the immigration procedure, and the status regarding the other procedure is not completed, in the fourth verification information DB 106b4. Register with.
- the status relating to the other procedure referred to here is a status relating to the location or passage in front of the signage terminal 60 and boarding the aircraft.
- the CPU 102 updates the status of the user U whose user information is registered in the fourth verification information DB 106b4 with respect to the location or passage in front of the signage terminal 60 from incomplete to complete, and then updates the user of the user U. Performs information and status transfer registration. That is, the CPU 102 moves and registers the user information and status of the user U from the fourth collation information DB 106b4 to the fifth collation information DB 106b5.
- the CPU 102 registers, in the fifth verification information DB 106b5, the user information and the status of the user U whose status relating to boarding the aircraft is not completed and the status relating to other procedures is completed.
- the status regarding the other procedures referred to here is the status regarding the check-in procedure, the baggage deposit procedure, the security check procedure, the immigration examination procedure, and the location or passage in front of the signage terminal 60.
- the CPU 102 updates the user information and the status of the user U with each other. The information is deleted from the fifth matching information DB 106b5.
- the CPU 102 registers the user information in the plurality of first to fifth verification information DBs 106b1 to 106b5 according to the status regarding the procedure of the user U corresponding to the user information including the registered face image. . That is, when the status regarding one procedure in the series of procedures after the check-in procedure is completed, the CPU 102 reads the user information including the registered face image of the user from one DB corresponding to the one procedure into one DB. Move to another DB corresponding to another procedure following the procedure and register it.
- the CPU 102 registers the registered face images included in the user information registered in the first to fifth collation information DBs 106b1 to 106b5 in the baggage deposit procedure, the security check procedure, the immigration examination procedure, the location in front of the signage terminal 60 or Used for verification when passing and boarding an aircraft.
- the CPU 102 sets, based on the boarding information of the user U, a time limit that is a predetermined time that the user U should complete for a plurality of procedures of the user U including each procedure at the airport A. Functions as a setting unit.
- the procedures for setting the expiration time are baggage check-in procedures, security check procedures, immigration control procedures, and boarding of aircraft after check-in procedures.
- the CPU 102 treats the location or passage of the user U in front of the signage terminal 60 as a procedure for setting a deadline time.
- the CPU 102 sets deadlines for a plurality of procedures until the user U boardes the aircraft.
- the CPU 102 as the time limit setting unit calculates the boarding time at which the boarding of the user U on the aircraft is closed from the departure time at the departure date and time included in the boarding information of the user U. For example, the CPU 102 can calculate the time 10 minutes before the departure time of the aircraft as the boarding time. Further, the CPU 102 can also obtain the boarding time included in the boarding information itself of the user U from the boarding information.
- the CPU 102 From the calculated or acquired boarding time, the CPU 102, based on the calculated or acquired boarding time, performs the following steps on the baggage deposit procedure, security check procedure, immigration procedure, location or passage in front of the signage terminal 60, and boarding the aircraft. Calculates the deadline time to be completed by then.
- the CPU 102 can set respective deadlines for the plurality of procedures based on the order of the plurality of procedures until the user U boardes the aircraft and the boarding information. That is, the CPU 102 can set the deadline of the procedure later as the order of the plurality of procedures up to the user U boarding the aircraft is closer to the procedure of boarding the aircraft.
- the CPU 102 can calculate the time 60 minutes before the boarding time as the time limit for the baggage check-in procedure. Further, for example, the CPU 102 can calculate a time 30 minutes before the boarding time as a deadline time of the security inspection procedure. Further, for example, the CPU 102 can calculate a time 20 minutes before the boarding time as a time limit for the immigration control procedure. Further, for example, the CPU 102 can calculate the time 15 minutes before the boarding time as the location before the signage terminal 60 or the time limit for passing. Further, for example, the CPU 102 can calculate the time 10 minutes before the boarding time as the time limit for boarding the aircraft. Note that the CPU 102 can also calculate the deadline time for each procedure from the departure time itself included in the boarding information. Further, the CPU 102 can also obtain the boarding time or the departure time from the flight number of the aircraft included in the boarding information with reference to a database or the like regarding the flight schedule, and calculate the deadline time for each procedure.
- the CPU 102 as the time limit setting unit can set the time limit according to the number of users U who have performed the check-in procedure. That is, the CPU 102 can set a shorter time between the deadline time and the boarding time as the number of users U who have performed the check-in procedure is larger.
- the CPU 102 as a time limit setting unit performs each of the above-described operations in accordance with the congestion status of the airport A, which is a facility where the user U boardes an aircraft, in other words, in accordance with the number of users U of the airport A.
- the expiration time of the procedure can be appropriately changed and set.
- the CPU 102 can determine, for example, the congestion state of the airport A based on the number of pieces of user information registered in the user information DB 106a per unit time. That is, it is possible to determine that the airport A is more congested as the number of pieces of user information registered in the user information DB 106a per unit time increases.
- the CPU 102 can set the deadline time earlier as the airport A becomes more crowded.
- the CPU 102 as a time limit setting unit may record and manage the time limit of each set procedure in the user information DB 106a in association with, for example, the user information and status of the user U in the user information DB 106a. it can. That is, the CPU 102 as a status management unit can manage the status of each procedure of the user U together with the set deadline time.
- the CPU 102 as the time limit setting unit performs the check-in procedure, the security check procedure, the immigration examination procedure, the location or passage in front of the signage terminal 60, and the aircraft Set the deadline time as the deadline for boarding on. Note that the CPU 102 does not necessarily need to set the deadline time for all of the plurality of procedures, and can set the deadline time for any one or a plurality of the procedures.
- the CPU 102 also functions as a determination unit that determines whether or not the status has not been completed and the expiration time has passed for each procedure up to the boarding of the user U whose expiration time has been set as described above.
- the CPU 102 as a determination unit can determine, for an incomplete procedure, for example, whether the expiration time has expired regularly or improperly.
- the CPU 102 functions as an alert unit, and generates an alert indicating that the procedure is not completed after the expiration of the expiration time for the procedure of the user U who has determined that the expiration time has elapsed with the status being incomplete. And send.
- the CPU 102 as an alert unit can transmit the information to the business terminal 80 carried by the employee S. For example, when the location of the user U is specified as described in the third embodiment, the CPU 102 can transmit an alert to the business terminal 80 carried by the employee S near the location. . Further, the CPU 102 can notify or display the staff S near the specified location of the user U on the business terminal 80 carried by the staff S and the other staff S. Accordingly, the CPU 102 can teach the staff S which of the staff S is appropriate to respond to the alert.
- the alert can include, for example, a part or all of the user information of the user U who has not completed the procedure, a part or all of the boarding information, a status related to each procedure, and the like.
- the alert may include a registered face image of the user U, preferably a registered face image that is a captured face image of the user U captured by the check-in terminal 20.
- the staff member S who has received the alert at the business terminal 80 can search for the user U who has not completed the procedure by using the registered face image included in the alert as a clue.
- the registered face image included in the alert may be a passport face image of the user U, but is a face image captured by the check-in terminal 20 indicating a recent face of the user U at the time of check-in procedure. Is preferred.
- the CPU 102 When the CPU 102 receives the target face image and the collation request or the target face image from the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, the signage terminal 60, and the boarding gate device 70, the user U Function as a collating unit for collating the face image of the subject.
- the CPU 102 as the matching unit compares the target face image, which is the target biometric information, with the plurality of registered face images, which are the registered biometric information registered in any of the first to fifth verification information DBs 106b1 to 106b5, on a 1: N basis. Match with.
- the CPU 102 compares the face feature amount extracted from the target face image as the target biometric information with the face feature amount extracted from the registered face image as the registered biometric information.
- the CPU 102 as the matching unit selects a plurality of registered face images to be matched with the target face image based on the status of the user U corresponding to the registered face image. That is, the CPU 102 compares the target biometric information acquired in the procedure with the registered face image of the user U whose latest status regarding the procedure in which the target face image was acquired is not completed. For this purpose, the CPU 102 checks the registered face image registered in the DB selected from the first to fifth check information DBs 106b1 to 106b5 with the target face image.
- the CPU 102 compares the received target face image with the plurality of vouchers registered in the first collation information DB 106 b 1. Check with the registered face image. In the first collation information DB 106b1, a registered face image of the user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed is registered. Thereby, the CPU 102 can compare the target face image acquired at the time of the baggage check-up procedure with the registered face image of the user U whose status regarding the check-in procedure is completed but the status regarding the baggage check-up procedure is not completed. it can.
- the CPU 102 does not check the registered face image of the user U who has not completed the check-in procedure, which is the procedure immediately before the baggage storage procedure, and registers the user U who has already completed the baggage storage procedure. There is no collation with the face image. Therefore, in the collation of the target face image acquired in the baggage deposit procedure, it is possible to avoid unnecessary collation with the registered face image.
- the CPU 102 when receiving the target face image and the verification request from the security inspection device 40, compares the received target face image with the plurality of registered face images registered in the second verification information DB 106b2. Collate.
- the second collation information DB 106b2 registered face images of the user U whose status regarding the check-in procedure and the baggage deposit procedure has been completed and whose status regarding other procedures has not been completed are registered.
- the CPU 102 can compare the target face image acquired at the time of the security inspection procedure with the registered face image of the user U whose status regarding the baggage check-in procedure is completed but the status regarding the security inspection procedure is not completed. it can.
- the CPU 102 does not check the registered face image of the user U who has not completed the baggage check-in procedure of the procedure immediately before the security check procedure, and does not perform the check of the registered face of the user U who has already completed the security check procedure. There is no collation with the image. Therefore, in the collation of the target face image acquired in the security inspection procedure, it is possible to avoid unnecessary collation with the registered face image.
- the CPU 102 compares the received target face image with the plurality of registered face images registered in the third matching information DB 106b3. Collate.
- the third verification information DB 106b3 registered face images of the user U whose status regarding the check-in procedure, baggage deposit procedure and security check procedure is completed, and the status regarding other procedures is not completed are registered.
- the CPU 102 can compare the target face image acquired during the immigration control procedure with the registered face image of the user U who has completed the security check procedure and has not completed the immigration control procedure. it can.
- the CPU 102 does not check the registered face image of the user U who has already completed the immigration control procedure without performing the collation with the registered face image of the user U for whom the security check procedure in the procedure immediately before the immigration control procedure has not been completed. There is no collation with the image. Therefore, in the collation of the target face image acquired during the immigration examination procedure, it is possible to avoid unnecessary collation with the registered face image.
- the CPU 102 when the target face image is received from the signage terminal 60, the CPU 102 as the matching unit checks the received target face image against a plurality of registered face images registered in the fourth matching information DB 106b4.
- the fourth verification information DB 106b4 registered face images of the user U whose status regarding the check-in procedure, baggage deposit procedure, security check procedure and immigration examination procedure is completed, and status regarding other procedures are not completed are registered.
- the CPU 102 uses the target face image acquired during the location or passage in front of the signage terminal 60 and the status where the status relating to the immigration examination procedure is completed and the status relating to the location or passage in front of the signage terminal 60 is not completed.
- the registered face image of the person U can be collated.
- the CPU 102 does not collate with the registered face image of the user U who has not completed the immigration control procedure of the location immediately before the signage terminal 60 or the procedure immediately before passing the signage terminal 60. There is no need to collate with the registered face image of the user U who has completed location or passing. Therefore, in the collation of the target face image acquired at the location before or at the signage terminal 60, it is possible to avoid unnecessary collation with the registered face image.
- the CPU 102 As the checking unit checks the received target face image against a plurality of registered face images registered in the fifth check information DB 106b5.
- the fifth verification information DB 106b5 registered face images of the user U whose status relating to boarding the aircraft is not completed and whose status relating to other procedures is completed are registered. Accordingly, the CPU 102 registers the target face image acquired at the time of boarding the aircraft and the user U whose status regarding the location or passage in front of the signage terminal 60 is completed and the status regarding boarding the aircraft is not completed.
- the face image can be collated.
- the CPU 102 does not check the location in front of the signage terminal 60 or the registered face image of the user U who has not completed the passage before the signage terminal 60 in the procedure immediately before boarding the aircraft. There is no need to perform collation with the completed face image of the user U. Therefore, in the collation of the target face image acquired when boarding the aircraft, it is possible to avoid unnecessary collation with the registered face image.
- the series of procedures up to boarding an aircraft includes one procedure followed by another procedure.
- the CPU 102 as a collation unit collates the target face image acquired at the time of another procedure with the registered face image of the user U whose status related to one procedure is completed and the status related to another procedure is not completed.
- the CPU 102 as the matching unit registers the first to fifth information in which the user information according to the status of the user U is registered as the DB of the registered face image to be matched with the target face image according to each procedure.
- the collation information DBs 106b1 to 106b5 are selected and used. For this reason, according to the present embodiment, it is possible to reduce the number of a plurality of registered face images, which are a population to be compared with the target face image, and to improve the matching accuracy of the face image, which is biometric information.
- the CPU 102 as the matching unit matches the target face image from the plurality of registered face images by matching the target face image with each of the plurality of registered face images in the first to fifth matching information DBs 106b1 to 106b5. Attempt to find registered face images.
- the CPU 102 also functions as a transmission unit, and performs verification result information indicating a verification result for each of the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, and the boarding gate device 70 that transmitted the verification request. Send The collation result information indicates collation match or collation mismatch.
- the comparison result information indicates that the registered face image matching the target face image was found as a result of the matching, and that the identity of the user U performing the baggage check-in procedure was successfully confirmed, or the matching registered face image was not found. Indicates that the user U has failed in the identity verification.
- the CPU 102 may collate the target face image with each or any one of the registered face images in the first to fifth collation information DBs 106b1 to 106b5.
- the CPU 102 may perform a 1: 1 comparison between the captured face image captured by the biometric information acquisition device 214 and the passport face image acquired by the medium reading device 212, instead of the CPU 202 of the check-in terminal 20. it can.
- the CPU 102 receives, from the check-in terminal 20, the captured face image and the passport face image to be collated, or the face feature amounts thereof. Further, the CPU 102 transmits, to the check-in terminal 20, verification result information indicating the result of the verification between the captured face image and the passport face image.
- the storage device 106 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 106 stores a program executed by the CPU 102, data referred to by the CPU 102 when the program is executed, and the like.
- the storage device 106 also stores a user information DB 106a and first to fifth collation information DBs 106b1 to 106b5.
- the user information DB 106a all pieces of user information of a plurality of users U who have performed a check-in procedure at the check-in terminal 20 are registered.
- the status of the user U is registered in the user information DB 106a in association with the user information.
- User information and status corresponding to the status of the user U are registered in the first to fifth verification information DBs 106b1 to 106b5, respectively.
- the storage device 106 may store both the user information DB 106a and the first to fifth matching information DBs 106b1 to 106b5, or may store only the first to fifth matching information DBs 106b1 to 106b5. It may be.
- the communication unit 108 is connected to the network NW and transmits and receives data via the network NW.
- the communication unit 108 performs communication with the check-in terminal 20, the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, the signage terminal 60, the boarding gate device 70, and the like, under the control of the CPU 102.
- the management server 10 is configured.
- FIG. 9 is a block diagram illustrating an example of a hardware configuration of the business terminal 80.
- the business terminal 80 is a terminal carried by a staff member S such as a staff member of an airline company, a staff member of an airport company and the like, and is, for example, a tablet terminal, a smartphone, a mobile phone, or the like.
- the business terminal 80 may be, for example, a stationary information processing terminal installed in a business place such as a counter where staff members work.
- the business terminal 80 includes a CPU 802, a RAM 804, a storage device 806, an input device 808, a display 810, a mobile communication unit 812, and a short-range wireless communication unit 814.
- the CPU 802, the RAM 804, the storage device 806, the input device 808, the display 810, the mobile communication unit 812, and the short-range wireless communication unit 814 are connected to the bus line 816.
- the CPU 802 operates by executing a program stored in the storage device 806, and functions as a control unit that controls the operation of the entire business terminal 80. Further, the CPU 802 executes an application program stored in the storage device 806 to execute various processes as the business terminal 80.
- the RAM 804 provides a memory area necessary for the operation of the CPU 802.
- the CPU 802 functions as an information acquisition unit, accesses the user information DB 106a of the management server 10, and acquires the user information and status of the user U recorded in the user information DB 106a. Can be.
- the CPU 802 as an information acquisition unit can display the acquired user information and status on the display 810.
- the CPU 802 functions as an alert receiving unit, and can receive an alert transmitted from the management server 10.
- the CPU 802 as an alert receiving unit can display the received alert on the display 810.
- the storage device 806 is configured by a storage medium such as a nonvolatile memory and a hard disk drive, and functions as a storage unit.
- the storage device 806 stores a program executed by the CPU 802, data referred to by the CPU 802 when the program is executed, and the like.
- the input device 808 is, for example, a touch panel incorporated in the display 810.
- the input device 808 functions as an input unit that receives input of an instruction from the staff S.
- the staff member S can input various information to the business terminal 80 via the input device 808, and can input an instruction to execute processing.
- the display 810 functions as a display unit that displays various screens for the staff member S.
- the display 810 displays a screen showing the contents of the user information and status of the user U recorded in the user information DB 106a, a screen showing the contents of the alert received from the management server 10, and the like.
- the mobile communication unit 812 connects to the network NW via the mobile communication network according to the control of the CPU 802.
- the communication system of the mobile communication unit 812 is not particularly limited, for example, a third generation mobile communication system, an LTE (Long Term Evolution) system, a fourth generation mobile communication system, and the like can be mentioned.
- the short-range wireless communication unit 814 performs wireless communication with an access point, an external device, and the like under the control of the CPU 802, and connects to the network NW via an access point in the premises of the airport A, for example.
- the communication method of the short-range wireless communication unit 814 is not particularly limited.
- a wireless LAN method such as Wi-Fi (registered trademark), a Bluetooth (registered trademark) communication method, and an NFC (Near Field Communication) method And an infrared communication system.
- the business terminal 80 is configured.
- the user information corresponding to the status of the user U is registered as the DB of the registered face image to be matched with the target face image according to each procedure.
- the first to fifth matching information DBs 106b1 to 106b5 are selectively used. For this reason, according to the present embodiment, it is possible to reduce the number of a plurality of registered face images that are a population to be collated with the target face image, and to improve the collation accuracy.
- the management server 10 sets a time limit for each procedure until boarding for the user U who is scheduled to board the aircraft based on the boarding information acquired by the check-in terminal 20. To manage the status of each procedure of the user U. Therefore, according to the information processing system 1 according to the present embodiment, the situation of the user U who is scheduled to board the aircraft can be grasped and managed in more detail.
- the management server 10 when the expiration time elapses without the status of the procedure being completed, the management server 10 generates an alert indicating that, and transmits the alert to the business terminal 80. Further, the alert includes a registered face image of the user U. Therefore, according to the information processing system 1 according to the present embodiment, the staff S can easily search for the user U who has not completed the procedure by using the registered face image of the user U as a clue.
- FIG. 10 is a sequence diagram showing operations of the check-in terminal 20 and the management server 10.
- the user U arriving at the airport A goes to the check-in lobby P1 and performs a check-in procedure at the check-in terminal 20.
- the check-in terminal 20 and the management server 10 execute the processing shown in FIG. 10 every time each of the plurality of users U performs the check-in procedure.
- the medium reading device 212 of the check-in terminal 20 determines whether or not the passport of the user U is held over the reading unit (step S102), and waits until the passport is held (step S102). S102, NO).
- the medium reading device 212 determines that the passport is held (step S102, YES)
- the medium reading device 212 acquires the passport information of the user U from the held passport (step S104).
- the acquired passport information includes the passport face image of the user U.
- the medium reading device 212 can also acquire the identity information of the user U from the passport.
- the medium reading device 212 determines whether or not the air ticket medium of the user U is held over the reading unit (step S106), and waits until the air ticket medium is held (step S106, NO).
- the medium reading device 212 determines that the air ticket medium is held (step S106, YES)
- the medium reading device 212 acquires the boarding information of the user U from the held passport (step S108). At this time, the medium reading device 212 can also acquire the identity information of the user U from the air ticket medium.
- step S104 for acquiring passport information is not limited to the above case. Any one of steps S104, S108, and S110 may be performed in the preceding order, or all or a part of steps S104, S108, and S110 may be performed simultaneously.
- the biological information acquisition device 214 of the check-in terminal 20 photographs the face of the user U standing in front of the check-in terminal 20, and acquires a photographed face image that is the face image of the user U (step S110). .
- the CPU 202 of the check-in terminal 20 compares the captured face image captured by the biological information obtaining device 214 with the passport face image obtained by the medium reading device 212 on a 1: 1 basis (step S112).
- the CPU 202 determines that the verification of the captured face image matches the verification of the passport face image and succeeds in the identification (step S114, YES)
- the CPU 202 transmits the user information of the user U to the management server 10 via the network NW.
- the user information includes identification information, face information, and boarding information of the user U associated with each other.
- the CPU 102 of the management server 10 When the CPU 102 of the management server 10 receives the user information from the check-in terminal 20, the CPU 102 registers the received user information in the user information DB 106a (Step S118). The CPU 102 registers the photographed face image or passport face image included in the user information in the user information DB 106a as a registered face image. In this way, the check-in terminal 20 completes the check-in procedure for the user U. The user U who has completed the check-in procedure goes to the baggage counter P2 if it is necessary to deposit baggage, and goes to the security checkpoint P3 if it is not necessary.
- the CPU 202 of the check-in terminal 20 sends status information indicating that the check-in procedure of the user U is completed via the face image collation to the management server 10 via the network NW. (Step S120).
- the CPU 102 of the management server 10 receives the status information from the check-in terminal 20, which is an external device, the status of the check-in procedure of the user U in the user information DB 106a is updated from incomplete to complete (step S122).
- the CPU 102 manages the status regarding the check-in procedure of the user U based on the result of the collation of the photographed face image acquired at the time of the check-in procedure with the passport face image. That is, when the collation between the captured face image and the passport face image acquired at the time of the check-in procedure matches, the status of the user U regarding the check-in procedure is updated from incomplete to complete.
- the CPU 102 registers the user information and status of the user U whose status regarding the check-in procedure has been updated from incomplete to completed in the first collation information DB 106b1.
- step S114 when the CPU 202 determines that the verification between the captured face image and the passport face image does not match and the identification has failed (step S114, NO), the identification of the user U has failed. Is notified (step S124). At this time, the CPU 202 causes the display 210 to display a notification screen for notifying that the personal identification has failed. Note that the CPU 202 can also notify the user U that the identity verification has failed, for example, by voice, together with or instead of displaying the notification screen.
- the user U can perform a check-in procedure at a manned check-in counter instead of the check-in procedure by the check-in terminal 20.
- the terminal operated by the staff of the check-in counter can execute the same processing as the above-described check-in terminal 20.
- the user U can use online check-in performed from the website of the airline instead of the check-in procedure by the check-in terminal 20.
- the user U can separately register a face image as a registered face image in the user information DB 106a of the management server 10 from a dedicated terminal installed at the airport A.
- the CPU 102 of the management server 10 compares the user information and status of the user U registered in the user information DB 106a as described above with the first to fifth collation information DBs 106b1 to 106b5 according to the status of the user U. Are sequentially moved and registered.
- FIG. 11 is a sequence diagram illustrating operations of the automatic baggage storage device 30 and the management server 10.
- the user U who has completed the check-in procedure goes to the baggage counter P2 as necessary, and performs the baggage deposit procedure with the automatic baggage depositing machine 30.
- the automatic baggage storage device 30 and the management server 10 execute the processing shown in FIG. 11 each time each of the plurality of users U performs the baggage storage procedure.
- the biometric information acquisition device 312 of the automatic baggage storage device 30 constantly or regularly photographs the front of the automatic baggage storage device 30 and stands in front of the automatic baggage storage device 30 in the captured image. It is determined whether the face of the user U has been detected (step S202). The biological information acquisition device 312 waits until the face of the user U is detected in the image (step S202, NO).
- the biometric information acquisition device 312 captures the face of the user U and acquires the face image of the user U as a target face image ( Step S204).
- the CPU 302 of the automatic baggage depositor 30 transmits the target face image of the user U captured by the biometric information acquisition device 312 to the management server 10 via the network NW together with the collation request (step S206).
- the CPU 302 compares the target face image of the user U captured by the biometric information acquisition device 312 with a plurality of registered face images registered in the first matching information DB 106b1 of the management server 10 at 1: N. To the management server 10.
- the CPU 102 of the management server 10 receives the target face image and the matching request from the automatic baggage storage 30, the CPU 102 checks the face image of the user U (step S208).
- the CPU 102 collates the target face image received from the automatic baggage storage 30 with a plurality of registered face images registered in the first collation information DB 106b1 at 1: N.
- the CPU 102 transmits the collation result information indicating the collation result to the automatic baggage storage 30 via the network NW (step S210).
- the CPU 302 of the automatic baggage storage device 30 receives the collation result information from the management server 10. If the collation result information indicates that a registered face image matching the target face image has been found and the user U who performs the baggage check-in procedure has been successfully identified (step S212, YES), the CPU 302 determines the user U's A baggage custody process is executed (step S214). In the custody processing, the CPU 302 acquires the boarding information or passport information associated with the registered face image that matches the target face image, and uses it for the custody processing. The CPU 302 controls each part of the automatic baggage storage device 30. As a result, the output device 316 outputs the baggage tag and the baggage exchange certificate in association with the boarding information or the passport information associated with the registered face image. The baggage transport device 314 transports the baggage, which is placed in the receiving unit by the user U and has the baggage tag attached thereto, toward the cargo handling area. The user U who left the baggage goes to the security checkpoint P3.
- the CPU 302 transmits, via the network NW, status information indicating that the baggage deposit procedure of the user U has been completed through the face image collation (step S216).
- the CPU 102 of the management server 10 When the CPU 102 of the management server 10 receives the status information from the automatic baggage storage device 30 which is an external device, it updates the status of the user U in the user information DB 106a regarding the baggage storage procedure of the user U from incomplete to completed (step S218). . As described above, the CPU 102 manages the status regarding the baggage storage procedure of the user U based on the comparison result between the target face image and the registered face image acquired at the time of the baggage storage procedure. That is, when the matching between the target face image and the registered face image acquired during the baggage deposit procedure matches, the status of the user U regarding the baggage deposit procedure is updated from incomplete to completed.
- the CPU 102 moves the user information and the status of the user U who has updated the status regarding the baggage check-in procedure from incomplete to completed from the first collation information DB 106b1 to the second collation information DB 106b2 and registers them.
- the CPU 302 of the automatic baggage storage 30 On the other hand, if the matching result information indicates that the identification of the user U has failed without finding a matching registered face image (step S212, NO), the CPU 302 of the automatic baggage storage 30 On the other hand, the user is notified that the identity verification has failed (step S220). At this time, the CPU 302 causes the display 310 to display a notification screen for notifying that the personal identification has failed. Note that the CPU 302 can notify the user U that the identity verification has failed, for example, by voice, together with or instead of displaying the notification screen. When the identity verification fails in this way, the baggage storage process can be executed by a normal process by causing a medium reader (not shown) to read the boarding pass or passport.
- the baggage deposit procedure is performed in the automatic baggage depositing machine 30.
- FIG. 12 is a sequence diagram showing operations of the security inspection device 40 and the management server 10.
- the security inspection device 40 and the management server 10 execute the processing shown in FIG. 12 each time a plurality of users U undergo the security inspection procedure.
- the biological information acquisition device 412 of the security inspection device 40 constantly or periodically captures an image in front of the metal detection gate 414, and a user U standing in front of the metal detection gate 414 in the captured image. Is determined (step S302). The biological information acquisition device 412 waits until the face of the user U is detected in the image (step S302, NO).
- the biometric information acquisition device 412 captures the face of the user U and acquires the face image of the user U as a target face image ( Step S304).
- the CPU 402 of the security inspection device 40 transmits the target face image of the user U captured by the biometric information acquisition device 412 to the management server 10 via the network NW together with the collation request (step S306). Accordingly, the CPU 402 compares the target face image of the user U captured by the biometric information acquisition device 412 with a plurality of registered face images registered in the second matching information DB 106b2 of the management server 10 at 1: N. To the management server 10.
- the CPU 102 of the management server 10 When the CPU 102 of the management server 10 receives the target face image and the matching request from the security inspection device 40, it checks the face image of the user U (step S308). The CPU 102 compares the target face image received from the security inspection device 40 with a plurality of registered face images registered in the second matching information DB 106b2 at 1: N.
- the CPU 102 transmits collation result information indicating the collation result to the security inspection device 40 via the network NW (step S310).
- the CPU 402 of the security inspection device 40 receives the collation result information from the management server 10. If the matching result information indicates that a registered face image that matches the target face image has been found and the user U who has undergone the security inspection procedure has been successfully identified (step S312, YES), the CPU 402 determines the user U's The security inspection process is performed (Step S314). In the security inspection process, the CPU 402 controls each unit of the security inspection device 40. As a result, the metal detection gate 414 detects metals that the user U passes through the metal detection gate 414. The user U who has passed through the metal detection gate 414 goes to the immigration control area P4.
- the CPU 402 transmits status information indicating that the security inspection procedure of the user U has been completed to the management server 10 via the network NW after collation of the face images (step S316).
- the CPU 102 of the management server 10 receives the status information from the security inspection device 40, which is an external device, the status of the security inspection procedure of the user U in the user information DB 106a is updated from incomplete to completed (step S318).
- the CPU 102 manages the status regarding the security inspection procedure of the user U based on the result of the collation between the target face image and the registered face image acquired during the security inspection procedure. That is, when the collation between the target face image acquired at the time of the security inspection procedure and the registered face image matches, the status of the security inspection procedure of the user U is updated from incomplete to completed.
- the CPU 102 moves the user information and status of the user U whose security check procedure status has been updated from incomplete to completed from the second collation information DB 106b2 to the third collation information DB 106b3 and registers it.
- step S312, NO the CPU 402 of the security inspection device 40 Then, the user is notified that the identification has failed (step S320). At this time, the CPU 402 causes the display 410 to display a notification screen for notifying that the personal identification has failed. Note that the CPU 402 can notify the user U that the identification has failed, for example, by voice, together with or instead of displaying the notification screen.
- the security inspection procedure is performed in the security inspection device 40.
- FIG. 13 is a sequence diagram showing operations of the automation gate device 50 and the management server 10.
- the automation gate device 50 and the management server 10 execute the processing shown in FIG. 13 each time each of the plurality of users U undergoes the immigration control procedure.
- the biological information acquisition device 512 of the automated gate device 50 constantly or periodically captures images in front of the automated gate device 50, and a user U standing in front of the automated gate device 50 in the captured image. Is determined (step S402). The biological information acquisition device 512 waits until the face of the user U is detected in the image (step S402, NO).
- the biological information acquisition device 512 captures the face of the user U and acquires the face image of the user U as a target face image ( Step S404).
- the CPU 502 of the automation gate device 50 transmits the target face image of the user U captured by the biometric information acquisition device 512 to the management server 10 via the network NW together with the collation request (step S406).
- the CPU 502 compares the target face image of the user U captured by the biometric information acquisition device 512 with a plurality of registered face images registered in the third matching information DB 106b3 of the management server 10 at 1: N. To the management server 10.
- the CPU 102 of the management server 10 When the CPU 102 of the management server 10 receives the target face image and the matching request from the automation gate device 50, it checks the face image of the user U (step S408). The CPU 102 compares the target face image received from the automation gate device 50 with a plurality of registered face images registered in the third matching information DB 106b3 at 1: N.
- the CPU 102 transmits collation result information indicating the collation result to the automation gate device 50 via the network NW (step S410).
- the CPU 502 of the automated gate device 50 receives the collation result information from the management server 10. If the matching result information indicates that a registered face image that matches the target face image has been found and the user U who has undergone the immigration procedure has been successfully identified (step S412, YES), the CPU 502 opens the gate 514. The process is executed (Step S414). Thereby, the CPU 502 shifts the gate 514 from the closed state in which the traffic of the user U is interrupted to the open state in which the traffic of the user U is permitted. The user U travels through the opened gate 514 toward the boarding gate P6.
- the CPU 502 transmits status information indicating that the immigration examination procedure of the user U has been completed to the management server 10 via the network NW after the face images are collated (step S416).
- the CPU 102 of the management server 10 When the CPU 102 of the management server 10 receives the status information from the automation gate device 50 which is an external device, the CPU 102 updates the status relating to the immigration control procedure of the user U in the user information DB 106a from incomplete to completed (step S418). As described above, the CPU 102 manages the status of the user U regarding the immigration control procedure based on the result of the comparison between the target face image and the registered face image acquired during the immigration control procedure. That is, when the collation between the target face image acquired during the immigration control procedure and the registered face image matches, the status of the user U regarding the immigration control procedure is updated from incomplete to completed.
- the CPU 102 moves the user information and the status of the user U whose status relating to the immigration examination procedure has been updated from incomplete to completed from the third collation information DB 106b3 to the fourth collation information DB 106b4 and registers them.
- the CPU 502 of the automation gate device 50 sends the user U Then, the user is notified that the identification has failed (step S420). At this time, the CPU 502 causes the display 510 to display a notification screen for notifying that the personal identification has failed. Note that the CPU 502 can also notify the user U that the identity verification has failed, for example, by voice, together with or instead of displaying the notification screen.
- FIG. 14 is a sequence diagram illustrating operations of the signage terminal 60 and the management server 10.
- the user U who has completed the immigration procedure goes through the passage P5 where the signage terminal 60 is installed and heads for the boarding gate P6. At this time, the user U passes in front of the signage terminal 60, or stops at one end in front of the signage terminal 60 and is located, and confirms the guidance of the lead wire to the boarding gate P6 displayed on the signage terminal 60.
- the signage terminal 60 and the management server 10 execute the process shown in FIG. 14 each time a plurality of users U pass in front of the signage terminal 60 or are located in front of the signage terminal 60.
- the biometric information acquisition device 610 of the signage terminal 60 constantly or regularly photographs the front of the signage terminal 60, and detects the face of the user U in front of the signage terminal 60 in the captured image. It is determined whether or not it has been performed (step S502).
- the user U in front of the signage terminal 60 is a user U who passes in front of the signage terminal 60 or is located in front of the signage terminal 60.
- the biological information acquisition device 610 waits until the face of the user U is detected in the image (step S502, NO).
- the biological information acquisition device 610 captures the face of the user U and acquires the face image of the user U as a target face image ( Step S504).
- the CPU 602 of the signage terminal 60 transmits the target face image of the user U captured by the biological information acquisition device 610 to the management server 10 via the network NW (Step S506).
- the CPU 102 of the management server 10 receives the target face image from the signage terminal 60, which is an external device, it checks the face image of the user U (step S508).
- the CPU 102 compares the target face image received from the signage terminal 60 with a plurality of registered face images registered in the fourth matching information DB 106b4 at 1: N.
- the CPU 602 of the signage terminal 60 can be configured to stream-transmit a video before the signage terminal 60 to the management server 10.
- the CPU 102 of the management server 10 may detect and acquire the target face image of the user U from the video transmitted from the signage terminal 60. it can.
- Step S510 when a registered face image that matches the target face image is found and the user U in front of the signage terminal 60 is specified (step S510, YES), the CPU 102 updates the status of the user U. (Step S512). That is, the CPU 102 updates the status regarding the previous location or passage of the user U of the user U in the user information DB 106a from incomplete to complete. In this manner, the CPU 102 determines whether the user U is in front of the signage terminal 60 or based on the matching result between the registered face image and the target face image acquired at the time of passing or passing through the signage terminal 60. Manage status. That is, when the target face image acquired at the time of passing or passing through the signage terminal 60 and the matching of the registered face image match, the CPU 102 determines whether the location or passing of the user U is in front of the signage terminal 60. Update the status for incomplete to incomplete.
- the CPU 102 updates the user information and the status of the user U, whose status regarding the location or passage in front of the signage terminal 60 from incomplete to completed, from the fourth collation information DB 106b4 to the fifth collation information DB 106b5. Move and register.
- step S510, NO the CPU 102 transmits the user U from the signage terminal 60.
- the processing for the target face image ends.
- FIG. 15 is a sequence diagram illustrating operations of the boarding gate device 70 and the management server 10.
- the user U who has passed through the passage P5 in which the signage terminal 60 is installed heads to the boarding gate P6 and passes through the boarding gate device 70 to board the aircraft.
- the boarding gate device 70 and the management server 10 execute the process shown in FIG. 15 each time a plurality of users U board the aircraft.
- the biological information acquisition device 712 of the boarding gate device 70 constantly or periodically photographs the front of the boarding gate device 70, and the user U standing in front of the boarding gate device 70 in the captured image. Is determined (step S602). The biological information acquisition device 712 waits until the face of the user U is detected in the image (step S602, NO).
- the biological information acquisition device 712 captures the face of the user U and acquires the face image of the user U as a target face image (Ste S604).
- the CPU 702 of the boarding gate device 70 transmits the target face image of the user U photographed by the biological information acquisition device 712 to the management server 10 via the network NW together with the collation request (step S606). Accordingly, the CPU 702 compares the target face image of the user U captured by the biometric information acquisition device 712 with a plurality of registered face images registered in the fifth matching information DB 106b5 of the management server 10 at 1: N. To the management server 10.
- the CPU 102 of the management server 10 receives the target face image and the matching request from the boarding gate device 70, it checks the face image of the user U (step S608).
- the CPU 102 compares the target face image received from the boarding gate device 70 with a plurality of registered face images registered in the fifth matching information DB 106b5 at 1: N. Furthermore, when a registered face image that matches the target face image is found, the CPU 102 confirms that the boarding information associated with the registered face image is related to an aircraft that can be boarded from the boarding gate P6.
- the CPU 102 transmits the collation result information indicating the collation result to the boarding gate device 70 via the network NW (step S610).
- the CPU 702 of the boarding gate device 70 receives the collation result information from the management server 10. If the verification result information indicates that a registered face image that matches the target face image has been found and the user U who has boarded has succeeded in identity verification and that boarding information has been successfully verified (step S612, YES), the CPU 702 determines The gate 714 is opened (step S614). As a result, the CPU 702 shifts the gate 714 from the closed state during standby, which blocks the traffic of the user U, to the open state, which permits the traffic of the user U. The user U travels through the open gate 714 to board the aircraft.
- the CPU 702 transmits, via the network NW, status information indicating that the boarding of the user U to the aircraft has been completed after the face images are collated (step 616).
- the CPU 102 of the management server 10 Upon receiving the status information from the boarding gate device 70, which is an external device, the CPU 102 of the management server 10 updates the status relating to the boarding of the user U on the aircraft in the user information DB 106a from incomplete to complete (step S618). .
- the CPU 102 manages the status related to the user U boarding the aircraft based on the result of the collation between the target face image and the registered face image acquired when boarding the aircraft. That is, when the matching between the target face image acquired at the time of boarding on the aircraft and the registered face image matches, the status of the user U on boarding the aircraft is updated from incomplete to completed. .
- the CPU 102 deletes the user information and the status of the user U who has updated the status related to boarding the aircraft from incomplete to completed from the fifth verification information DB 106b5.
- the CPU 702 of the boarding gate device 70 determines Then, the user U is notified (step S620). That is, the CPU 702 issues a notification indicating that the personal identification has failed or that the confirmation of the boarding information has failed. At this time, the CPU 702 causes the display 710 to display a notification screen for notifying that the identity verification has failed or that the boarding information confirmation has failed. Note that the CPU 702 can also notify the user U that the identification of the user has failed or that the confirmation of the boarding information has failed, for example, by voice, together with or instead of displaying the notification screen.
- the user U who has passed through the boarding gate device 70 boardes the aircraft.
- the management server 10 grasps and manages the status up to boarding the aircraft in the user information DB 106a for each of the plurality of users U who have performed the check-in procedure at the check-in terminal 20.
- FIG. 16 is a schematic diagram showing an example of the user information DB 106a of the management server 10. As shown in the figure, the user information and status of each user U are registered in the user information DB 106a for each user ID (Identification) which is an identifier for identifying a plurality of users U.
- user ID Identity
- the user information registered in the user information DB 106a includes the name of the user U, identity information such as nationality, a face image as face information, a flight number of an aircraft on which the user U is boarded, a departure place , Destination, departure time, boarding gate, and the like. Note that the status information and the boarding information can each include information other than that shown in FIG.
- the status of the user U registered in the user information DB 106a includes a check-in procedure, a baggage deposit procedure, a security check procedure, an immigration procedure, a location or passage in front of the signage terminal 60, and boarding of an aircraft. Is recorded as completed or incomplete.
- the status of the user U is updated at any time according to the processing shown in FIGS.
- FIGS. 17 to 21 are schematic diagrams showing examples of the first to fifth matching information DBs 106b1 to 106b5, respectively.
- the user information and the status of the user U whose status regarding the check-in procedure is completed and the status regarding other procedures is not completed are registered.
- the user information and the status of the user U registered in the first collation information DB 106b1 are updated from the incomplete baggage check-in status to incomplete from the first collation information DB 106b1 to the second collation information DB 106b2. Moved to and registered.
- the user information and the status of the user U whose status regarding the check-in procedure and the baggage deposit procedure is completed and the status regarding other procedures is not completed are registered. I have.
- the user information and status of the user U registered in the second collation information DB 106b2 are updated from the incomplete status to the completed status relating to the security check procedure from the second collation information DB 106b2 to the third collation information DB 106b3. Moved to and registered.
- the third collation information DB 106b3 includes the user information and the status of the user U whose status regarding the check-in procedure, the baggage deposit procedure and the security check procedure is completed, and the status regarding other procedures is not completed. Is registered.
- the user information and status registered in the third verification information DB 106b3 are moved from the third verification information DB 106b3 to the fourth verification information DB 106b4 when the status relating to the immigration control procedure is updated from incomplete to completed. be registered.
- the fourth verification information DB 106b4 As shown in FIG. 20, in the fourth verification information DB 106b4, the status of the check-in procedure, the baggage deposit procedure, the security check procedure and the immigration procedure is completed, and the status of other procedures is not completed. Information and status are registered. The user information and status registered in the fourth collation information DB 106b4 are updated from the fourth collation information DB 106b4 to the fifth collation information when the status related to the location or passage in front of the signage terminal 60 is updated from incomplete to complete. The information is moved to the information DB 106b5 and registered.
- the user information and the status of the user U whose status related to boarding the aircraft is not completed and the status related to other procedures is completed are registered in the fifth verification information DB 106b5.
- the user information and status registered in the fifth verification information DB 106b5 are deleted from the fifth verification information DB 106b5 when the status relating to boarding the aircraft is updated from incomplete to completed.
- the CPU 102 of the management server 10 registers and manages the user information and the status of the user U in the user information DB 106a and the first to fifth matching information DBs 106b1 to 106b5. Note that the CPU 102 can also manage the user information and the status of the user U using the first to fifth collation information DBs 106b1 to 106b5 without using the user information DB 106a.
- FIG. 22 is a schematic diagram illustrating an example of the expiration time of each procedure set by the CPU 102 of the management server 10. As shown in the figure, a deadline time is set for each of the user IDs regarding baggage check-in procedures, security check procedures, immigration control procedures, location or passage in front of the signage terminal 60, and boarding an aircraft for the user U. You.
- the CPU 102 of the management server 10 can record and manage the time limit shown in FIG.
- the CPU 102 associates the expiration time shown in FIG. 22 with the user information and status of the user U in the first to fifth matching information DBs 106b1 to 106b5 shown in FIGS.
- the information may be recorded in the use information DBs 106b1 to 106b5 and managed.
- the employee S can access the management server 10 using the business terminal 80 and check the user information and status of the user U recorded in the user information DB 106a and the contents of the expiration time of each procedure.
- the CPU 802 of the business terminal 80 can acquire the user information and status of the user U recorded in the user information DB 106a and the expiration time of each procedure from the user information DB 106a and display the same on the display 810.
- the CPU 802 can display a part or all of the identity information included in the user information, and can display a part or all of the boarding information included in the user information.
- the CPU 802 displays the status of the user U using, for example, a bar-shaped or circular progress bar whose length varies according to the progress status of each of the procedures, the progress being completed. can do.
- FIGS. 23 to 25C are flowcharts showing operations including a status management operation and an alert operation of the management server 10.
- FIG. 25A is a schematic diagram illustrating an example of an alert displayed on the business terminal 80.
- FIG. 25B and FIG. 25C are schematic diagrams showing examples of the status confirmation screen displayed on the business terminal 80.
- the management server 10 executes the processing shown in FIGS. 23 and 24 for each of the plurality of users U.
- the CPU 102 of the management server 10 determines whether or not user information has been received from the check-in terminal 20 (step S702), and waits until user information is received from the check-in terminal 20. (Step S702, NO).
- Step S704 corresponds to step S118 shown in FIG.
- the CPU 102 sets a time limit for the baggage deposit procedure, security check procedure, immigration procedure, location or passage in front of the signage terminal 60, and boarding to the aircraft from the boarding time based on the boarding information included in the user information.
- the time is calculated and set (step S706).
- the CPU 102 can appropriately change and set the expiration time of each procedure according to the congestion status of the airport A, which is a facility where the user U boardes the aircraft.
- the CPU 102 can record and manage the set deadline time of each procedure in the user information DB 106a in association with, for example, the user information and status of the user U in the user information DB 106a.
- the CPU 102 determines whether or not status information has been received from the check-in terminal 20 (step S708), and waits until status information is received from the check-in terminal 20 (step S708, NO).
- Step S708 When determining that the status information has been received from the check-in terminal 20 (step S708, YES), the CPU 102 updates the status relating to the check-in procedure of the user U in the user information DB 106a from incomplete to completed (step S710). .
- Step S710 corresponds to step S122 shown in FIG. Further, the CPU 102 registers the user information and the status of the user U in the first collation information DB 106b1.
- the CPU 102 determines whether or not status information has been received from the automatic baggage storage 30 (step S712).
- step S712 determines whether the time limit for baggage storage has elapsed.
- the CPU 102 determines that the time limit of the baggage check-in procedure has passed (step S714, YES), the CPU 102 generates an alert indicating that the time limit of the baggage check-up procedure has passed for the user U and transmits the alert via the network NW. (Step S716).
- the destination of the alert is the business terminal 80 of one or more staff members S.
- step S714 determines whether the time limit of the baggage check-in procedure has not passed.
- step S718 determines whether status information has been received from the security inspection device 40. This step S718 is based on the assumption that there is a user U who has a small amount of baggage and cannot keep the baggage.
- step S718, YES the CPU 102 proceeds to step S728 described below.
- step S718 the CPU 102 waits for reception of status information from the automatic baggage storage 30 (step S712).
- Step S712 determines that status information has been received from the automatic baggage storage 30 (step S712, YES)
- the CPU 102 updates the status relating to the baggage storage procedure of the user U in the user information DB 106a from incomplete to complete (step S712).
- Step S720 corresponds to step S218 shown in FIG. Further, the CPU 102 moves and registers the user information and status of the user U from the first collation information DB 106b1 to the second collation information DB 106b2.
- the CPU 102 determines whether or not status information has been received from the security inspection device 40 (step S722).
- step S722 determines whether the expiration time of the security inspection procedure has elapsed.
- the CPU 102 When determining that the time limit of the security check procedure has passed (step S724, YES), the CPU 102 generates an alert indicating that the time limit of the security check procedure has passed for the user U and transmits the alert via the network NW. (Step S726).
- the destination of the alert is the business terminal 80 of one or more staff members S.
- step S724 If the CPU 102 determines that the time limit of the security inspection procedure has not passed (NO in step S724), the CPU 102 waits for reception of status information from the security inspection device 40 (step S722).
- Step S722 when determining that the status information has been received from the security inspection device 40 (step S722, YES), the CPU 102 updates the status regarding the security inspection procedure of the user U in the user information DB 106a from incomplete to completed (step S722). S728).
- Step S728 corresponds to step S318 shown in FIG. Further, the CPU 102 moves and registers the user information and status of the user U from the second collation information DB 106b2 to the third collation information DB 106b3.
- the CPU 102 determines whether or not status information has been received from the automation gate device 50 (step S730).
- step S732 determines whether the expiration time of the immigration procedure has elapsed.
- the CPU 102 determines that the time limit of the immigration procedure has passed (step S732, YES)
- the CPU 102 generates an alert indicating that the time limit of the immigration procedure has passed for the user and transmits the alert via the network NW. (Step S734).
- the destination of the alert is the business terminal 80 of one or more staff members S.
- step S732 If the CPU 102 determines that the time limit for the immigration procedure has not passed (step S732, NO), the CPU 102 waits for reception of status information from the automation gate device 50 (step S730).
- Step S730 when determining that the status information has been received from the automation gate device 50 (step S730, YES), the CPU 102 updates the status relating to the immigration examination procedure of the user U in the user information DB 106a from incomplete to completed (step S730). S736). Step S736 corresponds to step S418 shown in FIG. Further, the CPU 102 moves and registers the user information and status of the user U from the third matching information DB 106b3 to the fourth matching information DB 106b4.
- the CPU 102 compares the target face image received from the signage terminal 60 with a plurality of registered face images in the user information DB 106a at 1: N, and locates or passes the user U in front of the signage terminal 60. It is determined whether or not there is (step S738). As a result of the comparison, if a registered face image that matches the target face image is found, it means that the user U has been located or passed in front of the signage terminal 60.
- step S738, NO the CPU 102 determines whether or not the deadline time of the previous location or passage of the signage terminal 60 has elapsed (step S740).
- the CPU 102 determines that the previous location of the signage terminal 60 or the time limit for passing has passed (step S740, YES)
- the CPU 102 generates an alert and transmits it via the network NW (step S742). That is, the CPU 102 generates an alert indicating that the user is located in front of the signage terminal 60 or the deadline time for passing the signage terminal 60 has elapsed, and transmits the alert via the network NW.
- the destination of the alert is the business terminal 80 of one or more staff members S.
- step S740 determines that the previous location of the signage terminal 60 or the time limit for passing has not passed (step S740, NO)
- the CPU 102 proceeds to step S738.
- Step S744 corresponds to step S512 shown in FIG. Further, the CPU 102 moves and registers the user information and status of the user U from the fourth collation information DB 106b4 to the fifth collation information DB 106b5.
- the CPU 102 determines whether or not status information has been received from the boarding gate device 70 (step S746).
- step S746 determines whether the time limit for boarding the aircraft has passed.
- the CPU 102 determines that the time limit for boarding the aircraft has passed (step S748, YES)
- the CPU 102 generates an alert indicating that the time limit for boarding the aircraft has passed for the user, and generates the alert via the network NW.
- the data is transmitted (step S750).
- the destination of the alert is the business terminal 80 of one or more staff members S.
- step S748 If the CPU 102 determines that the time limit for boarding the aircraft has not passed (step S748, NO), the CPU 102 waits for reception of status information from the boarding gate device 70 (step S746).
- Step S746, YES when determining that the status information has been received from the boarding gate device 70 (step S746, YES), the CPU 102 updates the status related to boarding of the user U on the aircraft in the user information DB 106a from incomplete to completed (step S746). Step S752). Step S752 corresponds to step S618 shown in FIG. Further, the CPU 102 deletes the user information and the status of the user U from the fifth collation information DB 106b5.
- the CPU 102 sequentially determines whether or not the expiration time has passed for each procedure in steps S714, S724, S732, S740, and S748. Absent. The CPU 102 can also independently determine whether the expiration time has passed for each procedure.
- the management server 10 grasps and manages the status of each procedure of the user U together with the deadline time until the user U boardes the aircraft, and generates an alert if any of the procedures has passed the deadline time to generate the business terminal. Send to 80.
- the user information is registered as a DB of a plurality of registered face images to be collated with the target face image in each procedure according to the status of the user U.
- the 5 collation information DBs 106b1 to 106b5 are used. Therefore, according to the present embodiment, it is possible to reduce the number of a plurality of registered face images, which is a population used for matching with the target face image, and to improve the matching accuracy of the face image, which is biometric information. it can.
- the present invention is not limited to this.
- the first to fifth matching information DBs 106b1 to 106b5 are used for matching with the target face image.
- One or a plurality of DBs may be appropriately used.
- the CPU 102 of the management server 10 determines a smaller DB as the airport A is more congested and a larger DB as the airport A is less congested. Can be used for collation.
- the CPU 102 similarly performs one or more of the first to fifth information DBs 106b1 to 106b5 for matching with the target face image according to the number of users U who have performed the check-in procedure.
- a DB can be used as appropriate. That is, the CPU 102 can use a smaller number of DBs for comparison so that the larger the number of users U who have performed the check-in procedure, the smaller the number of registered face images to be compared with the target face image.
- the CPU 102 of the management server 10 stores the target face image received from the security inspection device 40 in the first and second verification information DBs 106b1 and 106b2. Can be collated with the registered face image at 1: N.
- the first and second information DBs 106b1 and 106b2 used for the comparison the user information of the user U whose status regarding the security inspection procedure is not completed is registered.
- the CPU 102 stores the target face image received from the automation gate device 50 in a plurality of registrations registered in the first to third verification information DBs 106b1, 106b2, and 106b3. It is also possible to collate 1: N with the face image. Further, for example, in the second case where the congestion at the airport A is light, the CPU 102 converts the target face image received from the automation gate device 50 into a plurality of registered face images registered in the second and third matching information DBs 106b2 and 106b3. And 1: N.
- the user information of the user U whose status regarding the immigration control procedure is not completed is registered.
- the congestion situation at the airport A the congestion is less in the first case than in the second case.
- the CPU 102 stores the target face image received from the signage terminal 60 in the first to fourth collation information DBs 106b1, 106b2, 106b3, and 106b4. It is also possible to collate 1: N with the registered face image. Further, for example, in the second case where the congestion at the airport A is light, the CPU 102 converts the target face image received from the signage terminal 60 into a plurality of registered faces registered in the second to fourth matching information DBs 106b2, 106b3, and 106b4. It can also be compared with the image at 1: N.
- the CPU 102 compares the target face image received from the signage terminal 60 with a plurality of registered face images registered in the third and fourth matching information DBs 106b3 and 106b4. It is also possible to collate with 1: N.
- the first to fourth information DBs 106b1, 106b2, 106b3, and 106b4 used for the collation the user information of the user U whose status relating to the location or passage in front of the signage terminal 60 is not completed is registered.
- the congestion status of the airport A is lower in the first case than in the second case, and is lower in the second case than in the third case.
- the CPU 102 registers the target face image received from the boarding gate device 70 in the first to fifth verification information DBs 106b1, 106b2, 106b3, 106b4, 106b5. It can also be compared with a plurality of registered face images by 1: N. Further, for example, in the second case where the congestion at the airport A is light, the CPU 102 stores the target face image received from the boarding gate device 70 in the second to fifth matching information DBs 106b2, 106b3, 106b4, and 106b5. Can be collated with the registered face image at 1: N.
- the CPU 102 stores the target face image received from the boarding gate device 70 in a plurality of registrations registered in the third to fifth verification information DBs 106b3, 106b4, and 106b5. It is also possible to perform 1: N comparison with the face image. Further, for example, in the fourth case where the congestion at the airport A is light, the CPU 102 converts the target face image received from the boarding gate device 70 into a plurality of registered face images registered in the fourth and fifth matching information DBs 106b4 and 106b5. And 1: N.
- the user information of the user U whose status related to boarding the aircraft is not completed is registered.
- the congestion situation at the airport A is less congested in the first case than in the second case, less severe in the second case than in the third case, and less severe in the third case than in the fourth case. ing.
- the CPU 802 of the business terminal 80 transmits the user information and status of the user U who has passed the time limit of the procedure specified by the alert from the management server 10 to the network. Obtain via NW.
- the CPU 802 acquires the user information and the status of the user U from the user information DB 106a of the management server 10.
- FIG. 25A is a schematic diagram illustrating an example of an alert displayed on the business terminal 80. It should be noted that FIG. 25A is different from the case shown in FIG. 16 in that the user U whose user ID is 10105 has not completed the security check procedure even though the time limit of the security check procedure has passed. Is shown.
- the alert AL includes a user information display column AL10 for displaying user information of the user U, a status display column AL12 for displaying the status of the user U, and a registered face image of the user U. And a face image display field AL14 for displaying
- the user information display field AL10 displays the user U's name, nationality and other identity information, and the user U's boarding information such as the flight number of the aircraft to be boarded.
- the user information display column AL10 can display a part or all of the identity information, and can display a part or all of the boarding information.
- the status display column AL12 displays the status of incomplete or completed for each procedure of the user U.
- the status display column AL12 indicates that the procedure for which the expiration time has passed is indicated. Note that, when an alert indicating that the expiration time has passed for a certain procedure is transmitted, the expiration time has passed for the subsequent procedures.
- the face image display field AL14 displays a photographed face image or a passport face image of the user U acquired by the check-in terminal 20 and registered in the user information DB 106a.
- the staff S can easily search for the user U who has not completed the procedure including the procedure at the airport A by using the registered face image of the user U displayed on the alert AL as a clue.
- the CPU 802 of the business terminal 80 can display a status confirmation screen for confirming the status of the user U on the display 810 regardless of whether or not an alert has been received from the management server 10.
- the CPU 802 obtains, via the network NW, the user information and the status of the user U whose status is to be confirmed from the user information DB 106a of the management server 10.
- FIG. 25B and FIG. 25C are schematic diagrams showing examples of the status confirmation screen displayed on the business terminal 80. 25B and FIG. 25C are different from each other in the format of the progress bar for displaying the status of the user U. 25B and 25C, unlike the case shown in FIG. 16, the user U having the user ID of 10105 has not completed the security check procedure even though the time limit of the security check procedure has passed. Is shown.
- the status confirmation screen ST includes a user information C display column ST10 that displays user information of the user U, a status display column ST12 that displays the status of the user U, And a face image display section ST14 for displaying a registered face image of the person U.
- the user information display section ST10 displays the same information as the user information display section AL10 of the alert AL.
- the face image display section ST14 displays the same registered face image as the face image display section AL14 of the alert AL.
- the status display section ST12 displays a progress bar of which the length varies depending on the progress status of which of the procedures of the user U has been completed.
- FIG. 25B shows a case where the status of the user U is displayed using a bar-shaped progress bar.
- FIG. 25C shows a case where the status of the user U is displayed using a circular progress bar.
- the status of the user U can be displayed by a progress bar, as in FIGS. 25B and 25C.
- the management server 10 sets the expiration time of each procedure at the airport A based on the boarding information acquired by the check-in terminal 20 for the user U scheduled to board the aircraft. , The status of each procedure of the user U is managed. Therefore, according to the present embodiment, the situation of the user U who is scheduled to board the aircraft can be grasped and managed in more detail.
- the CPU 102 of the management server 10 selects the first to fifth matching information DBs 106b1 to 106b5 for matching with the target face image and uses the same for matching. It is not something to be done.
- the CPU 102 does not necessarily need to use the first to fifth collation information DBs 106b1 to 106b5.
- the CPU 102 can extract a plurality of registered face images similar to the first to fifth matching information DBs 106b1 to 106b5 from the user information DB 106a based on the status of the user U and use the same for matching.
- the CPU 102 as a collation unit performs a target process from a plurality of registered face images based on the status regarding another procedure following the one procedure.
- a registered face image to be collated with the face image is extracted.
- the CPU 102 When the CPU 102 receives the target face image and the collation request from the automatic baggage storage 30, the CPU 102 extracts the registered face image of the user U from the user information DB 106a by filtering. Here, the CPU 102 extracts a registered face image of the user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed by filtering based on the status of the user U. The CPU 102 collates the received target face image with a plurality of registered face images extracted from the user information DB 106a. Also in the present embodiment, the CPU 102 does not perform a check with the registered face image of the user U for whom the check-in procedure, which is a procedure immediately before the baggage deposit procedure, has not been completed. Of the registered face image. Therefore, also in the present embodiment, it is possible to avoid unnecessary collation with the registered face image in collating the target face image acquired in the baggage deposit procedure.
- the CPU 102 When the CPU 102 receives the target face image and the collation request from the security inspection device 40, the CPU 102 extracts the registered face image of the user U from the user information DB 106a by filtering. Here, by filtering based on the status of the user U, the CPU 102 extracts a registered face image of the user U whose status regarding the check-in procedure and the baggage deposit procedure is completed and whose status regarding other procedures is not completed. The CPU 102 collates the received target face image with a plurality of registered face images extracted from the user information DB 106a. Also in the present embodiment, the CPU 102 does not perform a check with the registered face image of the user U who has not completed the baggage check-up procedure of the procedure immediately before the security check procedure. There is no collation with the registered face image. Therefore, also in the present embodiment, it is possible to avoid unnecessary collation with the registered face image in collating the target face image acquired during the security inspection procedure.
- the CPU 102 When the CPU 102 receives the target face image and the collation request from the automation gate device 50, the CPU 102 extracts the registered face image of the user U from the user information DB 106a by filtering. Here, the CPU 102 completes the status regarding the check-in procedure, the baggage deposit procedure and the security check procedure by filtering based on the status of the user U, and the registered face image of the user U whose status regarding other procedures is not completed. Is extracted. The CPU 102 collates the received target face image with a plurality of registered face images extracted from the user information DB 106a.
- the CPU 102 does not perform a check with the registered face image of the user U for whom the security check procedure of the procedure immediately before the immigration control procedure has not been completed, and the user 102 who has already completed the immigration control procedure. There is no collation with the registered face image. Therefore, also in the present embodiment, it is possible to avoid unnecessary collation with the registered face image in collating the target face image acquired in the immigration procedure.
- the CPU 102 When the CPU 102 receives the target face image from the signage terminal 60, the CPU 102 extracts the registered face image of the user U from the user information DB 106a by filtering. Here, the CPU 102 completes the status of the check-in procedure, the baggage deposit procedure, the security check procedure, and the immigration procedure by filtering based on the status of the user U, and completes the status of the user U whose status regarding other procedures is not completed.
- the registered face image is extracted.
- the CPU 102 collates the received target face image with a plurality of registered face images extracted from the user information DB 106a.
- the CPU 102 does not collate with the registered face image of the user U who has not completed the immigration control procedure of the location immediately before the signage terminal 60 or the procedure immediately before passing the signage terminal 60. There is no need to collate with the registered face image of the user U who has completed the previous location or has passed. Therefore, also in the present embodiment, it is possible to avoid unnecessary collation with a registered face image in collation of the target face image acquired when the user is located in front of or passing through the signage terminal 60.
- the CPU 102 when receiving the target face image from the boarding gate device 70, the CPU 102 extracts the registered face image of the user U from the user information DB 106a by filtering. Here, by filtering based on the status of the user U, the CPU 102 extracts a registered face image of the user U whose status relating to boarding the aircraft is not completed and whose status relating to other procedures is completed. The CPU 102 collates the received target face image with a plurality of registered face images extracted from the user information DB 106a. Also in the present embodiment, the CPU 102 does not check the location of the signage terminal 60 in front of the signage terminal 60 or the registered face image of the user U who has not completed the passage immediately before boarding the aircraft. There is no need to collate with the registered face image of the user U who has completed boarding. Therefore, also in the present embodiment, it is possible to avoid unnecessary matching with the registered face image in matching the target face image acquired when boarding the aircraft.
- the CPU 102 as the matching unit extracts a registered face image to be matched with the target face image from the user information DB 106a according to the status of the user U according to each procedure as described above.
- the series of procedures up to boarding the aircraft includes one procedure and another procedure following the procedure as described above.
- the CPU 102 compares the target face image acquired at the time of another procedure with the registered face image of the user U whose status related to one procedure is completed and the status related to another procedure is not completed. . Therefore, according to the present embodiment, similarly to the first embodiment, the number of a plurality of registered face images that are a population to be compared with the target face image can be reduced, and the matching accuracy of the face image that is biometric information can be reduced. Can be improved.
- the first to fifth collation information DBs 106b1 to 106b5 used in the first embodiment are not provided for each status of the user U, and the status of the user U can be obtained from the user information DB 106a. , The registered face image of the user U can be extracted.
- the storage device 106 of the management server 10 may store only the user information DB 106a, or, as in the first embodiment, the user information DB 106a and the first to fifth collations. Both the information DBs 106b1 to 106b5 may be stored.
- the range of the registered face image extracted from the user information DB 106a according to the number of users U who have performed the check-in procedure, the congestion status at the airport A, the processing capacity of the management server 10, and the like. can be changed as appropriate.
- the CPU 102 of the management server 10 increases the number of registered face images as the airport A becomes more congested and increases as the airport A becomes less congested.
- a registered face image can be extracted and used for collation.
- the CPU 102 can similarly change the number of registered face images to be extracted for use in comparison with the target face image according to the large number of users U who have performed the check-in procedure. That is, the CPU 102 can change the number of registered face images to be extracted such that the larger the number of users U who have performed the check-in procedure, the smaller the number of registered face images to be collated with the target face image.
- the congestion at the airport A is light
- the CPU 102 of the management server 10 receives the target face image and the collation request from the security inspection device 40, at least the user whose status related to the security inspection procedure is not completed.
- a registered face image of U can also be extracted.
- At least the user U whose status regarding the security inspection procedure is not completed includes the next user U. That is, a user U whose status regarding the check-in procedure and the baggage deposit procedure is completed and whose status regarding other procedures is not completed is included. Further, a user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed may be included.
- the CPU 102 when the congestion at the airport A is light, when the CPU 102 receives the target face image and the collation request from the automation gate device 50, at least the registered face image of the user U whose status regarding the immigration examination procedure is not completed is received. Can be extracted. At least the users U whose status regarding the immigration control procedure is not completed include the following users U. That is, a user U whose status regarding the check-in procedure, baggage deposit procedure and security check procedure is completed, and whose status regarding other procedures is not completed is included. Further, a user U whose status related to the check-in procedure and the baggage deposit procedure is completed and whose status related to other procedures is not completed may be included. Further, a user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed may be included.
- the CPU 102 receives the target face image from the signage terminal 60, and at least the registered face image of the user U whose status regarding the passage or location in front of the signage terminal 60 is not completed. Can be extracted.
- the next user U is included in the user U whose status regarding at least the passage or location before the signage terminal 60 is not completed. That is, a user U whose status regarding the check-in procedure, baggage deposit procedure, security check procedure and immigration control procedure is completed, and whose status regarding other procedures is not completed is included. Further, a user U whose status regarding the check-in procedure, baggage deposit procedure and security check procedure is completed, and whose status regarding other procedures is not completed may be included.
- a user U whose status related to the check-in procedure and the baggage deposit procedure is completed and whose status related to other procedures is not completed may be included. Further, a user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed may be included.
- the CPU 102 extracts at least the registered face image of the user U whose status related to boarding the aircraft is not completed. Can be. At least the users U whose status regarding boarding the aircraft is not completed include those users whose status regarding boarding the aircraft is not completed and whose status regarding other procedures is completed. In addition, a user U who has completed the status regarding the check-in procedure, the baggage deposit procedure, the security check procedure, and the immigration procedure, and the status regarding other procedures is not completed may be included. Further, a user U whose status regarding the check-in procedure, baggage deposit procedure and security check procedure is completed, and whose status regarding other procedures is not completed may be included.
- a user U whose status related to the check-in procedure and the baggage deposit procedure is completed and whose status related to other procedures is not completed may be included. Further, a user U whose status regarding the check-in procedure is completed and whose status regarding other procedures is not completed may be included.
- FIG. 26 is a flowchart illustrating an alert operation of the management server 10 according to the present embodiment.
- the management server 10 executes the processing shown in FIG. 26 as the processing for generating and transmitting the alerts of steps S716 and S726 shown in FIG. 23 and steps S734, S742 and S750 shown in FIG.
- the processing shown in FIG. 26 may be performed for all or some of steps S716, S726, S734, S742, and step S750.
- the management server 10 uses images captured by a plurality of surveillance cameras 90 installed in the airport A in order to specify the location of the user U.
- the plurality of monitoring cameras 90 each function as a video acquisition unit that captures a predetermined location in the airport A and transmits the captured video to the management server 10 via the network NW.
- the CPU 102 of the management server 10 functions as a location specifying unit that specifies the location of the user U.
- the CPU 102 as the location specifying unit specifies the user U from the face images in the video captured by the plurality of monitoring cameras 90.
- the CPU 102 as a location specifying unit specifies, as the location of the user U, the installation location of the monitoring camera 90 in which the user U is specified in the video among the plurality of monitoring cameras 90.
- the CPU 102 of the management server 10 acquires the registered face image of the user U from the user information DB 106a (step S802).
- Specific procedures include baggage deposit procedures, security screening procedures, immigration procedures, location or passage in front of the signage terminal 60, or boarding an aircraft.
- the CPU 102 acquires the video transmitted from the plurality of monitoring cameras 90 (step S804).
- the CPU 102 detects a face from the images of the plurality of monitoring cameras 90, and compares the detected face image, which is the image of the detected face, with the registered face image (step S806).
- the CPU 102 can match both face images by comparing the face feature amount extracted from the detected face image with the face feature amount extracted from the registered face image. it can.
- the CPU 102 detects the face image from the video transmitted from the surveillance camera 90 installed between the place where the procedure after the deadline time has been performed and the place where the latest completed procedure has been performed. A face image can be obtained. As a result, the face images to be detected can be narrowed down, and the matching accuracy can be improved.
- the CPU 102 specifies the location of the user U and generates an alert indicating that the deadline time has elapsed. Then, the data is transmitted via the network NW (step S810).
- the CPU 102 specifies, as the location of the user U, the installation location of the monitoring camera 90 that has captured the matching detected face image.
- the destination of the alert is the business terminal 80 of one or more staff members S. Since the location of the user U is specified in the alert, the staff member S who has received the alert at the business terminal 80 can easily search for the user U who has passed the deadline for the specific procedure.
- the destination of the alert can be the business terminal 80 of the staff S closest to the location of the user U among the plurality of staffs S.
- the business terminal 80 carried by the employee S for example, manages position information of the business terminal 80 based on a position sensor using the GNSS (Global Navigation Satellite System), a magnetic sensor for detecting terrestrial magnetism, and the like. Send to 10.
- the GNSS is not particularly limited, but includes, for example, GPS (Global Positioning System), GLONASS (Global Navigation Satellite System), Galileo, compass, and the like.
- the CPU 102 of the management server 10 can specify the business terminal 80 of the employee S closest to the location of the user U based on the position information transmitted from the business terminal 80.
- step S808 if a detected face image that matches the registered face image is not found (step S808, NO), the CPU 102 issues an alert indicating that the expiration time has passed but the location of the user U is not specified. It is generated and transmitted via the network NW (step S812).
- the management server 10 uses the images captured by the plurality of monitoring cameras 90 to generate an alert specifying the location of the user U who has passed the expiration time for a specific procedure. You can also send it.
- FIG. 27 is a block diagram illustrating a configuration of an information processing apparatus according to another embodiment.
- FIG. 28 is a block diagram illustrating a configuration of an information processing apparatus according to another embodiment.
- the information processing apparatus 1000 includes an information management unit that associates and registers boarding information on a user's boarding acquired by a user's check-in procedure and biometric information of the user. 1002. Further, the information processing apparatus 1000 checks target biometric information, which is biometric information acquired during a procedure up to boarding for one user, with registered biometric information, which is biometric information registered by the information management unit 1002. And a collating unit 1004 that performs the matching. The collation unit 1004 selects the registered biometric information to be collated with the target biometric information based on the status relating to the procedure up to the boarding of the user corresponding to the registered biometric information.
- target biometric information which is biometric information acquired during a procedure up to boarding for one user
- registered biometric information which is biometric information registered by the information management unit 1002.
- a collating unit 1004 that performs the matching.
- the collation unit 1004 selects the registered biometric information to be collated with the target biometric information based on the status relating to the procedure
- the registered biometric information to be compared with the target biometric information is selected based on the status of the user corresponding to the registered biometric information. Can be reduced. Therefore, according to another embodiment, the matching accuracy of biometric information can be improved.
- the information processing apparatus 2000 includes an information management unit 2002 for registering the boarding information and the biometric information on the boarding of the user acquired by the check-in procedure of the user. Having.
- the information processing apparatus 2000 includes a transmission unit 2004 that transmits, to the apparatus, verification information obtained by verifying the biological information received from the apparatus performing the procedure up to the boarding of the user and the biological information whose status regarding the procedure is not completed.
- the information processing apparatus 2000 includes a status management unit that updates status related to the procedure when receiving status information indicating that the procedure is completed from the apparatus.
- the biometric information received from the device performing the procedure up to the boarding of the user is compared with the biometric information whose status regarding the procedure is not completed.
- the number of certain registered biometric information can be reduced. Therefore, according to another embodiment, the matching accuracy of the biological information can be improved.
- the present invention is not limited to this.
- the signage terminals 60 can be installed at a plurality of places in the airport A, and the status regarding the previous location or passage of each of the plurality of signage terminals 60 can be managed.
- various statuses can be managed.
- an automatic baggage storage device 30, a security inspection device 40, an automated gate device 50, a signage terminal 60, and a boarding gate device 70 are installed as devices following the check-in terminal 20.
- the present invention is not limited to this. It is not necessary that all of the automatic baggage storage device 30, the security inspection device 40, the automated gate device 50, the signage terminal 60, and the boarding gate device 70 be installed, and at least one of these devices is installed. Just do it.
- only the signage terminal 60 may be installed as a device following the check-in terminal 20.
- identification can be performed using a code symbol such as a barcode or a QR code.
- the check-in terminal 20 prints a code symbol including information for identifying the user U to the user U. Issue a ticket such as a boarding pass.
- the user U can perform identity verification by causing the code symbol to be read by the code reader.
- the biometric information acquisition device 214 of the check-in terminal 20 includes, as biometric information registered in the user information DB 106a or the like as registered biometric information, a face image, a fingerprint image, an iris image, a finger vein image, a palm print image, a palm A vein image or the like may be obtained.
- the other biometric information acquisition devices 312, 412, 512, 610, and 712 include a face image, a fingerprint image, an iris image, a finger vein image, a palm print image, and a palm. May be obtained.
- the management server 10 can be configured as a system including one or a plurality of devices.
- the check-in terminal 20 can be configured as a system including one or a plurality of devices.
- the automatic baggage storage device 30 can be configured as a system including one or a plurality of devices.
- the security inspection device 40 can be configured as a system including one or a plurality of devices.
- the automation gate device 50 can be configured as a system including one or a plurality of devices.
- the signage terminal 60 can be configured as a system including one or a plurality of devices.
- the boarding gate device 70 can be configured as a system including one or a plurality of devices.
- a processing method for causing a program for operating the configuration of the embodiment to realize the functions of the above embodiments to be recorded on a recording medium, reading the program recorded on the recording medium as code, and executing the program on a computer is also described. It is included in the category of each embodiment. That is, a computer-readable recording medium is also included in the scope of each embodiment. In addition, not only the recording medium on which the above-described computer program is recorded, but also the computer program itself is included in each embodiment.
- the recording medium for example, a floppy (registered trademark) disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM (Compact Disc-Read Only Memory), a magnetic tape, a nonvolatile memory card, and a ROM can be used.
- the present invention is not limited to the one that executes the processing by the program recorded on the recording medium alone, and executes the processing by operating on an OS (Operating System) in cooperation with other software and functions of the extension board. Those are also included in the category of each embodiment.
- An information management unit for registering the boarding information on the boarding of the user acquired by the check-in procedure of the user and the biometric information of the user in association with each other;
- a target biometric information which is biometric information obtained during the procedure up to the boarding of the one user, and a matching unit that matches registered biometric information, which is the biometric information registered by the information management unit.
- the matching unit selects the registered biometric information to be compared with the target biometric information based on a status relating to the procedure up to the boarding of the user corresponding to the registered biometric information.
- (Appendix 3) The information processing device according to claim 1, further comprising a status management unit that updates the status corresponding to the procedure based on status information received from an external device and indicating that the procedure has been completed.
- the procedure includes one procedure and another procedure following the one procedure
- the collation unit may be configured to compare the target biometric information acquired at the time of the another procedure with the registered face of the user whose status related to the one procedure is completed and the status related to the another procedure is not completed. 5.
- the information processing device according to any one of supplementary notes 1 to 4, wherein the information processing device matches the image.
- the information management unit registers the registered biometric information in a plurality of databases according to the status of the user corresponding to the registered biometric information, The information processing apparatus according to any one of supplementary notes 1 to 5, wherein the matching unit matches the target biometric information with the registered biometric information registered in the database selected from the plurality of databases.
- the procedure includes one procedure and another procedure following the one procedure,
- the information management unit when the status related to the one procedure is completed, the registered face image of the user from the one database corresponding to the one procedure to another of the database corresponding to the another procedure.
- the procedure includes one procedure and another procedure following the one procedure,
- the information processing apparatus according to claim 8, wherein the collation unit extracts the registered face image from the plurality of registered face images based on the status related to the another procedure when the status related to the one procedure is completed.
- the collation unit changes the number of the registered face images to be selected based on the status of the user corresponding to the registered biometric information according to the number of users who have performed the check-in procedure.
- the information processing device according to any one of supplementary notes 1 to 9.
- the collating unit changes the number of the registered face images to be selected based on the status of the user corresponding to the registered biometric information as the number of the users who have performed the check-in procedure increases.
- An information management unit that registers boarding information and biometric information on the boarding of the user obtained by a check-in procedure of the user, A transmission unit that transmits, to the device, verification information that matches biometric information received from the device performing the procedure until the boarding of the user and biometric information whose status regarding the procedure is not completed, A status management unit that updates the status relating to the procedure when receiving status information indicating that the procedure has been completed from the apparatus.
- (Appendix 16) Registering the boarding information and the biological information of the user obtained by the check-in procedure of the user in association with each other,
- the target biometric information which is the biometric information obtained during the procedure up to the boarding for the one user, is compared with the registered biometric information, which is the biometric information registered by the information management unit,
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Development Economics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Educational Administration (AREA)
- Data Mining & Analysis (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Game Theory and Decision Science (AREA)
- Primary Health Care (AREA)
- Bioinformatics & Computational Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Devices For Checking Fares Or Tickets At Control Points (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
生体情報の照合精度を向上することができる情報処理装置、情報処理方法及び記録媒体を提供する。情報処理装置は、利用者のチェックイン手続により取得された利用者の搭乗に関する搭乗情報及び利用者の生体情報を互いに関連付けて登録する情報管理部と、一の利用者について搭乗までの手続の際に取得された生体情報である対象生体情報と、情報管理部により登録された生体情報である登録生体情報とを照合する照合部とを有し、照合部は、対象生体情報と照合する登録生体情報を、登録生体情報に対応する利用者の搭乗までの手続に関するステータスに基づき選択する。
Description
本発明は、情報処理装置、情報処理方法及び記録媒体に関する。
特許文献1には、空港サーバに備えられた本人認証情報登録部、行動追跡管理部及びネットワークカメラ監視部、並びに空港内に設置されたネットワークカメラにより旅客のトレーサビリティチェックが行われることが記載されている。特許文献1に記載のトレーサビリティチェックでは、空港内の任意の場所のネットワークカメラにより撮影された旅客の画像と、本人認証情報として記憶された旅客の顔画像を含む画像とが照合される。さらに、ネットワークカメラ設置場所の位置情報と撮影された画像のタイムスタンプとにより旅客の行動が追跡管理される。
また、特許文献2には、通行者が通行する経路の途中で通行者が入れ替わった場合に、通行者の入れ替わりを検知するための情報処理方法が記載されている。特許文献1に記載の情報処理方法は、第1位置を通過する通行者が所持する媒体から読み取られた第1生体情報と、第1位置を通過する通行者を撮像して得られた画像から取得した第2生体情報とを用いて、通行者を認証する第1認証処理を実行する。また、第1認証処理による通行者の認証に成功した場合、第1認証処理に用いた第1生体情報等に基づく第3生体情報を記憶部に記憶する。さらに、通行者の進行する方向において第1位置より下流側の第2位置を通過する通行者を撮像して得られた画像から取得した第4生体情報と第3生体情報とを用いて、通行者を認証する第2認証処理を実行する。
特許文献1、2に記載の技術では、空港内に設置されたネットワークカメラにより撮影された画像や通行者を撮像して得られた画像を照合に用いる。このため、特許文献1、2に記載の技術では、生体情報の照合のための母集団の数が増大し、その結果、生体情報の照合精度が低下するおそれがある。
本発明の目的は、上述した課題を鑑み、生体情報の照合精度を向上することができる情報処理装置、情報処理方法及び記録媒体を提供することにある。
本発明の一観点によれば、利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録する情報管理部と、一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合する照合部とを有し、前記照合部は、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理装置が提供される。
本発明の他の観点によれば、利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報と生体情報とを登録する情報管理部と、前記利用者の前記搭乗までの手続を行う装置から受信した生体情報と前記手続に関するステータスが未完了の生体情報とを照合した照合情報を前記装置に送信する送信部と、前記装置から当該手続が完了したことを示すステータス情報を受信すると、前記手続に関する前記ステータスを更新するステータス管理部とを有する情報処理装置が提供される。
本発明のさらに他の観点によれば、利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理方法が提供される。
本発明のさらに他の観点によれば、コンピュータに、利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択することを実行させるプログラムが記録された記録媒体が提供される。
本発明によれば、搭乗予定の利用者の状況をより詳細に把握することができる。
[第1実施形態]
本発明の第1実施形態による情報処理システム、情報処理装置及び情報処理方法について図1乃至図25Cを用いて説明する。
本発明の第1実施形態による情報処理システム、情報処理装置及び情報処理方法について図1乃至図25Cを用いて説明する。
まず、本実施形態による情報処理システムの構成について図1を用いて説明する。図1は、本実施形態による情報処理システムの全体構成を示す概略図である。
図1に示すように、本実施形態による情報処理システム1は、管理サーバ10と、チェックイン端末20と、自動手荷物預け機30と、保安検査装置40と、自動化ゲート装置50と、サイネージ端末60と、搭乗ゲート装置70と、業務端末80とを含んでいる。本実施形態による情報処理システム1は、例えば、空港Aにて航空機に搭乗する予定の利用者Uの空港A内における状況を把握管理して利用者Uを追跡するトラッキングシステムである。
なお、情報処理システム1は、空港Aにおいて航空機に搭乗する予定の利用者Uのほか、輸送手段に搭乗するための施設において輸送手段に搭乗する予定の利用者の施設内における状況を把握管理するものであればよい。例えば、情報処理システム1は、海港において船舶に搭乗する予定の利用者の海港内における状況を把握管理するものであってもよい。また、例えば、情報処理システム1は、駅において列車に搭乗する予定の利用者の駅内における状況を把握管理するものであってもよい。
管理サーバ10は、例えば、空港Aの運営する空港会社、航空会社等の施設内に設置されている。チェックイン端末20は、空港A内のチェックインロビーP1に設置されている。自動手荷物預け機30は、空港A内の手荷物カウンタP2に設置されている。保安検査装置40は、空港A内の保安検査場P3に設置されている。自動化ゲート装置50は、空港A内の出国審査場P4に設置されている。サイネージ端末60は、空港A内の通路P5に設置されている。通路P5は、出国審査場P4と搭乗ゲートP6との間を連絡する通路である。搭乗ゲート装置70は、空港A内の搭乗ゲートP6に設置されている。利用者Uは、搭乗ゲートP6から航空機に搭乗することができる。業務端末80は、例えば、航空会社の職員、空港会社の職員等の職員が携帯している。また、業務端末80は、例えば、職員が業務に従事するカウンタ等の業務場所に設置されていてもよい。
国際線の航空機に搭乗予定の利用者Uは、空港Aに到着後、各種手続を行う地点又は通過する地点であるチェックインロビーP1、手荷物カウンタP2、保安検査場P3、出国審査場P4及び通路P5を順次経て、搭乗ゲートP6にて航空機に搭乗することになる。利用者Uは、チェックインロビーP1においてチェックイン端末20でチェックイン手続(搭乗手続)を行う。また、利用者Uは、必要に応じて、手荷物カウンタP2において自動手荷物預け機30で手荷物預け手続を行う。チェックイン手続後及び必要に応じた手荷物預け手続後、利用者Uは、保安検査場P3において保安検査装置40による保安検査手続を受ける。保安検査後、利用者Uは、出国審査場P4において自動化ゲート装置50による出国審査手続を受ける。出国審査場P4を出た利用者Uは、サイネージ端末60が設置された通路P5を通過して搭乗ゲートP6に到達する。利用者Uは、搭乗ゲートP6において搭乗ゲート装置70を通過して航空機に搭乗する。
なお、利用者Uは、国際線の航空機に搭乗予定の者のみならず、国内線の航空機の搭乗予定の者であってもよい。国内線の航空機の搭乗予定の利用者Uの場合、出国審査場P4における出国審査は行われない。
空港A内には、各所に複数の監視カメラ90が設置されている。監視カメラ90は、例えば、チェックインロビーP1、手荷物カウンタP2、保安検査場P3、出国審査場P4、通路P5、搭乗ゲートP6にそれぞれ設置されている。監視カメラ90を用いた利用者Uの所在場所の特定は、第2実施形態において説明する。
管理サーバ10、チェックイン端末20、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60、及び搭乗ゲート装置70及び監視カメラ90は、ネットワークNWに接続されている。ネットワークNWは、空港Aの構内通信網を含むLAN(Local Area Network)、WAN(Wide Area Network)、移動体通信網等により構成されている。業務端末80は、無線方式又は有線方式でネットワークNWに接続することが可能になっている。
管理サーバ10と、チェックイン端末20、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60、及び搭乗ゲート装置70、業務端末80及び監視カメラ90のそれぞれとは、ネットワークNWを介して通信可能になっている。
次に、本実施形態による情報処理システム1における各構成要素についてさらに図2乃至図9を用いて説明する。
まず、チェックイン端末20の構成について図2を用いて説明する。図2は、チェックイン端末20のハードウェア構成を示すブロック図である。
チェックイン端末20は、利用者Uが自身で操作してチェックイン手続(搭乗手続)を行う自動チェックイン端末である。なお、チェックイン端末20は、航空会社の職員が操作する有人カウンタに設置されたチェックイン端末であってもよい。チェックイン手続(搭乗手続)は、少なくとも航空機に搭乗予定の利用者Uを識別するための情報を登録するために入力する手続である。具体的には、例えば、以下に説明するように、利用者Uの身分情報、顔情報及び搭乗情報を含む利用者情報を登録するために入力する手続である。
チェックイン端末20は、図2に示すように、CPU(Central Processing Unit)202と、RAM(Random Access Memory)204と、記憶装置206と、入力装置208と、ディスプレイ210とを有している。さらに、チェックイン端末20は、媒体読取装置212と、生体情報取得装置214と、通信部216とを有している。CPU202、RAM204、記憶装置206、入力装置208、ディスプレイ210、媒体読取装置212、生体情報取得装置214及び通信部216は、バスライン218に接続されている。
CPU202は、記憶装置206に記憶されたプログラムを実行することにより動作し、チェックイン端末20全体の動作を制御する制御部として機能する。また、CPU202は、記憶装置206に記憶されたアプリケーションプログラムを実行してチェックイン端末20としての各種処理を実行する。RAM204は、CPU202の動作に必要なメモリ領域を提供する。
より具体的には、CPU202は、チェックイン端末20を利用してチェックイン手続を行う利用者Uの顔画像を照合する照合部として機能する。照合部としてのCPU202は、媒体読取装置212により利用者Uの旅券から取得された顔画像である旅券顔画像と、チェックイン手続時に生体情報取得装置214により撮像された顔画像である撮像顔画像とを照合する。CPU202は、旅券顔画像と撮像顔画像との照合に際して、旅券顔画像から抽出した顔特徴量と、撮像顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
なお、CPU202は、照合部として機能することに代えて、管理サーバ10等の外部サーバに対して上記利用者Uの顔画像の照合を要求し、外部サーバから照合結果を取得するように構成することもできる。この場合、CPU202は、利用者Uの旅券顔画像及び撮像顔画像を外部サーバに送信して顔画像の照合を要求することができる。
また、CPU202は、利用者Uの利用者情報を管理サーバ10に送信する利用者情報送信部として機能する。利用者情報送信部としてのCPU202は、利用者Uの旅券顔画像と撮像顔画像との照合が一致して利用者Uの本人確認に成功した場合に、利用者Uの利用者情報を管理サーバ10に送信する。
利用者Uの利用者情報は、互いに関連付けられた利用者Uの身分情報、顔情報及び搭乗情報を含んでいる。
身分情報は、利用者Uの氏名、国籍、性別、生年月日等の利用者U個人に関する情報である。身分情報は、媒体読取装置212により利用者Uの旅券又は航空券媒体から取得されたものである。また、身分情報は、媒体読取装置212により利用者Uの旅券から取得された旅券番号、旅券発行国等の旅券情報を含むこともできる。
顔情報は、CPU202による照合を経た利用者Uの撮像顔画像又は旅券顔画像である。また、顔情報は、撮像顔画像及び旅券顔画像のいずれか一方であってもよいし、両画像であってもよい。また、顔情報は、撮像顔画像又は旅券顔画像それ自体でなくてもよく、撮像顔画像又は旅券顔画像から抽出された顔特徴量であってもよい。
搭乗情報は、利用者Uの搭乗予定の航空機の航空会社、便名、出発地、到着地、出発日時、到着日時等の利用者Uが利用予定のフライトに関する情報である。また、搭乗情報は、利用者Uの航空機への搭乗が締め切られる搭乗時刻を含みうる。搭乗情報は、媒体読取装置212により利用者Uの航空券媒体から取得されたものである。
なお、管理サーバ10に送信された利用者Uの利用者情報は、後述するように管理サーバ10において利用者情報データベース(DB、Database)106aに登録される。また、管理サーバ10に送信された利用者Uの利用者情報は、後述するように第1乃至第5照合用情報DB106b1、106b2、106b3、106b4、106b5にも登録されて照合に用いられる。
また、CPU202は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU202は、利用者Uの利用者情報を送信してチェックイン手続を完了した場合に、利用者Uのチェックイン手続を完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
なお、CPU202は、少なくとも、航空機に搭乗予定の利用者Uを識別するための情報と、チェックイン手続に関するステータス情報とを送信するものであればよい。この場合、利用者Uの搭乗情報は、管理サーバ10等のサーバのDBに予め登録されていればよい。
また、CPU202は、利用者Uに対する案内、通知等の画面をディスプレイ210に表示させる表示制御部として機能する。例えば、表示制御部としてのCPU202は、チェックイン端末20の利用方法を案内する案内画面をディスプレイ210に表示させる。また、CPU202は、利用者Uの旅券顔画像と撮像顔画像との照合が一致せず利用者Uの本人確認に失敗した場合に、利用者Uに対して本人確認に失敗した旨を通知する通知画面をディスプレイ210に表示させる。
記憶装置206は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置206は、CPU202により実行されるプログラム、そのプログラムの実行の際にCPU202により参照されるデータ等を記憶する。
入力装置208は、例えば、ディスプレイ210に組み込まれたタッチパネルである。入力装置208は、利用者Uからの指示の入力を受け付ける入力部として機能する。利用者Uは、入力装置208を介して、チェックイン端末20に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ210は、チェックイン端末20を利用する利用者Uに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ210は、チェックイン端末20の利用方法を案内する案内画面、利用者Uに対する通知画面を表示する。
媒体読取装置212は、利用者Uの旅券、航空券媒体を読み取って旅券、航空券に記録された情報を取得する情報取得部として機能する。航空券媒体は、例えば、紙の航空券、eチケット控えを表示する携帯端末等である。媒体読取装置212は、例えば、コードリーダ、イメージスキャナ、非接触IC(Integrated Circuit)リーダ、OCR(Optical Character Reader)装置等により構成され、その読取部にかざされた各種媒体から情報を取得する。
例えば、媒体読取装置212は、OCR装置により旅券券面に表示された利用者Uの身分情報及び旅券情報を読み取って取得する。また、例えば、媒体読取装置212は、イメージスキャナにより、旅券券面に表示された利用者Uの旅券顔画像を読み取って取得する。また、IC旅券の場合、媒体読取装置212は、非接触ICリーダにより、IC旅券のICチップに記録された利用者Uの身分情報、旅券情報、旅券顔画像等を読み取って取得する。また、例えば、媒体読取装置212は、コードリーダにより、航空券媒体に表示されたバーコード、QRコード(登録商標)を読み取って、航空券媒体から利用者Uの身分情報及び搭乗情報を取得する。
なお、チェックイン端末20は、航空券媒体から身分情報及び搭乗情報を取得するのみならず、他の方法で身分情報及び搭乗情報を取得することができる。例えば、CPU202は、利用者Uのクレジットカード番号、予約番号、確認番号等に基づき、航空券の予約購入情報を航空会社サーバに照会して、航空会社サーバから利用者Uの身分情報及び搭乗情報を取得することができる。
生体情報取得装置214は、チェックイン手続を行う利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置214は、例えば、チェックイン端末20の前に立つ利用者Uの顔を撮影するデジタルカメラであり、利用者Uの顔を撮影してその顔画像を取得する。
通信部216は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部216は、CPU202による制御に従って、管理サーバ10等との間の通信を行う。
こうして、チェックイン端末20が構成されている。
次に、自動手荷物預け機30の構成について図3を用いて説明する。図3は、自動手荷物預け機30のハードウェア構成の一例を示すブロック図である。自動手荷物預け機30は、利用者Uが自身で操作して、航空機の機内に持ち込まない手荷物を預けるための装置である。利用者Uは、必要に応じて、自動手荷物預け機30で手荷物を預ける手続を行うことができる。
自動手荷物預け機30は、図3に示すように、CPU302と、RAM304と、記憶装置306と、入力装置308と、ディスプレイ310とを有している。さらに、自動手荷物預け機30は、生体情報取得装置312と、手荷物搬送装置314と、出力装置316と、通信部318とを有している。CPU302、RAM304、記憶装置306、入力装置308、ディスプレイ310、生体情報取得装置312、手荷物搬送装置314、出力装置316及び通信部318は、バスライン320に接続されている。
CPU302は、記憶装置306に記憶されたプログラムを実行することにより動作し、自動手荷物預け機30全体の動作を制御する制御部として機能する。また、CPU302は、記憶装置306に記憶されたアプリケーションプログラムを実行して自動手荷物預け機30としての各種処理を実行する。RAM304は、CPU302の動作に必要なメモリ領域を提供する。
より具体的には、CPU302は、自動手荷物預け機30を利用して手荷物預け手続を行う利用者Uの顔画像の照合を要求する照合要求部として機能する。照合要求部としてのCPU302は、生体情報取得装置312により撮像された利用者Uの顔画像である対象顔画像と、管理サーバ10の第1照合用情報DB106b1に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。このため、CPU302は、対象生体情報として、生体情報取得装置312により撮像された対象顔画像を照合要求とともに管理サーバ10に送信する。なお、CPU302は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信して照合を要求してもよい。
なお、CPU302は、上記1:Nでの照合を要求することに代えて、利用者Uの対象顔画像と、利用者Uの旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像とを照合することを管理サーバ10に対して要求することもできる。この場合、管理サーバ10は、チェックイン端末20で取得された利用者Uの撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する際に、その利用者Uの旅券、搭乗券又はQRコードの情報と関連付けて登録する。CPU302は、不図示の媒体読取装置により利用者Uの旅券、搭乗券又はQRコードの情報を読み取り、読み取った情報を対象顔画像とともに管理サーバ10に送信する。管理サーバ10は、自動手荷物預け機30から送信された旅券、搭乗券又はQRコードの情報と一致する旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を利用者情報DB106aから取得する。管理サーバ10は、自動手荷物預け機30から送信された対象顔画像と、利用者情報DB106aから取得した登録情報顔画像とを1:1で照合する。なお、管理サーバ10は、旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を第1照合用情報DB106b1から取得することもできる。
また、CPU302は、管理サーバ10に対して要求した照合の結果を示す照合結果情報を管理サーバ10から取得する照合結果取得部として機能する。1:Nの照合の場合、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されて手荷物預け手続を行う利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。1:1の照合の場合、照合結果情報は、照合の結果、対象顔画像と登録顔画像と一致して手荷物預け手続を行う利用者Uの本人確認に成功したこと、又は一致せずに利用者Uの本人確認に失敗したことを示している。
なお、CPU302は、照合要求部及び照合結果取得部として機能することに代えて、上記のように対象顔画像と登録顔画像とを1:N又は1:1で照合して照合結果情報を出力する照合部として機能するように構成することもできる。この場合、CPU302は、管理サーバ10の第1照合用情報DB106b1を参照して、又は第1照合用情報DB106b1と同期されて記憶装置306に格納された照合用情報DBを参照して顔画像の照合を行うことができる。
また、CPU302は、照合結果情報が利用者Uの本人確認の成功を示す場合、手荷物搬送装置314を制御して利用者Uの手荷物の受け取り及び搬送を行う。
また、CPU302は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU302は、手荷物搬送装置314による手荷物の受け取り及び搬送が完了して手荷物預け手続を完了した場合に、利用者Uの手荷物預け手続が完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
また、CPU302は、利用者Uに対する案内、通知等の画面をディスプレイ310に表示させる表示制御部として機能する。例えば、表示制御部としてのCPU302は、自動手荷物預け機30の利用方法を案内する案内画面をディスプレイ310に表示させる。また、CPU302は、照合結果情報が利用者Uの本人確認の失敗を示す場合に、利用者Uに対して本人確認に失敗した旨を通知する通知画面をディスプレイ310に表示させる。
記憶装置306は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置306は、CPU302により実行されるプログラム、そのプログラムの実行の際にCPU302により参照されるデータ等を記憶する。
入力装置308は、例えば、ディスプレイ310に組み込まれたタッチパネルである。入力装置308は、利用者Uからの指示の入力を受け付ける入力部として機能する。利用者Uは、入力装置308を介して、自動手荷物預け機30に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ310は、自動手荷物預け機30を利用する利用者Uに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ310は、自動手荷物預け機30の利用方法を案内する案内画面、利用者Uに対する通知画面を表示する。
生体情報取得装置312は、手荷物預け手続を行う利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置312は、例えば、自動手荷物預け機30の前を撮影するデジタルカメラであり、常時又は定期的に撮影する画像中に自動手荷物預け機30の前に立つ利用者Uの顔を検出すると、その利用者Uの顔を撮影してその顔画像を取得する。
手荷物搬送装置314は、利用者Uの本人確認に成功した場合に、利用者Uが搭乗する航空機にその手荷物を積み込むために搬送する。手荷物搬送装置314は、利用者Uにより受け取り部に置かれて手荷物タグが付けられた手荷物を荷捌き場に向けて搬送する。
出力装置316は、預ける手荷物に付ける手荷物タグを出力し、また、到着後に手荷物の引き換えに必要な手荷物引き換え証を出力する。利用者Uは、出力装置316から出力された手荷物タグを預ける手荷物に付ける。また、利用者Uは、到着後に手荷物を受け取るため、出力装置316から出力された手荷物引き換え証を受け取る。手荷物タグは、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられている。
通信部318は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部318は、CPU302による制御に従って、管理サーバ10等との間の通信を行う。
こうして、自動手荷物預け機30が構成されている。
次に、保安検査装置40の構成について図4を用いて説明する。図4は、保安検査装置40のハードウェア構成の一例を示すブロック図である。保安検査装置40は、利用者Uについて金属探知機である金属探知ゲート414により危険物となりうる金属類を身につけていないかを確認する装置である。なお、保安検査装置40は、金属探知ゲート414等の金属探知機のほか、X線検査装置等により機内持ち込みの手荷物等の中の危険物の有無を確認するものであってもよい。
保安検査装置40は、図4に示すように、CPU402と、RAM404と、記憶装置406と、入力装置408と、ディスプレイ410と、生体情報取得装置412と、金属探知ゲート414と、通信部416とを有している。CPU402、RAM404、記憶装置406、入力装置408、ディスプレイ410、生体情報取得装置412、金属探知ゲート414及び通信部416は、バスライン418に接続されている。
CPU402は、記憶装置406に記憶されたプログラムを実行することにより動作し、保安検査装置40全体の動作を制御する制御部として機能する。また、CPU402は、記憶装置406に記憶されたアプリケーションプログラムを実行して保安検査装置40としての各種処理を実行する。RAM404は、CPU402の動作に必要なメモリ領域を提供する。
より具体的には、CPU402は、保安検査装置40による保安検査手続を受ける利用者Uの顔画像の照合を要求する照合要求部として機能する。照合要求部としてのCPU402は、生体情報取得装置412により撮像された利用者Uの顔画像である対象顔画像と、管理サーバ10の第2照合用情報DB106b2に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。このため、CPU402は、対象生体情報として、生体情報取得装置412により撮像された対象顔画像を照合要求とともに管理サーバ10に送信する。なお、CPU402は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信して照合を要求してもよい。
なお、CPU402は、上記1:Nでの照合を要求することに代えて、利用者Uの対象顔画像と、利用者Uの旅券、搭乗券又はQRコード等のコードシンボルの情報と関連付けられた登録顔画像とを照合することを管理サーバ10に対して要求することもできる。この場合、管理サーバ10は、チェックイン端末20で取得された利用者Uの撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する際に、その利用者Uの旅券、搭乗券又はコードシンボルの情報と関連付けて登録する。CPU402は、不図示の媒体読取装置により利用者Uの旅券、搭乗券又はコードシンボルの情報を読み取り、読み取った情報を対象顔画像とともに管理サーバ10に送信する。管理サーバ10は、保安検査装置40から送信された旅券、搭乗券又はコードシンボルの情報と一致する旅券、搭乗券又はコードシンボルの情報と関連付けられた登録顔画像を利用者情報DB106aから取得する。管理サーバ10は、保安検査装置40から送信された対象顔画像と、利用者情報DB106aから取得した登録情報顔画像とを1:1で照合する。なお、管理サーバ10は、旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を第2照合用情報DB106b2から取得することもできる。
また、CPU402は、管理サーバ10に対して要求した照合の結果を示す照合結果情報を管理サーバ10から取得する照合結果取得部として機能する。1:Nの照合の場合、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されて保安検査手続を受ける利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。1:1の照合の場合、照合結果情報は、照合の結果、対象顔画像と登録顔画像と一致して保安検査手続を受ける利用者Uの本人確認に成功したこと、又は一致せずに利用者Uの本人確認に失敗したことを示している。
なお、CPU402は、照合要求部及び照合結果取得部として機能することに代えて、上記のように対象顔画像と登録顔画像とを1:N又は1:1で照合して照合結果情報を出力する照合部として機能するように構成することもできる。この場合、CPU402は、管理サーバ10の第2照合用情報DB106b2を参照して、又は第2照合用情報DB106b2と同期されて記憶装置406に格納された照合用情報DBを参照して顔画像の照合を行うことができる。
また、CPU402は、照合結果情報が利用者Uの本人確認の成功を示す場合、金属探知ゲート414による検査を続行させる。
また、CPU402は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU402は、金属探知ゲート414による検査が異常なく完了した場合に、利用者Uの保安検査手続が完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
また、CPU402は、利用者Uに対する案内、通知等の画面をディスプレイ410に表示させる表示制御部として機能する。例えば、表示制御部としてのCPU402は、金属探知ゲート414の通過を利用者Uに促す画面をディスプレイ410に表示させる。また、CPU402は、照合結果情報が利用者Uの本人確認の失敗を示す場合に、利用者Uに対して本人確認に失敗した旨を通知する通知画面をディスプレイ410に表示させる。また、CPU402は、金属探知ゲート414による検査で金属類が検出された場合に、身に付けた持ち物に金属類がないかの確認及び再度の金属探知ゲート414の通過を指示する通知画面をディスプレイ410に表示させる。
記憶装置406は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置406は、CPU402により実行されるプログラム、そのプログラムの実行の際にCPU402により参照されるデータ等を記憶する。
入力装置408は、例えば、ディスプレイ410に組み込まれたタッチパネルである。入力装置408は、利用者Uからの指示の入力を受け付ける入力部として機能する。利用者Uは、入力装置408を介して、保安検査装置40に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ410は、保安検査装置40による保安検査手続を受ける利用者Uに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ410は、金属探知ゲート414の通過を利用者Uに促す画面、利用者Uに対する通知画面を表示する。
生体情報取得装置412は、保安検査手続を受ける利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置412は、例えば、金属探知ゲート414の前を撮影するデジタルカメラであり、常時又は定期的に撮影する画像中に金属探知ゲート414の前に立つ利用者Uの顔を検出すると、その利用者Uの顔を撮影してその顔画像を取得する。
金属探知ゲート414は、ゲート型の金属探知機であり、金属探知ゲート414を通過する利用者Uの身に付けている金属類を探知する。
通信部416は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部416は、CPU402による制御に従って、管理サーバ10等との間の通信を行う。
こうして、保安検査装置40が構成されている。
次に、自動化ゲート装置50の構成について図5を用いて説明する。図5は、自動化ゲート装置50のハードウェア構成の一例を示すブロック図である。自動化ゲート装置50は、利用者Uの出国審査手続を自動的に行う装置である。自動化ゲート装置50による出国審査手続を利用可能な利用者Uは、例えば、事前申請による審査を受けて自動化ゲート装置50の利用者登録を受けた者、渡航回数等の渡航履歴に基づき利用可能とされた者、国間の協定に基づき利用者登録を受けた者等である。
自動化ゲート装置50は、図5に示すように、CPU502と、RAM504と、記憶装置506と、入力装置508と、ディスプレイ510と、生体情報取得装置512と、ゲート514と、通信部516とを有している。CPU502、RAM504、記憶装置506、入力装置508、ディスプレイ510、生体情報取得装置512、ゲート514及び通信部516は、バスライン518に接続されている。
CPU502は、記憶装置506に記憶されたプログラムを実行することにより動作し、自動化ゲート装置50全体の動作を制御する制御部として機能する。また、CPU502は、記憶装置506に記憶されたアプリケーションプログラムを実行して、自動化ゲート装置50としての各種処理を実行する。RAM504は、CPU502の動作に必要なメモリ領域を提供する。
より具体的には、CPU502は、自動化ゲート装置50を利用して出国審査手続を受ける利用者Uの顔画像の照合を要求する照合要求部として機能する。照合要求部としてのCPU502は、生体情報取得装置512により撮像された利用者Uの顔画像である対象顔画像と、管理サーバ10の第3照合用情報DB106b3に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。このため、CPU502は、対象生体情報として、生体情報取得装置512により撮像された対象顔画像を照合要求とともに管理サーバ10に送信する。なお、CPU502は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信して照合を要求してもよい。
なお、CPU502は、上記1:Nでの照合を要求することに代えて、利用者Uの対象顔画像と、利用者Uの旅券、搭乗券又はQRコード等のコードシンボルの情報と関連付けられた登録顔画像とを照合することを管理サーバ10に対して要求することもできる。この場合、管理サーバ10は、チェックイン端末20で取得された利用者Uの撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する際に、その利用者Uの旅券、搭乗券又はコードシンボルの情報と関連付けて登録する。CPU502は、不図示の媒体読取装置により利用者Uの旅券、搭乗券又はコードシンボルの情報を読み取り、読み取った情報を対象顔画像とともに管理サーバ10に送信する。管理サーバ10は、自動化ゲート装置50から送信された旅券、搭乗券又はコードシンボルの情報と一致する旅券、搭乗券又はコードシンボルの情報と関連付けられた登録顔画像を利用者情報DB106aから取得する。管理サーバ10は、自動化ゲート装置50から送信された対象顔画像と、利用者情報DB106aから取得した登録情報顔画像とを1:1で照合する。なお、管理サーバ10は、旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を第3照合用情報DB106b3から取得することもできる。
また、CPU502は、管理サーバ10に対して要求した照合の結果を示す照合結果情報を管理サーバ10から取得する照合結果取得部として機能する。1:Nの照合の場合、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されて出国審査手続を受ける利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。1:1の照合の場合、照合結果情報は、照合の結果、対象顔画像と登録顔画像と一致して出国審査手続を受ける利用者Uの本人確認に成功したこと、又は一致せずに利用者Uの本人確認に失敗したことを示している。
なお、CPU502は、照合要求部及び照合結果取得部として機能することに代えて、上記のように対象顔画像と登録顔画像とを1:N又は1:1で照合して照合結果情報を出力する照合部として機能するように構成することもできる。この場合、CPU502は、管理サーバ10の第3照合用情報DB106b3を参照して、又は第3照合用情報DB106b3と同期されて記憶装置506に格納された照合用情報DBを参照して顔画像の照合を行うことができる。
また、CPU502は、照合結果情報が利用者Uの本人確認の成功を示す場合、ゲート514を制御して利用者Uに対してゲート514の通行を許可する。
また、CPU502は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU502は、利用者Uに対してゲート514の通行を許可して出国審査手続を完了した場合に、利用者Uの出国審査手続が完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
また、CPU502は、利用者Uに対する案内、通知等の画面をディスプレイ510に表示させる表示制御部として機能する。例えば、表示制御部としてのCPU502は、自動化ゲート装置50の利用方法を案内する案内画面をディスプレイ510に表示させる。また、CPU502は、照合結果情報が利用者Uの本人確認の失敗を示す場合に、利用者Uに対して本人確認に失敗した旨を通知する通知画面をディスプレイ510に表示させる。
記憶装置506は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置506は、CPU502により実行されるプログラム、そのプログラムの実行の際にCPU502により参照されるデータ等を記憶する。
入力装置508は、例えば、ディスプレイ510に組み込まれたタッチパネルである。入力装置508は、利用者Uからの指示の入力を受け付ける入力部として機能する。利用者Uは、入力装置508を介して自動化ゲート装置50に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ510は、自動化ゲート装置50を利用して出国審査手続を受ける利用者Uに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ510は、自動化ゲート装置50の利用方法を案内する案内画面、利用者Uに対する通知画面等を表示する。
生体情報取得装置512は、出国審査手続を受ける利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置512は、例えば、自動化ゲート装置50の前を撮影するデジタルカメラであり、常時又は定期的に撮影する画像中に自動化ゲート装置50の前に立つ利用者Uの顔を検出すると、その利用者Uの顔を撮影してその顔画像を取得する。
ゲート514は、自動化ゲート装置50における利用者Uの本人確認に成功して出国審査を利用者Uが通過した場合に、CPU502による制御に従って、利用者Uの通行を遮る待機時の閉鎖状態から、利用者Uの通行を許可する開放状態に移行する。ゲート514の方式は、特に限定されるものではなく、例えば、通路の片側又は両側から設けられたフラッパーが開閉するフラッパーゲート、3本バーが回転するターンスタイルゲート等である。
通信部516は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部516は、CPU502による制御に従って、管理サーバ10等との間の通信を行う。
こうして、自動化ゲート装置50が構成されている。
次に、サイネージ端末60の構成について図6を用いて説明する。図6は、サイネージ端末60のハードウェア構成の一例を示すブロック図である。サイネージ端末60は、搭乗ゲートP6への導線案内、広告等を表示する端末である。
サイネージ端末60は、図6に示すように、CPU602と、RAM604と、記憶装置606と、ディスプレイ608と、生体情報取得装置610と、通信部612とを有している。CPU602、RAM604、記憶装置606、ディスプレイ608、生体情報取得装置610及び通信部612は、バスライン614に接続されている。
CPU602は、記憶装置606に記憶されたプログラムを実行することにより動作し、サイネージ端末60全体の動作を制御する制御部として機能する。また、CPU602は、記憶装置606に記憶されたアプリケーションプログラムを実行して、サイネージ端末60としての各種処理を実行する。RAM604は、CPU602の動作に必要なメモリ領域を提供する。
より具体的には、CPU602は、サイネージ端末60の前の利用者Uの顔画像を管理サーバ10に送信する顔情報送信部として機能する。サイネージ端末60の前の利用者Uとは、例えば、サイネージ端末60の前に所在してサイネージ端末60に表示された案内を確認する利用者、サイネージ端末60の前を通過する利用者U等である。顔情報送信部としてのCPU602は、対象生体情報として、生体情報取得装置610により撮像された利用者Uの顔画像である対象顔画像を管理サーバ10に送信する。なお、CPU602は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信してもよい。サイネージ端末60から対象顔画像を受信した管理サーバ10は、受信した対象顔画像と、第4照合用情報DB106b4に登録された複数の登録顔画像とを1:Nで照合する。
また、CPU602は、搭乗ゲートP6への導線案内、広告等の画面をディスプレイ608に表示させる表示制御部として機能する。
なお、サイネージ端末60のCPU602も、自動手荷物預け機30のCPU302等と同様に、以下に述べるように、照合要求部、照合結果取得部及びステータス情報送信部として機能することもできる。
より具体的には、CPU602は、サイネージ端末60の前に所在し又はサイネージ端末60の前を通過する利用者Uの顔画像の照合を要求する照合要求部として機能することができる。照合要求部としてのCPU602は、生体情報取得装置610により撮像された利用者Uの顔画像である対象顔画像と、管理サーバ10の第4照合用情報DB106b4に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。このため、CPU602は、対象生体情報として、生体情報取得装置610により撮像された対象顔画像を照合要求とともに管理サーバ10に送信する。なお、CPU602は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信して照合を要求してもよい。
なお、CPU602は、上記1:Nでの照合を要求することに代えて、利用者Uの対象顔画像と、利用者Uの旅券、搭乗券又はQRコード等のコードシンボルの情報と関連付けられた登録顔画像とを照合することを管理サーバ10に対して要求することもできる。この場合、管理サーバ10は、チェックイン端末20で取得された利用者Uの撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する際に、その利用者Uの旅券、搭乗券又はコードシンボルの情報と関連付けて登録する。CPU602は、不図示の媒体読取装置により利用者Uの旅券、搭乗券又はコードシンボルの情報を読み取り、読み取った情報を対象顔画像とともに管理サーバ10に送信する。管理サーバ10は、サイネージ端末60から送信された旅券、搭乗券又はコードシンボルの情報と一致する旅券、搭乗券又はコードシンボルの情報と関連付けられた登録顔画像を利用者情報DB106aから取得する。管理サーバ10は、サイネージ端末60から送信された対象顔画像と、利用者情報DB106aから取得した登録情報顔画像とを1:1で照合する。なお、管理サーバ10は、旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を第4照合用情報DB106b4から取得することもできる。
また、CPU602は、管理サーバ10に対して要求した照合の結果を示す照合結果情報を管理サーバ10から取得する照合結果取得部として機能することができる。1:Nの照合の場合、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されてサイネージ端末60の前の利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。1:1の照合の場合、照合結果情報は、照合の結果、対象顔画像と登録顔画像と一致してサイネージ端末60の前の利用者Uの本人確認に成功したこと、又は一致せずに利用者Uの本人確認に失敗したことを示している。
なお、CPU602は、照合要求部及び照合結果取得部として機能することに代えて、上記のように対象顔画像と登録顔画像とを1:N又は1:1で照合して照合結果情報を出力する照合部として機能するように構成することもできる。この場合、CPU602は、管理サーバ10の第4照合用情報DB106b4を参照して、又は利用者情報DB106aと同期されて記憶装置606に格納された照合用情報DBを参照して顔画像の照合を行うことができる。
また、CPU602は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU602は、サイネージ端末60の前の利用者Uの本人確認に成功した場合に、利用者Uのサイネージ端末60前の所在又は通過が完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
記憶装置606は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置606は、CPU602により実行されるプログラム、そのプログラムの実行の際にCPU602により参照されるデータ等を記憶する。
ディスプレイ608は、各種画面を表示する表示部として機能する。例えば、ディスプレイ608は、搭乗ゲートP6への導線案内、広告等の画面を表示する。ディスプレイ608が表示する導線案内、広告等は、例えば、サイネージ端末60の前の利用者Uとして特定された個人に対応するものである。
生体情報取得装置610は、サイネージ端末60の前の利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置610は、例えば、サイネージ端末60の前を撮影するデジタルカメラであり、常時又は定期的に撮影する画像中にサイネージ端末60の前の利用者Uの顔を検出すると、その利用者Uの顔を撮影してその顔画像を取得する。
通信部612は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部612は、CPU602による制御に従って、管理サーバ10等との間の通信を行う。
こうして、サイネージ端末60が構成されている。
次に、搭乗ゲート装置70の構成について図7を用いて説明する。図7は、搭乗ゲート装置70のハードウェア構成の一例を示すブロック図である。搭乗ゲート装置70は、利用者Uが、その搭乗ゲート装置70が設置された搭乗ゲートP6から搭乗可能な航空機の搭乗者であることを確認する装置である。
搭乗ゲート装置70は、図7に示すように、CPU702と、RAM704と、記憶装置706と、入力装置708と、ディスプレイ710と、生体情報取得装置712と、ゲート714と、通信部716とを有している。CPU702、RAM704、記憶装置706、入力装置708、ディスプレイ710、生体情報取得装置712、ゲート714及び通信部716は、バスライン718に接続されている。
CPU702は、記憶装置706に記憶されたプログラムを実行することにより動作し、搭乗ゲート装置70全体の動作を制御する制御部として機能する。また、CPU702は、記憶装置706に記憶されたアプリケーションプログラムを実行して、搭乗ゲート装置70としての各種処理を実行する。RAM704は、CPU702の動作に必要なメモリ領域を提供する。
より具体的には、CPU702は、搭乗ゲートP6から航空機に搭乗する利用者Uの顔画像の照合及び搭乗情報の確認を要求する照合要求部として機能する。
照合要求部としてのCPU702は、生体情報取得装置712により撮像された利用者Uの顔画像である対象顔画像と、管理サーバ10の第5照合用情報DB106b5に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。このため、CPU702は、対象生体情報として、生体情報取得装置712により撮像された対象顔画像を照合要求とともに管理サーバ10に送信する。なお、CPU702は、対象生体情報として、対象顔画像を送信することに代えて、対象顔画像から抽出された特徴量である顔特徴量を送信して照合を要求してもよい。
なお、CPU702は、上記1:Nでの照合を要求することに代えて、利用者Uの対象顔画像と、利用者Uの旅券、搭乗券又はQRコード等のコードシンボルの情報と関連付けられた登録顔画像とを照合することを管理サーバ10に対して要求することもできる。この場合、管理サーバ10は、チェックイン端末20で取得された利用者Uの撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する際に、その利用者Uの旅券、搭乗券又はコードシンボルの情報と関連付けて登録する。CPU702は、不図示の媒体読取装置により利用者Uの旅券、搭乗券又はコードシンボルの情報を読み取り、読み取った情報を対象顔画像とともに管理サーバ10に送信する。管理サーバ10は、搭乗ゲート装置70から送信された旅券、搭乗券又はコードシンボルの情報と一致する旅券、搭乗券又はコードシンボルの情報と関連付けられた登録顔画像を利用者情報DB106aから取得する。管理サーバ10は、搭乗ゲート装置70から送信された対象顔画像と、利用者情報DB106aから取得した登録情報顔画像とを1:1で照合する。なお、管理サーバ10は、旅券、搭乗券又はQRコードの情報と関連付けられた登録顔画像を第5照合用情報DB106b5から取得することもできる。
また、照合要求部としてのCPU702は、対象顔画像と一致した登録顔画像と関連付けられた搭乗情報が、搭乗ゲートP6から搭乗可能な航空機に関連することを確認することを管理サーバ10に対して要求する。
また、CPU702は、管理サーバ10に対して要求した照合の結果を示す照合結果情報を管理サーバ10から取得する照合結果取得部として機能する。1:Nの照合の場合、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されて航空機への搭乗を行う利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。また、照合結果情報は、搭乗情報が航空機に関連することが確認されて搭乗情報の確認に成功したこと、又は関連することが確認されずに搭乗情報の確認に失敗したことを示している。1:1の照合の場合、照合結果情報は、照合の結果、対象顔画像と登録顔画像と一致して航空機への搭乗を行う利用者Uの本人確認に成功したこと、又は一致せずに利用者Uの本人確認に失敗したことを示している。
なお、CPU702は、照合要求部及び照合結果取得部として機能することに代えて、上記のように対象顔画像と第5照合用情報DB106b5の登録顔画像とを1:N又は1:1で照合して照合結果情報を出力する照合部として機能するように構成することもできる。また、CPU702は、対象顔画像と一致した登録顔画像と関連付けられた搭乗情報が、搭乗ゲートP6から搭乗可能な航空機に関連することを確認するように構成することもできる。これらの場合、CPU702は、管理サーバ10の第5照合用情報DB106b5を参照して、又は第5照合用情報DB106b5と同期されて記憶装置706に格納された照合用情報DBを参照して顔画像の照合及び搭乗情報の確認を行うことができる。
また、CPU702は、照合結果情報が、利用者Uの本人確認の成功を示し、かつ、搭乗情報の確認に成功したことを示す場合、ゲート714を制御して利用者Uに対してゲート714の通行を許可する。
また、CPU702は、利用者Uの状況に関する情報であるステータス情報を送信するステータス情報送信部として機能する。ステータス情報送信部としてのCPU702は、利用者Uに対してゲート714の通行を許可して利用者Uが航空機への搭乗を完了した場合に、利用者Uの航空機への搭乗が完了したことを示すステータス情報を管理サーバ10に送信する。ステータス情報は、管理サーバ10において利用者Uの利用者情報又は利用者情報に含まれる顔情報、旅券情報及び搭乗情報のうちの少なくともいずれかに関連付けられる。
また、CPU702は、利用者Uに対する案内、通知等の画面をディスプレイ710に表示させる表示制御部として機能する。例えば、表示制御部としてのCPU702は、搭乗ゲート装置70の利用方法を案内する案内画面をディスプレイ710に表示させる。また、CPU702は、照合結果情報が利用者Uの本人確認の失敗を示す場合に、利用者Uに対して本人確認に失敗した旨を通知する通知画面をディスプレイ710に表示させる。また、CPU702は、照合結果情報が搭乗情報の確認の失敗を示す場合に、利用者Uに対して搭乗情報の確認に失敗した旨を通知する通知画面をディスプレイ710に表示させる。
記憶装置706は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置706は、CPU702により実行されるプログラム、そのプログラムの実行の際にCPU702により参照されるデータ等を記憶する。
入力装置708は、例えば、ディスプレイ710に組み込まれたタッチパネルである。入力装置708は、利用者Uからの指示の入力を受け付ける入力部として機能する。利用者Uは、入力装置708を介して搭乗ゲート装置70に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ710は、搭乗ゲートP6から航空機に搭乗する利用者Uに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ710は、搭乗ゲート装置70の利用方法を案内する案内画面、利用者Uに対する通知画面等を表示する。
生体情報取得装置712は、搭乗ゲートP6から航空機に搭乗する利用者Uの生体情報として利用者Uの顔画像を取得する生体情報取得部として機能する。生体情報取得装置712は、例えば、搭乗ゲート装置70の前を撮影するデジタルカメラであり、常時又は定期的に撮影する画像中に搭乗ゲート装置70の前に立つ利用者Uの顔を検出すると、その利用者Uの顔を撮影してその顔画像を取得する。
ゲート714は、搭乗ゲート装置70における利用者Uの本人確認及び搭乗情報の確認に成功した場合に、CPU702による制御に従って、利用者Uの通行を遮る待機時の閉鎖状態から、利用者Uの通行を許可する開放状態に移行する。ゲート714の方式は、特に限定されるものではなく、例えば、通路の片側又は両側から設けられたフラッパーが開閉するフラッパーゲート、3本バーが回転するターンスタイルゲート等である。
通信部716は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部716は、CPU702による制御に従って、管理サーバ10等との間の通信を行う。
こうして、搭乗ゲート装置70が構成されている。
次に、管理サーバ10の構成について図8を用いて説明する。図8は、管理サーバ10のハードウェア構成の一例を示すブロック図である。管理サーバ10は、利用者Uの利用者情報及びステータスを管理し、また、顔画像の照合要求に応じて対象顔画像と第1乃至第5照合用情報DB106b1-106b5いずれかの複数の登録顔画像とを照合する情報処理装置である。なお、管理サーバ10の機能は、単一のサーバにより実現されてもよいし、複数のサーバ装置により実現されてもよい。
管理サーバ10は、図8に示すように、CPU102と、RAM104と、記憶装置106と、通信部108とを有している。CPU102、RAM104、記憶装置106及び通信部108は、バスライン110に接続されている。
CPU102は、記憶装置106に記憶されたプログラムを実行することにより動作し、管理サーバ10全体の動作を制御する制御部として機能する。また、CPU102は、記憶装置106に記憶されたアプリケーションプログラムを実行して、管理サーバ10としての各種処理を実行する。RAM104は、CPU102の動作に必要なメモリ領域を提供する。
より具体的には、CPU102は、チェックイン端末20から受信した利用者Uの利用者情報を記憶装置106に記録して管理する情報管理部として機能する。情報管理部としてのCPU102は、チェックイン端末20から受信した利用者情報を、記憶装置106に格納された利用者情報DB106aに登録して管理する。CPU102は、チェックイン端末20から利用者情報を受信するたびに、受信した利用者情報を利用者情報DB106aに登録する。利用者Uの利用者情報は、上述したように、互いに関連付けられた利用者Uの身分情報、顔情報及び搭乗情報を含んでいる。顔情報は、チェックイン端末20で取得された撮影顔画像又は旅券顔画像である。利用者情報DB106aに登録された撮影顔画像又は旅券顔画像である登録顔画像は、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50及び搭乗ゲート装置70における利用者Uの本人確認のための顔画像の照合に用いられる。
また、CPU102は、利用者Uの航空機への搭乗までの複数の手続に関する利用者Uのステータスを記憶装置106に記録して管理するステータス管理部として機能する。ステータス管理部としてのCPU102は、利用者Uのステータスを、利用者情報DB106aにその利用者Uの利用者情報と関連付けて記録して管理する。CPU102は、外部装置である、チェックイン端末20、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50及び搭乗ゲート装置70から受信したステータス情報に基づき、利用者Uの各手続に関するステータスを管理する。また、CPU102は、サイネージ端末60から受信した対象顔画像の照合結果に基づき、利用者Uの手続である利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを管理する。CPU102は、利用者Uの航空機への搭乗までの複数の手続について後述するように設定された期限である期限時刻とともに、利用者Uの各手続に関するステータスを管理する。
具体的には、CPU102は、利用者Uのチェックイン手続に関するステータスを管理する。すなわち、CPU102は、チェックイン端末20から利用者Uのチェックイン手続を完了したことを示すステータス情報を受信すると、利用者情報DB106aの当該利用者Uのチェックイン手続に関するステータスを未完了から完了に更新する。
また、CPU102は、利用者Uの手荷物預け手続に関するステータスを管理する。すなわち、CPU102は、自動手荷物預け機30から利用者Uの手荷物預け手続が完了したことを示すステータス情報を受信すると、利用者情報DB106aの当該利用者Uの手荷物預け手続に関するステータスを未完了から完了に更新する。なお、利用者Uの手荷物預け手続は、手荷物を預ける必要がある場合に行われる任意の手続である。このため、利用者Uの手荷物預け手続に関するステータスが未完了のままであることがありうる。これは、利用者Uによっては手荷物が少なく手荷物を預けない者もいる場合を対象としている。
また、CPU102は、利用者Uの保安検査手続に関するステータスを管理する。すなわち、CPU102は、保安検査装置40から利用者Uの保安検査手続が完了したことを示すステータス情報を受信すると、利用者情報DB106aの当該利用者Uの保安検査手続に関するステータスを未完了から完了に更新する。
また、CPU102は、利用者Uの出国審査手続に関するステータスを管理する。すなわち、CPU102は、自動化ゲート装置50から利用者Uの出国審査手続が完了したことを示すステータス情報を受信すると、利用者情報DB106aの当該利用者Uの出国審査手続に関するステータスを未完了から完了に更新する。
また、CPU102は、利用者Uの航空機への搭乗に関するステータスを管理する。すなわち、CPU102は、搭乗ゲート装置70から利用者Uの航空機への搭乗が完了したことを示すステータス情報を受信すると、利用者情報DB106aの当該利用者Uの航空機への搭乗に関するステータスを未完了から完了に更新する。
さらに、CPU102は、利用者Uのサイネージ端末60の前の所在又は通過に関するステータスをも管理する。この場合、CPU102は、サイネージ端末60から対象顔画像を受信すると、受信した対象顔画像と利用者情報DB106aの複数の登録顔画像とを照合する。照合の結果、一致する登録顔画像を発見すると、CPU102は、利用者情報DB106aの当該利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを未完了から完了に更新する。
こうして、ステータス管理部としてのCPU102は、利用者Uの搭乗までの複数の手続である、チェックイン手続、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗に関するステータスを管理する。CPU102は、各手続の際に取得された対象顔画像と登録顔画像との照合の結果に基づき、利用者Uの各手続に関するステータスを管理する。すなわち、CPU102は、各手続の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uの各手続に関するステータスを未完了から完了に更新する。これら空港Aにおける複数の手続に含まれる一の手続及びその一の手続に続く別の手続とは、例えばチェックイン手続から航空機への搭乗までの複数の手続の順番における隣り合う2つの手続を意味し、一の手続に続く別の手続とは、一の手続の次の手続を意味する。例えば、具体的には、保安検査手続を一の手続とすると、出国審査手続が、一の手続に続く別の手続である。
なお、CPU102は、これら複数の手続すべてに関する利用者Uのステータスを管理する必要は必ずしもなく、これらの手続のうちの任意の一又は複数の手続に関する利用者Uのステータスを管理することができる。
また、情報管理部及びステータス管理部としてのCPU102は、上記利用者情報DB106aとともに又はこれに代えて、第1乃至第5照合用情報DB106b1-106b5に利用者Uの利用者情報及びステータスを登録して管理する。CPU102は、第1乃至第5照合用情報DB106b1-106b5に登録された利用者Uのステータスを、利用者情報DB106aの場合と同様に更新して管理する。CPU102は、上述のように利用者Uの手続に従って更新される利用者Uのステータスに応じて、利用者Uの利用者情報及びステータスを第1乃至第5照合用情報DB106b1-106b5のいずれかに登録する。第1乃至第5照合用情報DB106b1-106b5に登録される利用者情報は、例えば利用者情報DB106aに登録された利用者情報と同内容のものであるが、少なくとも登録顔画像を含むものであればよい。
より具体的には、CPU102は、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスを第1照合用情報DB106b1に登録する。ここにいう他の手続に関するステータスとは、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗に関するステータスである。
CPU102は、第1照合用情報DB106b1に利用者情報が登録された利用者Uの手荷物預け手続に関するステータスが未完了から完了に更新されると、当該利用者Uの利用者情報及びステータスの移動登録を行う。すなわち、CPU102は、当該利用者Uの利用者情報及びステータスを、第1照合用情報DB106b1から第2照合用情報DB106b2に移動して登録する。
また、CPU102は、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスを第2照合用情報DB106b2に登録する。ここにいう他の手続に関するステータスとは、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗に関するステータスである。
CPU102は、第2照合用情報DB106b2に利用者情報が登録された利用者Uの保安検査手続に関するステータスが未完了から完了に更新されると、当該利用者Uの利用者情報及びステータスの移動登録を行う。すなわち、CPU102は、当該利用者Uの利用者情報及びステータスを第2照合用情報DB106b2から第3照合用情報DB106b3に移動して登録する。
また、CPU102は、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスを第3照合用情報DB106b3に登録する。ここにいう他の手続に関するステータスとは、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗に関するステータスである。
CPU102は、第3照合用情報DB106b3に利用者情報が登録された利用者Uの出国審査手続に関するステータスが未完了から完了に更新されると、当該利用者Uの利用者情報及びステータスの移動登録を行う。すなわち、CPU102は、当該利用者Uの利用者情報及びステータスを第3照合用情報DB106b3から第4照合用情報DB106b4に移動して登録する。
また、CPU102は、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスを第4照合用情報DB106b4に登録する。ここにいう他の手続に関するステータスとは、サイネージ端末60の前の所在又は通過及び航空機への搭乗に関するステータスである。
CPU102は、第4照合用情報DB106b4に利用者情報が登録された利用者Uのサイネージ端末60の前の所在又は通過に関するステータスが未完了から完了に更新されると、当該利用者Uの利用者情報及びステータスの移動登録を行う。すなわち、CPU102は、当該利用者Uの利用者情報及びステータスを第4照合用情報DB106b4から第5照合用情報DB106b5に移動して登録する。
また、CPU102は、航空機への搭乗に関するステータスが未完了、他の手続に関するステータスが完了の利用者Uの利用者情報及びステータスを第5照合用情報DB106b5に登録する。ここにいう他の手続に関するステータスとは、チェックイン手続、手荷物預け手続、保安検査手続、出国審査手続及びサイネージ端末60の前の所在又は通過に関するステータスである。
CPU102は、第5照合用情報DB106b5に利用者情報が登録された利用者Uの航空機への搭乗に関するステータスが未完了から完了に更新されると、当該利用者Uの利用者情報及びステータスを、第5照合用情報DB106b5から削除する。
こうして、CPU102は、登録顔画像を含む利用者情報に対応する利用者Uの手続に関するステータスに応じて、利用者情報を複数のDBである第1乃至第5照合用情報DB106b1-106b5に登録する。すなわち、CPU102は、チェックイン手続後の一連の手続における一の手続に関するステータスが完了になると、当該利用者の登録顔画像を含む利用者情報を、一の手続に応じた一のDBから一の手続に続く別の手続に応じた別のDBに移動して登録する。CPU102は、第1乃至第5照合用情報DB106b1-106b5に登録された利用者情報に含まれる登録顔画像を、それぞれ手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の際の照合に用いる。
また、CPU102は、利用者Uの搭乗情報に基づき、空港Aにおける各手続を含む利用者Uの複数の手続について利用者Uがそれまでに完了すべき所定の時刻である期限時刻を設定する期限設定部として機能する。期限時刻が設定される手続は、チェックイン手続後の手荷物預け手続、保安検査手続、出国審査手続及び航空機への搭乗である。また、CPU102は、利用者Uのサイネージ端末60の前の所在又は通過を、期限時刻を設定する手続として取り扱う。CPU102は、これら利用者Uの航空機への搭乗までの複数の手続について期限時刻を設定する。
期限設定部としてのCPU102は、利用者Uの搭乗情報に含まれる出発日時における出発時刻から、利用者Uの航空機への搭乗が締め切られる搭乗時刻を計算する。例えば、CPU102は、航空機の出発時刻の10分前の時刻を搭乗時刻として計算することができる。また、CPU102は、利用者Uの搭乗情報自体に含まれる搭乗時刻を搭乗情報から取得することもできる。
期限設定部としてのCPU102は、計算又は取得した搭乗時刻から、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の各手続について、利用者Uがそれまでに完了すべき期限時刻を計算する。CPU102は、利用者Uの航空機への搭乗までの複数の手続の順と搭乗情報とに基づいて、複数の手続のそれぞれの期限を設定することができる。すなわち、CPU102は、利用者Uの航空機への搭乗までの複数の手続の順が航空機への搭乗の手続に近いほど、当該手続の期限を遅く設定することができる。
例えば、CPU102は、搭乗時刻の60分前の時刻を、手荷物預け手続の期限時刻として計算することができる。また、例えば、CPU102は、搭乗時刻の30分前の時刻を、保安検査手続の期限時刻として計算することができる。また、例えば、CPU102は、搭乗時刻の20分前の時刻を、出国審査手続の期限時刻として計算することができる。また、例えば、CPU102は、搭乗時刻の15分前の時刻を、サイネージ端末60の前の所在又は通過の期限時刻として計算することができる。また、例えば、CPU102は、搭乗時刻の10分前の時刻を、航空機への搭乗の期限時刻として計算することができる。なお、CPU102は、搭乗情報に含まれる出発時刻自体から各手続について期限時刻を計算することもできる。また、CPU102は、搭乗情報に含まれる航空機の便名から、フライトスケジュールに関するデータベース等を参照して搭乗時刻又は出発時刻を取得して、各手続について期限時刻を計算することもできる。
なお、期限設定部としてのCPU102は、チェックイン手続を行った利用者Uの人数の多さに応じて期限時刻を設定することができる。つまり、CPU102は、チェックイン手続を行った利用者Uの人数が多いほど、期限時刻と搭乗時刻との間の時間を短く設定することができる。
また、期限設定部としてのCPU102は、利用者Uが航空機への搭乗を行う施設である空港Aの混雑状況に応じて、換言すれば空港Aの利用者Uの数に応じて、上述した各手続の期限時刻を適宜変更して設定することができる。CPU102は、例えば、空港Aの混雑状況を、利用者情報DB106aに登録する利用者情報の単位時間当たりの数に基づいて判定することができる。すなわち、利用者情報DB106aに登録する利用者情報の単位時間当たりの数がより多いほど、空港Aがより混雑した状況にあると判定することができる。CPU102は、空港Aがより混雑した状況にあるほど、期限時刻をより早い時刻に設定することができる。
また、期限設定部としてのCPU102は、設定した各手続の期限時刻を、例えば、利用者情報DB106aの利用者Uの利用者情報及びステータスと関連付けて利用者情報DB106aに記録して管理することができる。すなわち、ステータス管理部としてのCPU102は、設定された期限である期限時刻とともに、利用者Uの各手続に関するステータスを管理することができる。
期限設定部としてのCPU102は、上述のようにして、利用者Uの搭乗までの複数の手続である、チェックイン手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗について期限として期限時刻を設定する。なお、CPU102は、これら複数の手続すべてについて期限時刻を設定する必要は必ずしもなく、これらの手続のうちの任意の一又は複数の手続にについて期限時刻を設定することができる。
また、CPU102は、上述のように期限時刻が設定された利用者Uの搭乗までの各手続について、ステータスが未完了のまま期限時刻を経過しているか否かを判定する判定部として機能する。判定部としてのCPU102は、未完了の手続について、例えば定期又は不適に期限時刻を経過しているか否かを判定することができる。
また、CPU102は、アラート部として機能し、ステータスが未完了のまま期限時刻を経過していると判定した利用者Uの手続について、期限時刻の経過後において未完了である旨を示すアラートを生成して送信する。アラート部としてのCPU102は、職員Sが携帯する業務端末80に送信することができる。CPU102は、例えば第3実施形態で説明するように利用者Uの所在場所が特定されている場合には、その場所の近くにいる職員Sが携帯する業務端末80にアラートを送信することができる。さらに、CPU102は、特定されている利用者Uの所在場所の近くにいる職員Sを、当該職員S及び他の職員Sが携帯する業務端末80に通知又は表示することができる。これにより、CPU102は、職員Sに対して、職員Sのうちのだれがアラートに対応すると適切かを教示することができる。
アラートは、例えば、手続が未完了の利用者Uの利用者情報の一部又は全部、搭乗情報の一部又は全部、各手続に関するステータス等を含むことができる。アラートは、利用者Uの登録顔画像、好ましくはチェックイン端末20で撮影された利用者Uの撮影顔画像である登録顔画像を含むことができる。業務端末80でアラートを受信した職員Sは、アラートに含まれる登録顔画像を手掛かりにして、手続が未完了の利用者Uを探すことができる。なお、アラートに含まれる登録顔画像は、利用者Uの旅券顔画像であってもよいが、チェックイン手続時という最近の利用者Uの顔を示すチェックイン端末20による撮影顔画像であることが好ましい。
また、CPU102は、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60及び搭乗ゲート装置70から、対象顔画像及び照合要求又は対象顔画像を受信した場合に、利用者Uの顔画像の照合を行う照合部として機能する。照合部としてのCPU102は、対象生体情報である対象顔画像と、第1乃至第5照合用情報DB106b1-106b5のいずれかに登録された登録生体情報である複数の登録顔画像とを1:Nで照合する。第1乃至第5照合用情報DB106b1-106b5には、チェックイン端末20でチェックイン手続を行った複数の利用者Uの利用者情報がステータスに応じて登録されている。CPU102は、対象顔画像と登録顔画像との照合に際して、対象生体情報である対象顔画像から抽出した顔特徴量と、登録生体情報である登録顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
照合部としてのCPU102は、対象顔画像と照合する複数の登録顔画像を、登録顔画像に対応する利用者Uのステータスに基づき選択する。すなわち、CPU102は、手続で取得された対象生体情報と、対象顔画像が取得された手続に関する最新のステータスが未完了の利用者Uの登録顔画像とを照合する。このために、CPU102は、第1乃至第5照合用情報DB106b1-106b5から選択したDBに登録された登録顔画像を対象顔画像と照合する。
より具体的には、照合部としてのCPU102は、自動手荷物預け機30から対象顔画像及び照合要求を受信した場合に、受信した対象顔画像と、第1照合用情報DB106b1に登録された複数の登録顔画像とを照合する。第1照合用情報DB106b1には、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像が登録されている。これにより、CPU102は、手荷物預け手続の際に取得された対象顔画像と、チェックイン手続に関するステータスが完了で手荷物預け手続に関するステータスが未完了の利用者Uの登録顔画像とを照合することができる。このため、CPU102は、手荷物預け手続の直前の手続であるチェックイン手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に手荷物預け手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、手荷物預け手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、照合部としてのCPU102は、保安検査装置40から対象顔画像及び照合要求を受信した場合に、受信した対象顔画像と、第2照合用情報DB106b2に登録された複数の登録顔画像とを照合する。第2照合用情報DB106b2には、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像が登録されている。これにより、CPU102は、保安検査手続の際に取得された対象顔画像と、手荷物預け手続に関するステータスが完了で保安検査手続に関するステータスが未完了の利用者Uの登録顔画像とを照合することができる。このため、CPU102は、保安検査手続の直前の手続の手荷物預け手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に保安検査手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、保安検査手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、照合部としてのCPU102は、自動化ゲート装置50から対象顔画像及び照合要求を受信した場合に、受信した対象顔画像と、第3照合用情報DB106b3に登録された複数の登録顔画像とを照合する。第3照合用情報DB106b3には、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像が登録されている。これにより、CPU102は、出国審査手続の際に取得された対象顔画像と、保安検査手続に関するステータスが完了で出国審査手続に関するステータスが未完了の利用者Uの登録顔画像とを照合することができる。このため、CPU102は、出国審査手続の直前の手続の保安検査手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に出国審査手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、出国審査手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、照合部としてのCPU102は、サイネージ端末60から対象顔画像を受信した場合に、受信した対象顔画像と、第4照合用情報DB106b4に登録された複数の登録顔画像とを照合する。第4照合用情報DB106b4には、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像が登録されている。これにより、CPU102は、サイネージ端末60の前の所在又は通過の際に取得された対象顔画像と、出国審査手続に関するステータスが完了でサイネージ端末60の前の所在又は通過に関するステータスが未完了の利用者Uの登録顔画像とを照合することができる。このため、CPU102は、サイネージ端末60の前の所在又は通過の直前の手続の出国審査手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既にサイネージ端末60の前の所在又は通過を完了した利用者Uの登録顔画像との照合を行うこともない。よって、サイネージ端末60の前の所在又は通過の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、照合部としてのCPU102は、搭乗ゲート装置70から対象顔画像を受信した場合に、受信した対象顔画像と、第5照合用情報DB106b5に登録された複数の登録顔画像とを照合する。第5照合用情報DB106b5には、航空機への搭乗に関するステータスが未完了、他の手続に関するステータスが完了の利用者Uの登録顔画像が登録されている。これにより、CPU102は、航空機への搭乗の際に取得された対象顔画像と、サイネージ端末60の前の所在又は通過に関するステータスが完了で航空機への搭乗に関するステータスが未完了の利用者Uの登録顔画像とを照合することができる。このため、CPU102は、航空機への搭乗の直前の手続のサイネージ端末60の前の所在又は通過が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に航空機への搭乗を完了した利用者Uの登録顔画像との照合を行うこともない。よって、航空機への搭乗の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
航空機への搭乗までの一連の手続は、一の手続とこれに続く別の手続とを含んでいる。照合部としてのCPU102は、別の手続の際に取得された対象顔画像を、一の手続に関するステータスが完了、かつ別の手続に関するステータスが未完了の利用者Uの登録顔画像と照合する。
照合部としてのCPU102は、上述のように各手続に応じて、対象顔画像と照合する登録顔画像のDBとして、利用者Uのステータスに応じた利用者情報が登録された第1乃至第5照合用情報DB106b1-106b5を選択して使い分ける。このため、本実施形態によれば、対象顔画像と照合する母集団である複数の登録顔画像の数を低減することができ、生体情報である顔画像の照合精度を向上することができる。
照合部としてのCPU102は、対象顔画像と第1乃至第5照合用情報DB106b1-106b5のそれぞれの複数の登録顔画像との照合により、複数の登録顔画像の中から、対象顔画像と一致する登録顔画像の発見を試みる。CPU102は、送信部としても機能し、照合要求を送信した自動手荷物預け機30、保安検査装置40、自動化ゲート装置50及び搭乗ゲート装置70の各装置に対して、照合の結果を示す照合結果情報を送信する。照合結果情報は、照合一致又は照合不一致を示している。すなわち、照合結果情報は、照合の結果、対象顔画像と一致する登録顔画像が発見されて手荷物預け手続を行う利用者Uの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示している。なお、CPU102は、対象顔画像と第1乃至第5照合用情報DB106b1-106b5のそれぞれの又はいずれかの一の登録顔画像との照合を行うことがありうる。
また、CPU102は、チェックイン端末20のCPU202に代わって、生体情報取得装置214により撮像された撮像顔画像と、媒体読取装置212により取得された旅券顔画像とを1:1で照合することもできる。この場合、CPU102は、チェックイン端末20から照合すべき撮像顔画像及び旅券顔画像又はこれらの顔特徴量を受信する。また、CPU102は、チェックイン端末20に対して、撮像顔画像と旅券顔画像との照合の結果を示す照合結果情報を送信する。
記憶装置106は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置106は、CPU102により実行されるプログラム、そのプログラムの実行の際にCPU102により参照されるデータ等を記憶する。
また、記憶装置106は、利用者情報DB106a及び第1乃至第5照合用情報DB106b1-106b5を格納している。利用者情報DB106aには、チェックイン端末20でチェックイン手続を行った複数の利用者Uのすべての利用者情報が登録されている。また、利用者情報DB106aには、利用者情報に関連付けられて利用者Uのステータスが登録されている。第1乃至第5照合用情報DB106b1-106b5には、それぞれ利用者Uのステータスに応じた利用者情報及びステータスが登録されている。なお、記憶装置106は、利用者情報DB106aと、第1乃至第5照合用情報DB106b1-106b5との両方を格納していてもよいし、第1乃至第5照合用情報DB106b1-106b5のみを格納していてもよい。
通信部108は、ネットワークNWに接続され、ネットワークNWを介してデータの送受信を行う。通信部108は、CPU102による制御に従って、チェックイン端末20、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60、搭乗ゲート装置70等との間の通信を行う。
こうして、管理サーバ10が構成されている。
次に、業務端末80の構成について図9を用いて説明する。図9は、業務端末80のハードウェア構成の一例を示すブロック図である。業務端末80は、航空会社の職員、空港会社の職員等の職員Sが携帯してその業務に使用する端末であり、例えば、タブレット端末、スマートフォン、携帯電話等である。なお、業務端末80は、例えば、職員が業務に従事するカウンタ等の業務場所に設置された据え置き型の情報処理端末であってもよい。
業務端末80は、図9に示すように、CPU802と、RAM804と、記憶装置806と、入力装置808と、ディスプレイ810と、移動体通信部812と、近距離無線通信部814とを有している。CPU802、RAM804、記憶装置806、入力装置808、ディスプレイ810、移動体通信部812及び近距離無線通信部814は、バスライン816に接続されている。
CPU802は、記憶装置806に記憶されたプログラムを実行することにより動作し、業務端末80全体の動作を制御する制御部として機能する。また、CPU802は、記憶装置806に記憶されたアプリケーションプログラムを実行して、業務端末80としての各種処理を実行する。RAM804は、CPU802の動作に必要なメモリ領域を提供する。
より具体的には、CPU802は、情報取得部として機能し、管理サーバ10の利用者情報DB106aにアクセスして、利用者情報DB106aに記録された利用者Uの利用者情報及びステータスを取得することができる。情報取得部としてのCPU802は、取得した利用者情報及びステータスをディスプレイ810に表示させることができる。
また、CPU802は、アラート受信部として機能し、管理サーバ10から送信されたアラートを受信することができる。アラート受信部としてのCPU802は、受信したアラートをディスプレイ810に表示させることができる。
記憶装置806は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置806は、CPU802により実行されるプログラム、そのプログラムの実行の際にCPU802により参照されるデータ等を記憶する。
入力装置808は、例えば、ディスプレイ810に組み込まれたタッチパネルである。入力装置808は、職員Sからの指示の入力を受け付ける入力部として機能する。職員Sは、入力装置808を介して業務端末80に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
ディスプレイ810は、職員Sに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ810は、利用者情報DB106aに記録された利用者Uの利用者情報及びステータスの内容を示す画面、管理サーバ10から受信したアラートの内容を示す画面等を表示する。
移動体通信部812は、CPU802による制御に従って、移動体通信網を介してネットワークNWに接続する。移動体通信部812の通信方式は、特に限定されるものではないが、例えば、第3世代移動通信方式、LTE(Long Term Evolution)方式、第4世代移動通信方式等が挙げられる。
近距離無線通信部814は、CPU802による制御に従って、アクセスポイント、外部機器等と無線通信を行い、例えば、空港Aの構内のアクセスポイントを介してネットワークNWに接続する。近距離無線通信部814の通信方式は、特に限定されるものではないが、例えば、Wi-Fi(登録商標)等の無線LAN方式、Bluetooth(登録商標)通信方式、NFC(Near Field Communication)方式、赤外線通信方式等が挙げられる。
こうして、業務端末80が構成されている。
本実施形態による情報処理システム1は、管理サーバ10において、各手続に応じて、対象顔画像と照合する登録顔画像のDBとして、利用者Uのステータスに応じた利用者情報が登録された第1乃至第5照合用情報DB106b1-106b5を使い分ける。このため、本実施形態によれば、対象顔画像と照合する母集団である複数の登録顔画像の数を低減することができ、照合精度を向上することができる。
また、本実施形態による情報処理システム1は、管理サーバ10において、航空機に搭乗予定の利用者Uについて、チェックイン端末20で取得された搭乗情報に基づき搭乗までの各手続の期限時刻を設定して、利用者Uの各手続に関するステータスを管理する。したがって、本実施形態による情報処理システム1によれば、航空機に搭乗予定の利用者Uの状況をより詳細に把握して管理することができる。
また、本実施形態による情報処理システム1は、手続のステータスが未完了のまま期限時刻を経過した場合には、管理サーバ10が、その旨を示すアラートを生成して業務端末80に送信する。また、アラートは、利用者Uの登録顔画像を含んでいる。したがって、本実施形態による情報処理システム1によれば、利用者Uの登録顔画像を手掛かりにして、手続が未完了の利用者Uを職員Sが容易に探すことができる。
以下、本実施形態による情報処理システム1における各構成要素の動作についてさらに図10乃至図25Cを用いて説明する。
まず、チェックイン端末20の動作について管理サーバ10の動作とともに図10を用いて説明する。図10は、チェックイン端末20及び管理サーバ10の動作を示すシーケンス図である。
空港Aに到着した利用者Uは、チェックインロビーP1に向かい、チェックイン端末20でチェックイン手続を行う。チェックイン端末20及び管理サーバ10は、複数の利用者Uのそれぞれがチェックイン手続を行うたびに図10に示す処理を実行する。
図10に示すように、チェックイン端末20の媒体読取装置212は、その読取部に利用者Uの旅券がかざされたか否かを判定し(ステップS102)、旅券がかざされるまで待機する(ステップS102、NO)。
媒体読取装置212は、旅券がかざされたと判定すると(ステップS102、YES)、かざされた旅券から利用者Uの旅券情報を取得する(ステップS104)。取得された旅券情報には、利用者Uの旅券顔画像が含まれる。この際、媒体読取装置212は、旅券から利用者Uの身分情報をも取得することができる。
次いで、媒体読取装置212は、その読取部に利用者Uの航空券媒体がかざされたか否かを判定し(ステップS106)、航空券媒体がかざされるまで待機する(ステップS106、NO)。
媒体読取装置212は、航空券媒体がかざされたと判定すると(ステップS106、YES)、かざされた旅券から利用者Uの搭乗情報を取得する(ステップS108)。この際、媒体読取装置212は、航空券媒体から利用者Uの身分情報をも取得することができる。
なお、旅券情報を取得するステップS104と、搭乗情報を取得するステップS108と、顔画像を取得するステップS110との順序は、上記の場合に限定されるものではない。ステップS104、S108、S110のうちのいずれのステップが先の順序で実行されてもよいし、ステップS104、S108、S110の全部又は一部の組が同時に実行されてもよい。
次いで、チェックイン端末20の生体情報取得装置214は、チェックイン端末20の前に立つ利用者Uの顔を撮影して、利用者Uの顔画像である撮影顔画像を取得する(ステップS110)。
次いで、チェックイン端末20のCPU202は、生体情報取得装置214により撮像された撮像顔画像と、媒体読取装置212により取得された旅券顔画像とを1:1で照合する(ステップS112)。
照合の結果、CPU202は、撮像顔画像と旅券顔画像との照合が一致して本人確認に成功したと判定すると(ステップS114、YES)、利用者Uの利用者情報を管理サーバ10にネットワークNWを介して送信する(ステップS116)。利用者情報は、互いに関連付けられた利用者Uの身分情報、顔情報及び搭乗情報を含んでいる。
管理サーバ10のCPU102は、チェックイン端末20から利用者情報を受信すると、受信した利用者情報を利用者情報DB106aに登録する(ステップS118)。CPU102は、利用者情報に含まれる撮影顔画像又は旅券顔画像を登録顔画像として利用者情報DB106aに登録する。こうして、チェックイン端末20は、利用者Uについてチェックイン手続が完了する。チェックイン手続きを完了した利用者Uは、手荷物を預ける必要があれば手荷物カウンタP2に向かい、その必要がなければ保安検査場P3に向かう。
さらに、チェックイン端末20のCPU202は、利用者情報の送信後又は送信とともに、顔画像の照合を経て利用者Uのチェックイン手続を完了したことを示すステータス情報を管理サーバ10にネットワークNWを介して送信する(ステップS120)。
管理サーバ10のCPU102は、外部装置であるチェックイン端末20からステータス情報を受信すると、利用者情報DB106aの当該利用者Uのチェックイン手続に関するステータスを未完了から完了に更新する(ステップS122)。このように、CPU102は、チェックイン手続の際に取得された撮影顔画像の旅券顔画像との照合結果に基づき、利用者Uのチェックイン手続に関するステータスを管理する。すなわち、CPU102は、チェックイン手続の際に取得された撮像顔画像と旅券顔画像との照合が一致した場合に、当該利用者Uのチェックイン手続に関するステータスを未完了から完了に更新する。
また、CPU102は、チェックイン手続に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを第1照合用情報DB106b1に登録する。
一方、照合の結果、CPU202は、撮像顔画像と旅券顔画像との照合が一致せずに本人確認に失敗したと判定すると(ステップS114、NO)、利用者Uに対して本人確認に失敗した旨を通知する(ステップS124)。この際、CPU202は、本人確認に失敗した旨を通知する通知画面をディスプレイ210に表示させる。なお、CPU202は、通知画面の表示とともに又は通知画面の表示に代えて、利用者Uに対して本人確認に失敗した旨を例えば音声により通知することもできる。
こうして、チェックイン端末20において利用者Uのチェックイン手続が行われる。
なお、利用者Uは、チェックイン端末20によるチェックイン手続に代えて、有人のチェックインカウンタにおいてチェックイン手続を行うこともできる。この場合、チェックインカウンタの職員により操作される端末が、上述したチェックイン端末20と同様の処理を実行することができる。また、利用者Uは、チェックイン端末20によるチェックイン手続に代えて、航空会社のウェブサイトから行うオンラインチェックインを利用することもできる。この場合、例えば、利用者Uは、空港Aに設置された専用端末から顔画像を管理サーバ10の利用者情報DB106aに登録顔画像として別途登録することができる。
管理サーバ10のCPU102は、上述のようにして利用者情報DB106aに登録された利用者Uの利用者情報及びステータスを、利用者Uのステータスに応じて第1乃至第5照合用情報DB106b1-106b5に順次移動登録していく。
次に、自動手荷物預け機30の動作について管理サーバ10の動作とともに図11を用いて説明する。図11は、自動手荷物預け機30及び管理サーバ10の動作を示すシーケンス図である。
チェックイン手続を完了した利用者Uは、必要に応じて手荷物カウンタP2に向かい、自動手荷物預け機30で手荷物預け手続を行う。自動手荷物預け機30及び管理サーバ10は、複数の利用者Uのそれぞれが手荷物預け手続を行うたびに図11に示す処理を実行する。
図11に示すように、自動手荷物預け機30の生体情報取得装置312は、自動手荷物預け機30の前を常時又は定期的に撮影し、撮影した画像中に自動手荷物預け機30の前に立つ利用者Uの顔が検出されたか否かを判定する(ステップS202)。生体情報取得装置312は、画像中に利用者Uの顔が検出されるまで待機する(ステップS202、NO)。
生体情報取得装置312は、利用者Uの顔が検出されたと判定すると(ステップS202、YES)、その利用者Uの顔を撮影して、利用者Uの顔画像を対象顔画像として取得する(ステップS204)。
次いで、自動手荷物預け機30のCPU302は、生体情報取得装置312により撮像された利用者Uの対象顔画像を照合要求とともに管理サーバ10にネットワークNWを介して送信する(ステップS206)。これにより、CPU302は、生体情報取得装置312により撮像された利用者Uの対象顔画像と、管理サーバ10の第1照合用情報DB106b1に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。
管理サーバ10のCPU102は、自動手荷物預け機30から対象顔画像及び照合要求を受信すると、利用者Uの顔画像の照合を行う(ステップS208)。CPU102は、自動手荷物預け機30から受信した対象顔画像と、第1照合用情報DB106b1に登録された複数の登録顔画像とを1:Nで照合する。
次いで、CPU102は、照合の結果を示す照合結果情報を自動手荷物預け機30にネットワークNWを介して送信する(ステップS210)。
自動手荷物預け機30のCPU302は、管理サーバ10から照合結果情報を受信する。照合結果情報が、対象顔画像と一致する登録顔画像が発見されて手荷物預け手続を行う利用者Uの本人確認に成功したことを示す場合(ステップS212、YES)、CPU302は、利用者Uの手荷物の預かり処理を実行する(ステップS214)。預かり処理において、CPU302は、対象顔画像と一致する登録顔画像に関連付けられた搭乗情報又は旅券情報を取得して、預かり処理に使用する。CPU302は、自動手荷物預け機30の各部を制御する。これにより、出力装置316は、登録顔画像に関連付けられた搭乗情報又は旅券情報に関連付けて手荷物タグ及び手荷物引き換え証を出力する。また、手荷物搬送装置314は、利用者Uにより受け取り部に置かれて手荷物タグが付けられた手荷物を荷捌き場に向けて搬送する。手荷物を預けた利用者Uは、保安検査場P3に向かう。
次いで、CPU302は、顔画像の照合を経て利用者Uの手荷物預け手続が完了したことを示すステータス情報を管理サーバ10にネットワークNWを介して送信する(ステップS216)。
管理サーバ10のCPU102は、外部装置である自動手荷物預け機30からステータス情報を受信すると、利用者情報DB106aの当該利用者Uの手荷物預け手続に関するステータスを未完了から完了に更新する(ステップS218)。このように、CPU102は、手荷物預け手続の際に取得された対象顔画像と登録顔画像との照合結果に基づき、利用者Uの手荷物預け手続に関するステータスを管理する。すなわち、CPU102は、手荷物預け手続の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uの手荷物預け手続に関するステータスを未完了から完了に更新する。
また、CPU102は、手荷物預け手続に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを、第1照合用情報DB106b1から第2照合用情報DB106b2に移動して登録する。
一方、照合結果情報が、一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示す場合(ステップS212、NO)、自動手荷物預け機30のCPU302は、利用者Uに対して本人確認に失敗した旨を通知する(ステップS220)。この際、CPU302は、本人確認に失敗した旨を通知する通知画面をディスプレイ310に表示させる。なお、CPU302は、通知画面の表示とともに又は通知画面の表示に代えて、利用者Uに対して本人確認に失敗した旨を例えば音声により通知することもできる。このように本人確認に失敗した場合は、不図示の媒体読取装置に搭乗券又は旅券を読み取らせることにより、通常のプロセスで手荷物の預かり処理を実行することができる。
こうして、自動手荷物預け機30において手荷物預け手続が行われる。
次に、保安検査装置40の動作について管理サーバ10の動作とともに図12を用いて説明する。図12は、保安検査装置40及び管理サーバ10の動作を示すシーケンス図である。
チェックイン手続を完了し、必要に応じて手荷物預け手続を完了した利用者Uは、保安検査場P3に向かい、保安検査装置40で保安検査手続を受ける。保安検査装置40及び管理サーバ10は、複数の利用者Uのそれぞれが保安検査手続を受けるたびに図12に示す処理を実行する。
図12に示すように、保安検査装置40の生体情報取得装置412は、金属探知ゲート414の前を常時又は定期的に撮影し、撮影した画像中に金属探知ゲート414の前に立つ利用者Uの顔が検出されたか否かを判定する(ステップS302)。生体情報取得装置412は、画像中に利用者Uの顔が検出されるまで待機する(ステップS302、NO)。
生体情報取得装置412は、利用者Uの顔が検出されたと判定すると(ステップS302、YES)、その利用者Uの顔を撮影して、利用者Uの顔画像を対象顔画像として取得する(ステップS304)。
次いで、保安検査装置40のCPU402は、生体情報取得装置412により撮像された利用者Uの対象顔画像を照合要求とともに管理サーバ10にネットワークNWを介して送信する(ステップS306)。これにより、CPU402は、生体情報取得装置412により撮像された利用者Uの対象顔画像と、管理サーバ10の第2照合用情報DB106b2に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。
管理サーバ10のCPU102は、保安検査装置40から対象顔画像及び照合要求を受信すると、利用者Uの顔画像の照合を行う(ステップS308)。CPU102は、保安検査装置40から受信した対象顔画像と、第2照合用情報DB106b2に登録された複数の登録顔画像とを1:Nで照合する。
次いで、CPU102は、照合の結果を示す照合結果情報を保安検査装置40にネットワークNWを介して送信する(ステップS310)。
保安検査装置40のCPU402は、管理サーバ10から照合結果情報を受信する。照合結果情報が、対象顔画像と一致する登録顔画像が発見されて保安検査手続を受ける利用者Uの本人確認に成功したことを示す場合(ステップS312、YES)、CPU402は、利用者Uの保安検査処理を実行する(ステップS314)。保安検査処理において、CPU402は、保安検査装置40の各部を制御する。これにより、金属探知ゲート414は、金属探知ゲート414を通過する利用者Uの身に付けている金属類を探知する。金属探知ゲート414を通過した利用者Uは、出国審査場P4に向かう。
次いで、CPU402は、顔画像の照合を経て利用者Uの保安検査手続が完了したことを示すステータス情報を管理サーバ10にネットワークNWを介して送信する(ステップS316)。
管理サーバ10のCPU102は、外部装置である保安検査装置40からステータス情報を受信すると、利用者情報DB106aの当該利用者Uの保安検査手続に関するステータスを未完了から完了に更新する(ステップS318)。このように、CPU102は、保安検査手続の際に取得された対象顔画像と登録顔画像との照合結果に基づき、利用者Uの保安検査手続に関するステータスを管理する。すなわち、CPU102は、保安検査手続の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uの保安検査手続に関するステータスを未完了から完了に更新する。
また、CPU102は、保安検査手続に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを、第2照合用情報DB106b2から第3照合用情報DB106b3に移動して登録する。
一方、照合結果情報が、一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示す場合(ステップS312、NO)、保安検査装置40のCPU402は、利用者Uに対して本人確認に失敗した旨を通知する(ステップS320)。この際、CPU402は、本人確認に失敗した旨を通知する通知画面をディスプレイ410に表示させる。なお、CPU402は、通知画面の表示とともに又は通知画面の表示に代えて、利用者Uに対して本人確認に失敗した旨を例えば音声により通知することもできる。
こうして、保安検査装置40において保安検査手続が行われる。
次に、自動化ゲート装置50の動作について管理サーバ10の動作とともに図13を用いて説明する。図13は、自動化ゲート装置50及び管理サーバ10の動作を示すシーケンス図である。
保安検査手続を完了した利用者Uは、出国審査場P4に向かい、自動化ゲート装置50で出国審査手続を受ける。自動化ゲート装置50及び管理サーバ10は、複数の利用者Uのそれぞれが出国審査手続を受けるたびに図13に示す処理を実行する。
図13に示すように、自動化ゲート装置50の生体情報取得装置512は、自動化ゲート装置50の前を常時又は定期的に撮影し、撮影した画像中に自動化ゲート装置50の前に立つ利用者Uの顔が検出されたか否かを判定する(ステップS402)。生体情報取得装置512は、画像中に利用者Uの顔が検出されるまで待機する(ステップS402、NO)。
生体情報取得装置512は、利用者Uの顔が検出されたと判定すると(ステップS402、YES)、その利用者Uの顔を撮影して、利用者Uの顔画像を対象顔画像として取得する(ステップS404)。
次いで、自動化ゲート装置50のCPU502は、生体情報取得装置512により撮影された利用者Uの対象顔画像を照合要求とともに管理サーバ10にネットワークNWを介して送信する(ステップS406)。これにより、CPU502は、生体情報取得装置512により撮像された利用者Uの対象顔画像と、管理サーバ10の第3照合用情報DB106b3に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。
管理サーバ10のCPU102は、自動化ゲート装置50から対象顔画像及び照合要求を受信すると、利用者Uの顔画像の照合を行う(ステップS408)。CPU102は、自動化ゲート装置50から受信した対象顔画像と、第3照合用情報DB106b3に登録された複数の登録顔画像とを1:Nで照合する。
次いで、CPU102は、照合の結果を示す照合結果情報を自動化ゲート装置50にネットワークNWを介して送信する(ステップS410)。
自動化ゲート装置50のCPU502は、管理サーバ10から照合結果情報を受信する。照合結果情報が、対象顔画像と一致する登録顔画像が発見されて出国審査手続を受ける利用者Uの本人確認に成功したことを示す場合(ステップS412、YES)、CPU502は、ゲート514の開放処理を実行する(ステップS414)。これにより、CPU502は、ゲート514を、利用者Uの通行を遮る待機時の閉鎖状態から、利用者Uの通行を許可する開放状態に移行させる。利用者Uは、開放されたゲート514を通行して搭乗ゲートP6に向かう。
次いで、CPU502は、顔画像の照合を経て利用者Uの出国審査手続が完了したことを示すステータス情報を管理サーバ10にネットワークNWを介して送信する(ステップS416)。
管理サーバ10のCPU102は、外部装置である自動化ゲート装置50からステータス情報を受信すると、利用者情報DB106aの当該利用者Uの出国審査手続に関するステータスを未完了から完了に更新する(ステップS418)。このように、CPU102は、出国審査手続の際に取得された対象顔画像と登録顔画像との照合結果に基づき、利用者Uの出国審査手続に関するステータスを管理する。すなわち、CPU102は、出国審査手続の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uの出国審査手続に関するステータスを未完了から完了に更新する。
また、CPU102は、出国審査手続に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを、第3照合用情報DB106b3から第4照合用情報DB106b4に移動して登録する。
一方、照合結果情報が、一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したことを示す場合(ステップS412、NO)、自動化ゲート装置50のCPU502は、利用者Uに対して本人確認に失敗した旨を通知する(ステップS420)。この際、CPU502は、本人確認に失敗した旨を通知する通知画面をディスプレイ510に表示させる。なお、CPU502は、通知画面の表示とともに又は通知画面の表示に代えて、利用者Uに対して本人確認に失敗した旨を例えば音声により通知することもできる。
こうして、自動化ゲート装置50において出国審査手続が行われる。
次に、サイネージ端末60の動作について管理サーバ10の動作とともに図14を用いて説明する。図14は、サイネージ端末60及び管理サーバ10の動作を示すシーケンス図である。
出国審査手続を完了した利用者Uは、サイネージ端末60が設置された通路P5を通行して搭乗ゲートP6に向かう。この際、利用者Uは、サイネージ端末60の前を通過し、又はサイネージ端末60の前に一端立ち止まって所在し、サイネージ端末60に表示される搭乗ゲートP6への導線案内を確認する。サイネージ端末60及び管理サーバ10は、複数の利用者Uのそれぞれがサイネージ端末60の前を通過し又はサイネージ端末60の前に所在するたびに図14に示す処理を実行する。
図14に示すように、サイネージ端末60の生体情報取得装置610は、サイネージ端末60の前を常時又は定期的に撮影し、撮影した画像中にサイネージ端末60の前の利用者Uの顔が検出されたか否かを判定する(ステップS502)。サイネージ端末60の前の利用者Uは、サイネージ端末60の前を通過し又はサイネージ端末60の前に所在する利用者Uである。生体情報取得装置610は、画像中に利用者Uの顔が検出されるまで待機する(ステップS502、NO)。
生体情報取得装置610は、利用者Uの顔が検出されたと判定すると(ステップS502、YES)、その利用者Uの顔を撮影して、利用者Uの顔画像を対象顔画像として取得する(ステップS504)。
次いで、サイネージ端末60のCPU602は、生体情報取得装置610により撮影された利用者Uの対象顔画像を管理サーバ10にネットワークNWを介して送信する(ステップS506)。
管理サーバ10のCPU102は、外部装置であるサイネージ端末60から対象顔画像を受信すると、利用者Uの顔画像の照合を行う(ステップS508)。CPU102は、サイネージ端末60から受信した対象顔画像と、第4照合用情報DB106b4に登録された複数の登録顔画像とを1:Nで照合する。
なお、サイネージ端末60のCPU602は、サイネージ端末60の前の映像を管理サーバ10にストリーム送信するように構成することができる。この場合、管理サーバ10のCPU102は、サイネージ端末60から対象顔画像を受信することに代えて、サイネージ端末60からストリーム送信される映像から利用者Uの対象顔画像を検出して取得することができる。
照合の結果、対象顔画像と一致する登録顔画像が発見されてサイネージ端末60の前の利用者Uが特定された場合(ステップS510、YES)、CPU102は、当該利用者Uのステータスを更新する(ステップS512)。すなわち、CPU102は、利用者情報DB106aの当該利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを未完了から完了に更新する。このように、CPU102は、サイネージ端末60の前の所在又は通過の際に取得された対象顔画像と登録顔画像との照合結果に基づき、利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを管理する。すなわち、CPU102は、サイネージ端末60の前の所在又は通過の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを未完了から完了に更新する。
また、CPU102は、サイネージ端末60の前の所在又は通過に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを、第4照合用情報DB106b4から第5照合用情報DB106b5に移動して登録する。
一方、照合の結果、対象顔画像と一致する登録顔画像が発見されずにサイネージ端末60の前の利用者Uが特定されない場合(ステップS510、NO)、CPU102は、サイネージ端末60から送信された対象顔画像に関する処理を終了する。
次に、搭乗ゲート装置70の動作について管理サーバ10の動作とともに図15を用いて説明する。図15は、搭乗ゲート装置70及び管理サーバ10の動作を示すシーケンス図である。
サイネージ端末60が設置された通路P5を通行した利用者Uは、搭乗ゲートP6に向かい、搭乗ゲート装置70を通行して航空機への搭乗を行う。搭乗ゲート装置70及び管理サーバ10は、複数の利用者Uのそれぞれが航空機への搭乗を行うたびに図15に示す処理を実行する。
図15に示すように、搭乗ゲート装置70の生体情報取得装置712は、搭乗ゲート装置70の前を常時又は定期的に撮影し、撮影した画像中に搭乗ゲート装置70の前に立つ利用者Uの顔が検出されたか否かを判定する(ステップS602)。生体情報取得装置712は、画像中に利用者Uの顔が検出されるまで待機する(ステップS602、NO)。
生体情報取得装置712は、利用者Uの顔が検出されたと判定すると(ステップS602、YES)、その利用者Uの顔を撮影して、利用者Uの顔画像を対象顔画像として取得する(ステップS604)。
次いで、搭乗ゲート装置70のCPU702は、生体情報取得装置712により撮影された利用者Uの対象顔画像を照合要求とともに管理サーバ10にネットワークNWを介して送信する(ステップS606)。これにより、CPU702は、生体情報取得装置712により撮像された利用者Uの対象顔画像と、管理サーバ10の第5照合用情報DB106b5に登録された複数の登録顔画像とを1:Nで照合することを管理サーバ10に対して要求する。
管理サーバ10のCPU102は、搭乗ゲート装置70から対象顔画像及び照合要求を受信すると、利用者Uの顔画像の照合を行う(ステップS608)。CPU102は、搭乗ゲート装置70から受信した対象顔画像と、第5照合用情報DB106b5に登録された複数の登録顔画像とを1:Nで照合する。さらに、CPU102は、対象顔画像と一致した登録顔画像が発見された場合、その登録顔画像と関連付けられた搭乗情報が、搭乗ゲートP6から搭乗可能な航空機に関連することを確認する。
次いで、CPU102は、照合の結果を示す照合結果情報を搭乗ゲート装置70にネットワークNWを介して送信する(ステップS610)。
搭乗ゲート装置70のCPU702は、管理サーバ10から照合結果情報を受信する。照合結果情報が、対象顔画像と一致する登録顔画像が発見されて搭乗を行う利用者Uの本人確認に成功したこと及び搭乗情報の確認成功を示す場合(ステップS612、YES)、CPU702は、ゲート714の開放処理を実行する(ステップS614)。これにより、CPU702は、ゲート714を、利用者Uの通行を遮る待機時の閉鎖状態から、利用者Uの通行を許可する開放状態に移行させる。利用者Uは、開放されたゲート714を通行して航空機へ搭乗する。
次いで、CPU702は、顔画像の照合を経て利用者Uの航空機への搭乗が完了したことを示すステータス情報を管理サーバ10にネットワークNWを介して送信する(ステップ616)。
管理サーバ10のCPU102は、外部装置である搭乗ゲート装置70からステータス情報を受信すると、利用者情報DB106aの当該利用者Uの航空機への搭乗に関するステータスを未完了から完了に更新する(ステップS618)。このように、CPU102は、航空機への搭乗の際に取得された対象顔画像と登録顔画像との照合結果に基づき、利用者Uの航空機への搭乗に関するステータスを管理する。すなわち、CPU102は、航空機への搭乗の際に取得された対象顔画像と登録顔画像との照合が一致した場合に、当該利用者Uの航空機への搭乗に関するステータスを未完了から完了に更新する。
また、CPU102は、航空機への搭乗に関するステータスを未完了から完了に更新した当該利用者Uの利用者情報及びステータスを、第5照合用情報DB106b5から削除する。
一方、照合結果情報が、一致する登録顔画像が発見されずに利用者Uの本人確認に失敗したこと又は搭乗情報の確認失敗を示す場合(ステップS612、NO)、搭乗ゲート装置70のCPU702は、利用者Uに対して通知を行う(ステップS620)。すなわち、CPU702は、本人確認に失敗した旨又は搭乗情報の確認に失敗した旨を示す通知を行う。この際、CPU702は、本人確認に失敗した旨又は搭乗情報の確認に失敗した旨を通知する通知画面をディスプレイ710に表示させる。なお、CPU702は、通知画面の表示とともに又は通知画面の表示に代えて、利用者Uに対して本人確認に失敗した旨又は搭乗情報の確認に失敗した旨を例えば音声により通知することもできる。
こうして、搭乗ゲート装置70を通過した利用者Uが航空機への搭乗を行う。
上述のようにして、管理サーバ10は、チェックイン端末20でチェックイン手続を行った複数の利用者Uのそれぞれについて、利用者情報DB106aにおいて航空機への搭乗までのステータスを把握して管理する。
図16は、管理サーバ10の利用者情報DB106aの一例を示す概略図である。図示するように、利用者情報DB106aには、複数の利用者Uを識別する識別子である利用者ID(Identification)ごとに、各利用者Uに関する利用者情報及びステータスが登録されている。
利用者情報DB106aに登録された利用者情報は、互いに関連付けられた利用者Uの氏名、国籍等の身分情報、顔情報である顔画像、及び利用者Uが搭乗する航空機の便名、出発地、目的地、出発時刻、搭乗ゲート等の搭乗情報を含んでいる。なお、身分情報及び搭乗情報は、それぞれ図16に示す以外の情報を含むことができる。
また、利用者情報DB106aに登録された利用者Uのステータスは、チェックイン手続、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の各手続について完了又は未完了であることが記録されている。利用者Uのステータスは、上述した図10乃至図15に示す処理に従って随時更新されていく。
また、利用者Uの利用者情報及びステータスは、管理サーバ10のCPU102により、利用者Uのステータスに応じて第1乃至第5照合用情報DB106b1-106b5に順次移動されて登録される。図17乃至図21は、それぞれ第1乃至第5照合用情報DB106b1-106b5の一例を示す概略図である。
図17に示すように、第1照合用情報DB106b1には、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスが登録されている。第1照合用情報DB106b1に登録された利用者Uの利用者情報及びステータスは、手荷物預け手続に関するステータスが未完了から完了に更新されると、第1照合用情報DB106b1から第2照合用情報DB106b2に移動されて登録される。
図18に示すように、第2照合用情報DB106b2には、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスが登録されている。第2照合用情報DB106b2に登録された利用者Uの利用者情報及びステータスは、保安検査手続に関するステータスが未完了から完了に更新されると、第2照合用情報DB106b2から第3照合用情報DB106b3に移動されて登録される。
図19に示すように、第3照合用情報DB106b3には、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスが登録されている。第3照合用情報DB106b3に登録された利用者情報及びステータスは、出国審査手続に関するステータスが未完了から完了に更新されると、第3照合用情報DB106b3から第4照合用情報DB106b4に移動されて登録される。
図20に示すように、第4照合用情報DB106b4には、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの利用者情報及びステータスが登録されている。第4照合用情報DB106b4に登録された利用者情報及びステータスは、サイネージ端末60の前の所在又は通過に関するステータスが未完了から完了に更新されると、第4照合用情報DB106b4から第5照合用情報DB106b5に移動されて登録される。
図21に示すように、第5照合用情報DB106b5には、航空機への搭乗に関するステータスが未完了、他の手続に関するステータスが完了の利用者Uの利用者情報及びステータスが登録されている。第5照合用情報DB106b5に登録された利用者情報及びステータスは、航空機への搭乗に関するステータスが未完了から完了に更新されると、第5照合用情報DB106b5から削除される。
管理サーバ10のCPU102は、上述のように利用者情報DB106a及び第1乃至第5照合用情報DB106b1-106b5に利用者Uの利用者情報及びステータスを登録して管理する。なお、CPU102は、利用者情報DB106aを用いることなく、第1乃至第5照合用情報DB106b1-106b5を用いて利用者Uの利用者情報及びステータスを管理することもできる。
さらに、管理サーバ10のCPU102は、さらに、各手続について利用者Uがそれまでに完了すべき期限時刻を計算して設定し、手続が未完了のまま期限時刻を経過した場合にアラートを生成する。図22は、管理サーバ10のCPU102により設定された各手続の期限時刻の例を示す概略図である。図示するように、利用者IDごとに、利用者Uに関する手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の各手続について期限時刻が設定される。管理サーバ10のCPU102は、図22に示す期限時刻を、図16に示す利用者情報DB106aの利用者Uの利用者情報及びステータスと関連付けて利用者情報DB106aに記録して管理することができる。また、CPU102は、図22に示す期限時刻を、図17乃至図21に示す第1乃至第5照合用情報DB106b1-106b5の利用者Uの利用者情報及びステータスと関連付けて第1乃至第5照合用情報DB106b1-106b5に記録して管理してもよい。
職員Sは、業務端末80を用いて管理サーバ10にアクセスして、利用者情報DB106aに記録された利用者Uの利用者情報及びステータス並びに各手続の期限時刻の内容を確認することができる。この場合、業務端末80のCPU802は、利用者情報DB106aに記録された利用者Uの利用者情報及びステータス並びに各手続の期限時刻を利用者情報DB106aから取得してディスプレイ810に表示させることができる。CPU802は、利用者情報に含まれる身分情報の一部又は全部を表示させることができ、利用者情報に含まれる搭乗情報の一部又は全部を表示させることができる。また、CPU802は、利用者Uのステータスについて、例えば、各手続のうちのどの手続まで完了したかの進捗状況に応じて長さが変動する棒状、円形状のプログレスバー等の表示を用いて表示することができる。
以下、管理サーバ10のステータス管理動作及びアラート動作を含む動作について図23乃至図25Cを用いて説明する。図23及び図24は、管理サーバ10のステータス管理動作及びアラート動作を含む動作を示すフローチャートである。図25Aは、業務端末80において表示されるアラートの一例を示す概略図である。図25B及び図25Cは、業務端末80において表示されるステータス確認画面の例を示す概略図である。管理サーバ10は、複数の利用者Uのそれぞれについて図23及び図24に示す処理を実行する。
図23に示すように、管理サーバ10のCPU102は、チェックイン端末20から利用者情報を受信したか否かを判定し(ステップS702)、チェックイン端末20から利用者情報を受信するまで待機する(ステップS702、NO)。
CPU102は、チェックイン端末20から利用者情報を受信した判定すると(ステップS702、YES)、受信した利用者情報を利用者情報DB106aに登録する(ステップS704)。ステップS704は、図10に示すステップS118に対応する。
次いで、CPU102は、利用者情報に含まれる搭乗情報に基づく搭乗時刻から、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の各手続について期限時刻を計算して設定する(ステップS706)。なお、CPU102は、利用者Uが航空機への搭乗を行う施設である空港Aの混雑状況に応じて各手続の期限時刻を適宜変更して設定することができる。また、CPU102は、設定した各手続の期限時刻を、例えば、利用者情報DB106aの利用者Uの利用者情報及びステータスと関連付けて利用者情報DB106aに記録して管理することができる。
次いで、CPU102は、チェックイン端末20からステータス情報を受信したか否かを判定し(ステップS708)、チェックイン端末20からステータス情報を受信するまで待機する(ステップS708、NO)。
CPU102は、チェックイン端末20からステータス情報を受信したと判定すると(ステップS708、YES)、利用者情報DB106aの当該利用者Uのチェックイン手続に関するステータスを未完了から完了に更新する(ステップS710)。ステップS710は、図10に示すステップS122に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを第1照合用情報DB106b1に登録する。
次いで、CPU102は、自動手荷物預け機30からステータス情報を受信したか否かを判定する(ステップS712)。
CPU102は、自動手荷物預け機30からステータス情報を受信していないと判定すると(ステップS712、NO)、手荷物預け手続の期限時刻を経過したか否かを判定する(ステップS714)。
CPU102は、手荷物預け手続の期限時刻を経過したと判定すると(ステップS714、YES)、当該利用者Uについて手荷物預け手続の期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する(ステップS716)。アラートの送信先は、一又は複数の職員Sの業務端末80である。
CPU102は、手荷物預け手続の期限時刻を経過していないと判定すると(ステップS714、NO)、保安検査装置40からステータス情報を受信したか否かを判定する(ステップS718)。なお、このステップS718は、手荷物が少なく手荷物を預けない利用者Uがいることを想定したものである。CPU102は、保安検査装置40からステータス情報を受信したと判定すると(ステップS718、YES)、後述のステップS728に移行する。また、CPU102は、保安検査装置40からステータス情報を受信していないと判定すると(ステップS718、NO)、自動手荷物預け機30からのステータス情報の受信を待機する(ステップS712)。
一方、CPU102は、自動手荷物預け機30からステータス情報を受信したと判定すると(ステップS712、YES)、利用者情報DB106aの当該利用者Uの手荷物預け手続に関するステータスを未完了から完了に更新する(ステップS720)。ステップS720は、図11に示すステップS218に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを、第1照合用情報DB106b1から第2照合用情報DB106b2に移動して登録する。
次いで、CPU102は、保安検査装置40からステータス情報を受信したか否かを判定する(ステップS722)。
CPU102は、保安検査装置40からステータス情報を受信していないと判定すると(ステップS722、NO)、保安検査手続の期限時刻を経過したか否かを判定する(ステップS724)。
CPU102は、保安検査手続の期限時刻を経過したと判定すると(ステップS724、YES)、当該利用者Uについて保安検査手続の期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する(ステップS726)。アラートの送信先は、一又は複数の職員Sの業務端末80である。
CPU102は、保安検査手続の期限時刻を経過していないと判定すると(ステップS724、NO)、保安検査装置40からのステータス情報の受信を待機する(ステップS722)。
一方、CPU102は、保安検査装置40からステータス情報を受信したと判定すると(ステップS722、YES)、利用者情報DB106aの当該利用者Uの保安検査手続に関するステータスを未完了から完了に更新する(ステップS728)。ステップS728は、図12に示すステップS318に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを、第2照合用情報DB106b2から第3照合用情報DB106b3に移動して登録する。
次いで、図24に示すように、CPU102は、自動化ゲート装置50からステータス情報を受信したか否かを判定する(ステップS730)。
CPU102は、自動化ゲート装置50からステータス情報を受信していないと判定すると(ステップS730、NO)、出国審査手続の期限時刻を経過したか否かを判定する(ステップS732)。
CPU102は、出国審査手続の期限時刻を経過したと判定すると(ステップS732、YES)、当該利用者について出国審査手続の期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する(ステップS734)。アラートの送信先は、一又は複数の職員Sの業務端末80である。
CPU102は、出国審査手続の期限時刻を経過していないと判定すると(ステップS732、NO)、自動化ゲート装置50からのステータス情報の受信を待機する(ステップS730)。
一方、CPU102は、自動化ゲート装置50からステータス情報を受信したと判定すると(ステップS730、YES)、利用者情報DB106aの当該利用者Uの出国審査手続に関するステータスを未完了から完了に更新する(ステップS736)。ステップS736は、図13に示すステップS418に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを、第3照合用情報DB106b3から第4照合用情報DB106b4に移動して登録する。
次いで、CPU102は、サイネージ端末60から受信した対象顔画像と、利用者情報DB106aの複数の登録顔画像とを1:Nで照合して、当該利用者Uについてサイネージ端末60の前の所在又は通過があったか否かを判定する(ステップS738)。照合の結果、対象顔画像と一致する登録顔画像が発見された場合、当該利用者Uについてサイネージ端末60の前の所在又は通過があったことになる。
CPU102は、サイネージ端末60の前の所在又は通過がなかったと判定すると(ステップS738、NO)、サイネージ端末60の前の所在又は通過の期限時刻を経過したか否かを判定する(ステップS740)。
CPU102は、サイネージ端末60の前の所在又は通過の期限時刻を経過したと判定すると(ステップS740、YES)、アラートを生成してネットワークNWを介して送信する(ステップS742)。すなわち、CPU102は、当該利用者についてサイネージ端末60の前の所在又は通過の期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する。アラートの送信先は、一又は複数の職員Sの業務端末80である。
CPU102は、サイネージ端末60の前の所在又は通過の期限時刻を経過していないと判定すると(ステップS740、NO)、ステップS738に移行する。
一方、CPU102は、サイネージ端末60の前の所在又は通過があったと判定すると(ステップS738、YES)、当該利用者Uのステータスを更新する(ステップS744)。すなわち、CPU102は、利用者情報DB106aの当該利用者Uのサイネージ端末60の前の所在又は通過に関するステータスを未完了から完了に更新する。ステップS744は、図14に示すステップS512に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを、第4照合用情報DB106b4から第5照合用情報DB106b5に移動して登録する。
次いで、CPU102は、搭乗ゲート装置70からステータス情報を受信したか否かを判定する(ステップS746)。
CPU102は、搭乗ゲート装置70からステータス情報を受信していないと判定すると(ステップS746、NO)、航空機への搭乗の期限時刻を経過したか否かを判定する(ステップS748)。
CPU102は、航空機への搭乗の期限時刻を経過したと判定すると(ステップS748、YES)、当該利用者について航空機への搭乗の期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する(ステップS750)。アラートの送信先は、一又は複数の職員Sの業務端末80である。
CPU102は、航空機への搭乗の期限時刻を経過していないと判定すると(ステップS748、NO)、搭乗ゲート装置70からのステータス情報の受信を待機する(ステップS746)。
一方、CPU102は、搭乗ゲート装置70からステータス情報を受信したと判定すると(ステップS746、YES)、利用者情報DB106aの当該利用者Uの航空機への搭乗に関するステータスを未完了から完了に更新する(ステップS752)。ステップS752は、図15に示すステップS618に対応する。また、CPU102は、当該利用者Uの利用者情報及びステータスを、第5照合用情報DB106b5から削除する。
なお、上記図23及び図24に示す場合では、CPU102が、ステップS714、S724、S732、S740、S748において各手続について期限時刻を経過したか否かを順次判定したが、必ずしも順次判定する必要はない。CPU102は、各手続について期限時刻を経過したか否かを互いに独立して判定することもできる。
こうして、管理サーバ10は、利用者Uが航空機へ搭乗するまで利用者Uの各手続に関するステータスを期限時刻とともに把握して管理し、期限時刻を経過した手続があればアラートを生成して業務端末80に送信する。
このように、本実施形態によれば、各手続の際に対象顔画像と照合する複数の登録顔画像のDBとして、利用者Uのステータスに応じて利用者情報が登録される第1乃至第5照合用情報DB106b1-106b5を用いる。したがって、本実施形態によれば、対象顔画像との照合に用いる母集団である複数の登録顔画像の数を低減することができるため、生体情報である顔画像の照合精度を向上することができる。
なお、上記では、対象顔画像との照合に第1乃至第5照合用情報DB106b1-106b5を別個に用いる場合について説明したが、これに限定されるものではない。例えば、チェックイン手続を行った利用者Uの人数、空港Aの混雑状況、管理サーバ10の処理能力等に応じて、対象顔画像との照合に第1乃至第5照合用情報DB106b1-106b5のうちの一又は複数のDBを適宜用いることもできる。
例えば、管理サーバ10のCPU102は、上述のようにして判定した空港Aの混雑状況に応じて、空港Aの混雑がより激しいほどより少ないDBを、空港Aの混雑がより緩いほどより多いDBを照合に用いることができる。また、CPU102は、チェックイン手続を行った利用者Uの人数の多さに応じて、同様に対象顔画像との照合に第1乃至第5照合用情報DB106b1-106b5のうちの一又は複数のDBを適宜用いることもできる。すなわち、CPU102は、チェックイン手続を行った利用者Uの人数が多いほど、対象顔画像と照合する登録顔画像の数が少なくなるようにより少ないDBを照合に用いることができる。
具体的には、例えば、空港Aの混雑が緩い場合、管理サーバ10のCPU102は、保安検査装置40から受信した対象顔画像を、第1及び第2照合用情報DB106b1、106b2に登録された複数の登録顔画像と1:Nで照合することもできる。照合に用いられる第1及び第2照合用情報DB106b1、106b2には、保安検査手続に関するステータスが未完了の利用者Uの利用者情報が登録されている。
また、例えば、空港Aの混雑が緩い第1の場合、CPU102は、自動化ゲート装置50から受信した対象顔画像を、第1乃至第3照合用情報DB106b1、106b2、106b3に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、空港Aの混雑が緩い第2の場合、CPU102は、自動化ゲート装置50から受信した対象顔画像を、第2及び第3照合用情報DB106b2、106b3に登録された複数の登録顔画像と1:Nで照合することもできる。照合に用いられる第1乃至第3照合用情報DB106b1、106b2、106b3には、出国審査手続に関するステータスが未完了の利用者Uの利用者情報が登録されている。なお、空港Aの混雑状況は、第1の場合が第2の場合よりも混雑が緩くなっている。
また、例えば、空港Aの混雑が緩い第1の場合、CPU102は、サイネージ端末60から受信した対象顔画像を、第1乃至第4照合用情報DB106b1、106b2、106b3、106b4に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、空港Aの混雑が緩い第2の場合、CPU102は、サイネージ端末60から受信した対象顔画像を、第2乃至第4照合用情報DB106b2、106b3、106b4に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、空港Aの混雑が緩い第3の場合、CPU102は、サイネージ端末60から受信した対象顔画像を、第3及び第4照合用情報DB106b3、106b4に登録された複数の登録顔画像と1:Nで照合することもできる。照合に用いられる第1乃至第4照合用情報DB106b1、106b2、106b3、106b4には、サイネージ端末60の前の所在又は通過に関するステータスが未完了の利用者Uの利用者情報が登録されている。なお、空港Aの混雑状況は、第1の場合が第2の場合よりも混雑が緩く、第2の場合が第3の場合よりも緩くなっている。
また、例えば、空港Aの混雑が緩い第1の場合、CPU102は、搭乗ゲート装置70から受信した対象顔画像を、第1乃至第5照合用情報DB106b1、106b2、106b3、106b4、106b5に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、空港Aの混雑が緩い第2の場合、CPU102は、搭乗ゲート装置70から受信した対象顔画像を、第2乃至第5照合用情報DB106b2、106b3、106b4、106b5に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、空港Aの混雑が緩い第3の場合、CPU102は、搭乗ゲート装置70から受信した対象顔画像を、第3乃至第5照合用情報DB106b3、106b4、106b5に登録された複数の登録顔画像と1:Nで照合することもできる。また、例えば、CPU102は、空港Aの混雑が緩い第4の場合、搭乗ゲート装置70から受信した対象顔画像を、第4及び第5照合用情報DB106b4、106b5に登録された複数の登録顔画像と1:Nで照合することもできる。照合に用いられる第1乃至第5照合用情報DB106b1、106b2、106b3、106b4、106b5には、航空機への搭乗に関するステータスが未完了の利用者Uの利用者情報が登録されている。なお、空港Aの混雑状況は、第1の場合が第2の場合よりも混雑が緩く、第2の場合が第3の場合よりも緩く、第3の場合が第4の場合よりも緩くなっている。
また、業務端末80において職員Sがアラートの表示を選択すると、業務端末80のCPU802は、アラートにより特定される手続の期限時刻を経過した利用者Uの利用者情報及びステータスを管理サーバ10からネットワークNWを介して取得する。CPU802は、管理サーバ10の利用者情報DB106aから当該利用者Uの利用者情報及びステータスを取得する。
CPU802は、取得した利用者情報及びステータスに基づき、ディスプレイ810にアラートを表示する。図25Aは、業務端末80において表示されるアラートの一例を示す概略図である。なお、図25Aには、図16に示す場合とは異なり、利用者IDが10105の利用者Uが、保安検査手続の期限時刻が経過したにもかかわらず、保安検査手続が未完了である場合を示している。
図25Aに示すように、アラートALは、利用者Uの利用者情報を表示する利用者情報表示欄AL10と、利用者Uのステータスを表示するステータス表示欄AL12と、利用者Uの登録顔画像を表示する顔画像表示欄AL14とを含んでいる。
利用者情報表示欄AL10は、利用者Uの氏名、国籍等の身分情報、利用者Uが搭乗予定の航空機の便名等の搭乗情報を表示する。なお、利用者情報表示欄AL10は、身分情報の一部又は全部を表示することができ、搭乗情報の一部又は全部を表示することができる。
ステータス表示欄AL12は、利用者Uの各手続について未完了又は完了のステータスを表示する。ステータス表示欄AL12は、期限時刻が経過した手続についてその旨を表示する。なお、ある手続について期限時刻を経過した旨のアラートが送信された場合、その後の手続についても期限時刻を経過していることになる。
顔画像表示欄AL14は、チェックイン端末20で取得されて利用者情報DB106aに登録された利用者Uの撮影顔画像又は旅券顔画像を表示する。職員Sは、アラートALに表示される利用者Uの登録顔画像を手掛かりにして、空港Aにおける手続を含む手続を完了していない利用者Uを容易に探すことができる。
また、業務端末80のCPU802は、管理サーバ10からのアラートの受信の有無に関わらず、利用者Uのステータスを確認するステータス確認画面をディスプレイ810に表示することができる。この場合、CPU802は、管理サーバ10の利用者情報DB106aから、ステータスを確認すべき利用者Uの利用者情報及びステータスをネットワークNWを介して取得する。図25B及び図25Cは、業務端末80において表示されるステータス確認画面の例を示す概略図である。図25Bと図25Cとは、利用者Uのステータスを表示するプログレスバーの形式が互いに異なっている。なお、図25B及び図25Cには、図16に示す場合とは異なり、利用者IDが10105の利用者Uが、保安検査手続の期限時刻が経過したにもかかわらず、保安検査手続が未完了である場合を示している。
図25B及び図25Bに示すように、ステータス確認画面STは、利用者Uの利用者情報を表示する利用者情報C示欄ST10と、利用者Uのステータスを表示するステータス表示欄ST12と、利用者Uの登録顔画像を表示する顔画像表示欄ST14とを含んでいる。
利用者情報表示欄ST10は、アラートALの利用者情報表示欄AL10と同様の情報を表示する。また、顔画像表示欄ST14は、アラートALの顔画像表示欄AL14と同様の登録顔画像を表示する。
ステータス表示欄ST12は、利用者Uの各手続のうちのどの手続まで完了したかの進捗状況に応じて長さが変動するプログレスバーを用いて表示する。図25Bは、利用者Uのステータスを棒状のプログレスバーを用いて表示した場合を示している。図25Cは、利用者Uのステータスを円状のプログレスバーを用いて表示した場合を示している。
なお、図25Aに示すアラートALにおいても、図25B及び図25Cと同様に、利用者Uのステータスをプログレスバーで表示することもできる。
このように、本実施形態によれば、管理サーバ10において、航空機に搭乗予定の利用者Uについて、チェックイン端末20で取得された搭乗情報に基づき空港Aにおける各手続の期限時刻を設定して、利用者Uの各手続に関するステータスを管理する。したがって、本実施形態によれば、航空機に搭乗予定の利用者Uの状況をより詳細に把握して管理することができる。
[第2実施形態]
本発明の第2実施形態による情報処理システム、情報処理装置及び情報処理方法について説明する。なお、上記第1実施形態による情報処理システム、情報処理装置及び情報処理方法と同様の構成要素については同一の符号を付し説明を省略し又は簡略にする。
本発明の第2実施形態による情報処理システム、情報処理装置及び情報処理方法について説明する。なお、上記第1実施形態による情報処理システム、情報処理装置及び情報処理方法と同様の構成要素については同一の符号を付し説明を省略し又は簡略にする。
上記第1実施形態では、管理サーバ10のCPU102が、対象顔画像との照合のために第1乃至第5照合用情報DB106b1-106b5を選択して照合に用いる場合について説明したが、これに限定されるものではない。CPU102は、第1乃至第5照合用情報DB106b1-106b5を必ずしも用いる必要はない。この場合、CPU102は、第1乃至第5照合用情報DB106b1-106b5と同様の複数の登録顔画像を、利用者情報DB106aから利用者Uのステータスに基づき抽出して照合に用いることができる。以下、本実施形態では、登録顔画像に対応する利用者Uのステータスに基づき利用者情報DB106aから複数の登録顔画像を抽出して照合に用いる場合について説明する。本実施形態において、照合部としてのCPU102は、チェックイン手続後の一連の手続における一の手続に関するステータスが完了になると、一の手続に続く別の手続に関するステータスに基づき複数の登録顔画像から対象顔画像と照合する登録顔画像を抽出する。
CPU102は、自動手荷物預け機30から対象顔画像及び照合要求を受信した場合、利用者情報DB106aからフィルタリングにより利用者Uの登録顔画像を抽出する。ここで、CPU102は、利用者Uのステータスを基準にしたフィルタリングにより、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像を抽出する。CPU102は、受信した対象顔画像と、利用者情報DB106aから抽出した複数の登録顔画像とを照合する。本実施形態でも、CPU102は、手荷物預け手続の直前の手続であるチェックイン手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に手荷物預け手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、本実施形態でも、手荷物預け手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、CPU102は、保安検査装置40から対象顔画像及び照合要求を受信した場合、利用者情報DB106aからフィルタリングにより利用者Uの登録顔画像を抽出する。ここで、CPU102は、利用者Uのステータスを基準にしたフィルタリングにより、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像を抽出する。CPU102は、受信した対象顔画像と、利用者情報DB106aから抽出した複数の登録顔画像とを照合する。本実施形態でも、CPU102は、保安検査手続の直前の手続の手荷物預け手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に保安検査手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、本実施形態でも、保安検査手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、CPU102は、自動化ゲート装置50から対象顔画像及び照合要求を受信した場合、利用者情報DB106aからフィルタリングにより利用者Uの登録顔画像を抽出する。ここで、CPU102は、利用者Uのステータスを基準にしたフィルタリングにより、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像を抽出する。CPU102は、受信した対象顔画像と、利用者情報DB106aから抽出した複数の登録顔画像とを照合する。本実施形態でも、CPU102は、出国審査手続の直前の手続の保安検査手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に出国審査手続を完了した利用者Uの登録顔画像との照合を行うこともない。よって、本実施形態でも、出国審査手続の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、CPU102は、サイネージ端末60から対象顔画像を受信した場合、利用者情報DB106aからフィルタリングにより利用者Uの登録顔画像を抽出する。ここで、CPU102は、利用者Uのステータスを基準にしたフィルタリングにより、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uの登録顔画像を抽出する。CPU102は、受信した対象顔画像と、利用者情報DB106aから抽出した複数の登録顔画像とを照合する。本実施形態でも、CPU102は、サイネージ端末60の前の所在又は通過の直前の手続の出国審査手続が未完了の利用者Uの登録顔画像との照合を行うことがなく、既にサイネージ端末60の前の所在又は通過を完了した利用者Uの登録顔画像との照合を行うこともない。よって、本実施形態でも、サイネージ端末60の前の所在又は通過の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
また、CPU102は、搭乗ゲート装置70から対象顔画像を受信した場合、利用者情報DB106aからフィルタリングにより利用者Uの登録顔画像を抽出する。ここで、CPU102は、利用者Uのステータスを基準にしたフィルタリングにより、航空機への搭乗に関するステータスが未完了、他の手続に関するステータスが完了の利用者Uの登録顔画像を抽出する。CPU102は、受信した対象顔画像と、利用者情報DB106aから抽出した複数の登録顔画像とを照合する。本実施形態でも、CPU102は、航空機への搭乗の直前の手続のサイネージ端末60の前の所在又は通過が未完了の利用者Uの登録顔画像との照合を行うことがなく、既に航空機への搭乗を完了した利用者Uの登録顔画像との照合を行うこともない。よって、本実施形態でも、航空機への搭乗の際に取得された対象顔画像の照合において、不必要な登録顔画像との照合を回避することができる。
照合部としてのCPU102は、上述のように各手続に応じて、対象顔画像と照合する登録顔画像を、利用者Uのステータスに応じて利用者情報DB106aから抽出する。航空機への搭乗までの一連の手続は、上述のように一の手続とこれに続く別の手続とを含んでいる。本実施形態でも、CPU102は、別の手続の際に取得された対象顔画像を、一の手続に関するステータスが完了、かつ別の手続に関するステータスが未完了の利用者Uの登録顔画像と照合する。このため、本実施形態によっても、第1実施形態と同様に、対象顔画像と照合する母集団である複数の登録顔画像の数を低減することができ、生体情報である顔画像の照合精度を向上することができる。
また、本実施形態では、第1実施形態で用いた第1乃至第5照合用情報DB106b1-106b5という利用者UのステータスごとのDBを設けなくても、利用者情報DB106aから利用者Uのステータスに応じて利用者Uの登録顔画像を抽出することができる。
なお、本実施形態において、管理サーバ10の記憶装置106は、利用者情報DB106aのみを格納していてもよいし、第1実施形態と同様に、利用者情報DB106aと、第1乃至第5照合用情報DB106b1-106b5との両方を格納していてもよい。
なお、本実施形態では、例えば、チェックイン手続を行った利用者Uの人数、空港Aの混雑状況、管理サーバ10の処理能力等に応じて、利用者情報DB106aから抽出する登録顔画像の範囲を適宜変更することもできる。例えば、管理サーバ10のCPU102は、上述のようにして判定した空港Aの混雑状況に応じて、空港Aの混雑がより激しいほどより少ない登録顔画像を、空港Aの混雑がより緩いほどより多い登録顔画像を抽出して照合に用いることができる。また、CPU102は、チェックイン手続を行った利用者Uの人数の多さに応じて、同様に対象顔画像との照合に用いるために抽出する登録顔画像の数を変更することができる。すなわち、CPU102は、チェックイン手続を行った利用者Uの人数が多いほど、対象顔画像と照合する登録顔画像の数が少なくなるように抽出する登録顔画像の数を変更することができる。
具体的には、例えば、空港Aの混雑が緩い場合、管理サーバ10のCPU102は、保安検査装置40から対象顔画像及び照合要求を受信した場合、少なくとも保安検査手続に関するステータスが未完了の利用者Uの登録顔画像を抽出することもできる。少なくとも保安検査手続に関するステータスが未完了の利用者Uには、次の利用者Uが含まれる。すなわち、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれる。さらに、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。
また、例えば、空港Aの混雑が緩い場合、CPU102は、自動化ゲート装置50からから対象顔画像及び照合要求を受信した場合、少なくとも出国審査手続に関するステータスが未完了の利用者Uの登録顔画像を抽出することができる。少なくとも出国審査手続に関するステータスが未完了の利用者Uには、次の利用者Uが含まれる。すなわち、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれる。また、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。さらに、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。
また、例えば、空港Aの混雑が緩い場合、CPU102は、サイネージ端末60から対象顔画像を受信した場合、少なくともサイネージ端末60の前の通過又は所在に関するステータスが未完了の利用者Uの登録顔画像を抽出することができる。少なくともサイネージ端末60の前の通過又は所在に関するステータスが未完了の利用者Uには、次の利用者Uが含まれる。すなわち、すなわち、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれる。また、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。また、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。さらに、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。
また、例えば、空港Aの混雑が緩い場合、CPU102は、搭乗ゲート装置70から対象顔画像を受信した場合、少なくとも航空機への搭乗に関するステータスが未完了の利用者Uの登録顔画像を抽出することができる。少なくとも航空機への搭乗に関するステータスが未完了の利用者Uには、航空機への搭乗に関するステータスが未完了、他の手続に関するステータスが完了の利用者Uが含まれる。また、チェックイン手続、手荷物預け手続、保安検査手続及び出国審査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。また、チェックイン手続、手荷物預け手続及び保安検査手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。また、チェックイン手続及び手荷物預け手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。さらに、チェックイン手続に関するステータスが完了、他の手続に関するステータスが未完了の利用者Uが含まれうる。
[第3実施形態]
本発明の第3実施形態による情報処理システム、情報処理装置及び情報処理方法について図26を用いて説明する。なお、上記第1及び第2実施形態による情報処理システム、情報処理装置及び情報処理方法と同様の構成要素については同一の符号を付し説明を省略し又は簡略にする。
本発明の第3実施形態による情報処理システム、情報処理装置及び情報処理方法について図26を用いて説明する。なお、上記第1及び第2実施形態による情報処理システム、情報処理装置及び情報処理方法と同様の構成要素については同一の符号を付し説明を省略し又は簡略にする。
本実施形態では、空港Aにおける利用者Uの所在場所を特定したアラートを送信しうる管理サーバ10のアラート動作について図26を用いて説明する。図26は、本実施形態による管理サーバ10のアラート動作を示すフローチャートである。
本実施形態による管理サーバ10は、図23に示すステップS716、S726、及び図24に示すステップS734、S742、ステップS750のアラートを生成して送信する処理として、図26に示す処理を実行する。なお、図26に示す処理が実行されるのは、ステップS716、S726、S734、S742、ステップS750のうちの全部であってもよいし、一部であってもよい。
また、管理サーバ10は、利用者Uの所在場所を特定するために、空港A内に設置された複数の監視カメラ90により撮影される映像を利用する。複数の監視カメラ90は、それぞれ空港A内の所定の場所を撮影し、撮影した映像を管理サーバ10にネットワークNWを介して送信する映像取得部として機能する。
管理サーバ10のCPU102は、利用者Uの所在場所を特定する場所特定部として機能する。場所特定部としてのCPU102は、複数の監視カメラ90により撮影される映像中の顔画像から利用者Uを特定する。場所特定部としてのCPU102は、複数の監視カメラ90のうち映像中に利用者Uが特定された監視カメラ90の設置場所を利用者Uの所在場所として特定する。
図26に示すように、管理サーバ10のCPU102は、特定の手続の期限時刻を経過したと判定すると、利用者情報DB106aから当該利用者Uの登録顔画像を取得する(ステップS802)。特定の手続は、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過又は航空機への搭乗である。
また、CPU102は、複数の監視カメラ90により送信された映像を取得する(ステップS804)。
次いで、CPU102は、複数の監視カメラ90の映像から顔を検出し、検出された顔の画像である検出顔画像と登録顔画像とを照合する(ステップS806)。CPU102は、検出顔画像と登録顔画像との照合に際して、検出顔画像から抽出した顔特徴量と、登録顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
特に、CPU102は、期限時刻を経過した手続が行われる場所と最新の完了した手続が行われた場所との間に設置された監視カメラ90から送信される映像から顔画像を検出して、検出顔画像を取得することができる。これにより、検出される顔画像を絞り込むことができ、照合精度を向上することができる。
照合の結果、登録顔画像と一致する検出顔画像が発見された場合(ステップS808、YES)、CPU102は、利用者Uの所在場所を特定するとともに期限時刻を経過した旨を示すアラートを生成してネットワークNWを介して送信する(ステップS810)。CPU102は、アラートにおいて、一致する検出顔画像を撮影した監視カメラ90の設置場所を利用者Uの所在場所として特定する。また、アラートの送信先は、一又は複数の職員Sの業務端末80である。アラートにおいて利用者Uの所在場所が特定されていることにより、業務端末80でアラートを受けた職員Sは、特定の手続について期限時刻を経過した利用者Uを容易に探すことができる。
また、アラートの送信先は、複数の職員Sのうちの利用者Uの所在場所に最も近い職員Sの業務端末80とすることができる。職員Sが携帯する業務端末80は、例えば、そのGNSS(Global Navigation Satellite System、全地球航法衛星システム)を利用する位置センサ、地磁気を検出する磁気センサ等に基づく業務端末80の位置情報を管理サーバ10に送信する。GNSSとしては、特に限定されるものではないが、例えば、GPS(Global Positioning System)、GLONASS(Global Navigation Satellite System)、ガリレオ、コンパス等である。管理サーバ10のCPU102は、業務端末80から送信される位置情報に基づき、利用者Uの所在場所に最も近い職員Sの業務端末80を特定することができる。
一方、照合の結果、登録顔画像と一致する検出顔画像が発見されない場合(ステップS808、NO)、CPU102は、期限時刻を経過した旨を示すが利用者Uの所在場所が未特定のアラートを生成してネットワークNWを介して送信する(ステップS812)。
本実施形態のように、複数の監視カメラ90により撮影された映像を利用して、管理サーバ10は、特定の手続について期限時刻を経過した利用者Uの所在場所を特定したアラートを生成して送信することもできる。
[他の実施形態]
上記実施形態において説明した情報処理装置は、さらに他の実施形態によれば、図27及び図28に示すように構成することもできる。図27は、他の実施形態による情報処理装置の構成を示すブロック図である。図28は、別の他の実施形態による情報処理装置の構成を示すブロック図である。
上記実施形態において説明した情報処理装置は、さらに他の実施形態によれば、図27及び図28に示すように構成することもできる。図27は、他の実施形態による情報処理装置の構成を示すブロック図である。図28は、別の他の実施形態による情報処理装置の構成を示すブロック図である。
図27に示すように、他の実施形態による情報処理装置1000は、利用者のチェックイン手続により取得された利用者の搭乗に関する搭乗情報及び利用者の生体情報を互いに関連付けて登録する情報管理部1002を有する。また、情報処理装置1000は、一の利用者について搭乗までの手続の際に取得された生体情報である対象生体情報と、情報管理部1002により登録された生体情報である登録生体情報とを照合する照合部1004を有する。照合部1004は、対象生体情報と照合する登録生体情報を、登録生体情報に対応する利用者の搭乗までの手続に関するステータスに基づき選択する。
他の実施形態によれば、対象生体情報と照合する登録生体情報を、登録生体情報に対応する利用者のステータスに基づき選択するので、対象生体情報と照合する母集団である複数の登録生体情報の数を低減することができる。したがって、他の実施形態によれば、生体情報の照合精度を向上することができる。
また、図28に示すように、別の他の実施形態による情報処理装置2000は、利用者のチェックイン手続により取得された利用者の搭乗に関する搭乗情報と生体情報とを登録する情報管理部2002を有する。また、情報処理装置2000は、利用者の搭乗までの手続を行う装置から受信した生体情報と手続に関するステータスが未完了の生体情報とを照合した照合情報を装置に送信する送信部2004を有する。さらに、情報処理装置2000は、装置から当該手続が完了したことを示すステータス情報を受信すると、手続に関するステータスを更新するステータス管理部を有する。
別の他の実施形態によれば、利用者の搭乗までの手続を行う装置から受信した生体情報と手続に関するステータスが未完了の生体情報とを照合するので、対象生体情報と照合する母集団である複数の登録生体情報の数を低減することができる。したがって、別の他の実施形態によれば、生体情報の照合精度を向上することができる。
[変形実施形態]
本発明は、上記実施形態に限らず、種々の変形が可能である。
本発明は、上記実施形態に限らず、種々の変形が可能である。
例えば、上記実施形態では、チェックイン手続後の手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過及び航空機への搭乗の各手続に関するステータスを管理する場合を例に説明したが、これに限定されるものではない。例えば、利用者Uが国内線の航空機に搭乗する場合は、出国審査手続に関するステータスの管理は不要である。また、空港A内の複数の場所にサイネージ端末60を設置して、複数のサイネージ端末60のそれぞれの前の所在又は通過に関するステータスを管理することもできる。上記に例示した手続に関するステータスのほか、種々のステータスを管理することができる。
すなわち、上記実施形態では、チェックイン端末20に続く装置として、自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60及び搭乗ゲート装置70が設置されている場合を例に説明したが、これに限定されるものではない。自動手荷物預け機30、保安検査装置40、自動化ゲート装置50、サイネージ端末60及び搭乗ゲート装置70の全ての装置が設置されている必要はなく、これらのうちの少なくともいずれかの装置が設置されていればよい。例えば、チェックイン端末20に続く装置として、サイネージ端末60だけが設置されていてもよい。
また、上記実施形態では、手荷物預け手続、保安検査手続、出国審査手続、サイネージ端末60の前の所在又は通過、及び航空機への搭乗の各手続に際して、対象顔画像の照合による本人確認を行う場合を例に説明したが、これに限定されるものではない。例えば、バーコード、QRコード等のコードシンボルを利用した本人確認を行うこともできる。この場合、例えば、チェックイン端末20で利用者Uがチェックイン手続を行った際に、チェックイン端末20は、利用者Uに対して、利用者Uを識別する情報を含むコードシンボルが印刷された搭乗券等の券片を発行する。利用者Uは、各手続において、コードシンボルをコードリーダで読み取らせることにより、本人確認を行うことができる。
また、上記実施形態では、生体情報取得装置214、312、412、512、610、712が利用者Uの生体情報として顔画像を撮影して取得する場合を例に説明したが、これに限定されるものではない。チェックイン端末20の生体情報取得装置214は、利用者情報DB106a等に登録生体情報として登録される生体情報として、顔画像のほか、指紋画像、虹彩画像、指の静脈画像、掌紋画像、手のひらの静脈画像等を取得するものであってもよい。また、他の生体情報取得装置312、412、512、610、712は、対象生体情報として登録生体情報に応じて、顔画像のほか、指紋画像、虹彩画像、指の静脈画像、掌紋画像、手のひらの静脈画像等を取得するものであってもよい。
また、上記実施形態による管理サーバ10は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態によるチェックイン端末20は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による自動手荷物預け機30は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による保安検査装置40は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による自動化ゲート装置50は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態によるサイネージ端末60は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による搭乗ゲート装置70は、一又は複数の装置からなるシステムとして構成することができる。
また、上記の各実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のコンピュータプログラムが記録された記録媒体はもちろん、そのコンピュータプログラム自体も各実施形態に含まれる。
該記録媒体としては、例えばフロッピー(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスク、CD-ROM(Compact Disc-Read Only Memory)、磁気テープ、不揮発性メモリカード、ROMを用いることができる。また、該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、OS(Operating System)上で動作して処理を実行するものも各実施形態の範疇に含まれる。
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録する情報管理部と、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合する照合部と
を有し、
前記照合部は、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理装置。
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録する情報管理部と、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合する照合部と
を有し、
前記照合部は、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理装置。
(付記2)
前記照合部は、前記対象生体情報と、前記手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像とを照合する付記1記載の情報処理装置。
前記照合部は、前記対象生体情報と、前記手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像とを照合する付記1記載の情報処理装置。
(付記3)
外部装置から受信した前記手続が完了したことを示すステータス情報に基づき、前記手続に対応する前記ステータスを更新するステータス管理部を有する付記1又は2に記載の情報処理装置。
外部装置から受信した前記手続が完了したことを示すステータス情報に基づき、前記手続に対応する前記ステータスを更新するステータス管理部を有する付記1又は2に記載の情報処理装置。
(付記4)
前記ステータス管理部は、前記利用者の前記搭乗までの複数の前記手続について、前記手続きの順に当該手続きが完了したことを示すステータス情報を受信すると前記手続に対応する前記ステータスを更新する付記3記載の情報処理装置。
前記ステータス管理部は、前記利用者の前記搭乗までの複数の前記手続について、前記手続きの順に当該手続きが完了したことを示すステータス情報を受信すると前記手続に対応する前記ステータスを更新する付記3記載の情報処理装置。
(付記5)
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記別の手続の際に取得された前記対象生体情報を、前記一の手続に関する前記ステータスが完了、かつ前記別の手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像と照合する付記1乃至4のいずれかに記載の情報処理装置。
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記別の手続の際に取得された前記対象生体情報を、前記一の手続に関する前記ステータスが完了、かつ前記別の手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像と照合する付記1乃至4のいずれかに記載の情報処理装置。
(付記6)
前記情報管理部は、前記登録生体情報に対応する前記利用者の前記ステータスに応じて前記登録生体情報を複数のデータベースに登録し、
前記照合部は、前記対象生体情報と、前記複数のデータベースから選択した前記データベースに登録された前記登録生体情報とを照合する付記1乃至5のいずれかに記載の情報処理装置。
前記情報管理部は、前記登録生体情報に対応する前記利用者の前記ステータスに応じて前記登録生体情報を複数のデータベースに登録し、
前記照合部は、前記対象生体情報と、前記複数のデータベースから選択した前記データベースに登録された前記登録生体情報とを照合する付記1乃至5のいずれかに記載の情報処理装置。
(付記7)
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記情報管理部は、前記一の手続に関する前記ステータスが完了になると、当該利用者の前記登録顔画像を、前記一の手続に応じた一の前記データベースから前記別の手続に応じた別の前記データベースに移動して登録する付記6記載の情報処理装置。
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記情報管理部は、前記一の手続に関する前記ステータスが完了になると、当該利用者の前記登録顔画像を、前記一の手続に応じた一の前記データベースから前記別の手続に応じた別の前記データベースに移動して登録する付記6記載の情報処理装置。
(付記8)
前記照合部は、前記対象生体情報と、前記利用者の前記ステータスに基づき複数の前記登録顔画像から抽出した前記登録顔画像とを照合する付記1乃至5のいずれかに記載の情報処理装置。
前記照合部は、前記対象生体情報と、前記利用者の前記ステータスに基づき複数の前記登録顔画像から抽出した前記登録顔画像とを照合する付記1乃至5のいずれかに記載の情報処理装置。
(付記9)
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記一の手続に関する前記ステータスが完了になると、前記別の手続に関する前記ステータスに基づき前記複数の登録顔画像から前記登録顔画像を抽出する付記8記載の情報処理装置。
前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記一の手続に関する前記ステータスが完了になると、前記別の手続に関する前記ステータスに基づき前記複数の登録顔画像から前記登録顔画像を抽出する付記8記載の情報処理装置。
(付記10)
前記照合部は、前記チェックイン手続を行った前記利用者の人数の多さに応じて、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を変更する付記1乃至9のいずれかに記載の情報処理装置。
前記照合部は、前記チェックイン手続を行った前記利用者の人数の多さに応じて、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を変更する付記1乃至9のいずれかに記載の情報処理装置。
(付記11)
前記照合部は、前記チェックイン手続を行った前記利用者の人数が多いほど、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を少なくなるように変更する付記10記載の情報処理装置。
前記照合部は、前記チェックイン手続を行った前記利用者の人数が多いほど、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を少なくなるように変更する付記10記載の情報処理装置。
(付記12)
前記ステータス管理部は、前記対象生体情報と前記登録生体情報との照合の結果に基づき前記ステータスを管理する付記3又は4に記載の情報処理装置。
前記ステータス管理部は、前記対象生体情報と前記登録生体情報との照合の結果に基づき前記ステータスを管理する付記3又は4に記載の情報処理装置。
(付記13)
前記ステータス管理部は、前記照合が一致した場合に前記ステータスを更新する付記12記載の情報処理装置。
前記ステータス管理部は、前記照合が一致した場合に前記ステータスを更新する付記12記載の情報処理装置。
(付記14)
前記手続は、手荷物預け手続、保安検査手続、出国審査手続、及びサイネージ端末の前の所在又は通過のうちの少なくともいずれかである付記1乃至13のいずれかに記載の情報処理装置。
前記手続は、手荷物預け手続、保安検査手続、出国審査手続、及びサイネージ端末の前の所在又は通過のうちの少なくともいずれかである付記1乃至13のいずれかに記載の情報処理装置。
(付記15)
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報と生体情報とを登録する情報管理部と、
前記利用者の前記搭乗までの手続を行う装置から受信した生体情報と前記手続に関するステータスが未完了の生体情報とを照合した照合情報を前記装置に送信する送信部と、
前記装置から当該手続が完了したことを示すステータス情報を受信すると、前記手続に関する前記ステータスを更新するステータス管理部と
を有する情報処理装置。
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報と生体情報とを登録する情報管理部と、
前記利用者の前記搭乗までの手続を行う装置から受信した生体情報と前記手続に関するステータスが未完了の生体情報とを照合した照合情報を前記装置に送信する送信部と、
前記装置から当該手続が完了したことを示すステータス情報を受信すると、前記手続に関する前記ステータスを更新するステータス管理部と
を有する情報処理装置。
(付記16)
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理方法。
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理方法。
(付記17)
コンピュータに、
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する
ことを実行させるプログラムが記録された記録媒体。
コンピュータに、
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する
ことを実行させるプログラムが記録された記録媒体。
1…情報処理システム
10…管理サーバ
20…チェックイン端末
30…自動手荷物預け機
40…保安検査装置
50…自動化ゲート装置
60…サイネージ端末
70…搭乗ゲート装置
80…業務端末
NW…ネットワーク
10…管理サーバ
20…チェックイン端末
30…自動手荷物預け機
40…保安検査装置
50…自動化ゲート装置
60…サイネージ端末
70…搭乗ゲート装置
80…業務端末
NW…ネットワーク
Claims (17)
- 利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録する情報管理部と、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合する照合部と
を有し、
前記照合部は、前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理装置。 - 前記照合部は、前記対象生体情報と、前記手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像とを照合する請求項1記載の情報処理装置。
- 外部装置から受信した前記手続が完了したことを示すステータス情報に基づき、前記手続に対応する前記ステータスを更新するステータス管理部を有する請求項1又は2に記載の情報処理装置。
- 前記ステータス管理部は、前記利用者の前記搭乗までの複数の前記手続について、前記手続きの順に当該手続きが完了したことを示すステータス情報を受信すると前記手続に対応する前記ステータスを更新する請求項3記載の情報処理装置。
- 前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記別の手続の際に取得された前記対象生体情報を、前記一の手続に関する前記ステータスが完了、かつ前記別の手続に関する前記ステータスが未完了の前記利用者の前記登録顔画像と照合する請求項1乃至4のいずれか1項に記載の情報処理装置。 - 前記情報管理部は、前記登録生体情報に対応する前記利用者の前記ステータスに応じて前記登録生体情報を複数のデータベースに登録し、
前記照合部は、前記対象生体情報と、前記複数のデータベースから選択した前記データベースに登録された前記登録生体情報とを照合する請求項1乃至5のいずれか1項に記載の情報処理装置。 - 前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記情報管理部は、前記一の手続に関する前記ステータスが完了になると、当該利用者の前記登録顔画像を、前記一の手続に応じた一の前記データベースから前記別の手続に応じた別の前記データベースに移動して登録する請求項6記載の情報処理装置。 - 前記照合部は、前記対象生体情報と、前記利用者の前記ステータスに基づき複数の前記登録顔画像から抽出した前記登録顔画像とを照合する請求項1乃至5のいずれか1項に記載の情報処理装置。
- 前記手続は、一の手続と、前記一の手続に続く別の手続とを含み、
前記照合部は、前記一の手続に関する前記ステータスが完了になると、前記別の手続に関する前記ステータスに基づき前記複数の登録顔画像から前記登録顔画像を抽出する請求項8記載の情報処理装置。 - 前記照合部は、前記チェックイン手続を行った前記利用者の人数の多さに応じて、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を変更する請求項1乃至9のいずれか1項に記載の情報処理装置。
- 前記照合部は、前記チェックイン手続を行った前記利用者の人数が多いほど、前記登録生体情報に対応する前記利用者の前記ステータスに基づき選択する前記登録顔画像の数を少なくなるように変更する請求項10記載の情報処理装置。
- 前記ステータス管理部は、前記対象生体情報と前記登録生体情報との照合の結果に基づき前記ステータスを管理する請求項3又は4に記載の情報処理装置。
- 前記ステータス管理部は、前記照合が一致した場合に前記ステータスを更新する請求項12記載の情報処理装置。
- 前記手続は、手荷物預け手続、保安検査手続、出国審査手続、及びサイネージ端末の前の所在又は通過のうちの少なくともいずれかである請求項1乃至13のいずれか1項に記載の情報処理装置。
- 利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報と生体情報とを登録する情報管理部と、
前記利用者の前記搭乗までの手続を行う装置から受信した生体情報と前記手続に関するステータスが未完了の生体情報とを照合した照合情報を前記装置に送信する送信部と、
前記装置から当該手続が完了したことを示すステータス情報を受信すると、前記手続に関する前記ステータスを更新するステータス管理部と
を有する情報処理装置。 - 利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する情報処理方法。 - コンピュータに、
利用者のチェックイン手続により取得された前記利用者の搭乗に関する搭乗情報及び前記利用者の生体情報を互いに関連付けて登録し、
一の前記利用者について前記搭乗までの手続の際に取得された生体情報である対象生体情報と、前記情報管理部により登録された前記生体情報である登録生体情報とを照合し、
前記対象生体情報と照合する前記登録生体情報を、前記登録生体情報に対応する前記利用者の前記搭乗までの前記手続に関するステータスに基づき選択する
ことを実行させるプログラムが記録された記録媒体。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020533961A JP7176565B2 (ja) | 2018-07-31 | 2018-07-31 | 情報処理装置、情報処理方法及びプログラム |
EP18928595.0A EP3832588A4 (en) | 2018-07-31 | 2018-07-31 | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND RECORDING MEDIUM |
PCT/JP2018/028764 WO2020026368A1 (ja) | 2018-07-31 | 2018-07-31 | 情報処理装置、情報処理方法及び記録媒体 |
US16/360,791 US10963716B2 (en) | 2018-07-31 | 2019-03-21 | Information processing apparatus, information processing method, and storage medium |
US16/917,315 US11610438B2 (en) | 2018-07-31 | 2020-06-30 | Information processing apparatus, information processing method, and storage medium |
JP2022178532A JP7482381B2 (ja) | 2018-07-31 | 2022-11-08 | 情報処理装置、情報処理方法及び記録媒体 |
US18/117,241 US12045754B2 (en) | 2018-07-31 | 2023-03-03 | Information processing apparatus, information processing method, and storage medium |
JP2024067883A JP2024096172A (ja) | 2018-07-31 | 2024-04-19 | 情報処理装置、情報処理方法及び記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2018/028764 WO2020026368A1 (ja) | 2018-07-31 | 2018-07-31 | 情報処理装置、情報処理方法及び記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020026368A1 true WO2020026368A1 (ja) | 2020-02-06 |
Family
ID=69228901
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2018/028764 WO2020026368A1 (ja) | 2018-07-31 | 2018-07-31 | 情報処理装置、情報処理方法及び記録媒体 |
Country Status (4)
Country | Link |
---|---|
US (3) | US10963716B2 (ja) |
EP (1) | EP3832588A4 (ja) |
JP (3) | JP7176565B2 (ja) |
WO (1) | WO2020026368A1 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021166065A1 (ja) * | 2020-02-18 | 2021-08-26 | 日本電気株式会社 | ゲート装置、ゲート装置の制御方法及び記憶媒体 |
JP6933317B1 (ja) * | 2020-12-01 | 2021-09-08 | 日本電気株式会社 | 情報処理装置、情報処理システム、情報処理方法、情報端末及びプログラム |
JPWO2021199158A1 (ja) * | 2020-03-30 | 2021-10-07 | ||
WO2021260941A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、端末、システム、サーバ装置の制御方法及び記憶媒体 |
WO2021260940A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及び記憶媒体 |
WO2022003840A1 (ja) * | 2020-06-30 | 2022-01-06 | 日本電気株式会社 | 情報処理装置、情報処理方法及び記録媒体 |
JP7036291B1 (ja) * | 2020-09-11 | 2022-03-15 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
JP2022044629A (ja) * | 2020-03-27 | 2022-03-17 | 日本電気株式会社 | 管理サーバ、システム、トークン発行方法及びコンピュータプログラム |
JP2022068878A (ja) * | 2020-06-26 | 2022-05-10 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11055800B2 (en) | 2017-12-04 | 2021-07-06 | Telcom Ventures, Llc | Methods of verifying the onboard presence of a passenger, and related wireless electronic devices |
WO2020045186A1 (ja) * | 2018-08-31 | 2020-03-05 | キヤノン株式会社 | 情報処理装置、方法、及びプログラム |
JP7327651B2 (ja) * | 2020-03-31 | 2023-08-16 | 日本電気株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7060184B1 (ja) * | 2020-06-30 | 2022-04-26 | 日本電気株式会社 | 情報処理装置、情報処理方法及びプログラム |
IL276176A (en) * | 2020-07-19 | 2022-02-01 | I Sec Tech B V | A system for a security environment for airports, and methods and computer software products useful thereby |
US11200306B1 (en) | 2021-02-25 | 2021-12-14 | Telcom Ventures, Llc | Methods, devices, and systems for authenticating user identity for location-based deliveries |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003296766A (ja) * | 2002-03-29 | 2003-10-17 | Mitsubishi Electric Corp | 搭乗管理システム |
JP2005149181A (ja) * | 2003-11-17 | 2005-06-09 | Konica Minolta Medical & Graphic Inc | 医用画像情報管理システム |
WO2005055151A1 (ja) | 2003-12-03 | 2005-06-16 | Hitachi, Ltd. | 搭乗セキュリティチェックシステムおよび方法ならびにコンピュータプログラム |
WO2015136938A1 (ja) | 2014-03-14 | 2015-09-17 | 株式会社 東芝 | 情報処理方法および情報処理システム |
WO2018110012A1 (ja) * | 2016-12-16 | 2018-06-21 | パナソニックIpマネジメント株式会社 | 顔画像処理方法および顔画像処理装置 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5851651B2 (ja) * | 1977-10-22 | 1983-11-17 | 株式会社小糸製作所 | 4方向切換スイツチ |
JPS5851651U (ja) | 1981-10-06 | 1983-04-07 | 株式会社富士通ゼネラル | 電動機の取付装置 |
US6085976A (en) | 1998-05-22 | 2000-07-11 | Sehr; Richard P. | Travel system and methods utilizing multi-application passenger cards |
US20020198731A1 (en) * | 2001-06-26 | 2002-12-26 | Barnes Jessica M. | Method and apparatus for processing an international passenger |
US20030149343A1 (en) * | 2001-09-26 | 2003-08-07 | Cross Match Technologies, Inc. | Biometric based facility security |
EP1459273A4 (en) * | 2001-10-10 | 2010-03-03 | Mcloughlin Pacific Corp | METHOD AND DEVICE FOR TRACKING AIRCRAFT AND FOR SAFEGUARDING UNAUTHORIZED ACCESS |
US7090126B2 (en) * | 2001-10-22 | 2006-08-15 | Maximus, Inc. | Method and apparatus for providing heightened airport security |
CA2411335A1 (en) * | 2001-11-08 | 2003-05-08 | Accu-Time Systems, Inc. | Biometric based airport access control |
JP2003296768A (ja) | 2002-03-29 | 2003-10-17 | Japan Research Institute Ltd | 自動改札システム及びそのプログラム |
WO2004008282A2 (en) * | 2002-07-12 | 2004-01-22 | Privaris, Inc. | Personal authentication software and systems for travel privilege assignation and verification |
GB2402249A (en) * | 2003-03-28 | 2004-12-01 | Qinetiq Ltd | Integrated passenger management system using biometric sensors and a mm wave camera |
JP2005110012A (ja) | 2003-09-30 | 2005-04-21 | Brother Ind Ltd | 通信装置 |
US9501882B2 (en) * | 2010-11-23 | 2016-11-22 | Morphotrust Usa, Llc | System and method to streamline identity verification at airports and beyond |
US9087204B2 (en) * | 2012-04-10 | 2015-07-21 | Sita Information Networking Computing Ireland Limited | Airport security check system and method therefor |
JP5851651B2 (ja) * | 2013-03-21 | 2016-02-03 | 株式会社日立国際電気 | 映像監視システム、映像監視方法、および映像監視装置 |
US20170372541A1 (en) * | 2016-06-22 | 2017-12-28 | Michael J Attar | Method and System for Implementing User Biometrics as a Boarding Pass for Public Transportation |
JP6465889B2 (ja) * | 2013-12-09 | 2019-02-06 | マーティン,トッド | イベントの時間測定および写真撮影のためのシステムおよび方法 |
EP3113105B1 (en) * | 2014-02-26 | 2023-08-09 | Hitachi, Ltd. | Face authentication system |
AU2015101989A4 (en) * | 2014-03-14 | 2021-01-21 | Yorid Pty Ltd | Identity verification system and method |
US9392415B2 (en) * | 2014-09-30 | 2016-07-12 | Apple Inc. | Modeling connectivity of transit systems |
US9245175B1 (en) * | 2014-10-21 | 2016-01-26 | Rockwell Collins, Inc. | Image capture and individual verification security system integrating user-worn display components and communication technologies |
WO2016138938A1 (en) | 2015-03-03 | 2016-09-09 | Huawei Technologies Co., Ltd. | Devices, nodes and methods in a wireless communication network |
US9954759B2 (en) | 2015-07-29 | 2018-04-24 | International Business Machines Corporation | Detecting proxy-based communications |
ES2562733B1 (es) * | 2015-11-06 | 2016-12-15 | Sistemas Técnicos Y Montajes, S.L. | Sistema para el control integral de pasajeros y equipaje |
US9679254B1 (en) * | 2016-02-29 | 2017-06-13 | Www.Trustscience.Com Inc. | Extrapolating trends in trust scores |
GB201608205D0 (en) * | 2016-05-10 | 2016-06-22 | Sita Ypenburg Bv And Bluebotics Sa | Item handling system, method and apparatus therefor |
US20190035042A1 (en) * | 2016-06-22 | 2019-01-31 | Michael J. Attar | Method and System for Implementing User Biometrics as a Boarding Pass for Public Transportation |
US9965865B1 (en) * | 2017-03-29 | 2018-05-08 | Amazon Technologies, Inc. | Image data segmentation using depth data |
US10693650B2 (en) * | 2017-12-19 | 2020-06-23 | Mastercard International Incorporated | Biometric identity verification systems, methods and programs for identity document applications and renewals |
-
2018
- 2018-07-31 EP EP18928595.0A patent/EP3832588A4/en active Pending
- 2018-07-31 JP JP2020533961A patent/JP7176565B2/ja active Active
- 2018-07-31 WO PCT/JP2018/028764 patent/WO2020026368A1/ja unknown
-
2019
- 2019-03-21 US US16/360,791 patent/US10963716B2/en active Active
-
2020
- 2020-06-30 US US16/917,315 patent/US11610438B2/en active Active
-
2022
- 2022-11-08 JP JP2022178532A patent/JP7482381B2/ja active Active
-
2023
- 2023-03-03 US US18/117,241 patent/US12045754B2/en active Active
-
2024
- 2024-04-19 JP JP2024067883A patent/JP2024096172A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003296766A (ja) * | 2002-03-29 | 2003-10-17 | Mitsubishi Electric Corp | 搭乗管理システム |
JP2005149181A (ja) * | 2003-11-17 | 2005-06-09 | Konica Minolta Medical & Graphic Inc | 医用画像情報管理システム |
WO2005055151A1 (ja) | 2003-12-03 | 2005-06-16 | Hitachi, Ltd. | 搭乗セキュリティチェックシステムおよび方法ならびにコンピュータプログラム |
JP4528262B2 (ja) * | 2003-12-03 | 2010-08-18 | 株式会社日立製作所 | 搭乗セキュリティチェックシステムおよび方法ならびにコンピュータプログラム。 |
WO2015136938A1 (ja) | 2014-03-14 | 2015-09-17 | 株式会社 東芝 | 情報処理方法および情報処理システム |
WO2018110012A1 (ja) * | 2016-12-16 | 2018-06-21 | パナソニックIpマネジメント株式会社 | 顔画像処理方法および顔画像処理装置 |
Non-Patent Citations (1)
Title |
---|
KONISHI, HIROFUMI: "Utilization of Biometrics Authentication Technology for Airport Security", vol. 71, no. 3, 1 July 2004 (2004-07-01), pages 74 - 77, XP055681242, Retrieved from the Internet <URL:https://www.oki.com/en/otr/2004/n199/pdf/otr-199-R19-2.pdf> * |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021166065A1 (ja) * | 2020-02-18 | 2021-08-26 | 日本電気株式会社 | ゲート装置、ゲート装置の制御方法及び記憶媒体 |
JPWO2021166065A1 (ja) * | 2020-02-18 | 2021-08-26 | ||
JP7533705B2 (ja) | 2020-02-18 | 2024-08-14 | 日本電気株式会社 | 処理装置、処理装置の制御方法及びプログラム |
JP7311019B2 (ja) | 2020-02-18 | 2023-07-19 | 日本電気株式会社 | ゲート装置、ゲート装置の制御方法及びプログラム |
JP7276523B2 (ja) | 2020-03-27 | 2023-05-18 | 日本電気株式会社 | 管理サーバ、システム、トークン発行方法及びコンピュータプログラム |
JP2022044629A (ja) * | 2020-03-27 | 2022-03-17 | 日本電気株式会社 | 管理サーバ、システム、トークン発行方法及びコンピュータプログラム |
JP7513084B2 (ja) | 2020-03-30 | 2024-07-09 | 日本電気株式会社 | 情報処理装置、情報処理方法及びプログラム |
JPWO2021199158A1 (ja) * | 2020-03-30 | 2021-10-07 | ||
WO2021199158A1 (ja) * | 2020-03-30 | 2021-10-07 | 日本電気株式会社 | 情報処理装置、情報処理方法及び記録媒体 |
JP7287512B2 (ja) | 2020-06-26 | 2023-06-06 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
WO2021260940A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及び記憶媒体 |
JP7010421B1 (ja) * | 2020-06-26 | 2022-01-26 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
WO2021260941A1 (ja) * | 2020-06-26 | 2021-12-30 | 日本電気株式会社 | サーバ装置、端末、システム、サーバ装置の制御方法及び記憶媒体 |
JP7040690B1 (ja) * | 2020-06-26 | 2022-03-23 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
JP2022068878A (ja) * | 2020-06-26 | 2022-05-10 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
WO2022003840A1 (ja) * | 2020-06-30 | 2022-01-06 | 日本電気株式会社 | 情報処理装置、情報処理方法及び記録媒体 |
WO2022054240A1 (ja) * | 2020-09-11 | 2022-03-17 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及び記憶媒体 |
JP7036291B1 (ja) * | 2020-09-11 | 2022-03-15 | 日本電気株式会社 | サーバ装置、システム、サーバ装置の制御方法及びコンピュータプログラム |
WO2022118377A1 (ja) * | 2020-12-01 | 2022-06-09 | 日本電気株式会社 | 情報処理装置、情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体 |
JP6933317B1 (ja) * | 2020-12-01 | 2021-09-08 | 日本電気株式会社 | 情報処理装置、情報処理システム、情報処理方法、情報端末及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2024096172A (ja) | 2024-07-12 |
JP2023010757A (ja) | 2023-01-20 |
US20230222423A1 (en) | 2023-07-13 |
EP3832588A1 (en) | 2021-06-09 |
US11610438B2 (en) | 2023-03-21 |
EP3832588A4 (en) | 2022-03-16 |
US10963716B2 (en) | 2021-03-30 |
JP7482381B2 (ja) | 2024-05-14 |
US20200334480A1 (en) | 2020-10-22 |
JPWO2020026368A1 (ja) | 2021-08-02 |
US12045754B2 (en) | 2024-07-23 |
JP7176565B2 (ja) | 2022-11-22 |
US20200042812A1 (en) | 2020-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7482381B2 (ja) | 情報処理装置、情報処理方法及び記録媒体 | |
WO2020026367A1 (ja) | 情報処理装置、情報処理方法及び記録媒体 | |
JP7153205B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP7264265B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP7223296B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2022067100A (ja) | プログラム、情報処理装置及び情報処理方法 | |
JP7127703B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
WO2022003840A1 (ja) | 情報処理装置、情報処理方法及び記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18928595 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2020533961 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2018928595 Country of ref document: EP Effective date: 20210301 |