WO2020075306A1 - 情報処理装置、情報処理方法及び記録媒体 - Google Patents

情報処理装置、情報処理方法及び記録媒体 Download PDF

Info

Publication number
WO2020075306A1
WO2020075306A1 PCT/JP2018/038217 JP2018038217W WO2020075306A1 WO 2020075306 A1 WO2020075306 A1 WO 2020075306A1 JP 2018038217 W JP2018038217 W JP 2018038217W WO 2020075306 A1 WO2020075306 A1 WO 2020075306A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
information
cpu
face image
biometric information
Prior art date
Application number
PCT/JP2018/038217
Other languages
English (en)
French (fr)
Inventor
理沙 田川
憲由 平本
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2020549930A priority Critical patent/JP7006804B2/ja
Priority to PCT/JP2018/038217 priority patent/WO2020075306A1/ja
Priority to EP18936623.0A priority patent/EP3866102A4/en
Priority to US16/367,890 priority patent/US11182997B2/en
Publication of WO2020075306A1 publication Critical patent/WO2020075306A1/ja
Priority to US17/479,083 priority patent/US20220005302A1/en
Priority to JP2021210063A priority patent/JP7223302B2/ja

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G07C9/257—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition electronically
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C2209/00—Indexing scheme relating to groups G07C9/00 - G07C9/38
    • G07C2209/14—With a sequence of inputs of different identification information
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/10—Movable barriers with registering means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/27—Individual registration on entry or exit involving the use of a pass with central registration

Definitions

  • the present invention relates to an information processing device, an information processing method, and a recording medium.
  • Patent Document 1 describes an immigration control card system using a smart passport card.
  • the system described in Patent Document 1 performs a customs check by obtaining a baggage declaration card information from the smart passport card by applying the smart passport card to the terminal in the customs check facility.
  • an object of the present invention is to provide an information processing device, an information processing method, and a recording medium that can complete the acquisition of information and the matching of biometric information in a short time.
  • a reading unit that reads a medium of the user and acquires information including biometric information of the user from the medium; and a reading unit that reads the medium from the user during reading of the medium.
  • an information processing device including a biometric information acquisition unit that acquires biometric information of a user.
  • the reading unit reads the medium of the user, acquires information including biometric information of the user from the medium, and the biometric information acquisition unit reads the medium.
  • an information processing method for obtaining biometric information of the user from the user is provided.
  • an information processing apparatus having a reading unit and a biometric information acquisition unit reads the medium of the user by the reading unit, and reads the biometric information of the user from the medium.
  • a recording medium is provided in which a program is recorded that acquires information including the information and that causes the biometric information acquisition unit to acquire the biometric information of the user from the user while the medium is being read.
  • information acquisition and biometric information matching can be executed in a short time.
  • FIG. 1 is a schematic diagram showing the overall configuration of an information processing system according to an embodiment of the present invention.
  • FIG. 2 is a schematic view showing a customs inspection station in which a kiosk terminal and an electronic gate are installed according to an embodiment of the present invention.
  • FIG. 3 is a block diagram showing an example of the hardware configuration of the mobile terminal according to the embodiment of the present invention.
  • FIG. 4A is a schematic diagram illustrating an appearance of a kiosk terminal according to an exemplary embodiment of the present invention.
  • FIG. 4B is a schematic diagram illustrating an appearance of a kiosk terminal according to an exemplary embodiment of the present invention.
  • FIG. 5 is a block diagram showing an example of the hardware configuration of the kiosk terminal according to the embodiment of the present invention.
  • FIG. 6A is a schematic diagram showing a configuration when one kiosk terminal according to an exemplary embodiment of the present invention is installed.
  • FIG. 6B is a schematic diagram illustrating a configuration when one kiosk terminal according to an exemplary embodiment of the present invention is installed.
  • FIG. 7A is a schematic diagram showing a configuration when two kiosk terminals according to an exemplary embodiment of the present invention are installed.
  • FIG. 7B is a schematic diagram illustrating a configuration when two kiosk terminals are installed according to an exemplary embodiment of the present invention.
  • FIG. 8A is a schematic diagram illustrating a configuration when three kiosk terminals according to an exemplary embodiment of the present invention are installed.
  • FIG. 8B is a schematic diagram showing a configuration when three kiosk terminals according to an exemplary embodiment of the present invention are installed.
  • FIG. 8A is a schematic diagram illustrating a configuration when three kiosk terminals according to an exemplary embodiment of the present invention are installed.
  • FIG. 8B is a schematic diagram showing a configuration when three kiosk terminals according to an
  • FIG. 9 is a schematic diagram illustrating prevention of peeping in a kiosk terminal according to an embodiment of the present invention.
  • FIG. 10 is a schematic diagram illustrating a configuration when the kiosk terminal according to the exemplary embodiment of the present invention is installed at different heights.
  • FIG. 11 is a schematic view showing the appearance of an entrance gate terminal and an exit gate terminal that constitute an electronic gate according to an embodiment of the present invention.
  • FIG. 12 is a block diagram showing an example of the hardware configuration of the entrance gate terminal that constitutes the computerized gate according to the embodiment of the present invention.
  • FIG. 13 is a block diagram showing an example of the hardware configuration of the exit gate terminal that constitutes the computerized gate according to the embodiment of the present invention.
  • FIG. 10 is a schematic diagram illustrating a configuration when the kiosk terminal according to the exemplary embodiment of the present invention is installed at different heights.
  • FIG. 11 is a schematic view showing the appearance of an entrance gate terminal and an exit gate terminal that constitute an electronic gate according to an embodiment of the present invention.
  • FIG. 14 is a block diagram showing an example of the hardware configuration of the management server according to the embodiment of the present invention.
  • FIG. 15A is a schematic diagram showing an example of a declaration information input screen in the mobile terminal according to the embodiment of the present invention.
  • FIG. 15B is a schematic diagram showing an example of a declaration code display screen in the mobile terminal according to the embodiment of the present invention.
  • FIG. 16 is a sequence diagram showing operations of the kiosk terminal and the management server in the information processing system according to the embodiment of the present invention.
  • FIG. 17 is a sequence diagram showing a language setting operation of the kiosk terminal in the information processing system according to the embodiment of the present invention.
  • FIG. 18A is a schematic diagram showing an example of a reception screen in the kiosk terminal according to the embodiment of the present invention.
  • FIG. 18B is a schematic diagram showing an example of a declaration content confirmation screen in the kiosk terminal according to the embodiment of the present invention.
  • FIG. 18C is a schematic diagram showing an example of a guidance screen in the kiosk terminal according to the embodiment of the present invention.
  • FIG. 19 is a sequence diagram showing operations of the entrance gate terminal, the exit gate terminal and the management server in the information processing system according to the embodiment of the present invention.
  • FIG. 20 is a schematic diagram showing an example of a notification screen in the exit gate terminal according to the embodiment of the present invention.
  • FIG. 21 is a block diagram showing the configuration of an information processing apparatus according to another embodiment of the present invention.
  • FIGS. 1 to 20 An information processing apparatus, a gate apparatus, an information processing method, and a gate apparatus control method according to an embodiment of the present invention will be described with reference to FIGS. 1 to 20.
  • FIG. 1 is a schematic diagram showing the overall configuration of the information processing system according to the present embodiment.
  • FIG. 2 is a schematic view showing a customs inspection station in which the kiosk terminal and the electronic gate according to the present embodiment are installed.
  • the information processing system 1 includes a kiosk terminal 10, a computerization gate 20, a management server 50, and a mobile terminal 60.
  • the computerization gate 20 has an entrance gate terminal 30 and an exit gate terminal 40.
  • the information processing system 1 accepts, for example, a user U such as a passenger or a crew member who enters from a foreign country at an airport, a seaport, etc. in the customs procedure at the time of entry, and a specific user U who has completed the report passes through. This is a system for controlling the computerization gate 20.
  • the customs declaration which is a declaration in the customs procedure accepted by the information processing system 1, is, for example, a declaration in the customs clearance, and in the case of Japan, a personalized item / separate item of Customs Form C No. 5360. It is the same as the declaration by the declaration form.
  • the management server 50 is installed, for example, in a facility of customs.
  • the kiosk terminal 10 and the computerized gate 20 are installed at a customs inspection site C where customs inspection is performed, for example, at an airport, a seaport, or the like.
  • a kiosk terminal 10 is installed near the entrance of the customs inspection area C where the user U enters.
  • a digital signage terminal 70 is installed near the kiosk terminal 10 to display and guide the procedure method at the kiosk terminal 10 by displaying a moving image or a still image.
  • An electronic gate 20 and a manned booth M are installed at the exit of the customs inspection site C.
  • a digital signage terminal 80 is installed which displays and guides cautions when the computerized gate 20 passes through by displaying a moving image or a still image.
  • a customs officer S performs face-to-face customs inspections such as acceptance of declarations in customs procedures and inspection of baggage.
  • the mobile terminal 60 is a terminal that the user U possesses or carries.
  • a customs declaration application for making customs declarations at the kiosk terminal 10 is installed in the mobile terminal 60.
  • the user U can make a customs declaration at the kiosk terminal 10 by using the declaration code generated by the customs declaration application of the mobile terminal 60, as described later.
  • the kiosk terminal 10, the entrance gate terminal 30, the exit gate terminal 40, and the management server 50 are connected to the network NW.
  • the network NW is composed of WAN (Wide Area Network), LAN (Local Area Network), mobile communication network, and the like.
  • the kiosk terminal 10 and the management server 50 can communicate with each other via the network NW.
  • the entrance gate terminal 30 and the exit gate terminal 40 can communicate with each other via the network NW or not.
  • the exit gate terminal 40 and the management server 50 can communicate with each other via the network NW.
  • the mobile terminal 60 can communicate with a server such as the management server 50 via the network NW.
  • FIG. 3 is a block diagram showing an example of the hardware configuration of the mobile terminal 60.
  • the mobile terminal 60 is a terminal that the user U possesses or carries, and is, for example, a mobile information device such as a smartphone, a tablet terminal, or a mobile phone.
  • the mobile terminal 60 includes a CPU (Central Processing Unit) 602, a RAM (Random Access Memory) 604, a storage device 606, an input device 608, a display 610, and a mobile wireless communication unit 612. And a short-range wireless communication unit 614.
  • the CPU 602, the RAM 604, the storage device 606, the input device 608, the display 610, the mobile wireless communication unit 612, and the short-range wireless communication unit 614 are connected to the bus line 616.
  • the CPU 602 operates by executing a program stored in the storage device 606, and functions as a control unit that controls the overall operation of the mobile terminal 60. Further, the CPU 602 executes an application program stored in the storage device 606 to execute various processes as the mobile terminal 60.
  • the RAM 604 provides a memory area necessary for the operation of the CPU 602.
  • a customs declaration application for making a customs declaration in the kiosk terminal 10 is installed.
  • the CPU 602 can perform various processes for the user U to make a customs declaration.
  • the CPU 602 can accept, for example, the input of the declaration information required for customs declaration by the user U.
  • the declaration information is, for example, information having the same content as the matters to be described and described in the portable goods / separate shipment declaration. That is, the declaration information is, for example, the name of the user U, the current address or place of stay in the country of entry, occupation, date of birth, passport number, boarding flight name, place of departure, date of entry, items to be declared in customs declaration. Including information required for customs declarations such as
  • the CPU 602 can generate a declaration code, which is a code such as a two-dimensional code including the declaration information input by the user U, and display it on the display 610, as described later.
  • the mobile terminal 60 can function as a medium for displaying the reporting code.
  • the reporting code is not particularly limited as long as it can include reporting information, but it is, for example, a two-dimensional code such as a QR code (registered trademark). Further, the reporting code may be, for example, a one-dimensional code such as a barcode.
  • the CPU 602 can also generate a declaration code with an expiration date in which the expiration date is set. The CPU 602 can display the set expiration date on the display 610 together with the declaration code. After being generated, the declaration code with an expiration date becomes invalid when the date and time set as the expiration date elapses. By setting the expiration date in the declaration code, it is possible to prompt the user U to promptly make a customs declaration after the declaration code is generated.
  • the user U and the accompanying family member can each use their mobile terminals 60 to make customs declarations. You can also make customs declarations.
  • the CPU 602 uses the declaration code used by the user U himself at the kiosk terminal 10 as well as the declaration code for the accompanying family used by the accompanying family at the kiosk terminal 10. It can be generated and displayed on the display 610.
  • the accompanying family can use the kiosk terminal 10 in the same manner as the user U by using the reporting code for the accompanying family displayed on the mobile terminal 60 of the user U. After using the kiosk terminal 10, the accompanying family is guided to the computerized gate 20 or the manned booth M in the same manner as the user U.
  • the code display medium for displaying the declaration code does not necessarily have to be the mobile terminal 60, and may be another medium.
  • the declaration code may be printed on paper as a code display medium.
  • the customs declaration application supports multiple languages such as Japanese, English, Chinese, and Korean.
  • the customs declaration application can be displayed and input, for example, in a language selected and set from a plurality of languages in the language setting of the mobile terminal 60.
  • the customs declaration application may be able to be displayed and input in a language selected and set from a plurality of languages in the setting of the application, separately from the language setting of the mobile terminal 60, for example.
  • the customs declaration application can be used in the used language, which is the language thus set.
  • the CPU 602 can further include language information, which is information indicating the language used by the customs declaration application, in the declaration code.
  • the language information is, for example, information indicating a language set in the language setting of the mobile terminal 60, or information related to the language if the language is set in the customs declaration application.
  • the storage device 606 includes a storage medium such as a non-volatile memory and a hard disk drive, and functions as a storage unit.
  • the storage device 606 stores a program executed by the CPU 602, data referred to by the CPU 602 when the program is executed, and the like.
  • the storage device 606 stores a customs declaration application as an application program executed by the CPU 602.
  • the storage device 606 can store information such as declaration information input by the customs declaration application. Further, the storage device 606 can store the declaration code generated by the customs declaration application.
  • the input device 608 is, for example, a touch panel incorporated in the display 610.
  • the input device 608 functions as an input unit that receives an input from the user U.
  • the user U can input various information and an instruction to execute a process to the mobile terminal 60 via the input device 608.
  • the user U can input declaration information or input a declaration code generation instruction to the mobile terminal 60 that executes the customs declaration application via the input device 608 that is a touch panel. it can.
  • the display 610 functions as a display unit that displays various screens to the user U.
  • the display 610 displays a declaration information input screen that accepts input of declaration information, a declaration code display screen that displays a declaration code, and the like, as described below.
  • the mobile radio communication unit 612 connects to the network NW via the mobile communication network under the control of the CPU 602.
  • the communication system of the mobile radio communication unit 612 is not particularly limited, and examples thereof include a third generation mobile communication system, an LTE (Long Term Evolution) system, and a fourth generation mobile communication system.
  • the short-range wireless communication unit 614 wirelessly communicates with an access point, an external device, and the like under the control of the CPU 602, and connects to the network NW via the access point such as the airport premises.
  • the communication method of the short-distance wireless communication unit 614 is not particularly limited, but for example, a wireless LAN method such as Wi-Fi (registered trademark), Bluetooth (registered trademark) communication method, NFC (Near Field Communication) method , Infrared communication system and the like.
  • the mobile terminal 60 is configured.
  • 4A and 4B are schematic diagrams showing the appearance of the kiosk terminal 10.
  • FIG. 4A is a perspective view showing the entire kiosk terminal 10 installed on the pole 100
  • FIG. 4B is an enlarged perspective view showing the kiosk terminal 10 installed on the pole 100.
  • FIG. 5 is a block diagram showing an example of the hardware configuration of the kiosk terminal 10.
  • FIG. 6A and FIG. 6B are schematic diagrams showing the configuration when one kiosk terminal 10 is installed.
  • 7A and 7B are schematic diagrams showing the configuration when two kiosk terminals 10 are installed.
  • 8A and 8B are schematic diagrams showing a configuration when three kiosk terminals 10 are installed.
  • FIG. 9 is a schematic diagram illustrating prevention of peeping in the kiosk terminal 10.
  • FIG. 10 is a schematic diagram showing a configuration when the kiosk terminal 10 is installed at different heights.
  • the kiosk terminal 10 receives the customs declaration by the declaration code displayed on the mobile terminal 60 of the user U, and processes the user U to the computerized gate 20 or the manned booth M according to the contents of the customs declaration. It is a device. As shown in FIGS. 4A and 4B, the kiosk terminal 10 is attached and installed on a side portion of a pole 100 which is a support body installed with its longitudinal direction being vertical. Note that one or a plurality of kiosk terminals 10 can be installed on one pole 100, as will be described later.
  • the kiosk terminal 10 has a CPU 102, a RAM 104, a storage device 106, an input device 108, and a display 110, as shown in FIG. Further, the kiosk terminal 10 includes a passport reading device 112, a code reading device 114, a camera 116, a depth camera 118, a communication unit 120, and a status lamp 122.
  • the CPU 102, RAM 104, storage device 106, input device 108, display 110, passport reading device 112, code reading device 114, camera 116, depth camera 118, communication unit 120, and status lamp 122 are connected to the bus line 124.
  • the kiosk terminal 10 has a housing 126 attached to the pole 100.
  • the housing 126 has a first housing 126a provided with the display 110 and the camera 116, and a second housing 126b provided with the passport reader 112 and the code reader 114.
  • the housing 126 houses the CPU 102, the RAM 104, the storage device 106, and the communication unit 120.
  • the first housing 126a has a display surface on which the display 110 is provided.
  • the second housing portion 126b has a reading surface on which the passport reading device 112 and the code reading device 114 are provided.
  • the second housing 126b is integrally connected to the lower portion of the first housing 126a so that the display surface and the reading surface form an obtuse angle with each other.
  • the first housing portion 126a and the second housing portion 126b have a display surface of the first housing portion 126a that is diagonally upward and upward, which is opposite to the rear on the pole 100 side.
  • the reading surface of the second housing 126b is substantially horizontal.
  • the kiosk terminal 10 is installed on the pole 100 so that, for example, a user U having a height equal to or greater than a predetermined height looks down on the display 110 and the passport reader 112 and the code reader 114. .
  • the display 110 is provided on the display surface of the first housing 126a so that its screen faces diagonally forward and upward.
  • An input device 108 as a touch panel is incorporated in the display 110.
  • a camera 116 is provided in the center of the portion between the display 110 and the second housing 126b in the lower part of the display surface of the first housing 126a.
  • the camera 116 is provided between the display 110, which is a display unit provided in the first housing 126a, and the passport reading device 112 and the code reading device 114, which are information acquiring units provided in the second housing 126b. It is provided. It should be noted that one camera 116 may be provided, or two cameras may be provided above and below the display 110 in between. In this case, the lower camera 116 is provided, for example, in the center of the portion between the display 110 and the second housing 126b in the lower part of the display surface of the first housing 126a as described above.
  • the upper camera 116 is provided, for example, in the center of the upper portion of the display 110 above the display surface of the first housing 126a.
  • the camera 116 is installed so that its shooting direction is diagonally forward and upward.
  • the user U in front of the kiosk terminal 10 operates the kiosk terminal 10 with the line of sight directed obliquely downward and looking down at the display 110, the passport reading device 112 or the code reading device 114.
  • the camera 116 has an angle of view capable of photographing the face of the user U who operates the kiosk terminal 10 while looking down on the display 110, the passport reading device 112, or the code reading device 114 as described above.
  • a depth camera 118 is provided at the center of the upper part of the display surface of the first casing 126a.
  • the depth camera 118 is provided so as to be able to acquire three-dimensional information of an object captured by the camera 116. Note that the depth cameras 118 may be provided so as to be adjacent to the one or two cameras 116 provided as described above.
  • plate-shaped visors 128 are provided on both sides of the display surface of the first casing 126a along the display 110 so as to project from the display surface.
  • the visor 128 shields the line of sight of the kiosk terminal 10 from the side, diagonally rearward, and diagonally forward to make it difficult for anyone other than the user U who uses the kiosk terminal 10 to peek at the display 110. Function as a department.
  • lights 130 which are lighting units for illuminating the face of the user U who operates the kiosk terminal 10, respectively.
  • the illumination 130 can be configured by, for example, a light source that illuminates the display 110 from below to above, or a light source such as a rod-shaped light source provided along the display 110.
  • the light source is not particularly limited, but an LED (Light Emitting Diode) or the like can be used.
  • the lights 130 provided on both sides of the display 110 can ensure sufficient brightness when the camera 116 captures the face of the user U who operates the kiosk terminal 10.
  • the lighting 130 may be constantly lit during the operation of the kiosk terminal 10.
  • the illumination 130 does not necessarily have to be always on during the operation of the kiosk terminal 10, and may be configured to be on when the user's U face is photographed by the camera 116.
  • the illumination 130 can be configured to light up when the passport reading device 112 reads the passport or the code reading device 114 reads the declaration code, for example.
  • the illumination 130 can be configured to turn on when the user U is detected by a human sensor (not shown) provided in the kiosk terminal 10, for example.
  • the illumination 130 turned on at these predetermined timings can be configured to be turned off, for example, after the camera 116 has finished photographing the face of the user U or after a predetermined time has elapsed.
  • a passport reading device 112 is provided on the left side and a code reading device 114 is provided on the right side of the display 110.
  • a reading device for reading a code such as a QR code is generally provided on the right side of the terminal.
  • the code reading device 114 is provided on the right side of the display 110, the user U smoothly holds the declaration code displayed on the mobile terminal 60 over the code reading device 114. Can be read.
  • the passport reader 112 is provided, for example, with a reading unit for reading the passport facing upward, and has a slot on which the passport is inserted.
  • the user U causes the passport reader 112 to read the passport by opening the identification page, inserting the passport with the page facing downward, and holding the passport over the reading unit of the passport reader 112.
  • You can In the method of inserting the passport into the slot if the passport is inserted into the slot, the user U does not have to keep holding the passport in order to keep the page open, and the passport to the reading unit of the passport reading device 112 can be maintained. The position of can be adjusted accurately. This makes it possible to realize smooth reading of the passport.
  • the configuration of the passport reading device 112 is not limited to the above configuration, and various configurations can be adopted.
  • the passport reading device 112 may be configured such that the user U holds the passport whose identification item page is opened in its reading unit. In this case, the user U can cause the passport reading device 112 to read the passport by opening the identification page and pressing the passport downward to the reading unit of the passport reading device 112 to hold the passport. .
  • the code reading device 114 is also provided, for example, with the reading unit for reading the declaration code facing upward.
  • the user U causes the code reading device 114 to read the declaration code by holding the display 610 of the mobile terminal 60 displaying the declaration code downward and holding it over the reading unit of the code reading device 114. You can
  • the configuration of the code reading device 114 is not limited to the above configuration, and various configurations can be adopted.
  • the code reading device 114 can be configured so that the reading unit reads the declaration code from above.
  • the user U causes the code reading device 114 to read the declaration code by holding up the display 610 of the mobile terminal 60 displaying the declaration code and holding it over the reading unit of the code reading device 114. You can
  • a status lamp 122 is provided above the pole 100 so as to be located above the first housing 126a including the display 110.
  • the status lamp 122 is provided at the tip of an arm 132 attached to the upper portion of the pole 100 so that the status lamp 122 is located above the kiosk terminal 10 indicating the status.
  • the arm 132 projects from the pole 100 to the upper side of the kiosk terminal 10.
  • the arm 132 is also provided with a surveillance camera 134 that monitors the status of the kiosk terminal 10. More specifically, the monitoring camera 134 that functions as a monitoring unit captures and monitors the state of the kiosk terminal 10 and its surroundings, the state of the user U who operates the kiosk terminal 10, and the like.
  • the surveillance camera 134 is connected to the corresponding kiosk terminal 10 or the network NW.
  • the monitoring camera 134 can transmit a video image of the state of the user U to the management server 50 via the network NW via the kiosk terminal 10 or not.
  • the CPU 102 operates by executing a program stored in the storage device 106, and functions as a control unit that controls the overall operation of the kiosk terminal 10. Further, the CPU 102 executes an application program stored in the storage device 106 to execute various processes as the kiosk terminal 10.
  • the RAM 104 provides a memory area necessary for the operation of the CPU 102.
  • the CPU 102 functions as a matching request unit that requests the management server 50 to perform the face matching of the user U who makes a customs declaration using the kiosk terminal 10.
  • the CPU 102 as a matching request unit requests, as face matching of the user U, matching between the captured face image of the user U and the passport face image of the user U.
  • the captured face image is a face image of the user U captured by the camera 116 when using the kiosk terminal 10.
  • the passport face image is a face image acquired from the passport of the user U by the passport reading device 112.
  • the CPU 102 transmits the photographed face image and the passport face image or the facial feature amount extracted from these images to the management server 50 together with the matching request.
  • the CPU 102 reads at least one of the passport and the declaration code to acquire the captured face image of the user U, while reading the other of the passport and the declaration code, the face verification of the user U to the management server 50. You can request.
  • the timing at which the CPU 102 acquires the captured face image and the timing at which the CPU 102 requests face matching are not limited to these, and various variations are possible.
  • the CPU 102 can estimate the mounted object in the photographed face image while photographing with the camera 116.
  • the CPU 102 can detect a face-attached object such as a mask, sunglasses, glasses, and a hat in a captured face image by estimating the attached object.
  • the CPU 102 detects a face attachment that is an attachment attached to the face of the user U
  • the CPU 102 can give a warning to the user U to remove the face attachment that interferes with face matching.
  • the CPU 102 displays on the display 110 a display instructing the user U to remove the face-worn article, or outputs a voice instructing the user U to remove the face-worn article from a speaker or the like. A warning can be given.
  • the CPU 102 also functions as a matching information acquisition unit that receives and acquires matching information, which is information indicating the result of face matching requested from the management server 50, from the management server 50.
  • the verification information is that, as a result of the face verification, the passport face image and the captured face image match and the identity of the user U who makes a customs declaration at the kiosk terminal 10 has been successfully verified, or the identity of the user U does not match. It indicates that the verification failed. Note that when the passport face image and the captured face image match, a case where the matching score indicating the similarity between both face images exceeds a predetermined threshold and both face images exhibit high similarity is included.
  • the CPU 102 functions as a collation unit that collates a passport face image and a captured face image to obtain collation information as the face collation of the user U, instead of functioning as a collation request unit and a collation information acquisition unit. You can also When collating the passport face image and the captured face image, the CPU 102 collates both face images by collating the face feature amount extracted from the passport face image with the face feature amount extracted from the captured face image. it can.
  • the CPU 102 also functions as a user information transmission unit that transmits the user information of the user U to the management server 50.
  • the user information of the user U includes identification item information, face information, and declaration information of the user U associated with each other.
  • the identity information information includes information about the user U such as the name of the user U and the date of birth of the user U. Further, the identification item information includes information regarding the passport of the user U such as the passport number of the passport of the user U and the expiration date of the passport. The identification information is obtained from the passport of the user U by the passport reading device 112.
  • the face information is a photographed face image of the user U and a passport face image. Further, the face information may not be the captured face image and the passport face image themselves, but may be face feature amounts extracted from the captured face image and the passport face image, respectively. In this case, the CPU 102 extracts the facial feature amount from each of the captured face image and the passport face image.
  • the declaration information includes the information to be declared in the customs declaration when the user U enters the country.
  • the declaration information is obtained by the code reading device 114 from the declaration code displayed on the mobile terminal 60 of the user U.
  • the declaration information is, for example, the name of the user U, the current address or place of stay in the country of entry, occupation, date of birth, passport number, boarding flight name, place of departure, date of entry, and customs declaration. It contains information necessary for customs declarations such as matters to be done.
  • the user information of the user U transmitted to the management server 50 is registered in the user information database (DB, Database) 506a in the management server 50 as described later.
  • the photographed face image or passport face image included in the user information is registered in the user information DB 506a as a registered face image that is registered biometric information registered in advance.
  • the CPU 102 also functions as a determination request unit that requests the management server 50 to determine the declaration content included in the declaration information of the user U who makes a customs declaration using the kiosk terminal 10.
  • the CPU 102 as a determination requesting unit requests the management server 50 to determine the declaration content included in the declaration information transmitted.
  • the CPU 102 receives from the management server 50 the determination information, which is information indicating the determination result of the declaration content included in the declaration information.
  • the CPU 102 also functions as a determination information acquisition unit that receives and acquires determination information, which is information indicating the determination result of the declaration content requested from the management server 50, from the management server 50.
  • the determination information indicates, as a result of the determination, whether the user U is taxable or not and whether the user U is at risk.
  • the user U is subject to taxation, for example, when the declaration content states that the user U has an item that exceeds the tax exemption range, a declaration that the user U has a product cargo or a product sample Is in the declaration contents.
  • the CPU 102 may function as a determination unit that determines the declaration content included in the declaration information of the user U, instead of functioning as the determination request unit and the determination information acquisition unit. In this case, the CPU 102 can determine the declaration content included in the declaration information, similarly to the management server 50.
  • the CPU 102 also functions as a determination unit that determines whether or not the user U can use the computerization gate 20 based on the collation information and the determination information received from the management server 50.
  • the CPU 102 as the determination unit determines that the user U has the electronic gate 20. Is determined to be available.
  • the CPU 102 causes the user U to digitize. Is determined to be unavailable.
  • the CPU 102 can send gate availability information, which is information indicating the determination result of availability of the computerized gate 20, to the management server 50.
  • the gate availability information transmitted to the management server 50 is registered in the user information DB 506a in the management server 50 in association with the user information as described later. If the passport face image of the user U matches the captured face image, the user U is not taxable, and the user U is not at risk, the gate availability information indicates that the user U has an electronic gate. 20 is available.
  • the CPU 102 also functions as a display control unit that causes the display 110 to display a screen such as guidance and notification for the user U who makes a customs declaration on the kiosk terminal 10.
  • the CPU 102 as a display control unit causes the display 110 to display a guide screen for guiding how to use the kiosk terminal 10.
  • the CPU 102 causes the display 110 to display a declaration content confirmation screen for the user U to confirm the declaration content included in the declaration information acquired from the mobile terminal 60 of the user U, and to correct it if necessary.
  • the CPU 102 functions as a processing unit that performs processing for the user U who has made a customs declaration at the kiosk terminal 10 in accordance with the determination result of availability of the computerized gate 20. More specifically, the CPU 102 causes the display 110 to display a guide screen for guiding the user U to the computerization gate 20 or the manned booth M according to the determination result of availability of the computerization gate 20, and the user is displayed. Guide U to the computerized gate 20 or manned booth M.
  • the CPU 102 functions as a language setting unit that sets the language used by the kiosk terminal 10 based on the language information read from the declaration code displayed on the mobile terminal 60 of the user U who makes a customs declaration at the kiosk terminal 10. To do. Further, when the user U inputs a change input for changing the language used by the kiosk terminal 10 to another language via the input device 108, the CPU 102 changes the language used according to the change input.
  • the language used by the kiosk terminal 10 is, for example, a language for displaying various information on the display 110 and receiving an input from the input device 108.
  • the kiosk terminal 10 is compatible with multiple languages such as Japanese, English, Chinese, and Korean, as in the customs declaration application of the mobile terminal 60. As a result, the kiosk terminal 10 can display and input in the set language used from a plurality of languages.
  • the storage device 106 is composed of a storage medium such as a non-volatile memory or a hard disk drive, and functions as a storage unit.
  • the storage device 106 stores a program executed by the CPU 102, data referred to by the CPU 102 when the program is executed, and the like.
  • the input device 108 is, for example, a touch panel incorporated in the display 110.
  • the input device 108 functions as an input unit that receives an input of an instruction from the user U.
  • the user U can input various kinds of information and an instruction to execute processing to the kiosk terminal 10 via the input device 108.
  • the display 110 functions as a display unit that displays various screens to the user U who uses the kiosk terminal 10. For example, the display 110 displays a guidance screen that guides how to use the kiosk terminal 10, a declaration content confirmation screen for the user U, a guidance screen for the user U, and the like. Further, the display 110 can also display collation information indicating the result of collation between the photographed face image and the passport face image, and determination information indicating the determination result of the declaration content.
  • the display 110 can be installed vertically, for example. With the vertically long display 110, the display of the same amount of information as that of the horizontally long display of the same size can be realized, and the kiosk terminal 10 can be installed in a small space. Further, the vertically long display 110 can prevent the user U standing in front of the display 110 from peeping at the display 110 from behind.
  • the passport reading device 112 functions as a reading unit that reads the passport of the user U and acquires the information recorded in the passport.
  • the passport reading device 112 includes, for example, an image scanner, a non-contact IC (Integrated Circuit) reader, an OCR (Optical Character Reader) device, and the like.
  • the passport reader 112 reads a passport, which is a medium held over the reading unit, and acquires information from the passport.
  • the passport reading device 112 reads and acquires the identity information of the user U displayed on the passport face by the OCR device. Further, for example, the passport reading device 112 reads and acquires the passport face image of the user U displayed on the passport face with an image scanner. Further, in the case of an IC passport, the passport reading device 112 reads and acquires the identity information of the user U, the passport face image, etc. recorded on the IC chip of the IC passport by the non-contact IC reader.
  • the biometric information of the user U recorded and included in the passport is not limited to the face image, and may be other biometric information such as an iris image.
  • the passport reader 112 can acquire the biometric information of the user U included in the passport.
  • the code reading device 114 functions as a reading unit that reads the filing code displayed on the mobile terminal 60 of the user U and acquires the filing information and language information included in the filing code.
  • the code reading device 114 is, for example, a code reader such as a QR code reader or a bar code reader according to the type of the filing code to be read.
  • the code reading device 114 reads the filing code displayed on the portable terminal 60, which is a code display medium held over the reading unit, and acquires information from the filing code.
  • the camera 116 functions as a biometric information acquisition unit that acquires a face image of the user U as biometric information of the user U who makes a customs declaration using the kiosk terminal 10.
  • the camera 116 is, for example, a photographing device such as a digital camera that photographs the face of the user U in front of the kiosk terminal 10 as a moving image or a still image, and the photographing that is the face image of the user U from the photographed moving image or still image. Get a face image. Under the control of the CPU 102, the camera 116 captures a face image of the user U that causes the passport reading device 112 to read the passport or the code reading device 114 to read the declaration code in front of the kiosk terminal 10, as described later. To obtain the captured face image.
  • the camera 116 when the camera 116 reads at least one of the passport and the declaration code, the camera 116 can capture the face image of the user U and acquire the captured face image.
  • a biometric information acquisition unit that acquires biometric information of the same type as the biometric information acquired from the passport by the passport reading device 112 from the user U can be provided.
  • the CPU 102 can set the number of pixels between eyes in a captured face image captured by the camera 116 within a predetermined range. In this case, for example, the CPU 102 can exclude, from the face images captured by the camera 116, the face images having the number of pixels between eyes less than the predetermined number of pixels from the targets of the captured face images. Accordingly, the camera 116 can reliably shoot the user U who operates the kiosk terminal 10 without shooting a distant person behind the user U who operates the kiosk terminal 10.
  • the CPU 102 can mask a predetermined range on both sides of the image capturing range of the camera 116.
  • the camera 116 can reliably capture the image of the user U who operates the kiosk terminal 10 while preventing the reflection of people around the user U who operates the kiosk terminal 10.
  • the kiosk terminal 10 can be configured so that the captured face image captured by the camera 116 is not displayed on the display 110 or the like. In this case, the user U does not recognize that his / her face has been photographed at the kiosk terminal 10. For this reason, the user U can comfortably use the kiosk terminal 10 without feeling resistance to shooting and without being psychologically pressed by shooting.
  • the depth camera 118 acquires three-dimensional information of an object imaged by the camera 116. Based on the three-dimensional information obtained by the depth camera 118, the CPU 102 determines whether the face image of the user U captured by the camera 116 is obtained from the image of a real human being, or a two-dimensional image such as a photograph is taken. It is possible to determine whether it has been obtained from. As a result, it is possible to prevent improper acts such as impersonation of others.
  • the communication unit 120 is connected to the network NW and transmits / receives data via the network NW.
  • the communication unit 120 communicates with the management server 50 and the like under the control of the CPU 102.
  • the status lamp 122 functions as a status display section that shows the status of the kiosk terminal 10. More specifically, the status lamp 122 indicates, as the status of the kiosk terminal 10, for example, the progress status of the customs declaration of the user U at the kiosk terminal 10, the presence / absence of abnormality of the kiosk terminal 10, and the availability of the kiosk terminal 10. It is possible to show such a situation with different lamp colors.
  • the status lamp 122 can be turned on in a lamp color according to the situation of the kiosk terminal 10 under the control of the CPU 102.
  • a monitoring camera for detecting suspicious behavior may be provided between the status lamp 122 and the pole 100. The surveillance camera can be configured to start photographing when the passport reading device 112 reads the passport or the code reading device 114 reads the declaration code, for example.
  • the status lamp 122 can be turned on with different lamp colors such as green, yellow, red, green blinking, yellow blinking, or red blinking depending on the situation.
  • each lamp color indicates the following situation. That is, the green color indicates a case where face matching is consistent and there is no problem with customs information. Yellow indicates that face matching has failed. Red indicates when there is a problem with customs information. Blinking green indicates that the customs declaration status is slow. Blinking yellow indicates a problem with the system including the kiosk terminal 10. Blinking red indicates that the person is determined to be a blacklist person by illegal passport or face verification. Note that these are examples, and the combination of the lamp color and the situation may be another combination.
  • the status lamp 122 can be turned on differently based on at least one of the information read by the passport reader 112 or the code reader 114, the result of face matching, and the status of the procedure.
  • the above-described illumination 130 provided on the side portion of the display 110 may be turned on in the same color as the status lamp 122.
  • the lighting 130 can also be turned on differently based on at least one of the information read by the passport reader 112 or the code reader 114, the result of face matching, and the status of the procedure.
  • the illumination 130 can be provided on the upper surface or the upper end of the visor 128, for example.
  • a person concerned such as an employee who knows the relationship between the lamp color and the status of an error or the like can change the status of the kiosk terminal 10 according to the lighting status of the status lamp 122 or the lighting 130. You can grasp the situation. Thereby, the related person can appropriately respond, for example, to immediately respond when the display 110 or the illumination 130 blinks in red.
  • the kiosk terminal 10 is configured.
  • FIG. 6B is a perspective view showing the configuration when one kiosk terminal 10 is installed, and FIG. 6A is a top view of FIG. 6B.
  • FIG. 7B is a perspective view showing the configuration when two kiosk terminals 10 are installed, and FIG. 7A is a top view of FIG. 7B.
  • FIG. 8B is a perspective view showing the configuration when three kiosk terminals 10 are installed, and FIG. 8A is a top view of FIG. 8B.
  • one kiosk terminal 10 faces the side of the pole 100 in a predetermined direction as shown in FIGS. 6A and 6B. is set up.
  • a kiosk terminal group which is an information processing apparatus group, can be configured.
  • the two kiosk terminals 10 are radially arranged around the pole 100 at predetermined angular intervals. It is installed on the side of the pole 100.
  • the angular interval between two adjacent kiosk terminals 10 is, for example, 120 °.
  • a kiosk terminal group including the two kiosk terminals 10 is configured.
  • the three kiosk terminals 10 are radially arranged around the pole 100 at predetermined angular intervals. It is installed on the side of the pole 100.
  • the angular intervals between two adjacent kiosk terminals 10 among the three kiosk terminals 10 are equal angles of 120 °, for example.
  • a kiosk terminal group including the three kiosk terminals 10 is configured.
  • each user who uses the adjacent kiosk terminals 10 can install the poles 100 radially so that the kiosk terminals 10 are adjacent to each other, rather than being installed side by side in a straight line.
  • a larger space between U can be secured. This can make it difficult for the user U in front of the adjacent kiosk terminal 10 to peek at the display 110 of the kiosk terminal 10.
  • the angular interval between two adjacent kiosk terminals 10 is not limited to the above 120 ° and can be set as appropriate.
  • the number of kiosk terminals 10 installed on one pole 100 is not limited to the above number, and may be a plurality of four or more terminals.
  • the kiosk terminal 10 is provided with visors 128 on both sides of the display 110 along the display 110.
  • the visor 128 makes it difficult to peep the display 110.
  • FIG. 9 shows blocking of the line of sight by the visor 128 in the configuration in which three kiosk terminals 10 are installed as shown in FIGS. 8A and 8B.
  • the line of sight of the user U in front of the kiosk terminal 10 toward the adjacent kiosk terminal 10 is shielded by the visor 128 provided in the adjacent kiosk terminal 10, as indicated by the dashed arrow in the figure. Will be done.
  • the visor 1228 it is difficult to peep the display 110.
  • multiple kiosk terminals 10 can be installed at different heights. For example, as shown in FIG. 10, in a configuration in which three kiosk terminals 10 are installed, one kiosk terminal 10 can be installed at a lower position than the other two kiosk terminals 10. In this way, by installing a plurality of kiosk terminals 10 at different heights, a user U having a wide height can use the kiosk terminals 10. The kiosk terminal 10 installed at a position lower than the other kiosk terminals 10 can be used by a user U who uses a wheelchair while using the wheelchair, for example.
  • the means for attaching and fixing the kiosk terminal 10 to the pole 100 is not particularly limited, and various means can be used.
  • the kiosk terminal 10 can be fixedly installed with a screw at any of a plurality of mounting positions of different heights provided on the pole 100.
  • the kiosk terminal 10 may be installed on the pole 100 so that the user U himself who uses the kiosk terminal 10 or a customs officer who manages the kiosk terminal 10 can slide up and down. In this case, the user U or the like can adjust the height of the kiosk terminal 10 by sliding the kiosk terminal 10 installed on the pole 100 up and down.
  • cords or cables such as a power cord and a communication cable (not shown) connected to the kiosk terminal 10 are stored and hidden in the pole 100. Moreover, the excess portion of the cords or cables can be accommodated in the housing 126 of the kiosk terminal 10.
  • the kiosk terminal 10 can be installed on various supports such as a support base and a counter in addition to the pole 100 described above.
  • FIG. 11 is a schematic view showing the appearance of the entrance gate terminal 30 and the exit gate terminal 40 that form the computerized gate 20.
  • FIG. 12 is a block diagram showing an example of the hardware configuration of the entrance gate terminal 30.
  • FIG. 13 is a block diagram showing an example of the hardware configuration of the exit gate terminal 40.
  • the computerization gate 20 is a gate device that permits or disallows a user U guided by the kiosk terminal 10 to pass through the user U based on the result of face matching in the computerization gate 20.
  • a user U who is permitted to pass through the computerized gate 20 can enter the customs inspection area C.
  • the user U who is not permitted to pass through the computerized gate 20 will be individually treated, such as being guided to the manned booth M by the customs officer and undergoing a face-to-face customs inspection by the customs officer.
  • the entrance gate terminal 30 and the exit gate terminal 40 that form the computerized gate 20 are passed by the user U guided to the computerized gate 20 because the computerized gate 20 can be used. They are installed at the entrance and exit of the gate passage P to be formed.
  • the gate passage P is restricted by the partition plates, walls, fences, inspection tables, etc. installed on both sides along the gate passage P so that the exit of the user U who has entered the gate passage P from other than the exit gate terminal 40 is restricted. ing.
  • the entrance gate terminal 30 is a gate device installed at the entrance of the gate passage P through which the user U guided by the computerization gate 20 passes.
  • the entrance gate terminal 30 includes a CPU 302, a RAM 304, a storage device 306, an entrance gate door 308, a passage detection sensor 310, a communication unit 312, and a guide display 314.
  • the CPU 302, the RAM 304, the storage device 306, the entrance gate door 308, the passage detection sensor 310, the communication unit 312, and the guide display 314 are connected to the bus line 316.
  • the entrance gate terminal 30 has a pair of housings 318 installed so as to face each other across the entrance of the gate passage P.
  • An entrance gate door 308 is provided in the pair of housings 318 so that the space between the pair of housings 318 can be closed.
  • a plurality of passage detection sensors 310 are provided in the pair of housings 318 so as to be aligned in the direction of entering the gate passage P.
  • the pair of casings 318 is provided with a guide indicator 314 directed toward the front of the entrance gate terminal 30, which is outside the gate passage P.
  • the CPU 302, the RAM 304, the storage device 306, and the communication unit 312 may be housed in the housing 318, or may be housed in a housing separate from the housing 318.
  • the CPU 302 operates by executing a program stored in the storage device 306, and functions as a control unit that controls the overall operation of the entrance gate terminal 30. Further, the CPU 302 executes the application program stored in the storage device 306 to execute various processes as the entrance gate terminal 30.
  • the RAM 304 provides a memory area necessary for the operation of the CPU 302.
  • the CPU 302 determines whether or not the user U has passed through the entrance gate terminal 30 and entered the gate passage P based on the output signals of the plurality of passage detection sensors 310 and their output order. Function as a department.
  • the CPU 302 also functions as a door control unit that controls the opening and closing operations of the entrance gate door 308.
  • the CPU 302 keeps the entrance gate door 308 open. If the CPU 302 determines that the user U has passed through the entrance gate terminal 30 and entered the gate passage P based on the output signal of the passage detection sensor 310, the CPU 302 closes the entrance gate door 308. Further, the CPU 302 keeps the entrance gate door 308 closed until it is determined that the user U who has entered the gate passage P has passed through the exit gate terminal 40 and exited from the gate passage P. Further, the CPU 302 determines that the user U has left the gate passage P based on the exit passage information transmitted from the exit gate terminal 40. When the CPU 302 determines that the user U has exited from the gate passage P, the CPU 302 opens the entrance gate door 308.
  • the CPU 302 determines that the user U has passed through the entrance gate terminal 30 and entered the gate passage P as described above, the user U has passed through the entrance gate terminal 30 and entered the gate passage P. Is transmitted to the exit gate terminal 40.
  • the CPU 302 also functions as a display control unit that controls the display of the guide display 314 according to the open / close state of the entrance gate door 308.
  • the CPU 302 causes the guidance display 314 to display a display indicating that entry into the gate passage P is permitted.
  • the CPU 302 causes the guide display 314 to display a display indicating that entry into the gate passage P is prohibited.
  • the storage device 306 includes a storage medium such as a non-volatile memory and a hard disk drive, and functions as a storage unit.
  • the storage device 306 stores a program executed by the CPU 302, data referred to by the CPU 302 when the program is executed, and the like.
  • the entrance gate door 308 is an opening / closing door that performs a door opening operation and a door closing operation under the control of the CPU 302, and makes a transition between an open door state that allows passage of the user U and a closed door state that blocks passage of the user U. .
  • the opening / closing method of the entrance gate door 308 is not particularly limited, but is, for example, a flapper type, a sliding type, a rotating type, or the like.
  • the passage detection sensor 310 When the passage detection sensor 310 detects the passage of the user U, it outputs an output signal indicating the passage of the user U.
  • the CPU 302 causes the user U to pass through the entrance gate terminal 30 based on the output signals of the plurality of passage detection sensors 310 provided in the pair of casings 318 so as to be arranged in the direction of entering the gate passage P and the output order thereof. It is possible to determine whether or not the vehicle has entered the gate passage P.
  • the passage detection sensor 310 is not particularly limited, but is, for example, a transmissive photoelectric sensor or a reflective photoelectric sensor.
  • the transmissive photoelectric sensor has an irradiation unit that irradiates light such as infrared rays, and a light receiving unit that receives the light emitted by the irradiation unit. Based on a change in the light received by the light receiving unit, passage of an object is prevented. The output signal shown is output.
  • the communication unit 312 is connected to the network NW and transmits / receives data via the network NW.
  • the communication unit 312 communicates with the exit gate terminal 40 and the like under the control of the CPU 302.
  • the communication unit 312 may be connected to the exit gate terminal 40 so as to be able to communicate with the exit gate terminal 40 without going through the network NW.
  • the guidance display device 314 displays a display indicating whether or not the entrance to the gate passage P is permitted under the control of the CPU 302.
  • the guide display 314 displays a display indicating that entry into the gate passage P is permitted. Further, when the entrance gate door 308 is closed, the guide display 314 displays a display indicating that entry into the gate passage P is prohibited.
  • the guide display 314 can display a display indicating whether or not to enter the gate passage P by color display, symbol display, character display, or the like.
  • the entrance gate terminal 30 is configured.
  • the exit gate terminal 40 is a gate device installed at the exit of the gate passage P, which is a passage through which the user U guided by the computerized gate 20 passes. Further, the exit gate terminal 40 has a CPU 402, a RAM 404, a storage device 406, and a display 408, as shown in FIG. Furthermore, the exit gate terminal 40 includes a first camera 410, a second camera 412, an exit gate door 414, a passage detection sensor 416, a communication unit 418, and a guide indicator 420.
  • the CPU 402, the RAM 404, the storage device 406, the display 408, the first camera 410, the second camera 412, the exit gate door 414, the passage detection sensor 416, the communication unit 418, and the guide display 420 are connected to the bus line 422.
  • the exit gate terminal 40 has a pair of housings 424 installed so as to face each other across the exit of the gate passage P.
  • An exit gate door 414 is provided in the pair of housings 424 so that the space between the pair of housings 424 can be closed.
  • the pair of housings 424 are provided with a plurality of passage detection sensors 416 arranged side by side in the direction of exiting from the gate passage P.
  • the pair of housings 424 is provided with a guide display 420 directed toward the front of the exit gate terminal 40, which is inside the gate passage P.
  • the CPU 402, the RAM 404, the storage device 406, and the communication unit 418 may be housed in the housing 424, or may be housed in a housing separate from the housing 424.
  • a display 408 is installed on one of the pair of housings 424.
  • the display 408 is installed so that its screen faces the center of the gate passage P in front of the exit gate terminal 40, for example.
  • a first camera 410 and a second camera 412 are provided on the lower and upper portions of the display 408 on the screen side, respectively.
  • the installation position of the display 408 is not particularly limited as long as the user U in the gate passage P can see the display 408.
  • the first camera 410 is a long-distance camera that has at least a photographing range within the gate passage P between the entrance gate terminal 30 and the exit gate terminal 40, and can photograph a far distance than the second camera 412.
  • the second camera 412 is a short-distance camera in which the area in front of the exit gate terminal 40 is at least the image-capable range.
  • the positions where the first camera 410 and the second camera 412 are provided are not particularly limited as long as they are positions where the respective photographable ranges can be realized.
  • the first camera 410 photographs the user U moving through the gate passage P from the entrance gate terminal 30 toward the exit gate terminal 40, and acquires the face image as the first target face image.
  • the second camera 412 moves through the gate passage P to reach the exit gate terminal 40, shoots the user U in front of the exit gate door 414, and uses the face image as the second target face image. get.
  • the user U is photographed by the first camera 410 without making the user U aware.
  • the image capturing of the user U by the second camera 412 is performed on the user U who has received the image capturing notification by, for example, the display on the display 408.
  • the exit gate terminal 40 can perform non-active authentication in which the person is confirmed by face matching using the first target face image captured without the user U being aware of it by the first camera 410. Further, the exit gate terminal 40 performs positive authentication in which, when the non-positive authentication fails, the second camera 412 verifies the person by face matching using the second target face image captured by the user U. It can be carried out.
  • the CPU 402 operates by executing a program stored in the storage device 406, and functions as a control unit that controls the overall operation of the exit gate terminal 40. Further, the CPU 402 executes an application program stored in the storage device 406 to execute various processes as the exit gate terminal 40.
  • the RAM 404 provides a memory area necessary for the operation of the CPU 402.
  • the CPU 402 functions as a matching request unit that requests the management server 50 to perform face matching of the user U who has entered the gate passage P through the entrance gate terminal 30.
  • the CPU 402 as the matching request unit stores the first target face image, which is the face image of the user U captured by the first camera 410, and the plurality of registered face images registered in the user information DB 506a of the management server 50.
  • the management server 50 is requested to perform a 1: N collation. Therefore, the CPU 402 transmits the face feature amount extracted from the first target face image or the first target face image itself to the management server 50 together with the matching request.
  • the CPU 402 can function as a quality determination unit that calculates a quality value indicating the quality of the first target face image and determines whether or not the calculated quality value is equal to or higher than a predetermined threshold value.
  • the quality value can be set to a larger value as the quality of the first target face image is higher.
  • the CPU 402 as the matching requesting unit can request the management server 50 to match the high-quality first target face image having a quality value equal to or higher than a predetermined threshold value with the registered face image. Note that the quality value can be set to a smaller value as the quality of the first target face image is higher. In this case, the CPU 402 as the quality determination unit can determine whether the calculated quality value is less than or equal to a predetermined threshold value.
  • the CPU 402 as the matching request unit can request the management server 50 to match the high-quality first target face image having a quality value equal to or lower than a predetermined threshold value with the registered face image. In this way, the CPU 402 can determine the quality of the first target face image and request the high-quality first target face image of a certain quality or higher to collate with the registered face image.
  • the first target face image is captured by the first camera 410 without making the user U aware of it. Therefore, when the first target face image having a quality value higher than a certain value cannot be obtained, or the first target face is attached by the face attachment such as a mask, sunglasses, spectacles, or a hat attached to the face of the user U. Face matching using images may not match.
  • the CPU 402 as the collation request unit generates the second target face image that is the face image of the user U captured by the second camera 412 and the plurality of registered face images registered in the user information DB 506a.
  • the management server 50 is requested to perform a 1: N collation. Therefore, the CPU 402 transmits the face feature amount extracted from the second target face image or the second target face image itself to the management server 50 together with the matching request.
  • the CPU 402 also functions as a warning unit that warns the user U according to the state of the face of the user U during the image capturing by the first camera 410. More specifically, the CPU 402 can issue a warning as follows, for example.
  • the CPU 402 can detect the line of sight in the first target face image during the shooting by the first camera 410.
  • the CPU 402 can issue a warning according to the state of the sight line of the user U detected from the first target face image by the sight line detection. That is, when the CPU 402 determines that the user U is facing down or sideways as a result of the line-of-sight detection, the CPU 402 may give a warning to the user U so that the user U faces front, which is the exit gate terminal 40 side. it can.
  • the CPU 402 displays, for example, a display on the display 408 instructing the user U to change the direction of the face so as to face forward, or instructs the user U to change the direction of the face so as to face forward from the speaker or the like.
  • a warning can be issued by issuing a voice. In this case, the display of the warning on the display 408 can be performed before face matching is performed in order to prevent unnecessary face matching failure.
  • the CPU 402 can estimate the mounted object in the first target face image captured while the first camera 410 is capturing the image.
  • the CPU 402 can detect a face attachment such as a mask, sunglasses, glasses, and a hat in the first target face image by estimating the attachment.
  • the CPU 402 can issue a warning to the user U to remove the face-attached article that interferes with face matching.
  • the CPU 402 displays a display instructing the user U to remove the face-mounted article on the display 408, or outputs a voice instructing the user U to remove the face-mounted article from a speaker or the like.
  • a warning can be given.
  • the display of the warning on the display 408 can be performed before face matching is performed in order to prevent unnecessary face matching failure.
  • the CPU 402 also functions as a matching information acquisition unit that acquires from the management server 50 matching information indicating the result of face matching of the first target face image or the second face image requested to the management server 50.
  • the matching information is that as a result of the matching, a registered face image that matches the first target face image or the second target face image has been found and the identity of the user U has been successfully verified, or no matching registered face image has been found. Indicates that the identity verification of the user U has failed.
  • the matching score indicating the similarity between the two face images exceeds a predetermined threshold and the two face images have high similarity. Includes cases that indicate degrees.
  • the CPU 402 performs a 1: N matching of the first target face image or the second target face image with the registered face image of the user information DB 506a, instead of functioning as a matching request unit and a matching information acquisition unit. It can also be configured to function as a matching unit that outputs matching information. In this case, the CPU 402 collates the face images with reference to the user information DB 506a of the management server 50 or with reference to the user information DB stored in the storage device 406 in synchronization with the user information DB 506a. You can
  • the CPU 402 functions as an information acquisition unit that acquires the gate availability information associated with the user information of the user U from the management server 50 when the identity of the user U is successfully confirmed by face matching.
  • the gate availability information is information indicating the determination result of availability of the computerized gate 20 for the user U.
  • the CPU 402 based on the collation result of the face collation of the first target face image or the second target face image and the determination result of availability of the computerization gate 20, regarding the user U in the gate passage P, the computerization gate 20. Functions as a determination unit that determines whether or not the vehicle can pass.
  • the CPU 402 as the determination unit succeeds in confirming the identity of the user U by matching the face collation of the first target face image or the second target face image, and the user U can use the computerization gate 20. In some cases, it is determined that the electronic gate 20 can pass through.
  • the case where the personal identification is successful is the case where the first target face image or the second target face image and the registered face image which is the captured face image or the passport face image acquired by the kiosk terminal 10 match.
  • the case where the user U can use the computerized gate 20 is associated with the user information including the matching registered face image, and indicates whether the user U can use the computerized gate 20 This is the case when information exists.
  • the CPU 402 also functions as a door control unit that controls the opening operation and the closing operation of the exit gate door 414.
  • the CPU 402 determines that the user U can pass through the computerized gate 20
  • the CPU 402 opens the exit gate door 414 whose normal state is the closed state. If the CPU 402 determines that the user U has passed through the exit gate terminal 40 and exited from the gate passage P based on the output signal of the passage detection sensor 416, the CPU 402 closes the exit gate door 414.
  • the CPU 402 functions as a determination unit that determines whether or not the user U has passed through the exit gate terminal 40 and exited from the gate passage P based on the output signals of the plurality of passage detection sensors 416 and the output order thereof. .
  • the CPU 402 determines that the user U has passed through the exit gate terminal 40 and exited from the gate passage P as described above, the user U has passed through the exit gate terminal 40 and exited from the gate passage P. Is transmitted to the entrance gate terminal 30.
  • the CPU 402 also functions as a display control unit that controls the display on the display 408.
  • the CPU 402 can display various notifications for the user U in the gate passage P on the display 408.
  • the CPU 402 causes the display 408 to display a warning to the user U in the gate passage P to instruct the user U to remove a face-worn object such as a mask, sunglasses, glasses, and a hat that obstructs face matching.
  • the CPU 402 can cause the display 408 to display a notification to the user U who stays in front of the exit gate door 414 that the face image is captured by the second camera 412, if necessary.
  • the CPU 402 causes the display 408 to cause the user U to stay in front of the exit gate door 414 when the first target face image and the registered face image do not match or cannot be matched. You can In this case, the CPU 402 can further cause the display on the display 408 so that the user U stays in front of the exit gate door 414 and looks at the display 408. Thereby, the user U can be guided so that the second camera 412 can capture a face image of the user U.
  • the CPU 402 also functions as a display control unit that controls the display of the guidance display device 420 according to the open / close state of the exit gate door 414.
  • the CPU 402 causes the guidance display device 420 to display a display indicating that the exit from the gate passage P is permitted.
  • the CPU 402 causes the guidance display device 420 to display a display indicating that the exit from the gate passage P is prohibited.
  • the storage device 406 is composed of a storage medium such as a non-volatile memory or a hard disk drive, and functions as a storage unit.
  • the storage device 406 stores a program executed by the CPU 402, data referred to by the CPU 402 when the program is executed, and the like.
  • the display 408 functions as a display unit that displays various screens to the user U in the gate passage P. For example, the display 408 displays a warning instructing to remove a face-worn object such as a mask, sunglasses, eyeglasses, a hat that interferes with face matching. Further, for example, the display 408 displays a notification that the second camera 412 captures a face, if necessary. Specifically, the display 408 stops in front of the display 408 so as to allow positive authentication when the first target face image captured by the first camera 410 cannot be collated, and the direction of the second camera 412. Display a display instructing the user to pay attention to.
  • a face-worn object such as a mask, sunglasses, eyeglasses, a hat that interferes with face matching.
  • the display 408 displays a notification that the second camera 412 captures a face, if necessary.
  • the display 408 stops in front of the display 408 so as to allow positive authentication when the first target face image captured by the first camera 410 cannot be collated
  • the display 408 can display a message such as "Please stop at the front of the display 408 and look at the second camera 412" because face recognition is performed. Further, the display 408 displays the verification result of the non-active authentication by the first target face image which is the moving user's U face image, and the active authentication by the second target face image which is the stationary user U's face image. The collation result of can be displayed.
  • the first camera 410 photographs the user U entering the gate passage P and moving through the gate passage P toward the exit gate terminal 40, and is a facial image of the user U as biometric information of the user U. 1 Functions as a biometric information acquisition unit that acquires a target face image.
  • the first target face image captured by the first camera 410 is the face image of the moving user U.
  • the first camera 410 is, for example, a photographing device such as a digital camera that photographs a user U moving in the gate passage P as a moving image or a still image, and the first target face image of the user U from the captured moving image or the still image. To get.
  • the first camera 410 has at least a photographable range in the gate passage P between the entrance gate terminal 30 and the exit gate terminal 40, and is a long distance that is farther than the second camera 412. It is a camera.
  • the first camera 410 shoots the user U without making the user U aware of the shooting.
  • a biometric information acquisition unit that acquires biometric information of the same type as the registered biometric information registered in the user information DB 506a of the management server 50 from the user U can be provided.
  • the second camera 412 takes a picture of the user U who has moved to the gate passage P, reached the exit gate door 414 of the exit gate terminal 40, and stopped, as necessary, and uses it as biometric information of the user U. It functions as a biometric information acquisition unit that acquires a second target face image that is a U face image.
  • the second target face image captured by the second camera 412 is the face image of the user U who is stationary.
  • the second camera 412 is, for example, a photographing device such as a digital camera that photographs the user U in front of the exit gate door 414 as a moving image or a still image, and the second target face of the user U from the captured moving image or the still image. Get an image.
  • the second camera 412 is, as described above, a short-range camera in which the area in front of the exit gate terminal 40 is at least the image capturing range.
  • the second camera 412 captures the image of the user U who has received the notification of the capture through the display on the display 408, voice guidance, or the like.
  • the second camera 412 acquires the second target face image to be compared with the registered face image from the user U who stays in front of the exit gate door 414 in a predetermined case.
  • the predetermined case here is, as described later, when the first target face image and the registered face image do not match or when the matching cannot be performed.
  • the predetermined case means that when the direction of the face of the user U moving toward the exit gate door 414 in the closed state does not face the exit gate door 414, the wearing object is attached to the face of the user U. This is the case when it is attached.
  • a biometric information acquisition unit that acquires biometric information of the same type as the registered biometric information registered in the user information DB 506a of the management server 50 from the user U can be provided.
  • the exit gate door 414 is an opening / closing door that performs a door opening operation and a door closing operation under the control of the CPU 402, and transitions between a closed door state that blocks passage of the user U and an open door state that allows passage of the user U. .
  • the opening / closing method of the exit gate door 414 is not particularly limited, but is, for example, a flapper type, a sliding type, a rotating type, or the like.
  • the passage detection sensor 416 When the passage detection sensor 416 detects the passage of the user U, it outputs an output signal indicating the passage of the user U.
  • the CPU 402 causes the user U to pass through the exit gate terminal 40 based on the output signals of the plurality of passage detection sensors 416 provided in the pair of casings 424 so as to be arranged in the direction of exiting the gate passage P and the output order thereof. It is possible to determine whether or not the passenger exited from the gate passage P.
  • the passage detection sensor 416 is not particularly limited, but is, for example, a transmissive photoelectric sensor or a reflective photoelectric sensor, like the passage detection sensor 310 of the entrance gate terminal 30.
  • the communication unit 418 is connected to the network NW and transmits / receives data via the network NW.
  • the communication unit 418 communicates with the management server 50, the entrance gate terminal 30 and the like under the control of the CPU 402.
  • the communication unit 418 may be communicatively connected to the entrance gate terminal 30 without going through the network NW.
  • the guidance display device 420 displays a display indicating whether or not to leave the gate passage P under the control of the CPU 402.
  • the guidance display device 420 displays a display indicating that the exit from the gate passage P is prohibited.
  • the guidance display device 420 displays a display indicating that the exit from the gate passage P is permitted.
  • the guidance display device 420 can display a display indicating whether or not to leave the gate passage P by color display, symbol display, character display, or the like.
  • the exit gate terminal 40 is configured.
  • FIG. 14 is a block diagram showing an example of the hardware configuration of the management server 50.
  • the management server 50 manages the information processing system 1 and performs collation of the first target face image or the second target face image with a plurality of registered face images in the user information DB 506a, determination of declaration contents included in the declaration information, and the like. This is an information processing device.
  • the function of the management server 50 may be realized by a single server or a plurality of servers.
  • the management server 50 has a CPU 502, a RAM 504, a storage device 506, and a communication unit 508.
  • the CPU 502, the RAM 504, the storage device 506, and the communication unit 508 are connected to the bus line 510.
  • the CPU 502 operates by executing a program stored in the storage device 506, and functions as a control unit that controls the overall operation of the management server 50. Further, the CPU 502 executes an application program stored in the storage device 506 to execute various processes as the management server 50.
  • the RAM 504 provides a memory area required for the operation of the CPU 502.
  • the CPU 502 functions as a matching unit that performs the face matching of the user U when the matching request requesting the face matching of the user U is received from the kiosk terminal 10.
  • the CPU 502 as a collating unit collates the photographed face image included in the user information and the passport face image at a ratio of 1: 1.
  • the CPU 502 collates both face images by collating the face feature amount extracted from the photographed face image with the face feature amount extracted from the passport face image. it can.
  • the CPU 502 also functions as a transmission unit that transmits verification information indicating the result of the user U's face verification to the kiosk terminal 10 that transmitted the verification request.
  • the matching information indicates matching match or mismatch. That is, the collation information indicates that, as a result of the collation, the photographed face image and the passport face image match, and the identity of the user U who makes the customs declaration has succeeded, or the photographed face image and the passport face image do not match. Indicates that the identity verification of the user U has failed.
  • the CPU 502 also functions as a determination unit that determines the declaration content included in the declaration information of the user U when the user information of the user U is received from the kiosk terminal 10.
  • the CPU 502 as a determination unit determines whether or not the user U is subject to taxation and whether or not the user U is at risk based on the declaration contents included in the declaration information of the user U. The case where the user U is taxable and the case where the user U is at risk are as described above.
  • the CPU 502 functions as a transmission unit that transmits the determination information indicating the determination result of the declaration content included in the declaration information of the user U to the kiosk terminal 10 that transmitted the user information.
  • the determination information indicates, as a result of the determination, whether the user U is taxable or not, and whether the user U is at risk.
  • the CPU 502 functions as an information management unit that stores and manages the user information of the user U received from the kiosk terminal 10 in the storage device 506.
  • the CPU 502 as an information management unit manages the user information received from the kiosk terminal 10 by registering the user information in the user information DB 506a stored in the storage device 506. Every time the CPU 502 receives the user information from the kiosk terminal 10, the CPU 502 registers the received user information in the user information DB 506a.
  • the user information of the user U includes the identification item information, face information, and declaration information of the user U associated with each other.
  • the face information is the captured face image and the passport face image acquired by the kiosk terminal 10, or the face feature amount extracted from them.
  • the photographed face image or passport face image registered in the user information DB 506a is used as a registered face image that is registered biometric information registered in advance.
  • As the registered face image either a photographed face image or a passport face image can be used, but a photographed face image newer than the passport face image can be used as the registered face image.
  • the registered face image that is the photographed face image or the passport face image registered in the user information DB 506a or the face feature amount thereof is used for face collation in the computerization gate 20 for confirming the identity of the user U.
  • the CPU 502 when the CPU 502 receives the gate availability information from the kiosk terminal 10, the CPU 502 registers the gate availability information in the user information DB 506a in association with the user information.
  • the gate availability information is information indicating a determination result of availability of the computerized gate 20 for the user U who makes a customs declaration.
  • the CPU 502 can also register the user information of the user U who is determined to be able to use the computerized gate 20 in the user information DB 506a based on the gate availability information. That is, the CPU 502 may not register the user information of the user U who is determined to be unable to use the computerization gate 20 in the user information DB 506a.
  • the CPU 502 determines availability of the computerized gate 20 of the user U and acquires the gate availability information as in the kiosk terminal 10. You can also be received
  • the CPU 502 can delete the user information in the user information DB 506a after a certain time has passed from the registration. For example, the CPU 502 can delete the user information after the elapse of the time normally required from the completion of the customs declaration at the kiosk terminal 10 to the passage of the computerized gate 20 at the customs inspection site C.
  • the CPU 502 functions as a matching unit that performs the face matching of the user U when the matching request requesting the face matching of the user U is received from the exit gate terminal 40.
  • the CPU 502 as the matching unit sets the first target face image or the second target face image or the face feature amount thereof and the plurality of registered face images registered in the user information DB 506a or the face feature amount thereof at 1: N. Collate.
  • the CPU 502 when matching the first target face image or the second target face image with the registered face image, the face feature amount extracted from the first target face image or the second target face image and the face feature extracted from the registered face image. Both face images can be collated by collating with the amount.
  • the CPU 502 as the matching unit matches the first target face image or the second target face image with the plurality of registered face images to determine whether the first target face image or the second target face image is selected from the plurality of registered face images. Try to find a matching registered face image. Further, the CPU 502 compares the face feature amount of the first target face image or the second target face image with the face feature amount of the plurality of registered face images to determine the first face feature amount of the plurality of registered face images. An attempt is made to find a face feature amount of the registered face image that matches the face feature amount of the target face image or the second target face image.
  • the matching score indicating the similarity between the two face images exceeds a predetermined threshold and the two face images have high similarity. Includes cases that indicate degrees. Further, when the face feature amount of the first target face image or the second target face image and the face feature amount of the registered face image match, the matching score indicating the similarity between both face feature amounts has a predetermined threshold value. A case in which both face feature amounts show a high degree of similarity is included.
  • the CPU 502 functions as a transmission unit that transmits verification information indicating the verification result to the exit gate terminal 40 that has transmitted the verification request.
  • the matching information indicates matching match or mismatch. That is, the matching information is that, as a result of the matching, a registered face image that matches the first target face image or the second target face image has been found and the identity of the user U has been successfully verified, or a matching registered face image has been found. It indicates that the identity verification of the user U fails without being performed.
  • the matching information as a result of the matching, the face feature amount of the registered face image that matches the face feature amount of the first target face image or the second target face image is found, and the identity of the user U is successfully confirmed.
  • the CPU 502 may collate the first target face image or the second target face image or the face feature amount with one registered face image or the face feature amount.
  • the CPU 502 can delete the registered face image that matches the first target face image or the second target face image or the user information including the registered face image from the user information DB 506a. Further, the CPU 502 uses the user feature information including the face feature amount of the registered face image or the face feature amount of the registered face image that matches the face feature amount of the first target face image or the face feature amount of the second target face image. It can be deleted from the person information DB 506a.
  • the CPU 502 functions as a transmission unit that transmits the gate availability information to the exit gate terminal 40 as needed.
  • the storage device 506 includes a storage medium such as a non-volatile memory and a hard disk drive, and functions as a storage unit.
  • the storage device 506 stores a program executed by the CPU 502, data referred to by the CPU 502 when the program is executed, and the like.
  • the storage device 506 stores a user information DB 506a.
  • User information of a plurality of users U who have made customs declarations at the kiosk terminal 10 is registered in the user information DB 506a.
  • the gate availability information of the user U is registered in association with the user information.
  • the communication unit 508 is connected to the network NW and transmits / receives data via the network NW.
  • the communication unit 508 communicates with the kiosk terminal 10, the exit gate terminal 40, etc. under the control of the CPU 502.
  • the management server 50 is configured.
  • the kiosk terminal 10 photographs the user U who operates the kiosk terminal 10 with the camera 116 provided between the display 110 and the passport reading device 112 and the code reading device 114.
  • the user U looks at the camera 116 when looking at the display 110, holding the passport over the passport reading device 112 or holding the mobile terminal 60 over the code reading device 114.
  • the kiosk terminal 10 captures the face of the user U by the camera 116 during the reading of the passport by the passport reading device 112 or the reading of the declaration code by the code reading device 114 in parallel. Get an image. Since the user U inevitably faces the camera 116 provided between the display 110 and the passport reader 112 and the code reader 114, the operation of the kiosk terminal 10 of the user U is interrupted and the camera 116 is stopped. You don't have to turn your face. Further, the kiosk terminal 10 can execute the reading of the passport by the passport reading device 112 and the reading of the declaration code by the code reading device 114 at the same time or in any order.
  • the procedure at the kiosk terminal 10 including the reading of the passport, the reading of the declaration code, and the acquisition of the photographed face image used for face matching can be completed in a short time.
  • the kiosk terminal 10 can photograph the face of the user U while reading the passport or the filing code, the user U does not need to be aware of the photographing, and thus the psychological burden of the user U. Can be reduced.
  • the exit gate terminal 40 of the computerization gate 20 the first target face image obtained by capturing the user U moving toward the exit gate terminal 40 with the first camera 410, and the management server 50.
  • the registered face image registered in the user information DB 506a is compared.
  • the first target face image can be acquired by the user U without stopping. Therefore, according to the computerization gate 20 according to the present embodiment, the face verification of the user U can be efficiently performed using the first target face image. As a result, the time required for the user U to pass through the computerization gate 20 can be shortened.
  • the exit gate terminal 40 takes a picture of the user U who stays in front of the exit gate door 414 with the second camera 412 when the first target face image does not match or the matching cannot be performed.
  • the acquired second target face image is compared with the registered face image. Therefore, according to the computerization gate 20 according to the present embodiment, it is possible to surely confirm the identity of the user U through the face verification.
  • the exit gate terminal 40 of the computerized gate 20 according to the present embodiment opens the exit gate door 414 in accordance with a previously determined result of gate availability. Therefore, according to the computerization gate 20 according to the present embodiment, the time required for the user U to pass through the computerization gate 20 can be shortened.
  • FIG. 15A is a schematic diagram showing an example of a declaration information input screen on the mobile terminal 60.
  • FIG. 15B is a schematic diagram showing an example of a declaration code display screen on the mobile terminal 60.
  • FIG. 16 is a sequence diagram showing operations of the kiosk terminal 10 and the management server 50.
  • FIG. 17 is a sequence diagram showing a language setting operation of the kiosk terminal 10.
  • FIG. 18A is a schematic diagram showing an example of a reception screen on the kiosk terminal 10.
  • FIG. 18B is a schematic diagram showing an example of a declaration content confirmation screen on the kiosk terminal 10.
  • FIG. 18C is a schematic diagram showing an example of a guide screen on the kiosk terminal 10.
  • a user U who arrives at an airport from a foreign country by air travels to the customs inspection center C to make a customs declaration after undergoing immigration inspection at the immigration inspection ground, receipt of checked baggage at the baggage reception area, etc.
  • the user U inputs declaration information in the customs declaration application executed on the mobile terminal 60, and generates and displays a declaration code including the declaration information.
  • the user U may generate and display the reporting code before using the kiosk terminal 10.
  • FIG. 15A shows a declaration information input screen SHE of the customs declaration application on the mobile terminal 60.
  • the declaration information input screen SHE has, for example, a declaration information input field SHE10 for inputting information to be declared in the declaration in the customs clearance.
  • the declaration information input field SHE10 for example, in the case of Japan, it is possible to input the information to be declared in the declaration by the customs form C No. 5360, which is a portable goods / delivery goods declaration. That is, the declaration information input field SHE10 can input boarding information, which is information about boarding of the user U, such as boarding flight name, departure place, and entry date, and answers to questions.
  • the basic information of the user U such as the name, current address, telephone number, date of birth, passport number, etc. of the user U, which does not change with each customs declaration, is not shown in the declaration information. It is possible to register by entering on the user registration screen, setting screen, etc.
  • FIG. 15B shows a declaration code display screen SHC of the customs declaration application on the mobile terminal 60.
  • the reporting code display screen SHC has a reporting code display column SHC10 in which a reporting code including the reporting information input in the reporting information input screen SHE is generated and displayed.
  • the declaration code displayed in the declaration code display field SHC10 further includes language information related to the language used by the customs declaration application, in addition to the declaration information.
  • the reporting code display column SHC10 can display the expiration date and time of the reporting code, how to use the reporting code, and the like.
  • Customs Inspection Center C makes a customs declaration at kiosk terminal 10 installed near the entrance of Customs Inspection Center C. It should be noted that the user U can generate and display the declaration code on the mobile terminal 60 before going to the front of the kiosk terminal 10. At that time, the user U uses the declaration code displayed in the customs declaration application of the mobile terminal 60, and the procedure method at the kiosk terminal 10 displayed on the digital signage terminal 70 installed near the kiosk terminal 10. You can refer to the guidance such as.
  • the CPU 102 of the kiosk terminal 10 continuously determines whether the passport reader 112 holds the passport and the code reader 114 holds the declaration code (step). S102). In this way, the CPU 102 waits until at least one of the passport and the declaration code is held over (step S102, NO).
  • FIG. 18A shows an example of the reception screen SKR displayed on the display 110 of the kiosk terminal 10 waiting for the user U to hold at least one of the passport and the declaration code.
  • the reception screen SKR displays, for example, that a filing code is required to use the kiosk terminal 10 and how to hold the passport and filing code.
  • the passport reader 112 reads passport information such as the user U's identity matter information and passport face image from the passport. It is acquired (step S104). Further, when the CPU 102 determines that the reporting code is held over (step S102, YES), the code reading device 114 reads and acquires the reporting information and the language information from the reporting code (step S106).
  • the user U may hold the passport over the passport reader 112 before reading the return code, or may pass the return code over the code reader 114 before reading the passport. Good. Further, the user U may hold the passport and the code for declaration at the same time by reading them over the passport reading device 112 and the code reading device 114, respectively.
  • the CPU 102 can cause the passport reading device 112 to read the passport and the code reading device 114 to read the declaration code according to the timing of reading the passport and the declaration code of the user U, or at the same time. it can.
  • the CPU 102 when the CPU 102 reads one of the passport and the declaration code and then detects the elapse of a certain period of time or the user U leaving the kiosk terminal 10 without holding the other, the process Can be interrupted. In this case, the CPU 102 can display an error display or the like on the display 110, or can perform a reset process that invalidates the process up to that point. After that, the CPU 102 can move to step S102. The CPU 102 can detect that the user U has left the kiosk terminal 10 based on, for example, a moving image captured by the camera 116 or a still image captured continuously.
  • the camera 116 captures the face of the user U and acquires a captured face image of the user U (step S108). .
  • the CPU 102 takes an image of the face of the user U by the camera 116 during the reading of the passport or the code for declaration while the passport reading device 112 reads the passport or the code reading device 114 reads the declaration code.
  • You can The camera 116 can start photographing when a passport or a code for filing is held over.
  • the CPU 102 captures the face image of the user U, which causes the passport reading device 112 to read the passport or the code reading device 114 to read the declaration code, in front of the kiosk terminal 10 by the camera 116, and the captured face image is taken. get.
  • the camera 116 is provided such that the photographing direction thereof is directed obliquely upward and forward, and the user U who looks down at the display 110, the passport reading device 112, or the code reading device 114 and operates the kiosk terminal 10. It has an angle of view that allows you to shoot the face. Therefore, the camera 116 looks to the display 110, the passport reading device 112, or the code reading device 114 with the line of sight directed obliquely downward and looks down on the face of the user U who operates the kiosk terminal 10 and makes the user U aware of taking a picture. You can shoot without having to let it. For example, when photographing with the camera 116, it is not necessary to request the user U to face the direction of the camera 116.
  • the camera 116 can acquire a plurality of face images of the user U who operates the kiosk terminal 10 by shooting a moving image at a predetermined frame rate or a still image at a predetermined time interval.
  • the CPU 102 can select and acquire the highest quality face image of the plurality of face images of the user U captured by the camera 116 as the captured face image of the user U.
  • the camera 116 can start photographing by using a passport or a code for filing as a trigger.
  • the quality of the face image can be evaluated based on, for example, the orientation of the face with respect to the camera 116, and when the orientation of the face with respect to the camera 116 is within a predetermined range, it is determined that the face image has a certain quality or higher. Can be evaluated.
  • the CPU 102 When the CPU 102 obtains the passport face image of the user U from the passport and obtains the photographed face image of the user U by the camera 116, the CPU 102 issues a collation request requesting the face collation of the user U to the management server 50. It transmits via NW (step S110). The CPU 102 transmits the photographed face image and the passport face image or the face feature amount thereof to the management server 50 together with the matching request.
  • the CPU 502 of the management server 50 receives the collation request from the kiosk terminal 10 and performs the face collation of the user U (step S112).
  • the CPU 502 collates the photographed face image with the passport face image at a ratio of 1: 1.
  • the CPU 502 transmits collation information indicating the collation result of the photographed face image and the passport face image to the kiosk terminal 10 via the network NW (step S114).
  • the face matching of the user U is performed to match the photographed face image with the passport face image.
  • the kiosk terminal 10 captures the face of the user U by the camera 116 and acquires step S108 of acquiring the captured face image of the user U again. This can be executed to re-capture the captured face image.
  • the kiosk terminal 10 can perform re-imaging of the captured face image only once or multiple times.
  • the CPU 102 sets the language used by the kiosk terminal 10 for confirmation of the declaration content by the user U and correction if necessary (step S116).
  • the CPU 102 first acquires the language information read from the reporting code as shown in FIG. 17 (step S202).
  • the CPU 102 sets the language used by the customs declaration application indicated by the acquired language information as the language used by the kiosk terminal 10 (step S204).
  • the language used for the customs declaration application set to the language used for the kiosk terminal 10 is the language set in the language setting of the mobile terminal 60, or the language set in the settings in the customs declaration application, if the language is set. Is.
  • the CPU 102 can display various information on the display 110 in the same language as the language used for the customs declaration application of the mobile terminal 60 used by the user U.
  • the CPU 102 can accept an input by the user U from the input device 108 such as a touch panel incorporated in the display 110 in the same language as the language used by the customs declaration application of the mobile terminal 60 used by the user U. it can.
  • the CPU 102 determines whether or not a change instruction for instructing the change of the used language to another language is input by the user U via the input device 108 (step S206). If the change instruction is not input (step S206, NO), the CPU 102 maintains the language used set in step S204.
  • step S206 If the change instruction is input (step S206, YES), the CPU 102 changes the language used by the kiosk terminal 10 to another language instructed by the change instruction (step S208).
  • the user U can confirm the displayed contents and input the information in the language used by the kiosk terminal 10 or the language instructed to change by the user. Therefore, the user U can smoothly use the kiosk terminal 10 without the language becoming an obstacle.
  • the CPU 102 displays the declaration contents of the declaration information read from the declaration code on the display 110 and allows the user U to confirm the declaration contents, as shown in FIG.
  • the correction is accepted as necessary (step S118).
  • the user U confirms the declaration contents displayed on the display 110 and corrects the declaration contents via the input device 108 when the declaration contents need to be corrected.
  • the user U who has confirmed the declaration contents inputs a confirmation instruction for confirming the declaration contents and confirming the declaration contents through the input device 108. As a result, the declaration contents declared by the user U in the customs declaration are fixed.
  • FIG. 18B shows an example of the declaration content confirmation screen SKC displayed on the display 110 of the kiosk terminal 10 in which the user U confirms the declaration content and corrects it if necessary.
  • the declaration content confirmation screen SKC displays the declaration content included in the declaration information.
  • the report content confirmation screen SKC can be changed to a report content correction screen in which the report content can be corrected, for example, by pressing the correction button by touch input by the user U.
  • the declaration content confirmation screen SKC for example, when the confirmation button is pressed by the touch input of the user U, the confirmation instruction is input to the kiosk terminal 10.
  • the declaration contents declared by the user U in the customs declaration are fixed.
  • the CPU 102 can display the declaration information input screen SHE of the customs declaration application shown in FIG. 15A displayed on the display 610 of the mobile terminal 60 and the declaration content confirmation screen SKC whose layout is unified. Since the layouts of both screens are unified, it is possible to realize a screen display in which the operation of the kiosk terminal 10 is not easily lost.
  • the CPU 102 transmits the user information of the user U to the management server 50 via the network NW (step S120).
  • the user information includes identification item information, face information, and declaration information of the user U associated with each other. Since the CPU 102 transmits the captured face image and the passport face image together with the matching request in step S110, the face information of the user information does not have to be transmitted again.
  • the CPU 502 determines the declaration content included in the declaration information of the user information of the user U (step S122). The CPU 502 determines whether or not the user U is subject to taxation and whether or not the user U is at risk from the declaration contents included in the declaration information of the user U.
  • the CPU 502 can verify the passport number in addition to determining the declaration content. In this case, the CPU 502 collates the passport number included in the identification item information of the user information with the passport number included in the declaration information of the user information.
  • the CPU 502 transmits the determination information indicating the determination result of the declaration content included in the declaration information of the user U to the kiosk terminal 10 via the network NW (step S124). Further, the CPU 502 can include the passport number verification result in the determination information.
  • the CPU 102 of the kiosk terminal 10 determines whether or not the user U can use the computerization gate 20 based on the received determination information and the previously received matching information (step S126).
  • the collation information received earlier is the one transmitted from the management server 50 in step S114.
  • the CPU 102 can display the matching information indicating the result of matching the photographed face image and the passport face image and the judgment information indicating the judgment result of the declaration content on the display 110 to show the user U.
  • the CPU 102 determines that the user U can use the computerized gate 20 when the passport face image of the user U matches the photographed face image, the user U is not taxable, and the user U has no risk. judge.
  • the determination information includes the matching result of the passport number
  • the CPU 102 matches the passport face image of the user U with the captured face image, the user U is not taxable, and the user U has no risk. Further, when the passport numbers match, it is determined that the user U can use the computerized gate 20.
  • the CPU 102 causes the user U to digitize. Is determined to be unavailable.
  • the CPU 102 determines that the user U cannot use the computerized gate 20 even when the passport numbers do not match.
  • the CPU 102 transmits gate availability information showing the determination result of availability of the computerized gate 20 to the management server 50 (step S128). If the passport face image of the user U matches the captured face image, and the user U is not taxable and the user U is not at risk, the gate availability information indicates that the user U has an electronic gate. 20 is available. When the determination information includes the passport number verification result, the gate availability information indicates that the user U can use the computerized gate 20 when the passport numbers further match.
  • the CPU 502 of the management server 50 Upon receiving the gate availability information from the kiosk terminal 10, the CPU 502 of the management server 50 registers the user information of the user U in the user information DB 506a in association with the gate availability information (step S130). Note that instead of receiving the gate availability information from the kiosk terminal 10, the CPU 502, like the CPU 102 of the kiosk terminal 10, determines the availability of the computerized gate 20 for the user U based on the collation information and the determination information. It can also be determined.
  • the CPU 502 can also register the user information of a specific user U in the user information DB 506a, instead of registering the user information in the user information DB 506a in association with the gate availability information. That is, the CPU 502 can also register the user information of the user U who is determined to be able to use the computerized gate 20 in the user information DB 506a based on the gate availability information. That is, the CPU 502 may not register the user information of the users U other than the specific user U in the user information DB 506a.
  • the CPU 102 of the kiosk terminal 10 determines that the user U can use the computerization gate 20 (step S132, YES)
  • the CPU 102 executes a process for guiding the user U to the computerization gate 20 (step S134).
  • the CPU 102 guides the user U to the computerized gate 20, for example, by displaying a guide screen for guiding the user U to the computerized gate 20 on the display 110.
  • FIG. 18C shows an example of the guidance screen SKG displayed on the display 110 of the kiosk terminal 10 for guiding the user U to the computerization gate 20.
  • the guidance screen SKG shows, for example, a word, a symbol, a picture or the like to be guided to the computerized gate 20, and also a word, a symbol, a picture or the like indicating that the customs declaration has been completed.
  • the CPU 102 determines that the user U cannot use the computerization gate 20 (step S132, NO), it executes a corresponding process for the user U who cannot use the computerization gate 20 (step S136).
  • the CPU 102 guides the user U to the manned booth M, for example, by displaying a guidance screen for guiding the user U to the manned booth M on the display 110.
  • the customs declaration is made by the user U at the kiosk terminal 10.
  • FIG. 19 is a sequence diagram showing operations of the entrance gate terminal 30 and the exit gate terminal 40, which configure the computerized gate 20, and the management server 50.
  • the entrance gate door 308 of the entrance gate terminal 30 is opened and the exit gate door 414 of the exit gate terminal 40 is closed. Has become. Further, in the standby state, the guide display 314 of the entrance gate terminal 30 displays a display indicating permission to enter the gate passage P, and the guide display 420 of the exit gate terminal 40 prohibits the exit from the gate passage P. Is displayed.
  • the CPU 302 of the entrance gate terminal 30 determines whether or not the user U has passed through the entrance gate terminal 30 and entered the gate passage P (step S302), and the user It waits for U to pass (step S302, NO).
  • the CPU 302 can determine whether or not the user U has passed through the entrance gate terminal 30 and entered the gate passage P based on the output signals of the plurality of passage detection sensors 310 and their output order.
  • step S302 When the CPU 302 determines that the user U has passed through the entrance gate terminal 30 and entered the gate passage P (step S302, YES), it closes the entrance gate door 308 (step S304). Further, the CPU 302 changes the display of the guide display 314 from the display showing permission to enter the gate passage P to the display showing prohibition of entry into the gate passage P.
  • the entrance gate door 308 is controlled so as not to be opened until the user U who has entered the gate passage P passes through the exit gate terminal 40 and exits from the gate passage P. Therefore, only one user U can enter the gate passage P. As a result, it is possible to prevent the situation in which a plurality of users U are photographed by the first camera 410, and it is possible to reliably perform collation of the first target face image.
  • the CPU 302 transmits the entrance passage information indicating that the user U has passed through the entrance gate terminal 30 and entered the gate passage P to the exit gate terminal 40 (step S306). It should be noted that the CPU 302 can execute either step S304 or step S306 in the previous order, or can execute both steps S304 and S306 at the same time.
  • the CPU 402 of the exit gate terminal 40 which has received the entrance passage information from the entrance gate terminal 30, photographs the user U moving through the gate passage P toward the exit gate terminal 40 with the first camera 410, and the user U's A first target face image is acquired (step S308).
  • the first camera 410 acquires a plurality of first target face images of the user U moving in the gate passage P by shooting a moving image at a predetermined frame rate or shooting a still image at a predetermined time interval. In this way, the first target face image that is the face image of the user U moving in the gate passage P is acquired.
  • the user U can move toward the exit gate terminal 40 without stopping in the gate passage P.
  • the CPU 402 detects the line of sight in the first target face image, and when the result of the line of sight detection determines that the user U is facing down or sideways, A warning can be given to face forward, which is the side of the exit gate terminal 40.
  • the CPU 402 can give a warning to the user U so that the user U faces forward by, for example, a display on the display 408, a sound from a speaker, or the like. As a result, a high quality first target face image can be acquired more reliably.
  • the CPU 402 does not perform the quality determination in step S310 and the collation request in step S312 below, and does not collate the first target face image. You can also do it.
  • the CPU 402 estimates the wearing object in the taken first target face image, and attempts to detect a face wearing object such as sunglasses, glasses, and a hat in the first target face image.
  • the CPU 402 can give a warning to the user U to remove the face attachment by, for example, a display on the display 408, a voice from a speaker, or the like. As a result, it is possible to remove a factor that hinders the collation of the first target face image.
  • the CPU 402 does not perform the quality determination in step S310 and the collation request in step S312 below, and collates the first target face image. You can choose not to do this.
  • the CPU 402 calculates a quality value for each of the acquired first target face images, and determines the quality of the first target face image based on the calculated quality value (step S310).
  • the CPU 402 sequentially transmits a matching request to the management server 50 via the network NW for the high quality first target face image having a certain quality or higher (step S312).
  • the CPU 402 requests the management server 50 to collate the first target face image having a certain quality or higher with the plurality of registered face images registered in the user information DB 506a of the management server 50 in a 1: N ratio. Request.
  • the CPU 402 transmits the face feature amount extracted from the first target face image or the first target face image itself to the management server 50 together with the matching request.
  • the CPU 402 may send all the first target face images acquired regardless of the quality to the management server 50.
  • the CPU 502 of the management server 50 can similarly determine the quality of the first target face image and can compare the first target face image having a certain quality or higher with the registered face image.
  • the CPU 502 can match the first target face image with the registered face image regardless of the quality.
  • the CPU 502 of the management server 50 receives the collation request for the first target face image from the exit gate terminal 40, the CPU 502 collates the first target face image (step S314).
  • the CPU 502 collates the face feature amount of the first target face image received from the exit gate terminal 40 and the face feature amount of the plurality of registered face images registered in the user information DB 506a with 1: N.
  • the facial feature amount of the first target face image is one received from the exit gate terminal 40 or extracted from the first target face image received from the exit gate terminal 40.
  • the CPU 502 transmits matching information indicating the result of matching the first target face image to the exit gate terminal 40 via the network NW (step S316).
  • the CPU 402 of the exit gate terminal 40 and the CPU 502 of the management server 50 can repeatedly execute steps S312, S314, and S316 for a plurality of first target face images having a certain quality or higher.
  • the CPU 402 of the exit gate terminal 40 receives the verification information from the management server 50. At the time when the matching information about any of the first target face images indicates that a matching registered face image has been found, the CPU 402 has succeeded in confirming the identity of the user U moving through the gate passage P (step S318). , YES), and the photographing by the first camera 410 ends. Subsequently, the CPU 402 proceeds to step S336.
  • the identity verification of the user U has failed (step S318, NO), it is determined that the identity verification by collating the first target face image has failed.
  • the predetermined time is, for example, the time when the user U reaches the exit gate door 414 of the exit gate terminal 40.
  • the CPU 402 can determine whether the user U has reached the exit gate door 414 from the image captured by the first camera 410.
  • the CPU 402 can determine that the identity verification by the collation of the first target face image has failed even if the collation information is not received by the predetermined time similar to the above. In this case, the first target face image having a certain quality or higher cannot be acquired, and the first target face image and the registered face image cannot be collated.
  • the CPU 402 determines that the identity verification by collating the first target face image has failed, the CPU 402 notifies the user U that the second camera 412 will perform imaging (step S320). That is, the CPU 402 notifies the user U that the second camera 412 will perform imaging when the first target face image and the registered face image do not match or cannot be matched.
  • the CPU 402 can notify that the second camera 412 will perform image capturing, for example, by displaying on the display 408, voice guidance, or the like.
  • the CPU 402 receives a notification from the second camera 412 and photographs the user U who stays in front of the exit gate door 414 (step S322).
  • the CPU 402 acquires the second target face image of the user U who has arrived in front of the exit gate door 414 of the exit gate terminal 40 and remains in front of the exit gate door 414.
  • the second target face image which is the face image of the user U standing still in front of the exit gate door 414, is acquired.
  • the second camera 412 can acquire a plurality of face images of the user U in front of the exit gate door 414 by shooting a moving image at a predetermined frame rate or shooting a still image at a predetermined time interval.
  • the CPU 402 may select and acquire the highest quality face image of the plurality of face images of the user U captured by the second camera 412 as the second target face image of the user U. it can.
  • the CPU 402 can guide the user U by, for example, a display on the display 408, a voice from a speaker, or the like when the second camera 412 captures an image.
  • the CPU 402 can guide the user U to remove the face attachment if the face attachment is detected in the second target face image, or to let the second camera 412 face the display 408. it can.
  • FIG. 20 shows an example of the guide display displayed on the display 408 when the second camera 412 takes a picture.
  • the display on the display 408 can guide the removal of the mask, which is a face fitting.
  • the CPU 402 transmits a collation request to the management server 50 for the second target face image via the network NW (step S324).
  • the CPU 402 requests the management server 50 to collate the second target face image with the plurality of registered face images registered in the user information DB 506a of the management server 50 at 1: N.
  • the CPU 402 transmits the face feature amount extracted from the second target face image or the second target face image itself to the management server 50 together with the matching request.
  • the CPU 502 transmits collation information indicating the collation result of the second target face image to the exit gate terminal 40 via the network NW (step S328).
  • the CPU 402 of the exit gate terminal 40 receives the verification information from the management server 50. If the matching information about the second target face image indicates that the matching registered face image is found and the identity of the user U in front of the exit gate door 414 is successfully confirmed (step S330, YES), the CPU 402 determines that The process moves to step S336.
  • the exit gate terminal 40 captures the second target face image of the user U by photographing the user U with the second camera 412. By performing step S322 again, the second target face image can be re-photographed.
  • the exit gate terminal 40 can perform re-imaging of the second target face image only once or a plurality of times.
  • the CPU 502 of the management server 50 transmits the gate availability information when the identity of the user U is successfully confirmed as a result of the first target face image matching or the second target face image matching (step S332, YES). Is performed (step S334). That is, the CPU 502 acquires the gate availability information associated with the user information of the user U who has succeeded in the identification from the user information DB 506a and transmits it to the exit gate terminal 40 via the network NW.
  • the CPU 402 of the exit gate terminal 40 responds when the collation information about the second target face image indicates that no matching registered face image has been found and the identity verification of the user U has failed (step S330, NO).
  • the process is executed (step S338).
  • the verification of the identity of the user U has failed by both the verification of the first target face image and the verification of the second target face image.
  • the CPU 402 calls the customs officer to the gate passage P as a corresponding process, it can sound an alarm or send a notification to the terminal of the customs officer, for example.
  • the customs officer can guide the user U to the manned booth M or another room, for example.
  • the customs officers carry out a face-to-face customs inspection at an inspection table provided on the side of the computerized gate 20, and then exit the user U from the gate passage P through the manually opened exit gate door 414. be able to.
  • the CPU 402 which succeeds in confirming the identity of the user U by the collation of the first target face image or the second target face image and proceeds to step S336, regarding the user U who has succeeded in the identity confirmation, the computerization gate 20 Whether or not to use is determined (step S336).
  • the CPU 402 determines the availability of the computerized gate 20 based on the gate availability information received from the management server 50.
  • step S338 When the CPU 402 determines that the computerization gate 20 cannot be used (NO in step S336), the CPU 402 executes a corresponding process (step S338). In this case, although the identity of the user U has been successfully verified by matching the first target face image or the second target face image, the user U has a risk that the user U is determined to be taxable. Those who have been determined to be. Since the CPU 402 calls the customs officer to the gate passage P as a corresponding process, it can sound an alarm or send a notification to the terminal of the customs officer, for example. Also in this case, the customs officer can deal with the user U as described above.
  • step S336, YES when the CPU 402 determines that the computerized gate 20 can be used (step S336, YES), it opens the exit gate door 414 (step S340). Further, the CPU 402 changes the display of the guidance display device 420 from a display indicating that the exit from the gate passage P is prohibited to a display indicating that the exit from the gate passage P is permitted.
  • the CPU 402 determines whether or not the user U has passed through the exit gate terminal 40 and exited from the gate passage P (step S342), and waits for the user U to pass (step S342, NO).
  • the CPU 402 can determine whether or not the user U has passed through the exit gate terminal 40 and exited from the gate passage P based on the output signals of the plurality of passage detection sensors 416 and the output order thereof.
  • the CPU 402 determines that the user U has passed through the exit gate terminal 40 and exited from the gate passage P (step S342, YES), it closes the exit gate door 414 (step S344). Further, the CPU 402 changes the display of the guidance display device 420 from a display showing permission to leave the gate passage P to a display showing prohibition of leaving the gate passage P.
  • the CPU 402 transmits, to the entrance gate terminal 30, exit passage information indicating that the user U has passed through the exit gate terminal 40 and exited from the gate passage P (step S346). It should be noted that the CPU 402 can execute either step S344 or step S346 in the order of importance, or can execute both steps S344 and S346 at the same time.
  • the computerized gate 20 shifts to a standby state waiting for the user U to enter the gate passage P.
  • the kiosk terminal 10 acquires a captured face image used for face matching, which is biometric information matching, during reading of a passport or a declaration code. Therefore, according to the present embodiment, the procedure at the kiosk terminal 10 including the acquisition of information by reading the passport and the declaration code and the face matching using the photographed face image can be completed in a short time. .
  • the exit gate terminal 40 of the computerization gate 20 the user U moving toward the exit gate terminal 40 is photographed by the first camera 410, and face matching, which is matching of biometric information, is performed.
  • the first target face image used for is acquired.
  • the exit gate door 414 is opened according to the determination result of the gate availability determined in advance. Therefore, according to this embodiment, the time required for the user U to pass through the computerization gate 20 can be shortened.
  • FIG. 21 is a schematic diagram showing the configuration of an information processing device according to another embodiment.
  • an information processing apparatus 1000 has a reading unit 1002 and a biometric information acquisition unit 1004.
  • the reading unit 1002 reads the medium of the user and acquires information including the biometric information of the user from the medium.
  • the biometric information acquisition unit 1004 acquires biometric information of the user from the user while reading the medium.
  • the information processing apparatus 1000 since the biometric information of the user is acquired from the user who causes the reading unit 1002 to read the medium during the reading of the medium, the information acquisition and the biometric information matching are performed. Can be completed in a short time.
  • the present invention is not limited to this.
  • the kiosk terminal 10 can be configured to receive various declarations by the user.
  • the camera 116, the first camera 410, and the second camera 412 capture and capture the face image of the user U as the biometric information of the user U has been described as an example, but the present invention is not limited to this. It is not something that will be done.
  • the camera 116, the first camera 410, and the second camera 412 may acquire an iris image or the like in addition to a face image that is face information.
  • the kiosk terminal 10 can be configured as a system including one or a plurality of devices.
  • the entrance gate terminal 30 according to the above-described embodiment can be configured as a system including one or a plurality of devices.
  • the exit gate terminal 40 according to the above-described embodiment can be configured as a system including one or a plurality of devices.
  • the management server 50 according to the above embodiment can be configured as a system including one or a plurality of devices.
  • a processing method of recording a program for operating the configuration of the embodiment so as to realize the function of each of the above-described embodiments in a recording medium reading the program recorded in the recording medium as a code, and executing the program in a computer. It is included in the category of each embodiment. That is, a computer-readable recording medium is also included in the scope of each embodiment. Further, not only the recording medium in which the above computer program is recorded but also the computer program itself is included in each embodiment.
  • the recording medium for example, a floppy (registered trademark) disk, hard disk, optical disk, magneto-optical disk, CD-ROM (Compact Disc-Read Only Memory), magnetic tape, non-volatile memory card, or ROM can be used.
  • the processing is not limited to the one executed by the program recorded in the recording medium, and the processing is executed by operating on the OS (Operating System) in cooperation with other software and the function of the expansion board. Those are also included in the category of each embodiment.
  • a reading unit that reads the medium of the user and acquires information including biometric information of the user from the medium;
  • a biometric information acquisition unit that acquires biometric information of the user from the user during reading of the medium.
  • Appendix 2 The information processing apparatus according to appendix 1, further comprising a control unit that requests or performs matching between the biometric information acquired by the reading unit and the biometric information acquired by the biometric information acquisition unit.
  • the reading unit A first reading unit that reads the first medium including the biometric information and acquires the first information including the biometric information from the first medium; A second reading unit that reads the code displayed on the second medium and obtains the second information from the code, The information processing device according to appendix 1 or 2, wherein the biometric information acquisition unit acquires the biometric information of the user from the user when reading at least one of the first medium and the code.
  • the reading unit A first reading unit that reads the first medium including the biometric information and acquires the first information including the biometric information from the first medium; A second reading unit that reads the code displayed on the second medium and obtains the second information from the code, When the biometric information acquisition unit reads one of the first medium and the code, the biometric information acquisition unit acquires the biometric information of the user from the user, When the other of the first medium and the code is read, a control requesting or collating the biometric information acquired by the reading unit with the biometric information acquired by the biometric information acquiring unit is performed.
  • the information processing apparatus according to appendix 1, further comprising a section.
  • Appendix 5 The information processing apparatus according to appendix 3 or 4, wherein the first reading unit and the second reading unit can read the first medium and the code, respectively, in an arbitrary order or simultaneously.
  • the code includes language information
  • the reading unit acquires language information from the code, 6.
  • the information processing apparatus according to any one of appendices 3 to 5, further comprising a language setting unit that sets a language used by the information processing apparatus based on the language information.
  • the first medium is a passport of the user, 7.
  • the information processing apparatus according to any one of appendices 3 to 6, wherein the second medium is a mobile terminal that displays the code including declaration information necessary for customs declaration.
  • Appendix 8 A display unit provided at a position higher than the reading unit, The information processing apparatus according to any one of appendices 1 to 7, wherein the biometric information acquisition unit is provided between the reading unit and the display unit.
  • Appendix 9 A process for the user according to a collation result of the biometric information acquired by the reading unit and the biometric information acquired by the biometric information acquisition unit, and a determination result of the information acquired from the medium.
  • the information processing device according to any one of appendices 1 to 8, which has a processing unit that executes.
  • the display unit displays a comparison result between the biometric information acquired by the reading unit and the biometric information acquired by the biometric information acquisition unit, and a determination result for the information acquired from the medium.
  • the information processing device according to 8.
  • (Appendix 11) 11 The information processing device according to any one of appendices 1 to 10, wherein the biometric information acquisition unit acquires, as the biometric information of the user, the face image of the highest quality among the plurality of face images of the user. .
  • the reading unit reads the medium of the user, acquires information including the biometric information of the user from the medium, An information processing method in which a biometric information acquisition unit acquires biometric information of the user from the user while the medium is being read.
  • the reading unit reads the medium of the user, acquires information including the biometric information of the user from the medium, A recording medium in which a program for causing the biometric information acquisition unit to acquire biometric information of the user from the user while the medium is being read is recorded.

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Collating Specific Patterns (AREA)
  • Devices For Checking Fares Or Tickets At Control Points (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

情報の取得と生体情報の照合とを短時間で完了することができる情報処理装置、情報処理方法及び記録媒体を提供する。情報処理装置は、利用者の媒体を読み取って、媒体から利用者の生体情報を含む情報を取得する読取部と、媒体の読取りの間に、利用者から利用者の生体情報を取得する生体情報取得部とを有する。

Description

情報処理装置、情報処理方法及び記録媒体
　本発明は、情報処理装置、情報処理方法及び記録媒体に関する。
　特許文献１には、スマートパスポートカードを用いた出入国管理用カードシステムが記載されている。特許文献１に記載のシステムは、税関チェック設備において、スマートパスポートカードを端末機にかけることによりスマートパスポートカードから手荷物申告カード情報を得て税関チェックを行う。
特開２００２－３０４４４８号公報
　しかしながら、特許文献１に記載のシステムのように、カードからの情報の取得とは別個に本人確認のための生体情報の照合を行ったのでは、情報の取得と生体情報の照合とを短時間で完了することは困難である。
　本発明の目的は、上述した課題を鑑み、情報の取得と生体情報の照合とを短時間で完了することができる情報処理装置、情報処理方法及び記録媒体を提供することにある。
　本発明の一観点によれば、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得する読取部と、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する生体情報取得部とを有する情報処理装置が提供される。
　本発明の他の観点によれば、読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する情報処理方法が提供される。
　本発明のさらに他の観点によれば、読取部と生体情報取得部とを有する情報処理装置に、前記読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、前記生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得することを実行させるプログラムが記録された記録媒体が提供される。
　本発明によれば、情報の取得と生体情報の照合とを短時間で実行することができる。
図１は、本発明の一実施形態による情報処理システムの全体構成を示す概略図である。 図２は、本発明の一実施形態によるキオスク端末及び電子化ゲートが設置された税関検査場を示す概略図である。 図３は、本発明の一実施形態による携帯端末のハードウェア構成の一例を示すブロック図である。 図４Ａは、本発明の一実施形態によるキオスク端末の外観を示す概略図である。 図４Ｂは、本発明の一実施形態によるキオスク端末の外観を示す概略図である。 図５は、本発明の一実施形態によるキオスク端末のハードウェア構成の一例を示すブロック図である。 図６Ａは、本発明の一実施形態によるキオスク端末が１台設置された場合の構成を示す概略図である。 図６Ｂは、本発明の一実施形態によるキオスク端末が１台設置された場合の構成を示す概略図である。 図７Ａは、本発明の一実施形態によるキオスク端末が２台設置された場合の構成を示す概略図である。 図７Ｂは、本発明の一実施形態によるキオスク端末が２台設置された場合の構成を示す概略図である。 図８Ａは、本発明の一実施形態によるキオスク端末が３台設置された場合の構成を示す概略図である。 図８Ｂは、本発明の一実施形態によるキオスク端末が３台設置された場合の構成を示す概略図である。 図９は、本発明の一実施形態によるキオスク端末における覗き見の防止を説明する概略図である。 図１０は、本発明の一実施形態によるキオスク端末が高さ違いで設置された場合の構成を示す概略図である。 図１１は、本発明の一実施形態による電子化ゲートを構成する入口ゲート端末及び出口ゲート端末の外観を示す概略図である。 図１２は、本発明の一実施形態による電子化ゲートを構成する入口ゲート端末のハードウェア構成の一例を示すブロック図である。 図１３は、本発明の一実施形態による電子化ゲートを構成する出口ゲート端末のハードウェア構成の一例を示すブロック図である。 図１４は、本発明の一実施形態による管理サーバのハードウェア構成の一例を示すブロック図である。 図１５Ａは、本発明の一実施形態による携帯端末における申告情報入力画面の一例を示す概略図である。 図１５Ｂは、本発明の一実施形態による携帯端末における申告用コード表示画面の一例を示す概略図である。 図１６は、本発明の一実施形態による情報処理システムにおけるキオスク端末及び管理サーバの動作を示すシーケンス図である。 図１７は、本発明の一実施形態による情報処理システムにおけるキオスク端末の言語設定動作を示すシーケンス図である。 図１８Ａは、本発明の一実施形態によるキオスク端末における受付画面の一例を示す概略図である。 図１８Ｂは、本発明の一実施形態によるキオスク端末における申告内容確認画面の一例を示す概略図である。 図１８Ｃは、本発明の一実施形態によるキオスク端末における誘導画面の一例を示す概略図である。 図１９は、本発明の一実施形態による情報処理システムにおける入口ゲート端末、出口ゲート端末及び管理サーバの動作を示すシーケンス図である。 図２０は、本発明の一実施形態による出口ゲート端末における通知画面の一例を示す概略図である。 図２１は、本発明の他の実施形態による情報処理装置の構成を示すブロック図である。
　［一実施形態］
　本発明の一実施形態による情報処理装置、ゲート装置、情報処理方法及びゲート装置の制御方法について図１乃至図２０を用いて説明する。
　まず、本実施形態による情報処理システムの全体構成について図１及び図２を用いて説明する。図１は、本実施形態による情報処理システムの全体構成を示す概略図である。図２は、本実施形態によるキオスク端末及び電子化ゲートが設置された税関検査場を示す概略図である。
　図１に示すように、本実施形態による情報処理システム１は、キオスク端末１０と、電子化ゲート２０と、管理サーバ５０と、携帯端末６０とを含んでいる。電子化ゲート２０は、入口ゲート端末３０と、出口ゲート端末４０とを有している。情報処理システム１は、例えば、空港、海港等において外国から入国する旅客、乗組員等の利用者Ｕの入国時の税関手続における申告を受け付けるとともに、申告が完了した特定の利用者Ｕが通過する電子化ゲート２０を制御するシステムである。
　例えば、情報処理システム１が日本国の空港に導入されている場合、利用者Ｕは、航空機で外国から当該空港に到着した旅客又は乗組員であって、出国していた外国から日本国に帰国して入国する日本人、外国から日本国に入国する外国人等である。情報処理システム１において受け付けられる税関手続における申告である税関申告は、より具体的には、例えば、旅具通関における申告であり、日本国の場合、税関様式Ｃ第５３６０号の携帯品・別送品申告書による申告と同内容の申告である。
　管理サーバ５０は、例えば、税関の施設内に設置されている。キオスク端末１０及び電子化ゲート２０は、例えば、空港、海港等において税関検査が行われる税関検査場Ｃに設置されている。
　図２に示すように、利用者Ｕが進入してくる税関検査場Ｃの入口付近には、キオスク端末１０が設置されている。キオスク端末１０の付近には、キオスク端末１０での手続方法を動画又は静止画で表示して案内するデジタルサイネージ端末７０が設置されている。また、税関検査場Ｃの出口には、電子化ゲート２０と、有人ブースＭとが設置されている。電子化ゲート２０の入口ゲート端末３０の付近には、電子化ゲート２０の通過時の注意事項を動画又は静止画で表示して案内するデジタルサイネージ端末８０が設置されている。有人ブースＭでは、税関職員Ｓにより、例えば、税関手続における申告の受付け、手荷物の検査等の対面での税関検査が行われる。
　携帯端末６０は、利用者Ｕが所持又は携帯して利用する端末である。携帯端末６０には、キオスク端末１０において税関申告を行うための税関申告アプリケーションがインストールされている。利用者Ｕは、後述するように、携帯端末６０の税関申告アプリケーションにより生成した申告用コードを使用して、キオスク端末１０において税関申告を行うことができる。
　キオスク端末１０、入口ゲート端末３０、出口ゲート端末４０及び管理サーバ５０は、ネットワークＮＷに接続されている。ネットワークＮＷは、ＷＡＮ（Wide　Area　Network）、ＬＡＮ（Local　Area　Network）、移動体通信網等により構成されている。キオスク端末１０と管理サーバ５０とは、ネットワークＮＷを介して通信可能になっている。入口ゲート端末３０と出口ゲート端末４０とは、ネットワークＮＷを介して又はネットワークＮＷを介さずに通信可能になっている。出口ゲート端末４０と管理サーバ５０とは、ネットワークＮＷを介して通信可能になっている。携帯端末６０は、ネットワークＮＷを介して管理サーバ５０等のサーバと通信可能になっている。
　次に、本実施形態による情報処理システム１における各構成要素についてさらに図３乃至図１４を用いて説明する。
　まず、携帯端末６０の構成について図３を用いて説明する。図３は、携帯端末６０のハードウェア構成の一例を示すブロック図である。
　携帯端末６０は、利用者Ｕが所持又は携帯して使用する端末であり、例えば、スマートフォン、タブレット端末、携帯電話等の携帯情報機器である。携帯端末６０は、図３に示すように、ＣＰＵ（Central　Processing　Unit）６０２と、ＲＡＭ（Random　Access　Memory）６０４と、記憶装置６０６と、入力装置６０８と、ディスプレイ６１０と、移動体無線通信部６１２と、近距離無線通信部６１４とを有している。ＣＰＵ６０２、ＲＡＭ６０４、記憶装置６０６、入力装置６０８、ディスプレイ６１０、移動体無線通信部６１２及び近距離無線通信部６１４は、バスライン６１６に接続されている。
　ＣＰＵ６０２は、記憶装置６０６に記憶されたプログラムを実行することにより動作し、携帯端末６０全体の動作を制御する制御部として機能する。また、ＣＰＵ６０２は、記憶装置６０６に記憶されたアプリケーションプログラムを実行して、携帯端末６０としての各種処理を実行する。ＲＡＭ６０４は、ＣＰＵ６０２の動作に必要なメモリ領域を提供する。
　例えば、記憶装置６０６には、キオスク端末１０において税関申告を行うための税関申告アプリケーションがインストールされている。ＣＰＵ６０２は、税関申告アプリケーションを実行することにより、利用者Ｕが税関申告を行うための各種処理を行うことができる。
　より具体的には、ＣＰＵ６０２は、例えば、税関申告に必要とされる申告情報の利用者Ｕによる入力を受け付けることができる。申告情報は、例えば、携帯品・別送品申告書に記載して申告すべき事項と同内容の情報である。すなわち、申告情報は、例えば、利用者Ｕの氏名、入国する国での現住所又は滞在先、職業、生年月日、旅券番号、搭乗便名、出発地、入国日、税関申告において申告すべき事項等の税関申告に必要な情報を含む。
　また、ＣＰＵ６０２は、例えば、後述するように、利用者Ｕにより入力された申告情報を含む二次元コード等のコードである申告用コードを生成してディスプレイ６１０に表示させることができる。携帯端末６０は、申告用コードを表示する媒体として機能することができる。
　申告用コードは、申告情報を含むことができれば特に限定されるものではないが、例えば、ＱＲコード（登録商標）等の二次元コードである。また、申告用コードは、例えば、バーコード等の一次元コードであってもよい。ＣＰＵ６０２は、有効期限を設定した有効期限付きの申告用コードを生成することもできる。ＣＰＵ６０２は、申告用コードとともに、設定した有効期限をディスプレイ６１０に表示させることができる。有効期限付きの申告用コードは、生成された後、有効期限として設定された日時の経過により無効になる。申告用コードに有効期限が設定されていることにより、利用者Ｕに対して、申告用コードの生成後、速やかに税関申告を行うことを促すことができる。
　なお、利用者Ｕにその同行者である同行家族がいる場合、利用者Ｕ及び同行家族の各自がそれぞれの携帯端末６０を用いて税関申告を行うこともできるし、利用者Ｕが代表して税関申告を行うこともできる。利用者Ｕが代表して税関申告を行う場合、ＣＰＵ６０２は、利用者Ｕ自身がキオスク端末１０で使用する申告用コードのほか、同行家族がキオスク端末１０で使用する同行家族向けの申告用コードを生成してディスプレイ６１０に表示することができる。同行家族は、利用者Ｕの携帯端末６０に表示された同行家族向けの申告用コードを使用して、利用者Ｕと同様にキオスク端末１０を利用することができる。また、同行家族は、キオスク端末１０の利用後、利用者Ｕと同様に電子化ゲート２０又は有人ブースＭに誘導される。
　また、申告用コードを表示するコード表示媒体は、携帯端末６０である必要は必ずしもなく、他の媒体であってもよい。例えば、申告用コードは、コード表示媒体としての紙に印刷されたものであってもよい。
　また、税関申告アプリケーションは、例えば、日本語、英語、中国語、韓国語等の多言語に対応している。これにより、税関申告アプリケーションは、例えば、携帯端末６０の言語設定で複数の言語の中から選択されて設定された言語で表示及び入力が可能になっている。また、税関申告アプリケーションは、例えば、携帯端末６０の言語設定とは別に、そのアプリケーション内の設定で複数の言語の中から選択されて設定された言語で表示及び入力が可能であってもよい。税関申告アプリケーションは、こうして設定された言語である使用言語で使用することができる。
　ＣＰＵ６０２は、税関申告アプリケーションの使用言語を示す情報である言語情報を、申告用コードにさらに含ませることができる。言語情報は、例えば、携帯端末６０の言語設定で設定されている言語を示す情報、又は税関申告アプリケーション内の設定で言語が設定されていれば当該言語に関する情報である。
　記憶装置６０６は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置６０６は、ＣＰＵ６０２により実行されるプログラム、そのプログラムの実行の際にＣＰＵ６０２により参照されるデータ等を記憶する。記憶装置６０６は、ＣＰＵ６０２により実行されるアプリケーションプログラムとして、税関申告アプリケーションを記憶する。
　記憶装置６０６は、税関申告アプリケーションで入力された申告情報等の情報を記憶することができる。また、記憶装置６０６は、税関申告アプリケーションで生成された申告用コードを記憶することができる。
　入力装置６０８は、例えば、ディスプレイ６１０に組み込まれたタッチパネルである。入力装置６０８は、利用者Ｕからの入力を受け付ける入力部として機能する。利用者Ｕは、入力装置６０８を介して携帯端末６０に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。例えば、利用者Ｕは、税関申告アプリケーションを実行する携帯端末６０に対して、タッチパネルである入力装置６０８を介して、申告情報を入力したり、申告用コードの生成指示を入力したりすることができる。
　ディスプレイ６１０は、利用者Ｕに対して、各種画面を表示する表示部として機能する。例えば、税関申告アプリケーションを実行する携帯端末６０において、ディスプレイ６１０は、後述するように、申告情報の入力を受け付ける申告情報入力画面、申告用コードを表示する申告用コード表示画面等を表示する。
　移動体無線通信部６１２は、ＣＰＵ６０２による制御に従って、移動体通信網を介してネットワークＮＷに接続する。移動体無線通信部６１２の通信方式は、特に限定されるものではないが、例えば、第３世代移動通信方式、ＬＴＥ（Long　Term　Evolution）方式、第４世代移動通信方式等が挙げられる。
　近距離無線通信部６１４は、ＣＰＵ６０２による制御に従って、アクセスポイント、外部機器等と無線通信を行い、例えば、空港の構内等のアクセスポイントを介してネットワークＮＷに接続する。近距離無線通信部６１４の通信方式は、特に限定されるものではないが、例えば、Ｗｉ－Ｆｉ（登録商標）等の無線ＬＡＮ方式、Bluetooth（登録商標）通信方式、ＮＦＣ（Near　Field　Communication）方式、赤外線通信方式等が挙げられる。
　こうして、携帯端末６０が構成されている。
　次に、キオスク端末１０の構成について図４Ａ乃至図１０を用いて説明する。図４Ａ及び図４Ｂは、キオスク端末１０の外観を示す概略図である。図４Ａはポール１００に設置されたキオスク端末１０の全体を示す斜視図であり、図４Ｂはポール１００に設置されたキオスク端末１０を拡大して示す斜視図である。図５は、キオスク端末１０のハードウェア構成の一例を示すブロック図である。図６Ａ及び図６Ｂは、キオスク端末１０が１台設置された場合の構成を示す概略図である。図７Ａ及び図７Ｂは、キオスク端末１０が２台設置された場合の構成を示す概略図である。図８Ａ及び図８Ｂは、キオスク端末１０が３台設置された場合の構成を示す概略図である。図９は、キオスク端末１０における覗き見の防止を説明する概略図である。図１０は、キオスク端末１０が高さ違いで設置された場合の構成を示す概略図である。
　キオスク端末１０は、利用者Ｕの携帯端末６０に表示された申告用コードによる税関申告を受け付け、その税関申告の内容に応じて利用者Ｕを電子化ゲート２０又は有人ブースＭに誘導する情報処理装置である。キオスク端末１０は、図４Ａ及び図４Ｂに示すように、長手方向を鉛直にして設置された支持体であるポール１００の側部に取り付けられて設置されている。なお、キオスク端末１０は、後述するように１本のポール１００に１台又は複数台設置することができる。
　また、キオスク端末１０は、図５に示すように、ＣＰＵ１０２と、ＲＡＭ１０４と、記憶装置１０６と、入力装置１０８と、ディスプレイ１１０とを有している。さらに、キオスク端末１０は、旅券読取装置１１２と、コード読取装置１１４と、カメラ１１６と、深度カメラ１１８と、通信部１２０と、ステータスランプ１２２を有している。ＣＰＵ１０２、ＲＡＭ１０４、記憶装置１０６、入力装置１０８、ディスプレイ１１０、旅券読取装置１１２、コード読取装置１１４、カメラ１１６、深度カメラ１１８、通信部１２０及びステータスランプ１２２は、バスライン１２４に接続されている。
　図４Ａ及び図４Ｂに示すように、キオスク端末１０は、ポール１００に取り付けられた筐体１２６を有している。筐体１２６は、ディスプレイ１１０及びカメラ１１６が設けられた第１筐体部１２６ａと、旅券読取装置１１２及びコード読取装置１１４が設けられた第２筐体部１２６ｂとを有している。なお、筐体１２６内には、ＣＰＵ１０２、ＲＡＭ１０４、記憶装置１０６及び通信部１２０が収容されている。
　第１筐体部１２６ａは、ディスプレイ１１０が設けられたディスプレイ面を有している。第２筐体部１２６ｂは、旅券読取装置１１２及びコード読取装置１１４が設けられた読取面を有している。第１筐体部１２６ａの下部には、ディスプレイ面と読取面とが互いに鈍角をなすように第２筐体部１２６ｂが一体的に連結されている。第１筐体部１２６ａ及び第２筐体部１２６ｂは、キオスク端末１０がポール１００に設置された際、第１筐体部１２６ａのディスプレイ面が、ポール１００側の後方とは逆の前方斜め上方を向き、第２筐体部１２６ｂの読取面が略水平になるように構成されている。
　キオスク端末１０は、例えば、所定の身長以上の身長を有する利用者Ｕがディスプレイ１１０並びに旅券読取装置１１２及びコード読取装置１１４を見下ろすことになる高さに位置するようにポール１００に設置されている。
　第１筐体部１２６ａのディスプレイ面には、ディスプレイ１１０が、前方斜め上方をその画面が向くように設けられている。ディスプレイ１１０には、タッチパネルとしての入力装置１０８が組み込まれている。
　また、第１筐体部１２６ａのディスプレイ面の下部におけるディスプレイ１１０と第２筐体部１２６ｂとの間の部分中央には、カメラ１１６が設けられている。カメラ１１６は、第１筐体部１２６ａに設けられた表示部であるディスプレイ１１０と、第２筐体部１２６ｂに設けられた情報取得部である旅券読取装置１１２及びコード読取装置１１４との間に設けられている。なお、カメラ１１６は、１つ設けられているほか、ディスプレイ１１０を挟んで上下に２つ設けられていてもよい。この場合、下側のカメラ１１６は、例えば、上述のように第１筐体部１２６ａのディスプレイ面の下部におけるディスプレイ１１０と第２筐体部１２６ｂとの間の部分中央に設けられている。一方、上側のカメラ１１６は、例えば、第１筐体部１２６ａのディスプレイ面の上部におけるディスプレイ１１０の上側の部分中央に設けられている。
　カメラ１１６は、その撮影方向が前方斜め上方を向く方向となるように設けられている。キオスク端末１０の前の利用者Ｕは、視線を前方斜め下方に向けて、ディスプレイ１１０、旅券読取装置１１２又はコード読取装置１１４を見下ろしてキオスク端末１０を操作することになる。カメラ１１６は、このようにディスプレイ１１０、旅券読取装置１１２又はコード読取装置１１４を見下ろしてキオスク端末１０を操作する利用者Ｕの顔を撮影可能な画角を有している。
　また、第１筐体部１２６ａのディスプレイ面の上部中央には、深度カメラ１１８が設けられている。深度カメラ１１８は、カメラ１１６により撮影される物体の三次元情報を取得可能に設けられている。なお、深度カメラ１１８は、上述のように１つ又は２つ設けられたカメラ１１６と隣接して並ぶように設けられていてもよい。
　また、第１筐体部１２６ａのディスプレイ面の両側部には、ディスプレイ１１０に沿って、板状のバイザー１２８がディスプレイ面から突出するようにそれぞれ設けられている。バイザー１２８は、キオスク端末１０の側方、斜め背後、斜め前方からディスプレイ１１０に向けられる視線を遮って、キオスク端末１０を利用する利用者Ｕ以外の者によるディスプレイ１１０の覗き見を困難にする遮蔽部として機能する。
　また、第１筐体部１２６ａのディスプレイ面の両側部には、キオスク端末１０を操作する利用者Ｕの顔を照らすための照明部である照明１３０がそれぞれ設けられている。照明１３０は、例えば、ディスプレイ１１０に沿って下方から上方に向かって照らす光源、ディスプレイ１１０に沿って設けられた棒状光源等の光源により構成することができる。光源としては、特に限定されるものではないが、ＬＥＤ（Light　Emitting　Diode）等を用いることができる。ディスプレイ１１０の両側部に設けられた照明１３０により、キオスク端末１０を操作する利用者Ｕの顔をカメラ１１６により撮影する際に十分な明るさを確保することができる。なお、照明１３０は、キオスク端末１０の運用の間、常時点灯していてもよい。また、照明１３０は、キオスク端末１０の運用の間、必ずしも常時点灯している必要はなく、利用者Ｕの顔をカメラ１１６により撮影する際に点灯しているように構成することもできる。この場合、照明１３０は、例えば、旅券読取装置１１２により旅券が読み取られ又はコード読取装置１１４により申告用コードが読み取られると点灯するように構成することができる。また、照明１３０は、例えば、キオスク端末１０に設けられた不図示の人感センサにより利用者Ｕが検知されると点灯するように構成することができる。また、これら所定のタイミングで点灯した照明１３０は、例えば、カメラ１１６による利用者Ｕの顔の撮影の終了後又は所定の時間の経過後に消灯するように構成することができる。
　第２筐体部１２６ｂの読取面には、ディスプレイ１１０に向かって、左側に旅券読取装置１１２が設けられ、右側にコード読取装置１１４が設けられている。空港等において設置される他のキオスク端末においては、一般的に、ＱＲコード等のコードを読み取る読取装置が端末に向かって右側に設けられている。キオスク端末１０においても、ディスプレイ１１０に向かって右側にコード読取装置１１４が設けられていることにより、利用者Ｕは、円滑に携帯端末６０に表示させた申告用コードをコード読取装置１１４にかざして読み取らせることができる。
　旅券読取装置１１２は、例えば、旅券を読み取る読取部を上に向けて設けられおり、その読取部上に旅券が差し込まれるスロットを有するように構成されている。この場合、利用者Ｕは、身分事項ページを開いた旅券をそのページを下に向けてスロットに差し込んで旅券読取装置１１２の読取部にかざすことにより、旅券読取装置１１２にその旅券を読み取らせることができる。スロットに旅券を差し込む方式では、スロットに旅券を差し込めば、ページを開いた状態を維持するために利用者Ｕが旅券を押さえ続ける必要がなく、また、旅券読取装置１１２の読取部に対して旅券の位置を正確に合わせることができる。これにより、円滑な旅券の読取りを実現することができる。
　なお、旅券読取装置１１２の構成は、上記の構成に限定されるものではなく、種々の構成を採用することができる。例えば、旅券読取装置１１２は、その読取部に身分事項ページを開いた旅券を利用者Ｕが押さえるように構成することもできる。この場合、利用者Ｕは、身分事項ページを開いた旅券をそのページを下に向けて旅券読取装置１１２の読取部に押さえてかざすことにより、旅券読取装置１１２にその旅券を読み取らせることができる。
　また、コード読取装置１１４も、例えば、申告用コードを読み取る読取部を上に向けて設けられている。この場合、利用者Ｕは、申告用コードを表示させた携帯端末６０のディスプレイ６１０を下に向けてコード読取装置１１４の読取部にかざすことにより、コード読取装置１１４に申告用コードを読み取らせることができる。
　なお、コード読取装置１１４の構成も、上記の構成に限定されるものではなく、種々の構成を採用することができる。例えば、コード読取装置１１４は、その読取部が上から申告用コード読み取るように構成することもできる。この場合、利用者Ｕは、申告用コードを表示させた携帯端末６０のディスプレイ６１０を上に向けてコード読取装置１１４の読取部にかざすことにより、コード読取装置１１４に申告用コードを読み取らせることができる。
　ポール１００の上部には、ディスプレイ１１０を含む第１筐体１２６ａの上方に位置するようにステータスランプ１２２が設けられている。ステータスランプ１２２は、そのステータスランプ１２２がステータスを示すキオスク端末１０の上方に対応して位置するように、ポール１００の上部に取り付けられたアーム１３２の先端部に設けられている。アーム１３２は、ポール１００からキオスク端末１０の上方の側に突出している。
　また、アーム１３２には、キオスク端末１０の状況を監視する監視カメラ１３４が設けられている。監視部として機能する監視カメラ１３４は、より具体的には、キオスク端末１０及びその周辺の様子、キオスク端末１０を操作する利用者Ｕの様子等を撮影して監視する。監視カメラ１３４は、対応するキオスク端末１０に接続され又はネットワークＮＷに接続されている。監視カメラ１３４は、キオスク端末１０を経由して又は経由せずにネットワークＮＷを介して、利用者Ｕの様子を撮影した映像を管理サーバ５０に送信することができる。
　ＣＰＵ１０２は、記憶装置１０６に記憶されたプログラムを実行することにより動作し、キオスク端末１０全体の動作を制御する制御部として機能する。また、ＣＰＵ１０２は、記憶装置１０６に記憶されたアプリケーションプログラムを実行してキオスク端末１０としての各種処理を実行する。ＲＡＭ１０４は、ＣＰＵ１０２の動作に必要なメモリ領域を提供する。
　より具体的には、ＣＰＵ１０２は、キオスク端末１０を利用して税関申告を行う利用者Ｕの顔照合を管理サーバ５０に対して要求する照合要求部として機能する。照合要求部としてのＣＰＵ１０２は、利用者Ｕの顔照合として、利用者Ｕの撮像顔画像と利用者Ｕの旅券顔画像との照合を要求する。撮影顔画像は、キオスク端末１０の利用時にカメラ１１６により撮像された利用者Ｕの顔画像である。旅券顔画像は、旅券読取装置１１２により利用者Ｕの旅券から取得された顔画像である。照合を要求するため、ＣＰＵ１０２は、撮影顔画像及び旅券顔画像又はこれらから抽出した顔特徴量を照合要求とともに管理サーバ５０に送信する。ＣＰＵ１０２は、旅券及び申告用コードの少なくとも一方を読み取って利用者Ｕの撮影顔画像を取得する一方、旅券及び申告用コードの他方を読み取ると、利用者Ｕの顔照合を管理サーバ５０に対して要求することができる。なお、ＣＰＵ１０２が撮影顔画像を取得するタイミング及びＣＰＵ１０２が顔照合を要求するタイミングは、これらに限定されるものではなく、それぞれ種々のバリエーションが可能である。
　ＣＰＵ１０２は、カメラ１１６による撮影の間、撮影顔画像における装着物推定を行うことができる。ＣＰＵ１０２は、装着物推定により、撮影顔画像におけるマスク、サングラス、眼鏡、帽子等の顔装着物を検知することができる。ＣＰＵ１０２は、利用者Ｕの顔に装着された装着物である顔装着物を検知した場合、利用者Ｕに対して、顔照合の妨げとなる顔装着物を取り外すように警告を行うことができる。ＣＰＵ１０２は、例えば、顔装着物を取り外すように利用者Ｕに指示する表示をディスプレイ１１０に表示したり、スピーカー等から顔装着物を取り外すように利用者Ｕに指示する音声を発したりすることにより警告を行うことができる。
　また、ＣＰＵ１０２は、管理サーバ５０に対して要求した顔照合の結果を示す情報である照合情報を管理サーバ５０から受信して取得する照合情報取得部として機能する。照合情報は、顔照合の結果、旅券顔画像と撮影顔画像とが一致してキオスク端末１０で税関申告を行う利用者Ｕの本人確認に成功したこと、又は一致せずに利用者Ｕの本人確認に失敗したことを示している。なお、旅券顔画像と撮影顔画像とが一致する場合には、両顔画像の間の類似度を示す照合スコアが所定の閾値を超えて両顔画像が高い類似度を示す場合が含まれる。
　なお、ＣＰＵ１０２は、照合要求部及び照合情報取得部として機能することに代えて、利用者Ｕの顔照合として旅券顔画像と撮影顔画像とを照合して照合情報を取得する照合部として機能することもできる。ＣＰＵ１０２は、旅券顔画像と撮像顔画像との照合に際して、旅券顔画像から抽出した顔特徴量と、撮像顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
　また、ＣＰＵ１０２は、利用者Ｕの利用者情報を管理サーバ５０に送信する利用者情報送信部として機能する。利用者Ｕの利用者情報は、互いに関連付けられた利用者Ｕの身分事項情報、顔情報及び申告情報を含んでいる。
　身分事項情報は、利用者Ｕの氏名、生年月日等の利用者Ｕ個人に関する情報を含んでいる。また、身分事項情報は、利用者Ｕの旅券の旅券番号、旅券の有効期限等の利用者Ｕの旅券に関する情報を含んでいる。身分事項情報は、旅券読取装置１１２により利用者Ｕの旅券から取得されたものである。
　顔情報は、利用者Ｕの撮影顔画像及び旅券顔画像である。また、顔情報は、撮像顔画像及び旅券顔画像それら自体でなくてもよく、撮像顔画像及び旅券顔画像からそれぞれ抽出された顔特徴量であってもよい。この場合、ＣＰＵ１０２は、撮像顔画像及び旅券顔画像のそれぞれから顔特徴量を抽出する。
　申告情報は、利用者Ｕが入国する際の税関申告において申告すべき情報を含んでいる。申告情報は、コード読取装置１１４により、利用者Ｕの携帯端末６０に表示された申告用コードから取得されたものである。申告情報は、上述のように、例えば、利用者Ｕの氏名、入国する国での現住所又は滞在先、職業、生年月日、旅券番号、搭乗便名、出発地、入国日、税関申告において申告すべき事項等の税関申告に必要な情報を含んでいる。
　なお、管理サーバ５０に送信された利用者Ｕの利用者情報は、後述するように管理サーバ５０において利用者情報データベース（ＤＢ、Database）５０６ａに登録される。利用者情報に含まれる撮影顔画像又は旅券顔画像は、予め登録された登録生体情報である登録顔画像として利用者情報ＤＢ５０６ａに登録される。
　また、ＣＰＵ１０２は、キオスク端末１０を利用して税関申告を行う利用者Ｕの申告情報に含まれる申告内容の判定を管理サーバ５０に対して要求する判定要求部として機能する。判定要求部としてのＣＰＵ１０２は、管理サーバ５０に対して送信した申告情報に含まれる申告内容の判定を要求する。ＣＰＵ１０２は、申告情報に含まれる申告内容の判定結果を示す情報である判定情報を管理サーバ５０から受信する。
　また、ＣＰＵ１０２は、管理サーバ５０に対して要求した申告内容の判定結果を示す情報である判定情報を管理サーバ５０から受信して取得する判定情報取得部として機能する。判定情報は、判定の結果、利用者Ｕが課税対象であるか否か、利用者Ｕにリスクがあるか否かを示している。利用者Ｕが課税対象である場合とは、例えば、利用者Ｕが免税の範囲を超える品物を持っている旨の申告が申告内容にある場合、商品貨物又は商品サンプルを持っている旨の申告が申告内容にある場合等である。利用者Ｕにリスクがある場合とは、例えば、当該国への持ち込みが禁止又は制限されているものを持っている旨の申告が申告内容にある場合、他人から預かったものを持っている旨の申告が申告内容にある場合等である。
　なお、ＣＰＵ１０２は、判定要求部及び判定情報取得部として機能することに代えて、利用者Ｕの申告情報に含まれる申告内容の判定する判定部として機能することもできる。この場合、ＣＰＵ１０２は、管理サーバ５０と同様に申告情報に含まれる申告内容を判定することができる。
　また、ＣＰＵ１０２は、管理サーバ５０から受信した照合情報及び判定情報に基づき、利用者Ｕについて電子化ゲート２０の利用可否を判定する判定部として機能する。判定部としてのＣＰＵ１０２は、利用者Ｕの旅券顔画像と撮影顔画像とが一致し、利用者Ｕが課税対象でなく、利用者Ｕにリスクがない場合に、利用者Ｕが電子化ゲート２０を利用できると判定する。一方、ＣＰＵ１０２は、利用者Ｕの旅券顔画像と撮影顔画像とが一致しない場合、利用者Ｕが課税対象である場合又は利用者Ｕにリスクがある場合に、利用者Ｕが電子化ゲート２０を利用できないと判定する。
　また、ＣＰＵ１０２は、電子化ゲート２０の利用可否の判定結果を示す情報であるゲート利用可否情報を管理サーバ５０に送信することができる。この場合、管理サーバ５０に送信されたゲート利用可否情報は、後述するように管理サーバ５０において利用者情報ＤＢ５０６ａに利用者情報と関連付けられて登録される。利用者Ｕの旅券顔画像と撮影顔画像とが一致し、かつ、利用者Ｕが課税対象でなく、利用者Ｕにリスクがない場合に、ゲート利用可否情報は、利用者Ｕが電子化ゲート２０を利用可能であることを示す。
　また、ＣＰＵ１０２は、キオスク端末１０で税関申告を行う利用者Ｕに対する案内、通知等の画面をディスプレイ１１０に表示させる表示制御部として機能する。例えば、表示制御部としてのＣＰＵ１０２は、キオスク端末１０の利用方法を案内する案内画面をディスプレイ１１０に表示させる。また、ＣＰＵ１０２は、利用者Ｕの携帯端末６０から取得した申告情報に含まれる申告内容を利用者Ｕが確認し、必要に応じて修正するための申告内容確認画面をディスプレイ１１０に表示させる。
　また、ＣＰＵ１０２は、電子化ゲート２０の利用可否の判定結果に応じて、キオスク端末１０において税関申告を行った利用者Ｕに対する処理を行う処理部として機能する。より具体的には、ＣＰＵ１０２は、電子化ゲート２０の利用可否の判定結果に応じて、利用者Ｕを電子化ゲート２０又は有人ブースＭに誘導する誘導画面をディスプレイ１１０に表示させて、利用者Ｕを電子化ゲート２０又は有人ブースＭに誘導する。
　また、ＣＰＵ１０２は、キオスク端末１０で税関申告を行う利用者Ｕの携帯端末６０に表示された申告用コードから読み取られた言語情報に基づき、キオスク端末１０の使用言語を設定する言語設定部として機能する。また、ＣＰＵ１０２は、入力装置１０８を介して、キオスク端末１０の使用言語を別の言語に変更する変更入力が利用者Ｕかから入力された場合、変更入力に応じて使用言語を変更する。なお、キオスク端末１０の使用言語は、例えば、ディスプレイ１１０に各種情報を表示させるとともに、入力装置１０８からの入力を受け付ける言語である。キオスク端末１０は、携帯端末６０の税関申告アプリケーションと同様に、例えば、日本語、英語、中国語、韓国語等の多言語に対応している。これにより、キオスク端末１０は、複数の言語の中から設定された使用言語で表示及び入力が可能になっている。
　記憶装置１０６は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置１０６は、ＣＰＵ１０２により実行されるプログラム、そのプログラムの実行の際にＣＰＵ１０２により参照されるデータ等を記憶する。
　入力装置１０８は、例えば、ディスプレイ１１０に組み込まれたタッチパネルである。入力装置１０８は、利用者Ｕからの指示の入力を受け付ける入力部として機能する。利用者Ｕは、入力装置１０８を介して、キオスク端末１０に対して、各種情報を入力したり、処理の実行の指示を入力したりすることができる。
　ディスプレイ１１０は、キオスク端末１０を利用する利用者Ｕに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ１１０は、キオスク端末１０の利用方法を案内する案内画面、利用者Ｕに対する申告内容確認画面、利用者Ｕに対する誘導画面等を表示する。また、ディスプレイ１１０は、撮影顔画像と旅券顔画像との照合の結果を示す照合情報、及び申告内容の判定結果を示す判定情報を表示することもできる。
　ディスプレイ１１０としては、例えば、縦長に設置することができる。縦長のディスプレイ１１０により、同サイズの横長のディスプレイと同等の情報量の表示を実現しつつ、キオスク端末１０の狭小スペースへの設置を実現することができる。さらに、縦長のディスプレイ１１０により、ディスプレイ１１０の前に立つ利用者Ｕの身体によりその背後からのディスプレイ１１０の覗き見を防止することができる。
　旅券読取装置１１２は、利用者Ｕの旅券を読み取って旅券に記録された情報を取得する読取部として機能する。旅券読取装置１１２は、例えば、イメージスキャナ、非接触ＩＣ（Integrated　Circuit）リーダ、ＯＣＲ（Optical　Character　Reader）装置等により構成されている。旅券読取装置１１２は、その読取部にかざされた媒体である旅券を読み取って旅券から情報を取得する。
　例えば、旅券読取装置１１２は、ＯＣＲ装置により旅券券面に表示された利用者Ｕの身分事項情報を読み取って取得する。また、例えば、旅券読取装置１１２は、イメージスキャナにより、旅券券面に表示された利用者Ｕの旅券顔画像を読み取って取得する。また、ＩＣ旅券の場合、旅券読取装置１１２は、非接触ＩＣリーダにより、ＩＣ旅券のＩＣチップに記録された利用者Ｕの身分事項情報、旅券顔画像等を読み取って取得する。なお、旅券に記録されて含まれる利用者Ｕの生体情報は、顔画像に限定されるものではなく、虹彩画像等の他の生体情報であってもよい。旅券読取装置１１２は、旅券に含まれる利用者Ｕの生体情報を取得することができる。
　コード読取装置１１４は、利用者Ｕの携帯端末６０に表示された申告用コードを読み取って申告用コードに含まれる申告情報及び言語情報を取得する読取部として機能する。コード読取装置１１４は、例えば、ＱＲコードリーダ、バーコードリーダ等の読み取るべき申告用コードの種類に応じたコードリーダである。コード読取装置１１４は、その読取部にかざされたコード表示媒体である携帯端末６０に表示された申告用コードを読み取って申告用コードから情報を取得する。
　カメラ１１６は、キオスク端末１０を利用して税関申告を行う利用者Ｕの生体情報として利用者Ｕの顔画像を取得する生体情報取得部として機能する。カメラ１１６は、例えば、キオスク端末１０の前の利用者Ｕの顔を動画又は静止画で撮影するデジタルカメラ等の撮影装置であり、撮影した動画又は静止画から利用者Ｕの顔画像である撮影顔画像を取得する。カメラ１１６は、ＣＰＵ１０２の制御に従って、後述するように、キオスク端末１０の前で旅券読取装置１１２に旅券を読み取らせ又はコード読取装置１１４に申告用コードを読み取らせる利用者Ｕの顔画像を撮影して撮影顔画像を取得する。このように、カメラ１１６は、旅券及び申告用コードの少なくとも一方を読み取ると、利用者Ｕの顔画像を撮影して撮影顔画像を取得することができる。なお、カメラ１１６に代えて、生体情報取得部として、旅券読取装置１１２により旅券から取得される生体情報と同種の生体情報を利用者Ｕから取得するものを設けることができる。
　ＣＰＵ１０２は、カメラ１１６により撮影される撮影顔画像における目間の画素数を所定の範囲に設定することができる。この場合、ＣＰＵ１０２は、例えば、カメラ１１６により撮影される顔画像のうち、目間の画素数が所定の画素数未満の顔画像を撮影顔画像の対象から除外することができる。これにより、カメラ１１６は、キオスク端末１０を操作する利用者Ｕの背後にいる遠方の人を撮影することなく、キオスク端末１０を操作する利用者Ｕを確実に撮影することができる。
　また、ＣＰＵ１０２は、カメラ１１６の撮影可能範囲における両側の所定の範囲をそれぞれマスキングすることができる。これにより、カメラ１１６は、キオスク端末１０を操作する利用者Ｕの周囲の人の映り込みを防止しつつ、キオスク端末１０を操作する利用者Ｕを確実に撮影することができる。
　なお、キオスク端末１０は、カメラ１１６により撮影された撮影顔画像が、ディスプレイ１１０等に表示されないように構成することができる。この場合、利用者Ｕは、キオスク端末１０において自身の顔が撮影されたことを認識することはない。このため、利用者Ｕは、撮影に対する抵抗感を感じることがなく、撮影による心理的圧迫を受けることもなく、キオスク端末１０を快適に利用することができる。
　深度カメラ１１８は、カメラ１１６により撮影される物体の三次元情報を取得する。ＣＰＵ１０２は、深度カメラ１１８により取得された三次元情報に基づき、カメラ１１６による利用者Ｕの撮影顔画像が、生身の人間の撮影から取得されたものであるか、写真等の二次元画像の撮影から取得されたものであるかを判定することができる。これにより、他人へのなりすまし等の不正行為を防止することができる。
　通信部１２０は、ネットワークＮＷに接続され、ネットワークＮＷを介してデータの送受信を行う。通信部１２０は、ＣＰＵ１０２による制御に従って、管理サーバ５０等との間の通信を行う。
　ステータスランプ１２２は、キオスク端末１０の状況を示す状況表示部として機能する。より具体的には、ステータスランプ１２２は、キオスク端末１０の状況として、例えば、キオスク端末１０での利用者Ｕの税関申告の進捗状況、キオスク端末１０の異常の有無、キオスク端末１０の使用の可否等の状況を互いに異なるランプ色で示すことができる。ステータスランプ１２２は、ＣＰＵ１０２による制御に従って、キオスク端末１０の状況に応じたランプ色で点灯することができる。なお、ステータスランプ１２２とポール１００との間に、不審な行動を検知するための監視カメラを設けてもよい。この監視カメラは、例えば、旅券読取装置１１２により旅券が読み取られ又はコード読取装置１１４により申告用コードが読み取られると撮影を開始するように構成することができる。
　ステータスランプ１２２は、状況に応じて、例えば、緑色、黄色、赤色、緑色の点滅、黄色の点滅又は赤色の点滅のように異なるランプ色で点灯することができる。この場合、例えば、各ランプ色は、次の状況を示す。すなわち、緑色は、顔照合が整合し、税関情報が問題ない場合を示す。黄色は、顔照合が失敗した場合を示す。赤色は、税関情報に問題がある場合を示す。緑色の点滅は、税関の申告状況が遅い場合を示す。黄色の点滅は、キオスク端末１０を含むシステムに問題がある場合を示す。赤色の点滅は、違法な旅券又は顔照合によりブラックリストに該当する人物と判定した場合を示す。なお、これらは例示であり、ランプ色と状況との組み合わせは、他の組み合わせであってもよい。このように、ステータスランプ１２２は、例えば、旅券読取装置１１２又はコード読取装置１１４により読み取られた情報、顔照合の結果及び手続の状況の少なくとも１つに基づいて異なる点灯を行うことができる。また、ディスプレイ１１０の側部に設けられた上記の照明１３０も、ステータスランプ１２２と同様の色で点灯してもよい。照明１３０も、ステータスランプ１２２と同様に、例えば、旅券読取装置１１２又はコード読取装置１１４により読み取られた情報、顔照合の結果及び手続の状況の少なくとも１つに基づいて異なる点灯を行うことができる。この場合、照明１３０は、例えば、バイザー１２８の上面又は上端部に設けることができる。ディスプレイ１１０の画面内容はバイザー１２８で周囲から隠れる一方、ランプ色とエラー等の状況との関係を知る職員等の関係者は、ステータスランプ１２２や照明１３０の点灯状況に応じて、キオスク端末１０の状況を把握することができる。これにより、関係者は、例えば、ディスプレイ１１０や照明１３０が赤色で点滅した場合に即時に対応する等、適切に対応することができる。
　こうして、キオスク端末１０が構成されている。
　上述のようにして構成されるキオスク端末１０は、１本のポール１００に１台設置することもできるし、１本のポール１００に複数台設置することもできる。図６Ｂはキオスク端末１０が１台設置された場合の構成を示す斜視図であり、図６Ａは図６Ｂの上面図である。図７Ｂはキオスク端末１０が２台設置された場合の構成を示す斜視図であり、図７Ａは図７Ｂの上面図である。図８Ｂはキオスク端末１０が３台設置された場合の構成を示す斜視図であり、図８Ａは図８Ｂの上面図である。
　１本のポール１００に１台のキオスク端末１０が設置された構成の場合、１台のキオスク端末１０は、図６Ａ及び図６Ｂに示すように、所定の方向を向けてポール１００の側部に設置されている。
　また、１本のポール１００に複数台のキオスク端末１０を設置することにより、情報処理装置群であるキオスク端末群を構成することもできる。
　１本のポール１００に２台のキオスク端末１０が設置された構成の場合、図７Ａ及び図７Ｂに示すように、２台のキオスク端末１０が、ポール１００を中心に放射状に所定の角度間隔でポール１００の側部に設置されている。隣接する２台のキオスク端末１０の間の角度間隔は、例えば１２０°になっている。こうして、２台のキオスク端末１０を含むキオスク端末群が構成される。
　１本のポール１００に３台のキオスク端末１０が設置された構成の場合、図８Ａ及び図８Ｂに示すように、３台のキオスク端末１０が、ポール１００を中心に放射状に所定の角度間隔でポール１００の側部に設置されている。３台のキオスク端末１０のうちの隣接する２台のキオスク端末１０の間の角度間隔は、例えばそれぞれ１２０°の等角度になっている。こうして、３台のキオスク端末１０を含むキオスク端末群が構成される。
　このように、複数台のキオスク端末１０を設置する場合、ポール１００を中心に放射状に設置することにより、横方向に直線状に並べて設置するよりも、隣接するキオスク端末１０を利用する各利用者Ｕ間の間隔をより大きく確保することができる。これにより、隣接するキオスク端末１０の前の利用者Ｕによるキオスク端末１０のディスプレイ１１０の覗き見を困難なものにすることができる。
　なお、複数台のキオスク端末１０を放射状に設置する場合、隣接する２台のキオスク端末１０の間の角度間隔は、上記の１２０°に限定されるものではなく、適宜設定することができる。また、１本のポール１００に設置するキオスク端末１０の台数も、上記の台数に限定されるものではなく、４台以上の複数台であってもよい。
　さらに、キオスク端末１０には、ディスプレイ１１０の両側にディスプレイ１１０に沿ってバイザー１２８がそれぞれ設けられている。キオスク端末１０では、バイザー１２８によっても、ディスプレイ１１０の覗き見が困難なものになっている。
　図９は、図８Ａ及び図８Ｂに示すように３台のキオスク端末１０が設置された構成において、バイザー１２８による視線の遮りを示している。図９に示すように、キオスク端末１０の前の利用者Ｕにより隣接するキオスク端末１０に向ける視線は、図中の破線矢印で示すように、隣接するキオスク端末１０に設けられたバイザー１２８により遮られることになる。こうして、バイザー１２８によっても、ディスプレイ１１０の覗き見が困難なものになっている。
　また、１本のポール１００に複数台のキオスク端末１０を設置する場合、高さ違いで複数台のキオスク端末１０を設置することができる。例えば、図１０に示すように、３台のキオスク端末１０が設置された構成において、１台のキオスク端末１０を他の２台のキオスク端末１０よりも低い位置に設置することができる。こうして、複数台のキオスク端末１０を互いに高さ違いで設置することにより、幅広い身長の利用者Ｕがキオスク端末１０を利用することができる。また、他のキオスク端末１０よりも低い位置に設置されたキオスク端末１０は、例えば、車いすを使用する利用者Ｕが、車いすを使用したまま利用することができる。
　なお、キオスク端末１０をポール１００に取り付けて固定する手段としては、特に限定されるものはなく、種々の手段を用いることができる。例えば、キオスク端末１０は、ポール１００に設けられた高さの異なる複数段の取付位置のいずれかにビス留めにより固定して設置することができる。また、例えば、キオスク端末１０は、キオスク端末１０を利用する利用者Ｕ自身、キオスク端末１０を管理する税関職員等が上下にスライド可能にポール１００に設置するともできる。この場合、利用者Ｕ等は、ポール１００に設置されたキオスク端末１０を上下にスライドさせて、キオスク端末１０の高さを調整することができる。
　また、キオスク端末１０に接続される不図示の電源コード、通信ケーブル等のコード類又はケーブル類は、ポール１００内に収納されて隠されている。また、コード類又はケーブル類の余剰部分は、キオスク端末１０の筐体１２６内に収容することができる。
　なお、キオスク端末１０は、上記のポール１００のほか、支持台、カウンタ等の種々の支持体に設置することができる。
　次に、電子化ゲート２０の構成について図１１乃至図１３を用いて説明する。図１１は、電子化ゲート２０を構成する入口ゲート端末３０及び出口ゲート端末４０の外観を示す概略図である。図１２は、入口ゲート端末３０のハードウェア構成の一例を示すブロック図である。図１３は、出口ゲート端末４０のハードウェア構成の一例を示すブロック図である。
　電子化ゲート２０は、キオスク端末１０により電子化ゲート２０に誘導された利用者Ｕについて、電子化ゲート２０における顔照合の結果等に基づいて、その通過を許否するゲート装置である。電子化ゲート２０の通過を許可された利用者Ｕは、税関検査場Ｃを出場することができる。電子化ゲート２０の通過を許可されなかった利用者Ｕは、例えば、税関職員により有人ブースＭに誘導されて税関職員による対面での税関検査を受ける等の個別の対応を受けることになる。
　図１１に示すように、電子化ゲート２０を構成する入口ゲート端末３０及び出口ゲート端末４０は、それぞれ電子化ゲート２０の利用が可能であるとして電子化ゲート２０に誘導された利用者Ｕが通過すべきゲート通路Ｐの入口及び出口にそれぞれ設置されている。ゲート通路Ｐは、ゲート通路Ｐに沿って両側に設置された例えば仕切り板、壁、柵、検査台等により、ゲート通路Ｐに進入した利用者Ｕの出口ゲート端末４０以外からの退出が制限されている。
　まず、入口ゲート端末３０について図１１及び図１２を用いて説明する。図１１に示すように、入口ゲート端末３０は、電子化ゲート２０に誘導された利用者Ｕが通過するゲート通路Ｐの入口に設置されたゲート装置である。入口ゲート端末３０は、図１２に示すように、ＣＰＵ３０２と、ＲＡＭ３０４と、記憶装置３０６と、入口ゲート扉３０８と、通過検知センサ３１０と、通信部３１２と、案内表示器３１４とを有している。ＣＰＵ３０２、ＲＡＭ３０４、記憶装置３０６、入口ゲート扉３０８、通過検知センサ３１０、通信部３１２及び案内表示器３１４は、バスライン３１６に接続されている。
　また、図１１に示すように、入口ゲート端末３０は、ゲート通路Ｐの入口を挟んで対向するように設置された一対の筐体３１８を有している。一対の筐体３１８には、一対の筐体３１８の間を閉鎖可能に入口ゲート扉３０８が設けられている。また、一対の筐体３１８には、ゲート通路Ｐに進入する方向に並ぶように複数の通過検知センサ３１０が設けられている。また、一対の筐体３１８には、ゲート通路Ｐの外側である入口ゲート端末３０の前方に向けられた案内表示器３１４が設けられている。ＣＰＵ３０２、ＲＡＭ３０４、記憶装置３０６及び通信部３１２は、筐体３１８に収容されていてもよいし、筐体３１８とは別個の筐体に収容されていてもよい。
　ＣＰＵ３０２は、記憶装置３０６に記憶されたプログラムを実行することにより動作し、入口ゲート端末３０全体の動作を制御する制御部として機能する。また、ＣＰＵ３０２は、記憶装置３０６に記憶されたアプリケーションプログラムを実行して、入口ゲート端末３０としての各種処理を実行する。ＲＡＭ３０４は、ＣＰＵ３０２の動作に必要なメモリ領域を提供する。
　より具体的には、ＣＰＵ３０２は、複数の通過検知センサ３１０の出力信号及びそれらの出力順に基づき、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したか否かを判定する判定部として機能する。
　また、ＣＰＵ３０２は、入口ゲート扉３０８の開扉動作及び閉扉動作を制御する扉制御部として機能する。ＣＰＵ３０２は、ゲート通路Ｐに利用者Ｕが進入していない場合、入口ゲート扉３０８を開扉状態に維持する。また、ＣＰＵ３０２は、通過検知センサ３１０の出力信号に基づき利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したと判定すると、入口ゲート扉３０８を閉扉する。また、ＣＰＵ３０２は、ゲート通路Ｐに進入した利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したと判定するまで、入口ゲート扉３０８を閉扉状態に維持する。また、ＣＰＵ３０２は、出口ゲート端末４０から送信される出口通過情報により、利用者Ｕがゲート通路Ｐから退出したと判定する。ＣＰＵ３０２は、利用者Ｕがゲート通路Ｐから退出したと判定すると、入口ゲート扉３０８を開扉する。
　また、ＣＰＵ３０２は、上述のように利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したと判定すると、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したことを示す入口通過情報を出口ゲート端末４０に送信する。
　また、ＣＰＵ３０２は、入口ゲート扉３０８の開閉状態に応じて案内表示器３１４の表示を制御する表示制御部として機能する。ＣＰＵ３０２は、入口ゲート扉３０８が開扉された状態である場合、ゲート通路Ｐへの進入が許可されていることを示す表示を案内表示器３１４に表示させる。また、ＣＰＵ３０２は、入口ゲート扉３０８が閉扉された状態である場合、ゲート通路Ｐへの進入が禁止されていることを示す表示を案内表示器３１４に表示させる。
　記憶装置３０６は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置３０６は、ＣＰＵ３０２により実行されるプログラム、そのプログラムの実行の際にＣＰＵ３０２により参照されるデータ等を記憶する。
　入口ゲート扉３０８は、ＣＰＵ３０２による制御に従って、開扉動作及び閉扉動作を行う開閉扉であり、利用者Ｕの通過を許す開扉状態と利用者Ｕの通過を遮る閉扉状態との間を移行する。入口ゲート扉３０８の開閉方式は、特に限定されるものではないが、例えば、フラッパー式、スライド式、回転式等である。
　通過検知センサ３１０は、利用者Ｕの通過を検知すると、利用者Ｕの通過を示す出力信号を出力する。ＣＰＵ３０２は、ゲート通路Ｐに進入する方向に並ぶように一対の筐体３１８に設けられた複数の通過検知センサ３１０の出力信号及びそれらの出力順に基づき、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したか否かを判定することができる。通過検知センサ３１０は、特に限定されるものではないが、例えば、透過型の光電センサ、反射型の光電センサ等である。透過型の光電センサは、赤外線等の光を照射する照射部と、照射部により照射された光を受光する受光部とを有し、受光部で受光する光の変化に基づき、物体の通過を示す出力信号を出力する。
　通信部３１２は、ネットワークＮＷに接続され、ネットワークＮＷを介してデータの送受信を行う。通信部３１２は、ＣＰＵ３０２による制御に従って、出口ゲート端末４０等との間の通信を行う。なお、通信部３１２は、ネットワークＮＷを介さずに、出口ゲート端末４０と通信可能に出口ゲート端末４０と接続されていてもよい。
　案内表示器３１４は、ＣＰＵ３０２による制御に従って、ゲート通路Ｐへの進入の許否を示す表示を表示する。案内表示器３１４は、入口ゲート扉３０８が開扉された状態の場合、ゲート通路Ｐへの進入が許可されていることを示す表示を表示する。また、案内表示器３１４は、入口ゲート扉３０８が閉扉された状態の場合、ゲート通路Ｐへの進入が禁止されていることを示す表示を表示する。案内表示器３１４は、例えば、色表示、記号表示、文字表示等により、ゲート通路Ｐへの進入の許否を示す表示を表示することができる。
　こうして、入口ゲート端末３０が構成されている。
　次に、出口ゲート端末４０の構成について図１１及び図１３を用いて説明する。図１１に示すように、出口ゲート端末４０は、電子化ゲート２０に誘導された利用者Ｕが通過する通路であるゲート通路Ｐの出口に設置されたゲート装置である。また、出口ゲート端末４０は、図１３に示すように、ＣＰＵ４０２と、ＲＡＭ４０４と、記憶装置４０６と、ディスプレイ４０８とを有している。さらに、出口ゲート端末４０は、第１カメラ４１０と、第２カメラ４１２と、出口ゲート扉４１４と、通過検知センサ４１６と、通信部４１８と、案内表示器４２０とを有している。ＣＰＵ４０２、ＲＡＭ４０４、記憶装置４０６、ディスプレイ４０８、第１カメラ４１０、第２カメラ４１２、出口ゲート扉４１４、通過検知センサ４１６、通信部４１８及び案内表示器４２０は、バスライン４２２に接続されている。
　また、図１１に示すように、出口ゲート端末４０は、ゲート通路Ｐの出口を挟んで対向するように設置された一対の筐体４２４を有している。一対の筐体４２４には、一対の筐体４２４の間を閉鎖可能に出口ゲート扉４１４が設けられている。また、一対の筐体４２４には、ゲート通路Ｐから退出する方向に並ぶように複数の通過検知センサ４１６が設けられている。また、一対の筐体４２４には、ゲート通路Ｐの内側である出口ゲート端末４０の前方に向けられた案内表示器４２０が設けられている。ＣＰＵ４０２、ＲＡＭ４０４、記憶装置４０６及び通信部４１８は、筐体４２４に収容されていてもよいし、筐体４２４とは別個の筐体に収容されていてもよい。
　また、一対の筐体４２４の一方の上には、ディスプレイ４０８が設置されている。ディスプレイ４０８は、例えば、その画面が出口ゲート端末４０前のゲート通路Ｐ中央を向くように設置されている。ディスプレイ４０８の画面側の下部及び上部には、それぞれ第１カメラ４１０及び第２カメラ４１２が設けられている。なお、ディスプレイ４０８の設置位置は、特に限定されるものではなく、ゲート通路Ｐにおける利用者Ｕがディスプレイ４０８を見ることが可能な位置であればよい。
　第１カメラ４１０は、入口ゲート端末３０と出口ゲート端末４０との間のゲート通路Ｐ内を少なくとも撮影可能範囲とし、第２カメラ４１２よりも遠距離までを撮影可能な遠距離カメラである。第２カメラ４１２は、出口ゲート端末４０の前を少なくとも撮影可能範囲とする近距離カメラである。なお、第１カメラ４１０及び第２カメラ４１２が設けられる位置は、特に限定されるものではなく、それぞれの撮影可能範囲を実現可能な位置であればよい。
　第１カメラ４１０は、入口ゲート端末３０から出口ゲート端末４０に向かってゲート通路Ｐを移動する利用者Ｕを撮影してその顔画像を第１対象顔画像として取得する。第２カメラ４１２は、必要に応じて、ゲート通路Ｐを移動して出口ゲート端末４０到達して出口ゲート扉４１４の前にいる利用者Ｕを撮影してその顔画像を第２対象顔画像として取得する。第１カメラ４１０による利用者Ｕの撮影は、利用者Ｕに意識させることなく行われる。一方、第２カメラ４１２による利用者Ｕの撮影は、例えばディスプレイ４０８の表示等により撮影の通知を受けた利用者Ｕに対して行われる。出口ゲート端末４０は、第１カメラ４１０により利用者Ｕに意識させることなく撮影された第１対象顔画像を用いた顔照合により本人確認を行う非積極認証を行うことができる。また、出口ゲート端末４０は、非積極認証に失敗した場合に、第２カメラ４１２により利用者Ｕが意識して撮影された第２対象顔画像を用いた顔照合により本人確認を行う積極認証を行うことができる。
　ＣＰＵ４０２は、記憶装置４０６に記憶されたプログラムを実行することにより動作し、出口ゲート端末４０全体の動作を制御する制御部として機能する。また、ＣＰＵ４０２は、記憶装置４０６に記憶されたアプリケーションプログラムを実行して、出口ゲート端末４０としての各種処理を実行する。ＲＡＭ４０４は、ＣＰＵ４０２の動作に必要なメモリ領域を提供する。
　より具体的には、ＣＰＵ４０２は、入口ゲート端末３０を通過してゲート通路Ｐに進入した利用者Ｕの顔照合を管理サーバ５０に対して要求する照合要求部として機能する。
　照合要求部としてのＣＰＵ４０２は、第１カメラ４１０により撮影された利用者Ｕの顔画像である第１対象顔画像と、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された複数の登録顔画像とを１：Ｎで照合することを管理サーバ５０に対して要求する。このため、ＣＰＵ４０２は、第１対象顔画像から抽出された顔特徴量又は第１対象顔画像自体を照合要求とともに管理サーバ５０に送信する。
　なお、ＣＰＵ４０２は、第１対象顔画像の品質を示す品質値を計算し、計算した品質値が所定の閾値以上であるか否かを判定する品質判定部として機能することができる。品質値は、第１対象顔画像の品質がより高いほどより大きな値に設定することができる。照合要求部としてのＣＰＵ４０２は、品質値が所定の閾値以上の高品質の第１対象顔画像について、登録顔画像との照合を管理サーバ５０に対して要求することができる。なお、品質値は、第１対象顔画像の品質がより高いほどより小さな値に設定することもできる。この場合、品質判定部としてのＣＰＵ４０２は、計算した品質値が所定の閾値以下であるか否かを判定することができる。また、この場合、照合要求部としてのＣＰＵ４０２は、品質値が所定の閾値以下の高品質の第１対象顔画像について、登録顔画像との照合を管理サーバ５０に対して要求することができる。このように、ＣＰＵ４０２は、第１対象顔画像の品質を判定し、一定の品質以上の高品質の第１対象顔画像について、登録顔画像との照合を要求することができる。
　第１対象顔画像は、利用者Ｕに意識させることなく第１カメラ４１０により撮影される。このため、第１対象顔画像として一定以上の品質値のものが得られない場合や、マスク、サングラス、眼鏡、帽子等の利用者Ｕの顔に装着された顔装着物により、第１対象顔画像を用いた顔照合が不一致となる場合がある。これらの場合、照合要求部としてのＣＰＵ４０２は、第２カメラ４１２により撮影された利用者Ｕの顔画像である第２対象顔画像と、利用者情報ＤＢ５０６ａに登録された複数の登録顔画像とを１：Ｎで照合することを管理サーバ５０に対して要求する。このため、ＣＰＵ４０２は、第２対象顔画像から抽出された顔特徴量又は第２対象顔画像自体を照合要求とともに管理サーバ５０に送信する。
　また、ＣＰＵ４０２は、第１カメラ４１０による撮影の間の利用者Ｕの顔の状態に応じて利用者Ｕに対する警告を行う警告部として機能する。より具体的には、ＣＰＵ４０２は、例えば次のようにして警告を行うことができる。
　まず、ＣＰＵ４０２は、第１カメラ４１０による撮影の間、第１対象顔画像における視線検出を行うことができる。ＣＰＵ４０２は、視線検出により第１対象顔画像から検出された利用者Ｕの視線の状況に応じて警告を行うことができる。すなわち、ＣＰＵ４０２は、視線検出の結果、利用者Ｕが下又は横を向いていると判定すると、利用者Ｕに対して、出口ゲート端末４０の側である前を向くように警告を行うことができる。ＣＰＵ４０２は、例えば、前を向くように利用者Ｕに顔の向きの変更を指示する表示をディスプレイ４０８に表示したり、スピーカー等から前を向くように利用者Ｕに顔の向きの変更を指示する音声を発したりすることにより警告を行うことができる。この場合、ディスプレイ４０８による警告の表示は、不要な顔照合の失敗を防ぐため、顔照合を行う前に行うことができる。
　また、ＣＰＵ４０２は、第１カメラ４１０による撮影の間、撮影された第１対象顔画像における装着物推定を行うことができる。ＣＰＵ４０２は、装着物推定により、第１対象顔画像におけるマスク、サングラス、眼鏡、帽子等の顔装着物を検知することができる。ＣＰＵ４０２は、顔装着物を検知した場合、利用者Ｕに対して、顔照合の妨げとなる顔装着物を取り外すように警告を行うことができる。ＣＰＵ４０２は、例えば、顔装着物を取り外すように利用者Ｕに指示する表示をディスプレイ４０８に表示したり、スピーカー等から顔装着物を取り外すように利用者Ｕに指示する音声を発したりすることにより警告を行うことができる。この場合、ディスプレイ４０８による警告の表示は、不要な顔照合の失敗を防ぐため、顔照合を行う前に行うことができる。
　また、ＣＰＵ４０２は、管理サーバ５０に対して要求した第１対象顔画像又は第２顔画像の顔照合の結果を示す照合情報を管理サーバ５０から取得する照合情報取得部として機能する。照合情報は、照合の結果、第１対象顔画像又は第２対象顔画像と一致する登録顔画像が発見されて利用者Ｕの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Ｕの本人確認に失敗したことを示している。なお、第１対象顔画像又は第２対象顔画像と登録顔画像とが一致する場合には、両顔画像の間の類似度を示す照合スコアが所定の閾値を超えて両顔画像が高い類似度を示す場合が含まれる。
　なお、ＣＰＵ４０２は、照合要求部及び照合情報取得部として機能することに代えて、第１対象顔画像又は第２対象顔画像と利用者情報ＤＢ５０６ａの登録顔画像とを１：Ｎで照合して照合情報を出力する照合部として機能するように構成することもできる。この場合、ＣＰＵ４０２は、管理サーバ５０の利用者情報ＤＢ５０６ａを参照して、又は利用者情報ＤＢ５０６ａと同期されて記憶装置４０６に格納された利用者情報ＤＢを参照して顔画像の照合を行うことができる。
　また、ＣＰＵ４０２は、顔照合による利用者Ｕの本人確認に成功した場合に、その利用者Ｕの利用者情報と関連付けられたゲート利用可否情報を管理サーバ５０から取得する情報取得部として機能することができる。ゲート利用可否情報は、上述のように、利用者Ｕについて電子化ゲート２０の利用可否の判定結果を示す情報である。
　また、ＣＰＵ４０２は、第１対象顔画像又は第２対象顔画像の顔照合の照合結果、及び電子化ゲート２０の利用可否の判定結果に基づき、ゲート通路Ｐ内の利用者Ｕについて電子化ゲート２０の通過の可否を判定する判定部として機能する。判定部としてのＣＰＵ４０２は、第１対象顔画像又は第２対象顔画像の顔照合が一致して利用者Ｕの本人確認に成功し、かつ、その利用者Ｕが電子化ゲート２０を利用可能である場合に、電子化ゲート２０の通過が可能であると判定する。本人確認に成功した場合とは、第１対象顔画像又は第２対象顔画像と、キオスク端末１０で取得された撮影顔画像又は旅券顔画像である登録顔画像とが一致した場合である。利用者Ｕが電子化ゲート２０を利用可能である場合とは、一致した登録顔画像を含む利用者情報と関連付けられ、利用者Ｕが電子化ゲート２０を利用可能であることを示すゲート利用可否情報が存在する場合である。
　また、ＣＰＵ４０２は、出口ゲート扉４１４の開扉動作及び閉扉動作を制御する扉制御部として機能する。ＣＰＵ４０２は、利用者Ｕについて電子化ゲート２０の通過が可能であると判定すると、通常状態が閉扉状態である出口ゲート扉４１４を開扉する。また、ＣＰＵ４０２は、通過検知センサ４１６の出力信号に基づき利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したと判定すると、出口ゲート扉４１４を閉扉する。
　また、ＣＰＵ４０２は、複数の通過検知センサ４１６の出力信号及びそれらの出力順に基づき、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したか否かを判定する判定部として機能する。
　また、ＣＰＵ４０２は、上述のように利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したと判定すると、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したことを示す出口通過情報を入口ゲート端末３０に送信する。
　また、ＣＰＵ４０２は、ディスプレイ４０８の表示を制御する表示制御部として機能する。ＣＰＵ４０２は、ゲート通路Ｐ内の利用者Ｕに対する各種通知をディスプレイ４０８に表示させることができる。例えば、ＣＰＵ４０２は、ゲート通路Ｐ内の利用者Ｕに対して、マスク、サングラス、眼鏡、帽子等の顔照合の障害となる顔装着物を取り外すことように指示する警告をディスプレイ４０８に表示させることができる。また、例えば、ＣＰＵ４０２は、出口ゲート扉４１４の前に留まる利用者Ｕに対して、必要に応じて、第２カメラ４１２により顔画像を撮影する旨の通知をディスプレイ４０８に表示させることができる。ＣＰＵ４０２は、第１対象顔画像と登録顔画像との照合が不一致である場合又はその照合ができない場合に、利用者Ｕに対して出口ゲート扉４１４の前に留まるようにディスプレイ４０８に表示させることができる。この場合、ＣＰＵ４０２は、さらに、利用者Ｕに対して出口ゲート扉４１４の前に留まりディスプレイ４０８を見るようにディスプレイ４０８に表示させることもできる。これにより、第２カメラ４１２により利用者Ｕの顔画像を撮影することができるように利用者Ｕを誘導することができる。
　また、ＣＰＵ４０２は、出口ゲート扉４１４の開閉状態に応じて案内表示器４２０の表示を制御する表示制御部として機能する。ＣＰＵ４０２は、出口ゲート扉４１４が開扉された状態の場合、ゲート通路Ｐからの退出が許可されていることを示す表示を案内表示器４２０に表示させる。また、ＣＰＵ４０２は、出口ゲート扉４１４が閉扉された状態である場合、ゲート通路Ｐからの退出が禁止されていることを示す表示を案内表示器４２０に表示させる。
　記憶装置４０６は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置４０６は、ＣＰＵ４０２により実行されるプログラム、そのプログラムの実行の際にＣＰＵ４０２により参照されるデータ等を記憶する。
　ディスプレイ４０８は、ゲート通路Ｐ内の利用者Ｕに対して、各種画面を表示する表示部として機能する。例えば、ディスプレイ４０８は、マスク、サングラス、眼鏡、帽子等の顔照合の障害となる顔装着物を取り外すことように指示する警告を表示する。また、例えば、ディスプレイ４０８は、必要に応じて、第２カメラ４１２により顔を撮影する旨の通知を表示する。具体的には、ディスプレイ４０８は、第１カメラ４１０により撮影された第１対象顔画像では照合ができなかった場合に、積極認証ができるようにディスプレイ４０８の前に立ち止まって第２カメラ４１２の方向に注目するように利用者に指示する表示を表示する。例えば、ディスプレイ４０８は、顔認証を行うのでディスプレイ４０８の前に立ち止まって、第２カメラ４１２のほうを見てください等との表示を表示することができる。また、ディスプレイ４０８は、動いている利用者Ｕの顔画像である第１対象顔画像による非積極認証の照合結果、静止している利用者Ｕの顔画像である第２対象顔画像による積極認証の照合結果を表示することができる。
　第１カメラ４１０は、ゲート通路Ｐに進入してゲート通路Ｐを出口ゲート端末４０に向かって移動する利用者Ｕを撮影して、利用者Ｕの生体情報として利用者Ｕの顔画像である第１対象顔画像を取得する生体情報取得部として機能する。第１カメラ４１０により撮影される第１対象顔画像は、動いている利用者Ｕの顔画像である。第１カメラ４１０は、例えば、ゲート通路Ｐを移動する利用者Ｕを動画又は静止画で撮影するデジタルカメラ等の撮影装置であり、撮影した動画又は静止画から利用者Ｕの第１対象顔画像を取得する。第１カメラ４１０は、上述のように、入口ゲート端末３０と出口ゲート端末４０との間のゲート通路Ｐ内を少なくとも撮影可能範囲とし、第２カメラ４１２よりも遠距離までを撮影可能な遠距離カメラである。第１カメラ４１０は、利用者Ｕに撮影されていることを意識させることなく利用者Ｕを撮影する。なお、第１カメラ４１０に代えて、生体情報取得部として、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された登録生体情報と同種の生体情報を利用者Ｕから取得するものを設けることができる。
　第２カメラ４１２は、必要に応じて、ゲート通路Ｐを移動して出口ゲート端末４０の出口ゲート扉４１４に到達して立ち止まった利用者Ｕを撮影して、利用者Ｕの生体情報として利用者Ｕの顔画像である第２対象顔画像を取得する生体情報取得部として機能する。第２カメラ４１２により撮影される第２対象顔画像は、静止している利用者Ｕの顔画像である。第２カメラ４１２は、例えば、出口ゲート扉４１４の前の利用者Ｕを動画又は静止画で撮影するデジタルカメラ等の撮影装置であり、撮影した動画又は静止画から利用者Ｕの第２対象顔画像を取得する。第２カメラ４１２は、上述のように、出口ゲート端末４０の前を少なくとも撮影可能範囲とする近距離カメラである。第２カメラ４１２は、例えばディスプレイ４０８の表示、音声案内等により撮影の通知を受けた利用者Ｕを撮影する。第２カメラ４１２は、所定の場合に、出口ゲート扉４１４の前に留まる利用者Ｕから、登録顔画像と照合する第２対象顔画像を取得する。ここにいう所定の場合とは、後述するように、第１対象顔画像と登録顔画像との照合が不一致である場合又はその照合ができない場合である。具体的には、所定の場合とは、閉扉状態の出口ゲート扉４１４に向かって移動する利用者Ｕの顔の向きが出口ゲート扉４１４を向いていない場合、利用者Ｕの顔に装着物が装着されていた場合等である。なお、第２カメラ４１２に代えて、生体情報取得部として、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された登録生体情報と同種の生体情報を利用者Ｕから取得するものを設けることができる。
　出口ゲート扉４１４は、ＣＰＵ４０２による制御に従って、開扉動作及び閉扉動作を行う開閉扉であり、利用者Ｕの通過を遮る閉扉状態と利用者Ｕの通過を許す開扉状態との間を移行する。出口ゲート扉４１４の開閉方式は、特に限定されるものではないが、例えば、フラッパー式、スライド式、回転式等である。
　通過検知センサ４１６は、利用者Ｕの通過を検知すると、利用者Ｕの通過を示す出力信号を出力する。ＣＰＵ４０２は、ゲート通路Ｐに退出する方向に並ぶように一対の筐体４２４に設けられた複数の通過検知センサ４１６の出力信号及びそれらの出力順に基づき、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したか否かを判定することができる。通過検知センサ４１６は、特に限定されるものではないが、入口ゲート端末３０の通過検知センサ３１０と同様に、例えば、透過型の光電センサ、反射型の光電センサ等である。
　通信部４１８は、ネットワークＮＷに接続され、ネットワークＮＷを介してデータの送受信を行う。通信部４１８は、ＣＰＵ４０２による制御に従って、管理サーバ５０、入口ゲート端末３０等との間の通信を行う。なお、通信部４１８は、ネットワークＮＷを介さずに、入口ゲート端末３０と通信可能に入口ゲート端末３０と接続されていてもよい。
　案内表示器４２０は、ＣＰＵ４０２による制御に従って、ゲート通路Ｐからの退出の許否を示す表示を表示する。案内表示器４２０は、出口ゲート扉４１４が閉扉された状態の場合、ゲート通路Ｐからの退出が禁止されていることを示す表示を表示する。また、案内表示器４２０は、出口ゲート扉４１４が開扉された状態の場合、ゲート通路Ｐからの退出が許可されていることを示す表示を表示する。案内表示器４２０は、例えば、色表示、記号表示、文字表示等により、ゲート通路Ｐからの退出の許否を示す表示を表示することができる。
　こうして、出口ゲート端末４０が構成されている。
　次に、管理サーバ５０の構成について図１４を用いて説明する。図１４は、管理サーバ５０のハードウェア構成の一例を示すブロック図である。
　管理サーバ５０は、情報処理システム１を管理し、第１対象顔画像又は第２対象顔画像と利用者情報ＤＢ５０６ａの複数の登録顔画像との照合、申告情報に含まれる申告内容の判定等を行う情報処理装置である。なお、管理サーバ５０の機能は、単一のサーバにより実現されてもよいし、複数のサーバにより実現されてもよい。
　管理サーバ５０は、図１４に示すように、ＣＰＵ５０２と、ＲＡＭ５０４と、記憶装置５０６と、通信部５０８とを有している。ＣＰＵ５０２、ＲＡＭ５０４、記憶装置５０６及び通信部５０８は、バスライン５１０に接続されている。
　ＣＰＵ５０２は、記憶装置５０６に記憶されたプログラムを実行することにより動作し、管理サーバ５０全体の動作を制御する制御部として機能する。また、ＣＰＵ５０２は、記憶装置５０６に記憶されたアプリケーションプログラムを実行して、管理サーバ５０としての各種処理を実行する。ＲＡＭ５０４は、ＣＰＵ５０２の動作に必要なメモリ領域を提供する。
　より具体的には、ＣＰＵ５０２は、キオスク端末１０から利用者Ｕの顔照合を要求する照合要求を受信した場合に、利用者Ｕの顔照合を行う照合部として機能する。照合部としてのＣＰＵ５０２は、利用者情報に含まれる撮影顔画像と旅券顔画像とを１：１で照合する。ＣＰＵ５０２は、撮影顔画像と旅券顔画像との照合に際して、撮影顔画像から抽出した顔特徴量と、旅券顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
　また、ＣＰＵ５０２は、照合要求を送信したキオスク端末１０に対して、利用者Ｕの顔照合の結果を示す照合情報を送信する送信部として機能する。照合情報は、照合一致又は照合不一致を示している。すなわち、照合情報は、照合の結果、撮影顔画像と旅券顔画像とが一致して税関申告を行う利用者Ｕの本人確認に成功したこと、又は撮影顔画像と旅券顔画像とが一致せずに利用者Ｕの本人確認に失敗したことを示している。
　また、ＣＰＵ５０２は、キオスク端末１０から利用者Ｕの利用者情報を受信した場合に、利用者Ｕの申告情報に含まれる申告内容を判定する判定部として機能する。判定部としてのＣＰＵ５０２は、利用者Ｕの申告情報に含まれる申告内容から、利用者Ｕが課税対象であるか否か、利用者Ｕにリスクがあるか否かを判定する。利用者Ｕが課税対象である場合及び利用者Ｕにリスクがある場合は、それぞれ上述したとおりである。
　また、ＣＰＵ５０２は、利用者情報を送信したキオスク端末１０に対して、利用者Ｕの申告情報に含まれる申告内容の判定結果を示す判定情報を送信する送信部として機能する。判定情報は、上述のように、判定の結果、利用者Ｕが課税対象であるか否か、利用者Ｕにリスクがあるか否かを示している。
　ＣＰＵ５０２は、キオスク端末１０から受信した利用者Ｕの利用者情報を記憶装置５０６に記憶して管理する情報管理部として機能する。情報管理部としてのＣＰＵ５０２は、キオスク端末１０から受信した利用者情報を、記憶装置５０６に格納された利用者情報ＤＢ５０６ａに登録して管理する。ＣＰＵ５０２は、キオスク端末１０から利用者情報を受信するたびに、受信した利用者情報を利用者情報ＤＢ５０６ａに登録する。
　利用者Ｕの利用者情報は、上述したように、互いに関連付けられた利用者Ｕの身分事項情報、顔情報及び申告情報を含んでいる。顔情報は、キオスク端末１０で取得された撮影顔画像及び旅券顔画像又はこれらから抽出した顔特徴量である。利用者情報ＤＢ５０６ａに登録された撮影顔画像又は旅券顔画像は、予め登録された登録生体情報である登録顔画像として用いられる。登録顔画像としては、撮影顔画像及び旅券顔画像のいずれを用いることもできるが、旅券顔画像よりも新しい撮影顔画像を登録顔画像として用いることができる。利用者情報ＤＢ５０６ａに登録された撮影顔画像若しくは旅券顔画像である登録顔画像又はその顔特徴量は、電子化ゲート２０における利用者Ｕの本人確認のための顔照合に用いられる。
　また、ＣＰＵ５０２は、キオスク端末１０からゲート利用可否情報を受信した場合に、利用者情報ＤＢ５０６ａに利用者情報と関連付けてゲート利用可否情報を登録する。ゲート利用可否情報は、上述のように、税関申告を行う利用者Ｕについて電子化ゲート２０の利用可否の判定結果を示す情報である。
　なお、ＣＰＵ５０２は、ゲート利用可否情報に基づき、電子化ゲート２０の利用が可能と判定された利用者Ｕの利用者情報について、利用者情報ＤＢ５０６ａに登録することもできる。すなわち、ＣＰＵ５０２は、電子化ゲート２０を利用できないと判定された利用者Ｕの利用者情報については、利用者情報ＤＢ５０６ａに登録しないこともできる。
　また、ＣＰＵ５０２は、キオスク端末１０からゲート利用可否情報を受信することに代えて、キオスク端末１０と同様に利用者Ｕの電子化ゲート２０の利用可否を判定してゲート利用可否情報を取得することもできる。
　また、ＣＰＵ５０２は、利用者情報ＤＢ５０６ａの利用者情報を、その登録から一定時間経過後に削除することができる。例えば、ＣＰＵ５０２は、税関検査場Ｃにおいてキオスク端末１０での税関申告の完了から電子化ゲート２０を通過するまでに通常要する時間の経過後に利用者情報を削除することができる。
　また、ＣＰＵ５０２は、出口ゲート端末４０から利用者Ｕの顔照合を要求する照合要求を受信した場合に、利用者Ｕの顔照合を行う照合部として機能する。照合部としてのＣＰＵ５０２は、第１対象顔画像若しくは第２対象顔画像又はその顔特徴量と、利用者情報ＤＢ５０６ａに登録された複数の登録顔画像又はそれらの顔特徴量とを１：Ｎで照合する。ＣＰＵ５０２は、第１対象顔画像又は第２対象顔画像と登録顔画像との照合に際して、第１対象顔画像又は第２対象顔画像から抽出した顔特徴量と、登録顔画像から抽出した顔特徴量とを照合することにより、両顔画像を照合することができる。
　照合部としてのＣＰＵ５０２は、第１対象顔画像又は第２対象顔画像と複数の登録顔画像との照合により、複数の登録顔画像の中から、第１対象顔画像又は第２対象顔画像と一致する登録顔画像の発見を試みる。また、ＣＰＵ５０２は、第１対象顔画像又は第２対象顔画像の顔特徴量と複数の登録顔画像の顔特徴量との照合により、複数の登録顔画像の顔特徴量の中から、第１対象顔画像又は第２対象顔画像の顔特徴量と一致する登録顔画像の顔特徴量の発見を試みる。なお、第１対象顔画像又は第２対象顔画像と登録顔画像とが一致する場合には、両顔画像の間の類似度を示す照合スコアが所定の閾値を超えて両顔画像が高い類似度を示す場合が含まれる。また、第１対象顔画像又は第２対象顔画像の顔特徴量と登録顔画像の顔特徴量とが一致する場合には、両顔特徴量の間の類似度を示す照合スコアが所定の閾値を超えて両顔特徴量が高い類似度を示す場合が含まれる。
　ＣＰＵ５０２は、照合要求を送信した出口ゲート端末４０に対して、照合の結果を示す照合情報を送信する送信部として機能する。照合情報は、照合一致又は照合不一致を示している。すなわち、照合情報は、照合の結果、第１対象顔画像又は第２対象顔画像と一致する登録顔画像が発見されて利用者Ｕの本人確認に成功したこと、又は一致する登録顔画像が発見されずに利用者Ｕの本人確認に失敗したことを示している。また、照合情報は、照合の結果、第１対象顔画像又は第２対象顔画像の顔特徴量と一致する登録顔画像の顔特徴量が発見されて利用者Ｕの本人確認に成功したこと、又は一致する登録顔画像の顔特徴量が発見されずに利用者Ｕの本人確認に失敗したことを示している。なお、ＣＰＵ５０２は、第１対象顔画像若しくは第２対象顔画像又はその顔特徴量と一の登録顔画像又はその顔特徴量との照合を行うことがありうる。
　ＣＰＵ５０２は、第１対象顔画像又は第２対象顔画像と一致した登録顔画像又はその登録顔画像を含む利用者情報を利用者情報ＤＢ５０６ａから削除することができる。また、ＣＰＵ５０２は、第１対象顔画像の顔特徴量又は第２対象顔画像の顔特徴量と一致した登録顔画像の顔特徴量又はその登録顔画像の顔特徴量を含む利用者情報を利用者情報ＤＢ５０６ａから削除することができる。
　また、ＣＰＵ５０２は、必要に応じて、出口ゲート端末４０に対して、必要に応じてゲート利用可否情報を送信する送信部として機能する。
　記憶装置５０６は、不揮発性メモリ、ハードディスクドライブ等の記憶媒体により構成され、記憶部として機能する。記憶装置５０６は、ＣＰＵ５０２により実行されるプログラム、そのプログラムの実行の際にＣＰＵ５０２により参照されるデータ等を記憶する。
　また、記憶装置５０６は、利用者情報ＤＢ５０６ａを格納している。利用者情報ＤＢ５０６ａには、キオスク端末１０で税関申告を行った複数の利用者Ｕの利用者情報が登録されている。また、利用者情報ＤＢ５０６ａには、利用者情報に関連付けられて利用者Ｕのゲート利用可否情報が登録されている。
　通信部５０８は、ネットワークＮＷに接続され、ネットワークＮＷを介してデータの送受信を行う。通信部５０８は、ＣＰＵ５０２による制御に従って、キオスク端末１０、出口ゲート端末４０等との間の通信を行う。
　こうして、管理サーバ５０が構成されている。
　本実施形態によるキオスク端末１０は、ディスプレイ１１０と旅券読取装置１１２及びコード読取装置１１４との間に設けられたカメラ１１６により、キオスク端末１０を操作する利用者Ｕを撮影する。利用者Ｕは、ディスプレイ１１０を見たり、旅券読取装置１１２に旅券をかざし又はコード読取装置１１４に携帯端末６０をかざしたりする際に、カメラ１１６の方に顔を向けることになる。これにより、キオスク端末１０は、旅券読取装置１１２による旅券の読取り又はコード読取装置１１４による申告用コードの読取りと並行して読取りの間に、利用者Ｕの顔をカメラ１１６により撮影して撮影顔画像を取得する。利用者Ｕは必然的にディスプレイ１１０と旅券読取装置１１２及びコード読取装置１１４との間に設けられたカメラ１１６に顔を向けるため、利用者Ｕのキオスク端末１０の操作を中断させてカメラ１１６に顔を向けさせる必要はない。また、キオスク端末１０は、旅券読取装置１１２による旅券の読取りとコード読取装置１１４による申告用コードの読取りとを同時に又は任意の順序で実行することができる。
　したがって、本実施形態によるキオスク端末１０によれば、旅券の読取り、申告用コードの読取り及び顔照合に用いる撮影顔画像の取得を含むキオスク端末１０での手続を短時間で完了することができる。また、キオスク端末１０は、旅券又は申告用コードの読取りの間に利用者Ｕの顔を撮影することができるので、利用者Ｕに撮影を意識させることがなく、よって利用者Ｕの心理的負担を軽減することができる。
　また、本実施形態による電子化ゲート２０の出口ゲート端末４０は、出口ゲート端末４０に向かって移動する利用者Ｕを第１カメラ４１０で撮影して取得した第１対象顔画像と、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された登録顔画像とを照合する。第１対象顔画像は、利用者Ｕが止まることなく取得することができる。したがって、本実施形態による電子化ゲート２０によれば、第１対象顔画像を用いて利用者Ｕの顔照合を効率よく行うことができる。これにより、利用者Ｕが電子化ゲート２０の通過に要する時間を短縮することができる。また、出口ゲート端末４０は、第１対象顔画像の照合が不一致であった場合又は照合ができなかった場合に、出口ゲート扉４１４の前に留まる利用者Ｕを第２カメラ４１２で撮影して取得した第２対象顔画像と登録顔画像とを照合する。したがって、本実施形態による電子化ゲート２０によれば、利用者Ｕの顔照合による本人確認を確実に行うことができる。
　さらに、本実施形態による電子化ゲート２０の出口ゲート端末４０は、予め判定されたゲート利用可否の判定結果に応じて、出口ゲート扉４１４を開扉する。したがって、本実施形態による電子化ゲート２０によれば、利用者Ｕが電子化ゲート２０の通過に要する時間を短縮することができる。
　以下、本実施形態による情報処理システム１における各構成要素の動作及びこれらの動作を実現する制御方法についてさらに図１５Ａ乃至図２０を用いて説明する。
　まず、キオスク端末１０の動作について管理サーバ５０の動作とともに図１５Ａ乃至図１８Ｃを用いて説明する。図１５Ａは、携帯端末６０における申告情報入力画面の一例を示す概略図である。図１５Ｂは、携帯端末６０における申告用コード表示画面の一例を示す概略図である。図１６は、キオスク端末１０及び管理サーバ５０の動作を示すシーケンス図である。図１７は、キオスク端末１０の言語設定動作を示すシーケンス図である。図１８Ａは、キオスク端末１０における受付画面の一例を示す概略図である。図１８Ｂは、キオスク端末１０における申告内容確認画面の一例を示す概略図である。図１８Ｃは、キオスク端末１０における誘導画面の一例を示す概略図である。
　例えば、航空機で外国から空港に到着した利用者Ｕは、入国審査場での入国審査、手荷物受取場での受託手荷物の受取り等を経て、税関申告を行うべく税関検査場Ｃに向かう。利用者Ｕは、携帯端末６０で実行された税関申告アプリケーションにおいて、申告情報を入力し、申告情報を含む申告用コードを生成して表示させる。なお、利用者Ｕは、キオスク端末１０を利用するまでに、申告用コードを生成して表示させておけばよい。
　図１５Ａは、携帯端末６０における税関申告アプリケーションの申告情報入力画面ＳＨＥを示している。申告情報入力画面ＳＨＥは、例えば、旅具通関における申告において申告すべき情報入力するための申告情報入力欄ＳＨＥ１０を有している。申告情報入力欄ＳＨＥ１０は、例えば、日本国の場合、税関様式Ｃ第５３６０号の携帯品・別送品申告書による申告において申告すべき情報を入力可能になっている。すなわち、申告情報入力欄ＳＨＥ１０は、搭乗便名、出発地、入国日等の利用者Ｕの搭乗に関する情報である搭乗情報、並びに質問に対する回答を入力することが可能になっている。なお、税関申告アプリケーションにおいて、申告情報のうち、利用者Ｕの氏名、現住所、電話番号、生年月日、旅券番号等の税関申告のたびに変わることのない利用者Ｕの基本情報は、図示しない利用者登録画面、設定画面等で入力して登録しておくことができる。
　図１５Ｂは、携帯端末６０における税関申告アプリケーションの申告用コード表示画面ＳＨＣを示している。申告用コード表示画面ＳＨＣは、申告情報入力画面ＳＨＥで入力された申告情報を含む申告用コードが生成されて表示された申告用コード表示欄ＳＨＣ１０を有している。申告用コード表示欄ＳＨＣ１０に表示された申告用コードは、申告情報のほか、税関申告アプリケーションの使用言語に関する言語情報をさらに含んでいる。また、申告用コード表示欄ＳＨＣ１０は、申告用コードの有効期限となる日時、申告用コードの使い方等を表示することができる。
　税関検査場Ｃに入場した利用者Ｕは、税関検査場Ｃの入口付近に設置されたキオスク端末１０で税関申告を行う。なお、利用者Ｕは、キオスク端末１０の前に行くまでに、携帯端末６０で申告用コードを生成して表示させておくことができる。その際、利用者Ｕは、携帯端末６０の税関申告アプリケーションで表示される申告用コードの使い方、キオスク端末１０の付近に設置されたデジタルサイネージ端末７０に表示されているキオスク端末１０での手続方法等の案内を参照することができる。
　図１６に示すように、キオスク端末１０のＣＰＵ１０２は、旅券読取装置１１２に旅券がかざされたか否か、コード読取装置１１４に申告用コードがかざされたか否かをそれぞれ継続的に判定する（ステップＳ１０２）。こうして、ＣＰＵ１０２は、旅券及び申告用コードの少なくとも一方がかざされるまで待機する（ステップＳ１０２、ＮＯ）。
　図１８Ａは、利用者Ｕにより旅券及び申告用コードの少なくとも一方がかざされるのを待機するキオスク端末１０のディスプレイ１１０に表示される受付画面ＳＫＲの一例を示している。受付画面ＳＫＲは、例えば、キオスク端末１０を利用するために申告用コードが必要であること、及び旅券及び申告用コードのかざし方を表示する。
　図１６に示すように、ＣＰＵ１０２は、旅券がかざされたと判定すると（ステップＳ１０２、ＹＥＳ）、旅券読取装置１１２により、旅券から利用者Ｕの身分事項情報、旅券顔画像等の旅券情報を読み取って取得する（ステップＳ１０４）。また、ＣＰＵ１０２は、申告用コードがかざされたと判定すると（ステップＳ１０２、ＹＥＳ）、コード読取装置１１４により、申告用コードから申告情報及び言語情報を読み取って取得する（ステップＳ１０６）。
　なお、利用者Ｕは、申告用コードよりも先に旅券を旅券読取装置１１２にかざして読み取らせてもよいし、旅券よりも先に申告用コードをコード読取装置１１４にかざして読み取らせてもよい。また、利用者Ｕは、旅券及び申告用コードを同時にそれぞれ旅券読取装置１１２及びコード読取装置１１４にかざして読み取らせてもよい。ＣＰＵ１０２は、利用者Ｕの旅券及び申告用コードを読み取らせるタイミングに応じて、旅券読取装置１１２による旅券の読取り及びコード読取装置１１４による申告用コードの読取りを任意の順序で又は同時に実行させることができる。
　また、ＣＰＵ１０２は、旅券及び申告用コードのうちの一方を読み取った後、他方がかざされることなく、一定時間が経過又は利用者Ｕがキオスク端末１０から離れたことを検知した場合には、処理を中断することができる。この場合、ＣＰＵ１０２は、例えば、ディスプレイ１１０にエラー表示等を表示させたり、それまでの処理を無効にするリセット処理を行ったりすることができる。その後、ＣＰＵ１０２は、ステップＳ１０２に移行することができる。なお、ＣＰＵ１０２は、例えば、カメラ１１６により撮影される動画像又は連続的に撮影される静止画に基づき、利用者Ｕがキオスク端末１０から離れたことを検知することができる。
　さらに、ＣＰＵ１０２は、旅券又は申告用コードがかざされたと判定すると（ステップＳ１０２、ＹＥＳ）、カメラ１１６により、利用者Ｕの顔を撮影して利用者Ｕの撮影顔画像を取得する（ステップＳ１０８）。ＣＰＵ１０２は、旅券読取装置１１２による旅券の読取り又はコード読取装置１１４による申告用コードの読取りと並行して、旅券又は申告用コードの読取りの間にカメラ１１６による利用者Ｕの顔の撮影を行うことができる。カメラ１１６は、旅券又は申告用コードがかざされたときに撮影を開始することができる。
　こうして、ＣＰＵ１０２は、カメラ１１６により、キオスク端末１０の前で旅券読取装置１１２に旅券を読み取らせ又はコード読取装置１１４に申告用コードを読み取らせる利用者Ｕの顔画像を撮影して撮影顔画像を取得する。
　カメラ１１６は、上述のように、その撮影方向が前方斜め上方を向く方向となるように設けられ、ディスプレイ１１０、旅券読取装置１１２又はコード読取装置１１４を見下ろしてキオスク端末１０を操作する利用者Ｕの顔を撮影可能な画角を有している。このため、カメラ１１６は、視線を前方斜め下方に向けてディスプレイ１１０、旅券読取装置１１２又はコード読取装置１１４を見下ろしてキオスク端末１０を操作する利用者Ｕの顔を、利用者Ｕに撮影を意識させることなく撮影することができる。例えば、カメラ１１６による撮影に際して、カメラ１１６の方向を向くように利用者Ｕに要求する必要はない。
　また、カメラ１１６は、所定のフレームレートで動画を撮影し又は所定の時間間隔で静止画を撮影することにより、キオスク端末１０を操作する利用者Ｕについて複数の顔画像を取得することができる。この場合、ＣＰＵ１０２は、カメラ１１６により撮影された利用者Ｕの複数の顔画像のうち、最も品質の高い顔画像を、利用者Ｕの撮影顔画像として選択して取得することができる。カメラ１１６は、旅券又は申告用コードがかざされたことをトリガーとして撮影を開始することができる。顔画像の品質は、例えば、カメラ１１６に対する顔の向きを基準に評価することができ、カメラ１１６に対する顔の向きが所定の範囲内である場合に、一定以上の品質を有する顔画像であると評価することができる。
　ＣＰＵ１０２は、旅券から利用者Ｕの旅券顔画像を取得し、カメラ１１６により利用者Ｕの撮影顔画像を取得すると、管理サーバ５０に対して、利用者Ｕの顔照合を要求する照合要求をネットワークＮＷを介して送信する（ステップＳ１１０）。ＣＰＵ１０２は、撮影顔画像及び旅券顔画像又はこれらの顔特徴量を照合要求とともに管理サーバ５０に送信する。
　管理サーバ５０のＣＰＵ５０２は、キオスク端末１０から照合要求を受信すると、利用者Ｕの顔照合を行う（ステップＳ１１２）。ＣＰＵ５０２は、撮影顔画像と旅券顔画像とを１：１で照合する。
　次いで、ＣＰＵ５０２は、撮影顔画像と旅券顔画像との照合の結果を示す照合情報をキオスク端末１０にネットワークＮＷを介して送信する（ステップＳ１１４）。
　こうして、利用者Ｕがキオスク端末１０を操作している間に、撮影顔画像と旅券顔画像とを照合する利用者Ｕの顔照合が行われる。
　なお、キオスク端末１０は、撮影顔画像と旅券顔画像との照合が一致しない場合には、カメラ１１６により利用者Ｕの顔を撮影して利用者Ｕの撮影顔画像を取得するステップＳ１０８を改めて実行して、撮影顔画像の再撮影を行うことができる。キオスク端末１０は、撮影顔画像の再撮影を１回だけ又は複数回行うことができる。
　また、ＣＰＵ１０２は、利用者Ｕによる申告内容の確認及び必要に応じた訂正のため、キオスク端末１０の使用言語を設定する（ステップＳ１１６）。使用言語の設定において、ＣＰＵ１０２は、まず、図１７に示すように、申告用コードから読み取った言語情報を取得する（ステップＳ２０２）。
　次いで、ＣＰＵ１０２は、取得した言語情報に示される税関申告アプリケーションの使用言語を、キオスク端末１０の使用言語として設定する（ステップＳ２０４）。ここでキオスク端末１０の使用言語に設定される税関申告アプリケーションの使用言語は、携帯端末６０の言語設定で設定されている言語、又は税関申告アプリケーション内の設定で言語が設定されていれば当該言語である。これにより、ＣＰＵ１０２は、利用者Ｕが使用する携帯端末６０の税関申告アプリケーションの使用言語と同一の使用言語で、ディスプレイ１１０に各種情報を表示させることできる。また、ＣＰＵ１０２は、利用者Ｕが使用する携帯端末６０の税関申告アプリケーションの使用言語と同一の使用言語で、ディスプレイ１１０に組み込まれたタッチパネル等の入力装置１０８から利用者Ｕによる入力を受け付けることができる。
　また、ＣＰＵ１０２は、入力装置１０８を介して利用者Ｕにより使用言語の別の言語への変更を指示する変更指示の入力があったか否かを判定する（ステップＳ２０６）。変更指示の入力がなければ（ステップＳ２０６、ＮＯ）、ＣＰＵ１０２は、ステップＳ２０４で設定した使用言語を維持する。
　変更指示の入力があれば（ステップＳ２０６、ＹＥＳ）、ＣＰＵ１０２は、変更指示で指示された別の言語にキオスク端末１０の使用言語を変更する（ステップＳ２０８）。
　こうして、利用者Ｕは、外国人である場合であっても、キオスク端末１０において自らが使用する言語又は自らが変更を指示した言語で表示内容の確認及び情報の入力を行うことができる。このため、利用者Ｕは、言語が障害となることなく、キオスク端末１０を円滑に利用することができる。
　キオスク端末１０の使用言語を設定した後、ＣＰＵ１０２は、図１６に示すように、申告用コードから読み取った申告情報の申告内容をディスプレイ１１０に表示して利用者Ｕに確認させ、利用者Ｕからの訂正を必要に応じて受け付ける（ステップＳ１１８）。利用者Ｕは、ディスプレイ１１０に表示された申告内容を確認するとともに、申告内容に訂正の必要がある場合には入力装置１０８を介して申告内容を訂正する。申告内容を確認した利用者Ｕは、入力装置１０８を介して、申告内容を確認して申告内容を確定することを指示する確定指示を入力する。これにより、税関申告において利用者Ｕが申告する申告内容が確定される。
　図１８Ｂは、利用者Ｕにより申告内容の確認及び必要に応じた訂正が行われるキオスク端末１０のディスプレイ１１０に表示される申告内容確認画面ＳＫＣの一例を示している。申告内容確認画面ＳＫＣは、申告情報に含まれる申告内容を表示する。申告内容確認画面ＳＫＣは、例えば、利用者Ｕのタッチ入力により訂正ボタンが押されることにより、申告内容の訂正が可能な申告内容訂正画面に移行することができる。また、申告内容確認画面ＳＫＣにおいて、例えば、利用者Ｕのタッチ入力により確認ボタンが押されることにより、キオスク端末１０に確定指示が入力される。これにより、税関申告において利用者Ｕが申告する申告内容が確定される。
　なお、ＣＰＵ１０２は、携帯端末６０のディスプレイ６１０に表示される図１５Ａに示す税関申告アプリケーションの申告情報入力画面ＳＨＥとレイアウトが統一された申告内容確認画面ＳＫＣを表示することができる。両画面のレイアウトが統一されていることにより、キオスク端末１０の操作に迷いにくい画面表示を実現することができる。
　申告内容が確定されると、図１６に示すように、ＣＰＵ１０２は、利用者Ｕの利用者情報をネットワークＮＷを介して管理サーバ５０に送信する（ステップＳ１２０）。利用者情報は、互いに関連付けられた利用者Ｕの身分事項情報、顔情報及び申告情報を含んでいる。なお、ＣＰＵ１０２は、ステップＳ１１０で照合要求とともに撮影顔画像及び旅券顔画像を送信するので、利用者情報のうちの顔情報を改めて送信しなくてもよい。
　次いで、ＣＰＵ５０２は、利用者Ｕの利用者情報の申告情報に含まれる申告内容を判定する（ステップＳ１２２）。ＣＰＵ５０２は、利用者Ｕの申告情報に含まれる申告内容から、利用者Ｕが課税対象であるか否か、利用者Ｕにリスクがあるか否かを判定する。
　さらにＣＰＵ５０２は、申告内容の判定に加えて、旅券番号の照合を行うことができる。この場合、ＣＰＵ５０２は、利用者情報の身分事項情報に含まれる旅券番号と、利用者情報の申告情報に含まれる旅券番号とを照合する。
　次いで、ＣＰＵ５０２は、利用者Ｕの申告情報に含まれる申告内容の判定結果を示す判定情報をネットワークＮＷを介してキオスク端末１０に送信する（ステップＳ１２４）。また、ＣＰＵ５０２は、旅券番号の照合結果を判定情報に含ませることができる。
　キオスク端末１０のＣＰＵ１０２は、管理サーバ５０から判定情報を受信すると、受信した判定情報及び先に受信した照合情報に基づき、利用者Ｕについて電子化ゲート２０の利用可否を判定する（ステップＳ１２６）。先に受信した照合情報は、ステップＳ１１４で管理サーバ５０から送信されたものである。なお、ＣＰＵ１０２は、撮影顔画像と旅券顔画像との照合の結果を示す照合情報、及び申告内容の判定結果を示す判定情報をディスプレイ１１０に表示させて利用者Ｕに示すことができる。
　ＣＰＵ１０２は、利用者Ｕの旅券顔画像と撮影顔画像とが一致し、利用者Ｕが課税対象でなく、利用者Ｕにリスクがない場合に、利用者Ｕが電子化ゲート２０を利用できると判定する。判定情報が旅券番号の照合結果を含む場合には、ＣＰＵ１０２は、利用者Ｕの旅券顔画像と撮影顔画像とが一致し、利用者Ｕが課税対象でなく、利用者Ｕにリスクがなく、さらに旅券番号が一致した場合に、利用者Ｕが電子化ゲート２０を利用できると判定する。
　一方、ＣＰＵ１０２は、利用者Ｕの旅券顔画像と撮影顔画像とが一致しない場合、利用者Ｕが課税対象である場合又は利用者Ｕにリスクがある場合に、利用者Ｕが電子化ゲート２０を利用できないと判定する。また、判定情報が旅券番号の照合結果を含む場合には、ＣＰＵ１０２は、旅券番号が一致しない場合にも、利用者Ｕが電子化ゲート２０を利用できないと判定する。
　ＣＰＵ１０２は、電子化ゲート２０の利用可否の判定結果を示すゲート利用可否情報を管理サーバ５０に送信する（ステップＳ１２８）。ゲート利用可否情報は、利用者Ｕの旅券顔画像と撮影顔画像とが一致し、かつ、利用者Ｕが課税対象でなく、利用者Ｕにリスクがない場合に、利用者Ｕが電子化ゲート２０を利用可能であることを示す。また、判定情報が旅券番号の照合結果を含む場合、ゲート利用可否情報は、さらに旅券番号が一致した場合に、利用者Ｕが電子化ゲート２０を利用可能であることを示す。
　管理サーバ５０のＣＰＵ５０２は、キオスク端末１０からゲート利用可否情報を受信すると、利用者Ｕの利用者情報を、ゲート利用可否情報と関連付けて利用者情報ＤＢ５０６ａに登録する（ステップＳ１３０）。なお、ＣＰＵ５０２は、キオスク端末１０からゲート利用可否情報を受信することに代えて、キオスク端末１０のＣＰＵ１０２と同様に、照合情報及び判定情報に基づき、利用者Ｕについて電子化ゲート２０の利用可否を判定することもできる。
　また、ＣＰＵ５０２は、利用者情報をゲート利用可否情報と関連付けて利用者情報ＤＢ５０６ａに登録することに代えて、特定の利用者Ｕの利用者情報について、利用者情報ＤＢ５０６ａに登録することもできる。すなわち、ＣＰＵ５０２は、ゲート利用可否情報に基づき、電子化ゲート２０の利用が可能と判定された利用者Ｕの利用者情報について、利用者情報ＤＢ５０６ａに登録することもできる。つまり、ＣＰＵ５０２は、特定の利用者Ｕ以外の利用者Ｕの利用者情報については、利用者情報ＤＢ５０６ａに登録しないこともできる。
　次いで、キオスク端末１０のＣＰＵ１０２は、利用者Ｕが電子化ゲート２０を利用できると判定すると（ステップＳ１３２、ＹＥＳ）、利用者Ｕを電子化ゲート２０に誘導するための処理を実行する（ステップＳ１３４）。ＣＰＵ１０２は、例えば、利用者Ｕを電子化ゲート２０に誘導する誘導画面をディスプレイ１１０に表示させて、利用者Ｕを電子化ゲート２０に誘導する。
　図１８Ｃは、利用者Ｕを電子化ゲート２０に誘導するキオスク端末１０のディスプレイ１１０に表示される誘導画面ＳＫＧの一例を示している。誘導画面ＳＫＧは、例えば、電子化ゲート２０に誘導する文言、記号、絵等を示すとともに、税関申告が完了したことを示す文言、記号、絵等を示している。
　一方、ＣＰＵ１０２は、利用者Ｕが電子化ゲート２０を利用できないと判定すると（ステップＳ１３２、ＮＯ）、電子化ゲート２０を利用できない利用者Ｕに対する対応処理を実行する（ステップＳ１３６）。ＣＰＵ１０２は、対応処理として、例えば、利用者Ｕを有人ブースＭに誘導する誘導画面をディスプレイ１１０に表示させて、利用者Ｕを有人ブースＭに誘導する。
　こうして、キオスク端末１０において利用者Ｕによる税関申告が行われる。
　次に、キオスク端末１０において利用者Ｕが誘導された電子化ゲート２０の動作について管理サーバ５０の動作とともに図１９及び図２０を用いて説明する。図１９は、電子化ゲート２０を構成する入口ゲート端末３０及び出口ゲート端末４０、並びに管理サーバ５０の動作を示すシーケンス図である。
　ゲート通路Ｐに利用者Ｕが進入していない電子化ゲート２０の待機状態においては、入口ゲート端末３０の入口ゲート扉３０８が開扉状態に、出口ゲート端末４０の出口ゲート扉４１４が閉扉状態になっている。さらに、待機状態においては、入口ゲート端末３０の案内表示器３１４が、ゲート通路Ｐへの進入許可を示す表示を表示し、出口ゲート端末４０の案内表示器４２０が、ゲート通路Ｐからの退出禁止を示す表示を表示している。
　キオスク端末１０において税関申告を完了して電子化ゲート２０に誘導された利用者Ｕは、入口ゲート扉３０８が開扉状態の入口ゲート端末３０を通過してゲート通路Ｐに進入することになる。
　図１９に示すように、待機状態において、入口ゲート端末３０のＣＰＵ３０２は、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したか否かを判定し（ステップＳ３０２）、利用者Ｕの通過を待機する（ステップＳ３０２、ＮＯ）。ＣＰＵ３０２は、複数の通過検知センサ３１０の出力信号及びそれらの出力順に基づき、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したか否かを判定することができる。
　ＣＰＵ３０２は、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したと判定すると（ステップＳ３０２、ＹＥＳ）、入口ゲート扉３０８を閉扉する（ステップＳ３０４）。また、ＣＰＵ３０２は、案内表示器３１４の表示を、ゲート通路Ｐへの進入許可を示す表示からゲート通路Ｐへの進入禁止を示す表示に変更する。
　入口ゲート扉３０８は、後述するように、ゲート通路Ｐに進入した利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出するまで開扉しないように制御される。このため、利用者Ｕは、ゲート通路Ｐに１人だけしか進入できない。これにより、第１カメラ４１０により複数人の利用者Ｕが撮影される事態を防止することができ、第１対象顔画像の照合を確実に行うことができる。
　また、ＣＰＵ３０２は、利用者Ｕが入口ゲート端末３０を通過してゲート通路Ｐに進入したことを示す入口通過情報を出口ゲート端末４０に送信する（ステップＳ３０６）。なお、ＣＰＵ３０２は、ステップＳ３０４及びステップＳ３０６のいずれを先の順序で実行することもできるし、両ステップＳ３０４、Ｓ３０６を同時に実行することもできる。
　入口ゲート端末３０から入口通過情報を受信した出口ゲート端末４０のＣＰＵ４０２は、第１カメラ４１０により、ゲート通路Ｐを出口ゲート端末４０に向かって移動する利用者Ｕを撮影して、利用者Ｕの第１対象顔画像を取得する（ステップＳ３０８）。第１カメラ４１０は、所定のフレームレートで動画を撮影し又は所定の時間間隔で静止画を撮影することにより、ゲート通路Ｐを移動する利用者Ｕについて複数の第１対象顔画像を取得する。こうして、ゲート通路Ｐにおいて動いている利用者Ｕの顔画像である第１対象顔画像が取得される。第１カメラ４１０による撮影の間、利用者Ｕは、ゲート通路Ｐにおいて立ち止まることなく、出口ゲート端末４０に向かって移動することができる。
　第１カメラ４１０による撮影の間、ＣＰＵ４０２は、第１対象顔画像における視線検出を行い、視線検出の結果、利用者Ｕが下又は横を向いていると判定すると、利用者Ｕに対して、出口ゲート端末４０の側である前を向くように警告を行うことができる。ＣＰＵ４０２は、例えば、ディスプレイ４０８への表示、スピーカー等からの音声等により、利用者Ｕに対して前を向くように警告を行うことができる。これにより、品質の高い第１対象顔画像をより確実に取得することができる。
　ＣＰＵ４０２は、上記の警告に反して、利用者Ｕが前を向かない場合、以下のステップＳ３１０の品質判定、及びステップＳ３１２の照合要求を行わず、第１対象顔画像の照合を行わないようにすることもできる。
　また、第１カメラ４１０による撮影の間、ＣＰＵ４０２は、撮影された第１対象顔画像における装着物推定を行い、第１対象顔画像におけるサングラス、眼鏡、帽子等の顔装着物の検知を試みる。ＣＰＵ４０２は、顔装着物を検知した場合、例えば、ディスプレイ４０８への表示、スピーカー等からの音声等により、利用者Ｕに対して、顔装着物を取り外すように指示する警告を行うことができる。これにより、第１対象顔画像の照合を妨げる要因を除去することができる。
　ＣＰＵ４０２は、上記の警告に反して、利用者Ｕの顔から顔装着物が取り外されない場合、以下のステップＳ３１０の品質判定、及びステップＳ３１２の照合要求を行わず、第１対象顔画像の照合を行わないようにすることもできる。
　ＣＰＵ４０２は、取得した第１対象顔画像のそれぞれについて品質値を計算し、計算した品質値に基づき第１対象顔画像の品質を判定する（ステップＳ３１０）。
　ＣＰＵ４０２は、品質の判定の結果、一定の品質以上の高品質の第１対象顔画像について、管理サーバ５０に対して照合要求をネットワークＮＷを介して順次送信する（ステップＳ３１２）。これにより、ＣＰＵ４０２は、一定の品質以上の第１対象顔画像と、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された複数の登録顔画像とを１：Ｎで照合することを管理サーバ５０に対して要求する。ＣＰＵ４０２は、第１対象顔画像から抽出された顔特徴量又は第１対象顔画像自体を照合要求とともに管理サーバ５０に送信する。
　なお、ＣＰＵ４０２は、品質にかかわらず取得された第１対象顔画像のすべてを管理サーバ５０に送信してもよい。この場合、管理サーバ５０のＣＰＵ５０２は、第１対象顔画像の品質の判定を同様に行い、一定の品質以上の第１対象顔画像について登録顔画像との照合を行うことができる。また、ＣＰＵ５０２は、品質のいかんにかかわらず、第１対象顔画像と登録顔画像との照合を行うことができる。
　管理サーバ５０のＣＰＵ５０２は、出口ゲート端末４０から第１対象顔画像の照合要求を受信すると、第１対象顔画像の照合を行う（ステップＳ３１４）。ＣＰＵ５０２は、出口ゲート端末４０から受信した第１対象顔画像の顔特徴量と、利用者情報ＤＢ５０６ａに登録された複数の登録顔画像の顔特徴量とを１：Ｎで照合する。第１対象顔画像の顔特徴量は、出口ゲート端末４０から受信したもの又は出口ゲート端末４０から受信した第１対象顔画像から抽出したものである。
　次いで、ＣＰＵ５０２は、第１対象顔画像の照合の結果を示す照合情報を出口ゲート端末４０にネットワークＮＷを介して送信する（ステップＳ３１６）。
　出口ゲート端末４０のＣＰＵ４０２及び管理サーバ５０のＣＰＵ５０２は、一定の品質以上の複数の第１対象顔画像について、上記ステップＳ３１２、Ｓ３１４、Ｓ３１６を繰り返して実行することができる。
　出口ゲート端末４０のＣＰＵ４０２は、管理サーバ５０から照合情報を受信する。ＣＰＵ４０２は、いずれかの第１対象顔画像についての照合情報が、一致する登録顔画像が発見されてゲート通路Ｐを移動する利用者Ｕの本人確認に成功したことを示した時点で（ステップＳ３１８、ＹＥＳ）、第１カメラ４１０による撮影を終了する。続いて、ＣＰＵ４０２は、ステップＳ３３６に移行する。
　一方、ＣＰＵ４０２は、所定時点までに、いずれの第１対象顔画像についての照合情報も、一致する登録顔画像が発見されずに利用者Ｕの本人確認に失敗したことを示す場合（ステップＳ３１８、ＮＯ）、第１対象顔画像の照合による本人確認に失敗したと判定する。なお、所定の時点とは、例えば、利用者Ｕが出口ゲート端末４０の出口ゲート扉４１４に到達した時点である。ＣＰＵ４０２は、第１カメラ４１０により撮影される画像から、利用者Ｕが出口ゲート扉４１４に到達したか否かを判定することができる。
　また、ＣＰＵ４０２は、上記と同様の所定時点までに照合情報を受信しなかった場合も、第１対象顔画像の照合による本人確認に失敗したと判定することができる。この場合は、一定の品質以上の第１対象顔画像を取得することができず、第１対象顔画像と登録顔画像との照合ができない場合である。
　ＣＰＵ４０２は、第１対象顔画像の照合による本人確認に失敗したと判定した場合、第２カメラ４１２による撮影を行う旨を利用者Ｕに対して通知する（ステップＳ３２０）。すなわち、ＣＰＵ４０２は、第１対象顔画像と登録顔画像との照合が一致せず又は照合ができなかった場合に、第２カメラ４１２による撮影を行う旨を利用者Ｕに対して通知する。ＣＰＵ４０２は、例えば、ディスプレイ４０８の表示、音声案内等により、第２カメラ４１２により撮影を行う旨の通知を行うことができる。
　次いで、ＣＰＵ４０２は、第２カメラ４１２により、通知を受けて出口ゲート扉４１４の前に留まる利用者Ｕの撮影を行う（ステップＳ３２２）。これにより、ＣＰＵ４０２は、出口ゲート端末４０の出口ゲート扉４１４の前に到達して出口ゲート扉４１４の前に留まる利用者Ｕの第２対象顔画像を取得する。こうして、出口ゲート扉４１４の前で静止している利用者Ｕの顔画像である第２対象顔画像が取得される。
　第２カメラ４１２は、所定のフレームレートで動画を撮影し又は所定の時間間隔で静止画を撮影することにより、出口ゲート扉４１４の前の利用者Ｕについて複数の顔画像を取得することができる。この場合、ＣＰＵ４０２は、第２カメラ４１２により撮影された利用者Ｕの複数の顔画像のうち、最も品質の高い顔画像を、利用者Ｕの第２対象顔画像として選択して取得することができる。
　ＣＰＵ４０２は、第２カメラ４１２による撮影に際して、例えば、ディスプレイ４０８への表示、スピーカー等からの音声等により、利用者Ｕに対して案内を行うことができる。例えば、ＣＰＵ４０２は、第２対象顔画像において顔装着物が検知されていれば当該顔装着物を取り外すこと、第２カメラ４１２がディスプレイ４０８の方向を向くこと等を利用者Ｕに案内することができる。
　図２０は、第２カメラ４１２による撮影の際のディスプレイ４０８に表示される案内表示の一例を示している。図示するように、ディスプレイ４０８の表示により、顔装着物であるマスクを取り外すことを案内することができる。
　次いで、ＣＰＵ４０２は、第２対象顔画像について、管理サーバ５０に対して照合要求をネットワークＮＷを介して送信する（ステップＳ３２４）。これにより、ＣＰＵ４０２は、第２対象顔画像と、管理サーバ５０の利用者情報ＤＢ５０６ａに登録された複数の登録顔画像とを１：Ｎで照合することを管理サーバ５０に対して要求する。ＣＰＵ４０２は、第２対象顔画像から抽出された顔特徴量又は第２対象顔画像自体を照合要求とともに管理サーバ５０に送信する。
　管理サーバ５０のＣＰＵ５０２は、出口ゲート端末４０から第２対象顔画像の照合要求を受信すると、第２対象顔画像の照合を行う（ステップＳ３２６）。ＣＰＵ５０２は、出口ゲート端末４０から受信した第２対象顔画像の顔特徴量と、利用者情報ＤＢ５０６ａに登録された複数の登録顔画像の特徴量とを１：Ｎで照合する。第２対象顔画像の顔特徴量は、出口ゲート端末４０から受信したもの又は出口ゲート端末４０から受信した第２対象顔画像から抽出したものである。
　次いで、ＣＰＵ５０２は、第２対象顔画像の照合の結果を示す照合情報を出口ゲート端末４０にネットワークＮＷを介して送信する（ステップＳ３２８）。
　出口ゲート端末４０のＣＰＵ４０２は、管理サーバ５０から照合情報を受信する。ＣＰＵ４０２は、第２対象顔画像についての照合情報が、一致する登録顔画像が発見されて出口ゲート扉４１４の前の利用者Ｕの本人確認に成功したことを示す場合（ステップＳ３３０、ＹＥＳ）、ステップＳ３３６に移行する。
　なお、出口ゲート端末４０は、第２対象顔画像と登録顔画像との照合が一致しない場合には、第２カメラ４１２により利用者Ｕを撮影して利用者Ｕの第２対象顔画像を取得するステップＳ３２２を改めて実行して、第２対象顔画像の再撮影を行うことができる。出口ゲート端末４０は、第２対象顔画像の再撮影を１回だけ又は複数回行うことができる。
　また、管理サーバ５０のＣＰＵ５０２は、第１対象顔画像の照合又は第２対象顔画像の照合の結果、利用者Ｕに本人確認に成功した場合（ステップＳ３３２、ＹＥＳ）、ゲート利用可否情報の送信を行う（ステップＳ３３４）。すなわち、ＣＰＵ５０２は、本人確認に成功した利用者Ｕの利用者情報に関連付けられたゲート利用可否情報を利用者情報ＤＢ５０６ａから取得して出口ゲート端末４０にネットワークＮＷを介して送信する。
　出口ゲート端末４０のＣＰＵ４０２は、第２対象顔画像についての照合情報が、一致する登録顔画像が発見されずに利用者Ｕの本人確認に失敗したことを示す場合（ステップＳ３３０、ＮＯ）、対応処理を実行する（ステップＳ３３８）。この場合、第１対象顔画像の照合及び第２対象顔画像の照合のいずれによっても利用者Ｕの本人確認に失敗したことになる。ＣＰＵ４０２は、対応処理として、税関職員をゲート通路Ｐに呼び出すため、例えば、アラームを鳴らしたり、税関職員の端末宛に通知を送信したりすることができる。この場合、税関職員は、例えば、利用者Ｕを有人ブースＭ又は別室に誘導することができる。また、税関職員は、電子化ゲート２０の側方に設けられた検査台にて対面で税関審査を行った後、手動で開扉した出口ゲート扉４１４から利用者Ｕをゲート通路Ｐから退出させることができる。
　一方、第１対象顔画像の照合又は第２対象顔画像の照合により利用者Ｕの本人確認に成功してステップＳ３３６に移行したＣＰＵ４０２は、本人確認に成功した利用者Ｕについて、電子化ゲート２０の利用可否を判定する（ステップＳ３３６）。ＣＰＵ４０２は、管理サーバ５０から受信したゲート利用可否情報に基づき、電子化ゲート２０の利用可否を判定する。
　ＣＰＵ４０２は、電子化ゲート２０が利用できないと判定すると（ステップＳ３３６、ＮＯ）、対応処理を実行する（ステップＳ３３８）。この場合、第１対象顔画像の照合又は第２対象顔画像の照合により利用者Ｕの本人確認に成功したものの、その利用者Ｕは、課税対象であると判定されている者、リスクがあると判定されている者等である。ＣＰＵ４０２は、対応処理として、税関職員をゲート通路Ｐに呼び出すため、例えば、アラームを鳴らしたり、税関職員の端末宛に通知を送信したりすることができる。この場合も、税関職員は、上記と同様に利用者Ｕに対応することができる。
　一方、ＣＰＵ４０２は、電子化ゲート２０が利用できると判定すると（ステップＳ３３６、ＹＥＳ）、出口ゲート扉４１４を開扉する（ステップＳ３４０）。また、ＣＰＵ４０２は、案内表示器４２０の表示を、ゲート通路Ｐからの退出禁止を示す表示からゲート通路Ｐからの退出許可を示す表示に変更する。
　次いで、ＣＰＵ４０２は、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したか否かを判定し（ステップＳ３４２）、利用者Ｕの通過を待機する（ステップＳ３４２、ＮＯ）。ＣＰＵ４０２は、複数の通過検知センサ４１６の出力信号及びそれらの出力順に基づき、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したか否かを判定することができる。
　ＣＰＵ４０２は、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したと判定すると（ステップＳ３４２、ＹＥＳ）、出口ゲート扉４１４を閉扉する（ステップＳ３４４）。また、ＣＰＵ４０２は、案内表示器４２０の表示を、ゲート通路Ｐからの退出許可を示す表示からゲート通路Ｐからの退出禁止を示す表示に変更する。
　また、ＣＰＵ４０２は、利用者Ｕが出口ゲート端末４０を通過してゲート通路Ｐから退出したことを示す出口通過情報を入口ゲート端末３０に送信する（ステップＳ３４６）。なお、ＣＰＵ４０２は、ステップＳ３４４及びステップＳ３４６のいずれを際の順序で実行することもできるし、両ステップＳ３４４、Ｓ３４６を同時に実行することもできる。
　出口ゲート端末４０から出口通過情報を受信した入口ゲート端末３０のＣＰＵ３０２は、入口ゲート扉３０８を開扉する（ステップＳ３４８）。また、ＣＰＵ３０２は、案内表示器３１４の表示を、ゲート通路Ｐへの進入禁止を示す表示からゲート通路Ｐへの進入許可を示す表示に変更する。
　こうして、電子化ゲート２０は、利用者Ｕのゲート通路Ｐへの進入を待機する待機状態に移行する。
　このように、本実施形態によれば、キオスク端末１０において、旅券の読取り又は申告用コードの読取りの間に、生体情報の照合である顔照合に用いる撮影顔画像を取得する。したがって、本実施形態によれば、旅券の読取り及び申告用コードの読取りによる情報の取得と、撮影顔画像を用いた顔照合とを含むキオスク端末１０での手続を短時間で完了することができる。
　また、本実施形態によれば、電子化ゲート２０の出口ゲート端末４０において、出口ゲート端末４０に向かって移動する利用者Ｕを第１カメラ４１０で撮影して、生体情報の照合である顔照合に用いる第１対象顔画像を取得する。また、本実施形態によれば、予め判定されたゲート利用可否の判定結果に応じて、出口ゲート扉４１４を開扉する。したがって、本実施形態によれば、利用者Ｕが電子化ゲート２０の通過に要する時間を短縮することができる。
　［他の実施形態］
　上記実施形態において説明した情報処理装置は、他の実施形態によれば、図２１に示すように構成することもできる。図２１は、他の実施形態による情報処理装置の構成を示す概略図である。
　図２１に示すように、他の実施形態による情報処理装置１０００は、読取部１００２と、生体情報取得部１００４とを有する。読取部１００２は、利用者の媒体を読み取って、媒体から利用者の生体情報を含む情報を取得する。生体情報取得部１００４は、媒体の読取りの間に、利用者から利用者の生体情報を取得する。
　他の実施形態による情報処理装置１０００によれば、媒体の読取りの間に、読取部１００２に媒体を読み取らせる利用者から利用者の生体情報を取得するので、情報の取得と生体情報の照合とを短時間で完了することができる。
　［変形実施形態］
　本発明は、上記実施形態に限らず、種々の変形が可能である。
　例えば、上記実施形態では、キオスク端末１０において税関申告が行われる場合を例に説明したが、これに限定されるものではない。キオスク端末１０は、利用者による種々の申告を受け付けるように構成することができる。
　また、上記実施形態では、カメラ１１６、第１カメラ４１０及び第２カメラ４１２が利用者Ｕの生体情報として利用者Ｕの顔画像を撮影して取得する場合を例に説明したが、これに限定されるものではない。カメラ１１６、第１カメラ４１０及び第２カメラ４１２は、利用者Ｕの生体情報として、顔情報である顔画像のほか、虹彩画像等を取得するものであってもよい。
　また、上記実施形態によるキオスク端末１０は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による入口ゲート端末３０は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による出口ゲート端末４０は、一又は複数の装置からなるシステムとして構成することができる。また、上記実施形態による管理サーバ５０は、一又は複数の装置からなるシステムとして構成することができる。
　また、上記の各実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のコンピュータプログラムが記録された記録媒体はもちろん、そのコンピュータプログラム自体も各実施形態に含まれる。
　該記録媒体としては、例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ（Compact　Disc-Read　Only　Memory）、磁気テープ、不揮発性メモリカード、ＲＯＭを用いることができる。また、該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ（Operating　System）上で動作して処理を実行するものも各実施形態の範疇に含まれる。
　上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
　（付記１）
　前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得する読取部と、
　前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する生体情報取得部と
　を有する情報処理装置。
　（付記２）
　前記読取部により取得された前記生体情報と、前記生体情報取得部により取得された前記生体情報との照合を要求し又は前記照合を行う制御部を有する付記１記載の情報処理装置。
　（付記３）
　前記読取部は、
　　前記生体情報を含む第１の媒体を読み取って、前記第１の媒体から前記生体情報を含む第１の情報を取得する第１の読取部と、
　　第２の媒体に表示されたコードを読み取って、前記コードから第２の情報を取得する第２の読取部とを有し、
　前記生体情報取得部は、前記第１の媒体及び前記コードの少なくとも一方を読み取ると、前記利用者から前記利用者の前記生体情報を取得する付記１又は２に記載の情報処理装置。
　（付記４）
　前記読取部は、
　　前記生体情報を含む第１の媒体を読み取って、前記第１の媒体から前記生体情報を含む第１の情報を取得する第１の読取部と、
　　第２の媒体に表示されたコードを読み取って、前記コードから第２の情報を取得する第２の読取部とを有し、
　前記生体情報取得部は、前記第１の媒体及び前記コードのいずれか一方を読み取ると、前記利用者から前記利用者の前記生体情報を取得し、
　前記第１の媒体及び前記コードの他方を読み取ると、前記読取部により取得された前記生体情報と、前記生体情報取得部により取得された前記生体情報との照合を要求し又は前記照合を行う制御部を有する付記１記載の情報処理装置。
　（付記５）
　第１の読取部及び第２の読取部は、任意の順序で又は同時にそれぞれ前記第１の媒体及び前記コードを読取り可能である付記３又は４に記載の情報処理装置。
　（付記６）
　前記コードは、言語情報を含み、
　前記読取部は、前記コードから言語情報を取得し、
　前記言語情報に基づき、前記情報処理装置の使用言語を設定する言語設定部を有する付記３乃至５のいずれかに記載の情報処理装置。
　（付記７）
　前記第１の媒体は、前記利用者の旅券であり、
　前記第２の媒体は、税関申告に必要な申告情報を含む前記コードを表示する携帯端末である付記３乃至６のいずれかに記載の情報処理装置。
　（付記８）
　前記読取部よりも高い位置に設けられた表示部を有し、
　前記生体情報取得部は、前記読取部と前記表示部との間に設けられている付記１乃至７のいずれかに記載の情報処理装置。
　（付記９）
　前記読取部により取得された前記生体情報と前記生体情報取得部により取得された前記生体情報との照合結果、及び前記媒体から取得された前記情報についての判定結果に応じて、前記利用者に対する処理を実行する処理部を有する付記１乃至８のいずれかに記載の情報処理装置。
　（付記１０）
　前記表示部は、前記読取部により取得された前記生体情報と前記生体情報取得部により取得された前記生体情報との照合結果、及び前記媒体から取得された前記情報についての判定結果を表示する付記８記載の情報処理装置。
　（付記１１）
　前記生体情報取得部は、前記利用者の複数の顔画像のうちの最も高品質の前記顔画像を、前記利用者の前記生体情報として取得する付記１乃至１０のいずれかに記載の情報処理装置。
　（付記１２）
　読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、
　生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する情報処理方法。
　（付記１３）
　読取部と生体情報取得部とを有する情報処理装置に、
　前記読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、
　前記生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する
　ことを実行させるプログラムが記録された記録媒体。
１…情報処理システム
１０…キオスク端末
２０…電子化ゲート
３０…入口ゲート端末
４０…出口ゲート端末
５０…管理サーバ
６０…携帯端末

Claims (13)

  1. 　前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得する読取部と、
    　前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する生体情報取得部と
    　を有する情報処理装置。
  2. 　前記読取部により取得された前記生体情報と、前記生体情報取得部により取得された前記生体情報との照合を要求し又は前記照合を行う制御部を有する請求項１記載の情報処理装置。
  3. 　前記読取部は、
    　　前記生体情報を含む第１の媒体を読み取って、前記第１の媒体から前記生体情報を含む第１の情報を取得する第１の読取部と、
    　　第２の媒体に表示されたコードを読み取って、前記コードから第２の情報を取得する第２の読取部とを有し、
    　前記生体情報取得部は、前記第１の媒体及び前記コードの少なくとも一方を読み取ると、前記利用者から前記利用者の前記生体情報を取得する請求項１又は２に記載の情報処理装置。
  4. 　前記読取部は、
    　　前記生体情報を含む第１の媒体を読み取って、前記第１の媒体から前記生体情報を含む第１の情報を取得する第１の読取部と、
    　　第２の媒体に表示されたコードを読み取って、前記コードから第２の情報を取得する第２の読取部とを有し、
    　前記生体情報取得部は、前記第１の媒体及び前記コードのいずれか一方を読み取ると、前記利用者から前記利用者の前記生体情報を取得し、
    　前記第１の媒体及び前記コードの他方を読み取ると、前記読取部により取得された前記生体情報と、前記生体情報取得部により取得された前記生体情報との照合を要求し又は前記照合を行う制御部を有する請求項１記載の情報処理装置。
  5. 　第１の読取部及び第２の読取部は、任意の順序で又は同時にそれぞれ前記第１の媒体及び前記コードを読取り可能である請求項３又は４に記載の情報処理装置。
  6. 　前記コードは、言語情報を含み、
    　前記読取部は、前記コードから言語情報を取得し、
    　前記言語情報に基づき、前記情報処理装置の使用言語を設定する言語設定部を有する請求項３乃至５のいずれか１項に記載の情報処理装置。
  7. 　前記第１の媒体は、前記利用者の旅券であり、
    　前記第２の媒体は、税関申告に必要な申告情報を含む前記コードを表示する携帯端末である請求項３乃至６のいずれか１項に記載の情報処理装置。
  8. 　前記読取部よりも高い位置に設けられた表示部を有し、
    　前記生体情報取得部は、前記読取部と前記表示部との間に設けられている請求項１乃至７のいずれか１項に記載の情報処理装置。
  9. 　前記読取部により取得された前記生体情報と前記生体情報取得部により取得された前記生体情報との照合結果、及び前記媒体から取得された前記情報についての判定結果に応じて、前記利用者に対する処理を実行する処理部を有する請求項１乃至８のいずれか１項に記載の情報処理装置。
  10. 　前記表示部は、前記読取部により取得された前記生体情報と前記生体情報取得部により取得された前記生体情報との照合結果、及び前記媒体から取得された前記情報についての判定結果を表示する請求項８記載の情報処理装置。
  11. 　前記生体情報取得部は、前記利用者の複数の顔画像のうちの最も高品質の前記顔画像を、前記利用者の前記生体情報として取得する請求項１乃至１０のいずれか１項に記載の情報処理装置。
  12. 　読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、
    　生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する情報処理方法。
  13. 　読取部と生体情報取得部とを有する情報処理装置に、
    　前記読取部により、前記利用者の媒体を読み取って、前記媒体から前記利用者の生体情報を含む情報を取得し、
    　前記生体情報取得部により、前記媒体の読取りの間に、前記利用者から前記利用者の生体情報を取得する
    　ことを実行させるプログラムが記録された記録媒体。
PCT/JP2018/038217 2018-10-12 2018-10-12 情報処理装置、情報処理方法及び記録媒体 WO2020075306A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2020549930A JP7006804B2 (ja) 2018-10-12 2018-10-12 情報処理装置、情報処理方法及びプログラム
PCT/JP2018/038217 WO2020075306A1 (ja) 2018-10-12 2018-10-12 情報処理装置、情報処理方法及び記録媒体
EP18936623.0A EP3866102A4 (en) 2018-10-12 2018-10-12 INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING PROCESS AND RECORDING MEDIA
US16/367,890 US11182997B2 (en) 2018-10-12 2019-03-28 Information processing apparatus, information processing method, and storage medium
US17/479,083 US20220005302A1 (en) 2018-10-12 2021-09-20 Information processing apparatus, information processing method, and storage medium
JP2021210063A JP7223302B2 (ja) 2018-10-12 2021-12-24 情報処理装置、情報処理方法及び記録媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/038217 WO2020075306A1 (ja) 2018-10-12 2018-10-12 情報処理装置、情報処理方法及び記録媒体

Publications (1)

Publication Number Publication Date
WO2020075306A1 true WO2020075306A1 (ja) 2020-04-16

Family

ID=70159037

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/038217 WO2020075306A1 (ja) 2018-10-12 2018-10-12 情報処理装置、情報処理方法及び記録媒体

Country Status (4)

Country Link
US (2) US11182997B2 (ja)
EP (1) EP3866102A4 (ja)
JP (1) JP7006804B2 (ja)
WO (1) WO2020075306A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4058156A4 (en) * 2020-01-24 2024-04-10 Position Imaging, Inc. KIOSK WITH OBJECT IDENTIFICATION, REGISTRATION AND TRACKING CAPABILITY WITH LIGHT AND/OR SOUND GUIDANCE
US20230060106A1 (en) * 2020-02-18 2023-02-23 Nec Corporation Gate apparatus, gate apparatus control method, and storage medium
US11769360B1 (en) * 2020-08-07 2023-09-26 Interactive Touchscreen Solutions, Inc. Interactive touchless information exchange system
CN112184973A (zh) * 2020-11-02 2021-01-05 深圳市软筑信息技术有限公司 指尖监控申报一体机及出入人员信息申报方法
CN113257434B (zh) * 2021-06-08 2024-04-19 广东嘉贸通科技有限公司 旅客事前申报快速通关方法及系统
CN113570759A (zh) * 2021-08-04 2021-10-29 樊哲 一种智能锁防盗系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002304448A (ja) 2001-04-03 2002-10-18 Sanpuranetto:Kk 出入国管理用カードシステム
JP2012150688A (ja) * 2011-01-20 2012-08-09 Seiko Epson Corp 出入国書類印刷装置および出入国書類印刷システム
WO2012144105A1 (ja) * 2011-04-19 2012-10-26 株式会社日立製作所 生体認証システム
JP2016053896A (ja) * 2014-09-04 2016-04-14 グローリー株式会社 ゲートシステムおよびゲート通過の制御方法
JP2018032178A (ja) * 2016-08-24 2018-03-01 株式会社沖データ 画像形成装置
JP2018109935A (ja) * 2016-12-28 2018-07-12 グローリー株式会社 顔照合装置及び顔照合方法
JP2018124622A (ja) * 2017-01-30 2018-08-09 Ｎｅｃプラットフォームズ株式会社 入場受付端末、入場受付方法、入場受付プログラム、および入場受付システム

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6085976A (en) * 1998-05-22 2000-07-11 Sehr; Richard P. Travel system and methods utilizing multi-application passenger cards
US6698653B1 (en) * 1999-10-28 2004-03-02 Mel Diamond Identification method, especially for airport security and the like
JP2002008070A (ja) * 2000-06-26 2002-01-11 Toshiba Corp 通行審査システム
US6988073B2 (en) * 2001-05-10 2006-01-17 International Business Machines Corporation Method, system, and product for facilitating international travel with respect to immigration
US20020198731A1 (en) * 2001-06-26 2002-12-26 Barnes Jessica M. Method and apparatus for processing an international passenger
US20050128304A1 (en) * 2002-02-06 2005-06-16 Manasseh Frederick M. System and method for traveler interactions management
US20040078335A1 (en) * 2002-08-29 2004-04-22 Calvesio Raymond V. Transportation security system and method that supports international travel
US8160892B2 (en) * 2002-11-25 2012-04-17 Accenture Global Services Limited Border management solution
US20040172364A1 (en) * 2003-02-24 2004-09-02 Murray Thomas W. Commercial travel passenger identification security system and process
US7817013B2 (en) * 2003-09-05 2010-10-19 Honeywell International Inc. Distributed stand-off ID verification compatible with multiple face recognition systems (FRS)
CN1954331B (zh) * 2004-03-04 2016-06-01 美国邮政服务公司 用于提供电子海关表单的方法和系统
DE102005038092A1 (de) * 2005-08-11 2007-02-15 Giesecke & Devrient Gmbh Verfahren und Einrichtung zur Prüfung eines elektronischen Passes
US20070267490A1 (en) * 2006-05-18 2007-11-22 Hand Held Products, Inc. Multipurpose optical reader
US20090249381A1 (en) * 2008-03-31 2009-10-01 General Electric Company Player-readable code on optical media
EP2291795A1 (en) * 2008-07-02 2011-03-09 C-True Ltd. Face recognition system and method
CA2639144C (en) * 2008-08-26 2015-01-27 Vancouver International Airport Authority Method and system for inspection of travelers
RS51531B (en) * 2009-05-29 2011-06-30 Vlatacom D.O.O. MANUAL PORTABLE DEVICE FOR VERIFICATION OF PASSENGERS AND PERSONAL DOCUMENTS, READING BIOMETRIC DATA
KR101184432B1 (ko) * 2009-06-04 2012-09-20 인천국제공항공사 출입국 절차 자동화 장치 및 그 자동화 방법
EP2710514A4 (en) * 2011-05-18 2015-04-01 Nextgenid Inc REGISTRATION TERMINAL HAVING MULTIPLE BIOMETRIC APPARATUSES INCLUDING BIOMETRIC INSCRIPTION AND VERIFICATION SYSTEMS, FACIAL RECOGNITION AND COMPARISON OF FINGERPRINTS
US8783566B1 (en) * 2011-06-14 2014-07-22 Norman J. Drew Electronic registration kiosk for managing individual healthcare information and services
US9789977B2 (en) * 2011-07-29 2017-10-17 Ncr Corporation Security kiosk
US9396595B1 (en) * 2012-01-24 2016-07-19 Isaac S. Daniel System and method for authorizing entry into a country using an inflight immigration card
US9087204B2 (en) * 2012-04-10 2015-07-21 Sita Information Networking Computing Ireland Limited Airport security check system and method therefor
US9269224B2 (en) * 2013-03-11 2016-02-23 Cfph, Llc Devices for gaming
US9202324B1 (en) * 2013-04-12 2015-12-01 Isaac S. Daniel System and method of authenticating an immigration visa card holder using an interactive immigration card
GB2515142B (en) * 2013-06-14 2020-12-16 Sita Information Networking Computing Ireland Ltd Portable user control system and method therefor
KR101411951B1 (ko) * 2013-06-19 2014-07-03 한진정보통신(주) 다국어 정보 안내 시스템 및 장치
US10885598B2 (en) * 2013-09-20 2021-01-05 Dallas/Fort Worth International Airport Apparatus, system, and method supporting compliance with customs/border requirements
US20150088778A1 (en) * 2013-09-24 2015-03-26 Adam Y. Tsao System and method for verifying a travelers authorization to enter into a jurisdiction using a software application installed on a personal electronic device
US20150193898A1 (en) * 2014-01-08 2015-07-09 Honeywell International Inc. System and method for providing airport security
JPWO2015136938A1 (ja) * 2014-03-14 2017-04-06 株式会社東芝 情報処理方法および情報処理システム
US10366395B2 (en) * 2014-04-11 2019-07-30 Infocus Corporation Interactive and custom-support kiosk, methods and system
US9355310B2 (en) * 2014-05-27 2016-05-31 International Business Machines Corporation Monitoring individuals using distributed data sources
US9875608B1 (en) * 2014-09-16 2018-01-23 American Wagering, Inc. Sports-wagering kiosk and method of using and operating the same
US20160078581A1 (en) * 2014-09-16 2016-03-17 The Government of the United States of America, as Represented by the Secretary, Department of Homel Mobile customs declaration system and method
US11538126B2 (en) * 2015-07-30 2022-12-27 The Government of the United States of America, as represented by the Secretary of Homeland Security Identity verification system and method
BE1023513B1 (fr) * 2015-10-07 2017-04-12 Accenture Global Services Limited Inspection automatisee a la frontiere
JP2018045340A (ja) 2016-09-13 2018-03-22 株式会社日立製作所 出入国審査システム及び方法
CN110073418B (zh) * 2016-12-16 2021-08-06 松下知识产权经营株式会社 门禁系统控制装置以及门禁系统的控制方法
GB201710560D0 (en) * 2017-06-30 2017-08-16 Norwegian Univ Of Science And Tech (Ntnu) Detection of manipulated images
JP6944295B2 (ja) * 2017-07-18 2021-10-06 東芝テック株式会社 販売データ処理装置及びプログラム
FR3083632B1 (fr) * 2018-07-09 2020-12-18 Airbus Procede de controle d'identite des occupants d'un aeronef et dispositif pour sa mise en œuvre

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002304448A (ja) 2001-04-03 2002-10-18 Sanpuranetto:Kk 出入国管理用カードシステム
JP2012150688A (ja) * 2011-01-20 2012-08-09 Seiko Epson Corp 出入国書類印刷装置および出入国書類印刷システム
WO2012144105A1 (ja) * 2011-04-19 2012-10-26 株式会社日立製作所 生体認証システム
JP2016053896A (ja) * 2014-09-04 2016-04-14 グローリー株式会社 ゲートシステムおよびゲート通過の制御方法
JP2018032178A (ja) * 2016-08-24 2018-03-01 株式会社沖データ 画像形成装置
JP2018109935A (ja) * 2016-12-28 2018-07-12 グローリー株式会社 顔照合装置及び顔照合方法
JP2018124622A (ja) * 2017-01-30 2018-08-09 Ｎｅｃプラットフォームズ株式会社 入場受付端末、入場受付方法、入場受付プログラム、および入場受付システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3866102A4

Also Published As

Publication number Publication date
US20200118368A1 (en) 2020-04-16
JP7006804B2 (ja) 2022-01-24
US11182997B2 (en) 2021-11-23
US20220005302A1 (en) 2022-01-06
EP3866102A1 (en) 2021-08-18
EP3866102A4 (en) 2021-10-13
JPWO2020075306A1 (ja) 2021-09-02

Similar Documents

Publication Publication Date Title
WO2020075307A1 (ja) ゲート装置、ゲート装置の制御方法及び記録媒体
WO2020075306A1 (ja) 情報処理装置、情報処理方法及び記録媒体
WO2020075308A1 (ja) 情報処理装置
EP2657875B1 (en) Authentication card, authentication system, guidance method, and program
KR101939696B1 (ko) 사용자 무의식형 멀티모달 출입통제시스템
JP2022040245A (ja) 顔照合システム、顔照合装置、顔照合方法、及び記録媒体
CN105303155B (zh) 虹膜识别设备及其操作方法
JP2024116401A (ja) ゲート装置、ゲートシステム、ゲート制御方法
US20230135416A1 (en) Facial authentication apparatus and control method for facial authentication apparatus
KR101548624B1 (ko) 홍채의 포커싱이 자동 조절되는 홍채 인식 시스템 및 그 방법
CN108492417B (zh) 快速人证核验方法及人证核验系统
JP7476995B2 (ja) 情報処理装置、情報処理方法及び記録媒体
JP7223302B2 (ja) 情報処理装置、情報処理方法及び記録媒体
JP7537498B2 (ja) ゲート装置、制御方法、プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18936623

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020549930

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018936623

Country of ref document: EP

Effective date: 20210512