WO2024062571A1 - 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体 - Google Patents

情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体 Download PDF

Info

Publication number
WO2024062571A1
WO2024062571A1 PCT/JP2022/035236 JP2022035236W WO2024062571A1 WO 2024062571 A1 WO2024062571 A1 WO 2024062571A1 JP 2022035236 W JP2022035236 W JP 2022035236W WO 2024062571 A1 WO2024062571 A1 WO 2024062571A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
authentication
information
smile
cumulative
Prior art date
Application number
PCT/JP2022/035236
Other languages
English (en)
French (fr)
Inventor
秀治 菊地
宏嘉 澤井
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to PCT/JP2022/035236 priority Critical patent/WO2024062571A1/ja
Publication of WO2024062571A1 publication Critical patent/WO2024062571A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Definitions

  • the present disclosure relates to an information processing device, an authentication system, an authentication method, and a non-transitory computer-readable medium.
  • Patent Document 1 discloses that when a user is smiling in an image taken during face authentication at a final location, a composite image is created using a photo frame (template) according to a smile point indicating the degree of smile. It is stated that it is generated.
  • Patent Document 1 the smile level is determined only at the final point of the entertainment facility. It is hoped that facial recognition technology will be used to further improve the appeal of entertainment facilities.
  • An object of the present disclosure is to provide an information processing device, an authentication system, an authentication method, and a non-transitory computer-readable medium that can further improve the appeal of entertainment facilities.
  • An information processing device performs face authentication by comparing authentication facial information of a user acquired at each of a plurality of points in a facility with registration facial information registered in advance.
  • an authentication means for controlling the degree of smile of the user from the face information for authentication; and a smile degree calculation means for calculating the degree of smile of the user from the face information for authentication; Cumulative smile degree generating means for accumulating the smile degrees of the user to generate a cumulative smile degree; and output control means for controlling output of a comparison result between the cumulative smile degree of the user and the cumulative smile degree of another user.
  • An authentication system includes an authentication terminal installed at a plurality of locations within a facility, and an information processing device capable of communicating with the authentication terminal, and the information processing device is configured to communicate with a user.
  • the authentication terminal includes user information registration means for registering registration face information in a storage means, the authentication terminal includes authentication face information acquisition means for acquiring authentication face information of the user, and the information processing device an authentication means for performing face authentication by comparing the user's authentication face information acquired at each of the plurality of points with the registration face information, and when the face authentication is successful; a smile degree calculating means for calculating a smile degree of the user from the authentication face information; and a smile degree calculation means for calculating a smile degree of the user from the authentication face information, and an accumulation of the smile degree of the user calculated from the authentication face information acquired at each of the plurality of points in the facility. and output control means for causing the authentication terminal to output a comparison result between the cumulative smile degree of the user and the cumulative smile degree of other users. Be prepared.
  • the authentication method is a method in which a computer controls face authentication by comparing a user's authentication face information acquired at each of a plurality of points within a facility with pre-registered registration face information, calculates the user's smile degree from the authentication face information, accumulates the smile degrees of the user calculated from the authentication face information acquired at each of the plurality of points within the facility to generate a cumulative smile degree, and controls output of a comparison result between the user's cumulative smile degree and the cumulative smile degrees of other users.
  • a non-transitory computer-readable medium stores, in a computer, authentication facial information of a user acquired at each of a plurality of points within a facility, and registration facial information registered in advance. a process of controlling face authentication by comparing the face information; a process of calculating the smiling degree of the user from the face information for authentication; and a process of calculating the degree of smile of the user from the face information for authentication, and a process for controlling face authentication by comparing the face information for authentication from the face information for authentication acquired at each of the plurality of points in the facility.
  • a process of accumulating the calculated smile degree of the user to generate a cumulative smile degree, and a process of controlling output of a comparison result between the cumulative smile degree of the user and the cumulative smile degree of another user. Stores the program to be executed.
  • FIG. 1 is a block diagram illustrating an example of an information processing device according to a first embodiment.
  • FIG. 3 is a flowchart illustrating an example of an authentication method according to the first embodiment.
  • FIG. 2 is a block diagram illustrating an example of an authentication system according to a second embodiment.
  • FIG. 2 is a block diagram illustrating an example of an authentication terminal according to a second embodiment.
  • FIG. 2 is a block diagram illustrating an example of an information processing device according to a second embodiment.
  • 7 is a diagram illustrating an example of a data structure of user information according to Embodiment 2.
  • FIG. 7 is a diagram illustrating an example of a data structure of cumulative smile level information according to the second embodiment.
  • FIG. 7 is a diagram showing an example of a data structure of excursion history information according to Embodiment 2.
  • FIG. 7 is a diagram illustrating an example of a data structure of privilege grant conditions according to Embodiment 2.
  • FIG. 10 is a flowchart illustrating an example of a user information registration process in an authentication method according to a second embodiment.
  • 10 is a flowchart illustrating an example of an authentication method according to a second embodiment.
  • 7 is a flowchart illustrating an example of an authentication method according to a second embodiment.
  • 7 is a diagram illustrating an example of a display unit of an authentication terminal according to Embodiment 2.
  • FIG. 10 is a flowchart illustrating an example of a user information registration process in an authentication method according to a second embodiment.
  • 10 is a flowchart illustrating an example of an authentication method according to a second embodiment.
  • 7 is a flowchart illustrating an example of an authentication method according to a second embodiment.
  • 7 is a diagram illustrating
  • FIG. 1 is a block diagram illustrating an example of an information processing apparatus 10 according to the first embodiment.
  • the information processing device 10 executes, for example, facial recognition processing of a user acquired at each of a plurality of points in an entertainment facility such as a theme park.
  • the user is a visitor to the entertainment facility.
  • the information processing device 10 is capable of communicating with authentication terminals (not shown) installed at each of a plurality of locations in the entertainment facility. Further, the information processing device 10 may be able to communicate with a user terminal (not shown) carried by the user. Further, the information processing device 10 may be able to communicate with a registration terminal (not shown) installed inside or outside the entertainment facility.
  • the information processing device 10 includes a storage unit 11, a registration unit 12, an authentication unit 13, a smile level calculation unit 14, a generation unit 15, and an output control unit 16.
  • the storage unit 11 is also called storage means.
  • the storage unit 11 stores face information for registration.
  • the registration unit 12 is also called user information registration means.
  • the registration unit 12 registers user information in the storage unit 11.
  • the user information includes at least registration face information of the user.
  • the registration face information of the user is, for example, information extracted from a face image generated by photographing the user's face.
  • a face image obtained by photographing the user's face by one of the authentication terminals installed at each of a plurality of points in the entertainment facility may be transmitted from the authentication terminal to the information processing device 10.
  • the information processing device 10 may include a camera (not shown), and the camera may photograph the user's face to obtain a facial image.
  • the user's face may be photographed by a camera of a user terminal that can communicate with the information processing device 10, and the facial image may be input to the information processing device 10 from the user terminal.
  • the authentication unit 13 is also called an authentication means.
  • the authentication unit 13 performs facial recognition by comparing the user's authentication face information acquired by authentication terminals installed at each of a plurality of points in the entertainment facility with the registration face information stored in the storage unit 11. Control authentication. Note that the biometric authentication process may be performed in the information processing device 10, or may be performed in another device, for example, an authentication terminal (not shown).
  • the smile level calculation unit 14 is also called smile level calculation means.
  • the smile level calculation unit 14 calculates the user's smile level from the authentication face information when face authentication is successful.
  • the calculated smile level is supplied to the generation unit 15.
  • the generation unit 15 is also called cumulative smile level generation means.
  • the generation unit 15 generates a cumulative smile level by accumulating the user's smile level calculated from the authentication face information acquired at each of a plurality of points within the facility.
  • the generated cumulative smile level is supplied to the output control unit 16.
  • the output control section 16 is also called output control means.
  • the output control unit 16 controls the output of the comparison result between the user's cumulative smile level and the cumulative smile level of other users at the authentication terminal. Specifically, the output control unit 16 generates a comparison result between the user's cumulative smile level and the cumulative smile level of other users, and controls the output of the authentication terminal to display the comparison result.
  • FIG. 2 is a flowchart showing the authentication method according to the first embodiment.
  • the registration unit 12 registers the user's face information for registration in the storage unit 11 (step S10).
  • the authentication unit 13 receives the facial information for authentication from the authentication terminals installed at each of the plurality of points in the entertainment facility, the authentication unit 13 performs facial authentication by comparing the registered facial information with the facial information for authentication. (Step S11). If face authentication is not successful (No in step S12), this process ends. On the other hand, if the face authentication is successful (Yes in step S12), the smile degree calculation unit 14 calculates the user's smile degree from the authentication face information (step S13).
  • the generation unit 15 accumulates the smile degrees calculated in step S13 to generate a cumulative smile degree (step S14). Specifically, the generation unit 15 adds the smile degree calculated in step S13 to the smile degree accumulated before the face authentication in step S11 to generate a cumulative smile degree.
  • the output control unit 16 causes the authentication terminal to output a comparison result between the cumulative smile degree of the user and the cumulative smile degree of other users (step S15), and ends this process.
  • the degree of smile of the user at each point is calculated from the authentication face information received from the authentication terminal installed at each of the plurality of points of the entertainment facility, A cumulative smile level is generated by accumulating the calculated smile levels. Then, the authentication terminal outputs a comparison result (ranking) between the cumulative smile level of the user and the cumulative smile levels of other users. Therefore, compared to the case where the smile level is determined only at the final point of the entertainment facility, it is possible to further improve the attractiveness of the entertainment facility using facial recognition technology.
  • the information processing device 10 includes a processor, a memory, and a storage device as components not shown. Further, the storage device stores a computer program in which the processing of the authentication method according to the present embodiment is implemented. Then, the processor loads a computer program from the storage device into the memory and executes the computer program. Thereby, the processor realizes the functions of the registration section 12, the authentication section 13, the smile level calculation section 14, the generation section 15, and the output control section 16.
  • the registration unit 12, the authentication unit 13, the smile level calculation unit 14, the generation unit 15, and the output control unit 16 may each be realized by dedicated hardware. Further, a part or all of each component of each device may be realized by a general-purpose or dedicated circuit, a processor, etc., or a combination thereof. These may be configured by a single chip or multiple chips connected via a bus. A part or all of each component of each device may be realized by a combination of the circuits and the like described above and a program. Further, as the processor, a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), an FPGA (Field-programmable Gate Array), etc. can be used.
  • a CPU Central Processing Unit
  • GPU Graphics Processing Unit
  • FPGA Field-programmable Gate Array
  • FIG. 3 is a block diagram showing the overall configuration of the authentication system 100 according to the second embodiment.
  • the authentication system 100 is a computer system that performs biometric authentication of the user U at an entertainment facility such as a theme park.
  • biometric authentication will be described as an example of biometric authentication, but the present invention is not limited to this.
  • the authentication system 100 includes authentication terminals 200-1, 200-2, ... 200-i, ... 200-n (1 ⁇ i ⁇ n, n is a positive integer) and an information processing device 300. .
  • the authentication terminals 200-1, 200-2, . . . 200-i, . . . 200-n and the information processing device 300 can communicate with each other via the network N.
  • the information processing device 300 may be able to communicate with a user terminal (not shown) carried by the user.
  • the information processing device 300 may be able to communicate with a registration terminal (not shown) installed inside or outside the entertainment facility.
  • the authentication terminals 200-1, 200-2, . . . 200-i, . . . 200-n may be able to communicate with each other via the user terminal and the network N.
  • the network N is a wired or wireless communication line.
  • the authentication terminals 200-1, 200-2, . . . 200-i, . 200-n may be simply referred to as the authentication terminal 200 when referred to without distinction.
  • the authentication terminal 200 is, for example, a digital signage installed at each of a plurality of points 1, 2, ... point i, ... point n of the entertainment facility.
  • FIG. 4 is a block diagram showing an example of the authentication terminal 200.
  • the authentication terminal 200 includes a camera 210, a storage section 220, a memory 230, a communication section 240, an output section 250, and a control section 260.
  • the camera 210 performs photography under the control of the control unit 260.
  • the camera 210 photographs the face of the user U under the control of the control unit 260.
  • the storage unit 220 is a storage device in which a program 221 for realizing each function of the authentication terminal 200 is stored.
  • the memory 230 is a volatile storage device such as a RAM, and is a storage area for temporarily holding information when the control unit 260 operates.
  • the communication unit 240 is a communication interface with the network N.
  • the output unit 250 outputs the information processing result of the control unit 260.
  • the output section 250 includes a display section 251 and an audio output section 252.
  • the display unit 251 is a display device that displays information processing results of the control unit 260.
  • the authentication terminal 200 may include an input section (not shown) that receives input, and the display section 251 and the input section may be integrally configured like a touch panel.
  • the audio output unit 252 includes a speaker (not shown) and outputs the information processing result of the control unit 260 as audio.
  • the control unit 260 is a processor that controls each component of the authentication terminal 200, that is, a control device.
  • the control unit 260 loads the program 221 from the storage unit 220 into the memory 230 and executes the program 221. Thereby, the control section 260 realizes the functions of the image acquisition section 261, the registration information acquisition section 262, the payment section 263, and the output control section 264.
  • the image acquisition unit 261 is also called authentication face information acquisition means.
  • the image acquisition unit 261 controls the camera 210, photographs the face of the user U, and generates an authentication face image that includes at least the face area of the user U. Then, the image acquisition unit 261 acquires the authentication face image and the date and time of photographing from the camera 210.
  • the image acquisition unit 261 supplies the authentication face image and the shooting date and time to the communication unit 240, and provides the communication unit 240 with the authentication face image and the shooting date and time, and the location information of the authentication terminal 200 (point 1, point 2, etc.). . . . point i, . . . point n) are transmitted to the information processing device 300.
  • the image acquisition unit 261 may control the camera 210 to photograph the face of the user U to generate a registration face image that includes at least the face area of the user U.
  • the image acquisition unit 261 may then supply the registration face image to the communication unit 240 and cause the communication unit 240 to transmit the registration face image to the information processing device 300.
  • the registration face image may be photographed at a user terminal (not shown) and transmitted from the user terminal to the information processing apparatus 300.
  • the facial image for registration may be photographed at a registration terminal installed inside or outside the entertainment facility, and may be transmitted from the registration terminal to the information processing device 300.
  • the registration information acquisition unit 262 acquires user U's registration information.
  • the registered information of the user U includes the user U's name, address, telephone number, information necessary for payment, payment information, benefit information, etc.
  • the information necessary for payment includes the card number, expiration date, etc. of the card used for payment.
  • the payment information includes the name of the product or service purchased by the user U, the amount of the product or service, the date and time of purchase, and the like.
  • the name of the product purchased by user U is the name of the food or drink that user U ate at the entertainment facility.
  • the name of the service purchased by user U is the name of the attraction that user U experienced at the entertainment facility.
  • the benefit information includes the number of points earned, coupons, and the like.
  • the registration information may be input to the authentication terminal 200 by the user U operating an input section (not shown) of the authentication terminal 200.
  • the registration information acquisition unit 262 includes a card reader, and may acquire the registration information of the user U by reading a driver's license or a credit card, for example. Then, the registration information acquisition unit 262 supplies the registration information of the user U to the communication unit 240 and causes the communication unit 240 to transmit the registration information to the information processing device 300.
  • the registration information may be transmitted from a user terminal (not shown) to the information processing device 300. Further, the registration information may be transmitted to the information processing device 300 from a registration terminal installed inside or outside the entertainment facility.
  • the payment unit 263 executes the payment when the face authentication for making the payment at the authentication terminal 200 is successful. Specifically, the payment unit 263 acquires information necessary for the payment of the user U whose face authentication has been successfully performed from the information processing device 300, and executes the payment. The payment unit 263 acquires information necessary for payment from the registration information 312C associated with the user ID 312A received from the information processing device 300 together with the face authentication result. Further, after the payment is completed, the payment unit 263 supplies the payment information of the user U to the communication unit 240, and causes the communication unit 240 to transmit the payment information to the information processing device 300.
  • the output control unit 264 controls the output unit 250, causes the output unit 250 to output the information processing result, and notifies the user U of the information processing result. For example, when the output control unit 264 receives an output instruction (described later) from the information processing device 300, it causes the output unit 250 to output a comparison result (described later). Further, the output control unit 264 causes the output unit 250 to output the face authentication result, and notifies the user U of the face authentication result.
  • FIG. 5 is a block diagram showing an example of the information processing device 300.
  • the information processing device 300 includes a storage section 310, a memory 320, a communication section 330, and a control section 340.
  • the storage unit 310 is a storage device in which a program 311 for realizing each function of the information processing device 300 is stored.
  • the memory 320 is a volatile storage device such as a RAM, and is a storage area for temporarily holding information when the control unit 340 operates.
  • the communication unit 330 is a communication interface with the network N.
  • the storage unit 310 stores user information 312. Therefore, the storage unit 310 is also called storage means.
  • FIG. 6 shows an example of the user information 312. As shown in FIG. 6, the user information 312 is information in which a user ID 312A, registration face information 312B, and registration information 312C are associated with each other. Note that the user information 312 may include management information such as the date and time when the registration face image was photographed.
  • the storage unit 310 stores cumulative smile level information 313.
  • FIG. 7 shows an example of the cumulative smile level information 313.
  • the cumulative smile level information 313 is information in which the user ID 313A and the cumulative smile level 313B are associated with each other.
  • the storage unit 310 stores excursion history information 314.
  • FIG. 8 shows an example of the excursion history information 314.
  • the tour history information 314 is information in which a user ID 314A and a tour history 314B are associated with each other.
  • the excursion history 314B is the excursion history of the user U at the entertainment facility.
  • the excursion history 314B is the date and time of the photographing of the authentication face image of the user U and the location information of the authentication terminal 200, which are received from the authentication terminal 200.
  • the excursion history 314B may include, in addition to the photographing date and time and location information of the authentication face image of the user U, the smile level calculated from the authentication face image.
  • the storage unit 310 can store the history of the smile level of the user U as the excursion history information 314. Therefore, the operator of the entertainment facility can know in which areas of the entertainment facility the smile level is low, or in other words, the customer satisfaction level is low.
  • the storage unit 310 stores benefit granting conditions 315.
  • FIG. 9 shows an example of the privilege granting conditions 315.
  • the benefit provision condition 315 is information in which the cumulative smile level 315A and the benefit 315B are associated with each other.
  • the privilege granting condition 315 may be information in which a round trip distance and a privilege are associated with each other.
  • the control unit 340 is a processor, or control device, that controls each component of the information processing device 300.
  • the control unit 340 loads the program 311 from the storage unit 310 into the memory 320 and executes the program 311. In this way, the control unit 340 realizes the functions of the registration unit 341, authentication unit 342, smile degree calculation unit 343, generation unit 344, history update unit 345, bonus granting unit 346, output control unit 347, and notification unit 348.
  • the registration unit 341 is also called a user information registration means.
  • the registration unit 341 registers the user information 312 in the storage unit 310.
  • the registration unit 341 receives a registration face image and registration information from any one of the authentication terminal 200, a user terminal (not shown), and a registration terminal (not shown)
  • the registration unit 341 acquires registration face information 312B from the registration face image.
  • the registration unit 341 associates the user ID 312A, the registration face information 312B, and the registration information 312C, and stores them in the storage unit 310 as user information 312.
  • the face information may be a set of feature points extracted from a face image.
  • the registration unit 341 detects a face area included in the registration face image, extracts feature points from the detected face area, and sets information on the extracted feature points as registration face information 312B.
  • the registration unit 341 also generates a user ID 312A.
  • the user ID 312A may be input to the authentication terminal 200, the user terminal (not shown), or the registration terminal (not shown) by the user U operating an input unit (not shown) of the authentication terminal 200, the user terminal (not shown), or the registration terminal (not shown).
  • the user ID 312A may be transmitted to the information processing device 300 from the authentication terminal 200, the user terminal (not shown), or the registration terminal (not shown) together with a face image for registration and registration information.
  • the password may be transmitted to the information processing device 300 from the authentication terminal 200, the user terminal (not shown), or the registration terminal (not shown) together with the user ID 312A.
  • the registration unit 341 may associate the user ID 312A, the password, the face information for registration 312B, and the registration information 312C, and store them in the storage unit 310 as user information 312.
  • management information such as the date and time of shooting of a registration face image is transmitted from either the authentication terminal 200, a user terminal (not shown), or a registration terminal (not shown)
  • the registration unit 341 may associate the user ID 312A, registration face information 312B, registration information 312C, and the management information, and store them in the memory unit 310 as user information 312.
  • the authentication unit 342 is also called an authentication means.
  • the authentication unit 342 executes face authentication when receiving the authentication face image from the authentication terminal 200. Then, the authentication unit 342 acquires the authentication face information from the authentication face image transmitted from the authentication terminal 200, and performs face authentication by comparing the registration face information 312B with the authentication face information.
  • the method for acquiring the face information for authentication from the face image for authentication is the same as the method for acquiring the face information for registration 312B from the face image for registration in the registration unit 341, so the description thereof will be omitted. Further, when the authentication face information and the registration face information 312B match, the authentication unit 342 refers to the user information 312 and acquires the user ID 312A associated with the registration face information 312B.
  • the authentication unit 342 supplies the notification unit 348 with the presence or absence of a match in the face information and the user ID 312A. Further, when the authentication face information and the registration face information 312B match, the authentication unit 342 supplies the authentication face information to the smile level calculation unit 343. Whether or not the facial information matches corresponds to the success or failure of authentication. Note that the facial information matches (match exists) when the matching degree is greater than or equal to a predetermined value. Note that the face authentication process may be performed in another device, for example, the authentication terminal 200. In this case, the authentication unit 342 may control face authentication processing performed by another device.
  • the smile level calculation unit 343 is also called smile level calculation means.
  • the smile level calculation unit 343 calculates the smile level of the user U from the authentication face information when face authentication is successful.
  • the calculated smile level is supplied to the generation unit 344. Further, the calculated smile level may be supplied to the history update unit 345.
  • the smile degree calculation unit 343 may extract feature points of facial organs such as the eyes and mouth in the face region of the user U, and calculate the smile degree based on the coordinates of each extracted feature point.
  • the smile level calculation unit 343 may calculate the smile level using a trained classifier.
  • the classifier may be a support vector machine (SVM) that inputs feature amounts of facial organs and outputs whether or not the smile level is equal to or higher than a predetermined smile level.
  • the classifier may be a convolutional neural network (CNN) that inputs the face region of the photographed image and outputs the smile level.
  • the method for calculating the smile level is not limited to the above method, and any existing method may be used.
  • the smile level calculation unit 343 calculates the smile level based on the smile level of the companion's face area in addition to the smile level of the user U's face area.
  • the smile level may be calculated.
  • the smile degree calculation unit 343 may calculate the average value of the smile degree of the user U's facial area and the smile degree of the companion's facial area as the smile degree.
  • the generation unit 344 is also called cumulative smile level generation means.
  • the generation unit 344 accumulates the degree of smile of the user U calculated from the authentication face information acquired at each of the plurality of points A1, A2, ..., Ai, ...An in the facility, and generates a cumulative smile. Generate degree. Specifically, the generation unit 344 adds the calculated smile degree to the cumulative smile degree 313B associated with the user ID 313A of the user U in the cumulative smile degree information 313 shown in FIG. Generate smile level. Further, the generation unit 344 stores the user ID 313A and the generated cumulative smile level 313B in the storage unit 310 as cumulative smile level information 313 in association with each other. Further, the generated cumulative smile level is supplied to the privilege granting section 346 and the output control section 347.
  • the history update unit 345 is also called history information update means.
  • the history update unit 345 updates the excursion history information 314 of the user U whose face authentication was successful.
  • the history update unit 345 receives the photographing date and time of the authentication face image and the location information of the authentication terminal 200 (point 1, point 2, . . . point i, . . . point n) is added to the tour history 314B of the tour history information 314 shown in FIG.
  • the history update unit 345 may add the smile level received from the smile level calculation unit 343 to the tour history 314B of the tour history information 314, together with the photographing date and time and location information of the authentication face image of the user U.
  • the privilege granting unit 346 is also referred to as a privilege granting means.
  • the benefit granting unit 346 grants the user U a benefit according to the cumulative smile level. Specifically, the benefit granting unit 346 grants the user U a benefit 315B corresponding to the cumulative smile level 315A received from the generation unit 344 based on the benefit granting conditions 315 shown in FIG. More specifically, the benefit granting unit 346 adds the benefit 315B to the benefits included in the registered information 312C of the user U in the user information 312. Note that the benefit granting unit 346 may transmit the benefit 315B to the user U's user terminal (not shown). Further, the benefit granting unit 346 may grant the user U a benefit according to the tour history.
  • the privilege granting unit 346 may refer to the excursion history 314B corresponding to the user ID 314A of the user U, obtain the excursion distance of the user U, and provide the privilege to the user U according to the excursion distance.
  • the tour distance may be the sum of the distances between the points (point 1, point 2, .
  • the output control section 347 is also called output control means.
  • the output control unit 347 causes the authentication terminal 200 to output a comparison result between the cumulative smile level 313B of the user U and the cumulative smile level 313B of other users.
  • the output control unit 347 refers to the cumulative smile level information 313 shown in FIG. 7 and generates a comparison result between the cumulative smile level 313B of user U and the cumulative smile level 313B of other users.
  • the output control unit 347 causes the communication unit 330 to transmit an output instruction including the generated comparison result to the authentication terminal 200.
  • the output control unit 347 may cause the authentication terminal 200 to further output a comparison result between the user U's tour history 314B and the tour history 314B of other users.
  • the output control unit 347 refers to the excursion history information 314 shown in FIG. 8 and generates a comparison result between the excursion distance of the user U and the excursion distance of other users. Then, the output control unit 347 causes the communication unit 330 to transmit an output instruction including the generated comparison result to the authentication terminal 200.
  • the notification unit 348 notifies the authentication terminal 200 of the face authentication result and the user ID 312A when the face authentication result indicates that the face information matches, that is, when the face authentication is successful.
  • the user ID 312A may be included in the face authentication result.
  • the notification unit 348 may send an error notification to the authentication terminal 200 to the effect that face authentication has failed.
  • the notification unit 348 may include the user ID 312A in the error notification, but is not limited to this.
  • FIG. 10 is a flowchart showing an example of a user information registration process in the authentication method according to the second embodiment.
  • a registration face image and registration information of a user U are acquired by the authentication terminal 200-1 installed at the first point A1 among the authentication terminals 200-1, 200-2, ..., 200-i, ..., 200-n installed at multiple points A1, A2, ..., Ai, ..., An in an entertainment facility.
  • the first point A1 is, for example, the point of the authentication terminal 200-1 installed at the gate or near the gate of the entertainment facility.
  • the registration face image and registration information of the user U may be acquired by a user terminal (not shown) of the user U or a registration terminal installed inside or outside the entertainment facility, and transmitted to the information processing device 300.
  • the image acquisition unit 261 of the authentication terminal 200-1 causes the camera 210 to capture the face of the user U to acquire a face image for registration (step S101).
  • the registration information acquisition unit 262 of the authentication terminal 200-1 acquires the registration information of the user U (step S102).
  • the communication unit 240 transmits the face image for registration and the registration information to the information processing device 300 and requests the user to register (step S103).
  • the registration unit 341 of the information processing device 300 performs user registration (step S104) and ends this process.
  • the registration unit 341 generates face information for registration 312B from the face image for registration.
  • the registration unit 341 also generates a user ID 312A.
  • the registration unit 341 associates the user ID 312A, the face information for registration 312B, and the registration information 312C, and stores them in the storage unit 310 as user information 312.
  • FIGS. 11 and 12 are flowcharts showing the authentication method according to the second embodiment.
  • the authentication methods shown in FIGS. 11 and 12 are performed after the user information registration process shown in FIG. 10 is performed.
  • the image acquisition unit 261 of the authentication terminal 200-i causes the camera 210 to photograph the face of the user U to acquire an authentication face image (step S201).
  • the communication unit 240 transmits the authentication face image, photographing date and time, and location information to the information processing device 300, and requests authentication (step S202).
  • the authentication unit 342 of the information processing device 300 performs face authentication (step S203).
  • the authentication unit 342 generates authentication face information from the authentication face image, compares the authentication face information with the registration face information 312B of the user information 312, and determines the degree of matching of the face information. If the value is greater than or equal to a predetermined value, it is determined that face authentication has been successful.
  • the notification unit 348 notifies the authentication terminal 200-i of the authentication result indicating whether the face authentication was successful or not and the user ID 312A (step S204).
  • the smile level calculation unit 343 calculates the smile level of the user U from the authentication face information (step S205).
  • step S204 the output control unit 264 of the authentication terminal 200-i causes the output unit 250 to display or output the face authentication result to notify the user U of the face authentication result. It's okay.
  • step S206 the generation unit 344 accumulates the smiling degrees of the user U to generate a cumulative smiling degree. Specifically, the generation unit 344 adds the smile level calculated in step S205 to the cumulative smile level 313B associated with the user ID 313A of the user U in the cumulative smile level information 313.
  • the history update unit 345 updates the excursion history information 314 of the user U whose face authentication was successful (step S207).
  • the benefit granting unit 346 grants the user U a benefit according to the cumulative smile level 313B and tour history 314B of the user U (step S208).
  • the output control unit 347 of the information processing device 300 controls the output of the output unit 250 of the authentication terminal 200-i (step S209). Specifically, the output control unit 347 generates a comparison result (ranking) between the cumulative smile level 313B and tour history 314B of user U and the cumulative smile level 313B and tour history 314B of other users.
  • the communication unit 330 transmits an output instruction including the comparison result to the authentication terminal 200 (step S210).
  • the output control unit 264 of the authentication terminal 200-i causes the output unit 250 to output the comparison result (step S211), and ends this process.
  • FIG. 13 shows an example of the output unit 250 of the authentication terminal 200 that displays the comparison results.
  • the display unit 251 of the output unit 250 displays a message 251A that includes the comparison result and the benefits that the user U has acquired.
  • the message 251A includes, as the comparison results, the cumulative smile level ranking "Cumulative smile level 15th" and the excursion history ranking "13th round trip distance.”
  • the message 251A includes "Get 250 points!!" as a benefit that user U has acquired.
  • the audio output unit 252 of the output unit 250 may output the message in the form of audio.
  • the smile degree of the user U at each point is calculated from the authentication face information received from the authentication terminals 200-1, 200-2, ... 200-i, ... 200-n installed at each of the multiple points A1, A2, ..., Ai, ... An in the entertainment facility, and the calculated smile degrees are accumulated to generate a cumulative smile degree 313B.
  • the comparison result (ranking) between the cumulative smile degree 313B of the user U and the cumulative smile degrees 313B of other users is then output to the authentication terminal 200. Therefore, the use of face authentication technology can further improve the appeal of the entertainment facility compared to the case where the smile degree is determined only at the final point of the entertainment facility.
  • the authentication system 100 further causes the authentication terminal 200 to output a comparison result between the user U's tour history 314B and the tour history 314B of other users. Therefore, facial recognition technology can be used to further improve the appeal of entertainment facilities.
  • the user U's smile level is added to update the excursion history information.
  • the excursion history 314B of the excursion history information 314 includes, in addition to the photographing date and time and location information of the authentication facial image of the user U, the degree of smile calculated from the authentication facial image.
  • the operator of the entertainment facility can know in which areas of the entertainment facility the smile level is low, or in other words, the customer satisfaction level is low.
  • the user U is given a benefit according to the cumulative smile level 313B. Therefore, the appeal of the entertainment facility can be further improved.
  • the user U is given a benefit according to the tour history 314B. Therefore, the appeal of the entertainment facility can be further improved.
  • the present invention is not limited to this.
  • the present disclosure can also implement arbitrary processing by causing a processor to execute a computer program.
  • Non-transitory computer-readable media include various types of tangible storage media.
  • Examples of non-transitory computer-readable media include magnetic recording media (e.g., flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, Includes CD-R/W, DVD (Digital Versatile Disc), semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)).
  • magnetic recording media e.g., flexible disks, magnetic tapes, hard disk drives
  • magneto-optical recording media e.g., magneto-optical disks
  • CD-ROMs Read Only Memory
  • CD-Rs Includes CD-R/W
  • DVD Digital Versatile Disc
  • semiconductor memory for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM
  • the program may also be supplied to the computer via various types of transitory computer readable media.
  • transitory computer-readable media include electrical signals, optical signals, and electromagnetic waves.
  • the temporary computer-readable medium can provide the program to the computer via wired communication channels, such as electrical wires and fiber optics, or wireless communication channels.
  • an authentication means that controls facial authentication by comparing user authentication facial information acquired at each of a plurality of points in the facility with registration facial information registered in advance; smile degree calculation means for calculating the smile degree of the user from the authentication face information; Cumulative smile degree generation means that generates a cumulative smile degree by accumulating the smile degree of the user calculated from the authentication face information acquired at each of the plurality of points in the facility; output control means for controlling output of a comparison result between the cumulative smile level of the user and the cumulative smile level of other users;
  • An information processing device comprising: (Additional note 2) further comprising history information updating means for updating tour history information regarding the user's tour history within the facility, The output control means further controls output of a comparison result between the tour history of the user and the tour history of another user.
  • the information processing device updates the excursion history information by adding the smile level of the user.
  • the information processing device according to supplementary note 2.
  • (Additional note 4) further comprising a benefit granting means for granting a benefit to the user according to the cumulative smile level;
  • the information processing device according to supplementary note 1.
  • (Appendix 5) further comprising a privilege granting means for granting the user a privilege according to the excursion history;
  • an information processing device capable of communicating with the authentication terminal; Equipped with The information processing device includes: comprising a user information registration means for registering the user's face information for registration in the storage means;
  • the authentication terminal is authentication facial information acquisition means for acquiring authentication facial information of the user;
  • Equipped with The information processing device includes: Authentication means that performs facial authentication by comparing authentication facial information of the user acquired at each of the plurality of points in the facility with the registration facial information; smile degree calculation means for calculating the smile degree of the user from the authentication facial information when the face authentication is successful; Cumulative smile degree generation means that generates a cumulative smile degree by accumulating the smile degree of the user calculated from the authentication face information acquired at each of the plurality of points in the facility; output control means for causing the authentication terminal to output a comparison result between the cumulative smile degree of the user and the cumulative smile degree of other users; An authentication system further equipped with.
  • the information processing device includes: further comprising history information updating means for updating tour history information regarding the user's tour history within the facility, The output control means causes the authentication terminal to output a comparison result between the excursion history of the user and the excursion history of another user.
  • the history information updating means updates the excursion history information by adding the smile level of the user.
  • the information processing device includes: further comprising a benefit granting means for granting a benefit to the user according to the cumulative smile level; Authentication system described in Appendix 6.
  • the information processing device includes: further comprising a privilege granting means for granting the user a privilege according to the excursion history; Authentication system described in Appendix 7.
  • the computer is Controlling facial authentication by comparing the user's authentication facial information acquired at each of a plurality of points in the facility with pre-registered registration facial information, Calculating the degree of smile of the user from the authentication face information, generating a cumulative smile degree by accumulating the smile degree of the user calculated from the authentication face information acquired at each of the plurality of points in the facility; controlling output of a comparison result between the cumulative smile level of the user and the cumulative smile level of other users; Authentication method.
  • (Appendix 12) The computer, updating excursion history information regarding the excursion history of the user within the facility; further controlling output of a comparison result between the tour history of the user and the tour history of other users; Authentication method described in Appendix 11.
  • (Appendix 13) The computer, updating the tour history information by adding the smile level of the user; Authentication method described in Appendix 12.
  • (Appendix 14) The computer, granting the user a benefit according to the cumulative smile level; Authentication method described in Appendix 11.
  • (Appendix 15) The computer, granting benefits to the user according to the tour history; Authentication method described in Appendix 12.
  • a non-transitory computer-readable medium that stores a program that causes the program to execute.
  • Authentication terminal 11 Storage unit (storage means) 310 Storage unit (storage means) 12,341 Registration unit (user information registration means) 13,342 Authentication department (authentication means) 14,343 Smile degree calculation unit (smile degree calculation means) 15,344 generation unit (cumulative smile degree generation means) 16,347 Output control section (output control means) 345 History update unit (history information update means) 346 Benefit granting unit (benefits granting means) 261 Image acquisition unit (authentication facial information acquisition means)

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Collating Specific Patterns (AREA)

Abstract

娯楽施設の魅力をさらに向上することができる情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体を提供する。情報処理装置(10)は、施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と予め登録された登録用顔情報とを照合することによる顔認証を制御する認証部(13)と、認証用顔情報からユーザの笑顔度を算出する笑顔度算出部(14)と、施設内の複数の地点のそれぞれにおいて取得された認証用顔情報から算出したユーザの笑顔度を累積して累積笑顔度を生成する生成部(15)と、ユーザの累積笑顔度と他のユーザの累積笑顔度との比較結果の出力を制御する出力制御部(16)と、を備える。

Description

情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体
 本開示は、情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体に関する。
 娯楽施設において、顔認証を用いて、決済を行ったり、アトラクションの入場処理を行ったりする技術が開発されている。また、顔認証技術を用いて、娯楽施設の魅力を向上する試みもなされている。例えば、特許文献1には、最終地点において顔認証の際に撮影した撮影画像に含まれるユーザが笑顔である場合に、笑顔の度合いを示す笑顔ポイントに応じたフォトフレーム(テンプレート)で合成画像を生成することが記載されている。
国際公開第2021/250817号
 しかしながら、特許文献1では、娯楽施設の最終地点のみで笑顔度を判定している。顔認証技術を用いて、娯楽施設の魅力をさらに向上することが望まれる。
 本開示の目的は、娯楽施設の魅力をさらに向上することができる情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体を提供することである。
 本開示の第1の態様に係る情報処理装置は、施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する認証手段と、前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する出力制御手段と、を備える。
 本開示の第2の態様に係る認証システムは、施設内の複数の地点に設置される認証端末と、前記認証端末と通信可能な情報処理装置と、を備え、前記情報処理装置は、ユーザの登録用顔情報を記憶手段に登録するユーザ情報登録手段を備え、前記認証端末は、前記ユーザの認証用顔情報を取得する認証用顔情報取得手段、を備え、前記情報処理装置は、前記施設内の前記複数の地点のそれぞれにおいて取得された前記ユーザの認証用顔情報と、前記登録用顔情報とを照合することによる顔認証を実行する認証手段と、前記顔認証が成功した場合に、前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、前記認証端末に、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果を出力させる出力制御手段と、をさらに備える。
 本開示の第3の態様に係る認証方法は、コンピュータが、施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御し、前記認証用顔情報から前記ユーザの笑顔度を算出し、前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成し、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する方法である。
 本開示の第4の態様に係る非一時的なコンピュータ可読媒体は、コンピュータに、施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する処理と、前記認証用顔情報から前記ユーザの笑顔度を算出する処理と、前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する処理と、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する処理と、を実行させるプログラムを格納する。
 娯楽施設の魅力をさらに向上することができる情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体を提供することができる。
実施形態1に係る情報処理装置の一例を示すブロック図である。 実施形態1に係る認証方法の一例を示すフローチャートである。 実施形態2に係る認証システムの一例を示すブロック図である。 実施形態2に係る認証端末の一例を示すブロック図である。 実施形態2に係る情報処理装置の一例を示すブロック図である。 実施形態2に係るユーザ情報のデータ構造の一例を示す図である。 実施形態2に係る累積笑顔度情報のデータ構造の一例を示す図である。 実施形態2に係る周遊履歴情報のデータ構造の一例を示す図である。 実施形態2に係る特典付与条件のデータ構造の一例を示す図である。 実施形態2に係る認証方法におけるユーザ情報の登録処理の一例を示すフローチャートである。 実施形態2に係る認証方法の一例を示すフローチャートである。 実施形態2に係る認証方法の一例を示すフローチャートである。 実施形態2に係る認証端末の表示部の一例を示す図である。
 以下、図面を参照して本開示の実施形態について説明する。
 <実施形態1>
 図1は、実施形態1に係る情報処理装置10の一例を示すブロック図である。情報処理装置10は、例えば、テーマパーク等の娯楽施設の複数の地点のそれぞれにおいて取得されたユーザの顔認証処理を実行する。ここで、ユーザとは、当該娯楽施設の来場者である。情報処理装置10は、娯楽施設の複数の地点のそれぞれに設置された認証端末(不図示)と通信可能となっている。また、情報処理装置10は、ユーザの携帯するユーザ端末(不図示)と通信可能となっていてもよい。また、情報処理装置10は、当該娯楽施設の内外に設置された登録端末(不図示)と通信可能となっていてもよい。
 情報処理装置10は、図1に示すように、記憶部11、登録部12、認証部13、笑顔度算出部14、生成部15、出力制御部16を備える。
 記憶部11は、記憶手段とも呼ばれる。記憶部11は、登録用顔情報を記憶する。
 登録部12は、ユーザ情報登録手段とも呼ばれる。登録部12は、ユーザ情報を記憶部11に登録する。ここで、ユーザ情報とは、少なくとも、ユーザの登録用顔情報を含む。ユーザの登録用顔情報とは、例えば、ユーザの顔を撮影して生成された顔画像から抽出された情報である。なお、娯楽施設の複数の地点のそれぞれに設置された認証端末の1つによってユーザの顔が撮影されることによって取得された顔画像が、当該認証端末から情報処理装置10へ送信されてもよい。また、情報処理装置10は、カメラ(不図示)を備えてもよく、当該カメラによって、ユーザの顔を撮影し、顔画像を取得してもよい。また、情報処理装置10と通信可能なユーザ端末のカメラによってユーザの顔が撮影され、当該ユーザ端末から顔画像が情報処理装置10へ入力されてもよい。
 認証部13は、認証手段とも呼ばれる。認証部13は、娯楽施設の複数の地点のそれぞれに設置された認証端末によって取得されたユーザの認証用顔情報と、記憶部11に記憶されている登録用顔情報とを照合することによる顔認証を制御する。なお、生体認証処理は、情報処理装置10において行われても良いし、他の装置、例えば、認証端末(不図示)において行われてもよい。
 笑顔度算出部14は、笑顔度算出手段とも呼ばれる。笑顔度算出部14は、顔認証が成功した場合に、認証用顔情報からユーザの笑顔度を算出する。算出された笑顔度は、生成部15へ供給される。
 生成部15は、累積笑顔度生成手段とも呼ばれる。生成部15は、施設内の複数の地点のそれぞれにおいて取得された認証用顔情報から算出されたユーザの笑顔度を累積して累積笑顔度を生成する。生成された累積笑顔度は、出力制御部16へ供給される。
 出力制御部16は、出力制御手段とも呼ばれる。出力制御部16は、当該認証端末における、ユーザの累積笑顔度と他のユーザの累積笑顔度との比較結果の出力を制御する。具体的には、出力制御部16は、ユーザの累積笑顔度と他のユーザの累積笑顔度との比較結果を生成し、当該比較結果を表示するように、認証端末の出力を制御する。
 図2は、実施形態1に係る認証方法を示すフローチャートである。まず、登録部12は、ユーザの登録用顔情報を記憶部11に登録する(ステップS10)。次に、認証部13は、娯楽施設の複数の地点のそれぞれに設置された認証端末から認証用顔情報を受信した場合に、登録用顔情報と認証用顔情報とを照合することによる顔認証を実行する(ステップS11)。顔認証が成功しなかった場合(ステップS12でNo)、本処理を終了する。一方、顔認証が成功した場合(ステップS12でYes)、笑顔度算出部14は、認証用顔情報からユーザの笑顔度を算出する(ステップS13)。次に、生成部15は、ステップS13において算出された笑顔度を累積して累積笑顔度を生成する(ステップS14)。具体的には、生成部15は、ステップS13において算出された笑顔度を、ステップS11の顔認証前までに累積されていた笑顔度に加算して、累積笑顔度を生成する。次に、出力制御部16は、当該認証端末に、ユーザの累積笑顔度と他のユーザの累積笑顔度との比較結果を出力させ(ステップS15)、本処理を終了する。
 以上に説明した実施形態1に係る情報処理装置10によれば、娯楽施設の複数の地点のそれぞれに設置された認証端末から受信した認証用顔情報から各地点におけるユーザの笑顔度が算出され、算出した笑顔度を累積した累積笑顔度が生成される。そして、当該ユーザの累積笑顔度と他のユーザの累積笑顔度との比較結果(ランキング)を認証端末に出力させる。そのため、娯楽施設の最終地点のみで笑顔度を判定する場合に比べて、顔認証技術を用いて、娯楽施設の魅力をさらに向上することができる。
 尚、情報処理装置10は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態に係る認証方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、登録部12、認証部13、笑顔度算出部14、生成部15、出力制御部16の機能を実現する。
 または、登録部12、認証部13、笑顔度算出部14、生成部15、出力制御部16は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用または専用の回路(circuitry)、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、FPGA(field-programmable gate array)等を用いることができる。
 <実施形態2>
 次に、実施形態2に係る認証システム100について説明する。図3は、実施形態2に係る認証システム100の全体構成を示すブロック図である。認証システム100は、テーマパーク等の娯楽施設において、ユーザUの生体認証を実施するコンピュータシステムである。以下では、生体認証として、顔認証を例に挙げて説明するが、これに限らない。
 認証システム100は、認証端末200-1、200-2、・・・200-i、・・・200-n(1≦i≦n、nは正の整数)と、情報処理装置300とを備える。認証端末200-1、200-2、・・・200-i、・・・200-nと情報処理装置300とは、ネットワークNを介して互いに通信可能となっている。なお、情報処理装置300は、ユーザの携帯するユーザ端末(不図示)と通信可能となっていてもよい。情報処理装置300は、当該娯楽施設の内外に設置された登録端末(不図示)と通信可能となっていてもよい。また、認証端末200-1、200-2、・・・200-i、・・・200-nは、ユーザ端末と、近距離無線通信の所定の方式により互いに通信可能となっていてもよい。また、認証端末200-1、200-2、・・・200-i、・・・200-nは、ユーザ端末とネットワークNを介して互いに通信可能となっていてもよい。また、ネットワークNは、有線又は無線の通信回線である。
 認証端末200-1、200-2、・・・200-i、・・・200-nのそれぞれは、以下では、認証端末200-1、200-2、・・・200-i、・・・200-nを区別せず言及する場合は、単に認証端末200と呼ぶことがある。認証端末200は、娯楽施設の複数の地点1、地点2、・・・地点i、・・・地点nのそれぞれに設置される、例えば、デジタルサイネージである。
 図4は、認証端末200の一例を示すブロック図である。図4に示すように、認証端末200は、カメラ210、記憶部220、メモリ230、通信部240、出力部250、制御部260を備える。
 カメラ210は、制御部260の制御に応じて撮影を行う。カメラ210は、制御部260の制御に応じて、ユーザUの顔を撮影する。
 記憶部220は、認証端末200の各機能を実現するためのプログラム221が格納される記憶装置である。メモリ230は、RAM等の揮発性記憶装置であり、制御部260の動作時に一時的に情報を保持するための記憶領域である。通信部240は、ネットワークNとの通信インターフェースである。
 出力部250は、制御部260の情報処理結果を出力する。例えば出力部250は、表示部251と、音声出力部252とを有する。表示部251は、制御部260の情報処理結果を表示する表示装置である。尚、認証端末200は、入力を受け付ける入力部(不図示)を備えてよく、表示部251及び入力部は、タッチパネルのように一体的に構成されていてもよい。音声出力部252は、スピーカ(不図示)を含み、制御部260の情報処理結果を音声出力する。
 制御部260は、認証端末200の各構成要素を制御するプロセッサつまり制御装置である。制御部260は、記憶部220からプログラム221をメモリ230へ読み込ませ、プログラム221を実行する。これにより、制御部260は、画像取得部261、登録情報取得部262、決済部263、出力制御部264の機能を実現する。
 画像取得部261は、認証用顔情報取得手段とも呼ばれる。画像取得部261は、カメラ210を制御し、ユーザUの顔を撮影して、少なくとも当該ユーザUの顔領域を含む認証用顔画像を生成させる。そして、画像取得部261は、カメラ210から認証用顔画像及び撮影日時を取得する。
 画像取得部261は、認証用顔画像及び撮影日時を通信部240に供給し、通信部240に、認証用顔画像及び撮影日時を、当該認証端末200の位置情報(地点1、地点2、・・・地点i、・・・地点n)とともに、情報処理装置300へ送信させる。
 また、画像取得部261は、カメラ210を制御し、ユーザUの顔を撮影して、少なくとも当該ユーザUの顔領域を含む登録用顔画像を生成させてもよい。そして、画像取得部261は、登録用顔画像を通信部240に供給し、通信部240に、登録用顔画像を情報処理装置300へ送信させてもよい。
 なお、登録用顔画像は、ユーザ端末(不図示)において撮影されて、当該ユーザ端末から情報処理装置300へ送信されてもよい。また、登録用顔画像は、当該娯楽施設の内外に設置された登録端末において撮影されて、当該登録端末から情報処理装置300へ送信されてもよい。
 登録情報取得部262は、ユーザUの登録情報を取得する。ここで、ユーザUの登録情報とは、当該ユーザUの氏名、住所、電話番号、決済に必要な情報、決済情報、特典情報等である。また、決済に必要な情報とは、決済に用いるカードの番号、有効期限等である。また、決済情報とは、ユーザUが購入した商品又はサービスの名称、当該商品又はサービスの金額、購入日時等である。また、ユーザUが購入した商品の名称とは、当該娯楽施設においてユーザUが飲食した飲食物の名称等である。また、ユーザUが購入したサービスの名称とは、当該娯楽施設においてユーザUが体験したアトラクションの名称等である。また、特典情報とは、獲得したポイントの点数、クーポン等である。
 登録情報は、認証端末200の入力部(不図示)をユーザUが操作することにより認証端末200へ入力されてもよい。登録情報取得部262は、カードリーダを備え、例えば、免許証やクレジットカードを読み取ることにより、ユーザUの登録情報を取得してもよい。そして、登録情報取得部262は、ユーザUの登録情報を通信部240に供給し、通信部240に登録情報を情報処理装置300へ送信させる。
 なお、登録情報は、ユーザ端末(不図示)から情報処理装置300へ送信されてもよい。また、登録情報は、当該娯楽施設の内外に設置された登録端末から情報処理装置300へ送信されてもよい。
 決済部263は、認証端末200において決済を行うための顔認証が成功した場合に、決済を実行する。具体的には、決済部263は、顔認証が成功したユーザUの決済に必要な情報を情報処理装置300から取得し、決済を実行する。決済部263は、情報処理装置300から顔認証結果とともに受信したユーザID312Aに対応付けられた登録情報312Cから決済に必要な情報を取得する。また、決済部263は、決済終了後、当該ユーザUの決済情報を通信部240に供給し、通信部240に決済情報を情報処理装置300へ送信させる。
 出力制御部264は、出力部250を制御し、出力部250に情報処理結果を出力させて、ユーザUに情報処理結果を報知する。
 例えば、出力制御部264は、情報処理装置300から出力指示(後述)を受信した場合に、出力部250に比較結果(後述)を出力させる。
 また、出力制御部264は、出力部250に顔認証の結果を出力させて、ユーザUに顔認証の結果を報知する。
 図5は、情報処理装置300の一例を示すブロック図である。図5に示すように、情報処理装置300は、記憶部310、メモリ320、通信部330、制御部340を備える。
 記憶部310は、情報処理装置300の各機能を実現するためのプログラム311が格納される記憶装置である。メモリ320は、RAM等の揮発性記憶装置であり、制御部340の動作時に一時的に情報を保持するための記憶領域である。通信部330は、ネットワークNとの通信インターフェースである。
 記憶部310はユーザ情報312を記憶する。そのため、記憶部310は、記憶手段とも呼ばれる。図6に、ユーザ情報312の一例を示す。図6に示すように、ユーザ情報312は、ユーザID312Aと、登録用顔情報312Bと、登録情報312Cとが対応付けられた情報である。尚、ユーザ情報312には、登録用顔画像の撮影日時等の管理情報が含まれてもよい。
 記憶部310は、累積笑顔度情報313を記憶する。図7に、累積笑顔度情報313の一例を示す。図7に示すように、累積笑顔度情報313は、ユーザID313Aと、累積笑顔度313Bとが対応付けられた情報である。
 記憶部310は、周遊履歴情報314を記憶する。図8に、周遊履歴情報314の一例を示す。図8に示すように、周遊履歴情報314は、ユーザID314Aと、周遊履歴314Bとが対応付けられた情報である。周遊履歴314Bは、当該娯楽施設におけるユーザUの周遊履歴である。具体的には、周遊履歴314Bは、認証端末200から受信した、ユーザUの認証用顔画像の撮影日時及び当該認証端末200の位置情報である。なお、周遊履歴314Bは、ユーザUの認証用顔画像の撮影日時及び位置情報に加えて、当該認証用顔画像から算出された笑顔度を含んでもよい。これにより、記憶部310は、ユーザUの笑顔度の履歴を周遊履歴情報314として記憶することができる。そのため、娯楽施設のどのエリアにおいて、笑顔度が低いか、換言すれば、顧客満足度が低いかを当該娯楽施設の運営者が知ることができる。
 記憶部310は、特典付与条件315を記憶する。図9に、特典付与条件315の一例を示す。図9に示すように、特典付与条件315は、累積笑顔度315Aと、特典315Bとが対応付けられた情報である。また、特典付与条件315は、周遊距離と特典とが対応付けられた情報であってもよい。
 制御部340は、情報処理装置300の各構成要素を制御するプロセッサつまり制御装置である。制御部340は、記憶部310からプログラム311をメモリ320へ読み込ませ、プログラム311を実行する。これにより、制御部340は、登録部341、認証部342、笑顔度算出部343、生成部344、履歴更新部345、特典付与部346、出力制御部347、通知部348の機能を実現する。
 登録部341は、ユーザ情報登録手段とも呼ばれる。登録部341は、ユーザ情報312を記憶部310に登録する。登録部341は、認証端末200、ユーザ端末(不図示)、登録端末(不図示)の何れかから登録用顔画像及び登録情報を受信した場合に、当該登録用顔画像から登録用顔情報312Bを取得する。次いで、登録部341は、ユーザID312Aと、当該登録用顔情報312Bと、当該登録情報312Cとを対応付けてユーザ情報312として記憶部310に格納する。一例として、顔情報は、顔画像から抽出された特徴点の集合であってもよい。具体的に、登録部341は、登録用顔画像に含まれる顔領域を検出し、検出した顔領域から特徴点を抽出し、抽出した特徴点の情報を登録用顔情報312Bとする。
 また、登録部341は、ユーザID312Aを生成する。尚、ユーザID312Aは、ユーザUが認証端末200、ユーザ端末(不図示)、登録端末(不図示)の何れかの入力部(不図示)を操作することにより、認証端末200、ユーザ端末(不図示)、登録端末(不図示)に入力されてもよい。そして、認証端末200、ユーザ端末(不図示)、登録端末(不図示)の何れかから、登録用顔画像及び登録情報とともに、ユーザID312Aが情報処理装置300に送信されてもよい。また、認証端末200、ユーザ端末(不図示)、登録端末(不図示)の何れかからユーザID312Aとともにパスワードが情報処理装置300に送信されてもよい。換言すれば、登録部341は、ユーザID312Aとパスワードと登録用顔情報312Bと登録情報312Cとを対応付けて、ユーザ情報312として記憶部310に格納してもよい。また、登録部341は、認証端末200、ユーザ端末(不図示)、登録端末(不図示)の何れかから登録用顔画像の撮影日時等の管理情報が送信された場合、ユーザID312Aと登録用顔情報312Bと登録情報312Cと当該管理情報とを対応付けて、ユーザ情報312として記憶部310に格納してもよい。
 認証部342は、認証手段とも呼ばれる。認証部342は、認証端末200から認証用顔画像を受信した場合に、顔認証を実行する。そして、認証部342は、認証端末200から送信された認証用顔画像から認証用顔情報を取得し、登録用顔情報312Bと認証用顔情報とを照合することにより、顔認証を実行する。認証用顔画像からの認証用顔情報の取得方法は、登録部341における登録用顔画像からの登録用顔情報312Bの取得方法と同様であるため、その説明を省略する。また、認証部342は、認証用顔情報と登録用顔情報312Bとが一致した場合、ユーザ情報312を参照して、当該登録用顔情報312Bと対応付けられたユーザID312Aを取得する。そして、認証部342は、顔情報の一致の有無及びユーザID312Aを通知部348に供給する。また、認証部342は、認証用顔情報と登録用顔情報312Bとが一致した場合、認証用顔情報を笑顔度算出部343に供給する。顔情報の一致の有無は、認証の成否に対応する。尚、顔情報が一致する(一致有)とは、一致度が所定値以上である場合をいうものとする。
 なお、顔認証処理は、他の装置、例えば、認証端末200において行われてもよい。この場合、認証部342は、他の装置で行われる顔認証処理を制御すればよい。
 笑顔度算出部343は、笑顔度算出手段とも呼ばれる。笑顔度算出部343は、顔認証が成功した場合に、認証用顔情報からユーザUの笑顔度を算出する。算出された笑顔度は、生成部344へ供給される。また、算出された笑顔度は、履歴更新部345に供給されてもよい。ここで、ユーザUの笑顔度を算出する具体例について説明する。一般に、笑顔になった場合、顔領域において口角が上がる、目尻が下がる、目が細くなる、口の周りにしわができる、等の特徴が現れる。このため、笑顔度算出部343は、ユーザUの顔領域において両目や口といった顔器官の特徴点を抽出し、抽出した各特徴点の座標に基づいて、笑顔度を算出してよい。また、笑顔度算出部343は、学習済の識別器を用いて、笑顔度を算出してよい。識別器は、顔器官の特徴量を入力とし、所定の笑顔度以上であるか否かを出力するサポートベクターマシン(SVM)であってよい。また、識別器は、撮影画像の顔領域を入力とし、笑顔度を出力する畳み込みニューラルネットワーク(CNN)であってもよい。尚、笑顔度を算出する手法については、上記に限らず、既存の手法が用いられてよい。
 また、笑顔度算出部343は、撮影画像にユーザU及び同伴者の顔領域が含まれている場合、ユーザUの顔領域の笑顔度に加えて、同伴者の顔領域の笑顔度に基づいて、笑顔度を算出してもよい。例えば笑顔度算出部343は、ユーザUの顔領域の笑顔度及び同伴者の顔領域の笑顔度の平均値を、笑顔度として算出してよい。
 生成部344は、累積笑顔度生成手段とも呼ばれる。生成部344は、施設内の複数の地点A1、A2、・・・、Ai、・・・Anのそれぞれにおいて取得された認証用顔情報から算出されたユーザUの笑顔度を累積して累積笑顔度を生成する。具体的には、生成部344は、算出された笑顔度を、図7に示す累積笑顔度情報313の当該ユーザUのユーザID313Aと対応付けられた累積笑顔度313Bに加算して、新たな累積笑顔度を生成する。また、生成部344は、当該ユーザID313Aと生成した累積笑顔度313Bとを対応付けて累積笑顔度情報313として記憶部310に格納する。また、生成された累積笑顔度は、特典付与部346及び出力制御部347へ供給される。
 履歴更新部345は、履歴情報更新手段とも呼ばれる。
 履歴更新部345は、顔認証が成功した場合に、顔認証が成功したユーザUの周遊履歴情報314を更新する。具体的には、履歴更新部345は、認証端末200から認証用顔画像とともに受信した、認証用顔画像の撮影日時及び認証端末200の位置情報(地点1、地点2、・・・地点i、・・・地点n)を図8に示す周遊履歴情報314の周遊履歴314Bに追加する。
 また、履歴更新部345は、笑顔度算出部343から受け取った笑顔度を、ユーザUの認証用顔画像の撮影日時及び位置情報とともに、周遊履歴情報314の周遊履歴314Bに追加してもよい。
 特典付与部346は、特典付与手段とも呼ばれる。特典付与部346は、累積笑顔度に応じた特典をユーザUに付与する。具体的には、特典付与部346は、図9に示す特典付与条件315から、生成部344から受け取った累積笑顔度315Aに対応する特典315BをユーザUに付与する。より具体的には、特典付与部346は、当該特典315Bをユーザ情報312の当該ユーザUの登録情報312Cに含まれる特典に追加する。なお、特典付与部346は、ユーザUのユーザ端末(不図示)に当該特典315Bを送信してもよい。
 また、特典付与部346は、周遊履歴に応じた特典をユーザUに付与してもよい。例えば、特典付与部346は、ユーザUのユーザID314Aに対応する周遊履歴314Bを参照し、ユーザUの周遊距離を取得し、当該周遊距離に応じてユーザUの特典を付与してもよい。なお、周遊距離は、周遊履歴314Bに含まれるユーザUが立ち寄った各地点(地点1、地点2、・・・地点i、・・・地点n)の間の距離を合算したものでよい。
 出力制御部347は、出力制御手段とも呼ばれる。出力制御部347は、顔認証が成功した場合に、当該認証端末200に、ユーザUの累積笑顔度313Bと他のユーザの累積笑顔度313Bとの比較結果を出力させる。具体的には、出力制御部347は、図7に示す累積笑顔度情報313を参照し、ユーザUの累積笑顔度313Bと他のユーザの累積笑顔度313Bとの比較結果を生成する。そして、出力制御部347は、通信部330に、生成した比較結果を含む出力指示を当該認証端末200に送信させる。
 また、出力制御部347は、当該認証端末200に、ユーザUの周遊履歴314Bと他のユーザの周遊履歴314Bとの比較結果をさらに出力させてもよい。具体的には、出力制御部347は、図8に示す周遊履歴情報314を参照し、ユーザUの周遊距離と他のユーザの周遊距離との比較結果を生成する。そして、出力制御部347は、通信部330に、生成した比較結果を含む出力指示を当該認証端末200に送信させる。
 通知部348は、顔認証結果が顔情報一致有を示す場合、つまり顔認証の成功を示す場合、顔認証結果とユーザID312Aとを認証端末200に通知する。尚、顔認証結果にユーザID312Aを含めてもよい。
 また、通知部348は、顔認証に失敗した旨を、エラー通知として、認証端末200に送信してもよい。尚、通知部348は、エラー通知にユーザID312Aを含ませてもよいが、これに限らない。
 図10は、実施形態2に係る認証方法におけるユーザ情報の登録処理の一例を示すフローチャートである。以下のフローチャートでは、娯楽施設の複数の地点A1、A2、・・・、Ai、・・・Anのそれぞれに設置された認証端末200-1、200-2、・・・200-i、・・・200-nのうち、最初の地点A1に配置された認証端末200-1においてユーザUの登録用顔画像及び登録情報が取得される場合を例に挙げて説明する。ここで、最初の地点A1とは、例えば、娯楽施設のゲート又はゲート付近に設置された認証端末200-1の地点である。しかし、ユーザUの登録用顔画像及び登録情報は、ユーザUのユーザ端末(不図示)や娯楽施設の内外に設置された登録端末において取得されて、情報処理装置300に送信されてもよい。
 まず、認証端末200-1の画像取得部261が、カメラ210にユーザUの顔を撮影させて、登録用顔画像を取得する(ステップS101)。次に、認証端末200-1の登録情報取得部262が、ユーザUの登録情報を取得する(ステップS102)。次に、通信部240は、登録用顔画像及び登録情報を情報処理装置300に送信し、ユーザ登録要求を行う(ステップS103)。次に、情報処理装置300の登録部341が、ユーザ登録を行って(ステップS104)、本処理を終了する。具体的には、登録部341が、登録用顔画像から登録用顔情報312Bを生成する。また、登録部341が、ユーザID312Aをさらに生成する。そして、登録部341が、当該ユーザID312Aと当該登録用顔情報312Bと登録情報312Cとを対応付けてユーザ情報312として記憶部310に格納する。
 図11及び図12は、実施形態2に係る認証方法を示すフローチャートである。図11及び図12に示す認証方法は、図10に示すユーザ情報の登録処理が行われた後に実施される。まず、認証端末200-iの画像取得部261が、カメラ210にユーザUの顔を撮影させて、認証用顔画像を取得する(ステップS201)。次に、通信部240は、認証用顔画像と撮影日時及び位置情報を情報処理装置300に送信し、認証要求を行う(ステップS202)。次に、情報処理装置300の認証部342は、顔認証を行う(ステップS203)。具体的には、認証部342は、認証用顔画像から認証用顔情報を生成し、当該認証用顔情報と、ユーザ情報312の登録用顔情報312Bとを照合し、顔情報の一致度が所定値以上である場合に、顔認証が成功したと判断する。次に、通知部348が、顔認証が成功したか否かを示す認証結果及びユーザID312Aを認証端末200-iに通知する(ステップS204)。次に、顔認証が成功した場合、笑顔度算出部343は、認証用顔情報からユーザUの笑顔度を算出する(ステップS205)。なお、ステップS204とステップS205との間において、認証端末200-iの出力制御部264が、出力部250に顔認証の結果を表示又は音声出力させて、ユーザUに顔認証の結果を報知してもよい。次に、顔認証が成功した場合、生成部344が、ユーザUの笑顔度を累積して累積笑顔度を生成する(ステップS206)。具体的には、生成部344は、ステップS205において算出された笑顔度を、累積笑顔度情報313の当該ユーザUのユーザID313Aと対応付けられた累積笑顔度313Bに加算する。次に、履歴更新部345が、顔認証が成功した場合に、顔認証が成功したユーザUの周遊履歴情報314を更新する(ステップS207)。次に、特典付与部346が、ユーザUの累積笑顔度313B及び周遊履歴314Bに応じた特典をユーザUに付与する(ステップS208)。次に、情報処理装置300の出力制御部347が、当該認証端末200-iの出力部250の出力を制御する(ステップS209)。具体的には、出力制御部347は、ユーザUの累積笑顔度313B及び周遊履歴314Bと他のユーザの累積笑顔度313B及び周遊履歴314Bとの比較結果(ランキング)を生成する。次に、通信部330が、当該比較結果を含む出力指示を当該認証端末200へ送信する(ステップS210)。次に、認証端末200-iの出力制御部264が、出力部250に当該比較結果を出力させ(ステップS211)、本処理を終了する。
 図13に、比較結果を表示する認証端末200の出力部250の一例を示す。図13に示すように、出力部250の表示部251は、比較結果及びユーザUが獲得した特典を含むメッセージ251Aを表示する。メッセージ251Aは、図13に示すように、比較結果として、累積笑顔度のランキング「累積笑顔度 15位」及び周遊履歴のランキング「周遊距離 13位」を含む。また、メッセージ251Aは、ユーザUが獲得した特典として、「250ポイントゲット!!」を含む。なお、出力部250の音声出力部252が音声により当該メッセージを出力してもよい。
 以上に説明した本実施形態2に係る認証システム100によれば、娯楽施設の複数の地点A1、A2、・・・、Ai、・・・Anのそれぞれに設置された認証端末200-1、200-2、・・・200-i、・・・200-nから受信した認証用顔情報から各地点におけるユーザUの笑顔度が算出され、算出した笑顔度を累積した累積笑顔度313Bが生成される。そして、当該ユーザUの累積笑顔度313Bと他のユーザの累積笑顔度313Bとの比較結果(ランキング)を認証端末200に出力させる。そのため、娯楽施設の最終地点のみで笑顔度を判定する場合に比べて、顔認証技術を用いて、娯楽施設の魅力をさらに向上することができる。
 また、本実施形態2に係る認証システム100では、さらに、ユーザUの周遊履歴314Bと他のユーザの周遊履歴314Bとの比較結果を認証端末200に出力させる。そのため、顔認証技術を用いて、娯楽施設の魅力をさらに向上することができる。
 また、本実施形態2に係る認証システム100では、ユーザUの笑顔度を追加して周遊履歴情報が更新される。具体的には、周遊履歴情報314の周遊履歴314Bは、ユーザUの認証用顔画像の撮影日時及び位置情報に加えて、当該認証用顔画像から算出された笑顔度を含む。当該娯楽施設の運営者は、周遊履歴情報314を参照することにより、当該娯楽施設のどのエリアにおいて、笑顔度が低いか、換言すれば、顧客満足度が低いかを知ることができる。
 また、本実施形態2に係る認証システム100では、累積笑顔度313Bに応じた特典がユーザUに付与される。そのため、娯楽施設の魅力をより一層向上することができる。
 また、本実施形態2に係る認証システム100では、周遊履歴314Bに応じた特典がユーザUに付与される。そのため、娯楽施設の魅力をより一層向上することができる。
 尚、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、プロセッサにコンピュータプログラムを実行させることにより実現することも可能である。
 上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、DVD(Digital Versatile Disc)、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
 以上、実施形態を参照して本願発明を説明したが、本願発明は上記によって限定されるものではない。本願発明の構成や詳細には、発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
 上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
 (付記1)
 施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する認証手段と、
 前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、
 前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、
 前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する出力制御手段と、
 を備える、情報処理装置。
 (付記2)
 前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する履歴情報更新手段をさらに備え、
 前記出力制御手段は、前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する、
 付記1に記載の情報処理装置。
 (付記3)
 前記履歴情報更新手段は、前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
 付記2に記載の情報処理装置。
 (付記4)
 前記累積笑顔度に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
 付記1に記載の情報処理装置。
 (付記5)
 前記周遊履歴に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
 付記2に記載の情報処理装置。
 (付記6)
 施設内の複数の地点に設置される認証端末と、
 前記認証端末と通信可能な情報処理装置と、
 を備え、
 前記情報処理装置は、
 ユーザの登録用顔情報を記憶手段に登録するユーザ情報登録手段
 を備え、
 前記認証端末は、
 前記ユーザの認証用顔情報を取得する認証用顔情報取得手段、
 を備え、
 前記情報処理装置は、
 前記施設内の前記複数の地点のそれぞれにおいて取得された前記ユーザの認証用顔情報と、前記登録用顔情報とを照合することによる顔認証を実行する認証手段と、
 前記顔認証が成功した場合に、前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、
 前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、
 前記認証端末に、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果を出力させる出力制御手段と、
 をさらに備える、認証システム。
 (付記7)
 前記情報処理装置は、
 前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する履歴情報更新手段をさらに備え、
 前記出力制御手段は、前記認証端末に、前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果を出力させる、
 付記6に記載の認証システム。
 (付記8)
 前記履歴情報更新手段は、前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
 付記7に記載の認証システム。
 (付記9)
 前記情報処理装置は、
 前記累積笑顔度に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
 付記6に記載の認証システム。
 (付記10)
 前記情報処理装置は、
 前記周遊履歴に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
 付記7に記載の認証システム。
 (付記11)
 コンピュータが、
 施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御し、
 前記認証用顔情報から前記ユーザの笑顔度を算出し、
 前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成し、
 前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する、
 認証方法。
 (付記12)
 前記コンピュータが、
 前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新し、
 前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する、
 付記11に記載の認証方法。
 (付記13)
 前記コンピュータが、
 前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
 付記12に記載の認証方法。
 (付記14)
 前記コンピュータが、
 前記累積笑顔度に応じた特典を前記ユーザに付与する、
 付記11に記載の認証方法。
 (付記15)
 前記コンピュータが、
 前記周遊履歴に応じた特典を前記ユーザに付与する、
 付記12に記載の認証方法。
 (付記16)
 コンピュータに、
 施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する処理と、
 前記認証用顔情報から前記ユーザの笑顔度を算出する処理と、
 前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する処理と、
 前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する処理と、
 を実行させるプログラムを格納する、非一時的なコンピュータ可読媒体。
 (付記17)
 前記コンピュータに、
 前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する処理と、
 前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する処理と、
 を実行させるプログラムを格納する、付記16に記載の非一時的なコンピュータ可読媒体。
 (付記18)
 前記コンピュータに、
 前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する処理、
 を実行させるプログラムを格納する、付記17に記載の非一時的なコンピュータ可読媒体。
 (付記19)
 前記コンピュータに、
 前記累積笑顔度に応じた特典を前記ユーザに付与する処理
 を実行させるプログラムを格納する、付記16に記載の非一時的なコンピュータ可読媒体。
 (付記20)
 前記コンピュータに、
 前記周遊履歴に応じた特典を前記ユーザに付与する処理
 を実行させるプログラムを格納する、付記17に記載の非一時的なコンピュータ可読媒体。
10,300 情報処理装置
100 認証システム
200 認証端末
11 記憶部(記憶手段)
310 記憶部(記憶手段)
12,341 登録部(ユーザ情報登録手段)
13,342 認証部(認証手段)
14,343 笑顔度算出部(笑顔度算出手段)
15,344 生成部(累積笑顔度生成手段)
16,347 出力制御部(出力制御手段)
345 履歴更新部(履歴情報更新手段)
346 特典付与部(特典付与手段)
261 画像取得部(認証用顔情報取得手段)

Claims (20)

  1.  施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する認証手段と、
     前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、
     前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、
     前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する出力制御手段と、
     を備える、情報処理装置。
  2.  前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する履歴情報更新手段をさらに備え、
     前記出力制御手段は、前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する、
     請求項1に記載の情報処理装置。
  3.  前記履歴情報更新手段は、前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
     請求項2に記載の情報処理装置。
  4.  前記累積笑顔度に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
     請求項1に記載の情報処理装置。
  5.  前記周遊履歴に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
     請求項2に記載の情報処理装置。
  6.  施設内の複数の地点に設置される認証端末と、
     前記認証端末と通信可能な情報処理装置と、
     を備え、
     前記情報処理装置は、
     ユーザの登録用顔情報を記憶手段に登録するユーザ情報登録手段
     を備え、
     前記認証端末は、
     前記ユーザの認証用顔情報を取得する認証用顔情報取得手段、
     を備え、
     前記情報処理装置は、
     前記施設内の前記複数の地点のそれぞれにおいて取得された前記ユーザの認証用顔情報と、前記登録用顔情報とを照合することによる顔認証を実行する認証手段と、
     前記顔認証が成功した場合に、前記認証用顔情報から前記ユーザの笑顔度を算出する笑顔度算出手段と、
     前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する累積笑顔度生成手段と、
     前記認証端末に、前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果を出力させる出力制御手段と、
     をさらに備える、認証システム。
  7.  前記情報処理装置は、
     前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する履歴情報更新手段をさらに備え、
     前記出力制御手段は、前記認証端末に、前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果を出力させる、
     請求項6に記載の認証システム。
  8.  前記履歴情報更新手段は、前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
     請求項7に記載の認証システム。
  9.  前記情報処理装置は、
     前記累積笑顔度に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
     請求項6に記載の認証システム。
  10.  前記情報処理装置は、
     前記周遊履歴に応じた特典を前記ユーザに付与する特典付与手段をさらに備える、
     請求項7に記載の認証システム。
  11.  コンピュータが、
     施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御し、
     前記認証用顔情報から前記ユーザの笑顔度を算出し、
     前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成し、
     前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する、
     認証方法。
  12.  前記コンピュータが、
     前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新し、
     前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する、
     請求項11に記載の認証方法。
  13.  前記コンピュータが、
     前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する、
     請求項12に記載の認証方法。
  14.  前記コンピュータが、
     前記累積笑顔度に応じた特典を前記ユーザに付与する、
     請求項11に記載の認証方法。
  15.  前記コンピュータが、
     前記周遊履歴に応じた特典を前記ユーザに付与する、
     請求項12に記載の認証方法。
  16.  コンピュータに、
     施設内の複数の地点のそれぞれにおいて取得されたユーザの認証用顔情報と、予め登録された登録用顔情報とを照合することによる顔認証を制御する処理と、
     前記認証用顔情報から前記ユーザの笑顔度を算出する処理と、
     前記施設内の前記複数の地点のそれぞれにおいて取得された前記認証用顔情報から算出した前記ユーザの前記笑顔度を累積して累積笑顔度を生成する処理と、
     前記ユーザの前記累積笑顔度と他のユーザの前記累積笑顔度との比較結果の出力を制御する処理と、
     を実行させるプログラムを格納する、非一時的なコンピュータ可読媒体。
  17.  前記コンピュータに、
     前記ユーザの前記施設内における周遊履歴に関する周遊履歴情報を更新する処理と、
     前記ユーザの前記周遊履歴と他のユーザの前記周遊履歴との比較結果の出力をさらに制御する処理と、
     を実行させるプログラムを格納する、請求項16に記載の非一時的なコンピュータ可読媒体。
  18.  前記コンピュータに、
     前記ユーザの前記笑顔度を追加して前記周遊履歴情報を更新する処理、
     を実行させるプログラムを格納する、請求項17に記載の非一時的なコンピュータ可読媒体。
  19.  前記コンピュータに、
     前記累積笑顔度に応じた特典を前記ユーザに付与する処理
     を実行させるプログラムを格納する、請求項16に記載の非一時的なコンピュータ可読媒体。
  20.  前記コンピュータに、
     前記周遊履歴に応じた特典を前記ユーザに付与する処理
     を実行させるプログラムを格納する、請求項17に記載の非一時的なコンピュータ可読媒体。
PCT/JP2022/035236 2022-09-21 2022-09-21 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体 WO2024062571A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/035236 WO2024062571A1 (ja) 2022-09-21 2022-09-21 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/035236 WO2024062571A1 (ja) 2022-09-21 2022-09-21 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体

Publications (1)

Publication Number Publication Date
WO2024062571A1 true WO2024062571A1 (ja) 2024-03-28

Family

ID=90454008

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/035236 WO2024062571A1 (ja) 2022-09-21 2022-09-21 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体

Country Status (1)

Country Link
WO (1) WO2024062571A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012185736A (ja) * 2011-03-07 2012-09-27 Japan Research Institute Ltd スマイルバンキング・システム
WO2021176535A1 (ja) * 2020-03-02 2021-09-10 日本電気株式会社 提示制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
WO2022176342A1 (ja) * 2021-02-17 2022-08-25 日本電気株式会社 情報処理装置、情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012185736A (ja) * 2011-03-07 2012-09-27 Japan Research Institute Ltd スマイルバンキング・システム
WO2021176535A1 (ja) * 2020-03-02 2021-09-10 日本電気株式会社 提示制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
WO2022176342A1 (ja) * 2021-02-17 2022-08-25 日本電気株式会社 情報処理装置、情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体

Similar Documents

Publication Publication Date Title
WO2021006203A1 (ja) 会計装置、会計方法及びプログラム
JP2023126937A (ja) 情報処理装置、情報処理方法、及びプログラム
US20240087312A1 (en) Information processing device, system, method, and non-transitory computer-readable medium storing program
WO2024062571A1 (ja) 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体
JP7505557B2 (ja) 情報処理装置、顔認証促進システム、情報処理方法、プログラム
US11488416B2 (en) Certificate recognition system, certificate recognition method, and program of verifying certificate
JP7468771B2 (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
US20240104987A1 (en) Information processing apparatus, information processing system, information processing method, and non-transitory computer-readable medium
JP7509196B2 (ja) 広告評価装置、システム、方法及びプログラム
WO2022014062A1 (ja) 価値譲渡装置、価値譲渡システム、価値譲渡方法及び非一時的なコンピュータ可読媒体
WO2021176535A1 (ja) 提示制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
JP2011165083A (ja) 監視装置および方法、並びにプログラム
WO2021181623A1 (ja) 撮影制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
JP7485044B2 (ja) 価値譲渡装置、価値譲渡システム、価値譲渡方法及び価値譲渡プログラム
JP7409483B2 (ja) 推薦装置、システム、方法及びプログラム
JP7001239B2 (ja) 認証装置、認証方法、及びプログラム
WO2023187960A1 (ja) 認証システム、認証方法およびコンピュータ可読媒体
JP2022007937A (ja) 情報制御装置、方法及びプログラム
WO2024057472A1 (ja) 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体
WO2023175968A1 (ja) 施設管理装置、システム及び方法、並びに、コンピュータ可読媒体
WO2024062585A1 (ja) 情報処理装置、認証システム、認証方法及び非一時的なコンピュータ可読媒体
JP7485042B2 (ja) 情報処理装置、顔認証促進システム、情報処理方法、プログラム
WO2021199109A1 (ja) 情報処理装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体
WO2022097278A1 (ja) 情報処理装置、情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体
WO2023188003A1 (ja) 利用制御端末、システム及び方法、利用管理サーバ及び方法、並びに、コンピュータ可読媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22959535

Country of ref document: EP

Kind code of ref document: A1