WO2021230057A1 - 販売システム、販売支援装置、販売支援方法、およびプログラム - Google Patents

販売システム、販売支援装置、販売支援方法、およびプログラム Download PDF

Info

Publication number
WO2021230057A1
WO2021230057A1 PCT/JP2021/016587 JP2021016587W WO2021230057A1 WO 2021230057 A1 WO2021230057 A1 WO 2021230057A1 JP 2021016587 W JP2021016587 W JP 2021016587W WO 2021230057 A1 WO2021230057 A1 WO 2021230057A1
Authority
WO
WIPO (PCT)
Prior art keywords
face image
age
storage means
master
sales support
Prior art date
Application number
PCT/JP2021/016587
Other languages
English (en)
French (fr)
Inventor
真彩 高畠
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2022521813A priority Critical patent/JPWO2021230057A1/ja
Priority to US17/922,832 priority patent/US20230162193A1/en
Publication of WO2021230057A1 publication Critical patent/WO2021230057A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/18—Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/202—Interconnection or interaction of plural electronic cash registers [ECR] or to host computer, e.g. network details, transfer of information from host to ECR or from ECR to ECR
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/206—Point-of-sale [POS] network systems comprising security or operator identification provisions, e.g. password entry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/405—Establishing or using transaction specific rules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions

Definitions

  • the present invention relates to a sales system, a sales support device, a sales support method, and a program.
  • age estimation is performed from the customer's face image, and identity verification is performed to confirm the age.
  • Patent Document 1 when the bar code of an age-restricted product is read at a POS (Point Of Sales) cash register, the customer's age is estimated using the customer's biometric information, and the customer is when the estimated age is less than a predetermined age.
  • POS Point Of Sales
  • Patent Document 2 when a visitor is detected at the product exchange booth, the image captured by the camera is transmitted to the centralized sales center to confirm the age, and then the visitor can purchase the age-restricted product. It is stated that.
  • the present invention has been made in view of the above circumstances, and an object thereof is to improve customer convenience when selling a specific product in an unmanned or labor-saving store.
  • the first aspect relates to sales support equipment.
  • the first sales support device related to the first aspect is It has an age estimation means, an age confirmation means, a processing means, and a storage means.
  • the age estimation means acquires a face image of a person in front of a fixture on which a specific product is displayed, and uses the face image to perform age estimation of the person.
  • the age confirmation means requests the person for age proof information, determines whether or not the acquired age proof information meets the criteria, and determines whether or not the acquired age proof information meets the criteria.
  • the processing means When the result of the determination by the age confirmation means satisfies the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image is used as a master face image to prove the age. At the same time, it is registered in the storage means for the next and subsequent authentications.
  • the second sales support device related to the first aspect has an age estimation means, a processing means, a collation means, and a storage means.
  • the age estimation means acquires a face image of the person's face and executes age estimation using the face image.
  • the processing means registers the face image as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation satisfies the standard.
  • the collating means acquires a face image for matching, which is an image of the face of the person in front of the fixture, and is registered in the storage means.
  • the processing means takes out the specific product from the fixture. Enable and When the matching means does not have the master face image that matches the matched face image in the storage means, the age estimating means executes age estimation using the matched face image. When the result of the age estimation meets the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image for matching is used as the face image for the master to estimate the age. It is registered in the storage means together with the result of.
  • the second aspect relates to a sales support method performed by at least one computer.
  • the first sales support method related to the second aspect is The sales support device A face image of a person in front of a fixture on which a specific product is displayed is acquired, and the age of the person is estimated using the face image. If the result of the age estimation does not meet the criteria, the person is requested to have age proof information, and it is determined whether or not the acquired age proof information meets the criteria. When the result of the determination meets the criteria, the specific product can be taken out from the fixture, and the face image is stored as a master face image together with the age proof information for the next authentication. Including registering with the means.
  • the second sales support method related to the second aspect is The sales support device
  • a face image of the person's face is acquired, and age estimation is performed using the face image.
  • the face image is registered as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation meets the criteria.
  • a face image for matching which is an image of the face of the person in front of the fixture, is acquired and the face image for the master registered in the storage means. And match with When the storage means has the master face image that matches the collated face image and the result of the age estimation meets the criteria, the specific product can be taken out from the fixture.
  • age estimation is performed using the collated face image.
  • the specific product can be taken out from the fixture, and the face image to be collated is used as the face image for the master, and the storage together with the result of the age estimation. Including registering with the means.
  • the third aspect concerns the sales system.
  • the first sales system related to the third aspect is Fixtures for displaying specific products and With a sales support device,
  • the sales support device is It has an age estimation means, an age confirmation means, a processing means, and a storage means.
  • the age estimation means acquires a face image of a person in front of a fixture on which a specific product is displayed, and uses the face image to perform age estimation of the person.
  • the age confirmation means requests the person for age proof information, determines whether or not the acquired age proof information meets the criteria, and determines whether or not the acquired age proof information meets the criteria.
  • the processing means When the result of the determination by the age confirmation means satisfies the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image is used as a master face image to prove the age. At the same time, it is registered in the storage means for the next and subsequent authentications.
  • the second sales system related to the third aspect is Fixtures for displaying specific products and With a sales support device
  • the sales support device is It has an age estimation means, a processing means, a collation means, and a storage means.
  • the age estimation means acquires a face image of the person's face and executes age estimation using the face image.
  • the processing means registers the face image as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation satisfies the standard.
  • the collating means acquires a face image for matching, which is an image of the face of the person in front of the fixture, and is registered in the storage means.
  • the processing means takes out the specific product from the fixture. Enable and When the matching means does not have the master face image that matches the matched face image in the storage means, the age estimating means executes age estimation using the matched face image. When the result of the age estimation meets the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image for matching is used as the face image for the master to estimate the age. It is registered in the storage means together with the result of.
  • this invention may be a program that causes at least one computer to execute the method of the second aspect, or it is a recording medium that can be read by a computer that records such a program. You may.
  • This recording medium includes a non-temporary tangible medium.
  • This computer program includes computer program code that causes the computer to implement its sales support method on the sales support device when executed by the computer.
  • the various components of the present invention do not necessarily have to be individually independent, and a plurality of components are formed as one member, and one component is formed of a plurality of members. It may be that a certain component is a part of another component, a part of a certain component overlaps with a part of another component, and the like.
  • the order of description does not limit the order in which the plurality of procedures are executed. Therefore, when implementing the method and computer program of the present invention, the order of the plurality of procedures can be changed within a range that does not hinder the contents.
  • the method of the present invention and the plurality of procedures of the computer program are not limited to being executed at different timings. Therefore, another procedure may occur during the execution of a certain procedure, a part or all of the execution timing of the certain procedure and the execution timing of the other procedure may overlap, and the like.
  • FIG. 1 It is a figure which conceptually shows the system structure of the sales system which concerns on embodiment of this invention. It is a block diagram which illustrates the hardware composition of the computer which realizes the sales support device. It is a functional block diagram which logically shows the structure of the sales support apparatus of embodiment. It is a figure which shows an example of the data structure of the authentication information. It is a flowchart which shows the operation example of the sales support apparatus of embodiment. It is a flowchart which shows an example of the process of the continuation of FIG. It is a functional block diagram which shows the logical configuration example of the sales support apparatus of embodiment. It is a figure which shows an example of the data structure of the age estimation result information. It is a flowchart which shows an example of the operation of the sales support apparatus of embodiment.
  • acquisition means that the own device retrieves data or information stored in another device or storage medium (active acquisition), and is output to the own device from the other device. Includes at least one of entering data or information (passive acquisition).
  • active acquisition include making a request or inquiry to another device and receiving the reply, and accessing and reading another device or storage medium.
  • passive acquisition may be receiving information to be delivered (or transmitted, push notification, etc.).
  • acquisition may be to select and acquire from received data or information, or to select and receive delivered data or information.
  • FIG. 1 is a diagram conceptually showing a system configuration of a sales system 1 according to an embodiment of the present invention.
  • the sales system 1 includes a sales support device 100, a storage device 200, and a camera 5. It is assumed that the store 10 is in the form of unmanned or labor-saving business.
  • the unmanned or labor-saving business form also includes the case where the store clerk is in a so-called one-operated state (a state in which the store is operated by one person).
  • a fixture 7 on which the product 20 is displayed is installed in the store 10. Further, age-restricted specific products 22 such as alcohol and tobacco are also displayed in the fixture 7.
  • the storage device 200 is connected to the sales support device 100 via the communication network 3.
  • the storage device 200 may be a device included inside the sales support device 100, a device separate from the sales support device 100, or a combination thereof.
  • the fixture 7 on which the specific product 22 is displayed has, for example, a door so that the customer C cannot freely take out the specific product 22.
  • the door may be controlled by the sales support device 100 so as not to open, the door may be locked by a key that restricts the opening and closing of the door, and the specific product 22 may be locked by the mechanism for holding the specific product 22. It may be gripped so that it cannot be taken out.
  • the sales system 1 further communicates with the mobile terminal 30.
  • the mobile terminal 30 is, for example, a smartphone, a tablet terminal, or the like.
  • the mobile terminal 30 may be the property of the customer C, or may be prepared in the store 10 and lent to the customer C.
  • a predetermined application is installed in the mobile terminal 30.
  • the predetermined application has a function of having the customer C's face and identification card photographed by the camera of the mobile terminal 30 and transmitting the image to the sales support device 100.
  • the sales system 1 may include a mobile terminal 30.
  • Camera 5 captures customer C and generates an image.
  • the camera 5 includes an image pickup device such as a lens and a CCD (Charge Coupled Device) image sensor.
  • the camera 5 may be provided with a mechanism for controlling the orientation of the camera body and the lens, zoom control, focusing, and the like by following the movement of a person entering the angle of view.
  • the image generated by the camera 5 is taken in real time and transmitted to the sales support device 100 via the communication network 3.
  • the image transmitted to the sales support device 100 does not have to be directly transmitted from the camera 5, and may be an image delayed by a predetermined time.
  • the image captured by the camera 5 may be temporarily stored in another storage device, and may be read out from the storage device by the sales support device 100 sequentially or at predetermined intervals.
  • the image transmitted to the sales support device 100 is preferably a moving image, but may be a frame image at predetermined intervals or a still image.
  • FIG. 2 is a block diagram illustrating a hardware configuration of a computer 1000 that realizes the sales support device 100.
  • the mobile terminal 30 of FIG. 1 is also realized by the computer 1000.
  • the computer 1000 has a bus 1010, a processor 1020, a memory 1030, a storage device 1040, an input / output interface 1050, and a network interface 1060.
  • the bus 1010 is a data transmission path for the processor 1020, the memory 1030, the storage device 1040, the input / output interface 1050, and the network interface 1060 to transmit and receive data to and from each other.
  • the method of connecting the processors 1020 and the like to each other is not limited to the bus connection.
  • the processor 1020 is a processor realized by a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), or the like.
  • the memory 1030 is a main storage device realized by a RAM (RandomAccessMemory) or the like.
  • the storage device 1040 is an auxiliary storage device realized by an HDD (Hard Disk Drive), SSD (Solid State Drive), memory card, ROM (Read Only Memory), or the like.
  • the storage device 1040 stores a program module that realizes each function of the sales support device 100 (for example, an age estimation unit 102, an age confirmation unit 104, a processing unit 106, a collation unit 108, etc., which will be described later).
  • the processor 1020 reads each of these program modules into the memory 1030 and executes them, each function corresponding to the program module is realized. Further, the storage device 1040 may also store each data of the storage device 200.
  • the program module may be recorded on a recording medium.
  • the recording medium for recording the program module includes a medium that can be used by the non-temporary tangible computer 1000, and the program code readable by the computer 1000 (processor 1020) may be embedded in the medium.
  • the input / output interface 1050 is an interface for connecting the computer 1000 and various input / output devices.
  • the input / output interface 1050 also functions as a communication interface for performing short-range wireless communication such as Bluetooth (registered trademark) and NFC (Near Field Communication).
  • the network interface 1060 is an interface for connecting the computer 1000 to the communication network.
  • This communication network is, for example, LAN (Local Area Network) or WAN (Wide Area Network).
  • the method of connecting the network interface 1060 to the communication network may be a wireless connection or a wired connection.
  • the computer 1000 is connected to a necessary device (for example, a mobile terminal 30, a camera 5, etc.) via the input / output interface 1050 or the network interface 1060.
  • a necessary device for example, a mobile terminal 30, a camera 5, etc.
  • the sales support device 100 may be configured by a plurality of computers 80, or may be realized by a virtual server.
  • FIG. 3 is a functional block diagram that logically shows the configuration of the sales support device 100 of the present embodiment.
  • Each component of the sales support device 100 of the present embodiment of FIG. 3 is realized by any combination of hardware and software of the computer 1000 of FIG. And, it is understood by those skilled in the art that there are various variations in the method of realizing the device and the device.
  • the functional block diagram showing the sales support device 100 of each embodiment described below shows a block of logical functional units, not a configuration of hardware units.
  • the sales support device 100 includes an age estimation unit 102, an age confirmation unit 104, a processing unit 106, and a storage device 200.
  • the age estimation unit 102 acquires a face image of a person (for example, customer C) in front of the fixture 7 on which the specific product 22 is displayed, and uses the face image to obtain the age of the person (customer C). Perform the estimation.
  • the age confirmation unit 104 requests the person to have the age proof information, and determines whether or not the acquired age proof information satisfies the standard.
  • the processing unit 106 When the result of the determination by the age confirmation unit 104 meets the criteria, the processing unit 106 enables the specific product 22 to be taken out from the fixture 7, and the face image is used as the master face image together with the age certification information next time. Register in the storage device 200 for subsequent authentication.
  • the age estimation unit 102 acquires the face image of the customer C captured by the camera 5, transmits the face image to an image analysis device (not shown) to execute age estimation, and receives the estimation result from the image analysis device. ..
  • the age estimated by the age estimation unit 102 may have a range. For example, it may be an age group such as 16 to 19 years old or 20 to 30 years old, or it may be a specific numerical value such as 18 years old or 35 years old.
  • the "criteria” used by the age confirmation unit 104 for the determination is, for example, that the result of the age estimation is the age at which the sale of the specific product 22 is not permitted, for example, "20 years or older".
  • There are various “standards” such as “21 years old and over”, “18 years old and over”, and “3 years old and over” depending on the type of specific product 22 and the sales area. good.
  • a “standard” may be set for each type of the specific product 22.
  • the age proof information includes various information read from an ID card with a face photo such as a customer C driver's license or my number card.
  • the age confirmation unit 104 causes the customer C's identification card to be photographed using the camera 5 or the mobile terminal 30 to acquire an image of the identification card.
  • the application is installed in the mobile terminal 30 in advance, and the application is started. The application may cause the customer C to take a picture with the camera of the mobile terminal 30, and the generated image may be transmitted from the mobile terminal 30 to the sales support device 100.
  • the age proof information may be an image generated by taking an identification card.
  • the age proof information may include a facial photograph of customer C extracted from the image, a feature amount extracted from the facial photograph of customer C, and the like. Further, the age proof information may include the date of birth of customer C read from the image by OCR (Optical Character Reader) or the like. Alternatively, the age proof information may include the age calculated from the date of birth of the customer C, or information indicating whether or not the age of the customer C is the age at which the sale of the specific product 22 can be permitted.
  • "to enable the removal of the specific product 22 from the fixture 7" means that the door of the fixture 7 may be controlled by the sales support device 100 so as to open, or a key for restricting the opening and closing of the door.
  • the door locked by the door may be unlocked, or the door may be unlocked by the mechanism that grips the specific product 22.
  • FIG. 4 is a diagram showing an example of the data structure of the authentication information 210.
  • the authentication information 210 is associated with at least the face image of the customer C and the age proof information. Further, the authentication information 210 may be associated with a date and time.
  • the associated date and time includes, for example, the date and time when customer C visited the store, the date and time when the face image of customer C was imaged, the date and time when the age certification information was acquired, and the date and time when the record of the authentication information 210 was stored in the storage device 200. At least one of them.
  • the face image registered in the authentication information 210 may be a feature amount of the face.
  • the master face image is registered in the storage device 200 by the processing unit 106 for the next and subsequent authentications by the age confirmation unit 104. The next time is when the customer C can once take out the specific product 22 from the fixture 7, take out the specific product 22, and then try to take out the specific product 22 from the fixture 7 again.
  • the specific product 22 is not actually taken out. You may. That is, after the door is unlocked, customer C opens the door of the fixture 7 and looks at the product, but stops purchasing the specific product 22, closes the door without removing the specific product 22 from the fixture 7, and locks the product. This may be the case. After that, when the customer C tries to take out the specific product 22 from the fixture 7 again, authentication is required.
  • customer C may be out of the store or may remain in the store until the next time or later. It may be after the payment processing of other products has been completed, or it may be before the payment processing is performed.
  • FIG. 5 is a flowchart showing an operation example of the sales support device 100 of the present embodiment.
  • the age estimation unit 102 acquires a face image of a person (for example, customer C) in front of the fixture 7 on which the specific product 22 is displayed (step S101).
  • the age confirmation unit 104 executes age estimation of the person (customer C) using the face image (step S103).
  • the age confirmation unit 104 requests the person to have age proof information (step S107), and the acquired age proof information is the reference. It is determined whether or not the condition is satisfied (step S109).
  • the processing unit 106 When the result of the determination by the age confirmation unit 104 meets the criteria (YES in step S109), the processing unit 106 enables the specific product 22 to be taken out from the fixture 7 (step S111) and uses the face image as a master. As a face image, it is registered in the storage device 200 for authentication from the next time onward together with the age proof information (step S113). Then, this process is terminated.
  • step S105 if the result of age estimation by the age estimation unit 102 in step S105 satisfies the criteria (YES in step S105), the process proceeds to step S111. If the result of the determination by the age confirmation unit 104 in step S109 does not satisfy the criteria (NO in step S109), steps S111 and S113 are bypassed and the present process is terminated. That is, if the estimated age does not meet the criteria in step S109 (NO in step S109), customer C cannot take out the specific product 22 from the fixture 7.
  • step S103 for example, when the customer C stands in front of the fixture 7 displaying the specific product 22, shooting by the camera 5 is automatically started, and the age estimation is executed. That is, customer C is not aware that the age estimation process is being performed. However, the shooting by the camera 5 does not start when a person stands in front of the fixture 7, but the range in which the person standing in front of the fixture 7 is shot may be constantly shot.
  • the front of the fixture 7 is a place where the customer C can see the specific product 22 displayed on the fixture 7, a place where the customer C stands close to the fixture 7 to take out the specific product 22 from the fixture 7, and a specific product from the fixture 7. It includes a place for performing an operation for taking out 22 and the like.
  • the specific product 22 when the result of the age estimation by the age estimation unit 102 satisfies the standard, the specific product 22 can be taken out from the fixture 7, and therefore, when the specific product is sold at an unmanned or labor-saving store. Improve customer convenience. Further, when the result of the age estimation by the age estimation unit 102 does not satisfy the standard, the age proof information is requested from the customer C and the age is confirmed, so that the specific product 22 can be sold properly. Further, the processing unit 106 registers the face image of the customer C, whose specific product 22 can be taken out, in the storage device 200 as a master face image. Therefore, when the customer C stands in front of the fixture 7 again and tries to take out the specific product 22, the face image for the master is already saved, so that the next authentication process can be omitted. As a result, the convenience of the customer C is further improved.
  • the sales support device 100 of the present embodiment does not require the age verification procedure of the customer C when the specific product 22 is already taken out from the fixture 7 of the specific product 22 and then the specific product 22 is taken out from the fixture 7 again. It is the same as the above-described embodiment except that it has a configuration to be used. Hereinafter, it will be described with reference to the functional block diagram of FIG. 3 of the first embodiment. However, the configurations of the present embodiment may be combined within a range that does not cause a contradiction with at least one of the configurations of the other embodiments.
  • the processing unit 106 accesses the storage device 200 when the result of the age estimation does not meet the standard, and when the master face image matching the face image is registered together with the age proof information, the processing unit 106 identifies from the fixture 7. Allows the product 22 to be taken out.
  • FIG. 6 is a flowchart showing an example of processing when the result of age estimation does not satisfy the criteria in the determination in step S105 of FIG.
  • the processing unit 106 accesses the storage device 200 (step S121 of FIG. 6). Then, when the master face image matching the face image is registered together with the age proof information (YES in step S123), the processing unit 106 proceeds to step S111 in FIG. 5, and the specific product 22 from the fixture 7 It can be taken out (step S111). That is, the authentication process of the age certification information in steps S107 to S109 can be bypassed. Further, in this case, the process may be terminated by omitting step S113 after step S111.
  • step S123 the processing unit 106 proceeds to step S107 in FIG. 5 and requests the customer C for the age proof information. do. Subsequent processing is the same as in the first embodiment.
  • steps S107 to S109 for example, the customer C needs to take out the identification card, take an image of the identification card using the mobile terminal 30, and send it to the sales support device 100. This work is troublesome for customer C.
  • the processing unit 106 does not request the age proof information and the fixture 7 Since it is possible to take out the specific product 22 from the customer C, the troublesome procedure is not required and the convenience of the customer C is improved.
  • FIG. 7 is a functional block diagram showing a logical configuration example of the sales support device 100 according to the embodiment of the present invention.
  • the sales support device 100 of the present embodiment is different from the above embodiment in that the age estimation is executed even when the customer C enters the store 10.
  • the sales support device 100 of the present embodiment may be combined with at least one of the configurations of the other embodiments as long as it does not cause a contradiction.
  • the sales support device 100 includes an age estimation unit 102, a processing unit 106, a collation unit 108, and a storage device 200.
  • the age estimation unit 102 acquires a face image of the person's face and executes age estimation using the face image.
  • the processing unit 106 registers the face image as a master face image in the storage device 200 in a state where it can be specified whether or not the result of age estimation satisfies the standard.
  • the collation unit 108 acquires a face image for collation that captures the face of the person in front of the fixture 7 and registers it in the storage device 200. Match with the master face image that has been created.
  • the processing unit 106 makes it possible to take out the specific product 22 from the fixture 7 when the storage device 200 has a master face image that matches the face image to be collated and the estimated age meets the standard. If the storage device 200 does not have a master face image that matches the face image to be collated by the collation unit 108, the age estimation unit 102 executes age estimation using the face image to be collated. When the result of the age estimation meets the standard, the processing unit 106 enables the specific product 22 to be taken out from the fixture 7, and uses the face image to be collated as the master face image and stores it together with the result of the age estimation. Register for 200.
  • the camera 5 since the age estimation of the customer C is executed when the customer C enters the store 10, the camera 5 may be installed at the entrance of the store 10. Alternatively, the camera 5 includes both the entrance of the store 10 and the front of the fixture 7 on which the specific product 22 is displayed in the shooting range.
  • FIG. 8 is a diagram showing an example of the data structure of the age estimation result information 220.
  • the age estimation result information 220 is associated with at least the master face image of the customer C and the age estimation result. Further, the age estimation result information 220 may be associated with a date and time. The associated date and time are stored in, for example, the date and time when customer C visited the store, the date and time when the face image of customer C was imaged, the date and time when age estimation was performed (the age estimation result was acquired), and the record of the age estimation result information 220. At least one of the date and time stored in the device 200.
  • the master face image registered in the age estimation result information 220 may be a feature amount of the face.
  • the age estimation result information 220 is stored in the storage device 200 in association with the face image of the customer C used for the age estimation and the age estimation result after the age estimation by the age estimation unit 102 is executed by the processing unit 106. Will be done.
  • the age estimation result information 220 includes information on whether or not the estimated age of customer C meets the criteria for the age limit of the specific product 22, or information indicating the estimated age itself.
  • the information on whether or not the age of the customer C meets the criteria of the age limit of the specific product 22 is, for example, information indicating whether the age of the customer C is above or below the reference age, and indicates whether the customer C is an adult or a minor. It may include information, information indicating whether the specific product 22 can be sold or not to the customer C, and the like.
  • the information indicating the estimated age of customer C is, for example, information indicating a specific age (35 years old), information indicating an age range (20 years old or older, or 15-18 years old, etc.), and an age group (40 years old). It may include information indicating a fee, etc.).
  • ⁇ Operation example> 9 and 10 are flowcharts showing an example of the operation of the sales support device 100.
  • the age estimation unit 102 acquires a face image of the person's face and executes age estimation using the face image (step S203).
  • the age estimation unit 102 acquires a face image captured by the camera 5.
  • the processing unit 106 registers the face image as a master face image in the storage device 200 in a state where it can be specified whether or not the result of age estimation satisfies the standard (step S205).
  • the collation unit 108 takes an image of the face of the person in front of the fixture 7 when a person stands in front of the fixture 7 on which the specific product 22 is displayed (YES in step S207). Is collated with the face image for collation and the face image for master registered in the storage device 200 (step S209). Here, the collation unit 108 acquires a face image captured by the camera 5. When the storage device 200 has a master face image that matches the face image to be matched and the estimated age meets the criteria (YES in step S211), the processing unit 106 takes out the specific product 22 from the fixture 7. Is possible (step S213). Then, this process is terminated.
  • the collation unit 108 refers to the age estimation result information 220, and finds, for example, a master face image whose similarity with the collated face image is equal to or higher than a predetermined threshold value. Then, the collation unit 108 reads out the age estimation result associated with the master face image. Then, the collation unit 108 determines whether or not the estimated age of the customer C satisfies the standard based on the age estimation result.
  • step S221 the process proceeds to step S221 in FIG.
  • the age estimation unit 102 executes age estimation using the face image for matching acquired in step S209 (step S221).
  • the processing unit 106 enables the specific product 22 to be taken out from the fixture 7 (step S225), and the face image to be collated is used as the master face.
  • step S227 the result of age estimation
  • step S223 If the estimated age does not meet the criteria in step S223 (NO in step S223), steps S225 and S227 are bypassed, and this process ends. That is, if the estimated age does not meet the criteria in step S223 (NO in step S223), customer C cannot take out the specific product 22 from the fixture 7.
  • the sales support device 100 may have the age confirmation unit 104 of the above embodiment.
  • the age confirmation unit 104 requests the age proof information, and the acquired age proof information meets the standard. Whether or not it may be determined may be performed.
  • the same effect as that of the above embodiment is obtained, and further, if the estimated age meets the criteria in the age estimation process at the time of entering the store, the age determination in front of the fixture 7 is not performed. Since the specific product 22 can be taken out from the fixture 7, the convenience of the customer C is improved.
  • FIG. 11 is a functional block diagram showing a logical configuration example of the sales support device 100 according to the embodiment of the present invention.
  • the sales support device 100 of the present embodiment confirms that the face image of the customer C is not a photograph or the like but a real person exists there. It is the same as the above embodiment except that it has a configuration.
  • the sales support device 100 of this embodiment has the same configuration as that of the third embodiment of FIG. 7, and further includes an authentication unit 130.
  • the configurations of the present embodiment may be combined within a range that does not cause a contradiction with at least one of the configurations of the other embodiments.
  • the authentication unit 130 performs iris recognition or liveness determination of a person before registering the master face image in the storage device 200.
  • the authentication unit 130 photographs the iris of customer C using, for example, a camera for iris photography (not shown), and uses the iris image or feature amount as the iris image to be authenticated. Further, it is registered in the age estimation result information 220 in association with the master face image.
  • the authentication unit 130 photographs the iris of the customer C using a camera for iris photography (not shown), and the iris image for authentication is the iris.
  • the master iris image registered in association with the master face image in the age estimation result information 220 or its feature amount is also transmitted to the iris recognition device.
  • the iris recognition device collates the received iris image for authentication with the iris image for master, and returns the authentication result to the sales support device 100.
  • the authentication unit 130 receives the authentication result from the iris recognition device.
  • the authentication unit 130 acquires, for example, a moving image taken by the camera 5 at the time of entering the store, and acquires, for example, movement characteristics such as blinking, line of sight, and lips of customer C, and is for authentication. As a feature amount, it is further associated with the master face image and registered in the age estimation result information 220.
  • the authentication unit 130 acquires a moving image taken by the camera 5, and features movements such as blinking, line of sight, and lips of customer C, for example. Is transmitted to the image analysis device (not shown), and the master feature amount registered in the age estimation result information 220 in association with the master face image is also transmitted to the image analysis device. ..
  • the image analysis device collates the received feature amount for authentication with the feature amount for master, and returns the authentication result to the sales support device 100.
  • the authentication unit 130 receives the authentication result from the image analysis device.
  • FIG. 12 is a flowchart showing an example of the operation of the sales support device 100.
  • the process of registering the master face image in the storage device 200 is executed before the process.
  • step S111 of FIG. 5, step S203 of FIG. 9, or step S225 of FIG. 10 the authentication unit 130 registers the master face image in the storage device 200 (step S113 of FIG. 5, step of FIG. 9).
  • step S131 Prior to S205 or step S227 in FIG. 10, a person's iris recognition or liveness determination is performed (step S131). Then, when the result of the person's iris recognition or liveness determination meets the criteria (YES in step S133), the process proceeds to step S113 in FIG. 5, step S205 in FIG. 9, or step S227 in FIG. The process of registering in the storage device 200 is performed.
  • step S133 if the result of the person's iris recognition or liveness determination does not meet the criteria (NO in step S133), the process of step S113 of FIG. 5, step S205 of FIG. 9, or step S227 of FIG. 10 is not executed. That is, the master face image of the customer C is not registered in the storage device 200.
  • the same effect as that of the above embodiment is obtained, and further, before registering the face image for the master, it is confirmed that the customer C himself / herself is there, not a face photograph or the like, so that it is illegal. Can be prevented.
  • FIG. 13 is a diagram conceptually showing the system configuration of the sales system 1 according to the embodiment of the present invention.
  • the sales system 1 of the present embodiment is the same as the sales system 1 of FIG. 1 except that the sales system 1 of FIG. 1 is further configured and the payment device 40 is provided.
  • the sales support device 100 of the present embodiment has the same configuration as the sales support device 100 of FIG. 11, it will be described with reference to the functional block diagram of FIG.
  • the sales support device 100 of the present embodiment may be combined with at least one of the configurations of the other embodiments as long as it does not cause a contradiction.
  • the payment device 40 is, for example, a POS terminal that performs registration processing and payment processing of products purchased by customer C.
  • the product registration process may be other than the configuration performed by the POS terminal, and is not particularly limited.
  • the product when it is detected that a product has been placed in the shopping cart, the product may be specified and the product registration process may be performed.
  • an IC tag such as RFID (Radio Frequency Identification) having an IC chip on which the product code is recorded is attached to the product, and the product code is read by the IC tag reader before going to the payment device 40. It may be configured to perform registration processing.
  • RFID Radio Frequency Identification
  • the payment device 40 performs payment processing for products that have already been registered.
  • the payment method (cash, credit card, electronic money, etc.) is not particularly limited.
  • the processing unit 106 registers the visited information indicating that the purchased product has been settled, after a certain period of time has passed, or once has gone out of the store, in association with the face image for the master, in the storage device 200.
  • the authentication unit 130 further performs iris authentication or liveness determination.
  • FIG. 14 is a flowchart showing an example of the operation of the sales support device 100.
  • FIG. 14A is a flowchart showing a processing procedure for registering the visited information in association with the face image for the master.
  • FIG. 14B is a flowchart showing a processing procedure according to the presence or absence of the visited information.
  • step S143 registers the store visit information.
  • A1 After the payment processing of the purchased product of customer C is completed by the payment device 40 (a2) After the payment processing is completed, after a certain period of time (a3) After the specific product 22 can be taken out from the fixture 7. After a certain period of time (a4) After the master face image of customer C is registered in the storage device 200, after a certain period of time (a5) When customer C goes out of the store
  • the processing unit 106 acquires the face image of the customer C who is performing the payment processing by the payment device 40.
  • the processing unit 106 acquires, for example, a face image of a person who has left the exit of the store 10. Then, in (a1), (a2), and (a5), the acquired face image is collated with the master face image registered in the storage device 200. Then, when a master face image having a similarity equal to or higher than the threshold value is found, the visit information is associated with the master face image and registered.
  • the flow of FIG. 14B is, in other words, after any of the processes of step S111 of FIG. 5, step S203 of FIG. 9, and step S225 of FIG. 10, in other words, step S113 of FIG. 5, step S205 of FIG. And, in any one of steps S227 of FIG. 10, it is executed before the process of registering the master face image in the storage device 200.
  • step S151 the authentication unit 130 proceeds to step S131 in FIG. 12 to further perform iris authentication or liveness determination. If the authentication result meets the criteria, the process proceeds to any one of step S113 of FIG. 5, step S205 of FIG. 9, and step S227 of FIG. 10, and the master face image is registered in the storage device 200.
  • the same effect as that of the above embodiment is obtained, and further, when the customer C goes out of the store once and then returns to the store 10, the payment process is completed, or once. , When the specific product 22 is taken out from the fixture 7 and then the specific product 22 is taken out from the fixture 7 again, the customer C is not requested for the age proof information again, and the authentication using a photograph or the like is performed. Can prevent fraudulent activities.
  • the sales support device 100 of the present embodiment is the same as the above-described embodiment except that it has a configuration for erasing the master face image registered in the storage device 200 when a predetermined condition is satisfied.
  • the functional block diagram of the sales support device 100 of the third embodiment of FIG. 7 will be described.
  • the configurations of the present embodiment may be combined within a range that does not cause a contradiction with at least one of the configurations of the other embodiments.
  • the processing unit 106 erases the master face image of the customer C from the storage device 200 when any of the following conditions is satisfied.
  • (B1) When it is detected that the payment processing of the purchased product in the store has been performed Specifically, the payment device 40 receives a notification that the payment processing has been completed.
  • (B2) When it is detected that a person has gone out of the store, specifically, the camera 5 tracks the customer C in the store 10 by image analysis processing, and the customer C goes out of the store 10. Detect that.
  • B3 When a certain time has elapsed after the master face image is registered in the storage device 200 Specifically, the processing unit 106 has elapsed a certain time after registering the master face image in the storage device 200. To monitor.
  • ⁇ Operation example> 15 to 16 are flowcharts showing an operation example of the sales support device 100.
  • the processing unit 106 determines whether or not the settlement processing of the purchased product in the store is completed (step S161). For example, when the payment device 40 receives a notification that the payment process has been completed (YES in step S161), the processing unit 106 erases the customer C's master face image from the storage device 200 (step S163).
  • step S171 it is determined whether or not a person has gone out of the store 10 (step S171). For example, when it is detected that the customer C has gone out of the store 10 by tracking the customer C by the camera 5 (YES in step S171), the processing unit 106 displays the master face image of the customer C from the storage device 200. Erase (step S163).
  • this process is executed after the process of registering the master face image in the storage device 200 is performed in any one of step S113 of FIG. 5, step S205 of FIG. 9, and step S227 of FIG. Will be done.
  • a certain time has elapsed after the process of registering the master face image in the storage device 200 in any one of step S113 of FIG. 5, step S205 of FIG. 9, and step S227 of FIG. Whether or not it is determined (step S181). Then, when a certain time has elapsed (YES in step S181), the processing unit 106 erases the master face image of the customer C from the storage device 200 (step S163).
  • FIG. 17 is a flowchart showing an operation example of the procedure for acquiring age certification information. Hereinafter, it will be described with reference to FIGS. 17 and 18.
  • the application is started on the mobile terminal 30.
  • This application realizes some of the functions of the age confirmation unit 104.
  • the age confirmation unit 104 instructs the customer C to take a picture of the identification card V and the face of the customer C so as to be included in the same image.
  • the age confirmation unit 104 activates the camera of the mobile terminal 30, and indicates, for example, a message such as "Please take a picture so that the face and the ID card are included together", a shooting view, and a shooting area.
  • the frame and the shooting button are displayed on the screen of the mobile terminal 30.
  • Customer C uses the mobile terminal 30 to take an image of the identification card V and the face of customer C so as to be included in the same image as shown in FIG. 18A (step S301).
  • a message instructing customer C to include at least the photograph written on the identification card and the date of birth may be output (voice or display) in the shooting range.
  • a message output may be used to instruct the customer C to take a picture of both the front side and the back side of the ID card in order.
  • the mobile terminal 30 acquires the captured image and transmits it to the sales support device 100 (step S303).
  • the age confirmation unit 104 when the age confirmation unit 104 receives the image transmitted from the mobile terminal 30 (step S311), the age confirmation unit 104 performs the processes after step S313. Specifically, the age confirmation unit 104 first extracts the face image of the customer C from the received image (step S313). Further, the age confirmation unit 104 extracts the area of the facial photograph of the identification card from the received image (step S315). Then, the age confirmation unit 104 collates the face image extracted in step S313 with the face photograph extracted in step S315 (step S317).
  • step S319 the age confirmation unit 104 further proceeds to step S321. For example, if the similarity between the two images is equal to or greater than the threshold value as a result of collation, the criteria may be satisfied. If the criteria are not satisfied (NO in step S319), this process ends.
  • FIG. 18B is an example of the screen of the mobile terminal 30 showing that the face image and the photograph of the identification card match.
  • the age confirmation unit 104 further extracts a region image of the age proof information (date of birth) of the identification card from the image received in step S311, and further extracts the date of birth described in the extracted image region as OCR. Is converted into date of birth data and acquired (step S321).
  • the age confirmation unit 104 determines whether or not the acquired date of birth data meets the criteria (step S323). Specifically, the age of customer C may be calculated from the date of birth data and the current date to determine whether or not the criteria are met, or the date of birth that is the reference age on the day may be calculated and acquired. Means It may be determined whether the date of birth data is before or after the date of birth.
  • step S323 If the criteria are met (YES in step S323), the process proceeds to step S111 in FIG. In step S111, the specific product 22 can be taken out from the fixture 7. On the other hand, if the criteria are not satisfied (NO in step S323), the process ends. That is, since it is not possible to take out the specific product 22 from the fixture 7, the customer C cannot purchase the specific product 22.
  • the mobile terminal 30 can be operated by the customer C to easily acquire the age proof information of the customer C.
  • the collation unit 108 causes the customer C to take a picture of the face using the mobile terminal 30 (FIG. 19 (a)).
  • the image captured by the mobile terminal 30 is transmitted to the sales support device 100, and the collating unit 108 acquires a face image to be collated from the mobile terminal 30.
  • the collation unit 108 collates the collated face image with the master face image registered in the storage device 200 (step S209 in FIG. 9).
  • the processing unit 106 When the storage device 200 has a master face image that matches the face image to be matched and the estimated age meets the criteria (YES in step S211) (FIG. 19 (b)), the processing unit 106 has a fixture 7. It is possible to take out the specific product 22 from (step S213). At this time, the processing unit 106 displays a screen 400 indicating that the identity verification has been completed on the mobile terminal 30.
  • the screen 400 has an information display unit 402 indicating that identity verification has been completed, a barcode display unit 404 in which key information for enabling the specific product 22 to be taken out from the fixture 7, and a barcode display unit 404. Includes the expiration date display unit 406 and.
  • the barcode may be another two-dimensional code or a QR code (registered trademark).
  • a code reader (not shown) is installed in the fixture 7, and the customer C holds the bar code displayed on the mobile terminal 30 over the code reader of the fixture 7, so that the code reader can obtain key information from the bar code.
  • the key information read by the code reader of the fixture 7 is used to perform a process such as unlocking the door of the fixture 7 so that the specific product 22 can be taken out from the fixture 7.
  • the barcode becomes invalid after the expiration date, for example.
  • the barcode is erased.
  • the barcode may also be used for payment processing in the payment device 40.
  • the barcode may include information on a credit card used by customer C for payment.
  • the so-called QR code payment barcode may include key information that enables the specific product 22 to be taken out from the fixture 7.
  • the age estimation means acquires a face image of a person in front of a fixture on which a specific product is displayed, and uses the face image to perform age estimation of the person.
  • the age confirmation means requests the person for age proof information, determines whether or not the acquired age proof information meets the criteria, and determines whether or not the acquired age proof information meets the criteria.
  • the processing means When the result of the determination by the age confirmation means satisfies the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image is used as a master face image to prove the age. At the same time, a sales support device that is registered in the storage means for authentication from the next time onward. 2. 2. 1. 1. In the sales support device described in When the processing means does not meet the criteria, the processing means accesses the storage means, and when the master face image matching the face image is registered together with the age proof information, the processing means accesses the storage means. A sales support device that enables the removal of the specific product from the fixture. 3. 3. It is equipped with an age estimation means, a processing means, a collation means, and a storage means.
  • the age estimation means acquires a face image of the person's face and executes age estimation using the face image.
  • the processing means registers the face image as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation satisfies the standard.
  • the collating means acquires a face image for matching, which is an image of the face of the person in front of the fixture, and is registered in the storage means. Collate with the master face image and When the storage means has the master face image matching the matched face image and the result of the age estimation satisfies the criteria, the processing means takes out the specific product from the fixture.
  • the age estimating means executes age estimation using the matched face image.
  • the processing means enables the specific product to be taken out from the fixture, and the face image for matching is used as the face image for the master to estimate the age.
  • the processing means registers the visited information indicating that the purchased product has been settled, after a certain period of time has passed, or once has gone out of the store, in association with the master face image, and registered in the storage means.
  • the authentication means is a sales support device that further performs the iris authentication or the liveness determination when the store visit information is registered in the storage means. 6. 1. 1. From 4. In the sales support device described in any one of The processing means is a sales support device that erases the master face image from the storage means when it detects that the payment processing of the purchased product in the store has been performed. 7. 1. 1. From 4.
  • the processing means is a sales support device that erases the master face image from the storage means when it detects that the person has gone out of the store. 8. 1. 1. From 7. In the sales support device described in any one of The processing means is a sales support device that erases the master face image from the storage means after a certain period of time has elapsed after the master face image is registered in the storage means.
  • the sales support device is It is equipped with an age estimation means, an age confirmation means, a processing means, and a storage means.
  • the age estimation means acquires a face image of a person in front of a fixture on which a specific product is displayed, and uses the face image to perform age estimation of the person.
  • the age confirmation means requests the person for age proof information, determines whether or not the acquired age proof information meets the criteria, and determines whether or not the acquired age proof information meets the criteria.
  • the processing means When the result of the determination by the age confirmation means satisfies the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image is used as a master face image to prove the age. At the same time, a sales system that registers with the storage means for the next and subsequent authentication. 10. 9. In the sales system described in In the sales support device When the processing means does not meet the criteria, the processing means accesses the storage means, and when the master face image matching the face image is registered together with the age proof information, the processing means accesses the storage means. A sales system that enables the removal of the specific product from the fixture. 11.
  • the sales support device is It is equipped with an age estimation means, a processing means, a collation means, and a storage means.
  • the age estimation means acquires a face image of the person's face and executes age estimation using the face image.
  • the processing means registers the face image as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation satisfies the standard.
  • the collating means acquires a face image for matching, which is an image of the face of the person in front of the fixture, and is registered in the storage means.
  • the processing means takes out the specific product from the fixture. Enable and When the matching means does not have the master face image that matches the matched face image in the storage means, the age estimating means executes age estimation using the matched face image. When the result of the age estimation meets the criteria, the processing means enables the specific product to be taken out from the fixture, and the face image for matching is used as the face image for the master to estimate the age. A sales system that is registered in the storage means together with the result of. 12. 9. From 11.
  • a sales system further comprising an authentication means for performing iris recognition or liveness determination of the person before registering the master face image in the storage means.
  • the processing means registers the visited information indicating that the purchased product has been settled, after a certain period of time has passed, or once has gone out of the store, in association with the master face image, and registered in the storage means.
  • the authentication means is a sales system that further performs the iris authentication or the liveness determination when the store visit information is registered in the storage means. 14. 9. From 12.
  • the processing means is a sales system that erases the master face image from the storage means when it detects that the payment processing of the purchased product in the store has been performed. 15. 9. From 12. In the sales system described in any one of In the sales support device The processing means is a sales system that erases the master face image from the storage means when it detects that the person has gone out of the store. 16. 9. From 15. In the sales system described in any one of In the sales support device The processing means is a sales system that erases the master face image from the storage means after a certain period of time has elapsed after the master face image is registered in the storage means.
  • the sales support device A face image of a person in front of a fixture on which a specific product is displayed is acquired, and the age of the person is estimated using the face image. If the result of the age estimation does not meet the criteria, the person is requested to have age proof information, and it is determined whether or not the acquired age proof information meets the criteria. When the result of the determination meets the criteria, the specific product can be taken out from the fixture, and the face image is stored as a master face image together with the age proof information for the next authentication. Sales support method to register in the means. 18. 17.
  • the sales support device If the result of the age estimation does not meet the criteria, the storage means is accessed, and if the master face image matching the face image is registered together with the age proof information, the furniture from the fixture is used. A sales support method that enables the removal of specific products. 19.
  • the sales support device When a person enters the store, a face image of the person's face is acquired, and age estimation is performed using the face image. The face image is registered as a master face image in the storage means in a state where it can be specified whether or not the result of the age estimation meets the criteria.
  • a face image for matching which is an image of the face of the person in front of the fixture, is acquired and the face image for the master registered in the storage means. And match with When the storage means has the master face image that matches the collated face image and the result of the age estimation meets the criteria, the specific product can be taken out from the fixture. If the storage means does not have the master face image that matches the collated face image, age estimation is performed using the collated face image. When the result of the age estimation meets the criteria, the specific product can be taken out from the fixture, and the face image to be collated is used as the master face image, and the storage together with the result of the age estimation. Sales support method to register in the means. 20. 17.
  • the sales support device further A sales support method for performing iris recognition or liveness determination of the person before registering the master face image in the storage means. 21. 20.
  • the sales support method described in The sales support device After the payment processing of the purchased product, after a certain period of time has passed, or once the store has been out of the store, the store visit information is associated with the master face image and registered in the storage means. A sales support method for further performing the iris authentication or the liveness determination when the visited information is registered in the storage means. 22. 17. From 20.
  • the specific product can be taken out from the fixture, and the face image is stored as a master face image together with the age proof information for the next authentication.
  • the storage means is accessed, and if the master face image matching the face image is registered together with the age proof information, the furniture from the fixture is used.
  • On the computer A procedure for acquiring a face image of a person's face when entering the store and performing age estimation using the face image.
  • a face image for matching which is an image of the face of the person in front of the fixture, is acquired and the face image for the master registered in the storage means.
  • Procedure to match with A procedure for enabling the specific product to be taken out from the fixture when the storage means has the master face image matching the collated face image and the result of the age estimation meets the criteria.

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Engineering & Computer Science (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Collating Specific Patterns (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

販売支援装置（１００）は、年齢推定部（１０２）と、年齢確認部（１０４）と、処理部（１０６）と、記憶装置（２００）と、を備え、年齢推定部（１０２）は、特定商品（２２）が陳列されている什器（７）の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて人の年齢推定を実行し、年齢確認部（１０４）は、年齢推定部（１０２）による年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、処理部（１０６）は、年齢確認部（１０４）による判定の結果が基準を満たした場合、什器（７）からの特定商品（２２）の取り出しを可能にするとともに、顔画像をマスター用顔画像として、年齢証明情報とともに、次回以降の認証のために記憶装置（２００）に登録する。

Description

販売システム、販売支援装置、販売支援方法、およびプログラム
　本発明は、販売システム、販売支援装置、販売支援方法、およびプログラムに関する。
　無人または省人店舗において、酒タバコなどの年齢制限のある商品を販売する為、顧客の顔画像から年齢推定を行い、そして本人確認を行い、年齢確認することが知られている。
　特許文献１には、ＰＯＳ（Point Of Sales）レジで年齢制限商品のバーコードを読み取った場合に、顧客の生体情報を用いて顧客の年齢を推定し、推定年齢が所定年齢未満の場合に顧客が所有するＩＤカードをスキャンして顧客の実年齢を取得して、年齢を判定する販売支援システムが記載されている。
　特許文献２には、商品交換ブースに来店者を検知すると、カメラで撮像した画像を集中販売センターに送信して年齢確認が行われた後、来店者が年齢制限商品の購入可能な状態にすることが記載されている。
国際公開第２０１７／０４６９９５号 特開２００８－１７１０８３号公報
　一方、無人または省人店舗では、年齢制限商品を収容する什器は、顧客が自由に取れないようになっている。このため、顧客の利便性が損なわれてしまう。
　本発明は上記事情に鑑みてなされたものであり、その目的とするところは、無人または省人店舗において、特定商品を販売する際の顧客の利便性を向上することにある。
　本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。
　第一の側面は、販売支援装置に関する。
　第一の側面に係る第１の販売支援装置は、
　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を有し、
　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する。
　第一の側面に係る第２の販売支援装置は、
　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を有し、
　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する。
　第二の側面は、少なくとも１つのコンピュータにより実行される販売支援方法に関する。
　第二の側面に係る第１の販売支援方法は、
　販売支援装置が、
　特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために記憶手段に登録する、ことを含む。
　第二の側面に係る第２の販売支援方法は、
　販売支援装置が、
　人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶手段に登録し、
　特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、ことを含む。
　第三の側面は、販売システムに関する。
　第三の側面に係る第１の販売システムは、
　特定商品を陳列する什器と、
　販売支援装置と、を有し、
　前記販売支援装置は、
　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を有し、
　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する。
　第三の側面に係る第２の販売システムは、
　特定商品を陳列する什器と、
　販売支援装置と、を有し、
　前記販売支援装置は、
　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を有し、
　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する。
　なお、本発明の他の側面としては、上記第二の側面の方法を少なくとも１つのコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録したコンピュータが読み取り可能な記録媒体であってもよい。この記録媒体は、非一時的な有形の媒体を含む。
　このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、販売支援装置上で、その販売支援方法を実施させるコンピュータプログラムコードを含む。
　なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
　また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
　また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施するときには、その複数の手順の順番は内容的に支障のない範囲で変更することができる。
　さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
　上記各側面によれば、無人または省人店舗において、特定商品を販売する際の顧客の利便性を向上することができる。
本発明の実施の形態に係る販売システムのシステム構成を概念的に示す図である。 販売支援装置を実現するコンピュータのハードウェア構成を例示するブロック図である。 実施形態の販売支援装置の構成を論理的に示す機能ブロック図である。 認証情報のデータ構造の一例を示す図である。 実施形態の販売支援装置の動作例を示すフローチャートである。 図５の続きの処理の一例を示すフローチャートである。 実施形態の販売支援装置の論理的な構成例を示す機能ブロック図である。 年齢推定結果情報のデータ構造の一例を示す図である。 実施形態の販売支援装置の動作の一例を示すフローチャートである。 実施形態の販売支援装置の動作の一例を示すフローチャートである。 実施形態の販売支援装置の論理的な構成例を示す機能ブロック図である。 実施形態の販売支援装置の動作の一例を示すフローチャートである。 実施形態の販売システムのシステム構成を概念的に示す図である。 実施形態の販売支援装置の動作の一例を示すフローチャートである。 実施形態の販売支援装置の動作例を示すフローチャートである。 実施形態の販売支援装置の動作例を示すフローチャートである。 年齢証明情報の取得手順の動作例を示すフローチャートである。 身分証明書による年齢証明情報の取得方法を説明するための図である。 バーコード利用による什器の扉の開閉方法を説明するための図である。
　以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。以下の各図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
　実施形態において「取得」とは、自装置が他の装置や記憶媒体に格納されているデータまたは情報を取りに行くこと（能動的な取得）、および、自装置に他の装置から出力されるデータまたは情報を入力すること（受動的な取得）の少なくとも一方を含む。能動的な取得の例は、他の装置にリクエストまたは問い合わせしてその返信を受信すること、及び、他の装置や記憶媒体にアクセスして読み出すこと等がある。また、受動的な取得の例は、配信（または、送信、プッシュ通知等）される情報を受信すること等がある。さらに、「取得」とは、受信したデータまたは情報の中から選択して取得すること、または、配信されたデータまたは情報を選択して受信することであってもよい。
（第１実施形態）
＜システム概要＞
　図１は、本発明の実施の形態に係る販売システム１のシステム構成を概念的に示す図である。
　販売システム１は、販売支援装置１００と、記憶装置２００と、カメラ５とを備える。店舗１０は、無人または省人の営業形態を行っている場面を想定している。無人または省人の営業形態は、店員が所謂ワンオペ状態（一人で店を運営する状態）にある場合も含む。店舗１０には、商品２０が陳列される什器７が設置されている。さらに、年齢制限のある、酒、たばこなどの特定商品２２も什器７に陳列されている。
　記憶装置２００は、販売支援装置１００に通信ネットワーク３を介して接続される。ただし、記憶装置２００は、販売支援装置１００の内部に含まれる装置であってもよいし、販売支援装置１００とは別体の装置であってもよいし、これらの組み合わせであってもよい。
　特定商品２２が陳列されている什器７は、例えば、扉が付いていて、顧客Ｃが自由に特定商品２２を取り出せない仕組みになっている。例えば、扉は開かないように販売支援装置１００によって制御されてもよいし、扉の開閉を制限する鍵によって扉は施錠されていてもよいし、特定商品２２を保持する機構によって特定商品２２は取り出せないように把持されていてもよい。
　販売システム１は、さらに、携帯端末３０と通信する。携帯端末３０は、例えば、スマートフォン、タブレット端末などである。携帯端末３０は、顧客Ｃの所有物であってもよいし、店舗１０に準備され、顧客Ｃに貸与するものであってもよい。携帯端末３０には、所定のアプリケーションがインストールされている。所定のアプリケーションは、顧客Ｃの顔と身分証明書を携帯端末３０のカメラで撮影させ、画像を販売支援装置１００に送信する機能を有する。なお、販売システム１は、携帯端末３０を含んでもよい。
　カメラ５は、顧客Ｃを撮影し、画像を生成する。カメラ５は、レンズとＣＣＤ（Charge Coupled Device）イメージセンサといった撮像素子を備える。カメラ５は、画角に入る人物の動きに合わせて追従してカメラ本体やレンズの向きの制御、ズーム制御、焦点合わせ等を行う機構を備えてもよい。
　カメラ５により生成される画像は、リアルタイムに撮影され、販売支援装置１００に通信ネットワーク３を介して送信されるのが好ましい。ただし、販売支援装置１００に送信される画像は、カメラ５から直接送信されなくてもよく、所定の時間遅延した画像であってもよい。カメラ５で撮像された画像は、一旦他の記憶装置に格納され、販売支援装置１００が記憶装置から逐次または所定間隔毎に読み出してもよい。さらに、販売支援装置１００に送信される画像は、動画像であるのが好ましいが、所定間隔毎のフレーム画像であってもよいし、静止画であってもよい。
＜ハードウェア構成例＞
　図２は、販売支援装置１００を実現するコンピュータ１０００のハードウェア構成を例示するブロック図である。図１の携帯端末３０も、コンピュータ１０００によって実現される。
　コンピュータ１０００は、バス１０１０、プロセッサ１０２０、メモリ１０３０、ストレージデバイス１０４０、入出力インタフェース１０５０、およびネットワークインタフェース１０６０を有する。
　バス１０１０は、プロセッサ１０２０、メモリ１０３０、ストレージデバイス１０４０、入出力インタフェース１０５０、およびネットワークインタフェース１０６０が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ１０２０などを互いに接続する方法は、バス接続に限定されない。
　プロセッサ１０２０は、ＣＰＵ（Central Processing Unit）やＧＰＵ（Graphics Processing Unit）などで実現されるプロセッサである。
　メモリ１０３０は、ＲＡＭ（Random Access Memory）などで実現される主記憶装置である。
　ストレージデバイス１０４０は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、メモリカード、又はＲＯＭ（Read Only Memory）などで実現される補助記憶装置である。ストレージデバイス１０４０は販売支援装置１００の各機能（例えば、後述する年齢推定部１０２、年齢確認部１０４、処理部１０６、照合部１０８など）を実現するプログラムモジュールを記憶している。プロセッサ１０２０がこれら各プログラムモジュールをメモリ１０３０上に読み込んで実行することで、そのプログラムモジュールに対応する各機能が実現される。また、ストレージデバイス１０４０は記憶装置２００の各データも記憶してもよい。
　プログラムモジュールは、記録媒体に記録されてもよい。プログラムモジュールを記録する記録媒体は、非一時的な有形のコンピュータ１０００が使用可能な媒体を含み、その媒体に、コンピュータ１０００（プロセッサ１０２０）が読み取り可能なプログラムコードが埋め込まれてよい。
　入出力インタフェース１０５０は、コンピュータ１０００と各種入出力機器とを接続するためのインタフェースである。入出力インタフェース１０５０は、ブルートゥース（登録商標）、ＮＦＣ（Near Field Communication）などの近距離無線通信を行う通信インタフェースとしても機能する。
　ネットワークインタフェース１０６０は、コンピュータ１０００を通信ネットワークに接続するためのインタフェースである。この通信ネットワークは、例えばＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）である。ネットワークインタフェース１０６０が通信ネットワークに接続する方法は、無線接続であってもよいし、有線接続であってもよい。
　そして、コンピュータ１０００は、入出力インタフェース１０５０またはネットワークインタフェース１０６０を介して、必要な機器（例えば、携帯端末３０、カメラ５等）に接続する。
　販売支援装置１００は、複数のコンピュータ８０により構成されてもよいし、仮想サーバにより実現されてもよい。
＜機能構成例＞
　図３は、本実施形態の販売支援装置１００の構成を論理的に示す機能ブロック図である。図３の本実施形態の販売支援装置１００の各構成要素は、図２のコンピュータ１０００のハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。以下説明する各実施形態の販売支援装置１００を示す機能ブロック図は、ハードウェア単位の構成ではなく、論理的な機能単位のブロックを示している。
　販売支援装置１００は、年齢推定部１０２と、年齢確認部１０４と、処理部１０６と、記憶装置２００と、を備える。年齢推定部１０２は、特定商品２２が陳列されている什器７の前方の人（例えば、顧客Ｃ）の顔を撮像した顔画像を取得し、当該顔画像を用いて人（顧客Ｃ）の年齢推定を実行する。年齢確認部１０４は、年齢推定部１０２による年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定する。処理部１０６は、年齢確認部１０４による判定の結果が基準を満たした場合、什器７からの特定商品２２の取り出しを可能にするとともに、顔画像をマスター用顔画像として、年齢証明情報とともに、次回以降の認証のために記憶装置２００に登録する。
　年齢推定部１０２は、カメラ５により撮像した顧客Ｃの顔画像を取得し、当該顔画像を画像解析装置（不図示）に送信して年齢推定を実行させ、画像解析装置から推定結果を受信する。
　年齢推定部１０２により推定される年齢は範囲を有していてもよい。例えば、１６～１９歳、２０～３０歳などの年齢層であってもよいし、１８歳、３５歳などのように特定の数値であってもよい。
　年齢確認部１０４が判定に用いる「基準」は、例えば、年齢推定の結果が、特定商品２２の販売が許可されていない年齢以上、例えば、「２０歳以上」である。特定商品２２の種類や販売地域によって、「基準」は、「２１歳以上」、「１８歳以上」、「３歳以上」など様々であり、適宜設定を受け付けて「基準」は変更できてもよい。特定商品２２の種類毎に「基準」を設定できてもよい。
　年齢証明情報は、例えば、顧客Ｃの運転免許証またはマイナンバーカードなど顔写真付きの身分証明書から読み取った各種情報を含む。年齢確認部１０４は、例えば、顧客Ｃの身分証明書をカメラ５または携帯端末３０を用いて撮影させて身分証明書の画像を取得する。上記したように、携帯端末３０には予めアプリケーションがインストールされていて、アプリケーションを起動する。アプリケーションにより、携帯端末３０のカメラで顧客Ｃに撮影させ、生成された画像は携帯端末３０から販売支援装置１００に送信されてもよい。
　年齢証明情報は、身分証明書を撮影して生成される画像であってもよい。年齢証明情報は、当該画像から抽出される顧客Ｃの顔写真または顧客Ｃの顔写真から抽出される特徴量などを含んでもよい。さらに、年齢証明情報は、当該画像からＯＣＲ（Optical Character Reader）などにより読み取られた顧客Ｃの生年月日を含んでもよい。あるいは、年齢証明情報は、顧客Ｃの生年月日から算出される年齢、または顧客Ｃの年齢が特定商品２２の販売を許可できる年齢であるか否かを示す情報などを含んでもよい。
　処理部１０６において、「什器７からの特定商品２２の取り出しを可能にする」とは、什器７の扉は開くように販売支援装置１００により制御されてもよいし、扉の開閉を制限する鍵によって施錠されている扉の鍵を解錠されてもよいし、特定商品２２を把持している機構による把持を解除してもよい。
　図４は、認証情報２１０のデータ構造の一例を示す図である。認証情報２１０は、少なくとも顧客Ｃの顔画像と、年齢証明情報とが関連付けられている。さらに、認証情報２１０は、日時を関連付けてもよい。関連付けられる日時は、例えば、顧客Ｃが来店した日時、顧客Ｃの顔画像を撮像した日時、年齢証明情報を取得した日時、および当該認証情報２１０のレコードが記憶装置２００に記憶された日時などのうち少なくともいずれか一つである。
　認証情報２１０に登録される顔画像は、顔の特徴量であってもよい。マスター用顔画像は、処理部１０６により、年齢確認部１０４による次回以降の認証のために記憶装置２００に登録される。次回とは、顧客Ｃが一度、什器７からの特定商品２２の取り出しが可能になり、特定商品２２を取り出した後、再度、什器７から特定商品２２を取り出そうとしたときである。
　ただし、特定商品２２が取り出し可能になった後、什器７から特定商品２２を取り出すために、例えば、什器７の扉が解錠され、扉を開けた後、実際には特定商品２２を取り出さなくてもよい。つまり、扉が解錠された後、顧客Ｃが什器７の扉を開けて商品を見たが、特定商品２２の購入をやめ、特定商品２２を什器７から取り出さずに扉を閉め、施錠されたような場合であってもよい。その後、再度顧客Ｃが什器７から特定商品２２を取り出そうとする場合には、認証が必要となる。
　また、次回以降までの間に、顧客Ｃは店外に出ていてもよいし、店内に居たままであってもよい。他の商品の決済処理を済ませた後であってもよいし、決済処理を行う前であってもよい。
＜動作例＞
　図５は、本実施形態の販売支援装置１００の動作例を示すフローチャートである。
　年齢推定部１０２は、特定商品２２が陳列されている什器７の前方の人（例えば、顧客Ｃ）の顔を撮像した顔画像を取得する（ステップＳ１０１）。年齢確認部１０４は、当該顔画像を用いて人（顧客Ｃ）の年齢推定を実行する（ステップＳ１０３）。年齢確認部１０４は、年齢推定部１０２による年齢推定の結果が基準を満たさなかった場合（ステップＳ１０５のＮＯ）、当該人に年齢証明情報を要求し（ステップＳ１０７）、取得した年齢証明情報が基準を満たすか否か判定する（ステップＳ１０９）。処理部１０６は、年齢確認部１０４による判定の結果が基準を満たした場合（ステップＳ１０９のＹＥＳ）、什器７からの特定商品２２の取り出しを可能にするとともに（ステップＳ１１１）、顔画像をマスター用顔画像として、年齢証明情報とともに、次回以降の認証のために記憶装置２００に登録する（ステップＳ１１３）。そして、本処理を終了する。
　一方、ステップＳ１０５で年齢推定部１０２による年齢推定の結果が基準を満たした場合（ステップＳ１０５のＹＥＳ）、ステップＳ１１１に進む。また、ステップＳ１０９で年齢確認部１０４による判定の結果が基準を満たさなかった場合（ステップＳ１０９のＮＯ）、ステップＳ１１１とステップＳ１１３はバイパスして本処理を終了する。つまり、ステップＳ１０９で推定年齢が基準を満たさなかった場合（ステップＳ１０９のＮＯ）、顧客Ｃは什器７から特定商品２２を取り出すことはできない。
　上記ステップＳ１０３の処理は、例えば、顧客Ｃが特定商品２２を陳列している什器７の前に立つと自動的にカメラ５による撮影が開始されて、年齢推定が実行される。つまり顧客Ｃは、年齢推定処理が行われているという意識はない。ただし、カメラ５による撮影は、什器７の前方に人が立ったときに開始するのではなく、什器７の前方に立った人が撮影される範囲を常時撮影していてもよい。
　什器７の前方とは、什器７に陳列されている特定商品２２を顧客Ｃが見ることができる場所、什器７から特定商品２２を取り出すために什器７に近づいて立つ場所、什器７から特定商品２２を取り出すための操作などを行うための場所などを含む。
　本実施形態によれば、年齢推定部１０２による年齢推定の結果が基準を満たした場合、什器７から特定商品２２の取り出しが可能になるため、無人または省人店舗において、特定商品を販売する際の顧客の利便性を向上する。さらに、年齢推定部１０２による年齢推定の結果が基準を満たさない場合に、年齢証明情報を顧客Ｃに要求し、年齢確認を行うので、特定商品２２の販売を適正に行うことができる。さらに、処理部１０６は、特定商品２２の取り出しが可能になった顧客Ｃの顔画像をマスター用顔画像として記憶装置２００に登録する。このため、再度、顧客Ｃが什器７の前に立ち、特定商品２２を取り出そうとした場合に、既にマスター用顔画像が保存されているため、次回の認証処理を省略することが可能になる。これにより、さらに、顧客Ｃの利便性が向上する。
（第２実施形態）
　本実施形態の販売支援装置１００は、既に特定商品２２の什器７からの特定商品２２の取り出した後、再び特定商品２２を什器７から取り出そうとした場合に、顧客Ｃの年齢証明手続きを不要にする構成を有する点以外は上記実施形態と同様である。以下、第１実施形態の図３の機能ブロック図を用いて説明する。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
＜機能構成例＞
　処理部１０６は、年齢推定の結果が基準を満たさなかった場合、記憶装置２００にアクセスし、顔画像に一致するマスター用顔画像が年齢証明情報とともに登録されている場合は、什器７からの特定商品２２の取り出しを可能にする。
＜動作例＞
　図６は、図５のステップＳ１０５の判定で年齢推定の結果が基準を満たしていない場合の処理の一例を示すフローチャートである。
　図５のステップＳ１０５において、処理部１０６は、年齢推定の結果が基準を満たさなかった場合（ステップＳ１０５のＮＯ）、記憶装置２００にアクセスする（図６のステップＳ１２１）。そして、顔画像に一致するマスター用顔画像が年齢証明情報とともに登録されている場合は（ステップＳ１２３のＹＥＳ）、処理部１０６は、図５のステップＳ１１１に進み、什器７からの特定商品２２の取り出しを可能にする（ステップＳ１１１）。つまり、ステップＳ１０７～ステップＳ１０９の年齢証明情報の認証処理をバイパスできる。また、この場合は、ステップＳ１１１の後のステップＳ１１３は省略して処理を終了してよい。
　一方、顔画像に一致するマスター用顔画像が年齢証明情報とともに登録されていない場合は（ステップＳ１２３のＮＯ）、処理部１０６は、図５のステップＳ１０７に進み、顧客Ｃに年齢証明情報を要求する。その後の処理は第１実施形態と同様である。
　このステップＳ１０７～ステップＳ１０９では、例えば、顧客Ｃが身分証明書を取り出して携帯端末３０を用いて身分証明書を撮影して販売支援装置１００に送信するという操作を顧客Ｃが行う必要があり、この作業は顧客Ｃにとって面倒なものである。
　本実施形態によれば、上記実施形態と同様な効果を奏するとともに、既にマスター用顔画像が記憶装置２００に登録されている場合は、処理部１０６は、年齢証明情報を要求せずに什器７からの特定商品２２の取り出しを可能にするので、面倒な手続きが不要となり顧客Ｃの利便性が向上する。
（第３実施形態）
＜機能構成例＞
　図７は、本発明の実施の形態に係る販売支援装置１００の論理的な構成例を示す機能ブロック図である。上記実施形態では、特定商品２２が陳列されている什器７の前に顧客Ｃが立ったときに、当該顧客Ｃの年齢推定を実行していた。本実施形態の販売支援装置１００は、顧客Ｃが店舗１０に入店したときにも年齢推定を実行する点で上記実施形態と相違する。ただし、本実施形態の販売支援装置１００は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
　販売支援装置１００は、年齢推定部１０２と、処理部１０６と、照合部１０８と、記憶装置２００と、を備える。
　年齢推定部１０２は、人が入店する時、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行する。処理部１０６は、当該顔画像をマスター用顔画像として年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶装置２００に登録する。照合部１０８は、特定商品２２が陳列されている什器7の前方に人が立ったときに、什器７の前方の人の顔を撮像した被照合用顔画像を取得して記憶装置２００に登録されているマスター用顔画像と照合する。処理部１０６は、記憶装置２００に被照合用顔画像と一致するマスター用顔画像があり、かつ、推定年齢が基準を満たした場合、什器７からの特定商品２２の取り出しを可能にする。年齢推定部１０２は、照合部１０８により記憶装置２００に被照合用顔画像と一致するマスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行する。処理部１０６は、年齢推定の結果が基準を満たした場合、什器７からの特定商品２２の取り出しを可能にするとともに、被照合用顔画像をマスター用顔画像として、年齢推定の結果とともに記憶装置２００に登録する。
　本実施形態では、顧客Ｃが店舗１０に入店したときに顧客Ｃの年齢推定を実行するため、店舗１０の入口にもカメラ５が設置されてよい。あるいは、カメラ５は、店舗１０の入口と特定商品２２が陳列されている什器７の前方の両方を撮影範囲に含む。
　図８は、年齢推定結果情報２２０のデータ構造の一例を示す図である。年齢推定結果情報２２０は、少なくとも顧客Ｃのマスター用顔画像と、年齢推定結果とが関連付けられている。さらに、年齢推定結果情報２２０は、日時を関連付けてもよい。関連付けられる日時は、例えば、顧客Ｃが来店した日時、顧客Ｃの顔画像を撮像した日時、年齢推定を行った（年齢推定結果を取得した）日時、および当該年齢推定結果情報２２０のレコードが記憶装置２００に記憶された日時などのうち少なくともいずれか一つである。
　年齢推定結果情報２２０に登録されるマスター用顔画像は、顔の特徴量であってもよい。年齢推定結果情報２２０は、処理部１０６により、年齢推定部１０２による年齢推定が実行された後、年齢推定に用いた顧客Ｃの顔画像と、年齢推定の結果とが関連付けて記憶装置２００に記憶される。
　ここで、年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶装置２００に記憶することとは、以下の年齢推定結果情報２２０を記憶装置２００に記憶することである。例えば、年齢推定結果情報２２０は、顧客Ｃの推定年齢が特定商品２２の年齢制限の基準を満たしているか否かの情報、あるいは、推定された年齢そのものを示す情報を含む。顧客Ｃの年齢が特定商品２２の年齢制限の基準を満たしているか否かの情報は、例えば、顧客Ｃの年齢が基準年齢以上か未満かを示す情報、顧客Ｃは成人か未成年かを示す情報、顧客Ｃに特定商品２２を販売可か販売不可かを示す情報などを含んでもよい。顧客Ｃの推定された年齢を示す情報は、例えば、特定の年齢（３５歳）を示す情報、年齢の範囲（２０歳以上、または、１５～１８歳など）を示す情報、年齢層（４０歳代など）を示す情報などを含んでもよい。
＜動作例＞
　図９および図１０は、販売支援装置１００の動作の一例を示すフローチャートである。
　まず、年齢推定部１０２は、人が入店する時（ステップＳ２０１のＹＥＳ）、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行する（ステップＳ２０３）。ここでは、年齢推定部１０２は、カメラ５で撮像された顔画像を取得する。処理部１０６は、当該顔画像をマスター用顔画像として年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶装置２００に登録する（ステップＳ２０５）。
　次に、照合部１０８は、特定商品２２が陳列されている什器７の前方に人が立ったときに（ステップＳ２０７のＹＥＳ）、什器７の前方の人の顔を撮像した被照合用顔画像を取得し、当該被照合用顔画像と記憶装置２００に登録されているマスター用顔画像と照合する（ステップＳ２０９）。ここでは、照合部１０８は、カメラ５で撮像された顔画像を取得する。処理部１０６は、記憶装置２００に被照合用顔画像と一致するマスター用顔画像があり、かつ、推定年齢が基準を満たした場合（ステップＳ２１１のＹＥＳ）、什器７からの特定商品２２の取り出しを可能にする（ステップＳ２１３）。そして、本処理を終了する。
　ステップＳ２１１では、照合部１０８は、年齢推定結果情報２２０を参照し、例えば、被照合用顔画像との類似度が所定閾値以上となったマスター用顔画像を見つける。そして、照合部１０８は、当該マスター用顔画像に関連付けられている年齢推定結果を読み出す。そして、照合部１０８は、年齢推定結果に基づいて、当該顧客Ｃの推定年齢が基準を満たすか否かを判定する。
　一方、照合部１０８により記憶装置２００に被照合用顔画像と一致するマスター用顔画像がなかった場合（ステップＳ２１１のＮＯ）、図１０のステップＳ２２１に進む。年齢推定部１０２は、ステップＳ２０９で取得した当該被照合用顔画像を用いて年齢推定を実行する（ステップＳ２２１）。処理部１０６は、年齢推定の結果が基準を満たした場合（ステップＳ２２３のＹＥＳ）、什器７からの特定商品２２の取り出しを可能にするとともに（ステップＳ２２５）、被照合用顔画像をマスター用顔画像として、年齢推定の結果とともに記憶装置２００に登録する（ステップＳ２２７）。そして、本処理を終了する。
　なお、ステップＳ２２３で推定年齢が基準を満たさなかった場合（ステップＳ２２３のＮＯ）、ステップＳ２２５およびステップＳ２２７はバイパスされ、本処理は終了する。つまり、ステップＳ２２３で推定年齢が基準を満たさなかった場合（ステップＳ２２３のＮＯ）、顧客Ｃは什器７から特定商品２２を取り出すことはできない。
　さらに、本実施形態において、販売支援装置１００は、上記実施形態の年齢確認部１０４を有してもよい。その場合、上記実施形態と同様に、ステップＳ２２３で推定年齢が基準を満たさなかった場合（ステップＳ２２３のＮＯ）、年齢確認部１０４により年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否の判定処理を行ってもよい。
　本実施形態によれば、上記実施形態と同様な効果を奏するとともに、さらに、入店時の年齢推定処理において推定年齢が基準を満たしていれば、什器７の前での年齢判定は行わずに特定商品２２を什器７から取り出すことが可能になるので、顧客Ｃの利便性が向上する。
（第４実施形態）
＜機能構成例＞
　図１１は、本発明の実施の形態に係る販売支援装置１００の論理的な構成例を示す機能ブロック図である。本実施形態の販売支援装置１００は、顧客Ｃの顔画像を記憶装置２００に登録する前に、当該顧客Ｃの顔画像が写真などではなく本物の人がそこに存在していることを確認する構成を有する点以外は、上記実施形態と同様である。本実施形態の販売支援装置１００は、図７の第３実施形態と同じ構成を有するとともに、さらに、認証部１３０を備える。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
　認証部１３０は、記憶装置２００へのマスター用顔画像の登録を行う前に、人の虹彩認証またはライブネス判定を行う。
　虹彩認証の場合、認証部１３０は、入店時に、例えば、虹彩撮影用のカメラ（不図示）を用いて顧客Ｃの虹彩を撮影し、虹彩の画像または特徴量を、被認証用虹彩画像として、さらにマスター用顔画像に関連付けて年齢推定結果情報２２０に登録しておく。
　そして、記憶装置２００へのマスター用顔画像の登録を行う前に、認証部１３０は、虹彩撮影用のカメラ（不図示）を用いて顧客Ｃの虹彩を撮影し、被認証用虹彩画像を虹彩認証装置（不図示）に送信するとともに、年齢推定結果情報２２０にマスター用顔画像に関連付けて登録されているマスター用虹彩画像またはその特徴量も虹彩認証装置に送信する。虹彩認証装置は、受信した被認証用虹彩画像とマスター用虹彩画像を照合し、認証結果を販売支援装置１００に返信する。認証部１３０は虹彩認証装置から認証結果を受信する。
　ライブネス判定の場合、認証部１３０は、入店時に、例えば、カメラ５で撮影される動画像を取得し、例えば、顧客Ｃのまばたき、視線、くちびるなどの動きの特徴を取得し、被認証用特徴量として、さらにマスター用顔画像に関連付けて年齢推定結果情報２２０に登録しておく。
　そして、記憶装置２００へのマスター用顔画像の登録を行う前に、認証部１３０は、カメラ５で撮影される動画像を取得し、例えば、顧客Ｃのまばたき、視線、くちびるなどの動きの特徴を取得し、被認証用特徴量を画像解析装置（不図示）に送信するとともに、年齢推定結果情報２２０にマスター用顔画像に関連付けて登録されているマスター用特徴量も画像解析装置に送信する。画像解析装置は、受信した被認証用特徴量とマスター用特徴量を照合し、認証結果を販売支援装置１００に返信する。認証部１３０は画像解析装置から認証結果を受信する。
＜動作例＞
　図１２は、販売支援装置１００の動作の一例を示すフローチャートである。図１２のフローチャートは、図５のステップＳ１１１、図９のステップＳ２０３、および図１０のステップＳ２２５のいずれかの処理の後、言い換えると、図５のステップＳ１１３、図９のステップＳ２０５、および図１０のステップＳ２２７のいずれかにおいてマスター用顔画像を記憶装置２００に登録する処理の前に実行される。
　図５のステップＳ１１１、図９のステップＳ２０３、または図１０のステップＳ２２５の後、認証部１３０は、記憶装置２００へのマスター用顔画像の登録を行う（図５のステップＳ１１３、図９のステップＳ２０５、または図１０のステップＳ２２７の）前に、人の虹彩認証またはライブネス判定を行う（ステップＳ１３１）。そして、人の虹彩認証またはライブネス判定の結果が基準を満たした場合（ステップＳ１３３のＹＥＳ）、図５のステップＳ１１３、図９のステップＳ２０５、または図１０のステップＳ２２７に進み、マスター用顔画像を記憶装置２００に登録する処理を行う。一方、人の虹彩認証またはライブネス判定の結果が基準を満たさなかった場合（ステップＳ１３３のＮＯ）、図５のステップＳ１１３、図９のステップＳ２０５、または図１０のステップＳ２２７の処理は実行されない。つまり、当該顧客Ｃのマスター用顔画像は記憶装置２００に登録されない。
　本実施形態によれば、上記実施形態と同様な効果を奏するとともに、さらに、マスター用顔画像を登録する前に、顔写真などではなく、顧客Ｃ本人がそこに居ることを確認でするので不正を防止できる。
（第５実施形態）
＜機能構成例＞
　図１３は、本発明の実施の形態に係る販売システム１のシステム構成を概念的に示す図である。本実施形態の販売システム１は、図１の販売システム１の構成に加え、さらに、決済装置４０を備えている以外は、図１の販売システム１と同様である。また、本実施形態の販売支援装置１００は、図１１の販売支援装置１００と同じ構成を有するため、図１１の機能ブロック図を用いて説明する。ただし、本実施形態の販売支援装置１００は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
　決済装置４０は、例えば、顧客Ｃが購入する商品の登録処理および決済処理を行うＰＯＳ端末などである。ただし、商品登録処理は、ＰＯＳ端末で行う構成以外も考えられ、特に限定されない。例えば、買い物用カートに商品が入れられたことを検知すると当該商品を特定し、商品登録処理を行う構成であってもよい。あるいは、商品に商品コードが記録されたＩＣチップを有するＲＦＩＤ（Radio Frequency Identification）などのＩＣタグが取り付けられていて、決済装置４０に行くまでの間に、ＩＣタグリーダにより商品コードが読み取られて商品登録処理を行う構成であってもよい。
　決済装置４０では、商品登録済みの商品の精算処理を行う。精算手段（現金、クレジットカード、電子マネーなど）は特に限定されない。
　処理部１０６は、購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報をマスター用顔画像に関連付けて記憶装置２００に登録する。
　認証部１３０は、当該来店済み情報が記憶装置２００に登録されていたときには、虹彩認証またはライブネス判定をさらに行う。
＜動作例＞
　図１４は、販売支援装置１００の動作の一例を示すフローチャートである。図１４（ａ）は来店済み情報をマスター用顔画像に関連付けて登録する処理手順を示すフローチャートである。図１４（ｂ）は、当該来店済み情報の有無に応じた処理手順を示すフローチャートである。
　図１４（ａ）では、以下のいずれかの条件が満たされたときにステップＳ１４３に進んで来店済み情報を登録する。
（ａ１）決済装置４０により顧客Ｃの購入商品の決済処理が終了した後
（ａ２）決済処理終了後、一定時間結果後
（ａ３）什器７からの特定商品２２の取り出しが可能になった後、一定時間経過後
（ａ４）顧客Ｃのマスター用顔画像が記憶装置２００に登録された後、一定時間経過後
（ａ５）顧客Ｃが店外に出たとき
　（ａ１）、（ａ２）の場合、処理部１０６は、決済装置４０で決済処理を行っている顧客Ｃの顔画像を取得する。（ａ５）の場合、処理部１０６は、例えば、店舗１０の出口から退出した人物の顔画像を取得する。そして、（ａ１）、（ａ２）、（ａ５）において、取得した顔画像を記憶装置２００に登録されているマスター用顔画像と照合する。そして、類似度が閾値以上のマスター用顔画像が見つかった場合、当該マスター用顔画像に来店済み情報を関連付けて登録する。
　（ａ３）または（ａ４）の場合、什器７からの特定商品２２の取り出しが可能になった後、マスター用顔画像が登録されたときに、時間経過を監視し、一定時間が経過したら、当該マスター用顔画像来店済み情報を関連付けて登録する。
　図１４（ｂ）のフローは、図５のステップＳ１１１、図９のステップＳ２０３、および図１０のステップＳ２２５のいずれかの処理の後、言い換えると、図５のステップＳ１１３、図９のステップＳ２０５、および図１０のステップＳ２２７のいずれかにおいてマスター用顔画像を記憶装置２００に登録する処理の前に実行される。
　認証部１３０は、当該来店済み情報が記憶装置２００に登録されていたときには（ステップＳ１５１のＹＥＳ）、図１２のステップＳ１３１に進み、虹彩認証またはライブネス判定をさらに行う。その認証結果が基準を満たした場合、図５のステップＳ１１３、図９のステップＳ２０５、および図１０のステップＳ２２７のいずれかに進み、マスター用顔画像が記憶装置２００に登録される。
　本実施形態によれば、上記実施形態と同様な効果を奏するとともに、さらに、顧客Ｃが、一度店外に出た後、店舗１０に戻った場合や、決済処理が済んだ後、あるいは、一度、什器７から特定商品２２を取り出した後に、再度什器７から特定商品２２を取り出そうとした場合に、再び、顧客Ｃに年齢証明情報を要求することもなく、かつ、写真などを用いた認証などの不正行為を防ぐことができる。
（第６実施形態）
＜機能構成例＞
　本実施形態の販売支援装置１００は、所定の条件を満たす場合に、記憶装置２００に登録されたマスター用顔画像を消去する構成を有する点以外は、上記実施形態と同じである。本実施形態では、図７の第３実施形態の販売支援装置１００の機能ブロック図を用いて説明する。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
＜機能構成例＞
　処理部１０６は、以下のいずれかの条件が満たされた場合に、記憶装置２００から顧客Ｃのマスター用顔画像を消去する。
（ｂ１）当該店舗内での購入商品の決済処理が行われたことを検出したとき
　具体的には、決済装置４０から決済処理が終了したことの通知を受信する。
（ｂ２）人が当該店舗の外に出たことを検出したとき
　具体的には、カメラ５が顧客Ｃを画像解析処理により店舗１０内で追跡を行い、店舗１０の外に顧客Ｃが出たことを検出する。
（ｂ３）記憶装置２００にマスター用顔画像が登録された後、一定時間が経過したとき
　具体的には、処理部１０６は、記憶装置２００にマスター用顔画像を登録した後、一定時間の経過を監視する。
＜動作例＞
　図１５～図１６は、販売支援装置１００の動作例を示すフローチャートである。
　図１５（ａ）の例では、処理部１０６は、店舗内での購入商品の決済処理が終了したか否かを判定する（ステップＳ１６１）。例えば、決済装置４０から決済処理が終了したことの通知を受信すると（ステップＳ１６１のＹＥＳ）、処理部１０６は、記憶装置２００から顧客Ｃのマスター用顔画像を消去する（ステップＳ１６３）。
　図１５（ｂ）の例では、人が当該店舗１０の外に出たことか否かを判定する（ステップＳ１７１）。例えば、カメラ５による顧客Ｃの追跡により、顧客Ｃが店舗１０の外に出たことを検出した場合（ステップＳ１７１のＹＥＳ）、処理部１０６は、記憶装置２００から顧客Ｃのマスター用顔画像を消去する（ステップＳ１６３）。
　図１６の例では、図５のステップＳ１１３、図９のステップＳ２０５、および図１０のステップＳ２２７のいずれかにおいてマスター用顔画像を記憶装置２００に登録する処理が行われた後、本処理は実行される。処理部１０６は、図５のステップＳ１１３、図９のステップＳ２０５、および図１０のステップＳ２２７のいずれかにおいてマスター用顔画像を記憶装置２００に登録する処理が行われた後、一定時間が経過したか否かを判定する（ステップＳ１８１）。そして、一定時間が経過した場合（ステップＳ１８１のＹＥＳ）、処理部１０６は、記憶装置２００から顧客Ｃのマスター用顔画像を消去する（ステップＳ１６３）。
　本実施形態によれば、上記実施形態と同様な効果を奏するとともに、さらに、適切なタイミングで個人情報を消去できる。
　以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
＜身分証明書による年齢証明情報の取得＞
　たとえば、上記実施形態における身分証明書による年齢証明情報の取得方法（図５のステップＳ１０７～ステップＳ１０９）の具体例について説明する。
　図１７は、年齢証明情報の取得手順の動作例を示すフローチャートである。以下、図１７と図１８を用いて説明する。
　まず、携帯端末３０において、アプリケーションが起動されている。このアプリケーションが年齢確認部１０４の機能の一部を実現する。年齢確認部１０４は、顧客Ｃに対し、身分証明書Ｖと、顧客Ｃの顔を一緒の画像に入るように撮影するように指示する。
　年齢確認部１０４は、携帯端末３０のカメラを起動し、例えば、「顔と身分証明書が一緒に入るように写真を撮影してください。」などのメッセージと、撮影ビューと、撮影領域を示す枠と、撮影ボタンとを携帯端末３０のディスプレイ上に画面表示する。
　顧客Ｃは、携帯端末３０を用いて、図１８（ａ）に示すように、身分証明書Ｖと、顧客Ｃの顔を一緒の画像に入るように撮影する（ステップＳ３０１）。撮影範囲には、身分証明書に記載されている写真と、生年月日とを少なくとも含むように顧客Ｃに指示するメッセージを出力（音声または表示）してもよい。あるいは、身分証明書の表面と裏面の両方を順番に撮影するように顧客Ｃに指示するメッセージ出力（音声または表示）してもよい。
　携帯端末３０は、撮影された画像を取得し、販売支援装置１００に送信する（ステップＳ３０３）。
　販売支援装置１００において、年齢確認部１０４は携帯端末３０から送信された画像を受信する（ステップＳ３１１）と、年齢確認部１０４は、ステップＳ３１３以降の処理を行う。具体的には、年齢確認部１０４は、まず、受信した画像から顧客Ｃの顔画像を抽出する（ステップＳ３１３）。さらに、年齢確認部１０４は、受信した画像から身分証明書の顔写真の領域を抽出する（ステップＳ３１５）。そして、年齢確認部１０４は、ステップＳ３１３で抽出した顔画像と、ステップＳ３１５で抽出した顔写真と画像を照合する（ステップＳ３１７）。
　年齢確認部１０４は、２つの画像の照合結果が基準を満たした場合（ステップＳ３１９のＹＥＳ）、さらにステップＳ３２１に進む。例えば、照合の結果、２つの画像の類似度が閾値以上の場合、基準を満たすとしてもよい。基準を満たさない場合（ステップＳ３１９のＮＯ）、本処理を終了する。例えば、図１８（ｂ）は、顔画像と身分証明書の写真が一致したことを示す携帯端末３０の画面の例である。
　年齢確認部１０４は、ステップＳ３１１で受信した画像からさらに、身分証明書の年齢証明情報（生年月日）の領域画像を抽出し、さらに、抽出した画像領域に記載されている生年月日をＯＣＲにより生年月日データに変換し取得する（ステップＳ３２１）。
　年齢確認部１０４は、取得した生年月日データが基準を満たすか否かを判定する（ステップＳ３２３）。具体的には、生年月日データと現在の日付から、顧客Ｃの年齢を算出し、基準を満たすか判定してもよいし、当日、基準年齢となる生年月日を算出しておき、取得手段生年月日データがその生年月日より前か後を判定してもよい。
　基準を満たす場合（ステップＳ３２３のＹＥＳ）、図５のステップＳ１１１に進む。ステップＳ１１１では、什器７からの特定商品２２の取り出しが可能にされる。一方、基準を満たさない場合は（ステップＳ３２３のＮＯ）、処理を終了する。つまり、什器７からの特定商品２２の取り出しは可能とはならないので、顧客Ｃは特定商品２２を購入することはできない。
　ただし、ステップＳ３１３～ステップＳ３１９の処理と、ステップＳ３２１～ステップＳ３２３の処理の順序は、入れ替えてもよい。
　この構成によれば、顧客Ｃにより携帯端末３０を操作させて、顧客Ｃの年齢証明情報を容易に取得することができる。
＜バーコード利用による什器の扉の開閉＞
　他の実施形態において、携帯端末３０に表示されたバーコードにより什器７の扉を開閉する構成例について説明する。この構成は、図９のステップＳ２０７で、特定商品２２の什器７の前に顧客Ｃが立ったとき、ステップＳ２０９～ステップＳ２１３の処理を携帯端末３０のアプリケーションで実現する例である。
　例えば、図９のステップＳ２０９で、照合部１０８は、携帯端末３０を用いて顧客Ｃに顔を撮影させる（図１９（ａ））。携帯端末３０で撮像された画像は販売支援装置１００に送信され、照合部１０８は、携帯端末３０から被照合用顔画像を取得する。そして、照合部１０８は、当該被照合用顔画像と記憶装置２００に登録されているマスター用顔画像と照合する（図９のステップＳ２０９）。
　処理部１０６は、記憶装置２００に被照合用顔画像と一致するマスター用顔画像があり、かつ、推定年齢が基準を満たした場合（ステップＳ２１１のＹＥＳ）（図１９（ｂ））、什器７からの特定商品２２の取り出しを可能にする（ステップＳ２１３）。このとき、処理部１０６は、携帯端末３０に本人確認が完了したことを示す画面４００を表示する。画面４００は、本人確認が完了したことを示す情報の表示部４０２と、什器７から特定商品２２を取り出し可能にするためのキー情報が記録されているバーコードの表示部４０４と、当該バーコードの有効期限の表示部４０６とを含む。
　ただし、バーコードは、他の二次元コードであってもよく、ＱＲコード（登録商標）であってもよい。
　例えば、什器７には、コードリーダ（不図示）が設置されており、顧客Ｃが携帯端末３０に表示されるバーコードを什器７のコードリーダにかざすことで、コードリーダはバーコードからキー情報を読み取る。什器７のコードリーダで読み取られたキー情報により、什器７の扉の解錠など、什器７から特定商品２２を取り出し可能にする処理が行われる。
　当該バーコードは、例えば、有効期限を過ぎると無効となる。例えば、バーコードは消去される。また、当該バーコードは、決済装置４０における決済処理にも使用できてもよい。例えば、バーコードには、顧客Ｃが決済に使用するクレジットカードの情報などが含まれていてもよい。あるいは、所謂ＱＲコード決済のバーコードに、什器７から特定商品２２の取り出しを可能するキー情報を含んでもよい。
　以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
　なお、本発明において利用者に関する情報を取得、利用する場合は、これを適法に行うものとする。
　上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下に限られない。
１．　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を備え、
　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する、販売支援装置。
２．　１．に記載の販売支援装置において、
　前記処理手段は、前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売支援装置。
３．　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を備え、
　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売支援装置。
４．　１．から３．のいずれか一つに記載の販売支援装置において、
　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う認証手段をさらに備える、販売支援装置。
５．　４．に記載の販売支援装置において、
　前記処理手段は、購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
　前記認証手段は、当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売支援装置。
６．　１．から４．のいずれか一つに記載の販売支援装置において、
　前記処理手段は、当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
７．　１．から４．のいずれか一つに記載の販売支援装置において、
　前記処理手段は、前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
８．　１．から７．のいずれか一つに記載の販売支援装置において、
　前記処理手段は、前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
９．　特定商品を陳列する什器と、
　販売支援装置と、を備え、
　前記販売支援装置は、
　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を備え、
　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する販売システム。
１０．　９．に記載の販売システムにおいて、
　前記販売支援装置において、
　　前記処理手段は、前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売システム。
１１．　特定商品を陳列する什器と、
　販売支援装置と、を備え、
　前記販売支援装置は、
　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を備え、
　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売システム。
１２．　９．から１１．のいずれか一つに記載の販売システムにおいて、
　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う認証手段をさらに備える、販売システム。
１３．　１２．に記載の販売システムにおいて、
　前記販売支援装置において、
　前記処理手段は、購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
　前記認証手段は、当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売システム。
１４．　９．から１２．のいずれか一つに記載の販売システムにおいて、
　前記販売支援装置において、
　前記処理手段は、当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
１５．　９．から１２．のいずれか一つに記載の販売システムにおいて、
　前記販売支援装置において、
　前記処理手段は、前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
１６．　９．から１５．のいずれか一つに記載の販売システムにおいて、
　前記販売支援装置において、
　前記処理手段は、前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
１７．　販売支援装置が、
　特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
　前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
　前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために記憶手段に登録する、販売支援方法。
１８．　１７．に記載の販売支援方法において、
　前記販売支援装置が、
　前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売支援方法。
１９．　販売支援装置が、
　人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
　当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶手段に登録し、
　特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
　前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売支援方法。
２０．　１７．から１９．のいずれか一つに記載の販売支援方法において、
　前記販売支援装置が、さらに、
　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う、販売支援方法。
２１．　２０．に記載の販売支援方法において、
　前記販売支援装置が、
　購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
　当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売支援方法。
２２．　１７．から２０．のいずれか一つに記載の販売支援方法において、
　前記販売支援装置が、
　当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
２３．　１７．から２０．のいずれか一つに記載の販売支援方法において、
　前記販売支援装置が、
　前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
２４．　１７．から２３．のいずれか一つに記載の販売支援方法において、
　前記販売支援装置が、
　前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
２５．　コンピュータに、
　特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行する手順、
　前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定する手順、
　前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために記憶手段に登録する手順、を実行させるためのプログラム。
２６．　２５．に記載のプログラムにおいて、
　前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする手順、をコンピュータに実行させるためのプログラム。
２７．　コンピュータに、
　人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行する手順、
　当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶手段に登録する手順、
　特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合する手順、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にする手順、
　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行する手順、
　前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する手順、を実行させるためのプログラム。
２８．　２５．から２７．のいずれか一つに記載のプログラムにおいて、
　さらに、前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う手順、をコンピュータに実行させるためのプログラム。
２９．　２８．に記載のプログラムにおいて、
　購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録する手順、
　当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う手順、をコンピュータに実行させるためのプログラム。
３０．　２５．から２８．のいずれか一つに記載のプログラムにおいて、
　当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
３１．　２５．から２８．のいずれか一つに記載のプログラムにおいて、
　前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
３２．　２５．から３１．のいずれか一つに記載のプログラムにおいて、
　前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
　この出願は、２０２０年５月１３日に出願された日本出願特願２０２０－０８４５４４号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
１　販売システム
３　通信ネットワーク
５　カメラ
７　什器
１０　店舗
２０　商品
２２　特定商品
３０　携帯端末
４０　決済装置
８０　コンピュータ
１００　販売支援装置
１０２　年齢推定部
１０４　年齢確認部
１０６　処理部
１０８　照合部
１３０　認証部
２００　記憶装置
２１０　認証情報
２２０　年齢推定結果情報
４００　画面
１０００　コンピュータ
１０１０　バス
１０２０　プロセッサ
１０３０　メモリ
１０４０　ストレージデバイス
１０５０　入出力インタフェース
１０６０　ネットワークインタフェース

Claims (32)

  1. 　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を備え、
    　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
    　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
    　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する、販売支援装置。
  2. 　請求項１に記載の販売支援装置において、
    　前記処理手段は、前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売支援装置。
  3. 　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を備え、
    　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
    　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
    　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
    　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
    　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
    　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売支援装置。
  4. 　請求項１から３のいずれか一項に記載の販売支援装置において、
    　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う認証手段をさらに備える、販売支援装置。
  5. 　請求項４に記載の販売支援装置において、
    　前記処理手段は、購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
    　前記認証手段は、当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売支援装置。
  6. 　請求項１から４のいずれか一項に記載の販売支援装置において、
    　前記処理手段は、当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
  7. 　請求項１から４のいずれか一項に記載の販売支援装置において、
    　前記処理手段は、前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
  8. 　請求項１から７のいずれか一項に記載の販売支援装置において、
    　前記処理手段は、前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援装置。
  9. 　特定商品を陳列する什器と、
    　販売支援装置と、を備え、
    　前記販売支援装置は、
    　年齢推定手段と、年齢確認手段と、処理手段と、記憶手段と、を備え、
    　前記年齢推定手段は、特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
    　前記年齢確認手段は、前記年齢推定手段による前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
    　前記処理手段は、前記年齢確認手段による前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために前記記憶手段に登録する販売システム。
  10. 　請求項９に記載の販売システムにおいて、
    　前記販売支援装置において、
    　　前記処理手段は、前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売システム。
  11. 　特定商品を陳列する什器と、
    　販売支援装置と、を備え、
    　前記販売支援装置は、
    　年齢推定手段と、処理手段と、照合手段と、記憶手段と、を備え、
    　前記年齢推定手段は、人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
    　前記処理手段は、当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で前記記憶手段に登録し、
    　前記照合手段は、特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
    　前記処理手段は、前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
    　前記年齢推定手段は、前記照合手段により前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
    　前記処理手段は、前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売システム。
  12. 　請求項９から１１のいずれか一項に記載の販売システムにおいて、
    　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う認証手段をさらに備える、販売システム。
  13. 　請求項１２に記載の販売システムにおいて、
    　前記販売支援装置において、
    　前記処理手段は、購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
    　前記認証手段は、当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売システム。
  14. 　請求項９から１２のいずれか一項に記載の販売システムにおいて、
    　前記販売支援装置において、
    　前記処理手段は、当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
  15. 　請求項９から１２のいずれか一項に記載の販売システムにおいて、
    　前記販売支援装置において、
    　前記処理手段は、前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
  16. 　請求項９から１５のいずれか一項に記載の販売システムにおいて、
    　前記販売支援装置において、
    　前記処理手段は、前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売システム。
  17. 　販売支援装置が、
    　特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行し、
    　前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定し、
    　前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために記憶手段に登録する、販売支援方法。
  18. 　請求項１７に記載の販売支援方法において、
    　前記販売支援装置が、
    　前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする、販売支援方法。
  19. 　販売支援装置が、
    　人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行し、
    　当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶手段に登録し、
    　特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合し、
    　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にし、
    　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行し、
    　前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する、販売支援方法。
  20. 　請求項１７から１９のいずれか一項に記載の販売支援方法において、
    　前記販売支援装置が、さらに、
    　前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う、販売支援方法。
  21. 　請求項２０に記載の販売支援方法において、
    　前記販売支援装置が、
    　購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録し、
    　当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う、販売支援方法。
  22. 　請求項１７から２０のいずれか一項に記載の販売支援方法において、
    　前記販売支援装置が、
    　当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
  23. 　請求項１７から２０のいずれか一項に記載の販売支援方法において、
    　前記販売支援装置が、
    　前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
  24. 　請求項１７から２３のいずれか一項に記載の販売支援方法において、
    　前記販売支援装置が、
    　前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する、販売支援方法。
  25. 　コンピュータに、
    　特定商品が陳列されている什器の前方の人の顔を撮像した顔画像を取得し、当該顔画像を用いて前記人の年齢推定を実行する手順、
    　前記年齢推定の結果が基準を満たさなかった場合、当該人に年齢証明情報を要求し、取得した年齢証明情報が基準を満たすか否か判定する手順、
    　前記判定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記顔画像をマスター用顔画像として、前記年齢証明情報とともに、次回以降の認証のために記憶手段に登録する手順、を実行させるためのプログラム。
  26. 　請求項２５に記載のプログラムにおいて、
    　前記年齢推定の結果が前記基準を満たさなかった場合、前記記憶手段にアクセスし、前記顔画像に一致する前記マスター用顔画像が前記年齢証明情報とともに登録されている場合は、前記什器からの前記特定商品の取り出しを可能にする手順、をコンピュータに実行させるためのプログラム。
  27. 　コンピュータに、
    　人が入店する時に、当該人の顔を撮像した顔画像を取得し、当該顔画像を用いて年齢推定を実行する手順、
    　当該顔画像をマスター用顔画像として前記年齢推定の結果が基準を満たすか否かが特定可能な状態で記憶手段に登録する手順、
    　特定商品が陳列されている什器の前方に人が立ったとき、前記什器の前方の人の顔を撮像した被照合用顔画像を取得して前記記憶手段に登録されている前記マスター用顔画像と照合する手順、
    　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像があり、かつ、前記年齢推定の結果が基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にする手順、
    　前記記憶手段に前記被照合用顔画像と一致する前記マスター用顔画像がなかった場合、当該被照合用顔画像を用いて年齢推定を実行する手順、
    　前記年齢推定の結果が前記基準を満たした場合、前記什器からの前記特定商品の取り出しを可能にするとともに、前記被照合用顔画像を前記マスター用顔画像として、前記年齢推定の結果とともに前記記憶手段に登録する手順、を実行させるためのプログラム。
  28. 　請求項２５から２７のいずれか一項に記載のプログラムにおいて、
    　さらに、前記記憶手段への前記マスター用顔画像の登録を行う前に、前記人の虹彩認証またはライブネス判定を行う手順、をコンピュータに実行させるためのプログラム。
  29. 　請求項２８に記載のプログラムにおいて、
    　購入商品の決済処理後、一定時間経過後、または一度店外に出たこと、を示す来店済み情報を前記マスター用顔画像に関連付けて前記記憶手段に登録する手順、
    　当該来店済み情報が前記記憶手段に登録されていたときには、前記虹彩認証または前記ライブネス判定をさらに行う手順、をコンピュータに実行させるためのプログラム。
  30. 　請求項２５から２８のいずれか一項に記載のプログラムにおいて、
    　当該店舗内での購入商品の決済処理が行われたことを検出したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
  31. 　請求項２５から２８のいずれか一項に記載のプログラムにおいて、
    　前記人が当該店舗の外に出たことを検出したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
  32. 　請求項２５から３１のいずれか一項に記載のプログラムにおいて、
    　前記記憶手段に前記マスター用顔画像が登録された後、一定時間が経過したら、前記記憶手段から前記マスター用顔画像を消去する手順をコンピュータに実行させるためのプログラム。
PCT/JP2021/016587 2020-05-13 2021-04-26 販売システム、販売支援装置、販売支援方法、およびプログラム WO2021230057A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022521813A JPWO2021230057A1 (ja) 2020-05-13 2021-04-26
US17/922,832 US20230162193A1 (en) 2020-05-13 2021-04-26 Sales support apparatus, sales support method, and nontransitory computer-readable storage medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020084544 2020-05-13
JP2020-084544 2020-05-13

Publications (1)

Publication Number Publication Date
WO2021230057A1 true WO2021230057A1 (ja) 2021-11-18

Family

ID=78525693

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/016587 WO2021230057A1 (ja) 2020-05-13 2021-04-26 販売システム、販売支援装置、販売支援方法、およびプログラム

Country Status (3)

Country Link
US (1) US20230162193A1 (ja)
JP (1) JPWO2021230057A1 (ja)
WO (1) WO2021230057A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008234402A (ja) * 2007-03-22 2008-10-02 Fujifilm Corp 自動販売機およびその動作制御方法
JP2015181210A (ja) * 2014-03-03 2015-10-15 大日本印刷株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び情報処理システム
WO2016199397A1 (ja) * 2015-06-12 2016-12-15 パナソニックＩｐマネジメント株式会社 販売支援方法、及び販売支援システム
JP2017210253A (ja) * 2016-05-25 2017-11-30 パナソニックＩｐマネジメント株式会社 飲料ディスペンサ
JP2018124958A (ja) * 2017-01-30 2018-08-09 京セラドキュメントソリューションズ株式会社 セキュリティシステム
JP2020071814A (ja) * 2018-11-02 2020-05-07 日本電気株式会社 情報処理装置、情報処理装置の制御プログラムおよび通信端末

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4693383A (en) * 1985-04-12 1987-09-15 Joyce International, Inc. Merchandising rack
JP6298995B2 (ja) * 2015-09-17 2018-03-28 パナソニックＩｐマネジメント株式会社 販売支援システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008234402A (ja) * 2007-03-22 2008-10-02 Fujifilm Corp 自動販売機およびその動作制御方法
JP2015181210A (ja) * 2014-03-03 2015-10-15 大日本印刷株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び情報処理システム
WO2016199397A1 (ja) * 2015-06-12 2016-12-15 パナソニックＩｐマネジメント株式会社 販売支援方法、及び販売支援システム
JP2017210253A (ja) * 2016-05-25 2017-11-30 パナソニックＩｐマネジメント株式会社 飲料ディスペンサ
JP2018124958A (ja) * 2017-01-30 2018-08-09 京セラドキュメントソリューションズ株式会社 セキュリティシステム
JP2020071814A (ja) * 2018-11-02 2020-05-07 日本電気株式会社 情報処理装置、情報処理装置の制御プログラムおよび通信端末

Also Published As

Publication number Publication date
JPWO2021230057A1 (ja) 2021-11-18
US20230162193A1 (en) 2023-05-25

Similar Documents

Publication Publication Date Title
US11551223B2 (en) Biometric pre-identification
CN105741451B (zh) 信息处理系统及信息处理方法
JP4115329B2 (ja) 顧客管理システム、該システムの機能を実現するプログラム及び記録媒体
JP2009009231A (ja) セキュリティ管理システムおよびセキュリティ管理方法
JP2022040245A (ja) 顔照合システム、顔照合装置、顔照合方法、及び記録媒体
US11594087B2 (en) Biometric exit with an asset
KR20210017753A (ko) 반려동물 등록/인증 시스템 및 이를 이용한 동물건강보험 적용 인증지원 시스템
TWM570489U (zh) 智慧商店購物系統
WO2021230057A1 (ja) 販売システム、販売支援装置、販売支援方法、およびプログラム
TWI760521B (zh) 智慧商店購物系統及使用其之購物方法
WO2021230123A1 (ja) 店舗システム、情報処理装置、情報処理方法、およびプログラム
WO2020255795A1 (ja) 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体
WO2021066000A1 (ja) 店舗システム、店舗サーバ及び店舗システムの処理方法
EP3879478A1 (en) A method, computer program and apparatus
JP4375011B2 (ja) 自動取引システム
JP7158793B1 (ja) 認証装置、販売システム、通過システム、及び現金自動預け払いシステム
JP7352691B2 (ja) 支払処理方法、支払装置、精算処理システム、及び精算処理プログラム
WO2022065059A1 (ja) 認証システム
WO2021234901A1 (ja) 制御方法、制御プログラム、および情報処理装置
JP2001307155A (ja) 駐車料金精算システム
JP2023172637A (ja) 本人認証システム、および本人認証方法
JP2021047672A (ja) 利用者通行許可システム、自動改札システム、自動改札装置、および利用者通行許可方法
JP2001222667A (ja) 自動契約方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21803237

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022521813

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21803237

Country of ref document: EP

Kind code of ref document: A1