WO2019176281A1 - 表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム - Google Patents

表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム Download PDF

Info

Publication number
WO2019176281A1
WO2019176281A1 PCT/JP2019/001500 JP2019001500W WO2019176281A1 WO 2019176281 A1 WO2019176281 A1 WO 2019176281A1 JP 2019001500 W JP2019001500 W JP 2019001500W WO 2019176281 A1 WO2019176281 A1 WO 2019176281A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
vending machine
display control
information
purchase
Prior art date
Application number
PCT/JP2019/001500
Other languages
English (en)
French (fr)
Inventor
信二 高橋
貴宏 高山
純平 松永
俊 酒井
田中　清明
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Publication of WO2019176281A1 publication Critical patent/WO2019176281A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/009—User recognition or proximity detection
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20—Automatic teller machines [ATMs]
    • G07F19/201—Accessories of ATMs
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20—Automatic teller machines [ATMs]
    • G07F19/207—Surveillance aspects at ATMs
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/023—Arrangements for display, data presentation or advertising
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for

Definitions

  • the present invention relates to a display control device, a vending machine, a display control method, and a display control program.
  • the display content of the display can be controlled using, for example, information on changes in the user's line-of-sight direction.
  • the user's line-of-sight direction facing the vending machine has changed, it is difficult to determine whether he / she is wondering whether to purchase or looking for a product that he / she decides to purchase. is there. If the user has already decided on a product to purchase and is looking for a product to purchase, the user may feel annoyed when the recommended product is displayed on the display of the vending machine.
  • the present invention has been made to solve the above-described problem, and an object of the present invention is to provide a technique for controlling display contents of a vending machine based on a user's desire to purchase.
  • a user's purchase intention is estimated based on information on a user's flow line approaching the vending machine, and the vending machine is based on the purchase intention. We decided to control the display content.
  • a display control apparatus is a display control apparatus for a vending machine having a display unit that presents a product to a user, and continuously displays a user approaching the vending machine.
  • Image capturing means for capturing images
  • an analysis means for detecting a user from each captured image and acquiring information on a user's flow line, and the user's willingness to purchase based on the information acquired by the analysis means
  • an estimation means for estimating
  • a display control means for controlling display contents on the display unit of the vending machine based on the estimated purchase intention.
  • the display unit of the vending machine is a display that electronically displays sales products or advertisements, and the display content is controlled by a display control device.
  • the flow line information may be, for example, a user's movement route obtained from the user's position information in each image captured by the imaging unit.
  • the user's position information can be represented by, for example, a coordinate system having a center point as an origin in each captured image (hereinafter also referred to as a frame or a captured image).
  • the information acquired by the analysis unit includes information on the flow line of the user, and may include other information obtained by analyzing each image captured by the imaging unit.
  • the display control device Since the display control device estimates the willingness to purchase from the actions of the user approaching the vending machine, the display control device shall estimate the user's willingness to purchase at an earlier timing than when the user stops before the vending machine. Can do. Thereby, the display control apparatus can present the recommended product on the display of the vending machine at a more suitable timing when the user is wondering about the purchased product. In this way, the display control device can estimate the purchase intention based on the flow line information of the user, and can control the display content on the display unit of the vending machine based on the purchase intention.
  • the analysis means may further acquire information on the moving speed of the user when each image is captured.
  • the display control device appropriately estimates the user's willingness to purchase according to the flowline and the moving speed by estimating the user's willingness to purchase based on the information on the moving speed of the user in addition to the information on the moving line.
  • the content displayed on the display unit of the vending machine can be controlled.
  • the analysis means may further acquire information on the acceleration of the user when each image is captured.
  • the display control device estimates the user's purchase intention based on the user's acceleration information in addition to the flow line and moving speed information. For example, when the user's purchase intention changes due to deceleration Even so, it is possible to appropriately estimate the user's willingness to purchase and control the display content on the display unit of the vending machine.
  • the estimating means estimates the distance from the vending machine to the user when estimating the user's willingness to purchase based on the flow line information and at least one of the moving speed information and the acceleration information. Accordingly, the user's willingness to purchase may be estimated by weighting each of the flow line information, the moving speed information, and the acceleration information.
  • the information on the moving speed has an influence on the estimation of the purchase intention than the flow line.
  • both the flow line and the moving speed are considered to have the same influence on the purchase intention.
  • the display control device appropriately estimates the user's willingness to purchase by weighting the flow line information, the moving speed information, and the acceleration information according to the distance from the vending machine to the user, The content displayed on the display unit of the vending machine can be controlled.
  • the analysis means may further acquire information on the user's line of sight or face orientation while the user heads for the vending machine or after the user stops in front of the vending machine.
  • the user's line of sight or the direction of the face changes, the user may be wondering about the product to purchase.
  • the display control apparatus can more appropriately estimate the purchase intention by using the information on the line of sight or the face direction in addition to the information on the flow line or the like. Thereby, the display control apparatus can appropriately estimate the user's willingness to purchase and can control the display content on the display unit of the vending machine.
  • the analysis means may further acquire information on the time when the user is stopped in front of the vending machine. The longer the stoppage time in front of the user's vending machine is, the more likely the user is to be confused about the product selection.
  • the display control device controls information displayed on the display unit of the vending machine at an appropriate timing by using information on the stop time of the user in front of the vending machine in addition to the information such as the flow line. be able to.
  • the analysis means further acquires attribute information of the user's height, gender and age estimated from each image, and the estimation means is used to estimate the user's willingness to purchase from the information acquired by the analysis means.
  • the predetermined threshold value may be adjusted according to user attribute information.
  • the walking speed of the user varies depending on attributes such as height, sex, and age.
  • the display control device can display the vending machine's display unit at a timing suitable for the user. Display contents can be controlled.
  • a vending machine includes the display control device described above.
  • a display control method is a display control method for a vending machine having a display unit that presents a product to a user, and the display control device is a user approaching the vending machine.
  • a step of continuously capturing images, an analysis step of detecting a user from each captured image, and acquiring information on a user's flow line, and a user's willingness to purchase based on the information acquired in the analysis step And a control step for controlling the display content on the display unit of the vending machine based on the estimated purchase intention.
  • the display control program is a step of continuously capturing images of a user approaching the vending machine on a display control device of the vending machine having a display unit that presents a product to the user. And an analysis step for detecting a user from each captured image and acquiring information on a user's flow line, and an estimation step for estimating a user's willingness to purchase based on the information acquired in the analysis step; Based on the estimated purchase motivation, a control step for controlling display contents on the display unit of the vending machine is executed.
  • FIG. 1A illustrates a user's flow line and operation in a scene where the user is at a loss in product selection.
  • FIG. 1B illustrates a user's flow line and operation in a scene where the user is at a loss in product selection.
  • FIG. 2 exemplifies a user's flow line and operation in a scene where the user does not hesitate to select a product.
  • FIG. 3 schematically illustrates an example of a hardware configuration of the display control apparatus according to the embodiment.
  • FIG. 4 schematically illustrates an example of a functional configuration of the display control device and the vending machine according to the embodiment.
  • FIG. 5 is a diagram for explaining an example in which the degree of difference is calculated based on the distance between the predicted flow line and the actual flow line.
  • FIG. 6 is a diagram for explaining an example in which the degree of difference is calculated based on the probability that the user moves on the flow line.
  • FIG. 7 is a flowchart illustrating the display control process according to the embodiment.
  • FIG. 8 is a diagram illustrating a data structure of analysis information of a captured image.
  • FIG. 9 is a flowchart illustrating a process for calculating the degree of purchase motivation.
  • FIG. 10 is a diagram illustrating a coefficient definition table for estimating purchase intent.
  • FIG. 11 is a flowchart illustrating the display control process according to the first modification.
  • FIG. 12 is a diagram illustrating a setting example of the detection target area of the user.
  • FIG. 1A and FIG. 1B exemplify a user's flow line and operation in a scene where the user is at a loss in product selection.
  • FIG. 2 exemplifies a user's flow line and operation in a scene where the user does not hesitate to select a product.
  • the display control apparatus 10 includes an imaging unit 101 that captures images of the user. Furthermore, the display control apparatus 10 includes an analysis unit 102, an estimation unit 103, a display control unit 104, and a display control information DB (database) 105, as shown in FIG.
  • the display control apparatus 10 can control the display content of the display unit 201 of the vending machine 20 based on information acquired by analyzing a captured image showing a user. As shown in FIG. 5, the vending machine 20 includes a display unit 201 and a control unit 202.
  • the imaging unit 101, the analysis unit 102, the estimation unit 103, and the display control unit 104 are examples of the “imaging unit”, “analysis unit”, “estimation unit”, and “display control unit” of the present invention.
  • the display control device 10 is installed outside the vending machine 20 in the example of FIG. 1A, but may be installed in the machine so as to be integrated with the vending machine 20.
  • the display control device 10 may be installed for each vending machine 20 when a plurality of vending machines 20 are provided.
  • the display control apparatus 10 may be installed in one vending machine 20 and may control the contents displayed on each display unit 201 with respect to the plurality of vending machines 20. In this case, for each vending machine 20, the display control apparatus 10 may take an image of the approaching user and estimate the willingness to purchase each vending machine 20.
  • the display control apparatus 10 may include, for example, a fisheye lens and be installed on the ceiling.
  • the vending machine 20 to be subjected to display control is a face-to-face type, and a sales apparatus capable of electronically controlling display contents is exemplified.
  • the vending machine 20 includes, for example, a vending machine 20 such as a beverage or food with digital signage.
  • a vending machine 20 equipped with digital signage a type in which a product selection unit and a display unit 201 for selecting a product are separated, a type including a product selection unit and a transparent display unit 201, a product selection unit, The type etc. with which the display part 201 is integrated are illustrated.
  • the imaging unit 101 images a user approaching the vending machine 20.
  • the analysis unit 102 analyzes a captured image showing the user and acquires information on the user's flow line and movement speed.
  • the estimation unit 103 estimates the willingness to purchase a product sold by the vending machine 20 based on the flow line or moving speed of the user.
  • the display control unit 104 instructs the display content on the display unit 201 to the vending machine 20 based on the user's willingness to purchase estimated by the estimation unit 103.
  • the display control information DB 105 stores information such as a captured image taken by the imaging unit 101, an analysis result of the captured image by the analysis unit 102, an estimated value of the user's purchase intention estimated by the estimation unit 103, and the like.
  • the control unit 202 of the vending machine 20 receives the instruction from the display control unit 104, and controls the display content of the display unit 201 based on the received instruction.
  • the flow line L1 shown in FIG. 1A indicates the original vending machine after the user moves to the vending machine 20A side in order to check the products of the adjacent vending machine 20A without going straight to the vending machine 20.
  • An example of returning to the front of the machine 20 is illustrated.
  • the user's stride becomes narrow and the moving speed becomes slow due to the influence of the user starting to look at the display several steps before the original vending machine 20.
  • the estimation unit 103 can estimate that the user has a low willingness to purchase.
  • the flow line L2 shown in FIG. 1B illustrates a state in which the user U1 moves back and forth behind another user U2 who has purchased a product at a position where the plurality of vending machines 20 can be seen. It is considered that the user U1 travels behind the user U2, confirms the products sold by the vending machine 20, and is considering the products to be purchased. Also in this case, there is a possibility that the user has not yet decided the product to purchase, and the estimation unit 103 can estimate that the user has a low willingness to purchase. For example, the display control device 10 may present a recommended product on the display unit 201 when the user's desire to purchase is lower than a predetermined threshold.
  • the flow line L3 shown in FIG. 2 illustrates a state in which the user stands in front of the vending machine 20 without reducing the moving speed and selects a product. It is considered that the user has advanced to the front of the vending machine 20 without reducing the moving speed, and it is considered that the user has moved to the front of the vending machine 20 after deciding the product to be purchased. It can be estimated that the willingness to purchase is high. For example, when the user's desire to purchase is higher than a predetermined threshold, the display control device 10 does not present the recommended product on the display unit 201 and immediately after the user moves in front of the vending machine 20. You may enable it to purchase goods.
  • the display control device 10 can estimate the user's willingness to purchase based on the user's flow line and operation. And the display control apparatus 10 can control the content displayed on the display part 201 of the vending machine 20 based on the estimated purchase willingness.
  • the display control apparatus 10 is searching for a product whether or not he / she is hesitating to purchase, by estimating the purchase intention based on the user's flow line, unlike the case where the purchase intention is estimated based on the change in the line-of-sight direction. Can be easily determined.
  • FIG. 3 schematically illustrates an example of a hardware configuration of the display control apparatus 10 according to the embodiment.
  • the display control device 10 may be a computer in which a processor 11, a main storage device 12, an auxiliary storage device 13, a communication interface 14, and an imaging device 15 are electrically connected.
  • the processor 11 may be, for example, a CPU (Central Processing Unit) or a DSP (Digital Signal Processor).
  • the processor 11 controls the display control device 10 and performs various information processing operations.
  • the main storage device 12 includes, for example, a RAM (Random Access Memory) and a ROM (Read Only Memory).
  • the auxiliary storage device 13 is, for example, an EPROM (Erasable Programmable ROM) or a hard disk drive (HDD, Hard Disk Drive). Further, the auxiliary storage device 13 can include a removable medium, that is, a portable recording medium.
  • the removable medium is, for example, a USB (Universal Serial Bus) memory or a disc recording medium such as a CD (Compact Disc) or a DVD (Digital Versatile Disc).
  • the auxiliary storage device 13 stores various programs, various data, and various tables in a recording medium in a readable and writable manner.
  • the auxiliary storage device 13 stores an operating system (Operating System: OS), various programs, various tables, and the like.
  • OS Operating System
  • Information stored in the auxiliary storage device 13 may be stored in the main storage device 12. Further, information stored in the main storage device 12 may be stored in the auxiliary storage device 13.
  • the communication interface 14 controls communication between the display control device 10 and other devices including the vending machine 20.
  • the communication interface 14 is, for example, a LAN (Local Area Network) interface board or a wireless communication circuit for wireless communication.
  • the LAN interface board and the wireless communication circuit may be connected to a network such as the Internet which is a public communication network.
  • the imaging device 15 is an imaging device for capturing a user's digital image into the display control device 10.
  • a CMOS (Complementary Metal-Oxide-Semiconductor) camera or a CCD (Charge-Coupled Device) camera is preferably used. It can.
  • the format of the input image (resolution, color / monochrome, still image / moving image, gradation, data format, etc.) is arbitrary, and may be appropriately selected according to the type of object 2 and the purpose of sensing.
  • a special image such as an X-ray image or a thermo image
  • a camera that matches the image may be used.
  • the series of processes executed by the display control apparatus 10 can be executed by hardware, but can also be executed by software.
  • the processor 11 may include a plurality of processors.
  • the display control device 10 may be installed for each vending machine 20, and one display control device 10 may be installed for a plurality of vending machines 20.
  • the display control device 10 may be, for example, a device that includes a fisheye lens as the imaging device 15 and is installed on the ceiling.
  • FIG. 4 schematically illustrates an example of functional configurations of the display control device 10 and the vending machine 20 according to the embodiment.
  • the processor 11 of the display control device 10 expands the program stored in the auxiliary storage device 13 in the main storage device 12.
  • the processor 11 interprets and executes the program expanded in the main storage device 12 by the processor 11 and controls each component. Accordingly, as illustrated in FIG. 4, the display control apparatus 10 according to the embodiment performs processing by each component of the imaging unit 101, the analysis unit 102, the estimation unit 103, the display control unit 104, and the display control information DB 105. Can be executed.
  • the imaging unit 101 continuously captures images of a user approaching the vending machine 20. For example, the imaging unit 101 captures images in a frame rate representing the number of frames per second in a range of 10 fps to 30 fps, and the analysis unit 102 acquires information such as a user's flow line, moving speed, and acceleration. Can do.
  • the analysis unit 102 detects a user approaching the vending machine 20 from an image captured by the imaging unit 101.
  • the analysis unit 102 may detect a user existing in an area where the distance from the vending machine 20 is within a predetermined range in each frame.
  • the analysis unit 102 can acquire information on the flow line of the user by connecting the user's location in each frame. Further, the analysis unit 102 can calculate the moving speed of the user from the moving distance of the user between frames. Furthermore, the analysis unit 102 can calculate the acceleration of the user from the change in the moving speed of the user.
  • the estimation unit 103 can estimate the user's willingness to purchase based on the information acquired by the analysis unit 102.
  • the information acquired by the analysis unit 102 includes, for example, information on a user's flow line. Further, the information acquired by the analysis unit 102 may include information on the moving speed and acceleration of the user. For example, the estimation unit 103 calculates the difference between the flow line when the user moves straight toward the vending machine 20 and the flow line actually moved by the user, and based on the calculated difference degree. The degree of willingness to purchase can be estimated.
  • FIGS. 5 and 6 exemplifies two methods of calculating the degree of difference. Either method may be used to calculate the degree of difference. In addition, another method for calculating the degree of difference geometrically or a method for calculating the degree of difference using a probability may be used.
  • FIG. 5 is a diagram for explaining an example in which the degree of difference is calculated based on the distance between the predicted flow line and the actual flow line.
  • the flow line L11 predicted when the user proceeds straight toward the vending machine 20 (hereinafter also referred to as a predicted flow line) L11 is automatically set to the position P1 where the user is detected.
  • a straight line connecting the position Q1 of the vending machine 20 is used.
  • the points H1 to H4 are taken on the predicted flow line L11, and the distances from the respective points in the direction perpendicular to the predicted flow line L11 to the flow line L12 are h1 to h4, respectively.
  • the degree of difference between the predicted flow line L11 and the flow line L12 can be calculated as, for example, the sum from the distance h1 to the distance h4. That is, the degree of difference between the predicted flow line L11 and the flow line L12 increases in proportion to the sum from the distance h1 to the distance h4.
  • FIG. 5 shows an example in which four points H1 to H4 are taken on the predicted flow line L11, but the estimation unit 103 is not limited to four, and the sum of the distances from any number of points to the flow line L12. May be calculated as the degree of difference.
  • FIG. 6 is a diagram for explaining an example in which the degree of difference is calculated based on the probability that the user moves on the flow line.
  • the predicted flow line L ⁇ b> 21 when the user proceeds straight toward the vending machine 20 is a straight line connecting the position P ⁇ b> 2 where the user is detected and the position Q ⁇ b> 2 of the vending machine 20.
  • the user actually moves from the position P2 to the position Q2 of the vending machine 20 via the position R2 in order to confirm the product sold by the other vending machine 20. Move along line L22. As illustrated in FIG.
  • the predicted flow line L ⁇ b> 21 is a straight line connecting a position P ⁇ b> 2 where a person is detected for the first time and a point located in the center of the front face of the vending machine in the image.
  • the probability associated with each section may be determined according to the distance from the predicted flow line L21.
  • the degree of difference between the predicted flow line L21 and the flow line L22 can be, for example, an average value or a multiplication value of the probabilities associated with the sections through which the flow line L22 passes.
  • the probability map which matched the probability with each division is not restricted to the example of FIG. Further, the method of calculating the degree of difference can be appropriately changed according to the probability value associated with each section in the probability map.
  • the display control unit 104 controls the display contents on the display unit 201 of the vending machine 20 based on the purchase intention estimated by the estimation unit 103.
  • the display control unit 104 shown in FIG. the display control unit 104 assumes that, for example, a product to be purchased has already been determined when the degree of purchase motivation of the user exceeds a predetermined threshold. In this case, the display control unit 104 can instruct the vending machine 20 not to recommend products on the display unit 201.
  • the display control unit 104 can assume that there is an intention to purchase but he / she is at a loss in product selection. In this case, the display control unit 104 can instruct the vending machine 20 to recommend products on the display unit 201.
  • the display control information DB 105 is a database for storing information used for estimating the user's willingness to purchase and controlling the display content on the display unit 201 of the vending machine 20.
  • the display control information DB 105 stores a captured image captured by the imaging unit 101, information acquired from the captured image by the analysis unit 102, various coefficients, threshold values, and the like for calculating the degree of purchase intention of the user.
  • the display control information DB 105 is constructed by managing data stored in the auxiliary storage device 13 by a database management system (DBMS) program executed by the processor 11.
  • DBMS database management system
  • the display control information DB 105 is, for example, a relational database.
  • the vending machine 20 includes a processor (not shown) such as a CPU and a DSP, a memory (not shown) such as a RAM and a ROM, and an auxiliary storage device (not shown) such as an EPROM and a hard disk drive.
  • the auxiliary storage device stores an operating system, various programs, various tables, and the like, and the processor loads the program stored in the auxiliary storage device into the work area of the memory and executes it, thereby controlling each component.
  • the vending machine 20 can execute processing by each component of the display unit 201 and the control unit 202 as illustrated in FIG.
  • the vending machine 20 has a display for electronically displaying products to be sold, a product selection unit for the user to select products, a price input unit for the user to input the purchase price, and change is discharged.
  • a change change portion or the like may be provided on the front surface of the housing.
  • the vending machine 20 may include a product storage unit that stores products in the housing and a product transport unit that transports products to the take-out port on the front surface of the housing.
  • the display unit 201 switches display contents of a product to be sold or a product recommended to a user based on an instruction from the display control device 10.
  • the control unit 202 receives an instruction from the display control unit 104 of the display control apparatus 10 and controls the content displayed on the display unit 201 based on the received instruction.
  • each function of the display control device 10 and the vending machine 20 is realized by a general-purpose processor. However, part or all of the above functions may be realized by one or a plurality of dedicated processors. Further, regarding the functional configurations of the display control apparatus 10 and the vending machine 20, functions may be omitted, replaced, and added as appropriate according to the embodiment.
  • FIG. 7 is a flowchart illustrating the display control process according to the embodiment. The flow of this process starts, for example, when a user purchases a product and then waits for the next user.
  • the imaging unit 101 of the display control apparatus 10 continuously captures images on the front side of the vending machine 20.
  • the imaging unit 101 can capture an image in a frame rate range of 10 fps to 30 fps.
  • the frame rate is not limited to the range of 10 fps to 30 fps.
  • the imaging unit 101 captures an image at a higher frame rate, so that the analysis unit 102 can analyze the change in the movement speed of the user in more detail.
  • the analysis unit 102 of the display control apparatus 10 analyzes the image captured in S101 and detects a user.
  • the analysis unit 102 analyzes the captured image for each frame, and analyzes whether any of the frames includes an image that can be recognized as a person.
  • the analysis unit 102 determines whether a user has been detected from the captured image captured in S101. For example, the analysis unit 102 can determine that a user has been detected when an image that can be recognized as a person is included in any frame in the processing of S102. If a user is detected (S103: Y), the process proceeds to S104. If no user is detected (S103: N), the process proceeds to S108.
  • the analysis unit 102 further analyzes the captured image captured in S101, and acquires information such as the detected position information and moving speed of the user.
  • the analysis unit 102 stores information acquired by analyzing the captured image in the display control information DB 105.
  • FIG. 8 is a diagram illustrating a data structure of analysis information of a captured image.
  • the analysis information table that stores the analysis information of the captured image is used to calculate the degree of purchase motivation based on the analysis information.
  • One record of the analysis information table is created for each user and for each frame.
  • the analysis information table has fields for user ID, frame number, position, and moving speed.
  • the user ID is identification information for identifying the user identified by the analysis unit 102.
  • the frame number is identification information for identifying each frame obtained by continuously copying the same user.
  • the position is the position information of the user detected in each frame.
  • the user's position information can be indicated by, for example, a coordinate system having the origin at the center point of the installation surface of the vending machine 20. Further, the position of the user may be specified by a predetermined point such as a center point of a rectangle including the user in each frame image, for example.
  • the moving speed is a moving speed at which the user moves toward the vending machine 20. The moving speed can be calculated by, for example, the moving distance from the previous frame and the elapsed time between frames.
  • the estimation unit 103 calculates the degree of willingness to purchase.
  • the analysis unit 102 can calculate the degree of purchase intention based on the information acquired by analyzing the captured image in S104. The process for calculating the degree of purchase will be described in detail with reference to FIG.
  • the display control unit 104 of the display control apparatus 10 determines whether or not the degree of purchase motivation calculated in S105 is less than a predetermined threshold value. If the degree of purchase motivation is less than the predetermined threshold (S106: Y), the process proceeds to S107. If the degree of purchase motivation is greater than or equal to a predetermined threshold (S106: N), the process proceeds to S108.
  • the display control unit 104 instructs the control unit 202 of the vending machine 20 to display the recommended product for the user on the display unit 201.
  • the process returns to S101, and the display control process is started again.
  • control of the display contents of the vending machine 20 is unnecessary, such as when the user is stopped in front of the vending machine 20, the display control process shown in FIG.
  • FIG. 9 is a flowchart illustrating a process for calculating the degree of purchase motivation. The flow of this process illustrates the details of the process of S105 of the display control process shown in FIG.
  • the estimation unit 103 of the display control apparatus 10 sets an initial value “0” for the degree D of purchase intention.
  • the estimation unit 103 acquires the value of the moving speed coefficient ⁇ according to the moving speed of the user. Specifically, first, the estimation unit 103 acquires the movement speed of each frame of the user from, for example, the analysis information table illustrated in FIG. In this case, the estimation unit 103 acquires, for example, the minimum movement speed among the movement speeds in each frame as the movement speed (hereinafter also referred to as a reference movement speed) for determining the value of the movement speed coefficient ⁇ . It may be. Moreover, the estimation part 103 may acquire the moving speed in the last imaged frame as the reference moving speed.
  • the movement speed coefficient ⁇ is a coefficient indicating the degree of willingness to purchase, and a value is defined in advance according to the movement speed of the user.
  • FIG. 10 is a diagram illustrating a coefficient definition table for estimating purchase intent.
  • the movement speed coefficient ⁇ is defined to a larger value so that it is determined that the higher the reference movement speed is, the higher the willingness to purchase.
  • ⁇ 0 is defined.
  • the value of the moving speed coefficient ⁇ for calculating the degree of purchase will be determined according to the moving speed of the user.
  • the threshold values ⁇ 1, ⁇ 2, and ⁇ 3 that define the range of the moving speed can be changed according to, for example, the sex, age, and height of the user.
  • the estimation unit 103 adds a value obtained by multiplying the moving speed coefficient ⁇ by the weighting coefficient ⁇ 1 to the purchase willingness degree D according to the following Expression 1.
  • D D + ⁇ 1 ⁇ ⁇ (Formula 1)
  • the weighting coefficient ⁇ 1 indicates the degree to which the moving speed affects the purchase motivation and is set in the range of [0, 1].
  • the estimation unit 103 calculates the difference d between the predicted flow line from the position where the user is detected to the vending machine 20 and the flow line actually moved by the user.
  • the degree of difference d can be calculated, for example, by the method described with reference to FIGS.
  • the estimation unit 103 calculates a purchase willingness degree D using the following Equation 2.
  • D D + ⁇ 2 ⁇ d (Formula 2) That is, the estimation unit 103 adds a value obtained by multiplying the degree of purchase intention D calculated in S1053 by the weighting coefficient ⁇ 2 and the degree of difference d.
  • the weighting coefficient ⁇ 2 indicates the degree to which the moving speed affects the purchase intention and is set in the range of [0, 1].
  • the purchase motivation degree D is calculated by the following formula 3.
  • D ⁇ 1 ⁇ ⁇ + ⁇ 2 ⁇ d (Formula 3)
  • the estimation unit 103 can end the processing shown in FIG. 9 and set the degree D of purchase intention calculated in S1055 as the degree of purchase intention calculated in S105 of FIG.
  • the imaging unit 101 of the display control device 10 continuously images the user approaching the vending machine 20.
  • the analysis unit 102 acquires information on a user's flow line from each captured image.
  • the estimation unit 103 estimates the user's willingness to purchase based on information acquired from each captured image.
  • the display control unit 104 controls the display content of the vending machine 20 based on the willingness to purchase.
  • the display control apparatus 10 can estimate a user's willingness to purchase at an earlier timing than the user stops in front of the vending machine 20 based on the information on the flow line of the user.
  • the display control apparatus 10 can estimate the purchase intention based on the flow line information of the user, and can control the display content on the display unit 201 of the vending machine 20 according to the purchase intention.
  • the analysis unit 102 further acquires information on the moving speed of the user when each image is captured.
  • the estimation unit 103 appropriately estimates the purchase intention of the user according to the movement speed by estimating the purchase intention of the user based on the information of the movement speed of the user in addition to the information on the flow line, and automatically
  • the display content on the display unit 201 of the vending machine 20 can be controlled.
  • the display control device 10 sets an area according to the distance from the vending machine 20, and the moving speed coefficient ⁇ for calculating the degree of purchase will according to the area where the user is detected.
  • the values of coefficients such as weighting coefficients ⁇ 1 and ⁇ 2 are adjusted.
  • FIG. 11 is a flowchart illustrating the display control process according to the first modification.
  • the analysis unit 102 of the display control apparatus 10 sets the area A1 to the area A3.
  • FIG. 12 is a diagram illustrating a setting example of the detection target area of the user.
  • Area A1 is an area where the distance from the vending machine 20 is about 3 m to 5 m.
  • a user in the area A1 looks at a plurality of vending machines 20 from a certain distance and examines a product.
  • the movement of the user and the movement of the user being stopped due to the decrease in the moving speed mainly affect the estimation of the user's willingness to purchase.
  • the distance may be changed according to the passage where the vending machine is installed and the indoor environment.
  • Area A2 is an area where the distance from the vending machine 20 is about 1.5 m to 3 m. If the user in the area A2 is wondering about the product to be purchased, it can be considered that the user moves toward the vending machine while gazing at the display, and the moving speed becomes slow. In addition, it is also conceivable that a user who is at a loss stops after approaching the vending machine 20 after entering the area A2. For this reason, in the area A2, the moving speed mainly affects the estimation of the user's willingness to purchase. The distance may be changed according to the passage where the vending machine is installed and the indoor environment.
  • Area A3 is an area where the distance from the vending machine 20 is up to about 1.5 m. The user in the area A3 has reached the vending machine 20, and it is considered that the product to be purchased is almost decided. In this case, the display control unit 104 of the display control device 10 may not display the recommended product on the display unit 201 of the vending machine 20. The distance may be changed according to the passage where the vending machine is installed and the indoor environment.
  • an image is captured and a user is detected in the same manner as the processing described in FIG.
  • the analysis unit 102 determines whether or not a user is detected in any one of the areas A1 to A3 from the captured image captured in S101. For example, the analysis unit 102 recognizes in which region the user is present by estimating the distance from the vending machine 20 based on the position where the user has moved in each captured frame. can do. If a user is detected in any region (S202: Y), the process proceeds to S203. If the user is not detected in any region (S202: N), the process proceeds to S108.
  • the analysis unit 102 determines whether a user is detected in the region A3 from the captured image captured in S101. If a user is detected in the area A3 (S203: Y), the process proceeds to S204. If the user is not detected in the area A3 (S203: N), the process proceeds to S205.
  • the analysis unit 102 determines whether or not the user has been detected in the area A3 even before the frame in which the user is detected in the area A3 in S203. If the user is detected in the area A3 even in the previous frame (S204: Y), it is considered that the user has determined the purchased product and remains in the area A3. Therefore, the recommended product is not displayed on the display unit 201 of the vending machine 20, and the display control process shown in FIG. If the user is not detected in the area A3 in the previous frame (S204: N), the process proceeds to S205.
  • the analysis unit 102 determines whether there is a user who has moved from the area A2 to the area A3.
  • the analysis unit 102 can determine whether there is a user who has moved from the area A2 to the area A3 by acquiring information on the flow line of the user from the captured image captured in S101.
  • S205: Y the process proceeds to S104. If no user has moved from the area A2 to the area A3 (S205: N), the process proceeds to S206.
  • the analysis unit 102 determines whether there is a user who has moved from the area A1 to the area A2.
  • the analysis unit 102 can determine whether there is a user who has moved from the area A1 to the area A2 by acquiring information on the flow line of the user from the captured image captured in S101.
  • S206: Y the process proceeds to S104. If no user has moved from the area A2 to the area A3 (S206: N), the process proceeds to S108.
  • the analysis unit 102 acquires information on the detected flow line of the user, information on the moving speed, and the like, similar to the processing described with reference to FIG.
  • the estimation unit 103 calculates the degree of purchase motivation. As described in the process of calculating the degree of purchase motivation illustrated in FIG. 9, the estimation unit 103 multiplies the moving speed coefficient ⁇ and the flow line difference d by the weighting coefficient ⁇ 1 and the weighting coefficient ⁇ 2, respectively. The degree of purchase willingness is calculated.
  • the weighting coefficient ⁇ 1 and the weighting coefficient ⁇ 2 are pre-defined values regardless of the area where the user is detected.
  • Modification 1 when it is determined in S205 that there is a user who has moved from the area A2 to the area A3, the weighting coefficient ⁇ 1 for the moving speed coefficient ⁇ is greater than the weighting coefficient ⁇ 2 for the flow line dissimilarity d. A large value is set. This is because in a region closer to the vending machine 20, the moving speed has an influence on the estimation of the purchase intention than the flow line.
  • the weighting coefficient ⁇ 1 for the moving speed coefficient ⁇ and the weighting coefficient ⁇ 2 for the flow line difference d are:
  • the same value may be set. This is because in the region away from the vending machine 20, both the flow line and the moving speed have the same degree of influence on the purchase intention estimation.
  • the display control unit 104 of the display control apparatus 10 determines whether or not the degree of purchase motivation is less than a predetermined threshold, similarly to the process of FIG. When the degree of purchase motivation is less than the predetermined threshold, the display control unit 104 displays the recommended product for the user on the display unit 201 of the vending machine 20 in S107, as in the process of FIG. To instruct. In S108 of FIG. 11, as in the process of FIG. 7, the display control unit 104 determines whether to end the process. If the process is not terminated (S108: N), the process returns to S201.
  • S201 for example, it is possible to change the setting of the area according to the change in brightness according to the time zone, the sex and age of the user, but when the setting of the area is unnecessary, You may return to the imaging process of S101.
  • S108 S108: Y
  • the display control process shown in FIG. 11 is terminated.
  • the estimation unit 103 of the display control device 10 weights the information on the flow line, the information on the moving speed, and the information on the acceleration according to the distance from the vending machine 20 to the user. A user's willingness to purchase can be estimated appropriately. Thereby, the display control unit 104 can control the display content on the display unit 201 of the vending machine 20.
  • the estimation unit 103 estimates the user's willingness to purchase based on the information on the flow line and the movement speed acquired by the analysis unit 102.
  • the analysis part 102 acquires the information of a user's acceleration further.
  • the estimation part 103 may estimate a user's willingness to purchase based on the information of a user's acceleration in addition to the information of a flow line and a moving speed.
  • the analysis unit 102 can calculate the acceleration of the user from the moving speed of each frame acquired in S104 of FIG. Specifically, for example, the analysis unit 102 can calculate the acceleration of the user in each frame from the moving speed of the current frame and the moving speed of the previous frame.
  • the estimation unit 103 may define the acceleration coefficient ⁇ in advance according to the acceleration, similarly to the definition of the moving speed coefficient ⁇ illustrated in FIG.
  • the weighting coefficient for the acceleration coefficient ⁇ is ⁇ 3
  • the degree D of purchase willingness can be calculated by the following equation 4.
  • D ⁇ 1 ⁇ ⁇ + ⁇ 2 ⁇ d + ⁇ 3 ⁇ ⁇ (Formula 4)
  • the weighting coefficient ⁇ 3 indicates the degree to which the acceleration affects the willingness to purchase, and is set in the range of [0, 1].
  • the user's willingness to purchase is estimated based on the information on the user's flow line and moving speed, as well as information on the acceleration.
  • the estimation part 103 can estimate a user's willingness to purchase appropriately, and can control the display content on the display part 201 of the vending machine 20.
  • the estimation unit 103 estimates the user's willingness to purchase based on the information on the flow line, the moving speed, and the acceleration acquired by the analysis unit 102.
  • the analysis unit 102 further acquires information on the user's line of sight or face orientation after the user stops in front of the vending machine 20.
  • the estimation part 103 may estimate a user's willingness to purchase based on the information of a user's eyes
  • the estimation unit 103 defines, for example, a coefficient ⁇ corresponding to information on the user's line of sight or face orientation, and a weighting coefficient ⁇ 4 corresponding to the coefficient ⁇ .
  • the motivation degree D may be calculated.
  • D ⁇ 1 ⁇ ⁇ + ⁇ 2 ⁇ d + ⁇ 3 ⁇ ⁇ + ⁇ 4 ⁇ ⁇ (Formula 5)
  • the coefficient ⁇ can be set to a lower value.
  • Modification 3 in addition to the information on the flow line, the moving speed, and the acceleration, the information on the line of sight or the direction of the face after stopping in front of the vending machine 20 is used to estimate the purchase intention more suitably. Can do. Thereby, the estimation part 103 of the display control apparatus 10 can estimate a user's willingness to purchase appropriately, and can control the display content on the display part 201 of the vending machine 20.
  • the estimation unit 103 estimates the user's willingness to purchase based on the flow line, the moving speed, the acceleration, and the information on the user's line of sight or face acquired by the analysis unit 102. To do.
  • the analysis unit 102 further acquires information on the time when the user is stopped in front of the vending machine 20.
  • the estimation part 103 may estimate a user's willingness to purchase based on the information of the stop time in front of the user's vending machine 20 in addition to the various information which the analysis part 102 acquired.
  • the estimation unit 103 may determine the timing for displaying the recommended product according to the purchase motivation and the length of the stop time.
  • the display control part 104 of the display control apparatus 10 can control the display content of the display part 201 of the vending machine 20 at an appropriate timing.
  • the analysis unit 102 further acquires attribute information on the height, sex, and age of the user estimated from each image.
  • the estimation part 103 may adjust the predetermined threshold value used in order to estimate a user's willingness to purchase according to a user's attribute information.
  • the predetermined threshold is, for example, a threshold for determining the degree of purchase motivation in S106 of FIG.
  • the predetermined threshold values may be threshold values ⁇ 1, ⁇ 2, and ⁇ 3 for determining the value of the moving speed coefficient ⁇ described in FIG.
  • the analysis unit 102 may determine the sex and age of the user based on, for example, the user's proportion, stride, walking speed, and the like detected from the captured image.
  • a predetermined threshold value used to estimate the user's willingness to purchase is adjusted according to the user's attribute information.
  • the display control part 104 of the display control apparatus 10 can control the display content on the display part 201 of the vending machine 20 at the timing suitable for the user.
  • a program that causes a computer or other machine or apparatus (hereinafter, a computer or the like) to realize any of the above functions can be recorded on a computer-readable recording medium.
  • the function can be provided by causing a computer or the like to read and execute the program of the recording medium.
  • a computer-readable recording medium is a non-temporary storage medium that can store information such as data and programs by electrical, magnetic, optical, mechanical, or chemical action and can be read from a computer or the like.
  • a typical recording medium examples of such recording media that can be removed from a computer or the like include, for example, a memory such as a flexible disk, a magneto-optical disk, a CD-ROM, a CD-R / W, a DVD, a Blu-ray disc, a DAT, an 8 mm tape, and a flash memory.
  • a memory such as a flexible disk, a magneto-optical disk, a CD-ROM, a CD-R / W, a DVD, a Blu-ray disc, a DAT, an 8 mm tape, and a flash memory.
  • cards There are cards.
  • a hard disk, a ROM, and the like as a recording medium fixed to a computer or the like.
  • an SSD Solid State Drive
  • a display control device (10) of a vending machine (20) having a display unit (201) for presenting a product to a user, Imaging means (101) for continuously imaging the user approaching the vending machine (20); Analysis means (102) for detecting the user from each captured image and obtaining information on the flow line of the user; Based on the information acquired by the analysis means, estimation means (103) for estimating the user's willingness to purchase; Display control means (104) for controlling the display content on the display unit (201) of the vending machine (20) based on the estimated purchase intention, Comprising Display control device (10).
  • a display control device (10) of a vending machine (20) having a display unit (201) for presenting a product to a user, Continuously imaging the user approaching the vending machine (20); An analysis step of detecting the user from each captured image and obtaining information on the flow line of the user; Based on the information acquired in the analysis step, an estimation step for estimating the purchase intention of the user; A control step of controlling the display content on the display unit (201) of the vending machine (20) based on the estimated purchase intention, Display control method.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Marketing (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

利用者に商品を提示する表示部を有する自動販売機の表示制御装置は、自動販売機に近づいてくる利用者を連続して撮像する撮像手段と、撮像された各画像から利用者を検出し、利用者の動線の情報を取得する解析手段と、解析手段が取得した情報に基づいて、利用者の購入意欲を推定する推定手段と、推定した購入意欲に基づいて、自動販売機の表示部への表示内容を制御する表示制御手段と、を備える。

Description

表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム
　本発明は、表示制御装置、自動販売機、表示制御方法、及び表示制御プログラムに関する。
　従来の看板や紙媒体に代えて、液晶ディスプレイ、ＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）表示装置等を使用して画像又は映像を表示し、広告、案内等の情報を発信するデジタルサイネージの導入が進んでいる。例えば、自動販売機に大型液晶ディスプレイとタッチパネルを装備することで、情報発信を行う電子広告看板機能と、子供や車椅子の身障者に配慮して商品の表示位置を変える機能と、災害発生時の災害警報を表示する機能とを備えた自動販売機が提案されている（例えば、特許文献１を参照）。
特開２０１１－１１８８０７号公報
　自動販売機のディスプレイに表示する内容を変更する場合、利用者は、自動販売機に正対していることが前提とされる。また、ディスプレイの表示内容は、例えば、利用者の視線方向の変化の情報を用いて制御することが可能である。しかしながら、自動販売機に正対する利用者の視線方向が変化していたとしても、購入するか否かを迷っているのか、又は購入すると決めた商品を探しているのかを判断するのは困難である。利用者が購入する商品を既に決定し、購入対象の商品を探しているような場合には、自動販売機のディスプレイに推薦する商品が表示されると、利用者は煩わしく感じる可能性がある。
　本発明は、一側面では、上述した課題を解決するためになされたものであり、利用者の購入意欲に基づいて自動販売機の表示内容を制御する技術を提供することを目的とする。
　上記課題を解決するために、本発明の一側面では、自動販売機に近づいてくる利用者の動線の情報に基づいて利用者の購入意欲を推定し、購入意欲に基づいて、自動販売機の表示内容を制御することにした。
　より詳細には、本発明の一側面に係る表示制御装置は、利用者に商品を提示する表示部を有する自動販売機の表示制御装置であって、自動販売機に近づいてくる利用者を連続して撮像する撮像手段と、撮像された各画像から利用者を検出し、利用者の動線の情報を取得する解析手段と、解析手段が取得した情報に基づいて、利用者の購入意欲を推定する推定手段と、推定した購入意欲に基づいて、自動販売機の表示部への表示内容を制御する表示制御手段と、を備える。
　自動販売機の表示部は、販売商品又は広告等を電子的に表示するディスプレイであり、表示制御装置によって表示内容が制御される。動線の情報は、例えば、撮像手段によって撮像された各画像における利用者の位置情報から得られる利用者の移動経路であってもよい。なお、利用者の位置情報は、例えば、撮像された各画像（以下、フレーム又は撮像画像ともいう）において中心点を原点とする座標系によって表すことができる。解析手段が取得した情報は、利用者の動線の情報を含み、撮像手段によって撮像された各画像を解析することによって得られる他の情報を含んでもよい。
　表示制御装置は、自動販売機に近づいてくる利用者の動作から購入意欲を推定するため、利用者が自動販売機の前に停止するよりも早いタイミングで、利用者の購入意欲を推定することができる。これにより、表示制御装置は、利用者が購入商品を迷っている場合に、より好適なタイミングで自動販売機のディスプレイに推薦する商品を提示することができる。このように、表示制御装置は、利用者の動線の情報に基づいて購入意欲を推定し、購入意欲に基づいて、自動販売機の表示部への表示内容を制御することができる。
　また、解析手段は、各画像が撮像されたときの利用者の移動速度の情報をさらに取得してもよい。表示制御装置は、動線の情報に加え、利用者の移動速度の情報に基づいて利用者の購入意欲を推定することで、動線及び移動速度に応じた利用者の購入意欲を適切に推定し、自動販売機の表示部への表示内容を制御することができる。
　また、解析手段は、各画像が撮像されたときの利用者の加速度の情報をさらに取得してもよい。表示制御装置は、動線及び移動速度の情報に加え、利用者の加速度の情報に基づいて利用者の購入意欲を推定することで、例えば、減速により利用者の購入意欲が変化したような場合であっても、利用者の購入意欲を適切に推定し、自動販売機の表示部への表示内容を制御することができる。
　また、推定手段は、動線の情報と、移動速度の情報及び加速度の情報の少なくともいずれか一方とに基づいて、利用者の購入意欲を推定する場合に、自動販売機から利用者までの距離に応じて、動線の情報、移動速度の情報、及び加速度の情報のそれぞれに対して重み付けをすることにより、利用者の購入意欲を推定してもよい。利用者が自動販売機により近い位置にいる場合、動線よりも移動速度の情報のほうが、購入意欲の推定に影響を与えると考えられる。一方、利用者が自動販売機から離れた位置にいる場合、動線と移動速度の両方が、購入意欲に同程度の影響を与えると考えられる。このように、自動販売機から利用者までの距離に応じて、利用者の購入意欲の推定に影響を与える情報は異なる。表示制御装置は、自動販売機から利用者までの距離に応じて、動線の情報、移動速度の情報、及び加速度の情報に対する重み付けをすることで、利用者の購入意欲を適切に推定し、自動販売機の表示部への表示内容を制御することができる。
　また、解析手段は、利用者が自動販売機に向かう間や利用者が自動販売機の前で停止した後における、利用者の視線又は顔の向きの情報をさらに取得してもよい。利用者の視線又は顔の向きが変化する場合、利用者は、購入する商品を迷っていることが考えられる。表示制御装置は、動線等の情報に加え、視線又は顔の向きの情報を利用することで、より好適に購入意欲を推定することができる。これにより、表示制御装置は、利用者の購入意欲を適切に推定し、自動販売機の表示部への表示内容を制御することができる。
　また、解析手段は、利用者が自動販売機の前で停止している時間の情報をさらに取得してもよい。利用者の自動販売機の前での停止時間が長くなるほど、利用者は、商品の選択を迷っていると考えられる。表示制御装置は、動線等の情報に加え、自動販売機の前での利用者の停止時間の情報を利用することで、適切なタイミングで自動販売機の表示部への表示内容を制御することができる。
　また、解析手段は、各画像から推定される利用者の身長、性別及び年齢の属性情報をさらに取得し、推定手段は、解析手段が取得した情報から利用者の購入意欲を推定するために用いられる所定の閾値を、利用者の属性情報に応じて調整してもよい。身長、性別及び年齢等の属性により、利用者の歩く速度は異なる。利用者の属性情報に応じて、利用者の購入意欲を推定するために用いられる所定の閾値を調整することで、表示制御装置は、利用者に適したタイミングで、自動販売機の表示部への表示内容を制御することができる。
　また、本発明の一側面に係る自動販売機は、上記の表示制御装置を備える。
　また、本発明の一側面に係る表示制御方法は、利用者に商品を提示する表示部を有する自動販売機の表示制御方法であって、表示制御装置は、自動販売機に近づいてくる利用者を連続して撮像するステップと、撮像された各画像から利用者を検出し、利用者の動線の情報を取得する解析ステップと、解析ステップで取得した情報に基づいて、利用者の購入意欲を推定する推定ステップと、推定した購入意欲に基づいて、自動販売機の表示部への表示内容を制御する制御ステップと、を実行する。
　また、本発明の一側面に係る表示制御プログラムは、利用者に商品を提示する表示部を有する自動販売機の表示制御装置に、自動販売機に近づいてくる利用者を連続して撮像するステップと、撮像された各画像から利用者を検出し、利用者の動線の情報を取得する解析ステップと、解析ステップで取得した情報に基づいて、利用者の購入意欲を推定する推定ステップと、推定した購入意欲に基づいて、自動販売機の表示部への表示内容を制御する制御ステップと、を実行させる。
　本発明によれば、利用者の購入意欲に基づいて自動販売機の表示内容を制御する技術を提供することができる。
図１Ａは、利用者が商品選択に迷う場面における利用者の動線及び動作を例示する。 図１Ｂは、利用者が商品選択に迷う場面における利用者の動線及び動作を例示する。 図２は、利用者が商品選択に迷わない場面における利用者の動線及び動作を例示する。 図３は、実施形態に係る表示制御装置のハードウェア構成の一例を模式的に例示する。 図４は、実施形態に係る表示制御装置及び自動販売機の機能構成の一例を模式的に例示する。 図５は、予測動線と実際の動線との距離に基づいて相違度を算定する例を説明するための図である。 図６は、利用者が動線上を移動する確率に基づいて相違度を算定する例を説明するための図である。 図７は、実施形態に係る表示制御処理を例示するフローチャートである。 図８は、撮像画像の解析情報のデータ構造を例示する図である。 図９は、購入意欲の度合いを算出する処理を例示するフローチャートである。 図１０は、購入意欲を推定するための係数定義テーブルを例示する図である。 図１１は、変形例１に係る表示制御処理を例示するフローチャートである。 図１２は、利用者の検出対象の領域の設定例を示す図である。
　以下、本発明の一側面に係る実施の形態を、図面に基づいて説明する。
　§１　適用例
　まず、図１Ａ、図１Ｂ、図２を用いて、本発明が適用される場面の一例について説明する。実施形態に係る表示制御装置１０は、自動販売機２０に至るまでの利用者の動線及び動作に基づいて、利用者の購入意欲を推定し自動販売機２０の表示内容を制御する装置である。ここで、動作は、例えば、利用者が自動販売機２０に向かって移動する移動速度及び加速度によって特定される利用者の動きとすることができる。図１Ａ及び図１Ｂは、利用者が商品選択に迷う場面における利用者の動線及び動作を例示する。図２は、利用者が商品選択に迷わない場面における利用者の動線及び動作を例示する。
　図１Ａに示されるとおり、表示制御装置１０は、利用者の撮像を行う撮像部１０１を備える。さらに、表示制御装置１０は、後述の図４に示されるとおり、解析部１０２、推定部１０３、表示制御部１０４、表示制御情報ＤＢ（データベース）１０５を備える。表示制御装置１０は、利用者を写した撮像画像を解析して取得した情報に基づいて、自動販売機２０の表示部２０１の表示内容を制御することができる。自動販売機２０は、図５に示されるとおり、表示部２０１及び制御部２０２を備えている。撮像部１０１、解析部１０２、推定部１０３及び表示制御部１０４は、本発明の「撮像手段」、「解析手段」、「推定手段」、「表示制御手段」の一例である。
　表示制御装置１０は、図１Ａの例では、自動販売機２０の外部に設置されているが、自動販売機２０と一体になるように、機内に組み込んで設置されてもよい。また、表示制御装置１０は、複数の自動販売機２０が併設される場合、自動販売機２０ごとに設置されてもよい。また、表示制御装置１０は、１台の自動販売機２０に設置され、複数の自動販売機２０に対し、それぞれの表示部２０１に表示させる内容を制御するようにしてもよい。この場合、表示制御装置１０は、自動販売機２０ごとに、近づいてくる利用者を撮像してそれぞれの自動販売機２０に対する購入意欲を推定するようにしてもよい。さらに、表示制御装置１０は、例えば、魚眼レンズを備え、天井に設置されるものであってもよい。
　表示制御の対象となる自動販売機２０は、対面型であって、電子的に表示内容を制御可能な販売装置が例示される。自動販売機２０は、例えば、デジタルサイネージを備える飲料又は食料などの自動販売機２０を含む。デジタルサイネージを備える自動販売機２０としては、商品の選択操作をするための商品選択部と表示部２０１が分かれている種類、商品選択部及び透過型の表示部２０１を備える種類、商品選択部と表示部２０１とが一体化している種類等が例示される。
　撮像部１０１は、自動販売機２０に近づいてくる利用者を撮像する。解析部１０２は、利用者を写した撮像画像を解析し、利用者の動線及び移動速度の情報を取得する。推定部１０３は、利用者の動線又は移動速度に基づいて、自動販売機２０で販売される商品に対する購入意欲を推定する。表示制御部１０４は、推定部１０３によって推定された利用者の購入意欲に基づいて、自動販売機２０に対し表示部２０１への表示内容を指示する。表示制御情報ＤＢ１０５は、撮像部１０１が写した撮像画像、解析部１０２による撮像画像の解析結果、推定部１０３によって推定された利用者の購入意欲の推定値等の情報を格納する。自動販売機２０の制御部２０２は、表示制御部１０４からの指示を受信し、受信した指示に基づいて、表示部２０１の表示内容を制御する。
　次に、利用者が購入する商品を迷っている場合及び迷っていない場合における動線及び動作について、具体的に説明する。図１Ａに示す動線Ｌ１は、利用者が、真っすぐに自動販売機２０に向かわずに隣接する自動販売機２０Ａの商品を確認するため、自動販売機２０Ａ側に移動した後、元の自動販売機２０の前に戻る様子を例示する。また、利用者は、元の自動販売機２０の前に立つ数歩前からディスプレイを注視し始めた影響で、歩幅が狭くなり、移動速度が遅くなることが考えられる。この場合、利用者は購入する商品をまだ決めていない可能性があり、推定部１０３は、当該利用者の購入意欲は低いと推定することができる。
　図１Ｂに示す動線Ｌ２は、複数の自動販売機２０が見渡せる位置で、利用者Ｕ１が、商品を購入している他の利用者Ｕ２の背後を行き来する様子を例示する。利用者Ｕ１は、利用者Ｕ２の背後を行き来して自動販売機２０で販売されている商品を確認し、購入する商品を検討中であると考えられる。この場合も、利用者は購入する商品をまだ決めていない可能性があり、推定部１０３は、当該利用者の購入意欲は低いと推定することができる。表示制御装置１０は、例えば、利用者の購入意欲が所定の閾値より低い場合に、表示部２０１におすすめ商品を提示するようにしてもよい。
　一方、図２に示す動線Ｌ３は、利用者が移動速度を落とさないまま、自動販売機２０の前に立ち、商品を選択する様子を例示する。利用者は、自動販売機２０の前まで移動速度を落とさないまま進んでおり、購入する商品を決めてから自動販売機２０の前まで移動したと考えられ、推定部１０３は、当該利用者の購入意欲を高いと推定することができる。表示制御装置１０は、例えば、利用者の購入意欲が所定の閾値より高い場合には、表示部２０１におすすめ商品は提示せず、利用者が自動販売機２０の前に移動した後、すぐに商品を購入できるようにしてもよい。
　以上のとおり、実施形態では、表示制御装置１０は、利用者の動線及び動作に基づいて利用者の購入意欲を推定することができる。そして、表示制御装置１０は、推定した購入意欲に基づいて、自動販売機２０の表示部２０１に表示する内容を制御することができる。表示制御装置１０は、利用者の動線に基づいて購入意欲を推定することにより、視線方向の変化に基づいて購入意欲を推定する場合と異なり、購入を迷っているのか、商品を探しているのかを容易に判断することができる。
　§２　構成例
　［ハードウェア構成］
　＜表示制御装置＞
　次に、図３を用いて、実施形態に係る表示制御装置１０のハードウェア構成の一例について説明する。図３は、実施形態に係る表示制御装置１０のハードウェア構成の一例を模式的に例示する。
　図３の例では、実施形態に係る表示制御装置１０は、プロセッサ１１、主記憶装置１２、補助記憶装置１３、通信インタフェース１４、撮像装置１５が電気的に接続されたコンピュータであってよい。
　プロセッサ１１は、例えば、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）であってもよい。プロセッサ１１は、表示制御装置１０を制御し、様々な情報処理の演算を行う。主記憶装置１２は、例えば、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）を含む。補助記憶装置１３は、例えば、ＥＰＲＯＭ（Erasable Programmable ROM）、ハードディスクドライブ（ＨＤＤ、Hard Disk Drive）である。また、補助記憶装置１３は、リムーバブルメディア、即ち可搬記録媒体を含むことができる。リムーバブルメディアは、例えば、ＵＳＢ（Universal Serial Bus）メモリ、あるいは、ＣＤ（Compact Disc）やＤＶＤ（Digital Versatile Disc）のようなディスク記録媒体である。
　補助記憶装置１３は、各種のプログラム、各種のデータ及び各種のテーブルを読み書き自在に記録媒体に格納する。補助記憶装置１３には、オペレーティングシステム（Operating System :ＯＳ）、各種プログラム、各種テーブル等が格納される。補助記憶装置１３に格納される情報は、主記憶装置１２に格納されてもよい。また、主記憶装置１２に格納される情報は、補助記憶装置１３に格納されてもよい。
　通信インタフェース１４は、表示制御装置１０と、自動販売機２０を含む他の装置との間の通信を制御する。通信インタフェース１４は、例えば、ＬＡＮ（Local Area Network）インターフェースボード、無線通信のための無線通信回路である。ＬＡＮインターフェースボードや無線通信回路は、公衆通信網であるインターネット等のネットワークに接続されてもよい。
　撮像装置１５は、利用者のデジタル画像を表示制御装置１０に取り込むための撮像デバイスであり、例えばＣＭＯＳ（Complementary Metal-Oxide-Semiconductor）カメラやＣＣＤ（Charge-Coupled Device）カメラを好適に用いることができる。入力画像の形式（解像度、カラー／モノクロ、静止画像／動画、階調、データ形式など）は任意であり、物体２の種類やセンシングの目的に合わせて適宜選択すればよい。可視光像以外の特殊な画像（Ｘ線画像、サーモ画像など）を物体認識や検査に利用する場合には、その画像に合わせたカメラを用いてもよい。
　表示制御装置１０で実行される一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。なお、表示制御装置１０の具体的なハードウェア構成に関して、実施形態に応じて、適宜、構成要素の省略、置換及び追加が可能である。例えば、プロセッサ１１は、複数のプロセッサを含んでもよい。また、表示制御装置１０は、自動販売機２０ごとに設置されてもよく、複数の自動販売機２０に対して１台の表示制御装置１０が設置されてもよい。さらに、表示制御装置１０は、例えば、撮像装置１５として魚眼レンズを備え、天井に設置される装置であってもよい。
　［機能構成］
　次に、図４を用いて、実施形態に係る表示制御装置１０及び自動販売機２０の機能構成の一例を説明する。図４は、実施形態に係る表示制御装置１０及び自動販売機２０の機能構成の一例を模式的に例示する。
　＜表示制御装置＞
　表示制御装置１０のプロセッサ１１は、補助記憶装置１３に記憶されたプログラムを主記憶装置１２に展開する。そして、プロセッサ１１は、主記憶装置１２に展開されたプログラムをプロセッサ１１により解釈及び実行して、各構成要素を制御する。これによって、実施形態に係る表示制御装置１０は、図４に例示するように、撮像部１０１、解析部１０２、推定部１０３、表示制御部１０４、及び表示制御情報ＤＢ１０５の各構成要素による処理を実行することができる。
　撮像部１０１は、自動販売機２０に近づいてくる利用者を連続して撮像する。撮像部１０１は、例えば、１秒間のコマ数を表すフレームレートが１０ｆｐｓから３０ｆｐｓの範囲で撮像することで、解析部１０２は、利用者の動線、移動速度、加速度等の情報を取得することができる。
　解析部１０２は、撮像部１０１による撮像画像から、自動販売機２０に近づいてくる利用者を検出する。解析部１０２は、各フレームにおいて、自動販売機２０からの距離が所定の範囲内である領域に存在する利用者を検出するようにしてもよい。解析部１０２は、各フレームにおける利用者の存在位置を結ぶことにより、利用者の動線の情報を取得することができる。また、解析部１０２は、フレーム間での利用者の移動距離から、利用者の移動速度を算出することができる。さらに、解析部１０２は、利用者の移動速度の変化から、利用者の加速度を算出することができる。
　推定部１０３は、解析部１０２が取得した情報に基づいて、利用者の購入意欲を推定することができる。解析部１０２が取得した情報は、例えば、利用者の動線の情報を含む。また、解析部１０２が取得した情報は、利用者の移動速度及び加速度の情報を含んでもよい。推定部１０３は、例えば、利用者が自動販売機２０に向かって真っ直ぐに進む場合の動線と、利用者が実際に移動した動線との相違度を算定し、算定した相違度に基づいて、購入意欲の度合いを推定することができる。
　ここで、図５及び図６を用いて、利用者が自動販売機２０に向かって真っ直ぐに進む場合の動線と、利用者が実際に移動した動線との相違度の算定方法について説明する。図５及び図６のそれぞれによって、２つの相違度の算定方法が例示される。相違度の算定はどちらの方法を用いてもよい。また、他の幾何学的に相違度を算出する方法や確率を用いて相違度を算出する手法であってもよい。
　まず、図５は、予測動線と実際の動線との距離に基づいて相違度を算定する例を説明するための図である。図５に例示するように、利用者が自動販売機２０に向かって真っ直ぐに進む場合に予測される動線（以下、予測動線ともいう）Ｌ１１は、利用者が検出された位置Ｐ１と自動販売機２０の位置Ｑ１とを結ぶ直線とする。図５の例では、利用者は、実際には、他の自動販売機２０で販売される商品の確認等のため、位置Ｐ１から位置Ｒ１を経由して自動販売機２０の位置Ｑ１まで、動線Ｌ１２に沿って移動する。予測動線Ｌ１１上に点Ｈ１から点Ｈ４をとり、予測動線Ｌ１１と垂直方向における各点から動線Ｌ１２までの距離は、それぞれｈ１からｈ４とする。予測動線Ｌ１１と動線Ｌ１２との相違度は、例えば、距離ｈ１から距離ｈ４までの和として算定することができる。即ち、予測動線Ｌ１１と動線Ｌ１２との相違度は、距離ｈ１から距離ｈ４までの和に比例して大きくなる。なお、図５は、予測動線Ｌ１１上に４つの点Ｈ１から点Ｈ４をとる例を示すが、推定部１０３は、４つに限られず任意の数の点から動線Ｌ１２までの距離の和を、相違度として算定してもよい。
　次に、図６は、利用者が動線上を移動する確率に基づいて相違度を算定する例を説明するための図である。図６に例示するように、利用者が自動販売機２０に向かって真っ直ぐに進む場合の予測動線Ｌ２１は、利用者が検出された位置Ｐ２と自動販売機２０の位置Ｑ２とを結ぶ直線とする。図６の例では、利用者は、実際には、他の自動販売機２０で販売される商品の確認等のため、位置Ｐ２から位置Ｒ２を経由して自動販売機２０の位置Ｑ２に向かう動線Ｌ２２に沿って移動する。図６に例示するように、予測動線Ｌ２１は初めて人を検出した位置Ｐ２と画像において自動販売機前面の中央に位置する点とを結ぶ直線であり、各区画は、利用者が当該区画に移動する確率と対応付けられる。各区画に対応付けられる確率は、予測動線Ｌ２１からの距離に応じて決定されてもよい。そして、予測動線Ｌ２１と動線Ｌ２２との相違度は、例えば、動線Ｌ２２が通過する区画に対応付けられた確率の平均値あるいは乗算値とすることができる。なお、各区画に確率を対応付けた確率マップは、図６の例に限られない。また、相違度の算出方法は、確率マップにおいて各区画と対応付ける確率の値に応じて、適宜変更可能である。
　図４に示す表示制御部１０４は、推定部１０３が推定した購入意欲に基づいて、自動販売機２０の表示部２０１への表示内容を制御する。具体的には、表示制御部１０４は、例えば、利用者の購入意欲の度合いが所定の閾値を超える場合には、既に購入する商品が決まっていると仮定する。この場合、表示制御部１０４は、自動販売機２０に対し、表示部２０１において商品の推薦をしないように指示することができる。一方、利用者の購入意欲の度合いが所定の閾値以下の場合には、表示制御部１０４は、購入の意思はあるが商品選択に迷っていると仮定することができる。この場合、表示制御部１０４は、自動販売機２０に対し、表示部２０１において商品を推薦するように指示することができる。
　表示制御情報ＤＢ１０５は、利用者の購入意欲を推定し、自動販売機２０の表示部２０１への表示内容を制御するために用いられる情報を格納するためのデータベースである。表示制御情報ＤＢ１０５は、撮像部１０１が写した撮像画像、解析部１０２が撮像画像から取得した情報、利用者の購入意欲の度合いを算出するための各種係数、閾値等を格納する。
　表示制御情報ＤＢ１０５は、プロセッサ１１によって実行されるデータベース管理システム（ＤＢＭＳ）のプログラムが、補助記憶装置１３に記憶されるデータを管理することで構築される。表示制御情報ＤＢ１０５は、例えば、リレーショナルデータベースである。
　＜自動販売機＞
　自動販売機２０は、ＣＰＵやＤＳＰ等のプロセッサ（不図示）、ＲＡＭ、ＲＯＭ等のメモリ（不図示）、ＥＰＲＯＭ、ハードディスクドライブ等の補助記憶装置（不図示）を含む。補助記憶装置は、オペレーティングシステム、各種プログラム、各種テーブル等を記憶し、プロセッサが補助記憶装置に格納されたプログラムをメモリの作業領域にロードして実行し、各構成要素を制御する。これによって、自動販売機２０は、図４に例示するように、表示部２０１、制御部２０２の各構成要素による処理を実行することができる。
　また、自動販売機２０は、販売する商品を電子的に表示するためのディスプレイ、利用者が商品を選択するための商品選択部、利用者が購入代金を投入する代金投入部、釣銭が排出される釣銭排出部等を、筐体前面に備えるものであってもよい。また、自動販売機２０は、筐体内部に商品を保管する商品保管部、商品を筐体前面の取出し口に搬送する商品搬送部を備えるものであってもよい。
　表示部２０１は、表示制御装置１０からの指示に基づいて、販売する商品又は利用者に推薦する商品等の表示内容を切り替える。制御部２０２は、表示制御装置１０の表示制御部１０４からの指示を受信し、受信した指示に基づいて表示部２０１に表示する内容を制御する。
　なお、実施形態では、表示制御装置１０及び自動販売機２０の各機能がいずれも汎用のプロセッサによって実現される例について説明している。しかしながら、以上の機能の一部又は全部が、１又は複数の専用のプロセッサにより実現されてもよい。また、表示制御装置１０及び自動販売機２０それぞれの機能構成に関して、実施形態に応じて、適宜、機能の省略、置換及び追加が行われてもよい。
　§３　動作例
　＜表示制御装置＞
　図７は、実施形態に係る表示制御処理を例示するフローチャートである。この処理の流れは、例えば、利用者が商品を購入した後、次の利用者を待機する状態になったことを契機に開始する。
　まず、Ｓ１０１では、表示制御装置１０の撮像部１０１は、自動販売機２０の前面側の画像を連続して撮像する。撮像部１０１は、例えば、フレームレートが１０ｆｐｓから３０ｆｐｓの範囲で撮像することができる。なお、フレームレートは、１０ｆｐｓから３０ｆｐｓの範囲に限られない。撮像部１０１は、フレームレートを上げて撮像することで、解析部１０２は、利用者の移動速度の変化をより詳細に解析することが可能となる。
　Ｓ１０２では、表示制御装置１０の解析部１０２は、Ｓ１０１で撮像した画像を解析し、利用者を検出する。解析部１０２は、撮像画像をフレームごとに解析し、いずれかのフレームに、人であると認識可能な画像が含まれるか否かを解析する。
　Ｓ１０３では、解析部１０２は、Ｓ１０１で撮像された撮像画像から利用者が検出されたか否かを判定する。解析部１０２は、例えば、Ｓ１０２の処理においていずれかのフレームに、人であると認識可能な画像が含まれていた場合に、利用者を検出したと判定することができる。利用者が検出された場合（Ｓ１０３：Ｙ）、処理はＳ１０４へ進む。利用者が検出されなかった場合（Ｓ１０３：Ｎ）、処理はＳ１０８へ進む。
　Ｓ１０４では、解析部１０２は、Ｓ１０１で撮像された撮像画像をさらに解析し、検出した利用者の位置情報、移動速度等の情報を取得する。解析部１０２は、撮像画像の解析により取得した情報を、表示制御情報ＤＢ１０５に格納する。
　ここで、図８を用いて、解析部１０２が撮像画像の解析により取得した解析情報について説明する。図８は、撮像画像の解析情報のデータ構造を例示する図である。撮像画像の解析情報を格納する解析情報テーブルは、解析情報に基づいて、購入意欲の度合いを算出するために用いられる。解析情報テーブルの１レコードは、利用者ごと及び１フレームごとに作成される。解析情報テーブルは、利用者ＩＤ、フレーム番号、位置、移動速度の各フィールドを有する。
　利用者ＩＤは、解析部１０２が識別した利用者を識別する識別情報である。フレーム番号は、同一の利用者を連続して写した各フレームを識別する識別情報である。位置は、各フレームにおいて検出された利用者の位置情報である。利用者の位置情報は、例えば、自動販売機２０の設置面の中心点を原点とする座標系によって示すことができる。また、利用者の位置は、例えば、各フレーム画像において利用者を含む矩形の中心点等の所定の点により特定されてもよい。移動速度は、利用者が自動販売機２０に向かう移動速度である。移動速度は、例えば、前フレームからの移動距離及びフレーム間の経過時間により算出可能である。
　次に、Ｓ１０５では、推定部１０３は、購入意欲の度合いを算出する。解析部１０２は、Ｓ１０４において撮像画像の解析により取得した情報に基づいて、購入意欲の度合いを算出することができる。購入意欲の度合いを算出する処理は、後述の図９により詳細に説明される。
　Ｓ１０６では、表示制御装置１０の表示制御部１０４は、Ｓ１０５で算出された購入意欲の度合いが、所定の閾値未満であるか否かを判定する。購入意欲の度合いが所定の閾値未満である場合（Ｓ１０６：Ｙ）、処理はＳ１０７へ進む。購入意欲の度合いが所定の閾値以上である場合（Ｓ１０６：Ｎ）、処理はＳ１０８へ進む。
　Ｓ１０７では、表示制御部１０４は、自動販売機２０の制御部２０２に対し、表示部２０１に利用者に対する推薦商品を表示するように指示する。Ｓ１０８では、表示制御処理を終了するか否かを判定する。利用者が商品を購入した後、または商品を購入することなく立ち去った後、自動販売機２０の前に利用者がいなくなった場合等、引続き自動販売機２０の表示内容を制御する場合には（Ｓ１０８：Ｎ）、処理はＳ１０１に戻り、再び表示制御処理が開始される。また、自動販売機２０の前で、利用者が停止している場合等、自動販売機２０の表示内容の制御が不要な場合には、図７に示す表示制御処理は一旦終了する。
　次に、図９を用いて、推定部１０３が購入意欲を推定する処理の一例について説明する。推定部１０３は、例えば、撮像画像の解析により取得した情報に基づいて、購入意欲の度合いを算出することにより、購入意欲を推定する。図９は、購入意欲の度合いを算出する処理を例示するフローチャートである。この処理の流れは、図７に示す表示制御処理のＳ１０５の処理の詳細を例示する。
　まず、Ｓ１０５１では、表示制御装置１０の推定部１０３は、購入意欲の度合いＤに初期値“０”を設定する。Ｓ１０５２では、推定部１０３は、利用者の移動速度に応じた移動速度係数αの値を取得する。具体的には、まず、推定部１０３は、利用者のフレームごとの移動速度を、例えば、図８に例示する解析情報テーブルから取得する。この場合、推定部１０３は、移動速度係数αの値を決定するための移動速度（以下、基準移動速度ともいう）として、例えば、各フレームにおける移動速度のうち、最小の移動速度を取得するようにしてもよい。また、推定部１０３は、基準移動速度として、最後に撮像されたフレームでの移動速度を取得してもよい。移動速度係数αは、購入意欲の度合いを示す係数であって、利用者の移動速度に応じて、予め値が定義される。
　図１０を用いて、移動速度係数αの値の定義について説明する。図１０は、購入意欲を推定するための係数定義テーブルを例示する図である。移動速度係数αは、基準移動速度が速いほど購入意欲が高いと判定されるように、より大きい値に定義される。図１０の例では、基準移動速度ｖ０が閾値θ１より小さい（ｖ０＜θ１）場合、購入意欲はより低いと考えられるため、α＝０と定義される。また、基準移動速度ｖ０が閾値θ１以上、θ２未満（θ１≦ｖ０＜θ２）の場合、購入意欲は中程度と考えられるため、α＝α１（α１＞０）と定義される。さらに、基準移動速度ｖ０が閾値θ２以上、θ３未満（θ２≦ｖ０＜θ３）の場合、購入意欲はより高いと考えられるため、α＝α２（α２＞α１）と定義される。このように、利用者の移動速度に応じて、購入意欲の度合いを算出する移動速度係数αの値が決定される。なお、移動速度の範囲を定義する閾値θ１、θ２、θ３は、例えば、利用者の性別、年齢、身長等に応じて変更することも可能である。
　図９のＳ１０５３では、推定部１０３は、以下の式１により、購入意欲の度合いＤに、重み付け係数ω１を移動速度係数αに乗算して得られる値を加算する。
　　Ｄ＝Ｄ＋ω１×α　…　（式１）
重み付け係数ω１は、移動速度が購入意欲に影響する度合いを示し、[０，１]の範囲で設定される。
　Ｓ１０５４では、推定部１０３は、利用者を検出した位置から自動販売機２０までの予測動線と、実際に利用者が移動した動線との相違度ｄを算出する。相違度ｄは、例えば、図５及び図６において説明した方法により算出することができる。
　Ｓ１０５５では、推定部１０３は、以下の式２により購入意欲の度合いＤを算出する。
　　Ｄ＝Ｄ＋ω２×ｄ　…　（式２）
即ち、推定部１０３は、Ｓ１０５３で算出した購入意欲の度合いＤに、重み付け係数ω２を相違度ｄに乗算して得られる値を加算する。重み付け係数ω２は、移動速度が購入意欲に影響する度合いを示し、[０，１]の範囲で設定される。
　式１及び式２より、購入意欲の度合いＤは、以下の式３によって算出される。
　　Ｄ＝ω１×α＋ω２×ｄ　…　（式３）
なお、重み付け係数ω２は、ω１＋ω２＝１となるように決定されてもよい。以上により、推定部１０３は、図９に示す処理を終了し、Ｓ１０５５で算出した購入意欲の度合いＤを図７のＳ１０５で算出する購入意欲の度合いとすることができる。
　＜実施形態の作用効果＞
　上記の実施形態において、表示制御装置１０の撮像部１０１は、自動販売機２０に近づいてくる利用者を連続して撮像する。解析部１０２は、撮像された各画像から利用者の動線の情報を取得する。推定部１０３は、撮像された各画像から取得した情報に基づいて利用者の購入意欲を推定する。表示制御部１０４は、購入意欲に基づいて、自動販売機２０の表示内容を制御する。これにより、表示制御装置１０は、利用者の動線の情報に基づいて、利用者が自動販売機２０の前に停止するよりも早いタイミングで、利用者の購入意欲を推定することができる。このように、表示制御装置１０は、利用者の動線の情報に基づいて購入意欲を推定し、購入意欲に応じて自動販売機２０の表示部２０１への表示内容を制御することができる。
　また、解析部１０２は、各画像が撮像されたときの利用者の移動速度の情報をさらに取得する。推定部１０３は、動線の情報に加え、利用者の移動速度の情報に基づいて利用者の購入意欲を推定することで、移動速度に応じた利用者の購入意欲を適切に推定し、自動販売機２０の表示部２０１への表示内容を制御することができる。
　§４　変形例
　以上、本発明の実施の形態を詳細に説明してきたが、前述までの説明はあらゆる点において本発明の例示に過ぎない。本発明の範囲を逸脱することなく種々の改良や変形を行うことができることは言うまでもない。例えば、以下のような変更が可能である。なお、以下では、上記実施形態と同様の構成要素に関しては同様の符号を用い、上記実施形態と同様の点については、適宜説明を省略した。以下の変形例は適宜組み合わせ可能である。
　＜変形例１＞
　変形例１では、表示制御装置１０は、自動販売機２０からの距離に応じた領域を設定し、利用者が検出された領域に応じて、購入意欲の度合いを算出するための移動速度係数α、重み付け係数ω１、ω２等の係数の値を調整する。図１１を用いて、変形例１に係る表示制御処理の一例について説明する。図１１は、変形例１に係る表示制御処理を例示するフローチャートである。
　まず、Ｓ２０１では、表示制御装置１０の解析部１０２は、領域Ａ１から領域Ａ３を設定する。ここで、図１２を用いて、利用者を検出する領域の設定例について説明する。図１２は、利用者の検出対象の領域の設定例を示す図である。
　領域Ａ１は、自動販売機２０からの距離が３ｍから５ｍ程度の領域である。領域Ａ１にいる利用者は、ある程度離れた距離から複数の自動販売機２０を見て商品を検討する。領域Ａ１では、利用者の動線、及び移動速度が低下して利用者が立ち止まる動作が、主として利用者の購入意欲の推定に影響する。距離は自動販売機を設置する通路や室内の環境に合わせて変更してもよい。
　領域Ａ２は、自動販売機２０からの距離が１．５ｍから３ｍ程度の領域である。領域Ａ２にいる利用者は、購入する商品を迷っている場合、ディスプレイを注視しながら自動販売機に向かい、移動速度が遅くなることが考えられる。また、迷いのある利用者は、領域Ａ２に入った後、自動販売機２０に近づくと停止することも考えられる。このため、領域Ａ２では、移動速度が、主として利用者の購入意欲の推定に影響する。距離は自動販売機を設置する通路や室内の環境に合わせて変更してもよい。
　領域Ａ３は、自動販売機２０からの距離が１．５ｍ程度までの領域である。領域Ａ３にいる利用者は、自動販売機２０に到達しており、購入する商品はほぼ決まっていると考えられる。この場合、表示制御装置１０の表示制御部１０４は、自動販売機２０の表示部２０１に推薦商品を表示しないようにしてもよい。距離は自動販売機を設置する通路や室内の環境に合わせて変更してもよい。
　図１１のＳ１０１及びＳ１０２では、図７で説明した処理と同様に、画像を撮像し、利用者を検出する。Ｓ２０２では、解析部１０２は、Ｓ１０１で撮像された撮像画像から、領域Ａ１から領域Ａ３のいずれかの領域で利用者が検出されたか否かを判定する。解析部１０２は、例えば、撮像された各フレームにおいて、利用者が移っている位置に基づいて、自動販売機２０からの距離を推定することで、利用者がいずれの領域に存在するかを認識することができる。いずれかの領域で利用者が検出された場合（Ｓ２０２：Ｙ）、処理はＳ２０３へ進む。利用者がいずれの領域でも検出されなかった場合（Ｓ２０２：Ｎ）、処理はＳ１０８へ進む。
　Ｓ２０３では、解析部１０２は、Ｓ１０１で撮像された撮像画像から、領域Ａ３で利用者が検出されたか否かを判定する。領域Ａ３で利用者が検出された場合（Ｓ２０３：Ｙ）、処理はＳ２０４へ進む。利用者が領域Ａ３で検出されなかった場合（Ｓ２０３：Ｎ）、処理はＳ２０５へ進む。
　Ｓ２０４では、解析部１０２は、Ｓ２０３で領域Ａ３において利用者を検出したフレームの前フレームでも当該利用者が領域Ａ３で検知されていたか否かを判定する。前フレームでも当該利用者が領域Ａ３で検知されていた場合（Ｓ２０４：Ｙ）、当該利用者は購入商品を決定し、領域Ａ３に留まっていると考えられる。したがって、自動販売機２０の表示部２０１には推薦商品を表示させず、図１１に示す表示制御処理は終了する。前フレームでは当該利用者が領域Ａ３で検知されていなかった場合（Ｓ２０４：Ｎ）、処理はＳ２０５へ進む。
　Ｓ２０５では、解析部１０２は、領域Ａ２から領域Ａ３に移動した利用者がいるか否かを判定する。解析部１０２は、Ｓ１０１で撮像された撮像画像から利用者の動線の情報を取得することで、領域Ａ２から領域Ａ３に移動した利用者がいるか否かを判定することができる。領域Ａ２から領域Ａ３に移動した利用者がいる場合（Ｓ２０５：Ｙ）、処理はＳ１０４へ進む。領域Ａ２から領域Ａ３に移動した利用者がいない場合（Ｓ２０５：Ｎ）、処理はＳ２０６へ進む。
　Ｓ２０６では、解析部１０２は、領域Ａ１から領域Ａ２に移動した利用者がいるか否かを判定する。解析部１０２は、Ｓ１０１で撮像された撮像画像から利用者の動線の情報を取得することで、領域Ａ１から領域Ａ２に移動した利用者がいるか否かを判定することができる。領域Ａ１から領域Ａ２に移動した利用者がいる場合（Ｓ２０６：Ｙ）、処理はＳ１０４へ進む。領域Ａ２から領域Ａ３に移動した利用者がいない場合（Ｓ２０６：Ｎ）、処理はＳ１０８へ進む。
　Ｓ１０４では、解析部１０２は、図７で説明した処理と同様に、検出した利用者の動線の情報、移動速度等の情報を取得する。Ｓ１０５では、推定部１０３は、購入意欲の度合いを算出する。図９に例示する購入意欲の度合いを算出する処理で説明したように、推定部１０３は、移動速度係数α及び動線の相違度ｄに、重み付け係数ω１及び重み付け係数ω２をそれぞれ乗算して、購入意欲の度合いを算出する。上記実施形態では、重み付け係数ω１及び重み付け係数ω２は、利用者が検出された領域に関わらず、予め定義された値が用いられる。
　一方、変形例１では、Ｓ２０５において、領域Ａ２から領域Ａ３に移動した利用者がいると判定された場合、移動速度係数αに対する重み付け係数ω１は、動線の相違度ｄに対する重み付け係数ω２よりも大きい値が設定される。これは、自動販売機２０により近い領域では、動線よりも移動速度のほうが、購入意欲の推定に影響を与えるためである。
　さらに、変形例１では、Ｓ２０６において、領域Ａ１から領域Ａ２に移動した利用者がいると判定された場合、移動速度係数αに対する重み付け係数ω１と動線の相違度ｄに対する重み付け係数ω２とは、例えば同じ値が設定されるようにしてもよい。これは、自動販売機２０から離れた領域では、動線と移動速度の両方が、購入意欲の推定に同程度の影響を与えるためである。
　図１１のＳ１０６では、図７の処理と同様に、表示制御装置１０の表示制御部１０４は、購入意欲の度合いが、所定の閾値未満であるか否かを判定する。購入意欲の度合いが所定の閾値未満である場合には、表示制御部１０４は、図７の処理と同様に、Ｓ１０７において、自動販売機２０の表示部２０１に利用者に対する推薦商品を表示するように指示する。図１１のＳ１０８では、図７の処理と同様に、表示制御部１０４は処理を終了するか否かを判定する。処理を終了しない場合（Ｓ１０８：Ｎ）、処理はＳ２０１に戻る。なお、Ｓ２０１では、例えば、時間帯による明るさの変化や利用者の性別および年齢等に応じて、領域の設定を変更することが可能であるが、領域の設定が不要である場合には、Ｓ１０１の撮像処理に戻ってもよい。また、Ｓ１０８において処理を終了する場合（Ｓ１０８：Ｙ）、図１１に示す表示制御処理は終了する。
　変形例１では、表示制御装置１０の推定部１０３は、自動販売機２０から利用者までの距離に応じて、動線の情報、移動速度の情報、及び加速度の情報に対する重み付けをすることで、利用者の購入意欲を適切に推定することができる。これにより、表示制御部１０４は、自動販売機２０の表示部２０１への表示内容を制御することができる。
　＜変形例２＞
　上記実施形態では、推定部１０３は、解析部１０２が取得した動線及び移動速度の情報に基づいて、利用者の購入意欲を推定する。これに対し、変形例２では、解析部１０２は、さらに利用者の加速度の情報を取得する。そして、推定部１０３は、動線及び移動速度の情報に加え、利用者の加速度の情報に基づいて利用者の購入意欲を推定するようにしてもよい。解析部１０２は、利用者の加速度を、図７のＳ１０４において取得した各フレームの移動速度から算出することができる。具体的には、解析部１０２は、例えば、各フレームにおける利用者の加速度を、現フレームの移動速度及び前フレームの移動速度から算出可能である。
　また、上記実施形態において、図９に例示する購入意欲の度合いを算出する処理では、購入意欲の度合いＤは、式３：Ｄ＝ω１×α＋ω２×ｄによって求められる。変形例２では、図１０に示す移動速度係数αの定義と同様に、推定部１０３は、加速度係数βを、加速度に応じて予め定義するようにしてもよい。この場合、加速度係数βに対する重み付け係数をω３とすると、購入意欲の度合いＤは、以下の式４により算出することができる。
　　Ｄ＝ω１×α＋ω２×ｄ＋ω３×β　…　（式４）
重み付け係数ω３は、加速度が購入意欲に影響する度合いを示し、[０，１]の範囲で設定される。各重み付け係数は、ω１＋ω２＋ω３＝１となるように決定されてもよい。
　変形例２では、利用者の動線及び移動速度の情報のほか、加速度の情報に基づいて利用者の購入意欲を推定する。これにより、推定部１０３は、利用者の購入意欲を適切に推定し、自動販売機２０の表示部２０１への表示内容を制御することができる。
　＜変形例３＞
　上記実施形態及び各変形例では、推定部１０３は、解析部１０２が取得した動線、移動速度及び加速度の情報に基づいて、利用者の購入意欲を推定する。これに対し、変形例３では、解析部１０２は、さらに、利用者が自動販売機２０の前で停止した後、利用者の視線又は顔の向きの情報を取得する。そして、推定部１０３は、解析部１０２が取得した各種情報に加え、利用者の視線又は顔の向きの情報に基づいて、利用者の購入意欲を推定するようにしてもよい。具体的には、推定部１０３は、例えば、利用者の視線又は顔の向きの情報に応じた係数γ、及び係数γに対応する重み付け係数ω４を定義し、例えば、以下の式５により、購入意欲の度合いＤを算出してもよい。
　　Ｄ＝ω１×α＋ω２×ｄ＋ω３×β＋ω４×γ　…　（式５）
利用者の視線又は顔の向きの変化が検出された場合、利用者が商品の選択を迷っていると考えられるため、係数γはより低い値に設定することができる。
　変形例３では、動線、移動速度及び加速度の情報に加え、自動販売機２０の前で停止した後の視線又は顔の向きの情報を利用することで、より好適に購入意欲を推定することができる。これにより、表示制御装置１０の推定部１０３は、利用者の購入意欲を適切に推定し、自動販売機２０の表示部２０１への表示内容を制御することができる。
　＜変形例４＞
　上記実施形態及び各変形例では、推定部１０３は、解析部１０２が取得した動線、移動速度、加速度、及び利用者の視線又は顔の向きの情報に基づいて、利用者の購入意欲を推定する。これに対し、変形例４では、解析部１０２は、さらに、利用者が自動販売機２０の前で停止している時間の情報を取得する。そして、推定部１０３は、解析部１０２が取得した各種情報に加え、利用者の自動販売機２０の前での停止時間の情報に基づいて利用者の購入意欲を推定するようにしてもよい。例えば、利用者が自動販売機２０に向かって真っ直ぐに進んだ場合でも、自動販売機２０の前での停止時間が長くなれば、利用者は、商品の選択を迷っていると考えられる。この場合、推定部１０３は、購入意欲及び停止時間の長さに応じて、推薦する商品を表示するタイミングを決定してもよい。
　変形例４では、利用者が自動販売機２０の前で停止した場合に、購入意欲及び停止時間の長さに応じて、推薦する商品を表示するタイミングを決定する。これにより、表示制御装置１０の表示制御部１０４は、適切なタイミングで自動販売機２０の表示部２０１の表示内容を制御することができる。
　＜変形例５＞
　変形例５では、解析部１０２は、さらに、各画像から推定される利用者の身長、性別及び年齢の属性情報を取得する。そして、推定部１０３は、利用者の購入意欲を推定するために用いられる所定の閾値を、利用者の属性情報に応じて調整するようにしてもよい。所定の閾値は、例えば、図７のＳ１０６において購入意欲の度合いを判定するための閾値である。また、所定の閾値は、図１０で説明した移動速度係数αの値を決定するための閾値θ１、θ２、θ３としてもよい。なお、解析部１０２は、利用者の性別及び年齢を、例えば、撮像画像から検出した利用者のプロポーション、歩幅、歩行速度等により判別するようにしてもよい。
　変形例５では、利用者の属性情報に応じて、利用者の購入意欲を推定するために用いられる所定の閾値を調整する。これにより、表示制御装置１０の表示制御部１０４は、利用者に適したタイミングで、自動販売機２０の表示部２０１への表示内容を制御することができる。
　＜記録媒体＞
　コンピュータその他の機械、装置（以下、コンピュータ等）に上記いずれかの機能を実現させるプログラムを、コンピュータ等が読み取り可能な記録媒体に記録することができる。コンピュータ等に、この記録媒体のプログラムを読み込ませて実行させることにより、その機能を提供させることができる。
　ここで、コンピュータ等が読み取り可能な記録媒体とは、データやプログラム等の情報を電気的、磁気的、光学的、機械的、又は化学的作用によって蓄積し、コンピュータ等から読み取ることができる非一時的な記録媒体をいう。このような記録媒体のうちコンピュータ等から取り外し可能なものとしては、例えばフレキシブルディスク、光磁気ディスク、ＣＤ－ＲＯＭ、ＣＤ－Ｒ／Ｗ、ＤＶＤ、ブルーレイディスク、ＤＡＴ、８ｍｍテープ、フラッシュメモリなどのメモリカード等がある。また、コンピュータ等に固定された記録媒体としてハードディスク、ＲＯＭ等がある。さらに、ＳＳＤ（Solid State Drive）は、コンピュータ等から取り外し可能な記録媒体としても、コンピュータ等に固定された記録媒体としても利用可能である。
　＜付記＞
（１）　利用者に商品を提示する表示部（２０１）を有する自動販売機（２０）の表示制御装置（１０）であって、
　前記自動販売機（２０）に近づいてくる前記利用者を連続して撮像する撮像手段（１０１）と、
　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析手段（１０２）と、
　前記解析手段が取得した情報に基づいて、前記利用者の購入意欲を推定する推定手段（１０３）と、
　前記推定した購入意欲に基づいて、前記自動販売機（２０）の前記表示部（２０１）への表示内容を制御する表示制御手段（１０４）と、
を備える、
　表示制御装置（１０）。
（２）　利用者に商品を提示する表示部（２０１）を有する自動販売機（２０）の表示制御装置（１０）が、
　前記自動販売機（２０）に近づいてくる前記利用者を連続して撮像するステップと、
　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析ステップと、
　前記解析ステップで取得した情報に基づいて、前記利用者の購入意欲を推定する推定ステップと、
　前記推定した購入意欲に基づいて、前記自動販売機（２０）の前記表示部（２０１）への表示内容を制御する制御ステップと、を実行する、
　表示制御方法。
（３）　利用者に商品を提示する表示部（２０１）を有する自動販売機（２０）の表示制御装置（１０）に、
　前記自動販売機（２０）に近づいてくる前記利用者を連続して撮像するステップと、
　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析ステップと、
　前記解析ステップで取得した情報に基づいて、前記利用者の購入意欲を推定する推定ステップと、
　前記推定した購入意欲に基づいて、前記自動販売機（２０）の前記表示部（２０１）への表示内容を制御する制御ステップと、を実行させる、
　表示制御プログラム。
１０…表示制御装置：１１…プロセッサ：１２…主記憶装置：１３…補助記憶装置：１４…通信インタフェース：１５…撮像装置：１０１…撮像部：１０２…解析部：１０３…推定部：１０４…表示制御部：１０５…表示制御ＤＢ：２０…自動販売機：２０１…表示部：２０２…制御部

Claims (10)

  1. 　利用者に商品を提示する表示部を有する自動販売機の表示制御装置であって、
    　前記自動販売機に近づいてくる前記利用者を連続して撮像する撮像手段と、
    　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析手段と、
    　前記解析手段が取得した情報に基づいて、前記利用者の購入意欲を推定する推定手段と、
    　前記推定した購入意欲に基づいて、前記自動販売機の前記表示部への表示内容を制御する表示制御手段と、
    を備える、
    　表示制御装置。
  2. 　前記解析手段は、前記各画像が撮像されたときの前記利用者の移動速度の情報をさらに取得する、
    　請求項１に記載の表示制御装置。
  3. 　前記解析手段は、前記各画像が撮像されたときの前記利用者の加速度の情報をさらに取得する、
    　請求項１または２に記載の表示制御装置。
  4. 　前記推定手段は、前記動線の情報と、前記移動速度の情報及び前記加速度の情報の少なくともいずれか一方とに基づいて、前記利用者の購入意欲を推定する場合に、前記自動販売機から前記利用者までの距離に応じて、前記動線の情報、前記移動速度の情報、及び前記加速度の情報のそれぞれに対して重み付けをすることにより、前記利用者の購入意欲を推定する、
    　請求項２を引用する請求項３に記載の表示制御装置。
  5. 　前記解析手段は、前記利用者が前記自動販売機の前で停止した後、前記利用者の視線又は顔の向きの情報をさらに取得する、
    　請求項１から４のいずれか一項に記載の表示制御装置。
  6. 　前記解析手段は、前記利用者が前記自動販売機の前で停止している時間の情報をさらに取得する、
    　請求項１から５のいずれか一項に記載の表示制御装置。
  7. 　前記解析手段は、前記各画像から推定される前記利用者の身長、性別及び年齢の属性情報をさらに取得し、
    　前記推定手段は、前記解析手段が取得した情報から前記利用者の購入意欲を推定するために用いられる所定の閾値を、前記利用者の前記属性情報に応じて調整する、
    　請求項１から６のいずれか一項に記載の表示制御装置。
  8. 　請求項１から７のいずれか一項に記載の表示制御装置を備える自動販売機。
  9. 　利用者に商品を提示する表示部を有する自動販売機の表示制御装置が、
    　前記自動販売機に近づいてくる前記利用者を連続して撮像するステップと、
    　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析ステップと、
    　前記解析ステップで取得した情報に基づいて、前記利用者の購入意欲を推定する推定ステップと、
    　前記推定した購入意欲に基づいて、前記自動販売機の前記表示部への表示内容を制御する制御ステップと、を実行する、
    　表示制御方法。
  10. 　利用者に商品を提示する表示部を有する自動販売機の表示制御装置に、
    　前記自動販売機に近づいてくる前記利用者を連続して撮像するステップと、
    　前記撮像された各画像から前記利用者を検出し、前記利用者の動線の情報を取得する解析ステップと、
    　前記解析ステップで取得した情報に基づいて、前記利用者の購入意欲を推定する推定ステップと、
    　前記推定した購入意欲に基づいて、前記自動販売機の前記表示部への表示内容を制御する制御ステップと、を実行させる、
    　表示制御プログラム。
PCT/JP2019/001500 2018-03-12 2019-01-18 表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム WO2019176281A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-044172 2018-03-12
JP2018044172A JP6874720B2 (ja) 2018-03-12 2018-03-12 表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム

Publications (1)

Publication Number Publication Date
WO2019176281A1 true WO2019176281A1 (ja) 2019-09-19

Family

ID=67906959

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/001500 WO2019176281A1 (ja) 2018-03-12 2019-01-18 表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム

Country Status (2)

Country Link
JP (1) JP6874720B2 (ja)
WO (1) WO2019176281A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6753621B1 (ja) * 2019-12-24 2020-09-09 株式会社益基樹脂 物品取出装置、物品提供システム及び物品提供方法
JPWO2022113244A1 (ja) * 2020-11-26 2022-06-02

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006133915A (ja) * 2004-11-02 2006-05-25 National Institute Of Advanced Industrial & Technology ユーザ興味度解析システムならびにユーザ興味度解析方法、ユーザ興味度解析プログラムおよびその記録媒体
WO2010013572A1 (ja) * 2008-07-28 2010-02-04 国立大学法人筑波大学 建物内制御装置
JP2012022589A (ja) * 2010-07-16 2012-02-02 Hitachi Ltd 商品選択支援方法
JP2017083980A (ja) * 2015-10-26 2017-05-18 日立アイ・エヌ・エス・ソフトウェア株式会社 行動分析装置及びシステム及び方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006133915A (ja) * 2004-11-02 2006-05-25 National Institute Of Advanced Industrial & Technology ユーザ興味度解析システムならびにユーザ興味度解析方法、ユーザ興味度解析プログラムおよびその記録媒体
WO2010013572A1 (ja) * 2008-07-28 2010-02-04 国立大学法人筑波大学 建物内制御装置
JP2012022589A (ja) * 2010-07-16 2012-02-02 Hitachi Ltd 商品選択支援方法
JP2017083980A (ja) * 2015-10-26 2017-05-18 日立アイ・エヌ・エス・ソフトウェア株式会社 行動分析装置及びシステム及び方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"In-store promotion in 2011", TOP PROMOTIONS HANSOKU KAIGI, no. 154, 1 February 2011 (2011-02-01), pages 34 - 35 *

Also Published As

Publication number Publication date
JP2019159656A (ja) 2019-09-19
JP6874720B2 (ja) 2021-05-19

Similar Documents

Publication Publication Date Title
US20220414713A1 (en) Information collection system, electronic shelf label, electronic pop advertising, and character information display device
JP6562077B2 (ja) 展示装置、表示制御装置および展示システム
US8724845B2 (en) Content determination program and content determination device
JP5643543B2 (ja) 情報提示システム及びその制御方法、プログラム
JP6707940B2 (ja) 情報処理装置及びプログラム
JP5731766B2 (ja) 販売機会損失の分析システム及び分析方法
JP2004348618A (ja) 顧客情報収集管理方法及びそのシステム
WO2007125285A1 (en) System and method for targeting information
JP2006113711A (ja) マーケティング情報提供システム
JP6615800B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP6781906B2 (ja) 販売情報利用装置、販売情報利用方法、およびプログラム
JP2017033401A (ja) 顧客情報収集装置、顧客情報収集システムおよび顧客情報収集方法
TWI745653B (zh) 顧客行為分析方法與顧客行為分析系統
US20180046842A1 (en) Line-of-sight detection device and line-of-sight detection method
JP2016076109A (ja) 顧客購買意思予測装置及び顧客購買意思予測方法
WO2019176281A1 (ja) 表示制御装置、自動販売機、表示制御方法、及び表示制御プログラム
JP2011070629A5 (ja)
JP2011070629A (ja) 広告効果測定システム及び広告効果測定装置
JP2009140234A (ja) 自動販売機
TW201337867A (zh) 數位告示系統及其方法
JP2020126688A (ja) 接客支援装置、接客支援方法、及びプログラム
JP2016219065A (ja) 滞留分析システム及び方法
WO2020189196A1 (ja) 情報処理装置、情報処理システム、表示制御方法および記録媒体
JP2015133131A (ja) 販売機会損失分析用データ出力システム及び方法
JP2009043176A (ja) 自動販売機

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19767236

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19767236

Country of ref document: EP

Kind code of ref document: A1