WO2017056429A1 - 情報処理装置、情報処理方法、およびプログラムが格納された記録媒体 - Google Patents

情報処理装置、情報処理方法、およびプログラムが格納された記録媒体 Download PDF

Info

Publication number
WO2017056429A1
WO2017056429A1 PCT/JP2016/004203 JP2016004203W WO2017056429A1 WO 2017056429 A1 WO2017056429 A1 WO 2017056429A1 JP 2016004203 W JP2016004203 W JP 2016004203W WO 2017056429 A1 WO2017056429 A1 WO 2017056429A1
Authority
WO
WIPO (PCT)
Prior art keywords
information processing
product quantity
product
people
processing apparatus
Prior art date
Application number
PCT/JP2016/004203
Other languages
English (en)
French (fr)
Inventor
林 克年
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to CN201680058225.XA priority Critical patent/CN108140282A/zh
Priority to US15/763,227 priority patent/US20180268391A1/en
Publication of WO2017056429A1 publication Critical patent/WO2017056429A1/ja
Priority to HK18109546.0A priority patent/HK1250086A1/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281Customer communication at a business location, e.g. providing product or service information, consulting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/0036Checkout procedures
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/01Details for indicating

Definitions

  • the present invention relates to an information processing apparatus, an information processing method, a program, and the like.
  • Patent Document 1 describes a technique for recognizing a product by extracting a contour line of the product shown in an image and calculating and notifying a registration time.
  • Patent Document 2 describes a technique for obtaining and displaying the progress of registration by measuring the weight of a product before registration and the weight of a registered product.
  • Patent Document 3 describes a technique for detecting the number of customers in a row or the length of the row and guiding the customer to a row with a low waiting time.
  • the customer looks at the length of the queue of each cash register and selects a column that seems to have a short waiting time. However, contrary to expectation, the waiting time of another column may be short and you may be dissatisfied.
  • Patent Documents 1 to 3 cannot provide information regarding waiting time appropriately.
  • the waiting time for each cash register including the person behind the line cannot be predicted.
  • Patent Document 3 does not take into account the amount of products held by the customer, so there is a large deviation from the actual waiting time.
  • An object of the present invention is to provide information about waiting time to a customer.
  • Product quantity estimation means for estimating the product quantity of people lined up in the POS device; Number of people detecting means for detecting the number of people lined up in the POS device; An information processing apparatus is provided that includes waiting time calculation means for calculating a predicted value of waiting time for each of the POS devices based on the amount of merchandise and the number of people lined up in the POS device.
  • a computer program for realizing an information processing apparatus or a recording medium storing the computer program Computer Product quantity estimation means for estimating the product quantity of people lined up in the POS device, Number-of-people detecting means for detecting the number of people lined up in the POS device, and waiting time calculation for calculating a predicted value of the waiting time for each of the POS devices based on the product quantity of the people lined up in the POS device and the number of people
  • Computer Program for functioning as a means or a recording medium storing the computer program is provided.
  • information about waiting time can be provided to a customer.
  • FIG. 1 is a block diagram illustrating an information processing apparatus according to a first embodiment. It is a figure which shows notionally the hardware structural example of the information processing apparatus in 1st Embodiment. It is a flowchart which illustrates the flow of the process performed by the information processing apparatus of 1st Embodiment. It is a figure which shows the example of the image from which information is acquired by the acquisition part which concerns on 1st Embodiment. It is a flowchart which illustrates the flow of the merchandise quantity estimation step performed by the merchandise quantity estimation part of 1st Embodiment. It is a flowchart which illustrates the flow of the waiting time calculation step performed by the waiting time estimation part of 1st Embodiment.
  • FIG. It is a figure which illustrates the hardware constitutions of the computer which implement
  • FIG. It is a figure which shows the structural example of a POS system. It is a flowchart which illustrates the flow of the process performed by the information processing apparatus of the modification of 10th Embodiment.
  • FIG. 1 is a block diagram illustrating an information processing apparatus 10 according to the first embodiment.
  • the information processing apparatus 10 includes a product quantity estimation unit 14 (detection means), a number of people detection unit 16, and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 estimates the product quantity of people who are lined up in the product registration device (POS (Point Of Sale) device).
  • the number-of-people detection unit 16 detects the number of people lined up in the product registration device.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device based on the product quantity of the people lined up in the product registration device and the number of people. This will be described in detail below.
  • a POS device in which people line up may have only a product registration function, or may have both a product registration function and a checkout function.
  • the information processing apparatus 10 further includes an acquisition unit 12.
  • the acquisition unit 12 acquires information indicating an image obtained by capturing a row of people lined up in the product registration device.
  • the product quantity estimation unit 14 estimates the total product quantity using the image.
  • the total product amount is the product amount of people who are lined up in the product registration device, and means the total amount of products to be registered in the product registration device in the column.
  • total product quantity is also referred to as “product quantity in a row”.
  • the amount of products in the shopping cart is referred to as the total amount of products or the amount of products in the queue.
  • the customer selects a product that he / she wants to purchase at the sales floor and then goes to the cash register.
  • two processes are performed: (1) processing for registering the product to be settled (reading a barcode, etc.) and (2) processing for performing settlement of the registered product (receiving the price, returning the change, etc.).
  • the process of registering the product to be settled is performed by the product registration apparatus, and the process of performing the settlement of the registered product is performed by the settlement apparatus.
  • a customer may wait in front of a product registration device for product registration and settlement.
  • a store clerk registers with a product registration apparatus, receives a price from a customer, and settles with a settlement apparatus.
  • the waiting time for each product registration device is the sum of the time required for product registration and the time required for payment.
  • the time required for product registration can be estimated based on the amount of products to be registered, and the time required for settlement can be estimated based on the number of people who settle.
  • the acquisition unit 12 the product quantity estimation unit 14, the number of people detection unit 16, and the waiting time estimation unit 18 will be described in detail later.
  • FIG. 2 is a diagram conceptually illustrating a hardware configuration example of the information processing apparatus according to the present embodiment.
  • the information processing apparatus 10 includes a CPU (Central Processing Unit) 101, a memory 102, an input / output interface (I / F) 103, a communication unit 104, and the like.
  • the CPU 101 is connected to other units via a communication line such as a bus.
  • the memory 102 is a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, or the like.
  • the communication unit 104 exchanges signals with other devices and devices.
  • a portable recording medium 1041 or the like can be connected to the communication unit 104.
  • the input / output I / F 103 is connected to the display unit 105, the input unit 106, the imaging unit 107, the sound collection unit 108, the audio output unit 109, and the like.
  • the display unit 105 displays a screen corresponding to drawing data processed by a CPU 101 or a GPU (Graphics Processing Unit) (not shown) such as an LCD (Liquid Crystal Display) or a CRT (Cathode Ray Tube) display.
  • the input unit 106 is a unit that receives an input of a user operation, and is realized as a hardware button unit, a touch sensor, or the like, for example.
  • the display unit 105 and the input unit 106 can be integrated and realized as a touch panel.
  • the imaging unit 107 is a camera formed from a lens, an imaging element, and the like, and captures still images and moving images.
  • the sound collection unit 108 is a microphone unit.
  • the audio output unit 109 is a speaker unit or a bell.
  • the hardware configuration of the information processing apparatus 10 is not limited to the configuration shown in the figure.
  • the information processing apparatus 10 may further have a configuration other than the configuration shown in this figure.
  • the information processing apparatus 10 may not include the display unit 105, the input unit 106, the imaging unit 107, the sound collection unit 108, and the audio output unit 109.
  • the information processing apparatus 10 displays on the display unit 105 included in another apparatus, acquires an image captured by the imaging unit 107, and obtains the sound obtained by the sound collection unit 108 through communication via the communication unit 104. Data acquisition and output to the audio output unit 109 can be performed.
  • FIG. 3 is a flowchart illustrating the flow of processing executed by the information processing apparatus 10 according to this embodiment.
  • the information processing method according to the present embodiment is executed by the information processing apparatus 10 according to the present embodiment.
  • the information processing method includes a product quantity estimation step S20 (detection step), a number of people detection step S30, and a waiting time calculation step S40.
  • the product quantity estimation step S20 the total product quantity of people lined up in the product registration apparatus is estimated.
  • the number detection step S30 the number of people lined up in the product registration device is detected.
  • the waiting time calculation step S40 a predicted value of waiting time for each product registration device is calculated based on the total product amount and the number of people. The order of the number of people detection step S30 and the product quantity estimation step S20 does not matter.
  • the information processing method further includes an acquisition step S10.
  • acquisition step S10 information indicating an image obtained by photographing a row of people lined up in the product registration device is acquired.
  • product quantity estimation step S20 the total product quantity is estimated using the image. The image is transmitted in response to a predetermined operation (operation that triggers acquisition of information) in the information processing apparatus 10 and can be acquired by the acquisition unit 12.
  • the acquisition unit 12 acquires, from the imaging unit 107, information indicating an image obtained by capturing a row of people lined up in the product registration device (acquisition step S10).
  • the imaging unit 107 is provided, for example, on the ceiling around the upper part of the commodity registration device 20 in order to take an image of the row, and takes an image of the customer row from above.
  • FIG. 4 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment.
  • One merchant 601 is assigned to the merchandise registration apparatus 20 and the checkout apparatus 30 for processing.
  • a plurality of customers 602 wait in turn and form a line.
  • Each customer 602 holds a shopping basket 603.
  • a product (not shown) that each customer 602 intends to purchase is placed.
  • the number of shopping baskets 603 arranged in the product registration apparatus 20 may be zero or one.
  • the number of customers 602 lined up in the merchandise registration apparatus 20 may be zero or one.
  • a plurality of customers 602 may be arranged, and the total number of shopping baskets 603 may be one. In either case, it is called a “column”.
  • the product quantity estimation unit 14 estimates the product quantity in the column based on the information indicating the image acquired by the acquisition unit 12.
  • FIG. 5 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 of the present embodiment.
  • the product quantity estimation unit 14 according to the present embodiment detects a shopping basket 603 included in a predetermined area of the image (step S201). Next, the product quantity estimation unit 14 estimates the product quantity for each shopping basket 603 (step S202). Then, the product quantity estimation unit 14 adds the estimated product quantity for each shopping basket 603 to estimate the product quantity in the column (step S203). Each step will be described below.
  • step S201 the product quantity estimation unit 14 detects a shopping basket 603 included in a predetermined area of the image.
  • the predetermined area may be, for example, the entire image, or may be an area expected to form a column for the product registration device 20 in the image.
  • the product amount estimation unit 14 holds in advance a feature amount for extracting the shopping basket 603 by image recognition. Then, the product quantity estimation unit 14 detects the shopping basket 603 from the predetermined area of the image by the matching process using the feature quantity.
  • step S202 the product quantity estimation unit 14 estimates the product quantity for each shopping basket 603.
  • the product quantity estimation unit 14 detects the height of the contents in each of the shopping baskets 603 from the image, and estimates the product quantity for each shopping basket 603 using the detected height of the contents. .
  • the height of the contents is the height from the bottom of the shopping basket 603.
  • the product quantity estimation unit 14 according to the present embodiment can estimate the product quantity for each shopping basket by the following method 1 or method 2, for example.
  • the product quantity estimation unit 14 detects the positions of the top end of the shopping basket 603 and the top surface of the contents put in the shopping basket 603 for each of the shopping baskets 603 detected in step S201 based on the images. To do. Then, based on these positions, the positional relationship and distance between the uppermost end and the uppermost surface are detected. Here, the distance between the uppermost end and the uppermost surface can be detected as follows.
  • the product quantity estimation unit 14 detects the distance from the imaging unit 107 to the shopping basket 603 based on the position of the shopping basket 603 in the image. Then, the scale of the distance between the uppermost end and the uppermost surface in the image is converted according to the distance from the imaging unit 107 to the shopping basket 603, and the actual distance between the uppermost end and the uppermost surface is calculated.
  • the product quantity estimation unit 14 has a plurality of stages in which the height of the contents placed in the shopping basket 603 is determined based on the positional relationship and distance between the uppermost end and the uppermost surface. Which stage is applicable is determined.
  • the uppermost surface of the content is below the uppermost end of the shopping basket 603, it can be estimated that the larger the distance between the uppermost surface and the uppermost end, the smaller the content of the shopping cart 603.
  • the uppermost surface of the content is above the uppermost end of the shopping basket 603, it can be estimated that the larger the distance between the uppermost surface and the uppermost end, the larger the content of the shopping cart 603.
  • each stage is associated with an average value of the number of products when it is determined that the product quantity is that level. Then, the product quantity estimation unit 14 estimates the average value of the number of products corresponding to the determined stage as the number of products in the shopping basket 603.
  • the height of the contents is not limited to the above method, and may be acquired by detecting the height from the bottom of the shopping basket 603 to the top surface of the contents placed in the shopping basket 603.
  • the product quantity estimation unit 14 detects the number of products on the surface layer of each shopping basket 603 from the image. For example, the product quantity estimation unit 14 extracts the outline of the product from the image of the shopping basket 603 and detects the number of products on the surface layer.
  • the product quantity estimation unit 14 detects the height of the contents of the shopping basket 603 in the same manner as the method 1. Then, the product quantity estimation unit 14 estimates the product quantity for each shopping basket 603 using the height of the contents and the number of products on the surface layer.
  • the product quantity estimation unit 14 determines the height of the contents put in the shopping basket 603 based on the positional relationship and distance between the uppermost end and the uppermost surface. It is determined which step corresponds to the step. Here, each stage is associated with an average value of the number of product layers when the product quantity is determined to be that stage. Then, the product quantity estimation unit 14 estimates the average value of the number of product layers corresponding to the determined stage as the product layer number of the shopping basket 603.
  • the product quantity estimation unit 14 estimates a value obtained by multiplying the estimated number of product layers by the number of products on the surface layer as the number of products in the shopping basket 603.
  • the product quantity estimation unit 14 may hold a specific value as the number of products per layer in advance. In that case, the number of products can be estimated by multiplying the number of products by the number of product layers in the shopping basket 603.
  • the length of the reference row is determined in advance so that the number of products on the surface layer of the shopping basket 603 can be detected, and the product quantity estimation unit 14 changes the estimation method before and after the length. Also good.
  • the product quantity estimation unit 14 may use the method 2 only for the shopping basket 603 before the reference length and use the method 1 for the shopping basket 603 after that.
  • the image capturing unit 107 for capturing the shopping basket 603 from the lateral direction to detect the height of the contents, and the surface layer of the shopping cart 603 are detected.
  • at least one of the imaging units 107 for enlarging and photographing may be further provided.
  • the product quantity estimation unit 14 adds the estimated product quantity for each shopping basket 603 to estimate the product quantity in the column (step S203).
  • the product quantity estimation unit 14 adds the estimated number of products for each shopping basket 603 and estimates the number of products in the column as the product quantity.
  • the number detection unit 16 detects the number of people included in the image. Specifically, the number-of-people detecting unit 16 holds in advance a feature amount for extracting a person by image recognition. Then, by this matching process using the feature amount, for example, a person in a specific area is detected as a person who forms a column for the product registration device 20. Then, the number of detected people is calculated.
  • the method of detecting the number of people by the number detection unit 16 is not limited to the method using such an image.
  • the number-of-people detection unit 16 detects, for example, the length of a row from the detection results of a plurality of sensors provided on the floor along the place where the row is formed, and estimates the number of people. May be.
  • the sensor is, for example, a pressure sensor or a light receiving sensor. If the pressure detected by the pressure sensor is greater than a predetermined reference value, it can be determined that a row is formed in the area of the pressure sensor. Alternatively, when the amount of light detected by the light receiving sensor is smaller than a predetermined reference value, it can be determined that a column is formed in that region.
  • the number-of-people detection unit 16 acquires data that associates the length of the column with the number of people from the memory, and arranges the number of people corresponding to the detected length of the column in the product registration device 20 based on the data. Estimate the number of people there.
  • the number detection unit 16 may estimate the number of people by reading information on RFID (Radio Frequency Identification) tags provided in a shopping basket, a cart, a membership card, etc. held by the people in line. Specifically, a plurality of RFID readers are provided along the place where the row is formed, and the RFID reader receives information indicating an identification number assigned to the tag from an RFID tag approaching within a predetermined range. get. The number-of-people detection unit 16 detects the number of RFID tags whose identification numbers have been acquired by the RFID reader as the number of people in the product registration device 20.
  • RFID Radio Frequency Identification
  • an RFID reader is also provided in the vicinity of a shopping cart or a place where a person passes through the product registration, and when the shopping basket or a person who has completed the product registration approaches a predetermined range of the RFID reader, the RFID The reader acquires information indicating the identification number from the RFID tag. Then, the number detection unit 16 subtracts from the estimated number of persons that the person corresponding to the acquired identification number is not in the line. By doing this, the number of people who have completed product registration is excluded from the estimated number of people in the column. In addition to or in addition to the use of the RFID reader, the person corresponding to the identification number acquired by the checkout device 30 reading the membership card presented at the checkout is not in the line. May be excluded from the number of people.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the estimated product quantity in the column and the detection result of the number detection unit 16.
  • FIG. 6 is a flowchart illustrating the flow of the waiting time calculation step S40 executed by the waiting time estimation unit 18 of the present embodiment.
  • the waiting time estimation unit 18 calculates a time obtained by multiplying the number of people detected by the number of people detection unit 16 by an average value of the time required for one settlement as the estimated required time for settlement (step S401).
  • the waiting time estimation unit 18 uses the time obtained by multiplying the number of products in the column estimated by the product quantity estimation unit 14 by the average value of the time required for registration of one product as the estimated required time for product registration. Calculate (step S402).
  • the waiting time estimation unit 18 calculates a value obtained by adding up the calculated estimated time required for the settlement and the estimated required time for product registration as a predicted value of the waiting time for each product registration device 20 (step S403).
  • the order of step S401 and step S402 is not ask
  • the waiting time estimation unit 18 reads out the average value of the time required for one settlement and the average value of the time required for registration of one product, which are obtained in advance and stored in the memory 102 or the like. Can be used.
  • the average value of the time required for one checkout and the average value of the time required for registration of one product may differ depending on the skill level of the store clerk. Therefore, these average values may be associated with each store clerk who registers and settles merchandise and held in the memory 102 or the like. In this case, the store clerk registers his / her name or ID (Identification) or the like in the information processing apparatus 10 when placed at the cash register. Then, the waiting time estimation unit 18 may read and use these average values corresponding to the store clerk arranged.
  • the average value of the time required for one settlement and the average value of the time required for registration of one product may be updated based on the actual processing time of the store clerk. By doing so, the customer can be provided with more accurate information regarding the waiting time.
  • the method for updating the average time required per checkout is described below.
  • the time required for one checkout is from the time when all the products of the customer are registered and the processing for confirming the charge is performed (for example, when the confirmation key of the product registration device 20 is operated) It can be defined as the time to complete both receipts.
  • the waiting time estimation unit 18 calculates the latest predetermined number of settlements or the average value within the time as the average value of the time required for one settlement.
  • the waiting time estimation unit 18 replaces the average value already held in the memory 102 or the like with this average value, and uses the latest average value when calculating the predicted value of the waiting time next time.
  • the following describes how to update the average time required for registering one product. After the settlement of the previous customer (for example, after both the change and the receipt have been issued), the last product of the customer is registered and the fee is charged when the first product is registered in the product registration device 20.
  • the time until the process for determining is performed is defined as the time for one turn of product registration.
  • a time obtained by further adding a predetermined additional time to this may be set as one turn time.
  • the additional time corresponds to the time until the first product is picked up from the shopping cart and registered, and for example, an average value of the time investigated in advance can be used. 18 can be read and acquired.
  • the waiting time estimation unit 18 acquires the time and the number of products for each turn, adds up the time and the number of products for all the turns within the latest predetermined number of turns or within the time, and divides the time by the number of products. Thus, the average value of the time required per registration of one product is calculated.
  • the waiting time estimation unit 18 replaces the average value held in the memory 102 or the like with this average value, and uses the latest average value when calculating the predicted value of the waiting time next time.
  • the waiting time estimation unit 18 acquires the time and the number of products for each turn, calculates the average value for each turn, and then calculates the average value of all the turns within the latest predetermined number of turns or time. The average of the time required per registration of one product may be calculated.
  • the predicted value of the waiting time calculated by the waiting time estimation unit 18 is displayed on the customer display unit for each product registration device 20 so that the customer can see it.
  • This display is for example a character display such as “The waiting time of this cash register is X minutes.” Light emission with different colors according to the expected waiting time length, Indicators and symbols according to the waiting time length Or the like.
  • the customer confirms this display, and is lined up in the product registration device 20 with a short expected waiting time, so that the product can be smoothly registered and settled.
  • the product quantity estimated by the product quantity estimation unit 14 is not limited to the number of products, and may be the product capacity.
  • the waiting time estimation unit 18 acquires data indicating the relationship between the product capacity range and the time required for the registration process, which is stored in advance in the memory 102 or the like. To do. And the waiting time estimation part 18 acquires the time corresponding to the range to which the capacity
  • the calculated predicted value of the waiting time can be stored in the memory 102 or the like, and can be used for analyzing customer trends.
  • the shopping basket is not limited to a basket shape, and may be a cart or the like for directly storing products.
  • the information processing method described above is executed at a specific time set in advance, and a new waiting time prediction value is calculated and the display to the customer is updated each time.
  • the information processing apparatus 10 and the information processing method according to the present embodiment it is possible to provide information regarding the waiting time to the customer. As a result, the customer can finish shopping comfortably.
  • customers are distributed to each product registration device 20 and the cash register processing in the store proceeds smoothly, congestion can be reduced and business efficiency can be improved.
  • FIG. 7 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 according to the second embodiment.
  • the information processing apparatus 10 according to the present embodiment is the same as the information processing apparatus 10 according to the first embodiment except for the processing of the product quantity estimation step S20 executed by the product quantity estimation unit 14.
  • FIG. 8 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment. This figure corresponds to FIG. 4 of the first embodiment.
  • the product quantity estimation unit 14 detects the number of shopping baskets 603 included in a predetermined area of the image (step S205). Then, the product quantity estimation unit 14 estimates the product quantity in the column using the detected number of shopping baskets 603 (step S206). Each step will be described below.
  • step S205 the product quantity estimation unit 14 detects a shopping basket 603 included in a predetermined area of the image.
  • the predetermined area may be, for example, the entire image, or may be an area expected to form a column for the product registration device 20 in the image.
  • the product amount estimation unit 14 holds in advance a feature amount for extracting the shopping basket 603 by image recognition. Then, the product quantity estimation unit 14 detects the number of shopping baskets 603 from a predetermined region of the image by matching processing using the feature quantity.
  • the product quantity estimation unit 14 estimates the number of products in the column obtained by multiplying the number of detected shopping carts 603 by the average number of products in the shopping cart 603 as the product quantity in the column.
  • the average number of products in the shopping basket 603 the average number of products for each shopping basket 603 of the customer 602 who uses the shopping basket 603 for shopping can be checked in advance and stored in the memory 102 or the like. it can.
  • the product quantity estimation unit 14 can read out, acquire, and use it. The same applies to the average number of products in the cart 604 described later.
  • some customers 602 may use a cart 604 on which a shopping basket 603 is placed.
  • the cart 604 is provided with two shopping basket mounting portions arranged vertically. And the cart placed on the lower row is difficult to appear in the image taken from above.
  • the product quantity estimation unit 14 detects the number of shopping carts 603 and the number of carts 604 included in a predetermined area of the image, and the number of detected shopping carts 603 and the carts are detected.
  • the number of items 604 may be used to estimate the product quantity in the column.
  • step S205 the product quantity estimation unit 14 holds in advance feature quantities for extracting the shopping basket 603 and the cart 604 by image recognition. Then, the product quantity estimation unit 14 detects the number of shopping carts 603 and the number of carts 604 from a predetermined region of the image by matching processing using the feature quantities.
  • the shopping cart 603 placed on the upper row of the cart 604 is also included in the number of shopping carts 603. On the other hand, the shopping basket 603 placed on the lower row of the cart 604 is not detected.
  • step S206 the product quantity estimation unit 14 calculates a first product number obtained by multiplying the number of shopping carts 603 not placed on the cart 604 by the average number of products in the shopping cart 603.
  • the number of shopping carts 603 not placed on the cart 604 is obtained by subtracting the number of carts 604 from the number of shopping carts 603 detected.
  • the product quantity estimation unit 14 calculates a second product number obtained by multiplying twice the number of detected carts 604 by the average number of products in the shopping basket 603. Then, the product quantity estimation unit 14 estimates the number of products in the column obtained by adding the first product number and the second product number as the product amount in the column. In this method, it is assumed that two shopping baskets 603 are placed on each cart 604.
  • the product quantity estimation unit 14 uses the second product count by using a larger value than the case of shopping without using the cart 604 as the average number of products in the shopping cart 603 when shopping using the cart 604. May be calculated.
  • the product quantity estimation step S20 can be performed as follows.
  • the average number of products in the shopping basket 603 and the average number of products in the cart 604 are stored in advance.
  • the average number of products in the cart 604 is larger than the average number of products in the shopping basket 603.
  • the product quantity estimation unit 14 detects the numbers of the shopping basket 603 and the cart 604.
  • the product quantity estimation unit 14 reads the average number of products in the shopping basket 603 and the average number of products in the cart 604 from the memory 102 or the like.
  • the product quantity estimation unit 14 then adds a value obtained by multiplying the number of shopping carts 603 by the average number of products in the shopping cart 603 and the value obtained by multiplying the number of carts 604 by the average number of products in the cart 604, Estimate as the number of products in the column.
  • the product quantity estimation unit 14 may change the product quantity estimation method before and after the length. For example, the product quantity estimation unit 14 estimates the number of products in each shopping basket 603 for the shopping basket 603 before the reference length by the method of the first embodiment, and the average product for the shopping basket 603 after that. You may use the method concerning this embodiment by a number.
  • FIG. 9 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 according to the third embodiment.
  • the information processing apparatus 10 according to the present embodiment further acquires information indicating the weight of the shopping basket 603 in the processing of the product quantity estimation step S20 executed by the product quantity estimation unit 14 and the acquisition unit 12 in the acquisition step S10. Except for this point, the information processing apparatus 10 is the same as the information processing apparatus 10 according to the first embodiment.
  • FIG. 10 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment. This figure corresponds to FIG. 4 of the first embodiment.
  • the first few shopping carts 603a among the queues waiting for the order of the product registration apparatus 20 are placed on the table 21 on which the shopping cart 603 before registering the products is placed.
  • the weight of the shopping basket 603a is measured by the weight measuring unit 110 provided on the table 21. The measured weight is used for correcting the product quantity of each shopping basket 603a.
  • the product quantity estimation unit 14 corrects the product quantity of the shopping basket 603a using the weight of the shopping basket 603a measured by the weight measurement unit 110 provided in the product registration apparatus 20.
  • FIG. 11 is a diagram conceptually illustrating a hardware configuration example of the information processing apparatus 10 in the present embodiment.
  • the hardware configuration example of the information processing apparatus 10 according to the present embodiment is the same as the hardware configuration example of the information processing apparatus 10 according to the first embodiment, except that the weight measurement unit 110 is provided.
  • the weight measuring unit 110 is connected to the input / output I / F 103.
  • the weight measuring unit 110 is a weigh scale or the like.
  • the hardware configuration of the information processing apparatus 10 is not limited to the configuration shown in this figure.
  • the information processing apparatus 10 can acquire information indicating the weight obtained by the weight measurement unit 110 included in another apparatus through communication via the communication unit 104. .
  • the acquisition unit 12 according to the present embodiment further acquires information indicating the weight of each shopping basket 603 a placed on the platform 21 from the weight measurement unit 110.
  • the product quantity estimation unit 14 according to the present embodiment detects the shopping basket 603 in the same manner as the method of the first embodiment (step S209), and estimates the product quantity (number of products) for each shopping basket 603 (step S209). S210). Then, the product quantity estimation unit 14 corrects the number of products in each shopping basket 603a using the information indicating the weight acquired by the acquisition unit 12 (step S211).
  • the correction is performed as follows.
  • an upper limit value and a lower limit value of a reference weight are stored in advance for each number of products.
  • the product quantity estimation unit 14 reads and acquires the upper limit value and the lower limit value. Then, it is determined whether or not the upper limit value corresponding to the number of products estimated in step S210 is smaller than the weight of the acquired shopping basket 603a. When it is determined that the upper limit value is smaller than the acquired weight, the product amount estimation unit 14 corrects the number of products in the shopping basket 603a to be decreased by a predetermined ratio with respect to the estimated number of products. .
  • the product quantity estimation unit 14 determines whether the lower limit value corresponding to the number of products estimated in step S210 is greater than the acquired weight of the shopping basket 603a. Determine whether or not. When it is determined that the lower limit value is larger than the acquired weight, the product quantity estimation unit 14 corrects the number of products in the shopping basket 603a to be increased by a predetermined ratio with respect to the estimated number of products. . When it is determined that the lower limit value is equal to or less than the acquired weight, the product quantity estimation unit 14 does not perform correction.
  • the product quantity estimation unit 14 calculates the number of products in the column obtained by adding the number of products in the shopping cart 603a and the number of products in the shopping cart 603b that have passed through Step S211 for all the shopping carts 603 in the column. Estimated as the product quantity in the column (step S212).
  • the product quantity estimation unit 14 detects the shopping cart 603 in the same manner as in Steps S201 and S202 of the first embodiment, and estimates the product quantity (number of products) for each shopping cart 603.
  • the correction according to the present embodiment may be applied to the method of the second embodiment.
  • the product quantity estimation unit 14 detects the number of shopping carts 603a on the table 21 and the number of shopping carts 603b that are not placed on the table 21, respectively.
  • the average number of products corrected in the same manner as described above is applied using the weight of the shopping basket 603a measured by the weight measuring unit 110, and the average product that is not corrected for the shopping basket 603b. Numbers can be applied.
  • FIG. 12 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 according to this embodiment.
  • the information processing apparatus 10 according to the present embodiment is the same as the information processing apparatus 10 according to the first embodiment except for the processing of the product quantity estimation step S20 executed by the product quantity estimation unit 14.
  • FIG. 13 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment. This figure corresponds to FIG. 4 of the first embodiment.
  • the image acquired by the imaging unit 107 may become unclear as it is behind the column.
  • the product quantity estimation unit 14 does not detect a shopping basket 603d behind a predetermined reference length L in a row of people lined up in the product registration device 20 in the image.
  • the product quantity estimation unit 14 estimates the product quantity behind the reference length L based on the number of people behind the reference length L.
  • the product quantity estimation unit 14 detects a shopping basket 603c in the range of the predetermined reference length L in the row (step S215).
  • the predetermined reference length L is, for example, the maximum length at which information necessary for estimating the product quantity based on the shopping basket 603 can be detected from the image.
  • the reference length L can be defined by a distance based on the product registration device 20, for example.
  • Information indicating the reference length L is stored in advance in the memory 102 or the like, and can be read and acquired by the product quantity estimation unit 14.
  • the product amount estimation unit 14 holds in advance a feature amount for extracting the shopping basket 603 by image recognition. Then, the product quantity estimation unit 14 detects the shopping basket 603c within the range of the reference length L by the matching process using the feature quantity with respect to the range of the reference length L in the image.
  • the merchandise quantity estimation unit 14 calculates the merchandise quantity within the reference length L in the same method as the method for estimating the merchandise quantity in the column in any of the first to third embodiments. Estimate (step S216).
  • the product quantity estimation unit 14 recognizes and detects the number of customers 602c behind the reference length L in the image (step S217). Then, the product quantity estimation unit 14 estimates the number of products obtained by multiplying the detected number of people by the average number of products per customer 602 as the product quantity behind the reference length L (step S218). Next, the product quantity estimation unit 14 adds the product quantity within the estimated reference length L and the product quantity after the reference length L to estimate the product quantity in the column (step S219).
  • FIG. 14 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 according to the fifth embodiment.
  • the information processing apparatus 10 according to the present embodiment further acquires information indicating the weight of the shopping basket 603 in the processing of the product quantity estimation step S20 executed by the product quantity estimation unit 14 and the acquisition unit 12 in the acquisition step S10. Except for this point, the information processing apparatus 10 is the same as the information processing apparatus 10 according to the first embodiment.
  • the product quantity estimation unit 14 estimates a product quantity for each shopping basket 603 based on information indicating a weight change history of the shopping basket 603 detected by a weight sensor attached to the shopping basket 603. Then, the product quantity estimation unit 14 adds the estimated product quantities for each shopping cart 603 to estimate the product quantity in the column.
  • a weight sensor for measuring the weight of the shopping basket 603, a memory for storing the weight change history of the shopping basket 603, and information indicating the weight change history are wirelessly transmitted to each shopping basket 603.
  • a transmitter is provided.
  • the weight of the shopping basket 603 indirectly indicates the weight of the contents of the shopping basket 603.
  • the weight sensor is provided at the base of the handle of the shopping basket 603.
  • a plurality of receivers are provided along the place where the column for the merchandise registration apparatus 20 is formed.
  • FIG. 15 is a diagram conceptually illustrating a hardware configuration example of the information processing apparatus 10 in the present embodiment.
  • the hardware configuration example of the information processing apparatus 10 according to the present embodiment is the same as the hardware configuration example of the information processing apparatus 10 according to the first embodiment, except that the reception unit 111 is provided.
  • the receiving unit 111 is connected to the input / output I / F 103.
  • the receiving unit 111 is, for example, the above-described receiver.
  • the hardware configuration of the information processing apparatus 10 is not limited to the configuration shown in this figure.
  • the information processing apparatus 10 can acquire information obtained by the reception unit 111 included in another apparatus through communication via the communication unit 104.
  • the acquisition unit 12 acquires information indicating the weight change history transmitted from each shopping basket 603 for the shopping basket 603 in the row. Specifically, for example, when each shopping basket 603 approaches a specific range of the receiver, information indicating the weight change history and the identification number of the shopping basket 603 is transmitted from the transmitter of the shopping basket 603 to the receiver. The The identification number is different for each shopping basket 603. And the acquisition part 12 which concerns on this embodiment acquires the information which shows a weight change log
  • the product quantity estimation unit 14 estimates the product quantity for each shopping basket 603 based on the information indicating the weight change history of the shopping basket 603 in the acquired row (step S222).
  • FIG. 16 is a diagram illustrating a weight change history of a shopping basket.
  • the weight of the shopping basket 603 increases stepwise at the time when a product is put in the shopping basket 603 (solid line arrow).
  • the weight decreases stepwise.
  • the product quantity estimation unit 14 regards such a step-like increase as an increase in one product and counts a step-like decrease as a decrease in one product. For example, in the example of this figure, as a result of putting three products and putting out one product, it can be estimated that two products are in the shopping basket 603.
  • the product quantity estimation unit 14 estimates the number of products obtained by adding the estimated number of products for each shopping cart 603 as the product quantity in the column (step S223).
  • the number detection step S30 and waiting time calculation step S40 are performed similarly to the method according to the first embodiment, and the estimated waiting time and the like are notified to the customer.
  • a receiver is provided in the vicinity of the position where the shopping basket 603 for which the product registration is completed is arranged.
  • information indicating the identification number of the shopping basket 603 is transmitted from the transmitter of the shopping basket 603 to the receiver.
  • the acquisition part 12 acquires the information which shows the identification number of the received shopping basket 603
  • the merchandise amount estimation part 14 is the number of goods in the column which estimated the number of goods of the shopping basket 603 corresponding to the said identification number. Pull from. By doing this, the number of products in the shopping basket 603 for which product registration has been completed is removed.
  • the cart 604 may be similarly provided with a weight sensor, a memory, and a transmitter.
  • a weight sensor When the customer 602 uses the cart 604, information indicating the weight change history is acquired from the cart 604.
  • a more accurate waiting time can be predicted.
  • FIG. 17 is a flowchart illustrating the flow of the product quantity estimation step S20 executed by the product quantity estimation unit 14 according to the sixth embodiment.
  • the information processing apparatus 10 according to the present embodiment is the same as the information processing apparatus 10 according to the first embodiment except for the processing of the product quantity estimation step S20 executed by the product quantity estimation unit 14.
  • FIG. 18 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment. This figure corresponds to FIG. 4 of the first embodiment.
  • Some people in the queue include a person who does not use the shopping basket 603 and holds the product 605 by hand, such as when there are a small number of products to be purchased.
  • the product amount estimation unit 14 uses a predetermined amount as the product amount of the person who does not hold the shopping basket 603 among the people who are lined up in the product registration device 20 in the image. presume. This will be described in detail below.
  • the product quantity estimation unit 14 detects the shopping basket 603 in the image, similarly to the method according to the first embodiment (step S225). Then, the product quantity estimation unit 14 is put in the shopping basket 603 in the row in the same manner as the method for estimating the product quantity in the row in any of the first to fifth embodiments. The amount of merchandise that is present is estimated (step S226).
  • the product quantity estimation unit 14 detects a customer 602d that does not hold the shopping basket 603 in the image (step S227). For example, the product quantity estimation unit 14 holds in advance feature quantities for extracting the shopping cart 603 and the person by image recognition. Then, the product quantity estimation unit 14 detects the person and the shopping basket 603 by matching processing using the feature quantity, and detects the positional relationship between the person and the shopping basket 603 in the image. Then, the product quantity estimation unit 14 regards a person who does not have the shopping basket 603 within a specific distance as a customer 602d who does not hold the shopping basket 603.
  • the product quantity estimation unit 14 obtains the number obtained by multiplying the number of customers 602d by the average number of products of customers 602 who do not hold the shopping basket 603, and the estimated value of the quantity of products placed in the shopping basket 603 in the column. Add up.
  • the product quantity estimation unit 14 estimates the number of products obtained in this way as the product quantity in the column (S228).
  • FIG. 19 is a flowchart illustrating the flow of the number-of-people detection step S30 executed by the number-of-people detection unit 16 according to the seventh embodiment.
  • the information processing apparatus 10 according to the present embodiment is the first to the second except for the processing of the number of people detecting step S30 executed by the number of people detecting unit 16 and the processing of the waiting time calculating step S40 executed by the waiting time estimating unit 18. 6 is the same as the information processing apparatus 10 according to any one of the six embodiments.
  • FIG. 20 is a diagram illustrating an example of an image from which information is acquired by the acquisition unit 12 according to the present embodiment. This figure corresponds to FIG. 4 of the first embodiment. Not all of the customers 602 in the line are required to pay each other. When a group shopping is performed in a group 606 of family members and friends, the settlement is performed for each group 606 in a lump.
  • the number detection unit 16 groups two or more people who are estimated to perform settlement together among a plurality of people lined up in the product registration device 20 in the image. This will be described in detail below.
  • the number detection unit 16 detects a person in the row in the same manner as in the method according to the first embodiment (step S301).
  • the number detection unit 16 groups the detected people (customers 602) for each payment (step S302).
  • the number detection unit 16 can form the group 606 by regarding the customers 602f and 602e whose intervals are closer than a specific value as being acquaintances.
  • the number-of-people detection unit 16 can form a group 606 with the closest adult customer 602h as a customer 602g that seems to be a child.
  • the number-of-people detecting unit 16 forms a group 606 by regarding a plurality of customers 602 who face each other at times as acquaintances. it can.
  • the number detection unit 16 calculates the number of payments. For example, the number detection unit 16 adds the number of customers 602 that do not belong to the group 606 and the number of groups 606 to calculate the number of payments (step S303).
  • the waiting time estimation unit 18 calculates the estimated time required for settlement using the number of settlements calculated by the number of people detection unit 16 instead of the detected number of people.
  • the waiting time calculation step S40 performed by the waiting time estimation unit 18 is the same as the operation according to the first embodiment in other points.
  • FIG. 21 is a flowchart illustrating the flow of the number detection step S30 and the waiting time calculation step S40 executed by the number detection unit 16 according to the eighth embodiment.
  • the information processing apparatus 10 according to the present embodiment is the first to the second except for the processing of the number of people detecting step S30 executed by the number of people detecting unit 16 and the processing of the waiting time calculating step S40 executed by the waiting time estimating unit 18. 6 is the same as the information processing apparatus 10 according to any one of the six embodiments.
  • the time required for settlement differs depending on each customer 602. For example, if you are a housewife who is used to shopping, you can estimate from your daily experience that you can make payments smoothly and the time required for payment is short. On the other hand, if the customer is an elderly customer, it is estimated that the time required for the settlement is long because the settlement is performed by a slow exchange.
  • the number detection unit 16 analyzes each attribute of people who are lined up in the product registration device 20.
  • the waiting time estimation unit 18 calculates the estimated required time for settlement based on the number of people detected by the number of people detection unit 16, and corrects the estimated required time based on the attribute. This will be described in detail below.
  • the number detection unit 16 detects people lined up in a row in the same manner as the method according to the first embodiment (step S305). Next, the number detection unit 16 analyzes the attribute of each detected person (step S306). Attributes are defined according to, for example, age, sex, and the like. The number-of-people detection unit 16 holds in advance a feature amount for each attribute for detecting a person attribute by image recognition. And the number detection part 16 can analyze each person's attribute by the matching process using this feature-value.
  • the waiting time estimation unit 18 calculates the estimated required time for settlement in the same manner as in the method according to the first embodiment (step S405). Then, the waiting time estimation unit 18 corrects the estimated time required for settlement based on the attributes analyzed by the number detection unit 16 (step S406).
  • the waiting time estimation unit 18 can correct the estimated time required for settlement as follows, for example. Data in which the relationship between the attribute and the correction value is associated is stored in advance in the memory 102 or the like. The correction value indicates the time to be increased or decreased with respect to the estimated time required for settlement, and is obtained based on the average value obtained in the previous survey.
  • the waiting time estimation unit 18 acquires the data, obtains a correction value corresponding to the attribute of the person analyzed by the number detection unit 16, and adds up all the detected people.
  • the summed correction value may be a positive value or a negative value. Then, the estimated time is corrected by adding the summed correction value to the estimated time required for the settlement calculated in step S405.
  • the waiting time estimation unit 18 calculates the estimated time required for product registration in the same manner as in the method according to the first embodiment (step S407), and the corrected estimated time required for settlement and the estimated time required for product registration. Are added together (step S408).
  • grouping processing may be further performed as in the seventh embodiment.
  • a person with the attribute with the shortest settlement time estimated in the group is estimated as a settlement person of the group, and the estimated duration is corrected.
  • FIG. 22 is a diagram illustrating a processing configuration of the information processing apparatus 10 in the present embodiment.
  • the information processing apparatus 10 includes a product quantity estimation unit 14, a number of people detection unit 16, and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 estimates the total product quantity of people who are lined up in the product registration device 20.
  • the number of people detection unit 16 detects the number of people lined up in the product registration device 20.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the total product amount and the number of people.
  • the information processing apparatus 10 of the present embodiment has the same hardware configuration as that of the first embodiment as shown in FIG.
  • the product quantity estimation unit 14, the number of people detection unit 16, and the waiting time estimation unit 18 of the present embodiment have, for example, the functions of the product quantity estimation unit 14, the number of people detection unit 16, and the waiting time estimation unit 18 executed by the CPU 101. It is realized by a program module for realizing. Program modules for realizing the functions of the product quantity estimation unit 14, the number of people detection unit 16, and the waiting time estimation unit 18 are stored in the memory 102, for example.
  • FIG. 23 is a flowchart illustrating the flow of processing executed by the information processing apparatus of this embodiment. An operation example of the information processing apparatus 10 in the present embodiment will be described below.
  • the product quantity estimation unit 14 estimates the total product quantity of people who are lined up in the product registration apparatus 20 in accordance with a predetermined operation (operation that triggers information processing) in the information processing apparatus 10 (product quantity estimation step). S20).
  • the number detection unit 16 detects the number of people lined up in the product registration device 20 (number of people detection step S30).
  • the waiting time estimation part 18 calculates the predicted value of the waiting time for every goods registration apparatus based on the total amount of goods and the said number of people (waiting time calculation step S40).
  • the information processing apparatus 10 of the present embodiment it is possible to provide information regarding the waiting time to the customer.
  • FIG. 24 is a diagram conceptually illustrating a flow in which a customer purchases a product at a store where the product registration device 20 and the checkout device 30 according to the tenth embodiment are installed.
  • the customer goes to the merchandise registration apparatus 20 with the merchandise to be purchased.
  • the store clerk operates the product registration device 20 to perform product registration processing.
  • the customer goes to the settlement apparatus 30 and pays the price, so that the product is settled.
  • the store clerk registers with the product registration device 20, and the customer pays itself with the checkout device 30. Therefore, it can be estimated that the waiting time for each product registration device 20 is the total time required for product registration, and there is no need to consider the time required for settlement.
  • the time required for product registration can be estimated based on the amount of products to be registered.
  • FIG. 25 is a block diagram illustrating an information processing apparatus 10 according to the tenth embodiment.
  • each block represents a functional unit configuration, not a hardware unit configuration.
  • the information processing apparatus 10 according to the present embodiment includes a product quantity estimation unit 14 (detection means) and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 detects shopping baskets of people who are lined up in the product registration device (POS device).
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the detection result of the product quantity estimation unit 14.
  • the information processing apparatus 10 may not include the number-of-people detection unit 16 as in the first embodiment.
  • the product quantity estimation unit 14 detects the shopping basket 603 and estimates the total product quantity of people lining up in the product registration apparatus 20. And the waiting time estimation part 18 calculates the predicted value of the waiting time for every goods registration apparatus 20 based on a total goods quantity.
  • the information processing apparatus 10 further includes an acquisition unit 12 that acquires information indicating an image obtained by capturing a row of people lined up in the product registration apparatus 20.
  • the product quantity estimation unit 14 estimates the total product quantity using the image.
  • FIG. 26 is a flowchart illustrating the flow of processing executed by the information processing apparatus 10 of this embodiment.
  • the information processing method according to the present embodiment includes a product quantity estimation step S20 (detection step) and a waiting time calculation step S40.
  • the product quantity estimation step S ⁇ b> 20
  • shopping carts of people lined up in the product registration device 20 are detected.
  • the waiting time calculation step S40 a predicted value of the waiting time for each product registration device 20 is calculated based on the detection result of the product quantity estimation step S20. This will be described in detail below.
  • the information processing method further includes an acquisition step S10.
  • the acquisition step S ⁇ b> 10 information indicating an image obtained by capturing a row of people lined up in the product registration device 20 is acquired.
  • the product quantity estimation step S20 the total product quantity is estimated using the image.
  • the product quantity estimation step S20 the total product quantity of people who have detected the shopping basket 603 and are lined up in the product registration apparatus 20 is estimated. And in waiting time calculation step S40, the predicted value of the waiting time for each product registration device 20 is calculated based on the total product quantity.
  • the acquisition unit 12 acquires an image in the same manner as the acquisition step S10 according to the first embodiment.
  • the product quantity estimation unit 14 calculates the product quantity in the column in the same manner as the product quantity estimation step S20 of any of the first to sixth embodiments except when the method according to the fifth embodiment is used. presume.
  • the processing of waiting time calculation step S40 performed by the waiting time estimation unit 18 is the same as the processing of waiting time calculation step S40 according to the first embodiment, except that the estimated required time for settlement is not calculated.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the estimated product quantity in the column, for example, as follows.
  • the waiting time estimation unit 18 calculates a time obtained by multiplying the number of products in the column estimated by the product quantity estimation unit 14 by an average value of time required for registration of one product as an estimated required time for product registration. .
  • the waiting time estimation unit 18 calculates the estimated required time for product registration as a predicted value of the waiting time for each product registration device 20.
  • the predicted value of the waiting time calculated by the waiting time estimation unit 18 is displayed on the customer display unit for each product registration device 20 so that the customer can see the same as in the first embodiment.
  • the method according to the present embodiment is also effective when a plurality of cashiers are arranged in one commodity registration apparatus in the system configuration according to the first to ninth embodiments.
  • one cashier person registers the product, and another cashier person pays. Therefore, it can be estimated that the waiting time for each product registration device 20 is the total time required for product registration, and there is no need to consider the time required for settlement.
  • the method according to any one of the first to ninth embodiments and the method according to the present embodiment may be appropriately switched according to the arrangement state of the store clerk.
  • the information processing apparatus 10 and the information processing method according to the present embodiment it is possible to provide information regarding the waiting time to the customer. As a result, the customer can finish shopping comfortably.
  • customers are distributed to each product registration device 20 and the cash register processing in the store proceeds smoothly, congestion can be reduced and business efficiency can be improved.
  • FIG. 33 is a flowchart illustrating the flow of processing executed by the information processing apparatus 10 according to the modification of the tenth embodiment. A modification of the tenth embodiment will be described below.
  • the information processing apparatus 10 according to the present embodiment is the same as the information processing apparatus 10 according to the tenth embodiment except for the processing content in the product quantity estimation step S20 (detection step) performed by the product quantity estimation unit 14. .
  • the information processing apparatus 10 includes a product quantity estimation unit 14 (detection means) and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 detects the number of shopping baskets 603 of people who are lined up in the product registration device 20 (POS device).
  • the waiting time estimation unit 18 calculates a predicted value of waiting time for each product registration device 20 based on the number of shopping carts 603. This will be described in detail below.
  • the information processing apparatus 10 estimates the product amount based on the number of shopping baskets 603 for a part of the columns formed in the product registration apparatus 20, and the products for each shopping basket 603 for the other parts.
  • the quantity of the product in the entire column is calculated using the quantity.
  • the acquisition unit 12 acquires information indicating an image obtained by photographing a row of people lined up in the product registration device 20 as in the tenth embodiment.
  • the product quantity estimation unit 14 detects the number of shopping baskets 603 included in a predetermined area in the image acquired by the acquisition unit 12 (step S230). This detection method is the same as the method according to the second embodiment.
  • the product quantity estimation unit 14 estimates the product quantity of each shopping basket 603 for the shopping basket 603 within the predetermined reference length of the row among the detected shopping baskets 603 (step S231).
  • the method of estimating the product quantity for each shopping basket 603 can be the same as at least one of the methods according to the first, third, and fifth embodiments. Two or more of these methods may be used in combination. Then, the product quantity estimation unit 14 adds the estimated product quantity for each shopping basket 603 to calculate the product quantity of the shopping basket 603 within the reference length.
  • the product quantity estimation unit 14 subtracts the number of shopping baskets 603 in which the product quantity for each shopping basket 603 is estimated in step S231 from the number of shopping baskets 603 detected in step S230, and shopping after the reference length. The number of cars 603 is calculated. Then, the product quantity estimation unit 14 calculates the product quantity of the shopping basket 603 after the reference length by multiplying the number of shopping baskets 603 behind the reference length by the average product quantity per shopping basket 603.
  • the product quantity per shopping basket 603 can be acquired in the same manner as the average number of products in the shopping basket 603 according to the second embodiment.
  • the product quantity estimation unit 14 calculates the product quantity in the column by adding the product quantity of the shopping basket 603 within the calculated reference length and the product quantity of the shopping basket 603 after the reference length (step) S232).
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time as in the tenth embodiment.
  • step S230 the number of shopping baskets 603 included in an area including a portion after a predetermined reference length in the row may be detected.
  • the product quantity estimation unit 14 adds the value obtained by multiplying the detected number by the average value of the product quantity per shopping basket 603 and the product quantity of the shopping basket 603 within the reference length. , Can estimate the quantity of goods in the column.
  • the product quantity estimation unit 14 calculates the product quantity of the shopping basket 603 within the reference length based on the number of shopping baskets 603, and calculates the product quantity of the shopping basket 603 after the reference length as the fourth quantity. You may calculate based on the number of people like the method of embodiment. Also in that case, the product quantity estimation unit 14 calculates the product quantity in the column by adding the product quantity of the shopping basket 603 within the calculated reference length and the product quantity of the shopping basket 603 after the reference length. it can.
  • the product quantity estimation unit 14 further detects the number of carts 604 and estimates the quantity of products in the row using the number of carts 604 and the number of shopping baskets 603, as in the second embodiment. Also good.
  • the product quantity estimation unit 14 detects the number of all shopping carts 603 in the row, and multiplies that number by the average product amount per shopping cart 603 to obtain the product amount in the row for each shopping cart 603. You may make it correct
  • the product quantity for each shopping basket 603 may be estimated for at least some of the shopping baskets 603 in the queue. This estimation can be performed in the same manner as at least one of the methods according to the first, third, and fifth embodiments.
  • the product quantity estimation unit 14 may use two or more of these methods in combination.
  • the method of the sixth embodiment is applied to estimate the product quantity of a person who does not hold the shopping basket 603, and the product quantity in the column is further estimated using the product quantity. Also good.
  • FIG. 27 is a diagram illustrating a processing configuration of the information processing apparatus 10 in the present embodiment.
  • the information processing apparatus 10 includes a product quantity estimation unit 14 (detection means) and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 detects the number of shopping baskets of people who are lined up in the product registration device (POS device).
  • the waiting time estimation unit 18 calculates a predicted value of waiting time for each product registration device 20 based on the number of shopping carts.
  • the information processing apparatus 10 of the present embodiment has the same hardware configuration as that of the first embodiment as shown in FIG.
  • the product quantity estimation unit 14 and the waiting time estimation unit 18 of the present embodiment are realized by, for example, a program module for realizing the functions of the product quantity estimation unit 14 and the waiting time estimation unit 18 executed by the CPU 101.
  • Program modules for realizing the functions of the product quantity estimation unit 14 and the waiting time estimation unit 18 are stored in the memory 102, for example.
  • FIG. 28 is a flowchart illustrating the flow of processing executed by the information processing apparatus according to this embodiment. An operation example of the information processing apparatus 10 in the present embodiment will be described below.
  • the product quantity estimation unit 14 detects the number of shopping carts of people who are lined up in the product registration apparatus in response to a predetermined operation (operation that triggers information processing) in the information processing apparatus 10 (product quantity estimation). Step S20 (detection step)). And the waiting time estimation part 18 calculates the predicted value of the waiting time for every goods registration apparatus based on the number of shopping carts (waiting time calculation step S40).
  • the information processing apparatus 10 of the present embodiment it is possible to provide information regarding the waiting time to the customer.
  • the acquisition unit 12 uses a shopping basket of a row of people lined up in the product registration device instead of information indicating an image obtained by photographing the row of people lined up in the product registration device.
  • the tenth embodiment except that the information indicating the weight change history of the shopping basket detected by the attached weight sensor is acquired and the processing of the product quantity estimation step S20 performed by the product quantity estimation unit 14 is performed. This is the same as the information processing apparatus 10 according to FIG.
  • the information processing apparatus 10 has the same configuration as that shown in FIG.
  • the information processing apparatus 10 according to the present embodiment includes a product quantity estimation unit 14 (detection means) and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 estimates a product quantity for each shopping basket 603 based on information indicating a weight change history of the shopping basket 603 detected by a weight sensor attached to the shopping basket 603. Then, the product quantity estimation unit 14 adds up the estimated product quantity for each shopping basket 603 to estimate the total product quantity of people lined up in the product registration apparatus 20.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the estimated total product amount.
  • the acquisition unit 12 may not acquire information indicating an image obtained by capturing a row of people lined up in the product registration device 20.
  • the information processing apparatus 10 further includes an acquisition unit 12.
  • the acquisition unit 12 acquires information indicating a weight change history of the shopping basket 603 detected by a weight sensor attached to the shopping basket 603 in the line of people lined up in the product registration device 20.
  • the flow of processing executed by the information processing apparatus 10 of the present embodiment can be illustrated by the same flowchart as FIG.
  • the information processing method according to the present embodiment includes a product quantity estimation step S20 (detection step) and a waiting time calculation step S40.
  • the product quantity estimation step S20 the product quantity for each shopping basket 603 is estimated based on information indicating the weight change history of the shopping basket 603 detected by the weight sensor attached to the shopping basket 603. Then, the estimated product amount for each shopping basket 603 is added up to estimate the total product amount of people who are lined up in the product registration device 20.
  • the waiting time calculation step S40 a predicted value of the waiting time for each product registration device 20 is calculated based on the estimated total product amount. This will be described in detail below.
  • the information processing method further includes an acquisition step S10.
  • the acquisition step S ⁇ b> 10 information indicating a weight change history of the shopping basket 603 detected by the weight sensor attached to the shopping basket 603 in the line of people lined up in the product registration device 20 is acquired.
  • the acquisition unit 12 acquires information indicating the weight change history in the same manner as the acquisition step S10 according to the fifth embodiment.
  • the product quantity estimation unit 14 performs the same as the product quantity estimation step S20 of the method according to the fifth embodiment or the product quantity estimation step S20 of the sixth embodiment using the method according to the fifth embodiment. , Estimate the amount of goods in the column.
  • the processing of the waiting time calculation step S40 performed by the waiting time estimation unit 18 is the same as the processing of the waiting time calculation step S40 according to the fifth embodiment, except that the estimated required time for settlement is not calculated.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the estimated product quantity in the column, for example, as follows.
  • the waiting time estimation unit 18 calculates a time obtained by multiplying the number of products in the column estimated by the product quantity estimation unit 14 by an average value of time required for registration of one product as an estimated required time for product registration. .
  • the waiting time estimation unit 18 calculates the estimated required time for product registration as a predicted value of the waiting time for each product registration device 20.
  • the predicted value of the waiting time calculated by the waiting time estimation unit 18 is displayed on the display unit for the customer for each product registration device 20 so that the customer can see the same as in the first embodiment.
  • the method according to the present embodiment is also effective when a plurality of cashiers are arranged in one commodity registration apparatus in the system configuration according to the first to ninth embodiments.
  • one cashier person registers the product, and another cashier person pays. Therefore, it can be estimated that the waiting time for each product registration device 20 is the total time required for product registration, and there is no need to consider the time required for settlement.
  • the method according to any one of the first to ninth embodiments and the method according to the present embodiment may be appropriately switched according to the arrangement state of the store clerk.
  • the information processing apparatus 10 and the information processing method according to the present embodiment it is possible to provide information regarding the waiting time to the customer. As a result, the customer can finish shopping comfortably.
  • customers are distributed to each product registration device 20 and the cash register processing in the store proceeds smoothly, congestion can be reduced and business efficiency can be improved.
  • the processing configuration of the information processing apparatus 10 in this embodiment is the same as that in FIG.
  • the information processing apparatus 10 includes a product quantity estimation unit 14 and a waiting time estimation unit 18.
  • the product quantity estimation unit 14 detects a shopping basket 603 of people who are lined up in the product registration device 20 (POS device).
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the detection result of the product quantity estimation unit 14.
  • the product quantity estimation unit 14 estimates the product quantity for each shopping basket 603 based on the information indicating the weight change history of the shopping basket 603 detected by the weight sensor attached to the shopping basket 603.
  • the product quantity estimation unit 14 adds up the estimated product quantity for each shopping basket 603 to estimate the total product quantity of people lined up in the product registration apparatus 20.
  • the waiting time estimation unit 18 calculates a predicted value of the waiting time for each product registration device 20 based on the estimated total product amount.
  • the information processing apparatus 10 of this embodiment has the same hardware configuration as that shown in FIG.
  • the product quantity estimation unit 14 and the waiting time estimation unit 18 of the present embodiment are realized by, for example, a program module for realizing the functions of the product quantity estimation unit 14 and the waiting time estimation unit 18 executed by the CPU 101.
  • Program modules for realizing the functions of the product quantity estimation unit 14 and the waiting time estimation unit 18 are stored in the memory 102, for example.
  • the product quantity estimation unit 14 detects a shopping basket 603 of people who are lined up in the product registration apparatus 20 in response to a predetermined operation (an operation that triggers information acquisition) on the information processing apparatus 10 (product quantity estimation). Step S20 (detection step)). And the waiting time estimation part 18 calculates the predicted value of the waiting time for every goods registration apparatus 20 based on the detection result in goods quantity estimation step S20 (waiting time calculation step S40).
  • the product quantity estimation step S ⁇ b> 20 the product quantity for each shopping basket 603 is estimated based on the information indicating the weight change history of the shopping basket 603 detected by the weight sensor attached to the shopping basket 603.
  • the estimated product amount for each shopping basket 603 is added up to estimate the total product amount of people who are lined up in the product registration device 20.
  • the predicted value of the waiting time for each product registration device 20 is calculated based on the estimated total product amount.
  • the information processing apparatus 10 of the present embodiment it is possible to provide information regarding the waiting time to the customer.
  • FIG. 29 is a diagram illustrating a configuration example of a POS register device.
  • Example 1 shows an example in which the information processing apparatus 10 and the information processing method according to any of the first to thirteenth embodiments are applied to the POS register apparatus 100.
  • the weight measurement unit 110 is omitted when the information processing apparatus 10 and the information processing method according to the third embodiment are applied to the POS register apparatus 100.
  • the POS register device 100 according to the first embodiment includes a product registration device 20 and a checkout device 30.
  • the merchandise registration device 20 registers the merchandise as a checkout target and sends information on the checkout target product to the checkout device 30.
  • the settlement apparatus 30 performs a settlement process for the product to be settled.
  • the settlement target can be registered in both the merchandise registration apparatus 20 and the settlement apparatus 30.
  • the product registration device 20 and the checkout device 30 in the first embodiment include a CPU 101, a memory 102, an input / output I / F 103, a communication unit 104, and the like, as in FIG.
  • the information processing apparatus 10 described above can be applied to both the merchandise registration apparatus 20 and the settlement apparatus 30, and the information processing method described above can be executed in either the merchandise registration apparatus 20 or the settlement apparatus 30.
  • the above-described display unit 105 corresponds to at least one of the display unit 22a of the touch panel unit 22, the display unit 32, and the customer monitor 27. On the monitor 27, for example, a predicted value of the waiting time is displayed.
  • the input unit 106 described above corresponds to at least one of the touch panel 22b, the keyboard 23, and the keyboard 33 of the touch panel unit 22.
  • the imaging unit 107 described above corresponds to the scanner device 24 and the camera 40.
  • the scanner device 24 captures a product image that reflects the appearance of the product held over the reading window 26.
  • the camera 40 attached to the ceiling captures an image of the customer's row lined up on the product registration device 20.
  • the above-described sound collecting unit 108 is attached to, for example, the member 25 in the merchandise registration apparatus 20 or the operator of the POS register apparatus 100.
  • the above-described audio output unit 109 is installed in, for example, the merchandise registration apparatus 20 or the checkout apparatus 30.
  • the operator of the POS register device 100 holds the product over the reading window 26 when registering the product as a liquidation target. Thereby, the product information symbol etc. for obtaining the information regarding the product attached to the product are read. Then, by reading the product information symbol, the corresponding product is registered as a payment target.
  • the POS register device 100 includes the merchandise registration device 20 and the settlement device 30 as shown in the figure, but the POS register device 100 may be configured by only the settlement device 30. In this case, it is sufficient for the settlement apparatus 30 to have the scanner device 24.
  • FIG. 30 is a diagram illustrating a hardware configuration example of a computer 200 that implements the commodity registration apparatus 20 in the semi-self type POS register apparatus.
  • Example 2 shows an example in which the information processing apparatus 10 and the information processing method according to the tenth or eleventh embodiment are applied to the product registration apparatus 20.
  • the POS register device in the present embodiment is composed of a merchandise registration device 20 and a settlement device 30 as in the first embodiment shown in FIG.
  • the store clerk registers the product with the product registration device 20, and the customer performs the settlement with the settlement device 30.
  • the merchandise registration apparatus 20 registers the merchandise as a checkout target and sends information on the checkout target product to the checkout apparatus 30.
  • the settlement apparatus 30 performs a settlement process for the product to be settled.
  • Each functional component of the product registration device 20 may be realized by hardware (for example, a hard-wired electronic circuit) that realizes each functional component, or a combination of hardware and software (for example: It may be realized by a combination of an electronic circuit and a program for controlling it).
  • the computer 200 may be mounted using a dedicated device designed for use as a cash register terminal, or may be mounted using a general-purpose device such as a PC (Personal Computer) or a portable terminal.
  • a dedicated device designed for use as a cash register terminal
  • a general-purpose device such as a PC (Personal Computer) or a portable terminal.
  • the computer 200 includes a bus 202, a processor 204, a memory 206, a storage 208, an input / output interface 210, and a network interface 212.
  • the bus 202 is a data transmission path for the processor 204, the memory 206, the storage 208, the input / output interface 210, and the network interface 212 to transmit / receive data to / from each other.
  • the method of connecting the processors 204 and the like is not limited to bus connection.
  • the processor 204 is an arithmetic processing unit such as a CPU or a GPU.
  • the memory 206 is a memory such as a RAM or a ROM.
  • the storage 208 is a storage device such as a hard disk, an SSD (Solid State Drive), or a memory card.
  • the storage 208 may be a memory such as a RAM or a ROM.
  • the input / output interface 210 is an interface for connecting the computer 200 and the input / output device.
  • a touch panel 214, a reader 216, an imaging device 218, and a monitor 220 are connected to the input / output interface 210.
  • the touch panel 214 receives an input for the store clerk to operate the computer 200.
  • the touch panel 214 is used for manually inputting the amount of goods.
  • the touch panel 214 displays various types of information such as information on products registered as payment targets.
  • the reader 216 is a variety of readers that are used for registering products for payment.
  • the reader 216 is a barcode reader or a camera for recognizing a product by image recognition.
  • the computer 200 may be connected to an input interface other than the touch panel 214 such as a keyboard.
  • the imaging device 218 is a camera that captures an image of a customer row lined up in the product registration device 20.
  • the monitor 220 is a customer display that displays an estimated waiting time and the like.
  • the network interface 212 is an interface for connecting the computer 200 to an external device so as to be communicable.
  • the network interface 212 may be a network interface for connecting to a wired line or a network interface for connecting to a wireless line.
  • the computer 200 that implements the merchandise registration apparatus 20 is connected to a computer 300 (a computer that implements the settlement apparatus 30), which will be described later, via a network.
  • the storage 208 stores program modules that realize each function of the product registration apparatus 20.
  • the processor 204 implements each function corresponding to the program module by executing each program module.
  • the processor 204 may execute the modules after reading them onto the memory 206 or without reading them onto the memory 206.
  • the hardware configuration of the computer 200 is not limited to the configuration shown in the figure.
  • each program module may be stored in the memory 206.
  • the computer 200 may not include the storage 208.
  • the computer 200 may include a drawer 316, a change machine 318, a printer 320, and the like which will be described later.
  • the computer 200 can also be used as the settlement apparatus 30.
  • the information processing apparatus 10 and the information processing method according to the twelfth and thirteenth embodiments are applied to the product registration apparatus 20 by replacing the imaging device 218 with a wireless communication receiver.
  • the hardware configuration can be shown.
  • the receiver communicates with a transmitter attached to the shopping basket 603.
  • Each functional component of the settlement apparatus 30 may be realized by hardware (eg, a hard-wired electronic circuit) that realizes each functional component, or a combination of hardware and software (eg, electronic A combination of a circuit and a program for controlling the circuit may be realized.
  • hardware eg, a hard-wired electronic circuit
  • software eg, electronic
  • a combination of a circuit and a program for controlling the circuit may be realized.
  • FIG. 31 is a diagram illustrating a hardware configuration of a computer 300 that realizes the payment apparatus 30 of the present embodiment.
  • the computer 300 may be mounted using a dedicated device designed for use as a cash register terminal, or may be mounted using a general-purpose device such as a PC or a portable terminal.
  • the configuration of the computer 300 is the same as that of the computer 200 in many parts.
  • the processor 304 has the same function as the processor 204. Therefore, description of these similar configurations is omitted.
  • the touch panel 314, the drawer 316, the change machine 318, and the printer 320 are connected to the input / output interface 310.
  • the touch panel 314 receives an operation by a customer or a store clerk. Further, the touch panel 314 displays various information such as a settlement amount related to the settlement information.
  • the drawer 316 stores coins and banknotes.
  • the change machine 318 has an input port for the customer to input a price and an output port for discharging the change.
  • the printer 320 issues a receipt or the like.
  • the computer 300 may be connected to an input interface other than the touch panel 314 such as a keyboard.
  • the hardware configuration of the computer 300 is not limited to the configuration shown in the figure.
  • each program module may be stored in the memory 306.
  • the computer 300 may not include the storage 308.
  • FIG. 32 is a diagram illustrating a configuration example of a POS system.
  • Example 3 shows an example in which the information processing apparatus 10 and the information processing method according to any one of the first to thirteenth embodiments are applied to the POS system 50.
  • the POS system 50 according to the present embodiment includes a server device 51 and a store side configuration 52, and the server device 51 and the store side configuration 52 are communicably connected via a communication network 53.
  • the store-side configuration 52 includes a store terminal 54, a stand 55, and the like that can be connected to the communication network 53 via a communication relay device.
  • the stand 55 is a device for connecting the store terminal 54 and other devices (such as a handy scanner, a cash drawer, a receipt printer, etc.) in a communicable manner.
  • the store terminal 54 is a general-purpose computer such as a PC (Personal Computer), a notebook PC, a tablet-type terminal, a smartphone, and the like, and exchanges data with the server device 51, whereby the POS of the first and second embodiments.
  • the same function as the register device is realized.
  • the store terminal 54 includes a touch panel unit 56, an imaging unit 57, a microphone (not shown), and the like.
  • the display unit 105 described above corresponds to the display unit of the touch panel unit 56.
  • the input unit 106 described above corresponds to the touch panel of the touch panel unit 56.
  • the imaging unit 107 described above corresponds to the imaging unit 57.
  • the sound collecting unit 108 described above corresponds to a microphone built in the store terminal 54.
  • the server device 51 is a general server computer and is realized as a WEB server, an application server, or the like.
  • the store terminal 54 and the server device 51 include a CPU 101, a memory 102, an input / output I / F 103, a communication unit 104, and the like, as in FIG.
  • the information processing apparatus 10 described above can be realized only as the store terminal 54 or as a combination of the server device 51 and the store apparatus.
  • the processing executed by the product quantity estimation unit 14, the number of people detection unit 16, and the waiting time estimation unit 18 is realized by the server device 51.
  • the process which the acquisition part 12 performs is implement
  • Product quantity estimation means for estimating the product quantity of people lined up in the POS device; Number of people detecting means for detecting the number of people lined up in the POS device; An information processing apparatus comprising: waiting time calculating means for calculating a predicted value of waiting time for each of the POS devices based on the product quantity of the people lined up in the POS device and the number of people. 1-2. 1-1.
  • the product quantity estimation means is an information processing apparatus that estimates a product quantity of people who are lined up in the POS device using the image. 1-3. 1-2.
  • the information processing apparatus described in The information processing apparatus is configured to group two or more people who are estimated to perform settlement together among a plurality of people lined up in the POS device in the image. 1-4. 1-2. Or 1-3.
  • the number-of-people detecting means analyzes each attribute of the people lined up in the POS device
  • the waiting time calculating means includes Calculate the estimated time required for settlement based on the number of persons detected by the number of persons detection means, An information processing apparatus that corrects the estimated required time based on the attribute. 1-5. 1-2. To 1-4.
  • the product quantity estimation means is an information processing apparatus that estimates a predetermined quantity as a merchandise quantity of a person who does not hold a shopping basket among people lined up in the POS device in the image. 1-6. 1-2. To 1-5.
  • the information processing apparatus according to any one of The product quantity estimation means detects a shopping basket included in a predetermined area of the image, estimates a product quantity for each shopping basket, and adds the estimated product quantity for each shopping basket.
  • An information processing apparatus that estimates the amount of goods of people who are lined up in the POS apparatus. 1-7. 1-6.
  • the product quantity estimation means is an information processing apparatus that detects the height of contents in each shopping basket from the image and estimates the quantity of goods for each shopping basket using the detected height of the contents. 1-8. 1-7.
  • the product quantity estimation means detects the number of products on the surface layer of each shopping basket from the image, and information processing for estimating the product quantity for each shopping basket using the height of the contents and the number of products on the surface layer apparatus. 1-9. 1-2. To 1-5.
  • the product quantity estimation means detects the number of shopping baskets included in a predetermined area of the image, and uses the detected number of shopping baskets, the product quantity of people lined up in the POS device Information processing apparatus for estimating 1-10.
  • the product quantity estimation means detects the number of shopping carts and the number of carts included in a predetermined area of the image, and uses the detected number of shopping carts and the number of carts to An information processing apparatus that estimates the amount of merchandise of people lining up in a POS apparatus. 1-11. 1-6. To 1-10.
  • the product quantity estimation unit is an information processing apparatus that corrects the product quantity of a shopping basket using the weight of the shopping basket measured by a weight measuring unit provided in the POS device. 1-12. 1-6. To 1-11.
  • the product quantity estimation means does not detect a shopping basket behind a predetermined reference length in a row of people lined up in the POS device in the image, and the number of people behind the reference length.
  • An information processing apparatus that estimates the amount of merchandise behind the reference length based on. 1-13. 1-1. To 1-5.
  • the product quantity estimating means estimates a product quantity for each shopping cart based on information indicating a weight change history of the shopping basket detected by a weight sensor attached to the shopping basket, and the estimated product for each shopping basket.
  • An information processing apparatus that estimates the amount of merchandise of people who are lined up in the POS device by adding up the quantities. 2-1.
  • An acquisition step of acquiring information indicating an image of a row of people lined up in the POS device In the product quantity estimation step, an information processing method for estimating a product quantity of people lined up in the POS device using the image. 2-3. 2-2.
  • each attribute of the people lined up in the POS device is analyzed
  • a shopping basket included in a predetermined area of the image is detected, a product quantity for each shopping basket is estimated, and the estimated product quantity for each shopping basket is added up.
  • the number of shopping baskets included in a predetermined region of the image is detected, and the product quantity of people lined up in the POS device is detected using the detected number of shopping baskets.
  • Information processing method for estimating 2-10. 2-9 In the information processing method described in In the product quantity estimation step, the number of shopping carts and the number of carts included in a predetermined area of the image are detected, and the detected number of shopping carts and the number of carts are used to detect the number of shopping carts and the number of carts.
  • the number of people behind the reference length is not detected in the shopping basket behind the predetermined reference length in the row of people lined up in the POS device in the image.
  • An information processing method for estimating a product quantity after the reference length based on the above. 2-13. 2-1. To 2-5.
  • a product quantity for each shopping basket is estimated based on information indicating a weight change history of the shopping basket detected by a weight sensor attached to the shopping basket, and the estimated product for each shopping basket is estimated.
  • a recording medium storing a computer program for realizing an information processing apparatus, Computer Product quantity estimation means for estimating the product quantity of people lined up in the POS device, Number-of-people detecting means for detecting the number of people lined up in the POS device, and waiting time calculation for calculating a predicted value of the waiting time for each of the POS devices based on the product quantity of the people lined up in the POS device and the number of people
  • Computer Product quantity estimation means for estimating the product quantity of people lined up in the POS device
  • Number-of-people detecting means for detecting the number of people lined up in the POS device
  • waiting time calculation for calculating a predicted value of the waiting time for each of the POS devices based on the product quantity of the people lined up in the POS device and the number of people
  • the computer is further made to function as an acquisition means for acquiring information indicating an image obtained by photographing a row of people lined up in the POS device
  • the product quantity estimation means is a recording medium storing a computer program for estimating the product quantity of people who are lined up in the POS device using the image. 3-3. 3-2.
  • the number-of-people detecting means is a recording medium storing a computer program for grouping two or more people who are estimated to perform settlement at once among a plurality of people lined up in the POS device in the image. 3-4. 3-2. Or 3-3.
  • the number-of-people detecting means analyzes each attribute of the people lined up in the POS device
  • the waiting time calculating means includes Calculate the estimated time required for settlement based on the number of persons detected by the number of persons detection means,
  • a recording medium storing a computer program for correcting the estimated required time based on the attribute. 3-5. 3-2. To 3-4.
  • the product quantity estimation means stores a computer program for estimating a predetermined quantity as a person's product quantity for a person who does not hold a shopping basket among the people lined up in the POS device in the image. Recorded media. 3-6. 3-2. To 3-5.
  • the product quantity estimation means detects a shopping basket included in a predetermined area of the image, estimates a product quantity for each shopping basket, and adds the estimated product quantity for each shopping basket.
  • the product quantity estimation means stores a computer program that detects the height of the contents in each shopping basket from the image and estimates the quantity of goods for each shopping basket using the detected height of the contents. Recorded media. 3-8. 3-7. In a recording medium storing the computer program described in 1.
  • the product quantity estimating means detects the number of products on the surface layer of each shopping basket from the image, and uses the height of the contents and the number of products on the surface layer to estimate the product quantity for each shopping basket. Is a recording medium. 3-9. 3-2. To 3-5. In a recording medium storing the computer program according to any one of The product quantity estimation means detects the number of shopping baskets included in a predetermined area of the image, and uses the detected number of shopping baskets, the product quantity of people lined up in the POS device A recording medium in which a computer program for estimating the frequency is stored. 3-10. 3-9. In a recording medium storing the computer program described in 1.
  • the product quantity estimation means detects the number of shopping carts and the number of carts included in a predetermined area of the image, and uses the detected number of shopping carts and the number of carts to A recording medium storing a computer program for estimating the amount of goods of people lined up in a POS device. 3-11. 3-6. To 3-10.
  • a recording medium storing the computer program according to any one of The product quantity estimation means is a recording medium storing a computer program for correcting the product quantity of the shopping basket using the weight of the shopping basket measured by a weight measuring unit provided in the POS device. 3-12. 3-6. To 3-11.
  • a recording medium storing the computer program according to any one of The product quantity estimation means does not detect a shopping basket behind a predetermined reference length in a row of people lined up in the POS device in the image, and the number of people behind the reference length.
  • a computer-readable recording medium storing a computer program for estimating a product quantity after the reference length. 3-13. 3-1. To 3-5.
  • In a recording medium storing the computer program according to any one of The product quantity estimating means estimates a product quantity for each shopping cart based on information indicating a weight change history of the shopping basket detected by a weight sensor attached to the shopping basket, and the estimated product for each shopping basket.

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Human Resources & Organizations (AREA)
  • Educational Administration (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

顧客に待ち時間に関する情報を提供する。情報処理装置(10)は、商品量推定部(14)、人数検出部(16)および待ち時間推定部(18)を備える。商品量推定部(14)は、商品登録装置に並んでいる人の商品量を推定する。人数検出部(16)は、商品登録装置に並んでいる人数を検出する。待ち時間推定部(18)は、商品登録装置に並んでいる人の商品量および当該人数に基づいて、商品登録装置毎の待ち時間の予測値を算出する。

Description

情報処理装置、情報処理方法、およびプログラムが格納された記録媒体
 本発明は情報処理装置、情報処理方法、およびプログラム等に関する。
 スーパーマーケット等の店舗におけるレジでは、商品登録等の順番待ちの行列が発生する。各顧客は、複数のレジの中から、行列の長さを見てレジでの待ち時間ができるだけ少ないレジに並ぼうとする。
 例えば特許文献1には、画像に写った商品の輪郭線を抽出することにより商品を認識して、登録時間を算出、報知する技術が記載されている。
 また、特許文献2には、登録前の商品の重さと登録が済んだ商品の重さを測定することで、登録の進捗状況を求め、表示する技術が記載されている。
 また、特許文献3には、列の客数または列の長さを検出し、待ち時間が少ない列に顧客を誘導する技術が記載されている。
特開2013-37452号公報 特開2013-30086号公報 特開2011-112893号公報
 顧客は、各レジの行列の長さ等を見て、待ち時間が短そうな列を選択する。しかし、予想に反して、別の列の待ち時間が短く不満を感じる場合がある。
 これに対し、特許文献1から3の技術では、適切に待ち時間に関する情報を提供することはできない。例えば、特許文献1および2の方法では、列の後ろの方の人を含めたレジ毎の待ち時間を予測することはできない。
 また、特許文献3の方法では、顧客の保持する商品の量を勘案していないため、実際の待ち時間とのずれが大きい。
 本発明は、上記の課題に鑑みてなされたものである。本発明の目的は、顧客に待ち時間に関する情報を提供することにある。
 本発明によれば、
 POS装置に並んでいる人の商品量を推定する商品量推定手段と、
 前記POS装置に並んでいる人数を検出する人数検出手段と、
 前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段とを備える
情報処理装置
が提供される。
 本発明によれば、
 POS装置に並んでいる人の商品量を推定する商品量推定ステップと、
 前記POS装置に並んでいる人数を検出する人数検出ステップと、
 前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出ステップとを含む
情報処理方法
が提供される。
 本発明によれば、
 情報処理装置を実現するためのコンピュータプログラム或いはそのコンピュータプログラムが格納された記録媒体であって、
 コンピュータを、
  POS装置に並んでいる人の商品量を推定する商品量推定手段、
  前記POS装置に並んでいる人数を検出する人数検出手段、および
  前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段
として機能させるためのコンピュータプログラム或いはそのコンピュータプログラムが格納された記録媒体
が提供される。
 本発明によれば、顧客に待ち時間に関する情報を提供できる。
第1の実施形態に係る情報処理装置を例示するブロック図である。 第1の実施形態における情報処理装置のハードウエア構成例を概念的に示す図である。 第1の実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。 第1の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第1の実施形態の商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第1の実施形態の待ち時間推定部によって実行される待ち時間算出ステップの流れを例示するフローチャートである。 第2の実施形態に係る商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第2の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第3の実施形態に係る商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第3の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第3の実施形態における情報処理装置のハードウエア構成例を概念的に示す図である。 第4の実施形態に係る商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第4の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第5の実施形態に係る商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第5の実施形態における情報処理装置のハードウエア構成例を概念的に示す図である。 買い物かごの重量変化履歴を例示する図である。 第6の実施形態に係る商品量推定部によって実行される商品量推定ステップの流れを例示するフローチャートである。 第6の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第7の実施形態に係る人数検出部によって実行される人数検出ステップの流れを例示するフローチャートである。 第7の実施形態に係る取得部によって情報が取得される画像の例を示す図である。 第8の実施形態に係る人数検出部によって実行される人数検出ステップおよび待ち時間算出ステップの流れを例示するフローチャートである。 第9の実施形態に係る情報処理装置を例示するブロック図である。 第9の実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。 第10の実施形態に係る商品登録装置と精算装置が設置されている店舗で顧客が商品を購入する流れを概念的に例示する図である。 第10の実施形態に係る情報処理装置を例示するブロック図である。 第10の実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。 第11の実施形態に係る情報処理装置を例示するブロック図である。 第11の実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。 POSレジスタ装置の構成例を示す図である。 セミセルフ式のPOSレジスタ装置における商品登録装置の構成例を示す図である。 実施例2の精算装置を実現する計算機のハードウエア構成を例示する図である。 POSシステムの構成例を示す図である。 第10の実施形態の変形例の情報処理装置によって実行される処理の流れを例示するフローチャートである。
 以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
[第1の実施形態]
 <処理構成>
 図1は、第1の実施形態に係る情報処理装置10を例示するブロック図である。本図において、各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。情報処理装置10は、商品量推定部14(検出手段)、人数検出部16および待ち時間推定部18を備える。商品量推定部14は、商品登録装置(POS(Point Of Sale)装置)に並んでいる人の商品量を推定する。人数検出部16は、商品登録装置に並んでいる人数を検出する。待ち時間推定部18は、商品登録装置に並んでいる人の商品量および当該人数に基づいて、商品登録装置毎の待ち時間の予測値を算出する。以下に詳細に説明する。
 なお、人が並ぶPOS装置は、商品登録機能のみを有するものであっても良いし、商品登録機能と精算機能の両方を備えても良い。
 本実施形態に係る情報処理装置10は、取得部12をさらに備える。取得部12は、商品登録装置に並んでいる人の列を撮影した画像を示す情報を取得する。そして、商品量推定部14は、その画像を用いて合計商品量を推定する。なお、合計商品量とは、商品登録装置に並んでいる人の商品量であり、その列の商品登録装置において登録されるべき商品の合計量をいう。以下において「合計商品量」を、「列内の商品量」とも呼ぶ。また、買い物かごの総数が1つである場合もその買い物かご内の商品量をもって、合計商品量または列内の商品量と呼ぶ。
 スーパーマーケット等の店舗において、顧客は売り場で購入したい商品を選んだ後、レジへ行く。レジでは(1)精算対象の商品を登録する処理(バーコードの読み取りなど)及び(2)登録された商品の精算を行う処理(代金の受け取りやおつりの返却など)という2つの処理が行われる。精算対象の商品を登録する処理は、商品登録装置で行われ、登録された商品の精算を行う処理は精算装置で行われる。商品の登録および精算のために、顧客は商品登録装置の前で順番待ちをする場合がある。
 本実施形態に係る情報処理装置10が使用される環境では、店員が商品登録装置で登録し、顧客から代金等を受け取って精算装置で精算する。店員が一人で対応する場合、商品登録装置毎の待ち時間は商品登録に必要な時間と精算に必要な時間の総和であると推測できる。ここで、商品登録に必要な時間は登録すべき商品の量に基づいて推測でき、精算に必要な時間は精算する人の数に基づいて推測できる。
 取得部12、商品量推定部14、人数検出部16、および待ち時間推定部18については詳しく後述する。
 <ハードウエア構成>
 図2は、本実施形態における情報処理装置のハードウエア構成例を概念的に示す図である。本図に示されるように、情報処理装置10は、CPU(Central Processing Unit)101、メモリ102、入出力インタフェース(I/F)103、通信部104等を有する。CPU101は、他の各部とバス等の通信線により接続される。メモリ102は、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ等である。通信部104は、他の装置や機器と信号のやりとりを行う。通信部104には、可搬型記録媒体1041等も接続され得る。入出力I/F103は、表示部105、入力部106、撮像部107、集音部108、音声出力部109等と接続される。
 表示部105は、LCD(Liquid Crystal Display)やCRT(Cathode Ray Tube)ディスプレイのような、CPU101やGPU(Graphics Processing Unit)(図示せず)等により処理された描画データに対応する画面を表示するユニットである。入力部106は、ユーザ操作の入力を受け付けるユニットであり、例えば、ハードウエアボタンユニット、タッチセンサ等として実現される。表示部105及び入力部106は一体化され、タッチパネルとして実現されることもできる。撮像部107は、レンズ、撮像素子等から形成されるカメラであり、静止画像及び動画像を撮像する。集音部108は、マイクロフォンユニットである。音声出力部109は、スピーカユニットやベルなどである。
 情報処理装置10のハードウエア構成は、本図に示される構成に限定されない。情報処理装置10は、本図に示される構成以外の構成を更に有してもよい。また、情報処理装置10は、表示部105、入力部106、撮像部107、集音部108及び音声出力部109を有していなくてもよい。この場合、情報処理装置10は、通信部104を介した通信により、他の装置が有する表示部105への表示、撮像部107により撮像された画像の取得、集音部108により得られた音声データの取得、及び音声出力部109への出力を行うことができる。
<動作例>
 図3は、本実施形態の情報処理装置10によって実行される処理の流れを例示するフローチャートである。本実施形態に係る情報処理方法は本実施形態に係る情報処理装置10により実行される。当該情報処理方法は、商品量推定ステップS20(検出ステップ)、人数検出ステップS30、および待ち時間算出ステップS40を含む。商品量推定ステップS20では、商品登録装置に並んでいる人の合計商品量を推定する。人数検出ステップS30では、商品登録装置に並んでいる人数を検出する。待ち時間算出ステップS40では、合計商品量および当該人数に基づいて、商品登録装置毎の待ち時間の予測値を算出する。なお、人数検出ステップS30と商品量推定ステップS20の順序は問わない。
 また、本実施形態に係る情報処理方法は、取得ステップS10をさらに含む。取得ステップS10では、商品登録装置に並んでいる人の列を撮影した画像を示す情報が取得される。そして、商品量推定ステップS20では、その画像を用いて合計商品量が推定される。当該画像は、情報処理装置10での所定の操作(情報を取得するトリガとなる操作)に応じて送信され、取得部12が取得できる。
 取得部12、商品量推定部14、人数検出部16、および待ち時間推定部18の詳細を含め、以下に説明する。
 取得部12は、撮像部107から、商品登録装置に並んでいる人の列を撮影した画像を示す情報を取得する(取得ステップS10)。撮像部107は、列を撮影するために、たとえば商品登録装置20の上部周辺の天井に設けられており、顧客の列を上部から撮影する。
 図4は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。商品登録装置20および精算装置30に対し、一人の店員601が配置されて処理を行っている。商品登録装置20の前には、複数の顧客602が順番待ちをして、列を形成している。各顧客602は、買い物かご603を保持している。そして、各買い物かご603の中には、各顧客602が購入しようとする商品(不図示)が入れられている。
 なお、本図では、買い物かご603や顧客602が複数で列を形成している例を示しているが、商品登録装置20に並ぶ買い物かご603は0個や1個であってもよい。また、商品登録装置20に並ぶ顧客602の数も0人や1人であってもよい。また、複数の顧客602が並び、買い物かご603の数が総数で1個であってもよい。いずれの場合にも、「列」と呼ぶ。
 図1に戻り、本実施形態に係る商品量推定部14は、取得部12が取得した画像を示す情報に基づき、列内の商品量を推定する。
 図5は、本実施形態の商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る商品量推定部14は、画像のうち予め定められた領域内に含まれる買い物かご603を検出する(ステップS201)。次いで、商品量推定部14は、買い物かご603毎の商品量を推定する(ステップS202)。そして、商品量推定部14は、推定された買い物かご603毎の商品量を合算して、列内の商品量を推定する(ステップS203)。各ステップについて、以下に説明する。
 ステップS201では、商品量推定部14は、画像のうち予め定められた領域内に含まれる買い物かご603を検出する。予め定められた領域とは、たとえば画像全体であってもよく、画像の内、その商品登録装置20に対する列が形成されると見込まれる領域であってもよい。商品量推定部14は、画像認識で買い物かご603を抽出するための特徴量を予め保持している。そして、商品量推定部14は、この特徴量を用いたマッチング処理により、画像の予め定められた領域内から、買い物かご603を検出する。
 ステップS202において、商品量推定部14は、買い物かご603毎の商品量を推定する。本実施形態において、商品量推定部14は、画像から買い物かご603のそれぞれにおける内容物の高さを検出し、検出した内容物の高さを用いて、買い物かご603毎の商品量を推定する。なお、内容物の高さは、買い物かご603の底からの高さである。本実施形態に係る商品量推定部14は、たとえば以下の方法1または方法2によって、買い物かご毎の商品量を推定できる。
<方法1>
 商品量推定部14は、画像を元に、ステップS201で検出された買い物かご603のそれぞれについて、買い物かご603の最上端と、買い物かご603に入れられた内容物の最上面との位置を検出する。そして、これらの位置に基づき、当該最上端と当該最上面との位置関係および距離を検出する。ここで、当該最上端と当該最上面の距離は、以下の様に検出できる。商品量推定部14は画像内の買い物かご603の位置に基づき、撮像部107からその買い物かご603までの距離を検出する。そして、撮像部107から買い物かご603までの距離に応じ、画像内での当該最上端と当該最上面の距離の縮尺を換算し、実際の当該最上端と当該最上面の距離を算出する。
 本方法において、商品量推定部14は、当該最上端と当該最上面の位置関係および距離に基づいて、その買い物かご603に入れられている内容物の高さが、予め定められた複数の段階のうち、どの段階に該当するかを判定する。内容物の最上面が買い物かご603の最上端より下にある場合、当該最上面と当該最上端の距離が大きいほど、その買い物かご603の内容物の量は少ないと推測できる。一方、内容物の最上面が買い物かご603の最上端より上にある場合、当該最上面と当該最上端の距離が大きいほど、その買い物かご603の内容物の量は多いと推測できる。
 ここで、各段階には、商品量がその段階であると判定された場合の商品数の平均値が関連づけられている。そして、商品量推定部14は、判定された段階に対応する商品数の平均値を、その買い物かご603の商品数として推定する。
 なお、内容物の高さは、上記の方法に限られず、買い物かご603の底から買い物かご603に入れられた内容物の最上面までの高さを検出することで取得しても良い。
<方法2>
 本方法において、商品量推定部14は、画像から買い物かご603のそれぞれにおける表層の商品数を検出する。たとえば、商品量推定部14は、買い物かご603の画像において商品の輪郭を抽出し、表層の商品数を検出する。
 また、商品量推定部14は、方法1と同様にして買い物かご603の内容物の高さを検出する。そして、商品量推定部14は、内容物の高さおよび表層の商品数を用いて、買い物かご603毎の商品量を推定する。
 具体的には、商品量推定部14は、当該最上端と当該最上面の位置関係および距離に基づいて、その買い物かご603に入れられている内容物の高さが、予め定められた複数の段階のうち、どの段階に該当するかを判定する。ここで、各段階には、商品量がその段階であると判定された場合の商品の層数の平均値が関連づけられている。そして、商品量推定部14は、判定された段階に対応する商品の層数の平均値を、その買い物かご603の商品の層数として推定する。
 次いで、商品量推定部14は、推定した商品の層数に、表層の商品数を乗じて得た値を、その買い物かご603の商品数として推定する。
 なお、方法2において、表層の商品数を検出する代わりに、商品量推定部14が予め1層あたりの商品数として特定の値を保持していてもよい。その場合、その商品数と商品の層数とを乗算してその買い物かご603の商品数として推定できる。
 なお、買い物かご603の表層の商品数を検出可能な範囲内となるような基準の列の長さを予め決めておき、商品量推定部14は、その長さの前後で推定方法を変えても良い。たとえば、商品量推定部14は、基準の長さより前の買い物かご603についてのみ方法2を用い、それより後ろの買い物かご603については方法1を用いても良い。
 なお、上述した列を撮影するための撮像部107の他に、内容物の高さを検出するために買い物かご603を横方向から撮影するための撮像部107、および買い物かご603の表層を検出するために拡大して撮影するための撮像部107のうち少なくとも一方がさらに設けられていても良い。
 上述の様に商品量推定部14は、推定された買い物かご603毎の商品量を合算して、列内の商品量を推定する(ステップS203)。上述の方法1または方法2を用いる場合、商品量推定部14は、推定された買い物かご603毎の商品数を合算して、列内の商品数を商品量として推定する。
 図3に戻り、人数検出部16は、画像内に含まれる人の数を検出する。具体的には、人数検出部16は、画像認識で人を抽出するための特徴量を予め保持している。そして、この特徴量を用いたマッチング処理により、たとえば特定の領域内にいる人を、商品登録装置20に対する列を形成している人であるとみなして検出する。そして、検出された人の数を算出する。
 なお、人数検出部16が人の数を検出する方法は、このような画像を用いた方法に限らない。人数検出部16は、当該の方法に代えてたとえば、列が形成される場所に沿って床に設けられた複数のセンサの検出結果から、列の長さを検出し、人の数を推定しても良い。ここで、センサは例えば圧力センサや受光センサである。圧力センサが検出する圧力が、予め定められた基準値よりも大きい場合、その圧力センサの領域に列が形成されていると判断できる。もしくは、受光センサが検出する光量が、予め定められた基準値よりも小さい場合、その領域に列が形成されたと判断できる。人数検出部16は、列の長さと人の数を関連づけたデータをメモリから取得し、当該データに基づき、検出された列の長さに対応する人の数を、商品登録装置20に並んでいる人の数と推定する。
 もしくは、人数検出部16は、並んでいる人が保持する買い物かごやカート、会員カード等に設けられたRFID(Radio Frequency Identification)タグの情報を読み取ることにより、人の数を推測しても良い。具体的には、列が形成される場所に沿って複数のRFIDリーダが設けられており、RFIDリーダは、所定範囲以内に近づいたRFIDタグから、当該タグに割り当てられた識別番号を示す情報を取得する。そして、人数検出部16は、RFIDリーダが識別番号を取得したRFIDタグの数を、商品登録装置20に並んでいる人数として検出する。
 また、商品登録が済んだ買い物かご又は人が通る場所の近傍にもRFIDリーダが設けられており、商品登録が済んだ買い物かご又は人がこのRFIDリーダの所定範囲内に近づいたとき、当該RFIDリーダはそのRFIDタグから識別番号を示す情報を取得する。そして、人数検出部16は、取得された識別番号に対応する人は列からいなくなったとして、推定した人数から引く。こうすることにより、商品登録が済んだ人の数が、列の推定人数から除かれる。なお、当該RFIDリーダが用いられる代わりに、もしくは用いられるのに加えて、精算装置30が精算時に提示された会員カードを読み取ることにより取得された、識別番号に対応する人が、列からいなくなったとして人数から除かれてもよい。
 待ち時間推定部18は、推定された列内の商品量および人数検出部16の検出結果に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 図6は、本実施形態の待ち時間推定部18によって実行される待ち時間算出ステップS40の流れを例示するフローチャートである。待ち時間推定部18は、人数検出部16で検出された人数に、1度の精算あたりに必要な時間の平均値を乗じた時間を、精算の推定所要時間として算出する(ステップS401)。また、待ち時間推定部18は、商品量推定部14で推定された列内の商品数に1つの商品の登録あたりに必要な時間の平均値を乗じた時間を、商品登録の推定所要時間として算出する(ステップS402)。
そして、待ち時間推定部18は、算出した精算の推定所要時間及び商品登録の推定所要時間を合算した値を、商品登録装置20毎の待ち時間の予測値として算出する(ステップS403)。なお、ステップS401と、ステップS402の順序は問わない。
 1度の精算あたりに必要な時間の平均値、および1つの商品の登録あたりに必要な時間の平均値は、予め求められてメモリ102等に保持された値を、待ち時間推定部18が読み出して用いることができる。
 なお、1度の精算あたりに必要な時間の平均値、および1つの商品の登録あたりに必要な時間の平均値は、店員の熟練度に依存して異なる場合がある。そこで、商品の登録および精算を行う店員毎に、これらの平均値が対応づけられて、メモリ102等に保持されていてもよい。その場合、店員はレジに配置された際に、自己の氏名またはID(Identification)等を情報処理装置10に登録するようにする。そして、配置されている店員に対応するこれらの平均値を、待ち時間推定部18が読み出して用いるようにしてもよい。
 なお、1度の精算あたりに必要な時間の平均値、および1つの商品の登録あたりに必要な時間の平均値は、店員の実際の処理時間に基づき更新される様にしても良い。そうすることにより、顧客に待ち時間に関するより正確な情報を提供できる。
 1度の精算あたりに必要な時間の平均値を更新する方法について、以下に説明する。1度の精算あたりに必要な時間は、その顧客の全ての商品が登録され、料金を確定させるための処理を行った時(たとえば商品登録装置20の確定キーを操作した時)から、おつり及びレシートの両方を出し終わるまでの時間として定義できる。そして、待ち時間推定部18は、直近の予め定められた精算回数分または時間内の平均値を、1度の精算あたりに必要な時間の平均値として算出する。そして待ち時間推定部18は、この平均値で、メモリ102等にすでに保持されていた平均値を置き換え、次に待ち時間の予測値を算出する際には、最新の平均値を用いる。
 1つの商品の登録あたりに必要な時間の平均値を更新する方法について以下に説明する。前の顧客の精算が終わった後(たとえばおつり及びレシートの両方を出し終わった後)、最初の商品が商品登録装置20に登録された時から、その顧客の最後の商品が登録され、料金を確定させるための処理を行った時までの時間を商品登録の1ターンの時間とする。なお、これに予め定められた特定の付加時間をさらに加えた時間を、1ターンの時間としてもよい。付加時間は、最初の商品を買い物かごから取りあげて登録するまでの時間に相当し、例えば予め調査した当該時間の平均値を用いることができ、メモリ102等に保持されたものを待ち時間推定部18が読み出して取得できる。
 また、各ターンで登録された最初の商品から最後の商品までの数を、そのターンにおける商品数と呼ぶ。待ち時間推定部18は、各ターンの時間と商品数を取得し、直近の予め定められたターン数分または時間内の、全ターンの時間と商品数をそれぞれ合算し、時間を商品数で割ることで、1つの商品の登録あたりに必要な時間の平均値を算出する。そして待ち時間推定部18は、この平均値で、メモリ102等に保持されていた平均値を置き換え、次に待ち時間の予測値を算出する際には、最新の平均値を用いる。
 なお、待ち時間推定部18は、各ターンの時間と商品数を取得し、ターン毎に平均値を算出した上で、直近の予め定められたターン数分または時間内の、全ターンの平均値の平均を算出し、1つの商品の登録あたりに必要な時間の平均値としてもよい。
 待ち時間推定部18により算出された待ち時間の予測値は、顧客が見ることができるように、商品登録装置20ごとに顧客向け表示部に表示される。この表示は、たとえば「このレジの待ち時間はX分です。」というような文字表示、予測される待ち時間の長さに応じて色が異なる発光、待ち時間の長さに応じたインジケーターや記号の表示等のいずれかでありうる。
 顧客はこの表示を確認し、予想される待ち時間が短い商品登録装置20に並ぶことにより、スムーズに商品の登録および精算を受けられる。
 なお、商品量推定部14が推定する商品量は、商品数に限らず、商品の容量であっても良い。商品量推定部14が商品の容量を推定する場合、メモリ102等に予め保持された、商品の容量の範囲と登録処理に必要な時間との関係を示すデータを、待ち時間推定部18が取得する。そして、待ち時間推定部18は、当該データにおいて商品量推定部14が推定した容量が該当する範囲に対応する時間を取得し、商品登録の推定所要時間とする。その後、待ち時間推定部18は、上述したようにステップS403を行い、待ち時間の予測値を算出する。なお、商品の容量の範囲と登録処理に必要な時間との関係を示すデータは、事前に商品の容量と、その処理に必要な時間の平均値を調査して生成し、メモリ102等に保持させておくことができる。
 なお、算出された待ち時間の予測値は、メモリ102等に保持しておくことができ、顧客の動向分析等に用いることができる。
 なお、買い物かごは、かご形のものに限らず、商品を直接入れるカート等であっても良い。
 なお、情報処理装置10において、上述した情報処理方法は予め設定された特定の時間毎に実行され、その都度新たな待ち時間の予測値が算出され、顧客への表示が更新される。
 次に、本実施形態の作用および効果について説明する。本実施形態に係る情報処理装置10および情報処理方法によれば、顧客に待ち時間に関する情報を提供できる。その結果、顧客は快適に買い物を済ませることができる。また、顧客が各商品登録装置20に分散し、店舗におけるレジ処理がスムーズに進むことで、混雑の緩和および業務の効率化を図ることができる。
[第2の実施形態]
 図7は、第2の実施形態に係る商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、商品量推定部14によって実行される商品量推定ステップS20の処理を除いて、第1の実施形態に係る情報処理装置10と同じである。
 図8は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。本図は、第1の実施形態の図4に対応する。
 本実施形態に係る商品量推定部14は、画像のうち予め定められた領域内に含まれる買い物かご603の数を検出する(ステップS205)。そして、商品量推定部14は、検出した買い物かご603の数を用いて、列内の商品量を推定する(ステップS206)。各ステップについて、以下に説明する。
 ステップS205では、商品量推定部14は、画像のうち予め定められた領域内に含まれる買い物かご603を検出する。予め定められた領域とは、たとえば画像全体であってもよく、画像の内、その商品登録装置20に対する列が形成されると見込まれる領域であってもよい。商品量推定部14は、画像認識で買い物かご603を抽出するための特徴量を予め保持している。そして、商品量推定部14は、この特徴量を用いたマッチング処理により、画像の予め定められた領域内から、買い物かご603の数を検出する。
 ステップS206では、商品量推定部14は、検出した買い物かご603の数に買い物かご603の平均商品数を乗じて得られる列内の商品数を、その列内の商品量として推定する。ここで、買い物かご603の平均商品数は、買い物かご603を用いて買い物をする顧客602の、買い物かご603ひとつあたりの平均商品数を予め調査して、メモリ102等に保持させておくことができる。商品量推定部14はそれを読み出して取得し、用いることができる。
なお、後述するカート604の平均商品数についても同様である。
 また、図8のように、一部の顧客602が買い物かご603を乗せるカート604を使用している場合がある。たとえばカート604には上下方向に並んだ2つの買い物かご搭載部が設けられている。そして、下段に乗せたカートは、上部から撮影された画像には写りにくい。
 そこで、本実施形態に係る商品量推定部14は、画像のうち予め定められた領域内に含まれる買い物かご603の数およびカート604の数を検出し、検出された買い物かご603の数およびカート604の数を用いて、列内の商品量を推定するようにしてもよい。
 この場合、ステップS205では、商品量推定部14は、画像認識で買い物かご603およびカート604をそれぞれ抽出するための特徴量を予め保持している。そして、商品量推定部14は、この特徴量を用いたマッチング処理により、画像の予め定められた領域内から、買い物かご603の数およびカート604の数を検出する。なお、ここでは、カート604の上段に乗せられた買い物かご603も買い物かご603の数に含まれる。一方、カート604の下段に乗せられた買い物かご603は検出されない。
 ステップS206では、商品量推定部14は、カート604に乗せられていない買い物かご603の数に買い物かご603の平均商品数を乗じて得た第1の商品数を算出する。ここで、カート604に乗せられていない買い物かご603の数は、検出された買い物かご603の数からカート604の数を引いて求められる。また、商品量推定部14は、検出したカート604の数の2倍に買い物かご603の平均商品数を乗じて得た第2の商品数を算出する。そして、商品量推定部14は、第1の商品数と第2の商品数を合算して得られる列内の商品数を、その列内の商品量として推定する。この方法では、各カート604に買い物かご603が2つずつ乗せられているとみなしている。
 なお、カート604を用いる場合、顧客602は重いものを持って店内を回る必要が無いため、1つの買い物かご603あたりの商品数が多くなることが考えられる。そのため、商品量推定部14は、カート604を用いて買い物をする場合の買い物かご603の平均商品数として、カート604を用いずに買い物をする場合よりも大きな値を用いて第2の商品数を算出してもよい。
 なお、買い物かご603を搭載せず、商品を直接入れるカート604の場合、以下の様に商品量推定ステップS20を行うことができる。メモリ102等には予め、買い物かご603の平均商品数と、カート604の平均商品数とが記憶されている。ここで、カート604の平均商品数は、買い物かご603の平均商品数よりも多い。商品量推定ステップS20では、商品量推定部14が、買い物かご603とカート604のそれぞれの数を検出する。また、商品量推定部14は、メモリ102等から買い物かご603の平均商品数と、カート604の平均商品数を読み出す。そして、商品量推定部14は、買い物かご603の数に買い物かご603の平均商品数を乗じた値と、カート604の数にカート604の平均商品数を乗じた値とを合算した値を、列内の商品数として推定する。
 なお、基準の列の長さを予め決めておき、商品量推定部14は、その長さの前後で商品量の推定方法を変えても良い。たとえば、商品量推定部14は、基準の長さより前の買い物かご603については第1の実施形態の方法で各買い物かご603の商品数を推定し、それより後ろの買い物かご603については平均商品数による本実施形態に係る方法を用いてもよい。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、画像認識により買い物かご603毎の商品量を検出する必要が無いため、商品量推定部14における処理の負荷を小さくすることができる。
[第3の実施形態]
 図9は、第3の実施形態に係る商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、商品量推定部14によって実行される商品量推定ステップS20の処理、および取得部12が取得ステップS10において、買い物かご603の重量を示す情報をさらに取得する点を除いて、第1の実施形態に係る情報処理装置10と同じである。
 図10は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。本図は、第1の実施形態の図4に対応する。商品登録装置20の順番待ちをする列のうち、先頭の数人の買い物かご603aは、商品を登録する前の買い物かご603を置く台21の上に乗せられる。ここで、台21に設けられた重量計測部110により、買い物かご603aの重さがそれぞれ計測される。計測された重さは、各買い物かご603aの商品量の補正に用いられる。
 本実施形態に係る商品量推定部14は、商品登録装置20に設けられた重量計測部110により測定された買い物かご603aの重量を用いて、買い物かご603aの商品量を補正する。
<ハードウエア構成>
 図11は、本実施形態における情報処理装置10のハードウエア構成例を概念的に示す図である。本実施形態に係る情報処理装置10のハードウエア構成例は、重量計測部110を備える点を除いて、第1の実施形態に係る情報処理装置10のハードウエア構成例と同じである。本図に示されるように、重量計測部110は、入出力I/F103と接続される。重量計測部110は、重量計等である。第1の実施形態同様、情報処理装置10のハードウエア構成は、本図に示される構成に限定されない。情報処理装置10が重量計測部110を有さない場合、情報処理装置10は、通信部104を介した通信により、他の装置が有する重量計測部110により得られた重量を示す情報を取得できる。
<動作例>
 図9に戻り、本実施形態に係る情報処理装置10の動作例について説明する。本実施形態に係る取得部12は、重量計測部110から、台21に乗せられた買い物かご603aのそれぞれの重量を示す情報をさらに取得する。本実施形態に係る商品量推定部14は、第1の実施形態の方法と同様にして買い物かご603を検出し(ステップS209)、買い物かご603毎の商品量(商品数)を推定する(ステップS210)。そして、商品量推定部14は、取得部12が取得した重量を示す情報を用いて、各買い物かご603aの商品数を補正する(ステップS211)。
 具体的には、補正は以下の様に行う。メモリ102等には、予め商品数毎に、基準となる重さの上限値および下限値が保持されている。商品量推定部14は、その上限値および下限値を読み出して取得する。そして、ステップS210で推定された商品数に対応する上限値が取得した買い物かご603aの重量よりも小さいか否かを判定する。上限値が取得された重量よりも小さいと判定された場合、商品量推定部14は、推定された商品数に対し予め定められた割合分、その買い物かご603aの商品数を減少させるよう補正する。
 一方、上限値が取得された重量以上であると判定された場合、商品量推定部14は次いでステップS210で推定された商品数に対応する下限値が取得した買い物かご603aの重量よりも大きいか否かを判定する。下限値が取得された重量よりも大きいと判定された場合、商品量推定部14は、推定された商品数に対し予め定められた割合分、その買い物かご603aの商品数を増加させるよう補正する。下限値が取得された重量以下であると判定された場合、商品量推定部14は、補正を行わない。
 また、台21に乗せられていない買い物かご603bについては、補正は行われない。
 次いで、商品量推定部14は、ステップS211を経た買い物かご603aの商品数および買い物かご603bの商品数を、列内の全ての買い物かご603について合算して得られる列内の商品数を、その列内の商品量として推定する(ステップS212)。
 なお、本実施形態に係る商品量推定部14が第1の実施形態のステップS201およびステップS202と同様にして買い物かご603を検出し、買い物かご603毎の商品量(商品数)を推定する例について上述したが、これに限定されない。本実施形態に係る補正は、第2の実施形態の方法に適用しても良い。この場合、商品量推定部14は、台21上の買い物かご603aの数と、台21に乗せられていない買い物かご603bの数をそれぞれ検出する。そして、買い物かご603aについては、重量計測部110で計測された買い物かご603aの重量を用いて、上述した方法と同様に補正した平均商品数を適用し、買い物かご603bについては、補正しない平均商品数を適用することができる。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、より正確な待ち時間を予測することができる。
[第4の実施形態]
 図12は、本実施形態に係る商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、商品量推定部14によって実行される商品量推定ステップS20の処理を除いて、第1の実施形態に係る情報処理装置10と同じである。
 図13は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。本図は、第1の実施形態の図4に対応する。商品登録装置20の行列が長くなる場合、撮像部107で取得される画像は列の後ろになるほど不鮮明になる場合がある。
 本実施形態に係る商品量推定部14は、画像のうち商品登録装置20に並んでいる人の列の、予め定められた基準長さLより後ろの買い物かご603dについては検出を行わない。商品量推定部14は、基準長さLより後ろの人の数に基づいて、基準長さLより後ろの商品量を推定する。
 図12を用いて本実施形態に係る商品量推定部14の動作例を説明する。商品量推定部14は、画像のうち、列の予め定められた基準長さLの範囲内にある買い物かご603cを検出する(ステップS215)。予め定められた基準長さLは、たとえば、買い物かご603に基づいて商品量を推定するために必要な情報を画像から検出できる最大長さである。基準長さLは、たとえば商品登録装置20を基準とした距離で定義できる。基準長さLを示す情報は、予めメモリ102等に保持されており、それを商品量推定部14が読み出して取得できる。商品量推定部14は、画像認識で買い物かご603を抽出するための特徴量を予め保持している。そして、商品量推定部14は、画像の内の基準長さLの範囲内に対するこの特徴量を用いたマッチング処理により、基準長さLの範囲内にある買い物かご603cを検出する。
 次いで、商品量推定部14は、第1から第3の実施形態のうちいずれかの実施形態において、列内の商品量を推定した方法と同じ方法で、基準の長さL以内の商品量を推定する(ステップS216)。
 また、商品量推定部14は、画像において、基準長さLより後ろの顧客602cの人数を画像認識して検出する(ステップS217)。そして、商品量推定部14は、検出した人数に、顧客602一人あたりの平均商品数を乗じて得られる商品数を、基準長さLより後ろの商品量として推定する(ステップS218)。次いで、商品量推定部14は、推定した基準の長さL以内の商品量と基準長さLより後ろの商品量を合算して、列内の商品量を推定する(ステップS219)。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、列が長くなった場合にも、より正確な待ち時間を予測することができる。
[第5の実施形態]
 図14は、第5の実施形態に係る商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、商品量推定部14によって実行される商品量推定ステップS20の処理、および取得部12が取得ステップS10において、買い物かご603の重量を示す情報をさらに取得する点を除いて、第1の実施形態に係る情報処理装置10と同じである。
 本実施形態に係る商品量推定部14は、買い物かご603に取り付けられた重量センサにより検出された買い物かご603の重量変化履歴を示す情報に基づき、買い物かご603毎の商品量を推定する。そして、商品量推定部14は、推定された買い物かご603毎の商品量を合算して、列内の商品量を推定する。
 本実施形態において、各買い物かご603には、買い物かご603の重さを測定する重量センサ、買い物かご603の重量変化履歴を記憶するメモリ、および当該重量変化履歴を示す情報を無線送信するための送信機が設けられている。ここで、買い物かご603の重さは、買い物かご603の内容物の重さを間接的に示す。重量センサは、たとえば買い物かご603の持ち手の根本に設けられている。また、商品登録装置20に対する列が形成される場所に沿って、複数の受信機が設けられている。
<ハードウエア構成>
 図15は、本実施形態における情報処理装置10のハードウエア構成例を概念的に示す図である。本実施形態に係る情報処理装置10のハードウエア構成例は、受信部111を備える点を除いて、第1の実施形態に係る情報処理装置10のハードウエア構成例と同じである。本図に示されるように、受信部111は、入出力I/F103と接続される。受信部111はたとえば上述の受信機である。第1の実施形態同様、情報処理装置10のハードウエア構成は、本図に示される構成に限定されない。情報処理装置10が受信部111を有さない場合、情報処理装置10は、通信部104を介した通信により、他の装置が有する受信部111により得られた情報を取得できる。
<動作例>
 本実施形態に係る取得部12は、列内の買い物かご603について、各買い物かご603から送信された重量変化履歴を示す情報を取得する。具体的には、たとえば、各買い物かご603が受信機の特定範囲内に近づいたとき、買い物かご603の送信機から受信機へ、重量変化履歴と買い物かご603の識別番号を示す情報が送信される。識別番号は、買い物かご603毎に異なる。そして、本実施形態に係る取得部12は、重量変化履歴を示す情報を取得する。
 次いで、商品量推定部14は、取得された列内の買い物かご603の重量変化履歴を示す情報に基づき、買い物かご603毎の商品量を推定する(ステップS222)。
 図16は、買い物かごの重量変化履歴を例示する図である。本図に示す様に、買い物かご603に商品が入れられた時点(実線矢印)で、買い物かご603の重量がステップ状に増加する。一方、買い物かご603から商品が出された時点(破線矢印)で、その重量は、ステップ状に減少する。商品量推定部14は、このようなステップ状の増加を1つの商品の増加とみなし、ステップ状の減少を1つの商品の減少とみなしてカウントする。
たとえば本図の例では、3つの商品が入れられ、1つの商品が出された結果、買い物かご603内には2つの商品が入っていると推定することができる。
 商品量推定部14は、推定した買い物かご603毎の商品数を合算して得られる商品数を、列内の商品量として推定する(ステップS223)。
 そして、第1の実施形態に係る方法と同様に人数検出ステップS30および待ち時間算出ステップS40が行われ、推定待ち時間等が顧客に報知される。
 また、商品登録が済んだ買い物かご603を配置する位置の近傍には、受信機が備えられている。商品登録が済んだ買い物かご603がこの受信機の特定範囲内に近づいたとき、当該買い物かご603の送信機から当該受信機へ、買い物かご603の識別番号を示す情報は送信される。そして、受信された買い物かご603の識別番号を示す情報を取得部12が取得し、商品量推定部14は、当該識別番号に対応する買い物かご603の商品数を、推定した列内の商品数から引く。こうすることにより、商品登録が済んだ買い物かご603の商品数が除かれる。
 なお、カート604にも同様に重量センサ、メモリ、および送信機が設けられてもよい。そして、顧客602がカート604を用いる場合には、重量変化履歴を示す情報は、カート604から取得される。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、以下の作用および効果が得られる。
 本実施形態によれば、画像認識を行うことなく、列内の商品量を推定できる。
 また、本実施形態によれば、より正確な待ち時間を予測することができる。
[第6の実施形態]
 図17は、第6の実施形態に係る商品量推定部14によって実行される商品量推定ステップS20の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、商品量推定部14によって実行される商品量推定ステップS20の処理を除いて、第1の実施形態に係る情報処理装置10と同じである。
 図18は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。本図は、第1の実施形態の図4に対応する。列に並ぶ人の中には、購入したい商品が少量である場合など、買い物かご603を使わず、手で商品605を保持している人が含まれる場合がある。
 本実施形態に係る商品量推定部14は、画像内の商品登録装置20に並んでいる人のうち、買い物かご603を保持していない人について、あらかじめ定められた量を当該人の商品量として推定する。以下に詳しく説明する。
 商品量推定部14は、第1の実施形態に係る方法と同様に、画像内の買い物かご603を検出する(ステップS225)。そして、商品量推定部14は、第1から第5の実施形態のうちいずれかの実施形態において、列内の商品量を推定した方法と同じ方法で、列内の買い物かご603に入れられている商品量を推定する(ステップS226)。
 また、商品量推定部14は、画像内の、買い物かご603を保持していない顧客602dを検出する(ステップS227)。たとえば、商品量推定部14は、画像認識で買い物かご603および人をそれぞれ抽出するための特徴量を予め保持している。そして、商品量推定部14は、この特徴量を用いたマッチング処理により人と買い物かご603を検出し、画像内の人と買い物かご603の位置関係を検出する。そして、商品量推定部14は、特定の距離内に買い物かご603が存在しない人を、買い物かご603を保持していない顧客602dとみなす。
 次いで、商品量推定部14は、顧客602dの数に買い物かご603を保持しない顧客602の平均商品数を乗じた数と、列内の買い物かご603に入れられている商品量の推定値とを合算する。商品量推定部14は、そうして得られた商品数を、列内の商品量として推定する(S228)。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、買い物かご603を使用しない顧客602が含まれる場合でも、より正確な待ち時間を予測することができる。
[第7の実施形態]
 図19は、第7の実施形態に係る人数検出部16によって実行される人数検出ステップS30の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、人数検出部16によって実行される人数検出ステップS30の処理および待ち時間推定部18によって実行される待ち時間算出ステップS40の処理を除いて、第1から第6の実施形態のいずれかに係る情報処理装置10と同じである。
 図20は、本実施形態に係る取得部12によって情報が取得される画像の例を示す図である。本図は、第1の実施形態の図4に対応する。列に並ぶ顧客602は必ずしも全員がそれぞれ精算をするとは限らない。家族や友人同士のグループ606でひとまとまりの買い物をする場合、精算はグループ606毎に一括で行われる。
 本実施形態に係る人数検出部16は、画像内の商品登録装置20に並んでいる複数の人のうち、精算を一括に行うと推定される2人以上をグループ化する。以下に詳しく説明する。
 人数検出部16は、第1の実施形態に係る方法と同様にして列内の人を検出する(ステップS301)。次いで、人数検出部16は、検出した人(顧客602)を精算毎にグループ化する(ステップS302)。たとえば、人数検出部16は、互いの間隔が特定の値より近い顧客602fおよび顧客602eを、知人同士であるとみなしてグループ606を形成できる。
また、人数検出部16は、子供と思われる顧客602gを、最も近い大人の顧客602hとグループ606を形成できる。また、人数検出部16は、時間を追った複数の画像のフレームで動画が形成される場合、時々に顔を向き合わせている複数の顧客602を、知人同士であるとみなしてグループ606を形成できる。
 次いで、人数検出部16は、精算の数を算出する。たとえば、人数検出部16は、グループ606に属しない顧客602の人数と、グループ606の数とを合算し、精算の数を算出する(ステップS303)。
 本実施形態に係る待ち時間推定部18は、検出された人数の代わりに、人数検出部16で算出された精算の数を用いて、精算の推定所要時間を算出する。待ち時間推定部18が行う待ち時間算出ステップS40は、その他の点において、第1の実施形態に係る動作と同様である。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、複数人からなるグループで一括精算が行われる場合でも、より正確な待ち時間を予測することができる。
[第8の実施形態]
 図21は、第8の実施形態に係る人数検出部16によって実行される人数検出ステップS30および待ち時間算出ステップS40の流れを例示するフローチャートである。本実施形態に係る情報処理装置10は、人数検出部16によって実行される人数検出ステップS30の処理および待ち時間推定部18によって実行される待ち時間算出ステップS40の処理を除いて、第1から第6の実施形態のいずれかに係る情報処理装置10と同じである。
 精算に要する時間は、顧客602のそれぞれにより異なる。たとえば、買い物に慣れている主婦層であれば日々の経験から、スムーズに精算を行え、精算の所要時間は短いと推測できる。一方、高齢な顧客であれば、ゆっくりとしたやりとりにより精算が行われるため、精算の所要時間は長いと推測できる。
 本実施形態に係る人数検出部16は、商品登録装置20に並んでいる人のそれぞれの属性を分析する。また、本実施形態に係る待ち時間推定部18は、人数検出部16が検出した人数に基づき精算の推定所要時間を算出し、属性に基づいて推定所要時間を補正する。以下に詳しく説明する。
 本実施形態に係る人数検出部16は、第1の実施形態に係る方法と同様にして、列に並ぶ人を検出する(ステップS305)。次いで、人数検出部16は、検出した各人の属性を分析する(ステップS306)。属性は、たとえば年齢、性別等に応じて定義されている。人数検出部16は、画像認識で人の属性を検出するための、属性毎の特徴量を予め保持している。そして人数検出部16は、この特徴量を用いたマッチング処理により、各人の属性を分析することができる。
 次いで、待ち時間推定部18は、第1の実施形態に係る方法と同様にして、精算の推定所要時間を算出する(ステップS405)。そして、待ち時間推定部18は、人数検出部16が分析した属性に基づいて精算の推定所要時間を補正する(ステップS406)。待ち時間推定部18は、たとえば以下の様に、精算の推定所要時間を補正できる。
メモリ102等には予め、属性と補正値との関係が対応づけられたデータが記憶されている。補正値は、精算の推定所要時間に対して増加または減少させるべき時間を示し、事前の調査で得られた平均値を元に求められる。待ち時間推定部18は、当該データを取得し、人数検出部16が分析した人の属性に対応する補正値を求め、検出された人の全てについて合算する。合算した補正値は、正の値でも負の値でもあり得る。そして、合算した補正値を、ステップS405で算出した精算の推定所要時間に加えることにより、当該推定時間を補正する。
 また、待ち時間推定部18は、第1の実施形態に係る方法と同様にして商品登録の推定所要時間を算出し(ステップS407)、補正した精算の推定所要時間と、商品登録の推定所要時間を合算する(ステップS408)。
 本実施形態に係る情報処理方法において、第7の実施形態と同様に、グループ化の処理をさらに行っても良い。その場合、たとえばグループの内で推定される精算所要時間が最も短い属性の人を、そのグループの精算者と推定して、推定所要時間を補正する。
 次に、本実施形態の作用および効果について説明する。本実施形態においては第1の実施形態と同様の作用および効果が得られる。加えて、より正確な待ち時間を予測することができる。
[第9の実施形態]
 本実施形態では、第1の実施形態の情報処理装置10において、本発明の効果を得るための最小構成を有する情報処理装置10を説明する。
 <処理構成>
 図22は、本実施形態における情報処理装置10の処理構成を例示する図である。本図に示されるように、情報処理装置10は、商品量推定部14、人数検出部16および待ち時間推定部18を備える。商品量推定部14は、商品登録装置20に並んでいる人の合計商品量を推定する。人数検出部16は、商品登録装置20に並んでいる人数を検出する。待ち時間推定部18は、合計商品量および当該人数に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 <ハードウエア構成>
 本実施形態の情報処理装置10は、図2に示されるような、第1実施形態と同様のハードウエア構成を有する。本実施形態の商品量推定部14、人数検出部16、および待ち時間推定部18は、例えば、CPU101により実行される商品量推定部14、人数検出部16、および待ち時間推定部18の機能を実現するためのプログラムモジュールにより実現される。商品量推定部14、人数検出部16、および待ち時間推定部18の機能を実現するためのプログラムモジュールは、例えば、メモリ102に記憶される。
 <動作例>
 図23は、本実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。本実施形態における情報処理装置10の動作例を以下に説明する。
 商品量推定部14は、情報処理装置10での所定の操作(情報処理を行うトリガとなる操作)に応じて商品登録装置20に並んでいる人の合計商品量を推定する(商品量推定ステップS20)。人数検出部16は、商品登録装置20に並んでいる人数を検出する(人数検出ステップS30)。そして、待ち時間推定部18は、合計商品量および当該人数に基づいて、商品登録装置毎の待ち時間の予測値を算出する(待ち時間算出ステップS40)。
 以上、本実施形態の情報処理装置10によれば、顧客に待ち時間に関する情報を提供できる。
[第10の実施形態]
 図24は、第10の実施形態に係る商品登録装置20と精算装置30が設置されている店舗で顧客が商品を購入する流れを概念的に例示する図である。まず顧客は、購入したい商品を持って商品登録装置20のところへ行く。すると店員が、商品登録装置20を操作して商品の登録処理を行う。その後、顧客が精算装置30のところへ行って代金の支払いなどをすることにより、商品の精算が行われる。
 この場合、店員が商品登録装置20で登録し、顧客が精算装置30で自ら精算する。そのため、商品登録装置20毎の待ち時間は、商品登録に必要な時間の総和であると推測でき、精算に必要な時間を考慮する必要は無い。そして、商品登録に必要な時間は登録すべき商品の量に基づいて推測できる。
 <処理構成>
 図25は、第10の実施形態に係る情報処理装置10を例示するブロック図である。本図において、各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。本実施形態に係る情報処理装置10は、商品量推定部14(検出手段)、および待ち時間推定部18を備える。商品量推定部14は、商品登録装置(POS装置)に並んでいる人の買い物かごを検出する。待ち時間推定部18は、商品量推定部14の検出結果に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 本実施形態に係る情報処理装置10は、第1の実施形態のような人数検出部16を備えなくてもよい。
 本実施形態に係る情報処理装置10において、商品量推定部14は、買い物かご603を検出して商品登録装置20に並んでいる人の合計商品量を推定する。そして、待ち時間推定部18は、合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 また、本実施形態に係る情報処理装置10は、商品登録装置20に並んでいる人の列を撮影した画像を示す情報を取得する取得部12をさらに備える。商品量推定部14は、その画像を用いて合計商品量を推定する。
<動作例>
 図26は、本実施形態の情報処理装置10によって実行される処理の流れを例示するフローチャートである。本実施形態に係る情報処理方法は、商品量推定ステップS20(検出ステップ)、および待ち時間算出ステップS40を含む。商品量推定ステップS20では、商品登録装置20に並んでいる人の買い物かごが検出される。待ち時間算出ステップS40では、商品量推定ステップS20の検出結果に基づいて、商品登録装置20毎の待ち時間の予測値が算出される。以下に詳しく説明する。
 本実施形態に係る情報処理方法は、取得ステップS10をさらに含む。取得ステップS10では、商品登録装置20に並んでいる人の列を撮影した画像を示す情報が取得される。商品量推定ステップS20では、その画像を用いて合計商品量が推定される。
 また、本実施形態に係る情報処理方法において、商品量推定ステップS20では、買い物かご603が検出されて商品登録装置20に並んでいる人の合計商品量が推定される。
そして、待ち時間算出ステップS40では、合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値が算出される。
 本実施形態において、取得部12は、第1の実施形態に係る取得ステップS10と同様にして、画像を取得する。次いで、商品量推定部14は、第5の実施形態に係る方法を用いる場合を除く第1から第6の実施形態のいずれかの商品量推定ステップS20と同様にして、列内の商品量を推定する。
 待ち時間推定部18が行う待ち時間算出ステップS40の処理は、精算の推定所要時間を算出しない点を除いて、第1の実施形態に係る待ち時間算出ステップS40の処理と同様である。待ち時間推定部18は、推定された列内の商品量に基づいて、たとえば以下の様に商品登録装置20毎の待ち時間の予測値を算出する。待ち時間推定部18は、商品量推定部14で推定された列内の商品数に1つの商品の登録あたりに必要な時間の平均値を乗じた時間を、商品登録の推定所要時間として算出する。そして、待ち時間推定部18は、商品登録の推定所要時間を、商品登録装置20毎の待ち時間の予測値として算出する。
 待ち時間推定部18により算出された待ち時間の予測値は、第1の実施形態と同様、顧客が見ることができるように、商品登録装置20ごとに顧客向け表示部に表示される。
 なお、本実施形態に係る方法は、第1から第9の実施形態に係るシステム構成において、1つの商品登録装置に複数のレジ担当者が配置される場合にも有効である。この場合、1人のレジ担当者が商品登録を行い、他のレジ担当者が精算を行う。したがって、商品登録装置20毎の待ち時間は、商品登録に必要な時間の総和であると推測でき、精算に必要な時間を考慮する必要は無い。また、第1から第9の実施形態のいずれかに係る方法と、本実施形態に係る方法とを、店員の配置状態に応じて適宜切り替えられるようにしてもよい。
 次に、本実施形態の作用および効果について説明する。本実施形態に係る情報処理装置10および情報処理方法によれば、顧客に待ち時間に関する情報を提供できる。その結果、顧客は快適に買い物を済ませることができる。また、顧客が各商品登録装置20に分散し、店舗におけるレジ処理がスムーズに進むことで、混雑の緩和および業務の効率化を図ることができる。
<変形例>
 図33は、第10の実施形態の変形例の情報処理装置10によって実行される処理の流れを例示するフローチャートである。第10の実施形態の変形例について以下に説明する。本実施形態に係る情報処理装置10は、商品量推定部14が行う商品量推定ステップS20(検出ステップ)での処理内容を除いて、第10の実施形態に係る情報処理装置10と同様である。
 本変形例に係る情報処理装置10は、商品量推定部14(検出手段)および待ち時間推定部18を備える。商品量推定部14は、商品登録装置20(POS装置)に並んでいる人の買い物かご603の数を検出する。待ち時間推定部18は、買い物かご603の数に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。以下に詳しく説明する。
 本実施形態に係る情報処理装置10は、商品登録装置20に形成された列の一部分については買い物かご603の数に基づいて商品量を推定し、それ以外の部分については買い物かご603毎の商品量を用いて列全体での商品量を算出する。
 本実施形態に係る取得部12は、第10の実施形態と同様に商品登録装置20に並んでいる人の列を撮影した画像を示す情報を取得する。
 本実施形態に係る商品量推定ステップS20では、商品量推定部14は、取得部12が取得した画像のうち予め定められた領域内に含まれる買い物かご603の数を検出する(ステップS230)。この検出方法については、第2の実施形態に係る方法と同様である。
 また、商品量推定部14は、検出した買い物かご603のうち、列の予め定められた基準長さ以内にある買い物かご603について、買い物かご603毎の商品量を推定する(ステップS231)。ここで、買い物かご603毎の商品量を推定する方法は、第1、3および5の実施形態に係る方法の少なくともいずれかと同様にできる。なお、これらの方法の2つ以上を併用しても良い。そして、商品量推定部14は、推定した買い物かご603毎の商品量を合算して、基準長さ以内にある買い物かご603の商品量を算出する。
 次いで、商品量推定部14は、ステップS230で検出された買い物かご603の数から、ステップS231で買い物かご603毎の商品量が推定された買い物かご603の数を減じ、基準長さより後ろの買い物かご603の数を算出する。そして、商品量推定部14は、基準長さより後ろの買い物かご603の数に買い物かご603あたりの平均商品量を乗じて基準長さより後ろの買い物かご603の商品量を算出する。ここで、買い物かご603あたりの商品量は、第2の実施形態に係る買い物かご603の平均商品数と同様に取得できる。
 そして、商品量推定部14は、算出された基準長さ以内にある買い物かご603の商品量と基準長さより後ろの買い物かご603の商品量を合算して列内の商品量を算出する(ステップS232)。
 次いで、本実施形態に係る待ち時間推定部18は、第10の実施形態と同様に待ち時間の予測値を算出する。
 なお、ステップS230では列の予め定められた基準長さより後ろの部分を含む領域に含まれる買い物かご603の数を検出してもよい。この場合、商品量推定部14は、検出された数に、買い物かご603あたりの商品量の平均値を乗じた値と、基準長さ以内にある買い物かご603の商品量とを合算することで、列内の商品量を推定できる。
 なお、商品量推定部14は、基準長さ以内にある買い物かご603の商品量を、買い物かご603の数に基づいて算出し、基準長さより後ろの買い物かご603の商品量を、第4の実施形態の方法のように人の数に基づいて算出しても良い。その場合にも、商品量推定部14は、算出された基準長さ以内にある買い物かご603の商品量と基準長さより後ろの買い物かご603の商品量を合算して列内の商品量を算出できる。
 なお、商品量推定部14は、第2の実施形態と同様に、カート604の数をさらに検出し、カート604の数と買い物かご603の数を用いて、列内の商品量を推定しても良い。
 なお、商品量推定部14は、列内の全ての買い物かご603の数を検出し、その数に買い物かご603あたりの平均商品量を乗じて得た列内の商品量を、買い物かご603毎の推定された商品量で補正するようにしてもよい。買い物かご603毎の商品量は、列内の少なくとも一部の買い物かご603について推定されればよい。この推定は、第1、3および5の実施形態に係る方法の少なくともいずれかと同様にできる。なお、商品量推定部14は、これらの方法の2つ以上を併用しても良い。
 なお、本変形例において、第6の実施形態の方法を適用し、買い物かご603を保持していない人の商品量を推定し、当該商品量をさらに用いて列内の商品量を推定しても良い。
 次に、本変形例の作用および効果について説明する。本変形例に係る情報処理装置10および情報処理方法によれば、顧客に待ち時間に関する情報を提供できる。その結果、顧客は快適に買い物を済ませることができる。また、顧客が各商品登録装置20に分散し、店舗におけるレジ処理がスムーズに進むことで、混雑の緩和および業務の効率化を図ることができる。
[第11の実施形態]
 本実施形態では、第10の実施形態の変形例に係る情報処理装置10において、本発明の効果を得るための最小構成を有する情報処理装置10を説明する。
 <処理構成>
 図27は、本実施形態における情報処理装置10の処理構成を例示する図である。本図に示されるように、情報処理装置10は、商品量推定部14(検出手段)、および待ち時間推定部18を備える。商品量推定部14は、商品登録装置(POS装置)に並んでいる人の買い物かごの数を検出する。待ち時間推定部18は、買い物かごの数に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 <ハードウエア構成>
 本実施形態の情報処理装置10は、図2に示されるような、第1実施形態と同様のハードウエア構成を有する。本実施形態の商品量推定部14、および待ち時間推定部18は、例えば、CPU101により実行される商品量推定部14、および待ち時間推定部18の機能を実現するためのプログラムモジュールにより実現される。商品量推定部14、および待ち時間推定部18の機能を実現するためのプログラムモジュールは、例えば、メモリ102に記憶される。
 <動作例>
 図28は、本実施形態の情報処理装置によって実行される処理の流れを例示するフローチャートである。本実施形態における情報処理装置10の動作例を以下に説明する。
 商品量推定部14は、情報処理装置10での所定の操作(情報処理を開始するトリガとなる操作)に応じて商品登録装置に並んでいる人の買い物かごの数を検出する(商品量推定ステップS20(検出ステップ))。そして、待ち時間推定部18は、買い物かごの数に基づいて、商品登録装置毎の待ち時間の予測値を算出する(待ち時間算出ステップS40)。
 以上、本実施形態の情報処理装置10によれば、顧客に待ち時間に関する情報を提供できる。
[第12の実施形態]
 本実施形態に係る情報処理装置10は、取得部12が、商品登録装置に並んでいる人の列を撮影した画像を示す情報の代わりに商品登録装置に並んでいる人の列の買い物かごに取り付けられた重量センサにより検出された当該買い物かごの重量変化履歴を示す情報を取得する点、および、商品量推定部14により行われる商品量推定ステップS20の処理を除いて、第10の実施形態に係る情報処理装置10と同様である。
 <処理構成>
 本実施形態に係る情報処理装置10は、図25で示したのと同様の構成を有する。本実施形態に係る情報処理装置10は、商品量推定部14(検出手段)および待ち時間推定部18を備える。商品量推定部14は、買い物かご603に取り付けられた重量センサにより検出された、当該買い物かご603の重量変化履歴を示す情報に基づき、買い物かご603毎の商品量を推定する。そして商品量推定部14は、推定した買い物かご603毎の商品量を合算して、商品登録装置20に並んでいる人の合計商品量を推定する。
待ち時間推定部18は、推定された合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 本実施形態に係る取得部12は、商品登録装置20に並んでいる人の列を撮影した画像を示す情報を取得しなくてもよい。
 本実施形態に係る情報処理装置10は、取得部12をさらに備える。取得部12は、商品登録装置20に並んでいる人の列の買い物かご603に取り付けられた重量センサにより検出された、当該買い物かご603の重量変化履歴を示す情報を取得する。
<動作例>
 本実施形態の情報処理装置10によって実行される処理の流れは、図26と同様のフローチャートで例示できる。本実施形態に係る情報処理方法は、商品量推定ステップS20(検出ステップ)および待ち時間算出ステップS40を含む。商品量推定ステップS20では、買い物かご603に取り付けられた重量センサにより検出された当該買い物かご603の重量変化履歴を示す情報に基づき買い物かご603毎の商品量が推定される。そして、推定された当該買い物かご603毎の商品量を合算して、商品登録装置20に並んでいる人の合計商品量が推定される。待ち時間算出ステップS40では、推定された合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値が算出される。以下に詳しく説明する。
 本実施形態に係る情報処理方法は、取得ステップS10をさらに含む。取得ステップS10では、商品登録装置20に並んでいる人の列の買い物かご603に取り付けられた重量センサにより検出された、当該買い物かご603の重量変化履歴を示す情報が取得される。
 本実施形態において、取得部12は、第5の実施形態に係る取得ステップS10と同様にして、重量変化履歴を示す情報を取得する。次いで、商品量推定部14は、第5の実施形態に係る方法の商品量推定ステップS20、または第5の実施形態に係る方法を用いる第6の実施形態の商品量推定ステップS20と同様にして、列内の商品量を推定する。
 待ち時間推定部18が行う待ち時間算出ステップS40の処理は、精算の推定所要時間を算出しない点を除いて、第5の実施形態に係る待ち時間算出ステップS40の処理と同様である。待ち時間推定部18は、推定された列内の商品量に基づいて、たとえば以下の様に商品登録装置20毎の待ち時間の予測値を算出する。待ち時間推定部18は、商品量推定部14で推定された列内の商品数に1つの商品の登録あたりに必要な時間の平均値を乗じた時間を、商品登録の推定所要時間として算出する。そして、待ち時間推定部18は、商品登録の推定所要時間を、商品登録装置20毎の待ち時間の予測値として算出する。
 待ち時間推定部18により算出された待ち時間の予測値は、第1の実施形態と同様、顧客が見ることができるように、商品登録装置20ごとに顧客向け表示部に表示等される。
 なお、本実施形態に係る方法は、第1から第9の実施形態に係るシステム構成において、1つの商品登録装置に複数のレジ担当者が配置される場合にも有効である。この場合、1人のレジ担当者が商品登録を行い、他のレジ担当者が精算を行う。したがって、商品登録装置20毎の待ち時間は、商品登録に必要な時間の総和であると推測でき、精算に必要な時間を考慮する必要は無い。また、第1から第9の実施形態のいずれかに係る方法と、本実施形態に係る方法とを、店員の配置状態に応じて適宜切り替えられるようにしてもよい。
 次に、本実施形態の作用および効果について説明する。本実施形態に係る情報処理装置10および情報処理方法によれば、顧客に待ち時間に関する情報を提供できる。その結果、顧客は快適に買い物を済ませることができる。また、顧客が各商品登録装置20に分散し、店舗におけるレジ処理がスムーズに進むことで、混雑の緩和および業務の効率化を図ることができる。
[第13の実施形態]
 本実施形態では、第12の実施形態の情報処理装置10において、本発明の効果を得るための最小構成を有する情報処理装置10を説明する。
 <処理構成>
 本実施形態における情報処理装置10の処理構成は、図27と同様である。本図に示されるように、情報処理装置10は、商品量推定部14および待ち時間推定部18を備える。商品量推定部14は、商品登録装置20(POS装置)に並んでいる人の買い物かご603を検出する。待ち時間推定部18は、商品量推定部14の検出結果に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。ここで、商品量推定部14は、買い物かご603に取り付けられた重量センサにより検出された、当該買い物かご603の重量変化履歴を示す情報に基づき、買い物かご603毎の商品量を推定する。そして商品量推定部14は、推定した買い物かご603毎の商品量を合算して、商品登録装置20に並んでいる人の合計商品量を推定する。待ち時間推定部18は、推定された合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値を算出する。
 <ハードウエア構成>
 本実施形態の情報処理装置10は、図15に示されるのと同様のハードウエア構成を有する。本実施形態の商品量推定部14、および待ち時間推定部18は、例えば、CPU101により実行される商品量推定部14、および待ち時間推定部18の機能を実現するためのプログラムモジュールにより実現される。商品量推定部14、および待ち時間推定部18の機能を実現するためのプログラムモジュールは、例えば、メモリ102に記憶される。
 <動作例>
 本実施形態における情報処理装置10の動作例を説明する。本実施形態における情報処理装置10の処理の流れは、図28と同様のフローチャートで示すことができる。
 商品量推定部14は、情報処理装置10での所定の操作(情報を取得するトリガとなる操作)に応じて、商品登録装置20に並んでいる人の買い物かご603を検出する(商品量推定ステップS20(検出ステップ))。そして、待ち時間推定部18は、商品量推定ステップS20での検出結果に基づいて、商品登録装置20毎の待ち時間の予測値を算出する(待ち時間算出ステップS40)。ここで、商品量推定ステップS20では、買い物かご603に取り付けられた重量センサにより検出された当該買い物かご603の重量変化履歴を示す情報に基づき、買い物かご603毎の商品量が推定される。そして、推定された当該買い物かご603毎の商品量を合算して、商品登録装置20に並んでいる人の合計商品量が推定される。また、待ち時間算出ステップS40では、推定された合計商品量に基づいて、商品登録装置20毎の待ち時間の予測値が算出される。
 以上、本実施形態の情報処理装置10によれば、顧客に待ち時間に関する情報を提供できる。
 以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
 たとえば、上述の説明で用いたシーケンス図やフローチャートでは、複数の工程(処理)が順番に記載されているが、各実施形態で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態では、図示される工程の順番を内容的に支障のない範囲で変更することができる。また、上述の各実施形態は、内容が相反しない範囲で組み合わせることができる。
 以下に複数の実施例を挙げ、上述の各実施形態を更に詳細に説明する。本発明は以下の各実施例から何ら限定を受けない。
[実施例1]
 図29は、POSレジスタ装置の構成例を示す図である。本図に示されるように、実施例1は、第1から第13の実施形態のいずれかに係る情報処理装置10及び情報処理方法が、POSレジスタ装置100に適用された例を示す。なお、本図では、第3の実施形態に係る情報処理装置10および情報処理方法がPOSレジスタ装置100に適用された場合の、重量計測部110を省略して描いている。実施例1におけるPOSレジスタ装置100は、商品登録装置20及び精算装置30から構成される。商品登録装置20は、商品を精算対象に登録し、精算対象商品の情報を精算装置30に送る。精算装置30は、精算対象の商品の決済処理を行う。精算対象は、商品登録装置20及び精算装置30のいずれにおいても登録可能である。
 実施例1における商品登録装置20及び精算装置30は、図2と同様に、CPU101、メモリ102、入出力I/F103及び通信部104等を有する。上述の情報処理装置10は、商品登録装置20及び精算装置30のいずれにも適用可能であり、上述の情報処理方法は、商品登録装置20及び精算装置30のいずれでも実行可能である。
 上述の表示部105は、タッチパネルユニット22の表示部22a、表示部32、および顧客用のモニタ27の少なくともいずれかに相当する。モニタ27には、たとえば、待ち時間の予測値が表示される。上述の入力部106は、タッチパネルユニット22のタッチパネル22b及びキーボード23、並びに、キーボード33の少なくとも1つに相当する。上述の撮像部107は、スキャナ装置24およびカメラ40に相当する。スキャナ装置24は、読取窓26にかざされた商品の外観を映し出す商品画像を撮像する。天井に取り付けられたカメラ40は、商品登録装置20に並ぶ顧客の列の画像を撮影する。上述の集音部108は、例えば、商品登録装置20における部材25、POSレジスタ装置100のオペレータ等に装着される。上述の音声出力部109は、例えば商品登録装置20や精算装置30に設置される。
 実施例1によれば、POSレジスタ装置100のオペレータは、商品を清算対象に登録するにあたり、その商品を読取窓26にかざす。これにより、その商品に付されている、その商品に関する情報を得るための商品情報シンボル等が読み取られる。そして、商品情報シンボルを読み取ることにより、対応する商品が精算対象に登録される。
 実施例1では本図に示されるように、POSレジスタ装置100が商品登録装置20及び精算装置30を有したが、POSレジスタ装置100は、精算装置30のみで構成されてもよい。この場合、精算装置30が、スキャナ装置24を有していればよい。
[実施例2]
 図30は、セミセルフ式のPOSレジスタ装置における商品登録装置20を実現する計算機200のハードウエアの構成例を示す図である。実施例2は、第10または第11の実施形態に係る情報処理装置10及び情報処理方法が、商品登録装置20に適用された例を示す。本実施例におけるPOSレジスタ装置は、図29に示す実施例1と同様に、商品登録装置20及び精算装置30から構成される。
セミセルフ式のPOSレジスタ装置では、店員が商品登録装置20で商品登録を行い、顧客が自ら精算装置30で精算を行う。
 商品登録装置20は、商品を精算対象に登録し、精算対象商品の情報を精算装置30に送る。精算装置30は、精算対象の商品の決済処理を行う。
 商品登録装置20の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。
 計算機200は、レジ端末用途に設計された専用装置を用いて実装されてもよいし、PC(Personal Computer)や携帯端末などの汎用装置を用いて実装されてもよい。
<商品登録装置20のハードウエア構成>
 計算機200は、バス202、プロセッサ204、メモリ206、ストレージ208、入出力インタフェース210、及びネットワークインタフェース212を有する。バス202は、プロセッサ204、メモリ206、ストレージ208、入出力インタフェース210、及びネットワークインタフェース212が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ204などを互いに接続する方法は、バス接続に限定されない。プロセッサ204は、CPUやGPUなどの演算処理装置である。メモリ206は、RAMやROMなどのメモリである。ストレージ208は、ハードディスク、SSD (Solid State Drive)、又はメモリカードなどの記憶装置である。また、ストレージ208は、RAMやROMなどのメモリであってもよい。
 入出力インタフェース210は、計算機200と入出力デバイスとを接続するためのインタフェースである。本図では、タッチパネル214、リーダ216、撮像装置218、およびモニタ220が入出力インタフェース210に接続されている。タッチパネル214は、店員が計算機200を操作するための入力を受け付ける。例えばタッチパネル214は、商品の金額を手動で入力するために利用される。さらにタッチパネル214は、精算対象として登録された商品に関する情報など、種々の情報を表示する。リーダ216は精算対象の商品を登録するために利用される種々のリーダである。例えばリーダ216は、バーコードリーダや、商品を画像認識によって認識するためのカメラである。なお計算機200には、キーボードなど、タッチパネル214以外の入力インタフェースが接続されていてもよい。たとえば撮像装置218は、商品登録装置20に並ぶ顧客の列の画像を撮影するカメラである。たとえば、モニタ220は、予測された待ち時間等を表示する顧客用のディスプレイである。
 ネットワークインタフェース212は、計算機200を外部の装置と通信可能に接続するためのインタフェースである。ネットワークインタフェース212は、有線回線と接続するためのネットワークインタフェースでもよいし、無線回線と接続するためのネットワークインタフェースでもよい。例えば商品登録装置20を実現する計算機200は、ネットワークを介して、後述する計算機300(精算装置30を実現するための計算機)と接続されている。
 ストレージ208は商品登録装置20の各機能を実現するプログラムモジュールを記憶している。プロセッサ204は、これら各プログラムモジュールを実行することで、そのプログラムモジュールに対応する各機能を実現する。ここでプロセッサ204は、上記各モジュールを実行する際、これらのモジュールをメモリ206上に読み出してから実行してもよいし、メモリ206上に読み出さずに実行してもよい。
 計算機200のハードウエア構成は本図に示した構成に限定されない。例えば、各プログラムモジュールはメモリ206に格納されてもよい。この場合、計算機200は、ストレージ208を備えていなくてもよい。また計算機200は、後述するドロア316、釣り銭機318、プリンタ320などを備えていてもよい。この場合、計算機200は精算装置30としても利用できる。
 なお、図30において、撮像装置218を無線通信の受信機に置き換えることにより、第12および第13の実施形態に係る情報処理装置10及び情報処理方法が、商品登録装置20に適用された例のハードウエア構成を示すことができる。受信機は、買い物かご603に取り付けられた送信機と通信する。
 次に、精算装置30について説明する。精算装置30の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。
<精算装置30のハードウエア構成>
 図31は、本実施例の精算装置30を実現する計算機300のハードウエア構成を例示する図である。この計算機300は、レジ端末用途に設計された専用装置を用いて実装されてもよいし、PCや携帯端末などの汎用装置を用いて実装されてもよい。なお、計算機300の構成は、多くの部分において計算機200の構成と同様である。例えばプロセッサ304は、プロセッサ204と同様の機能を有する。そのため、これら同様の構成についての説明は省略する。
 入出力インタフェース310には、タッチパネル314、ドロア316、釣り銭機318、及びプリンタ320が接続されている。タッチパネル314は、顧客や店員による操作を受け付ける。またタッチパネル314は、精算情報に係る精算金額など、種々の情報を表示する。ドロア316は硬貨や紙幣を格納する。釣り銭機318は、顧客が代金を投入するための投入口と、釣り銭を排出するための排出口を有する。プリンタ320はレシート等の発行を行う。なお計算機300には、キーボードなど、タッチパネル314以外の入力インタフェースが接続されていてもよい。
 計算機300のハードウエア構成は本図に示した構成に限定されない。例えば、各プログラムモジュールはメモリ306に格納されてもよい。この場合、計算機300は、ストレージ308を備えていなくてもよい。
[実施例3]
 図32は、POSシステムの構成例を示す図である。本図に示されるように、実施例3は、第1から第13の実施形態のいずれかに係る情報処理装置10及び情報処理方法が、POSシステム50に適用された例を示す。本実施例におけるPOSシステム50は、サーバ装置51及び店舗側構成52から構成され、サーバ装置51と店舗側構成52とは、通信網53により通信可能に接続される。店舗側構成52には、通信中継装置を介して通信網53に接続可能な店舗端末54、スタンド55等が含まれる。スタンド55は、店舗端末54と、他の機器(ハンディスキャナ、キャッシュドロア、レシートプリンタ等)とを通信可能に接続するための機器である。
 店舗端末54は、PC(Personal Computer)、ノートPC、タブレット型端末、スマートフォン等のような汎用コンピュータであり、サーバ装置51との間でデータのやり取りをすることにより、実施例1および2のPOSレジスタ装置と同様の機能を実現する。
店舗端末54は、タッチパネルユニット56、撮像部57、マイクロフォン(図示せず)等を有する。上述の表示部105は、タッチパネルユニット56の表示部に相当する。上述の入力部106は、タッチパネルユニット56のタッチパネルに相当する。上述の撮像部107は、撮像部57に相当する。上述の集音部108は、店舗端末54に内蔵されるマイクロフォンに相当する。
 サーバ装置51は、一般的なサーバコンピュータであり、WEBサーバ、アプリケーションサーバ等として実現される。店舗端末54及びサーバ装置51は、図2と同様に、CPU101、メモリ102、入出力I/F103及び通信部104等を有する。
 上述の情報処理装置10は、店舗端末54のみ、又はサーバ装置51と店舗装置の組み合わせとして実現され得る。情報処理装置10の一部をサーバ装置51で実現する場合、例えば商品量推定部14、人数検出部16および待ち時間推定部18が実行する処理がサーバ装置51で実現される。そして、取得部12が実行する処理が店舗端末54で実現される。
 以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
 以下、参考形態の例を付記する。
1-1. POS装置に並んでいる人の商品量を推定する商品量推定手段と、
 前記POS装置に並んでいる人数を検出する人数検出手段と、
 前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段とを備える
情報処理装置。
1-2. 1-1.に記載の情報処理装置において、
 前記POS装置に並んでいる人の列を撮影した画像を示す情報を取得する取得手段をさらに備え、
 前記商品量推定手段は、前記画像を用いて前記POS装置に並んでいる人の商品量を推定する
情報処理装置。
1-3. 1-2.に記載の情報処理装置において、
 前記人数検出手段は、前記画像内の前記POS装置に並んでいる複数の人のうち、精算を一括に行うと推定される2人以上をグループ化する
情報処理装置。
1-4. 1-2.または1-3.に記載の情報処理装置において、
 前記人数検出手段は、前記POS装置に並んでいる人のそれぞれの属性を分析し、
 前記待ち時間算出手段は、
  前記人数検出手段が検出した前記人数に基づき精算の推定所要時間を算出し、
  前記属性に基づいて前記推定所要時間を補正する
情報処理装置。
1-5. 1-2.から1-4.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、前記画像内の前記POS装置に並んでいる人のうち、買い物かごを保持していない人について、あらかじめ定められた量を当該人の商品量として推定する
情報処理装置。
1-6. 1-2.から1-5.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごを検出し、当該買い物かご毎の商品量を推定し、推定された前記買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
情報処理装置。
1-7. 1-6.に記載の情報処理装置において、
 前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける内容物の高さを検出し、検出した前記内容物の高さを用いて、前記買い物かご毎の商品量を推定する
情報処理装置。
1-8. 1-7.に記載の情報処理装置において、
 前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける表層の商品数を検出し、前記内容物の高さおよび前記表層の商品数を用いて前記買い物かご毎の商品量を推定する
情報処理装置。
1-9. 1-2.から1-5.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数を検出し、検出した前記買い物かごの数を用いて、前記POS装置に並んでいる人の商品量を推定する
情報処理装置。
1-10. 1-9.に記載の情報処理装置において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数およびカートの数を検出し、検出された前記買い物かごの数および前記カートの数を用いて、前記POS装置に並んでいる人の商品量を推定する
情報処理装置。
1-11. 1-6.から1-10.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、前記POS装置に設けられた重量計測部により測定された買い物かごの重量を用いて、当該買い物かごの商品量を補正する
情報処理装置。
1-12. 1-6.から1-11.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、前記画像のうち前記POS装置に並んでいる人の列の、予め定められた基準長さより後ろの買い物かごについては検出を行わず、当該基準長さより後ろの人の数に基づいて当該基準長さより後ろの商品量を推定する
情報処理装置。
1-13. 1-1.から1-5.のいずれか一つに記載の情報処理装置において、
 前記商品量推定手段は、買い物かごに取り付けられた重量センサにより検出された当該買い物かごの重量変化履歴を示す情報に基づき買い物かご毎の商品量を推定し、推定された当該買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
情報処理装置。
2-1. POS装置に並んでいる人の商品量を推定する商品量推定ステップと、
 前記POS装置に並んでいる人数を検出する人数検出ステップと、
 前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出ステップとを含む
情報処理方法。
2-2. 2-1.に記載の情報処理方法において、
 前記POS装置に並んでいる人の列を撮影した画像を示す情報を取得する取得ステップをさらに備え、
 前記商品量推定ステップでは、前記画像を用いて前記POS装置に並んでいる人の商品量を推定する
情報処理方法。
2-3. 2-2.に記載の情報処理方法において、
 前記人数検出ステップでは、前記画像内の前記POS装置に並んでいる複数の人のうち、精算を一括に行うと推定される2人以上をグループ化する
情報処理方法。
2-4. 2-2.または2-3.に記載の情報処理方法において、
 前記人数検出ステップでは、前記POS装置に並んでいる人のそれぞれの属性を分析し、
 前記待ち時間算出ステップでは、
  前記人数検出ステップで検出された前記人数に基づき精算の推定所要時間を算出し、  前記属性に基づいて前記推定所要時間を補正する
情報処理方法。
2-5. 2-2.から2-4.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像内の前記POS装置に並んでいる人のうち、買い物かごを保持していない人について、あらかじめ定められた量を当該人の商品量として推定する
情報処理方法。
2-6. 2-2.から2-5.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像のうち予め定められた領域内に含まれる買い物かごを検出し、当該買い物かご毎の商品量を推定し、推定された前記買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
情報処理方法。
2-7. 2-6.に記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像から買い物かごのそれぞれにおける内容物の高さを検出し、検出した前記内容物の高さを用いて、前記買い物かご毎の商品量を推定する情報処理方法。
2-8. 2-7.に記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像から買い物かごのそれぞれにおける表層の商品数を検出し、前記内容物の高さおよび前記表層の商品数を用いて前記買い物かご毎の商品量を推定する
情報処理方法。
2-9. 2-2.から2-5.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像のうち予め定められた領域内に含まれる買い物かごの数を検出し、検出した前記買い物かごの数を用いて、前記POS装置に並んでいる人の商品量を推定する
情報処理方法。
2-10. 2-9.に記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像のうち予め定められた領域内に含まれる買い物かごの数およびカートの数を検出し、検出された前記買い物かごの数および前記カートの数を用いて、前記POS装置に並んでいる人の商品量を推定する
情報処理方法。
2-11. 2-6.から2-10.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、前記POS装置に設けられた重量計測部により測定された買い物かごの重量を用いて、当該買い物かごの商品量を補正する
情報処理方法。
2-12. 2-6.から2-11.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、前記画像のうち前記POS装置に並んでいる人の列の、予め定められた基準長さより後ろの買い物かごについては検出を行わず、当該基準長さより後ろの人の数に基づいて当該基準長さより後ろの商品量を推定する
情報処理方法。
2-13. 2-1.から2-5.のいずれか一つに記載の情報処理方法において、
 前記商品量推定ステップでは、買い物かごに取り付けられた重量センサにより検出された当該買い物かごの重量変化履歴を示す情報に基づき買い物かご毎の商品量を推定し、推定された当該買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
情報処理方法。
3-1. 情報処理装置を実現するためのコンピュータプログラムが格納された記録媒体であって、
 コンピュータを、
  POS装置に並んでいる人の商品量を推定する商品量推定手段、
  前記POS装置に並んでいる人数を検出する人数検出手段、および
  前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段
 として機能させるためのコンピュータプログラムが格納された記録媒体。
3-2. 3-1.に記載のコンピュータプログラムが格納された記録媒体において、
 コンピュータを、さらに前記POS装置に並んでいる人の列を撮影した画像を示す情報を取得する取得手段として機能させ、
 前記商品量推定手段は、前記画像を用いて前記POS装置に並んでいる人の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-3. 3-2.に記載のコンピュータプログラムが格納された記録媒体において、
 前記人数検出手段は、前記画像内の前記POS装置に並んでいる複数の人のうち、精算を一括に行うと推定される2人以上をグループ化する
コンピュータプログラムが格納された記録媒体。
3-4. 3-2.または3-3.に記載のコンピュータプログラムが格納された記録媒体において、
 前記人数検出手段は、前記POS装置に並んでいる人のそれぞれの属性を分析し、
 前記待ち時間算出手段は、
  前記人数検出手段が検出した前記人数に基づき精算の推定所要時間を算出し、
  前記属性に基づいて前記推定所要時間を補正する
コンピュータプログラムが格納された記録媒体。
3-5. 3-2.から3-4.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像内の前記POS装置に並んでいる人のうち、買い物かごを保持していない人について、あらかじめ定められた量を当該人の商品量として推定する
コンピュータプログラムが格納された記録媒体。
3-6. 3-2.から3-5.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごを検出し、当該買い物かご毎の商品量を推定し、推定された前記買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-7. 3-6.に記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける内容物の高さを検出し、検出した前記内容物の高さを用いて、前記買い物かご毎の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-8. 3-7.に記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける表層の商品数を検出し、前記内容物の高さおよび前記表層の商品数を用いて前記買い物かご毎の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-9. 3-2.から3-5.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数を検出し、検出した前記買い物かごの数を用いて、前記POS装置に並んでいる人の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-10. 3-9.に記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数およびカートの数を検出し、検出された前記買い物かごの数および前記カートの数を用いて、前記POS装置に並んでいる人の商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-11. 3-6.から3-10.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記POS装置に設けられた重量計測部により測定された買い物かごの重量を用いて、当該買い物かごの商品量を補正する
コンピュータプログラムが格納された記録媒体。
3-12. 3-6.から3-11.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、前記画像のうち前記POS装置に並んでいる人の列の、予め定められた基準長さより後ろの買い物かごについては検出を行わず、当該基準長さより後ろの人の数に基づいて当該基準長さより後ろの商品量を推定する
コンピュータプログラムが格納された記録媒体。
3-13. 3-1.から3-5.のいずれか一つに記載のコンピュータプログラムが格納された記録媒体において、
 前記商品量推定手段は、買い物かごに取り付けられた重量センサにより検出された当該買い物かごの重量変化履歴を示す情報に基づき買い物かご毎の商品量を推定し、推定された当該買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
コンピュータプログラムが格納された記録媒体。
 この出願は、2015年9月30日に出願された日本出願特願2015-195429を基礎とする優先権を主張し、その開示の全てをここに取り込む。
10 情報処理装置
100 POSレジスタ装置
101 CPU
102 メモリ
103 入出力I/F
104 通信部
1041 可搬型記録媒体
105 表示部
106 入力部
107 撮像部
108 集音部
109 音声出力部
110 重量計測部
111 受信部
12 取得手段
14 商品量推定部(検出手段)
16 人数検出部
18 待ち時間推定部
20 商品登録装置
200 計算機
202 バス
204 プロセッサ
206 メモリ
208 ストレージ
21 台
210 入出力I/F
212 ネットワークI/F
214 タッチパネル
216 リーダ
218 撮像装置
220,27 モニタ
30 精算装置
300 計算機
302 バス
304 プロセッサ
306 メモリ
308 ストレージ
310 入出力I/F
312 ネットワークI/F
314 タッチパネル
316 ドロア
318 釣り銭機
320 プリンタ
40 カメラ
50 POSシステム
51 サーバ装置
52 店舗側構成
53 通信網
54 店舗端末
55 スタンド
56 タッチパネルユニット
57 撮像部
601 店員
602,602a,602b,602c,602d,602e,602f,602g,602h 顧客
603,603a,603b,603c,603d 買い物かご
604 カート
605 商品
606 グループ

Claims (15)

  1.  POS装置に並んでいる人の商品量を推定する商品量推定手段と、
     前記POS装置に並んでいる人数を検出する人数検出手段と、
     前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段とを備える
    情報処理装置。
  2.  請求項1に記載の情報処理装置において、
     前記POS装置に並んでいる人の列を撮影した画像を示す情報を取得する取得手段をさらに備え、
     前記商品量推定手段は、前記画像を用いて前記POS装置に並んでいる人の商品量を推定する
    情報処理装置。
  3.  請求項2に記載の情報処理装置において、
     前記人数検出手段は、前記画像内の前記POS装置に並んでいる複数の人のうち、精算を一括に行うと推定される2人以上をグループ化する
    情報処理装置。
  4.  請求項2または3に記載の情報処理装置において、
     前記人数検出手段は、前記POS装置に並んでいる人のそれぞれの属性を分析し、
     前記待ち時間算出手段は、
      前記人数検出手段が検出した前記人数に基づき精算の推定所要時間を算出し、
      前記属性に基づいて前記推定所要時間を補正する
    情報処理装置。
  5.  請求項2から4のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、前記画像内の前記POS装置に並んでいる人のうち、買い物かごを保持していない人について、あらかじめ定められた量を当該人の商品量として推定する
    情報処理装置。
  6.  請求項2から5のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごを検出し、当該買い物かご毎の商品量を推定し、推定された前記買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
    情報処理装置。
  7.  請求項6に記載の情報処理装置において、
     前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける内容物の高さを検出し、検出した前記内容物の高さを用いて、前記買い物かご毎の商品量を推定する
    情報処理装置。
  8.  請求項7に記載の情報処理装置において、
     前記商品量推定手段は、前記画像から買い物かごのそれぞれにおける表層の商品数を検出し、前記内容物の高さおよび前記表層の商品数を用いて前記買い物かご毎の商品量を推定する
    情報処理装置。
  9.  請求項2から5のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数を検出し、検出した前記買い物かごの数を用いて、前記POS装置に並んでいる人の商品量を推定する
    情報処理装置。
  10.  請求項9に記載の情報処理装置において、
     前記商品量推定手段は、前記画像のうち予め定められた領域内に含まれる買い物かごの数およびカートの数を検出し、検出された前記買い物かごの数および前記カートの数を用いて、前記POS装置に並んでいる人の商品量を推定する
    情報処理装置。
  11.  請求項6から10のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、前記POS装置に設けられた重量計測部により測定された買い物かごの重量を用いて、当該買い物かごの商品量を補正する
    情報処理装置。
  12.  請求項6から11のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、前記画像のうち前記POS装置に並んでいる人の列の、予め定められた基準長さより後ろの買い物かごについては検出を行わず、当該基準長さより後ろの人の数に基づいて当該基準長さより後ろの商品量を推定する
    情報処理装置。
  13.  請求項1から5のいずれか一項に記載の情報処理装置において、
     前記商品量推定手段は、買い物かごに取り付けられた重量センサにより検出された当該買い物かごの重量変化履歴を示す情報に基づき買い物かご毎の商品量を推定し、推定された当該買い物かご毎の商品量を合算して、前記POS装置に並んでいる人の商品量を推定する
    情報処理装置。
  14.  POS装置に並んでいる人の商品量を推定する商品量推定ステップと、
     前記POS装置に並んでいる人数を検出する人数検出ステップと、
     前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出ステップとを含む
    情報処理方法。
  15.  情報処理装置を実現するためのコンピュータプログラムが格納された記録媒体であって、
     コンピュータを、
      POS装置に並んでいる人の商品量を推定する商品量推定手段、
      前記POS装置に並んでいる人数を検出する人数検出手段、および
      前記POS装置に並んでいる人の商品量および前記人数に基づいて、前記POS装置毎の待ち時間の予測値を算出する待ち時間算出手段
    として機能させるためのコンピュータプログラムが格納された記録媒体。
PCT/JP2016/004203 2015-09-30 2016-09-15 情報処理装置、情報処理方法、およびプログラムが格納された記録媒体 WO2017056429A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201680058225.XA CN108140282A (zh) 2015-09-30 2016-09-15 信息处理装置、信息处理方法和存储程序的记录介质
US15/763,227 US20180268391A1 (en) 2015-09-30 2016-09-15 Information processing device, information processing method, and recording medium storing program
HK18109546.0A HK1250086A1 (zh) 2015-09-30 2018-07-23 信息處理裝置、信息處理方法和存儲程序的記錄介質

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-195429 2015-09-30
JP2015195429A JP6724326B2 (ja) 2015-09-30 2015-09-30 情報処理装置、情報処理方法、およびプログラム

Publications (1)

Publication Number Publication Date
WO2017056429A1 true WO2017056429A1 (ja) 2017-04-06

Family

ID=58423056

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/004203 WO2017056429A1 (ja) 2015-09-30 2016-09-15 情報処理装置、情報処理方法、およびプログラムが格納された記録媒体

Country Status (5)

Country Link
US (1) US20180268391A1 (ja)
JP (1) JP6724326B2 (ja)
CN (1) CN108140282A (ja)
HK (1) HK1250086A1 (ja)
WO (1) WO2017056429A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108682094A (zh) * 2018-05-04 2018-10-19 京东方科技集团股份有限公司 智能购物系统及使用方法
CN110246284A (zh) * 2018-03-07 2019-09-17 上海善解人意信息科技有限公司 无人值守超市购物系统及其控制方法
EP3944177A1 (en) * 2020-07-22 2022-01-26 Toshiba Tec Kabushiki Kaisha System, shelf device, and cart pos

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10475221B2 (en) * 2016-05-19 2019-11-12 Canon Kabushiki Kaisha Image processing device, image processing method and program for detected objects
JP6469139B2 (ja) * 2017-01-17 2019-02-13 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
JP2018185566A (ja) * 2017-04-24 2018-11-22 東芝テック株式会社 客数処理装置及びプログラム
JP7158828B2 (ja) * 2017-05-31 2022-10-24 キヤノン株式会社 情報処理装置、情報処理方法およびプログラム
JP7010030B2 (ja) * 2018-01-31 2022-01-26 日本電気株式会社 店内監視装置、店内監視方法、および店内監視プログラム
JP2019168902A (ja) * 2018-03-23 2019-10-03 日本電気株式会社 レジスタ装置、通知システム、通知方法および通知プログラム
JP7237467B2 (ja) * 2018-05-30 2023-03-13 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
JP6666980B1 (ja) * 2018-10-31 2020-03-18 株式会社リクルート 順番管理システムおよびプログラム
JP7416594B2 (ja) * 2019-09-24 2024-01-17 東芝テック株式会社 店舗管理装置、店舗管理システム及び店舗管理方法
JP7486967B2 (ja) * 2020-02-03 2024-05-20 東芝テック株式会社 認証装置及び制御プログラム
CN116612180B (zh) * 2023-07-18 2023-10-03 湖南省计量检测研究院 一种可实时维护的商品量计量检验系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010176225A (ja) * 2009-01-27 2010-08-12 Nec Corp 情報通知システム及び情報通知方法並びに制御プログラム
JP2011096140A (ja) * 2009-10-30 2011-05-12 Fujitsu Ltd 情報提供プログラム、および情報提供装置
JP2013030086A (ja) * 2011-07-29 2013-02-07 Toshiba Tec Corp 商品会計処理装置及び商品会計処理プログラム
JP2013037452A (ja) * 2011-08-05 2013-02-21 Toshiba Tec Corp 混雑度報知装置、プログラム、および混雑度報知方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5557513A (en) * 1993-04-28 1996-09-17 Quadrix Corporation Checkout lane alert system and method for stores having express checkout lanes
US5437346A (en) * 1994-05-11 1995-08-01 Dumont; Charles Station for price scanning verifying and selectively bagging purchase items
JP3967054B2 (ja) * 1999-12-07 2007-08-29 東芝テック株式会社 商品販売登録システム
EP1285371A4 (en) * 2000-04-03 2003-04-16 Pugliese Company SYSTEM AND METHOD FOR DISPLAYING AND SELLING GOODS AND SERVICES
US7487112B2 (en) * 2000-06-29 2009-02-03 Barnes Jr Melvin L System, method, and computer program product for providing location based services and mobile e-commerce
US8010402B1 (en) * 2002-08-12 2011-08-30 Videomining Corporation Method for augmenting transaction data with visually extracted demographics of people using computer vision
US8209219B2 (en) * 2004-04-13 2012-06-26 Hyperactive Technologies, Inc. Vision-based measurement of bulk and discrete food products
US8639543B2 (en) * 2005-11-01 2014-01-28 International Business Machines Corporation Methods, systems, and media to improve employee productivity using radio frequency identification
US20090249342A1 (en) * 2008-03-28 2009-10-01 Alexander Steven Johnson Systems and methods for transaction queue analysis
CN101615311B (zh) * 2009-06-19 2011-05-04 无锡骏聿科技有限公司 一种基于视觉的排队时间评估方法
CN201773434U (zh) * 2010-08-10 2011-03-23 深圳市华儒科技有限公司 一种人员流量监控与分析系统
US8924868B2 (en) * 2011-11-03 2014-12-30 International Business Machines Corporation Moving an activity along terminals associated with a physical queue
US8950671B2 (en) * 2012-06-29 2015-02-10 Toshiba Global Commerce Solutions Holdings Corporation Item scanning in a shopping cart
US20140337098A1 (en) * 2013-05-09 2014-11-13 Qualcomm Incorporated System and method for time of purchase consumer survey
CN103544646A (zh) * 2013-10-25 2014-01-29 江苏科大汇峰科技有限公司 基于Android的超市智能收银排队等候分析方法
US10402870B2 (en) * 2013-11-05 2019-09-03 Walmart Apollo, Llc System and method for indicating queue characteristics of electronic terminals
CN104392445B (zh) * 2014-11-21 2017-10-31 中国计量学院 一种监控视频中人群小群体分割方法
CN204204027U (zh) * 2014-11-27 2015-03-11 无锡北斗星通信息科技有限公司 城市超市信息发布系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010176225A (ja) * 2009-01-27 2010-08-12 Nec Corp 情報通知システム及び情報通知方法並びに制御プログラム
JP2011096140A (ja) * 2009-10-30 2011-05-12 Fujitsu Ltd 情報提供プログラム、および情報提供装置
JP2013030086A (ja) * 2011-07-29 2013-02-07 Toshiba Tec Corp 商品会計処理装置及び商品会計処理プログラム
JP2013037452A (ja) * 2011-08-05 2013-02-21 Toshiba Tec Corp 混雑度報知装置、プログラム、および混雑度報知方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110246284A (zh) * 2018-03-07 2019-09-17 上海善解人意信息科技有限公司 无人值守超市购物系统及其控制方法
CN108682094A (zh) * 2018-05-04 2018-10-19 京东方科技集团股份有限公司 智能购物系统及使用方法
EP3944177A1 (en) * 2020-07-22 2022-01-26 Toshiba Tec Kabushiki Kaisha System, shelf device, and cart pos

Also Published As

Publication number Publication date
JP6724326B2 (ja) 2020-07-15
JP2017068717A (ja) 2017-04-06
HK1250086A1 (zh) 2018-11-23
CN108140282A (zh) 2018-06-08
US20180268391A1 (en) 2018-09-20

Similar Documents

Publication Publication Date Title
WO2017056429A1 (ja) 情報処理装置、情報処理方法、およびプログラムが格納された記録媒体
WO2017056436A1 (ja) 情報処理装置、情報処理方法、およびプログラムが格納された記録媒体
US10621441B2 (en) Portable computing device installed in or mountable to a shopping cart
RU2727084C1 (ru) Устройство и способ определения информации о заказе
US20180253708A1 (en) Checkout assistance system and checkout assistance method
US20180039841A1 (en) Object Recognition for Bottom of Basket Detection
WO2019123714A1 (ja) 情報処理装置、商品推薦方法、およびプログラム
JP3837475B2 (ja) 自動化ショッピングシステム
JP5428356B2 (ja) 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム
JP5904054B2 (ja) 情報処理装置、値引登録方法、及びプログラム
CN112154488B (zh) 信息处理装置、控制方法和程序
WO2016136082A1 (ja) 情報処理装置、プログラム、及び制御方法
JP2023067923A (ja) 商品登録装置、制御方法、及びプログラム
US20150220964A1 (en) Information processing device and method of setting item to be returned
CN112508592A (zh) 区域转移预测装置及存储介质
JP6436225B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7251210B2 (ja) 情報処理装置、サーバ、情報処理システム、情報処理方法、および情報処理プログラム
JP7477664B2 (ja) 商品データ処理システム、及び商品データ処理方法
WO2023144992A1 (ja) 退店管理システム、退店管理方法、及び、記録媒体
JP7326004B2 (ja) 情報提供装置及び制御プログラム
WO2023188068A1 (ja) 商品数特定装置、商品数特定方法、及び記録媒体
WO2023187993A1 (ja) 商品数特定装置、商品数特定方法、及び記録媒体
JP6112241B2 (ja) 情報処理装置、値引登録方法、及びプログラム
JP2014067362A (ja) 商品販売データ処理システム、方法及びプログラム
TW201715478A (zh) 結帳支援裝置、結帳支援方法及程式

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16850610

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15763227

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16850610

Country of ref document: EP

Kind code of ref document: A1