WO2024070178A1 - 袋詰め支援装置、袋詰め支援方法、及び記録媒体 - Google Patents

袋詰め支援装置、袋詰め支援方法、及び記録媒体 Download PDF

Info

Publication number
WO2024070178A1
WO2024070178A1 PCT/JP2023/027413 JP2023027413W WO2024070178A1 WO 2024070178 A1 WO2024070178 A1 WO 2024070178A1 JP 2023027413 W JP2023027413 W JP 2023027413W WO 2024070178 A1 WO2024070178 A1 WO 2024070178A1
Authority
WO
WIPO (PCT)
Prior art keywords
purchased
bagged
bagging
purchased items
group
Prior art date
Application number
PCT/JP2023/027413
Other languages
English (en)
French (fr)
Inventor
剛 佐々木
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Publication of WO2024070178A1 publication Critical patent/WO2024070178A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/01—Details for indicating

Definitions

  • This disclosure relates to technology that assists in bagging.
  • Patent Document 1 describes a technology that notifies a customer of the storage position and registration order of each product in a storage container after purchase, based on product information.
  • One example of the objective of this disclosure is to provide technology that can assist with bagging purchased items.
  • the bagging support device includes a product information acquisition means for acquiring product information about products purchased by a customer, a classification means for classifying the purchased products into groups representing the order in which the purchased products will be placed into bags for carrying the purchased products home based on the product information, an image acquisition means for acquiring images of the purchased products contained in a basket or cart before and during the bagging operation, before being bagged, an identification means for identifying the bagged purchased products based on the images, and a display control means for displaying on a display unit purchased products included in at least one of the classified groups based on the bagged purchased products and the classification results.
  • a bagging support method includes a computer acquiring product information of products purchased by a customer, classifying the purchased products into groups representing the order in which the purchased products will be placed into bags for carrying the purchased products home based on the product information, acquiring images of the purchased products stored in a basket or cart before and during the bagging process before being bagged, identifying the bagged purchased products based on the images, and displaying on a display unit the purchased products included in at least one of the classified groups based on the bagged purchased products and the results of the classification.
  • a recording medium records a program that causes a computer to execute the following processes: acquire product information of products purchased by a customer; classify the purchased products based on the product information into groups that represent the order in which the purchased products will be placed into bags for carrying the purchased products home; acquire images of the purchased products stored in a basket or cart before and during the bagging process, before being bagged; identify the bagged purchased products based on the images; and display on a display unit the purchased products included in at least one of the classified groups.
  • One example of the benefits of this disclosure is that it can assist with bagging purchased items.
  • FIG. 1 is a block diagram showing a configuration of a bagging support device according to an embodiment.
  • FIG. 11 is a diagram showing an example of a classification result in the embodiment.
  • FIG. 4 is a diagram showing an example of a display screen in the embodiment.
  • FIG. 4 is a diagram showing an example of a display screen in the embodiment.
  • FIG. 4 is a diagram showing an example of a display screen in the embodiment.
  • FIG. 4 is a diagram showing an example of a display screen in the embodiment. 4 is a flowchart showing an example of the operation of the bagging support device in the embodiment.
  • FIG. 13 is a block diagram showing a configuration of a bagging support device in a first modified example.
  • FIG. 11 is a block diagram showing a configuration of a bagging support device in a second modified example.
  • FIG. 2 is a diagram showing a hardware configuration in which the bagging support device according to the present disclosure is realized by a computer device and its peripheral devices.
  • bagging refers to the task of transferring products purchased by a customer at a store from a container such as a basket or cart used in the store to another container such as a bag, basket, or basket for take-out.
  • a container such as a basket or cart used in the store
  • another container such as a bag, basket, or basket for take-out.
  • the containers used in the store and the containers for take-out are not limited to these examples.
  • Fig. 1 is a block diagram showing the configuration of a bagging support device 100 according to an embodiment.
  • the bagging support device 100 includes a product information acquisition unit 101, a classification unit 102, an image acquisition unit 103, an identification unit 104, and a display control unit 105.
  • the terminal device has a camera for scanning barcodes, a display for displaying a list of purchased items and product prices, and a communication function for communicating with a POS (Point of Sales) server (not shown).
  • the terminal device may be connected to a scanner for scanning barcodes.
  • the terminal device may be a POS terminal device attached to a cart or basket, or a mobile terminal owned by the customer.
  • customers scan the barcodes of products as they shop around the store.
  • the terminal device used for self-scan shopping then performs a product registration process to register the scanned products as purchased products.
  • the customer then places the scanned purchased products in a cart or basket.
  • the bagging support device 100 may be included in a terminal device used for self-scan shopping.
  • the bagging support device 100 may be connected to the terminal device via a network as a server.
  • the functions of the bagging support device 100 may be realized by processing between the terminal device and the server.
  • the product information acquisition unit 101 is an example of an acquisition means for acquiring product information of products purchased by a customer.
  • the product information acquisition unit 101 acquires product information for each product purchased by a customer in a store.
  • the product information includes information representing indicators for the classification unit 102 to classify the purchased products into groups representing the order of bagging, which will be described later.
  • the indicators are the size, weight, and load capacity of the product. These indicators may be expressed as specific numerical values or several levels. For example, the size of the product may be expressed in units of 5 cm. Also, for example, the weight and load capacity of the product may be expressed in units of 10 g or as "large", “medium”, “small”, etc. Examples of indicators expressed in several levels are not limited to these.
  • the classification unit 102 extracts information representing one or more indicators of the size, weight, and load capacity of the product from the product information.
  • the load capacity of the product is the weight that the product can withstand while remaining in good condition when another product is placed on top of it.
  • the good condition of the product is, for example, a state in which the product is not crushed or damaged.
  • the product information may further include information indicating attributes of the purchased product, such as the shape of the product, the category of the product, the fragility of the product, the strength of the product's odor, or the storage temperature of the product, as indicators for the classification unit 102 to classify the purchased products into groups representing the order of bagging.
  • the shape of the product may be, for example, a rectangular parallelepiped, a cube, or a sphere, or the presence or absence of thorns.
  • the category of the product may be, for example, food or daily necessities, fresh food or processed food, or detergent, paper, or other daily necessities.
  • the fragility of the product, the strength of the product's odor, and the storage temperature of the product may be expressed as specific numerical values or several levels.
  • the product information may also include the name of the purchased product, or a product image that represents the purchased product.
  • the product image may be an image of the purchased product that has been photographed in advance, an image of the product extracted from an image acquired by the image acquisition unit 103 described below, or an illustration that can identify the product.
  • the product information may also include information that indicates the price of the product and a limit on the number of products that can be purchased, as information to be used in the settlement of the purchased product.
  • the product information acquisition unit 101 acquires product information of the purchased product from a product information database provided outside or inside the bagging support device 100, using product identification information for identifying the purchased product scanned during self-scan shopping.
  • the product identification information is included in the barcode beforehand.
  • the camera of the terminal device or a scanner connected to the terminal device acquires the product identification information by reading the barcode.
  • the timing at which the product information acquisition unit 101 acquires product information on purchased products is not particularly limited.
  • the product information acquisition unit 101 may acquire product information during shopping, i.e., before checkout.
  • the product information acquisition unit 101 may acquire only product information from the product information database during shopping, such as the product name and product price, that is used for product registration or checkout related to the purchase of the product.
  • the product information acquisition unit 101 may acquire product information to be used for bagging assistance using product identification information before the start of the bagging assistance operation.
  • the product information to be used for bagging assistance includes the size, weight, and load capacity of the product.
  • the sorting unit 102 is an example of a sorting means that sorts purchased items into groups that represent the order in which the purchased items will be put into bags for carrying the purchased items home, based on the acquired product information.
  • the sorting unit 102 sorts the purchased items into groups that represent the order in which the purchased items will be bagged, based on the indices described above. For example, the sorting unit 102 sorts the purchased items into groups that represent the order in which the purchased items will be bagged, using the size, weight, and load capacity of each purchased item. Two examples of specific processing methods for sorting will be described later.
  • the groups that represent the order in which the purchased items will be bagged, as sorted by the sorting unit 102 are sometimes referred to as bagging groups.
  • the bagging group is a group classified according to the position in the bag where the overlapping purchased items should be located from the bottom to the top in order to bring the purchased items home in good condition.
  • the classification unit 102 classifies the positions in the bag from the bottom to the top based on the above-mentioned index.
  • the bagging work goes smoothly if the purchased items that should be placed in the bottom layer are placed first. Therefore, the bagging groups are ordered such that the group of purchased items that should be placed in the bottom layer is the group of purchased items that should be bagged first, and the group of purchased items that should be placed in the top layer of the previous group is the group of purchased items that should be bagged after the group of purchased items that should be bagged first.
  • the group of purchased items that should be bagged last is the group of purchased items that should be placed in the top layer, or the group of purchased items that may be placed anywhere in the bag.
  • the purchased items that may be placed anywhere in the bag are, for example, purchased items that are small and therefore may be placed anywhere, and are light and therefore do not damage other purchased items.
  • the bagging group is, for example, a group of purchased items that should be bagged first, a group of purchased items that should be bagged after the group of purchased items that should be bagged first, and a group of purchased items that should be bagged last.
  • the number of groups of purchased items that should be bagged after the group of purchased items that should be bagged first is not limited. That is, the number of groups that represent the bagging order is two or more.
  • the group of purchased items that should be bagged first may be group 1
  • the group of purchased items that should be bagged after the group of purchased items that should be bagged first may be group 2
  • the group of purchased items that should be bagged last may be group 3.
  • the sorting unit 102 may determine the number of groups to be bagged according to the number of purchased items or the number of types of purchased items. In this case, a lower limit on the number of purchased items to be included in a group may be set in advance. This is because, when a group contains a large number of purchased items, it is less likely that all of the purchased items to be removed from the basket or cart before bagging are in a location that is difficult to remove from the basket or cart. This is because, when a group contains a large number of purchased items, it is considered that customers are more likely to select purchased items that are easy to remove from the group of purchased items to be removed.
  • the sorting unit 102 may decide not to sort the purchased items into a group in the order in which they should be packed.
  • the result of classification includes information that identifies the groups, the order in which each group is to be packed, and the purchased products included in each group.
  • the result of classification includes, for example, information indicating that group 1, which is the group of purchased products that should be packed first, contains three products A, one product B, and one product C.
  • group 2 which is the group of purchased products that should be packed next to the group of purchased products that should be packed first, and group 3, which is the group of purchased products that should be packed last.
  • the result of classification is not limited to the example of FIG. 2.
  • the number of groups may be other than 3.
  • the number of purchased products included in a group may be other than 3 or 4.
  • the information indicating the purchased products may be product names or product identification information.
  • the result of classification may include product information and images of the purchased products.
  • One example of a classification processing method is to determine the order in which purchased items are to be bagged, divide the determined order, and group each of the divided purchased items.
  • the sorting unit 102 first determines the order in which the purchased items are to be bagged.
  • the sorting unit 102 determines the order in which the purchased items are to be bagged based on the size, weight, and load capacity of the items, which are examples of indices used for sorting. For example, the sorting unit 102 determines the order in which the purchased items are to be bagged so that items with larger size, weight, and load capacity are bagged first.
  • which index is to be given priority in determining the order may be determined in advance.
  • the sorting unit 102 may determine the order in which the purchased items are to be bagged by arranging each purchased item in order of the size of the y value. In addition, the sorting unit 102 may determine the order in which the purchased items are to be bagged so that items with smaller load capacity and size are bagged later.
  • the method of determining the order of packing and the product information used to determine the order of packing are not limited to this example, and any known method may be used.
  • the sorting unit 102 may further use the dimensions of the bag to be packed, acquired by the bag information acquisition unit 206 described later, to determine the position to put the purchased products in.
  • the sorting unit 102 determines the combination of positions in the bag based on the product information and combination conditions.
  • the combination conditions may include, for example, placing products with larger size, weight, and load capacity at the bottom according to the dimensions of the bag, and in a combination of products arranged vertically, the load capacity of the product arranged at the bottom exceeds the weight of the product arranged at the top.
  • the combination conditions may also include not placing a product on top of a fragile product, and in a combination of products arranged nearby, the difference in storage temperature of the products is within a predetermined value.
  • the sorting unit 102 may determine the order of packing starting from the product whose determined position is at the bottom.
  • the sorting unit 102 divides the determined order and groups each divided purchased item.
  • the sorting unit 102 may, for example, determine the order division so that each group contains an equal number of purchased items. Also, for example, the sorting unit 102 may divide the order based on a large difference in any of the product size, product weight, and product load capacity between the purchased items before and after the order.
  • a classification method is a method of classifying according to a threshold value for product size, a threshold value for product weight, and a threshold value for product load capacity.
  • the classification unit 102 classifies purchased products into each bagging group so that each purchased product conforms to the number of bagging groups and the upper and lower limits for product size, product weight, and product load capacity set for each bagging group.
  • the upper and lower limits for product size, product weight, and product load capacity for each bagging group may be determined in advance according to the number of groups.
  • the classification unit 102 may classify the purchased items into groups according to the order of bagging, according to the height at which the purchased items are to be placed in the bag, based on the positions at which the purchased items are to be placed determined as described above.
  • the image acquisition unit 103 is an example of an image acquisition means that acquires images of purchased items stored in a basket or cart before and during the bagging operation.
  • the image acquisition unit 103 acquires images of purchased items stored in a basket or cart before being bagged from a camera (not shown).
  • the camera may be, for example, a camera on a terminal used for self-scan shopping, a security camera installed in a store, or a camera installed on a bagging workbench in a store.
  • the camera captures an image of the shooting range including the basket or cart from above.
  • above refers to the open side of the basket or cart.
  • an image of purchased items contained in the basket or cart before they are bagged will show the purchased items at the top of the basket or cart. Items at the top are items that are easiest for customers to pick up.
  • the image acquisition unit 103 acquires an image of the purchased items contained in the basket or cart before they are bagged.
  • "Before the bagging” refers to the point in time before the customer has completed product registration and payment and begins the task of transferring the purchased items into bags for take-home.
  • the image before the bagging is captured by the camera after product registration is completed or payment is completed, and the image acquisition unit 103 acquires the captured image.
  • the image acquisition unit 103 instructs the camera to capture an image.
  • the camera captures an image of the purchased items in the basket or cart before they are bagged, and transmits the captured image to the image acquisition unit 103.
  • the image acquisition unit 103 acquires images of the purchased items stored in the basket or cart before they are bagged during the bagging process.
  • the period during which the bagging process is in progress is the period from when the customer completes product registration and payment until the customer finishes the process of transferring the purchased items into bags for take-out, or the period from when the customer starts transferring the purchased items into bags for take-out until the customer finishes the process.
  • the image acquisition unit 103 may acquire images during the bagging work at a predetermined time interval.
  • the predetermined time interval may be, for example, every 1 second, every 0.1 second, etc.
  • the image acquisition unit 103 may be a camera that captures images, or a communication unit that is connected to a camera and acquires the captured images from the camera.
  • the image acquisition unit 103 connected to a camera may also have a control function that controls the camera's capture and image transmission. If the image acquisition unit 103 is a camera, the image acquisition unit 103 captures images at a predetermined time interval. If the image acquisition unit 103 is a communication unit that is connected to a camera and acquires the captured images from the camera, the images captured at the predetermined time interval may be acquired at any time.
  • images at a predetermined time interval may be acquired from continuously captured images. If the image acquisition unit 103 has a control function that controls the camera's capture and image transmission, images at a predetermined time interval may be acquired by having the camera capture and transmit the images at the predetermined time interval.
  • the image acquisition unit 103 may acquire images at the timing when there is a change in the images taken of the purchased items in the basket or cart during the bagging work.
  • the camera detects that there has been movement of an object in the basket or cart within the range that the camera itself is capturing. The camera may then transmit images captured before and after the detected movement to the image acquisition unit 103.
  • the objects related to the images to be acquired during the bagging work are the purchased items and the hands of the customer bagging the items. The camera detects movement of the purchased items or the hands. The camera may then transmit images captured before and after the movement to the image acquisition unit 103.
  • the image acquisition unit 103 may acquire images of take-out bags, etc. during the bagging process.
  • the identification unit 104 is an example of an identification means for identifying bagged purchased products based on an acquired image.
  • the bagged purchased products identified by the identification unit 104 are purchased products that have been transferred from a basket or cart used for shopping around the store to a bag or the like for takeaway.
  • the identification unit 104 identifies bagged purchased products based on at least one of the acquired images, an image of a basket or cart containing the purchased products before bagging, and an image of a bag or the like containing the bagged purchased products.
  • an image of a basket or cart containing the purchased products before bagging there is an advantage that the purchased products in the basket or cart are more likely to appear in the image compared to purchased products contained in a bag or the like.
  • bagged purchased products are identified using an image of a bag or the like containing the bagged purchased products, there is an advantage that purchased products that have been removed from the basket or cart but not bagged can be avoided from being identified as bagged purchased products.
  • the identification unit 104 compares two images captured in chronological order, and identifies purchased items that are included in the image captured earlier and not included in the image captured later as purchased items that have been bagged. Purchased items that are included in the image captured earlier and not included in the image captured later are presumed to have been moved from the basket or cart. In other words, the identification unit 104 may identify purchased items that have been removed from the basket or cart as purchased items that have been bagged. Note that the two images captured in chronological order do not need to be two images captured consecutively, as long as they are in chronological order.
  • the identification unit 104 may identify, for example, a purchased item included in a group of purchased items to be bagged next to the purchased item identified as bagged, which is included in the image captured earlier and is not included in the image captured later, as a bagged purchased item.
  • the other is a group of purchased items to be bagged after the group of purchased items identified as bagged, when there is no purchased item that is included in the same group as the purchased item identified as bagged and is not identified as bagged.
  • the identification unit 104 may identify, as a bagged purchased item, a purchased item included in the group of purchased items to be currently bagged, among the purchased items that are included in the image captured earlier and are not included in the image captured later. The method by which the identification unit 104 identifies the group of purchased items that are currently to be packed will be described later.
  • the identification unit 104 may identify, among purchased items that are included in the image captured earlier and not included in the image captured later, purchased items that are included in a group of purchased items that are to be bagged after the group of purchased items that are currently to be bagged, as purchased items that are temporarily placed, rather than bagged.
  • Temporary placement means that a customer temporarily places a purchased item that is above in a basket or cart on a bagging work table or the like in order to take a purchased item that is below.
  • identification methods can improve the accuracy of identifying the bagged purchased items. For example, if a purchased item that is not part of the group of purchased items currently to be bagged is obscured by another purchased item that has changed position in the basket or cart, the identification unit 104 can be prevented from identifying the obscured purchased item as a bagged purchased item.
  • the identification unit 104 may also identify temporary items based on the images acquired by the image acquisition unit 103, the results of classification, and information on purchased items identified as bagged. For example, the identification unit 104 identifies purchased items that are placed at the top of a basket or cart included in an image captured during the bagging process and that are included in a group of purchased items that should be bagged later than the group currently being bagged as temporary items. Because the image is captured from the top of the basket or cart, purchased items that are at the top of the basket or cart are purchased items that appear in the image. In the following description, purchased items that are placed at the top of a basket or cart and that are included in a group of purchased items that should be bagged later than the group currently being bagged are referred to as temporary items.
  • the identification unit 104 identifies the purchased product shown in the image. Then, based on the information of the purchased product identified as being bagged, the identification unit 104 identifies which group of the classification results corresponds to the group of purchased products that should currently be bagged. Based on the classification result and the information of the identified group of purchased products that should currently be bagged, the identification unit 104 identifies whether the identified purchased product is included in the group of purchased products that should currently be bagged, or in the group of purchased products that should be bagged later. If the purchased product shown in the image is included in the group of purchased products that should be bagged later, the identification unit 104 identifies the purchased product as a temporarily placed product. The process of identifying a temporarily placed product is not limited to this example.
  • the identification unit 104 identifies a group of purchased items to be currently packed based on the purchased items identified as already packed and the classification results. More specifically, the identification unit 104 first determines whether there are any purchased items identified as already packed. If it is determined that there are no purchased items identified as already packed, that is, if the customer has not yet started the bagging operation, the identification unit 104 identifies that the group of purchased items to be currently packed is the group of purchased items to be first bagged.
  • the identification unit 104 determines whether there are any purchased items that have not been determined to be bagged in the bagging group to which the purchased item identified as last bagged belongs. If there is a purchased item that belongs to the same group as the purchased item identified as last bagged and has not yet been identified as bagged, the identification unit 104 identifies the same group as the purchased item identified as last bagged as the group of purchased items to be currently bagged.
  • the identification unit 104 identifies the group of purchased items that should be bagged next after the group of purchased items identified as being bagged as the group of purchased items that should currently be bagged.
  • the identification unit 104 may identify a purchased item that is being held by a customer in an image as a purchased item that has been removed from a basket or cart.
  • the identification unit 104 may extract images that include the customer's hands from images acquired at a predetermined time interval. The identification unit 104 may then identify the purchased item being held by the customer's hands from the extracted images.
  • a method of increasing the accuracy of identification based on a group of purchased items that are currently to be packed in a bag, a method of using an image of a bag or workbench other than a basket or cart, or a method of identifying a temporarily placed item may be applied.
  • the methods of identifying a purchased item that has been packed in a bag are not limited to these.
  • the identification unit 104 may identify that packing is complete for that group.
  • the terminal device may include a means for receiving an input of the completion of packing for each packing group, and the identification unit 104 may identify that packing of the purchased items included in the packing group is complete when the means receives an input of completion from the customer.
  • Information on a group identified as having been bagged may be used for display control by the display control unit 105, which will be described later.
  • the identification unit 104 may determine that all purchased items have been bagged. For example, the identification unit 104 may determine that all purchased items have been bagged when the image of the basket or cart does not include any purchased items. Also, for example, the identification unit 104 may determine that all purchased items have been bagged when a comparison result between the bagged purchased items identified by the identification unit 104 and the purchased items acquired by the product information acquisition unit 101 matches. The identification unit 104 may determine that a comparison result between the bagged purchased items identified by the identification unit 104 and the purchased items acquired by the product information acquisition unit 101 does not match. If the comparison results do not match, there is a possibility that the identification of the bagged purchased items or the product registration of the purchased items has not been performed accurately.
  • the identification unit 104 may identify the bagged purchased items based on the image.
  • the identification unit 104 may identify the bagged purchased items in the same manner as the method of identifying purchased items removed from a basket or cart. For example, the identification unit 104 may compare two images taken in chronological order, and identify a purchased item that is not included in the image taken earlier and is included in the image taken later as a bagged purchased item.
  • the identification unit 104 can accurately identify the bagged purchased item.
  • An example of a case where a purchased item is removed from a basket or cart but not put in a bag is when a customer temporarily places a purchased item above the purchased item in the basket or cart on a bagging work table in order to take a purchased item that is vertically lower in the basket or cart.
  • the display control unit 105 is an example of a display control means that displays on the display unit purchased items included in at least one of the groups classified based on the bagged purchased items and the classification results.
  • the classification results are the results of classification by the classification unit 102, as exemplified in FIG. 2.
  • the display control unit 105 displays on the display unit each group and the purchased items included in each group.
  • the display control unit 105 displays on the display unit purchased items included in each group that have not been specified as bagged.
  • the display control unit 105 may display on the display unit at least purchased items included in the group of purchased items that are currently to be bagged, among the purchased items included in each group.
  • the display control unit 105 may display on the display unit purchased items included in the group of purchased items that are currently to be bagged, and purchased items included in the group of purchased items that are to be bagged after the group of purchased items that are currently to be bagged.
  • the group of purchased items to be bagged after the group of purchased items to be currently bagged may be only the group of purchased items to be bagged immediately after the group of purchased items to be currently bagged, or may be part or all of the group of purchased items to be bagged after the group of purchased items to be currently bagged.
  • the display control unit 105 may further cause the display unit to display a group of purchased items that have already been bagged.
  • the display control unit 105 first displays each group on the display unit based on the classification results before the start of the bagging work.
  • Figure 3 is an example of a display screen before the start of the bagging work. Details of Figure 3 will be described later.
  • the display control unit 105 may display the group of purchased items currently to be bagged in a manner that is easy for the customer to recognize.
  • the method of displaying the purchased items and bagging groups in a manner that is easy for the customer to recognize is not limited to the example of Figure 3.
  • the display control unit 105 may change the display of purchased items identified as being bagged to indicate that bagging of the purchased items has been completed.
  • FIG. 4 is an example of a screen indicating that bagging of purchased items has been completed. Details of FIG. 4 will be described later.
  • the display control unit 105 may change the display, such as by changing the display color of items that have been bagged or deleting items that have been bagged, so that a customer performing the bagging operation can recognize purchased items that have already been bagged.
  • the display control unit 105 may also change the display of the group for which bagging has been completed, by receiving information from the identification unit 104 about a group identified as having completed bagging, to indicate that bagging of all purchased items included in the group has been completed.
  • FIG. 5 is an example of a screen indicating that bagging of purchased items included in bagging group 1 has been completed. Details of FIG. 5 will be described later.
  • the display control unit 105 may change the display, such as by changing the display color of a bagged group for which bagging has been completed or deleting items for which bagging has been completed, so that a customer performing the bagging operation can recognize a bagged group that has already been bagged.
  • the display control unit 105 may cause the display unit to display a screen indicating that bagging has been completed. Also, when the identification unit 104 determines that the comparison result between the bagged purchased items identified by the identification unit 104 and the purchased items acquired by the product information acquisition unit 101 does not match, the display control unit 105 may cause the display unit to display that there are items that were not scanned or that were scanned excessively. Also, for example, when the comparison result between the bagged purchased items identified by the identification unit 104 and the purchased items acquired by the product information acquisition unit 101 does not match, the bagging support device 100 may send a call notification to a store clerk's terminal or the like.
  • the display control unit 105 may display a screen instructing the customer to input information to confirm that there are no problems with the product registration and bagging. This makes it possible to prevent a store clerk from being notified and causing inconvenience to the customer when a mistake is made in identifying the bagged purchased product.
  • the display control unit 105 may also display guidance to temporarily place purchased items that are placed at the top of the basket or cart included in the image captured during the bagging work and are included in a group of purchased items that should be bagged after the group currently being bagged. Purchased items that are placed at the top of the basket or cart included in the image captured during the bagging work and are included in a group of purchased items that should be bagged after the group currently being bagged are the temporarily placed items described above. The temporarily placed items are identified by the identification unit 104.
  • the display control unit 105 may display a guide to temporarily place the temporary placement item.
  • the display control unit 105 may display a guide to temporarily place the temporary placement item.
  • Figure 6 is an example of a screen that displays guidance for temporarily placing a purchased product that is a temporary placement product.
  • a guidance saying "Please temporarily place a cabbage” and a product image of a cabbage surrounded by a frame are displayed.
  • These are examples of guidance for temporarily placing a purchased product.
  • the display control unit 105 only needs to display the purchased product identified by the identification unit 104 as a temporary placement product and the guidance for temporarily placing the temporary placement product in a manner that is recognizable to the customer.
  • FIG. 7 is a flowchart showing an overview of the operation of the bagging support device 100 in this embodiment.
  • the product information acquisition unit 101 acquires product information about the product purchased by the customer (step S101).
  • the classification unit 102 classifies the purchased items into groups according to the order in which they will be bagged, based on the product information acquired in step S101 (step S102).
  • the display control unit 105 displays on the display unit the group of purchased products currently to be packed, as identified by the identification unit 104 (step S103).
  • the display control unit 105 displays on the display unit the group of purchased products currently to be packed, based on the result of the classification and the information indicating the identified group of purchased products currently to be packed.
  • the example screen in FIG. 3 is a screen before the customer starts the packing operation.
  • the screen displays each packing group, which is the result of classification by the classification unit 102, and the images or product names of the purchased products, which is information indicating the purchased products in each packing group.
  • packing group 1, packing group 2, and packing group 3 are included.
  • each group includes purchased products.
  • packing group 1 is displayed large, and in packing group 2 and packing group 3, the purchased products are displayed only as images, while in packing group 1, the purchased products are displayed as images and product names.
  • the display control unit 105 may display the purchased products included in the group of purchased products currently to be packed so that the customer can easily recognize them. Additionally, packing group 1 is displayed larger on the screen than packing group 2 and packing group 3.
  • the image acquisition unit 103 acquires images of the purchased items contained in the basket or cart before they are bagged (step S104).
  • the identification unit 104 identifies the bagged purchased items based on the image acquired in step S104 (step S105).
  • the identification unit 104 determines whether the packing of the purchased items has been completed (step S106). If packing has not been completed, the packing support device 100 continues the operations from step S103 to step S106 until packing is completed. If the operation proceeds from step S106 to step S103, the display control unit 105 may change the display of the purchased items or the group of packing order according to the information of the purchased items identified as being packed.
  • step S103 when the operation proceeds from step S106 to step S103, the display control unit 105 changes the display of the purchased items, for example, based on the information of the purchased items identified as having been bagged.
  • An example of the display change of the purchased items is shown in FIG. 4.
  • FIG. 4 two bottles of milk (1 L) are displayed in gray.
  • FIG. 4 shows that the display of the two bottles of milk (1 L) identified as having been bagged by the identification unit 104 has been changed.
  • This is an example of a display change indicating that the two bottles of milk (1 L) have already been bagged.
  • the method of display change of purchased items identified as having been bagged is not limited to this example.
  • step S103 when the operation proceeds from step S106 to step S103, the display control unit 105 may change the display of the group in the bagging order based on the information of the group identified as having completed bagging, for example.
  • bagging group 1 is displayed in gray.
  • bagging group 2, which is a group of purchased products to be bagged after bagging group 1 is displayed larger than bagging group 1 and bagging group 3, and bagging group 1 is displayed smaller than bagging group 2.
  • FIG. 3 which is an example of a display screen before the start of the bagging work
  • FIG. 5 the display of the group in the bagging order identified as having been bagged by the identification unit 104 has been changed.
  • the method of changing the display of the group in the bagging order identified as having been bagged is not limited to this example.
  • the identification unit 104 determines that the packing of the purchased items has been completed (step S106). If it is determined that packing has been completed, the packing support device 100 ends the series of operations.
  • the product information acquisition unit acquires product information of purchased products
  • the classification unit classifies the purchased products into groups that represent the order in which the purchased products will be placed into bags for carrying the purchased products home.
  • the image acquisition unit acquires images of the purchased products contained in a basket or cart before and during the bagging work, before being bagged, and the identification unit identifies the bagged purchased products based on the images.
  • the display control unit causes the display unit to display purchased products included in at least one of the classified groups based on the bagged purchased products and the results of the classification.
  • customers who are bagging their purchased items can refer to the bagging group displayed on the display unit and bag the purchased items, eliminating the need for customers to consider the order in which to bag the purchased items.
  • the bagging support device can support the bagging of purchased items.
  • the sorting unit sorts the purchased items into groups according to the order in which they will be bagged.
  • the bagging support device in this embodiment can present multiple candidates for purchased items that the customer should remove from the basket or cart. This allows the customer who is bagging to select and remove items other than the purchased items that must be removed from the bottom of the basket or cart.
  • a cash register other than that for self-scan shopping is a cash register where a store clerk processes everything from product registration to payment, a semi-self-service cash register where a store clerk registers products and a customer processes payment, or a full-self-service cash register where a customer processes everything from product registration to payment.
  • the bagging support device 100 is a terminal device owned by the customer, or a terminal device installed on a workbench or cash register counter in a store.
  • the store clerk may also bag the items.
  • the bagging support device 100 may be included in a POS terminal used by the store clerk as a cash register.
  • the bagging support device 100 may be a terminal device installed near the cash register.
  • the display unit may be the display of a POS terminal device used by the store clerk as a cash register.
  • the display unit may be the display of a terminal device installed near the cash register.
  • the bagging support device 100 performs operations in which the customer in the embodiment is interpreted as a store clerk.
  • the product information acquisition unit 101 may acquire information on the purchased items registered in the terminal device that is also the POS terminal device that registered the items.
  • the product information acquisition unit 101 may acquire, for example, an identification number such as a customer's point card. The product information acquisition unit 101 may then acquire product information on the purchased items associated with the identification number.
  • the product information acquisition unit 101 may acquire product information on the purchased items associated with the identification number, regarding purchased items purchased on the same day or purchased items registered at the register within a predetermined time such as one hour as purchased items to be bagged.
  • the product information acquisition unit 101 may read a receipt and acquire product information on purchased items associated with the identification number on the receipt or purchased items associated with a product identification number read directly from the receipt.
  • the image acquisition unit 103 acquires images of purchased items stored in a basket or cart before and during the bagging operation, before they are bagged. For example, purchased items stored in a basket or cart before they are bagged before they are bagged may be photographed by a camera installed near the cash register where the items are registered.
  • FIG. 8 is a block diagram showing the configuration of a bagging support device according to the first modification of the present disclosure.
  • the bagging support device 200 of the first modification includes a bag information acquisition unit 206 in addition to the configuration of the embodiment.
  • the bag information acquisition unit 206 is an example of a bag information acquisition means for acquiring bag information.
  • the bag is a bag for take-out, etc., as described above.
  • the bag information includes the size, capacity, and load capacity of the bag.
  • the load capacity of the bag is the weight of contents that can be carried in the bag.
  • the bag information may include the material of the bag instead of the load capacity of the bag. In this case, the load capacity of the bag can be estimated from the load capacity per unit area of the material of the bag and the size of the bag.
  • the bag information acquisition unit 206 acquires bag information stored in association with the product identification number of the purchased bag included in the purchased product.
  • the bag information acquisition unit 206 may estimate bag information based on an image taken by the customer.
  • the bag information acquisition unit 206 may acquire information on the bag used by the customer that is registered in advance in association with the customer identification number of a point card, etc.
  • the customer may place the purchased items in one or more bags to take home.
  • the bag information acquisition unit 206 may determine whether the purchased items can be placed in one bag based on the bag information and the product information of the purchased items. For example, the bag information acquisition unit 206 may determine that the purchased items can be placed in one bag if the size of the bag is larger than the total size of the purchased items. Alternatively, the bag information acquisition unit 206 may determine that the purchased items can be placed in one bag if the load capacity of the bag is larger than the total weight of the purchased items.
  • the bag information acquisition unit 206 may acquire further bag information. For example, when the bag information acquisition unit 206 determines that the purchased items cannot be placed in one bag, it may guide the customer to take an image of the bag or a barcode of the bag.
  • the sorting unit 102 sorts the purchased items into groups for each bag according to the order in which they will be put in the bag. For example, the sorting unit 102 sorts the purchased items so that the weights are equal for each bag based on the product information. The sorting unit 102 may sort the purchased items into groups according to the order in which they will be put in the bag, and then sort the purchased items to be put in each of the multiple bags. Alternatively, the sorting unit 102 may sort the purchased items to be put in each of the multiple bags, and then sort each bag into groups according to the order in which they will be put in the bag.
  • the sorting unit 102 may sort the purchased products to be placed in each of the multiple bags by product attribute based on the product information.
  • the product attribute is, for example, the temperature of the product. If there are multiple bags, the sorting unit 102 sorts hot products and cold products into different bags. In this case, products at room temperature may be sorted into either a bag containing hot products or a bag containing cold products. Further, for example, the product attribute is the product category. If there are multiple bags, the sorting unit 102 may sort daily necessities and groceries into different bags. Furthermore, the sorting unit 102 may sort only purchased products that are fragile or easily crushed into the smallest bag out of the multiple bags. In this case, if there are multiple remaining bags, the sorting unit 102 sorts the other purchased products into the respective bags. Furthermore, the sorting unit 102 sorts each bag into a group according to the order in which they will be placed in the bag.
  • the display control unit 105 may cause the display unit to display the group of purchased items to be bagged first and the bag that will be bagged first.
  • the display control unit 105 causes the display unit to display the group of purchased items to be bagged first and the bag that will be bagged first, such as "Daily necessities will be bagged first in bag A.”
  • the bags may be indicated by text information indicating characteristics such as color, material, shape, size, etc., a photographed image, a name set in advance by the customer, or the like.
  • information indicating the bag may be acquired by the bag information acquisition unit 206 as bag information.
  • the bagging assistance device in this modified example described above can assist with bagging even when multiple bags are used.
  • FIG. 9 is a block diagram showing the configuration of a bagging support device according to the second modification of the present disclosure.
  • the bagging support device 300 of the second modification includes a determination unit 307 in addition to the configuration of the embodiment.
  • the determination unit 307 is an example of a determination means for determining whether or not to provide bagging support.
  • the determination unit 307 determines to provide bagging support based on the item information when the number of purchased items is a predetermined number or more, or the number of types of purchased items is a predetermined number or more.
  • the predetermined numbers may each be set in advance to a single value or a value for each customer.
  • the predetermined numbers are, for example, integer values such as 4, 5, etc.
  • the decision unit 307 decides whether or not to perform bagging assistance after the product information acquisition unit 101 acquires product information of the purchased product. Then, if it is decided to perform bagging assistance, the bagging assistance device 300 proceeds to the operations subsequent to the acquisition of product information in the bagging assistance described in the embodiment.
  • the decision unit 307 may decide whether or not to provide bagging assistance based on the customer's input. For example, the decision unit 307 displays two buttons, one for providing bagging assistance and the other for providing bagging assistance, on the touch panel display of the terminal device. Then, the decision unit 307 decides whether or not to provide bagging assistance, according to the customer's input on the touch panel display. When deciding whether or not to provide bagging assistance in this manner, the decision unit 307 displays, as an initial screen, a screen on the display unit that allows the customer to input whether or not to provide bagging assistance. Then, if it is decided that bagging assistance will be provided, the bagging assistance device 300 proceeds to the bagging assistance operation described in the embodiment.
  • the display control unit 105 may, for example, return the display on the display unit to an initial screen.
  • the initial screen is a screen that shows an operation to start the operation of the bagging assistance device, such as "touch the screen to start.”
  • the above-mentioned bagging support device can provide bagging support according to the need for bagging support. This prevents customers from finding the bagging support bothersome.
  • the information processing device 1000 includes, as an example, the following configuration.
  • I/F Input/output I/F 1010 for inputting and outputting data
  • bus 1011 that connects each component It should be noted that I/F is an abbreviation for Interface.
  • Each component of each device or system in each embodiment is realized by the CPU 1001 acquiring and executing a program that realizes these functions.
  • the programs that realize the functions of each component of each device are stored in advance in the storage device 1005 or RAM 1003, for example, and are read by the CPU 1001 as needed.
  • the program 1004 may be supplied to the CPU 1001 via a communications network, or may be stored in advance on the recording medium 1006, and the drive device 1007 may read the program and supply it to the CPU 1001.
  • each device may be realized by any combination of a separate information processing device 1000 and a program for each component.
  • multiple components that each device has may be realized by any combination of a single information processing device 1000 and a program.
  • each device may be realized by general-purpose or dedicated circuits including a processor, or a combination of these.
  • the circuits may be, for example, a CPU, a GPU (Graphics Processing Unit), an FPGA (Field Programmable Gate Array), or an LSI (Large Scale Integration).
  • the LSI may be, for example, an LSI dedicated to AI (Artificial Intelligence) processing. These may be configured by a single chip, or may be configured by multiple chips connected via a bus.
  • AI Artificial Intelligence
  • Some or all of the components of each device may be realized by a combination of the above-mentioned circuits and programs.
  • the multiple information processing devices, circuits, etc. may be centrally located or distributed.
  • the information processing devices, circuits, etc. may be realized as a client-server system, cloud computing system, etc., in a form in which each is connected via a communication network.
  • the multiple operations are described in sequence in the form of a flowchart, the order of description does not limit the order in which the multiple operations are performed. Therefore, when implementing each embodiment, the order of the multiple operations may be changed to the extent that does not interfere with the content.
  • Reference Signs List 100 Bagging support device 101
  • Product information acquisition unit 102
  • Classification unit 103
  • Image acquisition unit 104
  • Identification unit 105
  • Display control unit 200
  • Bagging support device 206
  • Bag information acquisition unit 300
  • Determination unit 1000
  • Information processing device 1001
  • CPU 1002
  • ROM 1003
  • Program 1005
  • Storage device 1006
  • Recording medium 1007
  • Drive device 1008
  • Communication I/F 1009 Communication network 1010 Input/output I/F 1011 Bus

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)

Abstract

袋詰め支援装置は、顧客の購入商品の商品情報を取得する商品情報取得手段と、商品情報に基づいて、購入商品を持ち帰るための袋に、購入商品を入れる袋詰めの順番を表すグループに、購入商品を分類する分類手段と、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する画像取得手段と、画像に基づいて、袋詰めされた購入商品を特定する特定手段と、当該袋詰めされた購入商品と、分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる表示制御手段と、を備える。

Description

袋詰め支援装置、袋詰め支援方法、及び記録媒体
　本開示は、袋詰めを支援する技術等に関する。
　特許文献１には、商品情報に基づいて、購入後の商品を収納体に収納するための商品それぞれの収納位置および登録順を通知する技術が記載されている。
特開２０１９－１７４８７８号公報
　しかしながら、特許文献１に記載の情報処理装置では、袋詰めをする者は、登録順に商品を探す必要がある。
　本開示の目的の一例は、購入商品の袋詰めを支援することができる技術を提供することにある。
　本開示の一態様における袋詰め支援装置は、顧客の購入商品の商品情報を取得する商品情報取得手段と、商品情報に基づいて、購入商品を持ち帰るための袋に、購入商品を入れる袋詰めの順番を表すグループに、購入商品を分類する分類手段と、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する画像取得手段と、画像に基づいて、袋詰めされた購入商品を特定する特定手段と、当該袋詰めされた購入商品と、分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる表示制御手段と、を備える。
　本開示の一態様における袋詰め支援方法は、コンピュータが、顧客の購入商品の商品情報を取得し、商品情報に基づいて、購入商品を持ち帰るための袋に、購入商品を入れる袋詰めの順番を表すグループに、購入商品を分類し、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得し、画像に基づいて、袋詰めされた購入商品を特定し、当該袋詰めされた購入商品と、分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる。
　本開示の一態様における記録媒体は、顧客の購入商品の商品情報を取得し、商品情報に基づいて、購入商品を持ち帰るための袋に、購入商品を入れる袋詰めの順番を表すグループに、購入商品を分類し、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得し、画像に基づいて、袋詰めされた購入商品を特定し、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる処理を、コンピュータに実行させるプログラムを記録する。
　本開示による効果の一例は、購入商品の袋詰めを支援できることである。
実施形態における、袋詰め支援装置の構成を示すブロック図である。 実施形態における、分類の結果の一例を示す図である。 実施形態における、表示画面の一例を示す図である。 実施形態における、表示画面の一例を示す図である。 実施形態における、表示画面の一例を示す図である。 実施形態における、表示画面の一例を示す図である。 実施形態における、袋詰め支援装置の動作の一例を示すフローチャートである。 変形例１における、袋詰め支援装置の構成を示すブロック図である。 変形例２における、袋詰め支援装置の構成を示すブロック図である。 本開示における袋詰め支援装置をコンピュータ装置とその周辺装置で実現したハードウェア構成を示す図である。
　本開示の実施形態について図面を参照して詳細に説明する。
　なお、本開示において、袋詰めとは、顧客が店舗において購入した購入商品を、店舗内で利用されるかご、カートなどの容器から、持ち帰りのための袋、バッグ、かごなどの別の容器に詰め替える作業のことである。なお、店舗内で利用される容器及び持ち帰りのための容器は、これらの例に限られない。
　　［実施形態］
　図１は、実施形態における袋詰め支援装置１００の構成を示すブロック図である。図１を参照すると、袋詰め支援装置１００は、商品情報取得部１０１と、分類部１０２と、画像取得部１０３と、特定部１０４と、表示制御部１０５と、を備える。
　実施形態では、顧客が店舗においてセルフスキャンショッピングを行う場合の袋詰め支援について説明する。セルフスキャンショッピングにおいて、顧客は、端末装置を利用する。端末装置は、バーコードをスキャンするカメラ、購入商品リストや商品の値段などを表示するディスプレイ、及び図示しないＰＯＳ（Ｐｏｉｎｔ　Ｏｆ　Ｓａｌｅｓ）サーバと通信を行う通信機能を備える。端末装置は、バーコードをスキャンするスキャナと接続されてもよい。また、端末装置は、カート又はかごに備え付けのＰＯＳ端末装置、又は、顧客が所有する携帯端末である。
　セルフスキャンショッピングにおいて、顧客は、店舗内で買い回りを行いながら、顧客自身が商品のバーコードをスキャンする。これにより、セルフスキャンショッピングに用いられる端末装置は、スキャンされた商品を購入商品として登録する商品登録の処理を行う。そして、顧客は、スキャンした購入商品をカート又はかごに入れる。
　実施形態において、袋詰め支援装置１００は、セルフスキャンショッピングに利用される端末装置に含まれてもよい。又は、袋詰め支援装置１００は、サーバとして、ネットワークを介して端末装置に接続されてもよい。また、袋詰め支援装置１００の機能は、端末装置とサーバとの処理によって実現されてもよい。
　次に、実施形態における袋詰め支援装置１００の構成について詳しく説明する。
　図１において、商品情報取得部１０１は、顧客の購入商品の商品情報を取得する取得手段の一例である。商品情報取得部１０１は、店舗において顧客が購入した購入商品それぞれの商品情報を取得する。
　商品情報は、後述する分類部１０２が袋詰めの順番を表すグループに購入商品を分類するため指標を表す情報を含む。例えば、指標は、商品の大きさ、商品の重さ及び商品の耐荷重である。これらの指標は、具体的な数値又は数段階のレベルで表されてよい。例えば、商品の大きさは、５ｃｍ単位で表されてよい。また、例えば、商品の重さ及び商品の耐荷重は、１０ｇ単位又は「大」「中」「小」などと表されてよい。なお、指標が数段階のレベルで表される例は、これらに限られない。分類部１０２は、商品の大きさ、商品の重さ及び商品の耐荷重のうち、一つ又は２つ以上の指標を表す情報を商品情報から抽出する。ここで、商品の耐荷重とは、商品の上に他の商品を載せられた場合に、商品が良い状態のままで耐えられる重さである。商品の良い状態とは、例えば、商品の潰れ及び破損がない状態である。また、商品情報は、分類部１０２が、袋詰めの順番を表すグループに購入商品を分類するための指標として、さらに、商品の形状、商品のカテゴリ、商品の壊れやすさ、商品のにおいの強さ又は商品の保存温度など、購入商品の属性を示す情報を含んでもよい。商品の形状は、例えば、直方体、立方体又は球体などの形状、棘の有無などである。商品のカテゴリは、例えば、食品若しくは日用品、生鮮食品若しくは加工食品、又は、洗剤、ペーパー類若しくはその他の日用品などである。また、商品の壊れやすさ、商品のにおいの強さ及び商品の保存温度は、具体的な数値又は数段階のレベルで表されてよい。また、商品情報は、購入商品の名称、又は購入商品を表す画像である商品画像を含んでもよい。商品画像は、予め撮影された購入商品の画像、後述する画像取得部１０３が取得した画像から商品を抜き出した画像、又は商品を識別可能なイラストであってよい。また、商品情報は、他にも、購入商品の精算に利用するための情報として、商品の価格、商品の購入数の制限を表す情報を含んでもよい。
　例えば、商品情報取得部１０１は、セルフスキャンショッピングにおいてスキャンされた購入商品を識別するための商品識別情報を利用して、袋詰め支援装置１００の外部又は内部に設けられる商品情報データベースから、購入商品の商品情報を取得する。商品識別情報は、予めバーコードに含まれる。前述の端末装置のカメラ又は端末装置に接続されるスキャナは、バーコードを読み取ることにより商品識別情報を取得する。
　商品情報取得部１０１が購入商品の商品情報を取得するタイミングは、特に限定されない。例えば、商品情報取得部１０１は、買い回り中、すなわち精算前に、商品情報を取得してもよい。また、例えば、商品情報取得部１０１は、買い回り中において、商品情報データベースから、商品情報のうち、商品の名称、商品の価格など、商品の購入に係る商品登録又は精算に利用される商品情報のみを取得してもよい。この場合、商品情報取得部１０１は、袋詰め支援の動作の開始前に、袋詰め支援に利用する商品情報を、商品識別情報を利用して取得すればよい。袋詰め支援に利用する商品情報は、商品の大きさ、商品の重さ、商品の耐荷重を含む。
　分類部１０２は、取得された商品情報に基づいて、購入商品を持ち帰るための袋に購入商品を入れる、袋詰めの順番を表すグループに、購入商品を分類する分類手段の一例である。分類部１０２は、前述の指標に基づいて、袋詰めの順番を表すグループに分類する。例えば、分類部１０２は、購入商品それぞれの商品の大きさ、商品の重さ、及び商品の耐荷重を用いて、袋詰めの順番を表すグループに購入商品をそれぞれ分類する。分類における具体的な処理の方法について、２つの例を後述する。以下の説明において、分類部１０２によって分類される、袋詰めの順番を表すグループは、袋詰めグループと呼ぶこともある。
　まず、袋詰めグループについて説明する。袋詰めグループは、購入商品が良い状態で持ち帰られるために、袋詰めされて袋の中で重なる購入商品が、袋の中の下段から上段のどの位置にあるべきかによって分類されたグループである。分類部１０２は、袋の中の下段から上段のどの位置にあるべきかを、前述の指標に基づいて分類する。袋詰めの作業は、下段に入れるべき購入商品から順に行われるとスムーズである。したがって、袋詰めグループには、あるべき位置が下段である購入商品のグループが最初に袋詰めするべき購入商品のグループ、あるべき位置が前のグループの上段である購入商品のグループが、最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループ、というように順番が付される。最後に袋詰めするべき購入商品のグループは、あるべき位置が最上段である購入商品のグループ、又は、袋の中でどこに位置してもよい購入商品のグループである。袋の中でどこに位置してもよい購入商品は、例えば、小さいためにどこにでも位置してよく、軽いために他の購入商品を傷めない購入商品である。つまり、袋詰めグループは、例えば、最初に袋詰めするべき購入商品のグループ、最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループ、最後に袋詰めするべき購入商品のグループである。最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループの数は、限定されない。すなわち、袋詰めの順番を表すグループの数は、２以上である。例えば、最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループの数が１、すなわち、袋詰めグループの数が３である場合、最初に袋詰めするべき購入商品のグループをグループ１、最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループをグループ２、最後に袋詰めするべき購入商品のグループをグループ３としてよい。
　分類部１０２は、袋詰めするべきグループの数を、購入商品の数、又は、購入商品の種類の数に応じて決定してもよい。また、この場合、グループに含まれる購入商品の数の下限が、予め設定されてもよい。これは、一つのグループに含まれる購入商品の数が多い場合、袋詰め前のかご又はカートから取り出すべき購入商品の全てが、かご又はカートから取り出しにくい場所にある可能性が低くなる。これにより、一つのグループに含まれる購入商品の数が多い場合、顧客は、取り出すべき購入商品のグループから取り出しやすい購入商品を選択しやすいと考えられるためである。言い換えると、一つのグループに含まれる購入商品の数が少ない場合、袋詰め前のかご又はカートから取り出すべき購入商品の全てが、かご又はカートから取り出しにくい場所にある可能性が高くなる。これにより、一つのグループに含まれる購入商品の数が少ない場合、顧客は、グループに含まれる取り出すべき購入商品を取り出しにくくなる可能性が高くなると考えられるためである。
　なお、袋詰めするべき購入商品のグループが１となる場合、分類部１０２は、購入商品を袋詰めするべき順番のグループに分類しないことを決定してもよい。
　図２は、分類部１０２による分類の結果の一例を示す図である。分類の結果には、グループ、それぞれのグループの袋詰めする順番、それぞれのグループに含まれる購入商品を特定する情報が含まれる。分類の結果は、例えば、最初に袋詰めするべき購入商品のグループであるグループ１に商品Ａが３つ、商品Ｂが１つ、商品Ｃが１つであることを示す情報を含む。最初に袋詰めするべき購入商品のグループの次に袋詰めするべき、購入商品のグループであるグループ２、最後に袋詰めするべき購入商品のグループであるグループ３についても同様である。分類の結果は、図２の例に限られない。例えば、グループの数は３以外であってよい。また、グループに含まれる購入商品の数は、３又は４以外であってよい。また、購入商品を示す情報は、商品名、又は、商品識別情報であってよい。さらに、分類の結果は、購入商品の商品情報や画像を含んでもよい。
　次に、分類部１０２の具体的な分類の処理の方法について、二つの例を説明する。
　分類の処理方法の一例は、購入商品の袋詰めの順番を決定し、決定された順番を区切り、区切られた購入商品をそれぞれグループとする処理方法である。
　分類部１０２は、まず、購入商品の袋詰めの順番を決定する。分類部１０２は、分類に用いられる指標の一例である、商品の大きさ、商品の重さ及び商品の耐荷重に基づいて、袋詰めの順番を決定する。例えば、分類部１０２は、商品の大きさ、重さ及び耐荷重が大きいものが先に袋詰めされるように、袋詰めの順番を決定する。また、順番の決定において、いずれの指標を優先するかが、予め定められてもよい。例えば、商品の大きさをｘ１、商品の重さをｘ２、商品の耐荷重をｘ３とする場合、分類部１０２は、ｙ＝a・ｘ１＋ｂ・ｘ２＋ｃ・ｘ３（a、b、ｃは重み付け値）を、購入商品ごとに求める。分類部１０２は、購入商品それぞれを、yの値の大きさの順番に並べることにより、袋詰めの順番を決定してよい。また、分類部１０２は、耐荷重が小さいもの、大きさが小さいものが後に袋詰めされるように、袋詰めの順番を決定してもよい。
　なお、袋詰めの順番を決定する方法、及び、袋詰めの順を決定するために用いる商品情報は、この例に限られず、既知の方法が用いられればよい。例えば、袋詰めの順番を決定する方法として、分類部１０２は、後述する袋情報取得部２０６が取得する袋詰めされる袋の寸法をさらに用いて、購入商品を入れる位置を決定してもよい。例えば、分類部１０２は、商品情報および組み合わせ条件に基づいて、袋内での位置の組み合わせを決定する。組み合わせ条件は、例えば、袋の寸法に合わせて、商品の大きさ、重さ及び耐荷重が大きいものから下に入れていくこと、上下に配置される商品の組み合わせにおいて、下に配置される商品の耐荷重が上に配置される商品の重さを上回ることである。また、組み合わせ条件は、壊れやすい商品の上に商品を配置しない、近くに配置される商品の組み合わせにおいて、商品の保存温度の差が所定値以内であること、を含んでもよい。分類部１０２は、決定した位置が下にある商品から順に、袋詰めの順番を決定してもよい。
　次に、分類部１０２は、決定した順番を区切り、区切られた購入商品をそれぞれグループとする。分類部１０２は、例えば、各グループに含まれる購入商品の数が均等になるように、順番の区切りを決定してよい。また、例えば、分類部１０２は、順番の前後の購入商品の、商品の大きさ、商品の重さ、及び商品の耐荷重のいずれかの差が大きいところを区切りとしてもよい。
　分類方法の他の例は、商品の大きさの閾値、商品の重さの閾値及び商品の耐荷重の閾値によって分類する方法である。例えば、分類部１０２は、袋詰めグループの数と、袋詰めグループごとに設定された、商品の大きさ、商品の重さ及び商品の耐荷重それぞれの上限値、下限値に、購入商品それぞれが適合するように、購入商品を各袋詰めグループに分類する。袋詰めグループごとの、商品の大きさ、商品の重さ及び商品の耐荷重それぞれの上限値、下限値は、グループの数に応じてあらかじめ決定されてよい。
　以上、分類方法の例について説明したが、分類方法はこれらの例に限られない。例えば、分類部１０２は、前述のように決定した購入商品を入れる位置に基づいて、袋に入れる高さごとに、購入商品を袋詰めの順番のグループに分類してもよい。
　画像取得部１０３は、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する画像取得手段の一例である。画像取得部１０３は、かご又はカート内に収容されている、袋詰めをされる前の購入商品の画像を、図示しないカメラから取得する。
　カメラは、例えば、セルフスキャンショッピングに利用される端末のカメラ、店舗に設置された監視カメラ、又は、店舗の袋詰め作業台に設置されたカメラである。カメラは、かご又はカートを含む撮影範囲を上方から撮影する。ここで、上方とは、かご又はカートの開口している面である。すなわち、かご又はカート内に収容されている、袋詰めをされる前の購入商品の画像には、かご又はカートの中で上部にある購入商品が映る。上部にある商品は、顧客が取り出しやすい商品となる。
　まず、画像取得部１０３は、袋詰めの作業前の時点において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する。袋詰めの作業前とは、顧客が商品登録及び精算を終えて購入商品を持ち帰りのための袋等に詰め替える作業を始める前の時点である。袋詰めの作業前の画像は、商品登録が終了した後又は精算が終了した後にカメラによって撮影され、画像取得部１０３は、撮影された画像を取得する。例えば、セルフスキャンショッピングの処理が精算の処理に進んだ段階で、画像取得部１０３は、カメラに撮影を指示する。画像取得部１０３から受けた指示によって、カメラは、袋詰めの作業前のかご又はカート内の購入商品の画像を撮影し、撮影した画像を画像取得部１０３に送信する。
　また、画像取得部１０３は、袋詰めの作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する。袋詰め作業中の期間は、顧客が商品登録及び精算を終えてから購入商品を持ち帰りのための袋等に詰め替える作業を終了するまでの期間、又は、顧客が購入商品を持ち帰りのための袋等に詰め替える作業を始めてから顧客が作業を終了するまでの期間である。
　画像取得部１０３は、袋詰めの作業中の画像を、所定の時間間隔で取得してよい。所定の時間間隔とは、例えば、１秒ごと、０．１秒ごと、などである。画像取得部１０３は、画像を撮影するカメラ、又は、カメラに接続されて、撮影された画像をカメラから取得する通信部であってよい。また、カメラに接続される画像取得部１０３は、カメラの撮影及び画像の送信を制御する制御機能を備えてもよい。画像取得部１０３がカメラである場合、画像取得部１０３は、所定の時間間隔で画像を撮影する。また、画像取得部１０３がカメラに接続されて、撮影された画像をカメラから取得する通信部である場合、所定の時間間隔で撮影された画像を随時取得してよい。同様に、画像取得部１０３がカメラに接続されて、撮影された画像をカメラから取得する通信部である場合、連続で撮影された画像のうち、所定の時間間隔の画像を取得してもよい。また、画像取得部１０３がカメラの撮影及び画像の送信を制御する制御機能を備える場合、所定の時間間隔で画像を撮影及び送信させることにより、所定の時間間隔の画像を取得してもよい。
　また、例えば、画像取得部１０３は、袋詰めの作業中に、かご又はカート内の購入商品を撮影した画像に変化があったタイミングの画像を取得してよい。例えば、カメラが、カメラ自身が撮影している範囲内のかご又はカート内の物体に動きがあったことを検出する。そして、カメラは、検出された動きの前後のタイミングに撮影した画像を画像取得部１０３に送信してもよい。ここで、袋詰めの作業において取得したい画像に関連する物体は、購入商品及び袋詰めを行う顧客の手である。カメラは、購入商品又は手に動きを検出する。そして、カメラは、動きの前後のタイミングに撮影した画像を画像取得部１０３に送信してもよい。
　さらに、画像取得部１０３は、袋詰めの作業中において、持ち帰りのための袋等の画像をさらに取得してもよい。
　特定部１０４は、取得された画像に基づいて、袋詰めされた購入商品を特定する特定手段の一例である。特定部１０４が特定する袋詰めされた購入商品とは、店舗内の買い回りに使用されるかご又はカートから、持ち帰りのための袋等に詰め替えられた購入商品である。特定部１０４は、取得された画像として、袋詰め前の購入商品が含まれるかご又はカートの画像、袋詰めされた購入商品が含まれる袋等の画像のうち、少なくともいずれかの画像に基づいて、袋詰めされた購入商品を特定する。袋詰め前の購入商品が含まれるかご又はカートの画像を用いて袋詰めされた購入商品が特定される場合、袋等に含まれる購入商品と比較して、かご又はカート内の購入商品は画像に映りやすいというメリットがある。また、袋詰めされた購入商品が含まれる袋等の画像を用いて袋詰めされた購入商品が特定される場合、カゴ又はカートから取り出されたが袋詰めされなかった購入商品が袋詰めされた購入商品として特定されることを避けられるというメリットがある。
　まず、袋詰めされた購入商品の特定において、袋詰め前の購入商品が含まれるかご又はカートの画像が用いられる場合について説明する。特定部１０４は、例えば、撮影された時系列順の２枚の画像を比較し、先に撮影された画像に含まれ、かつ、後に撮影された画像に含まれていない購入商品を、袋詰めされた購入商品として特定する。先に撮影された画像に含まれ、かつ、後に撮影された画像に含まれていない購入商品は、かご又はカート内から移動されたと推定される。すなわち、特定部１０４は、かご又はカートから取り出された購入商品を、袋詰めされた購入商品として特定してよい。なお、撮影された時系列順の２枚の画像は、時系列順であれば、連続して撮影された２枚の画像である必要はない。
　また、特定部１０４は、例えば、袋詰めされたと特定された購入商品の次に袋詰めするべき、購入商品のグループに含まれる購入商品であって、先に撮影された前記画像に含まれ、かつ、後に撮影された画像に含まれていない購入商品を、袋詰めされた購入商品として特定してもよい。袋詰めされたと特定された購入商品の次に袋詰めするべき、購入商品のグループは、２つある。１つは、袋詰めされたと特定された購入商品と同じグループに含まれ、かつ、袋詰めされたと特定されていない購入商品がある場合における、袋詰めされたと特定された購入商品が含まれる購入商品のグループである。もう１つは、袋詰めされたと特定された購入商品と同じグループに含まれ、かつ、袋詰めされたと特定されていない購入商品がない場合における、袋詰めされたと特定された購入商品のグループの後に袋詰めするべき購入商品のグループである。なお、これら２つの購入商品のグループは、現在袋詰めするべき購入商品のグループの例である。つまり、特定部１０４は、先に撮影された前記画像に含まれ、かつ、後に撮影された画像に含まれていない購入商品のうち、現在袋詰めするべき購入商品のグループに含まれる購入商品を、袋詰めされた購入商品として特定してもよい。なお、特定部１０４が現在袋詰めするべき購入商品のグループを特定する方法は、後述する。
　反対に、特定部１０４は、先に撮影された前記画像に含まれ、かつ、後に撮影された画像に含まれていない購入商品のうち、現在袋詰めするべき購入商品のグループより後に袋詰めするべき購入商品のグループに含まれる購入商品を、袋詰めではなく、仮置きされた購入商品として特定してもよい。仮置きとは、顧客が、かご又はカート内で下にある購入商品を取るために、上にある購入商品を袋詰め作業台などに、一時的に置くことである。
　これらの特定の方法により、袋詰めされた購入商品の特定の精度を向上させることができると考えられる。例えば、かご又はカート内で位置が変わった他の購入商品によって、現在袋詰めするべき購入商品のグループでない購入商品が隠れてしまった場合に、特定部１０４が、隠れてしまった購入商品を、袋詰めされた購入商品であると特定することを防ぐことができる。
　また、特定部１０４は、画像取得部１０３が取得した画像、分類の結果、及び袋詰めされたと特定された購入商品の情報に基づいて、仮置き商品を特定してもよい。例えば、特定部１０４は、袋詰めの作業中において撮影された画像に含まれるかご又はカート内の上部に載置され、かつ、現在袋詰めしているグループよりも後で袋詰めを行うべき購入商品のグループに含まれる購入商品を、仮置き商品であると特定する。画像は、かご又はカートの上部から撮影されるため、かご又はカート内の上部にある購入商品は、画像に映っている購入商品である。以下の説明において、かご又はカート内の上部に載置され、かつ、現在袋詰めしているグループよりも後で袋詰めを行うべき購入商品のグループに含まれる購入商品を、仮置き商品と記載する。
　特定部１０４による仮置き商品の特定の、より具体的な処理の例について説明する。例えば、特定部１０４は、画像に映っている購入商品を特定する。そして特定部１０４は、袋詰めされたと特定された購入商品の情報に基づいて、現在袋詰めするべき購入商品のグループが、分類の結果のうちの何れのグループであるかを特定する。特定部１０４は、特定された購入商品が、現在袋詰めするべき購入商品のグループに含まれるか、又は、現在よりも後で袋詰めするべき購入商品のグループに含まれるか、を分類の結果及び特定された現在袋詰めするべき購入商品のグループの情報に基づいて特定する。画像に映っている購入商品が、現在よりも後で袋詰めするべき購入商品のグループに含まれる場合、特定部１０４は、当該購入商品を仮置き商品であると特定する。仮置き商品の特定の処理は、この例に限られない。
　特定部１０４が現在袋詰めするべき購入商品のグループを特定する方法について、説明する。特定部１０４は、現在袋詰めするべき購入商品のグループを、既に袋詰めされたと特定された購入商品および分類の結果に基づいて、特定する。より具体的には、まず、特定部１０４は、既に袋詰めされたと特定された購入商品の有無を判定する。既に袋詰めされたと特定された購入商品がないと判定された場合、すなわち、顧客による袋詰め動作がまだ開始されていない場合、特定部１０４は、現在袋詰めするべき購入商品のグループが最初に袋詰めするべき購入商品のグループであることを特定する。次に、に袋詰めされたと特定された購入商品があると判定された場合、特定部１０４は、最後に袋詰めされたと特定された購入商品が属する袋詰めグループに、袋詰めされたと判定されていない購入商品の有無を判定する。最後に袋詰めされたと特定された購入商品と同じグループに属し、かつ、まだ袋詰めされたと特定されていない購入商品がある場合、特定部１０４は、最後に袋詰めされたと特定された購入商品と同じグループが、現在袋詰めするべき購入商品のグループであると特定する。また、袋詰めされたと特定された購入商品と同じグループに属し、かつ、まだ袋詰めされたと特定されていない購入商品がない場合、特定部１０４は、袋詰めされたと特定された購入商品のグループの次に袋詰めするべき、購入商品のグループが、現在袋詰めするべき購入商品のグループであると特定する。
　特定部１０４が、袋詰めされた購入商品を画像に基づいて特定する方法の他の例について、説明する。特定部１０４は、例えば、画像において顧客が手に持った購入商品を、かご又はカートから取り出された購入商品であると特定してもよい。例えば、特定部１０４は、所定時間間隔で取得された画像のうち、顧客の手が含まれる画像を抽出する。そして、特定部１０４は、抽出された画像から、顧客の手が把持している購入商品を特定してもよい。この特定方法の例においても、前述の特定方法のように、現在袋詰めするべき購入商品のグループに基づいて特定の精度を上げる方法、かご又はカート以外に袋や作業台の画像を用いる方法、仮置き商品を特定する方法が適用されてよい。なお、袋詰めされた購入商品を特定する方法はこれらに限られない。
　また、分類部１０２により分類された袋詰めグループに含まれるすべての購入商品を、袋詰めされた購入商品として特定部１０４が特定した場合、特定部１０４は、当該グループについて、袋詰めが完了したことを特定してもよい。また、例えば、端末装置が袋詰めグループごとに袋詰めの完了の入力を受け付ける手段を備え、当該手段が顧客による完了の入力を受けることによって、特定部１０４は、袋詰めグループに含まれる購入商品の袋詰めが完了したことを特定してもよい。袋詰めが完了したと特定されたグループの情報は、後述する表示制御部１０５の表示制御に用いられてよい。
　特定部１０４は、すべての購入商品の袋詰めが終了したことを判定してもよい。例えば、特定部１０４は、かご又はカートの画像に、購入商品が含まれない場合に、すべての購入商品の袋詰めが終了したことを判定する。また、例えば、特定部１０４は、特定部１０４が特定した袋詰めされた購入商品と、商品情報取得部１０１が取得した購入商品と、の比較結果が一致した場合に、すべての購入商品の袋詰めが終了したことを判定してもよい。なお、特定部１０４は、特定部１０４が特定した袋詰めされた購入商品と、商品情報取得部１０１が取得した購入商品と、の比較結果が一致しないことを判定してもよい。比較結果が一致していない場合、袋詰めされた購入商品の特定、又は、購入商品の商品登録が正確に行われていない可能性がある。
　次に、袋詰めされた購入商品の特定において、袋詰めされた購入商品が含まれる袋等の画像が用いられる場合について説明する。また、例えば、画像取得部１０３が袋詰めの作業中において、持ち帰りのための袋等の画像をさらに取得している場合、特定部１０４は、画像に基づいて、袋に入れられた購入商品を特定してもよい。特定部１０４は、かご又はカート内から取り出された購入商品の特定方法と同様に、袋に入れられた購入商品を特定すればよい。例えば、特定部１０４は、撮影された時系列順の２枚の画像を比較し、先に撮影された画像に含まれておらず、かつ、後に撮影された画像に含まれている購入商品を、袋に入れられた購入商品として特定してよい。これにより、購入商品が、かご又はカート内から取り出されたが袋に入れられなかった場合にも、特定部１０４は、袋詰めされた購入商品を正確に特定することができる。購入商品が、かご又はカート内から取り出されたが袋に入れられなかった場合とは、例えば、顧客が、かご又はカート内で、鉛直方向に下にある購入商品を取るために、当該購入商品より上にある購入商品を袋詰め作業台などに仮置きする場合である。
　表示制御部１０５は、袋詰めされた購入商品と、分類の結果と、に基づいて分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる表示制御手段の一例である。分類の結果とは、図２に例示される、分類部１０２による分類の結果である。表示制御部１０５は、各グループと、各グループに含まれる購入商品と、を表示部に表示させる。表示制御部１０５は、各グループに含まれる購入商品のうち、袋詰めされたと特定されていない購入商品を表示部に表示させる。また、表示制御部１０５は、各グループに含まれる購入商品のうち、少なくとも、現在袋詰めするべき購入商品のグループに含まれる購入商品を表示部に表示させればよい。又は、表示制御部１０５は、現在袋詰めするべき購入商品のグループに含まれる購入商品、及び、現在袋詰めするべき購入商品のグループの後に袋詰めするべき購入商品のグループに含まれる購入商品を表示部に表示させてもよい。現在袋詰めするべき購入商品のグループの後に袋詰めするべき購入商品のグループは、現在袋詰めするべき購入商品のグループの直後に袋詰めするべき購入商品のグループのみ、又は、現在袋詰めするべき購入商品のグループよりも後で袋詰めするべき購入商品のグループの一部又は全部であってもよい。また、表示制御部１０５は、既に袋詰めが完了した購入商品のグループをさらに表示部に表示させてもよい。
　表示制御部１０５は、まず、袋詰めの作業の開始前に、分類の結果に基づいて、各グループを表示部に表示させる。図３は、袋詰めの作業の開始前の表示画面の一例である。図３の詳細については後述する。表示制御部１０５は、現在袋詰めするべき購入商品のグループを顧客が認識しやすいように表示させるとよい。購入商品及び袋詰めグループを顧客が認識しやすいように表示させる方法は、図３の例に限られない。
　表示制御部１０５は、袋詰めをされたと特定された購入商品の表示を、袋詰めをされた購入商品の袋詰めが終了したことを表すように変更させてもよい。図４は、袋詰めをされた購入商品の袋詰めが終了したことを表す画面の一例である。図４の詳細については後述する。表示制御部１０５は、袋詰めが完了した商品の表示色の変更、袋詰めが完了した商品の削除、など、袋詰め動作を行う顧客が既に袋詰めされた購入商品を認識可能に、表示を変更してもよい。
　また、表示制御部１０５は、特定部１０４から、袋詰めが完了したことを特定されたグループの情報を受け付けることにより、袋詰めが完了したグループの表示を、当該袋詰めをされたグループに含まれるすべての購入商品の袋詰めが終了したことを表すように変更させてもよい。図５は、袋詰めグループ１に含まれる購入商品の袋詰めが完了したことを表す画面の一例である。図５の詳細については後述する。表示制御部１０５は、袋詰めが完了した袋詰めグループの表示色の変更、袋詰めが完了した商品の削除、など、袋詰め動作を行う顧客が既に袋詰めされた袋詰めグループを認識可能に、表示を変更してもよい。
　表示制御部１０５は、特定部１０４により、すべての購入商品の袋詰めが終了したと判定された場合、袋詰めが終了したことを表す画面を表示部に表示させてもよい。また、特定部１０４により、特定部１０４が特定した袋詰めされた購入商品と、商品情報取得部１０１が取得した購入商品と、の比較結果が一致しないと判定された場合、表示制御部１０５は、スキャンしていなかった商品、又は、過剰にスキャンしてしまった商品があることを表示部に表示させてもよい。また、例えば、特定部１０４が特定した袋詰めされた購入商品と、商品情報取得部１０１が取得した購入商品と、の比較結果が一致しない場合、袋詰め支援装置１００は、店員の端末等に対して、呼出通知を送信してもよい。これにより、店員が、商品登録のミスや、商品の万引きに対して対応することができるようになる。なお、特定部１０４が特定した袋詰めされた購入商品と、商品情報取得部１０１が取得した購入商品と、の比較結果が一致しない場合、表示制御部１０５は、商品登録、袋詰めに問題がないこと確認する入力を顧客に指示する画面を表示させてもよい。これにより、袋詰めされた購入商品の特定のミスがあった場合に、店員に通知されて顧客を煩わせてしまうことを防ぐことができる。
　また、表示制御部１０５は、袋詰めの作業中において撮影された画像に含まれるかご又はカート内の上部に載置され、かつ、現在袋詰めしているグループよりも後で袋詰めを行うべき購入商品のグループに含まれる購入商品を仮置きさせる案内を表示させてもよい。袋詰めの作業中において撮影された画像に含まれるかご又はカート内の上部に載置され、かつ、現在袋詰めしているグループよりも後で袋詰めを行うべき購入商品のグループに含まれる購入商品とは、前述した仮置き商品である。仮置き商品は、特定部１０４により特定される。
　表示制御部１０５は、例えば、特定部１０４が仮置き商品を特定した場合に、仮置き商品を仮置きさせる案内を表示させてよい。また、表示制御部１０５は、現在袋詰めするべき購入商品のグループに含まれる購入商品がすべて仮置き商品であると特定された場合に、仮置き商品を仮置きさせる案内を表示させてよい。
　図６は、仮置き商品である購入商品を仮置きする案内を表示する画面の一例である。図６において、「キャベツを仮置きしてください」という案内、及び、枠線で囲まれたキャベツの商品画像が表示されている。これらは、購入商品を仮置きさせる案内の一例である。このように、表示制御部１０５は、特定部１０４により仮置き商品であると特定された購入商品、及び、仮置き商品を仮置きさせる案内を、顧客が認識可能に表示させればよい。
　以上のように構成された袋詰め支援装置１００の動作について、図７のフローチャートを参照して説明する。
　図７は、実施形態における袋詰め支援装置１００の動作の概要を示すフローチャートである。
　図７に示すように、まず、商品情報取得部１０１は、顧客の購入商品の商品情報を取得する（ステップＳ１０１）。
　次に、分類部１０２は、ステップＳ１０１で取得された商品情報に基づいて、購入商品を、袋詰め順番のグループに分類する（ステップＳ１０２）。
　次に、表示制御部１０５は、特定部１０４により特定される、現在袋詰めするべき購入商品のグループを表示部に表示させる（ステップＳ１０３）。表示制御部１０５は、分類の結果、及び、特定された現在袋詰めするべき購入商品のグループを示す情報に基づいて、現在袋詰めするべき購入商品のグループを表示部に表示させる。図３の画面例は、顧客による袋詰め動作が開始される前の画面である。図３において、画面には、分類部１０２による分類の結果である各袋詰めグループ、および、各袋詰めグループの購入商品を示す情報である、購入商品の画像または商品名が表示される。図３に示す例では、袋詰めグループ１、袋詰めグループ２、袋詰めグループ３が含まれる。また、それぞれのグループには、購入商品が含まれる。顧客による袋詰め動作が開始される前において、袋詰めグループ１が大きく表示され、袋詰めグループ２及び袋詰めグループ３では購入商品が画像のみで示されているのに対し、袋詰めグループ１では購入商品が画像及び商品名で示されている。このように、表示制御部１０５は、現在袋詰めするべき購入商品のグループに含まれる購入商品を顧客が認識しやすいように表示させるとよい。また、袋詰めグループ１は、画面において袋詰めグループ２及び袋詰めグループ３よりも大きく表示されている。
　次に、画像取得部１０３は、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する（ステップＳ１０４）。
　次に、特定部１０４は、ステップＳ１０４において取得された画像に基づいて、袋詰めされた購入商品を特定する（ステップＳ１０５）。
　次に、特定部１０４は、購入商品の袋詰めが終了したことを判定する（ステップＳ１０６）。袋詰めが終了していない場合、袋詰め支援装置１００は、ステップＳ１０３からステップＳ１０６の動作を、袋詰めが終了するまで継続する。ステップＳ１０６からステップＳ１０３に動作が進んだ場合、表示制御部１０５は、袋詰めされたと特定された購入商品の情報に応じて、購入商品や袋詰め順番のグループの表示変更を行ってよい。
　ステップＳ１０６からステップＳ１０３に動作が進んだ場合のステップＳ１０３において、表示制御部１０５は、例えば、袋詰めされたと特定された購入商品の情報に基づいて、購入商品の表示変更を行う。購入商品の表示変更の例が、図４に示されている。図４において、牛乳（１Ｌ）２本が、グレーで表示されている。袋詰めの作業の開始前の表示画面例である図３と比較すると、図４は、特定部１０４により袋詰めされたと特定された、牛乳（１Ｌ）２本の表示が変更されている。これは、牛乳（１Ｌ）２本が既に袋詰めされたことを示す表示変更の一例である。袋詰めされたと特定された購入商品の表示変更の方法はこの例に限られない。
　ステップＳ１０６からステップＳ１０３に動作が進んだ場合のステップＳ１０３において、表示制御部１０５は、例えば、袋詰めが完了したと特定されたグループの情報に基づいて、袋詰め順番のグループの表示変更を行ってもよい。図５において、袋詰めグループ１が、グレーで表示されている。また、図５において、袋詰めグループ１の次に袋詰めするべき、購入商品のグループである、袋詰めグループ２が、袋詰めグループ１及び袋詰めグループ３よりも大きく表示され、袋詰めグループ１は袋詰めグループ２よりも小さく表示されている。袋詰めの作業の開始前の表示画面例である図３と比較すると、図５は、特定部１０４により袋詰めされたと特定された、袋詰め順番のグループの表示が変更されている。これらは、袋詰めグループ１に含まれる購入商品の袋詰めが完了したことを表す表示変更の一例である。袋詰めされたと特定された袋詰め順番のグループの表示変更の方法はこの例に限られない。
　ステップＳ１０３～ステップＳ１０６の動作が繰り返された後、特定部１０４は、購入商品の袋詰めが終了したことを判定する（ステップＳ１０６）。袋詰めが終了したと判定された場合、袋詰め支援装置１００は、一連の動作を終了する。
　上述した本実施形態における袋詰め支援装置は、商品情報取得部が、購入商品の商品情報を取得し、分類部が、購入商品を持ち帰るための袋に、購入商品を入れる袋詰めの順番を表すグループに、購入商品を分類する。画像取得部が、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得し、特定部が、画像に基づいて、袋詰めされた購入商品を特定する。そして、表示制御部は、当該袋詰めされた購入商品と、分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる。
　これにより、袋詰めをする顧客は、表示部に表示される袋詰めグループを参考、購入商品を袋詰めすることができ、顧客は購入商品の袋詰めの順番を考える必要がなくなる。その結果、袋詰め支援装置は、購入商品の袋詰めを支援することができる。
　また、特に、分類部が、購入商品を袋詰め順番のグループに分類する。その結果、本実施形態における袋詰め支援装置は、顧客がかご又はカートから取り出すべき購入商品の複数の候補を提示することができる。これにより、袋詰めする顧客は、かご又はカートの底から取り出さなければいけない購入商品以外の商品を選択して取り出すことができるようになる。
　　［セルフスキャンショッピング以外の場合］
　ここで、実施形態で説明した袋詰め支援装置１００を用いて、セルフスキャンショッピング以外のレジが利用される場合の袋詰め支援装置１００の動作について説明する。以下、本実施形態の説明が不明確にならない範囲で、前述の説明と重複する内容については説明を省略する。セルフスキャンショッピング以外のレジとは、店員が商品登録から精算の処理を行うレジ、店員が商品登録を行い、顧客が精算を行うセミセルフレジ、又は、顧客が商品登録から精算の処理を行うフルセルフレジである。また、この場合において、袋詰め支援装置１００は、顧客の所有する端末装置、又は、店舗の作業台若しくはレジカウンターに設置される端末装置である。
　店員が商品登録から精算の処理を行うレジでは、店員が袋詰めまで行う場合がある。この場合、袋詰め支援装置１００は、店員がレジとして利用するＰＯＳ端末に含まれてよい。又は、袋詰め支援装置１００は、レジ周辺に設置される端末装置でもよい。同様に、表示部も、店員がレジとして利用するＰＯＳ端末装置のディスプレイであってよい。又は、表示部は、レジ周辺に設置される端末装置のディスプレイでもよい。また、店員が袋詰め支援を利用する場合、袋詰め支援装置１００は、実施形態における顧客を店員と読み替えた動作を行う。
　商品情報取得部１０１は、セルフスキャンショッピング及び店員がレジで袋詰めまで行う場合においては、商品登録を行ったＰＯＳ端末装置でもある端末装置に登録された購入商品の情報を取得すればよい。また、袋詰め支援装置が商品登録を行ったＰＯＳ端末装置とは別個の端末装置である場合、商品情報取得部１０１は、例えば、顧客のポイントカード等の識別番号を取得する。そして、商品情報取得部１０１は、識別番号に関連付けられた購入商品の商品情報を取得してもよい。なお、商品情報取得部１０１は、識別番号に関連付けられた購入商品のうち、当日の購入商品、又は、１時間などの所定時間以内にレジにおいて商品登録された購入商品を、袋詰めを行う購入商品であるとして、それらの商品情報を取得してもよい。また、例えば、商品情報取得部１０１は、レシートを読み取り、レシートの識別番号に関連付けられた購入商品、又は、レシートから直接読み取られた商品識別番号に関連付けられた購入商品の商品情報を取得してもよい。
　画像取得部１０３は、実施形態と同様に、袋詰めの作業前及び作業中において、かご又はカート内に収容されている、袋詰めをされる前の購入商品が撮影された画像を取得する。例えば、袋詰めの作業前における、かご又はカート内に収容されている、袋詰めをされる前の購入商品は、商品登録が行われるレジにおいて、レジ周辺に設置されたカメラによって撮影されてもよい。
　　［変形例１］
　次に、本開示の変形例１について、図面を参照して詳細に説明する。以下、本変形例の説明が不明確にならない範囲で、前述の説明と重複する内容については説明を省略する。
　図８は、本開示の変形例１にかかる袋詰め支援装置の構成を示すブロック図である。変形例１の袋詰め支援装置２００は、実施形態の構成に加えて、袋情報取得部２０６を含む。
　袋情報取得部２０６は、袋の情報を取得する、袋情報取得手段の一例である。ここで、袋は、前述の、持ち帰りのための袋等である。袋の情報は、袋の大きさ、袋の容量、袋の耐荷重を含む。袋の耐荷重は、袋に入れて持ち歩くことができる内容物の重さである。袋の情報には、袋の耐荷重の代わりに、袋の素材が含まれてもよい。この場合、袋の素材の単位面積当たりの耐荷重、及び、袋の大きさから、袋の耐荷重が推定されればよい。袋情報取得部２０６は、例えば、購入商品に含まれる購入された袋の、商品識別番号に関連付けられて記憶された袋の情報を取得する。また、例えば、袋情報取得部２０６は、顧客が撮影した画像に基づいて、袋の情報を推定してもよい。また、例えば、袋情報取得部２０６は、ポイントカード等の顧客識別番号に関連付けられて予め登録された、顧客が利用する袋の情報を取得してもよい。
　顧客が購入商品を入れて持ち帰るための袋は、１枚又は複数である。袋情報取得部２０６が、１枚の袋の情報を取得した場合、袋情報取得部２０６は、袋の情報及び購入商品の商品情報に基づいて、１枚の袋に購入商品を入れられるか否かを判断してもよい。例えば、袋情報取得部２０６は、袋の大きさが、購入商品の大きさの合計よりも大きい場合に、購入商品を１枚の袋に入れられると判断する。又は、袋情報取得部２０６は、袋の耐荷重が、購入商品の重さの合計よりも大きい場合に、購入商品を１枚の袋に入れられると判断してもよい。袋情報取得部２０６は、購入商品を１枚の袋に入れられないと判断した場合に、さらに袋の情報を取得してもよい。例えば、袋情報取得部２０６は、購入商品を１枚の袋に入れられないと判断した場合、顧客に対して、袋の画像又は袋のバーコードを撮影するよう案内してもよい。
　袋情報取得部２０６が、複数の袋の情報を取得した場合、すなわち、購入商品を入れる袋が複数である場合、分類部１０２は、袋ごとに、購入商品を袋に入れる順番のグループに分類する。例えば、分類部１０２は、商品情報に基づいて、袋ごとに重さが均等になるように購入商品を分類する。分類部１０２は、袋に入れる順番のグループに分類してから、複数の袋それぞれに入れる購入商品を分類してよい。又は、分類部１０２は、複数の袋それぞれに入れる購入商品を分類してから、袋ごとに袋に入れる順番のグループに分類してもよい。
　また、例えば、分類部１０２は、商品情報に基づいて、商品の属性ごとに、複数の袋それぞれに入れる購入商品を分類してもよい。商品の属性は、例えば、商品の温度である。複数の袋がある場合、分類部１０２は、温かい商品と冷たい商品とを別の袋に分類する。この場合、常温の商品は、温かい商品が含まれる袋及び冷たい商品が含まれる袋のどちらに分類されてもよい。また、例えば、商品の属性は、商品のカテゴリである。複数の袋がある場合、分類部１０２は、日用品と食料品とを別の袋になるように分類してよい。また、分類部１０２は、壊れやすい、潰れやすい購入商品のみを、複数の袋のうち小さな袋に分類してもよい。この場合、分類部１０２は、残りの袋が複数であれば、その他の購入商品をそれぞれの袋に分類する。また、分類部１０２は、袋ごとに袋に入れる順番のグループに分類する。
　また、購入商品を入れる袋が複数である場合、表示制御部１０５は、先に袋詰めを行う購入商品のグループと、先に袋詰めを行う袋と、を表示部に表示させてもよい。例えば、表示制御部１０５は、「先に日用品を袋Ａに袋詰めします」などというように、先に袋詰めを行う購入商品のグループと、先に袋詰めを行う袋と、を表示部に表示させる。袋は、色、素材、形、大きさなどの特徴を示す文字情報、撮影された画像、予め顧客により設定された名称などによって示されればよい。また、袋を示す情報は、袋の情報として、袋情報取得部２０６により取得されればよい。
　上述した本変形例における袋詰め支援装置は、袋が複数利用される場合であっても、袋詰め支援を行うことができる。
　　［変形例２］
　次に、本開示の変形例２について、図面を参照して詳細に説明する。以下、本変形例の説明が不明確にならない範囲で、前述の説明と重複する内容については説明を省略する。
　図９は、本開示の変形例２にかかる袋詰め支援装置の構成を示すブロック図である。変形例２の袋詰め支援装置３００は、実施形態の構成に加えて、決定部３０７を含む。
　決定部３０７は、袋詰め支援を行うか否かを決定する決定手段の一例である。購入商品が１つ、２つ、３つなどと少ない場合、購入商品の数は多いが、すべて同じものである場合などにおいて、顧客は、袋詰めの順番を提示する袋詰め支援を必要としないことがある。このような場合に対し、例えば、決定部３０７は、商品情報に基づいて、購入商品の数が所定数以上又は購入商品の種類数が所定数以上である場合、袋詰め支援を行うことを決定する。
所定数は、それぞれ、予め一つの値又は顧客ごとの値に設定されてもよい。所定数は、例えば、４、５などの整数値である。この方法で袋詰め支援を行うか否かを決定する場合、決定部３０７は、商品情報取得部１０１が購入商品の商品情報を取得した後に、袋詰め支援を行うか否かを決定する。そして、袋詰め支援を行うと決定された場合、袋詰め支援装置３００は、実施形態で説明した袋詰め支援における、商品情報の取得以降の動作に進む。
　また、例えば、決定部３０７は、顧客の入力に基づいて、袋詰め支援を行うか否かを決定してもよい。例えば、決定部３０７は、端末装置のタッチパネルディスプレイに、袋詰め支援を行うか否かの２つのボタンを表示させる。そして、決定部３０７は、顧客のタッチパネルディスプレイでの入力に応じて、袋詰め支援を行うか否かを決定する。この方法で袋詰め支援を行うか否かを決定する場合、決定部３０７は、初期画面として、袋詰め支援を行うか否かを顧客に入力させるための画面を表示部に表示させる。そして、袋詰め支援を行うと決定された場合、袋詰め支援装置３００は、実施形態で説明した袋詰め支援の動作に進む。
　決定部３０７が袋詰め支援を行わないと決定した場合、表示制御部１０５は、例えば、表示部の表示を初期画面に戻してよい。初期画面は、例えば、「画面をタッチしてスタート」など、袋詰め支援装置の動作を開始させるための操作を示す画面である。
　上述した袋詰め支援装置は、袋詰め支援の必要性に応じて、袋詰め支援を行うことができる。これにより、上述した袋詰め支援装置は、顧客が袋詰め支援を煩わしいと思うことを防ぐことができる。
　　［ハードウェア構成］
　以上説明した、本開示の各実施形態及び各変形例における各装置の各構成要素の一部又は全部は、例えば図１０に示すような情報処理装置１０００とプログラムとの任意の組み合わせにより実現される。情報処理装置１０００は、一例として、以下のような構成を含む。
　　・ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）１００１
　　・ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１００２
　　・ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１００３
　　・ＲＡＭ１００３にロードされるプログラム１００４
　　・プログラム１００４を格納する記憶装置１００５
　　・記録媒体１００６の読み書きを行うドライブ装置１００７
　　・通信ネットワーク１００９と接続する通信Ｉ／Ｆ１００８
　　・データの入出力を行う入出力Ｉ／Ｆ１０１０
　　・各構成要素を接続するバス１０１１
　なお、Ｉ／Ｆは、Ｉｎｔｅｒｆａｃｅの略である。
　各実施形態における各装置又はシステムの各構成要素は、これらの機能を実現するプログラムをＣＰＵ１００１が取得して実行することで実現される。各装置の各構成要素の機能を実現するプログラムは、例えば、予め記憶装置１００５やＲＡＭ１００３に格納されており、必要に応じてＣＰＵ１００１が読み出す。なお、プログラム１００４は、通信ネットワークを介してＣＰＵ１００１に供給されてもよいし、予め記録媒体１００６に格納されており、ドライブ装置１００７が当該プログラムを読み出してＣＰＵ１００１に供給してもよい。
　各装置の実現方法には、様々な変形例がある。例えば、各装置は、構成要素ごとにそれぞれ別個の情報処理装置１０００とプログラムとの任意の組み合わせにより実現されてもよい。また、各装置が備える複数の構成要素が、一つの情報処理装置１０００とプログラムとの任意の組み合わせにより実現されてもよい。
　また、各装置の各構成要素の一部又は全部は、プロセッサ等を含む汎用又は専用の回路（ｃｉｒｃｕｉｔｒｙ）や、これらの組み合わせによって実現される。回路は、例えば、ＣＰＵ、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）、ＬＳＩ（Ｌａｒｇｅ　Ｓｃａｌｅ　Ｉｎｔｅｇｒａｔｉｏｎ）である。ＬＳＩは、例えば、ＡＩ（Ａｒｔｉｆｉｃｉａｌ　Ｉｎｔｅｌｌｉｇｅｎｃｅ）処理専用ＬＳＩである。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組み合わせによって実現されてもよい。
　各装置の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントアンドサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。
　以上、各実施形態を参照して本発明を説明したが、本発明は上記実施の形態に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解しえる様々な変更をすることができる。
　また、複数の動作をフローチャートの形式で順番に記載してあるが、その記載の順番は複数の動作を実行する順番を限定するものではない。このため、各実施形態を実施するときには、その複数の動作の順番は、内容的に支障しない範囲で変更されてよい。
　この出願は、２０２２年９月２６日に出願された日本出願特願２０２２－１５２６７６を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　１００　　袋詰め支援装置
　１０１　　商品情報取得部
　１０２　　分類部
　１０３　　画像取得部
　１０４　　特定部
　１０５　　表示制御部
　２００　　袋詰め支援装置
　２０６　　袋情報取得部
　３００　　袋詰め支援装置
　３０７　　決定部
　１０００　　情報処理装置
　１００１　　ＣＰＵ
　１００２　　ＲＯＭ
　１００３　　ＲＡＭ
　１００４　　プログラム
　１００５　　記憶装置
　１００６　　記録媒体
　１００７　　ドライブ装置
　１００８　　通信Ｉ／Ｆ
　１００９　　通信ネットワーク
　１０１０　　入出力Ｉ／Ｆ
　１０１１　　バス

Claims (18)

  1. 　顧客の購入商品の商品情報を取得する商品情報取得手段と、
    　前記商品情報に基づいて、前記購入商品を持ち帰るための袋に、前記購入商品を入れる袋詰めの順番を表すグループに、前記購入商品を分類する分類手段と、
    　前記袋詰めの作業前及び作業中において、かご又はカート内に収容されている、前記袋詰めをされる前の購入商品が撮影された画像を取得する画像取得手段と、
    　前記画像に基づいて、袋詰めされた購入商品を特定する特定手段と、
    　当該袋詰めされた購入商品と、前記分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる表示制御手段と、
    　を備える袋詰め支援装置。
  2. 　前記表示制御手段は、前記袋詰めの作業中において撮影された前記画像に含まれる前記かご又は前記カート内の上部に載置され、かつ、現在よりも後で前記袋詰めを行うべき購入商品のグループに含まれる購入商品を仮置きさせる案内を表示させる
    　請求項１に記載の袋詰め支援装置。
  3. 　前記特定手段は、撮影された時系列順の２枚の前記画像を比較し、先に撮影された前記画像に含まれ、かつ、後に撮影された前記画像に含まれていない購入商品を、前記袋詰めされた購入商品として特定する
    　請求項２に記載の袋詰め支援装置。
  4. 　前記特定手段は、前記先に撮影された前記画像に含まれ、かつ、前記後に撮影された前記画像に含まれていない購入商品のうち、袋詰めされたと特定された購入商品の次に袋詰めするべき購入商品のグループに含まれる購入商品を、前記袋詰めされた購入商品として特定する
    　請求項３に記載の袋詰め支援装置。
  5. 　前記表示制御手段は、前記袋詰めをされた購入商品の表示を、当該袋詰めをされた購入商品の袋詰めが終了したことを表すように変更させる
    　請求項１から４のいずれかに記載の袋詰め支援装置。
  6. 　前記特定手段は、グループに含まれるすべての購入商品が、前記袋詰めされた購入商品として特定された場合、当該グループを前記袋詰めが完了したグループとして特定する
    　請求項１から５のいずれかに記載の袋詰め支援装置。
  7. 　前記表示制御手段は、前記袋詰めが完了したグループの表示を、当該袋詰めをされたグループの袋詰めが終了したことを表すように変更させる
    　請求項６に記載の袋詰め支援装置。
  8. 　前記袋の情報を取得する、袋情報取得手段
    　をさらに備える請求項１から７のいずれかに記載の袋詰め支援装置。
  9. 　購入商品を入れる前記袋が複数である場合、前記分類手段は、前記袋ごとに、前記購入商品を前記袋に入れる順番のグループに分類する
    　請求項８に記載の袋詰め支援装置。
  10. 　購入商品を入れる前記袋が複数である場合、前記表示制御手段は、先に前記袋詰めを行う購入商品のグループと、先に前記袋詰めを行う前記袋と、を表示部に表示させる
    　請求項９に記載の袋詰め支援装置。
  11. 　袋詰め支援を行うか否かを決定する決定手段
    　をさらに備える請求項１から１０のいずれかに記載の袋詰め支援装置。
  12. 　前記決定手段は、前記商品情報に基づいて、前記購入商品の数が所定数以上又は前記購入商品の種類数が所定数以上である場合、袋詰め支援を行うことを決定する
    　請求項１１に記載の袋詰め支援装置。
  13. 　前記決定手段は、前記顧客の入力に基づいて、袋詰め支援を行うか否かを決定する
    　請求項１１または１２に記載の袋詰め支援装置。
  14. 　前記表示制御手段は、袋詰めされたと特定された購入商品がない場合、最初に袋詰めするべき購入商品のグループに含まれる購入商品を表示部に表示させる
    　請求項１から１３のいずれかに記載の袋詰め支援装置。
  15. 　前記表示制御手段は、袋詰めされたと特定された購入商品がある場合であって、袋詰めされたと特定された購入商品と同じグループに含まれ、かつ、袋詰めされたと特定されていない購入商品がある場合、袋詰めされたと特定された購入商品のグループに含まれる、袋詰めされたと特定されていない購入商品を表示部に表示させる
    　請求項１から１４のいずれかに記載の袋詰め支援装置。
  16. 　前記表示制御手段は、袋詰めされたと特定された購入商品がある場合であって、袋詰めされたと特定された購入商品と同じグループに含まれ、かつ、袋詰めされたと特定されていない購入商品がない場合、袋詰めされたと特定された購入商品のグループの後に袋詰めするべき購入商品のグループに含まれる購入商品を表示部に表示させる
    　請求項１から１５のいずれかに記載の袋詰め支援装置。
  17. 　コンピュータが、
    　顧客の購入商品の商品情報を取得し、
    　前記商品情報に基づいて、前記購入商品を持ち帰るための袋に、前記購入商品を入れる袋詰めの順番を表すグループに、前記購入商品を分類し、
    　前記袋詰めの作業前及び作業中において、かご又はカート内に収容されている、前記袋詰めをされる前の購入商品が撮影された画像を取得し、
    　前記画像に基づいて、袋詰めされた購入商品を特定し、
    　当該袋詰めされた購入商品と、前記分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる
    　袋詰め支援方法。
  18. 　顧客の購入商品の商品情報を取得し、
    　前記商品情報に基づいて、前記購入商品を持ち帰るための袋に、前記購入商品を入れる袋詰めの順番を表すグループに、前記購入商品を分類し、
    　前記袋詰めの作業前及び作業中において、かご又はカート内に収容されている、前記袋詰めをされる前の購入商品が撮影された画像を取得し、
    　前記画像に基づいて、袋詰めされた購入商品を特定し、
    　当該袋詰めされた購入商品と、前記分類の結果と、に基づいて、分類されたグループのうち、少なくとも１つのグループに含まれる購入商品を表示部に表示させる
    　処理をコンピュータに実行させるプログラムを記録する記録媒体。
PCT/JP2023/027413 2022-09-26 2023-07-26 袋詰め支援装置、袋詰め支援方法、及び記録媒体 WO2024070178A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-152676 2022-09-26
JP2022152676 2022-09-26

Publications (1)

Publication Number Publication Date
WO2024070178A1 true WO2024070178A1 (ja) 2024-04-04

Family

ID=90477019

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/027413 WO2024070178A1 (ja) 2022-09-26 2023-07-26 袋詰め支援装置、袋詰め支援方法、及び記録媒体

Country Status (1)

Country Link
WO (1) WO2024070178A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004021836A (ja) * 2002-06-19 2004-01-22 Nec Infrontia Corp 購入商品袋詰案内システムおよび方法
JP2018010522A (ja) * 2016-07-14 2018-01-18 Ｎｅｃプラットフォームズ株式会社 袋詰め表示システム、サーバ、袋詰め表示方法、及び袋詰め表示用プログラム
JP2019174878A (ja) * 2018-03-27 2019-10-10 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
WO2020004028A1 (ja) * 2018-06-25 2020-01-02 株式会社東芝 梱包支援装置、梱包支援方法、およびプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004021836A (ja) * 2002-06-19 2004-01-22 Nec Infrontia Corp 購入商品袋詰案内システムおよび方法
JP2018010522A (ja) * 2016-07-14 2018-01-18 Ｎｅｃプラットフォームズ株式会社 袋詰め表示システム、サーバ、袋詰め表示方法、及び袋詰め表示用プログラム
JP2019174878A (ja) * 2018-03-27 2019-10-10 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
WO2020004028A1 (ja) * 2018-06-25 2020-01-02 株式会社東芝 梱包支援装置、梱包支援方法、およびプログラム

Similar Documents

Publication Publication Date Title
CN109300263B (zh) 基于卷积神经网络的图像识别技术的结算方法和装置
JP6463804B2 (ja) 物品の相互作用及び移動検出方法
US20240144340A1 (en) Remote SKU On-Boarding of Products for Subsequent Video Identification and Sale
JP6176257B2 (ja) 商品情報処理装置、そのデータ処理方法、およびプログラム
US9505554B1 (en) Capturing packaging image via scanner
US8927882B2 (en) Commodity search device that identifies a commodity based on the average unit weight of a number of commodities resting on a scale falling within a predetermined weight deviation of a referece unit weight stored in a database
RU2739542C1 (ru) Система автоматической регистрации для торговой точки
US20170083884A1 (en) System and method for automatic identification of products
US20180068534A1 (en) Information processing apparatus that identifies an item based on a captured image thereof
CN110909698A (zh) 电子秤识别结果输出方法、系统、装置以及可读存储介质
JP2020021378A (ja) 物品判別システム、買物支援システム、買物支援方法、物品判別方法、及びプログラム
EP2570967A1 (en) Semi-automatic check-out system and method
EP3767538A1 (en) Sequential classification for commodity identification
JP6724155B2 (ja) 重量管理システム及び重量管理方法
WO2024070178A1 (ja) 袋詰め支援装置、袋詰め支援方法、及び記録媒体
JP6375924B2 (ja) 商品登録装置、商品特定方法及びプログラム
JP5797703B2 (ja) 情報処理装置、店舗システム及びプログラム
CN113753346A (zh) 一种物品打包的方法及系统
CN114120083A (zh) 图像识别装置及存储介质、图像识别方法
CN112364702A (zh) 一种物品核验方法及装置
JPH06180785A (ja) 売上データ処理装置
JP2016110480A (ja) 商品登録装置および商品登録方法
JP7226754B2 (ja) 処理装置、処理方法及びプログラム
JP5885708B2 (ja) 情報処理装置、店舗システム及びプログラム
JP7339630B1 (ja) 情報処理システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23871421

Country of ref document: EP

Kind code of ref document: A1