WO2015140851A1 - 情報処理装置、商品棚管理システム、及び、商品棚管理方法 - Google Patents

情報処理装置、商品棚管理システム、及び、商品棚管理方法 Download PDF

Info

Publication number
WO2015140851A1
WO2015140851A1 PCT/JP2014/005541 JP2014005541W WO2015140851A1 WO 2015140851 A1 WO2015140851 A1 WO 2015140851A1 JP 2014005541 W JP2014005541 W JP 2014005541W WO 2015140851 A1 WO2015140851 A1 WO 2015140851A1
Authority
WO
WIPO (PCT)
Prior art keywords
product
information
specified
display
shelf
Prior art date
Application number
PCT/JP2014/005541
Other languages
English (en)
French (fr)
Inventor
卓郎 佐久間
英路 村松
道生 永井
信一 阿南
準 小林
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2016508312A priority Critical patent/JP6226060B2/ja
Publication of WO2015140851A1 publication Critical patent/WO2015140851A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions

Definitions

  • the present invention relates to an information processing device, a product shelf management system, a product shelf management method, and a product shelf management program, and more particularly, an information processing device that manages product shelf, a product shelf management system, a product shelf management method, and a product. It relates to a shelf management program.
  • Patent Document 1 discloses a technique for efficiently managing inventory information of commodities displayed on a display shelf.
  • an electronic shelf label system server reads product identification information from an electronic tag attached to a product placed on a shelf, and electronic devices attached to each product placement position on the shelf. Read product location information from tags. Then, the server associates the read product identification information with product position information. Thereafter, the server displays the inventory information of the product based on the product identification information on the electronic shelf label at the corresponding product placement position.
  • Patent Document 1 it is necessary to attach an electronic tag to each product and each product placement position, and to install an electronic tag reader device at a position where the electronic tag can be read.
  • the technique according to Patent Document 1 has a problem that it is difficult to apply when the electronic tag and its reader device cannot be used.
  • An object of the present invention is to provide an information processing apparatus, a product shelf management system, a product shelf management method, and a product shelf management program for supporting rearrangement without using an electronic tag or the like when the product is different.
  • An information processing apparatus includes: A storage unit for storing the product installation position on the product shelf and the display information displayed at the installation position in association with each other; An acquisition unit for acquiring a captured image including the product existing in the vicinity of the installation position; Based on the captured image, a first identifying unit that identifies a product included in the captured image and an arrangement position of the product on the product shelf; A second specifying unit that specifies the display information in which the specified arrangement position is associated as the installation position with reference to the storage unit, and the product information in the specified product; A determination unit that determines whether the specified display information is different from the specified product information; When it is determined that the specified display information and the specified product information are different, an output unit that outputs the fact to the outside, Is provided.
  • the merchandise shelf management system includes: A product shelf on which predetermined display information is displayed at the product installation position; Photographing means for photographing the product existing near the installation position and outputting the photographed image; A management device for managing the product shelf, The management device A storage unit that stores the installation position and the display information in association with each other, and stores product information about the product; An acquisition unit for acquiring the captured image from the imaging unit; Based on the captured image, a first identifying unit that identifies a product included in the captured image and an arrangement position of the product on the product shelf; A second specifying unit that specifies the display information in which the specified arrangement position is associated as the installation position with reference to the storage unit, and the product information in the specified product; A determination unit that determines whether the specified display information is different from the specified product information; When it is determined that the specified display information and the specified product information are different, an output unit that outputs the fact to the outside, Is provided.
  • the merchandise shelf management method includes: Take a picture of the product that is near the installation location on the product shelf where the display information is displayed at the product installation location, Based on the photographed photographed image, the product included in the photographed image and the arrangement position of the commodity on the commodity shelf are identified, The installation information and the display information are stored in association with each other, and the display information in which the specified arrangement position is associated as the installation position with reference to a storage unit in which product information about the product is stored. , Specifying the product information in the specified product, Determining whether the specified display information is different from the specified product information; When it is determined that the specified display information is different from the specified product information, the fact is output to the outside.
  • the product shelf management program is: An acquisition process for acquiring a photographed image including a product existing near the installation position on the product shelf on which display information is displayed at the installation position of the product; A first specifying process for specifying a product included in the captured image and an arrangement position of the product on the product shelf based on the captured image; The installation information and the display information are stored in association with each other, and the display information in which the specified arrangement position is associated as the installation position with reference to a storage unit in which product information about the product is stored.
  • a second specifying process for specifying the product information in the specified product A determination process for determining whether the specified display information is different from the specified product information; When it is determined that the specified display information and the specified product information are different, an output process for outputting the fact to the outside, Is executed on the computer.
  • the rearrangement is performed without using an electronic tag or the like.
  • An information processing apparatus, a product shelf management system, a product shelf management method, and a product shelf management program can be provided.
  • FIG. 1 is a block diagram showing an overall configuration of a product shelf management system 1 according to the first embodiment of the present invention.
  • the product shelf management system 1 includes a product shelf 110 and an information processing device 120.
  • the merchandise shelf 110 is a shelf that is installed in a retail store or the like and places (displays) the merchandise 111 or the like.
  • the product shelf 110 is provided with a display terminal 112 at a predetermined position.
  • the display terminal 112 is an electronic device that can display predetermined information based on information received from the outside.
  • the display terminal 112 can receive at least information transmitted from the information processing apparatus 120.
  • the display terminal 112 is an electronic shelf label that can receive information wirelessly.
  • the display terminal 112 When the display terminal 112 receives display information to be displayed from the information processing apparatus 120, the display terminal 112 displays the received display information. Alternatively, when the display terminal 112 holds a plurality of display information in advance and receives information (or a display content switching signal) specifying display information to be displayed from the information processing apparatus 120, the display terminal 112 is based on the information. The designated display information may be selected (or switched) for display. Note that the number of products displayed on the product shelf 110 and the number of electronic shelf labels installed may be 2 or more, respectively.
  • the information processing device 120 is a management device that manages the product shelf 110.
  • the information processing apparatus 120 includes an acquisition unit 121, a first specification unit 122, a second specification unit 123, a determination unit 124, an output unit 125, and a storage unit 126.
  • the storage unit 126 is a storage device that stores an installation position 1261, display information 1262, and product information 1263.
  • the product information 1263 is display information related to the product 111.
  • the product information 1263 includes, for example, the product name and price of the product 111.
  • the storage unit 126 stores the installation position 1261 and the display information 1262 in association with each other.
  • the installation position 1261 is information indicating the position on the product shelf 110 where the display terminal 112 is installed, and is information that can uniquely identify at least the position in the product shelf 110.
  • the installation position 1261 indicates, for example, a step (shelf position) in the product shelf 110, a position in the width direction of the shelf, or the like.
  • the display information 1262 is information managed by the information processing apparatus 120 as information displayed on the display terminal 112.
  • the display information 1262 is product information of a product to be placed at the installation position 1261.
  • the obtaining unit 121 obtains a photographed image obtained by photographing the product shelf 110 including products existing near the installation position 1261.
  • the product 111 is arranged at a predetermined position on the product shelf 110. That is, it is assumed that the display terminal 112 installed on the product shelf 110 and the product 111 exist in the vicinity.
  • the photographed image is obtained by photographing the product shelf 110 by photographing means such as a camera. Therefore, the photographing unit may detect and photograph the act of the customer or the like taking out the product 111 from the product shelf 110 or returning the product 111 to the product shelf 110. Even in this case, at least the product 111 exists in the vicinity of the installation position 1261 in the captured image.
  • the photographed image includes information that can specify at least the actual arrangement position of the product.
  • the acquisition part 121 may acquire the picked-up image image
  • the information processing apparatus 120 itself may include a photographing unit such as a camera, and the obtaining unit 121 may obtain a photographed image output from the photographing unit.
  • the first specifying unit 122 specifies the product 111 included in the captured image and the arrangement position of the product 111 on the product shelf 110 based on the captured image. For example, an image of a product corresponding to the product 111 is stored in the storage unit 126 in advance, and the first specifying unit 122 extracts an image of the product 111 from the captured image by image recognition or the like. A product corresponding to an image of a product similar to the image may be specified as a product arranged on the product shelf 110.
  • the first specifying unit 122 may specify the arrangement position of the product 111 in the product shelf 110 from the relationship between the region of the product shelf 110 and the region of the product 111 in the photographed image.
  • the second specifying unit 123 refers to the storage unit 126 and specifies the display information 1262 in which the specified arrangement position is associated as the installation position 1261 and the product information 1263 in the specified product 111.
  • the second specifying unit 123 refers to the storage unit 126, the electronic shelf label 112 having the specified arrangement position as the installation position 1261, display information 1262 associated with the electronic shelf label 112, and the specification
  • the merchandise information 1263 in the merchandise 111 may be specified.
  • the determination unit 124 determines whether or not the specified display information 1262 and the specified product information 1263 are different.
  • the output unit 125 outputs the fact to the outside.
  • the output unit 125 may be configured such that a product 111 actually placed on the product shelf 110 is displayed on a display device such as a display connected to the information processing device 120, and the product corresponds to the display information displayed on the display terminal 112. Displays a different message.
  • the output unit 125 transmits information indicating that the specified display information 1262 is different from the specified product information 1263 to the specified display terminal 112.
  • FIG. 2 is a flowchart showing the flow of the merchandise shelf management process according to the first embodiment of the present invention.
  • the acquisition unit 121 acquires a captured image including the product 111 existing in the vicinity of the installation position 1261 (S101).
  • specification part 122 specifies the goods 111 contained in a picked-up image, and the arrangement position on the goods shelf 110 of the goods 111 based on a picked-up image (S102).
  • the second specifying unit 123 refers to the storage unit 126 and specifies display information 1262 in which the specified arrangement position is associated as the installation position 1261 and product information 1263 in the specified product 111. (S103).
  • the determination unit 124 determines whether or not the specified display information 1262 is different from the specified product information 1263 (S104). At this time, when it is determined that the specified display information 1262 and the specified product information 1263 are different, the output unit 125 outputs the fact to the outside (S105).
  • the arrangement position of each product in the product shelf may be defined in advance by a contract between the provider of each product and the store.
  • the product information according to the definition is displayed on the electronic shelf label, and the product may be displayed on the product shelf at a position different from the actual definition.
  • a store clerk may accidentally display a product at an arrangement position different from the definition when the product is displayed.
  • the customer who came to the store may return the product picked up from the product shelf to another place. In such a case, it is ultimately necessary to rearrange the products at their original positions.
  • the display content of the product displayed on the electronic shelf label installed in the product shelf 110 is different from the actual product arranged at that position. It is possible to detect without using an electronic tag or the like, and to notify a store clerk or the like that a product placed on the product shelf 110 is placed at a position different from the original. Therefore, it is possible to support the store clerk and the like to rearrange the product at an appropriate position.
  • Embodiment 1 of this invention should just be provided with the following structure at least. That is, the installation position of the product on the product shelf and the display information displayed at the installation position are stored in association with each other, the storage unit that stores the product information related to the product, and the product that exists near the installation position.
  • An acquisition unit that acquires a captured image, a first specifying unit that specifies a product included in the captured image, and an arrangement position of the product on the product shelf based on the captured image, and the storage unit.
  • a second specifying unit that specifies the display information in which the specified arrangement position is associated as the installation position, and the product information in the specified product, and the specified display If it is determined that the information is different from the specified product information, and the determination unit determines whether the specified display information is different from the specified product information Output to And parts, an information processing apparatus including a.
  • the display terminal 112 does not necessarily have to be installed on the product shelf 110, and the display information 1262 is displayed in some form at the installation position 1261 of the product shelf 110.
  • the installation position 1261 is at least a position where the product 111 is to be placed.
  • Embodiment 2 of the present invention is an example of Embodiment 1 described above, and when the display content of the electronic shelf label is different from the actually placed product, the display content is temporarily rewritten, A message indicating that the display is temporarily changed is displayed. As a result, not only the store clerk but also the customer is informed that the display contents of the electronic shelf label have been temporarily changed, reducing misunderstandings to the customer, and facilitating relocation by the store clerk. it can.
  • FIG. 3 is a block diagram showing the configuration of the commodity shelf management system 2 according to the second embodiment of the present invention.
  • the product shelf management system 2 includes a product shelf 21, a camera 22, and a management device 23.
  • the product shelf 21 is an example of the product shelf 110, and each of the electronic shelf labels 212a to 212d is installed at a predetermined position.
  • the product shelf 21 includes at least one shelf, and one or more electronic shelf labels are installed in each shelf.
  • the electronic shelf labels 212a to 212d are examples of the display terminal 112 described above.
  • Each of the electronic shelf labels 212a to 212d receives at least a receiving unit (not shown) that receives information transmitted from the management device 23, a memory (not shown) that stores the received information, and a display that displays the received information.
  • the electronic shelf labels 212a to 212d may be known ones. On the product shelf 21, the products 211a to 211d are displayed in the vicinity of the electronic shelf labels 212a to 212d. The number of products displayed on the product shelf 21 and the number of electronic shelf labels installed are not limited to this.
  • the camera 22 is a photographing device that photographs at least a part of the product shelf 21.
  • the captured image captured by the camera 22 includes at least one of the products 211a to 211d so that it can be recognized.
  • the camera 22 outputs a captured image to the management device 23 via a communication line.
  • the management device 23 is an example of the information processing device 120 described above.
  • the management device 23 includes a control unit 231, a communication unit 232, and a storage unit 233.
  • the management device 23 is connected to the camera 22 via a wired or wireless communication line.
  • the storage unit 233 is an example of the storage unit 126 described above, and is, for example, a storage device such as a hard disk.
  • the storage unit 233 stores a product master 234 and a shelf label master 235.
  • the product master 234 defines information on the products 211a to 211d displayed on the product shelf 21.
  • a product ID 2341, product information 2342, and a product image 2343 are associated with each product.
  • the product ID 2341 is identification information of the products 211a to 211d.
  • the merchandise information 2342 is an example of the merchandise information 1263 described above, and includes, for example, text information indicating the name, price, production area, etc. of the merchandise, images, and the like.
  • the product image 2343 is image data of the products 211a to 211d.
  • the product image 2343 in the product 211a is image data taken from at least one direction of the product 211a.
  • the product image 2343 in the product 211a may be a plurality of image data groups taken from a plurality of directions of the product 211a. The same applies to the product images 2343 of the products 211b to 211d.
  • the shelf label master 235 is information for managing the electronic shelf labels 212a to 212d.
  • a shelf label ID 2351 is identification information of the electronic shelf labels 212a to 212d.
  • the installation position 2352 is an example of the installation position 1261 described above.
  • display information 2353 product information 2342 to be displayed on the display units of the electronic shelf labels 212a to 212d is set. In this embodiment, it is assumed that the installation position 2352 and display information 2353 of each electronic shelf label are registered in the shelf label master 235 in advance.
  • the temporary change flag 2354 is flag information indicating whether or not the display content of the electronic shelf label is a temporary display change. For example, when the display content of the electronic shelf label indicates a temporary display change, the temporary change flag 2354 is set to ON, and the display content of the electronic shelf label indicates that it is not a temporary display change (electronic shelf label ) And the placed product correspond to each other), the temporary change flag 2354 is turned OFF.
  • the control unit 231 is an example of the acquisition unit 121, the first specification unit 122, the second specification unit 123, and the determination unit 124 described above, and is, for example, a CPU (Central Processing Unit).
  • the control unit 231 acquires a captured image from the camera 22 via the communication line using the communication unit 232. Note that the control unit 231 may transmit an imaging instruction or a captured image acquisition request to the camera 22.
  • the control unit 231 analyzes the captured image received from the camera 22, recognizes the product image included in the captured image, and refers to the storage unit 233 to generate a product image 2343 similar to the recognized image.
  • the associated product ID 2341 is specified. At this time, the control unit 231 may use a known image matching technique or the like.
  • control unit 231 specifies the arrangement position of the commodity on the commodity shelf 21 from the position in the photographed image in the commodity image included in the photographed image. For example, the control unit 231 specifies the position of the shelf or the width direction in the product shelf 21 in the captured image based on the orientation and angle of the camera 22, and arranges the product from the positional relationship in the captured image of the product image recognized above. Identify the location. Then, the control unit 231 refers to the storage unit 233, identifies the shelf label ID 2351 having the installation position 2352 in the vicinity of the identified arrangement position, and identifies the display information 2353 associated with the shelf label ID 2351.
  • control unit 231 refers to the storage unit 233 and identifies the product information 2342 associated with the identified product ID 2341. Then, the control unit 231 determines whether or not the specified display information 2353 and the specified product information 2342 are different. When it is determined that the specified display information 2353 is different from the specified product information 2342, the control unit 231 uses the communication unit 232 to specify the specified electronic shelf label ID 2351.
  • the merchandise information 2342 that has been sent includes a temporary display change. Thereby, the received electronic shelf label rewrites the display content including the fact that the product information 2342 is a temporary display change.
  • control unit 231 updates the storage unit 233 in association with the specified electronic shelf label to indicate that the display is temporarily changed. Therefore, the control unit 231 can also be called an update unit of the storage unit 233. However, the control unit 231 does not update the display information 2353 in the storage unit 233 in the specified electronic shelf label. Therefore, it is possible to manage the temporary display change while maintaining the original display contents of the electronic shelf label.
  • the control unit 231 refers to the storage unit 233 and temporarily changes the information associated with the specified electronic shelf label.
  • the flag 2354 is ON, the temporary change flag 2354 associated with the electronic shelf label is deleted from the storage unit 233, that is, the temporary change flag 2354 is updated to OFF. This is because the temporary change flag 2354 is ON, and the management device 23 has already displayed that the display is temporarily changed for the electronic shelf label. By confirming the display content, it means that the product to be originally placed is placed on the electronic shelf label.
  • control unit 231 uses the communication unit 232 to delete the temporary display change associated with the specified electronic shelf label from the storage unit 233, that is, the temporary change flag 2354 is set.
  • display information 2353 associated with the electronic shelf label is transmitted to the specified electronic shelf label.
  • the electronic shelf label rewrites the display content in the received display information 2353. This means that the display content of the electronic shelf label has been written back to the original product information 2342.
  • the communication unit 232 receives the captured image from the camera 22 via the communication line and outputs the received image to the control unit 231. In addition, the communication unit 232 transmits the specified product information 2342 to the electronic shelf label specified according to the instruction from the control unit 231.
  • FIG. 4 is a flowchart showing the flow of the merchandise shelf management process according to the second embodiment of the present invention.
  • 5 and 6 are sequence diagrams for explaining the flow of changing the display of the electronic shelf label according to the second embodiment of the present invention.
  • the camera 22 photographs at least the vicinity of the electronic shelf label 212b of the commodity shelf 21 (S203). That is, it is assumed that the lens of the camera 22 is directed in advance to a position including the vicinity of the installation position of the electronic shelf label 212b. Here, it is assumed that the product 211a is included in the photographed image. And the camera 22 transmits a picked-up image to the management apparatus 23 via a communication line (S204).
  • the management device 23 receives the captured image and executes the processes of steps S101 to S103 in FIG. And the control part 231 of the management apparatus 23 determines whether the specified display information 2353 and the specified merchandise information 2342 differ (S104 of FIG. 4). At this time, the specified display information 2353 indicates the product information of the product 211b to be originally arranged, and the specified product information 2342 indicates the product information of the product 211a actually specified by image recognition. . Therefore, the control unit 231 determines that the specified display information 2353 is different from the specified product information 2342 (YES in S104 of FIG. 4, S205 of FIG. 5). Then, the management device 23 turns on the notification and temporary change flag (S206 in FIG. 5).
  • the control unit 231 uses the communication unit 232 to notify that it is different (S105a in FIG. 4). For example, a different message is displayed on a screen connected to the management device 23.
  • the control unit 231 turns on the temporary change flag 2354 associated with the electronic shelf label 212b and updates the storage unit 233 (S106 in FIG. 4).
  • the control part 231 transmits the merchandise information 2342 of the specified goods 211a including the effect of a temporary display change with respect to the electronic shelf label 212b (S107 of FIG. 4, S207 of FIG. 5).
  • the electronic shelf label 212b receives the product information 2342 and the like transmitted from the management device 23, and displays the product information 2342 of the product 211a and a temporary display change (S208 in FIG. 5).
  • step S105a the store clerk or the like who has confirmed the notification in step S105a or the temporary display change displayed on the electronic shelf label 212b rearranges the product 211b to be originally arranged near the electronic shelf label 212b (FIG. 6). S209).
  • the camera 22 again captures the vicinity of the electronic shelf label 212b (S210 in FIG. 6), and transmits the captured image to the management apparatus 23 via the communication line (S211 in FIG. 6). Thereafter, the management device 23 receives the captured image and executes the processes of steps S101 to S104 in FIG.
  • the display information 2353 of the electronic shelf label 212b is held as the product information of the product 211b to be originally arranged. Therefore, the specified display information 2353 indicates the product information of the product 211b, and the specified product information 2342 indicates the product information of the product 211b that is actually specified by image recognition.
  • the control unit 231 determines that the display information 2353 of the specified electronic shelf label 212b matches the product information 2342 of the specified product 211b (NO in S104 of FIG. 4, S212 of FIG. 6). Further, the control unit 231 determines whether or not the temporary change flag of the electronic shelf label 212b is ON (S108 in FIG. 4). Here, it is determined that the temporary change flag of the electronic shelf label 212b is ON (YES in S108 of FIG. 4), and the control unit 231 sets the temporary change flag to OFF (S109 of FIG. 4, S213 of FIG. 6). .
  • control unit 231 uses the communication unit 232 to transmit display information (display information 2353 of the electronic shelf label 212b, that is, product information 2342 of the product 211b) to the electronic shelf label 212b (FIG. 4). S110, S214 of FIG. 6). Thereafter, the electronic shelf label 212b receives the product information 2342 and the like transmitted from the management device 23, and displays the product information 2342 of the product 211b (S215 in FIG. 6).
  • step S108 in FIG. 4 if the temporary change flag of the electronic shelf label to be processed is OFF, the display content of the electronic shelf label corresponds to the actually placed product. finish.
  • the management device 23 detects that the display content of the electronic shelf label is a temporary display change, and the correspondence between the display content of the electronic shelf label and the product is correct for rearrangement. The original display content can be restored.
  • the original display can be surely restored.
  • the electronic tag or the like is Relocation can be supported without using it.
  • the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present invention described above.
  • the present invention has been described as a hardware configuration, but the present invention is not limited to this.
  • the present invention can also realize arbitrary processing by causing a CPU (Central Processing Unit) to execute a computer program.
  • a CPU Central Processing Unit
  • Non-transitory computer readable media include various types of tangible storage media (tangible storage medium).
  • Examples of non-transitory computer-readable media include magnetic recording media (eg flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg magneto-optical discs), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W, DVD (Digital Versatile Disc), BD (Blu-ray (registered trademark) Disc), semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM ( Random Access Memory)).
  • magnetic recording media eg flexible disks, magnetic tapes, hard disk drives
  • magneto-optical recording media eg magneto-optical discs
  • CD-ROMs Read Only Memory
  • CD-Rs Compact Only Memory
  • CD-R / W Digital Versatile Disc
  • DVD Digital Versatile Disc
  • BD Blu-ray (registered trademark) Disc
  • the program may also be supplied to the computer by various types of temporary computer-readable media.
  • Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • Commodity shelf management system 110 Commodity shelf 111 Commodity 112 Display terminal 120 Information processing apparatus 121 Acquisition part 122 1st specific part 123 2nd specific part 124 Judgment part 125 Output part 126 Storage part 1261 Installation position 1262 Display information 1263 Product information 2 Product shelf management system 21 Product shelf 211a Product 212a Electronic shelf label 211b Product 212b Electronic shelf label 211c Product 212c Electronic shelf label 211d Product 212d Electronic shelf label 22 Camera 23 Management device 231 Control unit 232 Communication unit 233 Storage unit 234 Product master 2341 Product ID 2342 Product information 2343 Product image 235 Shelf label master 2351 Shelf label ID 2352 Installation position 2353 Display information 2354 Temporary change flag

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Display Racks (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

本発明にかかる情報処理装置(120)は、商品棚(110)上の商品(111)の設置位置(1261)と当該設置位置に表示された表示情報(1262)とを対応付けて記憶し、商品に関する商品情報(1263)を記憶する記憶部(126)と、設置位置付近に存在する商品を含む撮影画像を取得する取得部(121)と、撮影画像に基づき、撮影画像に含まれる商品と、当該商品の商品棚上の配置位置とを特定する第1の特定部(122)と、記憶部を参照して、特定された配置位置が設置位置として対応付けられた表示情報と、特定された商品における商品情報とを特定する第2の特定部(123)と、特定された表示情報と、特定された商品情報とが異なるか否かを判定する判定部(124)と、特定された表示情報と特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力部(125)と、を備える。

Description

情報処理装置、商品棚管理システム、及び、商品棚管理方法
 本発明は、情報処理装置、商品棚管理システム、商品棚管理方法、及び、商品棚管理プログラムに関し、特に、商品棚を管理する情報処理装置、商品棚管理システム、商品棚管理方法、及び、商品棚管理プログラムに関する。
 近年、小売店等の商品の陳列棚(商品棚)において、各商品の傍らに商品の値段等を表示する電子棚札が普及しつつある。特許文献1には、陳列棚に陳列される商品の在庫情報を効率的に管理する技術が開示されている。特許文献1にかかる技術は、まず、電子棚札システムサーバが、棚に配置される商品に取り付けられた電子タグから商品識別情報を読み取り、併せて、棚における商品配置位置それぞれに取り付けられた電子タグから商品位置情報を読み取る。そして、当該サーバは、読み取った商品識別情報と商品位置情報を関連付ける。その後、当該サーバは、商品識別情報に基づく当該商品の在庫情報を、該当する商品配置位置の電子棚札に表示するものである。
特開2007-206745号公報
 ここで、特許文献1では、各商品と各商品配置位置のそれぞれに電子タグを取り付けておき、電子タグを読み取り可能な位置に電子タグのリーダ装置を設置しておく必要がある。しかしながら、商品の性質上、電子タグを取り付けることが困難である場合や、あらゆる小売店の商品棚に電子棚札ばかりでなく、商品配置位置に電子タグを取り付け、さらに、リーダ装置を設置することが困難である場合もある。そのため、特許文献1にかかる技術は、電子タグ及びそのリーダ装置を用いることができない場合には、適用が困難であるという問題点がある。
 本発明は、このような問題点を解決するためになされたものであり、商品棚における各設置位置に設置された各電子棚札等の商品の表示内容と、その位置に配置された実際の商品とが異なる場合に、電子タグ等を用いることなく再配置を支援するための情報処理装置、商品棚管理システム、商品棚管理方法、及び、商品棚管理プログラムを提供することを目的とする。
 本発明の第1の態様にかかる情報処理装置は、
 商品棚上の商品の設置位置と当該設置位置に表示された表示情報とを対応付けて記憶し、前記商品に関する商品情報を記憶する記憶部と、
 前記設置位置付近に存在する前記商品を含む撮影画像を取得する取得部と、
 前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定部と、
 前記記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定部と、
 前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定部と、
 前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力部と、
 を備える。
 本発明の第2の態様にかかる商品棚管理システムは、
 商品の設置位置に所定の表示情報が表示された商品棚と、
 前記設置位置付近に存在する前記商品を含めて撮影し、撮影画像として出力する撮影手段と、
 前記商品棚を管理する管理装置と、を備え、
 前記管理装置は、
 前記設置位置と前記表示情報とを対応付けて記憶し、前記商品に関する商品情報を記憶する記憶部と、
 前記撮影手段から前記撮影画像を取得する取得部と、
 前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定部と、
 前記記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定部と、
 前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定部と、
 前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力部と、
 を備える。
 本発明の第3の態様にかかる商品棚管理方法は、
 商品の設置位置に表示情報が表示された商品棚上の当該設置位置付近に存在する商品を含めて撮影し、
 前記撮影された撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定し、
 前記設置位置と前記表示情報とが対応付けて記憶され、前記商品に関する商品情報が記憶された記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定し、
 前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定し、
 前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する。
 本発明の第4の態様にかかる商品棚管理プログラムは、
 商品の設置位置に表示情報が表示された商品棚上の当該設置位置付近に存在する商品を含めて撮影した撮影画像を取得する取得処理と、
 前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定処理と、
 前記設置位置と前記表示情報とが対応付けて記憶され、前記商品に関する商品情報が記憶された記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定処理と、
 前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定処理と、
 前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力処理と、
 をコンピュータに実行させる。
 本発明により、商品棚における各設置位置に設置された各電子棚札等の商品の表示内容と、その位置に配置された実際の商品とが異なる場合に、電子タグ等を用いることなく再配置を支援するための情報処理装置、商品棚管理システム、商品棚管理方法、及び、商品棚管理プログラムを提供することができる。
本発明の実施の形態1にかかる商品棚管理システムの全体構成を示すブロック図である。 本発明の実施の形態1にかかる商品棚管理処理の流れを示すフローチャートである。 本発明の実施の形態2にかかる商品棚管理システムの構成を示すブロック図である。 本発明の実施の形態2にかかる商品棚管理処理の流れを示すフローチャートである。 本発明の実施の形態2にかかる電子棚札の表示変更の流れを説明するためのシーケンス図である。 本発明の実施の形態2にかかる電子棚札の表示変更の流れを説明するためのシーケンス図である。
 以下では、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。各図面において、同一要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略する。
<発明の実施の形態1>
 図1は、本発明の実施の形態1にかかる商品棚管理システム1の全体構成を示すブロック図である。商品棚管理システム1は、商品棚110と情報処理装置120とを備える。商品棚110は、小売店等に設置され、商品111等を配置(陳列)する棚である。そして、商品棚110には、所定の位置に表示端末112が設置されている。表示端末112は、外部から受信した情報に基づいて所定の情報を表示可能な電子機器である。ここでは、表示端末112は、少なくとも情報処理装置120から送信される情報を受信できるものとする。例えば、表示端末112は、無線により情報を受信できる電子棚札である。そして、表示端末112は、情報処理装置120から表示対象の表示情報を受信した場合に、当該受信した表示情報を表示する。または、表示端末112は、複数の表示情報を予め保持しており、情報処理装置120から表示対象の表示情報を指定した情報(又は表示内容の切替信号)を受け付けた場合に、当該情報に基づいて、指定された表示情報を選択して(又は切り替えて)表示してもよい。尚、商品棚110に陳列される商品の数や、設置される電子棚札の数は、それぞれ2以上であってもよい。
 情報処理装置120は、商品棚110を管理する管理装置である。情報処理装置120は、取得部121と、第1の特定部122と、第2の特定部123と、判定部124と、出力部125と、記憶部126とを備える。記憶部126は、設置位置1261と、表示情報1262と、商品情報1263とを記憶する記憶装置である。商品情報1263は、商品111に関する表示用の情報である。商品情報1263は、例えば、商品111の商品名、価格等を含むものである。また、記憶部126は、設置位置1261と表示情報1262とを対応付けて記憶する。設置位置1261は、表示端末112が設置された商品棚110上の位置を示す情報であり、少なくとも商品棚110内の位置を一意に特定できる情報である。設置位置1261は、例えば、商品棚110内の段(棚の位置)や棚の幅方向の位置等を示す。表示情報1262は、表示端末112に表示された情報として情報処理装置120において管理される情報である。例えば、つまり、表示情報1262は、設置位置1261に配置すべき商品の商品情報である。
 取得部121は、設置位置1261付近に存在する商品を含めて商品棚110を撮影した撮影画像を取得する。ここで、商品棚110には、商品111が所定の位置に配置されているものとする。つまり、商品棚110に設置された表示端末112と商品111とが近傍に存在しているものとする。また、撮影画像は、カメラ等の撮影手段により商品棚110が撮影されたものである。そのため、撮影手段は、客等が商品棚110から商品111を取り出す行為や、商品111を商品棚110に戻す行為を検出して、撮影してもよい。この場合でも撮影画像には、少なくとも商品111が設置位置1261付近に存在することとなる。つまり、撮影画像は、少なくとも商品の実際の配置位置が特定できる情報が含まれるものである。また、取得部121は、カメラ等により撮影された撮影画像を、通信回線を介して取得してもよい。または、情報処理装置120自身がカメラ等の撮影手段を備え、取得部121は撮影手段から出力された撮影画像を取得しても良い。
 第1の特定部122は、撮影画像に基づき、撮影画像に含まれる商品111と、商品111の商品棚110上の配置位置とを特定する。例えば、商品111に対応する商品の画像を予め記憶部126に記憶しておき、第1の特定部122は、撮影画像から画像認識等により商品111の画像を抽出し、抽出された商品111の画像に類似する商品の画像に対応する商品を、商品棚110に配置された商品として特定してもよい。また、第1の特定部122は、撮影画像内の商品棚110の領域と商品111の領域との関係から商品111の商品棚110における配置位置を特定してもよい。
 第2の特定部123は、記憶部126を参照して、特定された配置位置が設置位置1261として対応付けられた表示情報1262と、特定された商品111における商品情報1263とを特定する。尚、第2の特定部123は、記憶部126を参照して、特定された配置位置を設置位置1261とする電子棚札112と、電子棚札112に対応付けられた表示情報1262と、特定された商品111における商品情報1263とを特定してもよい。
 判定部124は、特定された表示情報1262と、特定された商品情報1263とが異なるか否かを判定する。出力部125は、特定された表示情報1262と特定された商品情報1263とが異なると判定された場合に、その旨を外部に出力する。例えば、出力部125は、情報処理装置120に接続されたディスプレイ等の表示装置に、商品棚110に実際に配置された商品111が、表示端末112に表示されている表示情報に対応する商品とは異なる旨のメッセージを表示させる。または、出力部125は、特定された表示端末112に対して、特定された表示情報1262と特定された商品情報1263とが異なる旨を示す情報を送信する。
 図2は、本発明の実施の形態1にかかる商品棚管理処理の流れを示すフローチャートである。まず、取得部121は、設置位置1261付近に存在する商品111を含む撮影画像を取得する(S101)。次に、第1の特定部122は、撮影画像に基づき、撮影画像に含まれる商品111と、商品111の商品棚110上の配置位置とを特定する(S102)。
 そして、第2の特定部123は、記憶部126を参照して、特定された配置位置が設置位置1261として対応付けられた表示情報1262と、特定された商品111における商品情報1263とを特定する(S103)。
 続いて、判定部124は、特定された表示情報1262と、特定された商品情報1263とが異なるか否かを判定する(S104)。このとき、特定された表示情報1262と、特定された商品情報1263とが異なると判定された場合に、出力部125は、その旨を外部に出力する(S105)。
 例えば、各商品の提供元と店舗との間の契約等により、商品棚における各商品の配置位置が予め定義されていることがある。そして、電子棚札には定義に従った商品情報が表示される一方、商品棚には、実際の定義とは異なる位置に商品が陳列されていることがある。例えば、店員が商品の陳列時に誤って定義とは異なる配置位置に商品を陳列してしまう場合がある。または、来店した客が商品棚から手に取った商品を他の場所に戻してしまう場合もある。このような場合には、最終的には商品を本来の配置位置に配置し直す必要がある。
 このような場合に、本発明の実施の形態1では、商品棚110に設置された電子棚札に表示された商品の表示内容と、その位置に配置された実際の商品とが異なることを、電子タグ等を用いることなく検出し、商品棚110に配置された商品が本来とは異なる位置に配置されたことを店員等に対して報知することができる。それ故、店員等が当該商品を適切な位置に再配置することを支援できる。
 尚、本発明の実施の形態1は、少なくとも次の構成を備えていればよい。すなわち、商品棚上の商品の設置位置と当該設置位置に表示された表示情報とを対応付けて記憶し、前記商品に関する商品情報を記憶する記憶部と、前記設置位置付近に存在する前記商品を含む撮影画像を取得する取得部と、前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定部と、前記記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定部と、前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定部と、前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力部と、を備える情報処理装置である。
 つまりこの場合、商品棚110には、必ずしも表示端末112が設置されていなくてもよく、商品棚110の設置位置1261には、何らかの形で表示情報1262が表示されていることになる。そして、設置位置1261は、少なくとも商品111が配置されるべき位置となる。
<発明の実施の形態2>
 本発明の実施の形態2は、上述した実施の形態1の一実施例であり、電子棚札の表示内容と実際に配置された商品とが異なる場合に、一時的に表示内容を書き換えると共に、一時的な表示変更である旨を表示させるものである。これにより、店員だけでなく顧客に対しても電子棚札の表示内容が一時的に変更されていることが伝わり、顧客への誤解を軽減し、また、店員による再配置を容易にすることができる。
 図3は、本発明の実施の形態2にかかる商品棚管理システム2の構成を示すブロック図である。商品棚管理システム2は、商品棚21と、カメラ22と、管理装置23とを備える。商品棚21は、商品棚110の一例であり、電子棚札212a~212dのそれぞれが所定の位置に設置されているものである。商品棚21は、少なくとも1以上の棚があり、各棚に1以上の電子棚札が設置されているものとする。電子棚札212a~212dは、上述した表示端末112の一例である。電子棚札212a~212dのそれぞれは、少なくとも管理装置23から送信される情報を受信する受信部(不図示)、受信した情報を記憶するメモリ(不図示)、及び、受信した情報を表示する表示部(不図示)等を備える。尚、電子棚札212a~212dは、公知ものを用いても構わない。また、商品棚21には、商品211a~211dのそれぞれが、電子棚札212a~212dの近傍に陳列されている。尚、商品棚21に陳列される商品の数や、設置される電子棚札の数は、これに限定されない。
 カメラ22は、商品棚21の少なくとも一部を撮影する撮影装置である。そして、カメラ22が撮影した撮影画像には、少なくとも商品211a~211dの一つが認識可能な程度に含まれているものとする。また、カメラ22は、通信回線を介して撮影画像を管理装置23へ出力する。
 管理装置23は、上述した情報処理装置120の一例である。管理装置23は、制御部231と、通信部232と、記憶部233とを備える。管理装置23は、有線又は無線の通信回線によりカメラ22と接続されている。
 記憶部233は、上述した記憶部126の一例であり、例えば、ハードディスク等の記憶装置である。記憶部233は、商品マスタ234と、棚札マスタ235とを記憶する。商品マスタ234は、商品棚21に陳列される商品211a~211dに関する情報を定義したものである。商品マスタ234は、商品ID2341と、商品情報2342と、商品画像2343とが商品ごとに対応付けられている。商品ID2341は、商品211a~211dの識別情報である。商品情報2342は、上述した商品情報1263の一例であり、例えば、商品の名称、価格、産地等を示すテキスト情報や、画像等を含むものである。商品画像2343は、商品211a~211dの画像データである。例えば、商品211aにおける商品画像2343は、商品211aの少なくとも一方向から撮影された画像データである。または、商品211aにおける商品画像2343は、商品211aの複数方向から撮影された複数の画像データ群であってもよい。商品211b~211dの商品画像2343についても同様である。
 棚札マスタ235は、電子棚札212a~212dを管理するための情報である。棚札マスタ235は、棚札ID2351と、設置位置2352と、表示情報2353と、一時変更フラグ2354とが電子棚札ごとに対応付けられている。棚札ID2351は、電子棚札212a~212dの識別情報である。設置位置2352は、上述した設置位置1261の一例である。表示情報2353には、電子棚札212a~212dの表示部に表示されるべき商品情報2342が設定される。尚、本実施の形態では、各電子棚札の設置位置2352及び表示情報2353が棚札マスタ235に予め登録されているものとする。一時変更フラグ2354は、電子棚札の表示内容が一時的な表示変更であるか否かを示すフラグ情報である。例えば、電子棚札の表示内容が一時的な表示変更である旨を示す場合、一時変更フラグ2354をONとし、電子棚札の表示内容が一時的な表示変更でないことを示す場合(電子棚札の表示内容と配置された商品が対応する場合)、一時変更フラグ2354をOFFとする。
 制御部231は、上述した取得部121、第1の特定部122、第2の特定部123及び判定部124の一例であり、例えば、CPU(Central Processing Unit)である。制御部231は、通信部232を用いてカメラ22から通信回線を介して撮影画像を取得する。尚、制御部231は、カメラ22に対して撮影指示や撮影画像の取得要求を送信してもよい。制御部231は、カメラ22から受信した撮影画像を解析して、当該撮影画像に含まれる商品の画像を認識し、記憶部233を参照して、当該認識された画像に類似する商品画像2343に対応付けられた商品ID2341を特定する。このとき、制御部231は、公知の画像マッチング技術等を用いても構わない。また、制御部231は、撮影画像に含まれる商品の画像における撮影画像内の位置から商品棚21上における商品の配置位置を特定する。例えば、制御部231は、カメラ22の向きや角度により撮影画像内の商品棚21における棚や幅方向の位置を特定し、上記で認識された商品画像の撮影画像内の位置関係から商品の配列位置を特定する。そして、制御部231は、記憶部233を参照して、特定された配置位置の近傍を設置位置2352とする棚札ID2351を特定し、棚札ID2351に対応付けられた表示情報2353を特定する。さらに、制御部231は、記憶部233を参照して、特定された商品ID2341に対応付けられた商品情報2342を特定する。そして、制御部231は、特定された表示情報2353と特定された商品情報2342とが異なるか否かを判定する。特定された表示情報2353と特定された商品情報2342とが異なると判定された場合に、制御部231は、通信部232を用いて、特定された電子棚札の棚札ID2351に対して、特定された商品情報2342に一時的な表示変更である旨を含めて送信する。これにより、受信した電子棚札は、商品情報2342に一時的な表示変更である旨を含めて表示内容を書き換える。
 また、このとき、制御部231は、一時的な表示変更である旨を、特定された電子棚札に対応付けて記憶部233を更新する。そのため、制御部231は、記憶部233の更新部と呼ぶこともできる。但し、制御部231は、特定された電子棚札における、記憶部233内の表示情報2353を更新しない。そのため、電子棚札の本来の表示内容を保持しつつ、一時的な表示変更であることを管理できる。
 さらに、制御部231は、特定された表示情報2353と特定された商品情報2342とが一致すると判定された場合に、記憶部233を参照し、特定された電子棚札に対応付けられた一時変更フラグ2354がONである場合に、当該電子棚札に対応付けられた一時変更フラグ2354を記憶部233から削除し、つまり、一時変更フラグ2354をOFFに更新する。これは、一時変更フラグ2354がONであることから、既に、管理装置23が電子棚札に対して一時的な表示変更である旨を表示させた状態であり、その後、店員等が電子棚札の表示内容を確認したことにより、当該電子棚札には本来、配置されるべき商品が配置されたことを意味する。そして、制御部231は、通信部232を用いて、特定された電子棚札に対応付けられた一時的な表示変更である旨が記憶部233から削除された場合、つまり、一時変更フラグ2354がOFFに更新された場合に、当該特定された電子棚札に対して、当該電子棚札に対応付けられた表示情報2353を送信する。これにより、電子棚札は、受信した表示情報2353に表示内容を書き換える。これは、電子棚札の表示内容が元の商品情報2342に書き戻されたことを意味する。
 通信部232は、通信回線を介してカメラ22から撮影画像を受信し、制御部231へ出力する。また、通信部232は、制御部231からの指示に応じて指定された電子棚札に対して、特定された商品情報2342を送信する。
 続いて、本発明の実施の形態2にかかる電子棚札の表示変更の流れについて、図4、図5及び図6を適宜参照して説明する。図4は、本発明の実施の形態2にかかる商品棚管理処理の流れを示すフローチャートである。また、図5及び図6は、本発明の実施の形態2にかかる電子棚札の表示変更の流れを説明するためのシーケンス図である。
 まず、前提として、電子棚札212bには、商品211bの商品情報が表示されているものとする(図5のS201)。そして、電子棚札212bの設置位置の近傍の配置位置bに商品211aが配置されたものとする(図5のS202)。
 ここで、カメラ22は、商品棚21の少なくとも電子棚札212b付近を撮影する(S203)。つまり、カメラ22のレンズが予め電子棚札212bの設置位置付近が含まれるような位置に向けられているものとする。そして、ここでは、撮影画像に商品211aが含まれているものとする。そして、カメラ22は、通信回線を介して管理装置23へ撮影画像を送信する(S204)。
 そして、管理装置23は、撮影画像を受信し、図2のステップS101~S103の処理を実行する。そして、管理装置23の制御部231は、特定された表示情報2353と、特定された商品情報2342とが異なるか否かを判定する(図4のS104)。このとき、特定された表示情報2353は、本来配置されるべき商品211bの商品情報を示し、特定された商品情報2342は、実際に画像認識により特定された商品211aの商品情報を示すことになる。そのため、制御部231は、特定された表示情報2353と、特定された商品情報2342とが異なると判定する(図4のS104でYES、図5のS205)。そして、管理装置23は、報知及び一時変更フラグをONにする(図5のS206)。
 すなわち、制御部231は、通信部232を用いて、異なる旨を報知する(図4のS105a)。例えば、管理装置23に接続された画面等に異なる旨を表示させる。併せて、制御部231は、電子棚札212bに対応付けられた一時変更フラグ2354をONにして記憶部233を更新する(図4のS106)。そして、制御部231は、一時的な表示変更の旨を含めて、特定された商品211aの商品情報2342を電子棚札212bに対して送信する(図4のS107、図5のS207)。その後、電子棚札212bは、管理装置23から送信された商品情報2342等を受信し、商品211aの商品情報2342及び一時的な表示変更の旨を表示する(図5のS208)。
 その後、ステップS105aの報知、又は、電子棚札212bに表示された一時的な表示変更の旨を確認した店員等が、電子棚札212b付近に本来配置すべき商品211bを配置し直す(図6のS209)。
 そして、カメラ22は、再度、電子棚札212b付近を撮影し(図6のS210)、通信回線を介して管理装置23へ撮影画像を送信する(図6のS211)。その後、管理装置23は、撮影画像を受信し、図2のステップS101~S104の処理を実行する。ここでは、電子棚札212bの表示情報2353が本来配置されるべき商品211bの商品情報として保持されている。そのため、特定された表示情報2353は、商品211bの商品情報を示し、特定された商品情報2342は、実際に画像認識により特定された商品211bの商品情報を示すことになる。
 制御部231は、特定された電子棚札212bの表示情報2353と、特定された商品211bの商品情報2342とが一致すると判定する(図4のS104でNO、図6のS212)。さらに、制御部231は、電子棚札212bの一時変更フラグがONであるか否かを判定する(図4のS108)。ここでは、電子棚札212bの一時変更フラグがONであると判定され(図4のS108でYES)、制御部231は、一時変更フラグをOFFにする(図4のS109、図6のS213)。そして、制御部231は、通信部232を用いて、表示情報(電子棚札212bの表示情報2353、すなわち、商品211bの商品情報2342)を、電子棚札212bに対して送信する(図4のS110、図6のS214)。その後、電子棚札212bは、管理装置23から送信された商品情報2342等を受信し、商品211bの商品情報2342を表示する(図6のS215)。
 尚、図4のステップS108において、処理対象の電子棚札の一時変更フラグがOFFであれば、電子棚札の表示内容と実際に配置された商品とが対応することになるため、当該処理を終了する。
 このように、本実施の形態においても電子タグ等を用いずに、電子棚札の表示内容と商品との対応が異なることを検出できる。そして、電子棚札の表示内容と商品との対応が異なる場合に、一時的に電子棚札の表示内容を変更する。そのとき、店員等や顧客に一時的な表示変更である点が伝わるように表示を付加する。これにより、顧客の誤解を軽減し、店員による再配置を容易にすることができる。さらに、管理装置23側では電子棚札の表示内容について、一時的な表示変更であることを保持しておくことで、再配置に電子棚札の表示内容と商品との対応が正しいと検出された際に、元の表示内容に戻すことができる。このとき、元の表示内容を残しておくことで、確実に本来の表示に戻すことができる。このように、本実施の形態により、商品棚における各設置位置に設置された各電子棚札の商品の表示内容と、その位置に配置された実際の商品とが異なる場合に、電子タグ等を用いることなく再配置を支援することができる。
<その他の発明の実施の形態>
 さらに、本発明は上述した実施の形態のみに限定されるものではなく、既に述べた本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。例えば、上述の実施の形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、任意の処理を、CPU(Central Processing Unit)にコンピュータプログラムを実行させることにより実現することも可能である。
 上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、DVD(Digital Versatile Disc)、BD(Blu-ray(登録商標) Disc)、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
 以上、実施の形態を参照して本願発明を説明したが、本願発明は上記によって限定されるものではない。本願発明の構成や詳細には、発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
 この出願は、2014年3月20日に出願された日本出願特願2014-58408を基礎とする優先権を主張し、その開示の全てをここに取り込む。
 1 商品棚管理システム
 110 商品棚
 111 商品
 112 表示端末
 120 情報処理装置
 121 取得部
 122 第1の特定部
 123 第2の特定部
 124 判定部
 125 出力部
 126 記憶部
 1261 設置位置
 1262 表示情報
 1263 商品情報
 2 商品棚管理システム
 21 商品棚
 211a 商品
 212a 電子棚札
 211b 商品
 212b 電子棚札
 211c 商品
 212c 電子棚札
 211d 商品
 212d 電子棚札
 22 カメラ
 23 管理装置
 231 制御部
 232 通信部
 233 記憶部
 234 商品マスタ
 2341 商品ID
 2342 商品情報
 2343 商品画像
 235 棚札マスタ
 2351 棚札ID
 2352 設置位置
 2353 表示情報
 2354 一時変更フラグ

Claims (10)

  1.  商品棚上の商品の設置位置と当該設置位置に表示された表示情報とを対応付けて記憶し、前記商品に関する商品情報を記憶する記憶手段と、
     前記設置位置付近に存在する前記商品を含む撮影画像を取得する取得手段と、
     前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定手段と、
     前記記憶手段を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定手段と、
     前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定手段と、
     前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力手段と、
     を備える情報処理装置。
  2.  前記設置位置は、外部から受信した情報に基づいて所定の情報を表示可能な表示端末が前記商品棚に設置された位置であり、
     前記表示情報は、前記表示端末に表示された情報である
     ことを特徴とする請求項1に記載の情報処理装置。
  3.  前記表示端末として電子棚札が用いられる
     ことを特徴とする請求項2に記載の情報処理装置。
  4.  前記出力手段は、
     前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、前記特定された表示端末に対して、前記特定された前記商品情報に一時的な表示変更である旨を含めて送信する
     請求項2又は3に記載の情報処理装置。
  5.  前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、前記特定された表示端末における前記記憶手段内の前記表示情報を更新せずに、前記一時的な表示変更である旨を前記特定された表示端末に対応付けて前記記憶手段を更新する更新手段
     をさらに備える請求項4に記載の情報処理装置。
  6.  前記更新手段は、
     前記特定された表示情報と前記特定された商品情報とが一致すると判定された場合に、前記記憶手段を参照し、前記特定された表示端末に前記一時的な表示変更である旨が対応付けられている場合に、当該表示端末に対応付けられた前記一時的な表示変更である旨を前記記憶手段から削除し、
     前記出力手段は、
     前記特定された表示端末に対応付けられた前記一時的な表示変更である旨が前記記憶手段から削除された場合に、当該特定された表示端末に対して、当該表示端末に対応付けられた前記表示情報を送信する
     請求項5に記載の情報処理装置。
  7.  前記出力手段は、
     前記特定された表示情報と前特定された商品情報とが異なると判定された場合に、前記特定された表示端末に対して、前記表示情報と前記商品情報とが異なる旨を示す情報を送信する
     請求項2乃至6のいずれか1項に記載の情報処理装置。
  8.  商品の設置位置に所定の表示情報が表示された商品棚と、
     前記設置位置付近に存在する前記商品を含めて撮影し、撮影画像として出力する撮影手段と、
     前記商品棚を管理する管理装置と、を備え、
     前記管理装置は、
     前記設置位置と前記表示情報とを対応付けて記憶し、前記商品に関する商品情報を記憶する記憶手段と、
     前記撮影手段から前記撮影画像を取得する取得手段と、
     前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定手段と、
     前記記憶手段を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定手段と、
     前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定手段と、
     前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力手段と、
     を備える
     商品棚管理システム。
  9.  商品の設置位置に表示情報が表示された商品棚上の当該設置位置付近に存在する商品を含めて撮影し、
     前記撮影された撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定し、
     前記設置位置と前記表示情報とが対応付けて記憶され、前記商品に関する商品情報が記憶された記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定し、
     前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定し、
     前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する
     商品棚管理方法。
  10.  商品の設置位置に表示情報が表示された商品棚上の当該設置位置付近に存在する商品を含む撮影画像を取得する取得処理と、
     前記撮影画像に基づき、前記撮影画像に含まれる商品と、当該商品の前記商品棚上の配置位置とを特定する第1の特定処理と、
     前記設置位置と前記表示情報とが対応付けて記憶され、前記商品に関する商品情報が記憶された記憶部を参照して、前記特定された配置位置が前記設置位置として対応付けられた前記表示情報と、前記特定された商品における前記商品情報とを特定する第2の特定処理と、
     前記特定された前記表示情報と、前記特定された前記商品情報とが異なるか否かを判定する判定処理と、
     前記特定された表示情報と前記特定された商品情報とが異なると判定された場合に、その旨を外部に出力する出力処理と、
     をコンピュータに実行させる商品棚管理プログラムが格納された非一時的なコンピュータ可読媒体。
PCT/JP2014/005541 2014-03-20 2014-11-04 情報処理装置、商品棚管理システム、及び、商品棚管理方法 WO2015140851A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016508312A JP6226060B2 (ja) 2014-03-20 2014-11-04 情報処理装置、商品棚管理システム、商品棚管理方法及び商品棚管理プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-058408 2014-03-20
JP2014058408 2014-03-20

Publications (1)

Publication Number Publication Date
WO2015140851A1 true WO2015140851A1 (ja) 2015-09-24

Family

ID=54143877

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/005541 WO2015140851A1 (ja) 2014-03-20 2014-11-04 情報処理装置、商品棚管理システム、及び、商品棚管理方法

Country Status (2)

Country Link
JP (1) JP6226060B2 (ja)
WO (1) WO2015140851A1 (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017182653A (ja) * 2016-03-31 2017-10-05 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
JP2018151819A (ja) * 2017-03-13 2018-09-27 日本電気株式会社 管理装置、管理方法及びプログラム
WO2019064925A1 (ja) * 2017-09-29 2019-04-04 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム
JP2019125144A (ja) * 2018-01-16 2019-07-25 株式会社富士通アドバンストエンジニアリング 商品情報管理プログラム、方法及び装置、並びに商品管理プログラム、方法及び装置
WO2019171572A1 (ja) * 2018-03-09 2019-09-12 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
CN111310502A (zh) * 2018-12-12 2020-06-19 诚屏科技股份有限公司 货架管理系统与方法
JP2020149450A (ja) * 2019-03-14 2020-09-17 富士電機株式会社 商品管理システム及び商品管理方法
EP3751486A1 (en) * 2019-06-11 2020-12-16 Solum Co., Ltd. Electronic label management apparatus and method
JP2022069468A (ja) * 2018-03-09 2022-05-11 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
US11503200B2 (en) 2020-08-24 2022-11-15 Toshiba Tec Kabushiki Kaisha Photographing device and photographing method
US11508149B2 (en) 2019-06-05 2022-11-22 Novatek Microelectronics Corp. Operating method with goods information and non-transitory computer readable medium thereof
US11868146B2 (en) 2020-05-20 2024-01-09 Toshiba Tec Kabushiki Kaisha Photographing device and method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000353199A (ja) * 1999-04-09 2000-12-19 Ishida Co Ltd 棚札表示変更システム
JP2014048752A (ja) * 2012-08-29 2014-03-17 Teraoka Seiko Co Ltd 表示札処理システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001088912A (ja) * 1999-09-20 2001-04-03 Fujitsu General Ltd 画像認識による棚卸管理方法及び棚卸システム
JP2011048631A (ja) * 2009-08-27 2011-03-10 Ishida Co Ltd 電子棚札システム
JP2012053711A (ja) * 2010-09-01 2012-03-15 Toshiba Tec Corp 情報処理装置、店舗システム及びプログラム
JP6043094B2 (ja) * 2012-05-30 2016-12-14 辛東主 商品陳列情報集計システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000353199A (ja) * 1999-04-09 2000-12-19 Ishida Co Ltd 棚札表示変更システム
JP2014048752A (ja) * 2012-08-29 2014-03-17 Teraoka Seiko Co Ltd 表示札処理システム

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017182653A (ja) * 2016-03-31 2017-10-05 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
JP2018151819A (ja) * 2017-03-13 2018-09-27 日本電気株式会社 管理装置、管理方法及びプログラム
JP2022017307A (ja) * 2017-03-13 2022-01-25 日本電気株式会社 管理装置及び管理方法
JP6996093B2 (ja) 2017-03-13 2022-01-17 日本電気株式会社 管理装置、管理方法及びプログラム
JPWO2019064925A1 (ja) * 2017-09-29 2020-12-03 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム
JP7485140B2 (ja) 2017-09-29 2024-05-16 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム
WO2019064925A1 (ja) * 2017-09-29 2019-04-04 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム
US20200311659A1 (en) * 2017-09-29 2020-10-01 Nec Corporation Information processing apparatus, information processing method, and program
JP7259754B2 (ja) 2017-09-29 2023-04-18 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム
JP2019125144A (ja) * 2018-01-16 2019-07-25 株式会社富士通アドバンストエンジニアリング 商品情報管理プログラム、方法及び装置、並びに商品管理プログラム、方法及び装置
JP7069736B2 (ja) 2018-01-16 2022-05-18 富士通株式会社 商品情報管理プログラム、方法及び装置
JPWO2019171572A1 (ja) * 2018-03-09 2021-02-04 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
WO2019171572A1 (ja) * 2018-03-09 2019-09-12 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
JP7040596B2 (ja) 2018-03-09 2022-03-23 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
JP2022069468A (ja) * 2018-03-09 2022-05-11 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
US11430047B2 (en) 2018-03-09 2022-08-30 Nec Corporation Self-checkout system, purchased product management method, and purchased product management program
JP7315046B2 (ja) 2018-03-09 2023-07-26 日本電気株式会社 セルフレジシステム、購入商品管理方法および購入商品管理プログラム
CN111310502A (zh) * 2018-12-12 2020-06-19 诚屏科技股份有限公司 货架管理系统与方法
JP2020149450A (ja) * 2019-03-14 2020-09-17 富士電機株式会社 商品管理システム及び商品管理方法
JP7287015B2 (ja) 2019-03-14 2023-06-06 富士電機株式会社 商品管理システム及び商品管理方法
US11508149B2 (en) 2019-06-05 2022-11-22 Novatek Microelectronics Corp. Operating method with goods information and non-transitory computer readable medium thereof
TWI799712B (zh) * 2019-06-05 2023-04-21 聯詠科技股份有限公司 具有貨物資訊的操作方法和其非暫時性電腦可讀取媒體及電腦程式產品
US11704516B2 (en) 2019-06-11 2023-07-18 Solum Co., Ltd. Electronic label management apparatus and method
EP3751486A1 (en) * 2019-06-11 2020-12-16 Solum Co., Ltd. Electronic label management apparatus and method
US11868146B2 (en) 2020-05-20 2024-01-09 Toshiba Tec Kabushiki Kaisha Photographing device and method
US11503200B2 (en) 2020-08-24 2022-11-15 Toshiba Tec Kabushiki Kaisha Photographing device and photographing method

Also Published As

Publication number Publication date
JPWO2015140851A1 (ja) 2017-04-06
JP6226060B2 (ja) 2017-11-08

Similar Documents

Publication Publication Date Title
JP6226060B2 (ja) 情報処理装置、商品棚管理システム、商品棚管理方法及び商品棚管理プログラム
JP6897845B2 (ja) 情報処理装置、商品棚管理システム、商品棚管理方法、及び、商品棚管理プログラム
US9961256B2 (en) Apparatus and method for specifying and aiming cameras at shelves
CN105122287B (zh) 编码光设备、和包括这样的编码光设备的产品信息系统
US8725308B2 (en) Rack mounting position management system and rack mounting position management method
KR20160148152A (ko) 배송 이력 관리 시스템 및 그의 제어 방법
US20160148151A1 (en) Server
JP2019125144A (ja) 商品情報管理プログラム、方法及び装置、並びに商品管理プログラム、方法及び装置
TWI631515B (zh) 辨識商品以顯示商品資訊之系統及其方法
US10388068B2 (en) System and method of augmented reality alarm system installation
US9443221B2 (en) Physical location tagging via image recognition
KR101894401B1 (ko) 변동형 광고 서비스 제공 시스템 및 방법
CN110535915B (zh) 数据处理方法、设备及存储介质
US11263452B2 (en) Method and device for detecting an inventory in a storage space
US8098283B2 (en) Methods, systems, and computer program products for implementing a personalized, image capture and display system
US11816635B1 (en) System and methods of three-dimensional projection mapping-based visual guidance for order fulfillment
JP6901212B1 (ja) コンピュータシステム、広告媒体管理方法及びプログラム
WO2023148927A1 (ja) 棚札管理システム、棚札管理方法、および記録媒体
WO2021090755A1 (ja) 管理装置、管理方法、およびプログラム
WO2023148928A1 (ja) 棚札管理システム、棚札管理方法、および記録媒体
JP3213960U (ja) 情報表示カードおよび広告ポップ
WO2024054698A1 (en) System and methods of three-dimensional projection mapping-based visual guidance for order fulfillment
JP2021119470A (ja) 画像認識装置、システム、方法およびプログラム
KR101230602B1 (ko) 시설물 관리를 위한 관리 데이터 구조,관리 데이터 처리 방법,및 관리 데이터 검색 방법.
CN105578092A (zh) 显示装置以及显示控制方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14886439

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016508312

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14886439

Country of ref document: EP

Kind code of ref document: A1