WO2021039314A1 - 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体 - Google Patents

店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体 Download PDF

Info

Publication number
WO2021039314A1
WO2021039314A1 PCT/JP2020/029851 JP2020029851W WO2021039314A1 WO 2021039314 A1 WO2021039314 A1 WO 2021039314A1 JP 2020029851 W JP2020029851 W JP 2020029851W WO 2021039314 A1 WO2021039314 A1 WO 2021039314A1
Authority
WO
WIPO (PCT)
Prior art keywords
priority
store
display
setting
management system
Prior art date
Application number
PCT/JP2020/029851
Other languages
English (en)
French (fr)
Inventor
莉奈 富田
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US17/638,473 priority Critical patent/US20220414569A1/en
Priority to JP2021542685A priority patent/JPWO2021039314A1/ja
Publication of WO2021039314A1 publication Critical patent/WO2021039314A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06315—Needs-based resource requirements planning or analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/243—Classification techniques relating to the number of classes
    • G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources
    • G08B5/38—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources using flashing light

Definitions

  • the present invention relates to a technical field of a store management system for managing a store, a store management method, a computer program, and a recording medium.
  • Patent Document 1 discloses a technique for identifying a product displayed on a display shelf by capturing an image of a display shelf in a store.
  • Patent Document 2 discloses a technique that utilizes preset priorities for each product category when monitoring a shortage of products.
  • Patent Document 3 discloses a technique of acquiring images of a plurality of individual areas set in a store and displaying the images of the individual areas in descending order of priority.
  • Patent Document 4 discloses a technique for generating and outputting a three-dimensional image according to a display priority.
  • Patent Document 5 discloses a technique for capturing and displaying an image of a suspicious person.
  • various information acquired from the captured image of the store may be divided into a plurality of items (for example, items corresponding to each of a plurality of product shelves) and displayed on a terminal or the like. These items are displayed in a list format on the display screen of the terminal, for example, but if the number of items is large, some items may not fit on the screen. Therefore, it is preferable that items that should be confirmed immediately (for example, items with a high degree of urgency such as "out of stock”) are displayed with priority over other items (for example, higher display).
  • Patent Documents 1 to 3 describe a technique for identifying a product from a store image and a technique for setting a priority for each product, but it is assumed that each item is displayed in a preset priority. However, it is not always the optimal order for the user. That is, there is room for improvement in each of the above-mentioned patent documents in that a plurality of items are appropriately displayed.
  • the present invention has been made in view of the above problems, and an object of the present invention is to provide a store management system, a store management method, a computer program, and a recording medium capable of appropriately displaying a plurality of information about a store. To do.
  • One aspect of the store management system of the present invention is based on the first setting means for setting the first priority indicating the priority of display for a plurality of display items related to the store and the captured image of the store.
  • a second setting means for setting a second priority different from the first priority a sorting means for sorting the plurality of display items based on the first priority and the second priority, and the plurality of sorting means. It is provided with a display means for displaying display items in the order in which they are sorted by the sort means.
  • One aspect of the store management method of the present invention is based on the first setting step of setting the first priority indicating the priority of display for a plurality of display items related to the store and the captured image of the store.
  • a second setting step of setting a second priority different from the first priority a sorting step of sorting the plurality of display items based on the first priority and the second priority, and the plurality of display items. It includes a display step of displaying display items in the order of sorting in the sort step.
  • One aspect of the computer program of the present invention is the first setting step of setting a first priority indicating the priority of display for a plurality of display items related to the store, and the first setting step based on the captured image of the store.
  • the computer is made to execute a display process of displaying the items in the order of sorting in the sorting process.
  • the above-mentioned computer program is recorded.
  • each one of the store management system, the store management method, the computer program, and the recording medium described above it is possible to appropriately display a plurality of information about the store.
  • FIG. 1 is a block diagram showing an overall configuration of a store management system according to an embodiment.
  • FIG. 2 is a block diagram showing a hardware configuration of the store management device according to the embodiment.
  • the store management system 1 is a system applied to a store such as a convenience store, and its main components are a camera 10, a store management device 20, and a plurality of user terminals 30. It is configured with and.
  • the camera 10 is configured to be able to take an image of the inside of the store or the periphery of the store.
  • the camera 10 may be one that captures a moving image, or may be one that periodically captures a still image at a fixed cycle.
  • a plurality of cameras 10 may be installed in one store. It is preferable that the camera 10 is installed so that a blind spot does not occur in the store, but when the monitoring target (in other words, the target related to the display item) by the store management system 1 is limited, the imaging range is limited. It may be limited.
  • the captured image captured by the camera 10 is output to the store management device 20.
  • the store management device 20 is configured as, for example, a management server.
  • the store management device 20 acquires a plurality of display items related to the store from the captured image of the camera 10.
  • the display items are, for example, items corresponding to each shelf in the store (for example, "shelf A”, “shelf B”, “shelf C”, etc.).
  • the display items may be items corresponding to each store (for example, "store A”, "store B", "store C", etc.).
  • the store management device 20 may correspond to a plurality of cameras 10. Further, the store management device 20 may correspond to a plurality of stores (in other words, cameras 10 installed in each of the plurality of stores).
  • the store management device includes a first priority setting unit 210, a second priority setting unit 220, and a sort unit 230 as logical processing blocks for realizing the function.
  • the first priority setting unit 210 is configured so that the first priority can be set for each of a plurality of display items related to the store acquired from the image captured by the camera 10.
  • the "first priority" here is a parameter for determining the display order of a plurality of display items.
  • the first priority may be set in advance according to, for example, the operation of the user (in other words, the user may arbitrarily set the first priority).
  • the second priority setting unit 220 is configured so that the second priority can be set for each of a plurality of display items related to the store acquired from the image captured by the camera 10.
  • the "second priority" here is a parameter for determining the display order of a plurality of display items as in the first priority, but is set under conditions different from the first priority.
  • the second priority is set according to the captured image of the camera 10.
  • the second priority setting unit 220 may set the second priority based on an abnormality (for example, a missing item, a foreign substance, a suspicious person, etc.) detected from the image captured by the camera 10.
  • the sort unit 230 was acquired from the captured image of the camera 10 based on the first priority set by the first priority setting unit 210 and the second priority set by the second priority setting unit 220. Sort multiple display items related to the store. The specific sorting method in the sorting unit 230 will be described in detail later.
  • the store management device 20 includes a CPU (Central Processing Unit) 11, a RAM (Random Access Memory) 12, a ROM (Read Only Memory) 13, and a storage device 14. I have.
  • the store management device 20 may further include an input device 15 and an output device 16.
  • the CPU 11, the RAM 12, the ROM 13, the storage device 14, the input device 15, and the output device 16 are connected via the data bus 17.
  • the CPU 11 reads a computer program.
  • the CPU 11 may read a computer program stored in at least one of the RAM 12, the ROM 13, and the storage device 14.
  • the CPU 11 may read a computer program stored in a computer-readable recording medium using a recording medium reading device (not shown).
  • the CPU 11 may acquire (that is, may read) a computer program from a device (not shown) arranged outside the store management device 20 via a network interface.
  • the CPU 11 controls the RAM 12, the storage device 14, the input device 15, and the output device 16 by executing the read computer program.
  • a functional block for rearranging and displaying a plurality of display items is realized in the CPU 11.
  • the first priority setting unit 210, the second priority setting unit 220, and the sort unit 230 described above are realized in, for example, the CPU 11.
  • the RAM 12 temporarily stores the computer program executed by the CPU 11.
  • the RAM 12 temporarily stores data temporarily used by the CPU 11 when the CPU 11 is executing a computer program.
  • the RAM 12 may be, for example, a D-RAM (Dynamic RAM).
  • the ROM 13 stores a computer program executed by the CPU 11.
  • the ROM 13 may also store fixed data.
  • the ROM 13 may be, for example, a P-ROM (Programmable ROM).
  • the storage device 14 stores data stored in the store management system 1 for a long period of time.
  • the storage device 14 may operate as a temporary storage device of the CPU 11.
  • the storage device 14 may include, for example, at least one of a hard disk device, a magneto-optical disk device, an SSD (Solid State Drive), and a disk array device.
  • the input device 15 is a device that receives an input instruction from the user of the store management system 1.
  • the input device 15 may include, for example, at least one of a keyboard, a mouse and a touch panel.
  • the output device 16 is a device that outputs information about the store management system 1 to the outside.
  • the output device 16 may be a display device capable of displaying information about the store management system 1.
  • the user terminal 30 is a terminal owned by each user of the store management system 1 (for example, a store manager, a store staff, etc.), and is configured as, for example, a personal computer, a tablet, or a smartphone.
  • the user terminal 30 is configured as a terminal capable of displaying a plurality of sorted display items in the store management device 20. Further, the user terminal 30 may be a terminal capable of executing an operation for setting the first priority.
  • FIG. 3 is a flowchart showing the operation flow of the store management system according to the embodiment.
  • the camera 10 first acquires an image of the store (step S101).
  • the captured image acquired by the camera 10 is separated so as to correspond to a plurality of display items in the store.
  • each of the plurality of isolated captured images is associated with each of the plurality of display items.
  • an image of the shelf A in the store is associated with the display item “shelf A”.
  • the image of the shelf B in the store is associated with the display item “shelf B”.
  • the first priority setting unit 210 sets the first priority (step S102).
  • the first priority is set according to, for example, a user operation.
  • the first priority may be set in advance (in other words, before the image is acquired by the camera 10).
  • the first priority setting unit 210 acquires the first priority by reading the preset (stored) first priority.
  • the second priority setting unit 220 acquires the second priority (step S103).
  • the second priority is set based on the captured image acquired by the camera 10. Specifically, the second priority is set based on the analysis result of the captured image corresponding to each display item. For example, the second priority of the display item "shelf A” is set based on the analysis result of the image captured by the shelf A. Similarly, the second priority of the display item “shelf B” is set based on the analysis result of the image captured by the shelf B.
  • the sort unit 230 sorts a plurality of display items based on the first priority and the second priority (step S104). Then, the sort unit 230 outputs the rearranged plurality of display items to the user terminal 30 and displays them (step S105).
  • the plurality of items are displayed in a list format on the display screen of the user terminal 30, for example. At this time, the user may specify the display item so that the captured image corresponding to the designated display item is displayed.
  • the series of operations described above may be executed each time the captured image is acquired by the camera 10, or may be executed periodically at a predetermined cycle. Alternatively, it may be executed at the timing when the power of the user terminal 30 is turned on or at the timing when a plurality of display items are displayed on the user terminal 30.
  • FIG. 4 is a diagram showing a display example when the first priority and the second priority are not set.
  • FIG. 5 is a diagram showing a display example when the first priority is set and the second priority is not set.
  • FIG. 6 is a diagram showing a display example when the first priority and the second priority are set.
  • FIG. 4 shows a display example in a state where the first priority and the second priority are not set (in other words, the first priority and the second priority are the same for all items).
  • each item “shelf A” to "shelf H” is sorted in alphabetical order (here, in alphabetical order).
  • the number of items that can be displayed on the user terminal 30 is "6". Therefore, "shelf A” to "shelf F” displayed at the upper level can be confirmed on the initial screen, but “shelf G” and “shelf H” displayed at the lower level cannot be confirmed on the initial screen. (You can't see it without scrolling down).
  • FIG. 5 shows a display example in a state where the first priority is set but the second priority is not set.
  • the first priority here is set by the user setting a favorite. Specifically, the first priority of the display item set as a favorite is set to be higher than the first priority of the display item not set as a favorite.
  • the items of "shelf A”, “shelf C”, “shelf D”, and “shelf H” that have been set as favorites are “shelf B", “shelf E", and "shelf F” that have not been set as favorites. And it is displayed higher than "Shelves G".
  • the “shelf H” that was not displayed on the initial screen at the time of FIG. 4 is displayed on the initial screen at the time of FIG. In this way, if the first priority is set by the favorite setting, it is possible to display the items to be made more conspicuous at the higher level.
  • FIG. 6 shows a display example in a state where the first priority and the second priority are set. Specifically, an abnormality is detected from the captured images of "shelf D" and “shelf G", and the second priority of "shelf D” and “shelf G” is the other items “shelf A” and “shelf B”. , “Shelves C”, “Shelves E”, “Shelves F”, and “Shelves H” are set higher than the second priority.
  • the sort unit 230 is set to give priority to the second priority over the first priority when the display order is rearranged using both the first priority and the second priority.
  • the weight of the second priority is set to be larger than the weight of the first priority. Therefore, “shelf D" having both high first priority and second priority is displayed at the highest level, and “shelf G” having low first priority but high second priority is displayed second. There is. After that, “Shelves A”, “Shelves C”, and “Shelves H” with high first priority are displayed, and below that, “Shelves E” with low first priority and second priority, "Shelves F” is displayed.
  • display items in which an abnormality is detected may be highlighted in addition to being displayed at a higher level.
  • the colors of the items “shelf D" and “shelf G” may be changed to colors that are more prominent than the other items (for example, red or yellow).
  • FIG. 7 is a table showing an example of a method of setting the second priority according to the abnormality type.
  • the second priority may be set according to the type of detected abnormality. Specifically, when “foreign matter” is detected as an abnormality, the second priority is set to "high".
  • the “foreign matter” here is an abnormality detected when there is something that should not be on the shelf (for example, other products or garbage). Since such anomalies have a relatively high degree of urgency, the display items are sorted into positions that are easily noticeable to the user by setting the second priority to "high”.
  • the second priority is set to "medium”.
  • the “out of stock” here is an abnormality detected when the products displayed on the shelves are missing or running low.
  • the display items are sorted to a position that is slightly noticeable to the user by setting the second priority to "medium”. If no abnormality is detected, the second priority is set to "low", so that the display items are not sorted to a conspicuous position.
  • the second priority may be set based not only on the type of abnormality described above but also on the occurrence time and number of occurrences of the abnormality. Specifically, when the occurrence time of the abnormality is early (in other words, a long time has passed since the occurrence), it is considered that the degree of urgency is relatively high, so that the second priority may be set high. Alternatively, even when the number of occurrences of an abnormality is large, it is considered that the degree of urgency is relatively high, so that the second priority may be set high.
  • the similarity of the anomalies may be determined in order to prevent the same anomaly from being detected many times. Specifically, when the similarity of the detected plurality of abnormalities is equal to or higher than a predetermined threshold value, the abnormalities may be treated as being the same. By doing so, it is possible to prevent the second priority from becoming unreasonably high due to the same abnormality being detected many times.
  • the similarity of the abnormality may be determined by, for example, comparing the similarity of the images captured by the camera 10.
  • FIG. 8 is a diagram showing a display example when an alert for detecting a suspicious person is interrupted and displayed.
  • an alert item may be interrupted and displayed in addition to the display items up to that point (that is, “shelf A” to “shelf H”). ..
  • the alert of "suspicious person detection” is interrupted and displayed at the top.
  • the "suspicious person detection” is an abnormality detected when a suspicious person exists in the store.
  • Suspicious person detection is interrupted and displayed as an independent alert item because it is an abnormality that is not related to each item on the product display shelf.
  • the second priority of the alert item of "suspicious person detection" is set to the highest and displayed at the highest level, but the second priority is appropriately set according to the type of abnormality and the like. Just do it. Therefore, for example, the interrupt display may be performed at the second or third position from the top. Further, when the alert items are interrupted and displayed, if the same abnormality is detected many times, a plurality of alert items may be interrupted and displayed. Therefore, when performing the interrupt display, it is preferable to perform the similarity determination of the above-mentioned abnormality or the like to prevent the same abnormality from being detected repeatedly.
  • a plurality of display items in the store can be appropriately rearranged and displayed.
  • two types of priorities that is, a first priority and a second priority
  • the display items can be rearranged more appropriately. Therefore, the store information to be notified to the user can be presented in an easy-to-understand display mode.
  • Example of store management system application a specific example of an application (for example, a smartphone application) used when using the store management system 1 according to the present embodiment will be described with reference to FIGS. 9 to 11. It is assumed that such an application is pre-installed on, for example, the above-mentioned user terminal 30 or the like.
  • an application for example, a smartphone application
  • FIG. 9 is a diagram showing an example of a screen transition flow in an application applied to the store management system according to the embodiment.
  • a user who intends to use the store management system 1 inputs a preset "user name" and "password" on the login screen to log in to the application. Then, a store selection screen in which a plurality of store items (here, StoreA to F) are lined up is displayed on the display of the terminal. Subsequently, when a store is selected on the store selection screen (here, it is assumed that StoreC is selected), a shelf selection screen in which a plurality of shelf items (here, Shelf01 to 06) are lined up is displayed. When a shelf is selected on the shelf selection screen (here, it is assumed that Shelf03 is selected), an image of the selected shelf is displayed.
  • StoreA to F a plurality of store items
  • Shelf01 to 06 a plurality of shelf items
  • the store management system 1 when using the store management system 1, it is possible to display the shelf image by logging in to the application and then selecting "store” and "shelf" in order.
  • the store selection screen when using only one store, the store selection screen may be omitted and the shelf selection screen may be displayed immediately after login.
  • the display items on the store selection screen and the display items on the shelf selection screen may be rearranged (that is, rearrangement using the first priority and the second priority). ..
  • FIG. 10 is a diagram showing an example of a plurality of display functions in an application applied to the store management system according to the embodiment.
  • the multiple display function for displaying a plurality of shelf images at the same time can be used.
  • a plurality of display frames here, four of A to C
  • the shelf image in the selected time zone of the selected store can be displayed in the selected frame.
  • “store” and “time” for all the frames in this way it is possible to finally display the four shelf images at the same time. This makes it possible to check a plurality of shelf images at the same time.
  • a plurality of shelf images may be displayed at the same time in different layouts.
  • the state of the shelves can be compared between one store and another store. This makes it possible to confirm, for example, the difference in product arrangement from a good store.
  • FIG. 11 is a diagram showing an example of another store comparison function in the application applied to the store management system according to the embodiment.
  • Appendix 1 The store management system described in Appendix 1 is based on the first setting means for setting the first priority indicating the priority of display for a plurality of display items related to the store and the first image captured by the store.
  • a second setting means for setting a second priority different from the priority, a sorting means for sorting the plurality of display items based on the first priority and the second priority, and the plurality of display items.
  • a store management system characterized by including a display means for displaying the above in the order of sorting by the sorting means.
  • Appendix 2 The store management system according to Appendix 2 is characterized in that the sorting means rearranges the plurality of display items by making the weight of the second priority larger than that of the first priority.
  • Appendix 3 The store management system according to Appendix 3 is the store management system according to Appendix 1 or 2, wherein the first setting means sets the first priority according to a user's operation.
  • the first setting means sets the first priority of the item selected by the user among the plurality of display items as the first priority of the item not selected by the user.
  • the second setting means detects an abnormality in the store from the captured image, and sets the second priority of the item related to the abnormality among the plurality of display items.
  • the store management system according to any one of Appendix 1 to 4, wherein the items not related to the abnormality are set to be higher than the second priority.
  • the store management system according to Appendix 6 is characterized in that the second setting means sets the second priority based on at least one of the type of abnormality, the time of occurrence, and the number of occurrences of the abnormality.
  • Appendix 7 In the store management system described in Appendix 7, the second setting means compares the similarity of abnormalities detected from the captured image, and treats those having the similarity equal to or higher than a predetermined threshold value as the same abnormality.
  • Appendix 8 The store management system according to Appendix 8 is the store management according to any one of Appendix 1 to 7, wherein the plurality of display items are items corresponding to each of the product display shelves in the store. It is a system.
  • Appendix 9 The store management method described in Appendix 9 is based on the first setting step of setting the first priority indicating the priority of display for a plurality of display items related to the store, and the first setting based on the captured image of the store.
  • a second setting step of setting a second priority different from the priority a sorting step of sorting the plurality of display items based on the first priority and the second priority, and the plurality of display items.
  • a store management method including a display process of displaying in the order of sorting in the sorting process.
  • the computer program according to Appendix 10 has a first setting step of setting a first priority indicating a display priority for a plurality of display items related to a store, and the first priority based on an image captured by the store.
  • a second setting step of setting a second priority different from the degree a sorting step of rearranging the plurality of display items based on the first priority and the second priority, and the plurality of display items.
  • Appendix 11 The recording medium described in Appendix 11 is a recording medium characterized in that the computer program described in Appendix 10 is recorded.
  • the present invention can be appropriately modified within the scope of claims and within the scope not contrary to the gist or idea of the invention that can be read from the entire specification, and the store management system, store management method, computer program and record accompanied by such changes.
  • the medium is also included in the technical idea of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

店舗管理システム（１）は、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定手段（２１０）と、店舗の撮像画像に基づいて、第１優先度とは異なる第２優先度を設定する第２設定手段（２２０）と、複数の表示項目を、第１優先度及び第２優先度に基づいて並び替えるソート手段（２３０）と、複数の表示項目を、ソート手段で並び替えた順番で表示する表示手段（３０）とを備える。このような店舗管理システムによれば、店舗に関する複数の情報を適切に表示することが可能となる。

Description

店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体
　本発明は、店舗を管理する店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体の技術分野に関する。
　この種のシステムとして、店舗の状況を監視するものが知られている。例えば特許文献１では、店舗における陳列棚の画像を撮像することで、陳列棚に陳列されている商品を特定する技術が開示されている。特許文献２では、商品の不足状態を監視する際に、商品の区分ごとに予め設定された優先度を利用する技術が開示されている。特許文献３では、店舗に設定された複数の個別エリアの映像を取得し、優先度の高い順に個別エリアの映像を表示する技術が開示されている。
　その他の関連する技術として、特許文献４では、表示優先順位に従って３次元画像を生成し出力する技術が開示されている。特許文献５では、不審者の映像を撮像し表示させる技術が開示されている。
特開２０１８－１７００４４号公報 特開２０１７－１６２３７５号公報 特開２０１６－０１８５６７号公報 特開２００６－２８８４９５号公報 特開２００４－２０８２８８号公報
　店舗を管理する際には、店舗の撮像画像から取得した各種情報を、複数の項目（例えば、複数の商品棚の各々に対応した項目）に分けて端末等に表示することがある。これらの項目は、例えば端末の表示画面にリスト形式で表示されるが、項目数が多いと画面に収まりきらない項目が生ずることがある。よって、早急に確認すべき項目（例えば、「欠品」等の緊急度の高い項目）に関しては、他の項目よりも優先的に表示（例えば、上位表示）されることが好ましい。
　上述した特許文献１から３には、店舗の映像から商品を特定する技術や、商品毎に優先順位を設定する技術が記載されているが、予め設定した優先順位で各項目を表示させたとしても、それがユーザにとって最適な順番になるとは限らない。即ち、上述した各特許文献には、複数の項目を適切に表示させるという点において改善の余地がある。
　本発明は、上記問題点に鑑みてなされたものであり、店舗に関する複数の情報を適切に表示することが可能な店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体を提供することを課題とする。
　本発明の店舗管理システムの一の態様は、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定手段と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定手段と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート手段と、前記複数の表示項目を、前記ソート手段で並び替えた順番で表示する表示手段とを備える。
　本発明の店舗管理方法の一の態様は、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程とを含む。
　本発明のコンピュータプログラムの一の態様は、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程とをコンピュータに実行させる。
　本発明の記録媒体の一の態様は、上述したコンピュータプログラムが記録されている。
　上述した店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体のそれぞれの一の態様によれば、店舗に関する複数の情報を適切に表示することが可能である。
実施形態に係る店舗管理システムの全体構成を示すブロック図である。 実施形態に係る店舗管理装置のハードウェア構成を示すブロック図である。 実施形態に係る店舗管理システムの動作の流れを示すフローチャートである。 第１優先度及び第２優先度が設定されていない場合の表示例を示す図である。 第１優先度が設定されており、第２優先度が設定されていない場合の表示例を示す図である。 第１優先度及び第２優先度が設定されている場合の表示例を示す図である。 異常種別に応じた第２優先度の設定方法の一例を示す表である。 不審者検出のアラートを割込表示させる場合の表示例を示す図である。 実施形態に係る店舗管理システムのアプリにおける画面遷移フローの一例を示す図である。 実施形態に係る店舗管理システムのアプリにおける複数表示機能の一例を示す図である。 実施形態に係る店舗管理システムのアプリにおける他店比較機能の一例を示す図である。
　以下、図面を参照しながら、店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体の実施形態について説明する。
　（システム構成）
　まず、図１及び図２を参照しながら、本実施形態に係る店舗管理システムの構成について説明する。図１は、実施形態に係る店舗管理システムの全体構成を示すブロック図である。図２は、実施形態に係る店舗管理装置のハードウェア構成を示すブロック図である。
　図１において、本実施形態に係る店舗管理システム１は、例えばコンビニエンスストア等の店舗に適用されるシステムであり、主な構成要素として、カメラ１０と、店舗管理装置２０と、複数のユーザ端末３０とを備えて構成されている。
　カメラ１０は、店舗の内部或いは店舗の周辺を撮像可能に構成されている。カメラ１０は、動画を撮像するものであってもよいし、静止画を一定の周期で定期的に撮像するものであってもよい。カメラ１０は１つの店舗に対して複数設置されていてもよい。なお、カメラ１０は、店舗における死角が発生しないように設置されることが好ましいが、店舗管理システム１による監視対象（言い換えれば、表示項目に関する対象）が限定されている場合には、撮像範囲が限定されていても構わない。カメラ１０で撮像された撮像画像は、店舗管理装置２０に出力される構成となっている。
　店舗管理装置２０は、例えば管理サーバーとして構成されている。店舗管理装置２０は、カメラ１０の撮像画像から店舗に関する複数の表示項目を取得する。表示項目は、例えば店舗における各棚に対応する項目（例えば、「棚Ａ」、「棚Ｂ」、「棚Ｃ」等）である。或いは、複数の店舗を管理する場合、表示項目は、各店舗に対応する項目（例えば、「店舗Ａ」、「店舗Ｂ」、「店舗Ｃ」等）であってもよい。なお、店舗管理装置２０は、複数のカメラ１０に対応するものであってもよい。また、店舗管理装置２０は、複数の店舗（言い換えれば、複数の店舗の各々に設置されたカメラ１０）に対応するものであってもよい。店舗管理装置は、その機能を実現するための論理的な処理ブロックとして、第１優先度設定部２１０、第２優先度設定部２２０、及びソート部２３０を備えている。
　第１優先度設定部２１０は、カメラ１０の撮像画像から取得された店舗に関する複数の表示項目について、それぞれ第１優先度を設定可能に構成されている。ここでの「第１優先度」とは、複数の表示項目の表示順を決定するためのパラメータである。第１優先度は、例えばユーザの操作に応じて予め設定されてよい（言い換えれば、ユーザが第１優先度を任意に設定することが可能であってもよい）。
　第２優先度設定部２２０は、カメラ１０の撮像画像から取得された店舗に関する複数の表示項目について、それぞれ第２優先度を設定可能に構成されている。ここでの「第２優先度」とは、第１優先度と同様に複数の表示項目の表示順を決定するためのパラメータであるが、第１優先度とは異なる条件で設定される。具体的には、第２優先度は、カメラ１０の撮像画像に応じて設定される。例えば、第２優先度設定部２２０は、カメラ１０の撮像画像から検出した異常（例えば、欠品、異物、不審者等）に基づいて第２優先度を設定してもよい。
　ソート部２３０は、第１優先度設定部２１０で設定された第１優先度、及び第２優先度設定部２２０で設定された第２優先度に基づいて、カメラ１０の撮像画像から取得された店舗に関する複数の表示項目をソートする。ソート部２３０における具体的なソート方法については、後に詳しく説明する。
　図２に示すように、本実施形態に係る店舗管理装置２０は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）１１と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１２と、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１３と、記憶装置１４とを備えている。店舗管理装置２０は更に、入力装置１５と、出力装置１６とを備えていてもよい。ＣＰＵ１１と、ＲＡＭ１２と、ＲＯＭ１３と、記憶装置１４と、入力装置１５と、出力装置１６とは、データバス１７を介して接続されている。
　ＣＰＵ１１は、コンピュータプログラムを読み込む。例えば、ＣＰＵ１１は、ＲＡＭ１２、ＲＯＭ１３及び記憶装置１４のうちの少なくとも一つが記憶しているコンピュータプログラムを読み込んでもよい。例えば、ＣＰＵ１１は、コンピュータで読み取り可能な記録媒体が記憶しているコンピュータプログラムを、図示しない記録媒体読み取り装置を用いて読み込んでもよい。ＣＰＵ１１は、ネットワークインタフェースを介して、店舗管理装置２０の外部に配置される不図示の装置からコンピュータプログラムを取得してもよい（つまり、読み込んでもよい）。ＣＰＵ１１は、読み込んだコンピュータプログラムを実行することで、ＲＡＭ１２、記憶装置１４、入力装置１５及び出力装置１６を制御する。本実施形態では特に、ＣＰＵ１１が読み込んだコンピュータプログラムを実行すると、ＣＰＵ１１内には、複数の表示項目を並び替えて表示させるための機能ブロックが実現される。上述した、第１優先度設定部２１０、第２優先度設定部２２０、及びソート部２３０は、例えばこのＣＰＵ１１において実現されるものである。
　ＲＡＭ１２は、ＣＰＵ１１が実行するコンピュータプログラムを一時的に記憶する。ＲＡＭ１２は、ＣＰＵ１１がコンピュータプログラムを実行している際にＣＰＵ１１が一時的に使用するデータを一時的に記憶する。ＲＡＭ１２は、例えば、Ｄ－ＲＡＭ（Ｄｙｎａｍｉｃ　ＲＡＭ）であってもよい。
　ＲＯＭ１３は、ＣＰＵ１１が実行するコンピュータプログラムを記憶する。ＲＯＭ１３は、その他に固定的なデータを記憶していてもよい。ＲＯＭ１３は、例えば、Ｐ－ＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ　ＲＯＭ）であってもよい。
　記憶装置１４は、店舗管理システム１が長期的に保存するデータを記憶する。記憶装置１４は、ＣＰＵ１１の一時記憶装置として動作してもよい。記憶装置１４は、例えば、ハードディスク装置、光磁気ディスク装置、ＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）及びディスクアレイ装置のうちの少なくとも一つを含んでいてもよい。
　入力装置１５は、店舗管理システム１のユーザからの入力指示を受け取る装置である。入力装置１５は、例えば、キーボード、マウス及びタッチパネルのうちの少なくとも一つを含んでいてもよい。
　出力装置１６は、店舗管理システム１に関する情報を外部に対して出力する装置である。例えば、出力装置１６は、店舗管理システム１に関する情報を表示可能な表示装置であってもよい。
　図１に戻り、ユーザ端末３０は、店舗管理システム１の各ユーザ（例えば、店舗管理者や店舗スタッフ等）が保有する端末であり、例えばパソコンやタブレット、スマートフォンとして構成されている。ユーザ端末３０は、店舗管理装置２０においてソートされた複数の表示項目を表示可能な端末として構成されている。また、ユーザ端末３０は、第１優先度を設定するための操作を実行可能な端末であってもよい。
　（動作説明）
　次に、図３を参照しながら、実施形態に係る店舗管理システム１の動作の流れについて説明する。図３は、実施形態に係る店舗管理システムの動作の流れを示すフローチャートである。
　図３に示すように、本実施形態に係る店舗管理システム１の動作時には、まずカメラ１０が店舗の画像を取得する（ステップＳ１０１）。カメラ１０で取得された撮像画像は、店舗における複数の表示項目に対応するように切り分けられる。言い換えれば、切り分けられた複数の撮像画像の各々は、複数の表示項目の各々に対応付けられる。例えば、店舗内の棚Ａを撮像した画像は、表示項目「棚Ａ」と対応付けられる。同様に、店舗内の棚Ｂを撮像した画像は、表示項目「棚Ｂ」と対応付けられる。
　続いて、第１優先度設定部２１０が、第１優先度を設定する（ステップＳ１０２）。第１優先度は、例えばユーザの操作に応じて設定される。なお、第１優先度は、事前に（言い換えれば、カメラ１０によって画像が取得される前に）設定されていてもよい。この場合、第１優先度設定部２１０は、事前に設定された（記憶された）第１優先度を読み込むことで第１優先度を取得する。
　続いて、第２優先度設定部２２０が、第２優先度を取得する（ステップＳ１０３）。第２優先度は、カメラ１０で取得された撮像画像に基づいて設定される。具体的には、第２優先度は、各表示項目に対応する撮像画像の解析結果に基づいて設定される。例えば、表示項目「棚Ａ」の第２優先度は、棚Ａを撮像した画像の解析結果に基づいて設定される。同様に、表示項目「棚Ｂ」の第２優先度は、棚Ｂを撮像した画像の解析結果に基づいて設定される。
　続いて、ソート部２３０が、第１優先度及び第２優先度に基づいて、複数の表示項目を並び替える（ステップＳ１０４）。そして、ソート部２３０は、並び替えた複数の表示項目を、ユーザ端末３０に出力して表示させる（ステップＳ１０５）。複数の項目は、例えばユーザ端末３０の表示画面にリスト形式で表示される。この際、ユーザが表示項目を指定することで、指定した表示項目に対応する撮像画像が表示されるようにしてもよい。
　上述した一連の動作は、カメラ１０で撮像画像が取得される度に実行されてもよいし、所定の周期で定期的に実行されてもよい。或いは、ユーザ端末３０の電源がＯＮされたタイミングや、ユーザ端末３０で複数の表示項目を表示させるタイミングに合わせて実行されてもよい。
　（具体的なソート例）
　次に、図４から図６を参照しながら、ソート部２３０による具体的なソート例について説明する。図４は、第１優先度及び第２優先度が設定されていない場合の表示例を示す図である。図５は、第１優先度が設定されており、第２優先度が設定されていない場合の表示例を示す図である。図６は、第１優先度及び第２優先度が設定されている場合の表示例を示す図である。なお、以下では、店舗における商品陳列棚の各々に対応する表示項目「棚Ａ」～「棚Ｈ」を表示する例を用いて説明する
　図４では、第１優先度及び第２優先度が設定されていない状態（言い換えれば、すべての項目で第１優先度及び第２優先度が同じ状態）での表示例が示されている。第１優先度及び第２優先度が設定されていない場合、各項目「棚Ａ」～「棚Ｈ」は名前順（ここでは、アルファベット順）でソートされる。なお、ここでのユーザ端末３０に表示可能な項目数（即ち、一画面で表示できる項目数）は“６”である。このため、上位表示される「棚Ａ」～「棚Ｆ」については初期画面で確認することができるが、下位表示される「棚Ｇ」及び「棚Ｈ」は初期画面で確認することができない（下側にスクロールしないと確認することができない）。
　図５では、第１優先度が設定されている一方で、第２優先度が設定されていない状態での表示例が示されている。ここでの第１優先度は、ユーザがお気に入り設定をすることで設定される。具体的には、お気に入り設定された表示項目の第１優先度が、お気に入り設定されていない表示項目の第１優先度よりも高くなるように設定される。この結果、お気に入り設定された「棚Ａ」、「棚Ｃ」、「棚Ｄ」及び「棚Ｈ」の各項目は、お気に入り設定されていない「棚Ｂ」、「棚Ｅ」、「棚Ｆ」及び「棚Ｇ」よりも上位表示されている。
　図４と図５とを比べると分かるように、図４の時点では初期画面で表示されていなかった「棚Ｈ」は、図５の時点では初期画面に表示されている。このように、お気に入り設定によって第１優先度を設定すれば、より目立たせたい項目を上位表示させることが可能である。
　図６では、第１優先度及び第２優先度が設定されている状態での表示例が示されている。具体的には、「棚Ｄ」及び「棚Ｇ」の撮像画像から異常が検出され、「棚Ｄ」及び「棚Ｇ」の第２優先度が、その他の項目「棚Ａ」、「棚Ｂ」、「棚Ｃ」、「棚Ｅ」、「棚Ｆ」、「棚Ｈ」の第２優先度よりも高く設定されている。
　ソート部２３０は、第１優先度及び第２優先度の両方を用いて表示順を並び替える際に、第１優先度よりも第２優先度を優先するように設定されている。言い換えれば、第１優先度の重みより、第２優先度の重みが大きくなるように設定されている。このため、第１優先度及び第２優先度の両方が高い「棚Ｄ」が最上位表示され、第１優先度は低いが第２優先度が高い「棚Ｇ」が２番目に表示されている。それ以降は、第１優先度が高い「棚Ａ」、「棚Ｃ」、「棚Ｈ」が表示され、その下に、第１優先度および第２優先度の両方が低い「棚Ｅ」、「棚Ｆ」が表示されている。
　図５と図６とを比べると分かるように、図５の時点では上から３番目に表示されていた「棚Ｄ」は、図６の時点では最上位に表示されている。また、図５の時点では初期画面で表示されていなかった「棚Ｇ」は、図５の時点では上から２番目に表示されている。このように、検出された異常に応じて第２優先度を設定すれば、緊急度の高い表示項目（即ち、ユーザが早く確認すべき表示項目）を上位表示させることが可能である。
　なお、異常が検出された表示項目（即ち、第２優先度が高い表示項目）については、上位表示させることに加えて、強調表示が行われてもよい。具体的には、図６のように「棚Ｄ」、「棚Ｇ」の項目の色が、他の項目よりも目立つ色（例えば、赤色や黄色等）に変更されてもよい。
　（第２優先度の設定例）
　次に、図７を参照しながら、第２優先度のより具体的な設定方法について説明する。図７は、異常種別に応じた第２優先度の設定方法の一例を示す表である。
　図７に示すように、第２優先度は、検出された異常の種別に応じて設定されてもよい。具体的には、異常として「異物」が検出された場合、第２優先度は“高”に設定される。ここでの「異物」とは、本来であれば棚にあるべきでないもの（例えば、他の商品やゴミ等）が存在している際に検出される異常である。このような異常は、比較的緊急度が高いため、第２優先度が“高”に設定されることで、ユーザに目立ちやすい位置へと表示項目がソートされる。異常として「欠品」が検出された場合、第２優先度は“中”に設定される。ここでの「欠品」とは、棚に陳列されている商品が無くなっている或いは少なくなっている際に検出される異常である。このような異常は、比較的緊急度が低いため、第２優先度が“中”に設定されることで、ユーザにやや目立ちやすい位置へと表示項目がソートされる。なお、異常が検出されない場合、第２優先度は“低”に設定されるため、表示項目は目立ちやすい位置へはソートされない。
　第２優先度は、上述した異常の種別だけでなく、異常の発生時間や発生回数等に基づいて設定されてもよい。具体的には、異常の発生時間が早い（言い換えれば、発生から長時間経過している）場合には、比較的緊急度が高いと考えられるため、第２優先度が高く設定されてよい。或いは、異常の発生回数が多い場合にも、比較的緊急度が高いと考えられるため、第２優先度が高く設定されてよい。
　異常の発生回数を利用する場合、同じ異常が何度も検出されてしまうことを回避するために、異常の類似度判定を行ってもよい。具体的には、検出された複数の異常の類似度が所定閾値以上である場合には、それらの異常は同一のものであるとして扱ってもよい。このようにすれば、同じ異常が何度も検出されることで、第２優先度が不当に高くなってしまうことを防止できる。なお、異常の類似度判定には、既存の技術を適宜採用することが可能であるが、例えばカメラ１０の撮像画像の類似度を比較することによって、異常の類似度を判定してもよい。
　（アラートの割込表示）
　次に、図８を参照しながら、アラートの割込表示について説明する。図８は、不審者検出のアラートを割込表示させる場合の表示例を示す図である。
　図８に示すように、特殊な異常が検出された場合には、それまでの表示項目（即ち、「棚Ａ」～「棚Ｈ」）に加えて、アラート項目を割込表示させてもよい。図８に示す例では、「不審者検出」のアラートが最上位に割込表示されている。なお、「不審者検出」とは、店舗内に不審者が存在する場合に検出される異常である。不審者検出は、商品陳列棚の各項目とは関連のない異常のため、独立したアラート項目として割込表示される。
　なお、ここでは「不審者検出」のアラート項目の第２優先度を最も高く設定して、最上位表示させるようにしているが、第２優先度は異常の種別等に応じて適宜設定されればよい。このため、例えば上から２番目や３番目の位置に割込表示が行われてもよい。また、アラート項目を割込表示させる場合、同じ異常が何度も検出されてしまうと、複数のアラート項目が何個も割込表示されてしまうおそれがある。このため、割込表示を行う際には、上述した異常の類似度判定等を行って、同じ異常が何度も重複して検出されることを防止することが好ましい。
　（技術的効果）
　次に、実施形態に係る店舗管理システム１によって得られる技術的効果について説明する。
　図１から図７で説明したように、本実施形態に係る店舗管理システム１によれば、店舗における複数の表示項目を適切に並び替えて表示することができる。本実施形態では特に、相異なる条件で設定される２種類の優先度（即ち、第１優先度及び第２優先度）が用いられるため、１種類の優先度しか利用しない場合と比較して、より適切に表示項目を並び替えることができる。従って、ユーザに知らせるべき店舗の情報を、分かりやすい表示態様で提示することができる。
　＜店舗管理システムのアプリ例＞
　次に、本実施形態に係る店舗管理システム１を利用する際に用いるアプリ（例えば、スマートフォンアプリ）の具体例について、図９から図１１を参照して説明する。このようなアプリは、例えば、上述したユーザ端末３０等に予めインストールされているものとする。
　（アプリの画面遷移フロー）
　まず、図９を参照しながら、アプリにおける画面の遷移フローについて説明する。図９は、実施形態に係る店舗管理システムに適用されるアプリにおける画面遷移フローの一例を示す図である。
　図９に示すように、店舗管理システム１を利用しようとするユーザは、ログイン画面において、予め設定した「ユーザーネーム」及び「パスワード」を入力してアプリへのログインを実行する。すると、端末のディスプレイには、複数のストア項目（ここでは、ＳｔｏｒｅＡ～Ｆ）が並ぶお店選択画面が表示される。続いて、お店選択画面でお店を選択すると（ここでは、ＳｔｏｒｅＣを選択したものとする）、複数の棚項目（ここでは、Ｓｈｅｌｆ０１～０６）が並ぶ棚選択画面が表示される。棚選択画面で棚を選択すると（ここでは、Ｓｈｅｌｆ０３を選択したものとする）、選択した棚の画像が表示される。
　以上のように、店舗管理システム１を利用する際には、アプリにログイン後、「店」、「棚」を順に選択していくことで、棚画像を表示させることが可能である。ただし、１つの店舗でのみ利用する場合は、お店選択画面が省略され、ログイン後すぐに棚選択画面が表示されてもよい。なお、本実施形態の場合は、お店選択画面における表示項目、及び棚選択画面における表示項目の並び替え（即ち、第１優先度及び第２優先度を用いた並び替え）が行われてよい。
　（複数表示機能）
　次に、図１０を参照しながら、アプリにおける複数の画像を表示する機能について説明する。図１０は、実施形態に係る店舗管理システムに適用されるアプリにおける複数表示機能の一例を示す図である。
　図１０に示すように、棚画像が表示されている状態で、機能パネルから「Ｔｉｌｅ　Ｖｉｅｗ」を選択すると、複数の棚画像を同時に表示する複数表示機能を利用することができる。具体的には、「Ｔｉｌｅ　Ｖｉｅｗ」を選択すると、画面上に複数の表示枠（ここでは、Ａ～Ｃの４つ）が表示される。これらの枠から１つを選んで、「店」・「時間」を選択していくと、選択したお店の選択した時間帯における棚画像を、選んだ枠に表示させることができる。このようにすべての枠について「店」・「時間」を選択していくと、最終的に４つの棚画像を同時に表示させることができる。これにより、複数の棚画像を同時に確認することが可能となる。なお、ここでは２×２の４枠で同時表示させる例を挙げたが、異なるレイアウトで複数の棚画像が同時に表示されるようにしてもよい。
　複数の棚画像を同時に表示させることで、例えば一の店と他の店とで棚の様子を比較することができる。これにより、例えば優良店との商品配置の違い等を確認することが可能である。
　（他店比較機能）
　次に、図１１を参照しながら、アプリにおける他店比較機能について説明する。図１１は、実施形態に係る店舗管理システムに適用されるアプリにおける他店比較機能の一例を示す図である。
　図１１に示すように、２つの異なる店舗の棚画像を並べて表示することで、店舗による商品陳列の違いを確認する機能が備えられていてもよい。例えば、図のようにＡ店とＢ店との棚を並べて表示することで、減っている商品や売り切れている商品を確認することが可能である。このように、画像を並べて比較可能とすることで、メールや電話等で伝わり難い情報を、わかりやすく伝えることができる。
　＜付記＞
　以上説明した実施形態に関して、更に以下の付記を開示する。
　（付記１）
　付記１に記載の店舗管理システムは、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定手段と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定手段と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート手段と、前記複数の表示項目を、前記ソート手段で並び替えた順番で表示する表示手段とを備えることを特徴とする店舗管理システムである。
　（付記２）
　付記２に記載の店舗管理システムは、前記ソート手段は、前記第１優先度よりも前記第２優先度の重みを大きくして、前記複数の表示項目を並び替えることを特徴とする付記１に記載の店舗管理システムである。
　（付記３）
　付記３に記載の店舗管理システムは、前記第１設定手段は、ユーザの操作に応じて前記第１優先度を設定することを特徴とする付記１又は２に記載の店舗管理システムである。
　（付記４）
　付記４に記載の店舗管理システムは、前記第１設定手段は、前記複数の表示項目のうち前記ユーザが選択した項目の前記第１優先度を、前記ユーザが選択しない項目の前記第１優先度よりも高くなるように設定することを特徴とする付記３記載の店舗管理システム。
　（付記５）
　付記５に記載の店舗管理システムは、前記第２設定手段は、前記撮像画像から前記店舗における異常を検出し、前記複数の表示項目のうち前記異常に関連する項目の前記第２優先度を、前記異常に関連しない項目の前記第２優先度よりも高くなるように設定することを特徴とする付記１から４のいずれか一項に記載の店舗管理システムである。
　（付記６）
　付記６に記載の店舗管理システムは、前記第２設定手段は、前記異常の種別、発生時間及び発生数の少なくとも１つに基づいて、前記第２優先度を設定することを特徴とする請求項５に記載の店舗管理システムである。
　（付記７）
　付記７に記載の店舗管理システムは、前記第２設定手段は、前記撮像画像から検出される異常の類似度を比較し、前記類似度が所定閾値以上であるものについては同一の異常として扱うことを特徴とする付記５又は６に記載の店舗管理システムである。
　（付記８）
　付記８に記載の店舗管理システムは、前記複数の表示項目は、前記店舗における商品陳列棚の各々に対応する項目であることを特徴とする付記１から７のいずれか一項に記載の店舗管理システムである。
　（付記９）
　付記９に記載の店舗管理方法は、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程とを含むことを特徴とする店舗管理方法である。
　（付記１０）
　付記１０に記載のコンピュータプログラムは、店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程とをコンピュータに実行させることを特徴とするコンピュータプログラムである。
　（付記１１）
　付記１１に記載の記録媒体は、付記１０に記載のコンピュータプログラムが記録されていることを特徴とする記録媒体である。
　本発明は、請求の範囲及び明細書全体から読み取ることのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体もまた本発明の技術思想に含まれる。
　法令で許容される限りにおいて、この出願は、２０１９年８月２８日に出願された日本出願特願２０１９－１５５５５８を基礎とする優先権を主張し、その開示の全てをここに取り込む。また、法令で許容される限りにおいて、本願明細書に記載された全ての公開公報及び論文をここに取り込む。
　１　店舗管理システム
　１０　カメラ
　２０　店舗管理装置
　３０　ユーザ端末
　２１０　第１優先度設定部
　２２０　第２優先度設定部
　２３０　ソート部

Claims (11)

  1. 　店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定手段と、
    　前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定手段と、
    　前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート手段と、
    　前記複数の表示項目を、前記ソート手段で並び替えた順番で表示する表示手段と
    　を備えることを特徴とする店舗管理システム。
  2. 　前記ソート手段は、前記第１優先度よりも前記第２優先度の重みを大きくして、前記複数の表示項目を並び替えることを特徴とする請求項１に記載の店舗管理システム。
  3. 　前記第１設定手段は、ユーザの操作に応じて前記第１優先度を設定することを特徴とする請求項１又は２に記載の店舗管理システム。
  4. 　前記第１設定手段は、前記複数の表示項目のうち前記ユーザが選択した項目の前記第１優先度を、前記ユーザが選択しない項目の前記第１優先度よりも高くなるように設定することを特徴とする請求項３記載の店舗管理システム。
  5. 　前記第２設定手段は、前記撮像画像から前記店舗における異常を検出し、前記複数の表示項目のうち前記異常に関連する項目の前記第２優先度を、前記異常に関連しない項目の前記第２優先度よりも高くなるように設定することを特徴とする請求項１から４のいずれか一項に記載の店舗管理システム。
  6. 　前記第２設定手段は、前記異常の種別、発生時間及び発生数の少なくとも１つに基づいて、前記第２優先度を設定することを特徴とする請求項５に記載の店舗管理システム。
  7. 　前記第２設定手段は、前記撮像画像から検出される異常の類似度を比較し、前記類似度が所定閾値以上であるものについては同一の異常として扱うことを特徴とする請求項５又は６に記載の店舗管理システム。
  8. 　前記複数の表示項目は、前記店舗における商品陳列棚の各々に対応する項目であることを特徴とする請求項１から７のいずれか一項に記載の店舗管理システム。
  9. 　店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、
    　前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、
    　前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、
    　前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程と
    　を含むことを特徴とする店舗管理方法。
  10. 　店舗に関する複数の表示項目について、表示に係る優先度合いを示す第１優先度を設定する第１設定工程と、
    　前記店舗の撮像画像に基づいて、前記第１優先度とは異なる第２優先度を設定する第２設定工程と、
    　前記複数の表示項目を、前記第１優先度及び前記第２優先度に基づいて並び替えるソート工程と、
    　前記複数の表示項目を、前記ソート工程で並び替えた順番で表示する表示工程と
    　をコンピュータに実行させることを特徴とするコンピュータプログラム。
  11. 　請求項１０に記載のコンピュータプログラムが記録されていることを特徴とする記録媒体。
PCT/JP2020/029851 2019-08-28 2020-08-04 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体 WO2021039314A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/638,473 US20220414569A1 (en) 2019-08-28 2020-08-04 Store management system, store management method, computer program and recording medium
JP2021542685A JPWO2021039314A1 (ja) 2019-08-28 2020-08-04

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-155558 2019-08-28
JP2019155558 2019-08-28

Publications (1)

Publication Number Publication Date
WO2021039314A1 true WO2021039314A1 (ja) 2021-03-04

Family

ID=74684690

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/029851 WO2021039314A1 (ja) 2019-08-28 2020-08-04 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体

Country Status (3)

Country Link
US (1) US20220414569A1 (ja)
JP (1) JPWO2021039314A1 (ja)
WO (1) WO2021039314A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023020357A (ja) * 2021-07-30 2023-02-09 富士通株式会社 情報処理プログラム、情報処理方法、および情報処理装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230113506A1 (en) * 2021-10-07 2023-04-13 Shopify Inc. Systems and methods for generating content for a user interface

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012074014A (ja) * 2010-08-31 2012-04-12 Ns Solutions Corp 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム
JP6376582B1 (ja) * 2018-01-19 2018-08-22 株式会社 テクノミライ デジタルセールス・プロフィットシステム、方法及びプログラム
WO2018175203A1 (en) * 2017-03-21 2018-09-27 Kellogg Company Determining product placement compliance

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7620633B1 (en) * 2005-11-14 2009-11-17 Adobe Systems Incorporated Methods and apparatus for prioritizing and sorting metadata to be displayed
US20100138281A1 (en) * 2008-11-12 2010-06-03 Yinying Zhang System and method for retail store shelf stock monitoring, predicting, and reporting

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012074014A (ja) * 2010-08-31 2012-04-12 Ns Solutions Corp 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム
WO2018175203A1 (en) * 2017-03-21 2018-09-27 Kellogg Company Determining product placement compliance
JP6376582B1 (ja) * 2018-01-19 2018-08-22 株式会社 テクノミライ デジタルセールス・プロフィットシステム、方法及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023020357A (ja) * 2021-07-30 2023-02-09 富士通株式会社 情報処理プログラム、情報処理方法、および情報処理装置
JP7318680B2 (ja) 2021-07-30 2023-08-01 富士通株式会社 情報処理プログラム、情報処理方法、および情報処理装置

Also Published As

Publication number Publication date
US20220414569A1 (en) 2022-12-29
JPWO2021039314A1 (ja) 2021-03-04

Similar Documents

Publication Publication Date Title
US10791297B2 (en) Manufacturing-state display system, manufacturing-state display method, and computer-readable recording medium
WO2021039314A1 (ja) 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体
JP7416292B2 (ja) 情報処理装置、情報処理システム、制御方法、及びプログラム
JP2018120300A (ja) 情報処理装置、情報処理方法およびプログラム
US20160057034A1 (en) Systems and methods for correlating derived metrics for system activity
JP2020014194A (ja) コンピュータシステム、リソース割り当て方法およびその画像識別方法
JP2008278517A (ja) 画像記憶装置、監視システム、記憶媒体
JP2017126112A (ja) サーバ、分散型サーバシステム、及び情報処理方法
JP6648511B2 (ja) 支援装置、支援方法およびプログラム
JP7019339B2 (ja) 不良原因抽出システム及びその方法
JP2009237659A (ja) 操作ログ情報表示システム
JP4846412B2 (ja) 操業支援装置、操業支援方法、操業支援システム、コンピュータプログラム及び記録媒体
US11501450B2 (en) Object tracking device by analyzing an image, object tracking tracking method by analyzing an image, recording medium, and object tracking tracking system by analyzing an image
KR20140127543A (ko) 전자의무기록 시스템 기반 이미지 데이터 표시 방법 및 시스템
JP2006129519A (ja) 画像記憶装置、監視システム、記憶媒体
CN106301817A (zh) 一种配置信息的合规检测方法和装置
JP6877806B6 (ja) 情報処理装置、プログラム及び情報処理方法
US9971978B2 (en) Event-based data management method and device
KR101458554B1 (ko) 전자의무기록 시스템 기반 출력 데이터 제어 방법 및 장치
JP6948294B2 (ja) 作業異常検知支援装置、作業異常検知支援方法、および作業異常検知支援プログラム
WO2021039312A1 (ja) 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体
JP6654683B2 (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP6572552B2 (ja) 相違箇所表示制御プログラム、相違箇所表示制御方法および情報処理装置
US20180241905A1 (en) Image processing apparatus and non-transitory computer readable medium
JP7345446B2 (ja) データ表示プログラムおよびプログラマブル表示器

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20859599

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021542685

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20859599

Country of ref document: EP

Kind code of ref document: A1