WO2019124176A1 - 販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体 - Google Patents

販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体 Download PDF

Info

Publication number
WO2019124176A1
WO2019124176A1 PCT/JP2018/045599 JP2018045599W WO2019124176A1 WO 2019124176 A1 WO2019124176 A1 WO 2019124176A1 JP 2018045599 W JP2018045599 W JP 2018045599W WO 2019124176 A1 WO2019124176 A1 WO 2019124176A1
Authority
WO
WIPO (PCT)
Prior art keywords
store
area
accounting
sales
person
Prior art date
Application number
PCT/JP2018/045599
Other languages
English (en)
French (fr)
Inventor
広貴 良知
Original Assignee
Ｎｅｃプラットフォームズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｎｅｃプラットフォームズ株式会社 filed Critical Ｎｅｃプラットフォームズ株式会社
Priority to US16/955,841 priority Critical patent/US20200320552A1/en
Publication of WO2019124176A1 publication Critical patent/WO2019124176A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0637—Strategic management or analysis, e.g. setting a goal or target of an organisation; Planning actions based on goals; Analysis or evaluation of effectiveness of goals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/202—Interconnection or interaction of plural electronic cash registers [ECR] or to host computer, e.g. network details, transfer of information from host to ECR or from ECR to ECR
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Definitions

  • the present invention relates to a sales analysis device, a sales management system, a sales analysis method, and a program storage medium.
  • product display is devised using POS (Point Of Sales) data so that many products can be sold. For example, based on the number of sales for each product type obtained from the POS data, it is possible to distinguish the best selling products that are products belonging to many sold product types and the dead line products that are products belonging to less popular product types. it can. Then, based on the result of the determination, it is possible to change the display of the product, for example, replace the product displayed in the display space of the dead muscle product with the selling product or another product.
  • POS Point Of Sales
  • Patent Document 1 discloses a data output system for sales opportunity loss analysis for obtaining information on judgments such as the balance between product inventory and loss of sales opportunity.
  • the system described in Patent Document 1 obtains information such as a position, an attribute, a residence time, or a flow line of a person in a frame area corresponding to a shooting range by analysis processing of a moving image to be analyzed taken by a camera. Based on this information, the system described in Patent Document 1 performs a process of calculating the situation of a person's dropout including the number of people who drop off and the like for each unit in the frame area. And the system of patent document 1 outputs the analysis information including the situation of the drop-in for every unit matched with goods arranged in a store as data for analysis about a sales opportunity loss of goods of a store.
  • the stoppage situation calculation unit determines, for example, whether a person is in or out, for each division unit indicated by a boundary, and counts the number of stopovers (d). In this counting process, information (coordinate information and the like) of the flow line of the person obtained based on analysis and detection of the person in the frame area of the imaging range is used.
  • Patent Document 1 counts the number of people who come and go or stay in the division unit as the number of people who drop off. For this reason, the number of people in the stop who are described in Patent Document 1 does not take into account the so-called retention waiting. There is a problem that the sales opportunity loss of the product in the store obtained based on the number of people who drop off like this is not accurate.
  • the present invention has been made in view of the above-described circumstances, and an object of the present invention is to provide a sales analysis device and the like which can accurately determine the sales opportunity loss of goods in a store.
  • a sales analysis device is: A movement history acquisition unit for obtaining movement history of a person in the store by analyzing image data including an image of the inside of the store; A station detection unit for detecting, based on the travel history, a station point where a person in the store has stayed for a predetermined time or more; A cash register waiting detection unit which detects a cash register waiting area, which is an area occupied by a person waiting for cash in the store, based on the movement history; For each of the persons for whom the stopping point is detected, a product corresponding to the stopping point included in the area excluding the cash register waiting area in the store based on the display data in which the product and the display place are associated An extraction unit to extract; An accounting status acquisition unit for obtaining, for each of the persons for whom the stopping point is detected, the passage status of an accounting area predetermined as an area where a customer of the store is located at the time of accounting based on the movement history; And a counting unit configured to
  • the sales analysis method is Determining movement history of a person in the store by analyzing image data including an image taken in the store; Detecting a stopping point at which a person in the store has stopped for a predetermined stopping time or more, based on the movement history; Detecting a cash register waiting area which is an area occupied by a person waiting for accounting in the store based on the movement history; For each of the persons for whom the stopping point is detected, a product corresponding to the stopping point included in the area excluding the cash register waiting area in the store based on the display data in which the product and the display place are associated Extracting and Determining, for each of the persons for whom the stopping point is detected, a passing status of a predetermined accounting area as an area where a customer of the store is located at the time of accounting based on the movement history; And counting the sales opportunity loss of the unpurchased product if the extracted product has not been purchased based on the passage status of the accounting area.
  • a program recording medium is a computer including: Determining movement history of a person in the store by analyzing image data including an image taken in the store; Detecting a stopping point at which a person in the store has stopped for a predetermined stopping time or more, based on the movement history; Detecting a cash register waiting area which is an area occupied by a person waiting for accounting in the store based on the movement history; For each of the persons for whom the stopping point is detected, a product corresponding to the stopping point included in the area excluding the cash register waiting area in the store based on the display data in which the product and the display place are associated Extracting and Determining, for each of the persons for whom the stopping point is detected, a passing status of a predetermined accounting area as an area where a customer of the store is located at the time of accounting based on the movement history; A program for performing, as the sales opportunity loss of the unpurchased product, counting when the extracted product is not purchased based on the passage status of the accounting area is recorded
  • FIG. 2 is a diagram showing a functional configuration of a POS management device according to Embodiment 1.
  • FIG. 1 is a diagram showing a functional configuration of a crime prevention management device according to a first embodiment.
  • FIG. 1 is a diagram showing a functional configuration of a sales analysis device according to Embodiment 1. It is an example of the data which shows the position of the area
  • FIG. 5 is a view showing an example of display data according to Embodiment 1.
  • FIG. 5 is a flowchart showing an example of sales analysis processing according to the first embodiment.
  • 7 is a flowchart illustrating an example of movement history acquisition processing according to the first embodiment;
  • FIG. 8 is a diagram illustrating an example of a small area obtained by dividing a frame, which is employed in the image analysis process according to the first embodiment. It is the figure which represented typically the movement process calculated
  • FIG. 16 is a flowchart for explaining an example of sales analysis processing according to the second embodiment. It is the figure which represented typically the movement process calculated
  • the sales management system 100 is a system for managing sales of goods in a store, and as shown in FIG. 1, a POS (Point of Sales) management system 101, a security camera System 102 and sales analysis device 103 are included.
  • POS Point of Sales
  • the sales management system 100 physically includes a POS system 101, a security camera system 102, and a sales analysis device 103, as shown in FIG.
  • the POS system 101 and the security camera system 102 are communicably connected to the sales analysis device 103.
  • This connection method is, for example, a network such as a wired or wireless network or a LAN (Local Area Network) combining these.
  • the POS system 101 is a system for aggregating the sales situation and the like of goods in a store, and physically comprises a POS terminal 104 and a POS management device 105.
  • the POS terminal 104 is a POS register machine, and a button for inputting data, a bar code reader, and the like are attached.
  • POS terminal 104 is a POS register machine, and a button for inputting data, a bar code reader, and the like are attached.
  • an example in which one POS terminal 104 is provided in the POS system 101 will be described, but a plurality of POS terminals 104 may be provided in the POS system 101.
  • the security camera system 102 is a monitoring system for crime prevention in a store, and physically includes a plurality of cameras 106 and a security management device 107. Each of the plurality of cameras 106 continuously shoots a predetermined area in the store, and outputs shooting data including the shot moving image.
  • the stores are, for example, convenience stores and supermarkets.
  • FIG. 2 which is a view from above of the store, product shelves A to F, an aisle, a customer service area, and a backyard are provided in the store.
  • the accounting area will be described later.
  • the product shelves A to F are arranged in order from the back on the left side.
  • a passage through which people such as customers and clerks pass in the store is between product shelves A and B, between product shelves C and D, between product shelves E and F, and to the left of product shelves A to F. It is provided in each of the right side.
  • the customer support area is provided at the back of the right side when a person who enters from the entrance looks at it.
  • the customer service area is an area for the store clerk to handle the customer, and is appropriately installed in the store.
  • the customer service area is typically surrounded by a counter, and a POS terminal provided with a register function is installed above the counter.
  • the customer service area is basically an area where only a store clerk who is a staff related to the store is permitted to enter.
  • the back yard is provided to the right of the customer service area from the front to the back, when viewed by a person who enters from the entrance.
  • the backyard is used for stocking goods for goods and a waiting room for salesclerks.
  • the backyard is basically an area where only the store clerk is permitted to enter.
  • the plurality of cameras 106 shoot each passage in the store, a part of the product shelves A to F, and a customer corresponding area. Specifically, in the present embodiment, six cameras 106 are installed, and each camera 106 is installed to shoot any one of the shooting areas A to F.
  • the plurality of imaging areas may partially overlap between adjacent imaging areas, but are basically different from each other.
  • each of the sales analysis device 103, the POS management device 105, and the crime prevention management device 107 is a processor 108_a to 108_c, a RAM (Random Access Memory) 109_a to 109_c, a storage device 110_a to 110_c, and a communication I / F ( Interface) 111_a to 111_c and the like.
  • the processors 108 _a to 108 _c are hardware for executing software programs stored in the devices 103, 105, and 107, respectively, and include an arithmetic processing unit, a register, a peripheral circuit, and the like.
  • a plurality of processors 108 _a to 108 _c may be provided in each of the POS management device 105, the crime prevention management device 107, and the sales analysis device 103.
  • the RAMs 109 _a to 109 _c are memories used as work areas of the processors 108 _a to 108 _c, respectively.
  • Each of the storage devices 110 _a to 110 _c includes, for example, a solid state drive (SSD), a hard disc drive (HDD) or the like.
  • SSD solid state drive
  • HDD hard disc drive
  • Each of the communication I / Fs 111 _a to 111 _c may be either wired or wireless, or both of them.
  • Each of the POS management device 105, the crime prevention management device 107, and the sales analysis device 103 exerts the functions to be described below by executing an installed program, for example.
  • the functions provided by the POS management device 105, the crime prevention management device 107, and the sales analysis device 103 are not limited to the functions described below, and other functions may be added as appropriate to each device.
  • part or all of the functions performed by the sales analysis device 103 may be incorporated into devices constituting one or both of the security camera system 102 and the POS system 101.
  • the sales analysis device 103 may be configured with a device in which a part of the function is incorporated, or may be included in the device in which the entire function is incorporated.
  • the POS management device 105 is a device that collects and holds data from the POS terminal 104, and functionally, as shown in FIG. 3, the POS data collection unit 112, the sales history storage unit 113, and POS data And a transmission unit 114.
  • the POS data collection unit 112 receives, from the POS terminal, POS data including the stock status of products in the store, the sales history, and the like. Upon receipt of the POS data, the POS data collection unit 112 stores the sales history data 115 included in the POS data in the sales history storage unit 113.
  • the sales history storage unit 113 holds sales history data 115.
  • the sales history data 115 is data indicating the sales history of products in a store, and for example, products sold, sales volume, sales date and time are associated with each customer.
  • the POS data transmission unit 114 Upon receiving a request from the sales analysis device 103, the POS data transmission unit 114 reads the sales history data 115 related to the request from the sales history storage unit 113 and transmits the sales history data 115 to the sales analysis device 103.
  • the crime prevention management device 107 is a device for managing the image data 116 including an image captured by each of the plurality of cameras 106, and functionally, as shown in FIG. An image storage unit 118 and an image data transmission unit 119 are provided.
  • the image data collection unit 117 receives the image data 116 from each of the plurality of cameras 106. When receiving the image data 116, the image data collection unit 117 stores the image data 116 in the image storage unit 118.
  • the image storage unit 118 holds image data 116.
  • the image data 116 includes, for example, a moving image in the store taken continuously by each of the plurality of cameras 106 while the store is open.
  • the image data transmission unit 119 When receiving a request from the sales analysis device 103, the image data transmission unit 119 reads the image data 116 related to the request from the image storage unit 118 and transmits the image data 116 to the sales analysis device 103.
  • the sales analysis device 103 is a device that counts the sales opportunity loss of a product at a store.
  • the sales analysis device 103 counts the sales opportunity loss of the product based on the movement history of the customer obtained by the analysis of the image data 116 and the sales history of the product obtained from the sales history data 115.
  • the sales analysis device 103 includes a movement history acquisition unit 120, a stop detection unit 121, an area storage unit 122, a registration waiting detection unit 123, a display storage unit 124, and an extraction unit 125.
  • An accounting status acquisition unit 126 and a counting unit 127 are provided.
  • the movement history acquisition unit 120 analyzes the image data 116 transmitted from the image data transmission unit 119 to obtain the movement history of the person in the store.
  • the movement history is the information obtained by observing, for each person in the store, the route traveled by the person between entering and leaving the store at a predetermined time interval (for example, frame rate) It is.
  • the movement history includes, for each person in the store, the position where the person is located in the store and the date and time associated with the position.
  • the position is represented, for example, in a two-dimensional orthogonal coordinate system with the lower left corner as the origin in the plan view in the shop shown in FIG.
  • the date and time are represented by, for example, a date, an hour, a minute, and a second.
  • the movement history acquisition unit 120 includes an image acquisition unit 128, an image processing unit 129, a correspondence data storage unit 130, and a conversion unit 131.
  • the image acquisition unit 128 acquires the image data 116 transmitted from the image data transmission unit 119.
  • the image processing unit 129 analyzes the image data 116 to determine where and when in the image the person in the store passes.
  • Space association data 132 is stored in the association data storage unit 130.
  • the space association data 132 is data for associating the position in the image with the position in the real space.
  • the conversion unit 131 determines where and when in the real space the person in the store has passed .
  • the stop detection unit 121 obtains a stop point of a person in the store based on the movement history obtained by the movement history acquisition unit 120.
  • the stopping point is a point at which a person in the store has stopped for more than the stopping time.
  • the stopping time may be an appropriately predetermined time, and for example, a minimum time for the customer to stop at the product shelf to purchase the product, an average time, and the like may be set.
  • the area storage unit 122 stores data indicating the position of an area set in advance. Specifically, in the area storage unit 122, customer corresponding area data 133 and accounting area data 134 are stored.
  • the customer corresponding area data 133 is data indicating the position of the above-described customer corresponding area.
  • the position of the customer corresponding area may be represented by coordinate values in the real space, as illustrated in FIG. 6A.
  • the customer corresponding area data 133 illustrated in FIG. 6A includes coordinate values in the real space of each of the four corners of the customer corresponding area, corresponding to the substantially rectangular customer corresponding area as shown in FIG.
  • the accounting area data 134 is data indicating the position of the accounting area.
  • the accounting area is an area predetermined as an area where a customer of a store is located at the time of accounting, and is determined in association with the position of the register. Although the position, shape, size, and the like of the accounting area may be determined as appropriate, in the present embodiment, it is assumed that a substantially rectangular area is set as shown in FIG. 2, for example.
  • the position of the accounting area may be represented by coordinate values in the real space, as illustrated in FIG. 6 (b).
  • the accounting area data 134 illustrated in FIG. 6B includes coordinate values in the real space of each of the four corners of the accounting area, corresponding to the generally rectangular accounting area as shown in FIG.
  • the registration wait detection unit 123 detects a registration waiting area based on the movement history obtained by the movement history acquisition unit 120.
  • the check waiting area is an area occupied by a person waiting for accounting in a store.
  • Display data 135 is stored in the display storage unit 124.
  • the display data 135 is data indicating a display place of each product in the store.
  • information indicating a product and information indicating a display place are associated.
  • the extraction unit 125 extracts, for each of the persons detected at the stopping point, a product corresponding to the stopping point included in the area excluding the cash register waiting area in the store based on the display data 135.
  • the accounting status acquisition unit 126 obtains, for each of the persons for whom the stopping point is detected, the status of passage in the accounting area based on the movement history.
  • the passage status of the accounting area includes, for example, whether or not the accounting area has passed, and when it passes.
  • the accounting status acquisition unit 126 includes an accounting determination unit 136 and an accounting period acquisition unit 137.
  • the accounting determination unit 136 determines whether or not each person who has detected the stopping point has accounted as the passage status of the cash register based on the movement history.
  • the accounting period acquisition unit 137 obtains an accounting period at which the accounting has been performed, based on the movement history.
  • the counting unit 127 counts the sales opportunity loss of the product not purchased.
  • the counting unit 127 refers to at least the passage status of the accounting area obtained by the accounting status acquisition unit 126 in order to count the sales opportunity loss.
  • the counting unit 127 counts the person who is the target of the determination as the sales opportunity loss of the product extracted by the extraction unit 125.
  • the counting unit 127 acquires the sales history data 115 from the POS data transmission unit 114, and refers to the acquired sales history data 115. Then, when there is a product that has not been purchased at a predetermined time among the products extracted by the extraction unit 125, the counting unit 127 counts the sales opportunity loss of the product that has not been purchased.
  • the “predetermined time” means a time according to the accounting time obtained by the accounting time acquisition unit 137.
  • the “predetermined time” may be the accounting time determined by the accounting time acquisition unit 137, and even within a time range predetermined based on this accounting time. Good.
  • the configuration of the sales management system 100 according to the first embodiment of the present invention has been described above. From here, the operation of the sales management system 100 according to the present embodiment will be described.
  • the sales analysis device 103 which is characteristic of the present invention, executes sales analysis processing as shown in the flowchart of FIG.
  • the sales analysis process is a process of counting the sales opportunity loss of the product at the store.
  • the sales analysis process may be performed, for example, at a predetermined time once a month, or may be performed in response to an instruction from the user when the sales analysis device 103 receives an instruction from the user.
  • the instruction from the user is given to the sales analysis device 103 through an input unit configured by, for example, a button, a touch panel, and the like (not shown).
  • the counting unit 127 sets “0” to the counter associated with each product (step S101). This counter is for counting the sales opportunity loss of each product.
  • the movement history acquisition unit 120 acquires the image data 116 from the crime prevention management device 107 and analyzes the image data 116 to obtain the movement history of the person in the store (step S102).
  • the image acquisition unit 128 transmits a request for the image data 116 to the crime prevention management device 107 (step S111).
  • the image acquisition unit 128 acquires the image data 116 sent from the image data transmission unit 119 in response to the request (step S112).
  • the image processing unit 129 analyzes the image data 116 (step S113). Thus, the image processing unit 129 determines where and when in the image the person in the store has passed.
  • the image processing unit 129 specifies a person in each of the frames constituting the moving image included in the image data 116. As exemplified in FIG. 10, the image processing unit 129 identifies which one of the small regions a person is included by using a plurality of small regions obtained by dividing the frame into a grid having a predetermined size. By analyzing the image data 116 in this manner, the image processing unit 129 determines which of the plurality of small areas into which the person in the store has passed the frame and when.
  • the frame is divided into a plurality of lattice-shaped small areas, but the shapes and sizes of the plurality of small areas may be set as appropriate.
  • the conversion unit 131 acquires the result of the analysis process (step S113) (step S114).
  • the result of the analysis process is information indicating the position of a person in the image, and is, for example, information for specifying a small area occupied by the person.
  • the conversion unit 131 refers to the space association data 132 stored in the association data storage unit 130 (step S115).
  • the frame is divided into small areas and image processing is performed.
  • the correspondence between the position in the image and the position in the real space may be made by correlating each of the plurality of small areas obtained by dividing the frame with the real space in the store. Therefore, in the space association data 132, for example, information for specifying four corners of each of the plurality of small areas may be associated with information indicating a position in the store.
  • the information indicating the position in the store is, for example, represented by coordinate values in a coordinate system corresponding to the real space in the store described above.
  • the conversion unit 131 determines the position in the image where a person is located in the store as the real space. To the position of (step S116).
  • the conversion unit 131 uses information specifying the small area occupied by a person in the image as a coordinate value in the coordinate system corresponding to the above-mentioned store. Convert to information that indicates The “coordinate value in the coordinate system corresponding to the inside of the store” here is an example of the position in the real space.
  • a part of the small area occupied by the person in the image may be converted to a position in the store by, for example, apportioning.
  • FIG. 11 is a diagram schematically showing a line (movement curve) L1 smoothly connecting the movement processes obtained by performing the process of step S116, mapping the view from inside the store.
  • the stop detection unit 121 obtains a stop point of a person in the store based on the movement process obtained in step S102 (step S103).
  • this customer has a movement range in front of the product shelf D within a predetermined range.
  • this movement range is detected as the stationary point P1.
  • the registration waiting detection unit 123 detects the registration waiting area based on the movement history obtained in step S102 (step S104).
  • the check waiting area is detected by comparing the movement of people in the store at two different points in time.
  • the candidate area CP means an area which is a candidate for a cash register waiting area.
  • FIG. 12 is a view schematically showing the movement of a person in the store at a first time point, as in FIG. 11, by mapping the view from the upper side of the store.
  • FIG. 12 shows an example in which there are three customers A to C in the store, and includes lines (movement curves) L2 to L4 smoothly connecting the movements of the customers A to C, respectively.
  • a movement curve L2 indicated by a solid line corresponds to the movement of the customer A.
  • a movement curve L3 indicated by an alternate long and short dash line corresponds to the movement of the customer B.
  • a movement curve L4 indicated by a two-dot chain line corresponds to the movement of the customer C.
  • the customer A passes through the stopping point P2 in front of the product shelf E after entering the store and is at the stopping point P3 at a first time point.
  • the customer B passes through the stopping point P4 in front of the product shelf B after entering the store and is at the stopping point P5 at a first time point.
  • the customer C passes through the stopping point P6 in front of the product shelf C after entering the store and is at the stopping point P7 at a first time point.
  • the stopping point P3 and the stopping point P5 are closer than the determination distance D.
  • the stopping point P5 and the stopping point P7 are closer than the determination distance D. Therefore, an area including the stopping point P3, the stopping point P5, and the stopping point P7 is detected as the candidate area CP.
  • the stopping point is detected as a moving range having a wide range, but the distance between different stopping points in this case may be, for example, the shortest distance of the outer edge of the stopping point. It may be the distance between the centers of the stopping points.
  • the candidate area is a cash register waiting area. It is detected.
  • the second time point is a time point after the first time point.
  • the second time may be set as a time when a predetermined time has elapsed from the first time.
  • predetermined time the average time required for accounting at the store, the shortest time or the maximum time required for accounting at the store, the shortest time required for the accounting at the store and the maximum time It should be set with reference to the time of day.
  • 15 seconds, 30 seconds, 40 seconds, 45 seconds, 60 seconds, 90 seconds, etc. may be adopted as the "predetermined time”.
  • FIG. 13 is a diagram showing the movement of a person in the store at a second point in time, as in the case of FIG. In FIG. 13, the stopping points P3, P5, and P7 are not illustrated for the sake of clarity.
  • the customer A is detected in the accounting area.
  • arrival at the arrival points P8 and P9 is detected, respectively, and both arrival points P8 and P9 are included in the candidate area CP. Therefore, the candidate area CP detected at the first point of time is detected as the register waiting area at the first point of time.
  • stopping points P8 and P9 may be determined to be included in the candidate area CP when the predetermined ratio or more of the stopping points P8 and P9 overlap the candidate area CP.
  • the candidate area is detected as the cash register waiting area.
  • (1) is that a candidate area is detected at a first time point.
  • (2) at the second point in time, at least one of the plurality of people staying at the stopping point included in the candidate area is detected in the accounting area, and the remaining people are at the candidate area in the candidate area It is to be detected.
  • Steps S106 to S108 are repeated for each person in the store who has stopped in areas other than the registration waiting area detected in step S104 (loop A; step S105).
  • the extraction unit 125 refers to the display data 135.
  • the extraction unit 125 extracts a product corresponding to the stopping point included in the area excluding the cash register waiting area in the shop based on the display data 135 (step S106).
  • the counting unit 127 counts the sales opportunity loss based on the passage status of the accounting area (step S107).
  • step S107 in the counting process (step S107), as shown in FIG. 14, whether the person who is the processing target in the loop A (step S105) has made an account based on the movement details, It is determined whether or not it is (step S121).
  • the determination in step S121 may be made, for example, according to the time when the person who is the process target stays in the accounting area.
  • a person who stays in the accounting area longer than the shortest time required for accounting may be determined to have performed accounting after entering and leaving the store.
  • the “minimum time required for accounting” is merely an example of the time serving as a criterion for determining whether or not accounting has been performed, and may be set as appropriate.
  • Step S121; No If it is determined that the accounting has not been made (Step S121; No), the counting unit 127 counts it as the sales opportunity loss of the non-purchased product because all the products extracted in Step S106 have not been purchased (Step S121; Step S122).
  • step S121 The process in step S121 is performed for each person for which the stopping point is detected. Therefore, when it is determined that accounting has not been made, the person who has become the target of the determination has not yet reached the purchase of the product displayed on the product shelf even though he has stopped at the product shelf.
  • step S122 it will be counted as a sales opportunity loss of the unpurchased product. More specifically, 1 is added to the counter associated with the product. When there are a plurality of products extracted in step S106, 1 is added to the counter associated with each product.
  • the accounting period obtaining unit 137 obtains the accounting period which is the period when the accounting has been made, based on the movement history (step S123).
  • the accounting period acquisition unit 137 identifies the period when the person to be processed remains in the accounting area based on the movement history, and obtains the identified period as the accounting period.
  • the accounting time includes, for example, the date and time (date and time) when the person being processed enters the accounting area and the date and time when the person to be processed has left the accounting area.
  • the counting unit 127 transmits the request of the sales history data 115 to the POS management device 105, and acquires the sales history data 115 from the POS data transmission unit 114 (step S124).
  • the counting unit 127 determines whether there is a product that has not been purchased at a time according to the accounting time, among the products extracted in step S106 (step S125). In step S125, the counting unit 127 determines based on the accounting time obtained in step S123 and the sales history data 115 acquired in step S124.
  • the counting unit 127 refers to the sales history data 115 acquired in step S124, and determines whether all the products extracted in step S106 are purchased at the accounting time determined in step S123. Determine. In the case where there is even one product that has not been purchased among the products extracted in step S106, the counting unit 127 determines that there is a product that has not been purchased. When all the products extracted in step S106 are purchased, the counting unit 127 determines that there is no product that has not been purchased.
  • a difference due to an error may occur between the time determined based on the movement history and the time registered in the sales history data 115. It is not limited to the accounting time determined in step S123, and it may be determined whether the product extracted in step S106 is purchased at a time when the time set in advance based on the accounting time is extended. That is, it may be determined whether the product extracted in step S106 is purchased at a time according to the accounting time obtained in step S123.
  • the “period according to the accounting period” includes not only the accounting period but also a period in which the time set in advance based on the accounting period is extended.
  • Step S109 ends, and the process returns to the sales analysis process illustrated in FIG.
  • step S125 If the counting unit 127 determines that there is a product that has not been purchased (step S125; Yes), it counts it as a sales opportunity loss of the product that has not been purchased (step S126).
  • the person who is the target of the process of step S125 is a person who has made an accounting after the stopping point is detected. Therefore, it is highly likely that you have purchased some product. However, for the person who is the target of the process, not all the products related to the stopping point detected in step S103 may be purchased. If there is a product which has not been purchased at least one of the products related to all the stopping points detected in step S103, a sales opportunity loss of the product occurs. In step S126, in such a case, it is counted as a sales opportunity loss of a product that has not been purchased.
  • the counting unit 127 determines, based on the sales history data 115, among the products extracted in step S106 for the person who is the target of the process at the accounting time of the person who is the target of the process. Identify items that have not been purchased. Then, the counting unit 127 adds 1 to the counter associated with the identified product.
  • the counting unit 127 is associated with each of the specified plurality of products. Add 1 to the counter.
  • step S105 ends, and the sales analysis processing ends.
  • the sales analysis device 103 includes the cash register waiting detection unit 123 for detecting the cash register waiting area. Then, the extraction unit 125 extracts a product corresponding to the stopping point included in the area excluding the cash register waiting area for each of the persons for which the stopping point is detected. The counting unit 127 counts the sales opportunity loss for the unpurchased product among the extracted products based on the passage status of the accounting area obtained by the accounting status acquisition unit 126.
  • the accounting determination unit 136 determines, as the passage status of the accounting area, whether or not each person who has detected the stopping point has made an accounting. As described in the embodiment, a person who is not accounting does not purchase all the products extracted by the extraction unit 125 for the person. That is, in the case of a person who is not accounting, all sales opportunity losses of the product extracted by the extraction unit 125 have occurred for the person.
  • the accounting period acquisition unit 137 obtains the accounting period based on the movement history for each person who has been the object of the determination. . Then, counting unit 127 further refers to sales history data 115, and among the products extracted by extraction unit 125, when there is a product that has not been purchased at a time according to the accounting time, the product is purchased. We count as loss of sales opportunity of not product.
  • the sales opportunity loss of the product related to the accounted customer can be determined, the sales opportunity loss of the product in the store can be determined more accurately.
  • the cash register waiting area can be detected by comparing the movement history of the person at the store at each of the first time point and the second time point. That is, the cash register waiting area can be detected based on the movement history. As described above, the cash register waiting area can be easily detected, and the accurate sales opportunity loss can be obtained in consideration of the detected cash register waiting area. Therefore, it is possible to easily determine the sales opportunity loss of the product with high accuracy.
  • the people who move in the store are not limited to customers, and there are also clerks.
  • the sales opportunity loss is sought without distinguishing between the customer and the store clerk.
  • an example will be described in which a salesclerk is automatically determined, and a loss of sales opportunity is obtained based on the movement of people in the store excluding the salesclerk.
  • the sales management system according to the second embodiment of the present invention may be physically configured in the same manner as the sales management system 100 according to the first embodiment.
  • Each system of the POS system 101 and the security camera system 102 may be functionally configured in the same manner as the first embodiment.
  • the sales management system according to the present embodiment differs from the sales management system 100 according to the first embodiment in the functional configuration of the sales analysis devices 103 and 203.
  • the sales analysis device 203 further includes a store clerk detection unit 238, and includes a retention detection unit 221 that replaces the retention detection unit 121 according to the first embodiment.
  • the sales analysis device 203 according to the present embodiment has the same functional configuration as the sales analysis device 103 according to the first embodiment except for these points.
  • the description of the same configuration as that of the first embodiment is omitted to simplify the description.
  • the clerk detection unit 238 detects a clerk among the people in the shop based on the movement history.
  • the stop detection unit 221 obtains the stop point of the person in the store based on the movement history obtained by the movement history acquisition unit 120 as the stop detection unit 121 according to the first embodiment.
  • the stopping point detected by the stopping detection unit 221 according to the present embodiment is a point at which a person other than the clerk among the people in the store stops for longer than the stopping time.
  • the sales analysis device 203 executes sales analysis processing substantially the same as that of the first embodiment.
  • the sales analysis device 203 executes the processes of steps S101 to S102 similar to those of the first embodiment, as shown in the flowchart of FIG.
  • the sales analysis device 203 executes a store clerk detection process (step S208) and a stationary point detection process (step S203) replacing the stationary point detection process (step S103) according to the first embodiment. Then, the sales analysis device 203 executes the same processing as that of the first embodiment from step S104.
  • step S208 the store clerk detection process (step S208) and the stationary point detection process (step S203) characteristic of the present embodiment will be described, and the other processes (steps S101 to S102, The description of steps S104 to S107 is omitted.
  • the clerk detection unit 238 determines whether or not a person in the store has moved to a predetermined clerk area in the shop based on the movement history, and detects a person who has moved to the clerk area as a clerk (step S208). ).
  • the store clerk detection unit 238 detects as the store clerk among the people in the store those who are in the customer service area, those who have entered the customer service area and those who have come out of the customer service area. . Further, the clerk detection unit 238 detects a person who has entered the backyard and a person who has come out of the backyard among the people in the store as a clerk.
  • the movement curve L5 shown in FIG. 17 includes the in / out from the backyard and the stay in the customer service area. It can be seen that such a movement curve L5 is based on the movement of the store clerk.
  • the store clerk area is not limited to these, and may be appropriately set.
  • the stopping detection unit 221 detects a stopping point at which a person in the store except the store clerk has stopped for a stopping time or more, based on the movement history.
  • the sales analysis device 203 includes the clerk detection unit 238. Then, the stop detection unit 221 detects a stop point at which a person in the store except the store clerk has stopped for a stop time or longer, based on the movement history.
  • the present invention includes a form in which some or all of the embodiments and the modifications described above are appropriately combined, and a form in which the form is appropriately modified.
  • the present invention can be usefully used to count sales opportunity losses in various devices or systems for managing sales in stores and the like.
  • Sales Management System 101 POS System 102 Security Camera System 103, 203 Sales Analysis Device 104 POS Terminal 105 POS Management Device 106 Camera 107 Security Management Device 112 POS Data Collection Unit 113 Sales History Storage Unit 114 POS Data Transmission Unit 115 Sales History Data 116 Image data 117 Image data collection unit 118 Image storage unit 119 Image data transmission unit 120 Movement history acquisition unit 121, 221 Detention detection unit 122 Area storage unit 123 Registration waiting detection unit 124 Display storage unit 125 Extraction unit 126 Accounting status acquisition unit 127 Counting Part 128 Image acquisition part 129 Image processing part 130 Correspondence data storage part 131 Conversion part 132 Space correspondence data 133 Customer correspondence area data 134 Accounting area data 135 Display data 136 Accounting judgment part 137 Accounting Period acquisition unit 238 Clerk detection unit

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • Data Mining & Analysis (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

販売分析装置１０３は、店舗内が撮影された画像を示す画像データを解析することによって、店舗内の人の移動経緯を求める移動経緯取得部１２０と、移動経緯に基づいて、店舗内の人が予め定められた停留時間以上停留した停留地点及び店舗内で会計のために待つ人が占める領域であるレジ待ち領域のそれぞれを検出する停留検出部１２１及びレジ待ち検出部１２３と、停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データ１３５に基づいて、店舗内でレジ待ち領域を除いた領域に含まれる停留地点に対応する商品を抽出する抽出部１２５と、停留地点が検出された人の各々について、移動経緯に基づいて、店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求める会計状況取得部１２６と、会計領域の通過状況に基づいて、抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数する計数部１２７とを備える。

Description

販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体
　本発明は、販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体に関する。
　小売店では一般的に、多くの商品が売れるように、ＰＯＳ（Ｐｏｉｎｔ　Ｏｆ　Ｓａｌｅｓ）データを利用して商品の陳列が工夫されている。例えば、ＰＯＳデータから得られる商品種別ごとの販売数に基づいて、多く売れている商品種別に属する商品である売れ筋商品とあまり売れていない商品種別に属する商品である死筋商品を判別することができる。そして、この判別の結果に基づいて、例えば死筋商品の陳列スペースに陳列する商品を売れ筋商品やその他の商品に置き換えるなど、商品の陳列を変更することができる。
　商品の販売量を増やすために、商品をどのように置き換えるかなどの商品の陳列を詳細に検討するには、商品の販売機会損失をデータとして得られることが望ましい。
　例えば、特許文献１には、商品在庫と販売機会損失とのバランス等の判断に関する情報を得るための販売機会損失分析用データ出力システムが開示されている。
　特許文献１に記載のシステムは、カメラで撮影した分析対象とする動画像の解析処理により、撮影範囲に対応したフレーム領域における人物の位置、属性、滞留時間、または動線等の情報を得る。この情報に基づいて、特許文献１に記載のシステムは、フレーム領域内の単位ごとに、人物の立寄り人数等を含む、人物の立寄りの状況を計算する処理を行う。そして、特許文献１に記載のシステムは、店舗内に配置される商品に対応付けられる単位ごとの立寄りの状況を含む解析情報を、店舗の商品の販売機会損失に関する分析用のデータとして出力する。
　特許文献１に記載のシステムでは、立寄り状況計算部が、境界線で示される区画単位ごとに、人物の出入りや滞留などを判定し、立寄り人数（ｄ）などをカウントする。このカウント処理では、撮影範囲のフレーム領域における人物の解析・検出に基づいて得られる人物の動線の情報（座標情報など）が用いられる。
特開２０１５－１３３１３１号公報
　特許文献１に記載のシステムは上述の通り、区画単位に出入り或いは滞留した人を立寄り人数にカウントする。そのため、特許文献１に記載の立寄り人数には、いわゆるレジ待ちのための滞留が考慮されていない。このような立寄り人数を基に得られる店舗内の商品の販売機会損失は、精度が良くないという問題がある。
　本発明は、上記の事情に鑑みてなされたものであって、店舗内の商品の販売機会損失を精度良く求めることが可能な販売分析装置などを提供することを目的とする。
　上記の目的を達成するため、本発明の第１の観点に係る販売分析装置は、
　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求める移動経緯取得部と、
　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出する停留検出部と、
　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出するレジ待ち検出部と、
　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出する抽出部と、
　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求める会計状況取得部と、
　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数する計数部とを備える。
　本発明の第２の観点に係る販売分析方法は、
　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求めることと、
　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出することと、
　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出することと、
　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出することと、
　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求めることと、
　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数することとを含む。
　本発明の第３の観点に係るプログラム記録媒体は、コンピュータに、
　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求めることと、
　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出することと、
　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出することと、
　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出することと、
　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求めることと、
　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数することとを実行させるためのプログラムを記録したものである。
　本発明によれば、店舗内の商品の販売機会損失を精度良く求めることが可能になる。
本発明の実施の形態１に係る販売管理システムの物理的な構成の概要を示す図である。 実施の形態１に係る店舗内での棚、各種の領域の位置関係を示す平面図である。 実施の形態１に係るＰＯＳ管理装置の機能的な構成を示す図である。 実施の形態１に係る防犯管理装置の機能的な構成を示す図である。 実施の形態１に係る販売分析装置の機能的な構成を示す図である。 実施の形態１にて予め設定される領域の位置を示すデータの一例であって、（ａ）は、顧客対応領域データの例を示し、（ｂ）は、会計領域データの例を示す。 実施の形態１に係る陳列データの一例を示す図である。 実施の形態１に係る販売分析処理の一例を示すフローチャートである。 実施の形態１に係る移動経緯取得処理の一例を示すフローチャートである。 実施の形態１に係る画像解析処理において採用される、フレームを分割した小領域の一例を示す図である。 ある顧客について求められた移動経緯を、店舗内の平面図に模式的に表した図である。 第１の時点で店舗内に居る顧客３人について求められた移動経緯を、店舗内の平面図に模式的に表した図である。 第１の時点より後の第２の時点で店舗内に居る顧客３人について求められた移動経緯を、店舗内の平面図に模式的に表した図である。 実施の形態１に係る計数処理の一例を示すフローチャートである。 本発明の実施の形態２に係る販売分析装置の機能的な構成を示す図である。 実施の形態２に係る販売分析処理の一例を説明するためのフローチャートである。 ある店員について求められた移動経緯を、店舗内の平面図に模式的に表した図である。
　本発明の実施の形態について図面を参照して説明する。以下の説明において、前、後、上、下、左、右の方向を表す用語は、説明のために用いるのであって、本発明を限定する趣旨ではない。
（実施の形態１）
　本発明の実施の形態１に係る販売管理システム１００は、店舗における商品の販売を管理するためのシステムであって、図１に示すように、ＰＯＳ（Ｐｏｉｎｔ　ｏｆ　Ｓａｌｅｓ）管理システム１０１と、防犯カメラシステム１０２と、販売分析装置１０３とを含む。
＜販売管理システムの構成の概要＞
　販売管理システム１００において、物理的には図１に示すように、ＰＯＳシステム１０１と、防犯カメラシステム１０２と、販売分析装置１０３とを備える。ＰＯＳシステム１０１及び防犯カメラシステム１０２の各システムは、販売分析装置１０３と相互に通信可能に接続されている。この接続方法は、例えば、有線、無線又はこれらを組み合わせたＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）などのネットワークである。
　ＰＯＳシステム１０１は、店舗における商品の販売状況などを集計するためのシステムであって、物理的に、ＰＯＳ端末１０４とＰＯＳ管理装置１０５とを備える。ＰＯＳ端末１０４は、ＰＯＳ用のレジスター機であり、データを入力するためのボタン、バーコードリーダなどが取り付けられている。なお、本実施の形態では、１台のＰＯＳ端末１０４が、ＰＯＳシステム１０１に備えられる例を説明するが、複数のＰＯＳ端末１０４がＰＯＳシステム１０１に備えられてもよい。
　防犯カメラシステム１０２は、店舗における犯罪防止のための監視システムであって、物理的に、複数のカメラ１０６と防犯管理装置１０７とを備える。複数のカメラ１０６の各々は、店舗内の予め定められた領域を連続的に撮影し、この撮影した動画像を含む撮影データを出力する。
　店舗は、例えばコンビニエンスストア、スーパーマーケットである。本実施の形態では、店舗内には、それを上方から見た図である図２に示すように、商品棚Ａ～Ｆ、通路、顧客対応領域、バックヤードが設けられている。なお、会計領域については、後述する。
　すなわち、出入り口から入ってみた場合に、左側の奥から順に商品棚Ａ～Ｆが並べて配置されている。顧客、店員などの人が店舗内で通る通路が、商品棚ＡとＢの間と、商品棚ＣとＤの間と、商品棚ＥとＦの間と、商品棚Ａ～Ｆの左方と右方の各々とに設けられている。
　また、顧客対応領域は、出入り口から入った人が見た場合に、右側の奥に設けられている。顧客対応領域は、店員が顧客の対応をするための領域であり、店舗にて適宜設置される。店舗がコンビニエンスストアである場合、顧客対応領域は、典型的には、カウンタで囲まれており、そのカウンタの上にレジスターの機能を備えたＰＯＳ端末が設置される。顧客対応領域は、基本的には、店舗に関係する人員である店員のみが進入を許された領域である。
　バックヤードは、出入り口から入った人が見た場合に、顧客対応領域よりも右方に、手前から奥までの全体にわたって設けられている。バックヤードは、商品の在庫置き場、店員の控え室などに利用される。バックヤードも、顧客対応領域と同様に、基本的には、店員のみが進入を許された領域である。
　そして、複数のカメラ１０６は、店舗内の各通路、商品棚Ａ～Ｆの一部、顧客対応領域を撮影する。詳細には、本実施の形態ではカメラ１０６は、６台設置されており、それぞれが、撮影領域Ａ～Ｆのいずれか１つの撮影領域を撮影するように設置されている。複数の撮影領域は、隣接する撮影領域の間では一部重複してもよいが、基本的には互いに異なっている。
　販売分析装置１０３、ＰＯＳ管理装置１０５、防犯管理装置１０７の各装置は、物理的には、プロセッサ１０８＿ａ～１０８＿ｃ、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１０９＿ａ～１０９＿ｃ、記憶デバイス１１０＿ａ～１１０＿ｃ、通信Ｉ／Ｆ（インタフェース）１１１＿ａ～１１１＿ｃなどから構成される。
　プロセッサ１０８＿ａ～１０８＿ｃは、それぞれ、装置１０３，１０５，１０７に格納されたソフトウェアプログラムを実行するためのハードウェアであり、演算処理装置、レジスタ、周辺回路などから構成される。なお、プロセッサ１０８＿ａ～１０８＿ｃは、ＰＯＳ管理装置１０５、防犯管理装置１０７、販売分析装置１０３の各々に複数備えられてもよい。
　ＲＡＭ１０９＿ａ～１０９＿ｃは、それぞれ、プロセッサ１０８＿ａ～１０８＿ｃの作業領域として利用されるメモリである。記憶デバイス１１０＿ａ～１１０＿ｃの各々は、例えば、ＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）、ＨＤＤ（Ｈａｒｄ　Ｄｉｓｃ　Ｄｒｉｖｅ）などから構成される。通信Ｉ／Ｆ１１１＿ａ～１１１＿ｃの各々は、有線用と無線用とのいずれか一方であってもよく、これらの両方であってもよい。
＜各装置１０３，１０５，１０７の機能的構成＞
　ＰＯＳ管理装置１０５、防犯管理装置１０７、販売分析装置１０３の各装置は、例えば、インストールされたプログラムを実行することによって、これから説明する機能を発揮する。
　なお、ＰＯＳ管理装置１０５、防犯管理装置１０７、販売分析装置１０３の各装置が備える機能は、以下に説明する機能に限られず、各装置には適宜、他の機能が付加されてもよい。また、販売分析装置１０３が発揮する機能の一部又は全部は、防犯カメラシステム１０２、ＰＯＳシステム１０１の一方又は両方を構成する装置に組み込まれてもよい。このような場合、販売分析装置１０３は、機能の一部が組み込まれた装置とともに構成されるか、或いは、機能の全部が組み込まれた装置に含まれることになる。
（ＰＯＳ管理装置１０５）
　ＰＯＳ管理装置１０５は、ＰＯＳ端末１０４からのデータを収集して保持する装置であって、機能的には図３に示すように、ＰＯＳデータ収集部１１２と、販売履歴記憶部１１３と、ＰＯＳデータ送信部１１４とを備える。
　ＰＯＳデータ収集部１１２は、店舗における商品の在庫状況、販売履歴などを含むＰＯＳデータをＰＯＳ端末から受信する。ＰＯＳデータ収集部１１２は、ＰＯＳデータを受信すると、そのＰＯＳデータに含まれる販売履歴データ１１５を販売履歴記憶部１１３に記憶させる。
　販売履歴記憶部１１３は、販売履歴データ１１５を保持する。販売履歴データ１１５は、店舗における商品の販売履歴を示すデータであって、例えば、販売した商品、販売数量、販売日時が顧客ごとに関連付けられたものである。
　ＰＯＳデータ送信部１１４は、販売分析装置１０３から要求を受けると、その要求に関連する販売履歴データ１１５を販売履歴記憶部１１３から読み出して販売分析装置１０３へ送信する。
（防犯管理装置１０７）
　防犯管理装置１０７は、複数のカメラ１０６の各々によって撮影された画像を含む画像データ１１６を管理するための装置であって、機能的には図４に示すように、画像データ収集部１１７と、画像記憶部１１８と、画像データ送信部１１９とを備える。
　画像データ収集部１１７は、画像データ１１６を複数のカメラ１０６の各々から受信する。画像データ収集部１１７は、画像データ１１６を受信すると、その画像データ１１６を画像記憶部１１８に記憶させる。
　画像記憶部１１８は、画像データ１１６を保持する。画像データ１１６は、例えば店舗が開店している間に、複数のカメラ１０６の各々によって連続的に撮影された店舗内の動画像を含む。
　画像データ送信部１１９は、販売分析装置１０３から要求を受けると、その要求に関連する画像データ１１６を画像記憶部１１８から読み出して販売分析装置１０３へ送信する。
（販売分析装置１０３）
　販売分析装置１０３は、店舗における商品の販売機会損失を計数する装置である。販売分析装置１０３は、画像データ１１６の分析により得られる顧客の移動経緯と販売履歴データ１１５から得られる商品の販売履歴とに基づいて、商品の販売機会損失を計数する。
　販売分析装置１０３は、図５に示すように、移動経緯取得部１２０と、停留検出部１２１と、領域記憶部１２２と、レジ待ち検出部１２３と、陳列記憶部１２４と、抽出部１２５と、会計状況取得部１２６と、計数部１２７と、を備える。
　移動経緯取得部１２０は、画像データ送信部１１９から送信された画像データ１１６を解析することによって、店舗内の人の移動経緯を求める。
　移動経緯とは、店舗内の人ごとに、その人が店舗に入ってから出るまでの間に移動した経路を、予め定められた時間間隔（例えば、フレームレート）で観測することによって得られる情報である。
　具体的には例えば、移動経緯は、店舗内の人ごとに、店舗内でその人が所在する位置とこの位置に関連付けられた日時とを含む。位置は、例えば、図２に示す店舗内の平面図において、左下の隅を原点とした２次元の直交座標系で表される。日時は、例えば、年月日及び時分秒で表される。
　移動経緯取得部１２０は、詳細には、画像取得部１２８と、画像処理部１２９と、対応付けデータ記憶部１３０と、変換部１３１とを有する。
　画像取得部１２８は、画像データ送信部１１９から送信された画像データ１１６を取得する。
　画像処理部１２９は、画像データ１１６を解析することによって、店舗内の人が画像中でどこをいつ通過したかを求める。
　対応付けデータ記憶部１３０には、空間対応付けデータ１３２が記憶される。空間対応付けデータ１３２は、画像中の位置と実空間における位置とを対応付けるためのデータである。
　変換部１３１は、対応付けデータ記憶部１３０に記憶された空間対応付けデータ１３２と画像処理部１２９が求めた結果とに基づいて、店舗内の人が実空間のどこをいつ通過したかを求める。
　停留検出部１２１は、移動経緯取得部１２０によって求められた移動経緯に基づいて、店舗内の人の停留地点を求める。停留地点とは、店舗内の人が停留時間以上停留した地点である。ここで、停留時間は、適宜予め定められる時間であって、例えば、顧客が商品を購入するために商品棚に立ち寄る最小時間、平均時間などが設定されるとよい。
　領域記憶部１２２には、予め設定される領域の位置を示すデータが記憶される。詳細には、領域記憶部１２２には、顧客対応領域データ１３３と、会計領域データ１３４とが記憶される。
　顧客対応領域データ１３３は、上述の顧客対応領域の位置を示すデータである。顧客対応領域の位置は、図６（ａ）に例示するように、実空間における座標値により表されるとよい。図６（ａ）に例示する顧客対応領域データ１３３は、図２に示すような概ね矩形の顧客対応領域に対応して、顧客対応領域の四隅の各々の実空間における座標値を含む。
　会計領域データ１３４は、会計領域の位置を示すデータである。会計領域は、店舗の顧客が会計の際に位置する領域として予め定められた領域であって、レジスターの位置に対応付けて定められる。会計領域の位置、形状、大きさなどは、適宜定められてよいが、本実施の形態では、例えば図２に示すように、概ね矩形の領域が設定されているものとする。
　会計領域データ１３４において、会計領域の位置は、図６（ｂ）に例示するように、実空間における座標値により表されるとよい。図６（ｂ）に例示する会計領域データ１３４は、図２に示すような概ね矩形の会計領域に対応して、会計領域の四隅の各々の実空間における座標値を含む。
　レジ待ち検出部１２３は、移動経緯取得部１２０によって求められた移動経緯に基づいて、レジ待ち領域を検出する。レジ待ち領域とは、店舗内で会計のために待つ人が占める領域である。
　陳列記憶部１２４には、陳列データ１３５が記憶される。陳列データ１３５は、店舗内の各商品の陳列場所を示すデータである。陳列データ１３５では、商品を示す情報と陳列場所を示す情報とが関連付けられている。
　抽出部１２５は、停留地点で検出された人の各々について、陳列データ１３５に基づいて、店舗内のうちレジ待ち領域を除いた領域に含まれる停留地点に対応する商品を抽出する。
　会計状況取得部１２６は、停留地点が検出された人の各々について、移動経緯に基づいて、会計領域の通過状況を求める。会計領域の通過状況には、会計領域を通過したか否か、通過した場合に何時通過したか、などが含まれる。
　詳細には、会計状況取得部１２６は、会計判別部１３６と、会計時期取得部１３７とを含む。
　会計判別部１３６は、移動経緯に基づいて、停留地点が検出された人の各々が会計したか否かをレジの通過状況として判別する。
　会計時期取得部１３７は、会計したと会計判別部１３６によって判別された場合に、移動経緯に基づいて、当該会計がなされた時期である会計時期を求める。
　計数部１２７は、抽出部１２５によって抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数する。計数部１２７は、販売機会損失を計数するために、少なくとも、会計状況取得部１２６によって求められた会計領域の通過状況を参照する。
　詳細には、計数部１２７は、会計していないと会計判別部１３６によって判別された場合に、当該判別の対象となった人について抽出部１２５によって抽出された商品の販売機会損失として計数する。
　さらに、計数部１２７は、会計していると会計判別部１３６によって判別された場合に、ＰＯＳデータ送信部１１４から販売履歴データ１１５を取得して、当該取得した販売履歴データ１１５を参照する。そして、計数部１２７は、抽出部１２５によって抽出された商品のうち、所定の時期に購入されていない商品がある場合に、当該購入されていない商品の販売機会損失として計数する。
　この「所定の時期」は、会計時期取得部１３７によって求められた会計時期に応じた時期を意味する。具体的な例を挙げると、「所定の時期」は、会計時期取得部１３７によって求められた会計時期であってもよく、この会計時期を基準として予め定められる時間的な範囲内であってもよい。
　これまで、本発明の実施の形態１に係る販売管理システム１００の構成について説明した。ここから、本実施の形態に係る販売管理システム１００の動作について説明する。
　販売管理システム１００のうち、本発明に特徴的な販売分析装置１０３は、図８のフローチャートに示すような販売分析処理を実行する。販売分析処理は、店舗における商品の販売機会損失を計数する処理である。販売分析処理は、例えば月に一度の予め定められた時期に実行してもよく、販売分析装置１０３がユーザからの指示を受け付けると、その指示に応じて実行されてもよい。
　なお、ユーザからの指示は、例えば、図示しないボタン、タッチパネルなどで構成される入力部を介して販売分析装置１０３に与えられる。
　計数部１２７は、各商品に対応付けられたカウンタに「０」を設定する（ステップＳ１０１）。このカウンタは、各商品の販売機会損失を計数するためのものである。
　移動経緯取得部１２０は、防犯管理装置１０７から画像データ１１６を取得して、この画像データ１１６解析することによって、店舗内の人の移動経緯を求める（ステップＳ１０２）。
　詳細には、移動経緯取得処理（ステップＳ１０２）では、図９のフローチャートに示すように、画像取得部１２８が、防犯管理装置１０７に画像データ１１６の要求を送信する（ステップＳ１１１）。画像取得部１２８は、この要求に応答して画像データ送信部１１９から送られた画像データ１１６を取得する（ステップＳ１１２）。
　画像処理部１２９は、画像データ１１６を解析する（ステップＳ１１３）。これによって、画像処理部１２９は、店舗内の人が画像中でどこをいつ通過したかを求める。
　より詳細には、画像処理部１２９は、画像データ１１６に含まれる動画像を構成するフレームの各々において、人を特定する。図１０に例示するようにフレームを予め定めた大きさの格子状に分割した複数の小領域を利用して、画像処理部１２９は、人が小領域のいずれに含まれているかを特定する。このように画像データ１１６を解析することによって、画像処理部１２９は、店舗内の人が、フレームを分割した複数の小領域のいずれをいつ通過したかを求める。
　なお、本実施の形態では、フレームを格子状の複数の小領域に分割する例を説明したが、複数の小領域の形状及び大きさは、適宜設定されてよい。
　変換部１３１は、解析処理（ステップＳ１１３）の結果を取得する（ステップＳ１１４）。
　ここでの、解析処理（ステップＳ１１３）の結果は、画像中の人の位置を示す情報であって、例えば人が占める小領域を特定する情報である。
　変換部１３１は、対応付けデータ記憶部１３０に記憶された空間対応付けデータ１３２を参照する（ステップＳ１１５）。
　本実施の形態では、上述の通り、フレームを小領域に分割して画像処理が行われる。このことに対応して、画像中の位置と実空間における位置との対応付けは、フレームを分割した複数の小領域の各々と店舗内の実空間とを対応付けることでなされるとよい。そのため、空間対応付けデータ１３２では、例えば、複数の小領域の各々の四隅を特定するための情報と、店舗内の位置を示す情報とが関連付けられるとよい。店舗内の位置を示す情報は、例えば、上述した店舗内の実空間に対応する座標系での座標値で表される。
　変換部１３１は、ステップＳ１１４にて取得された解析処理の結果とステップＳ１１５にて参照された空間対応付けデータ１３２とに基づいて、店舗内で人が所在している画像中の位置を実空間の位置に変換する（ステップＳ１１６）。
　詳細には、変換部１３１は、解析処理の結果と空間対応付けデータ１３２とに基づいて、画像において人が占める小領域を特定する情報を、上述の店舗内に対応する座標系での座標値を示す情報に変換する。ここでの「店舗内に対応する座標系での座標値」は、実空間における位置の一例である。なお、画像において人が小領域の一部を占める場合には、例えば按分することによって、画像において人が占める小領域の一部が店舗内の位置に変換されてもよい。
　このようなステップＳ１１６を実行することによって、変換部１３１は、店舗内の人が実空間のどこをいつ通過したかを求める。図１１は、ステップＳ１１６の処理を実行することによって求められる移動経緯を滑らかにつないだ線（移動曲線）Ｌ１を、店舗内を上方から見た図にマッピングして模式的に示す図である。
　図８を再び参照する。
　停留検出部１２１は、ステップＳ１０２にて求められた移動経緯に基づいて、店舗内の人の停留地点を求める（ステップＳ１０３）。
　図１１に示す例では、この顧客は、商品棚Ｄの前で移動範囲が予め定められた範囲内にある。このような商品棚Ｄの前での移動範囲に停留時間以上留まっていた場合、この移動範囲が、停留地点Ｐ１として検出される。
　レジ待ち検出部１２３は、ステップＳ１０２にて求められた移動経緯に基づいて、レジ待ち領域を検出する（ステップＳ１０４）。
　詳細には、レジ待ち領域は、２つの異なる時点の店舗内の人の移動経緯を比較することによって検出される。
　まず、第１の時点において、図１２に示すように、予め定められた判定距離Ｄより近い複数の停留地点を含む領域がある場合に、この領域が、候補領域ＣＰとして検出される。候補領域ＣＰとは、レジ待ち領域の候補となる領域を意味する。
　図１２は、第１の時点において店舗内にいる人の移動経緯を、図１１と同様に店舗内を上方から見た図にマッピングして模式的に示す図である。図１２は、店舗内に３人の顧客Ａ～Ｃが居る例を示しており、顧客Ａ～Ｃのそれぞれの移動経緯を滑らかにつないだ線（移動曲線）Ｌ２～Ｌ４を含む。
　例えば、実線で示す移動曲線Ｌ２は、顧客Ａの移動経緯に対応する。一点鎖線で示す移動曲線Ｌ３は、顧客Ｂの移動経緯に対応する。二点鎖線で示す移動曲線Ｌ４は、顧客Ｃの移動経緯に対応する。
　図１２を参照すると分かるように、顧客Ａは、入店してから商品棚Ｅの前の停留地点Ｐ２を経て、第１の時点で停留地点Ｐ３にいる。顧客Ｂは、入店してから商品棚Ｂの前の停留地点Ｐ４を経て、第１の時点で停留地点Ｐ５にいる。顧客Ｃは、入店してから商品棚Ｃの前の停留地点Ｐ６を経て、第１の時点で停留地点Ｐ７にいる。
　そして、停留地点Ｐ３と停留地点Ｐ５とが判定距離Ｄより近い。停留地点Ｐ５と停留地点Ｐ７とが判定距離Ｄより近い。そのため、停留地点Ｐ３と停留地点Ｐ５と停留地点Ｐ７とを含む領域が、候補領域ＣＰとして検出される。
　なお、本実施の形態において、停留地点は、広がりがある移動範囲として検出されているが、この場合の異なる停留地点間の距離は、例えば、停留地点の外縁の最短距離であってもよく、停留地点の中心間の距離であってもよい。
　次に、第２の時点において、候補領域に居た人のうちの少なくとも1人が会計領域で検出され、残りの人が候補領域に留まっている場合に、当該候補領域は、レジ待ち領域として検出される。
　ここで、第２の時点は、第１の時点よりも後の時点である。例えば、第２の時点は、第１の時点から予め定められた時間が経過した時点として設定されるとよい。そして、この「予め定められた時間」には、店舗での会計に要する平均的な時間、店舗での会計に要する最短時間又は最大時間、店舗での会計に要する最短時間と最大時間との間の時間などを参照して設定されるとよい。具体例を挙げると、「予め定められた時間」には、１５秒、３０秒、４０秒、４５秒、６０秒、９０秒などの１つ又は複数が採用されるとよい。
　図１３は、第２の時点において店舗内にいる人の移動経緯を、図１１と同様に店舗内を上方から見た図にマッピングして示す図である。図１３では、分かり易くするため、停留地点Ｐ３，Ｐ５，Ｐ７を図示していない。
　図１３に示すように、第２の時点では、顧客Ａが会計領域で検出されている。また、顧客Ｂ，Ｃは、それぞれ、停留地点Ｐ８，Ｐ９での停留が検出されており、停留地点Ｐ８，Ｐ９が、いずれも、候補領域ＣＰに含まれている。そのため、第１の時点で検出された候補領域ＣＰが、第１の時点でのレジ待ち領域として検出される。
　なお、停留地点Ｐ８，Ｐ９は、それぞれの予め定められた割合以上が候補領域ＣＰと重なり合っている場合に、候補領域ＣＰに含まれていると判定されてもよい。
　このように、次の（１）と（２）とを満たす場合に、候補領域が、レジ待ち領域として検出される。（１）は、候補領域が第１の時点に検出されることである。（２）は、第２の時点において、候補領域に含まれる停留地点に停留した複数の人のうち、少なくとも１人の停留地点が会計領域で検出され、残りの人の停留地点が候補領域で検出されることである。
　店舗内のうち、ステップＳ１０４で検出されたレジ待ち領域以外で停留した人の各々について、ステップＳ１０６～Ｓ１０８を繰り返す（ループＡ；ステップＳ１０５）。
　抽出部１２５は、陳列データ１３５を参照する。抽出部１２５は、陳列データ１３５に基づいて、店舗内のうちレジ待ち領域を除いた領域に含まれる停留地点に対応する商品を抽出する（ステップＳ１０６）。
　会計状況取得部１２６が、移動経緯に基づいて会計領域の通過状況を求めると、計数部１２７が、会計領域の通過状況に基づいて、販売機会損失を計数する（ステップＳ１０７）。
　詳細には、計数処理（ステップＳ１０７）では、図１４に示すように、会計判別部１３６が、移動経緯に基づいて、ループＡ（ステップＳ１０５）にて処理対象となっている人が会計したか否かを判別する（ステップＳ１２１）。
　このステップＳ１２１における判別は、例えば、処理対象となっている人が、会計領域に留まった時間に従って判別されるとよい。
　より詳細には例えば、店舗に入ってから出るまでの間に、会計に要する最短時間よりも長く会計領域に留まった人は、会計をしたと判定されるとよい。また、店舗に入ってから出るまでの間に、会計領域に立ち入らなかった人は、会計をしなかったと判定されるとよい。さらに、店舗に入ってから出るまでの間に、会計領域に立ち入ったが、会計に要する最短時間以下で会計領域を通り過ぎた人は、会計をしなかったと判定されるとよい。なお、ここでの「会計に要する最短時間」は、会計したか否かの判別基準となる時間の一例に過ぎず、適宜設定されてよい。
　会計しなかったと判別された場合（ステップＳ１２１；Ｎｏ）、計数部１２７は、ステップＳ１０６にて抽出された商品がすべて購入されていないので、当該購入されていない商品の販売機会損失として計数する（ステップＳ１２２）。
　ステップＳ１２１での処理は、停留地点が検出された各人を対象に行われる。そのため、会計をしなかったと判別された場合、判別の対象となった人は、商品棚に立ち寄ったにも関わらず、その商品棚に陳列されている商品の購入には至っていない。
　ステップＳ１２２では、このような場合に、購入されていない商品の販売機会損失として計数されることになる。より具体的には、その商品に対応付けられたカウンタに１を加算する。ステップＳ１０６にて抽出された商品が複数ある場合には、各商品に対応付けられたカウンタに１を加算する。
　会計したと判別された場合（ステップＳ１２１；Ｙｅｓ）、会計時期取得部１３７は、移動経緯に基づいて、当該会計がなされた時期である会計時期を求める（ステップＳ１２３）。
　詳細には、会計時期取得部１３７は、移動経緯に基づいて、処理対象となっている人が会計領域に留まった時期を特定し、この特定した時期を会計時期として求める。会計時期は、例えば、処理対象となっている人が会計領域に進入した日時（年月日及び時刻）と会計領域から退出した日時とを含む。
　計数部１２７は、ＰＯＳ管理装置１０５に販売履歴データ１１５の要求を送信して、ＰＯＳデータ送信部１１４から販売履歴データ１１５を取得する（ステップＳ１２４）。
　計数部１２７は、ステップＳ１０６で抽出された商品のうち、会計時期に応じた時期に購入されていない商品があるか否かを判別する（ステップＳ１２５）。このステップＳ１２５では、計数部１２７は、ステップＳ１２３にて求められた会計時期と、ステップＳ１２４にて取得した販売履歴データ１１５とに基づいて判別する。
　詳細には、計数部１２７は、ステップＳ１２４にて取得した販売履歴データ１１５を参照し、ステップＳ１２３にて求められた会計時期に、ステップＳ１０６で抽出された商品がすべて購入されているか否かを判別する。ステップＳ１０６で抽出された商品のうちで購入されていない商品が１つでもある場合、計数部１２７は、購入されていない商品があると判別する。ステップＳ１０６で抽出された商品がすべて購入されている場合、計数部１２７は、購入されていない商品がないと判別する。
　ここで、移動経緯に基づいて判別される時刻と販売履歴データ１１５に登録される時刻とに、誤差によるズレが生じる場合がある。ステップＳ１２３にて求められた会計時期に限られず、当該会計時期を基準に予め定めた時間を広げた時期に、ステップＳ１０６で抽出された商品が購入されているか否かが判別されてもよい。すなわち、ステップＳ１０６で抽出された商品が、ステップＳ１２３にて求められた会計時期に応じた時期に購入されたか否かが判別されるとよい。このように、「会計時期に応じた時期」は、会計時期だけでなく、当該会計時期を基準に予め定めた時間を広げた時期などを含む。
　計数部１２７は、購入されていない商品がないと判別した場合（ステップＳ１２５；Ｎｏ）、計数処理（ステップＳ１０９）を終了し、図８に示す販売分析処理に戻る。
　計数部１２７は、購入されていない商品があると判別した場合（ステップＳ１２５；Ｙｅｓ）、当該購入されていない商品の販売機会損失として計数する（ステップＳ１２６）。
　ステップＳ１２５の処理の対象となる人は、停留地点が検出された後に、会計をした人である。そのため、何らかの商品を購入している可能性が高い。しかし、処理の対象となっている人について、ステップＳ１０３にて検出された停留地点に関連する商品のすべてが購入されたとは限らない。ステップＳ１０３にて検出されたすべての停留地点に関連する商品のうち、１つでも購入されていない商品があれば、その商品の販売機会損失が発生している。ステップＳ１２６では、このような場合に、購入されていない商品の販売機会損失として計数されることになる。
　詳細には、計数部１２７は、販売履歴データ１１５に基づいて、処理の対象となっている人の会計時期に、当該処理の対象となっている人についてステップＳ１０６で抽出された商品のうち、購入されていない商品を特定する。そして、計数部１２７は、特定した商品に対応付けられたカウンタに１を加算する。ここで、処理の対象となっている人についてステップＳ１０６で抽出された商品のうち、購入されていない商品が複数特定された場合、計数部１２７は、特定した複数の商品の各々に対応付けられたカウンタに１を加算する。
　販売分析装置１０３は、レジ待ち領域以外で停留した人のすべてについて、ステップＳ１０６～Ｓ１０７の処理を実行すると、ループＡ（ステップＳ１０５）の処理を終了して、販売分析処理を終了する。
　これまで、本発明の実施の形態１に係る販売管理システム１００について説明した。
　本実施の形態によれば、販売分析装置１０３は、レジ待ち領域を検出するためのレジ待ち検出部１２３を備える。そして、抽出部１２５は、停留地点が検出された人の各々を対象に、レジ待ち領域を除いた領域に含まれる停留地点に対応する商品を抽出する。計数部１２７は、会計状況取得部１２６により求められた会計領域の通過状況に基づいて、抽出された商品のうち、購入されていない商品について販売機会損失を計数する。
　このように、レジ待ちのための滞留を考慮した販売機会損失を計数することができる。従って、店舗内の商品の販売機会損失を精度良く求めることが可能になる。
　本実施の形態によれば、会計判別部１３６は、停留地点が検出された人の各々が会計したか否かを、会計領域の通過状況として求める。実施の形態でも説明したように、会計していない人は、その人について抽出部１２５が抽出した商品をすべて購入していない。すなわち、会計していない人の場合、その人について抽出部１２５が抽出した商品のすべての販売機会損失が発生していることになる。
　停留地点が検出された人の各々が会計したか否かは、移動経緯に基づいて求めることができる。そのため、販売履歴データ１１５などを参照しなくてもよいため、処理が容易である。従って、精度の良い、商品の販売機会損失を容易に求めることが可能になる。
　本実施の形態によれば、会計時期取得部１３７は、会計判別部１３６により会計したと判別された場合に、当該判別の対象となった人の各々について、移動経緯に基づいて会計時期を求める。そして、計数部１２７は、さらに、販売履歴データ１１５を参照して、抽出部１２５によって抽出された商品のうち、会計時期に応じた時期に購入されていない商品がある場合に、当該購入されていない商品の販売機会損失として計数する。
　このように、会計時期を求めて販売履歴データ１１５を参照することで、会計した顧客の停留地点に関連する商品と当該顧客が実際に購入した商品とを比較して、商品の販売機会損失を求めることができる。このように、会計した顧客に関連する商品の販売機会損失を求めることができるので、店舗内の商品の販売機会損失を、より精度良く求めることが可能になる。
　本実施の形態によれば、レジ待ち領域は、第１の時点と第２の時点との各時点に店舗にいる人の移動経緯を比較することで検出することができる。すなわち、移動経緯に基づいて、レジ待ち領域を検出することができる。このように、レジ待ち領域を容易に検出して、検出されたレジ待ち領域を考慮した精度の良い販売機会損失を求めることができる。従って、精度の良い、商品の販売機会損失を容易に求めることが可能になる。
（実施の形態２）
　店舗内を移動する人は、顧客に限られず、店員もいる。しかし、実施の形態１では、顧客と店員とを区別せずに、販売機会損失を求めた。本実施の形態では、店員を自動的に判別し、店員を除いた店舗内の人の移動経緯を基に、販売機会損失を求める例を説明する。
　本発明の実施の形態２に係る販売管理システムは、物理的には、実施の形態１に係る販売管理システム１００と同様に構成されるとよい。ＰＯＳシステム１０１及び防犯カメラシステム１０２の各システムは、機能的にも、実施の形態１と同様に構成されるとよい。
　本実施の形態に係る販売管理システムと実施の形態１に係る販売管理システム１００とでは、販売分析装置１０３，２０３の機能的な構成が異なる。
　本実施の形態に係る販売分析装置２０３は、図１５に示すように、店員検出部２３８をさらに備え、実施の形態１に係る停留検出部１２１に代わる停留検出部２２１を備える。
　本実施の形態に係る販売分析装置２０３は、これらの点を除いて、実施の形態１に係る販売分析装置１０３と同様の機能的な構成を備える。実施の形態１と同様の構成に関する説明は、説明を簡明にするため省略する。
　店員検出部２３８は、移動経緯に基づいて、店舗内の人のうち、店員を検出する。
　停留検出部２２１は、実施の形態１に係る停留検出部１２１と同様に、移動経緯取得部１２０によって求められた移動経緯に基づいて、店舗内の人の停留地点を求める。本実施の形態に係る停留検出部２２１が検出する停留地点は、店舗内の人のうち、店員以外の人が停留時間以上停留した地点である。
　これまで、本発明の実施の形態２に係る販売管理システムの構成について説明した。ここから、本実施の形態に係る販売管理システムの動作について説明する。
　本実施の形態に係る販売分析装置２０３は、概ね実施の形態１と同様の販売分析処理を実行する。本実施の形態に係る販売分析処理にて、販売分析装置２０３は、図１６のフローチャートに示すように、実施の形態１と同様のステップＳ１０１～Ｓ１０２の処理を実行する。
　その後に、販売分析装置２０３は、店員検出処理（ステップＳ２０８）と、実施の形態１に係る停留地点検出処理（ステップＳ１０３）に代わる停留地点検出処理（ステップＳ２０３）とを実行する。そして、販売分析装置２０３は、実施の形態１と同様のステップＳ１０４以降の処理を実行する。
　本実施の形態では、説明を簡明にするため、本実施の形態に特徴的な店員検出処理（ステップＳ２０８）と停留地点検出処理（ステップＳ２０３）について説明し、その他の処理（ステップＳ１０１～Ｓ１０２，ステップＳ１０４～Ｓ１０７）の説明を省略する。
　店員検出部２３８は、移動経緯に基づいて、店舗内の人が店舗内の予め定められた店員領域に移動したか否かを判定し、店員領域に移動した人を店員として検出する（ステップＳ２０８）。
　本実施の形態に係る店員領域には、店員のみが進入を許された顧客対応領域、バックヤードが設定される。すなわち、本実施の形態に係る店員検出部２３８は、店舗内の人のうち、顧客対応領域にいる人、顧客対応領域に入った人及び顧客対応領域から出てきた人を、店員として検出する。また、店員検出部２３８は、店舗内の人のうち、バックヤードに入った人及びバックヤードから出てきた人を、店員として検出する。
　例えば、図１７に示す移動曲線Ｌ５は、バックヤードからの出入り及び顧客対応領域での停留を含んでいる。このような移動曲線Ｌ５は、店員の移動経緯に基づくものであると分かる。
　なお、店員領域は、これらに限られず、適宜設定されるとよい。
　停留検出部２２１は、店員を除く店舗内の人が停留時間以上停留した停留地点を、移動経緯に基づいて検出する。
　これまで、本発明の実施の形態２に係る販売管理システムについて説明した。
　本実施の形態によれば、実施の形態１と同様の効果に加えて、次の効果を奏する。
　本実施の形態によれば、販売分析装置２０３が、店員検出部２３８を備える。そして、停留検出部２２１が、店員を除く店舗内の人が停留時間以上停留した停留地点を、移動経緯に基づいて検出する。
　そのため、店舗内の人のうち店員を除く人を対象に、停留地点を検出して機会損失を求めることができる。また、店舗内の人から店員を自動的に除くことができる。従って、より精度の良い店舗内の商品の販売機会損失を、容易に求めることが可能になる。
　以上、本発明の実施の形態及び変形例について説明したが、本発明は、これらに限られない。例えば、本発明は、これまで説明した実施の形態及び変形例の一部又は全部を適宜組み合わせた形態、その形態に適宜変更を加えた形態をも含む。
　本発明は、店舗などにおける販売を管理するための各種の装置或いはシステムにおいて販売機会損失を計数するために有用に利用することができる。
　この出願は、２０１７年１２月２０日に出願された日本出願特願２０１７－２４３５４８を基礎とする優先権を主張し、その開示の全てをここに取り込む。
１００　販売管理システム
１０１　ＰＯＳシステム
１０２　防犯カメラシステム
１０３，２０３　販売分析装置
１０４　ＰＯＳ端末
１０５　ＰＯＳ管理装置
１０６　カメラ
１０７　防犯管理装置
１１２　ＰＯＳデータ収集部
１１３　販売履歴記憶部
１１４　ＰＯＳデータ送信部
１１５　販売履歴データ
１１６　画像データ
１１７　画像データ収集部
１１８　画像記憶部
１１９　画像データ送信部
１２０　移動経緯取得部
１２１，２２１　停留検出部
１２２　領域記憶部
１２３　レジ待ち検出部
１２４　陳列記憶部
１２５　抽出部
１２６　会計状況取得部
１２７　計数部
１２８　画像取得部
１２９　画像処理部
１３０　対応付けデータ記憶部
１３１　変換部
１３２　空間対応付けデータ
１３３　顧客対応領域データ
１３４　会計領域データ
１３５　陳列データ
１３６　会計判別部
１３７　会計時期取得部
２３８　店員検出部

Claims (10)

  1. 　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求める移動経緯取得部と、
    　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出する停留検出部と、
    　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出するレジ待ち検出部と、
    　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出する抽出部と、
    　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求める会計状況取得部と、
    　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数する計数部とを備える
    　ことを特徴とする販売分析装置。
  2. 　前記会計状況取得部は、前記移動経緯に基づいて、前記停留地点が検出された人の各々が会計したか否かを前記会計領域の通過状況として判別する会計判別部を含み、
    　前記計数部は、会計していないと判別された場合に、当該判別の対象となった人について前記抽出部によって抽出された商品の販売機会損失として計数する
    　ことを特徴とする請求項１に記載の販売分析装置。
  3. 　前記会計状況取得部は、会計したと判別された場合に、前記移動経緯に基づいて、当該会計がなされた時期である会計時期を求める会計時期取得部をさらに含み、
    　前記計数部は、さらに、商品の販売履歴を示す販売履歴データを参照して、前記抽出部によって抽出された商品のうち、前記求められた会計時期に応じた時期に購入されていない商品がある場合に、当該購入されていない商品の販売機会損失として計数する
    　ことを特徴とする請求項１又は２に記載の販売分析装置。
  4. 　前記レジ待ち検出部は、予め定められた判定距離より近い複数の前記停留地点を含む候補領域が第１の時点に検出され、かつ、当該第１の時点よりも後の第２の時点において、前記候補領域に含まれる停留地点に停留した複数の人のうち、少なくとも１人が前記会計領域で検出され、残りの人が前記候補領域で検出された場合に、前記候補領域を、前記レジ待ち領域として検出する
    　ことを特徴とする請求項１から３のいずれか１項に記載の販売分析装置。
  5. 　前記移動経緯に基づいて、前記店舗内の店員を検出する店員検出部をさらに備え、
    　前記停留検出部は、前記店員を除く前記店舗内の人が前記停留時間以上停留した停留地点を、前記移動経緯に基づいて検出する
    　ことを特徴とする請求項１から４のいずれか１項に記載の販売分析装置。
  6. 　前記店員検出部は、前記移動経緯に基づいて、前記店舗内の人が前記店舗内の予め定められた店員領域に移動したか否かを判定し、前記店員領域に移動した人を店員として検出する
    　ことを特徴とする請求項１から５のいずれか１項に記載の販売分析装置。
  7. 　前記移動経緯取得部は、
    　前記画像データを解析することによって、前記店舗内の人が、フレームを予め定めた形状に分割した複数の小領域のいずれをいつ通過したか求める画像処理部と、
    　前記複数の小領域の各々と前記店舗内の実空間とを対応付けるための空間対応付けデータを予め保持し、当該空間対応付けデータと前記画像処理部が求めた結果とに基づいて、前記店舗内の人が前記実空間のどこをいつ通過したかを求める変換部とを有する
    　ことを特徴とする請求項１から６のいずれか１項に記載の販売分析装置。
  8. 　請求項１から７のいずれか１項に記載の販売分析装置と、
    　前記店舗における防犯用の複数のカメラを含む防犯カメラシステムと、
    　商品の販売履歴を示す販売履歴データを保持しているＰＯＳシステムとを備え、
    　前記防犯カメラシステムは、前記複数のカメラの各々で撮影された前記店舗内の画像を含む前記画像データを前記販売分析装置へ送信し、
    　前記ＰＯＳシステムは、前記保持している販売履歴データを前記販売分析装置へ送信する
    　ことを特徴とする販売管理システム。
  9. 　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求めることと、
    　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出することと、
    　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出することと、
    　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出することと、
    　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求めることと、
    　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数することとを含む
    　ことを特徴とする販売分析方法。
  10. 　コンピュータに、
    　店舗内が撮影された画像を含む画像データを解析することによって、前記店舗内の人の移動経緯を求めることと、
    　前記店舗内の人が予め定められた停留時間以上停留した停留地点を、前記移動経緯に基づいて検出することと、
    　前記店舗内で会計のために待つ人が占める領域であるレジ待ち領域を、前記移動経緯に基づいて検出することと、
    　前記停留地点が検出された人の各々について、商品と陳列場所とが関連付けられた陳列データに基づいて、前記店舗内で前記レジ待ち領域を除いた領域に含まれる前記停留地点に対応する商品を抽出することと、
    　前記停留地点が検出された人の各々について、前記移動経緯に基づいて、前記店舗の顧客が会計の際に位置する領域として予め定められた会計領域の通過状況を求めることと、
    　前記会計領域の通過状況に基づいて、前記抽出された商品が購入されていない場合に、当該購入されていない商品の販売機会損失として計数することとを実行させるためのプログラムを記録した、プログラム記録媒体。

     
PCT/JP2018/045599 2017-12-20 2018-12-12 販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体 WO2019124176A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/955,841 US20200320552A1 (en) 2017-12-20 2018-12-12 Sales analysis apparatus, sales management system, sales analysis method, and program recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-243548 2017-12-20
JP2017243548A JP6562474B2 (ja) 2017-12-20 2017-12-20 販売分析装置、販売管理システム、販売分析方法、及びプログラム

Publications (1)

Publication Number Publication Date
WO2019124176A1 true WO2019124176A1 (ja) 2019-06-27

Family

ID=66993353

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/045599 WO2019124176A1 (ja) 2017-12-20 2018-12-12 販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体

Country Status (3)

Country Link
US (1) US20200320552A1 (ja)
JP (1) JP6562474B2 (ja)
WO (1) WO2019124176A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110471963A (zh) * 2019-08-14 2019-11-19 北京市商汤科技开发有限公司 数据处理方法、装置及存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112883775A (zh) * 2020-12-31 2021-06-01 深圳云天励飞技术股份有限公司 商铺销售数据分析方法、装置、电子设备及存储介质
JP2022144490A (ja) * 2021-03-19 2022-10-03 東芝テック株式会社 店舗システム及びプログラム
CN114298625B (zh) * 2021-12-21 2022-11-11 中武(福建)跨境电子商务有限责任公司 一种基于大数据的智能跨境海运采购分析系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015148918A (ja) * 2014-02-06 2015-08-20 パナソニックＩｐマネジメント株式会社 会計業務支援装置、会計業務支援システムおよび会計業務支援方法
JP2016143334A (ja) * 2015-02-04 2016-08-08 パナソニックＩｐマネジメント株式会社 購買分析装置及び購買分析方法
WO2016166784A1 (ja) * 2015-04-17 2016-10-20 パナソニックＩｐマネジメント株式会社 顧客行動分析装置および顧客行動分析システム
WO2016174878A1 (ja) * 2015-04-27 2016-11-03 株式会社日立ソリューションズ 行動分析システム及び行動分析方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2008458A4 (en) * 2006-04-18 2009-05-06 Sorensen Associates Inc SYSTEM AND METHOD FOR ANALYZING A QUEUE WITH FIXED IMAGES
GB201117412D0 (en) * 2011-10-07 2011-11-23 Tensator Ltd Call forward system
EP4191550A1 (en) * 2016-07-11 2023-06-07 ITAB Shop Products AB Self-checkout system
JP7093783B2 (ja) * 2017-02-10 2022-06-30 グラバンゴ コーポレイション 自動化買物環境における動的な顧客チェックアウト体験のためのシステム及び方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015148918A (ja) * 2014-02-06 2015-08-20 パナソニックＩｐマネジメント株式会社 会計業務支援装置、会計業務支援システムおよび会計業務支援方法
JP2016143334A (ja) * 2015-02-04 2016-08-08 パナソニックＩｐマネジメント株式会社 購買分析装置及び購買分析方法
WO2016166784A1 (ja) * 2015-04-17 2016-10-20 パナソニックＩｐマネジメント株式会社 顧客行動分析装置および顧客行動分析システム
WO2016174878A1 (ja) * 2015-04-27 2016-11-03 株式会社日立ソリューションズ 行動分析システム及び行動分析方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110471963A (zh) * 2019-08-14 2019-11-19 北京市商汤科技开发有限公司 数据处理方法、装置及存储介质
CN110471963B (zh) * 2019-08-14 2022-04-05 北京市商汤科技开发有限公司 数据处理方法、装置及存储介质

Also Published As

Publication number Publication date
JP6562474B2 (ja) 2019-08-21
US20200320552A1 (en) 2020-10-08
JP2019109805A (ja) 2019-07-04

Similar Documents

Publication Publication Date Title
US11100333B2 (en) Method and apparatus for detecting suspicious activity using video analysis
WO2019124176A1 (ja) 販売分析装置、販売管理システム、販売分析方法、及びプログラム記録媒体
JP5356615B1 (ja) 顧客行動分析装置、顧客行動分析システムおよび顧客行動分析方法
JP6314987B2 (ja) 店舗内顧客行動分析システム、店舗内顧客行動分析方法および店舗内顧客行動分析プログラム
JP5731766B2 (ja) 販売機会損失の分析システム及び分析方法
JP2017199234A (ja) 監視装置及びプログラム
CN110866429A (zh) 漏扫识别方法、装置、自助收银终端及系统
EP1872307A2 (en) Method and apparatus for detecting suspicious activity using video analysis
JPWO2019171573A1 (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
JP6653813B1 (ja) 情報処理システム
US20230027382A1 (en) Information processing system
JP5673888B1 (ja) 情報通知プログラム及び情報処理装置
JP5509354B1 (ja) 商品状況分析装置、商品状況分析システムおよび商品状況分析方法
JPWO2019171572A1 (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
WO2020179480A1 (ja) 物品推定装置、物品推定方法、及びプログラム
JP2016219065A (ja) 滞留分析システム及び方法
JP2015133131A (ja) 販売機会損失分析用データ出力システム及び方法
JP6912791B2 (ja) 販売分析装置、販売管理システム、販売分析方法、及びプログラム
JP7366099B2 (ja) 監視装置及びプログラム
EP3239912A1 (en) Management device and method
JP2022036983A (ja) セルフレジシステム、購入商品管理方法および購入商品管理プログラム
JP7010030B2 (ja) 店内監視装置、店内監視方法、および店内監視プログラム
EP4125020A1 (en) Information processing program, information processing method, and information processing apparatus
US20220300989A1 (en) Store system and method
US20230035227A1 (en) Computer-readable recording medium, information processing method, and information processing apparatus

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18890619

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18890619

Country of ref document: EP

Kind code of ref document: A1