WO2010084744A1 - 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム - Google Patents

顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム Download PDF

Info

Publication number
WO2010084744A1
WO2010084744A1 PCT/JP2010/000295 JP2010000295W WO2010084744A1 WO 2010084744 A1 WO2010084744 A1 WO 2010084744A1 JP 2010000295 W JP2010000295 W JP 2010000295W WO 2010084744 A1 WO2010084744 A1 WO 2010084744A1
Authority
WO
WIPO (PCT)
Prior art keywords
image data
customer
imaging
image
identification information
Prior art date
Application number
PCT/JP2010/000295
Other languages
English (en)
French (fr)
Inventor
村松賢治
神谷敏裕
清水義博
早勢典明
長澤憲吾
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to CN201080003761.2A priority Critical patent/CN102265302A/zh
Publication of WO2010084744A1 publication Critical patent/WO2010084744A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising

Definitions

  • the present invention relates to a customer analysis system, a customer data collection device, a customer analysis device, a customer analysis method, and a program that can select customers who have shown interest in a product but have not purchased the product.
  • Patent Document 1 discloses a system that performs the following processing. First, based on the past sales performance data of the product stored in the performance data storage unit, the time-series sales performance is analyzed, and the basic forecast value of sales is calculated. Then, using the basic prediction value calculation unit, an objective prediction value is calculated as to how much the product is likely to sell at a specific timing in the future.
  • Patent Document 2 discloses a system that performs the following processing. First, on the basis of the actual sales data stored in the sales database, a coefficient indicating the degree to which the fluctuation factors of the sales such as selling price, weather, and sales promotion contribute to the increase or decrease of the sales is obtained. Also, using this coefficient, the adjusted number of sales is obtained by removing the influence of the fluctuation factor from the number of sales. Then, a future demand forecast value is calculated using the adjusted number of sales and the coefficient.
  • the above-described technology predicts demand based on actual sales data and determines the product to be ordered and its quantity. Basically, the order quantity of a product with a large sales record increases.
  • the above-described technology cannot analyze products that have not been sold.
  • the gender and age group of targeted customers are narrowed down.
  • analyzing customers who have shown interest in the product but have not purchased the product is important for improving the product.
  • the present invention has been made in view of the above circumstances, and an object of the present invention is to provide a customer analysis system and a customer data collection device that can select customers who have shown interest in a product but have not purchased the product.
  • a customer analysis device, a customer analysis method, and a program are examples of the present invention.
  • a first imaging unit that images a customer facing a specific product display unit in a store and generates first image data
  • First image data storage means for storing the first image data in association with imaging time
  • Second imaging means for imaging a customer facing the cash register terminal of the store and generating second image data
  • Second image data storage means for storing the second image data in association with the imaging time
  • First image data reading means for reading out the first image data and the imaging time of the first image data from the first image data storage means
  • Second image data reading means for reading the second image data captured after the imaging time read by the first image data reading means from the second image data storage means
  • the first image data read by the first image data reading means and the second image data read by the second image data reading means are analyzed and are reflected in the first image data.
  • Face image selection means for selecting a customer's face image that was not shown in the image data;
  • a customer analysis system is provided.
  • a first imaging unit that images a customer facing a specific product display unit in a store and generates first image data
  • Second imaging means for imaging a customer facing the cash register terminal of the store and generating second image data
  • Transmitting means for transmitting the first image data and the imaging time thereof, and the second image data and the imaging time thereof to a customer analysis device
  • a customer data collection device is provided.
  • a customer analysis device that receives and processes image data from a customer data collection device provided in a store
  • the customer data collection device comprises: First imaging means for imaging a customer facing a specific product display section in a store and generating first image data; Second imaging means for imaging a customer facing the cash register terminal of the store and generating second image data; Transmitting means for transmitting the first image data and the imaging time thereof, and the second image data and the imaging time thereof to a customer analysis system; With Receiving means for receiving the first image data and the imaging time thereof transmitted by the transmitting means of the customer data collection device, and the second image data and the imaging time thereof; First image data storage means for storing the first image data in association with the imaging time; Second image data storage means for storing the second image data in association with the imaging time; First image data reading means for reading out the first image data and the imaging time of the first image data from the first image data storage means; Second image data reading means for reading the second image data captured after the imaging time read by the first image data reading means from the second image
  • a customer facing a specific product display unit in a store is imaged to generate first image data, and the first image data is stored in the first image data storage unit in association with the imaging time.
  • the computer reads the first image data and the imaging time of the first image data from the first image data storage means, and the second image data captured after the read imaging time is the second Reading from the image data storage means;
  • the computer analyzing the read first image data and the second image data, and selecting a face image of a customer that was included in the first image data but not included in the second image data; , A customer analysis method is provided.
  • a program for causing a computer to function as a customer analysis device that analyzes a customer who has visited a store In the store, a first image capturing unit that captures an image of a customer facing a specific product display unit in the store and generates first image data, and an image of the customer facing the cash register terminal of the store Second imaging means for generating data is provided,
  • a function of storing the first image data in association with an imaging time A function of storing the second image data in association with an imaging time; A function of reading the first image data stored and the imaging time of the first image data, and reading the second image data captured after the read imaging time; A function of analyzing the read first image data and the second image data, and selecting a face image of a customer that was included in the first image data but not included in the second image data;
  • a program for realizing the above is provided.
  • FIG. 1 is a block diagram showing the configuration of the customer analysis system according to the first embodiment.
  • This customer analysis system includes a customer data collection device 100 and a customer analysis device 200.
  • the customer data collection device 100 and the customer analysis device 200 are connected to each other via a communication network 10 such as the Internet.
  • the customer data collection device 100 is provided for each of a plurality of stores. However, there may be one store having the customer data collection device 100.
  • the store in which the customer data collection device 100 is installed is, for example, a convenience store or a supermarket, but is not limited thereto.
  • the customer data collection device 100 generates first image data by imaging a customer headed to a specific product display section (for example, a product display space installed on a specific product display shelf or a cashier counter), A customer who has purchased a product is imaged by a cashier counter to generate second image data. Then, the customer data collection device 100 transmits the first image data and the second image data to the customer analysis device 200.
  • the customer analysis device 200 analyzes the first image data and the second image data, and selects a customer face image that was included in the first image data but not included in the second image data. Thereby, the customer analysis system can select a customer who showed interest in the product but did not purchase the product. Details will be described below.
  • FIG. 2 is a schematic plan view of a store where the customer data collection device 100 is arranged
  • FIG. 3 is a block diagram showing a functional configuration of the customer data collection device 100.
  • the customer data collection device 100 includes a first imaging unit 110, a second imaging unit 120, and a transmission unit 147.
  • the first imaging unit 110 captures an image of a customer facing a specific product display shelf 102 (product display unit) in the store and generates first image data.
  • the second imaging unit 120 captures a customer facing the cash register terminal 130 of the store and generates second image data.
  • the transmission unit 147 transmits the first image data and the imaging time thereof, and the second image data and the imaging time thereof to the customer analysis device 200.
  • a plurality of first imaging units 110 are provided for each product.
  • the first imaging unit 110 corresponds to the product display space 106 arranged in the checkout counter 104, for example, there is one corresponding to the product display shelf 102 on which a specific lunch box is displayed. Some have.
  • the first imaging unit 110 corresponding to the product display shelf 102 is built in the product display shelf 102, for example.
  • the first imaging unit 110 corresponding to the merchandise display space 106 is provided, for example, at a location different from the merchandise display space 106, but may be built in the housing of the merchandise display space 106.
  • the first imaging unit 110 is set with first imaging unit identification information that identifies the first imaging unit 110 from each other.
  • the second imaging unit 120 is provided in the cash register terminal 130, for example.
  • the second imaging unit 120 receives the accounting start information from the cashier terminal 130 when the cashier terminal 130 starts the accounting process, and generates the second image data when the cashier start information is received.
  • the transmission unit 147 is provided in the store terminal 140 installed in the office space of the store.
  • the store terminal 140 includes a first image data storage unit 142, a second image data storage unit 144, and a purchase information storage unit 146.
  • the first image data storage unit 142 stores the first image data generated by the first imaging unit 110 in association with the imaging time and the first imaging unit identification information of the first imaging unit 110.
  • the second image data storage unit 144 stores the second image data generated by the second imaging unit 120 in association with the imaging time.
  • the purchase information storage unit 146 receives and stores the product identification information of the product purchased by the customer and the time at which the accounting process was performed from the cash register terminal 130 when the cashier is performed at the cash register terminal 130.
  • Product identification information for mutually identifying the products is allocated to the products sold in the store.
  • the product identification information is information common to all stores.
  • the transmission unit 147 stores the information stored in the first image data storage unit 142, the information stored in the second image data storage unit 144, and the information stored in the purchase information storage unit 146 in a predetermined manner. When the time comes, it is transmitted to the customer analysis device 200 by batch processing. At this time, the transmission unit 147 also transmits store identification information for identifying the store from other stores. The transmission unit 147 preferably deletes the information stored in the first image data storage unit 142 and the information stored in the second image data storage unit 144 after transmitting the information to the customer analysis device 200.
  • Each component of the store terminal 140 shown in FIG. 3 is not a hardware unit configuration but a functional unit block.
  • Each component of the store terminal 140 is centered on an arbitrary computer CPU, memory, a program for realizing the components shown in the figure loaded in the memory, a storage unit such as a hard disk for storing the program, and a network connection interface. Realized by any combination of hardware and software. It will be understood by those skilled in the art that there are various modifications to the implementation method and apparatus.
  • FIG. 4 is a diagram showing information stored in the first image data storage unit 142 in a table format.
  • the first image data storage unit 142 stores the first image data and its imaging time in association with each other for each first imaging unit identification information.
  • the imaging time may be stored in seconds.
  • FIG. 5 is a diagram showing the information stored in the second image data storage unit 144 in a table format.
  • the second image data storage unit 144 stores the second image data and its imaging time in association with each other.
  • the imaging time may be stored in seconds.
  • FIG. 6 is a diagram showing the information stored in the purchase information storage unit 146 in a table format.
  • the purchase information storage unit 146 stores the product identification information of the product purchased by the customer and the time when the accounting process is performed in association with each other. The time at which the accounting process is performed is used when associating the second image data with the product identification information in the process described later.
  • the purchase information storage unit 146 stores a plurality of product identification information in association with the time when the accounting process is performed. Note that the imaging time may be stored in units of seconds.
  • FIG. 7 is a block diagram showing a functional configuration of the customer analysis device 200.
  • the customer analysis device 200 includes a receiving unit 210, a first image data storage unit 220, a first image data reading unit 225, a second image data storage unit 230, a second image data reading unit 235, and a face image selection unit 260. .
  • the receiving unit 210 receives various information transmitted by the customer data collection device 100.
  • the received information includes store identification information, first image data and its imaging time, second image data and its imaging time, and product identification information of products purchased by the customer and the time at which the accounting process was performed.
  • the first image data is further transmitted in association with the first image capturing unit identification information of the first image capturing unit 110 that captured the first image data.
  • the first image data storage unit 220 stores the first image data and the imaging time received by the receiving unit 210 in association with each other and for each store identification information and for each first imaging unit identification information.
  • the second image data storage unit 230 associates the second image data received by the receiving unit 210 and the imaging time with each other, and stores them by store identification information.
  • the first image data reading unit 225 reads the first image data and its imaging time from the first image data storage unit 220.
  • the second image data reading unit 235 reads from the second image data storage unit 230 second image data captured after the imaging time read by the first image data reading unit 225. At this time, it is preferable that the second image data reading unit 235 reads only the second image data imaged between the imaging time of the first image data and a predetermined time (for example, 1 hour) after the imaging time.
  • the face image selection unit 260 analyzes the first image data read by the first image data reading unit 225 and the second image data read by the second image data reading unit 235, and appears in the first image data. Selects the customer's face image (or the first image data itself) that was not shown in the second image data.
  • Customer analysis device 200 further includes a face image analysis unit 270 and a totaling unit 280.
  • the face image analysis unit 270 analyzes the gender and age of the face image selected by the face image selection unit 260.
  • the totaling unit 280 totalizes the number of face images selected by the face image selecting unit 260 by sex and age.
  • the totaling unit 280 stores unpurchased user data indicating the totaling result in the unpurchased user data storage unit 290 in association with the store identification information.
  • the customer analysis device 200 further includes a purchase information storage unit 240 and a product identification information storage unit 250.
  • the purchase information storage unit 240 stores, among the information received by the receiving unit 210, the product identification information of the product purchased by the customer and the time when the accounting process was performed (information that associates the second image data with the product identification information). .
  • the product identification information storage unit 250 stores product identification information of the products displayed in the product display unit.
  • the first imaging unit 110 is provided for each of a plurality of products. Therefore, the product identification information storage unit 250 stores a plurality of product identification information in association with the first imaging unit identification information of the first imaging unit 110 corresponding to the product indicated by the product identification information. .
  • the face image selection unit 260 stores the purchase information storage unit 240 corresponding to the second image data among the customers shown in both the first image data and the second image data.
  • Product identification information corresponding to the first imaging unit 110 that captured the first image data is included in the product identification information (that is, product identification information whose accounting time is substantially equal to the imaging time of the second image data).
  • the customer's face image (or first image data) is selected.
  • a plurality of first imaging units 110 are provided for each product, and the first imaging units that identify the first imaging units 110 from each other are included in the plurality of first imaging units 110.
  • Identification information is set.
  • the first image data storage unit 220 stores the first image data in association with the first imaging unit identification information of the first imaging unit 110 that images the first image data.
  • the first image data reading unit 225 reads the first imaging unit identification information corresponding to the first image data to be read.
  • the totaling part 280 totalizes the number of face images according to sex and age according to 1st imaging part identification information.
  • the totaling unit 280 uses the information stored in the product identification information storage unit 250 to convert the first imaging unit identification information into product identification information, and the totaling result corresponds to the product identification information for each store identification information. In addition, it is stored in the unpurchased person data storage unit 290.
  • Each component of the customer analysis apparatus 200 shown in FIG. 7 is not a hardware unit configuration but a functional unit block.
  • Each component of the customer analysis apparatus 200 is centered on an arbitrary computer CPU, memory, a program for realizing the components shown in the figure loaded in the memory, a storage unit such as a hard disk for storing the program, and a network connection interface. It is realized by any combination of hardware and software. It will be understood by those skilled in the art that there are various modifications to the implementation method and apparatus.
  • FIG. 8 is a diagram showing information stored in the first image data storage unit 220 in a table format.
  • the first image data storage unit 220 stores the first image data and its imaging time in association with each other for each store identification information and each first imaging unit identification information.
  • the imaging time may be stored in seconds.
  • FIG. 9 is a diagram illustrating information stored in the second image data storage unit 230 in a table format.
  • the second image data storage unit 230 stores the second image data and its imaging time in association with each other for each store identification information.
  • the imaging time may be stored in seconds.
  • FIG. 10 is a diagram showing information stored in the purchase information storage unit 240 in a table format.
  • the purchase information storage unit 240 stores the product identification information of the product purchased by the customer and the time when the accounting process is performed in association with each other for each store identification information.
  • the purchase information storage unit 240 stores a plurality of product identification information in association with the time when the accounting process is performed.
  • the imaging time may be stored in seconds.
  • FIG. 11 is a diagram showing information stored in the product identification information storage unit 250 in a table format.
  • the product identification information storage unit 250 stores the first imaging unit identification information and the product identification information of the product corresponding to the first imaging unit 110 indicated by the first imaging unit identification information in association with each other for each store identification information. is doing.
  • the goods identification information storage part 250 does not need to memorize
  • FIG. 12 is a diagram showing information stored in the unpurchased person data storage unit 290 in a table format.
  • the unpurchased person data storage unit 290 stores the number of unpurchased persons by sex and age group for each store identification information and product identification information. When it is not necessary to store the number of unpurchased customers for each store, the unpurchased user data storage unit 290 does not have to store the above information for each store identification information.
  • FIG. 13 is a flowchart showing the operation of the first imaging unit 110 of the customer data collection device 100 shown in FIGS. 2 and 3.
  • the first imaging unit 110 generates moving image data while the store is open. Then, each frame constituting the moving image data is analyzed, and when the face includes a face facing the front (step S10: Yes), the frame is selected as the first image data (of the first image data). Generation) (step S20). Then, the first image data is stored in the first image data storage unit 142 of the store terminal 140 in association with the imaging time and the first imaging unit identification information of the first imaging unit 110 (step S30).
  • the part of the first imaging unit 110 that performs the processing shown in steps S10 to S30 does not need to be provided in the commodity display shelf 102 in FIG. 2, and may be performed in the store terminal 140.
  • the condition for generating the first image data may be that, for example, the customer is reflected in the first imaging unit 110 for a certain time or more.
  • FIG. 14 is a flowchart showing the operation of the second imaging unit 120 of the customer data collection apparatus 100 shown in FIGS. 2 and 3.
  • the cash register terminal 130 transmits the accounting start information to the second imaging unit 120.
  • the second imaging unit 120 When receiving the transaction start information, the second imaging unit 120 generates second image data (step S120), and associates the generated second image data with the imaging time in the second image data storage unit 144 of the store terminal 140. Transmit and store (step S130).
  • the generation process of the second image data may be a process of selecting a specific frame image of the moving image data.
  • FIG. 15 is a flowchart showing processing performed by the store terminal 140 of the customer data collection device 100.
  • the first image data storage unit 142 receives the first image data, the first imaging unit identification information, and the imaging time (step S210: Yes)
  • the first image data storage unit 142 displays the received first image data and the imaging time as the first imaging unit.
  • Each identification information is stored (step S220).
  • the second image data storage unit 144 receives the second image data and the imaging time (step S230: Yes)
  • the second image data storage unit 144 stores the received second image data and the imaging time (step S240).
  • the transmission unit 147 performs transmission processing of information stored in the first image data storage unit 142 and information stored in the second image data storage unit 144. This is performed (step S260).
  • FIG. 16 is a flowchart showing processing performed by the customer analysis device 200.
  • the customer analysis device 200 performs the process shown in FIG. 16 for each store identification information.
  • the first image data reading unit 225 stores the first imaging unit identification information of the store for each store identification information in advance.
  • the first image data reading unit 225 sets first imaging unit identification information (step S310).
  • the set first imaging unit identification information is transmitted to the face image selection unit 260.
  • the face image selection unit 260 reads product identification information corresponding to the first imaging unit identification information from the product identification information storage unit 250.
  • the customer analysis device 200 performs the following processing on the first image data corresponding to the first imaging unit identification information set by the first image data reading unit 225.
  • the first image data reading unit 225 reads one of the first image data corresponding to the set first imaging unit identification information and the imaging time thereof from the first image data storage unit 220 (step S320).
  • the first image data reading unit 225 transmits the first image data to the face image selection unit 260 and transmits the imaging time to the second image data reading unit 235.
  • the second image data reading unit 235 When the second image data reading unit 235 receives the imaging time of the first image data from the first image data reading unit 225, the second image data reading unit 235 receives a plurality of second images captured after the received imaging time from the second image data storage unit 230.
  • the image data is read (step S330), and the read second image data is transmitted to the face image selection unit 260.
  • the face image selection unit 260 performs a facial feature point selection process on the received first image data, and performs a facial feature point selection process on each of the plurality of received second image data (step). S340). Then, by performing the matching process on the selected feature point, it is determined whether or not the person who was reflected in the first image data is reflected in any of the second image data (step S350).
  • step S350 If the person shown in the first image data is not shown in any second image data (step S350: Yes), the person shown in the first image data is the first set in step S310. It can be determined that the person is interested in the product corresponding to the imaging unit identification information but has not purchased the product.
  • the face image analysis unit 270 analyzes the gender and age of the face shown in the first image data (step S380). Then, the totaling unit 280 updates the data stored in the unpurchased user data storage unit 290, and increments the count value corresponding to the combination of sex and age indicated by the analysis result in step S380 (step S390). ).
  • the face image analysis unit 270 accounts at the time corresponding to the imaging time of the second image data.
  • the product identification information of the processed product is read from the purchase information storage unit 240 (step S360).
  • the face image analysis unit 270 reads the product identification information read from the product identification information storage unit 250 (that is, the product identification information of the product corresponding to the first imaging unit 110) in step S360. If it is not included in the product identification information of the product purchased by the person (step S370: No), the person shown in the first image data is the product corresponding to the set first imaging unit identification information It can be determined that the person who was interested in the product did not purchase the product.
  • the face image analysis unit 270 performs the processing shown in steps S380 and S390 described above.
  • Customer analysis device 200 performs the processing shown in steps S320 to S390 for all the first image data corresponding to the first imaging unit identification information set in step S310 (step S400).
  • the customer analysis device 200 updates the first imaging unit identification information (step S310), and repeats the processes shown in steps S320 to S400.
  • the customer analysis device 200 performs the processing shown in steps S320 to S400 on all the first imaging unit identification information corresponding to the set store identification information (step S410).
  • the 1st imaging part 110 installed in the store images the person estimated to have looked at the merchandise display shelf 102 etc., and produces
  • the 2nd imaging part 120 installed in the shop images the person who did the accounting with the cash register terminal, and produces
  • the customer analysis device 200 selects a person (that is, the first image data) that is shown in the first image data but is not shown in any second image data. It can be determined that the person shown in the selected first image data is interested in the product corresponding to the first imaging unit 110 but has not purchased the product. For this reason, the person who showed interest in the product but did not purchase the product can be selected. In particular, by analyzing the gender and age of the selected person from the face image, statistical data useful for product development can be obtained.
  • the customer analyzer 200 identifies the product purchased by the person based on the information acquired by the cashier terminal 130. Get information. If the product identification information of the product corresponding to the first imaging unit 110 is not included in the acquired product identification information, the first image data is selected. It can be determined that the person shown in the selected first image data is interested in the product corresponding to the first imaging unit 110 but has not purchased the product. For this reason, the person who showed interest in the product but did not purchase the product can be selected with higher accuracy.
  • FIG. 17 is a block diagram illustrating a configuration of the customer data collection device 100 according to the second embodiment.
  • This customer analysis device is a device in which the customer data collection device 100 has the functions of the customer analysis device 200 in the first embodiment.
  • the customer data collection device 100 does not have the transmission unit 147 in the configuration shown in the first embodiment. Instead, the customer data collection device 100 includes a product identification information storage unit 148, a face image selection unit 150, a face image analysis unit 152, a totaling unit 154, and an unpurchased user data storage unit 156 in the store terminal 140. Yes.
  • the functions and configurations of the product identification information storage unit 148, the face image selection unit 150, the face image analysis unit 152, the tabulation unit 154, and the unpurchased user data storage unit 156 are not necessary to use store identification information.

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

　顧客データ収集装置は、特定の商品陳列部（例えば特定の商品陳列棚やレジカウンタに設置されている商品陳列用のスペース）に向かった顧客を撮像して第１画像データを生成するとともに、商品を購入した顧客をレジカウンタで撮像して第２画像データを生成する。そして顧客データ収集装置は、第１画像データ及び第２画像データを顧客分析装置に送信する。顧客分析装置は、第１画像データ及び第２画像データを解析し、第１画像データに写っていたが第２画像データに写っていなかった顧客の顔画像を選択する。

Description

顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム
　本発明は、商品に関心を示したがその商品を購入しなかった顧客を選択することができる顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラムに関する。
　店舗に陳列する商品及びその数を決定する場合、過去の販売実績を元に決定する場合がほとんどである。例えば特許文献１には、以下の処理を行うシステムが開示されている。まず、実績データ記憶部に記憶されている商品の過去の販売実績データに基づいて、時系列の売上実績を分析し、売上の基本予測値を算出する。そして、基本予測値演算部を用いて、将来の特定のタイミングにおいてその商品がどの程度売れそうか、客観的な予測値を算出する。
　また特許文献２には、以下の処理を行うシステムが開示されている。まず、売上データベースに蓄積されている実績の売上数データに基づいて、売価、天気、販売促進の有無などの売上数の変動要因が売上数の増減の寄与する程度を示す係数を求める。また、この係数を用いて売上数から変動要因による影響を除去した調整済み売上数を求める。そして、調整済み売上数および係数を用いて、将来の需要予測値を算出する。
特開２００７－１２２４１５号公報 特開２００４－３３４３２６号公報
　上記した技術は、実際の売上データに基づいて需要を予測し、発注する商品及びその数量を決めるものであり、基本的には、売上実績が多い商品の発注数量が多くなる。しかし、上記した技術では、売れなかった商品の分析を行うことはできない。一方で、商品を開発する場合にはターゲットとなる顧客の性別や年齢層を絞り込むケースがある。このような商品を店頭に並べた場合、その商品に関心を示したがその商品を購入しなかった顧客を分析することは、商品を改良する上で重要である。
　本発明は上記事情に鑑みてなされたものであり、その目的とするところは、商品に関心を示したがその商品を購入しなかった顧客を選択することができる顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラムを提供することにある。
　本発明によれば、店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
　前記第１画像データを撮像時刻に対応付けて記憶する第１画像データ記憶手段と、
　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
　前記第２画像データを撮像時刻に対応付けて記憶する第２画像データ記憶手段と、
　前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出す第１画像データ読出手段と、
　前記第１画像データ読出手段が読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出す第２画像データ読出手段と、
　前記第１画像データ読出手段が読み出した前記第１画像データと、前記第２画像データ読出手段が読み出した前記第２画像データとを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する顔画像選択手段と、
を備える顧客分析システムが提供される。
　本発明によれば、店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
　前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を顧客分析装置に送信する送信手段と、
を備える顧客データ収集装置が提供される。
　本発明によれば、店舗に設けられた顧客データ収集装置から画像データを受信して処理する顧客分析装置であって、
　前記顧客データ収集装置は、
　　店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
　　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
　　前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を顧客分析システムに送信する送信手段と、
を備え、
　前記顧客データ収集装置の前記送信手段が送信した前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を受信する受信手段と、
　前記第１画像データを前記撮像時刻に対応付けて記憶する第１画像データ記憶手段と、
　前記第２画像データを前記撮像時刻に対応付けて記憶する第２画像データ記憶手段と、
　前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出す第１画像データ読出手段と、
　前記第１画像データ読出手段が読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出す第２画像データ読出手段と、
　前記第１画像データ読出手段が読み出した前記第１画像データと、前記第２画像データ読出手段が読み出した第２画像データとを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する顔画像選択手段と、
を備える顧客分析装置が提供される。
　本発明によれば、店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成し、前記第１画像データを撮像時刻に対応付けて第１画像データ記憶手段に記憶させるステップと、
　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成し、前記第２画像データを撮像時刻に対応付けて第２画像データ記憶手段に記憶させるステップと、
　コンピュータが、前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出し、かつ、読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出すステップと、
　前記コンピュータが、読み出した前記第１画像データ及び前記第２画像データを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択するステップと、を含む顧客分析方法が提供される。
　本発明によれば、コンピュータを、店舗に来店した顧客を分析する顧客分析装置として機能させるためのプログラムであって、
　前記店舗には、店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段とが設けられており、
　前記コンピュータに、
　前記第１画像データを撮像時刻に対応付けて記憶する機能と、
　前記第２画像データを撮像時刻に対応付けて記憶する機能と、
　記憶している前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出し、読み出した前記撮像時刻より後に撮像された前記第２画像データを読み出す機能と、
　読み出した前記第１画像データ及び前記第２画像データを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する機能と、
を実現させるプログラムが提供される。
　本発明によれば、商品に関心を示したがその商品を購入しなかった顧客を選択することができる。
第１の実施形態に係る顧客分析システムの構成を示すブロック図である。 顧客データ収集装置が配置されている店舗の平面概略図である。 顧客データ収集装置の機能構成を示すブロック図である。 第１画像データ記憶部が記憶している情報をテーブル形式で示す図である。 第２画像データ記憶部が記憶している情報をテーブル形式で示す図である。 購入情報記憶部が記憶している情報をテーブル形式で示す図である。 顧客分析装置の機能構成を示すブロック図である。 第１画像データ記憶部が記憶している情報をテーブル形式で示す図である。 第２画像データ記憶部が記憶している情報をテーブル形式で示す図である。 購入情報記憶部が記憶している情報をテーブル形式で示す図である。 商品識別情報記憶部が記憶している情報をテーブル形式で示す図である。 未購入者データ記憶部が記憶している情報をテーブル形式で示す図である。 顧客データ収集装置の第１撮像部の動作を示すフローチャートである。 顧客データ収集装置の第２撮像部の動作を示すフローチャートである。 顧客データ収集装置の店舗端末が行う処理を示すフローチャートである。 顧客分析装置が行う処理を示すフローチャートである。 第２の実施形態に係る顧客データ収集装置の構成を示すブロック図である。
　以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
（第１の実施形態）
　図１は、第１の実施形態に係る顧客分析システムの構成を示すブロック図である。この顧客分析システムは、顧客データ収集装置１００及び顧客分析装置２００を備えている。顧客データ収集装置１００及び顧客分析装置２００は、インターネットなどの通信網１０を介して互いに接続している。本図に示す例において、顧客データ収集装置１００は複数の店舗ごとに設けられている。ただし顧客データ収集装置１００を有する店舗は一つであってもよい。顧客データ収集装置１００が設置されている店舗は、例えばコンビニエンスストアやスーパーであるが、これに限定されない。
　顧客データ収集装置１００は、特定の商品陳列部（例えば特定の商品陳列棚やレジカウンタに設置されている商品陳列用のスペース）に向かった顧客を撮像して第１画像データを生成するとともに、商品を購入した顧客をレジカウンタで撮像して第２画像データを生成する。そして顧客データ収集装置１００は、第１画像データ及び第２画像データを顧客分析装置２００に送信する。顧客分析装置２００は、第１画像データ及び第２画像データを解析し、第１画像データに写っていたが第２画像データに写っていなかった顧客の顔画像を選択する。これにより、顧客分析システムは、商品に関心を示したがその商品を購入しなかった顧客を選択することができる。以下、詳細に説明する。
　図２は、顧客データ収集装置１００が配置されている店舗の平面概略図であり、図３は、顧客データ収集装置１００の機能構成を示すブロック図である。顧客データ収集装置１００は、第１撮像部１１０、第２撮像部１２０、及び送信部１４７を備える。第１撮像部１１０は、店舗内の特定の商品陳列棚１０２（商品陳列部）に向き合った顧客を撮像して第１画像データを生成する。第２撮像部１２０は、店舗のレジ端末１３０に向き合った顧客を撮像して第２画像データを生成する。送信部１４７は、第１画像データ及びその撮像時刻、並びに第２画像データ及びその撮像時刻を顧客分析装置２００に送信する。
　本図に示す例において、第１撮像部１１０は商品別に複数設けられている。具体的には、第１撮像部１１０は、例えば特定の弁当が陳列されている商品陳列棚１０２に対応しているものもあれば、レジカウンタ１０４に配置されている商品陳列スペース１０６に対応しているものもある。商品陳列棚１０２に対応している第１撮像部１１０は、例えば商品陳列棚１０２に内蔵されている。また商品陳列スペース１０６に対応している第１撮像部１１０は、例えば商品陳列スペース１０６とは別の場所に設けられているが、商品陳列スペース１０６の筐体に内蔵されていても良い。そして、複数の第１撮像部１１０には、それぞれ第１撮像部１１０を相互に識別する第１撮像部識別情報が設定されている。
　第２撮像部１２０は、例えばレジ端末１３０に設けられている。第２撮像部１２０は、例えばレジ端末１３０が会計処理を始めたときにレジ端末１３０から会計開始情報を受信し、会計開始情報を受信したときに第２画像データを生成する。
　送信部１４７は、店舗の事務所スペースに設置された店舗端末１４０に設けられている。店舗端末１４０は、送信部１４７の他に、第１画像データ記憶部１４２、第２画像データ記憶部１４４、及び購入情報記憶部１４６を備えている。
　第１画像データ記憶部１４２は、第１撮像部１１０が生成した第１画像データを、撮像時刻及びその第１撮像部１１０の第１撮像部識別情報に対応付けて記憶する。第２画像データ記憶部１４４は、第２撮像部１２０が生成した第２画像データを撮像時刻に対応付けて記憶する。
　購入情報記憶部１４６は、レジ端末１３０で会計が行なわれたときに、顧客が購入した商品の商品識別情報及び会計処理が行なわれた時刻をレジ端末１３０から受信して記憶する。店舗内で販売されている商品には、商品を相互に識別する商品識別情報が割り振られている。商品識別情報は、全ての店舗に共通の情報となっている。
　そして送信部１４７は、第１画像データ記憶部１４２が記憶している情報、第２画像データ記憶部１４４が記憶している情報、及び購入情報記憶部１４６が記憶している情報を、所定の時刻になるとバッチ処理で顧客分析装置２００に送信する。このとき送信部１４７は、その店舗を他の店舗から識別する店舗識別情報も送信する。なお、送信部１４７は、第１画像データ記憶部１４２が記憶している情報及び第２画像データ記憶部１４４が記憶している情報を、顧客分析装置２００に送信した後に消去するのが好ましい。
　なお、図３において、本発明の本質に関わらない部分の構成については省略してある。図３に示した店舗端末１４０の各構成要素は、ハードウエア単位の構成ではなく、機能単位のブロックを示している。店舗端末１４０の各構成要素は、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされた本図の構成要素を実現するプログラム、そのプログラムを格納するハードディスクなどの記憶ユニット、ネットワーク接続用インタフェースを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置には様々な変形例があることは、当業者には理解されるところである。
　図４は、第１画像データ記憶部１４２が記憶している情報をテーブル形式で示す図である。第１画像データ記憶部１４２は、第１撮像部識別情報ごとに、第１画像データ及びその撮像時刻を互いに対応付けて記憶している。撮像時刻は秒単位で記憶されても良い。
　図５は、第２画像データ記憶部１４４が記憶している情報をテーブル形式で示す図である。第２画像データ記憶部１４４は、第２画像データ及びその撮像時刻を互いに対応付けて記憶している。撮像時刻は秒単位で記憶されても良い。なおレジ端末１３０が複数設置されており、これに伴って第２撮像部１２０が複数設けられている場合もある。この場合においても、第２画像データ記憶部１４４は、第２画像データ及びその撮像時刻を第２撮像部１２０別に記憶しなくても良い。ただし第２画像データ記憶部１４４は、第２撮像部１２０別に第２画像データ及びその撮像時刻を記憶してもよい。
　図６は、購入情報記憶部１４６が記憶している情報をテーブル形式で示す図である。購入情報記憶部１４６は、顧客が購入した商品の商品識別情報及び会計処理が行なわれた時刻を互いに対応付けて記憶している。会計処理が行なわれた時刻は、後述する処理において、第２画像データと商品識別情報とを対応付けるときに用いられる。顧客が複数の商品を購入した場合、購入情報記憶部１４６は、会計処理が行われた時刻に複数の商品識別情報を対応付けて記憶している。なお、撮像時刻は秒単位で記憶されても良い。
　図７は、顧客分析装置２００の機能構成を示すブロック図である。顧客分析装置２００は、受信部２１０、第１画像データ記憶部２２０、第１画像データ読出部２２５、第２画像データ記憶部２３０、第２画像データ読出部２３５、及び顔画像選択部２６０を備える。
　受信部２１０は、顧客データ収集装置１００が送信した各種情報を受信する。受信する情報には、店舗識別情報、第１画像データ及びその撮像時刻、第２画像データ及びその撮像時刻、並びに顧客が購入した商品の商品識別情報及び会計処理が行なわれた時刻が含まれる。第１画像データは、さらに、その第１画像データを撮像した第１撮像部１１０の第１撮像部識別情報が対応付けられて送信される。
　第１画像データ記憶部２２０は、受信部２１０が受信した第１画像データ及び撮像時刻を互いに対応付けて、店舗識別情報別かつ第１撮像部識別情報別に記憶する。第２画像データ記憶部２３０は、受信部２１０が受信した第２画像データ及び撮像時刻を互いに対応付けて、店舗識別情報別に記憶する。
　第１画像データ読出部２２５は、第１画像データ記憶部２２０から第１画像データ及びその撮像時刻を読み出す。第２画像データ読出部２３５は、第１画像データ読出部２２５が読み出した撮像時刻より後に撮像された第２画像データを第２画像データ記憶部２３０から読み出す。このとき第２画像データ読出部２３５は、第１画像データの撮像時刻から、この撮像時刻より所定時間後（例えば１時間）までの間に撮像された第２画像データのみを読み出すのが好ましい。
　顔画像選択部２６０は、第１画像データ読出部２２５が読み出した第１画像データと、第２画像データ読出部２３５が読み出した第２画像データとを解析し、第１画像データに写っていたが第２画像データに写っていなかった顧客の顔画像（又は第１画像データそのもの）を選択する。
　顧客分析装置２００は、さらに顔画像分析部２７０及び集計部２８０を備える。顔画像分析部２７０は、顔画像選択部２６０が選択した顔画像の性別及び年代を分析する。集計部２８０は、顔画像選択部２６０が選択した顔画像の数を、性別かつ年代別に集計する。集計部２８０は、集計結果を示す未購入者データを店舗識別情報に対応付けて未購入者データ記憶部２９０に記憶させる。
　顧客分析装置２００は、さらに購入情報記憶部２４０及び商品識別情報記憶部２５０を備えている。購入情報記憶部２４０は、受信部２１０が受信した情報のうち、顧客が購入した商品の商品識別情報及び会計処理が行なわれた時刻（第２画像データと商品識別情報を対応付ける情報）を記憶する。
　商品識別情報記憶部２５０は、商品陳列部に陳列されている商品の商品識別情報を記憶する。図２に示す例では、第１撮像部１１０が複数の商品別に設けられている。このため、商品識別情報記憶部２５０は、複数の商品識別情報を、その商品識別情報が示す商品に対応している第１撮像部１１０の第１撮像部識別情報に対応付けて記憶している。
　そして顔画像選択部２６０は、上記した処理に加え、第１画像データ及び第２画像データの双方に写っている顧客のうち、当該第２画像データに対応して購入情報記憶部２４０が記憶した商品識別情報（すなわち会計を行った時刻が第２画像データの撮像時刻と略等しい商品識別情報）に、その第１画像データを撮像した第１撮像部１１０に対応する商品識別情報が含まれていない顧客の顔画像（又は第１画像データ）を選択する。
　また本実施形態では、上記したように、第１撮像部１１０は商品別に複数設けられており、複数の第１撮像部１１０には、それぞれ第１撮像部１１０を相互に識別する第１撮像部識別情報が設定されている。また、第１画像データ記憶部２２０は、第１画像データを、当該第１画像データを撮像した第１撮像部１１０の第１撮像部識別情報に対応付けて記憶している。この場合、第１画像データ読出部２２５は、読み出しの対象となっている第１画像データに対応する第１撮像部識別情報を読み出す。そして、集計部２８０は、第１撮像部識別情報別に、顔画像の数を性別かつ年代別に集計する。そして集計部２８０は、商品識別情報記憶部２５０が記憶している情報を用いて、第１撮像部識別情報を商品識別情報に変換し、集計結果を、店舗識別情報別に、商品識別情報に対応付けて未購入者データ記憶部２９０に記憶させる。
　なお、図７において、本発明の本質に関わらない部分の構成については省略してある。図７に示した顧客分析装置２００の各構成要素は、ハードウエア単位の構成ではなく、機能単位のブロックを示している。顧客分析装置２００の各構成要素は、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされた本図の構成要素を実現するプログラム、そのプログラムを格納するハードディスクなどの記憶ユニット、ネットワーク接続用インタフェースを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置には様々な変形例があることは、当業者には理解されるところである。
　図８は、第１画像データ記憶部２２０が記憶している情報をテーブル形式で示す図である。第１画像データ記憶部２２０は、店舗識別情報別かつ第１撮像部識別情報別に、第１画像データ及びその撮像時刻を互いに対応付けて記憶している。なお撮像時刻は秒単位で記憶されても良い。
　図９は、第２画像データ記憶部２３０が記憶している情報をテーブル形式で示す図である。第２画像データ記憶部２３０は、店舗識別情報別に、第２画像データ及びその撮像時刻を互いに対応付けて記憶している。撮像時刻は秒単位で記憶されても良い。
　図１０は、購入情報記憶部２４０が記憶している情報をテーブル形式で示す図である。購入情報記憶部２４０は、店舗識別情報別に、顧客が購入した商品の商品識別情報及び会計処理が行なわれた時刻を互いに対応付けて記憶している。顧客が複数の商品を購入した場合、購入情報記憶部２４０は、会計処理が行われた時刻に複数の商品識別情報を対応付けて記憶している。撮像時刻は秒単位で記憶されても良い。
　図１１は、商品識別情報記憶部２５０が記憶している情報をテーブル形式で示す図である。商品識別情報記憶部２５０は、店舗識別情報別に、第１撮像部識別情報と、その第１撮像部識別情報が示す第１撮像部１１０に対応する商品の商品識別情報とを互いに対応付けて記憶している。なお、全ての店舗において第１撮像部識別情報と商品識別情報の組み合わせが共通している場合、商品識別情報記憶部２５０は、上記した情報を店舗識別情報別に記憶しなくてよい。
　図１２は、未購入者データ記憶部２９０が記憶している情報をテーブル形式で示す図である。未購入者データ記憶部２９０は、店舗識別情報かつ商品識別情報別に、性別及び年代別の未購入者の数を記憶している。なお店舗別に未購入者の数を記憶する必要がない場合、未購入者データ記憶部２９０は、上記した情報を店舗識別情報別に記憶しなくてよい。
　図１３は、図２及び図３に示した顧客データ収集装置１００の第１撮像部１１０の動作を示すフローチャートである。第１撮像部１１０は、店舗が開いている間は動画データを生成している。そして、動画データを構成する各フレームを解析し、そのフレームに正面を向いた顔が含まれている場合（ステップＳ１０：Ｙｅｓ）、そのフレームを第１画像データとして選択する（第１画像データの生成）（ステップＳ２０）。そして、第１画像データを、撮像時刻及びその第１撮像部１１０の第１撮像部識別情報に対応付けて、店舗端末１４０の第１画像データ記憶部１４２に記憶させる（ステップＳ３０）
　なお、第１撮像部１１０のうちステップＳ１０～ステップＳ３０に示した処理を行う部分は、図２の商品陳列棚１０２等に設けられている必要はなく、店舗端末１４０において行なわれてもよい。また第１画像データを生成するための条件（ステップＳ１０）は、例えば顧客が一定時間以上第１撮像部１１０に写っていることであってもよい。
　図１４は、図２及び図３に示した顧客データ収集装置１００の第２撮像部１２０の動作を示すフローチャートである。レジ端末１３０において会計処理が開始する（ステップＳ１１０：Ｙｅｓ）と、レジ端末１３０は、会計開始情報を第２撮像部１２０に送信する。第２撮像部１２０は、会計開始情報を受信すると第２画像データを生成し（ステップＳ１２０）、生成した第２画像データを撮像時刻に対応付けて店舗端末１４０の第２画像データ記憶部１４４に送信し、記憶させる（ステップＳ１３０）。なお第２画像データの生成処理は、動画データの特定のフレーム画像を選択する処理であっても良い。
　図１５は、顧客データ収集装置１００の店舗端末１４０が行う処理を示すフローチャートである。第１画像データ記憶部１４２は、第１画像データ、第１撮像部識別情報、及び撮像時刻を受信する（ステップＳ２１０：Ｙｅｓ）と、受信した第１画像データ及び撮像時刻を、第１撮像部識別情報別に記憶する（ステップＳ２２０）。また第２画像データ記憶部１４４は、第２画像データ及び撮像時刻を受信する（ステップＳ２３０：Ｙｅｓ）と、受信した第２画像データ及び撮像時刻を記憶する（ステップＳ２４０）。そして送信部１４７は、バッチ処理時刻になる（ステップＳ２５０：Ｙｅｓ）と、第１画像データ記憶部１４２が記憶している情報及び第２画像データ記憶部１４４が記憶している情報の送信処理を行う（ステップＳ２６０）。
　図１６は、顧客分析装置２００が行う処理を示すフローチャートである。顧客分析装置２００は、店舗識別情報別に、図１６に示す処理を行う。第１画像データ読出部２２５は、予め、店舗識別情報別に、その店舗の第１撮像部識別情報を記憶している。
　まず第１画像データ読出部２２５は、第１撮像部識別情報を設定する（ステップＳ３１０）。設定された第１撮像部識別情報は、顔画像選択部２６０に送信される。顔画像選択部２６０は、第１撮像部識別情報に対応する商品識別情報を、商品識別情報記憶部２５０から読み出しておく。
　顧客分析装置２００は、第１画像データ読出部２２５が設定した第１撮像部識別情報に対応している第１画像データに対して、以下の処理を行う。
　まず第１画像データ読出部２２５は、設定されている第１撮像部識別情報に対応する第１画像データの一つ及びその撮像時刻を、第１画像データ記憶部２２０から読み出す（ステップＳ３２０）。第１画像データ読出部２２５は、第１画像データを顔画像選択部２６０に送信し、撮像時刻を第２画像データ読出部２３５に送信する。
　第２画像データ読出部２３５は、第１画像データ読出部２２５から第１画像データの撮像時刻を受信すると、第２画像データ記憶部２３０から、受信した撮像時刻より後に撮像された複数の第２画像データを読み出し（ステップＳ３３０）、読み出した複数の第２画像データを顔画像選択部２６０に送信する。
　顔画像選択部２６０は、受信した第１画像データに対して顔の特徴点の選択処理を行い、かつ受信した複数の第２画像データそれぞれに対して顔の特徴点の選択処理を行う（ステップＳ３４０）。そして、選択した特徴点をマッチング処理することにより、第１画像データに写っていた人がいずれかの第２画像データに写っているか否か、判断する（ステップＳ３５０）。
　第１画像データに写っていた人がいずれの第２画像データにも写っていない場合（ステップＳ３５０：Ｙｅｓ）、その第１画像データに写っていた人は、ステップＳ３１０で設定されている第１撮像部識別情報に対応する商品に興味を持ったが、その商品を購入しなかった人であると判断できる。次いで顔画像分析部２７０は、その第１画像データに写っていた顔の性別及び年代を分析する（ステップＳ３８０）。そして集計部２８０は、未購入者データ記憶部２９０が記憶しているデータの更新処理を行い、ステップＳ３８０の分析結果が示した性別及び年代の組み合わせに対応するカウント値を一つ増やす（ステップＳ３９０）。
　第１画像データに写っていた人がいずれかの第２画像データに写っていた場合（ステップＳ３５０：Ｎｏ）、顔画像分析部２７０は、その第２画像データの撮像時刻に対応する時刻に会計処理が行なわれた商品の商品識別情報を、購入情報記憶部２４０から読み出す（ステップＳ３６０）。そして顔画像分析部２７０は、商品識別情報記憶部２５０から読み出しておいた商品識別情報（すなわち第１撮像部１１０に対応する商品の商品識別情報）が、ステップＳ３６０で読み出した商品識別情報（すなわちその人が購入した商品の商品識別情報）に含まれていない場合（ステップＳ３７０：Ｎｏ）、その第１画像データに写っていた人は、設定されている第１撮像部識別情報に対応する商品に興味を持ったが、その商品を購入しなかった人であると判断できる。次いで顔画像分析部２７０は、上記したステップＳ３８０及びステップＳ３９０に示した処理を行う。
　顧客分析装置２００は、ステップＳ３２０～ステップＳ３９０に示した処理を、ステップＳ３１０で設定された第１撮像部識別情報に対応する全ての第１画像データに対して行う（ステップＳ４００）。
　その後顧客分析装置２００は、第１撮像部識別情報を更新し（ステップＳ３１０）、ステップＳ３２０～ステップＳ４００に示した処理を繰り返す。顧客分析装置２００は、設定されている店舗識別情報に対応する全ての第１撮像部識別情報に対して、ステップＳ３２０～ステップＳ４００に示した処理を行う（ステップＳ４１０）。
　次に、本実施形態の作用及び効果について説明する。本実施形態によれば、店舗に設置された第１撮像部１１０は、商品陳列棚１０２等を見たと推定される人を撮像して第１画像データを生成する。また店舗に設置された第２撮像部１２０は、レジ端末で会計を行った人を撮像して第２画像データを生成する。そして顧客分析装置２００は、第１画像データに写っていたがいずれの第２画像データにも写っていない人（すなわちその第１画像データ）を選択する。選択された第１画像データに写っている人は、第１撮像部１１０に対応する商品に興味を持ったが、その商品を購入しなかった人であると判断できる。このため、商品に関心を示したがその商品を購入しなかった人を選択することができる。特に選択した人の顔画像から、その人の性別及び年代を分析すると、商品開発の上で有用な統計データを得ることができる。
　また顧客分析装置２００は、第１画像データに写っていた人がいずれかの第２画像データに写っていた場合、レジ端末１３０が取得した情報に基づいて、その人が購入した商品の商品識別情報を取得する。そして、取得した商品識別情報の中に、第１撮像部１１０に対応する商品の商品識別情報が含まれていない場合、その第１画像データを選択する。選択された第１画像データに写っている人は、第１撮像部１１０に対応する商品に興味を持ったが、その商品を購入しなかった人であると判断できる。このため、商品に関心を示したがその商品を購入しなかった人をさらに高い精度で選択することができる。
（第２の実施形態）
　図１７は、第２の実施形態に係る顧客データ収集装置１００の構成を示すブロック図である。この顧客分析装置は、第１の実施形態において顧客分析装置２００が有していた機能を顧客データ収集装置１００に持たせた装置である。
　具体的には、顧客データ収集装置１００は、第１の実施形態に示した構成のうち、送信部１４７を有していない。その代わり、顧客データ収集装置１００は、店舗端末１４０に、商品識別情報記憶部１４８、顔画像選択部１５０、顔画像分析部１５２、集計部１５４、及び未購入者データ記憶部１５６を有している。商品識別情報記憶部１４８、顔画像選択部１５０、顔画像分析部１５２、集計部１５４、及び未購入者データ記憶部１５６の機能や構成は、店舗識別情報を用いる必要がない点を除いて、第１の実施形態において顧客分析装置２００が有していた商品識別情報記憶部２５０、顔画像選択部２６０、顔画像分析部２７０、集計部２８０、及び未購入者データ記憶部２９０と同様である。
　本実施形態によっても、第１の実施形態と同様の効果を得ることができる。また、顧客の分析処理を、店舗内で完結させることができる。
　以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
　この出願は、２００９年１月２６日に出願された日本特許出願特願２００９－０１４６０７を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (11)

  1. 　店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
    　前記第１画像データを撮像時刻に対応付けて記憶する第１画像データ記憶手段と、
    　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
    　前記第２画像データを撮像時刻に対応付けて記憶する第２画像データ記憶手段と、
    　前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出す第１画像データ読出手段と、
    　前記第１画像データ読出手段が読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出す第２画像データ読出手段と、
    　前記第１画像データ読出手段が読み出した前記第１画像データと、前記第２画像データ読出手段が読み出した前記第２画像データとを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する顔画像選択手段と、
    を備える顧客分析システム。
  2. 　請求項１に記載の顧客分析システムにおいて、
    　前記顔画像選択手段が選択した前記顔画像の性別及び年代を分析する顔画像分析手段と、
    　前記顔画像選択手段が選択した前記顔画像の数を、性別かつ年代別に集計する集計手段と、
    を備える顧客分析システム。
  3. 　請求項２に記載の顧客分析システムにおいて、
    　前記第１撮像手段は商品別に複数設けられており、
    　前記複数の第１撮像手段には、それぞれ前記第１撮像手段を相互に識別する第１撮像手段識別情報が設定されており、
    　前記第１画像データ記憶手段は、前記第１画像データを、当該第１画像データを撮像した前記第１撮像手段の前記第１撮像手段識別情報に対応付けて記憶しており、
    　前記第１画像データ読出手段は、読み出しの対象となっている前記第１画像データに対応する前記第１撮像手段識別情報を読み出し、
    　前記集計手段は、前記第１撮像手段識別情報別に、前記顔画像の数を性別かつ年代別に集計する顧客分析システム。
  4. 　請求項１～３のいずれか一つに記載の顧客分析システムにおいて、
    　前記店舗内で販売されている商品には、前記商品を相互に識別する商品識別情報が割り振られており、
    　前記商品陳列部に陳列されている商品の前記商品識別情報を記憶する商品識別情報記憶手段と、
    　前記レジ端末が取得した前記商品識別情報であり、顧客が購入した商品の前記商品識別情報を、当該顧客が写っている前記第２画像データに対応付ける情報とともに記憶する購入情報記憶手段と、
    を備え、
    　前記顔画像選択手段は、さらに、前記第１画像データ及び前記第２画像データの双方に写っている顧客のうち、当該第２画像データに対応して前記購入情報記憶手段が記憶した前記商品識別情報に、前記商品識別情報記憶手段が記憶している前記商品識別情報が含まれていない顧客の顔画像を選択する顧客分析システム。
  5. 　請求項１～４のいずれか一つに記載の顧客分析システムにおいて、
    　前記第１撮像手段は、前記商品陳列部に設けられている顧客分析システム。
  6. 　請求項１～５のいずれか一つに記載の顧客分析システムにおいて、
    　前記商品陳列部は、レジカウンタに設けられている顧客分析システム。
  7. 　請求項１～６のいずれか一つに記載の顧客分析システムにおいて、
    　前記第２撮像手段は、前記レジ端末に設けられている顧客分析システム。
  8. 　店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
    　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
    　前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を顧客分析装置に送信する送信手段と、
    を備える顧客データ収集装置。
  9. 　店舗に設けられた顧客データ収集装置から画像データを受信して処理する顧客分析装置であって、
    　前記顧客データ収集装置は、
    　　店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、
    　　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段と、
    　　前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を顧客分析システムに送信する送信手段と、
    を備え、
    　前記顧客データ収集装置の前記送信手段が送信した前記第１画像データ及びその撮像時刻、並びに前記第２画像データ及びその撮像時刻を受信する受信手段と、
    　前記第１画像データを前記撮像時刻に対応付けて記憶する第１画像データ記憶手段と、
    　前記第２画像データを前記撮像時刻に対応付けて記憶する第２画像データ記憶手段と、
    　前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出す第１画像データ読出手段と、
    　前記第１画像データ読出手段が読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出す第２画像データ読出手段と、
    　前記第１画像データ読出手段が読み出した前記第１画像データと、前記第２画像データ読出手段が読み出した第２画像データとを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する顔画像選択手段と、
    を備える顧客分析装置。
  10. 　店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成し、前記第１画像データを撮像時刻に対応付けて第１画像データ記憶手段に記憶させるステップと、
    　前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成し、前記第２画像データを撮像時刻に対応付けて第２画像データ記憶手段に記憶させるステップと、
    　コンピュータが、前記第１画像データ記憶手段から前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出し、かつ、読み出した前記撮像時刻より後に撮像された前記第２画像データを前記第２画像データ記憶手段から読み出すステップと、
    　前記コンピュータが、読み出した前記第１画像データ及び前記第２画像データを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択するステップと、
    を含む顧客分析方法。
  11. 　コンピュータを、店舗に来店した顧客を分析する顧客分析装置として機能させるためのプログラムであって、
    　前記店舗には、店舗内の特定の商品陳列部に向き合った顧客を撮像して第１画像データを生成する第１撮像手段と、前記店舗のレジ端末に向き合った顧客を撮像して第２画像データを生成する第２撮像手段とが設けられており、
    　前記コンピュータに、
    　前記第１画像データを撮像時刻に対応付けて記憶する機能と、
    　前記第２画像データを撮像時刻に対応付けて記憶する機能と、
    　記憶している前記第１画像データ及び当該第１画像データの前記撮像時刻を読み出し、読み出した前記撮像時刻より後に撮像された前記第２画像データを読み出す機能と、
    　読み出した前記第１画像データ及び前記第２画像データを解析し、前記第１画像データに写っていたが前記第２画像データに写っていなかった顧客の顔画像を選択する機能と、
    を実現させるプログラム。
PCT/JP2010/000295 2009-01-26 2010-01-20 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム WO2010084744A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201080003761.2A CN102265302A (zh) 2009-01-26 2010-01-20 顾客分析系统、顾客数据收集装置、顾客分析装置、顾客分析方法以及程序

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009014607A JP5428356B2 (ja) 2009-01-26 2009-01-26 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム
JP2009-014607 2009-01-26

Publications (1)

Publication Number Publication Date
WO2010084744A1 true WO2010084744A1 (ja) 2010-07-29

Family

ID=42355801

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/000295 WO2010084744A1 (ja) 2009-01-26 2010-01-20 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム

Country Status (4)

Country Link
JP (1) JP5428356B2 (ja)
CN (1) CN102265302A (ja)
TW (1) TWI455054B (ja)
WO (1) WO2010084744A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5438859B1 (ja) * 2013-05-30 2014-03-12 パナソニック株式会社 客層分析装置、客層分析システムおよび客層分析方法
CN109815834A (zh) * 2014-01-03 2019-05-28 科沃斯商用机器人有限公司 导购机器人顾客识别通知方法及导购机器人系统
JP2016212502A (ja) * 2015-04-30 2016-12-15 東芝テック株式会社 顧客管理システム、顧客管理装置、及び顧客管理方法
JP6903969B2 (ja) * 2017-03-17 2021-07-14 日本電気株式会社 情報提供装置、情報提供方法及びプログラム
CN108564027A (zh) * 2018-04-11 2018-09-21 北京学之途网络科技有限公司 一种确定观看菜单顾客的进店状态的方法和装置
CN111091412A (zh) * 2019-11-22 2020-05-01 丁萍 一种基于消费者年龄与消费偏好的数据采集系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001331875A (ja) * 2000-05-24 2001-11-30 Nec Corp 消費者行動モニタ装置及びそれに用いる消費者行動モニタ方法
JP2008152810A (ja) * 2008-03-17 2008-07-03 Nec Soft Ltd 顧客情報収集管理システム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5551021A (en) * 1993-07-30 1996-08-27 Olympus Optical Co., Ltd. Image storing managing apparatus and method for retreiving and displaying merchandise and customer specific sales information
AU4521201A (en) * 1999-12-10 2001-06-25 Jerry W. Lennon Customer image capture and use thereof in a retailing system
JP2002207802A (ja) * 2000-12-19 2002-07-26 Shima Seiki Mfg Ltd アパレル製品販売支援方法および装置ならびに試着室
TW200422972A (en) * 2003-04-30 2004-11-01 Viswis Inc Facial surveillance system and method
JP4697033B2 (ja) * 2006-04-27 2011-06-08 沖電気工業株式会社 自動取引装置
JP2008129900A (ja) * 2006-11-22 2008-06-05 Yamaha Motor Co Ltd 自動販売機
JP2008257487A (ja) * 2007-04-05 2008-10-23 Multi Solution:Kk 顔認証応用万引き検知システム
JP2009009231A (ja) * 2007-06-26 2009-01-15 Toshiba Corp セキュリティ管理システムおよびセキュリティ管理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001331875A (ja) * 2000-05-24 2001-11-30 Nec Corp 消費者行動モニタ装置及びそれに用いる消費者行動モニタ方法
JP2008152810A (ja) * 2008-03-17 2008-07-03 Nec Soft Ltd 顧客情報収集管理システム

Also Published As

Publication number Publication date
JP5428356B2 (ja) 2014-02-26
TWI455054B (zh) 2014-10-01
TW201032156A (en) 2010-09-01
CN102265302A (zh) 2011-11-30
JP2010170492A (ja) 2010-08-05

Similar Documents

Publication Publication Date Title
JP5666772B2 (ja) 情報提供装置、情報提供方法及びプログラム
CN110033298B (zh) 信息处理设备及其控制方法、系统和存储介质
JP5238933B2 (ja) 客層付販売情報生成システム
JP5428356B2 (ja) 顧客分析システム、顧客データ収集装置、顧客分析装置、顧客分析方法、及びプログラム
JP4068505B2 (ja) 顧客購買行動分析システム
US20220180379A1 (en) Transaction-based information processing system, method, and article
CN110942293B (zh) 物品信息的处理方法、设备、存储介质及系统
JP2010140287A (ja) 購買行動分析装置、方法及びコンピュータプログラム
WO2019123714A1 (ja) 情報処理装置、商品推薦方法、およびプログラム
JP7310969B2 (ja) 情報処理システム、顧客特定装置、情報処理方法及びプログラム
JP2018195017A (ja) 情報処理プログラム、情報処理方法及び情報処理装置
JP7298644B2 (ja) 処理装置、処理方法及びプログラム
JP2006209178A (ja) 情報提供システム、情報提供サーバ等
JP2021189738A (ja) 情報処理装置、情報処理方法及びプログラム
JP6888243B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP5027637B2 (ja) マーケティングデータ分析方法、マーケティングデータ分析システム、データ分析サーバ装置およびプログラム
JP2016024601A (ja) 情報処理装置、情報処理システム、情報処理方法、商品推薦方法、およびプログラム
JP7355458B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7315192B2 (ja) 処理装置、処理方法及びプログラム
US20240221008A1 (en) Processing apparatus, processing method, and non-transitory storage medium
JP4750573B2 (ja) 算出方法、算出装置および算出プログラム
US20240193573A1 (en) Storage medium and information processing device
JP7342943B2 (ja) 販売管理システム、店舗装置、販売管理方法、およびプログラム
WO2021065291A1 (ja) 商品推奨システム、商品推奨方法、及びプログラム
US20220092614A1 (en) Information processing apparatus and information processing method

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080003761.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10733352

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10733352

Country of ref document: EP

Kind code of ref document: A1