JP2018045454A - Purchase support system - Google Patents
Purchase support system Download PDFInfo
- Publication number
- JP2018045454A JP2018045454A JP2016179827A JP2016179827A JP2018045454A JP 2018045454 A JP2018045454 A JP 2018045454A JP 2016179827 A JP2016179827 A JP 2016179827A JP 2016179827 A JP2016179827 A JP 2016179827A JP 2018045454 A JP2018045454 A JP 2018045454A
- Authority
- JP
- Japan
- Prior art keywords
- shelf
- purchase
- consumer
- product
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000033001 locomotion Effects 0.000 claims abstract description 24
- 230000008921 facial expression Effects 0.000 claims abstract description 18
- 230000009471 action Effects 0.000 claims abstract description 16
- 238000001514 detection method Methods 0.000 claims abstract description 12
- 238000004458 analytical method Methods 0.000 claims description 56
- 238000000034 method Methods 0.000 claims description 54
- 230000006399 behavior Effects 0.000 claims description 47
- 230000008569 process Effects 0.000 claims description 34
- 239000000284 extract Substances 0.000 claims description 12
- 230000001815 facial effect Effects 0.000 claims description 2
- 238000007726 management method Methods 0.000 description 45
- 238000010586 diagram Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 14
- 230000008450 motivation Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 7
- 235000013372 meat Nutrition 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000010195 expression analysis Methods 0.000 description 5
- 239000002537 cosmetic Substances 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 238000010411 cooking Methods 0.000 description 2
- 210000004087 cornea Anatomy 0.000 description 2
- 239000003205 fragrance Substances 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 210000000554 iris Anatomy 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 235000016709 nutrition Nutrition 0.000 description 2
- 230000035764 nutrition Effects 0.000 description 2
- 230000001737 promoting effect Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 239000002994 raw material Substances 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000002304 perfume Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Landscapes
- Display Racks (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本発明は、商品陳列棚を介した購買支援技術に関する。 The present invention relates to a purchase support technology via a merchandise display shelf.
特許文献１，２に記載のように、消費者に対して広告情報などを表示して購買意欲を促進させる技術が提案されている。 As described in Patent Documents 1 and 2, techniques for promoting advertising by displaying advertisement information and the like to consumers have been proposed.
しかしながら、特許文献１，２に記載のような従来の技術は、商品を手に取ったり、視線を検出するなどして消費者の行動を把握しているものの、その行動の一部分しか検出していなかったり、消費者の心理や購買意欲を総合的に把握しておらず、消費者の心理や行動に適した情報の提供を行うことができなかった。 However, the conventional techniques as described in Patent Documents 1 and 2 grasp the consumer's behavior by picking up a product or detecting a line of sight, but only a part of the behavior is detected. There was no comprehensive understanding of consumer psychology and willingness to purchase, and it was not possible to provide information suitable for consumer psychology and behavior.
そこで、本発明の目的は、商品陳列棚に対するユーザの棚前心理及び棚前行動を把握して消費者の購買意欲を総合的に分析し、商品陳列棚を介した購買支援を行う購買支援システムを提供することにある。 SUMMARY OF THE INVENTION Accordingly, an object of the present invention is to provide a purchasing support system that grasps a user's pre-shelf psychology and pre-shelf behavior with respect to a merchandise display shelf, comprehensively analyzes consumers' purchase intentions, and performs purchase support via the merchandise display shelf. Is to provide.
（１）本発明の購買支援システムは、商品陳列棚と、棚前に位置する消費者の顔画像を取得する第１センサ機器と、商品陳列棚に陳列された商品に対する消費者の動きを取得する第２センサ機器とを含み、商品陳列棚に設けられるセンシングユニットと、商品陳列棚に設けられ、所定のコンテンツを表示する出力ユニットと、を備える商品陳列棚システムと、前記商品陳列棚システムとネットワークを介して接続され、前記センシングユニットで取得された各センサ検出情報を受信して消費者の購買意欲を判別し、棚前に位置する消費者に対して前記購買意欲に応じた前記コンテンツを前記出力ユニットに表示させるための配信処理を行う管理装置と、を有する。 (1) The purchase support system of the present invention acquires a commodity display shelf, a first sensor device that acquires a consumer's face image located in front of the shelf, and a consumer's movement with respect to the commodity displayed on the commodity display shelf. A product display shelf system including a sensing unit provided on the product display shelf, and an output unit provided on the product display shelf and displaying predetermined content, and the product display shelf system, Connected via a network, receive each sensor detection information acquired by the sensing unit to determine the consumer's willingness to purchase, the content according to the purchasing intention to the consumer located in front of the shelf And a management device that performs distribution processing for display on the output unit.
前記管理装置は、前記顔画像から検出される消費者の表情及び視線に基づいて棚前心理パターンを特定し、かつ商品に対する消費者の動きに基づいて棚前行動パターンを特定し、特定された前記棚前心理パターン及び前記棚前行動パターンに対応する消費者の購買意欲パターンを判別する分析制御部と、複数の前記購買意欲パターン毎に前記コンテンツを関連付けた購買支援情報を記憶する記憶部と、判別された消費者の前記購買意欲パターンに基づいて前記コンテンツを選択し、前記出力ユニットに表示させるための配信処理を行うコンテンツ制御部と、を有する。 The management device identifies a pre-shelf psychological pattern based on a consumer's facial expression and line of sight detected from the face image, and identifies a pre-shelf behavior pattern based on a consumer's movement with respect to the product An analysis control unit for determining a consumer's purchase intention pattern corresponding to the pre-shelf psychological pattern and the pre-shelf behavior pattern; and a storage unit for storing purchase support information in which the content is associated with each of the plurality of purchase intention patterns A content control unit that performs distribution processing for selecting the content based on the determined consumer's purchase intention pattern and displaying the content on the output unit.
（２）上記（１）において、前記センシングユニットは、商品陳列棚に陳列された商品の移動を検出する第３センサ機器をさらに備えることができ、前記分析制御部は、前記第２センサ機器及び前記第３センサ機器のセンサ検出情報を組み合わせて消費者が特定の商品を手に取ったか否かを前記棚前行動パターンとして特定するように構成することができる。 (2) In the above (1), the sensing unit may further include a third sensor device that detects the movement of the product displayed on the product display shelf, and the analysis control unit includes the second sensor device and By combining sensor detection information of the third sensor device, it can be configured to specify whether the consumer has picked up a specific product as the behavior pattern before the shelf.
（３）上記（１）又は（２）において、前記コンテンツ制御部は、消費者の前記棚前心理パターン、前記棚前行動パターン及び前記購買意欲に応じた前記コンテンツをそれぞれ選択し、選択された複数の前記コンテンツを前記出力ユニットに表示させるための配信処理を行うように構成することができる。 (3) In the above (1) or (2), the content control unit selects and selects the content according to the consumer's pre-shelf psychological pattern, the pre-shelf behavior pattern, and the purchase motivation, respectively. A delivery process for displaying a plurality of the contents on the output unit can be performed.
（４）上記（１）から（３）において、前記分析制御部は、前記顔画像から消費者の性別、年齢層を含む消費者属性を所定の顔認識処理に基づいて抽出し、前記顔画像及び前記消費者属性が関連付けられたユーザプロファイル情報を生成して前記記憶部に記憶するとともに、前記顔画像に基づくパターンマッチングを行って前記記憶部に記憶された前記ユーザプロファイル情報を特定し、商品陳列棚が設置された店舗への来店履歴と、店舗の販売履歴を管理する所定の販売管理システムから取得される商品陳列棚に陳列された商品の購買履歴とを、特定された前記ユーザプロファイル情報に関連付けて記憶することができる。そして、前記コンテンツ制御部は、前記ユーザプロファイル情報に基づく消費者の前記性別、前記年齢層、前記来店履歴及び前記購買履歴のいずれか１つ又は２以上の組み合わせに基づいて、前記コンテンツを選択し、前記出力ユニットに表示させるための配信処理を行うように構成することができる。 (4) In the above (1) to (3), the analysis control unit extracts a consumer attribute including a sex and an age group of a consumer from the face image based on a predetermined face recognition process, and the face image And the user profile information associated with the consumer attribute is generated and stored in the storage unit, and the user profile information stored in the storage unit is specified by performing pattern matching based on the face image, The user profile information in which the store visit history to the store where the display shelf is installed and the purchase history of the product displayed on the product display shelf acquired from a predetermined sales management system for managing the store sales history are specified Can be stored in association with The content control unit selects the content based on any one or a combination of the gender, the age group, the store visit history, and the purchase history of the consumer based on the user profile information. , A delivery process for displaying on the output unit can be performed.
（５）上記（１）から（３）において、前記分析制御部は、前記顔画像が関連付けられたユーザプロファイル情報を生成して前記記憶部に記憶するとともに、前記顔画像に基づくパターンマッチングを行って前記記憶部に記憶された前記ユーザプロファイル情報を特定し、店舗の販売履歴を管理する所定の販売管理システムから取得される商品陳列棚に陳列された商品の購買履歴を前記ユーザプロファイル情報に関連付けて記憶することができる。そして、前記出力ユニットに表示させるための配信処理の結果と前記購買履歴とに基づいて、商品の購買に繋がった前記配信処理の結果を消費者の前記棚前心理パターン、前記棚前行動パターン、及び前記購買意欲毎に評価する学習制御部をさらに備えるように構成することができる。 (5) In the above (1) to (3), the analysis control unit generates user profile information associated with the face image, stores the user profile information in the storage unit, and performs pattern matching based on the face image. The user profile information stored in the storage unit is specified, and a purchase history of a product displayed on a product display shelf acquired from a predetermined sales management system that manages a sales history of a store is associated with the user profile information Can be remembered. And based on the result of the delivery process for displaying on the output unit and the purchase history, the result of the delivery process that led to the purchase of the product is the consumer's pre-shelf psychological pattern, the pre-shelf behavior pattern, And it can comprise so that the learning control part evaluated for every said purchase will may be further provided.
（６）上記（１）から（５）において、前記出力ユニットは、前記所定のコンテンツを表示する第１ディスプレイ装置及び第２ディスプレイ装置を備えるように構成することができる。そして、前記第２ディスプレイ装置は、複数の表示装置を横並びにユニット化したモニタユニットとして構成することができる。このとき、前記コンテンツ制御部は、１つ又は複数の前記コンテンツを、前記第１ディスプレイ装置及び第２ディスプレイ装置それぞれに表示させるための配信処理を行うとともに、前記第２ディスプレイ装置の各表示装置に異なる前記コンテンツを表示させるための配信処理を行うように構成することができる。 (6) In the above (1) to (5), the output unit may be configured to include a first display device and a second display device that display the predetermined content. The second display device can be configured as a monitor unit in which a plurality of display devices are arranged side by side. At this time, the content control unit performs distribution processing for displaying each of the one or a plurality of the contents on the first display device and the second display device, respectively, and on each display device of the second display device. A distribution process for displaying different contents can be performed.
本発明によれば、商品陳列棚に対するユーザの棚前心理及び棚前行動を把握して消費者の購買意欲を総合的に分析し、商品陳列棚を介した購買支援を行うことができる。 ADVANTAGE OF THE INVENTION According to this invention, a consumer's willingness to purchase is grasped | ascertained by grasping | ascertaining a user's pre-shelf psychology and pre-shelf action with respect to a merchandise display shelf, and the purchase support via a merchandise display shelf can be performed.
以下、実施形態につき、図面を参照して説明する。 Hereinafter, embodiments will be described with reference to the drawings.
（第１実施形態）
図１から図１４は、第１実施形態を示す図である。図１は、本実施形態の商品陳列棚を介した購買支援システム（以下、購買支援システムと称する）の構成図である。購買支援システムは、商品陳列棚システム１００と管理装置３００とを含んで構成され、ＩＰ網などのネットワークを介して、無線又は有線で接続される。
(First embodiment)
1 to 14 are diagrams showing a first embodiment. FIG. 1 is a configuration diagram of a purchase support system (hereinafter referred to as a purchase support system) via a product display shelf according to the present embodiment. The purchase support system includes the product display shelf system 100 and the management device 300, and is connected wirelessly or wired via a network such as an IP network.
図１に示すように、商品陳列棚システム１００は、高さ（Ｚ方向）に延びる棚本体部１と、棚本体部１から前方に延設された商品陳列部２Ａ，２Ｂ，２Ｃとで構成される商品陳列棚をベースとしている。複数の商品陳列部２Ａ，２Ｂ，２Ｃは、所定の間隔で高さ方向に離間して配置されている。商品陳列部２Ａ，２Ｂ，２Ｃは、所定の横幅（Ｘ方向）及び奥行き（Ｙ方向）を有し、棚本体部１からＹ方向に突出している。なお、商品陳列部２Ａ，２Ｂ，２Ｃは、商品陳列部２Ａ，２Ｂ，２Ｃの上面が高さ方向に対して下方に傾くように設けることもできる。図１に示す商品陳列棚は一例であり、少なくとも所定の横幅及び奥行きを有する商品陳列エリアが形成された棚であればよい。 As shown in FIG. 1, the product display shelf system 100 includes a shelf main body 1 that extends in the height (Z direction) and product display portions 2A, 2B, and 2C that extend forward from the shelf main body 1. Based product display shelves. The plurality of merchandise display portions 2A, 2B, 2C are spaced apart from each other in the height direction at a predetermined interval. The product display parts 2A, 2B, 2C have a predetermined lateral width (X direction) and depth (Y direction), and protrude from the shelf main body part 1 in the Y direction. The product display parts 2A, 2B, 2C can also be provided such that the upper surfaces of the product display parts 2A, 2B, 2C are inclined downward with respect to the height direction. The product display shelf shown in FIG. 1 is an example, and may be a shelf in which a product display area having at least a predetermined width and depth is formed.
商品陳列棚システム１００は、図１に例示するように、カメラ１１０Ａ（第１センサ機器に相当する），モーションセンサ１１０Ｂ（第２センサ機器に相当する）、静電容量センサ１１０Ｃ（第３センサ機器に相当する）などのセンシングユニット１１０と、ディスプレイ装置１２０Ａ，モニタユニット１２０Ｂ、スピーカ１２０Ｃ、香発生装置１２０Ｄなどの出力ユニット１２０と、コントロールユニット１３０と、が設けられている。 As illustrated in FIG. 1, the commodity display shelf system 100 includes a camera 110A (corresponding to a first sensor device), a motion sensor 110B (corresponding to a second sensor device), and a capacitance sensor 110C (third sensor device). A display unit 120A, a monitor unit 120B, a speaker 120C, an incense generator 120D, and an output unit 120, and a control unit 130.
カメラ１１０Ａは、棚前のユーザ（消費者）を撮影する撮影装置であり、ユーザの静止画や動画を撮影する。モーションセンサ１１０Ｂは、赤外線やレーザーを利用した距離画像センサを備えた非接触型のモーションセンサであり、画像内の物体までの距離を検出することができる。距離画像センサとしては、「Light Coding（パターン照射方式）」方式や「TOF（Time of Flight）」方式などがあり、赤外線やレーザーを照射してその反射を読み取ることで距離を測定する。距離画像センサとは別に物体の位置を検出するカメラと組み合わせて、例えば、位置及び距離に基づいて、人物の動きを検出する。 The camera 110 </ b> A is a photographing device that photographs a user (consumer) in front of the shelf, and photographs a user's still image or moving image. The motion sensor 110B is a non-contact type motion sensor including a distance image sensor using infrared rays or a laser, and can detect a distance to an object in the image. As the distance image sensor, there are a “Light Coding (pattern irradiation method)” method and a “TOF (Time of Flight)” method, and the distance is measured by irradiating infrared rays or a laser and reading the reflection. In combination with a camera that detects the position of an object separately from the distance image sensor, for example, the movement of a person is detected based on the position and distance.
カメラ１１０Ａ及びモーションセンサ１１０Ｂは、少なくとも棚前に位置するユーザの上半身を撮影するために、商品陳列棚の上部に設けられている。一方、静電容量センサ１１０Ｃは、商品陳列部２Ａ，２Ｂ，２Ｃにおいて商品が載置される上面に設けられる。静電容量センサ１１０Ｃは、静電容量形近接センサであり、静電容量センサ１１０Ｃ上に商品が置かれる。ユーザが置かれた商品を手に取ると、静電容量が変化するので、商品陳列棚に置かれた商品の有無を検知することができる。 The camera 110 </ b> A and the motion sensor 110 </ b> B are provided on the upper part of the product display shelf in order to photograph at least the upper body of the user located in front of the shelf. On the other hand, the capacitance sensor 110C is provided on the upper surface on which the product is placed in the product display units 2A, 2B, 2C. The capacitance sensor 110C is a capacitance type proximity sensor, and a product is placed on the capacitance sensor 110C. When the user picks up the product placed on the hand, the capacitance changes, so that the presence or absence of the product placed on the product display shelf can be detected.
本実施形態では、モーションセンサ１１０Ｂと静電容量センサ１１０Ｃとの組み合わせにより、棚前行動として、ユーザが商品を手に取ったことを精度良く把握することができる。なお、カメラ１１０Ａ、モーションセンサ１１０Ｂ、又は静電容量センサ１１０Ｃのいずれか１つを利用して、ユーザが商品を手に取ったことを把握することも可能である。例えば、カメラ１１０Ａで撮影されたユーザの画像において手に取った商品を検出したり、モーションセンサ１１０Ｂで物体として商品を検出しつつ、商品がユーザと共に移動するアクションを検出したり、静電容量センサ１１０Ｃで商品の有無を検出したりして、棚前においてユーザが商品を手に取ったことを把握することができる。また、センシングユニット１１０のセンサ検出情報を任意に組み合わせてユーザが商品を手に取ったことを把握することも可能である。 In the present embodiment, the combination of the motion sensor 110B and the capacitance sensor 110C makes it possible to accurately grasp that the user has picked up the product as a pre-shelf action. It is also possible to grasp that the user has picked up the product using any one of the camera 110A, the motion sensor 110B, and the capacitance sensor 110C. For example, the product picked up in the user's image taken by the camera 110A is detected, the product is detected as an object by the motion sensor 110B, and the action of the product moving with the user is detected. By detecting the presence or absence of a product at 110C, it is possible to grasp that the user has picked up the product in front of the shelf. It is also possible to grasp that the user has picked up the product by arbitrarily combining the sensor detection information of the sensing unit 110.
次に、ディスプレイ装置１２０Ａは、商品陳列棚の上部に設けられ、管理装置３００から配信されるコンテンツを表示する。一方、モニタユニット１２０Ｂは、図２に示すように、複数の小型ディスプレイ装置Ｍ１〜Ｍ８を横並びに並べてユニット化したものである。モニタユニット１２０Ｂは、図１に示すように、商品陳列部２Ａ，２Ｂ，２Ｃの端面に設けられ、棚前に位置するユーザに面して配置されている。 Next, the display device 120 </ b> A is provided on the upper part of the merchandise display shelf and displays content distributed from the management device 300. On the other hand, as shown in FIG. 2, the monitor unit 120B is a unit in which a plurality of small display devices M1 to M8 are arranged side by side. As shown in FIG. 1, the monitor unit 120 </ b> B is provided on the end surface of the product display portions 2 </ b> A, 2 </ b> B, and 2 </ b> C and is disposed facing the user located in front of the shelf.
スピーカ１２０Ｃは、再生された音声データ（音楽、ＢＧＭ、効果音など）を出力する。音声データは、ディスプレイ装置１２０Ａやモニタユニット１２０Ｂに表示されるコンテンツ（映像、画像、文字情報、広告情報）に付随する音声やコンテンツとは関係のない音声が含まれる。香発生装置１２０Ｄは、化粧品や香水などの香りや食品の香りなどを出力する。例えば、香りの元なる香料（原料）を設置すると共に、ファン等の送風装置で香りを送り出すように構成することができる。複数の香料（原料）を予め設置して、例えば、後述するユーザの棚前心理や棚前行動、購買意欲の分析結果に対して、複数の香りを切り替えて送出するようにしてもよい。 The speaker 120C outputs reproduced audio data (music, BGM, sound effects, etc.). The audio data includes audio associated with content (video, image, text information, advertisement information) displayed on the display device 120A and the monitor unit 120B and audio unrelated to the content. The incense generating device 120D outputs a scent of cosmetics and perfume, a scent of food, and the like. For example, it is possible to configure so that a fragrance (raw material) from which a scent originates is installed and the scent is sent out by a blower such as a fan. A plurality of fragrances (raw materials) may be installed in advance, and for example, a plurality of scents may be switched and sent in response to the analysis results of the user's pre-shelf psychology, pre-shelf behavior, and purchase intention.
コントロールユニット１３０は、管理装置３００とネットワークを介して接続し、センシングユニット１１０のセンサ検出情報を管理装置３００に伝送し、管理装置３００から提供されるコンテンツ（出力制御情報を含む）を受信する。 The control unit 130 is connected to the management apparatus 300 via a network, transmits the sensor detection information of the sensing unit 110 to the management apparatus 300, and receives content (including output control information) provided from the management apparatus 300.
図３は、購買支援システムを構成する商品陳列棚システム１００及び管理装置３００の構成ブロック図である。なお、本実施形態の管理装置３００は、１つ又は複数の商品陳列棚システム１００と接続可能である。 FIG. 3 is a configuration block diagram of the commodity display shelf system 100 and the management apparatus 300 that constitute the purchase support system. Note that the management apparatus 300 of this embodiment can be connected to one or a plurality of product display shelf systems 100.
商品陳列棚システム１００は、上述のようにセンシングユニット１１０、出力ユニット１２０及びコントロールユニット１３０を含んで構成され、コントロールユニット１３０は、制御装置１３１、通信装置１３２、記憶装置１３３を備えている。通信装置１３２は、ネットワークを介した管理装置３００との間の通信制御を行う。記憶装置１３３は、コントロールユニット１３０での制御に必要な情報や管理装置３００から伝送される各種情報を記憶する。 The commodity display shelf system 100 includes the sensing unit 110, the output unit 120, and the control unit 130 as described above, and the control unit 130 includes the control device 131, the communication device 132, and the storage device 133. The communication device 132 performs communication control with the management device 300 via the network. The storage device 133 stores information necessary for control by the control unit 130 and various information transmitted from the management device 300.
制御装置１３１のセンサ制御部１３１Ａは、センシングユニット１１０の各センサ機器を制御し、センサ機器それぞれから出力されるセンサ検出情報を収集する。センサ検出情報は、通信装置１３２を介して管理装置３００に送信される。出力制御部１３１Ｂは、管理装置３００から配信されるコンテンツ及び出力制御情報を受信し、出力ユニット１２０の各出力機器に対する出力制御を行う。 The sensor control unit 131A of the control device 131 controls each sensor device of the sensing unit 110 and collects sensor detection information output from each sensor device. The sensor detection information is transmitted to the management device 300 via the communication device 132. The output control unit 131B receives content distributed from the management apparatus 300 and output control information, and performs output control on each output device of the output unit 120.
管理装置３００は、通信装置３１０、制御装置３２０及び記憶装置３３０を備えている。通信装置３１０は、商品陳列棚システム１００との間の通信制御を行う。記憶装置３３０は、制御装置３２０での制御に必要な情報や商品陳列棚システム１００から伝送されるセンサ検出情報などの各種情報を記憶する。 The management device 300 includes a communication device 310, a control device 320, and a storage device 330. The communication device 310 performs communication control with the merchandise display shelf system 100. The storage device 330 stores various information such as information necessary for control by the control device 320 and sensor detection information transmitted from the product display shelf system 100.
制御装置３２０は、分析制御部３２１、コンテンツ制御部３２２、及び学習制御部３２３を含んで構成されている。図４は、本実施形態の購買支援方法に含まれるセンシングユニット機能、アナリティクスユニット機能及び出力ユニット機能を説明するための図である。センシングユニット機能及び出力ユニット機能は、商品陳列棚システム１００によって実現され、アナリティクスユニット機能は、管理装置３００で実現される。 The control device 320 includes an analysis control unit 321, a content control unit 322, and a learning control unit 323. FIG. 4 is a diagram for explaining a sensing unit function, an analytic unit function, and an output unit function included in the purchase support method of the present embodiment. The sensing unit function and the output unit function are realized by the merchandise display shelf system 100, and the analytic unit function is realized by the management device 300.
図４に示すように、分析制御部３２１は、ユーザ特定処理、棚前心理分析処理、棚前行動分析処理、購買意欲分析処理の各処理を行う。 As illustrated in FIG. 4, the analysis control unit 321 performs each process of a user specifying process, a pre-shelf psychological analysis process, a pre-shelf behavior analysis process, and a purchase motivation analysis process.
ユーザ特定処理は、ユーザプロファイル登録・更新処理であり、カメラ１１０Ａで撮影されたユーザの画像データを用いて顔認識処理を行い、ユーザを特定（登録）する。例えば、ユーザの性別や年齢層を顔認識技術で分析し、ユーザプロファイルとして登録することができる。このとき、既に登録されたユーザプロファイルの顔画像とパターンマッチングを行い、新規ユーザかリピーターかを判別することができる。リピーターの場合、来店回数など来店履歴が、ユーザプロファイルとして登録・更新される。 The user identification process is a user profile registration / update process, which performs a face recognition process using the user image data captured by the camera 110A to identify (register) the user. For example, the user's gender and age group can be analyzed by face recognition technology and registered as a user profile. At this time, it is possible to determine whether the user is a new user or a repeater by performing pattern matching with the face image of the already registered user profile. In the case of a repeater, store visit history such as the number of visits is registered and updated as a user profile.
図５は、ユーザプロファイルの一例を示す図である。ユーザプロファイルは、ユーザの顔画像データ、性別、年齢層、表情、視線、商品手に取り情報、滞在時間、来店回数、購買履歴などを含んでいる。分析制御部３２１は、顔認識技術でユーザの性別、年齢層、表情、視線を把握し、ユーザプロファイルに登録する。また、後述する棚前行動分析に基づく商品手に取り情報、センシングユニット１１０を人感センサとして利用して検出した棚前滞在時間、上述した来店回数を登録することができる。 FIG. 5 is a diagram illustrating an example of a user profile. The user profile includes user face image data, gender, age group, facial expression, line of sight, merchandise information, staying time, number of visits, purchase history, and the like. The analysis control unit 321 grasps the gender, age group, facial expression, and line of sight of the user using face recognition technology, and registers them in the user profile. Further, it is possible to register information on the product based on the behavior analysis before the shelf described later, the stay time before the shelf detected by using the sensing unit 110 as a human sensor, and the number of visits described above.
分析制御部３２１で実行される顔認識技術は、既知の手法を適用することができる。例えば、特徴点やパターンを用いて顔画像を解析して性別、年齢層、表情などを検出することができる。また、可視カメラや赤外線カメラで撮影されたユーザの顔画像の目（虹彩、角膜、瞳孔）の位置を検出し、検出された目の位置に基づいて、商品陳列部２Ａ，２Ｂ，２Ｃに陳列されたユーザが見ている特定の商品を把握することができる。なお、商品陳列部２Ａ，２Ｂ，２Ｃに陳列された各商品及びその商品の位置情報は、予め記憶装置３３０に格納しておくことができる。 A known method can be applied to the face recognition technique executed by the analysis control unit 321. For example, gender, age group, facial expression, etc. can be detected by analyzing a face image using feature points and patterns. Further, the position of the eyes (iris, cornea, pupil) of the user's face image taken with a visible camera or infrared camera is detected, and displayed on the product display units 2A, 2B, 2C based on the detected eye position. It is possible to grasp a specific product viewed by the selected user. In addition, each product displayed on the product display units 2A, 2B, and 2C and position information of the product can be stored in the storage device 330 in advance.
購買履歴は、販売管理システム（ＰＯＳシステム）から取得することができる。例えば、レジ清算時にユーザの顔画像を取得し、販売管理システムは、レジ清算結果（購買した商品を識別する情報）とユーザの顔画像をセットにして、商品陳列棚システム１００を介してまたは直接に、管理装置３００に送信することができる。なお、ユーザの顔画像は、販売管理システムとは別に管理装置３００に送信してもよい。例えば、レジ清算時にレジから販売管理システムにＰＯＳ情報が送信されるタイミングに同期させて、レジにてユーザの顔画像を撮影し、管理装置３００に送信することができる。管理装置３００は、販売管理システムから取得したＰＯＳ情報のタイムスタンプと、取得されたユーザの顔画像のタイムスタンプとに基づいて両者を紐付けることができる。 The purchase history can be acquired from a sales management system (POS system). For example, the face image of the user is acquired at the time of checkout settlement, and the sales management system sets the checkout settlement result (information for identifying the purchased product) and the face image of the user as a set via the product display shelf system 100 or directly. To the management device 300. The user's face image may be transmitted to the management apparatus 300 separately from the sales management system. For example, the face image of the user can be taken at the cash register and transmitted to the management device 300 in synchronization with the timing at which the POS information is transmitted from the cash register to the sales management system at the checkout. The management apparatus 300 can associate the two based on the time stamp of the POS information acquired from the sales management system and the acquired time stamp of the face image of the user.
分析制御部３２１は、レジ清算結果（ＰＯＳ情報）に付随するユーザの顔画像を用いてユーザプロファイルを検索し、該当するユーザプロファイルに、購買した商品を購買履歴として記憶することができる。 The analysis control unit 321 can search the user profile using the user's face image associated with the cashier settlement result (POS information), and store the purchased product as a purchase history in the corresponding user profile.
棚前心理分析処理は、上述した顔認識処理によって特定されたユーザの表情や視線の動きに基づいて商品陳列棚システム１００の商品に対するユーザの棚前心理を分析する。 The pre-shelf psychological analysis process analyzes the user's pre-shelf psychology for the product of the product display shelf system 100 based on the user's facial expression and line-of-sight movement identified by the face recognition process described above.
棚前行動分析処理は、モーションセンサ１１０Ｂで検出されたユーザ行動と、静電容量センサ１１０Ｃで検出された商品の移動とを組み合わせて、ユーザが商品を手に取ったこと（商品手に取り情報）を分析する。商品手に取り情報は、棚前行動として把握される。また、上述のように、商品陳列棚システム１００に置かれた商品の位置情報は、予め記憶装置３３０に記憶しておくことができ、静電容量センサ１１０Ｃで検出される商品の位置情報も予め記憶されている。このため、実際に手に取られた商品がどの商品なのかを特定することができる。ユーザプロファイルに登録される商品手に取り情報としては、例えば、「商品Ａを手に取った」など、特定商品に対する手に取り行動を把握することができる。 The pre-shelf behavior analysis process combines the user behavior detected by the motion sensor 110B and the movement of the product detected by the capacitance sensor 110C, and the user picks up the product (information on the product hand). ). The information collected by the merchandise hand is grasped as a pre-shelf action. Further, as described above, the position information of the product placed on the product display shelf system 100 can be stored in the storage device 330 in advance, and the position information of the product detected by the capacitance sensor 110C is also stored in advance. It is remembered. For this reason, it is possible to specify which product is the product actually picked up. As the information on the product hand registered in the user profile, for example, it is possible to grasp the action taken on the hand for a specific product such as “I picked up the product A”.
購買意欲分析処理は、棚前心理分析処理による棚前心理分析結果と、棚前行動分析処理による棚前行動分析結果とを用いて、ユーザの購買意欲を分析する処理である。なお、棚前心理、棚前行動及び購買意欲の各分析処理の詳細については、後述する。 The purchase motivation analysis process is a process of analyzing the user's purchase motivation using the pre-shelf psychological analysis result by the pre-shelf psychological analysis process and the pre-shelf behavior analysis result by the pre-shelf behavior analysis process. The details of each analysis process of the pre-shelf psychology, the pre-shelf behavior, and the purchase motivation will be described later.
図６は、ユーザ行動（消費者行動）に基づく配信コンテンツの制御例を示す図である。コンテンツ制御部３２２は、ユーザ特定結果、棚前心理分析結果、棚前行動分析結果、購買意欲分析結果を複合的に用いて、商品陳列棚システム１００に提供するコンテンツ及び出力制御情報を抽出して配信する。 FIG. 6 is a diagram illustrating an example of distribution content control based on user behavior (consumer behavior). The content control unit 322 extracts the content and output control information to be provided to the product display shelf system 100 by using the user identification result, the pre-shelf psychological analysis result, the pre-shelf behavior analysis result, and the purchase intention analysis result in combination. To deliver.
図６に示すように、ユーザが商品陳列棚システム１００の前（棚前）に来ると、モーションセンサ１１０Ｂのセンサ検出情報に基づいて、ユーザが棚前に存在していることを把握する。このとき、カメラ１１０Ａでユーザの顔画像を撮影し、顔認識情報を用いてユーザを特定しつつ、ユーザの表情及び視線を把握する。 As shown in FIG. 6, when the user comes in front of the merchandise display shelf system 100 (in front of the shelf), the user knows that the user is in front of the shelf based on the sensor detection information of the motion sensor 110B. At this time, a user's face image is image | photographed with camera 110A, a user's facial expression and eyes | visual_axis are grasped | ascertained, specifying a user using face recognition information.
まず、ユーザの顔画像によるマッチングによりユーザプロファイルを特定する。ユーザプロファイルが存在する場合、既知のユーザとして、ユーザプロファイルの購買履歴を用いて商品候補を抽出し、抽出された商品候補に関係するコンテンツ（商品情報）を選択して商品陳列棚システム１００に送信する。一方、ユーザプロファイルが存在しない場合、新規ユーザであるとして、ユーザの顔画像から把握される性別、年齢層に適した商品候補を抽出し、抽出された商品候補に関係するコンテンツを選択して商品陳列棚システム１００に送信する。 First, a user profile is specified by matching with a user's face image. When a user profile exists, as a known user, a product candidate is extracted using the purchase history of the user profile, content (product information) related to the extracted product candidate is selected and transmitted to the product display shelf system 100 To do. On the other hand, if a user profile does not exist, it is assumed that the user is a new user, product candidates suitable for the gender and age group grasped from the user's face image are extracted, and content related to the extracted product candidates is selected and the product is selected. It transmits to the display shelf system 100.
このように、特定されたユーザプロファイルに基づくコンテンツ配信は、ユーザプロファイルに基づく消費者（ユーザ）の性別、年齢層、来店履歴及び購買履歴のいずれか１つ又は２以上の組み合わせに基づいて、コンテンツを選択し、出力ユニットに表示させるための配信処理を行うように構成することができる。例えば、来店回数が５回以上の女性リピーターの場合、来店回数が５回未満の女性リピーターや男性ユーザよりも、限定商品の優先予約情報を提供したり、高い割引が受けられるお得情報を提供したりすることができる。 As described above, content distribution based on the specified user profile is based on one or a combination of one or more of the gender, age group, visit history, and purchase history of the consumer (user) based on the user profile. Can be configured to perform distribution processing for displaying on the output unit. For example, for female repeaters who have visited the store more than 5 times, offer preferential reservation information for limited items or offer discounted deals over female repeaters and male users who have visited less than 5 times You can do it.
なお、管理装置３００の記憶部３３０には、商品陳列棚システム１００に提供する情報が格納されており、これらの情報がコンテンツとして提供される。例えば、購買履歴に商品に対して候補の商品を予め選定しておいたり、性別や年齢層毎の候補商品を予め選定しておいたりして、配信するコンテンツ情報を蓄積しておくことができる。 Note that information to be provided to the merchandise display shelf system 100 is stored in the storage unit 330 of the management apparatus 300, and such information is provided as content. For example, content information to be distributed can be accumulated by selecting candidate products for the product in the purchase history in advance, or selecting candidate products for each gender and age group in advance. .
次に、ユーザの視線情報に基づいて、例えば、商品Ｂを見ていると把握することができる。そこで、視線情報に基づいてユーザが見ている商品を特定し、特定された商品Ｂの商品説明情報や広告情報を抽出して商品陳列棚システム１００に送信することができる。このとき、実際にユーザが見ている商品Ｂに関連する商品説明情報や広告情報の表示において、エフェクト（強調や装飾）表示を行うように、出力（表示）制御情報を商品陳列棚システム１００に送信することができる。 Next, based on the user's line-of-sight information, for example, it can be understood that the product B is being viewed. Therefore, the product viewed by the user can be specified based on the line-of-sight information, and the product description information and advertisement information of the specified product B can be extracted and transmitted to the product display shelf system 100. At this time, output (display) control information is sent to the product display shelf system 100 so as to display an effect (emphasis or decoration) in the display of product description information and advertisement information related to the product B actually viewed by the user. Can be sent.
また、棚前のユーザ行動として、商品を手に取ったかを把握することができる。商品手に取り情報に基づいて、手に取った商品Ａに関連するコンテンツを抽出して商品陳列棚システム１００に送信したり、手に取った商品Ａに関連するお得情報を抽出して商品陳列棚システム１００に送信したりすることができる。お得情報とは、例えば、商品Ａと同時購入するとお得な（割引適用を受けられたり、組み合わせ効果が高い）商品Ｃを推薦する情報である。 In addition, it is possible to grasp whether the product is picked up as a user action before the shelf. Based on the information picked up by the product hand, the content related to the product A picked up is extracted and transmitted to the product display shelf system 100, or the profit information related to the product A picked up is extracted and the product is extracted. Or transmitted to the display shelf system 100. The profit information is, for example, information that recommends a product C that is advantageous when it is purchased together with the product A (a discount can be applied or a combination effect is high).
次に、本実施形態では、表情及び視線による棚前心理及び商品手に取り情報による棚前行動に基づいて、ユーザの購買意欲を分析し、分析された購買意欲に関連するコンテンツを抽出して商品陳列棚システム１００に送信する。ユーザの購買意欲に基づくコンテンツ配信及び表示制御は、例えば、表示中のコンテンツを購買意欲を後押しするようなコンテンツに切り替えたり、表示中のコンテンツをエフェクト処理して表示したり、音楽や音声を流したり、お得情報の追加表示したりなどが含まれる。 Next, in this embodiment, based on the pre-shelf psychology by facial expression and line of sight and the pre-shelf behavior by the product information, the user's purchase intention is analyzed, and the content related to the analyzed purchase intention is extracted. It transmits to the commodity display shelf system 100. Content distribution and display control based on the user's willingness to purchase, for example, can switch the displayed content to content that encourages the willingness to purchase, display the displayed content after effect processing, and play music and audio. Or additional display of deals.
このように本実施形態では、商品陳列棚システム１００の棚前ユーザアクションに基づいて、単に広告やお得情報を表示するだけではなく、ユーザの棚前心理及び棚前行動を把握して、ユーザの購買意欲に適したきめ細やかなコンテンツ配信及び表示制御を行う。 As described above, in this embodiment, based on the user action in front of the shelf of the product display shelf system 100, not only the advertisement and the profit information are displayed, but the user's mentality in front of the shelf and the action in front of the shelf are grasped, and the user Detailed content distribution and display control suitable for customers' willingness to purchase.
ユーザの棚前心理や購買意欲を総合的に把握するためには、１つのセンサ機器では不十分であり、本実施形態の商品陳列棚システム１００は、複数のセンサ機器を含むセンシングユニット１１０を備えており、ユーザの棚前心理や購買意欲を総合的に把握している。 One sensor device is insufficient to comprehensively grasp the user's pre-shelf psychology and willingness to purchase, and the product display shelf system 100 of this embodiment includes a sensing unit 110 including a plurality of sensor devices. And comprehensively grasp the user's pre-shelf psychology and willingness to purchase.
本実施形態の購買支援システムは、１つのセンサ機器に依存せずに、複数のセンサ機器を備えるセンシングユニット１１０で、消費者の属性（プロファイル）、棚前心理（心理状況）及び棚前行動を把握して管理装置３００に送信し、管理装置３００のアナリティクスユニットで、商品陳列棚システム１００の棚前のユーザの心理状況及び行動を分析してユーザの購買意欲を総合的に抽出する。そして、ユーザの心理状況や行動から総合的に把握された購買意欲に対して購買を促すコンテンツを、商品陳列棚システム１００の出力ユニット１２０を介して提供し、ユーザの購買行動を促進させることができる。 The purchase support system according to the present embodiment is not dependent on a single sensor device, but is a sensing unit 110 including a plurality of sensor devices. The consumer attribute (profile), pre-shelf psychology (psychological situation), and pre-shelf behavior are determined. It is grasped and transmitted to the management apparatus 300, and the analytic unit of the management apparatus 300 analyzes the psychological state and behavior of the user in front of the shelves of the product display shelf system 100 to comprehensively extract the user's willingness to purchase. Then, it is possible to provide the content that prompts the purchase to the purchase motivation comprehensively grasped from the user's psychological state and behavior through the output unit 120 of the merchandise display shelf system 100 to promote the purchase behavior of the user. it can.
図７は、本実施形態の棚前心理分析及び棚前行動分析の一例を示す図である。棚前心理分析は、撮影画像を用いてユーザの表情解析及び視線解析を行い、ユーザの表情と視線の両者から、ユーザの棚前心理を分析する。表情解析は、例えば、明るい、迷い、無表情といった表情の特徴点を予めパターン化しておき、ユーザの表情が「明るい」、「迷い」、「無表情」であるかを判別する。この他に「喜び」、「驚き」、「怒り」、「悲しみ」など、多様な表情解析も行うこともできる。 FIG. 7 is a diagram illustrating an example of the pre-shelf psychological analysis and the pre-shelf behavior analysis of the present embodiment. The pre-shelf psychological analysis performs user facial expression analysis and line-of-sight analysis using a photographed image, and analyzes the user's pre-shelf psychology from both the user's facial expression and line of sight. In facial expression analysis, for example, feature points of facial expressions such as bright, confused, and no expression are patterned in advance to determine whether the user's facial expression is “bright”, “confused”, or “no expression”. In addition, various facial expression analysis such as “joy”, “surprise”, “anger”, “sadness” can also be performed.
視線解析は、上述したように検出されるユーザの顔画像の目（虹彩、角膜、瞳孔）の位置が、所定の時間、所定範囲内に位置していれば、視線が一点に集中していると判別したり、所定の時間、所定範囲から外れて位置が上下左右に変動していれば、分散していると判別したりすることができる。 In the line-of-sight analysis, if the position of the eyes (iris, cornea, pupil) of the user's face image detected as described above is within a predetermined range for a predetermined time, the line of sight is concentrated on one point. Or if the position fluctuates up, down, left, and right for a predetermined time, it can be determined that it is dispersed.
棚前心理は、表情解析結果と視線解析結果の組み合わせにより、予めパターン化されており、図７（ａ）に示すように、棚前心理パターンＡ〜Ｅが、予め記憶装置３３０に記憶されている。分析制御部３２１は、表情解析結果及び視線解析結果を用いて、予め設定された棚前心理パターンを抽出し、ユーザの棚前心理を特定する。 The pre-shelf psychology is pre-patterned by a combination of the facial expression analysis result and the line-of-sight analysis result, and the pre-shelf psychological patterns A to E are stored in the storage device 330 in advance as shown in FIG. Yes. The analysis control unit 321 uses the facial expression analysis result and the line-of-sight analysis result to extract a pre-shelf psychological pattern that is set in advance and identifies the user's pre-shelf psychology.
棚前行動分析は、上述したように、モーションセンサ１１０Ｂで検出されたユーザ行動と、静電容量センサ１１０Ｃで検出された商品の移動とを組み合わせて、ユーザの商品手に取り行動（棚前行動パターン）を特定する。例えば、商品を手に取っていない、特定の商品を手に取った、手に取った特定の商品を棚に戻した、などを特定することができる。 As described above, the pre-shelf behavior analysis is performed by combining the user behavior detected by the motion sensor 110B and the movement of the merchandise detected by the capacitance sensor 110C. Pattern). For example, it is possible to specify that a product is not picked up, a specific product is picked up, a specific product picked up is returned to the shelf, and the like.
図８は、本実施形態の棚前心理及び棚前行動に基づく購買意欲分析結果と、購買意欲分析結果に対する配信コンテンツパターンの一例を示す図である。図８に示すように、購買意欲は、特定された棚前心理パターン及び棚前行動パターンの組み合わせにより、予めパターン化されており、パターン化された各分析結果が予め記憶装置３３０に記憶されている。分析制御部３２１は、棚前心理パターン及び棚前行動パターンを用いて、予め設定された購買意欲分析結果パターンを抽出し、ユーザの購買意欲を特定する。 FIG. 8 is a diagram illustrating an example of a purchase motivation analysis result based on the pre-shelf psychology and the pre-shelf behavior of the present embodiment, and a distribution content pattern for the purchase motivation analysis result. As shown in FIG. 8, the willingness to purchase is pre-patterned by a combination of the specified pre-shelf psychological pattern and pre-shelf behavior pattern, and each analysis result thus patterned is stored in the storage device 330 in advance. Yes. The analysis control unit 321 extracts a purchase intention analysis result pattern set in advance using the pre-shelf psychological pattern and the pre-shelf behavior pattern, and specifies the user's purchase intention.
コンテンツ制御部３２２は、分析制御部３２１で特定されたユーザの購買意欲に対応するコンテンツをコンテンツ群から抽出して、商品陳列棚システム１００に伝送する。記憶装置３３０には、購買意欲分析結果と配信するコンテンツとが紐付けられた配信コンテンツパターン（購買支援情報）が予め記憶されており、コンテンツ制御部３２２は、購買意欲分析結果を用いて配信コンテンツパターンを特定し、該当するコンテンツを記憶装置３３０に記憶されているコンテンツ群から抽出して商品陳列棚システム１００に送信する。 The content control unit 322 extracts content corresponding to the user's willingness to purchase specified by the analysis control unit 321 from the content group, and transmits the content to the product display shelf system 100. The storage device 330 stores in advance a distribution content pattern (purchase support information) in which a purchase intention analysis result and a content to be distributed are linked, and the content control unit 322 uses the purchase intention analysis result to distribute content. The pattern is specified, and the corresponding content is extracted from the content group stored in the storage device 330 and transmitted to the merchandise display shelf system 100.
なお、コンテンツ群に含まれる各コンテンツは、例えば、商品毎にコンテンツ１を複数用意することができ、分析結果１に対応する配信コンテンツパターンは、各商品に個別に設定することができる。したがって、コンテンツ制御部３２２は、例えば、分析結果１に対応するコンテンツ１を抽出するが、分析制御部３２１で特定されるユーザが手に取った特定の商品に対応するコンテンツ１をコンテンツ群から抽出して商品陳列棚システム１００に送信することができる。 Each content included in the content group can prepare, for example, a plurality of contents 1 for each product, and a distribution content pattern corresponding to the analysis result 1 can be individually set for each product. Therefore, for example, the content control unit 322 extracts the content 1 corresponding to the analysis result 1, but extracts the content 1 corresponding to the specific product picked up by the user specified by the analysis control unit 321 from the content group. Then, it can be transmitted to the merchandise display shelf system 100.
図９は、本実施形態の商品陳列棚を介した購買支援システムの処理フローを示す図である。図９に示すように、商品陳列棚システム１００は、センシングユニット１１０の動作制御を行い、センサ検出結果をリアルタイムに収集（取得）し（Ｓ１０１）、センシング情報として管理装置３００に送信する（Ｓ１０２）。 FIG. 9 is a diagram showing a processing flow of the purchase support system via the merchandise display shelf of the present embodiment. As shown in FIG. 9, the merchandise display shelf system 100 controls the operation of the sensing unit 110, collects (acquires) the sensor detection results in real time (S101), and transmits them to the management apparatus 300 as sensing information (S102). .
なお、商品陳列棚システム１００（コントロールユニット１３０）は、商品陳列棚システム１００に近づいてきたユーザが所定範囲内に入ったことを検出し、棚前にユーザがいることが検知されたことをトリガーに、センシングユニット１１０の動作制御や管理装置３００へのセンシング情報の送信制御を行うように構成することもできる。 The product display shelf system 100 (control unit 130) detects that a user approaching the product display shelf system 100 is within a predetermined range, and triggers that a user is detected in front of the shelf. In addition, it may be configured to perform operation control of the sensing unit 110 and transmission control of sensing information to the management apparatus 300.
管理装置３００は、商品陳列棚システム１００から受信したユーザの撮影画像を用いて、ユーザの顔画像を用いて、既に記憶（登録）されているユーザプロファイルの顔画像とマッチングして、ユーザプロファイルの登録有無を判別する（Ｓ３０１）。ユーザプロファイルが存在しない場合（Ｓ３０２のＮＯ）、管理装置３００は、新規ユーザであるとして、ユーザの顔画像から性別、年齢層を算出し（Ｓ３０３）、プロファイルを新規登録する（Ｓ３０４）。 The management device 300 uses the user's captured image received from the product display shelf system 100 to match the face image of the user profile that has already been stored (registered) using the user's face image. Whether registration is present is determined (S301). If the user profile does not exist (NO in S302), the management apparatus 300 determines that the user is a new user, calculates gender and age from the user's face image (S303), and newly registers the profile (S304).
既にユーザプロファイルが存在するとき（Ｓ３０２のＹＥＳ）及びユーザプロファイルが新規に登録されたとき、管理装置３００は、ユーザプロファイルに基づいてコンテンツを抽出する（Ｓ３１１）。 When a user profile already exists (YES in S302) and when a user profile is newly registered, the management apparatus 300 extracts content based on the user profile (S311).
次に、ステップＳ３０５において上述したユーザの棚前心理を特定し、特定された棚前心理に対応するコンテンツを抽出する（Ｓ３０６）。棚前心理が特定された後に又は棚前心理の特定と共に棚前行動が検知されたとき（Ｓ３０７のＹＥＳ）、ユーザの棚前行動を特定する（Ｓ３０８）。その後、特定された棚前心理及び棚前行動に基づくユーザの購買意欲を判別し（Ｓ３０９）、判別された購買意欲に基づくコンテンツを抽出する（Ｓ３１０）。このとき、上述したように、ステップＳ３０８において特定された棚前行動のみに関連するコンテンツを抽出することもできる。 Next, in step S305, the user's pre-shelf psychology is specified, and content corresponding to the specified pre-shelf psychology is extracted (S306). After the pre-shelf psychology is specified or when the pre-shelf behavior is detected (YES in S307), the user's pre-shelf behavior is specified (S308). Thereafter, the user's willingness to purchase based on the specified pre-shelf psychology and pre-shelf behavior is determined (S309), and content based on the determined purchasing motivation is extracted (S310). At this time, as described above, it is also possible to extract content related only to the pre-shelf behavior specified in step S308.
管理装置３００は、ユーザプロファイル、棚前心理、棚前行動、及び購買意欲に関連して抽出された各コンテンツの配信制御を行う（Ｓ３１２）。例えば、抽出されたコンテンツを単一で、又は複数のディスプレイに表示させるための配信処理を行う。 The management apparatus 300 performs distribution control of each content extracted in relation to the user profile, the pre-shelf psychology, the pre-shelf behavior, and the purchase intention (S312). For example, a distribution process for displaying the extracted content on a single or a plurality of displays is performed.
具体的には、モニタユニット１２０Ｂの各小型ディスプレイ装置に、各コンテンツを個別に表示したり、図６で説明したように、時系列にユーザプロファイル、棚前心理、棚前行動、及び購買意欲の順に、各コンテンツを切り替えて表示したりすることができる。また、ディスプレイ装置１２０Ａとモニタユニット１２０Ｂのそれぞれに、異なるコンテンツを表示することもでき、さらには、モニタユニット１２０Ｂを構成する複数の小型ディスプレイ装置Ｍ１〜Ｍ８それぞれに、異なるコンテンツを表示したり、複数の小型ディスプレイ装置Ｍ１〜Ｍ８を１つの表示部として、コンテンツを各小型ディスプレイ装置Ｍ１〜Ｍ８に区画して表示したりすることもできる。 Specifically, each content is individually displayed on each small display device of the monitor unit 120B, or as described with reference to FIG. 6, user profiles, pre-shelf psychology, pre-shelf behavior, and purchase intention In order, each content can be switched and displayed. Further, different contents can be displayed on each of the display device 120A and the monitor unit 120B. Further, different contents can be displayed on each of the plurality of small display devices M1 to M8 constituting the monitor unit 120B. The small display devices M1 to M8 may be used as one display unit, and the content may be partitioned into small display devices M1 to M8 for display.
また、モニタユニット１２０Ｂは、複数の小型ディスプレイ装置が横並びに配置されているので、各小型ディスプレイ装置に物語性のある複数のコンテンツを表示したりすることもできる。 In addition, since the monitor unit 120B has a plurality of small display devices arranged side by side, it is also possible to display a plurality of narrative contents on each small display device.
商品陳列棚システム１００は、管理装置３００から受信したコンテンツを出力ユニット１２０に表示したり、スピーカ１２０Ｃから音楽、音声、効果音などの音を出力させたり、香発生装置１２０Ｄから香りを出力させたりする制御を行う（Ｓ１０３）。これらの表示及び出力制御の制御情報は、管理装置３００から配信されるコンテンツと共に又は単独で受信することができる。 The merchandise display shelf system 100 displays the content received from the management device 300 on the output unit 120, outputs sounds such as music, voice, and sound effects from the speaker 120C, and outputs scent from the incense generator 120D. Control is performed (S103). These display and output control information can be received together with the content distributed from the management apparatus 300 or alone.
管理装置３００は、ステップＳ３１２における配信処理後、商品陳列棚システム１００から受信するセンシング情報に基づいて、商品陳列棚前のユーザが所定の棚前エリアから離脱しているか否かを判別し（Ｓ３１３）、離脱していない場合、ステップＳ３０５に戻り、リアルタイムで変化するセンシング情報に基づいて、棚前心理、棚前行動及び購買意欲に基づくコンテンツ抽出及び配信処理を繰り返し行う。なお、モーションセンサ１１０Ｂを人感センサとして用いているが、これに限らず別途の赤外線センサ等の人感センサを備えるように構成してもよい。 After the distribution process in step S312, the management apparatus 300 determines whether or not the user in front of the product display shelf has left the predetermined shelf area based on the sensing information received from the product display shelf system 100 (S313). ) If not, the process returns to step S305, and based on the sensing information that changes in real time, the content extraction and distribution processing based on the pre-shelf psychology, the pre-shelf behavior, and the purchase motivation are repeatedly performed. Although the motion sensor 110B is used as a human sensor, the present invention is not limited to this, and a human sensor such as a separate infrared sensor may be provided.
一方、商品陳列棚前のユーザが所定の棚前エリアから離脱していると判別された場合、ステップＳ３０１で特定されたユーザのユーザプロファイルを更新する。例えば、ステップＳ３０５で特定された棚前心理、ステップＳ３０８で特定された棚前行動をユーザプロファイルに登録する（Ｓ３１４）。また、販売管理システムから取得された商品購入情報に基づいて、ユーザプロファイルの購買履歴に購入した商品を登録する（Ｓ３１５）。そして、ユーザプロファイルの登録・更新後に、センシング情報に基づいて棚前エリアでユーザ（消費者）が検出されるまで待機する（Ｓ３１６）。なお、棚前エリアは、上述したように、棚前にユーザがいることが検知可能な範囲である。 On the other hand, if it is determined that the user in front of the merchandise display shelf has left the predetermined shelf front area, the user profile of the user specified in step S301 is updated. For example, the pre-shelf psychology specified in step S305 and the pre-shelf behavior specified in step S308 are registered in the user profile (S314). Further, based on the product purchase information acquired from the sales management system, the purchased product is registered in the purchase history of the user profile (S315). Then, after registration / update of the user profile, the process waits until a user (consumer) is detected in the front shelf area based on the sensing information (S316). In addition, as above-mentioned, a shelf front area is a range which can detect that a user exists in front of a shelf.
また、ステップＳ３１４，Ｓ３１５におけるユーザプロファイルの更新処理では、実際に商品陳列棚システム１００に配信されたコンテンツや出力制御情報（コンテンツ配信結果）を、ユーザプロファイルに関連付けて記憶装置３３０に記憶することができる。この処理は、コンテンツ制御部３２２が行うことができる。 In the user profile update process in steps S314 and S315, the content and output control information (content distribution result) actually distributed to the product display shelf system 100 may be stored in the storage device 330 in association with the user profile. it can. This processing can be performed by the content control unit 322.
次に、図４に戻り、本実施形態の機械学習機能について説明する。学習制御部３２３は、記憶装置３３０に蓄積されたユーザプロファイルの購買履歴及びコンテンツ配信結果を用いて、商品の購買に繋がったコンテンツパターンや商品の購買に繋がったユーザ行動パターンなどを抽出することができる。 Next, returning to FIG. 4, the machine learning function of this embodiment will be described. The learning control unit 323 may extract a content pattern that leads to purchase of a product, a user behavior pattern that leads to purchase of a product, and the like using the purchase history and content distribution result of the user profile stored in the storage device 330. it can.
例えば、商品Ａを見ていたユーザに対して配信したコンテンツＡと、商品Ａの購買数を比較し、購買数が所定数以上である場合に、コンテンツＡは購買促進に効果があると判別することができる。一方、購買数が所定数未満である場合、コンテンツＡは購買促進に効果がないと判別することができる。 For example, the content A distributed to the user who was viewing the product A is compared with the number of purchases of the product A. If the number of purchases is equal to or greater than a predetermined number, it is determined that the content A is effective in promoting purchases. be able to. On the other hand, when the number of purchases is less than the predetermined number, it can be determined that the content A has no effect on purchase promotion.
また、表情や視線、商品手に取り情報、性別、年齢層、滞在時間と組み合わせて、各コンテンツの効果を細かく分析し、学習制御部３２３は、ユーザプロファイル、棚前心理、棚前行動、及び購買意欲に関連して抽出される各コンテンツの組み合わせを変更するなどの機械学習を行うことができる。また、購買意欲分析結果を更新・削除したり、新たな購買分析結果を生成して追加したりすることができる。 In addition, the effect of each content is analyzed in detail in combination with facial expression, line of sight, product information, gender, age group, stay time, and the learning control unit 323 has a user profile, pre-shelf psychology, pre-shelf behavior, and It is possible to perform machine learning such as changing a combination of contents extracted in relation to purchase intention. Further, the purchase intention analysis result can be updated / deleted, or a new purchase analysis result can be generated and added.
図１０から図１４は、本実施形態の購買支援システムを適用した購買支援方法の一例を示す図である。図１０は、購買支援システムを「化粧品売り場」に適用した際の購買支援方法の一例を示す図である。 10 to 14 are diagrams illustrating an example of a purchase support method to which the purchase support system of the present embodiment is applied. FIG. 10 is a diagram illustrating an example of a purchase support method when the purchase support system is applied to a “cosmetic department”.
図１０の例では、カメラ１１０Ａで撮影されたユーザの顔画像に、ユーザが手に取った化粧品の質感を重畳させて、ユーザが使用した時の状況を表示したり（ＡＲ技術）、テスター（香発生装置１２０Ｄ）で手に取った商品の香りを出力したりしている。また、ユーザプロファイルに基づいてユーザがリピーターである場合、来店回数に応じた割引情報を出力したりすることもできる。 In the example of FIG. 10, the user's facial image captured by the camera 110A is superimposed on the texture of the cosmetics taken by the user to display the situation when the user uses (AR technology) or a tester ( The scent of the product picked up by the scent generator 120D) is output. In addition, when the user is a repeater based on the user profile, discount information corresponding to the number of visits can be output.
図１１は、購買支援システムを「ゲームコーナー」に適用した際の購買支援方法の一例を示す図である。図１１の例では、特定される性別や年齢層に基づいて、適切な人気ゲームランキングを表示したり、ユーザが見ているゲーム（商品）の模擬プレイ映像を表示したり、関連グッズを表示したりしている。また、音声出力としては、ゲームキャラクタの音声を出力したりすることもできる。 FIG. 11 is a diagram illustrating an example of a purchase support method when the purchase support system is applied to a “game corner”. In the example of FIG. 11, an appropriate popular game ranking is displayed based on the specified gender and age group, a simulated play video of a game (product) that the user is viewing, and related goods are displayed. It is. In addition, as voice output, the voice of the game character can be output.
図１２は、購買支援システムを「お弁当コーナー」に適用した際の購買支援方法の一例を示す図である。図１２の例では、見ているお弁当の栄養やカロリーを表示したり、棚を見渡している場合に各お弁当の調理工程をモニタユニット１２０Ｂの各小型ディスプレイ装置に順次表示したり、動画をディスプレイ装置１２０Ａに表示したりしている。 FIG. 12 is a diagram illustrating an example of a purchase support method when the purchase support system is applied to a “lunch box corner”. In the example of FIG. 12, the nutrition and calories of the lunch box being viewed are displayed, the cooking process of each lunch box is sequentially displayed on each small display device of the monitor unit 120B when looking over the shelf, Or displayed on the display device 120A.
図１３は、購買支援システムを「洋服コーナー」に適用した際の購買支援方法の一例を示す図である。図１３の例では、特定される性別や年齢層に適切なアクセサリーや洋服情報を表示したり、ユーザプロファイルの購入履歴に基づいてコーディネイト情報などを表示したりしている。また、見ている洋服の色違いの洋服やサイズ情報を表示したり、カメラ１１０Ａで撮影されたユーザの全身画像に、ユーザが手に取った洋服やアクセサリーの画像を重畳させて、ユーザが着用した時の状況を表示したり（ＡＲ技術）することができる。 FIG. 13 is a diagram illustrating an example of a purchase support method when the purchase support system is applied to the “clothing corner”. In the example of FIG. 13, accessories and clothes information appropriate for the specified gender and age group are displayed, and coordinate information is displayed based on the purchase history of the user profile. Also, the user can wear different colors and clothing size information of the clothes they are looking at, or superimpose images of clothes and accessories taken by the user on the user's whole body image taken by the camera 110A. It is possible to display the situation at the time (AR technology).
図１４は、購買支援システムを「お肉コーナー」に適用した際の購買支援方法の一例を示す図である。図１４の例では、焼き肉の香りを香発生装置１２０Ｄから出力したり、お肉を焼いている音をスピーカ１２０Ｃから出力したり、見ているお肉や手に取ったお肉の栄養情報、カロリー、料理レシピを表示したりしている。 FIG. 14 is a diagram illustrating an example of a purchase support method when the purchase support system is applied to the “meat corner”. In the example of FIG. 14, the scent of grilled meat is output from the scent generating device 120D, the sound of grilling meat is output from the speaker 120C, the nutrition information of the meat being viewed and the meat taken by the hand, It displays calories and cooking recipes.
そして、図１０から図１４に例示した各購買支援方法においても、商品陳列棚システム１００の棚前ユーザアクションに基づいて、単に広告やお得情報を表示するだけではなく、ユーザの棚前心理及び棚前行動を把握して、ユーザの購買意欲に適したきめ細やかなコンテンツ配信及び表示制御を行うことができる。 And in each purchase support method illustrated in FIG. 10 to FIG. 14, based on the user action in front of the shelf of the product display shelf system 100, not only simply displaying advertisements and profit information, By grasping the pre-shelf behavior, it is possible to perform fine content distribution and display control suitable for the user's willingness to purchase.
以上、実施形態について説明したが、商品陳列棚システム１００のコントロールユニット１３０は、無線又は有線でセンシングユニット１１０及び出力ユニット１２０と接続して、商品陳列棚に対して物理的に外部に設けることも可能である。 Although the embodiment has been described above, the control unit 130 of the product display shelf system 100 may be physically or externally connected to the product display shelf by connecting to the sensing unit 110 and the output unit 120 wirelessly or by wire. Is possible.
また、管理装置３００が、ネットワークを介して商品陳列棚システム１００にコンテンツを配信しているが、これに限らず、例えば、所定のタイミングで管理装置３００から商品陳列棚システム１００にコンテンツデータを一括して配信し、コントロールユニット１３０側にコンテンツを予め記憶しておくことができる。この場合、管理装置３００は、コンテンツデータ（画像、映像、文字情報等の実データ）は送信せずに、各コンテンツの出力制御情報を生成・抽出して商品陳列棚システム１００に送信することができる。コントロールユニット１３０は、受信した出力制御情報に基づいて記憶装置１３３に予め記憶されたコンテンツを抽出して出力ユニット１２０の出力制御を行うことができる。 In addition, the management apparatus 300 distributes content to the product display shelf system 100 via the network. However, the present invention is not limited to this, and for example, content data is collectively collected from the management apparatus 300 to the product display shelf system 100 at a predetermined timing. And the content can be stored in advance on the control unit 130 side. In this case, the management apparatus 300 may generate and extract output control information for each content and transmit it to the product display shelf system 100 without transmitting content data (actual data such as images, videos, and character information). it can. The control unit 130 can extract the content stored in advance in the storage device 133 based on the received output control information and perform output control of the output unit 120.
また、管理装置３００は、ハードウェア構成として上述以外にも、液晶ディスプレイなどの表示装置、装置全体（各部）の制御を司るＣＰＵ、メモリ（主記憶装置）、マウス、キーボード、タッチパネル、スキャナー等の操作入力手段、プリンタ、スピーカなどの出力手段、補助記憶装置（ハードディスク等）等を備えることができる。 In addition to the above-described hardware configuration, the management device 300 includes a display device such as a liquid crystal display, a CPU that controls the entire device (each unit), a memory (main storage device), a mouse, a keyboard, a touch panel, a scanner, and the like. Operation input means, output means such as a printer and a speaker, an auxiliary storage device (hard disk or the like), and the like can be provided.
また、本発明の各機能は、プログラムによって実現可能であり、各機能を実現するために予め用意されたコンピュータプログラムが補助記憶装置に格納され、ＣＰＵ等の制御部が補助記憶装置に格納されたプログラムを主記憶装置に読み出し、主記憶装置に読み出された該プログラムを制御部が実行することで、コンピュータ装置に本発明の各部の機能を動作させることができる。他方、本発明の各機能は、各々個別の制御装置で構成することができ、複数の制御装置を直接に又はネットワークを介して接続して構成することもできる。 In addition, each function of the present invention can be realized by a program, a computer program prepared in advance for realizing each function is stored in the auxiliary storage device, and a control unit such as a CPU is stored in the auxiliary storage device. By reading the program into the main storage device and executing the program read into the main storage device, the control unit can cause the computer device to operate the functions of the respective units of the present invention. On the other hand, each function of the present invention can be configured by individual control devices, and a plurality of control devices can be connected directly or via a network.
また、上記プログラムは、コンピュータ読取可能な記録媒体に記録された状態で、コンピュータに提供することも可能である。コンピュータ読取可能な記録媒体としては、ＣＤ−ＲＯＭ等の光ディスク、ＤＶＤ−ＲＯＭ等の相変化型光ディスク、ＭＯ（Magnet Optical）やＭＤ(Mini Disk)などの光磁気ディスク、フロッピー（登録商標）ディスクやリムーバブルハードディスクなどの磁気ディスク、コンパクトフラッシュ（登録商標）、スマートメディア、SDメモリカード、メモリスティック等のメモリカードが挙げられる。また、本発明の目的のために特別に設計されて構成された集積回路（ICチップ等）等のハードウェア装置も記録媒体として含まれる。 Further, the program can be provided to a computer in a state where the program is recorded on a computer-readable recording medium. Computer-readable recording media include optical disks such as CD-ROM, phase change optical disks such as DVD-ROM, magneto-optical disks such as MO (Magnet Optical) and MD (Mini Disk), floppy (registered trademark) disks, Examples include magnetic disks such as removable hard disks, memory cards such as compact flash (registered trademark), smart media, SD memory cards, and memory sticks. A hardware device such as an integrated circuit (IC chip or the like) specially designed and configured for the purpose of the present invention is also included as a recording medium.
１：棚本体部
２Ａ，２Ｂ，２Ｃ：商品陳列部
１００：商品陳列棚システム
１１０：センシングユニット
１１０Ａ：カメラ
１１０Ｂ：モーションセンサ
１１０Ｃ：静電容量センサ
１２０：出力ユニット
１２０Ａ：ディスプレイ装置
１２０Ｂ：モニタユニット
１２０Ｃ：スピーカ
１２０Ｄ：香発生装置
１３０：コントロールユニット
１３１：制御装置
１３１Ａ：センサ制御部
１３１Ｂ：出力制御部
１３２：通信装置
１３３：記憶装置
３００：管理装置
３１０：通信装置
３２０：制御装置
３２１：分析制御部
３２２：コンテンツ制御部
３２３：学習制御部
３３０：記憶装置
1: Shelf body 2A, 2B, 2C: Product display unit 100: Product display shelf system 110: Sensing unit 110A: Camera 110B: Motion sensor 110C: Capacitance sensor 120: Output unit 120A: Display device 120B: Monitor unit 120C : Speaker 120D: Incense generating device 130: Control unit 131: Control device 131A: Sensor control unit 131B: Output control unit 132: Communication device 133: Storage device 300: Management device 310: Communication device 320: Control device 321: Analysis control unit 322: Content control unit 323: Learning control unit 330: Storage device
Claims (6)
棚前に位置する消費者の顔画像を取得する第１センサ機器と、商品陳列棚に陳列された商品に対する消費者の動きを取得する第２センサ機器とを含み、商品陳列棚に設けられるセンシングユニットと、
商品陳列棚に設けられ、所定のコンテンツを表示する出力ユニットと、を備える商品陳列棚システムと、
前記商品陳列棚システムとネットワークを介して接続され、前記センシングユニットで取得された各センサ検出情報を受信して消費者の購買意欲を判別し、棚前に位置する消費者に対して前記購買意欲に応じた前記コンテンツを前記出力ユニットに表示させるための配信処理を行う管理装置と、を有し、
前記管理装置は、
前記顔画像から検出される消費者の表情及び視線に基づいて棚前心理パターンを特定し、かつ商品に対する消費者の動きに基づいて棚前行動パターンを特定し、特定された前記棚前心理パターン及び前記棚前行動パターンに対応する消費者の購買意欲パターンを判別する分析制御部と、
複数の前記購買意欲パターン毎に前記コンテンツを関連付けた購買支援情報を記憶する記憶部と、
判別された消費者の前記購買意欲パターンに基づいて前記コンテンツを選択し、前記出力ユニットに表示させるための配信処理を行うコンテンツ制御部と、
を有することを特徴とする購買支援システム。 Product display shelves,
Sensing provided on a merchandise display shelf, including a first sensor device that acquires a facial image of a consumer located in front of the shelves and a second sensor device that acquires consumer movements for the merchandise displayed on the merchandise display shelves Unit,
A product display shelf system provided on the product display shelf and including an output unit for displaying predetermined content;
Connected to the product display shelf system via a network, receives each sensor detection information acquired by the sensing unit to determine a consumer's willingness to purchase, and the consumer who is in front of the shelf A management device that performs a distribution process for causing the output unit to display the content according to
The management device
The pre-shelf psychological pattern is specified based on the consumer's facial expression and line of sight detected from the face image, and the pre-shelf behavior pattern is specified based on the consumer's movement with respect to the product. And an analysis control unit for discriminating a consumer's purchase willing pattern corresponding to the pre-shelf behavior pattern;
A storage unit that stores purchase support information in which the content is associated with each of a plurality of purchase willing patterns;
A content control unit that performs distribution processing for selecting the content based on the determined consumer's purchase willing pattern and displaying the content on the output unit;
A purchase support system characterized by comprising:
前記分析制御部は、前記第２センサ機器及び前記第３センサ機器のセンサ検出情報を組み合わせて消費者が特定の商品を手に取ったか否かを前記棚前行動パターンとして特定することを特徴とする請求項１に記載の購買支援システム。 The sensing unit further includes a third sensor device that detects the movement of the product displayed on the product display shelf,
The analysis control unit identifies whether the consumer has picked up a specific product as the action pattern before the shelf by combining sensor detection information of the second sensor device and the third sensor device. The purchase support system according to claim 1.
前記コンテンツ制御部は、前記ユーザプロファイル情報に基づく消費者の前記性別、前記年齢層、前記来店履歴及び前記購買履歴のいずれか１つ又は２以上の組み合わせに基づいて、前記コンテンツを選択し、前記出力ユニットに表示させるための配信処理を行うことを特徴とする請求項１から３のいずれか１つに記載の購買支援システム。 The analysis control unit extracts consumer attributes including a sex and an age group of the consumer from the face image based on a predetermined face recognition process, and user profile information associated with the face image and the consumer attribute is extracted. Generating and storing in the storage unit, specifying the user profile information stored in the storage unit by performing pattern matching based on the face image, and a store visit history to a store where a product display shelf is installed; Storing the purchase history of the products displayed on the product display shelf acquired from a predetermined sales management system for managing the sales history of the store in association with the specified user profile information;
The content control unit selects the content based on any one or a combination of two or more of the gender, the age group, the store visit history, and the purchase history of the consumer based on the user profile information, The purchase support system according to any one of claims 1 to 3, wherein a distribution process for displaying on the output unit is performed.
前記出力ユニットに表示させるための配信処理の結果と前記購買履歴とに基づいて、商品の購買に繋がった前記配信処理の結果を消費者の前記棚前心理パターン、前記棚前行動パターン、及び前記購買意欲毎に評価する学習制御部をさらに備えることを特徴とする請求項１から３のいずれか１つに記載の購買支援システム。 The analysis control unit generates user profile information associated with the face image and stores the user profile information in the storage unit, and performs pattern matching based on the face image and stores the user profile information stored in the storage unit. Specifying and storing the purchase history of the product displayed on the product display shelf acquired from a predetermined sales management system for managing the sales history of the store in association with the user profile information,
Based on the result of the distribution process for displaying on the output unit and the purchase history, the result of the distribution process that led to the purchase of the product is the consumer's pre-shelf psychological pattern, the pre-shelf behavior pattern, and the The purchase support system according to claim 1, further comprising a learning control unit that evaluates each purchase intention.
前記第２ディスプレイ装置は、複数の表示装置を横並びにユニット化したモニタユニットであり、
前記コンテンツ制御部は、１つ又は複数の前記コンテンツを、前記第１ディスプレイ装置及び第２ディスプレイ装置それぞれに表示させるための配信処理を行うとともに、前記第２ディスプレイ装置の各表示装置に異なる前記コンテンツを表示させるための配信処理を行うことを特徴とする請求項１から５のいずれか１つに記載の購買支援システム。
The output unit includes a first display device and a second display device for displaying the predetermined content,
The second display device is a monitor unit in which a plurality of display devices are arranged side by side,
The content control unit performs distribution processing for displaying one or a plurality of the contents on each of the first display device and the second display device, and the content is different for each display device of the second display device. The purchase support system according to claim 1, wherein a distribution process for displaying is performed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016179827A JP6810561B2 (en) | 2016-09-14 | 2016-09-14 | Purchasing support system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016179827A JP6810561B2 (en) | 2016-09-14 | 2016-09-14 | Purchasing support system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018045454A true JP2018045454A (en) | 2018-03-22 |
| JP6810561B2 JP6810561B2 (en) | 2021-01-06 |
Family
ID=61694821
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016179827A Active JP6810561B2 (en) | 2016-09-14 | 2016-09-14 | Purchasing support system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6810561B2 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110689290A (en) * | 2018-07-06 | 2020-01-14 | 北京京东尚科信息技术有限公司 | Commodity selling method and device |
| JP2020057136A (en) * | 2018-10-01 | 2020-04-09 | 大日本印刷株式会社 | Marketing promotion system |
| JP2021081949A (en) * | 2019-11-19 | 2021-05-27 | 株式会社日立国際電気 | Video editing system |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010027043A (en) * | 2008-06-16 | 2010-02-04 | Dainippon Printing Co Ltd | Processor, processing method, program, and sensor system |
| JP2012208854A (en) * | 2011-03-30 | 2012-10-25 | Nippon Telegraph & Telephone East Corp | Action history management system and action history management method |
| JP2013114595A (en) * | 2011-11-30 | 2013-06-10 | Canon Inc | Information processor, information processing method, and program |
| JP2014026350A (en) * | 2012-07-24 | 2014-02-06 | Takashi Hirabayashi | Interest level measurement system, interest level measurement device, and interest level measurement program |
| JP2014517371A (en) * | 2011-04-11 | 2014-07-17 | インテル コーポレイション | System and method for selecting personalized advertisements |
| WO2015033577A1 (en) * | 2013-09-06 | 2015-03-12 | 日本電気株式会社 | Customer behavior analysis system, customer behavior analysis method, non-temporary computer-readable medium, and shelf system |
| US20150088641A1 (en) * | 2013-09-26 | 2015-03-26 | Panasonic Corporation | Method for providing information and information providing system |
| JP2015111431A (en) * | 2011-07-29 | 2015-06-18 | パナソニックＩｐマネジメント株式会社 | Computer system and method of managing store aisle |
| JP2015156211A (en) * | 2014-01-17 | 2015-08-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | Product displaying method and information display method |
| JP2016038877A (en) * | 2014-08-11 | 2016-03-22 | カシオ計算機株式会社 | Display system and display method |
-
2016
- 2016-09-14 JP JP2016179827A patent/JP6810561B2/en active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010027043A (en) * | 2008-06-16 | 2010-02-04 | Dainippon Printing Co Ltd | Processor, processing method, program, and sensor system |
| JP2012208854A (en) * | 2011-03-30 | 2012-10-25 | Nippon Telegraph & Telephone East Corp | Action history management system and action history management method |
| JP2014517371A (en) * | 2011-04-11 | 2014-07-17 | インテル コーポレイション | System and method for selecting personalized advertisements |
| JP2015111431A (en) * | 2011-07-29 | 2015-06-18 | パナソニックＩｐマネジメント株式会社 | Computer system and method of managing store aisle |
| JP2013114595A (en) * | 2011-11-30 | 2013-06-10 | Canon Inc | Information processor, information processing method, and program |
| JP2014026350A (en) * | 2012-07-24 | 2014-02-06 | Takashi Hirabayashi | Interest level measurement system, interest level measurement device, and interest level measurement program |
| WO2015033577A1 (en) * | 2013-09-06 | 2015-03-12 | 日本電気株式会社 | Customer behavior analysis system, customer behavior analysis method, non-temporary computer-readable medium, and shelf system |
| US20150088641A1 (en) * | 2013-09-26 | 2015-03-26 | Panasonic Corporation | Method for providing information and information providing system |
| JP2015088166A (en) * | 2013-09-26 | 2015-05-07 | パナソニックＩｐマネジメント株式会社 | Information provide method |
| JP2015156211A (en) * | 2014-01-17 | 2015-08-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | Product displaying method and information display method |
| JP2016038877A (en) * | 2014-08-11 | 2016-03-22 | カシオ計算機株式会社 | Display system and display method |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110689290A (en) * | 2018-07-06 | 2020-01-14 | 北京京东尚科信息技术有限公司 | Commodity selling method and device |
| CN110689290B (en) * | 2018-07-06 | 2023-09-29 | 北京京东尚科信息技术有限公司 | Commodity selling method and device |
| JP2020057136A (en) * | 2018-10-01 | 2020-04-09 | 大日本印刷株式会社 | Marketing promotion system |
| JP2021081949A (en) * | 2019-11-19 | 2021-05-27 | 株式会社日立国際電気 | Video editing system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6810561B2 (en) | 2021-01-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11074610B2 (en) | Sales promotion system, sales promotion method, non-transitory computer readable medium, and shelf system | |
| US10074129B2 (en) | Virtual reality system including smart objects | |
| US9940589B2 (en) | Virtual reality system including viewer responsiveness to smart objects | |
| US10026116B2 (en) | Methods and devices for smart shopping | |
| US20160203499A1 (en) | Customer behavior analysis system, customer behavior analysis method, non-transitory computer readable medium, and shelf system | |
| US20140363059A1 (en) | Retail customer service interaction system and method | |
| US20110010266A1 (en) | Virtual reality system for environment building | |
| US20100153174A1 (en) | Generating Retail Cohorts From Retail Data | |
| JP7057077B2 (en) | Purchasing support system | |
| WO2015173869A1 (en) | Product-information output method, product-information output program, and control device | |
| EP2136329A2 (en) | Comprehensive computer implemented system and method for adapting the content of digital signage displays | |
| JP6810561B2 (en) | Purchasing support system | |
| JP6565639B2 (en) | Information display program, information display method, and information display apparatus | |
| CN110322262A (en) | Shops's information processing method, device and shops's system | |
| WO2018230356A1 (en) | Information presentation system | |
| TW201942836A (en) | Store system, article matching method and apparatus, and electronic device | |
| CN110866810A (en) | Intelligent retail system | |
| KR20230044382A (en) | Advertising curation system using face recognition and IoT technology | |
| US20240013287A1 (en) | Real time visual feedback for augmented reality map routing and item selection | |
| WO2008081413A1 (en) | Virtual reality system for environment building | |
| WO2008081411A1 (en) | Virtual reality system including smart objects | |
| Barbara et al. | Extended store: How digitalization effects the retail space design | |
| JP2022072337A (en) | Information processing method, program, furniture, information processor, and information processing system | |
| Liu et al. | Interactive point system supporting point classification and spatial visualization | |
| JP6842507B2 (en) | Product information provision system, product information provision method and product information provision program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190905 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200727 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201208 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201211 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6810561 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |