JP2021111422A - Program, display control method, display control device, and signage system - Google Patents
Program, display control method, display control device, and signage system Download PDFInfo
- Publication number
- JP2021111422A JP2021111422A JP2021015950A JP2021015950A JP2021111422A JP 2021111422 A JP2021111422 A JP 2021111422A JP 2021015950 A JP2021015950 A JP 2021015950A JP 2021015950 A JP2021015950 A JP 2021015950A JP 2021111422 A JP2021111422 A JP 2021111422A
- Authority
- JP
- Japan
- Prior art keywords
- display
- touch panel
- panel display
- image
- operation information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 230000008569 process Effects 0.000 claims description 61
- 238000012545 processing Methods 0.000 claims description 56
- 230000006854 communication Effects 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 14
- 230000002708 enhancing effect Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 7
- 238000009434 installation Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 102100035353 Cyclin-dependent kinase 2-associated protein 1 Human genes 0.000 description 1
- 101000760620 Homo sapiens Cell adhesion molecule 1 Proteins 0.000 description 1
- 101000737813 Homo sapiens Cyclin-dependent kinase 2-associated protein 1 Proteins 0.000 description 1
- 101000911772 Homo sapiens Hsc70-interacting protein Proteins 0.000 description 1
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 101000710013 Homo sapiens Reversion-inducing cysteine-rich protein with Kazal motifs Proteins 0.000 description 1
- 101000661816 Homo sapiens Suppression of tumorigenicity 18 protein Proteins 0.000 description 1
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 108090000237 interleukin-24 Proteins 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Abstract
Description
本発明は、タッチパネルディスプレイの表示制御を行うプログラム、表示制御方法、表示制御装置及びサイネージシステムに関するものである。 The present invention relates to a program for controlling the display of a touch panel display, a display control method, a display control device, and a signage system.
タッチパネルディスプレイを用いた表示装置を用いて、広告表示や告知を行うサイネージシステムがある。
従来から、タッチパネルディスプレイにタッチして行われる操作に応じて、表示する動画を含む画像を一方的に生成して表示することが行われている。
There is a signage system that displays advertisements and makes announcements using a display device that uses a touch panel display.
Conventionally, an image including a moving image to be displayed has been unilaterally generated and displayed in response to an operation performed by touching the touch panel display.
ところで、従来のサイネージシステムによる広告表示や告知の効果を高めたいという要請がある。
また、サイネージシステムによる広告表示や告知の効果を測定したいという要請がある。例えば、どのような属性を持つ人がどのような広告に興味を持った可能性があるかを測定したいという要請がある。
By the way, there is a demand to enhance the effect of advertisement display and notification by the conventional signage system.
In addition, there is a request to measure the effect of advertisement display and notification by the signage system. For example, there is a desire to measure what attributes a person may have been interested in what kind of advertisement.
本発明はかかる事情に鑑みてなされたものであり、その目的は、タッチパネルディスプレイによる広告表示や告知の効果を高めることができるプログラム、表示制御方法、表示制御装置及びサイネージシステムを提供することである。
また、その他も目的は、タッチパネルディスプレイによる広告表示や告知の効果を測定することができるプログラム、表示制御方法、表示制御装置及びサイネージシステムを提供することである。
The present invention has been made in view of such circumstances, and an object of the present invention is to provide a program, a display control method, a display control device, and a signage system capable of enhancing the effect of advertisement display and notification by a touch panel display. ..
Another object is to provide a program, a display control method, a display control device, and a signage system capable of measuring the effect of advertisement display and notification by a touch panel display.
上述した従来技術の問題点を解決し、上述した目的を達成するために、本発明の第1の観点のプログラムは、 タッチパネルディスプレイ及び当該タッチパネルディスプレイを操作する操作者を撮像するカメラを備えた表示装置と通信ネットワークを介して通信を行い、前記表示装置に表示する画像を制御する表示制御装置が実行するプログラムであって、前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像と関連付けて記憶する記憶処理と、前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理とを前記表示制御装置に実行させる。 In order to solve the above-mentioned problems of the prior art and achieve the above-mentioned object, the program of the first aspect of the present invention includes a touch panel display and a display including a camera that images an operator who operates the touch panel display. A program executed by a display control device that communicates with a device via a communication network and controls an image displayed on the display device, and includes operation information of the touch panel display received from the display device and the operation information. A storage process that is stored in association with an image captured by the camera received from the associated display device, and a viewing status of the display on the touch panel display based on the operation information and the captured image stored in the storage process. The display control device is made to execute the browsing information generation process for generating the browsing information indicating.
好適には、前記表示制御装置は、顔認証処理を行う顔認証サーバに前記撮像画像を送信し、前記顔認証サーバから顔認証結果を受信する顔認証通信処理を行い、前記閲覧情報生成処理は、前記顔認証通信処理に応じて前記顔認証サーバから受信した顔認証結果を基に前記閲覧情報を生成する。 Preferably, the display control device performs the face recognition communication process of transmitting the captured image to the face recognition server that performs the face recognition process and receiving the face recognition result from the face recognition server, and the browsing information generation process is performed. , The browsing information is generated based on the face recognition result received from the face recognition server in response to the face recognition communication process.
好適には、前記記憶処理で記憶された前記操作情報と、前記顔認証通信処理に応じて前記顔認証サーバから受信した顔認証結果とを基に、前記タッチパネルディスプレイの表示画像を見たが操作をしていない人の属性と、前記タッチパネルディスプレイを操作した操作者の属性との少なくとも一方を特定する属性特定処理を行う。 Preferably, the display image of the touch panel display is viewed but operated based on the operation information stored in the storage process and the face recognition result received from the face recognition server in response to the face recognition communication process. The attribute specifying process for specifying at least one of the attribute of the person who does not perform the operation and the attribute of the operator who operates the touch panel display is performed.
好適には、前記撮像画像を基に顔画像認識の可能性が一定以上あるかの判定処理をさらに行い、前記顔認証通信処理は、前記判定処理で顔画像認識の可能性が一定以上あると判定したことを条件に、顔認証サーバに前記撮像画像を送信する。 Preferably, the face image recognition possibility is further performed based on the captured image, and the face recognition communication process is said to have a face image recognition possibility in the determination process. The captured image is transmitted to the face recognition server on condition that the determination is made.
好適には、前記顔認証通信処理は、前記撮像画像を基に、前記操作者が前記タッチパネルディスプレイの正面に顔を向けたタイミングを特定し、当該特定したタイミングの撮像画像を前記顔認証サーバに送信する。 Preferably, in the face recognition communication process, the timing at which the operator turns his / her face toward the front of the touch panel display is specified based on the captured image, and the captured image at the specified timing is sent to the face recognition server. Send.
好適には、前記操作情報と前記撮像画像とを基に、前記操作者毎に、当該操作者が前記操作を行った時間を特定する分析処理をさらに行う。 Preferably, based on the operation information and the captured image, an analysis process for specifying the time during which the operator has performed the operation is further performed for each operator.
好適には、前記関連付けられた前記操作情報と前記撮像画像を基に前記タッチパネルディスプレイを操作した操作者の属性を特定し、当該属性を基に、タッチパネルディスプレイに表示した商品又はサービスを前記操作者が購入する可能性を特定する購入可能性特定処理を行う。 Preferably, the attribute of the operator who operates the touch panel display is specified based on the associated operation information and the captured image, and the product or service displayed on the touch panel display is displayed on the touch panel display based on the attribute. Performs a purchase possibility identification process to identify the possibility of purchase.
好適には、前記記憶処理で記憶された前記操作情報と前記撮像画像を基に、前記タッチパネルディスプレイの操作者に適合した画像を前記タッチパネルディスプレイに表示する表示処理を行い、前記表示処理では、前記購入可能性特定処理で特定した前記可能性を基に、前記タッチパネルディスプレイに表示を行う。 Preferably, based on the operation information stored in the storage process and the captured image, a display process of displaying an image suitable for the operator of the touch panel display on the touch panel display is performed, and in the display process, the display process is performed. Based on the possibility specified in the purchase possibility identification process, the touch panel display is displayed.
本発明の表示制御方法は、タッチパネルディスプレイ及び当該タッチパネルディスプレイを操作する操作者を撮像するカメラを備えた表示装置に表示する画像を制御する表示制御方法であって、前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶工程と、前記記憶工程で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成工程とを行う。 The display control method of the present invention is a display control method for controlling an image to be displayed on a touch panel display and a display device including a camera that captures an image of an operator who operates the touch panel display, and the operation information of the touch panel display and the operation information of the touch panel display. The touch panel display is based on a storage step of associating and storing an image captured by the camera received from the display device associated with the operation information, and the operation information and the captured image stored in the storage step. Performs a browsing information generation step of generating browsing information indicating the browsing status of the display of.
本発明の表示制御装置は、タッチパネルディスプレイ及び当該タッチパネルディスプレイを操作する操作者を撮像するカメラを備えた表示装置と通信ネットワークを介して通信を行い、前記表示装置に表示する画像を制御する表示制御装置であって、前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶手段と、前記記憶手段に記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成手段とを有する。 The display control device of the present invention communicates with a touch panel display and a display device including a camera that captures an image of an operator operating the touch panel display via a communication network, and controls a display control to control an image displayed on the display device. A storage means for storing the operation information of the touch panel display received from the display device and the captured image of the camera received from the display device associated with the operation information, and the storage means. It has a browsing information generating means for generating browsing information indicating a browsing status of the display of the touch panel display based on the operation information and the captured image stored in the touch panel display.
本発明のサイネージシステムは、タッチパネルディスプレイ及び当該タッチパネルディスプレイを操作する操作者を撮像するカメラを備えた表示装置と、前記表示装置と通信ネットワークを介して通信を行い、前記表示装置に表示する画像を制御する表示制御装置と、を有し、前記表示制御装置は、前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶処理と、前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理とを行う。
また、本発明のプログラムは、タッチパネルディスプレイ及び当該タッチパネルディスプレイを操作する操作者を撮像するカメラを備えた表示装置の前記タッチパネルディスプレイに表示する画像を制御する前記表示装置が実行するプログラムであって、前記タッチパネルディスプレイの操作情報と、当該操作情報に対応する前記カメラの撮像画像と関連付けて記憶する記憶処理と、前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理とを前記表示装置に実行させる。
The signage system of the present invention communicates with a display device including a touch panel display and a camera that captures an image of an operator operating the touch panel display, and communicates with the display device via a communication network, and displays an image to be displayed on the display device. The display control device includes a display control device to be controlled, and the display control device includes operation information of the touch panel display received from the display device and an image captured by the camera received from the display device associated with the operation information. A storage process for associating and storing the above, and a browsing information generation process for generating browsing information indicating the browsing status of the display of the touch panel display based on the operation information and the captured image stored in the storage process are performed. ..
Further, the program of the present invention is a program executed by the display device that controls an image displayed on the touch panel display of a display device including a touch panel display and a camera that captures an image of an operator who operates the touch panel display. The touch panel display is based on the operation information of the touch panel display, the storage process of associating with the image captured by the camera corresponding to the operation information, and the operation information and the captured image stored in the storage process. The display device is made to execute a browsing information generation process for generating browsing information indicating the browsing status of the display of.
本発明によれば、タッチパネルディスプレイによる広告表示や告知の効果を高めることができるプログラム、表示制御方法、表示制御装置及びサイネージシステムを提供することができる。
また、本発明によれば、タッチパネルディスプレイによる広告表示や告知の効果を測定することができるプログラム、表示制御方法、表示制御装置及びサイネージシステムを提供することができる。
According to the present invention, it is possible to provide a program, a display control method, a display control device, and a signage system capable of enhancing the effect of advertisement display and notification by a touch panel display.
Further, according to the present invention, it is possible to provide a program, a display control method, a display control device and a signage system capable of measuring the effect of advertisement display and notification by a touch panel display.
以下、本発明の実施形態に係る作業現場用サイネージシステムについて説明する。
[第1実施形態]
図1は、本発明の実施形態に係るサイネージシステム1の全体構成図である。
図1に示すように、サイネージシステム1は、例えば、表示装置11、顔認証サーバ21及び表示制御装置31を有する。
表示装置11、顔認証サーバ21及び表示制御装置31は、インターネット等の通信ネットワーク9を介して通信を行う。
表示装置11は、商業施設や社内等の表示装置設置領域7に設置されている。
Hereinafter, a work site signage system according to an embodiment of the present invention will be described.
[First Embodiment]
FIG. 1 is an overall configuration diagram of the
As shown in FIG. 1, the
The
The
本実施形態において記載する表示装置11又は表示制御装置31の一方の処理の少なくとも一部は、他方の装置で実行するようにしてもよい。
At least a part of the processing of one of the
[表示装置11(デジタルサイネージ)]
以下、表示装置11について説明する。
図2は、図1に示す表示装置11の構成図である。
図2に示すように、表示装置11は、例えば、タッチパネルディスプレイ41、操作部43、通信部45、カメラ47、メモリ49及び処理部51を有する。
[Display device 11 (digital signage)]
Hereinafter, the
FIG. 2 is a configuration diagram of the
As shown in FIG. 2, the
タッチパネルディスプレイ41は、表示装置11の正面側に位置する人向けに広告画像、通知画像、操作画面等の画像を同時にあるいは選択的に表示する。
The touch panel display 41 simultaneously or selectively displays images such as an advertisement image, a notification image, and an operation screen for a person located on the front side of the
タッチパネルディスプレイ41には、例えば、表示可能な複数の選択用画像のサムネイルを含む管理者用選択画面が表示される。サムネイル画像を指等で触れることで拡大(全画面)表示される。
On the
タッチパネルディスプレイ41は、ユーザによって指等で画面がタッチされると、そのタッチした位置情報を処理部51に出力する。
When the screen is touched by the user with a finger or the like, the
操作部43は、電源をオン/オフ等する操作スイッチである。 The operation unit 43 is an operation switch for turning the power on / off.
通信部45は、顔認証サーバ21及び表示制御装置31と通信を行うインタフェースである。
The
カメラ47は、図2に示すように、タッチパネルディスプレイ41の正面側の所定範囲を撮像するように設置されている。
As shown in FIG. 2, the
処理部51は、表示制御装置31からの信号、あるいはタッチパネルディスプレイ41からの位置情報に応じた操作情報に基づいて、タッチパネルディスプレイ41の画面表示制御を行う。
また、処理部51は、通信部45を介して表示制御装置31から受信した表示画面情報に応じたタッチパネルディスプレイ41の画面表示処理を行う。
The
Further, the
処理部51は、上記操作情報を基にメニュー画面等において表示した複数の前記画像のうち、タッチされた画像をタッチから時刻情報と共に特定する操作情報を生成し、これをメモリ57に記憶する。
The
処理部51は、カメラ47からの撮像画像と、上記操作情報とを関連付けてカメラ47に記憶する。
処理部51は、所定のタイミングで、メモリ57から撮像画像及び操作情報を読み出して表示制御装置31に送信する。
The
The
タッチパネルディスプレイ41は、常にリモート管理サービスにて遠隔管理され、遠方より設定変更、稼働管理ができる仕組みになっている。
タッチパネルディスプレイ41に表示される画像は、例えば、表示制御装置31経由で更新が可能で、スマートフォン、タブレット、パーソナルコンピューターで書き換え更新が可能である。
The
The image displayed on the
[表示制御装置31(クラウンドサーバ)]
表示制御装置31は、表示装置設置領域7以外の場所に設けられ、通信ネットワーク9を介して表示装置11及び顔認証サーバ21と通信を行う。
表示制御装置31は、アプリケーションプログラムAPを実行することで、本実施形態で規定する機能を実現する。
具体的には、表示制御装置31は、表示装置11に表示する画像を制御する処理を行う。
[Display control device 31 (cround server)]
The
The
Specifically, the
表示制御装置31は、表示装置11に表示する単数又は複数の画像を選択し、当該選択した画像の前記表示装置への表示形態を指定する管理者用選択画面の表示処理を行う。
表示制御装置31は、管理者用選択画面で選択された画像を、指定された形態で表示装置11に表示する表示処理を行う。
The
The
図3は、図1に示す表示制御装置31の構成図である。
図3に示すように、表示制御装置31は、例えば、通信部61、メモリ63及び処理部65を有する。
FIG. 3 is a configuration diagram of the
As shown in FIG. 3, the
通信部61は、図1に示す表示装置11及び顔認証サーバ21と通信を行う。
The
メモリ63は、表示装置11から受信した操作情報、撮像画像及び顔認証結果を関連付けて記憶する。このとき、操作情報には操作が行われた時刻情報が含まれ、あるいは関連付けられている。また、撮像画像及び顔認証結果には、撮像が行われた時刻情報が含まれ、あるいは関連付けられている。
また、メモリ63は、表示制御装置31の処理を規定するプログラムPRG、並びにその処理に用いられるデータを記憶する。
The
Further, the
処理部65は、通信部61が表示装置11から受信したタッチパネルディスプレイ41の操作情報と、当該操作情報に関連付けられた表示装置11から受信したカメラ47の撮像画像とを関連付けてメモリ63記憶する記憶処理を行う。
The
処理部65は、上記記憶処理で記憶された操作情報と撮像画像を基に、タッチパネルディスプレイ41の操作者に適合した画像をタッチパネルディスプレイ41に表示する表示処理を行う。
The
処理部65は、上記記憶処理で記憶された操作情報と撮像画像を基に、撮像画像を見たが操作をしていない人の属性、並びにタッチパネルディスプレイ41を操作した操作者の属性とを特定する属性特定処理を行う。
The
処理部65は、図1に示す顔認証処理を行う顔認証サーバ31にメモリ63から撮像画像を読み出して送信し、顔認証サーバ21から顔認証結果を受信してメモリ63に記憶する顔認証通信処理を行う。
The
処理部65は、顔認証通信処理に応じて顔認証サーバ21から受信した顔認証結果を基に前記表示を行う。
顔認証結果は、例えば、年齢、性別、人数等である。また、個別の人物を特定するようにしてもよい。
The
The face recognition result is, for example, age, gender, number of people, and the like. In addition, individual persons may be identified.
処理部65は、メモリ63に記憶した撮像画像を基に顔画像認識の可能性が一定以上あるかの判定処理を行う。
処理部65は、判定処理で顔画像認識の可能性が一定以上あると判定したことを条件に、顔認証サーバ21に撮像画像を送信するように顔認証通信処理を行う。
The
The
また、処理部65は、撮像画像を基に、操作者がタッチパネルディスプレイ41の正面に顔を向けたタイミングを特定し、当該特定したタイミングの撮像画像を顔認証サーバ21に送信するように上記顔認証通信処理を行う。
Further, the
また、処理部65は、メモリ63から読み出した操作情報と前記撮像画像とを基に、操作者毎に、当該操作者が前記操作を行った時間を特定する分析処理をさらに行う。
また、当該分析処理は、タッチパネルディスプレイ41の前で立ち止まったかどうか、タッチパネルディスプレイ41を見たかどうか等を分析してもよい。
また、処理部65は、当該分析処理において、撮像画像と操作情報とを基に、各操作者の操作時間を特定してもよい。
Further, the
Further, the analysis process may analyze whether or not the user has stopped in front of the
In addition, the
また、処理部65は、上記関連付けられた操作情報と撮像画像を基にタッチパネルディスプレイ41を操作した操作者の属性を特定し、当該属性を基に、タッチパネルディスプレイ41に表示した商品又はサービスを前記操作者が購入する可能性を特定する購入可能性特定処理を行う。
Further, the
また、処理部65は、上記購入可能性特定処理で特定した上記可能性を基に、タッチパネルディスプレイ41に表示を行う。
Further, the
処理部65は、撮像画像を基に、例えば、図5に示すような操作者の属性を分析及び表示する。
図6は、図1に示すサイネージシステムの機能を説明するための図である。
The
FIG. 6 is a diagram for explaining the function of the signage system shown in FIG.
以下、サイネージシステム1の動作例を説明する。
図7は、図1に示すサイネージシステム1の動作例を説明するためのフローチャートである。
以下、図7に示す各ステップを説明する。
ステップST11:
図2に示す表示装置11の処理部51は、タッチパネルディスプレイ41からの操作情報を基に、タッチパネル操作があったか否かを判定する。処理部51は、肯定判定の場合に、ステップST11に進み、そうでない場合にステップST21の処理を繰り返す。
An operation example of the
FIG. 7 is a flowchart for explaining an operation example of the
Hereinafter, each step shown in FIG. 7 will be described.
Step ST11:
The
ステップST12:
表示装置11の処理部51は、カメラ47の撮像画像をメモリ49に記憶する。このとき、処理部51は、ステップST11のタッチパネル操作があったタイミングの撮像画像を認証用の撮像画像としてメモリ49に記憶する。
Step ST12:
The
ステップST13:
処理部51は、操作者によるタッチパネルディスプレイ41のタッチパネルのタッチ位置に応じた操作情報を取得し、カメラ47に記憶する。
Step ST13:
The
ステップST14:
処理部51は、ステップST12で記憶した撮像画像と、ステップST13で記憶した操作情報とを関連付ける。
Step ST14:
The
ステップST15:
処理部51は、ステップST14で関連付けた撮像画像と操作情報とを表示制御装置31に送信する。
表示制御装置31の処理部65は、受信した撮像画像と操作情報をメモリ63に記憶する。
Step ST15:
The
The
ステップST16:
表示制御装置31の処理部65は、ステップST15でメモリ63に記憶した認証用の撮像画像を、通信部61を介して顔認証サーバ21に送信する。
顔認証サーバ21は、表示制御装置31から受信した撮像画像を基に顔認証を行い、顔認証結果を表示制御装置31に送信する。
表示制御装置31の処理部65は、通信部61で受信し顔認証結果をメモリ63に記憶する。
Step ST16:
The
The
The
ステップST17:
表示制御装置31の処理部65は、メモリ63に関連付けて記憶された撮像画像、顔認証結果及び操作情報を基に、タッチパネルディスプレイ41の表示画像を見たが操作をしていない人の属性、タッチパネルディスプレイ41を操作した操作者の属性の少なくとも一方を特定し、当該特定した属性情報をメモリ63に記憶する属性特定処理を行う。
Step ST17:
The
ステップST18:
表示制御装置31の処理部65は、属性を特定した人物に適合した画像をタッチパネルディスプレイ41に表示する表示処理を行う。
Step ST18:
The
ステップST19:
表示制御装置31の処理部65は、メモリ63に関連付けて記憶された撮像画像、顔認証結果及び操作情報を基に、タッチパネルディスプレイ41の表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理を行う。
当該閲覧情報生成処理では、タッチパネルディスプレイ41を操作した人物(どの属性の人物)が、どの表示内容を見たか、どの操作を行ったかを示す閲覧情報を生成する。
当該閲覧情報は、前述したように、操作情報、撮像画像及び顔認証結果のそれぞれに関連付けられた時刻情報を基に生成される。
また、処理部65は、記憶された操作情報と、顔認証通信処理に応じて顔認証サーバから受信した顔認証結果とを基に、タッチパネルディスプレイ41の表示画像を見たが操作をしていない人の属性と、タッチパネルディスプレイ41を操作した操作者の属性との少なくとも一方を特定する属性特定処理を行うようにしてもよい。
また、これにより、タッチパネルディスプレイ41を操作した人と、操作はしてないがタッチパネルディスプレイ41に表示された情報を見た(確認した)人を特定される。
Step ST19:
The
In the browsing information generation process, browsing information indicating which display content was viewed and which operation was performed by the person who operated the touch panel display 41 (person with which attribute) is generated.
As described above, the browsing information is generated based on the time information associated with each of the operation information, the captured image, and the face authentication result.
Further, the
Further, by this, a person who has operated the
以上説明したように、サイネージシステム1によれば、操作者によるタッチパネルディスプレイ41の操作情報に加えて、カメラ47の撮像画像を基に、操作者の属性を把握し、それに適合した画面表示を行う。そのため、タッチパネルディスプレイ41に表示する広告や告知の効果を高めることができる。
また、サイネージシステム1によれば、カメラ47を用いて、タッチパネルディスプレイ41の周囲の画像や、操作者の画像を特定でき、その撮像画像を基に、サイネージシステム1に表示した広告や告知の効果を測定(推定)することができる。
As described above, according to the
Further, according to the
サイネージシステム1によれば、表示制御装置31において、カメラ47で撮像された操作者が何のコンテンツを操作したのかを測定し、操作時間、操作内容、を定量化することができる。これにより、広告効果を測定することができ、誰がどんなコンテンツに興味を持ったのかを判定できるインタラクティブ広告表示が可能になる。
また、サイネージシステム1によれば、広告効果ばかりではなく例えば工事現場の近隣用に設置された場合に、近隣住民がどんなお知らせを見ていたのかどんなコンテンツを興味持ったのかを定量化できる。
According to the
Further, according to the
様々な事業所では、掲示板に様々なお知らせ及び注意喚起、安全対策、衛生管理のための掲示物が貼られている。しかしながら、作業者がその掲示物を閲覧したかどかが管理者側ではわからない。
サイネージシステム1によれば、前述したように、タッチパネル式PC及び大型モニターを利用し作業者に告知内容を確認閲覧させ、その誰がその掲示物を確認したのかを顔認証マッチングさせ、その日時、閲覧時間を出力帳票として出すことができる。
また、本実施形態によれば、タッチパネルディスプレイ41に表示した様々な掲示に対し、関係者が掲示を閲覧したか否かを管理者が確認でき、コンプライアンスの遵守及び、エビデンスの確認、告知効果の測定が可能となり、掲示閲覧に関する証明が可能となる。
At various business establishments, bulletin boards are posted with various notices and warnings, safety measures, and hygiene management. However, the administrator does not know whether or not the worker has viewed the bulletin board.
According to the
Further, according to the present embodiment, the administrator can confirm whether or not the related persons have viewed the notices for various notices displayed on the
<第1実施形態の変形例>
図8は、本発明の第1実施形態の変形例の動作例を説明するためのフローチャートである。
図8において、図7と同じ符号を付したステップは第1実施形態で説明したステップと同じである。
<Modified example of the first embodiment>
FIG. 8 is a flowchart for explaining an operation example of a modification of the first embodiment of the present invention.
In FIG. 8, the steps with the same reference numerals as those in FIG. 7 are the same as the steps described in the first embodiment.
ステップST22:
表示制御装置31の処理部65は、メモリ49に記憶した印象の撮像画像を基に顔認証サーバ21
による有効な顔画像認識の可能性が一定以上あるかの判定処理を行う。
処理部65は、例えば、一定間隔で取得された認証用の撮像画像を、OpenCV等の簡易的な顔認識処理ができるか否かの判定処理を行う。
処理部65は、判定結果が工程判定の場合にステップST21に進み、否定判定の場合にはステップST11に戻る。
Step ST22:
The
Performs determination processing as to whether or not there is a certain possibility of effective face image recognition by.
The
The
ステップST22:
表示制御装置31の処理部65は、ステップST21で肯定判定を受けた認証用の撮像画像を、通信部61を介して顔認証サーバ21に送信する。
Step ST22:
The
本変形例では、判定処理で肯定判定を受けた撮像画像のみを顔認証サーバ21に送信して顔認証を行う。そのため、顔認証サーバ21における顔認証が有料である場合に、無駄な有効な顔認証結果を得られない無駄な顔認証処理を行うことを回避できる。
In this modification, only the captured image that has received an affirmative determination in the determination process is transmitted to the
<第2実施形態>
図9は、本発明の第2実施形態に係るサイネージシステム101の全体構成図である。
図9に示すように、サイネージシステム101は、例えば、第1実施形態で説明した表示制御装置31の機能を表示装置11が備えている。
表示装置11は、顔認証サーバ21と通信を行う。
この構成によっても、第1実施形態と同様の効果を得られる。
また、サイネージシステム101では、第1実施形態で説明した表示制御装置31の全ての機能を表示装置11に搭載した場合を例示したが、表示装置11とは別に表示制御装置31を設け、表示制御装置31の一部の機能を表示装置11に搭載するようにしてもよい。
<Second Embodiment>
FIG. 9 is an overall configuration diagram of the
As shown in FIG. 9, in the
The
With this configuration, the same effect as that of the first embodiment can be obtained.
Further, in the
本発明は上述した実施形態には限定されない。
すなわち、当業者は、本発明の技術的範囲またはその均等の範囲内において、上述した実施形態の構成要素に関し、様々な変更、コンビネーション、サブコンビネーション、並びに代替を行ってもよい。
The present invention is not limited to the embodiments described above.
That is, one of ordinary skill in the art may make various changes, combinations, sub-combinations, and alternatives with respect to the components of the above-described embodiments within the technical scope of the present invention or the equivalent thereof.
また、上述した第1実施形態では、図1に示すように、表示制御装置31が一つの表示装置11の表示制御をする場合を例示したが、表示制御装置31が複数の表示装置11の表示制御を行うようにしてもよい。
この場合に、表示制御装置31は、複数の表示装置11から受信した撮像画像を基に、各表示装置11に表示する画像を決定するようにしてもよい。
Further, in the above-described first embodiment, as shown in FIG. 1, a case where the
In this case, the
サイネージシステム1,101において、不動産業界においてもマンションや宅地分譲、又は空き家の案内告知の無料案内所として表示装置11を設置し、操作者の人物を特定し広告効果を高めるようにしてもよい。
例えば、サイネージシステム1,101は、オンラインのチャイムも内蔵しており、広告効果に興味を持った人物がコールセンターへ直接通話できるようにしてもよい。
また、表示制御装置31は、操作者によるタッチパネルディスプレイ41の操作に応じて、分譲住宅の完成予定図、間取り図、価格、週環境、日当たり、騒音等を示す画像を表示するように制御してもよい。
In the
For example, the
Further, the
表示制御装置31は、撮像画像及び操作情報を基に、購入可能性予測を行う。また、表示制御装置31は、購入可能性が一定レベルを超えた場合に、所定の営業マンに連絡するようにしてもよい。
購入可能予測は、例えば、撮像画像に夫婦が確認できれば可能性を高めたり、来場回数が高いと可能性を高めたりする。
また、タッチパネルディスプレイ41にゲームが搭載されている場合に、同一人物には一定回数以下しかゲーム使用を認めないようにしてもよい。
The
For example, the possibility of purchasing is increased if the couple can be confirmed in the captured image, or the possibility is increased if the number of visits is high.
Further, when the game is mounted on the
また、タッチパネルディスプレイ41を物流倉庫や社内等に設置した場合に、タッチパネルディスプレイ41に表示した告知を見た人の数や誰が見たかを撮像画像から分析処理により特定するようにしてもよい。
これにより、どのように告知を表示すれば、見られる回数が増えるか等を分析・学習できる。
Further, when the
This makes it possible to analyze and learn how to display the notification to increase the number of times it can be seen.
また、タッチパネルディスプレイ41の処理部65に学習機能を持たせ、撮像画像及び操作情報を基に、目的に対して一番効果がでるタッチパネルディスプレイ41の表示画像制御ができるよう学習してもよい。
Further, the
本発明は、広告や告知を行うサイネージシステムに適用可能である。 The present invention is applicable to a signage system for advertising and announcement.
101…サイネージシステム
7…表示装置設置領域
11…表示装置
41…タッチパネルディスプレイ
43…操作部
45…通信部
47…カメラ
49…メモリ
21…顔認証サーバ
31…表示制御装置
61…通信部
63…メモリ
65…処理部
101 ... Signage system 7 ... Display
Claims (12)
前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像と関連付けて記憶する記憶処理と、
前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理と
を前記表示制御装置に実行させるプログラム。 A program executed by a display control device that controls a display device that controls an image displayed on the touch panel display by communicating with a display device equipped with a touch panel display and a camera that captures an image of an operator who operates the touch panel display via a communication network. ,
A storage process for storing the operation information of the touch panel display received from the display device in association with the captured image of the camera received from the display device associated with the operation information.
A program for causing the display control device to execute a browsing information generation process for generating browsing information indicating a browsing status of a display on the touch panel display based on the operation information stored in the storage process and the captured image.
顔認証処理を行う顔認証サーバに前記撮像画像を送信し、前記顔認証サーバから顔認証結果を受信する顔認証通信処理
を行い、
前記閲覧情報生成処理は、前記顔認証通信処理に応じて前記顔認証サーバから受信した顔認証結果を基に前記閲覧情報を生成する
請求項1に記載のプログラム。 The display control device is
The captured image is transmitted to the face recognition server that performs the face recognition process, and the face recognition communication process that receives the face recognition result from the face recognition server is performed.
The program according to claim 1, wherein the browsing information generation process generates the browsing information based on the face authentication result received from the face authentication server in response to the face authentication communication process.
を行う請求項2に記載のプログラム。 Based on the operation information stored in the storage process and the face authentication result received from the face authentication server in response to the face authentication communication process, the display image of the touch panel display is viewed but not operated. The program according to claim 2, wherein the attribute specifying process for specifying at least one of the human attribute and the attribute of the operator who operates the touch panel display is performed.
をさらに行い、
前記顔認証通信処理は、前記判定処理で顔画像認識の可能性が一定以上あると判定したことを条件に、前記顔認証サーバに前記撮像画像を送信する
請求項2に記載のプログラム。 Based on the captured image, a process for determining whether or not the possibility of face image recognition is above a certain level is further performed.
The program according to claim 2, wherein the face authentication communication process transmits the captured image to the face authentication server on condition that the determination process determines that the possibility of face image recognition is equal to or higher than a certain level.
請求項4又は請求項5に記載のプログラム。 The face recognition communication process specifies the timing at which the operator turns his face to the front of the touch panel display based on the captured image, and transmits the captured image at the specified timing to the face recognition server. 4 or the program according to claim 5.
をさらに行う請求項1〜5のいずれかに記載のプログラム。 The program according to any one of claims 1 to 5, further performing an analysis process for each operator to specify the time during which the operator performed the operation based on the operation information and the captured image.
を行う
請求項1〜6のいずれかに記載のプログラム。 The attribute of the operator who operated the touch panel display can be specified based on the associated operation information and the captured image, and the operator can purchase a product or service displayed on the touch panel display based on the attribute. The program according to any one of claims 1 to 6, which performs a purchase possibility identification process for specifying sex.
を行い、
前記表示処理では、前記購入可能性特定処理で特定した前記可能性を基に、前記タッチパネルディスプレイに表示を行う
請求項7に記載のプログラム。 Based on the operation information stored in the storage process and the captured image, a display process for displaying an image suitable for the operator of the touch panel display on the touch panel display is performed.
The program according to claim 7, wherein in the display process, a display is performed on the touch panel display based on the possibility specified in the purchase possibility identification process.
前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶工程と、
前記記憶工程で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成工程と
を行う表示制御方法。 A display control method for controlling an image displayed on a touch panel display and a display device provided with a camera that captures an image of an operator who operates the touch panel display.
A storage step of associating and storing the operation information of the touch panel display and the captured image of the camera received from the display device associated with the operation information.
A display control method for performing a browsing information generation step of generating browsing information indicating a browsing status of a display on the touch panel display based on the operation information stored in the storage step and the captured image.
前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶手段と、
前記記憶手段に記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成手段と
を有する表示制御装置。 A display control device that controls an image displayed on the display device by communicating with a touch panel display and a display device provided with a camera that captures an image of an operator who operates the touch panel display via a communication network.
A storage means for associating and storing the operation information of the touch panel display received from the display device and the captured image of the camera received from the display device associated with the operation information.
A display control device having a browsing information generating means that generates browsing information indicating a browsing status of a display on the touch panel display based on the operation information stored in the storage means and the captured image.
前記表示装置と通信ネットワークを介して通信を行い、前記表示装置に表示する画像を制御する表示制御装置と、
を有し、
前記表示制御装置は、
前記表示装置から受信した前記タッチパネルディスプレイの操作情報と、当該操作情報に関連付けられた前記表示装置から受信した前記カメラの撮像画像とを関連付けて記憶する記憶処理と、
前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理と
を行うサイネージシステム。 A display device equipped with a touch panel display and a camera that captures an image of an operator who operates the touch panel display.
A display control device that communicates with the display device via a communication network and controls an image displayed on the display device.
Have,
The display control device is
A storage process for associating and storing the operation information of the touch panel display received from the display device and the captured image of the camera received from the display device associated with the operation information.
A signage system that performs browsing information generation processing that generates browsing information indicating the browsing status of the display of the touch panel display based on the operation information stored in the storage process and the captured image.
前記タッチパネルディスプレイの操作情報と、当該操作情報に対応する前記カメラの撮像画像と関連付けて記憶する記憶処理と、
前記記憶処理で記憶された前記操作情報と前記撮像画像とを基に、前記タッチパネルディスプレイの表示の閲覧状況を示す閲覧情報を生成する閲覧情報生成処理と
を前記表示装置に実行させるプログラム。
A program executed by the display device that controls an image displayed on the touch panel display of a display device including a touch panel display and a camera that captures an image of an operator who operates the touch panel display.
A storage process that stores the operation information of the touch panel display in association with the image captured by the camera corresponding to the operation information.
A program for causing the display device to execute a browsing information generation process for generating browsing information indicating a browsing status of a display on the touch panel display based on the operation information stored in the storage process and the captured image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021015950A JP2021111422A (en) | 2020-01-10 | 2021-02-03 | Program, display control method, display control device, and signage system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020002761A JP6842136B1 (en) | 2020-01-10 | 2020-01-10 | Program, display control method, display control device and signage system |
JP2021015950A JP2021111422A (en) | 2020-01-10 | 2021-02-03 | Program, display control method, display control device, and signage system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020002761A Division JP6842136B1 (en) | 2020-01-10 | 2020-01-10 | Program, display control method, display control device and signage system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021111422A true JP2021111422A (en) | 2021-08-02 |
JP2021111422A5 JP2021111422A5 (en) | 2023-01-18 |
Family
ID=74860721
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020002761A Active JP6842136B1 (en) | 2020-01-10 | 2020-01-10 | Program, display control method, display control device and signage system |
JP2021015950A Pending JP2021111422A (en) | 2020-01-10 | 2021-02-03 | Program, display control method, display control device, and signage system |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020002761A Active JP6842136B1 (en) | 2020-01-10 | 2020-01-10 | Program, display control method, display control device and signage system |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP6842136B1 (en) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8670597B2 (en) * | 2009-08-07 | 2014-03-11 | Google Inc. | Facial recognition with social network aiding |
JP2016024601A (en) * | 2014-07-18 | 2016-02-08 | 日本電気株式会社 | Information processing apparatus, information processing system, information processing method, commodity recommendation method, and program |
JP6405826B2 (en) * | 2014-09-19 | 2018-10-17 | カシオ計算機株式会社 | Information processing apparatus, information processing method, and program |
JP2018072932A (en) * | 2016-10-25 | 2018-05-10 | 株式会社東芝 | Power feeding system with signage |
JP6532555B1 (en) * | 2018-01-19 | 2019-06-19 | ヤフー株式会社 | Sales support device, sales support method and program |
US20190378176A1 (en) * | 2018-06-08 | 2019-12-12 | Walmart Apollo, Llc | Systems and methods for customizing display on digital billboard |
-
2020
- 2020-01-10 JP JP2020002761A patent/JP6842136B1/en active Active
-
2021
- 2021-02-03 JP JP2021015950A patent/JP2021111422A/en active Pending
Also Published As
Publication number | Publication date |
---|---|
JP2021111127A (en) | 2021-08-02 |
JP6842136B1 (en) | 2021-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102330166B1 (en) | Digital signage and method of controlling thereof | |
US20130241821A1 (en) | Image processing system, image processing method, and storage medium storing image processing program | |
US20220351219A1 (en) | Store use information distribution device, store use information distribution system equipped with same, and store use information distribution method | |
US11397959B2 (en) | Information processing device, information processing terminal, and information processing method | |
KR101756840B1 (en) | Method and apparatus for transmitting intention using photographing image | |
JP2016095741A (en) | Information providing device, information providing system and information providing program | |
US20110165544A1 (en) | Activity data presenting apparatus, activity data presenting method and recording medium | |
US9607094B2 (en) | Information communication method and information communication apparatus | |
US20200250713A1 (en) | Digital Signage System And Communication Slave Terminal | |
JP2015230512A (en) | User interface screen creation support system | |
KR20120076673A (en) | Method and apparatus for providing advertisement serbvice in mobile communication system | |
US10318989B2 (en) | Information providing method and system using signage device | |
JP6842136B1 (en) | Program, display control method, display control device and signage system | |
US20190272561A1 (en) | Digital Signage Control Apparatus And Digital Signage Control Program | |
US11909776B2 (en) | Online video distribution support method, online video distribution support apparatus and online video distribution support system | |
WO2015194232A1 (en) | Advertisement effect measurement system, advertisement effect measurement terminal and advertisement effect measurement terminal program, and advertisement effect measurement method | |
US20100228653A1 (en) | Data reproduction device, content delivery system, and content delivery method | |
JP2014102587A (en) | Information display device, terminal device, information display system, and program | |
JP3227922U (en) | Store management support system | |
US20180268471A1 (en) | Information processing apparatus, information processing method, program, and information processing system | |
JP7476881B2 (en) | Information processing device, information processing method, and program | |
JP2004326746A (en) | Method for managing sample distribution and ancillary device for distributing sample | |
JP2018092659A (en) | Display unit and method for controlling display unit | |
RU153306U1 (en) | INFORMATION TERMINAL | |
JP7066032B1 (en) | Information processing equipment, information processing systems and programs |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230110 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230725 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240130 |