JP2021081681A - 表示制御システム、表示制御方法 - Google Patents

Abstract

【課題】顧客側において特別な準備を行わなくても、表示部の透過状態と不透過状態とを切り替えてコンテンツを表示することができる表示制御システムを提供する。【解決手段】１又は複数の撮像装置から出力される画像を取得する画像取得部と、前記画像に含まれる人物を検出する検出部と、透過状態と不透過状態とを切り替え可能な表示部を、前記検出部の検出結果に応じて透過状態または不透過状態のいずれかの状態に切り替える制御部と、前記表示部に画像を表示する表示装置にコンテンツを出力する出力部と、を有する。【選択図】図１

Description

本発明は、表示制御システム、表示制御方法に関する。

調光フィルムを用いたスクリーンは、透過度を調節することで、透過状態と不透過状態を切り替えることができる。このような調光フィルムを用いたスクリーンは、例えば、公共施設におけるパーティションや、イベント会場において映像投影用のスクリーンとして用いることができる。
このような調光フィルムを用いたスクリーンを用い、ユーザが携帯するＩＣタグがリーダに近づけられることで、ＩＣタグの個別情報を読み出し、スクリーンを不透過状態に切り替えて、コンテンツを投影するシステムも提案されている（例えば、技術文献１）。

特開２００６−２３５３７３号公報

しかしながら、上述した技術では、コンテンツを表示するためには、リーダにＩＣカードを近づける必要がある。そのため、ＩＣカードを携帯していないユーザに対してコンテンツを提供することが難しい。また、例えば店舗等の不特定多数のユーザが利用する施設においては、来場者の全てに会員登録等の事前登録してもらい、ＩＣタグを配布し、来場日に持参してもらう必要があり、利用者は特別な準備をしなければならず、必ずしも利便性がよいとは限らない。

本発明は、このような事情に鑑みてなされたもので、その目的は、顧客側において特別な準備を行わなくても、表示部の透過状態と不透過状態とを切り替えてコンテンツを表示することができる表示制御システム、表示制御方法を提供することにある。

上述した課題を解決するために、本発明の一態様は、１又は複数の撮像装置から出力される画像を取得する画像取得部と、前記画像に含まれる人物を検出する検出部と、透過状態と不透過状態とを切り替え可能な表示部を、前記検出部の検出結果に応じて透過状態または不透過状態のいずれかの状態に切り替える制御部と、前記表示部に画像を表示する表示装置にコンテンツを出力する出力部と、を有する。

また、本発明の一態様は、画像取得部が、１又は複数の撮像装置から出力される画像を取得し、検出部が、前記画像に含まれる人物を検出し、制御部が、透過状態と不透過状態とを切り替え可能な表示部を、前記検出部の検出結果に応じて透過状態または不透過状態のいずれかの状態に切り替え、出力部が、前記表示部に画像を表示する表示装置にコンテンツを出力する。

以上説明したように、この発明によれば、顧客側において特別な準備を行わなくても、表示部の透過状態と不透過状態とを切り替えてコンテンツを表示することができる。

この発明の一実施形態による表示制御システム１の構成を示す概略構成図である。 コンテンツ記憶部２１に記憶されるコンテンツデータの一例を示す図である。 行動記憶部２３に記憶される行動履歴データの一例を示す図である。 プロジェクタ４０として短焦点型のプロジェクタを用いた場合の設置状況を示す図である。 店舗Ｓの店内の各機器の設置状況を説明する図である。 上述の表示制御システム１の動作を説明するシーケンス図である。 調光スクリーン３０にコンテンツが表示された状態を示す図である。

以下、本発明の一実施形態による表示制御システムについて図面を参照して説明する。
図１は、この発明の一実施形態による表示制御システム１の構成を示す概略構成図である。表示制御システム１は、カメラ１０と、管理サーバ２０と、調光スクリーン３０と、プロジェクタ４０と、制御ユニット５０とを含む。
表示制御システム１は、ユーザＵが来場する施設において、当該施設内に設置されたショーケース、ショーウインドウ等に設けられた調光スクリーン３０の透過度をユーザＵの行動に応じて変更し、プロジェクタ４０からコンテンツを投影する。
ここでいう施設は、ユーザＵの来場を受け入れることが可能なものであればよく、例えば、コンビニエンスストア、百貨店、公共機関における建物、複数店舗が収容された複合商業施設、テーマパーク、イベント会場、ビルなどがある。この実施形態では、施設がコンビニエンスストア等の店舗である場合について説明する。

カメラ１０は、店舗内において１台または複数台設置され、撮像対象領域を撮像する。撮像対象領域は、店舗内においてユーザＵが通行、回遊、滞留等のうち少なくともいずれか１つをすることが可能な領域である通行可能領域を撮像する。
カメラ１０は、画像取得部１１と、検出部１２と、属性判定部１３とを有する。カメラ１０は、撮像した結果である画像を管理サーバ２０に出力することもできる。
画像取得部１１は、撮像対象領域を撮像することで、撮像結果を画像として取得する。
検出部１２は、画像に含まれる人物を検出する。
属性判定部１３は、検出部１２によって検出された人物の属性を判定し、判定結果を管理サーバ２０に出力する。
属性判定部１３は、例えば、ＡＩ（artificial intelligence）技術を用い、ユーザの外観（身長、体型、顔の特徴等）やユーザの姿勢変化（歩く歩幅、歩く速度、体の動き等）と属性データ（性別、年齢層、職業等）との関係を学習した学習済みモデルに対し、カメラ１０によって撮像された結果を入力することで、その画像に含まれる人物の属性データを得るようにしてもよい。

管理サーバ２０は、カメラ１０と制御ユニット５０とに接続される。
管理サーバ２０は、コンテンツ記憶部２１、行動解析部２２、行動記憶部２３、コンテンツ選択部２４、再生管理部２５を有する。管理サーバ２０は、例えばコンピュータが用いられる。
コンテンツ記憶部２１は、コンテンツデータを記憶する。
図２は、コンテンツ記憶部２１に記憶されるコンテンツデータの一例を示す図である。
コンテンツデータは、コンテンツと条件と最低投影時間とが対応づけられたデータである。
コンテンツは、調光スクリーン３０に投影されるコンテンツである。コンテンツは、来店したユーザに対して表示させるものであり、例えば、店内に配された物品（例えば商品や展示物等）に関する情報である。また、コンテンツとしては、その店舗において実施されるキャンペーンに関する情報であってもよい。

条件は、投影する対象を特定するための条件を表す。条件としては、ユーザの属性や、ユーザの行動履歴を用いることができる。また、条件としては、時間帯を用いることもできる。
最低投影時間は、コンテンツの再生開始時間から再生終了時間までの間のうち、少なくともこのコンテンツを表示する再生時間を示すデータである。言い換えると、最低投影時間は、コンテンツの再生開始時間を基準として、再生対象のコンテンツが再生されている間において他のコンテンツへの切り替え、または当該再生されているコンテンツの再生の中止を行わない期間として規定された時間を示す。例えば、あるコンテンツの全体の時間（再生開始時間から再生終了時間までの時間）が１５秒であり、最低投影時間が５秒として設定されていた場合には、コンテンツが再生されてから５秒を経過するまでは、他のコンテンツの切り替えやコンテンツの再生の中止が行われず、５秒を経過した後は、当該コンテンツを他のコンテンツに切り替えたり、あるいは、当該コンテンツの再生を中止してコンテンツを非表示にしたりすることが可能である。

この図においては、コンテンツ「缶コーヒー」には「男性，２０代」、「ｔ１秒」が対応付けられており、「男性，２０代」の属性であるユーザを対象として「缶コーヒー」の商品に関するコンテンツを調光スクリーン３０に投影するものであり、その最低投影時間がｔ１秒であることを表している。これにより、カメラ１０で「男性，２０代」の属性に属するユーザが検出された場合には、「缶コーヒー」の商品を案内するコンテンツが調光スクリーン３０に投影される。

図１に戻り、行動解析部２２は、カメラ１０から得られる画像から検出された人物を識別し、そのユーザの行動を検出する。検出する対象の行動としては、配された物品（ショーケース６０や陳列棚に陳列された商品）に触れる動作、店内のいずれかの通路を通る動作、店内において滞留する動作、レジカウンターにおいて支払いをする動作、入店または退店する動作等である。

行動記憶部２３は、行動解析部２２によって得られた行動をユーザ毎にデータとして記憶する。
図３は、行動記憶部２３に記憶される行動履歴データの一例を示す図である。
行動履歴データは、来店者ＩＤと、時刻と、位置と、行動とを含むデータである。
来店者ＩＤは、ユーザが来店したことを検出することに応じて、そのユーザ毎に付与される識別情報である。この来店者ＩＤは、入店してから退店するまでの間、店内におけるユーザを個別に識別できればよく、１人のユーザが次回来店した際に同じ来店者ＩＤを割り当てなくてもよい。
時刻は、行動を行った時刻を表す。この時刻は、管理サーバ２０における時計機能において計時された時刻を用いることができる。
位置は、ユーザＵの店内における位置を示す。この位置は、行動解析部２２が、ユーザが立っている位置と向きを検出することで、その検出結果を用いることができる。例えば、店内における陳列棚の配置と商品のレイアウトとを対応付けた商品配置情報を管理サーバ２０が記憶しており、行動解析部２２が、商品識別情報と、ユーザの位置及び向きとに基づいて、ユーザがどの商品を吟味または取り出すかを検出するようにしてもよい。
また、カメラ１０によって撮影された領域を識別する情報を用いてもよい。

行動は、店内においてユーザＵが行った行動の内容を表す。
例えば、ユーザＵ＿００１に対して、時刻「２０１９年９月１日１０時００分０１秒」、位置「出入口」、行動「来店」が対応付けられている。これは、ユーザＵ＿００１が、それまで検出されていなかったが、時刻「２０１９年９月１日１０時００分０１秒」に、領域「出入口」において検出されたため、行動として「来店」であることが検出されたことを表している。

また、ユーザＵ＿００１に対して、時刻「２０１９年９月１日１０時０１分３０秒」、位置「米飯コーナー」、行動「おにぎりを取り出す」が対応付けられている。これは、ユーザＵ＿００１が、時刻「２０１９年９月１日１０時０１分３０秒」に、領域「米飯コーナー」において、「おにぎり」を陳列棚から取り出したことが検出されたことを表している。
ここで、管理サーバ２０が記憶する商品配置情報を参照することで、ユーザの位置及び向きと、商品を取り出す動作を検出することで、取り出された商品をある程度絞り込むことができる。例えば、行動解析部２２は、米飯コーナーから商品が取り出された場合には、店内に陳列された商品のうち、米飯コーナーに陳列された商品のいずれかであることを絞り込むことができる。また、行動解析部２２は、米飯コーナーに陳列される商品のリストと、ユーザによって取り出された商品の画像とを照合することで、商品をさらに絞りこむことができる、例えば、行動解析部２２は、取り出された商品の画像の特徴量を算出し、その特徴量とおにぎりの形状、サイズ、色等の特徴量とのマッチング度合いが一定値以上である場合には、米飯コーナーに陳列される商品のうちおにぎりであることを絞り込むことができる。このような行動解析を行う場合、ＡＩ（artificial intelligence）技術を用い、商品の画像の特徴量と商品名との関係を学習した学習済みモデルに対し、ユーザによって取り出された商品の画像を入力することで、商品名を得るようにしてもよい。

コンテンツ記憶部２１、行動記憶部２３は、記憶媒体、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、フラッシュメモリ、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ ｒｅａｄ／ｗｒｉｔｅ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、またはこれらの記憶媒体の任意の組み合わせによって構成される。
このコンテンツ記憶部２１、行動記憶部２３は、例えば、不揮発性メモリを用いることができる。

コンテンツ選択部２４は、カメラ１０によって検出されたユーザを対象とし、ユーザの属性またはユーザの行動履歴に応じて再生する対象となるコンテンツを選択する。
コンテンツ選択部２４は、１人のユーザを検知してそのユーザに対応したコンテンツを選択することもできるが、一定時間内に同じカメラ１０で検知されたユーザが複数である場合には、その検出されたそれぞれのユーザの属性または行動履歴に基づいて、コンテンツを選択するようにしてもよい。この場合、複数のユーザの属性または行動履歴における共通する事項を抽出し、抽出された事項に応じたコンテンツを選択するようにしてもよい。

再生管理部２５は、制御ユニット５０に対し、コンテンツの再生または再生中止を指示する。また、再生管理部２５は、コンテンツ記憶部２１に記憶されたコンテンツのうち、再生する対象のコンテンツを制御ユニット５０に送信する。再生する対象のコンテンツとしては、コンテンツ選択部２４によって選択されたコンテンツを用いることができる。
また、再生管理部２５は、コンテンツに最低投影時間が設定されている場合には、そのコンテンツを再生する指示を制御ユニット５０に対して行った後、店内のいずれかのカメラ１０によって他の人物が検出された場合、または、調光スクリーン３０の前に人物が検出された場合、最低投影時間が経過していなければコンテンツの再生を継続し、最低投影時間が経過していれば、コンテンツの再生を中止する指示を制御ユニット５０に出力する。
また、再生管理部２５は、あるユーザを検出してコンテンツを再生している期間において、店内のいずれかのカメラ１０によって別のユーザが検出された場合には、その新たに検出されたユーザの属性に応じたコンテンツを再生するよう制御ユニット５０に指示する。

調光スクリーン３０は、透過状態と不透過状態とを切り替え可能な機能性フィルムを有する。調光スクリーン３０は、外部から供給される電力を機能性フィルムに供給するか否かによって、透過状態と不透過状態とを切り替えることができる。調光スクリーン３０には、電力供給した際に不透過状態となり、電力の供給を停止した場合に透過になるタイプと、電力供給した際に透過状態となり、電力の供給を停止した場合に不透過になるタイプとがあるが、いずれを用いるようにしてもよい。
ここで、透過状態は、調光スクリーン３０の透過度合いが最も高い状態であり、不透過状態は、透過状態よりも透過度合いが低い状態である。不透過状態は、透過状態よりも透過度合いが低ければよく、透過度合いを段階的に設定することが可能である場合には、複数の段階のうちのいずれかの段階であってもよい。透過度合いは、例えば、機能性フィルムに供給される電圧に応じて、複数の段階のうち、いずれかの透過度合いに切り替えることができる。

このような調光スクリーン３０としては、種々の製品が提供されているが、例えば、ＬＣ ＭＡＧＩＣ（登録商標）（凸版印刷株式会社製，品番「ＮＷ００１」）を用いることができる。また、調光スクリーン３０を構成するための技術としては、例えば、特許第６４２８９８３号公報に記載された技術を用いてもよい。
調光スクリーン３０は、透過状態において、正面側から見た場合、背面側を視認すること可能である。これにより、透過状態においては、調光スクリーン３０の背面側にある物品をユーザに対して視認してもらうことが可能となる。一方で、不透過状態において、不透過状態となった領域にプロジェクタ４０からコンテンツが投影されることで、調光スクリーン３０において、コンテンツを表示することが可能である。

また、調光スクリーン３０が不透過状態となった場合には、調光スクリーン３０の背面側に光源（ショーケース６０内に設置された照明等）があった場合であっても、光源からの光が調光スクリーン３０の正面側に透過することを防ぐことができるため、背面側からの光の影響を受けにくくした上で、コンテンツを投影することができる。これにより、調光スクリーン３０の背面側が明るい状態であっても、その影響を受けにくくした上で、コンテンツを投影することができるため、プロジェクタ４０から投影されたコンテンツを視認することができる。
調光スクリーン３０を用いることで、タブレット端末等の筐体を設置する必要がなく、商品がタブレット端末の裏側となってしまい、ユーザに商品を視認してもらいにくくなることを回避することができる。また、タブレット端末等を設置する必要がないことから、スペースを有効活用することができる。

また、調光スクリーン３０は、正面側から見た場合、その形状は矩形状であるが、矩形の一部が内周側に窪むような形状であってもよいし、円形や三角形等の矩形以外の形状であってもよく、環状または円環状であってもよい。
また、調光スクリーン３０は、透過状態と不透過状態との切り替えが可能な領域の全面を一度に切り替えるようにしてもよいし、全面を複数の領域に分割し、その分割された領域毎に、透過状態から不透過状態に切り替えるまたは不透過状態から透過状態に切り替えるようにしてもよい。

調光スクリーン３０は、人物が通行可能な通行可能領域と、物品が配される物品割当領域との間に設置される。物品割当領域は、物品を配することが可能な領域であればよい。この物品割当領域は、物品を陳列または展示をする領域として割り当てられた領域であってもよく、例えば、陳列棚、陳列台、展示棚、展示台、什器等に配される領域であってもよいし、物品が吊り下げ器具に吊り下げられることで配される領域であってもよい。調光スクリーン３０の設置方法としては、透過であって両面に粘着材が塗布された粘着シートによって、調光スクリーン３０をショーケース６０のガラスの扉に貼り付けるようにしてもよい。この実施形態においては、ショーケース６０の正面側の扉に設けられる場合について説明する。

プロジェクタ４０は、制御ユニット５０に接続される。この接続は、有線または無線のいずれであってもよい。有線で接続される場合、例えば、ＨＤＭＩ（登録商標）ケーブルを用いることができる。
プロジェクタ４０は、調光スクリーン３０に対してコンテンツを投影する。このプロジェクタ４０は、調光スクリーン３０のうちコンテンツを視認する正面側の面にコンテンツを投影するプロジェクタであってもよく、また、調光スクリーン３０の裏面からコンテンツを投影するリア投影型のプロジェクタであってもよい。
また、プロジェクタ４０は、短焦点型のプロジェクタを用いることもできる。図４は、プロジェクタ４０として短焦点型のプロジェクタを用いた場合の設置状況を示す図である。この場合、調光スクリーン３０の上方側にプロジェクタ４０を設けることで、コンテンツを投影することができる。たとえば、調光スクリーン３０の正面側にプロジェクタ４０を設置するスペースがない場合等において有効である。また、プロジェクタ４０を調光スクリーン３０の上方側に設けることで、店内を回遊するユーザの通行等の妨げになりにくいというメリットもある。

制御ユニット５０は、制御部５１、出力部５２を有する。制御ユニット５０は、例えばコンピュータが用いられる。
制御部５１は、検出部１２の検出結果に応じて管理サーバ２０の再生管理部２５から送信される、コンテンツの再生、中止指示に基づいて、調光スクリーン３０に対して、透過状態または不透過状態のいずれかの状態に切り替える。

また、制御部５１は、検出部１２の検出結果に基づいて、通行可能領域に人物が存在することを検出した場合に調光スクリーン３０を不透過状態に切り替えることもできる。
制御部５１は、通行可能領域のうち、調光スクリーン３０が設けられた物品割当領域の近傍の領域において人物が検出された場合には、調光スクリーン３０を透過状態にすることもできる。

出力部５２は、プロジェクタ４０にコンテンツを出力する。出力部５２は、コンテンツを出力する際には、調光スクリーン３０に対して不透過状態に切り替える指示とともにコンテンツを出力する。
出力部５２は、属性判定部１３の判定結果に応じたコンテンツや、行動解析部２２によって解析された結果に応じたコンテンツを出力することもできる。

出力部５２は、検出部１２によって画像に基づいて人物が複数検出された場合には、先に検出された人物に応じたコンテンツを表示させ最低投影時間が経過してから、後に検出された人物に応じたコンテンツを表示させることができる。
また、出力部５２は、通行可能領域のうち、物品割当領域の近傍の領域において人物が検出された場合には、コンテンツを非表示にする指示をする。

ショーケース６０は、商品や展示物等の物品を陳列可能な棚である。ショーケース６０は、複数段の棚板を有するもの、物品をつり下げるフックを有するもの等の種々のタイプのうちいずれのタイプであってもよい。ショーケース６０は、商品や展示物を収容することで陳列する。ショーケース６０は、陳列された物品を冷蔵状態または冷凍状態を保持する機能や、ショーケース６０内の湿度を調整する湿度調整機能を有していてもよい。また、ショーケース６０は、開閉可能な扉が設けられ、当該扉を開けることで物品を取り出せるようにしてもよい。

物品としては、例えば、飲料、食料、衣服、装飾品、電化製品などがある。また、調光スクリーン３０の背面側には何らかの物品があればよいため、例えば、調光スクリーン３０の背面における店舗が美容室、飲食店等のサービス等を提供する店舗である場合には、サービスを提供するために用いられる物品であってもよい。

ショーケース６０は、店舗内に設置される。また、ショーケース６０の正面側には、開閉可能な扉が設けられている。この扉を開けることで、ショーケース６０内の物品を取り出したり、収容したりすることが可能である。また、ショーケース６０の背面側にも開閉可能な扉が設けられていてもよい。この場合、背面側から物品をショーケース６０内に収容し、扉から物品を取り出すこともできる。

ここで、ショーケース６０の扉は、ガラス等の透過な材質が用いられており、ショーケース６０の正面側からショーケース６０内の物品を視認できるようになっている。また、ショーケース６０の扉に設けられた調光スクリーン３０が透過状態である場合には、ショーケース６０の正面側からショーケース６０内を見ると、扉、調光スクリーン３０、粘着材等がいずれも透過であるため、ショーケース６０内に収容された物品を視認することができる。一方、調光スクリーン３０が不透過状態に切り替えられた場合には、ショーケース６０の正面側から見ると不透過状態となった領域に、プロジェクタ４０から投影されたコンテンツを、ユーザから視認可能に表示することができる。なお、調光スクリーン３０の不透過度合いはプロジェクタ４０から投影されたコンテンツが視認可能であればよく、スクリーンを通して物品を視認可能であるとともにコンテンツを視認できるような半透明状態でもかまわない。

この図においては、ショーケース６０の正面側の扉のうち、ショーケース６０の１つの扉に調光スクリーン３０が設けられている場合について説明するが、調光スクリーン３０は、少なくとも１つ設けられていればどの扉に設けられていてもよく、また、複数の扉または全ての扉にそれぞれ設けられてもよい。
また、この実施形態においては、物品の物品割当領域がショーケース６０である場合について説明するが、調光スクリーン３０は、人物が通行可能な通行可能領域と、物品が配される領域との間に設置されれば、物品が展示される領域や物品が陳列される領域であってもよく、また、ショーケース６０以外に設けられていればよい。例えば、ショーウインドウや、通路と売り場あるいは展示ブースとを仕切る透過のパーティション等に設けるようにしてもよい。この場合、ユーザは、通路側から、調光スクリーン３０を介して店舗内の物品を視認したり、調光スクリーン３０のコンテンツを視認したりすることができる。

図５は、店舗Ｓの店内の各機器の設置状況を説明する図である。
店舗Ｓにおいて、出入口１００から店内に入ると、正面側にレジカウンター１１０が設けられており、レジカウンター１１０を基準として一方の壁側には作業領域１１０ａが設けられており、店員１５０、店員１５１、店員１５２がレジ業務や来客対応を行うことが可能となっている。
レジカウンター１１０が設置された壁面側とは反対側の壁面側には、壁面に沿うように陳列棚１１１が設置される。この陳列棚１１１には、例えば、おにぎりや弁当が陳列される米飯コーナー、サンドイッチや副食が陳列される総菜コーナー、パスタやラーメン等の麺類が陳列される麺類コーナー等がある。例えば、陳列棚１１１のうち、ショーケース６０に近い部位には、米飯コーナー、陳列棚１１４に近い部位には、総菜コーナーと麺類コーナーが割り当てられており、この割り当てに応じた商品が陳列される。

レジカウンター１１０と陳列棚１１１との間には、ショーケース６０、陳列棚１１２、陳列棚１１３、陳列棚１１４が設けられる。ショーケース６０は、出入口１００とは反対側の壁面側に設けられる。陳列棚１１４は、出入口１００が設けられた壁面側に設けられる。陳列棚１１２と陳列棚１１３は、ショーケース６０と陳列棚１１４との間に設けられる。陳列棚１１２は、ショーケース６０に対向する位置に設けられ、陳列棚１１３は、陳列棚１１４に対向する位置に設けられる。
ショーケース６０、陳列棚１１２、陳列棚１１３、陳列棚１１４のそれぞれの一端側は、レジカウンター１１０側に配置され、他端側は、陳列棚１１１側に配置される。ショーケース６０には、例えば飲料や食品等が陳列される。陳列棚１１２、陳列棚１１３、陳列棚１１４には、パン、菓子類、日用品、文房具、雑誌等が適宜陳列される。

複数のカメラ１０（１０Ａ１、１０Ｂ１、１０Ｃ１、１０Ｃ２、１０Ｃ３、１０Ｃ４）は、店内の天井面においてお互いに異なる位置に設置され、それぞれ、少なくとも通行可能領域を含む領域を撮像する。
カメラ１０Ａ１は、レジカウンター１１０とショーケース６０との間に設置され、レジカウンター１１０を基準として作業領域１１０ａとは反対側の領域である領域ＲＡ１を含むように撮像する。領域ＲＡ１は、レジカウンター１１０において商品の代金を支払うユーザＵや、レジカウンター１１０の正面側を通行するユーザＵを撮像可能な領域である。ここでは、領域ＲＡ１は、レジカウンター１１０の長手方向に沿うような範囲である。

カメラ１０Ａ２は、ショーケース６０の一端側（陳列棚１１１側）に設置され、陳列棚１１１の正面側の通路を含む領域である領域ＲＡ２を含むように撮像する。領域ＲＡ２は、陳列棚１１１に陳列された商品を吟味あるいは取り出すユーザＵや、陳列棚１１１ショーケース６０または陳列棚１１２との間を通行するユーザＵを撮像することが可能な領域である。ここでは、領域ＲＡ２は、陳列棚１１１の長手方向に沿うような範囲であり、主に、陳列棚１１１の正面側の領域のうち陳列棚１１１の一端側（ショーケース６０側）の領域である。

カメラ１０Ｂ１は、ショーケース６０と陳列棚１１２との間に設置され、ショーケース６０の正面側の通路を含む領域である領域ＲＢ１を含むように撮像する。領域ＲＢ１は、ショーケース６０に陳列された商品を吟味あるいは取り出すユーザＵや、ショーケース６０と陳列棚１１２との間を通行するユーザＵを撮像することが可能な領域である。ここでは、領域ＲＢ１は、ショーケース６０の正面側のうち、特に、調光スクリーン３０の表示面近傍の領域である。

カメラ１０Ｃ１は、レジカウンター１１０と出入口１００との間に設置され、出入口１００あるいは出入口１００の近傍の領域である領域ＲＣ１を含むように撮像する。領域ＲＣ１は、出入口１００の近傍にいるユーザ、例えば、出入口１００から店内に入るユーザＵや出入口１００から店外に出るユーザを撮像することが可能な領域である。

カメラ１０Ｃ２は、陳列棚１１４の他端側（陳列棚１１１側）に設置され、陳列棚１１１の正面側の通路を含む領域である領域ＲＣ２を含むように撮像する。領域ＲＣ２は、陳列棚１１１に陳列された商品を吟味あるいは取り出すユーザＵや、陳列棚１１１と陳列棚１１４または陳列棚１１３との間を通行するユーザＵを撮像することが可能な領域である。ここでは、領域ＲＣ２は、陳列棚１１１の長手方向に沿うような範囲であり、主に、陳列棚１１１の正面側の領域のうち陳列棚１１１の他端側（陳列棚１１４側）の領域である。

カメラ１０Ｃ３は、陳列棚１１３と陳列棚１１４との間であって、陳列棚１１１の他端側（陳列棚１１４側）に設置され、陳列棚１１３と陳列棚１１４との間の通路を含む領域である領域ＲＣ３を含むように撮像する。領域ＲＣ３は、陳列棚１１３のうち陳列棚１１４に対向する側に陳列された商品または陳列棚１１４に陳列された商品を、吟味あるいは取り出すユーザＵを撮像することが可能であり、陳列棚１１３と陳列棚１１４との間を通行するユーザＵを撮像することも可能な領域である。ここでは、領域ＲＢ１は、ショーケース６０の正面側のうち、特に、調光スクリーン３０の正面側の領域である。

カメラ１０Ｃ４は、陳列棚１１２と陳列棚１１３との間であって、陳列棚１１１側に設置され、陳列棚１１３と陳列棚１１４との間の通路を含む領域である領域ＲＣ４を含むように撮像する。領域ＲＣ４は、陳列棚１１２のうち陳列棚１１３に対向する側に陳列された商品、または陳列棚１１３のうち陳列棚１１２に対向する側に陳列された商品を、吟味あるいは取り出すユーザＵや、陳列棚１１２と陳列棚１１３との間を通行するユーザＵを撮像することも可能な領域である。

調光スクリーン３０は、ショーケース６０の一端側（陳列棚１１１側）の扉に設けられる。プロジェクタ４０は、陳列棚１１２近傍の天井面に設けられ、調光スクリーン３０にコンテンツを投影する。

次に、図６は、上述の表示制御システム１の動作を説明するシーケンス図である。
複数のカメラ１０のうち、カメラ１０Ａ２は、撮像された画像から人物が検出されたか否かを判定する（ステップＳ１０１）。カメラ１０Ａ２は、人物が検出されていなければ（ステップＳ１０１−ＮＯ）、一定時間後に新たに撮像された画像を用いて、人物が検出されたか否かを判定する。一方、人物が検出された場合（ステップＳ１０１−ＹＥＳ）、カメラ１０Ａ２は、検出された人物の属性がいずれであるかを判定し（ステップＳ１０２）、判定結果と撮像された画像とを管理サーバ２０に送信する。カメラ１０Ａ２は、必要に応じて、同じユーザが他のカメラで撮像されている場合には、そのカメラから得られる属性を取得し、取得した属性とカメラ１０Ａ２において得られた属性とに基づいて、属性を特定するようにしてもよい。これにより、属性を推定する精度を向上させることができる。
管理サーバ２０は、カメラ１０Ａ２から判定結果と画像とを取得すると、判定結果に応じたコンテンツを特定し（ステップＳ２０１）、特定されたコンテンツを読み出して制御ユニット５０に出力するとともに、コンテンツ投影の指示を出力する（ステップＳ２０２）。

制御ユニット５０は、管理サーバ２０から投影指示が入力されると、調光スクリーン３０に対して透過状態を不透過状態に切り替える指示を出力し（ステップＳ３０１）、コンテンツをプロジェクタ４０に出力するとともに投影指示を出力する（ステップＳ３０２）。
調光スクリーン３０は、制御ユニット５０か出力された指示に基づいて、不透過状態に切り替える（ステップＳ４０１）。プロジェクタ４０は、制御ユニット５０からコンテンツとコンテンツ投影の指示に基づいて、制御ユニット５０から出力されたコンテンツを調光スクリーン３０に投影する（ステップＳ５０１）。

ここでは、ユーザＵがカメラ１０Ａ２によって撮像されることで、ユーザＵが陳列棚１１２のうちショーケース６０の近い領域（領域ＲＡ２）に来たと判定することができる。また、撮像された画像から、ユーザの属性がいずれであるかを推定することができるため、その推定された属性に応じたコンテンツを選択することができる。そして、調光スクリーン３０にコンテンツを投影する。ここで投影するコンテンツとしては、例えば、ユーザの属性が「男性，３０代」である場合には、緑茶のコンテンツが選択される。これにより、陳列棚１１１のうちショーケース６０に近い領域（米飯コーナー）に来たことが検出された「男性，３０代」の属性のユーザに対して、緑茶のコンテンツが表示されるため、米飯コーナーにおいておにぎり等を購入する可能性があるユーザに対して、この商品に対する飲料のお勧め商品に関するコンテンツを表示することができ、おにぎり等を購入するだけでなく、飲料も購入してもらえるように誘引することが可能となる。また、この領域ＲＡ２において検出されたユーザが、この領域ＲＡ２に到来する前の段階（例えば、領域ＲＣ１、領域ＲＣ３、領域ＲＣ２等）においては、調光スクリーン３０は透過状態であるため、ショーケース６０内の物品が視認可能な状態であり、また、コンテンツが投影されていない状態である。そして、ユーザが陳列棚１１１に到来した際に、調光スクリーン３０が不透過状態となりコンテンツが投影されるため、単なるショーケース６０であると思っていたにも関わらず、コンテンツが表示されるため、より強い印象を与えつつコンテンツを視認してもらうことができる。

また、ここでは、コンテンツに対応する商品は、調光スクリーン３０が設けられた位置またはその近傍に陳列されている。そして、コンテンツを投影するきっかけとなる撮像位置は、領域ＲＡ２であり、ショーケース６０に近いため、この商品を手にしてもらえる可能性がある経路に該当する。そのため、領域ＲＡ２にユーザが到来したことを検出された際にコンテンツを出力するようにしたので、ショーケース６０に来るであろうユーザを、ショーケース６０に収容された商品の近傍まで引き込むことが可能となる。
また、店内において商品を訴求したい対象のユーザが所定の位置まで到来した際に、コンテンツを表示させることができるため、対象外のユーザあるいは、ユーザが所定の位置まで到来していない場合には、コンテンツが表示されず、かつ調光スクリーン３０が透過状態であるため、ユーザはやや離れた場所から商品を視認することができる。そのためユーザは、商品の陳列位置をある程度把握しながら店内を回遊することができる。

また、カメラ１０によって人物が検出されたことに応じてコンテンツを表示することができるため、事前にユーザ登録をしてもらったり、あるいは、特別な操作をしてもらうことなく、コンテンツを表示することができる。

次に、カメラ１０Ａ２は、撮像された画像から人物が検出されたか否かを判定する（ステップＳ１０３）。カメラ１０Ａ２は、人物が検出されていなければ（ステップＳ１０３−ＮＯ）、一定時間後に新たに撮像された画像を用いて、人物が検出されたか否かを判定する。一方、人物が検出された場合（ステップＳ１０３−ＹＥＳ）、カメラ１０Ａ２は、検出された人物の属性がいずれであるかを判定し（ステップＳ１０４）、判定結果と撮像された画像とを管理サーバ２０に送信する。ここでは、カメラ１０Ａ２は、ステップＳ１０１において検出された人物と、ステップＳ１０３において検出された人物が同一人物であるか否かを判定するようにしてもよい。そして、異なる人物であると判定された場合に、ステップＳ１０４において、ユーザの属性を判定して判定結果を送信するようにしてもよい。ここでは、異なる人物が検出されたものとして説明する。

管理サーバ２０再生管理部２５は、カメラ１０Ａ２から属性の判定結果が入力されると、ステップＳ２０２において投影指示をした時点から、ステップＳ２０１において特定されたコンテンツの最低投影時間内であるか否かを判定する（ステップＳ２０３）。管理サーバ２０の再生管理部２５は、最低投影時間内である場合（ステップＳ２０３−ＹＥＳ）、再生を継続し（ステップＳ２０６）、ステップＳ２０３に移行する。
一方、再生管理部２５は、最低投影時間内ではない場合（ステップＳ２０３−ＮＯ）、ステップＳ１０４において送信された属性に対応するコンテンツを特定し（ステップＳ２０４）、特定されたコンテンツを制御ユニット５０に出力するとともに、コンテンツ投影の指示を出力する（ステップＳ２０５）。

制御ユニット５０は、管理サーバ２０からコンテンツ投影の指示とコンテンツとが出力されると、ここでは、ステップＳ３０２においてコンテンツの投影指示をしたコンテンツの再生が終了する時間が到来していないことを検出し、コンテンツを切り替える指示をプロジェクタ４０に出力するとともに、ステップＳ２０５において出力されたコンテンツをプロジェクタ４０に出力する（ステップＳ３０３）。

プロジェクタ４０は、制御ユニット５０からコンテンツ投影の指示とコンテンツを受信すると、投影する対象のコンテンツを、この受信したコンテンツに切り替えて投影する（ステップＳ５０２）。
これにより、後から来たユーザに応じたコンテンツに切り替えるようにしたので、先仁来たユーザに対してある程度コンテンツを閲覧してもらった上で、次に来たユーザに対応したコンテンツを、当該次に来たユーザに閲覧してもらうことができる。

ここでは、コンテンツを切り替える場合について説明したが、ステップＳ２０５において再生管理部２５がコンテンツの再生を停止させる停止指示を制御ユニット５０に出力するようにしてもよい。これにより、表示されていたコンテンツが非表示となるともに、調光スクリーン３０が透過状態に切り替わる。このため、新たに到来したユーザが、ショーケース６０内の商品を視認する際に、他のユーザの行動を契機として再生されたコンテンツによって商品が視認できなくなってしまうことを防止することができる。コンビニエンスストアにおいては、自分が確認したい商品と自分の間に別のユーザがいる場合には、そのユーザから少し離れた位置から商品を確認する場合もあるため、コンテンツを非表示することで、商品の吟味をし易くなる。

一方、カメラ１０Ｂ１は、撮像された画像から人物が検出されたか否かを判定する（ステップＳ６０１）。カメラ１０Ａ２は、人物が検出されていなければ（ステップＳ６０１−ＮＯ）、一定時間後に新たに撮像された画像を用いて、人物が検出されたか否かを判定する。一方、人物が検出された場合（ステップＳ６０１−ＹＥＳ）、カメラ１０Ａ２は、人物が検出されたことを管理サーバ２０に出力する（ステップＳ６０２）。

管理サーバ２０は、人物を検出したことがカメラ１０Ｂ１から出力されると、制御ユニット５０に対し、コンテンツの再生を停止させる指示を出力する（ステップＳ２０７）。制御ユニット５０は、コンテンツ再生停止の指示が管理サーバ２０から出力されると、調光スクリーン３０に対して透過状態に切り替える指示を出力するとともに（ステップＳ３０４）、プロジェクタ４０に対してコンテンツの投影を中止する指示を出力する（ステップＳ３０５）。

調光スクリーン３０は、制御ユニット５０から透過状態に切り替える指示が出力されると、この指示に応じて、透過状態に切り替える（ステップＳ４０２）。プロジェクタ４０は、制御ユニット５０からコンテンツ再生停止指示が出力されると、コンテンツの投影を停止する（ステップＳ５０３）。

これにより、ユーザが調光スクリーン３０の前（領域ＲＢ１）に到来した場合には、調光スクリーン３０を透過状態に切り替えるとともに、コンテンツを非表示にするため、調光スクリーン３０が不透過状態となっている領域の背面側の商品が視認できない状態を回避することができる。ユーザは、調光スクリーン３０が透過状態となるため、調光スクリーン３０の背面側にある商品を調光スクリーン３０の正面側から視認することができる。ここでは、コンテンツがある程度表示された後に非表示となるため、コンテンツおいて紹介された商品がショーケース６０内のどこにあるかを簡単に把握することができ、また、コンテンツにおいて紹介された商品を購入するか否かを、実際の商品を見ながら検討することができる。

また、ここでは、領域ＲＢ１においてユーザが検出されると直ちにコンテンツを非表示にしてもよいし、一定時間が経過してから非表示にしてもよい。また、非表示する場合には、調光スクリーン３０を段階的に透過状態に近づけ、最終的に透過状態に切り替えるようにしてもよい。
また、ここでは、カメラ１０Ｂ１が設けられている場合に、このカメラ１０Ｂ１の検出結果を利用してコンテンツを非表示する場合について説明したが、カメラ１０Ｂ１は、必ずしも設置されていなくてもよい。その場合、管理サーバ２０におけるステップＳ２０７の処理、制御ユニット５０におけるステップＳ３０４、Ｓ３０５の処理、プロジェクタ４０におけるステップＳ５０３の処理を行わないようにしてもよい。

図７は、調光スクリーン３０にコンテンツが表示された状態を示す図である。
この図において、調光スクリーン３０は、環状となるように２つの領域に分割されている。調光スクリーン３０の主面のうち、内周側の一部の領域３０ａが透過状態であり、外周に沿った領域３０ｂが不透過状態である。そして、領域３０ｂにおいてコンテンツが投影されている。この場合、調光スクリーン３０の正面側から見て領域３０ａに対応する位置においてショーケース６０内に陳列された商品６５を視認可能な状態となっており、かつ、その周囲に、商品６５に関連するコンテンツが視認可能に表示されている。
このように、通路側からショーケース６０内を見て、調光スクリーン３０不透過状態となる領域の形状（または透過状態となる領域の形状）は、物品割当領域に配された物品に応じた形状となるように、設定される。調光スクリーン３０の表示可能な領域（または非表示にする領域）が設定される。これにより、コンテンツとして表示された内容と実際の商品との関係を把握し易い。
また、実際の商品を視認してもらいつつ、その外周側に目線を移動させることで、コンテンツを視認することが可能である。

以上説明した実施形態において、カメラ１０によって検出された属性に対応するコンテンツを表示する場合について説明したが、カメラ１０によって検出された人物の行動に応じたコンテンツを出力するようにしてもよい。
例えば、行動解析部２２は、陳列棚１１１の前に到来したユーザによって、陳列棚１１１からおにぎりが取り出されたことを検出した場合には、コンテンツ記憶部２１を参照し、この行動に対応するコンテンツである「ほうじ茶」を読み出し、プロジェクタ４０によって投影するようにしてもよい。これにより、ユーザの位置のみではなく、実際の行った行動に応じたコンテンツを表示することができる。

また、行動解析部２２は、ユーザの１つの行動に基づいてコンテンツを選択するようにするだけでなく、行動の履歴に基づいてコンテンツを選択するようにしてもよい。例えば、行動解析部２２は、ユーザが店内を回遊した履歴を記憶しておき、店内において特定の経路に沿って回遊したことを検出した場合に、その履歴に応じたコンテンツを表示するようにしてもよい。また、ユーザが手に取った商品の履歴に基づいて、コンテンツを表示するようにしてもよい。この場合、手に取った商品の組み合わせに応じたコンテンツを表示することができる。

行動解析部２２は、行動履歴を解析するにあたり、解析対象のユーザについて、異なる複数のカメラ１０から得られた画像に基づく行動の履歴を時系列につなぎ合わせ、その履歴に基づいて、コンテンツを選択するようにしてもよい。例えば、行動解析部２２は、あるカメラ１０においてユーザの属性を検出しておき、この属性と、別のカメラで収集された行動履歴との組み合わせに基づいて、コンテンツを選択するようにしてもよい。

また、上述した実施形態において、調光スクリーン３０に対してプロジェクタ４０からコンテンツを投影することでコンテンツを表示する場合について説明したが、透過状態と不透過状態とを切り替えることができる表示装置であれば、他の表示装置を用いるようにしてもよい。例えば、表示領域が透過であり、コンテンツが表示された際にコンテンツが表示された領域が半透過または不透過となる透過ディスプレイ（透過ディスプレイとも称される）を用いることもできる。透過ディスプレイには、透過型有機ＥＬ（Electroluminescence）ディスプレイ、透過型無機ＥＬディスプレイ、透過ＬＣＤ（liquid crystal display）ディスプレイ等のうち、いずれを用いてもよい。
このような透過ディスプレイを用いる場合、コンテンツを表示している領域については、不透過状態とすることができ、表示領域のうちコンテンツが表示されていない領域または、コンテンツを表示していないときには透過状態とすることができる。

カメラ１０は、画像取得部１１、検出部１２、属性判定部１３を有する場合について説明したが、これらの機能が管理サーバ２０に設けられていてもよい。また、管理サーバ２０が有する機能の一部が制御ユニット５０に設けられていてもよい。

上述した実施形態におけるカメラ１０の機能、管理サーバ２０の機能、制御ユニット５０の機能をコンピュータで実現するようにしてもよい。その場合、この機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよく、ＦＰＧＡ（Field Programmable Gate Array）等のプログラマブルロジックデバイスを用いて実現されるものであってもよい。

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

１…表示制御システム、１０，１０Ａ１，１０Ａ２，１０Ｂ１，１０Ｃ１，１０Ｃ２，１０Ｃ３，１０Ｃ４…カメラ、１１…画像取得部、１２…検出部、１３…属性判定部、２０…管理サーバ、２１…コンテンツ記憶部、２２…行動解析部、２３…行動記憶部、２４…コンテンツ選択部、２５…再生管理部、３０…調光スクリーン、４０…プロジェクタ、５０…制御ユニット、５１…制御部、５２…出力部、６０…ショーケース、６５…商品、１００…出入口、１１０…レジカウンター、１１０ａ…作業領域、１１１，１１２，１１３，１１４…陳列棚、１５０，１５１，１５２…店員

Claims (10)

1. １又は複数の撮像装置から出力される画像を取得する画像取得部と、
   前記画像に含まれる人物を検出する検出部と、
   透過状態と不透過状態とを切り替え可能な表示部を、前記検出部の検出結果に応じて透過状態または不透過状態のいずれかの状態に切り替える制御部と、
   前記表示部に画像を表示する表示装置にコンテンツを出力する出力部と、
   を有する表示制御システム。
2. 前記表示部は、前記人物が通行可能な通行可能領域と、物品が配される物品割当領域との間に設置され、
   前記撮像装置は、前記通行可能領域を撮像し、
   前記制御部は、前記通行可能領域に人物が存在することを検出した場合に前記表示部を不透過状態に切り替え、
   前記出力部は、前記不透過状態の表示部に表示させるコンテンツを出力する
   請求項１に記載の表示制御システム。
3. 前記制御部は、
   前記通行可能領域のうち、前記物品割当領域の近傍の領域において人物が検出された場合には、前記表示部を透過状態にする
   請求項２に記載の表示制御システム。
4. 前記出力部は、前記通行可能領域のうち、前記物品割当領域の近傍の領域において人物が検出された場合には、前記表示装置に対してコンテンツを非表示にする指示をする
   請求項２または請求項３に記載の表示制御システム。
5. 前記検出部によって検出された人物の属性を判定する属性判定部を有し、
   前記出力部は、前記判定された属性に応じたコンテンツを出力する
   請求項１から請求項４のうちいずれか１項に記載の表示制御システム。
6. 前記出力部は、
   前記検出部によって前記画像に基づいて前記人物が複数検出された場合には、先に検出された人物に応じたコンテンツを表示させてから規定時間が経過した後、後に検出された人物に応じたコンテンツを表示する
   請求項１から請求項５のうちいずれか１項に記載の表示制御システム。
7. 前記撮像装置は、前記表示部の表示面近傍の領域を撮像する第１撮像装置と、前記表示部の表示面近傍から離れた領域を撮像する第２撮像装置とがあり、
   前記制御部は、前記第２撮像装置によって得られた画像から人物が検出された場合には、前記表示部を不透過状態にし、当該不透過状態において前記第１撮像装置によって得られた画像から人物が検出された場合には前記表示部を透過状態にする
   請求項１から請求項６のうちいずれか１項に記載の表示制御システム。
8. 前記画像に基づいて、前記人物の行動履歴を記憶する記憶部を有し、
   前記出力部は、前記人物の行動履歴に応じたコンテンツを出力する
   請求項１から請求項７のうちいずれか１項に記載の表示制御システム。
9. 前記表示部の不透過領域の形状は、前記表示部の正面側からみて、物品割当領域に配された物品に応じた形状である
   請求項１から請求項８のうちいずれか１項に記載の表示制御システム。
10. 画像取得部が、１又は複数の撮像装置から出力される画像を取得し、
    検出部が、前記画像に含まれる人物を検出し、
    制御部が、透過状態と不透過状態とを切り替え可能な表示部を、前記検出部の検出結果に応じて透過状態または不透過状態のいずれかの状態に切り替え、
    出力部が、前記表示部に画像を表示する表示装置にコンテンツを出力する
    表示制御方法。

Images