JP2010176510A - 情報表示装置 - Google Patents

Abstract

【課題】情報表示面の前方に存在する人物の所望する情報を情報表示面に表示することが出来る情報表示装置を提供する。
【解決手段】本発明に係る情報表示装置は、ディスプレイ本体１、情報表示面10の前方を撮影する撮影装置２、及び制御装置３を具えている。制御装置３は、撮影装置２から得られる画像信号に基づいて情報表示面10の前方に存在する人物の動作を検出する動作検出手段と、表示可能な複数の情報の中から少なくとも１つの情報を選択するための選択画面がディスプレイ本体１の情報表示面10に表示されている状態で、動作検出手段によって検出された動作に応じて前記複数の情報の中から少なくとも１つの情報を選択する選択手段と、選択手段によって選択された情報をディスプレイ本体１の情報表示面10に表示する情報表示処理手段とを具えている。
【選択図】図１

Description

本発明は、情報表示面の前方に存在する人物の所望する情報を情報表示面に表示することが可能な情報表示装置に関するものである。

近年、バスの停留所や駅等の公共の場に設置されて、広告情報や報知情報を表示する大型の情報表示装置の開発が進められている。
一方で、人物の存在を検知する複数のセンサを具え、それらのセンサの検知結果に基づいて機械の前方に存在する人物が大人或いは子供の何れであるかを判別し、その判別結果に応じた広告情報を情報表示面に表示する利用者識別機能付きサービス提供機械が提案されている(特許文献１参照)。
又、カメラ部によって撮影した画像からユーザを認識し、その認識結果に基づいて特定される広告データを表示部に表示する受信機が提案されている(特許文献２参照)

特開２００１−９３０３１号公報 特開２００７−２７４２４６号公報

しかしながら、従来の情報表示装置においては、不特定多数者向けの一般的な広告情報や報知情報が情報表示面に表示されるに過ぎず、情報表示面の前方に存在する人物の所望する情報を表示することが出来ない問題があった。
そこで本発明の目的は、情報表示面の前方に存在する人物の所望する情報を情報表示面に表示することが出来る情報表示装置を提供することである。

本発明に係る情報表示装置は、
情報表示面の前方を撮影する撮影装置と、
前記撮影装置から得られる画像信号に基づいて、情報表示面の前方に存在する人物の動作を検出する動作検出手段と、
表示可能な複数の情報の中から少なくとも１つの情報を選択するための選択画面が情報表示面に表示されている状態で、前記動作検出手段によって検出された動作に応じて、前記複数の情報の中から少なくとも１つの情報を選択する選択手段と、
前記選択手段によって選択された情報を情報表示面に表示する情報表示処理手段
とを具えている。

上記本発明に係る情報表示装置においては、撮影装置によって情報表示面の前方に存在する人物が撮影される。そして、表示可能な複数の情報の中から少なくとも１つの情報を選択するための選択画面が情報表示面に表示されている状態で、前記人物がそれら複数の情報の中から少なくとも１つの情報を選択すべく所定の動作、例えば手及び腕を上下左右に動かす動作、手を開閉する動作、顔を上下左右に動かす動作を行なうと、撮影装置から得られる画像信号に基づいて該人物の該動作が検出され、その検出結果に応じて少なくとも１つの情報が選択されて情報表示面に表示される。
上記本発明に係る情報表示装置においては、情報表示面の前方に存在する人物は複数の情報の中から所望の情報を選択する動作を行なうことによって、所望の情報を情報表示面に表示させることが出来る。
又、仮に、ポインティングデバイス、タッチパネル、スイッチ等の接触型の情報入力装置を配備した場合には、不特定多数の人物が情報入力装置や情報表示装置本体に触れることになるため、情報入力装置が破損する問題、情報表示面が汚れる問題、情報表示装置本体の塗装が剥がれる問題等が生じる虞があるが、上記本発明に係る情報表示装置によれば、情報入力装置や情報表示装置本体に触れることなく所望の情報を選択することが出来るので、上記問題が生じることはない。

具体的構成において、前記撮影装置から得られる画像信号に基づいて、情報表示面の前方に一定時間以上に亘って情報表示面を注視している人物が存在するか否かを判断する存在有無判断手段を具えており、前記動作検出手段は、前記存在有無判断手段によって前記人物が存在すると判断された場合に該人物の動作を検出する。

所望の情報を選択せんとする人物は、情報表示面の前方で情報表示面をある程度長い時間に亘って注視している可能性が高い。そこで上記具体的構成においては、情報表示面の前方に一定時間以上に亘って情報表示面を注視している人物が存在する場合に、該人物の動作が検出される。
上記具体的構成によれば、情報表示面の前方に人物が存在する場合に常に動作の検出を行なうのではなく、一定時間以上に亘って情報表示面を注視している人物が存在する場合に限って動作の検出を行なうので、無駄な検出動作が行なわれることはない。

又、具体的構成において、前記撮影装置から得られる画像信号に基づいて、情報表示面の前方の所定位置で一定時間以上に亘って情報表示面を注視している人物が存在するか否かを判断する存在有無判断手段を具えており、前記動作検出手段は、前記存在有無判断手段によって前記人物が存在すると判断された場合に該人物の動作を検出する。

所望の情報を選択せんとする人物は、情報表示面の前方で情報表示面をある程度長い時間に亘って注視している可能性が高い。又、該人物は、情報表示面の幅方向の中央位置等、情報表示面を見易い位置に存在する可能性が高い。そこで上記具体的構成においては、情報表示面の前方の所定位置で一定時間以上に亘って情報表示面を注視している人物が存在する場合に、該人物の動作が検出される。
上記具体的構成によれば、情報表示面の前方に人物が存在する場合に常に動作の検出を行なうのではなく、所定位置で一定時間以上に亘って情報表示面を注視している人物が存在する場合に限って動作の検出を行なうので、無駄な検出動作が行なわれることはない。

更に具体的構成において、前記撮影装置から得られる画像信号に基づいて、情報表示面を注視している前記人物の画像を情報表示面に表示する画像表示処理手段を具えている。

上記具体的構成によれば、情報表示面を注視している人物は、情報表示面に表示される画像によって自己の動作を確認しながら所望の情報を選択するための動作を行なうことが出来る。

更に又、具体的構成において、携帯通信端末装置との間で通信を行なうことが可能であって、前記選択手段は、情報の送信を要求する際に選択すべき情報送信要求ボタンが情報表示面に表示されている状態で前記動作検出手段によって検出された動作に応じて該情報送信要求ボタンを選択することが可能であって、更に、該選択手段によって該情報送信要求ボタンが選択されたときに携帯通信端末装置に情報を送信する情報送信手段を具えている。

上記具体的構成においては、情報送信要求ボタンが情報表示面に表示されている状態で携帯通信端末装置のユーザが該情報送信要求ボタンを選択すべく所定の動作を行なうと、撮影装置から得られる画像信号に基づいて該ユーザの該動作が検出され、その結果、ユーザの携帯通信端末装置に情報が送信されることになる。

本発明に係る情報表示装置によれば、情報表示面の前方に存在する人物の所望する情報を情報表示面に表示することが出来る。

以下、本発明の実施の形態につき、図面に沿って具体的に説明する。
本発明に係る情報表示装置においては、図１に示す如く、情報表示面(10)を具えたディスプレイ本体(１)の上部に、情報表示面(10)の前方を撮影するＣＣＤカメラ等からなる撮影装置(２)が配備されており、前記ディスプレイ本体(１)の背部には、情報表示装置全体の動作を制御する制御装置(３)が配備されている。
又、本発明に係る情報表示装置は電子マネー決済機能を有しており、前記制御装置(３)には、電子マネーリーダ／ライタ(４)が接続されている。

図２は上記制御装置(３)の構成を表わしており、上記制御装置(３)は、ＣＰＵからなる制御部(30)を具えている。該制御部(30)はバス(31)に接続されており、該バス(31)に、表示Ｉ／Ｆ部(32)を介して上記ディスプレイ本体(１)が接続されると共に、音声Ｉ／Ｆ部(33)を介してスピーカ(５)が接続されている。又、該バス(31)に、撮影装置Ｉ／Ｆ部(34)を介して上記撮影装置(２)が接続されると共に、電子決済処理部(35)を介して上記電子マネーリーダ／ライタ(４)が接続されている。

又、上記制御装置(３)は、広告情報、表示スケジュールデータ及び種々の制御プログラムが格納されている広告情報／プログラム格納装置(36)と、後述の視聴者情報テーブルや視聴者の動作を表わす視聴者動作フラグが格納される視聴者情報格納装置(37)と、広告情報／プログラム格納装置(36)から読み出された広告情報が一旦格納される表示メモリ(38)とを具えており、広告情報／プログラム格納装置(36)、視聴者情報格納装置(37)及び表示メモリ(38)は、前記バス(31)に接続されている。該バス(31)は、ネットワークＩ／Ｆ部(39)を介してインターネットやＬＡＮ等のネットワークに接続されており、例えば、ネットワーク上から新たな広告情報がダウンロードされて上記表示情報／プログラム格納装置(36)に格納される。
更に、上記制御装置(３)は、携帯電話機やＰＤＡ(Personal Digital Assistant)等の携帯通信端末装置との間で無線通信を行なう無線通信Ｉ／Ｆ部(40)を具えており、該無線通信Ｉ／Ｆ部(40)は前記バス(31)に接続されている。
上記制御部(30)は、上記広告情報／プログラム格納装置(36)に格納されている広告情報の管理、表示スケジュールの管理、運用ログの管理、上記撮影装置(２)から得られる画像信号の解析処理等、後述の種々の処理を行なう。

上記広告情報／プログラム格納装置(36)に格納されている広告情報には、不特定多数者向けの一般的な広告情報と、性別情報及び年齢情報と対応付けられて格納されている広告情報とが含まれており、ディスプレイ本体(１)の情報表示面の前方に情報表示面を見ている視聴者が存在しないときには、制御装置(３)の広告情報／プログラム格納装置(36)から不特定多数者向けの一般的な広告情報が順次、表示スケジュールデータに従って読み出されてディスプレイ本体(１)の情報表示面に表示される。このとき、広告情報に音声データが含まれている場合には、広告情報に含まれている音声データがスピーカ(５)に供給され、スピーカ(５)から音声が出力される。尚、以下においても同様に、広告情報に音声データが含まれている場合には、スピーカ(５)から音声が出力される。
これに対し、ディスプレイ本体(１)の情報表示面の前方に視聴者が存在するときには、制御装置(３)の広告情報／プログラム格納装置(36)から該視聴者の性別及び年齢に応じた広告情報が順次、一定の周期で読み出されてディスプレイ本体(１)の情報表示面に表示される。図１０及び図１１は自動車会社の広告情報の例を表わしており、例えば視聴者が若い女性である場合には、小型車についての図１０に示す広告情報が表示され、視聴者が年配の男性である場合には、中型車についての図１１に示す広告情報が表示される。

又、上記広告情報／プログラム格納装置(36)に格納されている広告情報には対話型の広告情報が含まれており、情報表示面の前方に存在する視聴者は手(腕)を動かすことによって情報入力(以下、ゼスチャー入力という)を行なうことが可能である。例えば、複数のコンテンツボタンを含む対話型の広告情報が情報表示面に表示されているときには、視聴者が手を上下左右の何れかの方向に動かすと、図１及び図２に示す撮影装置(２)から得られる画像信号に基づき該視聴者の手の動きが検出され、その検出結果に応じて１つのコンテンツボタンが選択される。そして、所望のコンテンツボタンが選択されている状態で、視聴者がその選択状態を確定すべく手を上下に速やかに動かすと、撮影装置(２)から得られる画像信号に基づき該視聴者の手の動きが検出され、その結果、選択されているコンテンツボタンに応じた広告情報が広告情報／プログラム格納装置(36)から読み出されてディスプレイ本体(１)の情報表示面に表示される。

図１２は、自動車会社の対話型の広告情報の例を表わしており、該広告情報には、３つのコンテンツボタン「ＳＵＶ」、「セダン」及び「スポーツカー」が含まれている。このとき、ゼスチャー入力を行なう視聴者(ゼスチャー入力者)の表示機能がオンに設定されている場合には、図示の如く、撮影装置によって撮影されたゼスチャー入力者の画像が情報表示面に表示される。又、ゼスチャー入力方法の表示機能がオンに設定されている場合には、図示の如く、ゼスチャー入力方法が情報表示面に表示される。

図１２は、コンテンツボタン「スポーツカー」が選択されている状態を表わしており、該コンテンツボタンが他のコンテンツボタンとは区別し得る様にハイライト表示されている。この状態で、視聴者が手を肩より上に上げると、コンテンツボタン「セダン」が選択されて該コンテンツボタンがハイライト表示され、視聴者が再び手を肩より上に上げると、コンテンツボタン「ＳＵＶ」が選択されて該コンテンツボタンがハイライト表示される。この状態で、視聴者が手を肩より下に下げると、コンテンツボタン「セダン」が選択されて該コンテンツボタンがハイライト表示され、視聴者が再び手を肩より下に下げると、コンテンツボタン「スポーツカー」が選択されて該コンテンツボタンがハイライト表示される。この様に、手を肩より上に上げる度に、その時点で選択されているコンテンツボタンの１つ上に表示されているコンテンツボタンが選択され、手を肩より下に下げる度に、その時点で選択されているコンテンツボタンの１つ下に表示されているコンテンツボタンが選択される。そして、例えば図示の如くコンテンツボタン「スポーツカー」がハイライト表示されている状態で視聴者が手を上下に速やかに動かすと、種々のスポーツカーについての図１３に示す広告情報が情報表示面に表示されることになる。

又、本発明に係る情報表示装置は、電子チケット等の有料情報を含む種々の情報を視聴者の携帯通信端末装置に送信することが可能であって、情報送信要求ボタンを含む対話型広告情報が情報表示面に表示されている状態で、視聴者が上述の如く手を上下左右の何れかの方向に動かすことにより該情報送信要求ボタンを選択し、その状態で手を上下に速やかに動かした後、携帯通信端末装置を情報表示装置の情報送信部に近づけると、情報表示装置から該携帯通信端末装置に情報が送信されることになる。その後、貨幣価値データが記録されたＩＣチップを具えた携帯通信端末装置やカードを電子マネーリーダ／ライタ(４)に近づけると、電子決済処理が実行される。

図４は、本発明に係る情報表示装置において実行される表示手続きを表わしており、先ずステップＳ１にて、広告情報／プログラム格納装置(36)に格納されている広告情報の中から情報表示面に表示すべき広告情報を読み出して表示メモリに格納する表示データ処理を行ない、続いてステップＳ２では、表示メモリから表示データを読み出してディスプレイ本体に出力する表示処理を行なった後、ステップＳ３にて、撮影装置から得られる画像信号の解析処理を行なって、ステップＳ１に戻る。上記手続きによって、表示データ処理、表示処理及び画像解析処理が繰り返し実行されることになる。

先ず、上記ステップＳ３にて実行される画像解析処理の具体的手続きについて説明し、その後、上記ステップＳ１にて実行される表示データ処理の具体的手続き及び上記ステップＳ２にて実行される表示処理の具体的手続きについて説明する。
図５は、上記ステップＳ３にて実行される画像解析処理の具体的手続きを表わしている。尚、上記視聴者情報格納装置(37)には、図３(ａ)に示す如く、現在を含む過去Ｎ回分の視聴者情報テーブルの格納領域が設けられている。
画像解析処理においては、先ず図５のステップＳ１１にて、システム設定情報に含まれる画像解析機能オン／オフ情報に基づいて画像解析機能がオンに設定されているか否かを判断し、ノーと判断された場合はステップＳ２６にて、視聴者情報格納装置(37)に設けられているＮ個の視聴者情報テーブル格納領域の内、現在の視聴者情報テーブル格納領域に“０”の値を書き込むと共に、視聴者動作フラグを“００ｈ”に設定して、手続きを終了する。
画像解析機能がオンに設定されている場合には、ステップＳ１２に移行して、撮影装置から画像信号を取得する。続いてステップＳ１３では、撮影装置から取得した画像信号に基づいて、正面を向いている人物の顔を検出する処理を行なう。ここで、顔検出処理方法としては、パターンマッチング法等の公知の種々の方法を採用することが可能である。

次にステップＳ１４では、上記ステップＳ１３の検出結果に基づいて、情報表示面の前方に情報表示面を見ている視聴者が存在するが否かを判断する。ここで、上記ステップＳ１３にて正面を向いている人物の顔が検出されなかった場合には、ノーと判断されてステップＳ２６に移行し、現在の視聴者情報テーブル格納領域に“０”の値を書き込むと共に、視聴者動作フラグを“００ｈ”に設定して、手続きを終了する。

上記ステップＳ１３にて正面を向いている人物の顔が検出された場合には、上記ステップＳ１４にてイエスと判断されてステップＳ１５に移行し、情報表示面を見ている１或いは複数の視聴者について夫々、図３(ｂ)に示す視聴者情報テーブルを作成して、現在の視聴者情報テーブル格納領域に格納する。視聴者情報テーブルには、図示の如く、視聴者識別番号、顔の位置を表わす位置情報、顔のサイズ情報、性別情報、年齢情報、服の色情報及び身長情報の書込み領域が設けられる。尚、図中の“１”は視聴者識別番号を表わしている。図５の上記ステップＳ１５では、各視聴者について、上記ステップＳ１２にて撮影装置から取得した画像信号に基づき顔の位置及び顔のサイズを検出し、視聴者識別番号と共に、位置情報及び顔のサイズ情報を視聴者情報テーブルに書き込む。

続いてステップＳ１６では、上記ステップＳ１２にて撮影装置から取得した画像信号に基づいて１人の視聴者の年齢を推定し、年齢情報を該視聴者についての視聴者情報テーブルに書き込んだ後、ステップＳ１７では、該画像信号に基づいて前記視聴者の性別を推定し、性別情報を該視聴者についての視聴者情報テーブルに書き込む。次にステップＳ１８にて、前記画像信号に基づいて前記視聴者の服の色を検出し、服の色情報を該視聴者についての視聴者情報テーブルに書き込み、更にステップＳ１９では、前記画像信号に基づいて前記視聴者の身長を推定し、身長情報を該視聴者についての視聴者情報テーブルに書き込む。上記の年齢推定処理方法、性別推定処理方法、服の色検出処理方法及び身長推定処理方法としては、公知の種々の方法を採用することが可能である。

その後、ステップＳ２０では、情報表示面を見ている全ての視聴者について、上記の年齢推定処理、性別推定処理、服の色検出処理及び身長推定処理からなる視聴者解析処理が終了したか否かを判断し、ノーと判断された場合はステップＳ１６に戻って視聴者解析処理を繰り返す。
その後、全ての視聴者について視聴者解析処理が終了してステップＳ２０にてイエスと判断された場合には、ステップＳ２１に移行して、システム設定情報に含まれるゼスチャー解析機能オン／オフ情報に基づいてゼスチャー解析機能がオンに設定されているか否かを判断する。ここで、イエスと判断された場合はステップＳ２２にて、その時点で情報表示面に表示されている広告情報の付加情報に基づいて、該広告情報が対話型の広告情報であるか否かを判断し、イエスと判断された場合は、ステップＳ２３にて、視聴者情報格納装置(37)に格納されている視聴者情報テーブルに基づいて、情報表示面の前方に一定時間以上に亘って情報表示面を注視している視聴者(注視者)が存在するか否かを判断する。

ここで、現在を含む過去Ｎ回分の視聴者情報テーブルが視聴者情報格納装置(37)に格納されている視聴者が存在する場合に、イエスと判断されてステップＳ２５に移行し、後述のゼスチャー解析処理を行なって、手続きを終了する。
これに対し、上記のステップＳ２１、ステップＳ２２或いはステップＳ２３にてノーと判断された場合には、ステップＳ２４にて視聴者動作フラグを“００ｈ”に設定して、手続きを終了する。

上記手続きによれば、情報表示面の前方に情報表示面を見ている視聴者が存在する場合に、それら１或いは複数の視聴者について図３(ｂ)に示す視聴者情報テーブルが作成されて視聴者情報格納装置(37)に書き込まれることになる。
又、情報表示面の前方に存在する視聴者の中に一定時間以上に亘って情報表示面を注視している視聴者が存在する場合に限って、後述のゼスチャー解析処理が行なわれることになる。この様に、一定時間以上に亘って情報表示面を注視している視聴者が存在する場合に限ってゼスチャー解析処理が行なわれるので、無駄なゼスチャー解析処理が行なわれることはない。
尚、画像解析機能がオフに設定されている場合、及び情報表示面の前方に視聴者が存在しない場合には、視聴者情報格納装置(37)に“０”の値が書き込まれると共に、視聴者動作フラグが“００ｈ”に設定されることになる。又、ゼスチャー解析機能がオフに設定されている場合、情報表示面に表示されている広告情報が対話型の広告情報でない場合、及び情報表示面を注視している視聴者が存在しない場合には、視聴者動作フラグが“００ｈ”に設定されることになる。

上記ゼスチャー解析処理においては、図６に示す如く、先ずステップＳ３１にて、撮影装置から一定の時間間隔を設けて複数フレーム分の画像信号を取得し、ステップＳ３２では、取得した画像信号に基づいて１人のゼスチャー入力者を特定し、取得した各フレームの画像信号から該ゼスチャー入力者を中心とする画像領域の画像信号を抽出した後、前記複数フレーム間で抽出した画像信号の差分を算出する。ゼスチャー入力者の特定処理においては、注視者が１人である場合には、該注視者がゼスチャー入力者として特定され、注視者が複数人である場合には、例えば情報表示面の幅方向の中央位置に存在する注視者、或いは情報表示面から最も近い位置に存在する注視者がゼスチャー入力者として特定される。例えば撮影装置によって図１４に示す画像が撮影された場合には、中央位置に存在する注視者(６)がゼスチャー入力者として特定された後、図１５に示す如く該注視者(６)を中心とする画像領域の画像信号が抽出される。

上述の如く複数フレーム間で抽出した画像信号の差分が算出された後、その差分に基づいてゼスチャー入力者の動作が解析される。このとき、ゼスチャー入力者を中心とする画像領域の画像信号を抽出することによって画像解析範囲が狭められているので、短時間で且つ容易に動作解析処理を行なうことが出来る。尚、動作解析処理は公知であるので、詳細な説明は省略する。
図６のステップＳ３３では、ゼスチャー入力者の動作が手(腕)を肩より上に上げる動作であるか否かを判断し、イエスと判断された場合は、ステップＳ３４にて視聴者動作フラグを“０１ｈ”に設定して、手続きを終了する。ステップＳ３３にてノーと判断された場合はステップＳ３５に移行して、ゼスチャー入力者の動作が手を肩より下に下げる動作であるか否かを判断し、イエスと判断された場合は、ステップＳ３６にて視聴者動作フラグを“０２ｈ”に設定して、手続きを終了する。ステップＳ３５にてノーと判断された場合はステップＳ３７に移行して、ゼスチャー入力者の動作が手を右に動かす動作であるか否かを判断し、イエスと判断された場合は、ステップＳ３８にて視聴者動作フラグを“０３ｈ”に設定して、手続きを終了する。ステップＳ３７にてノーと判断された場合はステップＳ３９に移行して、ゼスチャー入力者の動作が手を左に動かす動作であるか否かを判断し、イエスと判断された場合は、ステップＳ４０にて視聴者動作フラグを“０４ｈ”に設定して、手続きを終了する。ステップＳ３９にてノーと判断された場合はステップＳ４１に移行して、ゼスチャー入力者の動作が手を上下に動かす動作であるか否かを判断し、イエスと判断された場合は、ステップＳ４２にて視聴者動作フラグを“０５ｈ”に設定して、手続きを終了する。ステップＳ４１にてノーと判断された場合は、視聴者動作フラグを“００ｈ”に設定して、手続きを終了する。

上記手続きによれば、視聴者動作フラグは、ゼスチャー入力者が手を肩より上に上げた場合に“０１ｈ”、手を肩より下げた場合に“０２ｈ”、手を右に動かした場合に“０３ｈ”、手を左に動かした場合に“０４ｈ”、手を速やかに上下に動かした場合に“０５ｈ”に設定されることになる。尚、ゼスチャー入力者が何ら動作を行なわなかった場合、及びゼスチャー入力者がゼスチャー入力動作として規定されている前記動作の何れでもない動作を行なった場合には、視聴者動作フラグは“００ｈ”に設定されることになる。

図７は、図４のステップＳ１にて実行される表示データ処理の具体的手続きを表わしており、先ずステップＳ５１では、視聴者情報格納装置(37)に格納されている視聴者動作フラグが“００ｈ”であるか否かを判断する。ここでイエスと判断された場合はステップＳ５２に移行して、広告情報／プログラム格納装置(36)に格納されている表示スケジュールデータを参照する。

次にステップＳ５３では、表示スケジュールデータの参照結果に基づいて、情報表示面に表示されている広告情報を変更する必要があるか否かを判断し、ノーと判断された場合は手続きを終了する。
一方、その時点で情報表示面に表示されている広告情報の表示開始時点から所定時間が経過しており、広告情報を変更する必要があると判断された場合には、ステップＳ５４に移行して、次に表示すべき広告情報を広告情報／プログラム格納装置(36)から読み出し、該広告情報に含まれる映像データを表示メモリに書き込む。このとき、視聴者情報格納装置(37)の最新の視聴者情報テーブル格納領域に“０”の値が書き込まれている場合、即ち視聴者情報テーブルが格納されていない場合には、表示スケジュールデータに従った広告情報が広告情報／プログラム格納装置(36)から読み出される。一方、視聴者情報テーブルが格納されている場合には、視聴者情報テーブルから性別情報及び年齢情報が読み出され、読み出された性別情報及び年齢情報に応じた広告情報が広告情報／プログラム格納装置(36)から読み出される。最新の視聴者情報テーブル格納領域に複数の視聴者情報テーブルが格納されている場合には、例えば情報表示面の幅方向の中央位置に存在する視聴者、或いは情報表示面に最も近い位置に存在する視聴者についての視聴者情報テーブルから性別情報及び年齢情報が読み出される。尚、広告情報／プログラム格納装置(36)から広告情報を読み出して表示メモリに書き込まれる周期、即ち、前記所定時間は広告情報によって異なる。

続いてステップＳ５５では、表示開始アドレスを前記映像データの書込み開始アドレスに更新した後、ステップＳ５６にて、システム設定情報に含まれる表示態様変更機能オン／オフ情報に基づいて表示態様変更機能がオンに設定されているか否かを判断し、ノーと判断された場合は手続きを終了する一方、イエスと判断された場合は、ステップＳ５７にて後述の表示態様変更処理を実行して、手続きを終了する。

上記ステップＳ５１にて、視聴者情報格納装置(37)に格納されている視聴者動作フラグが“００ｈ”でないと判断された場合には、ステップＳ５８に移行して、該視聴者動作フラグが“０５ｈ”であるか否かを判断する。ここで、視聴者動作フラグが“０１ｈ”〜“０４ｈ”の何れかの値である場合、即ちゼスチャー入力者が手を上下左右の何れかの方向に動かした場合にはノーと判断され、ステップＳ６５に移行して、視聴者動作フラグの値に応じて、その時点で情報表示面に表示されている複数のボタンの中から１つのボタンを選択し、ハイライト表示の位置を該ボタンの位置に変更して、手続きを終了する。

これに対し、情報表示面に表示されている複数のボタンの内、１つのボタンが選択されている状態でゼスチャー入力者が手を上下に速やかに動かした場合には、ステップＳ５８にてイエスと判断されてステップＳ５９に移行し、その時点で選択されているボタンに応じた広告情報を広告情報／プログラム格納装置(36)から読み出し、該広告情報に含まれる映像データを表示メモリに書き込む。続いてステップＳ６０では、選択されている前記１つのボタンが情報送信要求ボタンであるか否かを判断し、ノーと判断された場合はステップＳ６４にて、表示開始アドレスを前記映像データの書込み開始アドレスに更新して、手続きを終了する。
選択されている前記１つのボタンが情報送信要求ボタンである場合には、ステップＳ６１にて、送信の要求があった有料情報を広告情報／プログラム格納装置(36)から読み出し、次にステップＳ６２では該有料情報を携帯端末装置に送信する。続いてステップＳ６３にて、電子決済処理部に決済処理を実行させた後、ステップＳ６４に移行し、表示開始アドレスを前記映像データの書込み開始アドレスに更新して、手続きを終了する。

上記手続きによれば、情報表示面の前方に視聴者が存在しない場合に、表示スケジュールデータに従って広告情報が広告情報／プログラム格納装置(36)から読み出されて表示メモリに書き込まれる一方、視聴者が存在する場合には、該視聴者の性別及び年齢に応じた広告情報が広告情報／プログラム格納装置(36)から読み出されて表示メモリに書き込まれることになる。その後、表示態様変更機能がオンに設定されている場合には、後述の表示態様変更処理が実行されることになる。
又、情報表示面に表示されている複数のボタンの内、１つのボタンが選択されている状態でゼスチャー入力者が手を上下に速やかに動かした場合には、該ボタンに応じた広告情報が広告情報／プログラム格納装置(36)から読み出されて表示メモリに書き込まれる。そして、該ボタンが情報送信要求ボタンである場合には、送信が要求された有料情報が携帯端末装置に送信された後、電子決済処理が実行されることになる。
更に、ゼスチャー入力者が手を上下左右の何れかの方向に動かした場合には、その手の動きに応じて１つのボタンが選択され、該ボタンがハイライト表示されることになる。

図８は、上記表示態様変更処理の具体的手続きを表わしており、先ずステップＳ７１では、システム設定情報に含まれる色変更機能オン／オフ情報に基づいて色変更機能がオンに設定されているか否かを判断し、ノーと判断された場合はステップＳ７６に移行する。一方、ステップＳ７１にてイエスと判断された場合は、ステップＳ７２に移行して、その時点で表示メモリに書き込まれている広告情報の付加情報に広告商品についての色情報が複数含まれているか否かを判断し、ノーと判断された場合はステップＳ７６に移行する。

ステップＳ７２にてイエスと判断された場合には、ステップＳ７３に移行して、視聴者情報格納装置(37)の最新の視聴者情報テーブル格納領域に格納されている視聴者情報テーブルから服の色情報を読み出す。ここで、最新の視聴者情報テーブル格納領域に複数の視聴者情報テーブルが格納されている場合には、例えば情報表示面の幅方向の中央位置に存在する視聴者、或いは情報表示面から最も近い位置に存在する視聴者についての視聴者情報テーブルから服の色情報が読み出される。次にステップＳ７４では、前記広告情報の付加情報に含まれている広告商品についての複数の色情報の中から前記ステップＳ７３にて読み出された色情報と同じ或いは近似する色情報を選択し、ステップＳ７５では、表示メモリ上で前記広告商品の色を選択した色情報に基づいて変更した後、ステップＳ７６に移行する。尚、上記ステップＳ７３では、複数の視聴者情報テーブルから服の色情報を読み出し、ステップＳ７４では、読み出した色情報から平均的な色情報を求め、求めた色情報と同じ或いは近似する色情報を選択することも可能である。又、ステップＳ７５では、表示メモリ上で広告商品の色を変更するのではなく、表示メモリに書き込まれている広告情報を広告商品が選択された色を有する広告情報に書き換えることも可能である。

ステップＳ７６では、システム設定情報に含まれる表示位置変更機能オン／オフ情報に基づいて表示位置変更機能がオンに設定されているか否かを判断し、ノーと判断された場合はステップＳ８０に移行する。
一方、ステップＳ７６にてイエスと判断された場合は、ステップＳ７７に移行して、視聴者情報格納装置(37)の最新の視聴者情報テーブル格納領域に格納されている視聴者情報テーブルから位置情報及び身長情報を読み出す。ここで、最新の視聴者情報テーブル格納領域に複数の視聴者情報テーブルが格納されている場合には、例えば情報表示面の幅方向の中央位置に存在する視聴者、或いは情報表示面から最も近い位置に存在する視聴者についての視聴者情報テーブルから位置情報及び身長情報が読み出される。次にステップＳ７８では、読み出した位置情報及び身長情報から情報表示面における広告情報の表示位置を決定し、ステップＳ７９では、表示メモリ上で広告情報の表示位置を決定した表示位置に変更する。ここで、視聴者の身長が高い場合には表示位置は高い位置に設定され、身長が低い場合には表示位置は低い位置に設定される。又、視聴者の位置が情報表示面の中央よりも右側の位置である場合には表示位置は情報表示面の中央よりも右側の位置に設定され、視聴者の位置が情報表示面の中央よりも左側の位置である場合には表示位置は情報表示面の中央よりも左側の位置に設定される。

ステップＳ８０では、システム設定情報に含まれる表示サイズ変更機能オン／オフ情報に基づいて表示サイズ変更機能がオンに設定されているか否かを判断し、ノーと判断された場合は手続きを終了する。
一方、ステップＳ８０にてイエスと判断された場合は、ステップＳ８１に移行して、視聴者情報格納装置(37)の最新の視聴者情報テーブル格納領域に格納されている視聴者情報テーブルから顔サイズ情報を読み出す。ここで、最新の視聴者情報テーブル格納領域に複数の視聴者情報テーブルが格納されている場合には、例えば情報表示面の幅方向の中央位置に存在する視聴者、或いは情報表示面から最も近い位置に存在する視聴者についての視聴者情報テーブルから顔サイズ情報が読み出される。次にステップＳ８２では、読み出した顔サイズ情報から情報表示面からの距離を推定した後、その結果に基づいて情報表示面における広告情報の表示サイズを決定し、ステップＳ８３では、表示メモリ上で広告情報の表示サイズを決定した表示サイズに変更する。ここで、視聴者の顔のサイズが大きい場合には、視聴者は情報表示面に近い位置に存在するので、表示サイズは小さく設定され、視聴者の顔のサイズが小さい場合には、視聴者は情報表示面から遠い位置に存在するので、表示サイズは大きく設定される。

その後、ステップＳ８４では、システム設定情報に含まれる音量変更機能オン／オフ情報に基づいて音量変更機能がオンに設定されているか否かを判断し、ノーと判断された場合は手続きを終了する一方、イエスと判断された場合には、ステップＳ８５に移行して、スピーカから出力される音量を上述の如く決定した表示サイズに応じた音量に変更して、手続きを終了する。ここで、表示サイズが大きい場合には、視聴者は情報表示面から遠い位置に存在するので、音量は大きな値に設定され、表示サイズが小さい場合には、視聴者は情報表示面に近い位置に存在するので、音量は小さな値に設定される。

上記手続きによれば、色変更機能がオンに設定されており、且つ広告情報の付加情報に広告商品についての色情報が複数含まれている場合には、表示メモリ上で広告商品の色が情報表示面の前方に存在する視聴者の服の色に応じた色に変更されることになる。
又、表示位置変更機能がオンに設定されている場合には、表示メモリ上で広告情報の表示位置が情報表示面の前方に存在する視聴者の情報表示面の幅方向の位置及び身長に応じて変更されることになる。
更に、表示サイズ変更機能がオンに設定されている場合には、表示メモリ上で広告情報の表示サイズが情報表示面の前方に存在する視聴者の情報表示面からの距離に応じて変更されることになる。
更に又、音量変更機能がオンに設定されている場合には、スピーカから出力される音声の音量が情報表示面の前方に存在する視聴者の情報表示面からの距離に応じて変更されることになる。

図９は、図３のステップＳ２にて実行される表示処理の具体的手続きを表わしており、先ずステップＳ９１では、システム設定情報に含まれるゼスチャー入力者画像表示機能オン／オフ情報に基づいてゼスチャー入力者画像表示機能がオンに設定されているか否かを判断し、イエスと判断された場合はステップＳ９２に移行して、撮影装置から得られる１フレーム分の画像信号からゼスチャー入力者を中心とする画像領域の画像信号を抽出し、抽出した画像信号をその時点で設定されている表示開始アドレス以降に書き込まれている表示データと合成して新たな表示データを作成した後、ステップＳ９３に移行する一方、ステップＳ９１にてノーと判断された場合には、ステップＳ９２を迂回してステップＳ９３に移行する。

ステップＳ９３では、システム設定情報に含まれるゼスチャー入力方法表示機能オン／オフ情報に基づいてゼスチャー入力方法表示機能がオンに設定されているか否かを判断し、イエスと判断された場合はステップＳ９４に移行して、広告情報／プログラム格納装置(36)から入力方法データを読み出し、読み出した入力方法データをその時点で設定されている表示開始アドレス以降に書き込まれている表示データと合成して新たな表示データを作成した後、ステップＳ９５に移行する一方、ステップＳ９３にてノーと判断された場合には、ステップＳ９４を迂回してステップＳ９５に移行する。
ステップＳ９５では、表示メモリからその時点で設定されている表示開始アドレス以降に書き込まれている表示データを読み出し、最後にステップＳ９６では、読み出した表示データをディスプレイ本体に出力して、手続きを終了する。

上記手続きによれば、ゼスチャー入力者画像表示機能がオンに設定されている場合には、表示メモリ上でゼスチャー入力者を表わす画像データが表示データと合成されて新たな表示データが作成されることになる。又、ゼスチャー入力方法表示機能がオンに設定されている場合には、表示メモリ上で入力方法データが表示データと合成されて新たな表示データが作成されることになる。その後、表示メモリに書き込まれている表示データがディスプレイ本体に出力される。この結果、広告情報が情報表示面に表示されることになる。又、このとき、ゼスチャー入力者画像表示機能がオンに設定されている場合にはゼスチャー入力者の画像が表示され、ゼスチャー入力方法表示機能がオンに設定されている場合にはゼスチャー入力方法が表示されることになる。尚、表示メモリに書き込まれている広告情報が対話型の広告情報でない場合には、ゼスチャー入力者画像表示機能及びゼスチャー入力方法表示機能が自動的にオフに設定され、この結果、広告情報のみが情報表示面に表示されることになる。

本発明に係る情報表示装置においては、情報表示面に表示されている広告情報が対話型の広告情報である場合には、情報表示面の前方に存在する視聴者は該広告情報に含まれる複数のコンテンツボタンの中から所望の１つのコンテンツボタンを選択することによって、所望の広告情報を情報表示面に表示させることが出来る。又、情報表示面に表示されている広告情報が対話型の広告情報でない場合であっても、情報表示面の前方に視聴者が存在する場合には、該視聴者の性別及び年齢に応じた広告情報が情報表示面に表示される。更に、広告商品の色が該視聴者の服の色と同じ或いは近似する色に変更される。この様に、視聴者に応じた広告情報を情報表示面に表示することによって、高い広告効果を得ることが出来る。
又、仮に、ポインティングデバイス、タッチパネル、スイッチ等の接触型の情報入力装置を配備した場合には、不特定多数の人物が情報入力装置や情報表示装置本体に触れることになるため、情報入力装置が破損する問題、情報表示面が汚れる問題、情報表示装置本体の塗装が剥がれる問題等が生じる虞があるが、上記本発明に係る情報表示装置によれば、情報入力装置や情報表示装置本体に触れることなく１つのコンテンツボタンを選択することが出来るので、上記問題が生じることはない。
更に、上記本発明に係る情報表示装置によれば、非接触で情報を入力することが出来るので、例えばショーウインドウ内に配置することが出来る。
更に又、視聴者の身長や位置に応じて広告情報の表示位置、表示サイズ、及びスピーカからの出力音声の音量が変更されるので、広告情報の視聴が容易となる。

尚、本発明の各部構成は上記実施の形態に限らず、特許請求の範囲に記載の技術的範囲内で種々の変形が可能である。
例えば、上記実施の形態においては、図１に示す撮影装置(２)から得られる画像信号に基づいてゼスチャー解析処理を行なうと共に、該撮影装置(２)から得られる画像信号に基づいてゼスチャー入力者の画像を情報表示面に表示しているが、該撮影装置(２)とは別に他の撮影装置を配備して、該他の撮影装置から得られる画像信号に基づいてゼスチャー解析処理を行なう構成や、該他の撮影装置から得られる画像信号に基づいてゼスチャー入力者の画像を情報表示面に表示する構成を採用することも可能である。

又、上記実施の形態においては、図５のステップＳ２３にて、情報表示面の前方に一定時間以上に亘って情報表示面を注視している視聴者が存在するか否かを判断しているが、情報表示面の前方の所定位置に一定時間以上に亘って情報表示面を注視している視聴者が存在するか否かを判断し、図６に示すゼスチャー解析処理においては該視聴者の動作を解析することも可能である。この様な構成においては、現在を含む過去Ｎ回分の視聴者情報テーブルが視聴者情報格納装置(37)に格納されている視聴者が存在し、且つ、それら１或いは複数の視聴者についての視聴者情報テーブルに書き込まれている位置情報及び顔サイズ情報に基づいて、それら１或いは複数の視聴者の中に所定位置に存在する視聴者が存在すると判断された場合に、ゼスチャー解析処理が実行される。この様な構成においては、動作解析の対象とする視聴者が所定の大きさで撮影されることになるので、動作解析処理が容易となる。
又、図５のステップＳ２３にて、情報表示面の前方に存在する視聴者が所定の動作を実行したか否かを判断し、所定の動作を実行したと判断した場合にゼスチャー解析処理を実行する構成や、情報表示面の前方の所定位置で視聴者が所定の動作を実行したか否かを判断し、所定位置で所定の動作を実行したと判断した場合にゼスチャー解析処理を実行する構成を採用することも可能である。

又、上記実施の形態においては、動作解析処理を容易に行なえる様、各フレームの画像信号からゼスチャー入力者を中心とする画像領域の画像信号を抽出しているが、ズーム機能を有する撮影装置が配備されている構成においては、ズーム率を調整することによりゼスチャー入力者を所定の大きさで撮影することも可能である。又、撮影方向をパン方向及び／又はチルト方向に変更することが可能な撮影装置が配備されている構成においては、撮影方向をパン方向及び／又はチルト方向に変更することによりゼスチャー入力者を撮影範囲内の所定位置に位置させて一定の構図で撮影することも可能である。

更に、上記実施の形態では、広告情報を表示する情報表示装置について説明したが、本発明は、報知情報等の種々の情報を表示する種々の情報表示装置に実施することが可能である。

更に又、本発明は、図１６に示す屋外型の情報表示装置に実施することも可能である。屋外型の情報表示装置は、図示の如く、防水構造を有する筐体(８)の内部にディスプレイ本体(７)を収容して構成されており、該筐体(８)の内部には、冷却装置(９)及びファン(91)(92)が配備されている。該情報表示装置においては、冷却装置(９)によって冷却された空気は、矢印で示す如くディスプレイ本体(７)の周囲を流れて外部に排出され、これによって筐体(８)内の温度上昇が抑制される。
上述の如く、仮に、ポインティングデバイス、タッチパネル、スイッチ等の接触型の情報入力装置を配備した場合には、情報入力装置が破損する問題、情報表示面が汚れる問題、情報表示装置本体の塗装が剥がれる問題等が生じる虞があるが、特に屋外型の情報表示装置は夜間も不特定多数の人物が接触可能な状況に置かれることが多く、この様な状況に置かれた場合には、上記問題が生じる可能性が高い。又、屋外型の情報表示装置においては、情報表示面が汚れた場合、日光が情報表示面で乱反射して情報表示面に表示される情報が見難くなるため、情報表示面が汚れることを極力回避すべきである。従って、本発明は、屋外型の情報表示装置に実施した場合に特に効果を発揮することになる。

本発明に係る情報表示装置の外観を表わす斜視図である。 上記情報表示装置の制御装置の構成を表わすブロック図である。 視聴者情報格納装置の格納領域、及び視聴者情報テーブルを表わす図である。 上記情報表示装置において実行される表示手続きを表わすフローチャートである。 画像解析処理の具体的手続きを表わすフローチャートである。 ゼスチャー解析処理の具体的手続きを表わすフローチャートである。 表示データ処理の具体的手続きを表わすフローチャートである。 表示態様変更処理の具体的手続きを表わすフローチャートである。 表示処理の具体的手続きを表わすフローチャートである。 視聴者が若い女性の場合に情報表示面に表示される広告情報の例を表わす図である。 視聴者が年配の男性の場合に情報表示面に表示される広告情報の例を表わす図である。 情報表示面に表示される対話型広告情報の例を表わす図である。 コンテンツボタン「スポーツカー」が選択された場合に情報表示面に表示される広告情報の例を表わす図である。 撮影装置によって撮影された画像の例を表わす図である。 ゼスチャー解析処理において画像信号を抽出する領域の例を表わす図である。 他の実施例の情報表示装置を表わす断面図である。

(１) ディスプレイ本体
(２) 撮影装置
(３) 制御装置
(30) 制御部
(36) 広告情報／プログラム格納装置
(37) 視聴者情報格納装置
(38) 表示メモリ
(40) 無線通信Ｉ／Ｆ部
(４) 電子マネーリーダ／ライタ
(５) スピーカ

Claims (5)

1. 情報表示面の前方を撮影する撮影装置と、
   前記撮影装置から得られる画像信号に基づいて、情報表示面の前方に存在する人物の動作を検出する動作検出手段と、
   表示可能な複数の情報の中から少なくとも１つの情報を選択するための選択画面が情報表示面に表示されている状態で、前記動作検出手段によって検出された動作に応じて、前記複数の情報の中から少なくとも１つの情報を選択する選択手段と、
   前記選択手段によって選択された情報を情報表示面に表示する情報表示処理手段
   とを具えていることを特徴とする情報表示装置。
2. 前記撮影装置から得られる画像信号に基づいて、情報表示面の前方に一定時間以上に亘って情報表示面を注視している人物が存在するか否かを判断する存在有無判断手段を具えており、前記動作検出手段は、前記存在有無判断手段によって前記人物が存在すると判断された場合に該人物の動作を検出する請求項１に記載の情報表示装置。
3. 前記撮影装置から得られる画像信号に基づいて、情報表示面の前方の所定位置で一定時間以上に亘って情報表示面を注視している人物が存在するか否かを判断する存在有無判断手段を具えており、前記動作検出手段は、前記存在有無判断手段によって前記人物が存在すると判断された場合に該人物の動作を検出する請求項１に記載の情報表示装置。
4. 前記撮影装置から得られる画像信号に基づいて、情報表示面を注視している前記人物の画像を情報表示面に表示する画像表示処理手段を具えている請求項２又は請求項３に記載の情報表示装置。
5. 携帯通信端末装置との間で通信を行なうことが可能であって、前記選択手段は、情報の送信を要求する際に選択すべき情報送信要求ボタンが情報表示面に表示されている状態で前記動作検出手段によって検出された動作に応じて該情報送信要求ボタンを選択することが可能であり、更に、該選択手段によって該情報送信要求ボタンが選択されたときに携帯通信端末装置に情報を送信する情報送信手段を具えている請求項１乃至請求項４の何れかに記載の情報表示装置。

Images