JPH10214344A - インタラクティブ表示装置 - Google Patents

Abstract

(57)【要約】 【課題】利用者の自由な動きを妨げることがなく利用者
の動作を検出し、利用者が自然に感じることのできる臨
場感に富んだインタラクティブ表示装置を提供すること
を目的とする。 【解決手段】ディスプレイ装置１２、ディスプレイ装置
１２の前方に存在する利用者ＰＵを撮影するビデオカメ
ラ２２、利用者ＰＵに関連して予め得た画像データであ
る１つ又は複数の参照用データを記憶する参照用データ
記憶部１３１、ビデオカメラ２２により得られる画像デ
ータと参照用データとを比較し、それらの相関の最も高
い部分の空間内における位置に対応した位置情報を出力
する位置検出部１１０、ディスプレイ装置１２により表
示する映像のための映像データを出力するとともに、位
置検出部１１０から出力される位置情報に基づいて映像
データの内容を制御する映像制御部１１５を有してな
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えば画面を見て
いる人間の動きを検出することによって画面に表示され
る映像を制御するインタラクティブ表示装置に関する。

【０００２】近年において、３次元グラフィックスによ
って仮想生物やエージェントなどの映像を画面に表示
し、それを見ている人間の操作する入力機器又は入力セ
ンサからの信号に応じて映像を変化させ、仮想生物があ
たかも生きているかのように感じさせるインタラクティ
ブなアプリケーションがしばしば用いられている。

【０００３】このように、画面に表示されたキャラクタ
やシーンを制御し、特定のストーリーを実現させるイン
タラクティブなアプリケーションの効果を一層高め、よ
り臨場感のあるものとするために、人間にとってより自
然に感じることのできるマンマシンインタフェースが求
められている。

【０００４】

【従来の技術】従来のインタラクティブなアプリケーシ
ョンにおいては、画面に表示される映像（画像）を制御
するための入力インタフェースとして、キーボード、マ
ウス、ジョイパッドなどの入力操作機器を用い、利用者
がそれらの機器を自身の手先で操作することが一般的で
ある。

【０００５】また、人間が知りたいさまざまな情報をま
るで現実と同じように体験するようにしたバーチャルリ
アリティシステムでは、電磁位置センサ又はデータグロ
ーブなどの新しい入力インタフェースが用いられてい
る。これらは利用者に装着され、利用者の頭や手の動き
を直接に検出し、その検出出力に基づいて画面又は機器
の動作が制御される。

【０００６】

【発明が解決しようとする課題】さて、例えば映像とし
て仮想生物を画面に表示し、その仮想生物と見ている人
とが対話する場合に、見ている人がマウスやキーボード
などの機器を用いて操作するのであれば、臨場感は低下
してあまり興味はなくなってしまう。

【０００７】また、電磁位置センサ又はデータグローブ
などを用いて映像を制御する場合には、それらの機器を
利用者の身体に装着しなければならず、しかもデータの
送受のためのケーブルをつなぐ場合もあるので、利用者
の自然な動作を妨げるという問題がある。

【０００８】また、画面に表示された仮想生物に対し
て、従来においては人間（又は利用者）がその仮想生物
をどの方向から見ているかという情報が欠如しているた
めに、人間の見る方向によっては極めて不自然な印象を
与るという状況が発生する可能性がある。

【０００９】本発明は、上述の問題に鑑みてなされたも
ので、利用者の自由な動きを妨げることがなく利用者の
動作を検出し、利用者が自然に感じることのできる臨場
感に富んだインタラクティブ表示装置を提供することを
目的とする。

【００１０】

【課題を解決するための手段】請求項１の発明に係る装
置は、映像を表示するための表示手段と、前記表示手段
の設置された空間内に設置され、前記表示手段の前方に
存在する対象物を撮影する撮影手段と、前記対象物に関
連して予め得た画像データである１つ又は複数の参照用
データを記憶する参照用データ記憶手段と、前記撮影手
段により得られる画像データと前記参照用データとを比
較し、それらの相関の最も高い部分の前記空間内におけ
る位置に対応した位置情報を出力する位置検出手段と、
前記表示手段により表示する映像のための映像データを
出力するとともに、前記位置検出手段から出力される位
置情報に基づいて前記映像データの内容を制御する映像
制御手段と、を有してなる。

【００１１】請求項２の発明に係る装置では、前記参照
用データとして人の頭部の画像データが用いられ、前記
位置検出手段は、対象物が人である場合にその頭部の位
置に対応した位置情報を出力する。

【００１２】請求項３の発明に係る装置では、前記参照
用データとして複数人の顔の画像データが用いられ、前
記位置検出手段においては、前記撮影手段により得られ
る画像データと相関の最も高い参照用データを選択する
ことによって対象物としての人を特定し、前記映像制御
手段においては、前記特定された人に応じて前記映像デ
ータの内容を制御する。

【００１３】請求項４の発明に係る装置は、前記位置検
出手段には、前記撮影手段により得られる画像データと
前記参照用データとを比較する比較手段と、前記比較手
段における比較結果に基づいて、前記表示手段の表示面
と実質的に平行な平面内における相関の最も高い部分の
座標情報を出力する座標検出手段と、前記撮影手段の前
記空間内における設置位置に関する情報である設置位置
情報、及び前記撮影手段と前記表示手段との相対的な位
置関係を示す相対位置情報を予め記憶した設置情報記憶
手段と、前記設置情報記憶手段に記憶された情報及び前
記座標検出手段から出力される座標情報に基づいて、前
記表示手段に対する対象物の頭部の位置する方向を視点
方向として検出し、検出した視点方向を前記位置情報と
して出力する視点方向検出手段と、が設けられてなる。

【００１４】請求項５の発明に係る装置では、前記映像
制御手段は、立体物の存在する三次元空間を表現する三
次元画像データを前記映像データとして出力するととも
に、前記視点方向検出手段により検出された視点方向か
ら見た前記三次元空間の映像データを出力するように制
御する。

【００１５】請求項６の発明に係る装置では、前記映像
制御手段は、仮想生物の三次元画像データを前記映像デ
ータとして出力するとともに、前記仮想生物が前記視点
方向検出手段により検出された視点方向に追従するよう
に前記映像データを制御する。

【００１６】

【発明の実施の形態】図１は本発明に係るインタラクテ
ィブ表示装置１の構成を示すブロック図、図２はインタ
ラクティブ表示装置１の構成を機能的に示すブロック
図、図３はインタラクティブ表示装置１の各機器の配置
の例を示す平面図である。

【００１７】図１において、インタラクティブ表示装置
１は、処理装置１１、ディスプレイ装置１２、磁気ディ
スク装置１３、キーボード１４、マウス１５、モニタ装
置１６、及びビデオカメラ２２などから構成される。こ
れらの機器の他、光磁気ディスク装置、フロッピィディ
スク装置、ＣＤ−ＲＯＭ装置、又はプリンタ装置などが
必要に応じて適宜接続される。

【００１８】ディスプレイ装置１２は、対象物である人
の高さと同程度の大きい画面ＨＧを有している。インタ
ラクティブ表示装置１を利用する人は、ディスプレイ装
置１２の画面ＨＧの前方に立ち、画面ＨＧを見ながら又
は見ずに、種々の動作を行う。モニタ装置１６は、参照
用データを取得する際に用いられ、またインタラクティ
ブ表示装置１を管理する人が用いる。なお、インタラク
ティブ表示装置１を利用する人を「利用者ＰＵ」とい
う。

【００１９】磁気ディスク装置１３には、参照用データ
ＤＲの他、種々の映像データ（又は画像データ）ＤＴの
ファイル、それらのファイルによるデータベース、種々
のプログラム又はデータが格納されている。磁気ディス
ク装置１３に格納されたファイルなどに基づいて、画面
ＨＧに動画又は静止画による映像（画像）が表示され
る。

【００２０】参照用データＤＲは、対象物に関連して予
め得た画像データである。参照用データＤＲとして、例
えば、複数の利用者のそれぞれの顔の画像データが用い
られる。その場合には、利用者のそれぞれの顔をビデオ
カメラ２２で撮影することによって参照用データＤＲが
得られる。

【００２１】映像データＤＴとしては、例えば、壺、
瓶、碗、家具などの美術工芸品、自動車などの工業製
品、家電製品、建築物など、静止物体の三次元画像デー
タ若しくはそれら静止物体の存在する三次元空間を表現
する三次元画像データ、又は、生命体若しくは生命体の
ように振る舞う仮想生物の三次元画像データである。

【００２２】ビデオカメラ２２は、図３に示されるよう
に、ディスプレイ装置１２の設置された空間ＳＳ内に設
置され、ディスプレイ装置１２の前方に存在する利用者
ＰＵなどの対象物を撮影する。ビデオカメラ２２の出力
信号は、参照用データＤＲを得るために用いられ、ま
た、ディスプレイ装置１２に表示される映像を制御する
ために用いられる。

【００２３】処理装置１１は、ＭＰＵ、ＲＡＭ、ＲＯ
Ｍ、他の周辺素子などからなっており、磁気ディスク装
置１３から読み出したフィルなどに基づいて画面ＨＧに
映像を表示するための処理、利用者ＰＵの顔の位置を検
出する処理、それに基づいて映像を変化させる処理、そ
の他の種々の処理を行う。

【００２４】図２において、インタラクティブ表示装置
１には、位置検出部１１０、映像制御部１１５、及び参
照用データ記憶部１３１が設けられている。参照用デー
タ記憶部１３１は磁気ディスク装置１３内に設けられて
いる。但し、参照用データ記憶部１３１を処理装置１１
のＲＡＭなどに設けてもよい。

【００２５】位置検出部１１０は、ビデオカメラ２２に
より得られる画像データＤＦと参照用データＤＲとを比
較し、それらの相関の最も高い部分の空間ＳＳ内におけ
る位置に対応した位置情報ＤＰを出力する。映像制御部
１１５は、ディスプレイ装置１２により表示する映像の
ための映像データＤＴを出力するとともに、位置検出部
１１０から出力される位置情報ＤＰに基づいて映像デー
タＤＴの内容を制御する。

【００２６】すなわち、位置検出部１１０には、比較部
１１１、座標検出部１１２、設置情報記憶部１１３、及
び視点方向検出部１１４が設けられている。位置検出部
１１０は、ビデオカメラ２２により得られる画像データ
ＤＦと参照用データＤＲとを比較する。座標検出部１１
２は、比較部１１１における比較結果に基づいてディス
プレイ装置１２の表示面と実質的に平行な平面内におけ
る相関の最も高い部分の座標情報ＤＣを出力する。

【００２７】設置情報記憶部１１３は、ビデオカメラ２
２の空間ＳＳ内における設置位置に関する情報である設
置位置情報ＤＶＡ、ビデオカメラ２２の撮影範囲に関す
る情報である撮影範囲情報ＤＶＢ、及びビデオカメラ２
２とディスプレイ装置１２との相対的な位置関係を示す
相対位置情報ＤＶＣを予め記憶する。設置位置情報ＤＶ
Ａ及び相対位置情報ＤＶＣは、例えば三次元空間内にお
ける各機器の座標情報である。設置位置情報ＤＶＡ及び
相対位置情報ＤＶＣに代えて、各機器の設置位置情報を
用いてもよい。撮影範囲情報ＤＶＢは、視野角又は距離
範囲などである。

【００２８】視点方向検出部１１４は、設置情報記憶部
１１３に記憶された情報及び座標検出部１１２から出力
される座標情報ＤＣに基づいて、ディスプレイ装置１２
に対する利用者ＰＵの頭部の位置する方向を視点方向と
して検出し、検出した視点方向を位置情報ＤＰとして出
力する。

【００２９】処理装置１１のこれらの処理は、ＲＯＭ、
ＲＡＭ、又は磁気ディスク装置１３に格納されたプログ
ラムをＭＰＵが実行することにより実現される。処理装
置１１として、いわゆるパーソナルコンピュータ又はワ
ークステーションなどを利用することができる。

【００３０】図３において、ディスプレイ装置１２の前
方には利用者ＰＵが立っている。ディスプレイ装置１２
と利用者ＰＵとの間の距離は１〜数メートルである。ま
た、ディスプレイ装置１２の裏側にはパーティション１
９が設けられている。パーティション１９に代えて壁で
もよく、省略することも可能である。ビデオカメラ２２
は、パーティション１９の上部に設置され、ディスプレ
イ装置１２の前方を撮影する。

【００３１】図４は参照用データ記憶部１３１に記憶さ
れた参照用データＤＲ１の例を示す図、図５はビデオカ
メラ２２により得られる画像データＤＦ１の例を示す
図、図６は映像制御部１１５から出力される映像データ
ＤＴ１，２に基づいてディスプレイ装置１２に表示され
る映像ＶＤ１，２の例を示す図、図７は映像制御部１１
５において生成される三次元の映像データによる仮想生
物の平面図である。

【００３２】図４に示す参照用データＤＲ１は、ある利
用者ＰＵ１の顔の部分の画像データである。図５に示す
ように、ディスプレイ装置１２の前には利用者ＰＵ１が
立っており、ビデオカメラ２２からは利用者ＰＵ１の顔
を含む画像データＤＦ１が得られる。

【００３３】比較部１１１において、参照用データＤＲ
１と画像データＤＦ１とが比較され、画像データＤＦ１
のうち、参照用データＤＲ１と最もよく一致する部分が
検出される。比較に当たっては従来より公知の種々の手
法が用いられる。座標検出部１１２は、画像データＤＦ
１のうちの一致する部分の中央位置の座標情報ＤＣ１を
出力する。図５に示す例では、座標情報ＤＣ１はディス
プレイ装置１２の画面ＨＧのほぼ中央位置を示す。

【００３４】視点方向検出部１１４は、座標情報ＤＣ１
と設置情報記憶部１１３に記憶された情報に基づいて、
ディスプレイ装置１２に対する利用者ＰＵの頭部の位置
する方向を視点方向として検出し、検出した視点方向を
位置情報ＤＰ１として出力する。

【００３５】視点方向は、ディスプレイ装置１２の画面
ＨＧの正面を向く方向を０度とし、画面ＨＧの右方に
正、左方に負の角度となる。例えば、利用者ＰＵが画面
ＨＧの正面から右方に移動した場合には、１０度、２０
度、３０度…というように正の方向に増加し、正面から
左方に移動した場合には、−１０度、−２０度、−３０
度…というように負の方向に増加する。図５に示す例で
は、位置情報ＤＰ１は画面ＨＧの正面を示し、したがっ
て視点方向は０度である。

【００３６】映像制御部１１５は、位置情報ＤＰ１に基
づいて、映像データＤＴの内容を制御し、仮想生物の映
像が位置情報ＤＰで示される視点方向から見た映像とな
るように映像データＤＴ１，２を生成する（図７を参
照）。このような映像データＤＴ１，２は、位置情報Ｄ
Ｐ１をパラメータとして映像データ生成プログラムを実
行することにより生成してもよく、又は、予め作成され
た三次元の映像データＤＴを位置情報ＤＰ１に対応して
読み出し又は補完演算を行うことによって得てもよい。

【００３７】図６（Ａ）に示す映像ＶＤ１は、位置情報
ＤＰが約３０度の場合である。つまり、この場合には、
利用者ＰＵ１が画面ＨＧの右方に寄っており、映像ＶＤ
１の仮想生物は右方にいる利用者ＰＵ１の方を向いてい
る。利用者ＰＵ１が画面ＨＧの左方寄りに移動し、位置
情報ＤＰが約−３０度となると、図６（Ｂ）に示す映像
ＶＤ２が画面ＨＧに表示される。つまり、利用者ＰＵ１
の移動に追従して画面ＨＧ内の仮想生物も向きを変え、
左方にいる利用者ＰＵ１の方を向く。

【００３８】このように、位置検出部１１０において利
用者ＰＵ１の顔の位置が検出され、映像ＶＤの仮想生物
が利用者ＰＵ１の方を向くように映像制御部１１５によ
り制御される。すなわち、利用者ＰＵ１は、マウスやキ
ーボードなどの操作を行うことなく、しかも何らの機器
も身体に装着することなく、且つ利用者ＰＵ１が特別な
動作をすることなく、画面ＨＧに表示された映像ＶＤ１
の仮想生物に対する指示を与えることができる。したが
って、利用者ＰＵ１は仮想生物への指示に当たって自然
な動作を妨げられることがないので、仮想生物の実在感
が増し、利用者ＰＵ１は画面ＨＧに表示される映像ＶＤ
に対してより一層の臨場感を感じることができる。ま
た、例えば利用者ＰＵ１及び画面ＨＧを見ている人にと
っても、仮想生物の実在感が増し、それにともなって臨
場感も増し、例えば仮想生物が利用者ＰＵ１に懐いてい
るようにも感じられる。

【００３９】なお、利用者ＰＵの視点方向に応じて仮想
生物が向きを変えるような制御を、例えば利用者ＰＵが
手をたたくことによって仮想生物が利用者ＰＵの存在に
気が付いた後に行うようにしてもよい。

【００４０】次に、映像ＶＤの内容が仮想生物ではな
く、静止物体である場合について説明する。ここでは、
静止物体が角瓶である場合について説明する。図８は映
像制御部１１５から出力される映像データＤＴ３，４に
基づいてディスプレイ装置１２に表示される角瓶の映像
ＶＤ３，４の例を示す図、図９は映像制御部１１５にお
いて生成される三次元の映像データによる角瓶の平面図
である。

【００４１】図８（Ａ）においては、角瓶が正面を向い
た映像ＶＤ３が画面ＨＧに表示されている。利用者ＰＵ
１が右方向に移動することによって視点方向が右方向に
移動すると、図８（Ｂ）に示すように、角瓶の映像ＶＤ
４は移動後の視点方向から見た状態となる。つまり、静
止物体である角瓶は、利用者ＰＵ１が移動しても静止し
たままであり、利用者ＰＵ１の移動にともなって角瓶の
見える角度が変わることとなる。角瓶の映像ＶＤは、利
用者ＰＵ１の視点方向から見える映像として画面ＨＧに
表示される（図９を参照）。したがって、仮想生物と角
瓶とでは、映像ＶＤの回転方向が互いに逆である。

【００４２】このように、位置検出部１１０において利
用者ＰＵ１の顔の位置が検出され、利用者ＰＵ１はまる
でそこに角瓶の実物があるかのようにその角瓶を見る角
度を変えることによって、その方向から見た角瓶の映像
ＶＤを表示するように映像制御部１１５で制御されるの
である。

【００４３】なお、画面ＨＧが１つのみである場合に
は、利用者ＰＵ１は、正負の方向にそれぞれ９０度まで
しか移動できないので、角瓶の全周（正負方向に１８０
度）を見るためには、利用者ＰＵ１の視点方向の２倍の
角度から見た映像ＶＤを表示させればよい。

【００４４】上述の実施形態においては、参照用データ
ＤＲとして利用者ＰＵ１の顔を用い、利用者ＰＵ１はデ
ィスプレイ装置１２の画面ＨＧの方を向いた状態で利用
するが、利用者ＰＵ１の横顔、後頭部などを参照用デー
タＤＲとし、利用者ＰＵ１が横方向又は後ろ方向を向い
た状態で利用できるようにしてもよい。そうすると、利
用者ＰＵ１が画面ＨＧに背を向けた状態で演技又は円舞
などを行い、その前方に集まった聴衆がその演技を画面
ＨＧに表示された映像ＶＤとともに鑑賞する場合に利用
できる。この場合に、利用者ＰＵ１の演技にともなって
仮想生物が向きを変え、又は演技をする。

【００４５】上述の実施形態においては、参照用データ
ＤＲとして１人の利用者ＰＵ１の頭部を用いたが、複数
人の利用者ＰＵについての参照用データＤＲを用い、こ
れらの参照用データＤＲとビデオカメラ２２から得られ
る画像データＤＦとを比較することによって利用者ＰＵ
が誰であるかを特定してもよい。この場合には、各利用
者ＰＵについての性格、癖、趣味、その他のデータを予
め登録しておき、特定された利用者ＰＵに応じて映像デ
ータＤＴの制御内容を異ならせるようにしてもよい。

【００４６】また、参照用データＤＲとして、利用者Ｐ
Ｕ本人の画像データではなく、例えば人の顔、眼鏡を掛
けた人の顔、丸顔、など、一般的な人の種々の典型的な
顔の画像データを記憶しておき、それらのタイプに応じ
た制御を行うようにしてもよい。

【００４７】さらに、参照用データＤＲとして、正面を
向いた顔、うなずいた顔などを記憶しておくことによっ
て、利用者ＰＵがうなずいたことを検出し、それによっ
て映像データＤＴを制御することもできる。このよう
に、利用者ＰＵ１の全体が移動しない場合でも、うなず
いたり手を振ったりした場合のように利用者ＰＵ１の身
体の一部の動作を検出することによって、極めて自然な
マンマシンインタフェースとすることが可能であり、イ
ンタラクティブ表示装置１を臨場感及び現実感に富んだ
ものとすることができる。

【００４８】上述の実施形態においては、参照用データ
ＤＲと一致する部分の中央位置の座標情報ＤＣ１を出力
したが、端点など他の位置の座標情報ＤＣを出力しても
よい。ビデオカメラ２２の設置位置は他の位置でもよ
い。複数のビデオカメラを用いてもよい。ビデオカメラ
２２に代えて、又はビデオカメラ２２とともに、他のセ
ンサーを用いてもよい。ディスプレイ装置１２として１
つの画面ＨＧを有するものを例示したが、例えば３つの
画面ＨＧが若干の角度を有して横方向に併設されたもの
でもよい。この場合には、中央の画面ＨＧに平行な平面
が、表示面と実質的に平行な平面となることが多い。そ
の他、インタラクティブ表示装置１の全体又は各部の構
造、形状、処理内容、処理順序、タイミング、映像又は
画像の内容などは、本発明の主旨に沿って適宜変更する
ことができる。

【００４９】

【発明の効果】請求項１乃至請求項６の発明によると、
利用者の自由な動きを妨げることがなく利用者の動作を
検出し、利用者が自然に感じることのできる臨場感に富
んだインタラクティブ表示装置を提供することができ
る。

【００５０】請求項２の発明によると、利用者の視点方
向を容易に検出して映像データを制御することができ
る。また、利用者のうなずきを検出して制御するなど、
利用者の自然な動作によって種々の制御を行うことがで
きる。

【００５１】請求項３の発明によると、利用者が誰であ
るかを特定することができ、例えば各利用者の性格、
癖、趣味などに応じて映像データの制御内容を異ならせ
ることができる。

【００５２】請求項５の発明によると、映像データの内
容が静止物体である場合に、利用者は画面の位置にまる
で静止物体の実物があるかのように見る角度を変えるこ
とによって、その方向から見た静止物体の映像を表示す
ることができ、臨場感に富んだものとすることができ
る。

【００５３】請求項６の発明によると、利用者は仮想生
物への指示に当たって自然な動作を妨げられることがな
く、仮想生物の実在感が増し、利用者は画面に映る仮想
生物に対してより一層の臨場感を感じることができる。

【図面の簡単な説明】

【図１】本発明に係るインタラクティブ表示装置の構成
を示すブロック図である。

【図２】インタラクティブ表示装置の構成を機能的に示
すブロック図である。

【図３】インタラクティブ表示装置の配置の例を示す平
面図である。

【図４】参照用データ記憶部に記憶された参照用データ
の例を示す図である。

【図５】ビデオカメラにより得られる画像データの例を
示す図である。

【図６】映像制御部から出力される映像データに基づい
てディスプレイ装置に表示される映像の例を示す図であ
る。

【図７】映像制御部において生成される三次元の映像デ
ータによる仮想生物の平面図である。

【図８】映像制御部から出力される映像データに基づい
てディスプレイ装置に表示される角瓶の映像の例を示す
図である。

【図９】映像制御部において生成される三次元の映像デ
ータによる角瓶の平面図である。

【符号の説明】

１ インタラクティブ表示装置 １１ 処理装置 １２ ディスプレイ装置（表示手段） １３ 磁気ディスク装置 ２２ ビデオカメラ（撮影手段） １１０ 位置検出部（位置検出手段） １１１ 比較部（比較手段） １１２ 座標検出部（座標検出手段） １１３ 設置情報記憶部（設置情報記憶手段） １１４ 視点方向検出部（視点方向検出手段） １１５ 映像制御部（映像制御手段） １３１ 参照用データ記憶部（参照用データ記憶手段） ＰＵ 利用者（対象物） ＤＲ 参照用データ ＤＴ 映像データ ＤＰ 位置情報

───────────────────────────────────────────────────── フロントページの続き (72)発明者 中沢 文彦 神奈川県川崎市中原区上小田中４丁目１番 １号 富士通株式会社内 (72)発明者 岩本 康秀 神奈川県川崎市中原区上小田中４丁目１番 １号 富士通株式会社内

Claims (6)

【特許請求の範囲】
1. 【請求項１】映像を表示するための表示手段と、 前記表示手段の設置された空間内に設置され、前記表示
   手段の前方に存在する対象物を撮影する撮影手段と、 前記対象物に関連して予め得た画像データである１つ又
   は複数の参照用データを記憶する参照用データ記憶手段
   と、 前記撮影手段により得られる画像データと前記参照用デ
   ータとを比較し、それらの相関の最も高い部分の前記空
   間内における位置に対応した位置情報を出力する位置検
   出手段と、 前記表示手段により表示する映像のための映像データを
   出力するとともに、前記位置検出手段から出力される位
   置情報に基づいて前記映像データの内容を制御する映像
   制御手段と、 を有してなることを特徴とするインタラクティブ表示装
   置。
2. 【請求項２】前記参照用データとして人の頭部の画像デ
   ータが用いられ、 前記位置検出手段は、対象物が人である場合にその頭部
   の位置に対応した位置情報を出力する、 請求項１記載のインタラクティブ表示装置。
3. 【請求項３】前記参照用データとして複数人の顔の画像
   データが用いられ、 前記位置検出手段においては、前記撮影手段により得ら
   れる画像データと相関の最も高い参照用データを選択す
   ることによって対象物としての人を特定し、 前記映像制御手段においては、前記特定された人に応じ
   て前記映像データの内容を制御する、 請求項１又は請求項２記載のインタラクティブ表示装
   置。
4. 【請求項４】前記位置検出手段には、 前記撮影手段により得られる画像データと前記参照用デ
   ータとを比較する比較手段と、 前記比較手段における比較結果に基づいて、前記表示手
   段の表示面と実質的に平行な平面内における相関の最も
   高い部分の座標情報を出力する座標検出手段と、 前記撮影手段の前記空間内における設置位置に関する情
   報である設置位置情報、及び前記撮影手段と前記表示手
   段との相対的な位置関係を示す相対位置情報を予め記憶
   した設置情報記憶手段と、 前記設置情報記憶手段に記憶された情報及び前記座標検
   出手段から出力される座標情報に基づいて、前記表示手
   段に対する対象物の頭部の位置する方向を視点方向とし
   て検出し、検出した視点方向を前記位置情報として出力
   する視点方向検出手段と、 が設けられてなる請求項１乃至請求項３記載のいずれか
   に記載のインタラクティブ表示装置。
5. 【請求項５】前記映像制御手段は、立体物の存在する三
   次元空間を表現する三次元画像データを前記映像データ
   として出力するとともに、前記視点方向検出手段により
   検出された視点方向から見た前記三次元空間の映像デー
   タを出力するように制御する、 請求項４記載のインタラクティブ表示装置。
6. 【請求項６】前記映像制御手段は、仮想生物の三次元画
   像データを前記映像データとして出力するとともに、前
   記仮想生物が前記視点方向検出手段により検出された視
   点方向に追従するように前記映像データを制御する、 請求項４記載のインタラクティブ表示装置。