WO2008041315A1

WO2008041315A1 - Dispositif d'affichage d'images

Info

Publication number: WO2008041315A1
Application number: PCT/JP2006/319707
Authority: WO
Inventors: Isao Tomisawa; Masaru Ishikawa
Original assignee: Pioneer Corporation
Priority date: 2006-10-02
Filing date: 2006-10-02
Publication date: 2008-04-10
Also published as: JPWO2008041315A1; JP4939543B2; US20100134410A1

Description

明細書

画像表示装置

技術分野

[0001] 本発明は、例えば 3D (Dimension)フローティングビジョン方式に基づいて二次元画像を立体的に表示する画像表示装置の技術分野に関する。

背景技術

[0002] この種の立体的な二次元画像は、室内装飾器具、販促用ディスプレイ、通信端末装置、ゲーム機器等において、臨場感、視認性、アミューズメント性等を向上させ得る。それ故、立体的な二次元画像を表示するための方式が各種提案されている。例えば、目視者が偏光メガネをかけ、互いに異なった偏光状態に基づく左右の視差画像を目視する偏光方式が提案されている。ところが、この方式では、目視者にとって偏光メガネの装着がわずらわし、と、う問題が生じ得る。

[0003] このような不具合に対処するため、例えば偏光メガネを用いな、立体画像表示法として、レンチキュラーレンズ法が提案されている（例えば、特許文献 1参照)。この方式によると、一画面に複数画面を潜像させ、一定幅の半円柱型レンズを水平方向につなぎ合わせた透過スクリーンを通して当該複数画面を見せることで、立体表現や動画表現が実現される。

[0004] 或いは、 3Dフローティングビジョン方式が本願出願人より提案されている。この方式によると、二次元画像をマイクロレンズアレイによって実像として結像させることで、比較的簡単な構成で立体的二次元画像を表示することができる。特に、この方式においてインタラクティブな装置を実現すベぐ位置検出センサを用い、その出力信号に応じて、結像面に表示される立体的二次元画像を変化させる技術が提案されてヽる (例えば、特許文献 2参照)。

[0005] 特許文献 1 :特開平 10— 221644号公報

特許文献 2：特開 2005 - 141102号公報

発明の開示

発明が解決しょうとする課題 [0006] し力しながら、例えば前述の特許文献 1に開示されている技術には、以下のようなコスト上の問題が生じ得る。即ち、上記したレンチキュラーレンズ法は、一画面に複数の画面を潜像させるため、撮像段階から目視者の両目に対応する視差画像を必要とする。そして、この画像を供給するために多くの作業、例えばコンピュータ画像処理、レンチキュラーレンズ設計、レンズと画像との正確な組み合わせ作業が必要であり、コストアップの要因となる。

[0007] 或いは、前述の特許文献 2に開示されている技術によると、特許文献 1に係るコスト上の問題は解消でき、ある程度の演出効果やインタラクテイビティは確保されるものの、これら演出効果やインタラクテイビティには依然として改善の余地がある。例えば、玩具の鉄砲、ナイフ、フォーク、ドライヤ、或いは刷毛などは、現実にはその属性（形状、用途、機能等）が互いに異なるものである。にも関わらず、どの道具を用いて画像表示装置を操作しても同じようなリアクションしかなされなければ、面白みに欠け、演出効果やインタラクテイビティが十分であるとは言、難!/、。

[0008] 本発明は、例えば上述した問題点に鑑みてなされたものであり、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果、及びインタラクテイビティを向上させることが可能な画像表示装置を提供することを課題とする。

課題を解決するための手段

[0009] 本発明に係る画像表示装置は上述の課題を解決するために、画面上に画像を表示する表示手段と、前記画像を構成する表示光の光路に配置され、かつ、前記画像の実像を前記画面とは反対側の空間に位置する結像面に浮遊画像として表示するように、前記画像を構成する前記表示光を伝達する画像伝達手段と、前記空間を含む実空間部分内に位置する被検出物の属性を特定する属性特定手段と、前記浮遊画像が、前記特定される前記被検出物の属性に予め対応付けられている形態へと変化するように、前記表示手段を制御する制御手段とを備える。

[0010] 本発明によれば、以下に記すように、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果やインタラクテイビティを向上可能である。

[0011] 即ち、先ず、例えばカラー液晶表示装置のような表示手段によって、画面上に画像が表示される。 [0012] ここで、例えばマイクロレンズアレイを含んでなる画像伝達手段力画像を構成する表示光の光路に配置されている。この画像伝達手段によって、画像を構成する表示光が伝達されて、画像の実像が画面とは反対側の空間に位置する結像面に、浮遊画像として表示される。ここで「浮遊画像」とは、その観察位置にいるユーザからは（即ち、その視野角の範囲内では）、あた力も空中に浮かんでいるかのように見える画像で、実像であることが好ましい。例えば 3Dフローティングビジョン (本願出願人の登録商標)などの画像表示方式が考えられる。

[0013] ところで、上述のように表示される浮遊画像に対して、例えば、玩具の鉄砲、ナイフ、フォーク、ドライヤー、或いは刷毛などの道具を用いた操作をしても、仮に同じようなリアクションしかなされなければ、面白みに欠け、演出効果やインタラクテイビティが十分であるとは言い難い。

[0014] 然るに、本発明によれば、上述の空間を含む実空間部分内に位置する被検出物の属性が、属性特定手段によって特定される。ここで言う「被検出物」は、典型的には何らかの属性を有する道具的なものであり、例えば玩具の鉄砲、或いはフォークが含まれる。被検出物の「属性」とは、被検出物そのものに備わっている固有の性質或いは特徴であり、例えば形状、機能、或いは観念等を含む包括的な概念である。このような被検出物の属性は、例えば、後述の如き属性特定手段の一例である属性検出手段により検出されることで、特定される。

[0015] そして、浮遊画像が、検出される被検出物の属性に予め対応付けられている形態へと変化するように、表示手段が、演算回路及び記録回路等を含む制御手段によつて制御される。例えば、「発砲する」道具である玩具の鉄砲の属性には、「浮遊画像に描かれたキャラクタが怖がる」という形態が予め対応付けられている。或いは、「食ベ物を刺す '卷く」道具であるフォークの属性には、「浮遊画像に描かれた皿の上にパスタが表示される」という形態が予め対応付けられている。このように、検出される被検出物の属性によって、その属性力導き出され得る多様な形態へと浮遊画像が変化するのである。

[0016] 従って、本発明によれば、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果やインタラクテイビティを向上可能である。 [0017] 本発明に係る画像表示装置の一態様では、前記属性特定手段は、前記属性を検出する属性検出手段を有する。

[0018] この態様によれば、被検出物の属性は、以下のように属性検出手段により検出される。即ち、例えば予め属性が記録されている ICタグを被検出物に付着しておき、その ICタグを ICタグリーダで電磁気的に読み取ることで、被検出物の属性が検出される。或いは、 CCDカメラのような撮像装置で撮像した被検出物の画像と、データベース化されている被検出物の候補の画像とがパターン認識され、被検出物の候補に予め対応付けられて記録されている属性が読み出されることで、被検出物の属性が検出される。

[0019] 本発明に係る画像表示装置の他の態様では、前記被検出物の位置が、前記実空間部分のうち何処であるかを検出する位置検出手段を更に備え、前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、前記検出される前記被検出物の位置にも予め対応付けられている形態へと変化するように、前記表示手段を制御する。

[0020] この態様によれば、以下に記すように、その演出効果やインタラクテイビティに加えて、リアリティをも格段に向上可能である。即ち、先ず、被検出物の位置が、実空間部分のうち何処である力が、例えば XYZセンサ、 CCDイメージセンサ、赤外線センサ或いは超音波センサのような位置検出手段によって検出される。ここで言う「被検出物の位置」には、被検出物の平面的な位置のみならず空間的な位置も含まれる。例えば、被検出物が結像面或いはその前後の平面に交わる場合に結像面或いはその前後の平面内において該被検出物が占める平面領域が検出されてもよい。この平面領域に加えて又は代えて、被検出物が上述の空間を含む実空間部分内に位置する場合にこの実空間部分内において該被検出物が占める空間領域が検出されてもよい。そして、浮遊画像が、上述のように特定される被検出物の属性に加えて、検出される被検出物の位置にも予め対応付けられている形態へと変化するように、表示手段が制御手段によって制御される。例えば、「玩具の玉」が「的の浮遊画像」を貫通する場合には、「的の浮遊画像」が、「玩具の玉」の属性に予め対応付けられている「弾痕のある的の浮遊画像」へと変化するように、表示手段が制御手段によって制御される。このように、被検出物の位置に応じて浮遊画像がダイナミックに変化するので、その演出効果やインタラクテイビティを向上可能である。力！]えて、この際、「弾痕」は、適当な位置でなぐ「玩具の玉」が貫通する位置に調整されるので、リアリティを格段に向上可能である。

[0021] この被検出物の位置が検出される態様では、前記検出される被検出物の位置が経時的に変化する場合に、該変化する前記被検出物の位置の軌跡を記憶する記憶手段を更に備え、前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、前記記憶される前記被検出物の位置の軌跡にも予め対応付けられている形態へと変化するように、前記表示手段を制御してもよい。

[0022] この態様によれば、以下に記すように、その演出効果やインタラクテイビティに加えて、リアリティをも格段に向上可能である。即ち、先ず、検出される被検出物の位置が経時的に変化する場合に、該変化する被検出物の位置の軌跡が、例えばメモリを中心とした論理演算回路力もなる記憶手段によって、例えば数百ミリ秒毎に記憶される。ここで言う「変化する被検出物の位置の軌跡」には、被検出物の平面的な位置のみならず空間的な軌跡も含まれる。力 Πえて、被検出物が結像面或いはその前後の平面に交わる場合の軌跡というような、所定条件を満たす軌跡を指してもよい。そして、浮遊画像が、上述のように特定される被検出物の属性に加えて、記憶される被検出物の位置の軌跡にも予め対応付けられている形態へと変化するように、表示手段が制御手段によって制御される。例えば、結像面と交わったままナイフで「リンゴの浮遊画像」を上下に切ると、その軌跡が記憶される。そして、「リンゴの浮遊画像」が、ナイフの属性に予め対応付けられて、る「切り口のあるリンゴの浮遊画像」へと変化するように、表示手段が制御手段によって制御される。この際、「切り口」は、適当な位置でなぐナイフが貫通する位置に調整される。し力も、軌跡が記憶されているので、ナイフの位置が変わるからといって逐次消えることもないので、リアリティを格段に向上可能である。

[0023] この位置の軌跡が記憶される態様では、前記被検出物の位置が検出される時点よりも後に、前記被検出物の位置が前記実空間部分のうち何処へ変化するかを、前記記憶される前記被検出物の位置の軌跡に基づいて予測する予測手段を更に備え、前記制御手段は、前記表示手段が、前記特定される属性に加えて、前記予測される前記被検出物の位置にも予め対応付けられている形態に係る前記画像を先読みするように、前記表示手段を制御してもよい。

[0024] この態様によれば、以下に記すように、その演出効果やインタラクテイビティを向上すると共に、浮遊画像を表示する際の応答遅れを解消可能である。即ち、先ず、上述のように、変化する被検出物の位置の軌跡が、記憶手段によって、例えば数百ミリ秒毎に記憶されている。そして、例えば演算回路力もなる予測手段によって、被検出物の位置が検出される時点 (典型的には、複数回位置を検出する中で最新の検出時)よりも後に、被検出物の位置が実空間部分のうち何処へ変化するかが、記憶される被検出物の位置の軌跡に基づいて予測される。例えば、経時的に記憶される被検出物の位置の軌跡に基づいて、速度ベクトルを特定することで、その後の軌跡も予測可能である。そして、表示手段が、特定される被検出物の属性に加えて、予測される被検出物の位置にも予め対応付けられている形態に係る画像を先読みするよう〖こ、表示手段が制御手段によって制御される。このように、被検出物の現在位置のみならず軌跡から位置の移動を予測し、予測結果に応じて、予め画像を先読みしておくことで、応答遅れを解消可能である。その結果、被検出物を移動させても、浮遊画像の変化が後からっヽてくる、或いはワンテンポ遅れて変化するとヽつた違和感が軽減され実践上非常に有益である。

[0025] 本発明に係る画像表示装置の他の態様では、前記被検出物の状態を検出する状態検出手段を更に備え、前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、少なくとも前記検出される前記被検出物の状態にも予め対応付けられて V、る形態へと変化するように、前記表示手段を制御する。

[0026] この態様によれば、以下に記すように、被検出物の状態或いはその変化によっても、浮遊画像が変化するので、その演出効果やインタラクテイビティが一段と向上する。即ち、先ず、被検出物の状態が、状態検出手段によって検出される。ここで言う「被検出物の状態」とは、被検出物についての何らかの状態を定性的に、或いは定量的に示すものであり、例えばスィッチのオン'オフのような非連続な 2段階の状態、或いはボリュームの低中高のような連続な多段階の状態等を示す。そして、浮遊画像が、特定される被検出物の属性に加えて、少なくとも検出される被検出物の状態にも予め対応付けられている形態へと変化するように、表示手段が制御手段によって制御される。例えば、玩具の鉄砲のスィッチがオフ力オンに切り替わると、発砲されることと同義とみなされて、「的の浮遊画像」が、「玩具の鉄砲」の属性に予め対応付けられている「弾痕のある的の浮遊画像」へと変化するように、表示手段が制御手段によつて制御される。或いは、ドライヤーのスィッチがオフからオンに切り替わると、「長髪の女性の浮遊画像」力「ドライヤー」の属性に予め対応付けられて、る「髪がなびく女性の浮遊画像」へと変化するようしてもよい。このように、被検出物の状態に応じて浮遊画像がダイナミックに変化するので、その演出効果やインタラクテイビティを一段と向上可能である。

[0027] 本発明に係る画像表示装置の他の態様では、前記被検出物に付着されており、かつ、前記被検出物の属性を示す属性情報が電磁光学的に読み出し可能に記録されているタグ手段を更に備え、前記属性検出手段は、前記記録されている属性情報を電磁光学的に読み出すことで、前記属性を検出する。

[0028] この態様によれば、以下に記すように、タグ手段を利用して被検出物に係る属性情報を読み出し可能であり、読み出した属性情報に基づいて、その演出効果やインタラクテイビティを向上可能である。即ち、先ず、被検出物には、例えば ICタグ、或いはバーコードのようなタグ手段が付着されている。そのタグ手段には、当該被検出物の属性を示す属性情報が電磁光学的に読み出し可能に記録されている。ここで「電磁光学的に読み出し可能」とは、タグ手段に記録されている属性情報を、電気、磁気、又は光を用いて読み出すことができることを言う。そして、例えば ICタグリーダ、或いはバーコードリーダのような属性検出手段によって、力かる属性情報が電磁光学的に読み出され、これをもって被検出物の属性が検出される。例えば、 ICタグ内の回路に電磁波を照射することで電磁気的に、或いは、バーコードを画像認識することで光学的に、上述の属性情報を読み出すことができる。尚、読み出す形態は、好ましくは非接触型であるが、接触型でもよい。何れにせよ、タグ手段を利用して属性情報を読み出し可能であり、読み出した属性情報に基づいて、その演出効果やインタラクテイビティを向上可能である。 [0029] このタグ手段を更に備える態様では、前記位置検出手段は、前記被検出物に付着されている前記タグ手段の位置が、前記実空間部分のうち何処であるかを検出することで、前記被検出物の位置を検出してもよい。

[0030] この態様によれば、以下に記すように、タグ手段の検出に特ィ匕した ICタグリーダ、或いはバーコードリーダ等を使用する場合には、属性に加えて位置も検出し得るので、一石二鳥である。即ち、被検出物に付着されているタグ手段の位置力実空間部分のうち何処であるか力例えば ICタグ、或いはバーコードのような位置検出手段によつて検出され、これをもって被検出物の位置が検出される。具体的には、 ICタグに向けて電磁波を照射する場合には、その応答時間、及び応答方向から被検出物の位置が検出される。このようにして、上述のごとき一石二鳥の効果が得られる。尚、タグ手段を被検出物に複数付着させることで、被検出物の位置に加えて方向を検出してもよい。この際、位置のみならず方向に応じて浮遊画像を変化させることができるので、浮遊画像のインタラクテイビティが一段と向上する。

[0031] このタグ手段を更に備える態様では、前記タグ手段には、前記属性情報に加えて、前記被検出物の状態を示す状態情報が電磁光学的に読み出し可能に記録されており、少なくとも前記状態情報を書き換える書換手段を更に備えてもよい。

[0032] この態様によれば、以下に記すように、タグ手段の検出に特ィ匕した ICタグリーダ、或いはバーコードリーダ等を使用する場合には、属性に加えて状態も検出し得るので、一石二鳥である。即ち、タグ手段には、被検出物の属性に加えて、被検出物の状態を示す状態情報も電磁光学的に読み出し可能に記録されている。そして、少なくとも状態情報が、 ICタグライタ、或いはバーコードライタのような書換手段によって書き換えられる。例えば、玩具の鉄砲のスィッチがオフからオンに切り替わると、 ICタグに記録されて!/ヽる状態情報が、オフを示す内容からオンを示す内容へと書き換えられる。そして、書き換えられる状態情報が、状態検出手段に検出されて、上述のように、「的の浮遊画像」が「弾痕のある的の浮遊画像」へと変化する。このようにして、上述のごとき一石二鳥の効果が得られるので、実践上非常に有益である。

[0033] 本発明に係る画像表示装置の他の態様では、前記画像伝達手段は、マイクロレンズアレイからなり、前記浮遊画像は、前記画像の実像として表示される。 [0034] この態様によれば、以下に記すように、浮遊画像は実像であるので、浮遊画像の位置に被検出物（例えば、ナイフ）を持ってきても違和感がない。そのため、浮遊画像に対して直接的なインタラクティブが可能になる。即ち、先ず、画像伝達手段は、マイクロレンズアレイからなる。ここ言う「マイクロレンズアレイ」は、 3Dフローティングビジョン方式によるものであり、二次元のマトリックス状に配列された複数のマイクロ凸レンズを含んで成るレンズアレイ半体を 1又は複数枚、一体化させて構成される。このような画像伝達手段によると、浮遊画像は、画像の実像 (好適には、正立像）として表示される。

[0035] 尚、本発明に係る画像表示装置とは異なる方式でも、裸眼立体視システムを実現することはできるが、本発明に係る画像表示装置のように、違和感なく浮遊画像に直接手を触れるということは難し、。

[0036] 専用メガネを用いずに立体視システムを実現する方法としては、代表的なものとして視差バリア方式やレンチキュラー方式などが存在するが、何れの方式も右眼には右眼用画像、左眼には左眼用画像を見せることで生じる虚像によって立体映像を実現しており、観察者の眼の焦点位置と浮遊画像が知覚される位置は異なっている。つまり、画像表示面より手前に浮かび上がった映像を見るとき、眼の焦点位置は画像表示面上に合わせながらも、実際には手前に浮き出している立体映像を知覚していること〖こなる。（このことは、眼精疲労の原因であると言われている。）それ故に、被検出物手 (例えばナイフ）を近づけ立体映像に触れようとすると、眼の焦点位置が画像表示面から立体映像 (虚像）に触れようとする被検出物の位置に移動することとなり、浮遊画像を正しく視認することが難しくなる。

[0037] よって、視差バリア方式やレンチキュラー方式では、浮遊画像に直接触れるという場合に、少な力ゝらず違和感を生じてしまう。

[0038] これに対して、本発明に係る画像表示装置が表示する浮遊画像は、マイクロレンズアレイが結像する実像であるので、眼の焦点位置は最初から浮遊画像の位置にあるため、浮遊画像の位置に被検出物を持ってきても違和感なく直接触れていることを容易に認識することができる。

[0039] 以上、説明したように、本発明の画像表示装置によれば、表示手段、画像伝達手段、属性特定手段、及び制御手段を備えるので、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果やインタラクテイビティを向上可能である。

[0040] 本発明の作用及び他の利得は次に説明する実施例力明らかにされよう。

図面の簡単な説明

[0041] [図 1]実施例に係る、浮遊画像を表示可能な画像表示装置の基本構成を示す斜視図である。

[図 2]実施例に係る画像表示装置を図 1の A— A力見た矢視図である。

[図 3]画像伝達パネルの構造を模式的に示す断面図である。

[図 4]画像伝達パネルの構造と像の向きを模式的に示す断面図である（2枚)。

[図 5]画像伝達パネルの構造と像の向きを模式的に示す断面図である（a： 1枚、 b： 3 枚)。

[図 6]第 1実施例に係る画像表示装置の基本構成を概念的に示すブロック図である。

[図 7]第 1実施例に係る、画像表示装置の基本動作を示すフローチャートである。

[図 8]第 1実施例に係る、画像表示装置の基本動作を説明するための模式図である（玩具の鉄砲 120が、 a：な、ときの様子 Zb：あるときの様子)。

[図 9]第 2実施例に係る画像表示装置の基本構成を概念的に示すブロック図である。

[図 10]第 2実施例に係る、画像表示装置の基本動作を示すフローチャートである。

[図 11]第 2実施例に係る、画像表示装置において、玩具の玉が結像面を通過する前後の様子を説明するための斜視図である（a :通過する前の様子、 b :比較例において

、通過した後の様子、 c :第 2実施例において、通過した後の様子)。

[図 12]第 2実施例に係る、画像表示装置において、玩具の玉が結像面を通過する前後の様子を説明するための側面図である（a :通過する前の様子、 b :比較例において

[図 13]第 2実施例に係る画像表示装置において、浮遊画像にフォークを刺す様子を示す模式図である (a：斜視図、 b：浮遊画像の変化を示す正面図)。

[図 14]第 2実施例に係る画像表示装置において、浮遊画像をナイフで切る様子を示す模式図である (a：斜視図、 b：浮遊画像の変化を示す正面図)。

[図 15]第 2実施例に係る画像表示装置において、浮遊画像をナイフで切る場合に、ナイフの動きを予測して浮遊画像の先読みする様子を示す模式図である（a：経路 PO

— P 1に沿って切る場合、 b：経路 QO - Q 1に沿つて切る場合)。

[図 16]第 3実施例に係る画像表示装置の基本構成を概念的に示すブロック図である

[図 17]第 3実施例に係る、画像表示装置の基本動作を示すフローチャートである。符号の説明

1 画像表示装置

11 表示部

111 画像表示面

13 浮遊画像

15 空間

17 画像伝達パネル

21 結像面

23 マイクロ凸レンズ

231 - 232 マイクロ凸レンズ

24 透明基板

25 マイクロレンズアレイ

251 - 252 レンズアレイ半体

112 ディスプレイ駆動部

17 画像伝達パネル

60 属性検出部

100 制御装置

101 制御部

102 画像生成部

103 記憶部

120 玩具の鉄砲

121 玩具の玉

122 フォーク 124 口紅

125 ドライヤー

126 刷毛

50〜56 ICタグ

31 オーディオ出力部

32 オーディオ駆動部

61 位置検出部

62 状態検出部

55 書換部

発明を実施するための最良の形態

[0043] 以下、本発明を実施するための最良の形態について実施例毎に順に図面に基づいて説明する。

[0044] (基本原理）

先ず、実施例に係る画像表示装置の説明に先立ち、浮遊画像を表示可能な画像表示装置の基本構成について、図 1及び図 2を参照して説明する。ここに、図 1は、実施例に係る、浮遊画像を表示可能な画像表示装置の基本構成を示す斜視図である。図 2は、実施例に係る画像表示装置を図 1の A— Aから見た矢視図である。

[0045] 図 1に示すように、本実施例に係る画像表示装置 1は、画像表示面 111を有する表示部 11及び画像伝達パネル 17を備えており、表示部 11とは反対側の空間 15の結像面 21に浮遊画像 13を表示する。尚、本実施例では、表示部 11が、本発明に係る「表示手段」の一例に相当しており、画像伝達パネル 17が、本発明に係る「画像伝達手段」の一例に相当して、る。

[0046] 表示部 11は、例えばカラー液晶表示装置（Liquid Crystal Display: LCD)であり、カラー液晶駆動回路 (不図示)、及びバックライト照明部 (不図示)等を備え、二次元画像を画像表示面 111に表示する。カラー液晶駆動回路は、外部から入力される映像信号に基づいて、表示駆動信号を出力する。バックライト照明部は、表示部 11が自発光式ではない場合に、画像表示面 111を背後から照らす。画像表示面 111は、出力される表示駆動信号に基づいて、例えば液晶分子の向きを変えて光の透過率を増減させることで、二次元画像を表示する。尚、表示される二次元画像は、最終的に浮遊画像として表示されるので、奥行き感を持つように立体的に描写される方が好ましい。表示部 11としては、カラー液晶表示装置 (LCD)に代えて、陰極線管、ブラズマディスプレイ、或いは有機エレクト口ルミネッセンスディスプレイなどの各種表示装置を用いてもよい。

[0047] 画像伝達パネル 17は、図 2に示すように、例えばマイクロレンズアレイ（詳細は図 3 を参照して後述する）によって構成され、表示部 11に対して離間配置される。そして、画像伝達パネル 17は、表示部 11の画像表示面 111から出射される光 (即ち、二次元画像を構成する表示光）を空間 15の結像面 21で結像させることによって、浮遊画像 13を表示させる。ここで、結像面 21は、マイクロレンズアレイの作動距離に応じて空間上に仮想的に設定される平面であって実体物ではない。図 1に戻り、この結像面 21に結像された浮遊画像 13は、空間 15に浮いて表示されるので、観察者からは、あた力も立体画像が映し出されているように見える。つまり、浮遊画像 13は、擬似的な立体画像として観察者に認識される。この傾向を強化するには、表示部 11に表示される二次元画像に予め奥行き感を持たせる、或ヽは画像表示面 111上で背景画像が黒くコントラストが強調されて、るようにするとよ、。

[0048] 以上、図 1及び図 2に示すように画像表示装置 1は構成されているので、結像面 21 に浮遊画像 13を、あた力も立体画像が映し出されているように表示することが可能となる。

[0049] 続いて、図 3から図 5を参照して、画像伝達パネル 17の詳細な構成について説明をカロえる。ここに図 3は、画像伝達パネルの構造を模式的に示す断面図である。図 4 は、画像伝達パネルの構造と像の向きを模式的に示す断面図である（2枚)。図 5は、画像伝達パネルの構造と像の向きを模式的に示す断面図である（a： 1枚、 b： 3枚)。

[0050] 図 3に示すように、画像伝達パネル 17は、マイクロレンズアレイ 25によって構成される。

[0051] マイクロレンズアレイ 25は、例えば、レンズアレイ半体 251 · 252の二枚を一体化させて構成されている。 [0052] レンズアレイ半体 251 · 252は夫々、光透過性に優れたガラス又は榭脂からなる透明基板 24の両面に、二次元のマトリックス状に配列された複数のマイクロ凸レンズ 23 を有する。ここで、透明基板 24の一方の面に配列されたマイクロ凸レンズ 231の光軸 1S 他方の面の対向する位置にあるマイクロ凸レンズ 232の光軸と夫々一致するように、各マイクロ凸レンズは配置されている。加えて、レンズアレイ半体 251と 252との間で隣り合うマイクロ凸レンズ 232.231同士の光軸も一致するように、各レンズアレイ半体は重ね合わされて、る。

[0053] そして、画像伝達パネル 17は、表示部 11の画像表示面 111に対して所定の離間距離 (マイクロレンズアレイ 25の作動距離)だけ離れた位置に対向配置されて!ヽる。

[0054] 従って、画像伝達パネル 17は、表示部 11の画像表示面 111から出射される二次元画像の表示光を、表示部 11とは反対側の空間 15に伝達して、画像伝達パネル 1 7から所定距離だけ離れた結像面 21に結像させる。その結果、画像伝達パネル 17 は、表示部 11によって表示される二次元画像を、浮遊画像 13として表示できる。

[0055] ここで、図 4に示すように、表示部 11によって表示される二次元画像がレンズアレイ半体 251で一回上下反転させられ、レンズアレイ半体 252で再度上下反転させてから出射させる。これにより、画像伝達パネル 17は、二次元画像の正立像を浮遊画像 1 3として表示できる。

[0056] 尚、このように、浮遊画像 13として正立像が得られるのであれば、マイクロレンズァレイ 25の構成は、レンズアレイ半体 251 · 252を二枚一組で一体化するものに限られない。例えば、図 5 (a)に示すように 1枚で構成してもよいし、或いは図 5 (b)に示すように二枚以上の複数枚で構成してもよ!/、。

[0057] 以上、図 3から図 5に示すように画像伝達パネル 17が構成されていれば、画像表示装置 1は、浮遊画像 13を例えば正立像として好適に表示可能となる。

[0058] (1)第 1実施例

続いて、上述した基本原理に基づいて浮遊画像を表示可能な、第 1実施例に係る画像表示装置の構成及び動作処理につ!、て、図 6から図 8を参照して説明する。

[0059] (1 1)構成

先ず、本実施例に係る画像表示装置の構成について、図 6を参照して説明する。ここに、図 6は、第 1実施例に係る画像表示装置の基本構成を概念的に示すブロック図である。

[0060] 図 6に示すように、本実施例に係る画像表示装置 1は、表示部 11と、画像伝達パネル 17と、オーディオ出力部 31と、オーディオ駆動部 32と、属性検出部 60と、制御装置 100とを備える。尚、本実施例では、属性検出部 60が、本発明に係る「属性特定手段」の一例に相当しており、制御装置 100が、本発明に係る「制御手段」の一例に相当している。

[0061] 表示部 11は、例えばカラー液晶表示装置であり、画像表示面 111と、ディスプレイ駆動部 112とを備える。ディスプレイ駆動部 112は、制御装置 100から入力される映像信号に基づいて、表示駆動信号を出力し、画像表示面 111に動画 ·或いは静止画の 2次元画像を表示する。

[0062] 画像伝達パネル 17は、図 1から図 4を用いて上述したように、表示部 11の画面に表示された 2次元画像を構成する表示光の光路に配置され、この 2次元画像の実像（即ち、浮遊画像)を表示部 11の画面と反対側の空間に位置する結像面 21に表示するように表示部 11の表示光を伝達させる。このようにして、 3Dフローティングビジョン方式による 3D画像表示或いは立体画像表示が行われる。例えば、画像伝達パネル 17を介して表示部 11の画面の正面に位置する観察者から見て、画像伝達パネル 1 7の手前側の結像面 21に、実像が浮かんで見える。

[0063] オーディオ出力部 31は、例えばスピーカであり、オーディオ駆動部 32から入力される音楽信号を、機械振動に変えて可聴音を生成する。

[0064] 属性検出部 60は、画像認識装置、或いは ICタグのリーダ等であり、その検出可能範囲（例えば、数 cmから数十 cm)内に存在する、被検出物の属性を検出する。ここでいう被検出物は、例えば玩具の鉄砲 120、フォーク 122、ナイフ 123、口紅 124、ドライヤ一 125、或いは刷毛 126であり、固有の属性 (例えば、形状、機能、観念等)を持つ道具的なものが好ましい。属性検出部 60は、これら被検出物に固有の属性を各種方法により検出する。例えば、属性検出部 60が CCDカメラのような撮像素子を備える場合には、撮像された被検出物の画像を、予め画像データベースに属性と共に蓄積されている道具等の画像と照合することで、属性を検出してもよい。特に、このような属性は、予め検出され得る候補数を限定しておくことで、検出が容易となる。或いは、属性検出部 60が ICタグリーダである場合には、図 6に示すように、被検出物の各々に、固有の属性識別用 ICタグ 50〜56を付着して、この ICタグを読み取ることで、属性を検出してもよい。ここで、「ICタグ」とは、例えば数ミクロン力も数ミリ四方の小型情報チップの総称であり、本発明に係る「タグ手段」の一例に相当している。この ICタグの回路では、 ICタグリーダ力も発射される電波によって微量な電力が発生し、その電力で情報を処理し、リーダに送信する。大抵の場合、使用できる電波出力の関係などから、 ICタグと ICタグリーダを近づける必要はある力必ずしも接触する必要はない。

[0065] 制御装置 100は、制御部 101と、画像生成部 102と、記憶部 103とを備える。尚、本実施例では、記憶部 103が、本発明に係る「記憶手段」の一例に相当しており、制御装置 100が、本発明に係る「予測手段」の一例に相当している。

[0066] 制御部 101は、例えば周知の中央処理装置（Central Processing Unit : CPU)、制御プログラムを格納した読み出し専用メモリ（R_ead Only Memory: ROM)、各種データを格納する随時書き込み読み出しメモリ（Random Access Memory: RAM)等を中心とした論理演算回路を備えている。画像生成部 102は、表示用画像等のデータを生成する。記憶部 103は、属性検出部 60に検出される被検出物の属性、その属性に対応して表示する画像'音声、或いは移動する被検出物に係る位置の履歴等を記憶する。制御装置 100には、属性検出部 60に検出される被検出物の属性力不図示のバスを介して電気信号として入力される。他方で、ディスプレイ駆動部 112へと映像信号を出力し、或いはオーディオ駆動部 32へと音声信号を出力する。

[0067] (1 2)動作

次に、以上のように構成された本実施例に係る画像表示装置の基本動作について、図 6に加えて、図 7及び図 8を参照して説明する。ここに、図 7は、第 1実施例に係る、画像表示装置の基本動作を示すフローチャートである。図 8は、第 1実施例に係る、画像表示装置の基本動作を説明するための模式図である（玩具の鉄砲 120が、 a : な!、ときの様子 Zb：あるときの様子)。

[0068] 図 7において先ず、制御装置 100は、画像生成部 102によって、 2次元画像 (元画像)を生成する (ステップ S101)。この元画像は、例えば図 8 (a)に示すように、的を持った人形の画像とする。

[0069] 続いて、属性検出部 60によって被検出物の属性が検出される力否力が、判定される（ステップ S 102)。

[0070] ここで、被検出物の属性が何も検出されない場合 (ステップ S102 :NO)、例えば属性検出部 60の検出可能範囲内に被検出物が存在しない場合、元画像を特に変化させる必要はない。従って、元画像の人形は、例えば図 8 (a)に示すように、平常の顔、若しくは笑顔に見えるように表示される。

[0071] 他方で、被検出物の属性が検出される場合 (ステップ S102 : YES)、検出される属性に応じて次のような処理がなされる。尚、被検出物の属性が検出される場合とは、例えば属性検出部 60の検出可能範囲内で、ユーザが被検出物の一例である玩具の鉄砲 120を構えているときに、玩具の鉄砲 120の属性が書き込まれた ICタグ 50が属性検出部 60によって読み取られ、その属性が検出されるような場合である。

[0072] 先ず、画像生成部 102によって、検出される属性に対応するマスク画像が生成される (ステップ S 103)。検出される属性に対応するマスク画像が如何なるものかという対応付けは、記憶部 103に予め記憶されている。例えば図 8 (b)に示すように、玩具の鉄砲 120は、発砲する道具であるため、「怖がる」様子を描いたマスク画像が対応付けられて記憶されている。その他の被検出物に対応付けられるマスク画像の例としては以下のようなものが想定される。即ち、フォーク 122は、食べ物を刺す'卷く道具であるため、「お腹がすヽてヽる」様子を描ヽたマスク画像が対応付けられて記憶されている。ナイフ 123は、食べ物を切る道具であるため、「お腹がすいている」様子を描いたマスク画像が対応付けられて記憶されている。口紅 124は、口紅を塗る道具であるため、「喜ぶ」様子を描いたマスク画像が対応付けられて記憶されている。ドライヤ一 125は、温風を噴きつける道具であるため、「熱がる」様子を描いたマスク画像が対応付けられて記憶されている。刷毛 126は、各色のペンキを塗る道具であるため、「わくわくする」様子を描いたマスク画像が対応付けられて記憶されている。

[0073] そして、元画像とマスク画像とが合成される (ステップ S 104)。合成される 2次元画像力表示部 11によって表示されるように、制御部 101がディスプレイ駆動部 112に映像信号を送る。この映像信号を受けて、表示部 11は合成後の 2次元画像を表示する (ステップ S 105)。そして、表示された 2次元画像を構成する表示光が自身の光路に配置された画像伝達パネル 17によって伝達され、画像伝達パネル 17を介して結像面 21に、実像として表示される (ステップ S106)。

[0074] 以上、本実施形態によれば、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果、及びインタラクテイビティを向上可能である。特に、被検出物の属性を検出できるので、一律ではなぐその属性に応じて変化に富んだリアクションを実現可能となるので、立体的な画像としての演出効果は絶大なものとなる。

[0075] (2)第 2実施例

本実施例に係る画像表示装置を図 9から図 15を参照して説明する。

[0076] (2— 1)構成

先ず、本実施例に係る画像表示装置の基本構成について、図 9を参照して説明する。ここに、図 9は、第 2実施例に係る画像表示装置の基本構成を概念的に示すプロック図である。

尚、図 9において、上述の第 1実施例（即ち、図 6)と同様の構成については同一の参照符号を付し、その詳細な説明を適宜省略する。

[0077] 図 9において、本実施例に係る画像表示装置 1は、前述の第 1実施例に係る画像表示装置 1の構成に加えて、被検出物の位置を検出する位置検出部 61を更に備える。尚、本実施例では、位置検出部 61が、本発明に係る「位置検出手段」の一例に相当している。

[0078] 位置検出部 61は、例えば玩具の鉄砲 120から発砲され、かつ、属性が書き込まれた ICタグ 51を内蔵する玩具の玉 121が結像面 21に交わる場合、交わった平面領域を検出し、該検出結果を制御装置 100に伝達することが可能に構成されている。位置検出部 61は、例えば非接触型の各種センサやカメラ型のセンサなどである。尚、位置検出部 61によって検出される平面領域は、必ずしも結像面 21と一致する必要はなぐ結像面 21よりも手前、又は奥であってもよい。

[0079] 或いは、位置検出部 61は、平面領域に加えて又は代えて、検出可能範囲内における玩具の玉 121の空間位置を検出し、該検出結果を制御装置 100に伝達することが可能に構成されている。この場合、位置検出部 61は、例えば XYZセンサ、結像面 21を正面力捉えられるように配置された CCDイメージセンサ、赤外線センサ或は超音波センサ等の各種センサの他、所定間隔を隔てて重ねて配列された平面領域を検出するセンサによって代用されてもよい。或いは、一つの位置検出部 61からの検出結果を、制御装置 100内に内蔵された又は外付けされたメモリ内に、経時的に蓄積し、結像面 21を通過した玩具の玉 121を平面領域の集合として検出してもよ!/、

[0080] 尚、上述の如き平面位置の検出や空間位置の検出は、静的であっても動的であつてもよく、その用途に応じた態様を採ることが可能である。即ち、予めメモリに登録された被検出物の形状及び位置情報により検出されてもよ!、し、或いは例えば XYZセンサ等の各種センサにより、リアルタイム的に検出されてもよ、趣旨である。

[0081] (2— 2)動作

次に、以上のように構成された本実施例に係る動作について、図 9に加えて、図 10 を参照して説明する。ここに、図 10は、第 2実施例に係る、画像表示装置の基本動作を示すフローチャートである。

[0082] 図 10において先ず、制御装置 100は、画像生成部 102によって、 2次元画像 (元画像)を生成する (ステップ S101)。この元画像は、例えば図 8 (a)に示すように、的を持った人形の画像とする。

[0083] 続いて、属性検出部 60によって被検出物の属性が検出される力否力が、判定される (ステップ S102)。ここで、被検出物の属性が検出される場合 (ステップ S102 :YE S)、更に、位置検出部 61によって、被検出物の位置が検出される力否かが、判定される（ステップ S 211)。

[0084] ここで、被検出物の位置が検出される場合には (ステップ S211 : YES)、検出される位置、及び属性に応じて次のような処理がなされる。尚、被検出物の位置、及び属性が検出される場合とは、例えば、属性が書き込まれた ICタグ 51を内蔵する玩具の玉 121を、ユーザが玩具の鉄砲 120で結像面 21に向けて発砲し、その結果、玩具の玉 121が属性検出部 60、及び位置検出部 61の検出可能範囲内に到達するような場合である。 [0085] 先ず、画像生成部 102によって、検出される玩具の玉 121の位置、及び属性に対応するマスク画像が生成される (ステップ S203)。そして、第 1実施例と同様に、ステップ S 104、ステップ S 105、及びステップ S 106の処理が行われ、検出される玩具の玉 121の位置、及び属性に対応して、浮遊画像が好適に変化する。この様子を、図 11、及び図 12を参照して説明する。ここに、図 11は、第 2実施例に係る、画像表示装置において、玩具の玉が結像面を通過する前後の様子を説明するための斜視図である（a :通過する前の様子、 b :比較例において、通過した後の様子、 c :第 2実施例において、通過した後の様子)。図 12は、第 2実施例に係る、画像表示装置において、玩具の玉が結像面を通過する前後の様子を説明するための側面図である（a : 通過する前の様子、 b :比較例において、通過した後の様子、 c :第 2実施例において、通過した後の様子)。

[0086] 図 11 (a)、及びその側面図である図 12 (a)に示すように、玩具の鉄砲 120から玩具の玉 121が発砲されるとする。このとき、玩具の玉 121が、結像面 21に表示されている的の浮遊画像を貫通する。ここで、何ら対策がなされなければ、例えば図 11 (b)、及びその側面図である図 12 (b)に見られるような違和感が生じてしまう。即ち、玩具の玉 121が的の浮遊画像を貫通したにもかかわらず、的の浮遊画像に何ら変化がないために違和感を感じる。或いは、インタラクテイビティを感じない。

[0087] そこで、本実施例ではこの違和感を払拭するために、玩具の玉 121の属性に基づいて、「弾痕」のようなマスク画像作成し、玩具の玉 121の位置に基づいて、結像面 2 1における「弾痕」の配置を決定する。その結果、図 11 (c)、及びその側面図である図 12 (c)に示すように、ユーザが、結像面 21に表示されている的の浮遊画像をめがけて玩具の鉄砲 120を発砲すると、玩具の玉 121が、結像面 21を貫通するのと同時に又は相前後して、的の浮遊画像に「弾痕」が残る。もちろん、玩具の玉 121が、結像面 21を貫通した位置が的の浮遊画像力外れて、れば、的の浮遊画像は特に変化せず「弾痕」は残らない。このように、ユーザの操作に対して、浮遊画像がしっかりと変化するうえに、その変化が使用する道具、即ち被検出物によって異なるので、ィンタラクテイビティに加えて、リアリティも格段に増すのである。

[0088] 尚、図 10において、被検出物の属性が何も検出されない場合 (ステップ S102 : NO )、又は被検出物の位置が何も検出されない場合 (ステップ S211 : NO)、元画像を特に変化させる必要はない。或いは、被検出物の位置、及び属性のうち何れか一方でも検出されれば、その検出結果に応じて、浮遊画像を変化させてもよい。

[0089] (2— 3)その他の例

次に、被検出物として、玩具の玉 121以外のものが用いられる場合に、浮遊画像を如何に変化させるかについて、図 13から図 15を参照して説明する。

[0090] 先ず、被検出物として、フォーク 122が用いられる場合に、浮遊画像を如何に変化させるかについて、図 13を参照して説明する。ここに、図 13は、第 2実施例に係る画像表示装置において、浮遊画像にフォークを刺す様子を示す模式図である（a:斜視図、 b :浮遊画像の変化を示す正面図）。尚、図 13 (b)に記すステップ番号は、図 10 のフローチャートに記すステップ番号に対応する。

[0091] 図 13 (a)において、結像面 21にリンゴの浮遊画像が表示されており、そのリンゴの浮遊画像をユーザがフォーク 122で刺して!/、る様子が描かれて!/、る。このときの一連の浮遊画像の変化の様子を図 13 (b)に示す。先ず、図 13 (b)のステップ S101に示すように、リンゴの浮遊画像は当初、何ら刺し口のない状態で表示される。次に、そのリンゴの浮遊画像をユーザがフォーク 122で刺すと、結像面 21とフォーク 122とが交わる平面領域力位置検出部 61によって検出され、図 13 (b)のステップ S203に示すような、交わる位置に対応した位置にマスク画像が生成される。尚、ここでのマスク画像は、上述の「弾痕」（図 11参照）とは異なり、 ICタグ 52から読み取ったフォーク 12 2の属性に基づく比較的破損程度の低い刺し口である。最後に、このように生成されるマスク画像と、元画像とを合成すると、図 13 (b)のステップ S104に示すように、リンゴにフォーク 122が刺さったような浮遊画像が得られる。好ましくは、図 13のステップ S203に示すように交わる平面領域より所定マージン分だけ一回り大きいマスクが生成されるとよい。このように、マージンを多少なりとも持たせることで、観察者の両眼間で視角に相異が多少あり且つ結像に対して大なり小なり真正面力も外れた位置で観察する場合にも対応することが可能となる。尚、フォーク 122の属性に対応付けられているマスク画像は、一つとは限らない。複数のマスク画像力フォーク 122の位置や位置の変化 (つまり、動き）によって、選択されてもよい。例えば、浮遊画像がスパゲティとして、フォーク 122の位置が奥行き方向にのみ変化する場合には、スパゲティが「刺されている」状態のマスク画像が選択される。他方で、フォーク 122が結像面 21と交わったまま回転する場合には、スパゲティが「回される、或いは巻きつけられている」状態のマスク画像が選択されると、一段とバラエティに富んだ表現が可能となる

[0092] 次に、被検出物として、ナイフ 123が用いられる場合に、浮遊画像を如何に変化させるかについて、図 14を参照して説明する。ここに、図 14は、第 2実施例に係る画像表示装置において、浮遊画像をナイフで切る様子を示す模式図である（a:斜視図、 b ：浮遊画像の変化を示す正面図)。

[0093] 図 14 (a)において、結像面 21にリンゴの浮遊画像が表示されており、そのリンゴの浮遊画像をユーザがナイフ 123で切っている様子が描かれている。このときの一連の浮遊画像の変化の様子を図 14 (b)に示す。先ず、図 14 (b)の時刻 t=0に示すように、リンゴの浮遊画像は当初、何ら切り口のない状態で表示さる。その後、そのリンゴの浮遊画像をユーザがナイフ 123で切ると共に時間が経過すると、ナイフ 123の描く軌跡に対応した位置にマスク画像が生成され、図 14 (b)の時刻 t=Tl、及び t=T2に示すようなリンゴの浮遊画像が得られる。尚、ここでのマスク画像は、上述の「弾痕」 ( 図 11参照）とは異なり、 ICタグ 53から読み取ったナイフ 123の属性に基づく比較的鋭い切り口である。この切り口には、リンゴの中身が見えるようにすると、リアリティがー層増す。尚、このようにナイフ 123が移動する際には、生成されるマスクも該移動に追随するようにリアルタイム的な処理が施されてもよいし、或いは、結像面 21と交わる平面領域、若しくは空間領域の集合を軌跡として記憶部 103に記憶しておき、該軌跡に対応するマスクを作成してもよ、。

[0094] このように、ナイフ 123が移動する際には、生成されるマスクは、ただ単にナイフ 12 3の現在地に追随するのみならず、図 15 (a)及び図 15 (b)に示すように、移動先を予測して、予めマスク画像を先読みする等の準備をするようにしてもよい。ここに、図 15は、第 2実施例に係る画像表示装置において、浮遊画像をナイフで切る場合に、ナイフの動きを予測して浮遊画像の先読みする様子を示す模式図である（a：経路 PO — P 1に沿って切る場合、 b：経路 QO - Q 1に沿つて切る場合)。 [0095] 図 15 (a)に示すように、ナイフ 123が時刻 t=0から T1の間に、経路 PO— P1に沿つて画面真下方向に移動する場合には、その後の時刻 t=T2では、そのまま真下の点 P2の方向に移動すると予測される。或いは、図 15 (b)に示すように、ナイフ 123が時刻 t = 0から T1の間に、経路 QO -Q1に沿って画面右下方向にカーブして移動する場合には、その後の時刻 t=T2では、真下ではなぐカーブの延長線上にある点 Q2 の方向に移動すると予測される。このような予測は、ナイフ 123が移動する際に、例えば数百ミリ秒毎にその軌跡を記録しておき、速度ベクトルを特定することで可能である。このように予測して、マスク画像を生成しておけば、応答遅れが解消され、ユーザの違和感を軽減でき、インタラクテイビティが一段と向上する。

[0096] 尚、上述の実施例において、例えば、フォークとナイフを持ち替えて、それぞれの属性によって次々に切り替わる変化を楽しんだり、または、フォークとナイフを同時に持って、フォークで刺しながらナイフで切ると!、うような新たな変化を楽しむこともできる。

[0097] さらに、本実施例における、別の例をいくつか挙げる。例えば、女性の顔の浮遊画像に対して、口紅 124の属性を持つ被検出物の場合、口紅 124を女性の口元に近づけ動かすと唇に口紅を塗られたような浮遊画像に変化したり、女性の顔も喜んだ表情に変化したりする。口紅 124を頰に近づけ動かすと、女性の顔が嫌がった表情に変化したり、顔を背けたりしてもよい。さらにファンデーションやアイシャドーなどの属性を持つ被検出物と併用して、化粧を楽しんでもよい。また、例えば刷毛 126の属性をもつ被検出物の場合、結像面に近づけ動かすと、ペンキのような太くて周辺がかすれたような線を描くことができる。万年筆の属性であれば、細くてシャープな線が描け、青いペンの属性であれば青い色の線、赤いペンの属性であれば赤い色の線が描けたりしてもよい。

[0098] 以上、本実施形態によれば、比較的簡易に立体的な二次元画像を表示すると共に、その演出効果、及びインタラクテイビティを向上可能である。特に、被検出物の属性に加えて位置も検出できるので、一律ではなぐその属性、及び位置に応じて変化に富んだリアクションを実現可能となるので、立体的な画像としての演出効果は絶大なものとなる。 [0099] (3)第 3実施例

続いて、第 3実施例に係る画像表示装置の構成及び動作処理について、図 16及び図 17を参照して説明する。

[0100] (3— 1)構成

先ず、本実施例に係る画像表示装置の構成について、図 16を参照して説明する。ここに、図 16は、第 3実施例に係る画像表示装置の基本構成を概念的に示すブロック図である。

尚、図 16において、上述の第 1実施例（即ち、図 6)と同様の構成については同一の参照符号を付し、その詳細な説明を適宜省略する。

[0101] 図 16において、本実施例に係る画像表示装置 1は、上述の第 1実施例に係る画像表示装置 1の構成に加えて、状態検出部 62と、書換部 55とを更に備える。尚、本実施例では、状態検出部 62が、本発明に係る「状態検出手段」の一例に相当しており、書換部 55が、本発明に係る「書換手段」の一例に相当している。

[0102] 状態検出部 62は、例えば属性検出部 60と同様の ICタグのリーダであり、被検出物の状態を、その状態が書き込まれている ICタグ 50を無線又は有線経由で読み取ることで、検出する。尚、ここでいう「被検出物の状態」とは、被検出物についての何らかの状態を定性的に、或いは定量的に示すものであり、例えばスィッチのオン'オフのような非連続な 2段階の状態、或いはボリュームの低中高のような連続な多段階の状態等を示す。

[0103] 書換部 55は、例えば ICタグのライタであり、例えば ICタグの回路を動的に組み替えることで、 ICタグ 50に記録されて、る情報を書き換え可能である。

[0104] 尚、上述した状態の検出は、必ずしも ICタグを介する必要はな、。例えば、状態検出部 62と書換部 55とが所定周波数帯の電磁波を利用した無線通信、或いは有線通信による送受信が可能であれば、状態検出部 62は被検出物の状態を検出できる。

[0105] (3— 2)動作

次に、以上のように構成された本実施例に係る動作について、図 16に加えて、図 1 7を参照して説明する。ここに、図 17は、第 3実施例に係る、画像表示装置の基本動作を示すフローチャートである。 [0106] 図 17において先ず、制御装置 100は、画像生成部 102によって、 2次元画像 (元画像)を生成する (ステップ S101)。この元画像は、例えば図 8 (a)に示すように、的を持った人形の画像とする。

[0107] 続いて、属性検出部 60によって被検出物の属性が検出される力否力が、判定される (ステップ S102)。ここで、被検出物の属性が検出される場合 (ステップ S102 :YE S)、更に、状態検出部 62によって、被検出物の状態が検出される力否かが、判定される（ステップ S311)。

[0108] ここで、被検出物の状態が検出される場合には (ステップ S311 : YES)、検出される状態、及び属性に応じて次のような処理がなされる。尚、被検出物の状態、及び属性が検出される場合とは、例えば、被検出物の属性が書き込まれた ICタグ 50を内蔵する玩具の鉄砲 120で、ユーザが、属性検出部 60、及び状態検出部 62の検出可能範囲内から、結像面 21に向けて発砲し、発砲に伴い、書換部 55が、被検出物の状態が書き込まれた ICタグ 50の状態を"発射スィッチ 'オフ"から"発射スィッチ 'オン"へと書き換えるような場合である。或いは、発砲に伴い、書換部 55が、 "発射スィッチ 'ォン"の旨を状態検出部 62へと電磁気的に送信するような場合である。

[0109] 先ず、属性検出部 60、及び状態検出部 62によって、検出される玩具の鉄砲 120の状態、及び属性に対応するマスク画像が生成される (ステップ S303)。そして、第 1実施例と同様に、ステップ S104、ステップ S105、及びステップ S106の処理が行われ、検出される玩具の鉄砲 120の状態、及び属性に対応して、浮遊画像が好適に変化する。その結果、ユーザが、結像面 21に表示されている的の浮遊画像をめがけて玩具の鉄砲 120を発砲し、 "発射スィッチ ·オン"と、う状態になると同時に又は相前後して、的の浮遊画像に「弾痕」が残る。

[0110] 尚、ステップ S105において、合成後の 2次元画像を表示するタイミングは、被検出物の状態が切り替わって力所定間隔後でもよい。この所定間隔後は、例えば、上述の例の場合、発射時の玩具の鉄砲 120の位置などから求まる。

[0111] 更に、元画像に対するマスク画像 (例えば、弾痕の位置は、発射時の玩具の鉄砲 1 20の位置に加えて、発射角度を考慮して定めてもよい。この際、発射角度は、玩具の鉄砲 120の複数箇所に (好ましくは、発射方向に沿った直線上に)複数の ICタグを付着させておき、夫々の ICタグの位置を検出することで、発射角度を求めてもよい。或いは、撮像素子によって、直接的に発射角度を認識してもよい。さら〖こは、玩具の鉄砲 120に、 6軸（例えば、 XYZ方向の加速度、前後の傾き、左右の傾き、左右の振れ)センサを付加することによって、玩具の鉄砲 120の向き、傾きや動きなどを検出することで発射角度や発射方向を求めてもよい。

[0112] 尚、図 17において、被検出物の属性が何も検出されない場合 (ステップ S102 :NO )、又は被検出物の状態が何も検出されない場合 (ステップ S311 :NO)、元画像を特に変化させる必要はない。或いは、被検出物の状態、及び属性のうち何れか一方でも検出されれば、その検出結果に応じて、浮遊画像を変化させてもよい。

[0113] さらに、本実施例における、別の例をいくつか挙げる。例えば、女性の顔の浮遊画像に対して、ドライヤー 125の属性を持つ被検出物の場合、ドライヤー 125の状態がスィッチがオフのときは、特に浮遊画像に変化はない。ドライヤー 125の状態がスイツチがオンに切り替わると、髪がなびく女性の顔の浮遊画像に変化する。さらに、ドライヤー 125の状態の一つである風量の強弱スィッチを切り替えると、髪のなびく度合いが変化してもよい。さらには、ドライヤー 125の向きや角度、位置や動きを検出して、髪のなびく位置や様子力部分的に変化していってもよい。また、時間によって、濡れて、た髪が乾!、て!、くような変化をしてもょ、。

[0114] 以上、本実施例によると、ユーザの操作に対して、浮遊画像がしつ力りと変化するうえに、その変化が使用する道具、即ち被検出物によって異なるので、非常にインタラクテイビティに加えて、リアリティも増すのである。この際、厳密な位置を検出せずとも、ユーザの操作に応じて変化可能であり、インタラクテイビティが向上する。

[0115] 尚、上述した実施例において、被検出物の、属性、位置、状態などの検出には、上述した様々な方法、手法、手段を任意に組み合わせてもよい。こうすることによって、画像表示装置の仕様に合わせて、必要な情報を適切に、又は正確に検出することが可能になる。例えば、メモリと 6軸センサを内蔵した被検出物と無線通信によって、属性、位置、状態など全ての情報を一括してやりとりしてもよい。

[0116] 尚、本発明は、上述した実施例に限られるものではなぐ請求の範囲及び明細書全体力も読み取れる発明の要旨、或いは思想に反しない範囲で適宜変更可能であり、そのような変更を伴う画像表示装置もまた、本発明の技術的範囲に含まれるものである。

産業上の利用可能性

本発明に係る画像表示装置は、例えば 3Dフローティングビジョン方式に基づいて二次元画像を立体的に表示する画像表示装置の技術分野に利用可能である。

Claims

請求の範囲

[1] 画面上に画像を表示する表示手段と、

前記画像を構成する表示光の光路に配置され、かつ、前記画像の実像を前記画面とは反対側の空間に位置する結像面に浮遊画像として表示するように、前記画像を構成する前記表示光を伝達する画像伝達手段と、

前記空間を含む実空間部分内に位置する被検出物の属性を特定する属性特定手段と、

前記浮遊画像が、前記特定される前記被検出物の属性に予め対応付けられている形態へと変化するように、前記表示手段を制御する制御手段と

を備えることを特徴とする画像表示装置。

[2] 前記属性特定手段は、前記属性を検出する属性検出手段を有する

ことを特徴とする請求項 1に記載の画像表示装置。

[3] 前記被検出物の位置力前記実空間部分のうち何処であるかを検出する位置検出手段を更に備え、

前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、前記検出される前記被検出物の位置にも予め対応付けられている形態へと変化するように、前記表示手段を制御する

ことを特徴とする請求項 1に記載の画像表示装置。

[4] 前記検出される被検出物の位置が経時的に変化する場合に、該変化する前記被検出物の位置の軌跡を記憶する記憶手段を更に備え、

前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、前記記憶される前記被検出物の位置の軌跡にも予め対応付けられている形態へと変化するように、前記表示手段を制御する

ことを特徴とする請求項 3に記載の画像表示装置。

[5] 前記被検出物の位置が検出される時点よりも後に、前記被検出物の位置が前記実空間部分のうち何処へ変化するかを、前記記憶される前記被検出物の位置の軌跡に基づいて予測する予測手段を更に備え、

前記制御手段は、前記表示手段が、前記特定される属性に加えて、前記予測される前記被検出物の位置にも予め対応付けられている形態に係る前記画像を先読みするように、前記表示手段を制御する

ことを特徴とする請求項 4に記載の画像表示装置。

[6] 前記被検出物の状態を検出する状態検出手段を更に備え、

前記制御手段は、前記浮遊画像が、前記特定される属性に加えて、少なくとも前記検出される前記被検出物の状態にも予め対応付けられている形態へと変化するように、前記表示手段を制御する

ことを特徴とする請求項 1に記載の画像表示装置。

[7] 前記被検出物に付着されており、かつ、前記被検出物の属性を示す属性情報が電磁光学的に読み出し可能に記録されているタグ手段を更に備え、

前記属性検出手段は、前記記録されている属性情報を電磁光学的に読み出すことで、前記属性を検出する

ことを特徴とする請求項 2に記載の画像表示装置。

[8] 前記位置検出手段は、前記被検出物に付着されている前記タグ手段の位置が、前記実空間部分のうち何処であるかを検出することで、前記被検出物の位置を検出する

ことを特徴とする請求項 3に記載の画像表示装置。

[9] 前記タグ手段には、前記属性情報に加えて、前記被検出物の状態を示す状態情報が電磁光学的に読み出し可能に記録されており、

少なくとも前記状態情報を書き換える書換手段を更に備える

ことを特徴とする請求項 7に記載の画像表示装置。

[10] 前記画像伝達手段は、マイクロレンズアレイカゝらなり、

前記浮遊画像は、前記画像の実像として表示される

ことを特徴とする請求項 1に記載の画像表示装置。