JP3811062B2 - 3D image display device - Google Patents
3D image display device Download PDFInfo
- Publication number
- JP3811062B2 JP3811062B2 JP2001400413A JP2001400413A JP3811062B2 JP 3811062 B2 JP3811062 B2 JP 3811062B2 JP 2001400413 A JP2001400413 A JP 2001400413A JP 2001400413 A JP2001400413 A JP 2001400413A JP 3811062 B2 JP3811062 B2 JP 3811062B2
- Authority
- JP
- Japan
- Prior art keywords
- displayed
- image
- display device
- liquid crystal
- crystal display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【0001】
【発明の属する技術分野】
本発明は、立体像表示装置に関する。
【0002】
【従来の技術】
アミューズメント、インターネットショッピング、携帯端末、医療、バーチャルリアリティ、広告看板などで使われる立体表示を可能にする立体像表示方法の1つとして、右目用、左目用の平面画像をディスプレイに表示し、偏向光等を用いて右目用の平面画像は右目に、左目用の平面画像は左目で見えるように工夫したステレオスコープ方式がある。
【0003】
このステレオスコープ方式は、右目用の平面画像を右目に、左目用の平面画像を左目にのみ見せるために、例えば観察者が偏向めがねを用いる必要がある。また、このステレオスコープ方式は、立体的に見えるが実際に立体像を再現しているものではないので、観察者が見る位置を変えても映像は変わらない。すなわち像の側面や上面を覗き込もうとして位置を変えても立体像の側面や上面まで見えてくるというものではないのでリアリティさにかけるという問題がある。
【0004】
また、ステレオスコープ方式は、焦点位置がディスプレイ面にあり、この焦点位置と注視物体のある輻輳位置とには、空間的ずれが生ずるため、いわゆる焦点調節と輻輳距離の不一致が生じ、観察者にとって再現される空間に違和感があり、観察者に疲労を与えやすい問題がある。
【0005】
これらの問題を解決する立体表示方法として、非常に多くの視差画像を用いるインテグラルフォトグラフィ法或いは光線再生法と呼ばれる立体像を何らかの方法で記録しこれを立体像として再生する方法が知られている(特開平10−239785公報、特開2001−56450公報)。ここで、インテグラルフォトグラフィ法及び光線再生法は、立体表示方法としてその用語の意味が正確には確立されていないがほぼ同一の原理に基づく。以下の説明においては、光線再生法を含む概念としてインテグラルフォトグラフィ法と称し、このインテグラルフォトグラフィ法について説明する。
【0006】
図13は、このインテグラルフォトグラフィ法を用いた立体像表示装置である。
【0007】
図13に示すように、液晶ディスプレイ等の表示装置601とニ次元配列されたピンホール607を有するアレイ板602からなる簡単な光学系で自然な三次元像が再生される。
【0008】
表示装置601上には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターン(多視点画像)606が、ピンホール607の一つ一つに対応して表示される。
【0009】
多視点画像606から発せられた光が対応するピンホール607を通り、この光が集光されることによって、ピンホール607を有するアレイ板602の前面に三次元実像604が形成される。
【0010】
すなわち表示装置601上の多視点画像606からピンホール607を通して観察者605に向かう視差画像光線群608を集光することによって三次元実像604が形成される。
【0011】
このようにインテグラルフォトグラフィ法は、簡単な構成で自然な立体像を形成することができる。また、インテグラルフォトグラフィ法は、実際に立体像を再生しているので、偏光めがねも必要がなく観察者の見る角度によって立体像の見える角度が変わるので、よりリアルであるといえる。
【0012】
【発明が解決しようとする課題】
しかしながら、インテグラルフォトグラフィ法にも以下のようないくつかの問題点がある。
【0013】
ピンホール607を有するアレイ板602を使用した場合には簡便である代わりに、ピンホール607が明るく光っているために、観察者605の眼の焦点位置が立体像604ではなくピンホール607に合ってしまうことがある。そのため観察者605には、ピンホール607が目立って立体像604の立体感を損ねるという問題がある。
【0014】
また、インテグラルフォトグラフィ法では、ピンホール602からでてくる視差画像光線群608を用いて立体像604を再現しているので、もともと3次元の立体像を平面に配列した多視点画像606を用いて表示しなければならず、光線数を十分多くとることが困難となる。このことにより立体感を損ねるといった問題や立体像そのものが暗いといった問題が生じている。
【0015】
本発明は、上記問題を解決するために成されたもので、より立体感の増した高品位の立体像を表示できる立体像表示装置を堤供することを目的とする。
【0016】
【課題を解決するための手段】
上記目的を達成刷るために、本発明は、多視点画像を平面的に分割された小領域にそれぞれ表示する第1の表示状態と、第2の表示手段の多視点画像が表示された小領域に対応したピンホールを平面的にそれぞれ表示する第2の表示状態とを切り替え可能な第1の表示手段と、
前記第1の表示手段に対向して配置され、多視点画像を平面的に分割された小領域にそれぞれ表示する第1の表示状態と、前記第1の表示手段の多視点画像が表示された小領域に対応したピンホールを平面的にそれぞれ表示する第2の表示状態とを切り替え可能な第2の表示手段と、
前記第1の表示手段に第1の表示状態を表示すると同時に前記第2の表示手段に第2の表示状態を表示する状態と、前記第1の表示手段に第2の表示状態を表示すると同時に前記第2の表示手段に第1の表示状態を表示する状態とを30Hzから120Hzの周波数で交互に切り替える切り替え手段とを具備することを特徴とする立体像表示装置を提供する。
【0017】
こうすることにより、ピンホールが目立たなくなり、また光線数も時分割多重されるため実効的に増加するために、立体感を効果的に増すことが可能となる。
【0018】
また、前記第1の表示手段に表示されたピンホールと、前記第2の表示手段に表示されたピンホールが、それぞれ正方格子状に互いに相反対応する市松模様状に配置されることにより、より立体感を増すことが可能となる。
【0019】
【発明の実施の形態】
以下図面を参照して、本発明の立体画像表示装置について具体的に説明する。
【0020】
(実施形態1)
図1は、本発明の実施形態1にかかる立体画像表示装置の概略図である。
【0021】
図1(a)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101には多視点画像106が表示され、前側に配置された第2の液晶表示装置102にはピンホール107が表示された状態を示している。
【0022】
第1の液晶表示装置101には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。この多視点画像106から照射された光が、それぞれ対応したピンホール107を通って、多数の視差画像光線群108となり、これらが集光して立体像104が再現される。
【0023】
この例では、第2の液晶表示装置102に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0024】
また、第1の液晶表示装置101に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0025】
図1(b)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101にはピンホール107が表示され、前側に配置された第2の液晶表示装置102には多視点画像106が表示された状態を示している。
【0026】
第2の液晶表示装置102には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。第1の液晶表示装置101に表示されたピンホール107から照射された光が、多視点画像106を投影し、これらが多数の視差画像光線群108となり、これらが集光して立体像104が再現される。
【0027】
この例では、第1の液晶表示装置101に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0028】
また、第2の液晶表示装置102に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0029】
この立体像表示装置では、図1(a)に示す状態と図1(b)に示す状態を観察者105には、認識されない程度の速さで切り替えることに特徴がある。このとき図1(a)及び図1(b)に表示される立体像104は、同じ大きさ形状を再現するように、多視点画像106の大きさ、形状、向きを制御しなければならない。
【0030】
こうすることで、高速にピンホール107が、前後の表示装置を移動することとなり、ピンホール107の奥行き位置が前後に動いて定まらないため、観察者105には、ピンホール107が目立たなくなり立体像104の立体感を増すことができる。
【0031】
また、ピンホール107と多視点画像106との位置関係が前後で変わることによって、視差画像光線群108の進路(角度)が変化する。このため観察者105には、時分割はされているが、実効的に光線数が増加するように観察されるので、立体感はさらに増加する。
【0032】
切り替える速さは、人間が認識する程度を考慮して、30Hzから120Hzの周波数で行うことが立体感を増す観点で好ましい。
【0033】
次に、図2に、本実施例の立体像表示装置の概念図を示す。
【0034】
図2(a)は、図1(a)の状態の、前面の液晶表示装置102にピンホールを表示させた状態を示している。
【0035】
一方図2(b)は、図1(b)の状態の、前面の液晶表示装置102に多視点画像を表示させた状態を示している。
【0036】
前後の液晶表示装置102及び101は、約1cmの間隔となるよう重ねて配置し、図2(a)(b)の状態を切り替える切り替え装置も兼ねる駆動装置203を用いて制御することで、その役割を同期して変えることができる。
【0037】
(実施形態2)
図3は、本発明の実施形態2にかかる立体画像表示装置の概略図である。
【0038】
図3(a)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101にはピンホール107が表示され、前側に配置された第2の液晶表示装置102には多視点画像106が表示された状態を示している。
【0039】
第2の液晶表示装置102には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。第1の液晶表示装置101に表示されたピンホール107から照射された光が、多視点画像106を投影し、これらが多数の視差画像光線群108となり、これらが集光して立体像104が再現される。
【0040】
この例では、第1の液晶表示装置101に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0041】
また、第2の液晶表示装置102に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0042】
図3(b)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101には多視点画像106が表示され、前側に配置された第2の液晶表示装置102にはピンホール107が表示された状態を示している。
【0043】
第1の液晶表示装置101には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。観察者105は、第2の液晶表示装置102に表示されたピンホール107を通して、多視点画像106から照射された視差画像光線群108を観察するわけだが、観察者105には、第1の液晶表示装置101の後方に、虚像の立体像103を観察することになる。
【0044】
この例では、第2の液晶表示装置102に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0045】
また、第1の液晶表示装置101に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0046】
この立体像表示装置では、図3(a)に示す状態と図3(b)に示す状態を観察者105には、認識されない程度の速さで切り替えることに特徴がある。
【0047】
こうすることで、高速にピンホール107が、前後の表示装置を移動することで、ピンホール107の奥行き位置が前後に動いて定まらないため、観察者105には、ピンホール107が目立たなくなり立体像104の立体感を増すことができる。
【0048】
切り替える速さは、人間が認識する程度を考慮して、30Hzから120Hzの周波数で行うことが立体感を増す観点で好ましい。
【0049】
また、この実施形態では、第2の液晶表示装置102の前方に三次元実像の立体像104を再現するのみでなく、第1の液晶装置101の後方に三次元虚像の立体像103を同時に再現することが可能となる。
【0050】
例えば、三次元実像の立体像104として、人体像を再現させ、三次元虚像の立体像103として、風景等の背景を表示させるといった使い方ができる。
【0051】
このとき、再生する三次元像は、装置の奥から手前まで連続的に複数の物体の像を再現することができる。
【0052】
本実施形態に示す立体像表示装置においても、実際に奥行きの広い範囲に渡ってはっきりとした立体像が認識され、また、ピンホール107が目立つこともなく目の焦点調節も容易に行われ自然で良質な立体像が観測された。
【0053】
(実施形態3)
図4は、本発明の実施形態3にかかる立体画像表示装置の概略図である。
【0054】
図4(a)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101にはピンホール107が表示され、前側に配置された第2の液晶表示装置102には多視点画像106が表示された状態を示している。
【0055】
第2の液晶表示装置102には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。第1の液晶表示装置101に表示されたピンホール107から照射された光は、多視点画像106を投影し、視差画像光線群108を形成する。観察者105は、この視差画像光線群108を観察するわけだが、観察者105には、第1の液晶表示装置101の後方に、虚像の立体像103を観察することになる。
【0056】
この例では、第1の液晶表示装置101に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0057】
また、第2の液晶表示装置102に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0058】
図4(b)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101には多視点画像106が表示され、前側に配置された第2の液晶表示装置102にはピンホール107が表示された状態を示している。
【0059】
第1の液晶表示装置101には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。観察者105は、第2の液晶表示装置102に表示されたピンホール107を通して、多視点画像106から照射された視差画像光線群108を観察するわけだが、観察者105には、第1の液晶表示装置101の後方に、虚像の立体像103を観察することになる。
【0060】
この例では、第2の液晶表示装置102に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0061】
また、第1の液晶表示装置101に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0062】
この立体像表示装置では、図4(a)に示す状態と図4(b)に示す様態を観察者105には、認識されない程度の速さで切り替えることに特徴がある。このとき図4(a)及び図4(b)に表示される三次元虚像の立体像103は、同じ大きさ形状を再現するように、多視点画像106の大きさ、形状、向きを制御しなければならない。
【0063】
こうすることで、高速にピンホール107が、前後の表示装置を移動することとなり、ピンホール107の奥行き位置が前後に動いて定まらないため、観察者105には、ピンホール107が目立たなくなり立体像104の立体感を増すことができる。
【0064】
切り替える速さは、人間が認識する程度を考慮して、30Hzから120Hzの周波数で行うことが立体感を増す観点で好ましい。
【0065】
(実施形態4)
図5は、本発明の実施形態4にかかる立体画像表示装置の概略図である。
【0066】
図5(a)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101には多視点画像106が表示され、前側に配置された第2の液晶表示装置102にはピンホール107が表示された状態を示している。
【0067】
第1の液晶表示装置101には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。この多視点画像106から照射された光が、それぞれ対応したピンホール107を通って、多数の視差画像光線群108となり、これらが集光して立体像104が再現される。
【0068】
この例では、第2の液晶表示装置102に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0069】
また、第1の液晶表示装置101に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0070】
図5(b)は、観察者105に対して後ろ側に配置された第1の液晶表示装置101にはピンホール107が表示され、前側に配置された第2の液晶表示装置102には多視点画像106が表示された状態を示している。
【0071】
第2の液晶表示装置102には、見る角度により微妙に見え方の違う視差画像群に相当する多数のパターンである多視点画像106が表示されている。第1の液晶表示装置101に表示されたピンホール107から照射された光は、多視点画像106を投影し、視差画像光線群108を形成する。観察者105は、この視差画像光線群108を観察するわけだが、観察者105には、第1の液晶表示装置101の後方に、虚像の立体像103を観察することになる。
【0072】
この例では、第1の液晶表示装置101に表示されたピンホール107は、正方格子状に配置されその密度は2.0mmピッチである。各ピンホール107の直径は100μmとなるよう表示されている。
【0073】
また、第2の液晶表示装置102に表示された多視点画像106のピッチは、ピンホール107に対応して配置されている。
【0074】
この立体像表示装置では、図5(a)に示す状態と図5(b)に示す状態を観察者105には、認識されない程度の速さで切り替えることに特徴がある。
【0075】
こうすることで、高速にピンホール107が、前後の表示装置を移動することで、ピンホール107の奥行き位置が前後に動いて定まらないため、観察者105には、ピンホール107が目立たなくなり立体像104の立体感を増すことができる。
【0076】
切り替える速さは、人間が認識する程度を考慮して、30Hzから120Hzの周波数で行うことが立体感を増す観点で好ましい。
【0077】
また、この実施形態では、第2の液晶表示装置102の前方に三次元実像の立体像104を再現するのみでなく、第1の液晶装置101の後方に三次元虚像の立体像103を同時に再現することが可能となる。
【0078】
例えば、三次元実像の立体像104として、人体像を再現させ、三次元虚像の立体像103として、風景等の背景を表示させるといった使い方ができる。
【0079】
このとき、再生する三次元像は、装置の奥から手前まで連続的に複数の物体の像を再現することができる。
【0080】
本実施形態に示す立体像表示装置においても、実際に奥行きの広い範囲に渡ってはっきりとした立体像が認識され、また、ピンホール107が目立つこともなく目の焦点調節も容易に行われ自然で良質な立体像が観測された。
【0081】
次に、図6を用いて実施形態1における第1の液晶表示装置101及び第2の液晶表示装置102に表示する多視点画像とピンホールを示す。
【0082】
図6(a)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、上下左右ひっくり返った倒立したパターンが表示されている。
【0083】
図6(b)は、前面に配置された第2の液晶表示装置に多視点画像を表示し、後面に配置された第1の液晶表示装置にピンホールを表示したものである。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0084】
図6(c)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、上下左右ひっくり返った倒立したパターンが表示されている。
【0085】
図6(a)、(b)、(c)と表示を切り替えることによって、観察者105には、第2の液晶表示装置102の前方に三次元実像の球体が見える。
【0086】
次に、図7を用いて実施形態2における第1の液晶表示装置101及び第2の液晶表示装置102に表示する多視点画像とピンホールを示す。
【0087】
図7(a)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0088】
図7(b)は、前面に配置された第2の液晶表示装置に多視点画像を表示し、後面に配置された第1の液晶表示装置にピンホールを表示したものである。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0089】
図7(c)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0090】
図7(a)、(b)、(c)と表示を切り替えることによって、観察者105には、第2の液晶表示装置102の前面に三次元実像の球体が見え、第1の液晶表示装置101の後面に三次元虚像の球体が見える。
【0091】
次に、図8を用いて実施形態3における第1の液晶表示装置101及び第2の液晶表示装置102に表示する多視点画像とピンホールを示す。
【0092】
図8(a)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0093】
図8(b)は、前面に配置された第2の液晶表示装置に多視点画像を表示し、後面に配置された第1の液晶表示装置にピンホールを表示したものである。この多視点画像は、表示される立体像が球体であり、上下左右がひっくり返った倒立したパターンが表示されている。
【0094】
図8(c)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、正立のパターンが表示されている。
【0095】
図8(a)、(b)、(c)と表示を切り替えることによって、観察者105には、第1の液晶表示装置101の後方に球体が見える。
【0096】
次に、図9を用いて実施形態4における第1の液晶表示装置101及び第2の液晶表示装置102に表示する多視点画像とピンホールを示す。
【0097】
図9(a)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、上下左右がひっくり返った倒立したパターンが表示されている。
【0098】
図9(b)は、前面に配置された第2の液晶表示装置に多視点画像を表示し、後面に配置された第1の液晶表示装置にピンホールを表示したものである。この多視点画像は、表示される立体像が球体であり、上下左右がひっくり返った倒立したパターンが表示されている。
【0099】
図9(c)は、前面に配置された第2の液晶表示装置にはピンホールを表示し、後面に配置された第1の液晶表示装置には多視点画像を表示する。この多視点画像は、表示される立体像が球体であり、上下左右がひっくり返った倒立したパターンが表示されている。
【0100】
図9(a)、(b)、(c)と表示を切り替えることによって、観察者105には、第2の液晶表示装置102の前方に球体が見え、第1の液晶表示装置101の後方に球体が見える。
【0101】
なお、図12に、球体を再生するための多視点画像の倒立パターンと正立パターンを示す。このように再生すべき立体像の多視点画像を作成するためには、それぞれ各微小画像を作成し、必要に応じて反転した画像、反転しない画像を形成しなければならない。
【0102】
実施形態1及び実施形態3に示す方法では、反転した倒立パターンと反転しない正立パターンの両方を計算する必要があるが、実施形態2及び実施形態3に示す方法では、反転した倒立パターン及び反転しない正立パターンのいずれか一方のみを計算すればよく、簡便である。
【0103】
次に、図10に、第1の液晶表示装置101にピンホール107−1が表示されかつ第2の液晶表示装置102に多視点画像106−2が表示された状態、第1の液晶表示装置101に多視点画像106−1が表示されかつ第2の液晶表示装置102にピンホール107−2が表示された状態を同時に示す。
【0104】
この例では、第1の液晶表示装置101に表示されたピンホール107−1と第2の液晶表示装置102に表示されたピンホール107−2が、観察者105からみると市松模様状に重ならないように制御されている。なお、視差画像光線群108(a)は、第1の液晶表示装置101に多視点画像106−1が表示されかつ第2の液晶表示装置102にピンホール107−2が表示された状態のもの、視差画像光線群108(b)は、第1の液晶表示装置101にピンホール107−1が表示されかつ第2の液晶表示装置102に多視点画像106−2が表示された状態のものを示す。
【0105】
こうすることで観察者105側に照射される視差画像光線群108(a)及び108(b)は、それぞれ照射される角度が異なるために、より立体感を増すという効果を奏し、また均一な明るさになることでピンホールもより目立たなくなる。
【0106】
図11は、視差画像光線群108(a)及び108(b)が互いに市松模様状に配列された様子を示すもので観察者105側から眺めたものである。
【0107】
なお、本発明は、上述した各実施形態に限定されるものではない。
【0108】
さらに、観察者の手の位置を検出する手段と手に装着して抵抗感を与える手段を設けることにより、三次元像に触れたことを感知して、感知した情報をフィードバックして手に抵抗感を与え、あたかも物に実際に触れているかのような感触を与えることもできる。その他、その詳細は、仕様に応じて適宜変更することもできる。
【0109】
【発明の効果】
より立体感の増した高品位の立体像を表示できる立体像表示装置を堤供することができる。
【図面の簡単な説明】
【図1】 本発明の実施形態1に係る立体像表示装置の概念図。
【図2】 本発明の実施形態1に係る立体像表示装置の概念図。
【図3】 本発明の実施形態2に係る立体像表示装置の概念図。
【図4】 本発明の実施形態3に係る立体像表示装置の概念図。
【図5】 本発明の実施形態4に係る立体像表示装置の概念図。
【図6】 (a)(b)(c)本発明の実施形態1に係る立体像表示装置に用いるピンホール画像及び多視点画像を示す図。
【図7】 (a)(b)(c)本発明の実施形態2に係る立体像表示装置に用いるピンホール画像及び多視点画像を示す図。
【図8】 (a)(b)(c)本発明の実施形態3に係る立体像表示装置に用いるピンホール画像及び多視点画像を示す図。
【図9】 (a)(b)(c)本発明の実施形態4に係る立体像表示装置に用いるピンホール画像及び多視点画像を示す図。
【図10】 本発明の立体像表示装置において、ピンホールを市松模様状に配置するように表示した様子を示す概念図。
【図11】 本発明の立体像表示装置において、ピンホールを市松模様状に配置した様子を示すピンホールの図。
【図12】 球体を再生するための多視点画像を示す倒立図及び正立図。
【図13】 従来の立体像表示装置の概念図。
【符号の説明】
101・・・第1の液晶表示装置
102・・・第2の液晶表示装置
103・・・三次元虚像の立体像
104・・・三次元実像の立体像
105・・・観察者
106・・・多視点画像
107・・・ピンホール
108・・・視差画像光線群
203・・・切り替え装置を兼ねる駆動装置。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a stereoscopic image display device.
[0002]
[Prior art]
As one of the stereoscopic image display methods that enable stereoscopic display used in amusement, internet shopping, mobile terminals, medical care, virtual reality, advertising billboards, etc., planar images for the right eye and left eye are displayed on the display and polarized light There is a stereoscope method in which the right-eye planar image is viewed with the right eye and the left-eye planar image is viewed with the left eye.
[0003]
In this stereoscope system, for example, an observer needs to use deflected glasses in order to show a right eye plane image and a left eye plane image only to the left eye. In addition, this stereoscope method looks three-dimensional, but does not actually reproduce a three-dimensional image, so that the image does not change even if the position viewed by the observer is changed. That is, there is a problem in that even if the position is changed to look into the side surface or the upper surface of the image, the side surface or the upper surface of the stereoscopic image cannot be seen, so that the reality is applied.
[0004]
In the stereoscope method, the focal position is on the display surface, and a spatial shift occurs between the focal position and the convergence position where the gaze object is located. The reproduced space has a sense of incongruity and tends to cause fatigue to the observer.
[0005]
As a stereoscopic display method for solving these problems, there is known a method of recording a stereoscopic image called an integral photography method using a large number of parallax images or a ray reproduction method by some method and reproducing this as a stereoscopic image. (Japanese Patent Laid-Open Nos. 10-239785 and 2001-56450). Here, the integral photography method and the light beam reproduction method are based on almost the same principle although the meaning of the term is not accurately established as a stereoscopic display method. In the following description, the integral photography method will be described as a concept including the light beam reproduction method as an integral photography method.
[0006]
FIG. 13 shows a stereoscopic image display apparatus using this integral photography method.
[0007]
As shown in FIG. 13, a natural three-dimensional image is reproduced by a simple optical system including a
[0008]
On the
[0009]
The light emitted from the
[0010]
That is, a three-dimensional
[0011]
Thus, the integral photography method can form a natural stereoscopic image with a simple configuration. The integral photography method is more realistic because it actually reproduces a stereoscopic image and does not require polarized glasses, and the angle at which the stereoscopic image can be seen changes depending on the viewing angle of the observer.
[0012]
[Problems to be solved by the invention]
However, the integral photography method also has some problems as follows.
[0013]
When the
[0014]
In the integral photography method, since the
[0015]
The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a stereoscopic image display device capable of displaying a high-quality stereoscopic image with a further enhanced stereoscopic effect.
[0016]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides a first display state in which multi-viewpoint images are respectively displayed in small areas divided in a plane, Of the second display means A first display means capable of switching between a second display state in which pinholes corresponding to the small areas on which the multi-viewpoint images are displayed are respectively displayed in a plane;
A first display state arranged opposite to the first display means, each displaying a multi-viewpoint image in a small area divided in a plane; Of the first display means A second display means capable of switching between a second display state in which pinholes corresponding to the small areas where the multi-viewpoint images are displayed are respectively displayed in a plane;
Simultaneously displaying the first display state on the first display means and simultaneously displaying the second display state on the second display means and simultaneously displaying the second display state on the first display means. A state in which the first display state is displayed on the second display means at a frequency of 30 Hz to 120 Hz. Alternately There is provided a stereoscopic image display device comprising switching means for switching.
[0017]
By doing so, the pinhole becomes inconspicuous, and the number of rays is also time-division multiplexed so that it effectively increases, so that the stereoscopic effect can be effectively increased.
[0018]
Further, the pinhole displayed on the first display means and the pinhole displayed on the second display means are: Each in a square lattice Each other Reciprocal By arranging in a checkered pattern, it is possible to increase the stereoscopic effect.
[0019]
DETAILED DESCRIPTION OF THE INVENTION
The stereoscopic image display device of the present invention will be specifically described below with reference to the drawings.
[0020]
(Embodiment 1)
FIG. 1 is a schematic diagram of a stereoscopic image display apparatus according to Embodiment 1 of the present invention.
[0021]
In FIG. 1A, the
[0022]
The first liquid
[0023]
In this example, the
[0024]
Further, the pitch of the
[0025]
In FIG. 1B,
[0026]
The second liquid
[0027]
In this example, the
[0028]
In addition, the pitch of the
[0029]
This stereoscopic image display device is characterized in that the state shown in FIG. 1A and the state shown in FIG. 1B are switched at a speed that is not recognized by the
[0030]
By doing so, the
[0031]
In addition, when the positional relationship between the
[0032]
The speed of switching is preferably performed at a frequency of 30 Hz to 120 Hz in consideration of the degree of human recognition from the viewpoint of increasing the stereoscopic effect.
[0033]
Next, FIG. 2 shows a conceptual diagram of the stereoscopic image display apparatus of the present embodiment.
[0034]
FIG. 2A shows a state in which pinholes are displayed on the front liquid
[0035]
On the other hand, FIG. 2B shows a state in which a multi-viewpoint image is displayed on the front liquid
[0036]
The front and rear liquid
[0037]
(Embodiment 2)
FIG. 3 is a schematic diagram of a stereoscopic image display apparatus according to Embodiment 2 of the present invention.
[0038]
In FIG. 3A,
[0039]
The second liquid
[0040]
In this example, the
[0041]
Further, the pitch of the
[0042]
In FIG. 3B, the
[0043]
The first liquid
[0044]
In this example, the
[0045]
Further, the pitch of the
[0046]
This stereoscopic image display device is characterized in that the
[0047]
By doing this, the
[0048]
Considering the degree of human recognition, the switching speed is preferably performed at a frequency of 30 Hz to 120 Hz from the viewpoint of increasing the stereoscopic effect.
[0049]
In this embodiment, not only the three-dimensional real image three-
[0050]
For example, a human body image can be reproduced as a three-dimensional real image three-
[0051]
At this time, the three-dimensional image to be reproduced can reproduce images of a plurality of objects continuously from the back to the front of the apparatus.
[0052]
Also in the stereoscopic image display device shown in the present embodiment, a clear stereoscopic image is actually recognized over a wide range of depth, the
[0053]
(Embodiment 3)
FIG. 4 is a schematic diagram of a stereoscopic image display apparatus according to Embodiment 3 of the present invention.
[0054]
In FIG. 4A,
[0055]
The second liquid
[0056]
In this example, the
[0057]
Further, the pitch of the
[0058]
In FIG. 4B, the
[0059]
The first liquid
[0060]
In this example, the
[0061]
Further, the pitch of the
[0062]
This stereoscopic image display device is characterized in that the state shown in FIG. 4A and the state shown in FIG. 4B are switched at a speed that is not recognized by the
[0063]
By doing so, the
[0064]
Considering the degree of human recognition, the switching speed is preferably performed at a frequency of 30 Hz to 120 Hz from the viewpoint of increasing the stereoscopic effect.
[0065]
(Embodiment 4)
FIG. 5 is a schematic diagram of a stereoscopic image display apparatus according to Embodiment 4 of the present invention.
[0066]
In FIG. 5A, the
[0067]
The first liquid
[0068]
In this example, the
[0069]
Further, the pitch of the
[0070]
In FIG. 5B,
[0071]
The second liquid
[0072]
In this example, the
[0073]
Further, the pitch of the
[0074]
This stereoscopic image display device is characterized in that the state shown in FIG. 5A and the state shown in FIG. 5B are switched at a speed that is not recognized by the
[0075]
By doing this, the
[0076]
Considering the degree of human recognition, the switching speed is preferably performed at a frequency of 30 Hz to 120 Hz from the viewpoint of increasing the stereoscopic effect.
[0077]
In this embodiment, not only the three-dimensional real image three-
[0078]
For example, a human body image can be reproduced as a three-dimensional real image three-
[0079]
At this time, the three-dimensional image to be reproduced can reproduce images of a plurality of objects continuously from the back to the front of the apparatus.
[0080]
Also in the stereoscopic image display device shown in the present embodiment, a clear stereoscopic image is actually recognized over a wide range of depth, the
[0081]
Next, multi-viewpoint images and pinholes to be displayed on the first liquid
[0082]
In FIG. 6A, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an inverted pattern that is turned upside down and left and right is displayed.
[0083]
FIG. 6B shows a multi-viewpoint image displayed on the second liquid crystal display device arranged on the front surface and a pinhole displayed on the first liquid crystal display device arranged on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0084]
In FIG. 6C, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an inverted pattern that is turned upside down and left and right is displayed.
[0085]
By switching the display from FIGS. 6A, 6 </ b> B, and 6 </ b> C, the
[0086]
Next, multi-viewpoint images and pinholes to be displayed on the first liquid
[0087]
In FIG. 7A, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0088]
FIG. 7B shows a multi-viewpoint image displayed on the second liquid crystal display device arranged on the front surface and a pinhole displayed on the first liquid crystal display device arranged on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0089]
In FIG. 7C, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0090]
By switching the display as shown in FIGS. 7A, 7B, and 7C, the
[0091]
Next, multi-viewpoint images and pinholes to be displayed on the first liquid
[0092]
In FIG. 8A, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0093]
FIG. 8B shows a multi-viewpoint image displayed on the second liquid crystal display device arranged on the front surface and a pinhole displayed on the first liquid crystal display device arranged on the rear surface. In this multi-viewpoint image, a stereoscopic image to be displayed is a sphere, and an inverted pattern in which the top, bottom, left and right are turned over is displayed.
[0094]
In FIG. 8C, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, the stereoscopic image to be displayed is a sphere, and an upright pattern is displayed.
[0095]
By switching the display between FIGS. 8A, 8 </ b> B, and 8 </ b> C, the
[0096]
Next, multi-viewpoint images and pinholes to be displayed on the first liquid
[0097]
In FIG. 9A, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, a stereoscopic image to be displayed is a sphere, and an inverted pattern in which the top, bottom, left and right are turned over is displayed.
[0098]
FIG. 9B shows a multi-viewpoint image displayed on the second liquid crystal display device arranged on the front surface and a pinhole displayed on the first liquid crystal display device arranged on the rear surface. In this multi-viewpoint image, a stereoscopic image to be displayed is a sphere, and an inverted pattern in which the top, bottom, left and right are turned over is displayed.
[0099]
In FIG. 9C, a pinhole is displayed on the second liquid crystal display device disposed on the front surface, and a multi-viewpoint image is displayed on the first liquid crystal display device disposed on the rear surface. In this multi-viewpoint image, a stereoscopic image to be displayed is a sphere, and an inverted pattern in which the top, bottom, left and right are turned over is displayed.
[0100]
By switching the display as shown in FIGS. 9A, 9B, and 9C, the
[0101]
FIG. 12 shows an inverted pattern and an erect pattern of a multi-viewpoint image for reproducing a sphere. In order to create a multi-view image of a stereoscopic image to be reproduced in this way, each minute image must be created, and an inverted image and an uninverted image must be formed as necessary.
[0102]
In the methods shown in the first and third embodiments, it is necessary to calculate both the inverted inverted pattern and the non-inverted upright pattern. In the methods shown in the second and third embodiments, the inverted inverted pattern and the inverted pattern are inverted. It is convenient to calculate only one of the upright patterns.
[0103]
Next, FIG. 10 shows a state in which the pinhole 107-1 is displayed on the first liquid
[0104]
In this example, the pinhole 107-1 displayed on the first liquid
[0105]
By doing so, the parallax image light beam groups 108 (a) and 108 (b) irradiated on the
[0106]
FIG. 11 shows a state in which the parallax image light beam groups 108 (a) and 108 (b) are arranged in a checkered pattern, as viewed from the
[0107]
In addition, this invention is not limited to each embodiment mentioned above.
[0108]
Furthermore, by providing a means for detecting the position of the observer's hand and a means for giving a resistance feeling when worn on the hand, it senses that the three-dimensional image has been touched and feeds back the sensed information to resist the hand. It can also give a feeling as if it were actually touching an object. In addition, the details can be appropriately changed according to the specification.
[0109]
【The invention's effect】
A three-dimensional image display device capable of displaying a high-quality three-dimensional image with a further three-dimensional effect can be provided.
[Brief description of the drawings]
FIG. 1 is a conceptual diagram of a stereoscopic image display apparatus according to Embodiment 1 of the present invention.
FIG. 2 is a conceptual diagram of a stereoscopic image display apparatus according to Embodiment 1 of the present invention.
FIG. 3 is a conceptual diagram of a stereoscopic image display apparatus according to Embodiment 2 of the present invention.
FIG. 4 is a conceptual diagram of a stereoscopic image display apparatus according to Embodiment 3 of the present invention.
FIG. 5 is a conceptual diagram of a stereoscopic image display apparatus according to Embodiment 4 of the present invention.
6A, 6B, and 6C are diagrams showing pinhole images and multi-viewpoint images used in the stereoscopic image display apparatus according to the first embodiment of the present invention.
FIGS. 7A, 7B, and 7C are diagrams showing pinhole images and multi-viewpoint images used in the stereoscopic image display apparatus according to Embodiment 2 of the present invention.
FIGS. 8A, 8B, and 8C are diagrams showing pinhole images and multi-viewpoint images used in the stereoscopic image display apparatus according to Embodiment 3 of the present invention.
FIGS. 9A, 9B, and 9C are diagrams showing pinhole images and multi-viewpoint images used in the stereoscopic image display apparatus according to Embodiment 4 of the present invention.
FIG. 10 is a conceptual diagram showing a state in which pinholes are displayed so as to be arranged in a checkered pattern in the stereoscopic image display device of the present invention.
FIG. 11 is a pinhole diagram illustrating a state in which pinholes are arranged in a checkered pattern in the stereoscopic image display apparatus of the present invention.
FIGS. 12A and 12B are an inverted view and an upright view showing a multi-viewpoint image for reproducing a sphere. FIGS.
FIG. 13 is a conceptual diagram of a conventional stereoscopic image display device.
[Explanation of symbols]
101. First liquid crystal display device
102: Second liquid crystal display device
103 ... 3D virtual image
104 ... 3D real image
105: Observer
106 ... Multi-viewpoint image
107 ... pinhole
108: Parallax image ray group
203... A drive device that also serves as a switching device.
Claims (2)
前記第1の表示手段に対向して配置され、多視点画像を平面的に分割された小領域にそれぞれ表示する第1の表示状態と、前記第1の表示手段の多視点画像が表示された小領域に対応したピンホールを平面的にそれぞれ表示する第2の表示状態とを切り替え可能な第2の表示手段と、
前記第1の表示手段に第1の表示状態を表示すると同時に前記第2の表示手段に第2の表示状態を表示する状態と、前記第1の表示手段に第2の表示状態を表示すると同時に前記第2の表示手段に第1の表示状態を表示する状態とを30Hzから120Hzの周波数で交互に切り替える切り替え手段とを具備することを特徴とする立体像表示装置。A first display state in which a multi-viewpoint image is displayed in a small area divided in a plane and a pinhole corresponding to the small area in which the multi-viewpoint image of the second display unit is displayed are respectively displayed in a plane. A first display means capable of switching between a second display state;
A first display state that is arranged opposite to the first display means and displays the multi-viewpoint images in small areas divided in a plane and the multi-viewpoint image of the first display means are displayed. A second display means capable of switching between a second display state in which pinholes corresponding to the small areas are each displayed in a plane;
Simultaneously displaying the first display state on the first display means and simultaneously displaying the second display state on the second display means and simultaneously displaying the second display state on the first display means. A stereoscopic image display apparatus comprising: a switching unit that alternately switches a state in which the first display state is displayed on the second display unit at a frequency of 30 Hz to 120 Hz.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001400413A JP3811062B2 (en) | 2001-12-28 | 2001-12-28 | 3D image display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001400413A JP3811062B2 (en) | 2001-12-28 | 2001-12-28 | 3D image display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003195215A JP2003195215A (en) | 2003-07-09 |
JP3811062B2 true JP3811062B2 (en) | 2006-08-16 |
Family
ID=27605003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001400413A Expired - Fee Related JP3811062B2 (en) | 2001-12-28 | 2001-12-28 | 3D image display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3811062B2 (en) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005175539A (en) * | 2003-12-05 | 2005-06-30 | Sharp Corp | Stereoscopic video display apparatus and video display method |
JP4594326B2 (en) * | 2004-11-18 | 2010-12-08 | パイオニア株式会社 | 3D display device |
JP4567422B2 (en) * | 2004-11-19 | 2010-10-20 | 有限会社ディー・エッチ・エス | How to create a 3D image |
JP4854504B2 (en) * | 2006-12-28 | 2012-01-18 | 有限会社ディー・エッチ・エス | 3D image display method |
CN103869486B (en) * | 2014-03-11 | 2017-01-18 | 深圳市华星光电技术有限公司 | Integrated imaging three-dimensional (3D) display device and system |
JP7011161B2 (en) * | 2018-01-31 | 2022-02-10 | Tianma Japan株式会社 | Display device |
CN109946844B (en) * | 2019-05-21 | 2019-08-27 | 上海麦界信息技术有限公司 | Cubic light field display device |
CN113703178B (en) * | 2021-09-11 | 2023-05-30 | 成都航空职业技术学院 | Integrated imaging 3D display device with uniform resolution |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05273675A (en) * | 1992-03-26 | 1993-10-22 | Fujitsu Ltd | Recording and reproducing method for stereoscopic image |
JP2761829B2 (en) * | 1992-11-25 | 1998-06-04 | 株式会社日鉄エレックス | 3D image display |
JP3255093B2 (en) * | 1997-08-29 | 2002-02-12 | 株式会社エム・アール・システム研究所 | 3D image reconstruction device |
JPH11174376A (en) * | 1997-12-11 | 1999-07-02 | Ricoh Co Ltd | Three-dimensional image display device |
-
2001
- 2001-12-28 JP JP2001400413A patent/JP3811062B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003195215A (en) | 2003-07-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5822117A (en) | Systems for three-dimensional viewing including first and second light polarizing layers | |
US8611006B2 (en) | Systems for three-dimensional viewing and projection | |
JP4576390B2 (en) | Stereoscopic two-dimensional image display apparatus and stereoscopic two-dimensional image display method | |
JP4330597B2 (en) | 2D and 3D video selectable display device | |
WO2002019012A1 (en) | Three-dimensional image display system | |
US20020030888A1 (en) | Systems for three-dimensional viewing and projection | |
CN110035274A (en) | 3 D displaying method based on grating | |
JP2000047138A (en) | Image display device | |
KR101749978B1 (en) | Stereoscopic 3d display device | |
KR100851207B1 (en) | 2D and 3D image selectable display device | |
JP4213210B2 (en) | 3D observation and projection system | |
JP3811062B2 (en) | 3D image display device | |
JP3810624B2 (en) | 3D image display system that combines light beam reproduction and shadow-type multi-view parallax | |
Pastoor | 3D Displays | |
KR100784018B1 (en) | 2d and 3d image selectable display device | |
WO2005088386A1 (en) | 3-dimensional display device and 3-dimensional display method | |
JP3830782B2 (en) | 3D image display device | |
JP3811026B2 (en) | 3D image display device | |
JP4137714B2 (en) | Object display method and object display device | |
JPH11174377A (en) | Three-dimensional image reproducing device and three-dimensional subject information input device | |
JP2004226928A (en) | Stereoscopic picture display device | |
JP2004258594A (en) | Three-dimensional image display device realizing appreciation from wide angle | |
JP2000078612A (en) | Stereoscopic video display device | |
JP3713446B2 (en) | 3D image display device | |
JP2000347132A (en) | Picture display device and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050511 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060214 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060417 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060420 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060525 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090602 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100602 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100602 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110602 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120602 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120602 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130602 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |