JPH11511316A - 立体画像ディスプレイ駆動装置 - Google Patents

Abstract

(57)【要約】 ４ビューディスプレイ装置のようなマルチビューディスプレイ（７０）を駆動するために、複数の３Ｄグラフィックスレンダラ（７７，７８）と複数の合成立体プロセッサ（７６，７９）とのハイブリッド駆動装置を提供する。ディスプレイ装置は、重畳されたレンチキュラースクリーン（７４）を有するＬＣＤスクリーン装置（７２）であり、個々のレンチキュラーアレイに対する４つの異なる画像源（７６〜７９）により駆動される画素の配列は、ビューポイントＶ１〜Ｖ４でそれぞれ４つの画像源（７６〜７９）のうちの１つからの画像を見うるようになっている。このようなマルチビューディスプレイの主たる視聴者は代表的にディスプレイの中央に位置し、その状態で２つの中央のビューＶ２及びＶ３によって与えられる立体画像のみを見るようになる為、２つの中央のビューＶ２，Ｖ３に対する画像源（７７，７８）がそれぞれ３Ｄグラフィックスレンダラとなり、他のビューに対する画像源は後処理段となる。従って、主たる視聴者は最良の画質のビューを見ることになり、側方の視聴者はある（許容しうる）劣化を受けたビューを見ることになる。

Description

【発明の詳細な説明】 立体画像ディスプレイ駆動装置 本発明は、行及び列に配置したディスプレイ画素のアレイと、この画素のアレ イの上に重畳され互いに平行に延在する細長状のレンチキュラー素子のアレイと を有し、このレンチキュラー素子のアレイを介してディスプレイ画素を見るよう にしたディスプレイのような自動立体（オートステレオスコーピック）ディスプ レイを駆動する装置に関するものである。 このような自動立体ディスプレイ装置の一例は、欧州特許出願公開第０６２５ ８６１号明細書に記載されており、この場合ＬＣＤ型の空間光変調器が、水平方 向に延在する行及び垂直方向に延在する列として配置された多数の画素を有して いる。空間光変調器の上にはレンチキュラースクリーンが配置されており、レン チキュラーの半径は画素に対するスクリーンの位置と関連して選択され、異なる 画素群による画像がディスプレイスクリーンに対し予め決められたある角度で見 うるようにしている。２つの画像を立体対の形態で表示する場合には、視聴者は 、左右の目が異なる画素群からの画像を受けて３次元画像を知覚しうるような位 置のみを占める必要がある。 ２つの３Ｄグラフィックスレンダラ（片方の目のビュポイント当たり１つのレ ンダラ）により立体ディスプレイの２つのチャネルを駆動するのは原理的に、１ つの３Ｄグラフィックスレンダラを用いて２つの画像を合成する場合よりも優れ ている。この場合の利点は画質に関するものであり、疲労や吐き気に関連する副 作用を回避することができる。しかし問題は価格であり、特に２つよりも多いビ ュー（視像）を考慮する場合価格が嵩む。１９９６年１月２７日〜２月２日に米 国のサンノゼで開催された“Electronic Imaging”に関するＩＳ＆Ｔ／ＳＰＩＥ 国際会議で与えられた論文“Multiview ３Ｄ−ＬＣＤ”（Cees van Berkel 氏等 著）に記載されるようなフィリップス社の３Ｄ ＬＣＤは現在４ビュー装置とし て入手しうる。従来の構成では、画質が重要となる場合には４つのビューに４つ の３Ｄグラフィックスレンダラを必要とする。 本発明の目的は、各ビュー当たりのレンダリングに要する費用の点で総費用を 低減させたマルチビューディスプレイ装置を提供せんとするにある。 本発明は、マトリックスディスプレイパネルと結合されたＮ個の画像源を有す る自動立体ディスプレイ装置であって、マトリックスディスプレイパネルは、行 及び列方向で行及び列に延在し、且つ群に配置されたディスプレイエレメントの アレイを有しており、各群は行方向でＮ個の隣接するディスプレイエレメントを 有しており、これらＮ個のディスプレイエレメントの各々はそれぞれ前記Ｎ個の 画像源のうちの１つにより駆動され、Ｎは２よりも大きい数であり、マトリック スディスプレイパネルは更に複数の光ディレクタエレメントを有する光ディレク タ手段を具えており、光ディレクタエレメントの各々はそれぞれディスプレイエ レメントの１つの群と関連してディスプレイエレメントの出力を互いに異なる角 度方向に向けるようになっている自動立体ディスプレイ装置において、 Ｎ個の画像源のうちの少なくとも２つの画像源の各々が画像レンダリング装置 を有し、この画像レンダリング装置は、対象物プリミティブデータを蓄積する関 連の主メモリを有するホストプロセッサと、関連のディスプレイメモリを有する 第１ディスプレイプロセッサとを具えており、ホストプロセッサは対象物プリミ ティブデータを第１ディスプレイプロセッサに供給する手段を有し、第１ディス プレイプロセッサは画素値の列とディスプレイメモリに適用するための画素アド レスとを対象物プリミティブデータから発生させる手段を有し、Ｎ個の画像源の うちの少なくとも１つが後処理値を有し、この後処理段は前記画像レンダリング 装置のうちの１つと結合され且つこれにより発生される画像の画素値に水平方向 のシフトを与えるように構成されていることを特徴とする。 ディスプレイエレメントが偶数個である場合には、ディスプレイエレメントの 中央の隣接対をそれぞれ画像レンダリング装置により駆動し、他の残りのディス プレイエレメントを後処理段により駆動するのが適している。 このようなマルチビューディスプレイの主たる視聴者は代表的に対話型の役割 を奏するようにディスプレイの中心に位置し、２つの中央のビューにのみを見る ようにすることが期待される。代表的に受動専用の役割しか奏しない他の視聴者 は中心を外れて位置しうる。本発明によれば、２つの中央のビューを２つの３Ｄ グラフィックスレンダラにより駆動し、他のビューを合成立体を用いて生ぜしめ たビューから取り出すことにより、画質と価格との最適な組合わせを得ることが でき、主たる視聴者が最良の座席にすわり、その側方の視聴者は画像のある劣化 をこうむるも依然として３Ｄビューを見ることができる。 第１の後処理段の外側にある後処理段は、中央に向かって隣接する後処理段に より発生された画素値に水平方向のシフトを与えることにより、これら外側にあ る後処理段の画素値を発生するように構成するのが適している。換言すれば、各 後処理段はその画像を、隣接の後処理段により発生された画像に基づいて発生さ せる。或いはまた、多数のビューに対し適用すべきオフセットの大きさが問題を 生ぜしめるおそれがあるが、後処理段のすべてを、最初のレンダリングされた画 像の対から画像を発生するように構成することができる。 本発明の他の特徴及び利点は請求の範囲に記載されており、更に以下の図面に 関する実施例の説明から明らかとなるであろう。図中、 図１は、本発明を具体化するマルチビューディスプレイ装置を示し、 図２は、水平方向に離間した２つのビューポイント間の視差のシフト効果を示 す線図であり、 図３は、図２のビューポイントの各々から見た３つの重複する画像プリミティ ブを示し、 図４は、画像レンダリング及びテクスチュアマッピングハードウェアを有し、 本発明に用いるのに適した立体ディスプレイ装置のブロック線図であり、 図５は、図４のマッピングハードウェアの奥行きキュー回路を線図的に示し、 図６は、図５の回路に適用しうる種々の奥行きキュー特性を示している。 本発明を具体化する立体視適用を図１に示す。この図１には４ビューディスプ レイ装置７０が設けられている。このディスプレイ装置は重畳したレンチキュラ ースクリーン７４を有するＬＣＤスクリーン装置７２であり、個々のレンチキュ ラーアレイに対する４つの異なる画像源７６〜７９で駆動される画素配列はビュ ーポイントＶ１〜Ｖ４でそれぞれ４つの画像源７６〜７９の１つからの画像を見 ることができるようになっている。この種類の４ビューディスプレイは前述した 論文“Multiview ３Ｄ−ＬＣＤ”（Cees van Berkel 氏等著）に記載されている 。 このようなマルチビューディスプレイの主たる視聴者は代表的に対話型の役割 を奏するように図示のようにディスプレイの中心に位置し、その状態で２つの中 央のビューＶ２及びＶ３によって与えられる立体画像のみを見るようにすること が期待される。代表的に受動専用の役割しか奏しない他の視聴者は中心を外れて 位置しうる。画質と価格との最適な組合せを達成するために、中央の２つのビュ ーＶ２，Ｖ３に対する画像源７７，７８を３Ｄグラフィックスレンダラとし、他 のビュー、すなわち画像源７６，７９は単に、レンダラ７７，７８のうちの１つ にそれぞれ結合され後に説明するように立体合成によりビューを発生する後処理 段とする。従って、主たる視聴者は最良の画質のビューを見ることができ、一方 、側方の視聴者はある画像の劣化をこうむる。４つよりも多いビューをディスプ レイによって達成する場合には、複数の３Ｄグラフィックスレンダラと複数の合 成立体プロセッサとの混成体を以って、例えば価格を廉価にするも画質を高める ようにマルチビューディスプレイを得ることにより装置を拡張し、高画質は中央 のビューポイントに向って得られるか或いは予め決定した主たるビューポイント で得られるようにすることができる。 以下の説明から明らかなように、本発明は通常のレンダラとスクリーンスペー ス３Ｄグラフィックスレンダラとの双方を用いうる。通常のレンダラは、レンダ リングするプリミティブ（代表的に三角形）がフレームバッファに順次に書込ま れ、最終画像のいかなる画素もそれ自体いかなる時にも書込むことができるレン ダラである。スクリーンスペースレンダラはスクリーンをタイルと称するＭ×Ｎ 個の画素の小領域に分割し、これには、Ｍをスクリーンの幅としＮを１画素とし たいわゆる走査線レンダラを含む。スクリーンスペースレンダラは各タイルに対 し、どのプリミティブが当該タイルに寄与するか（すなわち当該タイルによって 重複されるか）を決定し、テクスチュアイング処理のようなレンダリング処理を 実行し、当該タイルに対する画素値をフレームバッファに書込む。 通常のレンダラ又はスクリーンスペースレンダラは、例えば Addison・Wesley により1990年に発行された本“Computer Graphics：Principes and Practice”( James D．Foley 氏等著)の第２版（ISBN 0-201-12110-7）の第668 〜672 頁に記 載されているような通常のバッファ法を用いて各スクリーン又はタイルにプリ ミティブをレンダリングするために奥行きの整列を実行しうる。各画素における レンダリング用の最短近接可視プリミティブを、従って出力すべき画素の色を推 論するのにｚバッファアルゴリズムが用いられる。スクリーンスペースレンダラ は各タイルに対して１個のｚバッファを確保すれば足りるのに対し、通常のレン ダラはスクリーンに対し１個のｚバッファを確保する必要がある。 本発明で述べるレンダリング技術は通常のレンダラとスクリーンスペースレン ダラとの双方に等しく適用しうるも、スクリーンスペースレンダラを用いる方が そのｚバッファを小型にしうるという点で好ましい。又、上述した技術は通常の ｚバッファを用いるレンダラにも限定されない。すなわち、上述した技術は、こ れらのレンダリング用のプリミティブの特性を（ある方法で）合成して最終の画 素の色及び奥行きを決定しうるようにするために、各画素に衝突するレンダリン グ用のプリミティブの幾つか又は全てを蓄積するレンダラにも適用しうる。この 合成を後の解析において最短近接不透明画素情報として考慮することができる。 図２は、適切には立体対を以って構成しうるビューポイント（視点）Ｖ１及び Ｖ２の対に対し通常の技術ではギャップを生ぜしめる視差効果を示す線図である 。視聴者が３Ｄバーチャル環境の２Ｄ変換バージョンを見ているスクリーンを１ ０で示してあり、このスクリーンの右側の領域が画像領域内の見かけの奥行き（ ｚ方向）を表わしている。３つの画像のプリミティブを１２，１４及び１６で示 しており、図面を簡単とするために、これら３つのプリミティブのすべてが互い に平行で垂直な平面体であるものと仮定する。奥行き値ｚが最も小さい（従って 視聴者に最も近い）プリミティブ１２が半透明であり、他の２つの後方のプリミ ティブ１４，１６が不透明であるものと仮定する。 それぞれのビューポイントＶ１及びＶ２からの３つのプリミティブのビュー（ 視像）を図３に示す。これらの画像は以下の問題、すなわち、右目（Ｖ１）に対 する画像は完全にレンダリングされるが、左目に対する画像は後処理により発生 され、ｘ方向のシフトがプリミティブ１６の領域を覆わない個所でギャップＧが Ｖ２画像中に現れ、Ｖ１画像データのｚバッファリング中にこのデータがプリミ ティブ１４の不透明表面により隠かされものとして廃棄されてしまうという問題 を示している。視差のシフトにより半透明プリミティブ１２に現われる可能性の ある他のギャップ領域をＧ′で示す。ギャップが現われるかどうかは、双方のプ リミティブによる色に対する合成値を保つか否か、或いは２つのプリミティブ１ ２及び１４に対するデータをＧ′領域に対し別に蓄積するか否かに依存する。レ ンダラは代表的に最短近接不透明プリミティブの奥行きを確保するも、スクリー ンスペースレンダラは特に前述した不透明のプリミティブの前方にある半透明の 又は部分的に覆われたプリミティブの奥行きのような関連情報を確保することが できる。レンダラは代表的に最短近接不透明プリミティブ１４の後方のプリミテ ィブ１６のようなプリミティブを廃棄する。 この欠陥を無くすために、図１の回路におけるレンダラ７８及び７９として用 いるための立体画像発生装置は各画素に対し最短近接不透明プリミティブの直後 にあるプリミティブに関する情報を確保する。この情報を以後、最短近接オクル ーデッド（occluded：妨害された）画素情報と称する。実際上は、最短近接可視 画素に対してばかりではなく、最短近接オクルーデッド画素に対してもｚバッフ ァが確保され。従って、最短近接不透明画素に相当する画素（例えばプリミティ ブ１４の左側エッジ）が合成立体画像の発生中左又は右にシフトされると、（プ リミティブ１６の以前に隠された部分に対する）最短近接オクルーデッド画素情 報が得られてシフトにより生ぜしめられたギャップに入れられる。最短近接オク ルーデッド画素情報は代表的に実際のシーン内容に相当し、従って充填されたギ ャップは画像のその他の部分に著るしい相関関係にあり、それ自体存在価値のあ るものである。 オクルーデッド画素を確保するのは通常のレンダラにとって費用が嵩むもので ある（しかし禁止されるものではない）。その理由は、実際に、各フレームに対 し、２つの全スクリーン用ｚバッファと２つの全スクリーン用フレームバッファ とを確保する必要がある為である。スクリーンスペースレンダラは各画素当り数 個のレンダリング用プリミティブに対する奥行き情報を予め確保しておくことが でき、従って最短近接オクルーデッド画素の確保を比較的廉価に行なうことがで きる。各画素に対する奥行き及び色情報の２組を所定のタイルにおける画素に対 してのみ保持すれば足り、これはスクリーン上のすべての画素に対し上述した２ 組を確保する価格に比べて可成り廉価となる。 スループットを実時間処理に対し確保するためには、通常のレンダラはオクル ーデッド画素を必ずテクスチュアイングし且つ照明（明暗化）する必要があり、 従ってそのスループットに損失はないが、フレームバッファ書込み段で行なわれ るｚバッファ奥行き整列（ソーティング）を通常と同じ速さで２度行なう必要が ある。スクリーンスペースレンダラはテクスチュアイング及び照明の前に奥行き 整列を行なう為、奥行き整列中及びその後のそのスループットを２倍にする必要 があるが、このようにしない場合のオクルーデッド画素は依然としてテクスチュ アイング又は照明する必要がない。 図４は、走査線型立体視レンダリング及びディスプレイ装置を示すブロック線 図である。キーボード２１及びトラックボール入力装置２３がユーザから中央処 理装置（ＣＰＵ）２５に入力を与える。ジョイスティック、デジタル方式タブレ ット又はマウスのような他の入力装置を用いることもできる。対象物や、テクス チュアマッピングにより対象物の表面に適用すべき写真画像もカメラ１９のよう なビデオ源から入力させることもできる。 ＣＰＵ２５はバス１８を経てディスク貯蔵部２０、ＲＯＭ２２及び主メモリ（ ＭＲＡＭ）２４に接続されている。磁気フロッピーディスク、ハードディスク及 び／又は光メモリディスクを入れることのできるディスク貯蔵部はデータ（例え ば画像又は３Ｄモデルデータ）を蓄積するのに用いられ、このデータを想起及び 操作して新たな画像を所望通りに発生させることができる。このようなデータに は、前の入力セッションからのユーザの作業及び／又は商業的に発生されたデー タを含めることができ、これらを例えば教育又は娯楽のためのコンピュータシミ ュレーション又は対話型計算機援用設計（ＣＡＤ）に用いることができる。３Ｄ 対象物をモデリングするために、上述したデータは一般に２次元画像の形態では なく多角形モデルデータとして蓄積される。この場合、データは、代表的に３Ｄ “対象物”スペースにおいて多角形面（プリミティブ）の群に分割された対象物 を含む３Ｄモデルに相当する。モデルにおける各対象物に対するデータは、対象 物を形成するすべての多角形の位置及び特性を与えるリストを有しており、この リストは多角形の頂点の相対位置や多角形面の色又は透明度を含んでいる。他の システムでは、プリミティブは当該分野で既知のように曲面パッチを有すること ができる。既知のように、テクスチュアを表面上にマッピングするように特定し て、シーンを形成するプリミティブの数を増大させることなくディテールを表す ようにすることができる。テクスチュアマップは、例えば（以下に説明するよう に）画素の色を規定しうる、或いは反射度又は表面法線方向のような他の量を変 調しうる変調の２Ｄパターンを規定するテクスチュアエレメント(texel)の蓄積 された２Ｄアレイである。これらのテクスチュアマップはディスク貯蔵部２０内 に蓄積しておくこともでき、これらのマップを所望に応じ想起する。 ＣＰＵ２５やシステムの他の構成素子が対象物スペース内の３Ｄモデル“ワー ルド”を、適用によって決定しうる或いはユーザによって制御しうる第１ビュー ポイント（視点）から（“視聴者”スペースにおける）ユーザのための第１の２ 次元ビューに変換する。以下に説明するように、後処理により第２ビューを発生 させ、第１及び第２ビューを以って（図１に示すような）自動立体ディスプレイ スクリーン又はＶＲ型ヘッドマウントディスプレイ（ＨＭＤ）３４上に表示する ための立体対を構成する。 上述した変換は、変換、回転、透視投影を実行する幾何変換により行なわれ、 一般には頂点座標の行列乗算により行なわれるものであり、ＣＰＵ２５は各プリ ミティブ又は各頂点に基づいてクリッピング及び照明すなわち明暗（lighting） 計算を行なうこともできる。ＲＯＭ２２及びＭＲＡＭ２４はＣＰＵ２５に対する プログラムメモリ及び作業スペースを構成しており、ＣＰＵ２５を援助してすべ てのしかし最も簡単なモデルを２次元のシーンに変換するのに要する多数の演算 を実行するために特別な処理用のハードウェア２６を設けることができる。この ハードウェア２６は標準の演算回路を有するようにするか、或いはより一層パワ フルな、顧客の仕様に沿って形成した又はプログラム可能なデジタル信号処理用 集積回路を有するようにでき、このハードウェア２６はバス１８を経てＣＰＵ２ ５に接続することができる。ハードウェア２６の特性は例えば速度、解像度、シ ーン当たりのプリミティブの数等に対してシステムの条件に依存している。 ＣＰＵ２５の出力端（バス１８を介する）と対のうちの左側画像に対するディ スプレイメモリ（ＶＲＡＭＬ）３０の入力端との間にはディスプレイ処理ユニッ ト（ＤＰＵ）２８が接続されている。ディスプレイメモリ３０は画素データ（Ｃ ＯＬＬ）をラスタ走査フォーマットで蓄積する。画素データＣＯＬＬには代表的 に、各画素に対し所望の画素の赤（Ｒ）、緑（Ｇ）及び青（Ｂ）成分に相当する ３つの８ビット値（合計で２４ビット）を含めることができる。他の例では、よ り少ない又はより多いビットを与えることができ、又はこれらビットを用いて色 を異なる成分（例えばＹＵＶ）によって規定することができること当業者にとっ て明らかである。 ＤＰＵ２８では、プリミティブを“走査変換”し、最終の左側画像を一時に１ ラインづつ左側ディスプレイメモリ３０内に入れうるようにする。走査変換は、 画像全体をディスプレイへの出力のために走査するのと同様に、各プリミティブ が覆う画素を行順序に且つ画素順序に書込む処理である。 ＤＰＵ２８は第１走査線バッファ６０、第２走査線バッファ６２及び第３走査 線バッファ６４に結合され、第１走査線バッファ６０は画素に寄与する各プリミ ティブの相対ｚ値に基づいて隠れた表面の除去を達成する。プリミティブ画素は “被覆”されている為、すなわち奥行きの短い不透明画素は第１走査線バッファ ６０内のその個所に書込まれる為、変位したプリミティブ画素は第２走査線バッ ファ６２内の対応する位置にコピーされる。当該走査線に対応するすべてのプリ ミティブが考慮されると、バッファ６０内の画素値が単にＶＲＡＭＬ３０の対応 するラインに読出される。バッファ６２内の画素値は各画素位置における第１オ クルーデッドプリミティブに対する値を表わす。 対のうちの右側画像を発生させるために、バッファ６０及び６２内の画素値に 、個々の画素のそれぞれの奥行き値によって決定される量だけｘ方向のシフトを 与え、次にこれらの値をバッファ６４内の新たな位置に入れる。前述したように 、この位置に、より近い不透明画素が既に存在しない場合のみ値を入れることが できる為、バッファ６２からの大部分の値は棄却されてバッファ６０からの値を 選ぶも、視差のシフトが（図３におけるような）ギャップに導入される場合には 、第１オクルーデッドプリミティブに対する必要な画素値は一般にバッファ６２ から与えられる。 すべての値がバッファ６４内に書込まれると、得られる内容はシフトされた右 側画像における対応するラインに対する正しい画素値を有し、データは第２ディ スプレイメモリ６６（ＶＲＡＭＲ）に直接書込まれる。 タイミングユニット（ビデオコントローラ）３２は、２つのＶＲＡＭＬ３０及 びＶＲＡＭＲ６６内の画素データをＨＭＤ３４内のそれぞれのディスプレイスク リーンのラスタ走査と同期してアドレスする読出アドレス信号ＸＤ及びＹＤを発 生する。これらのアドレス信号に応答してＶＲＡＭＬ３０及びＶＲＡＭＲ６６内 の位置が行順序及び列順序で走査され、それぞれのカラー値ＣＯＬＤＬ及びＣＯ ＬＤＲを読出し、これらカラー値をディスプレイ変換器３６，６８に供給し、こ れら変換器は画素データＣＯＬＤＬ及びＣＯＬＤＲを、ＨＭＤ３４に供給するた めの適切な形態の信号に変換し、このＨＭＤ３４はタイミングユニット３２から タイミング信号（ＳＹＮＣ）をも受ける。構成素子３０，３２，３６，６６，６ ８の形態及び／又は動作は異なるディスプレイ装置、例えば自動立体ディスプレ イに対し変えることができること容易に理解しうるであろう。 画素値ＣＯＬは、プリミティブの基本表面色が対象物の表面の属性（例えば透 明度、拡散反射度、鏡面反射度）や３Ｄ環境の属性（例えば光源の形状及び位置 ）を写実的に考慮するように変調されるようにして発生される。この変調のある ものはプリミティブデータが入れられたパラメータから算術的に発生させ、例え ば曲面をシミレートするように平滑に変化するシェーディング（陰影）を生じる ようにすることができる。しかし、より細かい変調を生ぜしめ且つ奥行きキュー を画像に導入するのを容易にするために、マッピングハードウェアを設け、予め テクスチュアメモリ４１内に蓄積された予め決定されたパターンに基づいた変調 値ＭＯＤを生じるようにする。 この目的のために、ＤＰＵ２８がテクスチュア座標Ｕ及びＶの対を画素（ディ スプレイ）座標Ｘ及びＹの各対に対し発生させ、変調パターンがプリミティブ表 面上にマッピングされ、幾何変換をテクスチュアスペースから対象物スペース内 に且つ対象物スペースから視聴者（ディスプレイ）スペース内に実行するように する。テクスチュアイングはバッファ６０，６２による整列後に行なって、明確 にオクルージョン（妨害）されたプリミティブ領域をレンダリングする無駄を回 避することに注意すべきである。 テクスチュア座標Ｕ及びＶは後に説明するようにしてマッピングハードウェア 内で処理され、テクスチュアメモリ４１に供給され、変調値ＭＯＤが、アドレス されている各画素位置Ｘ，Ｙに対し得られるようにする。一般的には、値ＭＯＤ がたとえカラー値であっても、これらの値をＤＰＵ２８内で写実的な照明すなわ ち明暗効果を考慮するように修正する必要がある。より一般的な場合には、変調 値ＭＯＤをＤＰＵ２８内で他のパラメータと一緒に用いて画素値ＣＯＬＬ及びＣ ＯＬＲをあまり直接的でなく修正するようにする。 テクスチュアメモリ４１内で表されるテクスチュアエレメントは一般にディス プレイの画素に１対１で対応せず、特にプリミティブを距離で示し従ってテクス チュアを極めて少数の画素上にマッピングする場合には、簡単な二次抽出法を用 いた場合に生じるであろうエイリアシング効果を回避するのに空間フィルタリン グが必要となる。 実時間の動画像を合成する必要がある装置では一般化されたフィルタを経済的 に適用できないことが知られており、これに対する通常の解決策は、所定のパタ ーンに対し数個の２Ｄアレイ（以後“マップ”と称する）を蓄積し、各マップは 順次に小さくなり且つ順次に低解像度となるようにプレフィルタリングされるよ うにすることである。従ってＤＰＵ２８は使用する適切なマップを決定するのに レベル座標Ｌを生ぜしめる必要があるだけである。コンパクトな蓄積及びテクス チュアエレメント値に対する高速アクセスのためには、マップを２のべき乗の寸 法を有する正方形に選択し“ＭＩＰ(multum in parvo)マップ”技術に応じて正 方形のテクスチュアメモリ内に蓄積することができる。 図４は、テクスチュアメモリ４１内にＭＩＰマップとして蓄積されたテクスチ ュアピラミッドの色成分Ｒ，Ｇ及びＢを示している。最大（最高解像度）マップ （Ｌ＝０）は例えば５１２×５１２個のテクスチュアエレメントを有することが でき、Ｌ＝１のマップは２５６×２５６個のテクスチュアエレメントを有し、以 下各マップが１つのテクスチュアエレメントとなるＬ＝９まで降下する。例示の ために、各テクスチュアエレメント値がＲ，Ｇ及びＢの色成分の各々に対し８ビ ット値を有するものと仮定すると、テクスチュアメモリ４１の全体の寸法は１メ ガバイトとなる。 テクスチュアエレメント値は、ＣＰＵ１４によってバス１８及びメモリ４１の 書込ポート４３を介してレンダリングする前にメモリ４１内に蓄積しておく。各 テクスチュアエレメント値を読出す場合、ＤＰＵ２８が２Ｄ座標対を発生する。 この座標対の各座標（Ｕ，Ｖ）は少なくとも長さ９ビットの整数部を有する。こ れと同時にＤＰＵ２８がレベル座標Ｌを発生し、このレベル座標Ｌは、奥行きキ ュー回路４０による修正を条件として、テクスチュアメモリ４１の読出アドレス ポート４４及び４５にそれぞれ供給するための物理座標Ｕ′及びＶ′を“仮想” 座標Ｕ及びＶから発生させるのに用いられる。メモリ４１は各物理座標対Ｕ′， Ｖ′に応答して、アドレスされたテクスチュアエレメントのＲ，Ｇ及びＢ成分を （２４ビットの）読出ポート４６を経て発生させる。 メモリ４１内のＭＩＰマップの２次元２進木構造のために、必要とする物理座 標Ｕ′及びＶ′を２進シフト回路４７及び４８の対により簡単に発生させること ができ、シフト回路はレベル座標Ｌにより規定された位置数だけ座標をそれぞれ 右にシフトさせる。特に、Ｌ＝０が最高レベルを表す場合、レベル０のマップに おける所定のテクスチュアエレメントに相当するアドレスをレベルＬのマップに おける対応するテクスチュアエレメントの物理アドレスに変換することができ、 これはＵ及びＶ座標をＬ個の位置だけ右にシフトさせ、各座標を２Ｌだけ有効に スケールダウンさせることにより達成される。非修正レベル座標Ｌはプリミティ ブデータの一部としてＤＰＵ２８に供給することができるも、マッピングに透視 を考慮する必要がある場合には、レベル座標ＬはＤＰＵ内でＸ，Ｙに対するＵ， Ｖの偏導関数に依存させて各画素に基づいて発生させるのがより好ましい。 図４では、奥行きキュー回路４０を、ＤＰＵ２８に結合された個別のユニット として示してあるが、その機能をＤＰＵ内のソフトウェアで同様に実行しうるこ とができること明らかである。この回路４０は図５に線図的に示すように、非修 正レベル座標Ｌ、焦点奥行きＦ及び画素奥行きＺに対する入力端を有する。焦点 奥行きＦは、視聴者が焦点を合わせようとしている２Ｄディスプレイ画像内のみ かけの奥行きを特定する。Ｆの値は固定とすることも、或いは特定の適用分野で 必要とするように、適用制御に基づいて又はユーザ入力に応答して可変とするこ ともできる。画素奥行きは表示画像の各画素に対し、発生されたディスプレイ座 標Ｘ及びＹと同期して供給されるもので、３Ｄワールドモデルの２Ｄディスプレ イ画像への変換中にＤＰＵ２８により生ぜしめられる。 算術段８０は画素奥行き及び焦点奥行き間の分離度の関数として出力値ＦＳを 生じ、この値が加算回路８２において非修正レベル座標Ｌに加えられ、修正され た座標レベルＬ′を生じる。加算回路の出力側にはリミッタ段８４を設け、修正 された座標Ｌ′がテクスチュアメモリ４１により維持されるレベルの範囲内に入 るようにするのが適している。算術段８０によって行なわれる特定の関数は、図 ６に分離度（Ｆ−Ｚ）に対するＦＳのグラフにＡ，Ｂ及びＣで例示するように所 望の奥行きキュー特性に応じて変えることができる。一般的な特性は、焦点奥行 きＦにある又は焦点奥行きＦの近くにある画素奥行きに対し、ＦＳの値が零でＬ ′＝Ｌとなり、これらの画素が“適切な”テクスチュア解像度を有するも、テク スチュアは他の奥行きではブラーイング状態になる特性である。 マッピングハードウェアがピラミッド型データ構造の２つのマップレベル間の 補間によりテクスチュア値を発生させる補間器（図示せず）を有する場合には、 例Ａ及びＢで示すようにＬ′を非整数値にすることができる（例Ａ及びＢはテク スチュメモリに対するＬの最大値に達した際のリミッタ段８４の効果をも示して いる）。Ｌ（従ってＬ′）の整数値のみが維持される場合には、ＦＳも同様に例 Ｃで示すように整数値となるように強制される。 当業者にとっては上述したところからその他の変形を行なうことができること 明らかである。このような変形には自動立体ディスプレイ装置及びその部品で既 に知られている他の特徴を含めることができ、これらの他の特徴は前述した特徴 の代わりに又はこれに加えて用いることができる。

───────────────────────────────────────────────────── 【要約の続き】 ことになる。

Claims (1)

1. 【特許請求の範囲】 １．マトリックスディスプレイパネルと結合されたＮ個の画像源を有する自動立 体ディスプレイ装置であって、マトリックスディスプレイパネルは、行及び列方 向で行及び列に延在し、且つ群に配置されたディスプレイエレメントのアレイを 有しており、各群は行方向でＮ個の隣接するディスプレイエレメントを有してお り、これらＮ個のディスプレイエレメントの各々はそれぞれ前記Ｎ個の画像源の うちの１つにより駆動され、Ｎは２よりも大きい数であり、マトリックスディス プレイパネルは更に複数の光ディレクタエレメントを有する光ディレクタ手段を 具えており、光ディレクタエレメントの各々はそれぞれディスプレイエレメント の１つの群と関連してディスプレイエレメントの出力を互いに異なる角度方向に 向けるようになっている自動立体ディスプレイ装置において、 Ｎ個の画像源のうちの少なくとも２つの画像源の各々が画像レンダリング装 置を有し、この画像レンダリング装置は、対象物プリミティブデータを蓄積する 関連の主メモリを有するホストプロセッサと、関連のディスプレイメモリを有す る第１ディスプレイプロセッサとを具えており、ホストプロセッサは対象物プリ ミティブデータを第１ディスプレイプロセッサに供給する手段を有し、第１ディ スプレイプロセッサは画素値の列とディスプレイメモリに適用するための画素ア ドレスとを対象物プリミティブデータから発生させる手段を有し、Ｎ個の画像源 のうちの少なくとも１つが後処理値を有し、この後処理段は前記画像レンダリン グ装置のうちの１つと結合され且つこれにより発生される画像の画素値に水平方 向のシフトを与えるように構成されていることを特徴とする自動立体ディスプレ イ装置。 ２．請求の範囲１に記載の自動立体ディスプレイ装置において、Ｎ＝２（Ｍ＋１ ）及びＭ＝１，２，３・・・等とし、ディスプレイエレメントのうちの中央の隣 接対がそれぞれの画像レンダリング装置により駆動され、残りのディスプレイエ レメントが後処理段により駆動されるようになっていることを特徴とする自動立 体ディスプレイ装置。 ３．請求の範囲２に記載の自動立体ディスプレイ装置において、第１の後処理段 の 外側の後処理段は、中央に向かって隣接する後処理段により発生される画素値に 水平方向のシフトを与えることによりそれぞれの画素値を発生するようになって いることを特徴とする自動立体ディスプレイ装置。 ４．請求の範囲１に記載の自動立体ディスプレイ装置において、画像レンダリン グ装置のディスプレイプロセッサが、プリミティブデータを整列させて第１の２ Ｄ画像の各画素当り最短接近不透明プリミティブを選択し、選択した画素データ を第１のディスプレイメモリに書込み、より大きな奥行きを有する棄却された画 素プリミティブデータを出力するように構成された第１のｚバッファを具えてお り、これに接続された後処理段が、 第１のｚバッファからの出力された棄却された画素プリミティブデータを受 けるように結合され、受けたデータから各画素当りの最短近接不透明プリミティ ブを選択するように構成された第２のｚバッファと、 第１及び第２のｚバッファで選択された画素プリミティブデータの座標に、 各画素当り当該画素の奥行き値によって決定される量だけ、前記２次元のうちの １つの次元における位置的オフセットを与えるように構成した位置オフセット手 段と、 この位置オフセット手段からシフトした画素プリミティブデータを受けて各 画素当りの優先寄与度を選択し、選択した画素データを第２のディスプレイメモ リに書込むように結合された第３のｚバッファと を具えていることを特徴とする自動立体ディスプレイ装置。 ５．請求の範囲４に記載の自動立体ディスプレイ装置において、画像レンダリン グ装置に対し、前記ホストプロセッサに関連する主メモリが更に対象物プリミテ ィブテクスチュアの定義を保持し、前記ディスプレイプロセッサがテクスチュア メモリを有し、 前記ホストプロセッサが更に、レベル座標のそれぞれの値により規定された 解像度の少なくとも２つのレベルで所定の２Ｄ変調パターンを表わすテクスチュ アエレメント値の複数の２Ｄアレイを有するテクスチュアエレメント値の少なく とも１つのピラミッド型又は部分ピラミッド型アレイをテクスチュアメモリ内に 蓄積する手段を有しており、 対象物プリミティブデータをディスプレイプロセッサに供給する前記の手段 が、テクスチュアメモリ内のピラミッド型アレイ内に蓄積されたテクスチュアエ レメント値に応じて変調のパターンを対象物プリミティブに与える必要があると いう指示を有しており、 ディスプレイプロセッサは更に、少なくとも第１のディスプレイメモリに適 用するための画素アドレスの列と、各々が関連のレベル座標を有する複数の２Ｄ テクスチュア座標対の対応する列とを対象物プリミティブデータから発生させて 、関連のレベル座標により規定される解像度のレベルで対象物プリミティブ上に 、蓄積された変調パターンのマッピングを行なうようにする手段と、 各々の前記の関連のレベル座標に対するオフセットを発生させ、且つ受けた 座標対と、関連のレベル座標とこれに対し発生されたオフセットとの合計とから 前記テクスチュアメモリアドレスを発生させるように動作しうる手段と、 焦点奥行き値を受ける入力端とを具え、 オフセットを発生させるように動作しうる前記手段は、受けた焦点奥行き値 により決定される大きさをそれぞれ有する前記オフセットを発生するように構成 されていることを特徴とする自動立体ディスプレイ装置。 ６．請求の範囲５に記載の自動立体ディスプレイ装置において、この自動立体デ ィスプレイ装置が更に、前記ホストプロセッサに結合されたユーザ可動作入力手 段を有し、前記ホストプロセッサは、前記入力手段からの信号に応じて前記焦点 奥行き値を発生させるとともに、この焦点奥行き値を変え且つこの焦点奥行き値 を前記又は各ディスプレイプロセッサに出力するように構成されていることを特 徴とする自動立体ディスプレイ装置。