JP5406290B2 - 画像構築ベース映像表示システム - Google Patents

画像構築ベース映像表示システム Download PDF

Info

Publication number
JP5406290B2
JP5406290B2 JP2011517637A JP2011517637A JP5406290B2 JP 5406290 B2 JP5406290 B2 JP 5406290B2 JP 2011517637 A JP2011517637 A JP 2011517637A JP 2011517637 A JP2011517637 A JP 2011517637A JP 5406290 B2 JP5406290 B2 JP 5406290B2
Authority
JP
Japan
Prior art keywords
image
spatial
pattern
light
coarse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011517637A
Other languages
English (en)
Other versions
JP2011527775A (ja
Inventor
グンサー,セリム・イー
Original Assignee
オステンド・テクノロジーズ・インコーポレーテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オステンド・テクノロジーズ・インコーポレーテッド filed Critical オステンド・テクノロジーズ・インコーポレーテッド
Publication of JP2011527775A publication Critical patent/JP2011527775A/ja
Application granted granted Critical
Publication of JP5406290B2 publication Critical patent/JP5406290B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/342Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F2/00Demodulating light; Transferring the modulation of modulated light; Frequency-changing of light
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2085Special arrangements for addressing the individual elements of the matrix, other than by driving respective rows and columns in combination
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Nonlinear Science (AREA)
  • Optics & Photonics (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

(関連出願の相互参照)
本出願は、2008年7月9日に出願された米国特許仮出願第61/079,418号の利益を主張する。
(技術分野)
本発明は、画像および映像表示装置に関し、より詳細には、静止画像および/または映像モニタとして使用される平面型表示装置、およびそのような表示デバイス上に画像および映像データを生成および駆動する方法に関する。
プラズマ表示装置、液晶表示装置(LCD)、および発光ダイオード(LED)表示装置などの平面型表示装置は、一般に、画素が個別に列および行選択信号によってアドレス指定される画素アドレス方式を使用する。一般に、M行およびN列として配置されたM×N画素、または絵素では、M個の行選択ラインおよびN個のデータ・ラインがあることになる。特定の行が選択されると、N個のデータ・ラインは、表示要素に画像情報を供給するために所要の画素電圧または電流までパワーアップされる。一般的なアクティブ・マトリクス型LCDの実施形態では、この情報は、特定の画素に特有のキャパシタに蓄積される電圧である(図1を参照)。行および列信号が画素を選択解除すると、画像情報はキャパシタに保持される。パッシブ・マトリクス型LCDの実施形態では、行および列は、互いに垂直になるように向きを定められた上部および下部金属面を構成する電極のストライプとして配置される(図2を参照)。単一または多数の行および列ラインは、瞬間の映像情報を有する画素を画定する1つまたは複数の交差点により選択される。そのような場合、行または列信号のどちらかは、画素情報に比例する印加電圧を有することになる。発光ダイオード表示タイプの実施形態では、情報は画素LEDを通過する瞬間電流であり、それにより印加電流に比例する光の放出がもたらされる。LEDアレイのアクティブおよびパッシブ・マトリクス駆動は共に行うことができる。上述のこれらの表示タイプのすべてで、画素解像度は画素の幾何学的寸法に等しいかまたはそれ未満である。例えば、VGA解像度スクリーンでは、色成分ごとに少なくとも640×400個別の画素を実装する必要がある。次に、映像フレーム当たりの表示機構に伝えられる全情報はM×N×3×ビット幅として与えられ、この3倍は画像を構成する3つの基本色、すなわち赤、緑、および青から生じ、ビット幅は画素値の最大解像度から決定される。商用表示システムで使用される最も一般的な画素値解像度は8ビット/色である。例えば、VGA解像度表示装置では、伝えるのに必要とされる全情報は、画像の6Mbit/フレームに等しい640×400×3×8となり、それは一定のフレーム・リフレッシュ・レートでリフレッシュされる。フレーム・リフレッシュ・レートは24、30、50、60フレーム/秒(fps)などとすることができる。スクリーンのより速いレート能力がモーション・ブラーを除去するために一般に使用され、商用デバイスでは120または240fpsのレートで実施するのを見いだすことができる。グレイスケール画像では、輝度情報しか必要としないので情報量は3分の1に減少する。
映像および静止画像は、一般に、MPEG4、H.264、JPEG2000などフォーマットおよびシステムのような記憶および送信のための圧縮形態に変換される。画像圧縮法は、データの直交関数分解、データ冗長度、空間フィーチャに対する人間の眼のある感度特性に基づく。一般の画像圧縮方式は、JPEGもしくはモーションJPEG、または離散的ウォルシュ変換におけるような直接コサイン変換の使用を含む。映像復号器を使用して、一連の直交基底関数係数である圧縮画像情報を行および列画素情報に変換し、例えば、VGA解像度表示装置におけるような6Mbit/フレームとなる画像情報を生成する。しかし、情報量の観点から、この映像情報の大部分は、画像が当初圧縮形態に処理されたように実際には冗長であるか、または人間の眼が反応しない高次の空間周波数の情報量を有する。これらの技法はすべてソフトウェアまたはデジタル処理領域における表示システムの構成要素に関係し、M×N画素で構成された実際の光表示装置の構造は、画素数およびフレーム・レート以外に、映像フォーマットで使用される技法のどれによっても変更されない。
空間光変調器(SLM)は、2次元の透過または反射光ビームの振幅もしくは位相、または両方を変更し、それによって、さもなければ一様の光照明に画像を符号化するデバイスである。画像画素は電気的または光学的アドレス指定手段によってデバイスに書き込むことができる。空間光変調器の簡単な形態は映画フィルムであり、画像は銀被覆フィルムに光化学手段によって符号化される。LCDシステムは、さらに、各画素の情報が電気的手段によって特定の位置に符号化されるような特定の種類のSLMであり、一般に表示区域全体にわたって均一であるバックライト式光源の空間プロファイルが画素の透過率によって変更される。
この分野の従来技術では、一般に、当面の問題の単一の構成要素がアドレス指定される。例えば、画像圧縮および解凍技法は、表示要素に直接適用されるのではなく、表示のためのデータの送信、記憶、ならびに画像再調整および準備にのみ適用されてきた(米国特許第6,477,279号のように)。画素をオンオフして、様々な度合の変調を有するようにバックライトを透過させる空間光変調を組み込むシステムを実装することができ(例えば、米国特許第6,111,560号のような多行選択)またはバックライトおよび画像変調を共に使用して画像の解像度を増強することができる(米国特許出願公開第2007/0035706号および2008/0137990号のように)。特に後者の出願および関連する開示では、画像構築方法のどれもこの開示の主題である画像フレームの合成に時間の次元を組み込んでいない。それによって、フレーム単位で画素ごとに画像を表示する従来の方法を代表する両方のシステムは、インターフェイスの本質的な簡素化と、映像が送信される画像圧縮処理に埋め込まれるデータ・スループットとから利益を得ていない。
アクティブ・マトリクス平面型表示装置、特にアクティブ・マトリクス液晶表示装置で使用される画素選択方法を示す図である。各画素は行および列選択信号によってアドレス指定され、映像情報は選択信号のいずれか一方によって印加される。M×N画素システムでは、M個の行選択信号およびN個のデータ・ラインがある。データ(映像情報)はデジタル−アナログ変換器によって生成され、電圧は画素ごとにキャパシタに記憶される。電圧が、ITO(インジウム・タングステン酸化物)などの透明電極から構成される2つの平行プレートに印加される。 パッシブ・マトリクスLCD表示装置で使用される画素選択方法を示す図である。M個の行選択信号およびN個のデータ信号がある。信号タイミングは、2つの電極間に印加される瞬間電圧をどの場所が有することになるかを決定し、液晶分子は2つの電極間で反応することになる。 空間光変調器が4×4画素群のマスク・パターンの形態で実施する基底関数を示す図である。 空間光変調器が8×8画素群のマスク・パターンの形態で実施する基底関数を示す図である。 データ圧縮が使用されない2×2画素群のマスキング・パターンを示す図である。一度に1つの画素がオンにされるので、光効率は4分の1に低減する。 粗画素化映像源、空間光変調器、画像処理のための計算デバイス、タイミング発生器のブロックを使用する映像表示システムのブロック図である。 アクティブ・マトリクスLCD表示装置などの長いスイッチング速度を有する粗表示タイプで使用される時間スロット最適化方法を示す図である。成分のビット精度を決定する量子化マトリクスを反映して、各それぞれの時間スロット割当てを所要の精度に比例して行うことができ、その結果、より大きい時間スロットは最も高い精度を必要とするD00成分に割り当てられ、より小さい時間スロットは他の成分に割り当てられる。 光源としてLEDアレイ、SLMとしてのパッシブ・マトリクスLCDを使用する表示システムの詳細を示す図である。 4×4画素群のための空間光変調器として使用されるパッシブ・マトリクスLCDの動作の詳細を示す図である。上部透明電極(例えばITO)層150は4つの選択ラインvvert(i)155によって駆動され、下部ITO層160は4つの選択ラインvhorz(i)165によって駆動される。w00からw33の異なる基底関数を実施するために、異なる電圧が155および165に印加される。 4×4画素群のための空間光変調器として使用されるパッシブ・マトリクスLCDに印加される電圧波形および対応する空間基底関数wijを示す図である。各後続フレームでは、電圧パターンが前のフレームの逆となることがある。
本発明は、図面で示された特定の実施形態からの様々な変形および代替形態を有することができる。これらの図面は開示された特定の実施形態に本発明を限定しない。本発明は、以下で請求される変形、改善、および代替の実施形態をすべて包含する。
本発明の一態様は、高いフレーム・レートで動作する粗画素化光アレイと、同じフレーム・レートにおいて基礎をなす光源よりも細かい解像度の直交基底関数に関係する一定のパターンを生成する空間光変調器とを使用して生成されるサブフレームの多数の画像成分を連続的に表示することによって画像および/または映像を構築する表示方法およびシステムである。画像構築システムは、空間光変調器を使用して映像画像を符号化することによって成分が時間領域に分配される画像圧縮成分の使用を利用する。フレームごとに、駆動されるべき元画像が、まず、nx×ny画素から成る一定のサイズに一緒にグループ化される。例えば、画像を、4×4または8×8画素、4×1、8×1の矩形群、または1次元もしくは2次元の直交基底関数を生成することができるという条件付きで他の任意の群サイズに分割することができる。1×1の場合はいかなる圧縮の利点もなく、従来の表示システムで使用される方法に対応する。群サイズはフレーム・レートによって制限され、そのフレーム・レートは本明細書で説明される成分のスイッチング速度と画像圧縮比とによって制限される。各画像群、すなわちここから参照されることになる画素は、一連の前記直交画像基底関数に比例する成分に分解される(直交分解)。これら画像関数は、基礎をなす光の振幅および/または位相を変調する空間光変調器を使用して表示装置ハードウェアで実施され、その結果、直交画像基底関数の所望の空間プロファイルを有する。画像基底関数が、4×4画素群について図3に、および8×8画素群について図4に示される。図示された特定の基底関数は、一般に、ウォルシュ関数としても知られている。直接コサイン変換基底関数などの他の基底関数を、空間光変調器がコサイン形振幅プロファイルを生成することができるという前提で基底関数パターンに使用することができる。4×1または8×1群では、基底関数は各図の第1列のものである。これらの図において、暗い区域は0%の透過率、すなわち光の阻止を表し、白い区域は理想的には100%の透過率を表す。この定義は、基底関数が0または+1とは全く異なる−1または+1を有するという点で画像圧縮技法で使用される定義とは異なることに留意されたい。この差異を補正する方法が本明細書で説明される。4×4画素の第1の群では16個の基底関数があり、一方、後者の8×8画素の群では64個の基底関数がある。基底関数をwuv(x,y)と表し、ここで、uおよびvは基底関数指数であり、x、yは画素群寸法の区域にまたがる直交座標である。fc(x,y)を色成分の2次元画像情報として表す。ここで、上付き添字cは赤、緑、または青の色(原色)を表す。この方法はグレイスケール画像でも同様であり、グレイスケール画像の場合にはf(x,y)は画像の輝度に比例することになる。データ・レートの観点から効率が低くなり、圧縮ベースの方法よりも空間光変調器スイッチング速度に厳しい制約条件がある図5に示されるような可逆画像構築にも空間光変調器を使用する画素区域の高速マスキングは使用することができる。そのような場合、画素群から1つの画素だけがマスキング・パターンを通して透過されるので、この実施形態の出力効率は非常に低い。2×2画素群では、最大平均透過率は25%であり、4×4および8×8群では非常に小さいが、それは画素中の16個および64個の画素から一度に1つの画素が透過されるからである。画像分解ベース方式では、透過光は、D00と比較して小さいDuvの非ゼロ空間成分に関する画素の半分で阻止される。画素の平均透過率値は常に75%よりも大きい(偏光子損失などの他の実装損失は考慮に入れない)。
図3および図4に示されるような基底関数により画像データを積分することによって見いだされる成分にいかなる画像も分解することができる。両方の図の左上の関数は一様関数w00である。右の方に進むに従って、関数は水平方向に変化し、指数値0vが高くなると共に変動が速くなる。より高い指数は、より高い空間周波数を有する画像関数に関係する。同様に、垂直方向の基底関数の変動は、指数u0を有する垂直空間周波数成分によって説明される。他の基底関数成分はwiiなどの対角成分および非対角成分wijとすることができ、ここで、iおよびjは非ゼロであり、異なる。空間的離散関数である映像画素アレイでは、この積分は和の形態である。画像成分をDc uvと表記し、ここで、uおよびvは2次元における基底関数指数であり、cは色成分の赤、緑、または青を表す。そうすると、Dc uvは、
Figure 0005406290
から決定される。
本発明は式1の逆変換に基づき、すなわち、画像fc(x,y)はDc uv×wuvの和として構築することができる。
Figure 0005406290
和は、Dc uvに比例する光強度で基底関数wuvに対応するパターンを連続的に表示することにより時間領域で人間の眼によって効果的に知覚される。人間の眼は画像パターンを積分し、fc(x,y)に対応する単一画像を知覚することになる。
従来の圧縮技法で使用される直交関数の実施形態では、基底関数wuv(x,y)は+1または−1の値をとり、それによって直交特性が満たされる。本発明では、基底関数の値は、これらの関数を表示装置で直接使用するので、代わりに+1または0にマッピングされる。これは非ゼロ積分成分(画像の平均値Dc uv×wuvに等しい)を生成する。この成分は経過が追われ、Dc 00成分から引き算されるが、ここで、Dc 00は、画素群の画像の合計、すなわち、1/(nxy)に規格化された画素群の画像の平均であり、
Figure 0005406290
である。
粗画素化表示源を使用して画像を表示しようとする場合、Dc 00は単一の「画素」(本明細書で使用される定義の画素と同じである)の光強度にも比例する。
ほとんどの場合、Dc 00は、+1および0のマッピングを使用して引き出された画像成分の残りの合計よりも大きいかまたは等しい。したがって、Dc 00からこれらの非ゼロ積分成分の各々を引き算すると、ゼロよりも大きいかまたは等しいはずである。例えば、Dc 01成分を考える。+1および−1の値を有するオリジナルのウォルシュ関数としてwuv (x,y)を示す。−1および+1の代わりに0および1の値をとることができる、wuv (x,y)を置き換える新しい基底関数w* uv (x,y)=(w uv (x,y)+1)/2を使用することによって、w* uv (x,y)は画像構築式の式2を
Figure 0005406290
に変換することになる。
基底関数がすべてに等しい(w00)場合に表示されるべき成分値は、式3の第2項におけるように00成分を除くすべてのDc uvの和で補正されなければならない。圧縮の際のように基底関数のサブセットが使用される場合、和は使用されるDc uv画像成分だけに及ぶべきであることに留意されたい。ここでは、平均成分の総計がオリジナルのDc 00値と等しいことになるので、更新されたDc 00成分はオリジナルの値の代わりに画像構築に使用される。
画像成分Dc uvは正または負の値を有することができる。表示成分を実現する際、Dc uv×w* uv(x,y)の値は正だけとすることができる。「負の」Dc uvの場合には、画像成分はDc uvの絶対値と基底関数パターンw* uv(x,y)の逆とを使用して生成される。0が1にマッピングされ、逆の場合も同様である2値関数w* uv(x,y)の2の補数として関数の逆は定義される。
全システムを示すブロック図が図6に示される。
フレームごとに、映像画像は、
1.画素ごと、uv成分ごと、および色ごとに画像fc(x,y)に関連する画像成分強度Dc uvを計算する、
2.w* uv(x,y)に対応する空間光変調器の使用によって光強度マスクを適用する、
3.画素ごとにDuvに比例する光を適用する
ことによって構築される。カラー表示では、3色の光要素が画素群ごとに使用される。赤、緑、および青の光源の光強度は、色ごとに計算されたDc uvにより調整される。光強度は、どの光源が使用されるかに応じて、電圧、電流、および/または光源のオン時間で調整される知覚強度のうちの少なくとも1つを調整することによって調整することができる。Dc uv 画像成分は実際には正または負の値を使用することができる。負の画像成分の場合には、光強度は画像成分の絶対値であるが、画像の再構成の際マスキング・パターンの逆を使用する。
意図した画像の単一フレームに至るように、サブフレームとして規定することができる各画像成分は連続して表示される。観察者の眼は閃光の画像成分を集積して、閃光の画像成分のすべての合計である意図した画像を視覚的に知覚することになる。表示される成分、すなわちサブフレームごとに、期間は等しくするか、またはその期間はビット解像度に対して最適化することができる。後者の場合には、より細かい精度に必ずしも処理する必要のないより短い画像成分期間と比較して、より高いビット精度を必要とする画像成分により長い画像成分期間を割り当てるように、空間光変調器のシャッター速度を最適化することができる。そのような場合、Dc uv成分が他の成分と比較してより短い期間閃光で光る場合、光強度は同じ時間縮小比だけ増大されなければならないことになる。
カラー画像では、赤、緑、および青の光源はそれぞれのDc uv値に比例して同時にまたは時系列的に光ることができる。赤、緑、青の画像が別々に閃光で光る時系列の場合、SLMシャッター速度は同時の場合よりも3倍速くなければならない。同時の場合、すべての成分値が同じ符号を有するか、または成分値のうちの1つが他の2つと異なる符号を有するかのいずれかの場合がある。いかなる画素でも、各色成分が必ずしも同じ符号を有するとは限らないので、w* uvおよびその逆のパターンの両方を表示する必要がある場合がある。したがって、SLMはサブフレームごとにすべての基底関数とその逆のものとを生成することになる。逆基底関数の成分がない場合、表示されるべき画素値はゼロに等しいことになる。
一般に、SLM制御は理想的には表示装置全体に及ぶことになるか、またはより小さい区画に細分される場合があり、そのためw* uvおよびその逆パターンの両方が必要になると予想される。スイッチングおよび駆動方式がより複雑になるという犠牲を払って、SLMが各粗画素にわたって制御される場合、使用されない基底関数のサブフレームは含まれる必要がない。
画像圧縮は可逆変換または非可逆変換のどちらにもすることができる。可逆変換では、利用可能な画像成分から忠実度損失のない画像を構築することができる。非可逆圧縮ベースの分解では、ある一定の成分を無視することになり、その結果、無視されなかった成分で画像を構築するとき、画像品質が損なわれることがある。大部分の映像および静止画像では、非可逆圧縮がデータのサイズを低減するために使用される。非可逆圧縮では、通常、ある一定の閾値未満の画像成分、および人間の眼の感度が低い画像成分を無視することになる。これらは、一般に、対角項および非対角項に関連する高次の空間周波数をもつ項である。圧縮は、基本的に、所与の画像誤り限界に対してできるだけ少ない項で画像を描写しようとすることになる。ほとんどの場合、最初に落とされる項は非対角成分であり、続いて対角項であり、高次の項から低次の項に至る。D00、D01、D02、D03、D10、D11などからD33までの16個の画像成分を有するはずの4×4画素群を例にとると、基底関数w* 00からw* 33、およびこれらの成分の逆(w* 00を除いて)を使用して、31個の成分をすべて使用する場合、オリジナルの画像が正確に再構成されることになる。画像圧縮では、大部分の画像は、無視された斜め空間成分を有することになる。水平および垂直画像成分しか使用しない表示システムが場合によっては十分であることがある。画像精度を改善するために、D11、D22、および/またはD33などの対角空間周波数成分を加えることもできる。D12、D13、D23などのような斜め成分は無視することができる。例えばMPEG圧縮を使用する大部分の映像源では、そのような成分は、記憶および送信のために映像自体を圧縮するように実際には大部分が完全に除去されるか、または無視できると見なせる特定の閾値よりも小さくなるようにされていた。画像成分が無視されると、フレーム時間は、少なくとも1つの他の画像成分のサブフレーム時間を拡大することによって再配分することができる。そうしなくても、データ低減は達成される。成分のどれも無視できない場合、すべての成分を考慮することによって画素に対して可逆オペレーションを用いることができる。いくつかの実施形態では、特定の画素に対するSLMが他の領域から独立して作動できる方法を実施することができることにも留意されたい。そのような場合、異なる画素は異なる圧縮のレベル、高度な圧縮から可逆圧縮までを有することができる。これは、元映像から同時に決定することができる。そのような場合は例えばコンピュータ・モニタで生じることがあり、動作中、スクリーンの領域は停滞しているが、テキストおよび静止画を示すウィンドウのように高精度を必要とすることがあり、または一部は動きをより正確に描写するのに高いフレーム・レートを必要とするが、必ずしも可逆映像再生方式を必要としない速く動いている画像を有することがある。異なる粗画素には異なるレートでSLMを作動させることによって、画像精度および出力を最適化することができる。Duv成分を計算し、どの程度を無視できないかを決定し、それを以前の画像フレームの成分と比較することによってどの画素をどの精度のモードで作動させるかを決定することができる。それにより、速く動いている画像対遅いまたは停滞した画像、および正確な画像対非可逆圧縮画像を区別することができる。
30フレーム/秒および画素を規定する4×4画素群で動作するVGA解像度表示装置の例をとり、本発明を使用してVGA解像度を満たす表示デバイスは以下のものを使用することができる。
1.画素寸法が、意図する解像度よりも水平および垂直に4倍大きく、赤、緑、および青の光要素を有する160×100画素アレイ。
2.LCDの下部面の水平ストライプの透明電極および上部面の垂直ストライプの透明電極を使用して、または逆の場合のものを同様に使用して、垂直、水平、および斜め基底関数パターンを生成するパッシブ・マトリクスLCDからなるSLM。そのようなSLMは16個の直交基底パターンおよびその逆を生成することができる。電極幅は意図した画素解像度サイズと等しい。総数640個の垂直電極および400個の水平電極がSLMに存在する(より高速で駆動するために各方向に沿って多くの部品に分割することができる)。
3.各フレームのVGA解像度画像から色ごとに対応するDuv成分を計算する計算デバイス。
4.無視できないすべての画像成分についてDuvに比例する画素強度でSLMパターンを駆動する。圧縮した映像源では、最初の7個または8個の支配的な係数を使用すれば、一般に、圧縮した映像を再生するのに十分であるはずである。これは、逆パターンを含めて13個または15個の基底関数パターン(31個から)の生成を必要とすることになる。
5.他の要素が光品質のために必要となることがあり、例えば、画素区域にわたって一様な光源を生成するために赤、緑、および青の光出力を混合するための光コリメータまたは拡散器などである。
アクティブ画素の数は768000個(3色について)から48000個(3色について)まで16分の1に低減される。表示装置には16000個の画素がある。生画像のデータ・レートは所望の画像圧縮のレベルに依存する。可逆画像再構成では、16Duv成分/画素/色がある。各Duvが8ビット精度で記述される場合、184Mbpsのデータ・レートを必要とする。これは128ビット/画素/色/フレームに対応する。実際には、D00成分だけが8ビットの精度である必要があり、一方、高次成分は低精度とすることができる。そのような成分に基づいた精度割当ては、一般に、画像圧縮では量子化マトリクスとして知られている。ある特定の実施形態では、80ビット/画素/色/フレームよりも大きい必要がなく、それによりデータ・レートは120Mbpsまで下がって最適化されることになる。D12、D13、D23などのような斜め空間周波数成分を削減するが、D11、D22、D33を削減しない中間圧縮レベルが使用される場合、全部で10個の成分で処理している。これらの成分は総数60ビット/画素/色/フレームを必要とすることになる。全データ・レートは86Mbpsに低減される。D11、D22、D33を無視する高い圧縮比では、46ビット/画素/色/フレームを使用することになる。そのとき、全データ・レートは66Mbpsである。SLMパターンは、可逆圧縮の場合にはフレームごとに31回、中間レベル圧縮の場合にはフレームごとに19回、および高レベル圧縮の場合にはフレームごとに13回更新される必要がある。粗表示はフレームごとに8回から15回更新する必要があり、使用されないSLMパターンについてはブランク(黒)になる。30フレーム/秒では、13サブフレーム(7成分に対して)を閃光で光らせると、390パターン/秒が生成され、すなわち概略で2.5msec/サブフレームがもたらされる。10成分に対して19サブフレーム使用することによって、570SLMパターン/秒、すなわち1.7msec/サブフレームを生成する必要があることになる。可逆画像再生では、総数31サブフレームが必要であり、それは930パターン/秒に等しく、1.1msec/サブフレームを必要とする。従来のLCDの整定速度は、より小さい形状の十分に速い液晶材料を使用することによってそのような速度でオン−オフ遷移(すなわち黒から白に)だけを有する空間光変調器として使用されるように十分に速くすることができる。様々なパターンが量子化マトリクスからの精度要件を反映するようにサブフレーム期間を最適化する方法を実施することもできる。
液晶ベースSLMでは、整定時間は、液晶材料スイッチング時間と、一定のキャパシタンスおよび抵抗の金属ラインに印加される電圧の応答時間とを使用してモデル化することができる。金属ラインのために時定数に指数関係が生じる場合、瞬間ステップ電圧を印加すると、応答は、
V(t)=V(0).(1−exp(−t/τ))
の形になるはずであり、ここで、τはRC時定数である。したがって、SLMに印加される8ビットの正確な電圧を得るには、所要の最小時間は、1/28の自然対数、すなわち5.5τをとることによって見いだすことができる。6ビットの正確な電圧で十分な場合、所要の時間は4.15τまで低減し、4ビットの正確な電圧ではさらに2.7τまで低減する。したがって、低次成分項には6〜8ビット精度、および高次成分には4ビットまで下がったものを使用する特定の量子化マトリクスでは、最上位項と比較して、より少ない精度しか必要としない最も高い次数の項には半分の時間まで低減して割り当てることができる。図7に示されるように、固定フレーム周期を有するとすれば、より少ない時間をより低い精度のサブフレームに割り当てることによって、フレーム期間内により多くのサブフレームを押し込むか、またはより多くのスロット時間をより高い精度サブフレームに割り当てることができる。
SLMは、表示装置の全体に及ぶことができる垂直電極と水平電極とからなる。この場合、クロック発生器によって駆動される8個のドライバだけで、粗画素に適用されるすべてのパターンを生成するのに十分である。しかし、長い電極のため、電極のキャパシタンスは、液晶時定数に加えて時定数限界をもたらし始めることがある。SLMの速度を上げるために、電極をより小さい部分に分割することができ、ドライバの情報を伝え、表示装置のより小さい区域を取り扱う専用ドライバまたはバッファによってより小さい部分の各々は駆動される。
要約すると、直交基底関数分解に基づいた画像圧縮技法を使用する映像表示システムが開示されている。このシステムは、本質的に表示装置の非常に粗く画素化された画素、すなわちブロックを使用して画像が構築されるので必要とするアクティブ画素の数が従来の手法よりも非常に少ない。したがって、アクティブ画素表示装置の行および列の数は低減され、その結果、インターフェイスが簡単になる。クロック発生システムから切り離されて動作する空間光変調器がアクティブ・マトリクス表示装置に結合され、その結果、アクティブ画素アレイ上で画像を同期させることを除いて、このシステムにさらなるデータを外部から供給する必要がない。画像が直交画像成分を使用して形成されるので、解凍方式は効力があり、画像を再構成するのに使用されるべき成分の数を切り詰め、表示装置のデータ要件を緩和することができる。この表示装置は、画像成分を切り詰めることにより非可逆解凍画像を生成するように、または圧縮映像入力の可逆再生を有効に行うように製作することができる。特定の動作モードでは、この表示装置はあり得る直交成分をすべて表示することによって可逆映像を再生成することもできる。
本発明の特定の実施形態では、LEDベース(固体光源)表示システムが液晶空間光変調器に結合される(図9を参照)。表示システムの寸法および解像度が例としておよびシステムの幾何学的態様を明確にするために与えられている。表示システムは、合計48000個のアクティブ要素である160×100の赤、緑、および青の光生成LED100のLEDアレイから構成される。赤、緑、および青のLEDの各々は画素を画定し、それによって、16000個の画素が存在する。画素の寸法は、32cm×20cmの表示装置サイズに対応して2mm×2mmのように選ばれる。一様光を形成するために、光拡散器またはコリメータ・レンズ層110(図8)がLED100層上で使用される。画素を分離してクロストークを防止するためにアクティブ・マトリクス表示装置で一般に使用される黒いマトリクス・パターン115が、赤、緑、青のLED100を収容する画素間に使用される。空間光変調器120は、2つの直交偏光子130、140と、LCD内において互いに垂直である透明電極の2つの平行平面150、160とからなるLCDのパッシブ・マトリクス実装を使用して構築される(図10を参照)。電極幅は各々0.48mmであり、それによって、4個の横並びの電極は画素と同じ幅を占める。電極の長さは数個の画素の長さまで及ぶことができ、電極のキャパシタンスによるLCDのスイッチング速度によって制限される。電極150と160との間のLCDの容積は液晶材料170で充填される。電極はInTnOなどの透明導電性材料から製造され、意図した解像度と等しいフィーチャ・サイズを有する。画素中の8個の電極、すなわち上部プレートの4個、下部プレートの4個、の各々は個別に選択することができる。基本画像パターンはこれらの電極に電圧を印加することによって生成される。必要な電圧波形は、電界が液晶を最大角に傾斜させ、それにより光の偏光が直交偏光子130と140との間で最大透過のために約90度まで回転されるようなものである。印加電圧は、さもないと時間依存劣化を引き起こすことになる液晶で見られるメモリ効果を消去するために正極性および負極性の両方を有することができる。VGA解像度映像源180を使用して、640×400画素の固有解像度を有する生映像画像を生成する。処理デバイス190を使用して、160×100画素に対して必要な駆動画像成分を生成する。30fpsのフレーム・レートでは、赤、緑、および青の色を同時に処理することができるので、各色画像は最大の概略33msec期間を割り当てられる。LCD空間光変調器のオン−オフ遷移の1msecスイッチング速度では、可逆再生のために十分な画像成分を容易に押し込むことができる。画素ごとに、画像分解アルゴリズムは、各色が使用する各直交基底関数に対応して画像成分を決定する。uおよびvが0から3に及ぶとして、分解画像成分uvが計算される。これらの画像成分は、対応するマスキング・パターンwuvによる画素を構成する16個の画素値の和である。使用されるべき分解画像成分の数は、高次画像成分が結局ゼロになる圧縮源での1〜8から、画像の可逆再構成での16個の画像成分のフルセットまで選択することができる。表示装置の一部は動作中に異なる圧縮レベルを有することもでき、画像プロセッサはそれを画像プロセッサが計算する分解画像成分値に応じて決定することができる。空間光変調器120のパターンは、パターンw00、w01、w02、w03、w10、w20、w30、w11、w22、w33、w12、w21、w13、w31、w23、w32を順番に並べるカウンタ・ベース論理回路によって駆動される。分解画像成分が高次項に対して無視できる場合、カウンタは任意の点でリセットし、それによってデータ・レートを低減し、より多くの時間を割り当てることによって低次項の精度を改善することができる。必要ならば、ちらつき効果を低減するために、w00パターンは数個のサブフレームに分割し、適切に正規化された対応する成分強度Dc uvと共にパターン・シーケンス中に相互分散することができる。これは、より短いサブフレーム・パターン期間を犠牲にすることになる。
100 LEDアセンブリ; 110 光拡散器; 120 空間光変調器;
130、140 偏光子; 170 液晶。

Claims (51)

  1. 映像画像を表示する方法であって、
    映像画像をM×N粗画素のアレイに分割するステップを備え、各粗画素は、カラー動作では1組の原色光源で、グレイスケール動作では白色光源で構成されており、
    前記粗画素のサイズよりp倍細かい解像度を有する光の空間パターンを生成するステップを備え、
    前記光の空間パターンを制御して、前記M×N粗画素のそれぞれ毎に画像成分を生成するステップを備え、
    それによって、得られる映像画像は前記M×N粗画素よりもp倍まで細かい解像度で表示され
    前記映像画像は、粗画素ごとに一連の直交画像基底関数に比例する成分に分解され、前記光の空間パターンは画像再構成のための直交画像基底関数に対応して制御されるよう構成されており、さらに、
    グレイスケール画像では、uおよびvが前記直交画像基底関数の指数であり、xおよびyが前記粗画素の座標であるとして、前記画像fc(x,y)に関係する画像成分Duvが粗画素ごとに計算され、w* uv(x,y)=(wuv(x,y)+1)/2であり、wが直交画像基底関数であるとして、光パターンがw* uv(x,y)に対応して生成され、粗画素ごとのDuvに比例する光源駆動情報が前記光源に供給されることを特徴とする方法
  2. 00 以外の負である画像成分Duvでは、逆の光パターン及び該画像成分の絶対値が使用されることを特徴とする請求項に記載の方法。
  3. カラー画像では、前記グレイスケール画像における光源駆動情報を前記1組の原色光源の各色光源ごとに作成して当該各色光源に供給することを特徴とする請求項に記載の方法。
  4. 00 以外の負である画像成分Duvでは、前記光のそれぞれのパターンの逆及び該画像成分の絶対値が使用されることを特徴とする請求項に記載の方法。
  5. 前記光源は原色固体光源であることを特徴とする請求項1に記載の方法。
  6. 前記原色固体光源は、赤、緑、および青のLED光源であることを特徴とする請求項に記載の方法。
  7. 前記光の同じ空間パターンはすべての粗画素に使用されることを特徴とする請求項に記載の方法。
  8. 前記光の同じ空間パターンは多数の粗画素のアレイに同時に生成され、前記多数の粗画素のアレイは前記M×N粗画素のアレイのサブアレイであり、それによって、前記光の空間パターンのタイミングは任意の1つのサブアレイ内の各粗画素に対して同時になるが、異なるサブアレイ内の光の各パターンの前記タイミングは異なり得ることを特徴とする請求項に記載の方法。
  9. 粗画素ごとの光の空間パターンが別々に生成され、それによって、異なる粗画素の各パターンの前記タイミングは異なり得ることを特徴とする請求項に記載の方法。
  10. 前記光の空間パターンは低次および高次の空間周波数成分を有し、より多くの時間が低次の空間周波数成分を有する前記光の空間パターンに割り当てられ、より少ない時間が高次の空間周波数成分を有する前記光の空間パターンに割り当てられることを特徴とする請求項に記載の方法。
  11. 前記光の空間パターンは低次および高次の空間周波数成分を有し、光の少なくとも1つの高次の空間パターンが少なくとも一度無視されることを特徴とする請求項に記載の方法。
  12. 光の少なくとも1つの高次の空間パターンを無視する場合、光の無視されない空間パターンのうちの少なくとも1つに、より多くの時間が割り当てられることを特徴とする請求項11に記載の方法。
  13. 無視されるべき前記光の少なくとも1つの高次の空間パターンは、その光の空間パターンの前記画像成分に応答して選ばれることを特徴とする請求項11に記載の方法。
  14. 前記光の空間パターンは、低次および高次の空間周波数成分を有し、前記映像データ・レートは、前記低次の空間周波数成分に対応する利用可能な画像成分のサブセットを使用することによって低減されることを特徴とする請求項に記載の方法。
  15. 任意の所与の粗画素用の画像を再生するのに使用されるべき画像成分の数が、閾値を使用することによって動的に決定され、前記閾値を下回ると、前記サブアレイを表示するときに前記成分は廃棄されることを特徴とする請求項に記載の方法。
  16. 前記光の空間パターンは、低次および高次の空間周波数成分を有し、粗画素ごとの前記画像成分は、光の低次の空間パターンに関連する画像成分により多くのビットを、および光の高次の空間パターンに関連する画像成分により少ないビットを割り当てる量子化マトリクスによって決定されるビット精度で記述され、それによって、総合映像データ・レートを低減することを特徴とする請求項1に記載の方法。
  17. 映像画像を表示する方法であって、
    映像画像をM×N粗画素のアレイに分割するステップを備え、各粗画素は、カラー動作では1組の原色光源で、グレイスケール動作では白色光源で構成されており、
    前記M×N粗画素のアレイに整列されていて、光を阻止または通過させるための空間マスキング・パターンを生成する空間光変調器を準備するステップを備え、前記空間マスキング・パターンは前記粗画素のサイズよりp倍細かい解像度を有しており、
    前記空間光変調器を制御して前記空間マスキング・パターンを生成し、且つ、前記M×N粗画素のそれぞれ毎に1つまたは複数の光源に、前記空間光変調器によって生成されるマスキング・パターンに対応した駆動情報を供給する画像成分を生成するステップを備え、
    それによって、得られる映像画像は前記M×N粗画素よりもp倍まで細かい解像度で表示され
    前記映像画像は、粗画素ごとに一連の直交画像基底関数に比例する成分に分解され、前記空間光変調器は、画像再構成のために直交画像基底関数に対応する空間マスキング・パターンを生成するように制御されるよう構成されており、さらに、
    グレイスケール画像では、uおよびvが前記直交画像基底関数の指数であり、xおよびyが前記粗画素の座標であるとして、前記画像fc(x,y)に関係する画像成分Duvが粗画素ごとに計算され、w* uv(x,y)=(wuv(x,y)+1)/2であり、wが直交画像基底関数であるとして、光強度マスクが、w* uv(x,y)に対応する空間光変調器の使用によって適用され、それぞれの粗画素のDuvに比例する光源駆動情報が、それぞれの粗画素の前記光源に供給されることを特徴とする方法
  18. 00 以外の負である画像成分Duvでは、前記それぞれのマスキング・パターンの逆及び該画像成分の絶対値が使用されることを特徴とする請求項17に記載の方法。
  19. カラー画像では、前記グレイスケール画像における光源駆動情報を前記1組の原色光源の各色光源ごとに作成して当該各色光源に供給することを特徴とする請求項17に記載の方法。
  20. 00 以外の負である画像成分Duvでは、前記それぞれのマスキング・パターンの逆及び該画像成分の絶対値が使用されることを特徴とする請求項19に記載の方法。
  21. 前記光源は原色固体光源であることを特徴とする請求項17に記載の方法。
  22. 前記原色固体光源は、赤、緑、および青のLED光源であることを特徴とする請求項21に記載の方法。
  23. アクティブまたはパッシブ・マトリクス液晶空間光変調器が使用されることを特徴とする請求項17に記載の方法。
  24. すべての粗画素に同じ空間マスキング・パターンが同時に生成されることを特徴とする請求項17に記載の方法。
  25. 前記同じ空間マスキング・パターンは多数の粗画素のアレイに同時に生成され、前記多数の粗画素のアレイは前記M×N粗画素のアレイのサブアレイであり、それによって、前記空間マスキング・パターンのタイミングは任意の1つのサブアレイ内の各粗画素に対して同時になるが、異なるサブアレイ内の各パターンのタイミングは異なり得ることを特徴とする請求項17に記載の方法。
  26. 粗画素ごとの空間マスキング・パターンは別々に生成され、それによって、異なる粗画素の各パターンの前記タイミングは異なり得ることを特徴とする請求項17に記載の方法。
  27. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、より多くの時間が低次の空間周波数成分を有する前記空間マスキング・パターンに割り当てられ、より少ない時間が高次の空間周波数成分を有する前記空間マスキング・パターンに割り当てられることを特徴とする請求項17に記載の方法。
  28. 前記空間マスキング・パターンは低次、および高次の空間周波数成分を有し、少なくとも1つの高次の空間マスキング・パターンが少なくとも一度無視されることを特徴とする請求項17に記載の方法。
  29. 少なくとも1つの高次の空間マスキング・パターンを無視する場合、無視されない空間マスキング・パターンのうちの少なくとも1つに、より多くの時間が割り当てられることを特徴とする請求項28に記載の方法。
  30. 無視されるべき前記少なくとも1つの高次の空間マスキング・パターンはその空間マスキング・パターンの前記画像成分に応答して選ばれることを特徴とする請求項28に記載の方法。
  31. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、前記映像データ・レートは、前記低次の空間周波数成分に対応する利用可能な画像成分のサブセットを使用することによって低減されることを特徴とする請求項17に記載の方法。
  32. 任意の所与の粗画素用の画像を再生するのに使用されるべき画像成分の数が、ある一定の閾値を使用することによって動的に決定され、前記閾値を下回ると、前記サブアレイを表示するときに前記成分が廃棄されることを特徴とする請求項25に記載の方法。
  33. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、粗画素ごとの前記画像成分は、低次のマスキング・パターンに関連する画像成分に、より多くのビットを、および高次のマスキング・パターンに関連する画像成分に、より少ないビットを割り当てる量子化マトリクスによって決定されるビット精度で記述され、それによって、総合映像データ・レートを低減することを特徴とする請求項17に記載の方法。
  34. 映像システムであって、
    各粗画素がカラー動作では1組の原色光源で、またはグレイスケール動作では白色光源で構成されるM×N粗画素のアレイを有する映像表示装置であり、各光源の強度が制御可能である、映像表示装置を備え、
    前記M×N粗画素のアレイに整列され、且つ光を阻止または通過させるための空間マスキング・パターンを生成する空間光変調器を備え、前記空間マスキング・パターンは前記粗画素のサイズよりp倍細かい解像度を有しており、
    表示されるべき映像画像を受け、前記空間光変調器を制御して前記空間マスキング・パターンを生成するように、且つ、生成される前記空間マスキング・パターンに対応した前記M×N粗画素のそれぞれ毎に1つまたは複数の光源に駆動情報を供給する画像成分を生成するように構成された画像プロセッサを備え、
    それによって、前記M×N粗画素よりもp倍まで細かい解像度で画像を表示することができ、さらに、
    前記画像プロセッサは、前記映像画像を、粗画素ごとに一連の直交画像基底関数に比例する成分に分解し、前記空間光変調器は画像再構成のために直交画像基底関数に対応する空間マスキング・パターンを生成するよう構成され、
    グレイスケール画像では、前記画像プロセッサは、uおよびvが前記直交画像基底関数の指数であり、xおよびyが前記粗画素の座標であるとして、粗画素ごとに前記画像f c (x,y)に関係する前記画像成分D uv を計算し、w * uv (x,y)=(w uv (x,y)+1)/2であり、wが直交画像基底関数であるとして、w * uv (x,y)に対応する空間光変調器の使用によって光強度マスクを適用し、粗画素ごとに前記光源にD uv に比例する光源駆動情報を供給することを特徴とする映像システム。
  35. 前記映像システムは映像および静止画像を表示することができることを特徴とする請求項34に記載の映像システム。
  36. 00 以外の負である画像成分Duvでは、前記それぞれのマスキング・パターンの逆及び該画像成分の絶対値が使用されることを特徴とする請求項34に記載の映像システム。
  37. カラー画像では、前記画像プロセッサは、前記グレイスケール画像における光源駆動情報を前記1組の原色光源の各色光源ごとに作成して当該各色光源に供給することを特徴とする請求項34に記載の映像システム。
  38. 00 以外の負である画像成分Dc uvでは、前記それぞれのマスキング・パターンの逆及び該画像成分の絶対値が使用されることを特徴とする請求項37に記載の映像システム。
  39. 前記光源は原色固体光源であることを特徴とする請求項34に記載の映像システム。
  40. 前記原色固体光源は、赤、緑、および青のLED光源であることを特徴とする請求項39に記載の映像システム。
  41. 前記空間光変調器は、アクティブまたはパッシブ・マトリクス液晶空間光変調器であることを特徴とする請求項34に記載の映像システム。
  42. 前記空間光変調器は、すべての粗画素に対して同じ空間マスキング・パターンを同時に生成するように構成されることを特徴とする請求項34に記載の映像システム。
  43. 前記空間光変調器は、多数の粗画素のアレイに対して同じ空間マスキング・パターンを同時に生成するように構成され、前記多数の粗画素のアレイが前記M×N粗画素のアレイのサブアレイであり、それによって、前記空間マスキング・パターンのタイミングは任意の1つのサブアレイ内の各粗画素に対して同時になるが、異なるサブアレイ内の各パターンのタイミングは異なり得ることを特徴とする請求項34に記載の映像システム。
  44. 前記空間光変調器は、粗画素ごとに空間マスキング・パターンを別々に生成するように構成され、それによって、異なる粗画素の各パターンの前記タイミングは異なり得ることを特徴とする請求項34に記載の映像システム。
  45. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、前記画像プロセッサは低次の空間周波数成分を有する前記空間マスキング・パターンに、より多くの時間を割り当て、高次の空間周波数成分を有する前記空間マスキング・パターンに、より少ない時間を割り当てることを特徴とする請求項34に記載の映像システム。
  46. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、前記画像プロセッサが少なくとも1つの高次の空間マスキング・パターンを少なくとも一度無視するように構成されることを特徴とする請求項34に記載の映像システム。
  47. 前記画像プロセッサは、少なくとも1つの高次の空間マスキング・パターンを無視する場合、無視されない空間マスキング・パターンのうちの少なくとも1つに、より多くの時間を割り当てることを特徴とする請求項46に記載の映像システム。
  48. 無視されるべき前記少なくとも1つの高次の空間マスキング・パターンはその空間マスキング・パターンの前記画像成分に応答して前記画像プロセッサによって選ばれることを特徴とする請求項46に記載の映像システム。
  49. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、前記画像プロセッサは、前記低次の空間周波数成分に対応する利用可能な画像成分のサブセットを使用することによって前記映像システムに適用される映像データ・レートを低減するように構成されることを特徴とする請求項34に記載の映像システム。
  50. 前記表示装置の任意の所与の粗画素用の画像を再生するのに使用されるべき画像成分の数は、ある一定の閾値を使用することによって前記画像プロセッサにおいて動的に決定され、前記閾値を下回ると、前記サブアレイを表示するときに前記成分が廃棄されることを特徴とする請求項43に記載の映像システム。
  51. 前記空間マスキング・パターンは低次および高次の空間周波数成分を有し、粗画素ごとの前記画像成分は、低次のマスキング・パターンに関連する画像成分に、より多くのビットを割当て、高次のマスキング・パターンに関連する画像成分により少ないビットを割り当てる量子化マトリクスによって決定されるビット精度で記述され、それによって、総合映像データ・レートを低減することを特徴とする請求項34に記載の映像システム。
JP2011517637A 2008-07-09 2009-07-09 画像構築ベース映像表示システム Expired - Fee Related JP5406290B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US7941808P 2008-07-09 2008-07-09
US61/079,418 2008-07-09
US12/499,560 2009-07-08
US12/499,560 US8970646B2 (en) 2008-07-09 2009-07-08 Image construction based video display system
PCT/US2009/050175 WO2010006216A1 (en) 2008-07-09 2009-07-09 Image construction based video display system

Publications (2)

Publication Number Publication Date
JP2011527775A JP2011527775A (ja) 2011-11-04
JP5406290B2 true JP5406290B2 (ja) 2014-02-05

Family

ID=41504831

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011517637A Expired - Fee Related JP5406290B2 (ja) 2008-07-09 2009-07-09 画像構築ベース映像表示システム

Country Status (6)

Country Link
US (1) US8970646B2 (ja)
EP (1) EP2311024B1 (ja)
JP (1) JP5406290B2 (ja)
KR (1) KR101237825B1 (ja)
CN (1) CN102187383B (ja)
WO (1) WO2010006216A1 (ja)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101709158B1 (ko) * 2008-10-08 2017-02-23 삼성디스플레이 주식회사 표시 패널
US8681185B2 (en) 2009-03-05 2014-03-25 Ostendo Technologies, Inc. Multi-pixel addressing method for video display drivers
US8854724B2 (en) 2012-03-27 2014-10-07 Ostendo Technologies, Inc. Spatio-temporal directional light modulator
US11126040B2 (en) 2012-09-30 2021-09-21 Optica Amuka (A.A.) Ltd. Electrically-tunable lenses and lens systems
ES2727498T3 (es) 2012-09-30 2019-10-16 Optica Amuka A A Ltd Lentes con potencia y alineación eléctricamente ajustable
WO2014144989A1 (en) 2013-03-15 2014-09-18 Ostendo Technologies, Inc. 3d light field displays and methods with improved viewing angle depth and resolution
CN105359431B (zh) * 2013-07-01 2017-11-28 诺基亚技术有限公司 定向光通信
US10244223B2 (en) 2014-01-10 2019-03-26 Ostendo Technologies, Inc. Methods for full parallax compressed light field 3D imaging systems
CA2939664C (en) * 2014-03-13 2022-04-12 Optica Amuka (A.A.) Ltd. Electrically-tunable lenses and lens systems
WO2015186010A1 (en) 2014-06-05 2015-12-10 Optica Amuka (A.A.) Ltd. Control of dynamic lenses
US9459747B2 (en) * 2014-12-11 2016-10-04 Microsoft Technology Licensing, Llc Touch display system with reduced moiré patterns
JP7036599B2 (ja) 2015-04-23 2022-03-15 オステンド・テクノロジーズ・インコーポレーテッド 奥行き情報を用いて全方向視差を圧縮したライトフィールドを合成する方法
EP3286916A1 (en) 2015-04-23 2018-02-28 Ostendo Technologies, Inc. Methods and apparatus for full parallax light field display systems
US10448030B2 (en) 2015-11-16 2019-10-15 Ostendo Technologies, Inc. Content adaptive light field compression
US9558554B1 (en) * 2015-12-21 2017-01-31 International Business Machines Corporation Defining basis function requirements for image reconstruction
CN105719610B (zh) * 2016-03-23 2019-08-06 北京航空航天大学 用于时域调制型液晶微显示器的幅值调制方法及装置
EP3958048A1 (en) 2016-04-17 2022-02-23 Optica Amuka (A.A.) Ltd. Liquid crystal lens with enhanced electrical drive
US10453431B2 (en) 2016-04-28 2019-10-22 Ostendo Technologies, Inc. Integrated near-far light field display systems
US11360330B2 (en) 2016-06-16 2022-06-14 Optica Amuka (A.A.) Ltd. Tunable lenses for spectacles
US10540750B2 (en) * 2016-07-07 2020-01-21 Stmicroelectronics Sa Electronic device with an upscaling processor and associated method
US20180262758A1 (en) 2017-03-08 2018-09-13 Ostendo Technologies, Inc. Compression Methods and Systems for Near-Eye Displays
US11051039B2 (en) 2017-06-02 2021-06-29 Ostendo Technologies, Inc. Methods for full parallax light field compression
US20180350038A1 (en) 2017-06-02 2018-12-06 Ostendo Technologies, Inc. Methods and Systems for Light Field Compression With Residuals
US11953764B2 (en) 2017-07-10 2024-04-09 Optica Amuka (A.A.) Ltd. Tunable lenses with enhanced performance features
US11747619B2 (en) 2017-07-10 2023-09-05 Optica Amuka (A.A.) Ltd. Virtual reality and augmented reality systems with dynamic vision correction
US10432944B2 (en) 2017-08-23 2019-10-01 Avalon Holographics Inc. Layered scene decomposition CODEC system and methods
US20190110055A1 (en) * 2017-10-11 2019-04-11 HKC Corporation Limited Picture storage method and display panel
EP3698212A4 (en) 2017-10-16 2021-07-14 Optica Amuka (A.A.) Ltd. GLASSES WITH ELECTRICALLY ADJUSTABLE LENSES CONTROLLED BY AN EXTERNAL SYSTEM
US10931956B2 (en) 2018-04-12 2021-02-23 Ostendo Technologies, Inc. Methods for MR-DIBR disparity map merging and disparity threshold determination
US11172222B2 (en) 2018-06-26 2021-11-09 Ostendo Technologies, Inc. Random access in encoded full parallax light field images
CN110047423B (zh) * 2019-04-13 2023-05-12 上海影隆光电有限公司 一种基于云平台管理及物联网控制的led显示系统
US12033588B2 (en) * 2022-03-25 2024-07-09 Meta Platforms Technologies, Llc Modulation of display resolution using macro-pixels in display device

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5156118A (ja) 1974-11-13 1976-05-17 Japan Broadcasting Corp Panerudeisupureisochi
JP2774738B2 (ja) 1992-05-27 1998-07-09 シャープ株式会社 画像符号化復元システム
US5452024A (en) * 1993-11-01 1995-09-19 Texas Instruments Incorporated DMD display system
EP0679032B1 (en) * 1994-04-20 2010-06-23 Oki Electric Industry Co., Ltd. Image encoding and decoding method and apparatus using edge systhesis and inverse wavelet transform
JP3169763B2 (ja) * 1994-05-18 2001-05-28 セイコーインスツルメンツ株式会社 液晶表示パネルの階調駆動装置
JP3112800B2 (ja) * 1994-05-30 2000-11-27 シャープ株式会社 光演算装置
US5508716A (en) * 1994-06-10 1996-04-16 In Focus Systems, Inc. Plural line liquid crystal addressing method and apparatus
JP2796619B2 (ja) 1994-12-27 1998-09-10 セイコーインスツルメンツ株式会社 液晶表示パネルの階調駆動装置
WO1996033483A1 (en) * 1995-04-18 1996-10-24 Cambridge Display Technology Limited A display
JPH09319342A (ja) * 1996-03-26 1997-12-12 Sharp Corp 液晶表示装置及び液晶表示装置の駆動方法
EP1114555A1 (en) 1999-07-20 2001-07-11 Koninklijke Philips Electronics N.V. Encoding method for the compression of a video sequence
JP3809573B2 (ja) * 2000-06-09 2006-08-16 株式会社日立製作所 表示装置
JP4978760B2 (ja) 2000-08-23 2012-07-18 ソニー株式会社 画像処理方法および画像処理装置
US6535195B1 (en) * 2000-09-05 2003-03-18 Terence John Nelson Large-area, active-backlight display
JP4166936B2 (ja) * 2000-11-02 2008-10-15 セイコーインスツル株式会社 液晶表示パネルの駆動方法
GB0215721D0 (en) 2002-07-06 2002-08-14 Koninkl Philips Electronics Nv Matrix display and method of driving a matrix display
KR20060012284A (ko) * 2003-05-12 2006-02-07 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 수동-매트릭스 디스플레이 장치와 이를 포함하는디스플레이 장치 및 다행 어드레싱 방법
JP2005148603A (ja) * 2003-11-19 2005-06-09 Seiko Instruments Inc 液晶表示パネルの駆動方法
KR100612871B1 (ko) * 2004-11-11 2006-08-14 삼성전자주식회사 액정 표시장치의 동적 캐패시턴스 보상장치 및 방법
US7404645B2 (en) * 2005-06-20 2008-07-29 Digital Display Innovations, Llc Image and light source modulation for a digital display system
US20080018624A1 (en) * 2006-07-07 2008-01-24 Honeywell International, Inc. Display for displaying compressed video based on sub-division area
CA2570090C (en) * 2006-12-06 2014-08-19 Brightside Technologies Inc. Representing and reconstructing high dynamic range images
US7623560B2 (en) * 2007-09-27 2009-11-24 Ostendo Technologies, Inc. Quantum photonic imagers and methods of fabrication thereof

Also Published As

Publication number Publication date
WO2010006216A1 (en) 2010-01-14
CN102187383B (zh) 2016-11-09
JP2011527775A (ja) 2011-11-04
US8970646B2 (en) 2015-03-03
EP2311024A1 (en) 2011-04-20
KR101237825B1 (ko) 2013-02-27
EP2311024B1 (en) 2014-09-10
KR20110026021A (ko) 2011-03-14
CN102187383A (zh) 2011-09-14
US20100007804A1 (en) 2010-01-14

Similar Documents

Publication Publication Date Title
JP5406290B2 (ja) 画像構築ベース映像表示システム
EP2404291B1 (en) Multi-pixel addressing method for video display drivers
CN108538260B (zh) 图像显示处理方法及装置、显示装置及存储介质
TWI223228B (en) Display device having improved drive circuit and method of driving same
JP2022020790A (ja) 電気光学ディスプレイを駆動する方法
US8130185B2 (en) Active matrix liquid crystal image generator
KR101413127B1 (ko) 다중의 펄스를 이용한 펄스 폭 구동 방법
US20020047824A1 (en) Active matrix liquid crystal image generator with hybrid writing scheme
KR20090126337A (ko) 광원 로컬 디밍 구동 방법, 이를 수행하기 위한 광원 장치및 이 광원 장치를 갖는 표시 장치
JP2011191770A (ja) 光学アレイにグレイ・レベルを表示するための変更重み付けビット・プレーン
JP2010509628A (ja) 液晶ディスプレイシステムおよび方法
KR101310380B1 (ko) 액정표시장치와 그 구동방법
EP3607743B1 (en) Display system, controller for a display system and method for displaying image data
WO2002069259A2 (en) A system for controlling gray scale
CN108463847A (zh) 可变占空比的显示器扫描方法和系统

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130321

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130416

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130716

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130723

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131001

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131031

R150 Certificate of patent or registration of utility model

Ref document number: 5406290

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees