JP2004032484A - 投影型画像表示装置および画像変換方法 - Google Patents
投影型画像表示装置および画像変換方法 Download PDFInfo
- Publication number
- JP2004032484A JP2004032484A JP2002187481A JP2002187481A JP2004032484A JP 2004032484 A JP2004032484 A JP 2004032484A JP 2002187481 A JP2002187481 A JP 2002187481A JP 2002187481 A JP2002187481 A JP 2002187481A JP 2004032484 A JP2004032484 A JP 2004032484A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- screen
- conversion
- projection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
【課題】垂直方向と水平方向の歪み補正ができない、斜め投射時に画面が暗くなり解像度が低下する。
【解決手段】投射型画像表示装置１は、表示手段３のスクリーン１０１に対する相対関係情報を取得する手段６と、画像変換手段２ａとを有する。画像変換手段２ａは、入力画像信号が示す元画像をそのまま投射したときに前記スクリーン１０１上の投影画像１０１ａで起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施し、変換後の画像を前記表示手段３に出力する。表示手段３に表示された表示画像３ａがスクリーン１０１に投射される。
【選択図】 図１
【解決手段】投射型画像表示装置１は、表示手段３のスクリーン１０１に対する相対関係情報を取得する手段６と、画像変換手段２ａとを有する。画像変換手段２ａは、入力画像信号が示す元画像をそのまま投射したときに前記スクリーン１０１上の投影画像１０１ａで起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施し、変換後の画像を前記表示手段３に出力する。表示手段３に表示された表示画像３ａがスクリーン１０１に投射される。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、表示手段に画像を表示し、当該表示画像をスクリーンに投射する投射型画像表示装置と、表示画像を生成する際の画像変換に好適な画像変換方法とに関する。
【０００２】
【従来の技術】
図２０に、フロントプロジェクターの基本配置を上方から見た図を示す。
これまでフロントプロジェクターという映像投影装置（以下、単にプロジェクターという）１００は、図２０に示すように、プロジェクター１００の投射光の軸と映像が映るスクリーン１０１とが、上から見るとなるべく直交するように配置されていた。これは微小世界の視点で見れば、映像自体が光という粒子の集合体で構成されており、その光が一般自然界ではまっすぐに進むという性質をもっているために考えられた、もっとも自然な配置である。
そもそもプロジェクターで投射する映像はテレビ信号やコンピュータ画面の信号である。これらの信号に重畳された映像の表示領域の形状は、テレビやコンピュータディスプレイを見れば分かるように、信号によって画素数に違いはあるものの映像全体として４：３や１６：９などの辺の比（アスペクト比）をもつ長方形である。長方形の光は、まっすぐに投射しなければ投射された映像も長方形にならず、本来の映像の形をゆがめてしまう結果になる。
このような理由から、図２０に示すように、スクリーン１０１に対して投影光軸が垂直となるようにプロジェクター１００を配置するのが基本となる。元来持っている映像の形を崩さぬように、プロジェクター１００が投射する光を遮らない位置で画像を見るのが、これまでのフロント式プロジェクターとして一般的な鑑賞スタイルであった。
【０００３】
しかしながら、最近では、この常識を覆すフロントプロジェクターが登場している。
図２１に、新しいタイプのフロントプロジェクターによって映像を投射可能な設置位置の範囲を示す。図２１に示すプロジェクター１０２は、正面または鉛直方向（以下、垂直方向という）に傾けて投射していた配置に加え、スクリーン１０１に対して横方向から画像を投射することが可能である。つまり、スクリーン１０１に対してプロジェクター１０２を垂直方向に傾けての投射と、スクリーン中心に対し水平方向にずれた横からの投射とができる。横から投射した場合に、あたかも正面から投射したときと同じアスペクト比をもった正四角形の画像をスクリーン上に映し出すことができる。
【０００４】
図２２（Ａ）に、横からの画像投影イメージを示す。また、図２２（Ｂ）に入力画像イメージを、図２２（Ｃ）にプロジェクターに内蔵されたＬＣＤ（Ｌｉｑｕｉｄ
Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）のパネル面上での画像イメージを示す。
図２２（Ａ）はスクリーン１０１に向かって左横にプロジェクター１０２を配置した場合で、横から投射していながらスクリーン１０１上の映像は正面から投射しているときと同じように見える。ちなみに本来であれば、投射された画面は図中の斜線部を含め全体が台形に歪んだように変形するはずである。これを横キーストン変形といい、横キーストン変形を補正することを横キーストン補正という。
このように横に置いたプロジェクター１０２から画像を投射して、それが正面から投射したかのようにスクリーン１０１上で映るには、あらかじめプロジェクター１０２の投射位置によって画像がどのように歪むかを計算しておかなければならない。このとき、横から投射したときに歪む形に対して作為的に逆の方向に歪ませた画像を作り、それを投射することで横方向から投射しても画像を正面から投射した時と同じように見せることができる。上記具体例で図２２（Ａ）のような投射映像を得るためには、図２２（Ｂ）の入力画像を図２２（Ｃ）のようにＬＣＤパネル面上で故意に変形して表示させ、この表示画像をスクリーン１０１に投影する。
プロジェクター１０２では、横から投射できることによって、正面という映像を見るのに最も適した鑑賞位置を避けて横から投射した場合でも、正面から投影したと同じような正四角形の投射映像を見ることできる。そのため、設置レイアウトの自由度が高く鑑賞しやすいプロジェクターが実現されている。
【０００５】
【発明が解決しようとする課題】
ところが、従来のプロジェクター１０２では、図２１で十字状に示す設置範囲に置いた場合でしか、ほぼ正面からの投射映像と同様な正四角形の映像が得られない。つまり、スクリーン１０１との距離にもよるが、正面からの投射位置を起点に水平方向の左右にそれぞれ所定距離以内、垂直方向の上下にそれぞれ所定距離以内が推奨されるプロジェクター設置位置である。プロジェクター１０２は、垂直方向および水平方向の台形歪み補正機能をもっているが、垂直方向および水平方向の台形歪み補正の一方を行うと、既に行った他方の補正がリセットされてしまう。これは、プロジェクター１０２が、垂直方向の台形歪み補正と水平方向の台形歪み補正とを独立に行うことから、画素数変換や画素の補間演算も垂直方向と水平方向で別々に行っているためである。したがって、図２１に示す推奨範囲以外から投射した画像は、スクリーン上で垂直方向または水平方向の台形歪みが残った画像となってしまう。
【０００６】
以下、従来のプロジェクター１０２において、画素数変換機能と、その機能を利用して独立に行われる垂直方向と水平方向の台形歪み補正方法とを簡単に述べ、その２つの台形歪み補正が同時できない理由を明らかにする。
通常、プロジェクターは種々の入力画像の種類や解像度に応じて、あるいはＰｉｎＰ（Ｐｉｃｔｕｒｅ ｉｎ Ｐｉｃｔｕｒｅ）機能の実現のために、画素数変換機能を具備する。プロジェクターの画素数変換のための機能として、変換後のアドレスを生成する機能と、生成したアドレスごとに、入力画像から選択した複数の画像情報から１つの画素情報を補間演算により生成する補間演算機能とがある。
【０００７】
図２３（Ａ−１）〜図２３（Ｂ−２）に、画像サイズを縮小する場合を例とした、元画像と変換後の画像とアドレス変換のイメージを示す。
画像サイズを縮小する画素数変換処理では、図２３（Ｂ−１）に示すように、元画像より小さい変換後の画像サイズに合わせて、それぞれが補間画素の位置を示すアドレス群を生成させる。
発生させたアドレスそれぞれに対応する画素データを補間演算により生成する。具体的には、例えば、発生させたアドレスごとに、対応する元画像の箇所中心に周囲の複数の原画素データを所定の規則で選択し、所定の規則で重み付けして合成することにより補間画素データを生成する。このデータ生成を繰り返して全ての補間画素データを生成した後、図２３（Ｂ−２）に示すように、生成した補間画素データ群を一括してアドレス変換する。これにより、図２３（Ａ−１）の元画像が図２３（Ａ−２）のように解像度が異なる近似画像に変換される。
【０００８】
垂直方向の台形歪み補正では、とくに図示しないが、アドレスの発生において、ラインごとのアドレス間隔を変化させることにより、スクリーン上の画像と逆に歪んだ分布形状のアドレス群を生成する。その後は、上記と同様に、補間が必要なラインで補間画素データを生成しアドレス変換することにより、垂直方向補正用の逆台形歪み画像が生成される。この逆台形歪み画像を投射すると、スクリーン上では元画像と相似した正四角形の画像が得られる。なお、垂直方向の台形歪み補正では、補間演算に使用する元画像データが１ライン内に限定されるので、１ラインごとにアドレス生成、補間画素データの生成、アドレス変換を繰り返した処理も可能である。
【０００９】
図２４（Ａ−１）〜図２４（Ｂ−２）に、横方向台形歪み補正における、元画像と変換後の画像とアドレス変換のイメージを示す。
横方向台形歪み補正では、補間アドレスの与え方を図２４（Ｂ−１）のように走査線方向に対して平行ではなく、ライン毎にある程度斜めに傾けて与えていく。このときのサンプリングポイントとなる補間画素同士の間隔も一定ではなく、非線形に変化する。また、ラインに対しても同じことが言え、ライン間の間隔も一定間隔ではない。このように斜めに補間アドレスを与え、補間した画素データを水平と垂直の画素に置き直すと、結果として、図２４（Ａ−２）の画像イメージで示したような、横キーストン補正用に投影画像と逆方向に意図的に歪ませた画像が得られる。
ただし、このような場合、処理する画像を格納しているメモリに対してアドレスが飛び飛びになるようなアクセスをすることから、従来に比べて大きいメモリバンド幅が必要になる。
【００１０】
上述した何れのアドレス生成においても、補間アドレスは画像に対して水平、垂直の両方向ともにインクリメントして順次生成する。このとき、画像サイズのみを変える単なる画素数変換では、得たい画像の解像度に応じた一定の距離で補間アドレスを水平方向に順次生成する。加えて、垂直方向の台形歪み補正の変換では、ライン内で一様なアドレス間距離をライン間で変化させる。これに対し、横方向の台形歪み補正の変換では、走査方向の傾きをラインごとに変え、かつ、１ライン内でのアドレス間隔を順次変化させる。
【００１１】
従来のプロジェクターでは水平方向と垂直方向の台形歪み補正を独立に行う際、それぞれの補正において、例えば所定単位で補正量を変化させるボタンを押し、スクリーン上の投影画像を見て補正の効果を確認し、補正が不足しているときはさらにボタンを押し、この操作を台形歪みがほぼなくなるまで行っていた。
ところが、水平方向と垂直方向の台形歪みの双方が含まれる画像は複雑に変形しているため、一般のユーザーがスクリーン上の視認に基づいて補正を行うことが困難である。また、上述したアドレス生成手法では垂直と水平のアドレスを同時に生成することが困難である。仮に垂直と水平の両方向でアドレス生成ができ両方向で台形歪み補正ができるように構成されていたとしても、水平方向の台形歪み補正と垂直方向の台形歪み補正を交互に何度も繰り返さなければならない事態が予想される。その場合、上述した順次インクリメントするアドレス生成方法では、垂直と水平の一方の補正量が一定であることを前提に他方の補正量を変化させるため、前提が崩れると最初から補間アドレスの生成自体をやり直す必要があり非常に効率が悪い。これが、従来のプロジェクターが当面する第１の課題であった。
【００１２】
このように従来のアドレス生成方法は実用的でなく、垂直方向と垂直方向で一括してアドレス生成する効率的な手法が未だ考案されていないため、従来のプロジェクターでは、垂直方向と水平方向の一方しか補正できない仕様になっているのが現状である。
【００１３】
ところで、近年プロジェクターのスペック上で高輝度化が進んでおり、新機種が出るたびに最大輝度の画像がより明るくなる傾向にある。そして、明るさがプロジェクターの商品価値（例えばグレード）を決め、購買者に選ばれる際の重要な基準の１つになっている。
しかし、正面投射したときにプロジェクターのパネル上で表示している画像領域に対して、図２２（Ｃ）や図２４（Ａ−２）のように台形歪み補正のために投射する画像を意図的に変形させると、利用できる画像領域が狭くなる。つまり、光学的に透過式のパネルを用いるようなプロジェクターの場合、画像変形によって黒領域（図では斜線部で表示）が多くなり、常に光を透過しない領域の面積が増える。このことは、光の利用効率が落ちて正面投射の時に比べて映像が暗くなり、また、本来の解像度が低下することにつながる。反射型のパネルについても同様のことが言え、黒領域は光を利用できずに映像が暗くなる。一般に、光を使用しない黒領域が全体の半分になると、明るさや解像度も全体を使っていた場合の半分になってしまう。これが、従来のプロジェクターが当面する第２の課題であった。
【００１４】
本発明の第１の目的は、垂直方向と水平方向の歪み補正が可能な構成の投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
本発明の第２の目的は、垂直方向と水平方向のアドレス生成を効率よく生成することができる投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
本発明の第３の目的は、投影する画像を表示する表示面の有効利用を図ることにより、スクリーンに投射した画像の明るさや解像度の低下を極力抑制できる投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
【００１５】
【課題を解決するための手段】
本発明の第１の観点に係る投影型画像表示装置は、上述した第１の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、入力画像信号が示す元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段とを有する。
【００１６】
本発明の第１の観点に係る画像変換方法は、上述した第１の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施すステップとを含む。
【００１７】
第１の観点では、例えば投影型画像表示装置を例として説明すると、当該装置をスクリーンに対して任意の位置に配置した場合、その設置位置に応じて、表示手段の投射位置のスクリーンに対する相対関係情報が取得され、画像変換手段に送られる。画像変換手段は、入力した相対関係情報を用いて、投影画像で起こる歪みがスクリーン上で補正されるように入力信号が示す元画像を変換し、変換後の画像を表示手段に出力する。この表示画像が投射されて、例えば、歪みのないほぼ正四角形の画像がスクリーン上に現出する。
【００１８】
本発明の第２の観点に係る投影型画像表示装置は、上述した第３の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、入力画像信号が示す元画像に対し変換を施し、変換後の画像を前記表示手段に出力する画像変換手段を有する。
【００１９】
本発明の第２の観点に係る画像変換方法は、上述した第３の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、前記元画像に対し変換を施す。
【００２０】
第２の観点では、例えば投影型画像表示装置を例として説明すると、当該装置をスクリーンに対して任意の位置に配置すると、変形した四角形の投影画像がスクリーンに映し出される。投影型画像表示装置自体が傾き、あるいは表示手段が内部で傾くと、スクリーンに対し表示手段が光軸または光軸と平行な軸を中心に回転する。このときの表示手段の傾き情報が画像変換手段に入力され、画像変換手段は、この傾き情報を用いて元画像に対する変換を施す。当該装置の配置位置によっては斜めの画像が表示手段に表示され、この変換によって、より真っ直ぐに表示画像がなることがあり、その場合、表示画像を拡大する余地が生まれる。
【００２１】
本発明の第３の観点に係る投影型画像表示装置は、上述した第３の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段を有する。
【００２２】
本発明の第３の観点に係る画像変換方法は、上述した第３の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施す。
【００２３】
第３の観点の変換では、表示画像の１つの辺を表示手段の有効表示領域の１つの辺に合わせ、表示画像の少なくとも１つの角を有効表示領域の隅に合わせるように倍率調整する。これにより、表示画像が有効表示領域をはみ出さない範囲でほぼ最大となる。
【００２４】
本発明の第４の観点に係る投影型画像表示装置は、上述した第２の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、入力画像信号が示す元画像に対して前記相対関係情報を用いて変換を施し、前記表示画像を生成する画像変換手段とを有し、前記画像変換手段が、前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを、前記相対関係情報に基づいて発生させるアドレス発生手段と、前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるマッピング手段と、前記マッピング手段から得たアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するデータ補間手段とを有する。
【００２５】
本発明の第４の観点に係る画像変換方法は、上述した第２の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを前記相対関係情報に基づいて発生させるステップと、前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるステップと前記歪み画像と前記所望の画像とのアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するステップとを含む。
【００２６】
第４の観点の変換では、第１の観点と同様に相対関係情報を取得するが、この相対関係情報をとくにアドレス生成に用いる。つまり、アドレス発生手段が、スクリーン上で起こる歪み画像のアドレスを相対関係情報に基づいて発生させる。また、マッピング手段が歪み画像の所望の画像のアドレスの対応関係を求める。データ補間手段は、アドレスの対応関係に基づく表示手段の位置に、表示画像の新たな画素情報を、元画像の複数の画素情報から所定の規則に従う補間処理により生成する。これによって表示画像が生成され、この表示画像がスクリーンに投射されると、スクリーン上では歪みがないほぼ正四角形の投影画像が現出する。
【００２７】
【発明の実施の形態】
本発明の第１および第２実施形態に係る投射型画像表示装置（プロジェクター）と、それに用いる画像変換方法の一例を、図面を参照しながら説明する。
図１に、プロジェクターの基本構成を示す。
プロジェクター１は、映像信号（入力信号）に種々の信号処理回路、各種駆動系の回路を含む回路部２を有する。回路部２は、信号処理回路の一部に画像変換手段としての画像変換部２ａを含む。プロジェクター１は、入力信号に各種信号処理を施した信号が示す元画像を画像変換部２ａにより変換して得られた表示画像３ａを表示する表示手段、たとえばＬＣＤパネル３を有する。また、プロジェクター１は、表示画像３ａを外部に投射するための光源を含む投光部４と、各種レンズを含む光学部５とを有する。ＬＣＤパネル３は透過型と反射型の何れでもよいが、いずれにしても表示画像３ａが、光学部５を通ってスクリーン１０１に投影画像１０１ａとして映し出される。
【００２８】
プロジェクター１は、ＬＣＤパネル３の表示画像とスクリーン１０１との相対的な関係を示す相対関係情報を取得する手段（以下、相対関係取得手段）６を有する。相対関係取得手段６は、外部から相対関係情報を入力する入力部、外部操作手段（ボタン等）、想定される相対関係情報を予め記憶した記憶手段（例えば、ＲＯＭ）、あるいは相対関係を自ら検出する手段など、種々の形態がある。相対関係取得手段６は、例えば、少なくとも、表示画像のスクリーン１０１までの距離と、光学部５の光軸とスクリーン面とのなす角度とを取得する。なお、相対関係取得手段６がＲＯＭ等の場合には、相対関係情報がアドレスそのものであってもよく、その場合、画像変換部２ａは、キーストン歪み補正のための画像変換手段としてアドレス生成の必要はないが、通常の画素数変換を行うためアドレス生成の機能自体は保有することが望ましい。
【００２９】
液晶などの固定画素のパネルを用いるプロジェクターでは、入力された元画像の画素数と出力画像の画素数とが異なる場合がある。そのため画素数を変換するための信号処理機能を備えている。これをスケーリング機能と呼ぶが、この処理では、本来画素情報の無い位置でのデータが必要になり、画素の補間演算が行われる。補間演算では、周辺の画素のデータを用いて目的の位置の画素データを作り出す。この機能は、例えば、イメージプロセッサと称される画像処理回路内に、スケーラと呼ばれる回路ブロックを内蔵させることにより実現される。
【００３０】
図２は、図１の回路部２に含まれる、イメージプロセッサとその周辺の回路ブロックの一構成例を示す図である。
図解した画像処理回路は、コムフィルタ（Ｃｏｍｂ Ｆｉｌｔｅｒ）２１、クロマデコーダ（Ｃｈｒｏｍａ Ｄｅｃｏｄｅｒ）２２、セレクトスイッチ（ＳＷ）２３、アナログ−ディジタル・コンバータ（Ａ／Ｄ）２４、イメージプロセッサ（Ｉｍａｇｅ Ｐｒｏｃｅｓｓｏｒ）２５、ＳＤＲＡＭ等からなる画像メモリ２６、および、中央演算処理部（ＣＰＵ）２７を有する。このうち、イメージプロセッサ２５とＣＰＵ２７が、図１に示す画像変換部２ａの機能を実現するための具体的構成例に該当する。なお、これらの画像メモリ２６やＣＰＵ２５の機能をイメージプロセッサ２５内に一体化させてもよい。
【００３１】
図解した画像処理回路は、コンポジットビデオ信号（以下、Ｖｉｄｅｏ信号）、Ｙ／Ｃ信号、ＲＧＢ信号の何れの映像信号にも対応している。Ｖｉｄｅｏ信号はコムフィルタ２１に、Ｙ／Ｃ信号はクロマデコーダ２２に、ＲＧＢ信号はセレクトスイッチ２３に、それぞれ入力される。いま、Ｖｉｄｅｏ信号が入力されている場合を考えると、コムフィルタ２１でＹ／Ｃ信号に変換され、続くクロマデコーダ２２でＹＵＶ信号に変換される。セレクトスイッチ２３によって選択された信号がＡ／Ｄ２４により変換されてディジタル信号になる。この信号がイメージプロセッサ２５に入力され、所望の信号処理が行われる。このとき、イメージプロセッサ２５の処理がＣＰＵ２７により制御され、処理中に、適宜画像メモリ２６が使用される。所望の信号処理が行われた後は、処理後の信号が表示手段、例えばＬＣＤパネル３に送られ、この信号に基づいてＬＣＤパネル３に投射する画像が表示される。
【００３２】
図３に、イメージプロセッサ内部の回路ブロックの一構成例を示す。
イメージプロセッサ２５は、ＩＰ（Ｉｎｔｅｒｌａｃｅ−Ｐｒｏｇｒｅｓｓｉｖｅ）変換部２５１、スケーラ２５２、ＣＰＵインターフェース２５３、メモリ制御部２５４、および読み出し専用メモリ（ＲＯＭ）２５５を有する。また、スケーラ２５２はアドレス発生部２５６、係数発生部２５７、およびフィルタ演算部２５８を有する。このうち、アドレス発生部２５６が本発明の“アドレス発生手段”に該当し、係数発生部２５７とフィルタ演算部２５８が本発明の“データ補間手段”の具体的構成例に該当する。
【００３３】
イメージプロセッサ２５に入力された映像信号はＩＰ変換部２５１に送られ、ここでインターレース信号がプログレッシブ化される。この処理では画像メモリ２６を用いるが、メモリインターフェースとしてのメモリ制御部２５４にＩＰ変換部２５１が接続されることによって、ＩＰ変換部２５１は画像メモリ２６との間で画像データのやり取りを行う。プログレッシブ化された信号は、スケーリング処理を行うためにスケーラ２５２に送られる。スケーラ２５２の内部では、補間を行うための位置（アドレス）をアドレス発生部２５６で発生させ、そのアドレスに対するフィルタ係数を係数発生部２５７で発生させ、発生させたフィルタ係数をフィルタ演算部２５８に供給する。フィルタ演算部２５８が、与えられたフィルタ係数を用いた補間演算処理を行い、入力した映像信号が示す元画像が、所定の大きさと形状を有したＬＣＤパネルの表示画像に変換される。この変換後の表示画像の信号が出力され、ＬＣＤパネル３に送られる。この補間演算に用いるアドレスやフィルタ係数などのデータを保持するＲＯＭ２５５がスケーラ２５２に接続され、これら一連の処理を含むイメージプロセッシングを制御するＣＰＵ２７のインターフェース２５３がＩＰ変換部２５１、スケーラ２５２およびＲＯＭ２５５に接続されている。
【００３４】
図２に図解した例において、相対関係取得手段６（図１）からの相対関係情報がＣＰＵ２７に入力される。これによって、ＣＰＵ２７に制御されながらイメージプロセッサ２５内の主にアドレス発生部２５６において、元画像を表示画像に効率よく変換するための画像データの配置アドレスが生成される。本実施形態の画像変換では、アドレス生成手法に大きな特徴の１つがある。
【００３５】
以下、アドレス生成手法の２つの実施形態を、図面を用いて詳しく説明する。なお、以下の第１実施形態と第２実施形態では、用いる装置構成の基本は今まで説明した図１から図３と同じとすることができる。この２つの実施形態の差は、装置構成を変えることによって実現できる場合がある。ただし、ここでは、取得される相対関係情報の内容と、これに応じたＣＰＵの制御プログラム内容の違いによって、それぞれの実施形態に応じたアドレス生成の制御を行っている。
また、以下の２つの実施形態では、フロントプロジェクターの表示画像を、スクリーンに対して正面の位置を基準に、垂直方向にα度上向きで、水平方向ではスクリーン正面から左にβ度回転した位置から斜めに投射する場合を主に説明する。他の方向からの投射時の補正は、ほぼ同じような考え方、方法で行えるからである。このとき入力信号としてＶＧＡ（６４０画素×４８０ライン）の解像度をもつ映像信号が入力され、これをＳＶＧＡ（８００画素×６００ライン）に解像度変換し、また斜め方向から投射する場合のスクリーン上の投影画像の歪みをとる補正も画像変換処理で行う場合について説明する。
【００３６】
［第１実施形態］
図４（Ａ）に、正面投射の場合の右手座標系におけるプロジェクター１とスクリーン１０１の位置関係を示す。また、それに対応したｘｙ平面断面図を図４（Ｂ）に、ｙｚ平面断面図を図４（Ｃ）に、それぞれ示す。このとき、プロジェクター１の位置座標を（Ｐｘ，Ｐｙ，Ｐｚ）で、スクリーン１０１上の任意の点の位置座標を（Ｓｘ，Ｓｙ，Ｓｚ）で表す。位置座標（Ｐｘ，Ｐｙ，Ｐｚ）と（Ｓｘ，Ｓｙ，Ｓｚ）により決まるスクリーン１０１とプロジェクター１の距離、および、前記斜め投射角度αとβが、前述した相対関係情報である。
図４（Ｂ）および図４（Ｃ）に示すように、正面投射ではスクリーン面と光軸が直交する。ただし、光軸はスクリーン中央ではなく下寄り位置、ここではスクリーン下辺中央付近でスクリーン面と交差している。フロントプロジェクターは机の上に配置をし、あるいは天井から吊るような配置を取る場合、レンズの中心とスクリーンの中心を結ぶ線は地面と平行にはならないように配置させるためである。これはプロジェクターを机に置いて投射したときなどに、投射する画像の下端部分が机に映ってしまわないようにするための仕様であり、光学オフセットと称される。
【００３７】
図５（Ａ）に、垂直方向にα度上向きで、水平方向については向かって左手からスクリーンに対しβ度の角度で斜めに投射する場合、右手座標系におけるプロジェクターとスクリーンの位置関係を示す。また、ｘｙ平面断面図を図５（Ｂ）に、ｙｚ平面断面図を図５（Ｃ）に、それぞれ示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向に（−β）度となる。
【００３８】
ここで、キーストン歪み補正を考えやすくするために相対的な視点を変えることを考える。図５（Ａ）〜図５（Ｃ）ではプロジェクター１の位置を動かして斜め方向から投射していたが、ここでは、相対的な位置関係を維持したままでプロジェクター１は動かさずに、スクリーン１０１を、その場で軸回転させることを想定する。
図６（Ａ）〜図６（Ｃ）に、スクリーンを軸回転させた場合の図５（Ａ）〜図５（Ｃ）と等価的な斜め投射の位置関係を示す。このとき、右手座標系で表現するとスクリーンを、その下辺（ｘ軸）を中心に直立位置からｙ方向（背面側）に（−α）度傾かせ、向かって左側の辺（ｚ軸）を中心に左回転方向にβ度回転させる。つまり、図６（Ｂ）と図６（Ｃ）に示す傾きおよび回転の角度は、図５（Ａ）〜図５（Ｃ）に示すプロジェクターの設置位置からの投射角度に対して符号が逆になる。
【００３９】
以下、図６（Ａ）〜図６（Ｃ）のように、正面の位置にプロジェクター１があり、この位置から傾いたスクリーン（以下、１０１ｔと表記）に映像を投射した場合に、投射された映像（投影画像）がどのように変形しているかを考える。
プロジェクター１が投射する光は、図５（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。本実施形態では水平と垂直の回転なので、先に水平方向に回転させた後に、次に垂直方向の回転を行う手順によって回転行列が定義される。具体的には、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【数１】
【００４０】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求めれば、傾いたスクリーン１０１ｔの平面に映る座標点が求まる。この傾いた座標点に対して、図５（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（２−１）、（２−２）、（２−３）に示す。
【数２】
【００４１】
これらの式で表される（Ｋｘ，Ｋｙ，Ｋｚ）は、図５（Ｂ）に示すようにプロジェクター１を垂直にα度上向きで、図５（Ｃ）のように水平方向にスクリーン１０１に対して左から（−β）度の角度で投射するとき、キーストン歪みによって変形された座標である。
図７（Ａ）および図７（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される元画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図６（Ｂ）および図６（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標である。上述のように（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
このように、前述した３つの式（２−１）、（２−２）、（２−３）により、任意の方向からの投射によってもたらされるキーストン歪変形座標が与えられる。
【００４２】
つぎに、出力信号（表示画像）の解像度に合わせた座標の、式（２−１）、（２−２）、（２−３）による変形座標を求める。つまり、ＳＶＧＡ出力の場合、歪む前の画像のｘ座標Ｓｘは０から７９９まで変化し、ｚ座標Ｓｚは０から５９９まで変化するが、このときのキーストン歪み後のｘ座標Ｋｘとｚ座標Ｋｚを求める。なお、ｙ座標ＳｙとＫｙは、画像がｚｘ平面にあるのでゼロである。
【００４３】
図８（Ａ）に正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図８（Ｂ）にα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（以下、歪み画像イメージ）ＰＩＫを示す。これらの図では、図示の都合上全ての画素位置のサンプルリング点を示さず、３３画素ごとに１つのドットでサンプリング点を代表させている。これらサンプリング点のアドレスについては、必要なときにＣＰＵ２７で計算させてもよいし、予め計算させておいたものを参照テーブルとしてＲＯＭ２５５に持っていてもよい。後者の場合、当該ＲＯＭ２５５が図１に示す相対関係取得手段６に該当する。
【００４４】
つぎに、図９（Ａ）のように、補正により得たい画像のイメージ（スクリーン上に実現したい投影画像の仮想のイメージ、以下、投影画像イメージという）ＰＩを、図８（Ｂ）に示す歪みによって変形した座標空間上に重ねる。これにより歪み画像イメージＰＩＫに投影画像イメージＰＩがマッピングされ、両画像のアドレスの対応関係が決まる。このとき、入力した元画像はＶＧＡだが、画像の大きさと位置を調整するために、投影画像イメージＰＩを任意の大きさ（例えば、ＳＶＧＡの大きさ）で、変形したアドレス空間（歪み画像イメージＰＩＫ）内の任意の位置に配置することができる。ただし、投影画像イメージＰＩが歪み画像イメージＰＩＫ内に完全に収まるようにしないと、次に行う補間後に画像の一部が欠けてしまう。したがって、望ましくは、所望のアスペクト比（本例では、４：３）の投影画像イメージサイズが歪み画像のアドレス空間内で最大限となることを規定しておく。すると、この投影画像イメージＰＩの位置と大きさは単なる図形問題に帰結し、例えば図９（Ａ）のような位置とサイズで、投影画像イメージＰＩと歪み画像イメージＰＩＫとの関係が一意に決まる。
【００４５】
このようなマッピング処理（アドレスの対応付け）は、歪み画像イメージＰＩＫのアドレス分布が既に前記した式（２−１）、（２−２）、（２−３）から求められているので、実際の物理メモリ（記憶資源）を用いずとも、例えばＣＰＵ２７内で仮想メモリ空間を想定して実行できる。このため、マッピング処理自体が高速な上に物理メモリとのデータのやり取りがなくて効率がよく、数回やり直しても、その処理の合計時間が画像変換全体の時間に占める割合は極めて小さい。
【００４６】
マッピング処理により得られたアドレスの対応関係は、歪み画像と、歪みがなくスクリーン上で正四角形となる所望の投影画像とのアドレス対応関係であるが、歪み画像というのは元々歪みがない正四角形のＬＣＤパネル上の画像の投影の結果である。したがって、上記アドレスの対応関係を利用して、歪みがないスクリーン上の投影画像を得るためのＬＣＤパネル３の表示画像が生成できる。
具体的な方法としては、ＳＶＧＡ出力の場合、ＬＣＤパネル３の有効表示領域の座標は８００×６００個になるが、この全ての点について、マッピングされた画像のアドレスで補間を行う。このとき８００×６００個の各点での補間のうち、図９（Ａ）に示す歪み画像イメージＰＩＫと投影画像イメージＰＩとが重なる領域の全てのアドレスでの補間では、投影画像のように画像データを再現できるようにフィルタ係数が選択され、その画像再現に必要な原画像の複数の画素データを上記フィルタ係数で重み付けして新たな画素データを合成する。合成後の画素データは、マッピング処理により求めた上記アドレス対応関係に基づいて、４：３のアスペクト比の正四角形画面であるＳＶＧＡ画面内のどの位置に配置するかを一意に決めるアドレスに割り当てられる。一方、図９（Ａ）に示す投影画像イメージＰＩ周囲の歪み画像イメージＰＩＫ内領域の補間では、画像データがない黒色画素同士の合成となり、したがって補間後も黒色の画像データがＳＶＧＡ画面内の対応位置に割り当てられる。
【００４７】
図９（Ｂ）には、このような画像変換手順により生成されたＳＶＧＡ出力画像を示す。この画像がキーストン歪み補正を行った画像である。マッピング処理により得られたアドレスの対応関係は、上述したようにイメージサイズ同士の重なる面積が最大となるように決められていることから、スクリーン上の投影画像は解像度の低下が最小に抑えられている。
図１０（Ａ）に、正面位置から水平と垂直の双方の方向にずれた位置からの画像投影イメージを示す。また、図１０（Ｂ）に入力画像イメージを、図１０（Ｃ）にＬＣＤのパネル面上での画像イメージを示す。図１０（Ａ）と図１０（Ｃ）との比較から明らかなように、補正前の投影画像形状と逆に故意に歪ませた画像をＬＣＤパネル面の有効表示領域一杯に表示すれば、解像度、明るさの低下が極力抑えられた正四角形の投影画像がスクリーン上に得られる。
【００４８】
なお、前述した図８（Ａ）および図８（Ｂ）の説明では、出力画像イメージＰＩＯＵＴを出力画像（ＳＶＧＡ画像）の大きさに合わせて６００×８００個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成した。そして、図９（Ａ）に示すように、歪み画像イメージに対し、投影画像イメージＰＩの大きさと位置を変えながら重ね、重ねた後の両画像イメージから、歪み補正に必要なアドレス対応関係を求める手法を採った。
これと同じアドレス対応関係は、次の手法でも求めることができる。
図８（Ａ）において出力画像イメージＰＩＯＵＴを元画像（ＶＧＡ画像）と同じ６４０ｘ４８０個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、図９（Ａ）では、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う。このような手法でも、結果は図９（Ａ）と同じとなる。
【００４９】
以上は、スクリーンに向かって左下位置からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。
【００５０】
図１１（Ａ−１）と図１１（Ｂ−１）に、スクリーン１０１に向かって右下位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１１（Ａ−２）と図１１（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向に（−α）度、水平方向に（−β）度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（３−１）、（３−２）、（３−３）に示す。
【数３】
【００５１】
図１２（Ａ−１）と図１２（Ｂ−１）に、スクリーン１０１に向かって左上位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１２（Ａ−２）と図１２（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向にβ度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（４−１）、（４−２）、（４−３）に示す。
【数４】
【００５２】
図１３（Ａ−１）と図１３（Ｂ−１）に、スクリーン１０１に向かって右上位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１３（Ａ−２）と図１３（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向に（−β）度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（５−１）、（５−２）、（５−３）に示す。
【数５】
【００５３】
本実施形態では、このようにキーストン歪み変形座標をスクリーンとの相対関係情報を用いた式で求め、歪みがない所望の画像とのマッピング処理によりアドレスの相対関係を求め、アドレス相対関係に基づいた補間処理によりＬＣＤ表示画面を生成する。マッピング処理は仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、例えば相対関係情報に基づいて適した式（またはアルゴリズム）をＣＰＵ２７がＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施形態にかかるプロジェクター１は、スクリーン面が見える位置なら任意の位置からの投射であっても効率良くキーストン歪み補正が可能で、設置自由度が高い。また、マッピング処理時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率が良く、出来るだけ高い解像度で明るい画像が容易に得られる。
【００５４】
［第２実施形態］
第２実施形態は、ＬＣＤパネル面内で画像をさらに大きく表示することによってパネル面の有効利用を図り、解像度と明るさを改善する手法に関する。ここでは、第１実施形態のように任意の位置に設置が可能なプロジェクターへの適用を例に、第２実施形態を説明する。
【００５５】
まず、投影画面が暗くなる原因について、簡単に説明する。
図１４の図表に、正面投射したときのＬＣＤパネルの利用面積を１００％としたときに、スクリーンに向かって左側からの水平投射角を３０度と一定として上向きの垂直投射角を大きくしたときのＬＣＤパネルの表示画面と利用面積を示す。パネルＮＯ．１が正面投射の場合、パネルＮＯ．２が垂直投射角０度の場合、パネルＮＯ．３が垂直投射角１０度の場合、パネルＮＯ．４が垂直投射角２０度の場合を示す。何れの場合も、ＬＣＤパネルの表示画像の導出を第１実施形態の手法により行い、変形画像領域の面積がＬＣＤパネルの有効表示領域内で最大となるように最適化している。垂直投射角０度の場合（パネルＮＯ．２）では、光学オフセットにより投射レンズは凡そ上半面程度だけしか利用できないが、ＬＣＤパネルの利用効率は比較的よく６９％である。
これに対し、垂直投射角を１０度にすると利用効率が６０％に低下し、垂直投射角を２０度にすると利用効率が５３％とさらに低下する。垂直投射角が大きくなるほど表示画像の変形が著しくなり、それに伴って、最初は光学オフセットのために一致していた表示画像の下辺がパネルの有効表示領域の下辺から斜めに離れていく。同様に、表示画像の上辺もパネルの有効表示領域の上辺から斜めに離れていく。また、表示画像も僅かに時計回りに軸回転し、左右の無駄な領域も増えていく。
パネルの有効表示領域内で表示画像以外の周辺部分が増えると、それだけ光が有効に利用できなくなり、スクリーン上の投射画像の明るさが低下してしまう。
【００５６】
このことは、垂直投射角を固定して水平投射角を大きくしていた場合にも当てはまり、画像の変形の仕方は異なるが、水平投射角度が大きいほどＬＣＤ画面の利用効率が低下する。
つまり、第１実施形態のように任意の位置にプロジェクターを設置した場合、正面投射の設置場所から任意の方向に設置場所が離れれば離れるだけスクリーン上の投影画像が暗くなってしまう。
【００５７】
第１実施形態の手法で斜め方向から投射した場合には、図１０（Ａ）に示すように斜めの位置からプロジェクター１をスクリーン１０１に対して向ける際に、正面投射位置からスクリーンを基点にプロジェクターを“水平方向の一方（この場合、右向き）にまわす”動作と、“垂直方向の一方（この場合、上向き）に傾ける”という２つの動作を行っていた。このことは空間的に見て、２つの軸に対する回転動作として考えられる。
【００５８】
第２実施形態では、投射画像の明るさおよび解像度が低下しない、あるいは当該低下を出来るだけ抑制するために、さらに動作回転軸を１つ増やす。具体的には、ＬＣＤパネルを、その光軸または光軸に平行な軸を中心に傾ける動作（以下、ひねり動作という）を行う。ひねり動作は、プロジェクターの筺体を傾けてもよいし、筺体内部でＬＣＤパネルを傾ける機構を有し、これを利用してもよい。また、物理的に筺体やパネルを傾けなくとも、アドレスマップ上で歪み画像イメージを軸回転させることによってもひねり動作と同じ効果が得られる。
【００５９】
図１５（Ａ）に、ひねり動作を含む３つの軸の回転動作を使って設置したプロジェクターの斜め投射の様子を示す。図１５（Ａ）には、比較参考のため第１実施形態における２つの軸の回転動作を使って設置した斜め投射の様子も示している。また、図１５（Ｂ）には、ひねり動作を加えた場合に最適化されたＬＣＤパネルの変形画面を示し、図１５（Ｃ）にひねり動作を使わない第１実施形態のＬＣＤパネルの変形画像を示す。
ひねり動作以外の２つの回転動作の角度は第１実施形態と同じとし、ひねり動作の回転角度は、光学オフセットの有無、光学オフセット量などに依存するので一概には言えないが、望ましくは、図１５（Ａ）のスクリーン上の投影画像のように、投影画像の下辺がほぼ水平となるようにするとよい。このような基準を設けると、ひねり動作の回転角度をどれ位にしたら良いかが容易に確認でき、好ましい。
さらに、スクリーンに向かって左下から投射する本例の場合、表示画像をパネル内で最大になるようにするには表示画像の左上の角をＬＣＤパネルの有効表示領域の左上の隅に合わせ、画像が欠けない範囲で出来るだけ拡大することが望ましい。ＬＣＤパネルの有効表示領域の隅に合わせる表示画像の角を、左上からの投射では左下の角、右下からの投射では右上の角、右上からの投射では右下の角にする。
【００６０】
第２実施形態に係るプロジェクターの構成自体は第１実施形態と同じとしてよく、図１〜図３が第２実施形態でもそのまま適用できる。ただし、この場合、ＲＯＭ２５５に格納されている式あるいはＣＰＵ２７の制御アルゴリズムが第１実施形態と異なる。
ひねり動作の回転角度は相対関係情報の１つであり、図１に示す相対関係取得手段６によって取得される。ここで、“取得”には相対関係取得手段６が自ら検出する場合、外部操作により入力されたものを取得する場合、あるいは予め取得してＲＯＭ内に保持する場合がある。相対関係取得手段６は、第１実施形態と同様、スクリーンとＬＣＤパネルの距離や角度を取得する機能を備える。
【００６１】
つぎに、ひねり動作の回転角度が取得されたときに歪み画像のアドレスマップのイメージ（歪み画像イメージ）を生成する手法、および歪み画像イメージに対し所望の投影画像のアドレスマップのイメージを、上述した角と隅の合わせを行いながら最適化する手法を説明する。
歪み画像イメージを構成するキーストン歪み変形座標（Ｋｘ，Ｋｙ，Ｋｚ）の生成は、第１実施形態と同じように右手座標系で考える。ひねり動作以外の２つの回転角度αおよびβは第１実施形態と同様に定義され、図４（Ａ）〜図５（Ｃ）と、第１実施形態で行った、それらの図の説明は第２実施形態でもそのまま適用される。
また、原点を軸として、スクリーンを水平と垂直に回転動作させて図５（Ａ）〜図５（Ｃ）と等価な状況を想定した図６（Ａ）〜図６（Ｃ）もそのまま適用され、第２実施形態においても、この状況を仮定する。
プロジェクター１が投射する光は、図５（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。
【００６２】
ただし、第２実施形態では、スクリーン上で光軸が交わるキーストン補正後の投影画像の下辺が水平になるまでひねり動作を行うことから、光軸を含む当該下辺が水平を保つ必要がある。これは、第１実施形態と回転の順序を逆にして、先に垂直方向の回転を行い、次に水平方向の回転を行うことで実現できる。このような手順によって定義される回転行列は、第１実施形態の回転行列と異なる。具体的に、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【数６】
【００６３】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求めれば、傾いたスクリーン１０１ｔの平面に映る座標点が求まる。この傾いた座標点に対して、図５（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（７−１）、（７−２）、（７−３）に示す。
【数７】
【００６４】
図１６（Ａ）および図１６（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される元画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図６（Ｂ）および図６（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標、（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
図１６（Ｂ）に示すキーストン歪み変形座標の分布形状は、ひねり動作を反映して、その下辺がｘ軸と重なっている。このように、前述した３つの式（７−１）、（７−２）、（７−３）により、任意の方向からの投射によってもたらされ、ひねり動作後のキーストン歪変形座標が与えられる。
【００６５】
以後は、第１実施形態と同様な手法によってアドレスの対応関係を求め、補間演算を行うことにより、ＬＣＤパネルの表示画像を生成する。
【００６６】
図１７（Ａ）は、正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図１７（Ｂ）はα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（歪み画像イメージ）ＰＩＫを示す。
図１８（Ａ）は、補正により得たい投影画像イメージＰＩを歪みによって変形した座標空間上に重ねたときの図である。
第２実施形態では、ひねり動作によって歪み画像イメージＰＩＫの下辺を凡そ水平にしたことによって、第１実施形態と比較して投影画像イメージＰＩをより大きな倍率にして重ねることができる。そのため、図１８（Ｂ）に示すように、ＬＣＤパネル面の表示画像周囲の無駄な領域が削減され、その分、スクリーン上の投影画像が明るくなる。また、投影画像イメージＰＩをマッピングする際の倍率を大きくできるので、解像度が向上する。
【００６７】
なお、第１実施形態と同様に、出力画像イメージＰＩＯＵＴを元画像と同じ個数のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う手法でも、結果は図１８（Ａ）と同じとなる。
【００６８】
以上は、スクリーンに向かって左下位置からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。したがって、図１１（Ａ−１）〜図１３（Ｂ−２）が第２実施形態においてもそのまま適用される。
以下、右下からの投射の場合の式を（８−１）、（８−２）、（８−３）に、左上からの投射の場合の式を（９−１）、（９−２）、（９−３）に、右上からの投射の場合の式（１０−１）、（１０−２）、（１０−３）に、それぞれ示す。
【数８】
【数９】
【数１０】
これらの式は、ひねり動作を考慮した行列式（６）に基づいて導出される。
【００６９】
本実施形態では、キーストン歪み変形座標をスクリーンとの相対関係情報（ひねり動作の回転角度を含む）を用いた式で求め、歪みがない所望の画像とのマッピング処理によりアドレスの相対関係を求め、アドレス相対関係に基づいた補間処理によりＬＣＤ表示画面を生成する。マッピング処理は仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、例えば相対関係情報に基づいて適した式（またはアルゴリズム）をＣＰＵ２７がＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施形態にかかるプロジェクターは、スクリーン面が見える位置なら任意の位置からの投射であっても効率良くキーストン歪み補正が可能で、設置自由度が高い。また、マッピング処理時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率が良く、出来るだけ高い解像度で明るい画像が容易に得られる。
【００７０】
とくに、第２実施形態のプロジェクターで投射した場合のスクリーン上の投影画像の明るさと解像度は、第１実施形態より向上する。
図１９の図表に、ひねり動作の有無によるパネル表示画面の違いを示す。スクリーンに向かって左下からの投射であり、その水平投射角は３０度で一定である。上向きの垂直投射角を０度から２０度まで変化させている。
この図表から明らかなように、ひねり動作がない場合は、垂直投射角が増加するにしたがってパネルの有効利用面積が低下する。ところが、ひねり動作を行うことによって、僅かではあるが、逆にパネルの有効利用面積が増加する。また、垂直投射角０度の場合でも、ひねりによる効果があることが分かる。
【００７１】
【発明の効果】
本発明に係る投射型画像表示装置および画像変換方法によれば、投射する画像を表示する表示手段とスクリーンとの相対関係情報に基づいて歪み補正がなされるため、水平方向と垂直方向の歪み補正が一括して容易に補正しやすい。
本発明の他の構成によれば、スクリーンに対し表示手段が光軸または光軸と平行な軸を中心に回転したときの傾き情報に基づいて歪み補正する。このため、表示手段に表示された歪み補正画像（表示画像）を表示手段に対してより真っ直ぐにできる。これによって表示画像を表示手段内で拡大する余地が生まれ、投影画像の明るさや解像度を向上させることが可能となる。
本発明の別の他の構成によれば、表示画像が有効表示領域をはみ出さない範囲でほぼ最大となるような倍率調整のための表示画像の変形、移動が容易となる。本発明の別の他の構成によれば、相対関係情報に基づいて歪み画像のアドレスを生成し、そのアドレス空間に所望の画像をマッピングさせ、両者のアドレスの対応関係に基づいてデータ補間位置が決められる。アドレスのマッピングは、仮想メモリ空間で行うことができ物理メモリを必要以上に消費しない。また、水平と垂直それぞれでアドレス対応関係が一括して決められるので、非常に効率的なアドレス生成が可能である。しかも、マッピング時に画像の倍率調整が同時にでき、得たい画像の最大化の指定が容易である。アドレスの対応関係に基づく表示手段内位置でデータ補間を行うと、これにより生成された表示画像が表示手段内でほぼ最大の大きさとなり、これによって投影画像の明るさや解像度を容易に向上させることが可能となる。
【図面の簡単な説明】
【図１】本発明の第１および第２実施形態にかかるプロジェクターの基本構成を示す図である。
【図２】図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図３】イメージプロセッサ内部の回路の一構成例を示すブロック図である。
【図４】（Ａ）は正面投射の場合の右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｘｙ平面断面図、（Ｃ）はｙｚ平面断面図である。
【図５】（Ａ）は垂直投射角α度、水平投射角β度の場合に、右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｘｙ平面断面図、（Ｃ）はｙｚ平面断面図である。
【図６】（Ａ）〜（Ｃ）は、スクリーンを軸回転させた場合の図５（Ａ）〜図５（Ｃ）と等価的な斜め投射の位置関係を示す図である。
【図７】（Ａ）および（Ｂ）は座標関係についてまとめて示す図である。
【図８】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はキーストン変形による歪み画像イメージ図である。
【図９】（Ａ）はマッピング処理時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１０】（Ａ）は正面位置から水平と垂直の双方の方向にずれた位置からの斜め投射時の図、（Ｂ）は入力画像イメージ、（Ｃ）はＬＣＤのパネル面上での画像イメージである。
【図１１】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右下からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１２】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって左上からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１３】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右上からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１４】正面投射したときのＬＣＤパネルの利用面積と垂直投射角との関係を示す図表である。
【図１５】（Ａ）はひねり動作有りと無しの斜め投射時の図、（Ｂ）は入力画像イメージ図、（Ｃ）はＬＣＤのパネル面上での画像イメージ図である。
【図１６】（Ａ）および（Ｂ）はひねり動作有りのときの座標関係についてまとめて示す図である。
【図１７】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はひねり動作有りのときのキーストン変形による歪み画像イメージ図である。
【図１８】（Ａ）はマッピング処理時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１９】ひねり動作の有無によるパネル表示画面の有効利用率の違いを示す図表である。
【図２０】一般的な、フロントプロジェクターの基本配置を上方から見た図である。
【図２１】従来の横方向投射可能なフロントプロジェクターにおいて、映像を投射可能な設置位置の範囲を示す図である。
【図２２】（Ａ）は横からの画像投影時の図、（Ｂ）は入力画像イメージを示す図、（Ｃ）はＬＣＤパネル面上での画像イメージ図である。
【図２３】（Ａ−１）〜（Ｂ−２）は、従来の手法によって画像サイズを縮小する場合に、元画像と変換後の画像とアドレス変換のイメージを示す図である。
【図２４】（Ａ−１）〜（Ｂ−２）は、従来の手法による横方向台形歪み補正における、元画像と変換後の画像とアドレス変換のイメージを示す図である。
【符号の説明】
１‥‥プロジェクター、２ａ‥‥画像変換部、２‥‥回路部、３‥‥ＬＣＤパネル、３ａ‥‥表示画像、４‥‥投光部、５‥‥光学部、６‥‥相対関係取得手段、２１‥‥コムフィルタ、２２‥‥クロマデコーダ、２３‥‥セレクトスイッチ、２４‥‥アナログ−ディジタル・コンバータ、２５‥‥イメージプロセッサ、２６‥‥画像メモリ、１０１，１０１ｔ‥‥スクリーン、１０１ａ‥‥投影画像、２５１‥‥ＩＰ変換部、２５２‥‥スケーラ、２５３‥‥ＣＰＵインターフェース、２５４‥‥メモリ制御部、２５６‥‥アドレス発生部、２５７‥‥係数発生部、２５８‥‥フィルタ演算部、ＰＩ‥‥投影画像イメージ、ＰＩＫ‥‥画像イメージ、ＰＩＯＵＴ‥‥出力画像イメージ、α，β‥‥投射角度
【発明の属する技術分野】
本発明は、表示手段に画像を表示し、当該表示画像をスクリーンに投射する投射型画像表示装置と、表示画像を生成する際の画像変換に好適な画像変換方法とに関する。
【０００２】
【従来の技術】
図２０に、フロントプロジェクターの基本配置を上方から見た図を示す。
これまでフロントプロジェクターという映像投影装置（以下、単にプロジェクターという）１００は、図２０に示すように、プロジェクター１００の投射光の軸と映像が映るスクリーン１０１とが、上から見るとなるべく直交するように配置されていた。これは微小世界の視点で見れば、映像自体が光という粒子の集合体で構成されており、その光が一般自然界ではまっすぐに進むという性質をもっているために考えられた、もっとも自然な配置である。
そもそもプロジェクターで投射する映像はテレビ信号やコンピュータ画面の信号である。これらの信号に重畳された映像の表示領域の形状は、テレビやコンピュータディスプレイを見れば分かるように、信号によって画素数に違いはあるものの映像全体として４：３や１６：９などの辺の比（アスペクト比）をもつ長方形である。長方形の光は、まっすぐに投射しなければ投射された映像も長方形にならず、本来の映像の形をゆがめてしまう結果になる。
このような理由から、図２０に示すように、スクリーン１０１に対して投影光軸が垂直となるようにプロジェクター１００を配置するのが基本となる。元来持っている映像の形を崩さぬように、プロジェクター１００が投射する光を遮らない位置で画像を見るのが、これまでのフロント式プロジェクターとして一般的な鑑賞スタイルであった。
【０００３】
しかしながら、最近では、この常識を覆すフロントプロジェクターが登場している。
図２１に、新しいタイプのフロントプロジェクターによって映像を投射可能な設置位置の範囲を示す。図２１に示すプロジェクター１０２は、正面または鉛直方向（以下、垂直方向という）に傾けて投射していた配置に加え、スクリーン１０１に対して横方向から画像を投射することが可能である。つまり、スクリーン１０１に対してプロジェクター１０２を垂直方向に傾けての投射と、スクリーン中心に対し水平方向にずれた横からの投射とができる。横から投射した場合に、あたかも正面から投射したときと同じアスペクト比をもった正四角形の画像をスクリーン上に映し出すことができる。
【０００４】
図２２（Ａ）に、横からの画像投影イメージを示す。また、図２２（Ｂ）に入力画像イメージを、図２２（Ｃ）にプロジェクターに内蔵されたＬＣＤ（Ｌｉｑｕｉｄ
Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）のパネル面上での画像イメージを示す。
図２２（Ａ）はスクリーン１０１に向かって左横にプロジェクター１０２を配置した場合で、横から投射していながらスクリーン１０１上の映像は正面から投射しているときと同じように見える。ちなみに本来であれば、投射された画面は図中の斜線部を含め全体が台形に歪んだように変形するはずである。これを横キーストン変形といい、横キーストン変形を補正することを横キーストン補正という。
このように横に置いたプロジェクター１０２から画像を投射して、それが正面から投射したかのようにスクリーン１０１上で映るには、あらかじめプロジェクター１０２の投射位置によって画像がどのように歪むかを計算しておかなければならない。このとき、横から投射したときに歪む形に対して作為的に逆の方向に歪ませた画像を作り、それを投射することで横方向から投射しても画像を正面から投射した時と同じように見せることができる。上記具体例で図２２（Ａ）のような投射映像を得るためには、図２２（Ｂ）の入力画像を図２２（Ｃ）のようにＬＣＤパネル面上で故意に変形して表示させ、この表示画像をスクリーン１０１に投影する。
プロジェクター１０２では、横から投射できることによって、正面という映像を見るのに最も適した鑑賞位置を避けて横から投射した場合でも、正面から投影したと同じような正四角形の投射映像を見ることできる。そのため、設置レイアウトの自由度が高く鑑賞しやすいプロジェクターが実現されている。
【０００５】
【発明が解決しようとする課題】
ところが、従来のプロジェクター１０２では、図２１で十字状に示す設置範囲に置いた場合でしか、ほぼ正面からの投射映像と同様な正四角形の映像が得られない。つまり、スクリーン１０１との距離にもよるが、正面からの投射位置を起点に水平方向の左右にそれぞれ所定距離以内、垂直方向の上下にそれぞれ所定距離以内が推奨されるプロジェクター設置位置である。プロジェクター１０２は、垂直方向および水平方向の台形歪み補正機能をもっているが、垂直方向および水平方向の台形歪み補正の一方を行うと、既に行った他方の補正がリセットされてしまう。これは、プロジェクター１０２が、垂直方向の台形歪み補正と水平方向の台形歪み補正とを独立に行うことから、画素数変換や画素の補間演算も垂直方向と水平方向で別々に行っているためである。したがって、図２１に示す推奨範囲以外から投射した画像は、スクリーン上で垂直方向または水平方向の台形歪みが残った画像となってしまう。
【０００６】
以下、従来のプロジェクター１０２において、画素数変換機能と、その機能を利用して独立に行われる垂直方向と水平方向の台形歪み補正方法とを簡単に述べ、その２つの台形歪み補正が同時できない理由を明らかにする。
通常、プロジェクターは種々の入力画像の種類や解像度に応じて、あるいはＰｉｎＰ（Ｐｉｃｔｕｒｅ ｉｎ Ｐｉｃｔｕｒｅ）機能の実現のために、画素数変換機能を具備する。プロジェクターの画素数変換のための機能として、変換後のアドレスを生成する機能と、生成したアドレスごとに、入力画像から選択した複数の画像情報から１つの画素情報を補間演算により生成する補間演算機能とがある。
【０００７】
図２３（Ａ−１）〜図２３（Ｂ−２）に、画像サイズを縮小する場合を例とした、元画像と変換後の画像とアドレス変換のイメージを示す。
画像サイズを縮小する画素数変換処理では、図２３（Ｂ−１）に示すように、元画像より小さい変換後の画像サイズに合わせて、それぞれが補間画素の位置を示すアドレス群を生成させる。
発生させたアドレスそれぞれに対応する画素データを補間演算により生成する。具体的には、例えば、発生させたアドレスごとに、対応する元画像の箇所中心に周囲の複数の原画素データを所定の規則で選択し、所定の規則で重み付けして合成することにより補間画素データを生成する。このデータ生成を繰り返して全ての補間画素データを生成した後、図２３（Ｂ−２）に示すように、生成した補間画素データ群を一括してアドレス変換する。これにより、図２３（Ａ−１）の元画像が図２３（Ａ−２）のように解像度が異なる近似画像に変換される。
【０００８】
垂直方向の台形歪み補正では、とくに図示しないが、アドレスの発生において、ラインごとのアドレス間隔を変化させることにより、スクリーン上の画像と逆に歪んだ分布形状のアドレス群を生成する。その後は、上記と同様に、補間が必要なラインで補間画素データを生成しアドレス変換することにより、垂直方向補正用の逆台形歪み画像が生成される。この逆台形歪み画像を投射すると、スクリーン上では元画像と相似した正四角形の画像が得られる。なお、垂直方向の台形歪み補正では、補間演算に使用する元画像データが１ライン内に限定されるので、１ラインごとにアドレス生成、補間画素データの生成、アドレス変換を繰り返した処理も可能である。
【０００９】
図２４（Ａ−１）〜図２４（Ｂ−２）に、横方向台形歪み補正における、元画像と変換後の画像とアドレス変換のイメージを示す。
横方向台形歪み補正では、補間アドレスの与え方を図２４（Ｂ−１）のように走査線方向に対して平行ではなく、ライン毎にある程度斜めに傾けて与えていく。このときのサンプリングポイントとなる補間画素同士の間隔も一定ではなく、非線形に変化する。また、ラインに対しても同じことが言え、ライン間の間隔も一定間隔ではない。このように斜めに補間アドレスを与え、補間した画素データを水平と垂直の画素に置き直すと、結果として、図２４（Ａ−２）の画像イメージで示したような、横キーストン補正用に投影画像と逆方向に意図的に歪ませた画像が得られる。
ただし、このような場合、処理する画像を格納しているメモリに対してアドレスが飛び飛びになるようなアクセスをすることから、従来に比べて大きいメモリバンド幅が必要になる。
【００１０】
上述した何れのアドレス生成においても、補間アドレスは画像に対して水平、垂直の両方向ともにインクリメントして順次生成する。このとき、画像サイズのみを変える単なる画素数変換では、得たい画像の解像度に応じた一定の距離で補間アドレスを水平方向に順次生成する。加えて、垂直方向の台形歪み補正の変換では、ライン内で一様なアドレス間距離をライン間で変化させる。これに対し、横方向の台形歪み補正の変換では、走査方向の傾きをラインごとに変え、かつ、１ライン内でのアドレス間隔を順次変化させる。
【００１１】
従来のプロジェクターでは水平方向と垂直方向の台形歪み補正を独立に行う際、それぞれの補正において、例えば所定単位で補正量を変化させるボタンを押し、スクリーン上の投影画像を見て補正の効果を確認し、補正が不足しているときはさらにボタンを押し、この操作を台形歪みがほぼなくなるまで行っていた。
ところが、水平方向と垂直方向の台形歪みの双方が含まれる画像は複雑に変形しているため、一般のユーザーがスクリーン上の視認に基づいて補正を行うことが困難である。また、上述したアドレス生成手法では垂直と水平のアドレスを同時に生成することが困難である。仮に垂直と水平の両方向でアドレス生成ができ両方向で台形歪み補正ができるように構成されていたとしても、水平方向の台形歪み補正と垂直方向の台形歪み補正を交互に何度も繰り返さなければならない事態が予想される。その場合、上述した順次インクリメントするアドレス生成方法では、垂直と水平の一方の補正量が一定であることを前提に他方の補正量を変化させるため、前提が崩れると最初から補間アドレスの生成自体をやり直す必要があり非常に効率が悪い。これが、従来のプロジェクターが当面する第１の課題であった。
【００１２】
このように従来のアドレス生成方法は実用的でなく、垂直方向と垂直方向で一括してアドレス生成する効率的な手法が未だ考案されていないため、従来のプロジェクターでは、垂直方向と水平方向の一方しか補正できない仕様になっているのが現状である。
【００１３】
ところで、近年プロジェクターのスペック上で高輝度化が進んでおり、新機種が出るたびに最大輝度の画像がより明るくなる傾向にある。そして、明るさがプロジェクターの商品価値（例えばグレード）を決め、購買者に選ばれる際の重要な基準の１つになっている。
しかし、正面投射したときにプロジェクターのパネル上で表示している画像領域に対して、図２２（Ｃ）や図２４（Ａ−２）のように台形歪み補正のために投射する画像を意図的に変形させると、利用できる画像領域が狭くなる。つまり、光学的に透過式のパネルを用いるようなプロジェクターの場合、画像変形によって黒領域（図では斜線部で表示）が多くなり、常に光を透過しない領域の面積が増える。このことは、光の利用効率が落ちて正面投射の時に比べて映像が暗くなり、また、本来の解像度が低下することにつながる。反射型のパネルについても同様のことが言え、黒領域は光を利用できずに映像が暗くなる。一般に、光を使用しない黒領域が全体の半分になると、明るさや解像度も全体を使っていた場合の半分になってしまう。これが、従来のプロジェクターが当面する第２の課題であった。
【００１４】
本発明の第１の目的は、垂直方向と水平方向の歪み補正が可能な構成の投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
本発明の第２の目的は、垂直方向と水平方向のアドレス生成を効率よく生成することができる投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
本発明の第３の目的は、投影する画像を表示する表示面の有効利用を図ることにより、スクリーンに投射した画像の明るさや解像度の低下を極力抑制できる投影型画像表示装置と、それに用いる画像変換方法を提供することにある。
【００１５】
【課題を解決するための手段】
本発明の第１の観点に係る投影型画像表示装置は、上述した第１の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、入力画像信号が示す元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段とを有する。
【００１６】
本発明の第１の観点に係る画像変換方法は、上述した第１の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施すステップとを含む。
【００１７】
第１の観点では、例えば投影型画像表示装置を例として説明すると、当該装置をスクリーンに対して任意の位置に配置した場合、その設置位置に応じて、表示手段の投射位置のスクリーンに対する相対関係情報が取得され、画像変換手段に送られる。画像変換手段は、入力した相対関係情報を用いて、投影画像で起こる歪みがスクリーン上で補正されるように入力信号が示す元画像を変換し、変換後の画像を表示手段に出力する。この表示画像が投射されて、例えば、歪みのないほぼ正四角形の画像がスクリーン上に現出する。
【００１８】
本発明の第２の観点に係る投影型画像表示装置は、上述した第３の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、入力画像信号が示す元画像に対し変換を施し、変換後の画像を前記表示手段に出力する画像変換手段を有する。
【００１９】
本発明の第２の観点に係る画像変換方法は、上述した第３の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、前記元画像に対し変換を施す。
【００２０】
第２の観点では、例えば投影型画像表示装置を例として説明すると、当該装置をスクリーンに対して任意の位置に配置すると、変形した四角形の投影画像がスクリーンに映し出される。投影型画像表示装置自体が傾き、あるいは表示手段が内部で傾くと、スクリーンに対し表示手段が光軸または光軸と平行な軸を中心に回転する。このときの表示手段の傾き情報が画像変換手段に入力され、画像変換手段は、この傾き情報を用いて元画像に対する変換を施す。当該装置の配置位置によっては斜めの画像が表示手段に表示され、この変換によって、より真っ直ぐに表示画像がなることがあり、その場合、表示画像を拡大する余地が生まれる。
【００２１】
本発明の第３の観点に係る投影型画像表示装置は、上述した第３の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段を有する。
【００２２】
本発明の第３の観点に係る画像変換方法は、上述した第３の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施す。
【００２３】
第３の観点の変換では、表示画像の１つの辺を表示手段の有効表示領域の１つの辺に合わせ、表示画像の少なくとも１つの角を有効表示領域の隅に合わせるように倍率調整する。これにより、表示画像が有効表示領域をはみ出さない範囲でほぼ最大となる。
【００２４】
本発明の第４の観点に係る投影型画像表示装置は、上述した第２の目的を達成するためのものであり、表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、入力画像信号が示す元画像に対して前記相対関係情報を用いて変換を施し、前記表示画像を生成する画像変換手段とを有し、前記画像変換手段が、前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを、前記相対関係情報に基づいて発生させるアドレス発生手段と、前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるマッピング手段と、前記マッピング手段から得たアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するデータ補間手段とを有する。
【００２５】
本発明の第４の観点に係る画像変換方法は、上述した第２の目的を達成するためのものであり、スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを前記相対関係情報に基づいて発生させるステップと、前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるステップと前記歪み画像と前記所望の画像とのアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するステップとを含む。
【００２６】
第４の観点の変換では、第１の観点と同様に相対関係情報を取得するが、この相対関係情報をとくにアドレス生成に用いる。つまり、アドレス発生手段が、スクリーン上で起こる歪み画像のアドレスを相対関係情報に基づいて発生させる。また、マッピング手段が歪み画像の所望の画像のアドレスの対応関係を求める。データ補間手段は、アドレスの対応関係に基づく表示手段の位置に、表示画像の新たな画素情報を、元画像の複数の画素情報から所定の規則に従う補間処理により生成する。これによって表示画像が生成され、この表示画像がスクリーンに投射されると、スクリーン上では歪みがないほぼ正四角形の投影画像が現出する。
【００２７】
【発明の実施の形態】
本発明の第１および第２実施形態に係る投射型画像表示装置（プロジェクター）と、それに用いる画像変換方法の一例を、図面を参照しながら説明する。
図１に、プロジェクターの基本構成を示す。
プロジェクター１は、映像信号（入力信号）に種々の信号処理回路、各種駆動系の回路を含む回路部２を有する。回路部２は、信号処理回路の一部に画像変換手段としての画像変換部２ａを含む。プロジェクター１は、入力信号に各種信号処理を施した信号が示す元画像を画像変換部２ａにより変換して得られた表示画像３ａを表示する表示手段、たとえばＬＣＤパネル３を有する。また、プロジェクター１は、表示画像３ａを外部に投射するための光源を含む投光部４と、各種レンズを含む光学部５とを有する。ＬＣＤパネル３は透過型と反射型の何れでもよいが、いずれにしても表示画像３ａが、光学部５を通ってスクリーン１０１に投影画像１０１ａとして映し出される。
【００２８】
プロジェクター１は、ＬＣＤパネル３の表示画像とスクリーン１０１との相対的な関係を示す相対関係情報を取得する手段（以下、相対関係取得手段）６を有する。相対関係取得手段６は、外部から相対関係情報を入力する入力部、外部操作手段（ボタン等）、想定される相対関係情報を予め記憶した記憶手段（例えば、ＲＯＭ）、あるいは相対関係を自ら検出する手段など、種々の形態がある。相対関係取得手段６は、例えば、少なくとも、表示画像のスクリーン１０１までの距離と、光学部５の光軸とスクリーン面とのなす角度とを取得する。なお、相対関係取得手段６がＲＯＭ等の場合には、相対関係情報がアドレスそのものであってもよく、その場合、画像変換部２ａは、キーストン歪み補正のための画像変換手段としてアドレス生成の必要はないが、通常の画素数変換を行うためアドレス生成の機能自体は保有することが望ましい。
【００２９】
液晶などの固定画素のパネルを用いるプロジェクターでは、入力された元画像の画素数と出力画像の画素数とが異なる場合がある。そのため画素数を変換するための信号処理機能を備えている。これをスケーリング機能と呼ぶが、この処理では、本来画素情報の無い位置でのデータが必要になり、画素の補間演算が行われる。補間演算では、周辺の画素のデータを用いて目的の位置の画素データを作り出す。この機能は、例えば、イメージプロセッサと称される画像処理回路内に、スケーラと呼ばれる回路ブロックを内蔵させることにより実現される。
【００３０】
図２は、図１の回路部２に含まれる、イメージプロセッサとその周辺の回路ブロックの一構成例を示す図である。
図解した画像処理回路は、コムフィルタ（Ｃｏｍｂ Ｆｉｌｔｅｒ）２１、クロマデコーダ（Ｃｈｒｏｍａ Ｄｅｃｏｄｅｒ）２２、セレクトスイッチ（ＳＷ）２３、アナログ−ディジタル・コンバータ（Ａ／Ｄ）２４、イメージプロセッサ（Ｉｍａｇｅ Ｐｒｏｃｅｓｓｏｒ）２５、ＳＤＲＡＭ等からなる画像メモリ２６、および、中央演算処理部（ＣＰＵ）２７を有する。このうち、イメージプロセッサ２５とＣＰＵ２７が、図１に示す画像変換部２ａの機能を実現するための具体的構成例に該当する。なお、これらの画像メモリ２６やＣＰＵ２５の機能をイメージプロセッサ２５内に一体化させてもよい。
【００３１】
図解した画像処理回路は、コンポジットビデオ信号（以下、Ｖｉｄｅｏ信号）、Ｙ／Ｃ信号、ＲＧＢ信号の何れの映像信号にも対応している。Ｖｉｄｅｏ信号はコムフィルタ２１に、Ｙ／Ｃ信号はクロマデコーダ２２に、ＲＧＢ信号はセレクトスイッチ２３に、それぞれ入力される。いま、Ｖｉｄｅｏ信号が入力されている場合を考えると、コムフィルタ２１でＹ／Ｃ信号に変換され、続くクロマデコーダ２２でＹＵＶ信号に変換される。セレクトスイッチ２３によって選択された信号がＡ／Ｄ２４により変換されてディジタル信号になる。この信号がイメージプロセッサ２５に入力され、所望の信号処理が行われる。このとき、イメージプロセッサ２５の処理がＣＰＵ２７により制御され、処理中に、適宜画像メモリ２６が使用される。所望の信号処理が行われた後は、処理後の信号が表示手段、例えばＬＣＤパネル３に送られ、この信号に基づいてＬＣＤパネル３に投射する画像が表示される。
【００３２】
図３に、イメージプロセッサ内部の回路ブロックの一構成例を示す。
イメージプロセッサ２５は、ＩＰ（Ｉｎｔｅｒｌａｃｅ−Ｐｒｏｇｒｅｓｓｉｖｅ）変換部２５１、スケーラ２５２、ＣＰＵインターフェース２５３、メモリ制御部２５４、および読み出し専用メモリ（ＲＯＭ）２５５を有する。また、スケーラ２５２はアドレス発生部２５６、係数発生部２５７、およびフィルタ演算部２５８を有する。このうち、アドレス発生部２５６が本発明の“アドレス発生手段”に該当し、係数発生部２５７とフィルタ演算部２５８が本発明の“データ補間手段”の具体的構成例に該当する。
【００３３】
イメージプロセッサ２５に入力された映像信号はＩＰ変換部２５１に送られ、ここでインターレース信号がプログレッシブ化される。この処理では画像メモリ２６を用いるが、メモリインターフェースとしてのメモリ制御部２５４にＩＰ変換部２５１が接続されることによって、ＩＰ変換部２５１は画像メモリ２６との間で画像データのやり取りを行う。プログレッシブ化された信号は、スケーリング処理を行うためにスケーラ２５２に送られる。スケーラ２５２の内部では、補間を行うための位置（アドレス）をアドレス発生部２５６で発生させ、そのアドレスに対するフィルタ係数を係数発生部２５７で発生させ、発生させたフィルタ係数をフィルタ演算部２５８に供給する。フィルタ演算部２５８が、与えられたフィルタ係数を用いた補間演算処理を行い、入力した映像信号が示す元画像が、所定の大きさと形状を有したＬＣＤパネルの表示画像に変換される。この変換後の表示画像の信号が出力され、ＬＣＤパネル３に送られる。この補間演算に用いるアドレスやフィルタ係数などのデータを保持するＲＯＭ２５５がスケーラ２５２に接続され、これら一連の処理を含むイメージプロセッシングを制御するＣＰＵ２７のインターフェース２５３がＩＰ変換部２５１、スケーラ２５２およびＲＯＭ２５５に接続されている。
【００３４】
図２に図解した例において、相対関係取得手段６（図１）からの相対関係情報がＣＰＵ２７に入力される。これによって、ＣＰＵ２７に制御されながらイメージプロセッサ２５内の主にアドレス発生部２５６において、元画像を表示画像に効率よく変換するための画像データの配置アドレスが生成される。本実施形態の画像変換では、アドレス生成手法に大きな特徴の１つがある。
【００３５】
以下、アドレス生成手法の２つの実施形態を、図面を用いて詳しく説明する。なお、以下の第１実施形態と第２実施形態では、用いる装置構成の基本は今まで説明した図１から図３と同じとすることができる。この２つの実施形態の差は、装置構成を変えることによって実現できる場合がある。ただし、ここでは、取得される相対関係情報の内容と、これに応じたＣＰＵの制御プログラム内容の違いによって、それぞれの実施形態に応じたアドレス生成の制御を行っている。
また、以下の２つの実施形態では、フロントプロジェクターの表示画像を、スクリーンに対して正面の位置を基準に、垂直方向にα度上向きで、水平方向ではスクリーン正面から左にβ度回転した位置から斜めに投射する場合を主に説明する。他の方向からの投射時の補正は、ほぼ同じような考え方、方法で行えるからである。このとき入力信号としてＶＧＡ（６４０画素×４８０ライン）の解像度をもつ映像信号が入力され、これをＳＶＧＡ（８００画素×６００ライン）に解像度変換し、また斜め方向から投射する場合のスクリーン上の投影画像の歪みをとる補正も画像変換処理で行う場合について説明する。
【００３６】
［第１実施形態］
図４（Ａ）に、正面投射の場合の右手座標系におけるプロジェクター１とスクリーン１０１の位置関係を示す。また、それに対応したｘｙ平面断面図を図４（Ｂ）に、ｙｚ平面断面図を図４（Ｃ）に、それぞれ示す。このとき、プロジェクター１の位置座標を（Ｐｘ，Ｐｙ，Ｐｚ）で、スクリーン１０１上の任意の点の位置座標を（Ｓｘ，Ｓｙ，Ｓｚ）で表す。位置座標（Ｐｘ，Ｐｙ，Ｐｚ）と（Ｓｘ，Ｓｙ，Ｓｚ）により決まるスクリーン１０１とプロジェクター１の距離、および、前記斜め投射角度αとβが、前述した相対関係情報である。
図４（Ｂ）および図４（Ｃ）に示すように、正面投射ではスクリーン面と光軸が直交する。ただし、光軸はスクリーン中央ではなく下寄り位置、ここではスクリーン下辺中央付近でスクリーン面と交差している。フロントプロジェクターは机の上に配置をし、あるいは天井から吊るような配置を取る場合、レンズの中心とスクリーンの中心を結ぶ線は地面と平行にはならないように配置させるためである。これはプロジェクターを机に置いて投射したときなどに、投射する画像の下端部分が机に映ってしまわないようにするための仕様であり、光学オフセットと称される。
【００３７】
図５（Ａ）に、垂直方向にα度上向きで、水平方向については向かって左手からスクリーンに対しβ度の角度で斜めに投射する場合、右手座標系におけるプロジェクターとスクリーンの位置関係を示す。また、ｘｙ平面断面図を図５（Ｂ）に、ｙｚ平面断面図を図５（Ｃ）に、それぞれ示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向に（−β）度となる。
【００３８】
ここで、キーストン歪み補正を考えやすくするために相対的な視点を変えることを考える。図５（Ａ）〜図５（Ｃ）ではプロジェクター１の位置を動かして斜め方向から投射していたが、ここでは、相対的な位置関係を維持したままでプロジェクター１は動かさずに、スクリーン１０１を、その場で軸回転させることを想定する。
図６（Ａ）〜図６（Ｃ）に、スクリーンを軸回転させた場合の図５（Ａ）〜図５（Ｃ）と等価的な斜め投射の位置関係を示す。このとき、右手座標系で表現するとスクリーンを、その下辺（ｘ軸）を中心に直立位置からｙ方向（背面側）に（−α）度傾かせ、向かって左側の辺（ｚ軸）を中心に左回転方向にβ度回転させる。つまり、図６（Ｂ）と図６（Ｃ）に示す傾きおよび回転の角度は、図５（Ａ）〜図５（Ｃ）に示すプロジェクターの設置位置からの投射角度に対して符号が逆になる。
【００３９】
以下、図６（Ａ）〜図６（Ｃ）のように、正面の位置にプロジェクター１があり、この位置から傾いたスクリーン（以下、１０１ｔと表記）に映像を投射した場合に、投射された映像（投影画像）がどのように変形しているかを考える。
プロジェクター１が投射する光は、図５（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。本実施形態では水平と垂直の回転なので、先に水平方向に回転させた後に、次に垂直方向の回転を行う手順によって回転行列が定義される。具体的には、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【数１】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求めれば、傾いたスクリーン１０１ｔの平面に映る座標点が求まる。この傾いた座標点に対して、図５（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（２−１）、（２−２）、（２−３）に示す。
【数２】
これらの式で表される（Ｋｘ，Ｋｙ，Ｋｚ）は、図５（Ｂ）に示すようにプロジェクター１を垂直にα度上向きで、図５（Ｃ）のように水平方向にスクリーン１０１に対して左から（−β）度の角度で投射するとき、キーストン歪みによって変形された座標である。
図７（Ａ）および図７（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される元画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図６（Ｂ）および図６（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標である。上述のように（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
このように、前述した３つの式（２−１）、（２−２）、（２−３）により、任意の方向からの投射によってもたらされるキーストン歪変形座標が与えられる。
【００４２】
つぎに、出力信号（表示画像）の解像度に合わせた座標の、式（２−１）、（２−２）、（２−３）による変形座標を求める。つまり、ＳＶＧＡ出力の場合、歪む前の画像のｘ座標Ｓｘは０から７９９まで変化し、ｚ座標Ｓｚは０から５９９まで変化するが、このときのキーストン歪み後のｘ座標Ｋｘとｚ座標Ｋｚを求める。なお、ｙ座標ＳｙとＫｙは、画像がｚｘ平面にあるのでゼロである。
【００４３】
図８（Ａ）に正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図８（Ｂ）にα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（以下、歪み画像イメージ）ＰＩＫを示す。これらの図では、図示の都合上全ての画素位置のサンプルリング点を示さず、３３画素ごとに１つのドットでサンプリング点を代表させている。これらサンプリング点のアドレスについては、必要なときにＣＰＵ２７で計算させてもよいし、予め計算させておいたものを参照テーブルとしてＲＯＭ２５５に持っていてもよい。後者の場合、当該ＲＯＭ２５５が図１に示す相対関係取得手段６に該当する。
【００４４】
つぎに、図９（Ａ）のように、補正により得たい画像のイメージ（スクリーン上に実現したい投影画像の仮想のイメージ、以下、投影画像イメージという）ＰＩを、図８（Ｂ）に示す歪みによって変形した座標空間上に重ねる。これにより歪み画像イメージＰＩＫに投影画像イメージＰＩがマッピングされ、両画像のアドレスの対応関係が決まる。このとき、入力した元画像はＶＧＡだが、画像の大きさと位置を調整するために、投影画像イメージＰＩを任意の大きさ（例えば、ＳＶＧＡの大きさ）で、変形したアドレス空間（歪み画像イメージＰＩＫ）内の任意の位置に配置することができる。ただし、投影画像イメージＰＩが歪み画像イメージＰＩＫ内に完全に収まるようにしないと、次に行う補間後に画像の一部が欠けてしまう。したがって、望ましくは、所望のアスペクト比（本例では、４：３）の投影画像イメージサイズが歪み画像のアドレス空間内で最大限となることを規定しておく。すると、この投影画像イメージＰＩの位置と大きさは単なる図形問題に帰結し、例えば図９（Ａ）のような位置とサイズで、投影画像イメージＰＩと歪み画像イメージＰＩＫとの関係が一意に決まる。
【００４５】
このようなマッピング処理（アドレスの対応付け）は、歪み画像イメージＰＩＫのアドレス分布が既に前記した式（２−１）、（２−２）、（２−３）から求められているので、実際の物理メモリ（記憶資源）を用いずとも、例えばＣＰＵ２７内で仮想メモリ空間を想定して実行できる。このため、マッピング処理自体が高速な上に物理メモリとのデータのやり取りがなくて効率がよく、数回やり直しても、その処理の合計時間が画像変換全体の時間に占める割合は極めて小さい。
【００４６】
マッピング処理により得られたアドレスの対応関係は、歪み画像と、歪みがなくスクリーン上で正四角形となる所望の投影画像とのアドレス対応関係であるが、歪み画像というのは元々歪みがない正四角形のＬＣＤパネル上の画像の投影の結果である。したがって、上記アドレスの対応関係を利用して、歪みがないスクリーン上の投影画像を得るためのＬＣＤパネル３の表示画像が生成できる。
具体的な方法としては、ＳＶＧＡ出力の場合、ＬＣＤパネル３の有効表示領域の座標は８００×６００個になるが、この全ての点について、マッピングされた画像のアドレスで補間を行う。このとき８００×６００個の各点での補間のうち、図９（Ａ）に示す歪み画像イメージＰＩＫと投影画像イメージＰＩとが重なる領域の全てのアドレスでの補間では、投影画像のように画像データを再現できるようにフィルタ係数が選択され、その画像再現に必要な原画像の複数の画素データを上記フィルタ係数で重み付けして新たな画素データを合成する。合成後の画素データは、マッピング処理により求めた上記アドレス対応関係に基づいて、４：３のアスペクト比の正四角形画面であるＳＶＧＡ画面内のどの位置に配置するかを一意に決めるアドレスに割り当てられる。一方、図９（Ａ）に示す投影画像イメージＰＩ周囲の歪み画像イメージＰＩＫ内領域の補間では、画像データがない黒色画素同士の合成となり、したがって補間後も黒色の画像データがＳＶＧＡ画面内の対応位置に割り当てられる。
【００４７】
図９（Ｂ）には、このような画像変換手順により生成されたＳＶＧＡ出力画像を示す。この画像がキーストン歪み補正を行った画像である。マッピング処理により得られたアドレスの対応関係は、上述したようにイメージサイズ同士の重なる面積が最大となるように決められていることから、スクリーン上の投影画像は解像度の低下が最小に抑えられている。
図１０（Ａ）に、正面位置から水平と垂直の双方の方向にずれた位置からの画像投影イメージを示す。また、図１０（Ｂ）に入力画像イメージを、図１０（Ｃ）にＬＣＤのパネル面上での画像イメージを示す。図１０（Ａ）と図１０（Ｃ）との比較から明らかなように、補正前の投影画像形状と逆に故意に歪ませた画像をＬＣＤパネル面の有効表示領域一杯に表示すれば、解像度、明るさの低下が極力抑えられた正四角形の投影画像がスクリーン上に得られる。
【００４８】
なお、前述した図８（Ａ）および図８（Ｂ）の説明では、出力画像イメージＰＩＯＵＴを出力画像（ＳＶＧＡ画像）の大きさに合わせて６００×８００個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成した。そして、図９（Ａ）に示すように、歪み画像イメージに対し、投影画像イメージＰＩの大きさと位置を変えながら重ね、重ねた後の両画像イメージから、歪み補正に必要なアドレス対応関係を求める手法を採った。
これと同じアドレス対応関係は、次の手法でも求めることができる。
図８（Ａ）において出力画像イメージＰＩＯＵＴを元画像（ＶＧＡ画像）と同じ６４０ｘ４８０個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、図９（Ａ）では、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う。このような手法でも、結果は図９（Ａ）と同じとなる。
【００４９】
以上は、スクリーンに向かって左下位置からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。
【００５０】
図１１（Ａ−１）と図１１（Ｂ−１）に、スクリーン１０１に向かって右下位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１１（Ａ−２）と図１１（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向に（−α）度、水平方向に（−β）度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（３−１）、（３−２）、（３−３）に示す。
【数３】
図１２（Ａ−１）と図１２（Ｂ−１）に、スクリーン１０１に向かって左上位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１２（Ａ−２）と図１２（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向にβ度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（４−１）、（４−２）、（４−３）に示す。
【数４】
図１３（Ａ−１）と図１３（Ｂ−１）に、スクリーン１０１に向かって右上位置からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面断面図とｙｚ平面断面図を、図１３（Ａ−２）と図１３（Ｂ−２）に示す。このとき、右手座標系の回転角度は垂直方向にα度、水平方向に（−β）度となる。
また、傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、次式（５−１）、（５−２）、（５−３）に示す。
【数５】
本実施形態では、このようにキーストン歪み変形座標をスクリーンとの相対関係情報を用いた式で求め、歪みがない所望の画像とのマッピング処理によりアドレスの相対関係を求め、アドレス相対関係に基づいた補間処理によりＬＣＤ表示画面を生成する。マッピング処理は仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、例えば相対関係情報に基づいて適した式（またはアルゴリズム）をＣＰＵ２７がＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施形態にかかるプロジェクター１は、スクリーン面が見える位置なら任意の位置からの投射であっても効率良くキーストン歪み補正が可能で、設置自由度が高い。また、マッピング処理時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率が良く、出来るだけ高い解像度で明るい画像が容易に得られる。
【００５４】
［第２実施形態］
第２実施形態は、ＬＣＤパネル面内で画像をさらに大きく表示することによってパネル面の有効利用を図り、解像度と明るさを改善する手法に関する。ここでは、第１実施形態のように任意の位置に設置が可能なプロジェクターへの適用を例に、第２実施形態を説明する。
【００５５】
まず、投影画面が暗くなる原因について、簡単に説明する。
図１４の図表に、正面投射したときのＬＣＤパネルの利用面積を１００％としたときに、スクリーンに向かって左側からの水平投射角を３０度と一定として上向きの垂直投射角を大きくしたときのＬＣＤパネルの表示画面と利用面積を示す。パネルＮＯ．１が正面投射の場合、パネルＮＯ．２が垂直投射角０度の場合、パネルＮＯ．３が垂直投射角１０度の場合、パネルＮＯ．４が垂直投射角２０度の場合を示す。何れの場合も、ＬＣＤパネルの表示画像の導出を第１実施形態の手法により行い、変形画像領域の面積がＬＣＤパネルの有効表示領域内で最大となるように最適化している。垂直投射角０度の場合（パネルＮＯ．２）では、光学オフセットにより投射レンズは凡そ上半面程度だけしか利用できないが、ＬＣＤパネルの利用効率は比較的よく６９％である。
これに対し、垂直投射角を１０度にすると利用効率が６０％に低下し、垂直投射角を２０度にすると利用効率が５３％とさらに低下する。垂直投射角が大きくなるほど表示画像の変形が著しくなり、それに伴って、最初は光学オフセットのために一致していた表示画像の下辺がパネルの有効表示領域の下辺から斜めに離れていく。同様に、表示画像の上辺もパネルの有効表示領域の上辺から斜めに離れていく。また、表示画像も僅かに時計回りに軸回転し、左右の無駄な領域も増えていく。
パネルの有効表示領域内で表示画像以外の周辺部分が増えると、それだけ光が有効に利用できなくなり、スクリーン上の投射画像の明るさが低下してしまう。
【００５６】
このことは、垂直投射角を固定して水平投射角を大きくしていた場合にも当てはまり、画像の変形の仕方は異なるが、水平投射角度が大きいほどＬＣＤ画面の利用効率が低下する。
つまり、第１実施形態のように任意の位置にプロジェクターを設置した場合、正面投射の設置場所から任意の方向に設置場所が離れれば離れるだけスクリーン上の投影画像が暗くなってしまう。
【００５７】
第１実施形態の手法で斜め方向から投射した場合には、図１０（Ａ）に示すように斜めの位置からプロジェクター１をスクリーン１０１に対して向ける際に、正面投射位置からスクリーンを基点にプロジェクターを“水平方向の一方（この場合、右向き）にまわす”動作と、“垂直方向の一方（この場合、上向き）に傾ける”という２つの動作を行っていた。このことは空間的に見て、２つの軸に対する回転動作として考えられる。
【００５８】
第２実施形態では、投射画像の明るさおよび解像度が低下しない、あるいは当該低下を出来るだけ抑制するために、さらに動作回転軸を１つ増やす。具体的には、ＬＣＤパネルを、その光軸または光軸に平行な軸を中心に傾ける動作（以下、ひねり動作という）を行う。ひねり動作は、プロジェクターの筺体を傾けてもよいし、筺体内部でＬＣＤパネルを傾ける機構を有し、これを利用してもよい。また、物理的に筺体やパネルを傾けなくとも、アドレスマップ上で歪み画像イメージを軸回転させることによってもひねり動作と同じ効果が得られる。
【００５９】
図１５（Ａ）に、ひねり動作を含む３つの軸の回転動作を使って設置したプロジェクターの斜め投射の様子を示す。図１５（Ａ）には、比較参考のため第１実施形態における２つの軸の回転動作を使って設置した斜め投射の様子も示している。また、図１５（Ｂ）には、ひねり動作を加えた場合に最適化されたＬＣＤパネルの変形画面を示し、図１５（Ｃ）にひねり動作を使わない第１実施形態のＬＣＤパネルの変形画像を示す。
ひねり動作以外の２つの回転動作の角度は第１実施形態と同じとし、ひねり動作の回転角度は、光学オフセットの有無、光学オフセット量などに依存するので一概には言えないが、望ましくは、図１５（Ａ）のスクリーン上の投影画像のように、投影画像の下辺がほぼ水平となるようにするとよい。このような基準を設けると、ひねり動作の回転角度をどれ位にしたら良いかが容易に確認でき、好ましい。
さらに、スクリーンに向かって左下から投射する本例の場合、表示画像をパネル内で最大になるようにするには表示画像の左上の角をＬＣＤパネルの有効表示領域の左上の隅に合わせ、画像が欠けない範囲で出来るだけ拡大することが望ましい。ＬＣＤパネルの有効表示領域の隅に合わせる表示画像の角を、左上からの投射では左下の角、右下からの投射では右上の角、右上からの投射では右下の角にする。
【００６０】
第２実施形態に係るプロジェクターの構成自体は第１実施形態と同じとしてよく、図１〜図３が第２実施形態でもそのまま適用できる。ただし、この場合、ＲＯＭ２５５に格納されている式あるいはＣＰＵ２７の制御アルゴリズムが第１実施形態と異なる。
ひねり動作の回転角度は相対関係情報の１つであり、図１に示す相対関係取得手段６によって取得される。ここで、“取得”には相対関係取得手段６が自ら検出する場合、外部操作により入力されたものを取得する場合、あるいは予め取得してＲＯＭ内に保持する場合がある。相対関係取得手段６は、第１実施形態と同様、スクリーンとＬＣＤパネルの距離や角度を取得する機能を備える。
【００６１】
つぎに、ひねり動作の回転角度が取得されたときに歪み画像のアドレスマップのイメージ（歪み画像イメージ）を生成する手法、および歪み画像イメージに対し所望の投影画像のアドレスマップのイメージを、上述した角と隅の合わせを行いながら最適化する手法を説明する。
歪み画像イメージを構成するキーストン歪み変形座標（Ｋｘ，Ｋｙ，Ｋｚ）の生成は、第１実施形態と同じように右手座標系で考える。ひねり動作以外の２つの回転角度αおよびβは第１実施形態と同様に定義され、図４（Ａ）〜図５（Ｃ）と、第１実施形態で行った、それらの図の説明は第２実施形態でもそのまま適用される。
また、原点を軸として、スクリーンを水平と垂直に回転動作させて図５（Ａ）〜図５（Ｃ）と等価な状況を想定した図６（Ａ）〜図６（Ｃ）もそのまま適用され、第２実施形態においても、この状況を仮定する。
プロジェクター１が投射する光は、図５（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。
【００６２】
ただし、第２実施形態では、スクリーン上で光軸が交わるキーストン補正後の投影画像の下辺が水平になるまでひねり動作を行うことから、光軸を含む当該下辺が水平を保つ必要がある。これは、第１実施形態と回転の順序を逆にして、先に垂直方向の回転を行い、次に水平方向の回転を行うことで実現できる。このような手順によって定義される回転行列は、第１実施形態の回転行列と異なる。具体的に、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【数６】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求めれば、傾いたスクリーン１０１ｔの平面に映る座標点が求まる。この傾いた座標点に対して、図５（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（７−１）、（７−２）、（７−３）に示す。
【数７】
図１６（Ａ）および図１６（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される元画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図６（Ｂ）および図６（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標、（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
図１６（Ｂ）に示すキーストン歪み変形座標の分布形状は、ひねり動作を反映して、その下辺がｘ軸と重なっている。このように、前述した３つの式（７−１）、（７−２）、（７−３）により、任意の方向からの投射によってもたらされ、ひねり動作後のキーストン歪変形座標が与えられる。
【００６５】
以後は、第１実施形態と同様な手法によってアドレスの対応関係を求め、補間演算を行うことにより、ＬＣＤパネルの表示画像を生成する。
【００６６】
図１７（Ａ）は、正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図１７（Ｂ）はα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（歪み画像イメージ）ＰＩＫを示す。
図１８（Ａ）は、補正により得たい投影画像イメージＰＩを歪みによって変形した座標空間上に重ねたときの図である。
第２実施形態では、ひねり動作によって歪み画像イメージＰＩＫの下辺を凡そ水平にしたことによって、第１実施形態と比較して投影画像イメージＰＩをより大きな倍率にして重ねることができる。そのため、図１８（Ｂ）に示すように、ＬＣＤパネル面の表示画像周囲の無駄な領域が削減され、その分、スクリーン上の投影画像が明るくなる。また、投影画像イメージＰＩをマッピングする際の倍率を大きくできるので、解像度が向上する。
【００６７】
なお、第１実施形態と同様に、出力画像イメージＰＩＯＵＴを元画像と同じ個数のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う手法でも、結果は図１８（Ａ）と同じとなる。
【００６８】
以上は、スクリーンに向かって左下位置からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。したがって、図１１（Ａ−１）〜図１３（Ｂ−２）が第２実施形態においてもそのまま適用される。
以下、右下からの投射の場合の式を（８−１）、（８−２）、（８−３）に、左上からの投射の場合の式を（９−１）、（９−２）、（９−３）に、右上からの投射の場合の式（１０−１）、（１０−２）、（１０−３）に、それぞれ示す。
【数８】
【００６９】
本実施形態では、キーストン歪み変形座標をスクリーンとの相対関係情報（ひねり動作の回転角度を含む）を用いた式で求め、歪みがない所望の画像とのマッピング処理によりアドレスの相対関係を求め、アドレス相対関係に基づいた補間処理によりＬＣＤ表示画面を生成する。マッピング処理は仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、例えば相対関係情報に基づいて適した式（またはアルゴリズム）をＣＰＵ２７がＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施形態にかかるプロジェクターは、スクリーン面が見える位置なら任意の位置からの投射であっても効率良くキーストン歪み補正が可能で、設置自由度が高い。また、マッピング処理時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率が良く、出来るだけ高い解像度で明るい画像が容易に得られる。
【００７０】
とくに、第２実施形態のプロジェクターで投射した場合のスクリーン上の投影画像の明るさと解像度は、第１実施形態より向上する。
図１９の図表に、ひねり動作の有無によるパネル表示画面の違いを示す。スクリーンに向かって左下からの投射であり、その水平投射角は３０度で一定である。上向きの垂直投射角を０度から２０度まで変化させている。
この図表から明らかなように、ひねり動作がない場合は、垂直投射角が増加するにしたがってパネルの有効利用面積が低下する。ところが、ひねり動作を行うことによって、僅かではあるが、逆にパネルの有効利用面積が増加する。また、垂直投射角０度の場合でも、ひねりによる効果があることが分かる。
【００７１】
【発明の効果】
本発明に係る投射型画像表示装置および画像変換方法によれば、投射する画像を表示する表示手段とスクリーンとの相対関係情報に基づいて歪み補正がなされるため、水平方向と垂直方向の歪み補正が一括して容易に補正しやすい。
本発明の他の構成によれば、スクリーンに対し表示手段が光軸または光軸と平行な軸を中心に回転したときの傾き情報に基づいて歪み補正する。このため、表示手段に表示された歪み補正画像（表示画像）を表示手段に対してより真っ直ぐにできる。これによって表示画像を表示手段内で拡大する余地が生まれ、投影画像の明るさや解像度を向上させることが可能となる。
本発明の別の他の構成によれば、表示画像が有効表示領域をはみ出さない範囲でほぼ最大となるような倍率調整のための表示画像の変形、移動が容易となる。本発明の別の他の構成によれば、相対関係情報に基づいて歪み画像のアドレスを生成し、そのアドレス空間に所望の画像をマッピングさせ、両者のアドレスの対応関係に基づいてデータ補間位置が決められる。アドレスのマッピングは、仮想メモリ空間で行うことができ物理メモリを必要以上に消費しない。また、水平と垂直それぞれでアドレス対応関係が一括して決められるので、非常に効率的なアドレス生成が可能である。しかも、マッピング時に画像の倍率調整が同時にでき、得たい画像の最大化の指定が容易である。アドレスの対応関係に基づく表示手段内位置でデータ補間を行うと、これにより生成された表示画像が表示手段内でほぼ最大の大きさとなり、これによって投影画像の明るさや解像度を容易に向上させることが可能となる。
【図面の簡単な説明】
【図１】本発明の第１および第２実施形態にかかるプロジェクターの基本構成を示す図である。
【図２】図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図３】イメージプロセッサ内部の回路の一構成例を示すブロック図である。
【図４】（Ａ）は正面投射の場合の右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｘｙ平面断面図、（Ｃ）はｙｚ平面断面図である。
【図５】（Ａ）は垂直投射角α度、水平投射角β度の場合に、右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｘｙ平面断面図、（Ｃ）はｙｚ平面断面図である。
【図６】（Ａ）〜（Ｃ）は、スクリーンを軸回転させた場合の図５（Ａ）〜図５（Ｃ）と等価的な斜め投射の位置関係を示す図である。
【図７】（Ａ）および（Ｂ）は座標関係についてまとめて示す図である。
【図８】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はキーストン変形による歪み画像イメージ図である。
【図９】（Ａ）はマッピング処理時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１０】（Ａ）は正面位置から水平と垂直の双方の方向にずれた位置からの斜め投射時の図、（Ｂ）は入力画像イメージ、（Ｃ）はＬＣＤのパネル面上での画像イメージである。
【図１１】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右下からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１２】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって左上からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１３】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右上からの投射時における右手座標系のｘｙ平面断面図とｙｚ平面断面図、およびそれらの等価断面図である。
【図１４】正面投射したときのＬＣＤパネルの利用面積と垂直投射角との関係を示す図表である。
【図１５】（Ａ）はひねり動作有りと無しの斜め投射時の図、（Ｂ）は入力画像イメージ図、（Ｃ）はＬＣＤのパネル面上での画像イメージ図である。
【図１６】（Ａ）および（Ｂ）はひねり動作有りのときの座標関係についてまとめて示す図である。
【図１７】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はひねり動作有りのときのキーストン変形による歪み画像イメージ図である。
【図１８】（Ａ）はマッピング処理時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１９】ひねり動作の有無によるパネル表示画面の有効利用率の違いを示す図表である。
【図２０】一般的な、フロントプロジェクターの基本配置を上方から見た図である。
【図２１】従来の横方向投射可能なフロントプロジェクターにおいて、映像を投射可能な設置位置の範囲を示す図である。
【図２２】（Ａ）は横からの画像投影時の図、（Ｂ）は入力画像イメージを示す図、（Ｃ）はＬＣＤパネル面上での画像イメージ図である。
【図２３】（Ａ−１）〜（Ｂ−２）は、従来の手法によって画像サイズを縮小する場合に、元画像と変換後の画像とアドレス変換のイメージを示す図である。
【図２４】（Ａ−１）〜（Ｂ−２）は、従来の手法による横方向台形歪み補正における、元画像と変換後の画像とアドレス変換のイメージを示す図である。
【符号の説明】
１‥‥プロジェクター、２ａ‥‥画像変換部、２‥‥回路部、３‥‥ＬＣＤパネル、３ａ‥‥表示画像、４‥‥投光部、５‥‥光学部、６‥‥相対関係取得手段、２１‥‥コムフィルタ、２２‥‥クロマデコーダ、２３‥‥セレクトスイッチ、２４‥‥アナログ−ディジタル・コンバータ、２５‥‥イメージプロセッサ、２６‥‥画像メモリ、１０１，１０１ｔ‥‥スクリーン、１０１ａ‥‥投影画像、２５１‥‥ＩＰ変換部、２５２‥‥スケーラ、２５３‥‥ＣＰＵインターフェース、２５４‥‥メモリ制御部、２５６‥‥アドレス発生部、２５７‥‥係数発生部、２５８‥‥フィルタ演算部、ＰＩ‥‥投影画像イメージ、ＰＩＫ‥‥画像イメージ、ＰＩＯＵＴ‥‥出力画像イメージ、α，β‥‥投射角度
Claims (16)
- 表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、
前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、
入力画像信号が示す元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段と、
を有する投射型画像表示装置。 - 前記相対関係情報が、前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を含む
請求項１に記載の投影型画像表示装置。 - 前記画像変換手段は、前記表示手段を傾けることによって前記投影画像の一辺がほぼ水平になったときの前記表示手段の前記傾き情報を用いて前記変換を行う
請求項２に記載の投射型画像表示装置。 - 前記画像変換手段は、前記投影画像に含まれる、前記スクリーンに対し水平方向で斜めの位置から画像を投射したときの横方向台形歪み成分と、垂直方向で斜めの位置から画像を投射したときの縦方向台形歪み成分とを前記変換によって一括して補正する
請求項１に記載の投射型画像表示装置。 - 前記画像変換手段が、
前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときの前記スクリーン上で起こる歪み画像のアドレスを、前記相対関係情報に基づいて発生させるアドレス発生手段と、
前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるマッピング手段と、
前記マッピング手段から得たアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するデータ補間手段と、
を有する請求項１に記載の投射型画像表示装置。 - 前記表示画像変換手段は、前記変換により、前記表示手段の有効表示領域内に収まる範囲で前記表示画像が最大となる倍率調整と前記歪み補正を一括して行う
請求項１に記載の投射型画像表示装置。 - 前記画像変換手段は、前記表示画像の１つの角を前記表示手段の有効表示領域の１つの隅に合わせ、かつ、前記表示画像の１つの辺を前記有効表示領域の１つの辺に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように前記倍率調整を行う
請求項６に記載の投射型画像表示装置。 - 表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、
前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、入力画像信号が示す元画像に対し変換を施し、変換後の画像を前記表示手段に出力する画像変換手段を
有する投射型画像変換装置。 - 前記変換は、前記表示手段の有効表示領域内に収まる範囲で前記表示画像が最大となる倍率調整を含む画像変換である
請求項８に記載の投射型画像表示装置。 - 表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、
前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施し、変換後の画像を前記表示手段に出力する画像変換手段を
有する投射型画像表示装置。 - 表示手段に画像を表示し、当該表示手段に表示された表示画像をスクリーンに投射する投射型画像表示装置であって、
前記表示手段の前記スクリーンに対する相対関係情報を取得する手段と、
入力画像信号が示す元画像に対して前記相対関係情報を用いて変換を施し、前記表示画像を生成する画像変換手段とを有し、
前記画像変換手段が、
前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを、前記相対関係情報に基づいて発生させるアドレス発生手段と、
前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるマッピング手段と、
前記マッピング手段から得たアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するデータ補間手段と、
を有する投射型画像表示装置。 - 前記マッピング手段が前記所望の画像を前記アドレス空間に重ねる際に、前記所望の画像を前記アドレス空間内で最大化する倍率調整を行う
請求項１１に記載の投射型画像表示装置。 - スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、
前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記元画像をそのまま投射したときに前記スクリーン上の投影画像で起こる歪みを補正する変換を、前記相対関係情報を用いて前記元画像に施すステップと
を含む画像変換方法。 - スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、
前記表示画像を投射するときの光軸または当該光軸と平行な軸を中心に前記表示手段を傾けたときの傾き情報を用いて、前記元画像に対し変換を施す
画像変換方法。 - スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、
前記表示手段内で前記表示画像の１つの辺を前記表示手段の有効表示領域の１つの辺に合わせ、前記表示画像の少なくとも１つの角を前記有効表示領域の隅に合わせたときに、前記表示画像が前記有効表示領域をはみ出ない範囲で最大となるように倍率調整を行う変換を前記元画像に施す
画像変換方法。 - スクリーンに投射するための表示画像を表示手段に生成するために、入力信号が示す元画像を変換する画像変換方法であって、
前記表示手段の前記スクリーンに対する相対関係情報を取得するステップと、前記スクリーンに対し任意の方向から前記元画像をそのまま投射したときに前記スクリーン上で起こる歪み画像のアドレスを前記相対関係情報に基づいて発生させるステップと、
前記歪み画像のアドレスが形成するアドレス空間に所望の画像のアドレスを対応付けるステップと、
前記歪み画像と前記所望の画像とのアドレスの対応関係に基づく前記表示手段の位置に、前記表示画像の新たな画素情報を、前記元画像の複数の画素情報から所定の規則に従う補間処理により生成するステップと、
を含む画像変換方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002187481A JP2004032484A (ja) | 2002-06-27 | 2002-06-27 | 投影型画像表示装置および画像変換方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002187481A JP2004032484A (ja) | 2002-06-27 | 2002-06-27 | 投影型画像表示装置および画像変換方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004032484A true JP2004032484A (ja) | 2004-01-29 |
Family
ID=31182515
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002187481A Pending JP2004032484A (ja) | 2002-06-27 | 2002-06-27 | 投影型画像表示装置および画像変換方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004032484A (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005123693A (ja) * | 2003-10-14 | 2005-05-12 | Nec Viewtechnology Ltd | プロジェクタおよび歪補正方法 |
| JP2006005534A (ja) * | 2004-06-16 | 2006-01-05 | Seiko Epson Corp | プロジェクタおよび画像補正方法 |
| JP2006121240A (ja) * | 2004-10-20 | 2006-05-11 | Sharp Corp | 画像投射方法、プロジェクタ、及びコンピュータプログラム |
| US7201482B2 (en) | 2003-09-10 | 2007-04-10 | Nec Viewtechnology, Ltd. | Projection type display device |
| JP2009049693A (ja) * | 2007-08-20 | 2009-03-05 | Seiko Epson Corp | 画像処理システム、プロジェクタ、プログラムおよび情報記憶媒体 |
| JP2011135426A (ja) * | 2009-12-25 | 2011-07-07 | Canon Inc | 投射型表示装置 |
| CN104062832A (zh) * | 2013-03-22 | 2014-09-24 | 卡西欧计算机株式会社 | 投影装置及投影方法 |
| JP2014187531A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、投影方法及び投影プログラム |
| JP2014187512A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、投影方法、及び投影のためのプログラム |
| JP2014187530A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、画像出力装置、投影方法及び投影プログラム |
| JP2015061309A (ja) * | 2013-09-20 | 2015-03-30 | カシオ計算機株式会社 | 投影装置、投影方法及び投影プログラム |
| KR20160002998A (ko) * | 2013-08-19 | 2016-01-08 | 아셀산 엘렉트로닉 사나이 베 티카렛 아노님 시르케티 | 강화 콘크리트 바닥을 구축하기 위한 소결 발포 폴리스티렌 모듈형 요소 |
-
2002
- 2002-06-27 JP JP2002187481A patent/JP2004032484A/ja active Pending
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7201482B2 (en) | 2003-09-10 | 2007-04-10 | Nec Viewtechnology, Ltd. | Projection type display device |
| US7204595B2 (en) | 2003-10-14 | 2007-04-17 | Nec Viewtechnology, Ltd. | Projector and method of correcting projected image distortion |
| JP2005123693A (ja) * | 2003-10-14 | 2005-05-12 | Nec Viewtechnology Ltd | プロジェクタおよび歪補正方法 |
| JP2006005534A (ja) * | 2004-06-16 | 2006-01-05 | Seiko Epson Corp | プロジェクタおよび画像補正方法 |
| JP2006121240A (ja) * | 2004-10-20 | 2006-05-11 | Sharp Corp | 画像投射方法、プロジェクタ、及びコンピュータプログラム |
| JP2009049693A (ja) * | 2007-08-20 | 2009-03-05 | Seiko Epson Corp | 画像処理システム、プロジェクタ、プログラムおよび情報記憶媒体 |
| JP4539886B2 (ja) * | 2007-08-20 | 2010-09-08 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、プログラムおよび情報記憶媒体 |
| US9291882B2 (en) | 2009-12-25 | 2016-03-22 | Canon Kabushiki Kaisha | Projection-type display apparatus with a keystone correction feature for correcting keystone distortion in a projection image |
| JP2011135426A (ja) * | 2009-12-25 | 2011-07-07 | Canon Inc | 投射型表示装置 |
| CN104062832A (zh) * | 2013-03-22 | 2014-09-24 | 卡西欧计算机株式会社 | 投影装置及投影方法 |
| JP2014187532A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、投影方法及び投影プログラム |
| JP2014187512A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、投影方法、及び投影のためのプログラム |
| JP2014187530A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、画像出力装置、投影方法及び投影プログラム |
| JP2014187531A (ja) * | 2013-03-22 | 2014-10-02 | Casio Comput Co Ltd | 投影装置、投影方法及び投影プログラム |
| US9667930B2 (en) | 2013-03-22 | 2017-05-30 | Casio Computer Co., Ltd. | Projection apparatus, projection method, and projection program medium which corrects image distortion based on pixel usage |
| US9723281B2 (en) | 2013-03-22 | 2017-08-01 | Casio Computer Co., Ltd. | Projection apparatus for increasing pixel usage of an adjusted projection area, and projection method and program medium for the same |
| KR20160002998A (ko) * | 2013-08-19 | 2016-01-08 | 아셀산 엘렉트로닉 사나이 베 티카렛 아노님 시르케티 | 강화 콘크리트 바닥을 구축하기 위한 소결 발포 폴리스티렌 모듈형 요소 |
| KR101711782B1 (ko) | 2013-08-19 | 2017-03-13 | 아셀산 엘렉트로닉 사나이 베 티카렛 아노님 시르케티 | 광학 왜곡을 보정하는 시스템 및 방법 |
| JP2015061309A (ja) * | 2013-09-20 | 2015-03-30 | カシオ計算機株式会社 | 投影装置、投影方法及び投影プログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2007143173A (ja) | キーストーン歪みを防止する方法および装置 | |
| US7417649B2 (en) | Method and apparatus for nonlinear anamorphic scaling of video images | |
| US7961197B1 (en) | Method and apparatus for display image adjustment | |
| US6450647B1 (en) | Image processing device and image processing method | |
| EP1550979A1 (en) | Image conversion device, image conversion method, and image projection device | |
| EP0965945A1 (en) | Image processor and image display | |
| JP5061227B2 (ja) | 映像信号処理装置及び仮想現実感生成システム | |
| JP2007251914A (ja) | 映像信号処理装置、仮想現実感生成システム | |
| JP2007264456A (ja) | 画像表示装置および画像表示方法 | |
| JP2004032484A (ja) | 投影型画像表示装置および画像変換方法 | |
| WO2012060269A1 (ja) | 画像処理方法、画像処理装置及び撮像装置 | |
| JP2007293457A (ja) | 画像処理装置 | |
| JP2004320661A (ja) | 補助線を利用した幾何学補正インターフェースにおける画面外エリアの補正方法 | |
| JP2007206356A (ja) | 映像表示システム | |
| JP3541845B1 (ja) | プロジェクタの画像補正方法及びプロジェクタ | |
| US8396322B1 (en) | Optical distortion correction in digital video processing applications | |
| JP4296842B2 (ja) | 画像投射装置、画像処理装置およびその方法 | |
| JP2005012407A (ja) | 画像投射装置および画像処理方法 | |
| JP2006005549A (ja) | 画像投射装置、画像処理装置および画像処理方法 | |
| JP3740487B1 (ja) | 表示装置および表示方法 | |
| JP2004129212A (ja) | 画像投射装置および画像変換方法 | |
| JP2008116812A (ja) | 表示装置、プロジェクタおよび表示方法 | |
| JP2004282712A (ja) | 調整装置 | |
| TWI253601B (en) | Apparatus adaptive for a display wall, image adjustment method, and a display wall therewith | |
| JP2005033271A (ja) | 画像処理装置およびその方法、ならびに、画像投射装置 |