JP2004129212A - 画像投射装置および画像変換方法 - Google Patents
画像投射装置および画像変換方法 Download PDFInfo
- Publication number
- JP2004129212A JP2004129212A JP2003168337A JP2003168337A JP2004129212A JP 2004129212 A JP2004129212 A JP 2004129212A JP 2003168337 A JP2003168337 A JP 2003168337A JP 2003168337 A JP2003168337 A JP 2003168337A JP 2004129212 A JP2004129212 A JP 2004129212A
- Authority
- JP
- Japan
- Prior art keywords
- image
- address
- interpolation
- representative point
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
- Liquid Crystal Display Device Control (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
【課題】アドレス計算点の増加または計算式の複雑化によって、アドレス計算の負担（時間と回路規模）が増大する。
【解決手段】ＬＣＤパネル３に出力した画像３ａをスクリーン１０１に対し斜めに投射したときに生じる歪み画像の代表点アドレスを演算により生成するＣＰＵ２ａと、代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部２ｂと、生成されたアドレスに画素データを生成するデータ補間部２ｃと、を有する。演算による求めるアドレスが代表点アドレスのみなのでＣＰＵ２ａの負担が小さい。また、代表点間のアドレスのみ補間処理により求めることから、高速で規模が小さい回路ですむが精度の低い線形補間でも、全体の補間精度を比較的高くできる。
【選択図】 図５
【解決手段】ＬＣＤパネル３に出力した画像３ａをスクリーン１０１に対し斜めに投射したときに生じる歪み画像の代表点アドレスを演算により生成するＣＰＵ２ａと、代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部２ｂと、生成されたアドレスに画素データを生成するデータ補間部２ｃと、を有する。演算による求めるアドレスが代表点アドレスのみなのでＣＰＵ２ａの負担が小さい。また、代表点間のアドレスのみ補間処理により求めることから、高速で規模が小さい回路ですむが精度の低い線形補間でも、全体の補間精度を比較的高くできる。
【選択図】 図５
Description
【０００１】
【発明の属する技術分野】
本発明は、画像表示部に画像を表示し、その表示画像を投射面に光を利用して投射する画像投射装置と、表示画像を生成する際の画像変換方法とに関する。
【０００２】
【従来の技術】
いわゆるプロジェクターと称される画像投射装置は画像表示部、たとえばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）を有している。画像表示部に画像を表示させ、その表示画像を外部の投射面、たとえばスクリーンの面に投射する。
【０００３】
このとき、スクリーンに対するプロジェクターからの画像の投射角度が斜めであると、本来、矩形状であるはずの画像がスクリーン上で台形状に歪む。このため、スクリーン上の画像の台形歪みを補正するいわゆるキーストン補正機能を備えた液晶プロジェクターが知られている。
【０００４】
鉛直または水平のキーストン歪み補正では、スクリーン上の投影画像と逆方向に意図的に歪ませた画像を液晶パネル上で生成する。正矩形の入力画像を意図的に歪ませる画像変換は、通常、プロジェクターが有する画素数変換機能を利用して行う。たとえば、鉛直のキーストン歪み補正では、元画像の１フレーム内の単数または複数の水平ラインデータに対して、補間処理や間引き処理をディジタル的に施すことにより台形歪みの逆変換を実行する。
【０００５】
この画像変換を、座標変換式を用いて行う方法が知られている（たとえば、特許文献１参照）。
この方法では、液晶パネル上の整数座標に対応する実数座標を座標変換式によって算出し、実数座標の周囲にある画素データをフレームメモリから読み出して、補間演算により整数座標に書き込む画素データの値を求めることによって、台形歪みが補正された画像を液晶パネル上に形成する。
【０００６】
【特許文献１】
特開２００３−２９７１４号公報（第３〜第４頁）
【０００７】
【発明が解決しようとする課題】
ところが、この特許文献１に開示された方法では、鉛直方向の歪み補正と、水平方向の歪み補正を同時にできない。また、特許文献１には、鉛直方向の変換式は示されているが、水平方向の変換式が開示されていない。水平方向の変換は、一般的に、複数ラインの画素データの変換であるため、より複雑な式となると考えられる。このため、特許文献１に記載されたキーストン歪み補正方法が適用されたプロジェクターでは使い勝手が悪くなり、製品としての魅力に乏しい上、トータルの処理時間が長くなり処理効率が悪いという課題がある。
【０００８】
本発明の第１の目的は、鉛直方向と水平方向に歪んだ画像の補正が可能であり、かつ、その補正時の処理の負担を軽減した画像投射装置を提供することにある。
本発明の第２の目的は、入力画像を変換することにより、鉛直方向と水平方向に歪んだ画像を補正する際の処理の負担を軽減した画像変換方法を提供することにある。
【０００９】
【課題を解決するための手段】
本発明の第１の観点に係る画像投射装置は、上述した第１の目的を達成するためのものであり、画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成する演算部と、前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、を有する。
【００１０】
好適に、前記アドレス補間部が、前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間部と、前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間部と、を含む。
【００１１】
本発明では、前記画像表示部と前記投射面との相対関係情報を取得する相対関係取得部をさらに有し、前記演算部は、前記相対関係情報をパラメータとした演算を実行する。この場合、好適に、前記演算部は、前記アドレスと前記データの補間中に、次に入力が予想される相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１２】
本発明の第１の観点に係る画像変換方法は、上述した第２の目的を達成するためのものであり、投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成するステップと、前記代表点アドレスの間の他のアドレスを補間により生成するステップと、前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、を含む。
【００１３】
好適に、アドレスを補間により生成する前記ステップが、前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間ステップと、前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間ステップと、を含む。
【００１４】
本発明では、前記代表点アドレスの前記演算に用いる、前記画像表示部と前記投射面との相対関係情報を取得するステップを、さらに含み、前記代表点アドレスの生成ステップでは、前記相対関係情報をパラメータとした演算を実行する。この場合、好適に、前記アドレスの補間、前記アドレスの対応付けおよび画素データの前記補間中に、次に入力が予想される前記相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１５】
第１の観点では、歪み画像の代表点アドレスを演算部が演算により生成し、代表点アドレス間の他のアドレスをアドレス補間部が生成する。これら２つの手段によって生成されたアドレスが歪み画像のアドレスを形成する。この歪み画像のアドレスと所望の画像のアドレスとの対応関係にもとづいて、歪み画像と所望の画像のアドレス対応関係が一義的に決まる。歪み画像というのは、もともと正矩形の画像を斜めに投射したときに投射面上に映し出された画像であることから、この関係が求まれば、逆に正矩形の画像を投射面上で得るための補正後の画像のアドレスがわかる。したがって、データ補間部は、このアドレスの対応関係にもとづく画像表示部の位置に、表示画像の新たな画素データを補間により生成する。以後、生成した表示画像を画像表示部が投射すると、歪みが補正された所望の画像が投射面上に現出する。
第１の観点で好ましい態様では、アドレス補間部が、演算により求めた第１の代表点アドレス間に第２の代表点アドレスを補間により生成し、さらに、第２の代表点アドレス間に他のアドレスを補間により生成する。
また、他の好ましい態様では、画像表示部と前記投射面との相対関係情報が取得され、演算部は、この相対関係情報をパラメータとした演算を実行する。このとき、演算部は、アドレスとデータの補間中に、次に入力が予想される相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１６】
本発明の第２の観点に係る画像投射装置は、前述した第１の目的を達成するためのものであり、画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを記憶している記憶部と、前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、を有する。
【００１７】
本発明の第２の観点にかかる画像変換方法は、前述した第２の目的を達成するためのものであり、投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、
前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを、前記画像表示部と前記投射面との相対関係ごとに記憶部にあらかじめ記憶させるステップと、前記相対関係の情報を取得するステップと、取得した相対関係の前記情報に対応した前記代表点アドレスを前記記憶部から読み出し、読み出した当該代表点アドレスの間の他のアドレスを補間により生成するステップと、前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、を含む。
【００１８】
第２の観点では、代表点アドレスをあらかじめ算出し、記憶部に記憶させておく。このとき、画像変換方法のように、画像表示部のスクリーンに対する相対関係ごとに代表点アドレスを記憶させる。記憶部内の代表点アドレスのうち、用いる代表点アドレス間の他のアドレスを、アドレス補間部が補間により生成する。その後、第１の観点と同様、アドレスの対応付けを行い、この対応関係にもとづく画像表示部の位置に、表示画像の新たな画素データを補間処理により生成する。以後、画像表示部が表示画像を投射すると、歪みが補正された所望の画像がスクリーン上に現出する。
【００１９】
【発明の実施の形態】
本発明の画像投射装置（プロジェクター）と、それに用いる画像変換方法の実施の形態を、図面を参照しながら説明する。
【００２０】
図１に、フロントプロジェクターをスクリーンの正面に配置した場合に、これらを上方から見た図を示す。
図１に示す配置おいて、プロジェクター１の投射光の軸と映像が映るスクリーン１０１とが、上から見ると直交するように配置される。プロジェクター１で投射する映像はテレビ信号やコンピュータ画面の信号である。これらの信号に重畳された映像の表示領域の形状は、テレビやコンピュータディスプレイを見れば分かるように、信号によって画素数に違いはあるものの映像全体として４：３や１６：９などの辺の比（アスペクト比）をもつ長方形である。プロジェクター１のＬＣＤパネルに表示された長方形の映像は、まっすぐに投射しなければ投射された映像も長方形にならず、本来の映像の形をゆがめてしまう結果になる。
【００２１】
図２は、正面に配置したプロジェクターの位置をＰ０としたときに、本発明の実施の形態におけるプロジェクター１の配置可能な範囲を示す図である。
プロジェクター１は、正面位置Ｐ０を含む水平面Ｐｈ内に配置でき、また、正面位置Ｐ０を含む垂直面Ｐｖ内に配置できる。さらに、プロジェクター１は、２つの平面Ｐｈ，Ｐｖによって区切られる第１象限Ｐ１、第２象限Ｐ２、第３象限Ｐ３、第４象限Ｐ４のいずれにおいても任意に配置できる。
プロジェクター１は、その内部のＬＣＤパネルの表示画像を、上述した範囲内であればどの位置から投射してもよい。プロジェクター１は、投射位置に応じた画像の歪みを補正する機能を有しているので、この機能を働かせれば恰も正面から投射したときと同じアスペクト比をもった正四角形の画像をスクリーン１０１上に映し出すことができる。この補正を、キーストン歪み補正という。
【００２２】
図３（Ａ）に、水平面内でスクリーンに向かって左横からの画像投影イメージを示す。図３（Ｂ）に入力画像イメージを、図３（Ｃ）にプロジェクターに内蔵されたＬＣＤパネル面上での画像イメージを示す。
図３（Ａ）に示すように、スクリーン１０１に向かって左横にプロジェクター１を配置して投射しているが、スクリーン１０１上の映像は正面から投射しているときと同じように見える。本来であれば、投射された画面は図中の斜線部を含め全体が台形に歪んだように変形するはずである。これを横キーストン変形といい、横キーストン変形を補正することを横キーストン補正という。
このように横に置いたプロジェクター１から画像を投射して、それが正面から投射したかのようにスクリーン１０１上で映るには、あらかじめプロジェクター１の投射位置によって画像がどのように歪むかを計算しておかなければならない。このとき、横から投射したときに歪む形に対して作為的に逆の方向に歪ませた画像を作り、それを投射することで横方向から投射しても画像を正面から投射した時と同じように見せることができる。上記具体例で図３（Ａ）のような投射映像を得るためには、図３（Ｂ）の入力画像を図３（Ｃ）のようにＬＣＤパネル面上で故意に変形して表示させ、この表示画像をスクリーン１０１に投影する。
【００２３】
図４（Ａ）に、図２における第３象限Ｐ３からの画像投影イメージを示す。また、図４（Ｂ）に入力画像イメージを、図４（Ｃ）にＬＣＤのパネル面上での画像イメージを示す。
図３（Ａ）の横キーストン歪みは台形歪みであったが、これに垂直方向の歪み成分が加わった図４（Ａ）の場合、さらに歪み形状が複雑になる。図４（Ａ）に示す正四角形の補正後の投影画像を得ようとすると、ＬＣＤパネル表示画像は、図４（Ｃ）に示すように画像をＬＣＤパネル面内で回転させたようにする必要がある。
図４（Ｃ）および前記図３（Ｃ）のいずれの場合でも、補正前の投影画像形状と逆に故意に歪ませた画像をＬＣＤパネル面の有効表示領域いっぱいに表示すれば、解像度、明るさの低下が極力抑えられた正四角形の投影画像がスクリーン上に得られる。
【００２４】
以下、入力画像をＬＣＤパネルの表示画像に変換することによって、このような補正が可能な画像投射装置と画像変換方法の実施の形態を、より詳細に説明する。この画像変換では、図４（Ａ）のように第３象限Ｐ３からの投射の場合を例に水平および垂直の歪みを同時に補正可能なアドレス生成の一般式を求める。水平のみ、あるいは垂直のみの歪み画像は、この一般式において水平または垂直の投射角度がゼロの場合で表現できる。また、第３象限以外の他の象限からの投射は、式が異なるのみで考え方は同じである。
【００２５】
［第１の実施の形態］
図５に、プロジェクターの基本構成を示す。
プロジェクター１は、映像信号（入力信号）に種々の信号処理を施す回路、各種駆動系の回路を含む回路部２を有する。回路部２は、信号処理回路内の一部に、制御部および演算部としての中央演算処理部（ＣＰＵ）２ａ、アドレス補間部２ｂ、および、データ補間部２ｃを含む。プロジェクター１は、入力信号に各種信号処理を施した信号が示す入力画像を画像変換して得られた表示画像３ａを表示する画像表示部３、たとえばＬＣＤパネルを有する。また、プロジェクター１は、表示画像３ａを外部に投射するための光源を含む投光部４と、各種レンズを含む光学部５とを有する。ＬＣＤパネル３は透過型と反射型のいずれでもよいが、いずれにしても表示画像３ａが、光学部５を通って投射面としてのスクリーン１０１に投影画像１０１ａとして映し出されるものであればよい。
演算部としてのＣＰＵ２ａは、画像変換に必要な歪み画像のアドレスのうち、任意のサンプリングレートでサンプリングされた代表点アドレスを演算により算出する。ＣＰＵ２ａは、アドレス同士の相対関係を求める手段（以下、マッピング手段という）としても機能する。ＣＰＵ２ａは、他の構成を制御する役目もある。代表点アドレスの演算およびアドレスの対応付け（マッピング）についての詳細は後述する。
【００２６】
プロジェクター１は、ＬＣＤパネル３の表示画像とスクリーン１０１との相対的な関係を示す相対関係情報を取得する相対関係取得部６を有する。相対関係取得部６は、外部から相対関係情報を入力する入力部、外部操作手段（ボタンなど）、想定される相対関係情報をあらかじめ記憶した記憶部（たとえば、ＲＯＭ）、あるいは相対関係を自ら検出する手段など、種々の形態がある。相対関係取得部６は、たとえば、少なくとも、表示画像のスクリーン１０１までの距離と、光学部５の光軸とスクリーン面とのなす角度とを取得する。
【００２７】
液晶などの固定画素のパネルを用いるプロジェクターでは、入力された入力画像の画素数と出力画像の画素数とが異なる場合がある。そのため画素数を変換するための信号処理機能を備えている。これをスケーリング機能と呼ぶが、この処理では、本来画素データの無い位置でのデータが必要になり、画素の補間演算が行われる。補間演算では、周辺の画素のデータを用いて目的の位置の画素データを作り出す。この機能は、たとえば、イメージプロセッサと称される画像処理回路内に、スケーラと呼ばれる回路ブロックを内蔵させることにより実現される。
【００２８】
図６は、図５の回路部２に含まれる画像処理回路、すなわちイメージプロセッサとその周辺の回路ブロックの一構成例を示す図である。
図解した画像処理回路は、コムフィルタ（Ｃｏｍｂ Ｆｉｌｔｅｒ）２１、クロマデコーダ（Ｃｈｒｏｍａ Ｄｅｃｏｄｅｒ）２２、セレクトスイッチ（ＳＷ）２３、アナログ−ディジタル・コンバータ（Ａ／Ｄ）２４、イメージプロセッサ（Ｉｍａｇｅ Ｐｒｏｃｅｓｓｏｒ）２５、ＳＤＲＡＭなどからなる画像メモリ２６、および、ＣＰＵ２ａを有する。このうち、イメージプロセッサ２５とＣＰＵ２ａが、画像変換の機能を実現するための一実施態様に該当する。なお、これらの画像メモリ２６やＣＰＵ２ａの機能をイメージプロセッサ２５内に一体化させてもよい。
【００２９】
図解した画像処理回路は、コンポジットビデオ信号（以下、Ｖｉｄｅｏ信号）、Ｙ／Ｃ信号、ＲＧＢ信号のいずれの映像信号にも対応している。Ｖｉｄｅｏ信号はコムフィルタ２１に、Ｙ／Ｃ信号はクロマデコーダ２２に、ＲＧＢ信号はセレクトスイッチ２３に、それぞれ入力される。いま、Ｖｉｄｅｏ信号が入力されている場合を考えると、コムフィルタ２１でＹ／Ｃ信号に変換され、続くクロマデコーダ２２でＹＵＶ信号に変換される。セレクトスイッチ２３によって選択された信号がＡ／Ｄ２４により変換されてディジタル信号になる。この信号がイメージプロセッサ２５に入力され、所望の信号処理が行われる。このとき、イメージプロセッサ２５の処理がＣＰＵ２ａにより制御され、処理中に、適宜画像メモリ２６が使用される。所望の信号処理が行われた後は、処理後の信号が画像表示部、たとえばＬＣＤパネル３に送られ、この信号にもとづいてＬＣＤパネル３に投射する画像が表示される。
【００３０】
図７に、イメージプロセッサ内部の回路ブロックの一構成例を示す。
イメージプロセッサ２５は、ＩＰ（Ｉｎｔｅｒｌａｃｅ−Ｐｒｏｇｒｅｓｓｉｖｅ）変換部２５１、スケーラ２５２、ＣＰＵインターフェース２５３、メモリ制御部２５４、およびＲＯＭ２５５を有する。スケーラ２５２は、アドレス補間部２ｂ、係数発生部２５７、およびフィルタ演算部２５８を有する。このうち、係数発生部２５７とフィルタ演算部２５８が図５におけるデータ補間部２ｃの一実施態様に該当する。
【００３１】
イメージプロセッサ２５に入力された映像信号はＩＰ変換部２５１に送られ、ここでインターレース信号がプログレッシブ化される。この処理では画像メモリ２６を用いるが、メモリインターフェースとしてのメモリ制御部２５４にＩＰ変換部２５１が接続されることによって、ＩＰ変換部２５１は画像メモリ２６との間で画像データのやり取りを行う。プログレッシブ化された信号は、スケーリング処理を行うためにスケーラ２５２に送られる。スケーラ２５２の内部では、歪み補正に必要なアドレスのうち、前述した代表点アドレス間の他のアドレスを、アドレス補間部２ｂで補間処理により生成する。フィルタ係数を係数発生部２５７で発生させ、発生させたフィルタ係数をフィルタ演算部２５８に供給する。フィルタ演算部２５８が、与えられたフィルタ係数を用いた補間演算処理を行い、入力した映像信号が示す入力画像が、所定の大きさと形状を有したＬＣＤパネルの表示画像に変換される。この変換後の表示画像の信号が出力され、ＬＣＤパネル３に送られる。この補間演算に用いるアドレスやフィルタ係数などのデータを保持するＲＯＭ２５５がスケーラ２５２に接続され、これら一連の処理を含むイメージプロセッシングを制御するＣＰＵ２ａのインターフェース２５３がＩＰ変換部２５１、スケーラ２５２およびＲＯＭ２５５に接続されている。
【００３２】
図６に図解した例において、相対関係取得部６（図５）からの相対関係情報がＣＰＵ２ａに入力される。ＣＰＵ２ａ自身によって、さらに、ＣＰＵ２ａに制御されながらイメージプロセッサ２５内のアドレス補間部２ｂによって、入力画像を表示画像に効率よく変換するための歪み画像データのアドレスが生成される。本実施の形態の画像変換では、アドレス生成手法に大きな特徴の１つがある。
【００３３】
以下、アドレス生成手法の実施の形態を、図面を用いて詳しく説明する。
また、以下の説明では、フロントプロジェクターの表示画像を、スクリーンに対して正面の位置を基準に、垂直方向にα度上向きで、水平方向ではスクリーン正面から左にβ度回転した位置から斜めに投射する場合を主に説明する。角度αおよびβが正の場合、投射位置は図２の第３象限Ｐ３に属する。他の象限からの投射時の補正は、ほぼ同じような考え方、方法で行える。このとき入力信号としてＶＧＡ（６４０画素×４８０ライン）の解像度をもつ映像信号が入力され、これをＳＶＧＡ（８００画素×６００ライン）に解像度変換し、また斜め方向から投射する場合のスクリーン上の投影画像の歪みをとる補正も画像変換処理で行う場合について説明する。
【００３４】
図８（Ａ）に、正面投射の場合の右手座標系におけるプロジェクター１とスクリーン１０１の位置関係を示す。また、それに対応したｙｚ平面図を図８（Ｂ）に、ｘｙ平面図を図８（Ｃ）に、それぞれ示す。このとき、プロジェクター１の位置座標を（Ｐｘ，Ｐｙ，Ｐｚ）、スクリーン１０１上の任意の点の位置座標を（Ｓｘ，Ｓｙ，Ｓｚ）で表す。位置座標（Ｐｘ，Ｐｙ，Ｐｚ）と（Ｓｘ，Ｓｙ，Ｓｚ）により決まるスクリーン１０１とプロジェクター１の距離、および、前記斜め投射角度αとβが、前述した相対関係情報である。
図８（Ｂ）および図８（Ｃ）に示すように、正面投射ではスクリーン面と光軸が直交する。ただし、光軸はスクリーン中央ではなく下寄り位置、ここではスクリーン下辺中央付近でスクリーン面と交差している。フロントプロジェクターを机の上に配置し、あるいは天井から吊るような配置を取る場合、レンズの中心とスクリーンの中心を結ぶ線が地面と平行にはならないように両者を配置させるためである。これは、たとえばプロジェクターを机に置いて投射した場合、投射する画像の下端部分が机に映ってしまわないようにするための仕様であり、光学オフセットと称される。
【００３５】
図９（Ａ）に、垂直方向にα度上向きで、水平方向については向かって左手からスクリーンに対しβ度の角度で斜めに投射する場合、右手座標系におけるプロジェクターとスクリーンの位置関係を示す。また、ｙｚ平面図を図９（Ｂ）に、ｘｙ平面図を図９（Ｃ）に、それぞれ示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向に（−β）度となる。
【００３６】
ここで、キーストン歪み補正を考えやすくするために相対的な視点を変えることを考える。図９（Ａ）〜図９（Ｃ）ではプロジェクター１の位置を動かして斜め方向から投射していたが、ここでは、相対的な位置関係を維持したままでプロジェクター１は動かさずに、スクリーン１０１を、その場で軸回転させることを想定する。
図１０（Ａ）〜図１０（Ｃ）に、スクリーンを軸回転させた場合の図９（Ａ）〜図９（Ｃ）と等価的な斜め投射の位置関係を示す。このとき、右手座標系で表現するとスクリーンを、その下辺（ｘ軸）を中心に直立位置からｙ方向（背面側）に（−α）度傾かせ、向かって左側の辺（ｚ軸）を中心に左回転方向にβ度回転させる。つまり、図１０（Ｂ）と図１０（Ｃ）に示す傾きおよび回転の角度は、図９（Ａ）〜図９（Ｃ）に示すプロジェクターの設置位置からの投射角度に対して符号が逆になる。
【００３７】
以下、図１０（Ａ）〜図１０（Ｃ）のように、正面の位置にプロジェクター１があり、この位置から傾いたスクリーン（以下、１０１ｔと表記）に映像を投射した場合に、投射された映像（投影画像）がどのように変形しているかを考える。
プロジェクター１が投射する光は、図９（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。本実施の形態では水平と垂直の回転なので、先に水平方向に回転させた後に、次に垂直方向の回転を行う手順によって回転行列が定義される。具体的には、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【００３８】
【数１】
【００３９】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求める。この交点が、傾いたスクリーン１０１ｔの平面に映る映像の座標点である。この傾いたスクリーンの座標点に対して、図９（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（２−１）、（２−２）、（２−３）に示す。
【００４０】
【数２】
【００４１】
これらの式で表される（Ｋｘ，Ｋｙ，Ｋｚ）は、図９（Ｂ）に示すようにプロジェクター１を垂直にα度上向きで、図９（Ｃ）のように水平方向にスクリーン１０１に対して左から（−β）度の角度で投射するとき、キーストン歪みによって変形された座標である。
図１１（Ａ）および図１１（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される入力画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図１０（Ｂ）および図１０（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標である。上述のように（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
このように、前述した３つの式（２−１）、（２−２）、（２−３）により、任意の方向からの投射によってもたらされるキーストン歪変形座標が与えられる。
【００４２】
つぎに、出力信号（表示画像）の解像度に合わせた座標の、式（２−１）、（２−２）、（２−３）による変形座標を求める。つまり、８００画素×６００ラインのＳＶＧＡ出力の場合、歪む前の画像のｘ座標Ｓｘは０から７９９まで変化し、ｚ座標Ｓｚは０から５９９まで変化するが、このときのキーストン歪み後のｘ座標Ｋｘとｚ座標Ｋｚを求める。なお、ｙ座標ＳｙとＫｙは、画像がｚｘ平面にあるのでゼロである。
【００４３】
図１２（Ａ）に正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図１２（Ｂ）にα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（以下、歪み画像イメージ）ＰＩＫを示す。ここでは、図示の都合上すべての画素位置のサンプルリング点を示さず、３３画素ごとに１つのドットでサンプリング点を代表させている。式（２−１）および式（２−３）を用いて実際に座標変換によって生成された代表点アドレスは、３３画素ごとのアドレスのうち（３３×３）画素ごとに示す白丸印のアドレスである。図５および図７に示す演算部（ＣＰＵ２ａ）が代表点アドレスを生成する。
代表点アドレス間に存在する、黒丸のアドレスを含む他のアドレスは、式を用いた演算により生成しないで、図５および図７に示すアドレス補間部２ｂ、たとえば複数タップの補間回路から生成される。この最終的なアドレスを、以下、画素データの補間処理に用いるアドレスという意味で、「補間アドレス」という。補間方法に限定はなく、たとえば、バイリニア補間を含む線形補間方法、スプライン補間などの非線形補間方法のいずれを採用してもよい。線形補間を採用すると、アドレス補間部２ｂの構成が簡単になる利点がある一方、アドレスの変換精度を高く維持しようとすると代表点アドレスのサンプリングレートを余り低くできないという不利益がある。線形補間法を採用するか、非線形補間法を採用するかは、この利益と不利益を考慮して決める。
いずれにしても、本実施の形態においては、演算部２ａによる代表点アドレスの生成とアドレス補間部２ｂによる他のアドレスの生成とが並列に実行されるため、アドレス変換時間が短いという利益が得られる。
【００４４】
つぎに、図１３（Ａ）のように、補正により得たい画像のイメージ（スクリーン上に実現したい投影画像の仮想のイメージ、以下、投影画像イメージという）ＰＩを、図１２（Ｂ）に示す歪みによって変形した座標空間上に重ねる。これにより歪み画像イメージＰＩＫに投影画像イメージＰＩがマッピングされ、両画像のアドレスの対応関係が決まる。このとき、入力した入力画像はＶＧＡだが、画像の大きさと位置を調整するために、投影画像イメージＰＩを任意の大きさ（たとえば、ＳＶＧＡの大きさ）で、変形したアドレス空間（歪み画像イメージＰＩＫ）内の任意の位置に配置することができる。ただし、投影画像イメージＰＩが歪み画像イメージＰＩＫ内に完全に収まるようにしないと、次に行う補間後に画像の一部が欠けてしまう。したがって、望ましくは、所望のアスペクト比（本例では、４：３）の投影画像イメージサイズが歪み画像のアドレス空間内で最大限となることを規定しておく。すると、この投影画像イメージＰＩの位置と大きさは単なる図形問題に帰結し、たとえば図１３（Ａ）のような位置とサイズで、投影画像イメージＰＩと歪み画像イメージＰＩＫとの関係が一意に決まる。
【００４５】
このようなマッピング（アドレスの対応付け）は、歪み画像イメージＰＩＫのアドレス分布がすでに前記した式（２−１）、（２−２）、（２−３）から求められているので、実際の物理メモリ（記憶資源）を用いずとも、たとえばＣＰＵ２ａ内で仮想メモリ空間を想定して実行できる。このため、マッピング自体が高速なうえに物理メモリとのデータのやり取りがなくて効率がよく、数回やり直しても、その処理の合計時間が画像変換全体の時間に占める割合は極めて小さい。もちろん、ＣＰＵ２ａが容量的に不足する場合は、たとえばＲＯＭ２５５を用いて適宜マッピングを行っても構わない。
【００４６】
マッピングにより得られたアドレスの対応関係は、歪み画像と、歪みがなくスクリーン上で正四角形となる所望の投影画像とのアドレス対応関係であるが、歪み画像というのはもともと歪みがない正四角形のＬＣＤパネル上の画像の投影の結果である。したがって、上記アドレスの対応関係を利用して、歪みがないスクリーン上の投影画像を得るためのＬＣＤパネル３の表示画像が生成できる。
具体的な方法としては、ＳＶＧＡ出力の場合、ＬＣＤパネル３の有効表示領域の座標は８００×６００個になるが、このすべての点について、マッピングされた画像のアドレスで補間を行う。このとき８００×６００個の各点での補間のうち、図１３（Ａ）に示す歪み画像イメージＰＩＫと投影画像イメージＰＩとが重なる領域のすべてのアドレスでの補間では、投影画像のように画像データを再現できるようにフィルタ係数が選択され、その画像再現に必要な原画像の複数の画素データを上記フィルタ係数で重み付けして新たな画素データを合成する。合成後の画素データは、マッピングにより求めた上記アドレス対応関係にもとづいて、４：３のアスペクト比の正四角形画面であるＳＶＧＡ画面内のどの位置に配置するかを一意に決めるアドレスに割り当てられる。一方、図１３（Ａ）に示す投影画像イメージＰＩ周囲の歪み画像イメージＰＩＫ内領域の補間では、画像データがない黒色画素同士の合成となり、したがって補間後も黒色の画像データがＳＶＧＡ画面内の対応位置に割り当てられる。
【００４７】
図１３（Ｂ）に、このような画像変換手順により生成されたＳＶＧＡ出力画像を示す。この画像がキーストン歪み補正を行った画像である。この画像を図４（Ｃ）のようにＬＣＤパネルに表示させ、図４（Ａ）のように投影すると、スクリーン上で正四角形の投影画像が得られる。マッピングにより得られたアドレスの対応関係は、上述したようにイメージサイズ同士の重なる面積が最大となるように決められていることから、スクリーン上の投影画像は明るさおよび解像度の低下が最小に抑えられている。
【００４８】
なお、代表点アドレス間の他のアドレスを補間により生成する場合、周囲の代表点アドレスの座標を用いて新たにアドレスを生成する。したがって、この場合、図１４に示すように、周囲に余分に代表点アドレスをあらかじめ生成することが望ましい。この図１４では、（３３×５）画素ごとに代表点アドレスを生成している。
【００４９】
前述した図１２（Ａ）および図１２（Ｂ）の説明では、出力画像イメージＰＩＯＵＴを出力画像（ＳＶＧＡ画像）の大きさに合わせて６００×８００個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成した。そして、図１３（Ａ）に示すように、歪み画像イメージに対し、投影画像イメージＰＩの大きさと位置を変えながら重ね、重ねた後の両画像イメージから、歪み補正に必要なアドレス対応関係を求める手法を採った。
これと同じアドレス対応関係は、次の手法でも求めることができる。
図１２（Ａ）において出力画像イメージＰＩＯＵＴを入力画像（ＶＧＡ画像）と同じ６４０ｘ４８０個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、図１３（Ａ）では、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う。このような手法でも、結果は図１３（Ａ）と同じとなる。
【００５０】
以上は、スクリーンに向かって左下位置（第３象限Ｐ３）からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。
【００５１】
図１５（Ａ−１）と図１５（Ｂ−１）に、スクリーン１０１に向かって右下位置（第４象限Ｐ４）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１５（Ａ−２）と図１５（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向に（−α）度、水平方向に（−β）度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（α）、水平（β））で表し、次式（３−１）、（３−２）、（３−３）に示す。
【００５２】
【数３】
【００５３】
図１６（Ａ−１）と図１６（Ｂ−１）に、スクリーン１０１に向かって左上位置（第２象限Ｐ２）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１６（Ａ−２）と図１６（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向にβ度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（−α）、水平（−β））で表し、次式（４−１）、（４−２）、（４−３）に示す。
【００５４】
【数４】
【００５５】
図１７（Ａ−１）と図１７（Ｂ−１）に、スクリーン１０１に向かって右上位置（第１象限Ｐ１）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１７（Ａ−２）と図１７（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向に（−β）度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（−α）、水平（β））で表し、次式（５−１）、（５−２）、（５−３）に示す。
【００５６】
【数５】
【００５７】
本実施の形態では、このようにキーストン歪み変形座標をスクリーンとの相対関係情報を用いた式で求め、歪みがない所望の画像とキーストン歪み画像とのマッピングによりアドレスの相対関係を求め、アドレス相対関係にもとづいた補間処理によりＬＣＤ表示画面を生成する。マッピングは仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、たとえば相対関係情報にもとづいて適した式（またはアルゴリズム）をＣＰＵ２ａがＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施の形態にかかるプロジェクター１は、スクリーン面が見える位置ならば任意の位置からの投射であっても効率よくキーストン歪み補正が可能で、設置自由度が高い。また、マッピング時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率がよく、出来るだけ高い解像度で明るい画像が容易に得られる。
さらに、演算部２ａの負荷が大きい、式を用いたアドレス計算の対象を代表点に絞り、他のアドレスは補間により生成しているため、この点でも効率がよい。
【００５８】
［第２の実施の形態］
第２の実施の形態は、アドレス生成の他の方法に関する実施の形態である。図５および図７のブロック図、および画像変換の基本的な手順は第１の実施の形態と共通する。
【００５９】
図１８は、第２の実施の形態におけるプロジェクターに内蔵された、イメージプロセッサとその周辺の回路ブロックの構成例を示す図である。
図１８に図解した回路が、図６に図解した第１の実施の形態における回路と異なる点は、ＣＰＵ２ａに接続された記憶部２７、たとえばＲＡＭを有することである。記憶部２７は、代表点アドレスの記憶を行うために設けられている。
【００６０】
図１９に、アドレス生成の流れをブロック図において示す。
本実施の形態においては、投射パラメータ、たとえば投射角度などに応じてあらかじめ計算された代表点アドレスを記憶部２７のテーブルに格納しておく。あるいは、投射パラメータが変化するたびに、それに応じた代表点アドレスをＣＰＵ２ａが算出し、算出した代表点アドレスを、記憶部２７を介してアドレス補間部２ｂに出力する。アドレス補間部２ｂは、代表点アドレスを記憶部２７から読み出して補間アドレスを生成する。なお、このアドレス補間部２ｂが補間アドレスを生成している間に、ＣＰＵ２ａによりつぎの投射パラメータに応じた代表点アドレスの算出を実行させることが望ましい。処理時間が短縮できるからである。
【００６１】
第１の実施の形態におけるＣＰＵ２ａは、代表点アドレスを生成する演算部としての役割のほか、アドレスのマッピング手段、さらには他の構成の制御部としての役割がある。このため、処理の負担が大きく、マッピングや他の構成の制御の空き時間に代表点アドレスの生成を行ったのでは、処理のタイミングが適合しないために全体の効率向上が十分でない場合がある。
【００６２】
第２の実施の形態では、処理のタイミングが合わない場合でも、演算部（ＣＰＵ２ａ）の空き時間を有効利用できるように代表点アドレスを蓄積する記憶部２７を設けている。これにより、ＣＰＵ２ａの処理で重く負荷がかかった状態が続く場合でも、記憶部２７に必要な代表点アドレスが蓄積されているため、画像変換の処理が滞ることが有効に防止される。代表点アドレスは、相対位置情報、たとえば垂直投射角α、水平投射角β、投射位置座標などの組ごとに記憶部２７内に格納されている。
なお、アドレス生成の遅滞を防止するには、代表点アドレス生成用の演算部を、制御用ＣＰＵ２ａと別に設ける実施の形態も可能である。
【００６３】
［第３の実施の形態］
第３の実施の形態におけるプロジェクターの構成自体は、上述した第２の実施の形態と同じであり、プロジェクターの構成図として図５、図７および図１８が適用される。
第３の実施の形態においては、図５に示す相対関係取得部６は、たとえば押しボタンなど、相対位置情報と等価なパラメータを外部から変更可能なものである。より具体的に、上記パラメータとして垂直補正量と水平補正量があり、それぞれの補正量を変化させる押しボタンとして「＋」ボタン」と「−」ボタンが２組設けられている。操作者が垂直補正量または水平補正量のボタンを１回押すと、所定の補正量、たとえば垂直投射角αまたは水平投射角βが所定のステップ、たとえば１度ずつ正または負に変化する。操作者は、ボタンを押すごとにスクリーンの投影画像の歪み補正効果を確認して、次にどのように補正をすればよいかを決める。この操作を繰り返しながら、スクリーンの投影画像が歪みのない正四角形に近くなるまで条件を追い込んでゆく。投影画像が殆ど歪みのない正四角形となったときの垂直補正量と水平補正量が決定されることによって、プロジェクターとスクリーンとの現在の相対位置情報が実質的に取得されたことになる。
【００６４】
第３実施の形態では、押しボタンが押されたとき、次に押されるボタンを先読みして、代表点アドレスの計算をあらかじめ行う。たとえば、「＋」ボタンが押されると、その押されたときの補正量の代表点アドレスの計算と、その補正量を中心にプラスの向きとマイナスの向きにそれぞれ数ステップ分だけ離れた補正量に対応した代表点アドレスの計算とを開始する。あるいは、「＋」ボタンが押された履歴に応じて、即ち、たとえば２回続けて「＋」ボタンが押されたときは、先読みの代表点アドレス計算をプラスの向きに数ステップのみ行う。２回続けて「＋」ボタンが押されたような場合、プラスの向きに先読みして行う代表点アドレス計算回数を、マイナスの向きでの代表点アドレスの計算回数より多くしてもよい。
これらの先読みの代表点アドレス計算は、ＣＰＵ２ａの空き時間を利用してできるだけ行うようにし、計算した代表点アドレスは記憶部２７に蓄積する。後は、第２の実施の形態と同様に必要に応じて代表点アドレスを記憶部２７から読み出し、画像変換処理に用いる。
【００６５】
第３の実施の形態では、ＣＰＵ２ａへの負担が大きな代表点アドレス計算を、先に予測してあらかじめ計算するので、第２の実施の形態よりさらに画像変換の効率が向上するという利益が得られる。
【００６６】
［第４の実施の形態］
本実施の形態は、上記第１〜第３の実施の形態のアドレス生成の変形例に関する。本実施の形態では、演算により求めた代表点アドレス（以下、１次代表点アドレスという）を用いた補間により、その間に、より細かな間隔の２次代表点アドレスを算出し、２次代表点アドレスから補間により最終的なアドレス（補間アドレス）を求める。
なお、ここでは、式（２−１）〜式（２−３）を用いたスクリーンに向かって斜め左下からの投射を行う場合を想定している。本実施の形態におけるアドレス生成手法は、他の向きからの斜め投射においても類推適用できる。
【００６７】
図２０は、アドレス生成の流れを示すブロック図である。
本実施の形態に係るプロジェクターでは、図７に示すアドレス補間部２ｂが、第１のアドレス補間部２ｂ−１と第２のアドレス補間部２ｂ−２とを含む。第１のアドレス補間部２ｂ−１は、ＣＰＵ２ａが算出した１次代表点アドレスから、補間により２次代表点アドレスを生成する。第２のアドレス補間部２ｂ−２は、２次代表点アドレスから、補間により各補間アドレスを生成する。
また、このプロジェクターは、１次または２次代表点アドレスを記憶する記憶部２８を有する。記憶部２８は、代表点アドレス専用として１つ設けてもよいし、１次代表点アドレス用と２次代表点アドレス用に分けて設けてもよい。また、第２および第３の実施形態におけるＲＡＭ２７を記憶部２８として用いてもよいし、ＣＰＵ２ａ内部の記憶領域を用いてもよい。
【００６８】
第１のアドレス補間部２ｂ−１が用いる第１の補間関数と、第２のアドレス補間部２ｂ−２が用いる第２の補間関数に限定はないが、望ましくは、第１の補間関数が第２の補間関数より高次の関数であるとよい。
以下、第１の補間関数がスプライン関数やキュービック関数などの非線形な関数であり、第２の補間関数が線形な関数であるとして、アドレス生成方法を説明する。アドレスの補間では、相対的に広い一定間隔のアドレスを複数用いて、そのアドレスの間に相対的に狭い一定間隔のアドレスを近似的に求める。その補間により求められたアドレスの各位置を「補間のサンプリング点」と称する。このとき、補間により求めたアドレスと理想的なアドレスとの誤差が問題となるが、この誤差精度を「補間精度」という。
【００６９】
図２１は、１次代表点アドレス、２次代表点アドレス、および、補間アドレスの関係を例示する図である。
本例では、１次代表点アドレスは３２画素ごとに１つの一定間隔で生成され、２次代表点アドレスは一次代表点アドレス間で８画素ごとに１つの一定間隔で生成されると想定する。これは図示上の都合で選んだサンプリング間隔であり、実際の高解像度画像では１次代表点アドレス、２次代表点アドレスともにもっとサンプリングを粗くすることができる。これらの代表点アドレスの間隔は、画像の解像度、用いる補間関数の種類と次数（フィルタタップ数）などを総合的に考慮し、処理効率と補間精度が満足できるように決められる。このとき１次代表点アドレスの間隔と２次代表点アドレスの間隔は、画素数を単位として簡単な整数比であることが望ましい。
【００７０】
つぎに、より詳細なアドレス生成の手法を、図２２に示すフローチャートに沿って説明する。なお、ここでは、第１の補間関数がスプライン関数であり、第２の補間関数が線形関数であることを前提とした処理の一例を説明する。
ステップＳＴ１において、キーストン補正を行う設定として投射角度などのパラメータを設定する。より詳細には、ユーザーがスクリーンに対してプロジェクターを設置し、たとえば相対関係情報取得手段６がスクリーンとプロジェクターとの相対関係を示す情報、たとえば投射角度などを取得する。
【００７１】
ステップＳＴ２では、ＣＰＵ２ａが１次代表点アドレスを算出する。このとき、設定された投射角度に対してキーストン歪み画像のアドレスを式（２−１）〜式（２−３）を用いて、たとえば３２画素に１つの割合で演算により生成する。算出された１次代表点アドレスは、図２０に示すように記憶部２８内の、たとえば１次代表点アドレス用のテーブルに、たとえば（Ｋｘ，Ｋｚ）の形式で書き込まれ、一時保持される。
【００７２】
ステップＳＴ３では、図２０に示す第１のアドレス補間部２ｂ−１が、ＣＰＵ２ａにより算出された複数の１次代表点アドレスを記憶部２８から適宜読み出し、読み出した複数の１次代表点アドレスをもとにスプライン補間により８画素ごとに１つの割合で２次代表点アドレスを求める。このとき用いるスプライン補間手法を、図２３で模式的に示す。
この補間は３２画素ごとの１次代表点アドレスから８画素ごとの２次代表点アドレスを生成するのであるから、１次代表点アドレス間に補間するサンプリング点の数は３つであり、その結果、１次および２次の代表点アドレスの位相が４位相となる。図２３では一方の１次代表点アドレスを基準（位相差ｘ＝０）とすると、もう片方の１次代表点アドレスとの間に、位相差が小さいほうからｘ＝１／４，２／４，３／４の３つの２次代表点アドレスが生成される。
スプライン補間関数Ｓｐｌｉｎｅ（ｘ）の一般式は次式（６）により表される。
【００７３】
【数６】
【００７４】
ここで、「Ａ」〜「Ｄ」は用いる４つの１次代表点アドレス値を表す。また、式（６）に各位相を代入して求めた２次代表点アドレスは、これら「Ａ」〜「Ｄ」を用いて次式（７）のようになる。
【００７５】
【数７】
【００７６】
第１のアドレス補間部２ｂ−１は、このようなスプライン関数を用いたフィルタ演算を、用いる１次代表点を１つずつシフトしながら鉛直と水平の２方向で繰り返し、すべての２次代表点アドレスを生成する。生成された２次代表点アドレスは、図２０に示すように記憶部２８内の、たとえば２次代表点アドレス用のテーブルに、たとえば鉛直と水平の各アドレス値のペア形式で書き込まれ、一時保持される。
【００７７】
ステップＳＴ４で、図２０に示す第２のアドレス補間部２ｂ２が、複数の２次代表点アドレス値を記憶部２８から適宜読み出し、読み出した複数の２次代表点アドレス値をもとに線形補間により、８画素ごとに１つの割合の２次代表点アドレス間を埋めるように残りのアドレス（補間アドレス）を求める。この補間も、たとえば鉛直と水平のフィルタ演算によりすべての歪み画像の画素で求め、求めた補間アドレスを図７に示すように、たとえばＣＰＵ２ａを介してデータ補間部２ｃに出力する。
【００７８】
このときＣＰＵ２ａは、すべての歪み画像の画素でアドレス生成が終わったか否かを監視しており（ステップＳＴ５）、この判断が「Ｎｏ」の場合はステップＳＴ３とＳＴ４を繰り返すことにより、上記したすべての補間アドレスの生成が実行される。
ステップＳＴ５の判断が「Ｙｅｓ」となると、処理フローがつぎのステップＳＴ６に移行する。
【００７９】
ステップＳＴ６は、「すべて終了か否か」すなわち設定（プロジェクター位置、スクリーン位置あるいは光学系の条件）ならびに電源の操作や入力信号の有無などが変わっていないかを監視するステップである。この判断が「Ｎｏ」の場合は、プロジェクターが起動状態にあり映像信号の入力があることを条件に、ステップＳＴ２〜ＳＴ５の処理が繰り返される。設定が変更されていない場合、あるいは、電源がオフされると、この判断が「終了（Ｙｅｓ）」となるため当該処理全体が終了する。
【００８０】
なお、このようなアドレス生成のための第１および第２のアドレス補間部２ｂ−１，２ｂ−２は演算が可能なフィルタ演算回路などのハードウエハで実現してもよいし、あるいは、マイクロコンピュータやＣＰＵに書き込まれたプログラムなどのソフトウェアにより実現してもよい。また、ここではプロジェクターの投射する角度や補間処理を行う補間フィルタの種類やタップ数、入力解像度や出力信号解像度などは任意であり、上記で説明したものに特定されない。さらに、２次代表点アドレスから３次代表点アドレスを補間により生成してもよい。つまり、生成する代表点アドレスの次数は任意である。ただし、望ましくは、たとえば元になる代表点アドレスほど補間精度が高い関数を用いることとして、アドレス生成の初期段階で低い補間精度にならないように留意する。
【００８１】
つぎに、本発明の実施の形態の効果を、幾つかの比較例と対比させることにより説明する。
【００８２】
まず、第１〜第４のすべての実施の形態の比較例として、代表点アドレス方式をとらない場合のアドレスの演算量および保持量について説明する。代表点アドレス方式をとらない場合としては、画素データの補間処理に用いるアドレス（補間アドレス）をあらかじめ演算により求め保持しておく方法と、すべての補間アドレスを演算により逐次求める方法とがある。
【００８３】
いずれにしても、式（２−１）〜式（２−３）により１つの画素のキーストン歪み補正に必要な補間アドレスが求められ、これが繰り返されて１フレームの歪み画像の補間に必要なアドレスが生成される。すなわち、液晶パネルに出力する場合、液晶パネルの解像度の画素数に相当する水平アドレスと鉛直アドレスが必要になる。具体的にパネルがＸＧＡ仕様であれば、水平に１０２４画素、鉛直に７６８画素あるので、次式（８）で計算される情報量が補間アドレスとして必要となる。
【００８４】
【数８】
【００８５】
この式（８）は、ある１つの角度についてのキーストン歪み補正で必要な情報量を表しており、角度の設定を変更した場合には、あらたな設定角度でのキーストン補正を行うための補間アドレスがさらに必要となる。
必要な補間アドレスを保持する場合、従来の１つの方法としてすべての補間アドレスデータをテーブルとしてもつことが考えられる。しかし、この場合、式（８）で表される情報量を想定される角度設定の数だけ掛け算した情報量が格納できるテーブルが必要となる。また、このときのパターンは鉛直と水平の２方向の組み合わせになるのでデータとして膨大になり、あまり現実的でない。
すべてのアドレスを逐次ＣＰＵにより計算させる場合、設定された角度に対してＣＰＵで式（２−１）〜式（２−３）で表されるアドレス計算を行い、所定の記憶素子に対して一時記憶させておくことで利用に供する。この場合、角度が設定されてから初めて補間アドレスを計算し始めるので、ＣＰＵの計算が終わらないとキーストン歪み画像の画素データ補間を行うことができない。
【００８６】
これに対し、本発明の第１〜第４の実施の形態では、一定間隔のアドレスだけをＣＰＵ２ａで算出して保持しておき、算出したアドレス間の他のアドレスについては補間により生成し、補填して用いることができる。その結果、ＣＰＵ２ａの演算量と保持しておくアドレスの量を低減することができた。
【００８７】
ところが、第１〜第３の実施形態では、代表点アドレスの補間が１回のみで、その間の他のアドレスを演算時間が短い線形補間などで補間により求めると、本来非線形なアドレスを線形にしていく課程で誤差がともなう。また、代表点アドレスすべてを補間精度が高いスプライン補間などの非線形補間により求めると、その補間処理に時間がかかり、回路規模も大きくなる。そのため、ある程度高い補間精度を実現しようとすると、処理時間短縮および信号処理回路の小型化に限界がある。すなわち、ある程度の精度を考えた場合に、誤差を少なくするためには、代表点アドレスの間隔を狭くするか、非線形の補間を採用するため、補間精度と、処理時間および回路規模にトレードオフが存在する。
【００８８】
第４の実施の形態では、２回目以降の代表点アドレスの補間処理を導入し、この中程度のサンプリング間隔の補間でたとえば非線形補間を行って補間精度を確保し、最終的な補間アドレス生成は高速で簡素な回路で実現できる線形補間などで行う。その結果、上記トレードオフを解消または緩和し、高い精度の補間を高速に行うことができる。
【００８９】
以下、すべての補間アドレスを、たとえばスプライン関数やキュービック関数など３次の次数をもつ関数を用いた高い精度の補間により行う場合と、途中まで、この精度が高い補間で行い、残りのアドレス生成を線形補間により行う場合との比較を行う。
いま仮に高精度の補間関数ｆ（ｘ）が３次関数であったとし、位相を２５６精度でもったならば、高精度補間関数をすべてのアドレス生成に用いてしまうと、３次関数の第１項だけでも、少なくとも次式（９）に示すように８ビット精度（＝２８）の値を３乗回（＝２２４）計算しなければならない。これでは、算出までの負荷が大きく、処理時間がかかり、あるいは、ハードウェアで構成したときに回路規模が大きくなってしまっていた。つまり、この方法ではすべての位相の補間演算をこの高次関数で実行しようとするため、位相が細かくなればなるほど、演算が複雑化してしまう。
【００９０】
【数９】
【００９１】
これに対して、第４の実施の形態の手法を用いて同などの演算を行う例として、１次代表点アドレスとして２５６位相を、２次代表点アドレスとして６４位相を選び、２次代表点アドレスから所望の補間アドレスを線形補間により求めると仮定する。このときのアドレス計算は、次式（１０）のように表される。
【００９２】
【数１０】
【００９３】
この場合、乗算が２回に分割されるために一般的には回路規模の大きくなる乗算器のビット幅を小さくすることができるばかりでなく、固定値計算（すなわち、同じ値の繰り返し計算）ですむ部分が多くなり、大幅な回路規模の縮小が可能となる。
ただし式（９）と式（１０）では、若干補間したときの誤差精度が異なリ、式（９）での演算はより精度が高いが、第４の実施の形態では、その程度の誤差精度は問題にならない範囲での使用が前提となる。つまり、第４の実施の形態に示す手法を用いると、キーストン歪み補正が人間の視覚による認識精度を超えるような高い精度は必要にならないため、そのことを積極的に利用してアドレス計算の効率向上と回路規模低減を図ることができる。
【００９４】
なお、上述した第１〜第４の実施の形態において、プロジェクターのＬＣＤ表示面をスクリーンに対してひねる動作を付加しても良い。具体的には、プロジェクター１またはＬＣＤパネル３を、その光軸または光軸に平行な軸を中心に軸回転させる動作を追加する。これによって、ＬＣＤパネル面内で画像をさらに大きく表示することによってパネル面の有効利用を図り、解像度と明るさがより改善される。
【００９５】
上述した第１〜第４の実施の形態においてはＶＧＡ画像をＳＶＧＡ画像に変換する場合を例示したが、変換前の画像の解像度、変換後の画像の解像度、およびＬＣＤパネルの解像度は任意である。また、代表点アドレスのサンプリングレートも任意である。図２４の図表に、バイリニア補間で必要となる代表点アドレス数をパネル解像度ごとに例示している。
【００９６】
【発明の効果】
本発明に係る画像投射装置および画像変換方法によれば、アドレス計算点の増加または計算式の複雑化によって増大するアドレス計算の負担が軽減され、処理の高速化を図ることができる。またアドレス生成を回路により実現する場合は、その回路規模を縮小することが可能となる。
【図面の簡単な説明】
【図１】発明の実施の形態におけるフロントプロジェクターをスクリーンの正面に配置した場合に、これらを上方から見た図である。
【図２】本発明の実施の形態におけるプロジェクターの配置可能な範囲を、正面配置の位置を中心として示す図である。
【図３】（Ａ）は横からの画像投影時の図、（Ｂ）は入力画像イメージを示す図、（Ｃ）はＬＣＤパネル面上での画像イメージ図である。
【図４】（Ａ）は正面位置から水平と垂直の双方の方向にずれた位置からの斜め投射時の図、（Ｂ）は入力画像イメージ、（Ｃ）はＬＣＤのパネル面上での画像イメージである。
【図５】本発明の実施の形態におけるプロジェクターの基本構成を示す図である。
【図６】第１の実施の形態のプロジェクターにおいて、図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図７】イメージプロセッサ内部の回路の一構成例を示すブロック図である。
【図８】（Ａ）は正面投射の場合の右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｙｚ平面図、（Ｃ）はｘｙ平面図である。
【図９】（Ａ）は垂直投射角α度、水平投射角β度の場合に、右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｙｚ平面図、（Ｃ）はｘｙ平面図である。
【図１０】（Ａ）〜（Ｃ）は、スクリーンを軸回転させた場合の図９（Ａ）〜図９（Ｃ）と等価的な斜め投射の位置関係を示す図である。
【図１１】（Ａ）および（Ｂ）は座標関係についてまとめて示す図である。
【図１２】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はキーストン変形による歪み画像イメージ図である。
【図１３】（Ａ）はマッピング時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１４】代表点アドレスの取り方の変形例を示す、マッピング時の画像イメージ図である。
【図１５】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右下からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１６】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって左上からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１７】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右上からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１８】第２および第３の実施の形態のプロジェクターにおいて、図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図１９】第２の実施の形態のプロジェクターにおいて、アドレス生成の流れを示すブロック図である。
【図２０】第４の実施の形態のプロジェクターにおいて、アドレス生成の流れを示すブロック図である。
【図２１】第４の実施の形態におけるアドレス生成で、１次代表点アドレス、２次代表点アドレス、および、補間アドレスの関係を例示する図である。
【図２２】第４の実施の形態におけるアドレス生成の手法を示すフローチャートである。
【図２３】第４の実施の形態で用いることができるスプライン補間手法を模式的に示す図である。
【図２４】バイリニア補間で必要となる代表点アドレス数をパネル解像度ごとに示す図表である。
【符号の説明】
１…プロジェクター、２…回路部、２ａ…演算部、２ｂ…アドレス補間部、２ｂ−１…第１のアドレス補間部、２ｂ−２…第２のアドレス補間部、２ｃ…データ補間部、３…ＬＣＤパネル、３ａ…表示画像、４…投光部、５…光学部、６…相対関係取得部、２１…コムフィルタ、２２…クロマデコーダ、２３…セレクトスイッチ、２４…アナログ−ディジタル・コンバータ、２５…イメージプロセッサ、２６…画像メモリ、２７，２８…記憶部、１０１，１０１ｔ…スクリーン、１０１ａ…投影画像、２５１…ＩＰ変換部、２５２…スケーラ、２５３…ＣＰＵインターフェース、２５４…メモリ制御部、２５７…係数発生部、２５８…フィルタ演算部、ＰＩ…投影画像イメージ、ＰＩＫ…画像イメージ、ＰＩＯＵＴ…出力画像イメージ、α，β…投射角度
【発明の属する技術分野】
本発明は、画像表示部に画像を表示し、その表示画像を投射面に光を利用して投射する画像投射装置と、表示画像を生成する際の画像変換方法とに関する。
【０００２】
【従来の技術】
いわゆるプロジェクターと称される画像投射装置は画像表示部、たとえばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）を有している。画像表示部に画像を表示させ、その表示画像を外部の投射面、たとえばスクリーンの面に投射する。
【０００３】
このとき、スクリーンに対するプロジェクターからの画像の投射角度が斜めであると、本来、矩形状であるはずの画像がスクリーン上で台形状に歪む。このため、スクリーン上の画像の台形歪みを補正するいわゆるキーストン補正機能を備えた液晶プロジェクターが知られている。
【０００４】
鉛直または水平のキーストン歪み補正では、スクリーン上の投影画像と逆方向に意図的に歪ませた画像を液晶パネル上で生成する。正矩形の入力画像を意図的に歪ませる画像変換は、通常、プロジェクターが有する画素数変換機能を利用して行う。たとえば、鉛直のキーストン歪み補正では、元画像の１フレーム内の単数または複数の水平ラインデータに対して、補間処理や間引き処理をディジタル的に施すことにより台形歪みの逆変換を実行する。
【０００５】
この画像変換を、座標変換式を用いて行う方法が知られている（たとえば、特許文献１参照）。
この方法では、液晶パネル上の整数座標に対応する実数座標を座標変換式によって算出し、実数座標の周囲にある画素データをフレームメモリから読み出して、補間演算により整数座標に書き込む画素データの値を求めることによって、台形歪みが補正された画像を液晶パネル上に形成する。
【０００６】
【特許文献１】
特開２００３−２９７１４号公報（第３〜第４頁）
【０００７】
【発明が解決しようとする課題】
ところが、この特許文献１に開示された方法では、鉛直方向の歪み補正と、水平方向の歪み補正を同時にできない。また、特許文献１には、鉛直方向の変換式は示されているが、水平方向の変換式が開示されていない。水平方向の変換は、一般的に、複数ラインの画素データの変換であるため、より複雑な式となると考えられる。このため、特許文献１に記載されたキーストン歪み補正方法が適用されたプロジェクターでは使い勝手が悪くなり、製品としての魅力に乏しい上、トータルの処理時間が長くなり処理効率が悪いという課題がある。
【０００８】
本発明の第１の目的は、鉛直方向と水平方向に歪んだ画像の補正が可能であり、かつ、その補正時の処理の負担を軽減した画像投射装置を提供することにある。
本発明の第２の目的は、入力画像を変換することにより、鉛直方向と水平方向に歪んだ画像を補正する際の処理の負担を軽減した画像変換方法を提供することにある。
【０００９】
【課題を解決するための手段】
本発明の第１の観点に係る画像投射装置は、上述した第１の目的を達成するためのものであり、画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成する演算部と、前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、を有する。
【００１０】
好適に、前記アドレス補間部が、前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間部と、前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間部と、を含む。
【００１１】
本発明では、前記画像表示部と前記投射面との相対関係情報を取得する相対関係取得部をさらに有し、前記演算部は、前記相対関係情報をパラメータとした演算を実行する。この場合、好適に、前記演算部は、前記アドレスと前記データの補間中に、次に入力が予想される相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１２】
本発明の第１の観点に係る画像変換方法は、上述した第２の目的を達成するためのものであり、投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成するステップと、前記代表点アドレスの間の他のアドレスを補間により生成するステップと、前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、を含む。
【００１３】
好適に、アドレスを補間により生成する前記ステップが、前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間ステップと、前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間ステップと、を含む。
【００１４】
本発明では、前記代表点アドレスの前記演算に用いる、前記画像表示部と前記投射面との相対関係情報を取得するステップを、さらに含み、前記代表点アドレスの生成ステップでは、前記相対関係情報をパラメータとした演算を実行する。この場合、好適に、前記アドレスの補間、前記アドレスの対応付けおよび画素データの前記補間中に、次に入力が予想される前記相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１５】
第１の観点では、歪み画像の代表点アドレスを演算部が演算により生成し、代表点アドレス間の他のアドレスをアドレス補間部が生成する。これら２つの手段によって生成されたアドレスが歪み画像のアドレスを形成する。この歪み画像のアドレスと所望の画像のアドレスとの対応関係にもとづいて、歪み画像と所望の画像のアドレス対応関係が一義的に決まる。歪み画像というのは、もともと正矩形の画像を斜めに投射したときに投射面上に映し出された画像であることから、この関係が求まれば、逆に正矩形の画像を投射面上で得るための補正後の画像のアドレスがわかる。したがって、データ補間部は、このアドレスの対応関係にもとづく画像表示部の位置に、表示画像の新たな画素データを補間により生成する。以後、生成した表示画像を画像表示部が投射すると、歪みが補正された所望の画像が投射面上に現出する。
第１の観点で好ましい態様では、アドレス補間部が、演算により求めた第１の代表点アドレス間に第２の代表点アドレスを補間により生成し、さらに、第２の代表点アドレス間に他のアドレスを補間により生成する。
また、他の好ましい態様では、画像表示部と前記投射面との相対関係情報が取得され、演算部は、この相対関係情報をパラメータとした演算を実行する。このとき、演算部は、アドレスとデータの補間中に、次に入力が予想される相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する。
【００１６】
本発明の第２の観点に係る画像投射装置は、前述した第１の目的を達成するためのものであり、画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを記憶している記憶部と、前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、を有する。
【００１７】
本発明の第２の観点にかかる画像変換方法は、前述した第２の目的を達成するためのものであり、投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、
前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを、前記画像表示部と前記投射面との相対関係ごとに記憶部にあらかじめ記憶させるステップと、前記相対関係の情報を取得するステップと、取得した相対関係の前記情報に対応した前記代表点アドレスを前記記憶部から読み出し、読み出した当該代表点アドレスの間の他のアドレスを補間により生成するステップと、前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、を含む。
【００１８】
第２の観点では、代表点アドレスをあらかじめ算出し、記憶部に記憶させておく。このとき、画像変換方法のように、画像表示部のスクリーンに対する相対関係ごとに代表点アドレスを記憶させる。記憶部内の代表点アドレスのうち、用いる代表点アドレス間の他のアドレスを、アドレス補間部が補間により生成する。その後、第１の観点と同様、アドレスの対応付けを行い、この対応関係にもとづく画像表示部の位置に、表示画像の新たな画素データを補間処理により生成する。以後、画像表示部が表示画像を投射すると、歪みが補正された所望の画像がスクリーン上に現出する。
【００１９】
【発明の実施の形態】
本発明の画像投射装置（プロジェクター）と、それに用いる画像変換方法の実施の形態を、図面を参照しながら説明する。
【００２０】
図１に、フロントプロジェクターをスクリーンの正面に配置した場合に、これらを上方から見た図を示す。
図１に示す配置おいて、プロジェクター１の投射光の軸と映像が映るスクリーン１０１とが、上から見ると直交するように配置される。プロジェクター１で投射する映像はテレビ信号やコンピュータ画面の信号である。これらの信号に重畳された映像の表示領域の形状は、テレビやコンピュータディスプレイを見れば分かるように、信号によって画素数に違いはあるものの映像全体として４：３や１６：９などの辺の比（アスペクト比）をもつ長方形である。プロジェクター１のＬＣＤパネルに表示された長方形の映像は、まっすぐに投射しなければ投射された映像も長方形にならず、本来の映像の形をゆがめてしまう結果になる。
【００２１】
図２は、正面に配置したプロジェクターの位置をＰ０としたときに、本発明の実施の形態におけるプロジェクター１の配置可能な範囲を示す図である。
プロジェクター１は、正面位置Ｐ０を含む水平面Ｐｈ内に配置でき、また、正面位置Ｐ０を含む垂直面Ｐｖ内に配置できる。さらに、プロジェクター１は、２つの平面Ｐｈ，Ｐｖによって区切られる第１象限Ｐ１、第２象限Ｐ２、第３象限Ｐ３、第４象限Ｐ４のいずれにおいても任意に配置できる。
プロジェクター１は、その内部のＬＣＤパネルの表示画像を、上述した範囲内であればどの位置から投射してもよい。プロジェクター１は、投射位置に応じた画像の歪みを補正する機能を有しているので、この機能を働かせれば恰も正面から投射したときと同じアスペクト比をもった正四角形の画像をスクリーン１０１上に映し出すことができる。この補正を、キーストン歪み補正という。
【００２２】
図３（Ａ）に、水平面内でスクリーンに向かって左横からの画像投影イメージを示す。図３（Ｂ）に入力画像イメージを、図３（Ｃ）にプロジェクターに内蔵されたＬＣＤパネル面上での画像イメージを示す。
図３（Ａ）に示すように、スクリーン１０１に向かって左横にプロジェクター１を配置して投射しているが、スクリーン１０１上の映像は正面から投射しているときと同じように見える。本来であれば、投射された画面は図中の斜線部を含め全体が台形に歪んだように変形するはずである。これを横キーストン変形といい、横キーストン変形を補正することを横キーストン補正という。
このように横に置いたプロジェクター１から画像を投射して、それが正面から投射したかのようにスクリーン１０１上で映るには、あらかじめプロジェクター１の投射位置によって画像がどのように歪むかを計算しておかなければならない。このとき、横から投射したときに歪む形に対して作為的に逆の方向に歪ませた画像を作り、それを投射することで横方向から投射しても画像を正面から投射した時と同じように見せることができる。上記具体例で図３（Ａ）のような投射映像を得るためには、図３（Ｂ）の入力画像を図３（Ｃ）のようにＬＣＤパネル面上で故意に変形して表示させ、この表示画像をスクリーン１０１に投影する。
【００２３】
図４（Ａ）に、図２における第３象限Ｐ３からの画像投影イメージを示す。また、図４（Ｂ）に入力画像イメージを、図４（Ｃ）にＬＣＤのパネル面上での画像イメージを示す。
図３（Ａ）の横キーストン歪みは台形歪みであったが、これに垂直方向の歪み成分が加わった図４（Ａ）の場合、さらに歪み形状が複雑になる。図４（Ａ）に示す正四角形の補正後の投影画像を得ようとすると、ＬＣＤパネル表示画像は、図４（Ｃ）に示すように画像をＬＣＤパネル面内で回転させたようにする必要がある。
図４（Ｃ）および前記図３（Ｃ）のいずれの場合でも、補正前の投影画像形状と逆に故意に歪ませた画像をＬＣＤパネル面の有効表示領域いっぱいに表示すれば、解像度、明るさの低下が極力抑えられた正四角形の投影画像がスクリーン上に得られる。
【００２４】
以下、入力画像をＬＣＤパネルの表示画像に変換することによって、このような補正が可能な画像投射装置と画像変換方法の実施の形態を、より詳細に説明する。この画像変換では、図４（Ａ）のように第３象限Ｐ３からの投射の場合を例に水平および垂直の歪みを同時に補正可能なアドレス生成の一般式を求める。水平のみ、あるいは垂直のみの歪み画像は、この一般式において水平または垂直の投射角度がゼロの場合で表現できる。また、第３象限以外の他の象限からの投射は、式が異なるのみで考え方は同じである。
【００２５】
［第１の実施の形態］
図５に、プロジェクターの基本構成を示す。
プロジェクター１は、映像信号（入力信号）に種々の信号処理を施す回路、各種駆動系の回路を含む回路部２を有する。回路部２は、信号処理回路内の一部に、制御部および演算部としての中央演算処理部（ＣＰＵ）２ａ、アドレス補間部２ｂ、および、データ補間部２ｃを含む。プロジェクター１は、入力信号に各種信号処理を施した信号が示す入力画像を画像変換して得られた表示画像３ａを表示する画像表示部３、たとえばＬＣＤパネルを有する。また、プロジェクター１は、表示画像３ａを外部に投射するための光源を含む投光部４と、各種レンズを含む光学部５とを有する。ＬＣＤパネル３は透過型と反射型のいずれでもよいが、いずれにしても表示画像３ａが、光学部５を通って投射面としてのスクリーン１０１に投影画像１０１ａとして映し出されるものであればよい。
演算部としてのＣＰＵ２ａは、画像変換に必要な歪み画像のアドレスのうち、任意のサンプリングレートでサンプリングされた代表点アドレスを演算により算出する。ＣＰＵ２ａは、アドレス同士の相対関係を求める手段（以下、マッピング手段という）としても機能する。ＣＰＵ２ａは、他の構成を制御する役目もある。代表点アドレスの演算およびアドレスの対応付け（マッピング）についての詳細は後述する。
【００２６】
プロジェクター１は、ＬＣＤパネル３の表示画像とスクリーン１０１との相対的な関係を示す相対関係情報を取得する相対関係取得部６を有する。相対関係取得部６は、外部から相対関係情報を入力する入力部、外部操作手段（ボタンなど）、想定される相対関係情報をあらかじめ記憶した記憶部（たとえば、ＲＯＭ）、あるいは相対関係を自ら検出する手段など、種々の形態がある。相対関係取得部６は、たとえば、少なくとも、表示画像のスクリーン１０１までの距離と、光学部５の光軸とスクリーン面とのなす角度とを取得する。
【００２７】
液晶などの固定画素のパネルを用いるプロジェクターでは、入力された入力画像の画素数と出力画像の画素数とが異なる場合がある。そのため画素数を変換するための信号処理機能を備えている。これをスケーリング機能と呼ぶが、この処理では、本来画素データの無い位置でのデータが必要になり、画素の補間演算が行われる。補間演算では、周辺の画素のデータを用いて目的の位置の画素データを作り出す。この機能は、たとえば、イメージプロセッサと称される画像処理回路内に、スケーラと呼ばれる回路ブロックを内蔵させることにより実現される。
【００２８】
図６は、図５の回路部２に含まれる画像処理回路、すなわちイメージプロセッサとその周辺の回路ブロックの一構成例を示す図である。
図解した画像処理回路は、コムフィルタ（Ｃｏｍｂ Ｆｉｌｔｅｒ）２１、クロマデコーダ（Ｃｈｒｏｍａ Ｄｅｃｏｄｅｒ）２２、セレクトスイッチ（ＳＷ）２３、アナログ−ディジタル・コンバータ（Ａ／Ｄ）２４、イメージプロセッサ（Ｉｍａｇｅ Ｐｒｏｃｅｓｓｏｒ）２５、ＳＤＲＡＭなどからなる画像メモリ２６、および、ＣＰＵ２ａを有する。このうち、イメージプロセッサ２５とＣＰＵ２ａが、画像変換の機能を実現するための一実施態様に該当する。なお、これらの画像メモリ２６やＣＰＵ２ａの機能をイメージプロセッサ２５内に一体化させてもよい。
【００２９】
図解した画像処理回路は、コンポジットビデオ信号（以下、Ｖｉｄｅｏ信号）、Ｙ／Ｃ信号、ＲＧＢ信号のいずれの映像信号にも対応している。Ｖｉｄｅｏ信号はコムフィルタ２１に、Ｙ／Ｃ信号はクロマデコーダ２２に、ＲＧＢ信号はセレクトスイッチ２３に、それぞれ入力される。いま、Ｖｉｄｅｏ信号が入力されている場合を考えると、コムフィルタ２１でＹ／Ｃ信号に変換され、続くクロマデコーダ２２でＹＵＶ信号に変換される。セレクトスイッチ２３によって選択された信号がＡ／Ｄ２４により変換されてディジタル信号になる。この信号がイメージプロセッサ２５に入力され、所望の信号処理が行われる。このとき、イメージプロセッサ２５の処理がＣＰＵ２ａにより制御され、処理中に、適宜画像メモリ２６が使用される。所望の信号処理が行われた後は、処理後の信号が画像表示部、たとえばＬＣＤパネル３に送られ、この信号にもとづいてＬＣＤパネル３に投射する画像が表示される。
【００３０】
図７に、イメージプロセッサ内部の回路ブロックの一構成例を示す。
イメージプロセッサ２５は、ＩＰ（Ｉｎｔｅｒｌａｃｅ−Ｐｒｏｇｒｅｓｓｉｖｅ）変換部２５１、スケーラ２５２、ＣＰＵインターフェース２５３、メモリ制御部２５４、およびＲＯＭ２５５を有する。スケーラ２５２は、アドレス補間部２ｂ、係数発生部２５７、およびフィルタ演算部２５８を有する。このうち、係数発生部２５７とフィルタ演算部２５８が図５におけるデータ補間部２ｃの一実施態様に該当する。
【００３１】
イメージプロセッサ２５に入力された映像信号はＩＰ変換部２５１に送られ、ここでインターレース信号がプログレッシブ化される。この処理では画像メモリ２６を用いるが、メモリインターフェースとしてのメモリ制御部２５４にＩＰ変換部２５１が接続されることによって、ＩＰ変換部２５１は画像メモリ２６との間で画像データのやり取りを行う。プログレッシブ化された信号は、スケーリング処理を行うためにスケーラ２５２に送られる。スケーラ２５２の内部では、歪み補正に必要なアドレスのうち、前述した代表点アドレス間の他のアドレスを、アドレス補間部２ｂで補間処理により生成する。フィルタ係数を係数発生部２５７で発生させ、発生させたフィルタ係数をフィルタ演算部２５８に供給する。フィルタ演算部２５８が、与えられたフィルタ係数を用いた補間演算処理を行い、入力した映像信号が示す入力画像が、所定の大きさと形状を有したＬＣＤパネルの表示画像に変換される。この変換後の表示画像の信号が出力され、ＬＣＤパネル３に送られる。この補間演算に用いるアドレスやフィルタ係数などのデータを保持するＲＯＭ２５５がスケーラ２５２に接続され、これら一連の処理を含むイメージプロセッシングを制御するＣＰＵ２ａのインターフェース２５３がＩＰ変換部２５１、スケーラ２５２およびＲＯＭ２５５に接続されている。
【００３２】
図６に図解した例において、相対関係取得部６（図５）からの相対関係情報がＣＰＵ２ａに入力される。ＣＰＵ２ａ自身によって、さらに、ＣＰＵ２ａに制御されながらイメージプロセッサ２５内のアドレス補間部２ｂによって、入力画像を表示画像に効率よく変換するための歪み画像データのアドレスが生成される。本実施の形態の画像変換では、アドレス生成手法に大きな特徴の１つがある。
【００３３】
以下、アドレス生成手法の実施の形態を、図面を用いて詳しく説明する。
また、以下の説明では、フロントプロジェクターの表示画像を、スクリーンに対して正面の位置を基準に、垂直方向にα度上向きで、水平方向ではスクリーン正面から左にβ度回転した位置から斜めに投射する場合を主に説明する。角度αおよびβが正の場合、投射位置は図２の第３象限Ｐ３に属する。他の象限からの投射時の補正は、ほぼ同じような考え方、方法で行える。このとき入力信号としてＶＧＡ（６４０画素×４８０ライン）の解像度をもつ映像信号が入力され、これをＳＶＧＡ（８００画素×６００ライン）に解像度変換し、また斜め方向から投射する場合のスクリーン上の投影画像の歪みをとる補正も画像変換処理で行う場合について説明する。
【００３４】
図８（Ａ）に、正面投射の場合の右手座標系におけるプロジェクター１とスクリーン１０１の位置関係を示す。また、それに対応したｙｚ平面図を図８（Ｂ）に、ｘｙ平面図を図８（Ｃ）に、それぞれ示す。このとき、プロジェクター１の位置座標を（Ｐｘ，Ｐｙ，Ｐｚ）、スクリーン１０１上の任意の点の位置座標を（Ｓｘ，Ｓｙ，Ｓｚ）で表す。位置座標（Ｐｘ，Ｐｙ，Ｐｚ）と（Ｓｘ，Ｓｙ，Ｓｚ）により決まるスクリーン１０１とプロジェクター１の距離、および、前記斜め投射角度αとβが、前述した相対関係情報である。
図８（Ｂ）および図８（Ｃ）に示すように、正面投射ではスクリーン面と光軸が直交する。ただし、光軸はスクリーン中央ではなく下寄り位置、ここではスクリーン下辺中央付近でスクリーン面と交差している。フロントプロジェクターを机の上に配置し、あるいは天井から吊るような配置を取る場合、レンズの中心とスクリーンの中心を結ぶ線が地面と平行にはならないように両者を配置させるためである。これは、たとえばプロジェクターを机に置いて投射した場合、投射する画像の下端部分が机に映ってしまわないようにするための仕様であり、光学オフセットと称される。
【００３５】
図９（Ａ）に、垂直方向にα度上向きで、水平方向については向かって左手からスクリーンに対しβ度の角度で斜めに投射する場合、右手座標系におけるプロジェクターとスクリーンの位置関係を示す。また、ｙｚ平面図を図９（Ｂ）に、ｘｙ平面図を図９（Ｃ）に、それぞれ示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向に（−β）度となる。
【００３６】
ここで、キーストン歪み補正を考えやすくするために相対的な視点を変えることを考える。図９（Ａ）〜図９（Ｃ）ではプロジェクター１の位置を動かして斜め方向から投射していたが、ここでは、相対的な位置関係を維持したままでプロジェクター１は動かさずに、スクリーン１０１を、その場で軸回転させることを想定する。
図１０（Ａ）〜図１０（Ｃ）に、スクリーンを軸回転させた場合の図９（Ａ）〜図９（Ｃ）と等価的な斜め投射の位置関係を示す。このとき、右手座標系で表現するとスクリーンを、その下辺（ｘ軸）を中心に直立位置からｙ方向（背面側）に（−α）度傾かせ、向かって左側の辺（ｚ軸）を中心に左回転方向にβ度回転させる。つまり、図１０（Ｂ）と図１０（Ｃ）に示す傾きおよび回転の角度は、図９（Ａ）〜図９（Ｃ）に示すプロジェクターの設置位置からの投射角度に対して符号が逆になる。
【００３７】
以下、図１０（Ａ）〜図１０（Ｃ）のように、正面の位置にプロジェクター１があり、この位置から傾いたスクリーン（以下、１０１ｔと表記）に映像を投射した場合に、投射された映像（投影画像）がどのように変形しているかを考える。
プロジェクター１が投射する光は、図９（Ａ）でスクリーン１０１のあったｚｘ平面上を通過して傾いたスクリーンに映る。傾いたスクリーン１０１ｔがある平面は、原点を中心に垂直に（−α）度、水平にβ度回転しているので、原点を中心とした回転行列を用いて表現することができる。本実施の形態では水平と垂直の回転なので、先に水平方向に回転させた後に、次に垂直方向の回転を行う手順によって回転行列が定義される。具体的には、ｚｘ平面の法線ベクトル（ｎｘ，ｎｙ，ｎｚ）が、回転によって次の行列式（１）で表現される。
【００３８】
【数１】
プロジェクター１の位置とスクリーン１０１の位置していたｚｘ平面上の点を結ぶ直線を考え、この直線と行列式（１）の法線ベクトルをもつ平面との交点を求める。この交点が、傾いたスクリーン１０１ｔの平面に映る映像の座標点である。この傾いたスクリーンの座標点に対して、図９（Ａ）のように視点をスクリーンの正面において見る場合には、再び反対向きの回転として原点を中心に垂直にα度、水平に（−β）度回転させればよい。すると、斜め方向から投射した場合に歪む形が求められる。このような方法によって導出されたｘ方向、ｙ方向、ｚ方向の座標を、それぞれ次式（２−１）、（２−２）、（２−３）に示す。
【００４０】
【数２】
これらの式で表される（Ｋｘ，Ｋｙ，Ｋｚ）は、図９（Ｂ）に示すようにプロジェクター１を垂直にα度上向きで、図９（Ｃ）のように水平方向にスクリーン１０１に対して左から（−β）度の角度で投射するとき、キーストン歪みによって変形された座標である。
図１１（Ａ）および図１１（Ｂ）に、座標関係についてまとめて示した。これらの図で（Ｓｘ，Ｓｙ，Ｓｚ）はスクリーンの座標であり、正面投射の場合にスクリーン上に正四角形に映し出される入力画像の座標に相当する。また、座標（Ｋｘ’，Ｋｙ’，Ｋｚ’）は図１０（Ｂ）および図１０（Ｃ）のように斜めに傾いたスクリーン１０１ｔの平面上に投射された座標である。上述のように（Ｋｘ，Ｋｙ，Ｋｚ）はキーストン歪み変形座標である。
このように、前述した３つの式（２−１）、（２−２）、（２−３）により、任意の方向からの投射によってもたらされるキーストン歪変形座標が与えられる。
【００４２】
つぎに、出力信号（表示画像）の解像度に合わせた座標の、式（２−１）、（２−２）、（２−３）による変形座標を求める。つまり、８００画素×６００ラインのＳＶＧＡ出力の場合、歪む前の画像のｘ座標Ｓｘは０から７９９まで変化し、ｚ座標Ｓｚは０から５９９まで変化するが、このときのキーストン歪み後のｘ座標Ｋｘとｚ座標Ｋｚを求める。なお、ｙ座標ＳｙとＫｙは、画像がｚｘ平面にあるのでゼロである。
【００４３】
図１２（Ａ）に正面投射のＳＶＧＡ出力画像のアドレスマップのイメージＰＩＯＵＴ、図１２（Ｂ）にα＝１０、−β＝−３０として座標変換したキーストン変形後のＳＶＧＡ出力画像のアドレスマップのイメージ（以下、歪み画像イメージ）ＰＩＫを示す。ここでは、図示の都合上すべての画素位置のサンプルリング点を示さず、３３画素ごとに１つのドットでサンプリング点を代表させている。式（２−１）および式（２−３）を用いて実際に座標変換によって生成された代表点アドレスは、３３画素ごとのアドレスのうち（３３×３）画素ごとに示す白丸印のアドレスである。図５および図７に示す演算部（ＣＰＵ２ａ）が代表点アドレスを生成する。
代表点アドレス間に存在する、黒丸のアドレスを含む他のアドレスは、式を用いた演算により生成しないで、図５および図７に示すアドレス補間部２ｂ、たとえば複数タップの補間回路から生成される。この最終的なアドレスを、以下、画素データの補間処理に用いるアドレスという意味で、「補間アドレス」という。補間方法に限定はなく、たとえば、バイリニア補間を含む線形補間方法、スプライン補間などの非線形補間方法のいずれを採用してもよい。線形補間を採用すると、アドレス補間部２ｂの構成が簡単になる利点がある一方、アドレスの変換精度を高く維持しようとすると代表点アドレスのサンプリングレートを余り低くできないという不利益がある。線形補間法を採用するか、非線形補間法を採用するかは、この利益と不利益を考慮して決める。
いずれにしても、本実施の形態においては、演算部２ａによる代表点アドレスの生成とアドレス補間部２ｂによる他のアドレスの生成とが並列に実行されるため、アドレス変換時間が短いという利益が得られる。
【００４４】
つぎに、図１３（Ａ）のように、補正により得たい画像のイメージ（スクリーン上に実現したい投影画像の仮想のイメージ、以下、投影画像イメージという）ＰＩを、図１２（Ｂ）に示す歪みによって変形した座標空間上に重ねる。これにより歪み画像イメージＰＩＫに投影画像イメージＰＩがマッピングされ、両画像のアドレスの対応関係が決まる。このとき、入力した入力画像はＶＧＡだが、画像の大きさと位置を調整するために、投影画像イメージＰＩを任意の大きさ（たとえば、ＳＶＧＡの大きさ）で、変形したアドレス空間（歪み画像イメージＰＩＫ）内の任意の位置に配置することができる。ただし、投影画像イメージＰＩが歪み画像イメージＰＩＫ内に完全に収まるようにしないと、次に行う補間後に画像の一部が欠けてしまう。したがって、望ましくは、所望のアスペクト比（本例では、４：３）の投影画像イメージサイズが歪み画像のアドレス空間内で最大限となることを規定しておく。すると、この投影画像イメージＰＩの位置と大きさは単なる図形問題に帰結し、たとえば図１３（Ａ）のような位置とサイズで、投影画像イメージＰＩと歪み画像イメージＰＩＫとの関係が一意に決まる。
【００４５】
このようなマッピング（アドレスの対応付け）は、歪み画像イメージＰＩＫのアドレス分布がすでに前記した式（２−１）、（２−２）、（２−３）から求められているので、実際の物理メモリ（記憶資源）を用いずとも、たとえばＣＰＵ２ａ内で仮想メモリ空間を想定して実行できる。このため、マッピング自体が高速なうえに物理メモリとのデータのやり取りがなくて効率がよく、数回やり直しても、その処理の合計時間が画像変換全体の時間に占める割合は極めて小さい。もちろん、ＣＰＵ２ａが容量的に不足する場合は、たとえばＲＯＭ２５５を用いて適宜マッピングを行っても構わない。
【００４６】
マッピングにより得られたアドレスの対応関係は、歪み画像と、歪みがなくスクリーン上で正四角形となる所望の投影画像とのアドレス対応関係であるが、歪み画像というのはもともと歪みがない正四角形のＬＣＤパネル上の画像の投影の結果である。したがって、上記アドレスの対応関係を利用して、歪みがないスクリーン上の投影画像を得るためのＬＣＤパネル３の表示画像が生成できる。
具体的な方法としては、ＳＶＧＡ出力の場合、ＬＣＤパネル３の有効表示領域の座標は８００×６００個になるが、このすべての点について、マッピングされた画像のアドレスで補間を行う。このとき８００×６００個の各点での補間のうち、図１３（Ａ）に示す歪み画像イメージＰＩＫと投影画像イメージＰＩとが重なる領域のすべてのアドレスでの補間では、投影画像のように画像データを再現できるようにフィルタ係数が選択され、その画像再現に必要な原画像の複数の画素データを上記フィルタ係数で重み付けして新たな画素データを合成する。合成後の画素データは、マッピングにより求めた上記アドレス対応関係にもとづいて、４：３のアスペクト比の正四角形画面であるＳＶＧＡ画面内のどの位置に配置するかを一意に決めるアドレスに割り当てられる。一方、図１３（Ａ）に示す投影画像イメージＰＩ周囲の歪み画像イメージＰＩＫ内領域の補間では、画像データがない黒色画素同士の合成となり、したがって補間後も黒色の画像データがＳＶＧＡ画面内の対応位置に割り当てられる。
【００４７】
図１３（Ｂ）に、このような画像変換手順により生成されたＳＶＧＡ出力画像を示す。この画像がキーストン歪み補正を行った画像である。この画像を図４（Ｃ）のようにＬＣＤパネルに表示させ、図４（Ａ）のように投影すると、スクリーン上で正四角形の投影画像が得られる。マッピングにより得られたアドレスの対応関係は、上述したようにイメージサイズ同士の重なる面積が最大となるように決められていることから、スクリーン上の投影画像は明るさおよび解像度の低下が最小に抑えられている。
【００４８】
なお、代表点アドレス間の他のアドレスを補間により生成する場合、周囲の代表点アドレスの座標を用いて新たにアドレスを生成する。したがって、この場合、図１４に示すように、周囲に余分に代表点アドレスをあらかじめ生成することが望ましい。この図１４では、（３３×５）画素ごとに代表点アドレスを生成している。
【００４９】
前述した図１２（Ａ）および図１２（Ｂ）の説明では、出力画像イメージＰＩＯＵＴを出力画像（ＳＶＧＡ画像）の大きさに合わせて６００×８００個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成した。そして、図１３（Ａ）に示すように、歪み画像イメージに対し、投影画像イメージＰＩの大きさと位置を変えながら重ね、重ねた後の両画像イメージから、歪み補正に必要なアドレス対応関係を求める手法を採った。
これと同じアドレス対応関係は、次の手法でも求めることができる。
図１２（Ａ）において出力画像イメージＰＩＯＵＴを入力画像（ＶＧＡ画像）と同じ６４０ｘ４８０個のアドレスで与え、これを変形させて歪み画像イメージＰＩＫを生成し、図１３（Ａ）では、歪み画像イメージＰＩＫの大きさを変える一方で、投影画像イメージＰＩの大きさは最初からＳＶＧＡ対応として変化させず、その位置のみを変えて両画像イメージの最適な重ね合わせを行う。このような手法でも、結果は図１３（Ａ）と同じとなる。
【００５０】
以上は、スクリーンに向かって左下位置（第３象限Ｐ３）からの投射時の歪み補正を述べたが、他の位置からの投射の場合、歪み座標を求める式が異なるのみで、上述した補正方法の手順は同じである。
【００５１】
図１５（Ａ−１）と図１５（Ｂ−１）に、スクリーン１０１に向かって右下位置（第４象限Ｐ４）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１５（Ａ−２）と図１５（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向に（−α）度、水平方向に（−β）度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（α）、水平（β））で表し、次式（３−１）、（３−２）、（３−３）に示す。
【００５２】
【数３】
図１６（Ａ−１）と図１６（Ｂ−１）に、スクリーン１０１に向かって左上位置（第２象限Ｐ２）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１６（Ａ−２）と図１６（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向にβ度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（−α）、水平（−β））で表し、次式（４−１）、（４−２）、（４−３）に示す。
【００５４】
【数４】
図１７（Ａ−１）と図１７（Ｂ−１）に、スクリーン１０１に向かって右上位置（第１象限Ｐ１）からの投射時における右手座標系のｘｙ平面図とｙｚ平面図を示す。また、プロジェクター１の投射位置は正面投射から動かさないとしたときに、同じ相対関係となるようにスクリーン１０１を軸回転させた場合のｘｙ平面図とｙｚ平面図を、図１７（Ａ−２）と図１７（Ｂ−２）に示す。このとき、右手座標系で表現したスクリーン１０１に対するプロジェクター１の回転角度は垂直方向にα度、水平方向に（−β）度となる。
傾いたクリーン１０１ｔに投射されたキーストン歪み座標を求める式を、スクリーンに対するプロジェクターの投射角度（垂直（−α）、水平（β））で表し、次式（５−１）、（５−２）、（５−３）に示す。
【００５６】
【数５】
本実施の形態では、このようにキーストン歪み変形座標をスクリーンとの相対関係情報を用いた式で求め、歪みがない所望の画像とキーストン歪み画像とのマッピングによりアドレスの相対関係を求め、アドレス相対関係にもとづいた補間処理によりＬＣＤ表示画面を生成する。マッピングは仮想メモリ空間で実行できるので、実際の画像メモリをこの処理のために占有することなく、効率がよい。また、上記式（または歪み計算のアルゴリズム）は、たとえば相対関係情報にもとづいて適した式（またはアルゴリズム）をＣＰＵ２ａがＲＯＭ２５５から読み出すことによって切り換えることができる。したがって、本実施の形態にかかるプロジェクター１は、スクリーン面が見える位置ならば任意の位置からの投射であっても効率よくキーストン歪み補正が可能で、設置自由度が高い。また、マッピング時に解像度変換を自由に行え、また出来る限り最大の解像度となるような設定が可能なため、その点でも効率がよく、出来るだけ高い解像度で明るい画像が容易に得られる。
さらに、演算部２ａの負荷が大きい、式を用いたアドレス計算の対象を代表点に絞り、他のアドレスは補間により生成しているため、この点でも効率がよい。
【００５８】
［第２の実施の形態］
第２の実施の形態は、アドレス生成の他の方法に関する実施の形態である。図５および図７のブロック図、および画像変換の基本的な手順は第１の実施の形態と共通する。
【００５９】
図１８は、第２の実施の形態におけるプロジェクターに内蔵された、イメージプロセッサとその周辺の回路ブロックの構成例を示す図である。
図１８に図解した回路が、図６に図解した第１の実施の形態における回路と異なる点は、ＣＰＵ２ａに接続された記憶部２７、たとえばＲＡＭを有することである。記憶部２７は、代表点アドレスの記憶を行うために設けられている。
【００６０】
図１９に、アドレス生成の流れをブロック図において示す。
本実施の形態においては、投射パラメータ、たとえば投射角度などに応じてあらかじめ計算された代表点アドレスを記憶部２７のテーブルに格納しておく。あるいは、投射パラメータが変化するたびに、それに応じた代表点アドレスをＣＰＵ２ａが算出し、算出した代表点アドレスを、記憶部２７を介してアドレス補間部２ｂに出力する。アドレス補間部２ｂは、代表点アドレスを記憶部２７から読み出して補間アドレスを生成する。なお、このアドレス補間部２ｂが補間アドレスを生成している間に、ＣＰＵ２ａによりつぎの投射パラメータに応じた代表点アドレスの算出を実行させることが望ましい。処理時間が短縮できるからである。
【００６１】
第１の実施の形態におけるＣＰＵ２ａは、代表点アドレスを生成する演算部としての役割のほか、アドレスのマッピング手段、さらには他の構成の制御部としての役割がある。このため、処理の負担が大きく、マッピングや他の構成の制御の空き時間に代表点アドレスの生成を行ったのでは、処理のタイミングが適合しないために全体の効率向上が十分でない場合がある。
【００６２】
第２の実施の形態では、処理のタイミングが合わない場合でも、演算部（ＣＰＵ２ａ）の空き時間を有効利用できるように代表点アドレスを蓄積する記憶部２７を設けている。これにより、ＣＰＵ２ａの処理で重く負荷がかかった状態が続く場合でも、記憶部２７に必要な代表点アドレスが蓄積されているため、画像変換の処理が滞ることが有効に防止される。代表点アドレスは、相対位置情報、たとえば垂直投射角α、水平投射角β、投射位置座標などの組ごとに記憶部２７内に格納されている。
なお、アドレス生成の遅滞を防止するには、代表点アドレス生成用の演算部を、制御用ＣＰＵ２ａと別に設ける実施の形態も可能である。
【００６３】
［第３の実施の形態］
第３の実施の形態におけるプロジェクターの構成自体は、上述した第２の実施の形態と同じであり、プロジェクターの構成図として図５、図７および図１８が適用される。
第３の実施の形態においては、図５に示す相対関係取得部６は、たとえば押しボタンなど、相対位置情報と等価なパラメータを外部から変更可能なものである。より具体的に、上記パラメータとして垂直補正量と水平補正量があり、それぞれの補正量を変化させる押しボタンとして「＋」ボタン」と「−」ボタンが２組設けられている。操作者が垂直補正量または水平補正量のボタンを１回押すと、所定の補正量、たとえば垂直投射角αまたは水平投射角βが所定のステップ、たとえば１度ずつ正または負に変化する。操作者は、ボタンを押すごとにスクリーンの投影画像の歪み補正効果を確認して、次にどのように補正をすればよいかを決める。この操作を繰り返しながら、スクリーンの投影画像が歪みのない正四角形に近くなるまで条件を追い込んでゆく。投影画像が殆ど歪みのない正四角形となったときの垂直補正量と水平補正量が決定されることによって、プロジェクターとスクリーンとの現在の相対位置情報が実質的に取得されたことになる。
【００６４】
第３実施の形態では、押しボタンが押されたとき、次に押されるボタンを先読みして、代表点アドレスの計算をあらかじめ行う。たとえば、「＋」ボタンが押されると、その押されたときの補正量の代表点アドレスの計算と、その補正量を中心にプラスの向きとマイナスの向きにそれぞれ数ステップ分だけ離れた補正量に対応した代表点アドレスの計算とを開始する。あるいは、「＋」ボタンが押された履歴に応じて、即ち、たとえば２回続けて「＋」ボタンが押されたときは、先読みの代表点アドレス計算をプラスの向きに数ステップのみ行う。２回続けて「＋」ボタンが押されたような場合、プラスの向きに先読みして行う代表点アドレス計算回数を、マイナスの向きでの代表点アドレスの計算回数より多くしてもよい。
これらの先読みの代表点アドレス計算は、ＣＰＵ２ａの空き時間を利用してできるだけ行うようにし、計算した代表点アドレスは記憶部２７に蓄積する。後は、第２の実施の形態と同様に必要に応じて代表点アドレスを記憶部２７から読み出し、画像変換処理に用いる。
【００６５】
第３の実施の形態では、ＣＰＵ２ａへの負担が大きな代表点アドレス計算を、先に予測してあらかじめ計算するので、第２の実施の形態よりさらに画像変換の効率が向上するという利益が得られる。
【００６６】
［第４の実施の形態］
本実施の形態は、上記第１〜第３の実施の形態のアドレス生成の変形例に関する。本実施の形態では、演算により求めた代表点アドレス（以下、１次代表点アドレスという）を用いた補間により、その間に、より細かな間隔の２次代表点アドレスを算出し、２次代表点アドレスから補間により最終的なアドレス（補間アドレス）を求める。
なお、ここでは、式（２−１）〜式（２−３）を用いたスクリーンに向かって斜め左下からの投射を行う場合を想定している。本実施の形態におけるアドレス生成手法は、他の向きからの斜め投射においても類推適用できる。
【００６７】
図２０は、アドレス生成の流れを示すブロック図である。
本実施の形態に係るプロジェクターでは、図７に示すアドレス補間部２ｂが、第１のアドレス補間部２ｂ−１と第２のアドレス補間部２ｂ−２とを含む。第１のアドレス補間部２ｂ−１は、ＣＰＵ２ａが算出した１次代表点アドレスから、補間により２次代表点アドレスを生成する。第２のアドレス補間部２ｂ−２は、２次代表点アドレスから、補間により各補間アドレスを生成する。
また、このプロジェクターは、１次または２次代表点アドレスを記憶する記憶部２８を有する。記憶部２８は、代表点アドレス専用として１つ設けてもよいし、１次代表点アドレス用と２次代表点アドレス用に分けて設けてもよい。また、第２および第３の実施形態におけるＲＡＭ２７を記憶部２８として用いてもよいし、ＣＰＵ２ａ内部の記憶領域を用いてもよい。
【００６８】
第１のアドレス補間部２ｂ−１が用いる第１の補間関数と、第２のアドレス補間部２ｂ−２が用いる第２の補間関数に限定はないが、望ましくは、第１の補間関数が第２の補間関数より高次の関数であるとよい。
以下、第１の補間関数がスプライン関数やキュービック関数などの非線形な関数であり、第２の補間関数が線形な関数であるとして、アドレス生成方法を説明する。アドレスの補間では、相対的に広い一定間隔のアドレスを複数用いて、そのアドレスの間に相対的に狭い一定間隔のアドレスを近似的に求める。その補間により求められたアドレスの各位置を「補間のサンプリング点」と称する。このとき、補間により求めたアドレスと理想的なアドレスとの誤差が問題となるが、この誤差精度を「補間精度」という。
【００６９】
図２１は、１次代表点アドレス、２次代表点アドレス、および、補間アドレスの関係を例示する図である。
本例では、１次代表点アドレスは３２画素ごとに１つの一定間隔で生成され、２次代表点アドレスは一次代表点アドレス間で８画素ごとに１つの一定間隔で生成されると想定する。これは図示上の都合で選んだサンプリング間隔であり、実際の高解像度画像では１次代表点アドレス、２次代表点アドレスともにもっとサンプリングを粗くすることができる。これらの代表点アドレスの間隔は、画像の解像度、用いる補間関数の種類と次数（フィルタタップ数）などを総合的に考慮し、処理効率と補間精度が満足できるように決められる。このとき１次代表点アドレスの間隔と２次代表点アドレスの間隔は、画素数を単位として簡単な整数比であることが望ましい。
【００７０】
つぎに、より詳細なアドレス生成の手法を、図２２に示すフローチャートに沿って説明する。なお、ここでは、第１の補間関数がスプライン関数であり、第２の補間関数が線形関数であることを前提とした処理の一例を説明する。
ステップＳＴ１において、キーストン補正を行う設定として投射角度などのパラメータを設定する。より詳細には、ユーザーがスクリーンに対してプロジェクターを設置し、たとえば相対関係情報取得手段６がスクリーンとプロジェクターとの相対関係を示す情報、たとえば投射角度などを取得する。
【００７１】
ステップＳＴ２では、ＣＰＵ２ａが１次代表点アドレスを算出する。このとき、設定された投射角度に対してキーストン歪み画像のアドレスを式（２−１）〜式（２−３）を用いて、たとえば３２画素に１つの割合で演算により生成する。算出された１次代表点アドレスは、図２０に示すように記憶部２８内の、たとえば１次代表点アドレス用のテーブルに、たとえば（Ｋｘ，Ｋｚ）の形式で書き込まれ、一時保持される。
【００７２】
ステップＳＴ３では、図２０に示す第１のアドレス補間部２ｂ−１が、ＣＰＵ２ａにより算出された複数の１次代表点アドレスを記憶部２８から適宜読み出し、読み出した複数の１次代表点アドレスをもとにスプライン補間により８画素ごとに１つの割合で２次代表点アドレスを求める。このとき用いるスプライン補間手法を、図２３で模式的に示す。
この補間は３２画素ごとの１次代表点アドレスから８画素ごとの２次代表点アドレスを生成するのであるから、１次代表点アドレス間に補間するサンプリング点の数は３つであり、その結果、１次および２次の代表点アドレスの位相が４位相となる。図２３では一方の１次代表点アドレスを基準（位相差ｘ＝０）とすると、もう片方の１次代表点アドレスとの間に、位相差が小さいほうからｘ＝１／４，２／４，３／４の３つの２次代表点アドレスが生成される。
スプライン補間関数Ｓｐｌｉｎｅ（ｘ）の一般式は次式（６）により表される。
【００７３】
【数６】
ここで、「Ａ」〜「Ｄ」は用いる４つの１次代表点アドレス値を表す。また、式（６）に各位相を代入して求めた２次代表点アドレスは、これら「Ａ」〜「Ｄ」を用いて次式（７）のようになる。
【００７５】
【数７】
第１のアドレス補間部２ｂ−１は、このようなスプライン関数を用いたフィルタ演算を、用いる１次代表点を１つずつシフトしながら鉛直と水平の２方向で繰り返し、すべての２次代表点アドレスを生成する。生成された２次代表点アドレスは、図２０に示すように記憶部２８内の、たとえば２次代表点アドレス用のテーブルに、たとえば鉛直と水平の各アドレス値のペア形式で書き込まれ、一時保持される。
【００７７】
ステップＳＴ４で、図２０に示す第２のアドレス補間部２ｂ２が、複数の２次代表点アドレス値を記憶部２８から適宜読み出し、読み出した複数の２次代表点アドレス値をもとに線形補間により、８画素ごとに１つの割合の２次代表点アドレス間を埋めるように残りのアドレス（補間アドレス）を求める。この補間も、たとえば鉛直と水平のフィルタ演算によりすべての歪み画像の画素で求め、求めた補間アドレスを図７に示すように、たとえばＣＰＵ２ａを介してデータ補間部２ｃに出力する。
【００７８】
このときＣＰＵ２ａは、すべての歪み画像の画素でアドレス生成が終わったか否かを監視しており（ステップＳＴ５）、この判断が「Ｎｏ」の場合はステップＳＴ３とＳＴ４を繰り返すことにより、上記したすべての補間アドレスの生成が実行される。
ステップＳＴ５の判断が「Ｙｅｓ」となると、処理フローがつぎのステップＳＴ６に移行する。
【００７９】
ステップＳＴ６は、「すべて終了か否か」すなわち設定（プロジェクター位置、スクリーン位置あるいは光学系の条件）ならびに電源の操作や入力信号の有無などが変わっていないかを監視するステップである。この判断が「Ｎｏ」の場合は、プロジェクターが起動状態にあり映像信号の入力があることを条件に、ステップＳＴ２〜ＳＴ５の処理が繰り返される。設定が変更されていない場合、あるいは、電源がオフされると、この判断が「終了（Ｙｅｓ）」となるため当該処理全体が終了する。
【００８０】
なお、このようなアドレス生成のための第１および第２のアドレス補間部２ｂ−１，２ｂ−２は演算が可能なフィルタ演算回路などのハードウエハで実現してもよいし、あるいは、マイクロコンピュータやＣＰＵに書き込まれたプログラムなどのソフトウェアにより実現してもよい。また、ここではプロジェクターの投射する角度や補間処理を行う補間フィルタの種類やタップ数、入力解像度や出力信号解像度などは任意であり、上記で説明したものに特定されない。さらに、２次代表点アドレスから３次代表点アドレスを補間により生成してもよい。つまり、生成する代表点アドレスの次数は任意である。ただし、望ましくは、たとえば元になる代表点アドレスほど補間精度が高い関数を用いることとして、アドレス生成の初期段階で低い補間精度にならないように留意する。
【００８１】
つぎに、本発明の実施の形態の効果を、幾つかの比較例と対比させることにより説明する。
【００８２】
まず、第１〜第４のすべての実施の形態の比較例として、代表点アドレス方式をとらない場合のアドレスの演算量および保持量について説明する。代表点アドレス方式をとらない場合としては、画素データの補間処理に用いるアドレス（補間アドレス）をあらかじめ演算により求め保持しておく方法と、すべての補間アドレスを演算により逐次求める方法とがある。
【００８３】
いずれにしても、式（２−１）〜式（２−３）により１つの画素のキーストン歪み補正に必要な補間アドレスが求められ、これが繰り返されて１フレームの歪み画像の補間に必要なアドレスが生成される。すなわち、液晶パネルに出力する場合、液晶パネルの解像度の画素数に相当する水平アドレスと鉛直アドレスが必要になる。具体的にパネルがＸＧＡ仕様であれば、水平に１０２４画素、鉛直に７６８画素あるので、次式（８）で計算される情報量が補間アドレスとして必要となる。
【００８４】
【数８】
この式（８）は、ある１つの角度についてのキーストン歪み補正で必要な情報量を表しており、角度の設定を変更した場合には、あらたな設定角度でのキーストン補正を行うための補間アドレスがさらに必要となる。
必要な補間アドレスを保持する場合、従来の１つの方法としてすべての補間アドレスデータをテーブルとしてもつことが考えられる。しかし、この場合、式（８）で表される情報量を想定される角度設定の数だけ掛け算した情報量が格納できるテーブルが必要となる。また、このときのパターンは鉛直と水平の２方向の組み合わせになるのでデータとして膨大になり、あまり現実的でない。
すべてのアドレスを逐次ＣＰＵにより計算させる場合、設定された角度に対してＣＰＵで式（２−１）〜式（２−３）で表されるアドレス計算を行い、所定の記憶素子に対して一時記憶させておくことで利用に供する。この場合、角度が設定されてから初めて補間アドレスを計算し始めるので、ＣＰＵの計算が終わらないとキーストン歪み画像の画素データ補間を行うことができない。
【００８６】
これに対し、本発明の第１〜第４の実施の形態では、一定間隔のアドレスだけをＣＰＵ２ａで算出して保持しておき、算出したアドレス間の他のアドレスについては補間により生成し、補填して用いることができる。その結果、ＣＰＵ２ａの演算量と保持しておくアドレスの量を低減することができた。
【００８７】
ところが、第１〜第３の実施形態では、代表点アドレスの補間が１回のみで、その間の他のアドレスを演算時間が短い線形補間などで補間により求めると、本来非線形なアドレスを線形にしていく課程で誤差がともなう。また、代表点アドレスすべてを補間精度が高いスプライン補間などの非線形補間により求めると、その補間処理に時間がかかり、回路規模も大きくなる。そのため、ある程度高い補間精度を実現しようとすると、処理時間短縮および信号処理回路の小型化に限界がある。すなわち、ある程度の精度を考えた場合に、誤差を少なくするためには、代表点アドレスの間隔を狭くするか、非線形の補間を採用するため、補間精度と、処理時間および回路規模にトレードオフが存在する。
【００８８】
第４の実施の形態では、２回目以降の代表点アドレスの補間処理を導入し、この中程度のサンプリング間隔の補間でたとえば非線形補間を行って補間精度を確保し、最終的な補間アドレス生成は高速で簡素な回路で実現できる線形補間などで行う。その結果、上記トレードオフを解消または緩和し、高い精度の補間を高速に行うことができる。
【００８９】
以下、すべての補間アドレスを、たとえばスプライン関数やキュービック関数など３次の次数をもつ関数を用いた高い精度の補間により行う場合と、途中まで、この精度が高い補間で行い、残りのアドレス生成を線形補間により行う場合との比較を行う。
いま仮に高精度の補間関数ｆ（ｘ）が３次関数であったとし、位相を２５６精度でもったならば、高精度補間関数をすべてのアドレス生成に用いてしまうと、３次関数の第１項だけでも、少なくとも次式（９）に示すように８ビット精度（＝２８）の値を３乗回（＝２２４）計算しなければならない。これでは、算出までの負荷が大きく、処理時間がかかり、あるいは、ハードウェアで構成したときに回路規模が大きくなってしまっていた。つまり、この方法ではすべての位相の補間演算をこの高次関数で実行しようとするため、位相が細かくなればなるほど、演算が複雑化してしまう。
【００９０】
【数９】
これに対して、第４の実施の形態の手法を用いて同などの演算を行う例として、１次代表点アドレスとして２５６位相を、２次代表点アドレスとして６４位相を選び、２次代表点アドレスから所望の補間アドレスを線形補間により求めると仮定する。このときのアドレス計算は、次式（１０）のように表される。
【００９２】
【数１０】
この場合、乗算が２回に分割されるために一般的には回路規模の大きくなる乗算器のビット幅を小さくすることができるばかりでなく、固定値計算（すなわち、同じ値の繰り返し計算）ですむ部分が多くなり、大幅な回路規模の縮小が可能となる。
ただし式（９）と式（１０）では、若干補間したときの誤差精度が異なリ、式（９）での演算はより精度が高いが、第４の実施の形態では、その程度の誤差精度は問題にならない範囲での使用が前提となる。つまり、第４の実施の形態に示す手法を用いると、キーストン歪み補正が人間の視覚による認識精度を超えるような高い精度は必要にならないため、そのことを積極的に利用してアドレス計算の効率向上と回路規模低減を図ることができる。
【００９４】
なお、上述した第１〜第４の実施の形態において、プロジェクターのＬＣＤ表示面をスクリーンに対してひねる動作を付加しても良い。具体的には、プロジェクター１またはＬＣＤパネル３を、その光軸または光軸に平行な軸を中心に軸回転させる動作を追加する。これによって、ＬＣＤパネル面内で画像をさらに大きく表示することによってパネル面の有効利用を図り、解像度と明るさがより改善される。
【００９５】
上述した第１〜第４の実施の形態においてはＶＧＡ画像をＳＶＧＡ画像に変換する場合を例示したが、変換前の画像の解像度、変換後の画像の解像度、およびＬＣＤパネルの解像度は任意である。また、代表点アドレスのサンプリングレートも任意である。図２４の図表に、バイリニア補間で必要となる代表点アドレス数をパネル解像度ごとに例示している。
【００９６】
【発明の効果】
本発明に係る画像投射装置および画像変換方法によれば、アドレス計算点の増加または計算式の複雑化によって増大するアドレス計算の負担が軽減され、処理の高速化を図ることができる。またアドレス生成を回路により実現する場合は、その回路規模を縮小することが可能となる。
【図面の簡単な説明】
【図１】発明の実施の形態におけるフロントプロジェクターをスクリーンの正面に配置した場合に、これらを上方から見た図である。
【図２】本発明の実施の形態におけるプロジェクターの配置可能な範囲を、正面配置の位置を中心として示す図である。
【図３】（Ａ）は横からの画像投影時の図、（Ｂ）は入力画像イメージを示す図、（Ｃ）はＬＣＤパネル面上での画像イメージ図である。
【図４】（Ａ）は正面位置から水平と垂直の双方の方向にずれた位置からの斜め投射時の図、（Ｂ）は入力画像イメージ、（Ｃ）はＬＣＤのパネル面上での画像イメージである。
【図５】本発明の実施の形態におけるプロジェクターの基本構成を示す図である。
【図６】第１の実施の形態のプロジェクターにおいて、図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図７】イメージプロセッサ内部の回路の一構成例を示すブロック図である。
【図８】（Ａ）は正面投射の場合の右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｙｚ平面図、（Ｃ）はｘｙ平面図である。
【図９】（Ａ）は垂直投射角α度、水平投射角β度の場合に、右手座標系におけるプロジェクターとスクリーンの位置関係を示す図である。（Ｂ）はｙｚ平面図、（Ｃ）はｘｙ平面図である。
【図１０】（Ａ）〜（Ｃ）は、スクリーンを軸回転させた場合の図９（Ａ）〜図９（Ｃ）と等価的な斜め投射の位置関係を示す図である。
【図１１】（Ａ）および（Ｂ）は座標関係についてまとめて示す図である。
【図１２】（Ａ）は正面投射のＳＶＧＡ出力画像のアドレスマップのイメージ図、（Ｂ）はキーストン変形による歪み画像イメージ図である。
【図１３】（Ａ）はマッピング時に２つの画像イメージを重ねた図、（Ｂ）は補間演算により生成したＬＣＤパネルの表示画面である。
【図１４】代表点アドレスの取り方の変形例を示す、マッピング時の画像イメージ図である。
【図１５】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右下からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１６】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって左上からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１７】（Ａ−１）〜（Ｂ−２）は、スクリーンに向かって右上からの投射時における右手座標系のｘｙ平面図とｙｚ平面図、およびそれらと等価な平面図である。
【図１８】第２および第３の実施の形態のプロジェクターにおいて、図１の回路部に含まれる、イメージプロセッサとその周辺の回路の一構成例を示すブロック図である。
【図１９】第２の実施の形態のプロジェクターにおいて、アドレス生成の流れを示すブロック図である。
【図２０】第４の実施の形態のプロジェクターにおいて、アドレス生成の流れを示すブロック図である。
【図２１】第４の実施の形態におけるアドレス生成で、１次代表点アドレス、２次代表点アドレス、および、補間アドレスの関係を例示する図である。
【図２２】第４の実施の形態におけるアドレス生成の手法を示すフローチャートである。
【図２３】第４の実施の形態で用いることができるスプライン補間手法を模式的に示す図である。
【図２４】バイリニア補間で必要となる代表点アドレス数をパネル解像度ごとに示す図表である。
【符号の説明】
１…プロジェクター、２…回路部、２ａ…演算部、２ｂ…アドレス補間部、２ｂ−１…第１のアドレス補間部、２ｂ−２…第２のアドレス補間部、２ｃ…データ補間部、３…ＬＣＤパネル、３ａ…表示画像、４…投光部、５…光学部、６…相対関係取得部、２１…コムフィルタ、２２…クロマデコーダ、２３…セレクトスイッチ、２４…アナログ−ディジタル・コンバータ、２５…イメージプロセッサ、２６…画像メモリ、２７，２８…記憶部、１０１，１０１ｔ…スクリーン、１０１ａ…投影画像、２５１…ＩＰ変換部、２５２…スケーラ、２５３…ＣＰＵインターフェース、２５４…メモリ制御部、２５７…係数発生部、２５８…フィルタ演算部、ＰＩ…投影画像イメージ、ＰＩＫ…画像イメージ、ＰＩＯＵＴ…出力画像イメージ、α，β…投射角度
Claims (15)
- 画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、
前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成する演算部と、
前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、
投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、
を有する画像投射装置。 - 前記アドレス補間部が、
前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間部と、
前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間部と、
を含む請求項１に記載の画像投射装置。 - 前記第１のアドレス補間部が行う補間では、前記第２のアドレス補間部が行う補間に用いる関数より高次の関数を用いる
請求項２に記載の画像投射装置。 - 前記補間に用いる関数、補間精度を決めるパラメータ、補間により生成するアドレスの間隔の少なくも１つを変更する制御部を、
さらに有する請求項１に記載の画像投射装置。 - 前記画像表示部と前記投射面との相対関係情報を取得する相対関係取得部をさらに有し、
前記演算部は、前記相対関係情報をパラメータとした演算を実行する
請求項１に記載の画像投射装置。 - 前記演算部は、前記アドレスと前記データの補間中に、次に入力が予想される相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する
請求項１に記載の画像投射装置。 - 画像表示部を有し、当該画像表示部に表示された表示画像を外部の投射面に光を利用して投射する画像投射装置であって、
前記表示画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを記憶している記憶部と、
前記代表点アドレスの間の他のアドレスを補間により生成するアドレス補間部と、
投射したときに前記投射面上で歪みが補正される表示画像の画素データを、入力画像の複数の画素データから補間により生成し、生成した画素データを、前記歪み画像のアドレスと所望の画像のアドレスとの対応関係から決められる前記画像表示部の位置に出力するデータ補間部と、
を有する画像投射装置。 - 前記画像表示部と前記投射面との相対関係情報を取得する相対関係取得部と、前記相対関係情報をパラメータとした演算を実行し、演算の結果得られた前記代表点アドレスを前記記憶部に出力する演算部と、
をさらに有する請求項７に記載の画像投射装置。 - 投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、
前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを演算により生成するステップと、
前記代表点アドレスの間の他のアドレスを補間により生成するステップと、
前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、
得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、
を含む画像変換方法。 - アドレスを補間により生成する前記ステップが、
前記演算から求めた１次代表点アドレスから、当該１次代表点アドレスより間隔が狭い２次代表点アドレスを補間により生成する第１のアドレス補間ステップと、
前記２次代表点アドレスから、当該２次代表点アドレス間に他のアドレスを補間により生成する第２のアドレス補間ステップと、
を含む請求項９に記載の画像変換方法。 - 前記第１のアドレス補間ステップで実行する補間では、前記第２のアドレス補間ステップで実行する補間に用いる関数より高次の関数を用いる
請求項１０に記載の画像変換方法。 - 前記補間に用いる関数、補間精度を決めるパラメータ、補間により生成するアドレスの間隔の少なくも１つを変更するステップを、
さらに含む請求項９に記載の画像変換方法。 - 前記代表点アドレスの前記演算に用いる、前記画像表示部と前記投射面との相対関係情報を取得するステップを、さらに含み、
前記代表点アドレスの生成ステップでは、前記相対関係情報をパラメータとした演算を実行する
請求項９に記載の画像変換方法。 - 前記アドレスの補間、前記アドレスの対応付けおよび画素データの前記補間中に、次に入力が予想される前記相対関係情報に応じた歪み画像の代表点アドレスの演算をあらかじめ実行する
請求項１３に記載の画像変換方法。 - 投射面に光を利用して投射する表示画像を画像表示部に生成するために、入力画像を変換する画像変換方法であって、
前記入力画像を前記投射面に対し斜めに投射したときに投射面上で生じる歪み画像の代表点アドレスを、前記画像表示部と前記投射面との相対関係ごとに記憶部にあらかじめ記憶させるステップと、
前記相対関係の情報を取得するステップと、
取得した相対関係の前記情報に対応した前記代表点アドレスを前記記憶部から読み出し、読み出した当該代表点アドレスの間の他のアドレスを補間により生成するステップと、
前記代表点アドレスおよび前記他のアドレスにより形成される前記歪み画像のアドレスと所望の画像のアドレスとを対応付けるステップと、
得られたアドレスの対応関係にもとづく前記画像表示部の位置に、前記表示画像の新たな画素データを、前記入力画像の複数の画素データから補間により生成するステップと、
を含む画像変換方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003168337A JP2004129212A (ja) | 2002-08-02 | 2003-06-12 | 画像投射装置および画像変換方法 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002226560 | 2002-08-02 | ||
| JP2003168337A JP2004129212A (ja) | 2002-08-02 | 2003-06-12 | 画像投射装置および画像変換方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004129212A true JP2004129212A (ja) | 2004-04-22 |
Family
ID=32300804
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003168337A Pending JP2004129212A (ja) | 2002-08-02 | 2003-06-12 | 画像投射装置および画像変換方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004129212A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007325151A (ja) * | 2006-06-05 | 2007-12-13 | Seiko Epson Corp | 画像処理システム、プロジェクタ、プログラムおよび情報記憶媒体 |
| JP2011182040A (ja) * | 2010-02-26 | 2011-09-15 | Ricoh Co Ltd | 画像処理用データの圧縮方法および圧縮装置とこれを備えた撮像装置 |
| JP2014165792A (ja) * | 2013-02-27 | 2014-09-08 | Seiko Epson Corp | 画像処理装置、プロジェクター及び画像処理方法 |
| JP2015052958A (ja) * | 2013-09-09 | 2015-03-19 | 三菱電機株式会社 | 歪補正装置、歪補正方法及び歪補正プログラム |
-
2003
- 2003-06-12 JP JP2003168337A patent/JP2004129212A/ja active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007325151A (ja) * | 2006-06-05 | 2007-12-13 | Seiko Epson Corp | 画像処理システム、プロジェクタ、プログラムおよび情報記憶媒体 |
| JP2011182040A (ja) * | 2010-02-26 | 2011-09-15 | Ricoh Co Ltd | 画像処理用データの圧縮方法および圧縮装置とこれを備えた撮像装置 |
| JP2014165792A (ja) * | 2013-02-27 | 2014-09-08 | Seiko Epson Corp | 画像処理装置、プロジェクター及び画像処理方法 |
| US9881363B2 (en) | 2013-02-27 | 2018-01-30 | Seiko Epson Corporation | Image processing device, projector and image processing method for correcting a displayed image |
| JP2015052958A (ja) * | 2013-09-09 | 2015-03-19 | 三菱電機株式会社 | 歪補正装置、歪補正方法及び歪補正プログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2007143173A (ja) | キーストーン歪みを防止する方法および装置 | |
| US6756985B1 (en) | Image processor and image display | |
| US7362385B2 (en) | Image conversion device image conversion method and image projection device | |
| US7417649B2 (en) | Method and apparatus for nonlinear anamorphic scaling of video images | |
| US7380946B1 (en) | Semiautomatic keystone correction system and method | |
| US20020145610A1 (en) | Video processing engine overlay filter scaler | |
| WO2000045367A1 (fr) | Dispositif d'affichage d'images | |
| US20100002958A1 (en) | Image resolution adjustment method | |
| JP2006251861A (ja) | 画像処理装置、画像処理方法、表示コントローラ及び電子機器 | |
| JP2019120749A (ja) | 表示制御装置、画像投影システム、制御方法およびプログラム | |
| JP2004349979A (ja) | 画像処理装置、画像処理方法および画像投射装置 | |
| JP2004032484A (ja) | 投影型画像表示装置および画像変換方法 | |
| US6511185B1 (en) | Method and apparatus for compensating a projected image | |
| JP2011193332A (ja) | プロジェクターおよび映像の投写方法 | |
| US8396322B1 (en) | Optical distortion correction in digital video processing applications | |
| JP2004129212A (ja) | 画像投射装置および画像変換方法 | |
| JP3959740B2 (ja) | プロジェクタおよび画像補正方法 | |
| JP2005012407A (ja) | 画像投射装置および画像処理方法 | |
| JP3047681B2 (ja) | 画像歪み補正方法及び装置 | |
| JP2006005549A (ja) | 画像投射装置、画像処理装置および画像処理方法 | |
| JP2008116812A (ja) | 表示装置、プロジェクタおよび表示方法 | |
| JP4296842B2 (ja) | 画像投射装置、画像処理装置およびその方法 | |
| JP3613985B2 (ja) | 画像処理装置および投写型表示装置 | |
| TWI253601B (en) | Apparatus adaptive for a display wall, image adjustment method, and a display wall therewith | |
| JP2005033271A (ja) | 画像処理装置およびその方法、ならびに、画像投射装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060509 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081224 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090223 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090324 |