JP2006222858A - 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 - Google Patents

Abstract

【課題】 投写画像の歪み補正処理を行う場合の環境影響軽減処理をより適切に実行することが可能な画像処理システム等を提供すること。
【解決手段】 画像歪みセンシング情報を生成する画像歪みセンシング部１８０と、環境影響センシング情報を生成する環境影響センシング部１８２と、投写領域情報を生成する投写対象領域情報生成部１０１と、投写画像の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正部１０３と、投写領域情報と、補正情報に基づき、投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成部１０４と、環境影響を軽減する処理を実行する環境影響軽減部１０５と、投写画像を投写する投写部１９０と、差分画像を生成する差分画像生成部１０６とを含んでプロジェクタを構成する。
【選択図】 図２

Description

本発明は、投写画像の歪み補正処理と環境影響を軽減する処理を実行する画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法に関する。

近年、センサーを有するプロジェクタを用いてスクリーンに画像を投写し、投写された投写画像をセンサーでセンシングして画像処理を実行することにより、投写画像の歪み補正や環境影響（外光影響、スクリーンの色の影響等）を軽減するプロジェクタが提案されている。

従来のプロジェクタは、投写画像の歪み補正用の処理と、環境影響軽減用の処理を別々に実行していた。このため、従来のプロジェクタは、投写画像の歪み補正処理や環境影響軽減処理に時間がかかっていた。

このようなキャリブレーション処理にかかる時間を短縮するため、例えば、特許文献１では、プロジェクタが、視環境下推定データを生成することにより、必要となるキャリブレーション画像の投写回数を減らし、環境影響軽減処理にかかる時間を短縮することが記載されている。

しかし、投写画像の歪み補正が行われた場合、元々投写画像が表示されていた部分が歪み補正によって表示されなくなる場合がある。このような場合、当該部分のセンシング情報を用いて環境影響軽減処理を実行しても、歪み補正後の投写画像が、環境影響が適切に軽減された画像とならない場合も考えられる。

例えば、特許文献２では、障害物のない領域に投写するため、プロジェクタが、選択された投写領域に該当する部分のセンシング情報に基づき、当該投写領域の視環境を把握して画像補正を行うことが記載されている。
特開２００３−３３９０５６号公報 特開２００４−４８６９４号公報

しかし、特許文献２のプロジェクタは、投写画像の歪み補正が行われる場合、歪み補正後の投写画像の位置や形状を考慮していないため、環境影響を適切に軽減できない場合も考えられる。

また、ズーム機能によって投写画像の位置や形状が変化する場合も考えられ、このような場合であっても、プロジェクタは、より適切に環境影響軽減処理を実行する必要がある。

本発明は、上記の課題に鑑みなされたものであり、その目的は、投写画像の歪み補正処理を行う場合の環境影響軽減処理をより適切に実行することが可能な画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法を提供することにある。

上記課題を解決するため、本発明に係る画像処理システムは、投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングすることによって画像歪みセンシング情報を生成する画像歪みセンシング手段と、
前記投写画像をセンシングすることによって所定領域における明るさ指標値を示す環境影響センシング情報を生成する環境影響センシング手段と、
前記投写画像の歪みを補正する画像歪み補正手段と、
前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成手段と、
理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像とを異なる時点において投写する投写手段と、
を含み、
前記環境影響センシング手段は、前記所定領域として、常に画像歪み補正後の画像内に含まれる前記投写画像の領域をセンシングすることにより、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像のそれぞれの前記環境影響センシング情報を生成し、
前記環境影響軽減手段は、各環境影響センシング情報に基づき、前記環境影響を軽減する処理を実行することを特徴とする。

また、本発明に係るプロジェクタは、上記画像処理システムを有することを特徴とする。

本発明によれば、画像処理システム等は、環境影響センシング手段が常に画像歪み補正後の画像内に含まれる投写画像の所定領域をセンシングすることにより、投写画像の歪み補正処理を行う場合の環境影響軽減処理をより適切に実行することができる。

また、本発明に係る画像処理システムは、投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングすることによって画像歪みセンシング情報を生成する画像歪みセンシング手段と、
前記投写画像の中央付近の所定領域をセンシングすることによって前記所定領域における明るさ指標値を示す環境影響センシング情報を生成する環境影響センシング手段と、
前記画像歪みセンシング情報に基づき、前記画像歪みセンシング手段のセンシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成する投写領域情報生成手段と、
前記投写画像の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正手段と、
前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成手段と、
理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む複数色画像とを異なる時点において投写する投写手段と、
所定の差分画像を生成する差分画像生成手段と、
を含み、
前記複数色画像は、当該複数色画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成され、
前記中央画像および前記周辺画像が黒色で前記背景画像が黒色以外の単色であり、あるいは、前記中央画像および前記周辺画像が黒色以外の単色で前記背景画像が黒色であって、
前記画像歪みセンシング手段は、前記複数色画像および赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによってそれぞれの前記画像歪みセンシング情報を生成し、
前記環境影響センシング手段は、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像の前記所定領域をセンシングすることによってそれぞれの前記環境影響センシング情報を生成し、
前記差分画像生成手段は、前記複数色画像の画像歪みセンシング情報と、前記いずれかの単色画像の画像歪みセンシング情報とに基づくパターン差分画像を生成し、
前記投写領域情報生成手段は、前記パターン差分画像に基づき、前記センシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成するとともに、前記中央領域情報および前記周辺領域情報に基づき、前記投写領域情報を生成し、
前記環境影響軽減手段は、各環境影響センシング情報と、前記表示領域情報とに基づき、前記環境影響を軽減する処理を実行することを特徴とする。

また、本発明に係るプロジェクタは、上記画像処理システムを有することを特徴とする。

また、本発明に係るプログラムは、画像歪みセンシング手段と、環境影響センシング手段と、投写手段とを有するコンピュータにより読み取り可能なプログラムであって、
コンピュータを、
前記画像歪みセンシング手段に、投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングさせることによって画像歪みセンシング情報を生成させる手段と、
前記環境影響センシング手段に、前記投写画像の中央付近の所定領域をセンシングさせることによって環境影響センシング情報を生成させる手段と、
前記画像歪みセンシング情報に基づき、前記画像歪みセンシング手段のセンシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成する投写領域情報生成手段と、
前記投写画像の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正手段と、
前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成手段と、
理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
前記投写手段に、前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む複数色画像とを異なる時点において投写させる手段と、
所定の差分画像を生成する差分画像生成手段として機能させ、
前記複数色画像は、当該複数色画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成され、
前記中央画像および前記周辺画像が黒色で前記背景画像が黒色以外の単色であり、あるいは、前記中央画像および前記周辺画像が黒色以外の単色で前記背景画像が黒色であって、
前記画像歪みセンシング手段は、前記複数色画像および赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによってそれぞれの前記画像歪みセンシング情報を生成し、
前記環境影響センシング手段は、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像の前記所定領域をセンシングすることによってそれぞれの前記環境影響センシング情報を生成し、
前記差分画像生成手段は、前記複数色画像の画像歪みセンシング情報と、前記いずれかの単色画像の画像歪みセンシング情報とに基づくパターン差分画像を生成し、
前記投写領域情報生成手段は、前記パターン差分画像に基づき、前記センシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成するとともに、前記中央領域情報および前記周辺領域情報に基づき、前記投写領域情報を生成し、
前記環境影響軽減手段は、各環境影響センシング情報と、前記表示領域情報とに基づき、前記環境影響を軽減する処理を実行することを特徴とする。

また、本発明に係る情報記憶媒体は、上記プログラムを記憶したことを特徴とする。

また、本発明に係る画像処理方法は、画像歪みセンシング手段と、環境影響センシング手段と、処理手段と、投写手段とを有するコンピュータによる画像処理方法であって、
前記投写手段は、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む画像であって、かつ、当該画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成される画像である複数色画像とを異なる時点において投写し、
前記画像歪みセンシング手段は、
投写対象領域に投写された赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによって第１の画像歪みセンシング情報を生成し、
前記投写対象領域に投写された前記複数色画像の少なくとも一部を含む領域をセンシングすることによって第２の画像歪みセンシング情報を生成し
前記環境影響センシング手段は、
前記投写対象領域に投写された緑色の単色画像の前記中央付近の所定領域をセンシングすることによって第１の環境影響センシング情報を生成し、
前記投写対象領域に投写された赤色の単色画像の前記所定領域をセンシングすることによって第２の環境影響センシング情報を生成し、
前記投写対象領域に投写された青色の単色画像の前記所定領域をセンシングすることによって第３の環境影響センシング情報を生成し、
前記投写対象領域に投写された黒色の単色画像の前記所定領域をセンシングすることによって第４の環境影響センシング情報を生成し、
前記処理手段は、
前記第１および第２の画像歪みセンシング情報に基づくパターン差分画像を生成し、
前記パターン差分画像に基づき、前記画像歪みセンシング手段のセンシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成し、
前記中央領域情報および前記周辺領域情報に基づき、前記センシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成し、
前記投写領域情報に基づき、前記投写画像の歪みを補正する度合いを示す補正情報を生成し、
前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成し、
前記補正情報に基づき、画像の歪みが補正されるように画像情報を補正し、
前記第１〜第４の環境影響センシング情報と、前記表示領域情報とに基づき、理想環境と実際の使用環境の相違によって生じる環境影響が軽減されるように、前記画像情報を補正することを特徴とする。

本発明によれば、画像処理システム等は、歪み補正後の表示領域内のセンシング情報を用いて環境影響軽減処理を実行することにより、投写画像の歪み補正処理を行う場合の環境影響軽減処理をより適切に実行することができる。

また、本発明によれば、画像処理システム等は、５種類の画像の投写とセンシングを行うことによって投写画像の歪み補正処理と環境影響軽減処理を実行できるため、より効率的に画像処理を実行できる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法は、前記表示領域情報に基づき、前記投写対象領域内の前記表示領域に相当する領域に最適な大きさで前記投写画像が投写されるように、前記投写画像の大きさを調整するズーム部を制御するとともに当該調整の度合いを示す調整情報を生成する制御手段を含み、
前記環境影響軽減手段は、
前記調整情報に基づき、前記調整による前記投写画像の明るさの変化を判別し、当該明るさの変化に応じて各環境影響センシング情報に含まれる前記表示領域内の情報を補正することによってそれぞれの補正センシング情報を生成するセンシング情報補正手段と、
各補正センシング情報に基づき、前記投写画像の色および明るさが理想的な状態となるように画像情報を補正する画像情報補正手段と、
を含んでもよい。

これによれば、画像処理システム等は、大きさ調整後の表示領域内のセンシング情報を用いて環境影響軽減処理を実行することにより、投写画像の大きさを調整する場合の環境影響軽減処理をより適切に実行することができる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法において、前記画像情報補正手段は、
理想的な色を示す理想的色情報と、前記補正センシング情報とに基づき、前記理想的な色で前記投写画像が投写されるように画像情報を補正する色補正手段と、
理想的な明るさを示す理想的明るさ情報と、前記補正センシング情報とに基づき、前記理想的な明るさで前記投写画像が投写されるように前記色補正手段によって補正された画像情報を補正する明るさ補正手段と、
を含んでもよい。

また、前記画像処理システムおよび前記プロジェクタにおいて、前記環境影響補正手段は、画像情報補正手段を含み、
前記画像情報補正手段は、
理想的な色を示す理想的色情報と、各環境影響センシング情報とに基づき、前記理想的な色で前記投写画像が投写されるように画像情報を補正する色補正手段と、
理想的な明るさを示す理想的明るさ情報と、各環境影響センシング情報とに基づき、前記理想的な明るさで前記投写画像が投写されるように前記色補正手段によって補正された画像情報を補正する明るさ補正手段と、
を含んでもよい。

これによれば、画像処理システム等は、色と明るさが調整された適切な画像を生成することができる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法において、前記明るさ補正手段は、赤色、緑色および青色の各単色画像の補正センシング情報に基づき、白色の単色画像の補正センシング情報を生成するとともに、当該白色の単色画像の補正センシング情報と、黒色の単色画像の補正センシング情報とに基づき、前記色補正手段によって補正された画像情報を補正してもよい。

また、前記画像処理システムおよび前記プロジェクタにおいて、
前記明るさ補正手段は、赤色、緑色および青色の各単色画像の環境影響センシング情報に基づき、白色の単色画像の環境影響センシング情報を生成するとともに、当該白色の単色画像の環境影響センシング情報と、黒色の単色画像の環境影響センシング情報とに基づき、前記色補正手段によって補正された画像情報を補正してもよい。

これによれば、画像処理システム等は、赤色、緑色および青色の各単色画像の補正センシング情報に基づき、白色の単色画像の補正センシング情報を生成することにより、５種類の画像の投写とセンシングを行うことによって投写画像の歪み補正処理と環境影響軽減処理を実行できるため、より効率的に画像処理を実行できる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法は、前記センシング画像における前記投写対象領域の位置に関する投写対象領域情報を生成する投写対象領域情報生成手段を含み、
前記画像歪みセンシング手段は、前記黒色の単色画像の少なくとも一部を含む領域をセンシングすることによって黒色の単色画像の画像歪みセンシング情報を生成し、
前記差分画像生成手段は、前記黒色の単色画像の画像歪みセンシング情報と、前記いずれかの単色の単色画像の画像歪みセンシング情報とに基づき、明るさ差分画像を生成し、
前記投写対象領域情報生成手段は、前記明るさ差分画像と、前記投写領域情報とに基づき、前記投写対象領域情報を生成し、
前記画像歪み補正手段は、前記投写対象領域情報と、前記投写領域情報とに基づき、前記投写画像の歪みを補正してもよい。

これによれば、画像処理システム等は、例えば、投写対象領域と投写領域の形状の相違から投写画像の歪みを判別することにより、投写画像の歪みを補正することができる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法において、前記投写手段は、前記投写画像の投写前に前記所定領域に相当する領域が前記投写対象領域に投写されているかユーザーに確認させるための位置確認画像を投写してもよい。

これによれば、画像処理システム等は、位置確認画像を用いて中央領域に相当する領域が投写対象領域に入っているかユーザーに確認させることにより、中央領域がセンシング情報に確実に含まれる状態でセンシングすることができる。これにより、画像処理システム等は、適切なセンシング情報を用いて画像処理を実行することができる。

また、前記画像処理システム、前記プロジェクタ、前記プログラム、前記情報記憶媒体および前記画像処理方法において、前記画像歪み補正手段は、前記画像歪みセンシング情報に基づき、明るさ指標値（例えば、輝度値、照度値等）のピーク位置を検出し、当該ピーク位置に基づき、投写画像の歪みを補正してもよい。

以下、本発明を、画像処理システムを有するプロジェクタに適用した場合を例に採り、図面を参照しつつ説明する。なお、以下に示す実施例は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施例に示す構成の全てが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。

（第１の実施例）
図１は、第１の実施例における画像投写状況を示す概略図である。

プロジェクタ２０は、投写対象領域を有するスクリーン１０へ向け画像を投写する。これにより、スクリーン１０には、投写画像１２が表示される。

なお、本実施例では、図１に示すように、スクリーン１０の一部が外光８０による影響（環境影響）を受ける状態となっている。また、プロジェクタ２０がスクリーン１０に対して斜めの位置から投写しているため、投写画像１２は歪んだ状態となっており、いわゆる台形歪みが発生している。さらに、図１に示すように、投写画像１２の一部はスクリーン１０からはみ出した状態となっている。

本実施例では、プロジェクタ２０に投写画像１２の歪みを補正するための画像歪みセンサー６０と、環境影響を軽減するための環境影響センサー６２を設けている。画像歪みセンサー６０は、スクリーン１０に投写された投写画像１２を含む（投写画像１２の一部でもよい。）画像歪みセンシング領域１４をセンシングして画像歪みセンシング情報を生成する。また、環境影響センサー６２は、投写画像１２の中央付近の環境影響センシング領域１５（所定領域）をセンシングして環境影響センシング情報を生成する。

プロジェクタ２０は、画像歪みセンシング情報および環境影響センシング情報に基づく画像処理を実行することにより、投写画像１２の歪み補正と環境影響軽減処理をほぼ同時に実行する。

次に、このような機能を実装するためのプロジェクタ２０の機能ブロックについて説明する。

図２は、第１の実施例におけるプロジェクタ２０の機能ブロック図である。

プロジェクタ２０は、スクリーン１０に投写画像１２が投写された状態で画像歪みセンシング領域１４をセンシングすることによって画像歪みセンシング情報を生成する画像歪みセンシング部１８０と、スクリーン１０に投写画像１２が投写された状態で環境影響センシング領域１５をセンシングすることによって環境影響センシング情報を生成する環境影響センシング部１８２と、各センシング情報を記憶する記憶部１６０と、各センシング情報に基づいて画像処理を実行する処理部１００と、処理部１００からの画像情報に基づいて画像を投写する投写部１９０とを含んで構成されている。なお、画像歪みセンシング部１８０は、画像歪みセンサー６０を含み、環境影響センシング部１８２は、環境影響センサー６２を含む。

また、処理部１００は、画像歪みセンシング部１８０のセンシング画像におけるスクリーン１０の位置に関する情報を示す投写対象領域情報を生成する投写対象領域情報生成部１０１と、センシング画像における投写画像１２の位置に関する情報を示す投写領域情報を生成する投写領域情報生成部１０２と、投写画像１２の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正部１０３と、センシング画像における投写画像１２の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成部１０４と、理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減部１０５とを含んで構成されている。

また、処理部１００は、ＰＣ等からの画像情報（デジタルＲＧＢ信号等）を入力して環境影響軽減部１０５に出力するとともに画像歪み補正部１０３を有する画像情報入力部１１０と、環境影響軽減部１０５からの画像情報を入力して投写部１９０に出力する画像情報出力部１４０と、キャリブレーション用の投写画像１２を投写するためのキャリブレーション情報を生成するキャリブレーション情報生成部１５０と、記憶部１６０に記憶された各センシング情報に基づいて差分画像を生成する差分画像生成部１０６とを含んで構成されている。

また、プロジェクタ２０は、投写画像１２の大きさを調整するためのズーム機能を有している。このため、投写部１９０は、空間光変調器１９２、レンズ１９６に加え、投写画像１２の大きさを調整するためのズーム部１９４を有している。また、処理部１００は、ズーム部１９４を制御するとともに当該調整の度合いを示す調整情報を生成する制御部１０７を有している。

また、環境影響軽減部１０５は、制御部１０７からの調整情報に基づき、調整による投写画像１２の明るさの変化を判別し、当該明るさの変化に応じて各環境影響センシング情報に含まれる表示領域内の情報を補正することによって補正センシング情報を生成するセンシング情報補正部１３０と、補正センシング情報に基づき、投写画像１２の色および明るさが理想的な状態となるように画像情報を補正する画像情報補正部１２０とを含んで構成されている。

また、画像情報補正部１２０は、理想的な色を示す理想的色情報および補正センシング情報に基づき、理想的な色で投写画像１２が投写されるように画像情報を補正する色補正部１２２と、理想的な明るさを示す理想的明るさ情報および補正センシング情報に基づき、理想的な明るさで投写画像１２が投写されるように色補正部１２２によって補正された画像情報を補正する明るさ補正部１２４を含む。なお、明るさ補正部１２４の明るさ補正には環境影響を受ける状態において理想的な階調で投写画像１２が投写されるように画像情報を補正する階調補正が含まれる。

また、上述したプロジェクタ２０の各部の機能を実装するためのハードウェアとしては、例えば、以下のものを適用できる。

図３は、第１の実施例におけるプロジェクタ２０のハードウェアブロック図である。

例えば、画像情報入力部１１０としては、例えば、Ａ／Ｄコンバーター９３０、画像処理回路９７０等、記憶部１６０としては、例えば、ＲＡＭ９５０等、投写対象領域情報生成部１０１、投写領域情報生成部１０２、差分画像生成部１０６としては、例えば、画像処理回路９７０等、画像歪み補正部１０３、表示領域情報生成部１０４、制御部１０７、センシング情報補正部１３０としては、例えばＣＰＵ９１０等、キャリブレーション情報生成部１５０としては、例えば、画像処理回路９７０、ＲＡＭ９５０等、画像情報出力部１４０としては、例えば、Ｄ／Ａコンバーター９４０等、空間光変調器１９２としては、例えば、液晶パネル９２０等、色補正部１２２としては、理想的色情報を記憶するＲＯＭ９６０、色補正用の３次元ルックアップテーブル（３Ｄ−ＬＵＴ）を記憶するＲＡＭ９５０、３Ｄ−ＬＵＴを補正する画像処理回路９７０等、明るさ補正部１２４としては、理想的明るさ情報を記憶するＲＯＭ９６０、明るさ補正用の１次元ルックアップテーブル（１Ｄ−ＬＵＴ）を記憶するＲＡＭ９５０、１Ｄ−ＬＵＴを補正する画像処理回路９７０等を用いて実装できる。

また、画像歪みセンシング部１８０としては、例えば、ＣＣＤカメラ、ＣＭＯＳカメラ等のエリアセンサー、ラインセンサー、位相差センサー等を用いて実装できる。画像歪みセンシング部１８０は、画像歪みセンシング情報としてとして、例えば、センシング画像における画素ごとの画像信号値（例えば、ＲＧＢ値、ＸＹＺ値、輝度値、照度値等）を出力する。

また、環境影響センシング部１８２としては、例えば、カラーフィルターを有するシリコンフォトダイオード、ＲＧＢセンサー等と、センシング範囲を環境影響センシング領域１５の範囲内に収める遮光筒光学系等を用いて実装できる。環境影響センシング部１８２は、環境影響センシング情報として、例えば、Ｒ、Ｇ、Ｂそれぞれのカラーフィルターを介してＲ、Ｇ、Ｂそれぞれの明るさ指標値（例えば、電圧値、輝度値、照度値等）を出力する。

なお、これらの各部はシステムバス９８０を介して相互に情報をやりとりすることが可能である。

また、これらの各部は回路のようにハードウェア的に実装してもよいし、ドライバのようにソフトウェア的に実装してもよい。

さらに、画像歪み補正部１０３等としてコンピュータを機能させるためのプログラムを記憶した情報記憶媒体９００からプログラムを読み取って画像歪み補正部１０３等の機能をコンピュータに実装してもよい。

このような情報記憶媒体９００としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＲＯＭ、ＲＡＭ、ＨＤＤ等を適用でき、そのプログラムの読み取り方式は接触方式であっても、非接触方式であってもよい。

また、情報記憶媒体９００に代えて、上述した各機能を実装するためのプログラム等を、伝送路を介してホスト装置等からダウンロードすることによって上述した各機能を実装することも可能である。

以下、これらの各部を用いた画像処理について説明する。

図４は、第１の実施例における前処理から投写対象領域情報生成までの画像処理の流れを示すフローチャートである。

まず、プロジェクタ２０は、前処理を実行する（ステップＳ１）。具体的には例えば、ユーザーがプロジェクタ２０を起動した場合、制御部１０７は、ズーム部１９４をズーム状態が初期状態になるように制御する。そして、キャリブレーション情報生成部１５０は、位置確認画像用のキャリブレーション情報を生成し、投写部１９０は、環境影響軽減部１０５、画像情報出力部１４０を介して入力された当該キャリブレーション情報に基づき、位置確認画像を投写する。なお、位置確認画像としては、例えば、画像全体を９等分した場合の中央の領域を有する画像、後述するチェッカーパターン画像等が該当する。プロジェクタ２０は、位置確認画像の中央の領域がスクリーン１０に投写されているかユーザーに確認させ、投写されていない場合はプロジェクタ２０の位置等をユーザーに調整させることにより、中央の領域がスクリーン１０に確実に投写される状態とすることができる。

前処理終了後、ユーザーがプロジェクタ２０の補正ボタンを押下した場合、プロジェクタ２０は投写画像１２の歪み補正処理と環境影響軽減処理を実行する。

まず、キャリブレーション情報生成部１５０は、画像全体が緑色の単色画像（Ｇ画像）を投写するためのキャリブレーション情報を生成する。投写部１９０は、当該キャリブレーション情報に基づき、Ｇ画像を投写する。

画像歪みセンシング部１８０は、Ｇ画像がスクリーン１０に投写された状態の画像歪みセンシング領域１４を自動露出でセンシングし、第１の画像歪みセンシング情報を生成する（ステップＳ２）。記憶部１６０は、第１の画像歪みセンシング情報を記憶する。

また、環境影響センシング部１８２は、Ｇ画像がスクリーン１０に投写された状態の環境影響センシング領域１５をセンシングし、第１の環境影響センシング情報を生成する（ステップＳ３）。記憶部１６０は、第１の環境影響センシング情報を記憶する。

次に、キャリブレーション情報生成部１５０は、画像全体が緑色と黒色のチェッカーパターンで構成される複数色画像（チェッカーパターン画像）を投写するためのキャリブレーション情報を生成する。

図５は、第１の実施例におけるチェッカーパターン画像１６を示す図である。

チェッカーパターン画像１６は、画像全体を９等分した９つの領域のうち、中央画像と４隅の４つの周辺画像が黒色であり、それ以外の４つの背景画像が緑色である。

投写部１９０は、チェッカーパターン画像１６用のキャリブレーション情報に基づき、チェッカーパターン画像１６を投写する。

画像歪みセンシング部１８０は、チェッカーパターン画像１６が投写されたスクリーン１０上の画像歪みセンシング領域１４を、Ｇ画像センシング時の露出でセンシングし、第２の画像歪みセンシング情報を生成する（ステップＳ４）。記憶部１６０は、第２の画像歪みセンシング情報を記憶する。

次に、キャリブレーション情報生成部１５０は、画像全体が赤色の単色画像（Ｒ画像）を投写するためのキャリブレーション情報を生成する。投写部１９０は、当該キャリブレーション情報に基づき、Ｒ画像を投写する。

環境影響センシング部１８２は、Ｒ画像がスクリーン１０に投写された状態の環境影響センシング領域１５をセンシングし、第２の環境影響センシング情報を生成する（ステップＳ５）。記憶部１６０は、第２の環境影響センシング情報を記憶する。

次に、キャリブレーション情報生成部１５０は、画像全体が青色の単色画像（Ｂ画像）を投写するためのキャリブレーション情報を生成する。投写部１９０は、当該キャリブレーション情報に基づき、Ｂ画像を投写する。

環境影響センシング部１８２は、Ｂ画像がスクリーン１０に投写された状態の環境影響センシング領域１５をセンシングし、第３の環境影響センシング情報を生成する（ステップＳ６）。記憶部１６０は、第３の環境影響センシング情報を記憶する。

次に、キャリブレーション情報生成部１５０は、画像全体が黒色の単色画像（Ｋ画像）を投写するためのキャリブレーション情報を生成する。投写部１９０は、当該キャリブレーション情報に基づき、Ｋ画像を投写する。

画像歪みセンシング部１８０は、Ｋ画像がスクリーン１０に投写された状態の画像歪みセンシング領域１４を、Ｇ画像センシング時の露出でセンシングし、第３の画像歪みセンシング情報を生成する（ステップＳ７）。記憶部１６０は、第３の画像歪みセンシング情報を記憶する。

また、環境影響センシング部１８２は、Ｋ画像がスクリーン１０に投写された状態の環境影響センシング領域１５をセンシングし、第４の環境影響センシング情報を生成する（ステップＳ８）。記憶部１６０は、第４の環境影響センシング情報を記憶する。

差分画像生成部１０６は、第１の画像歪みセンシング情報で表されるＧ画像のセンシング画像と、第３の画像歪みセンシング情報で表されるＫ画像のセンシング画像との差分画像（ＧＫ差分画像）を生成する（ステップＳ９）。記憶部１６０は、ＧＫ差分画像の情報を記憶する。

また、差分画像生成部１０６は、第１の画像歪みセンシング情報で表されるＧ画像のセンシング画像と、第２の画像歪みセンシング情報で表されるチェッカーパターン画像１６のセンシング画像との差分画像（チェッカー差分画像）を生成する（ステップＳ１０）。記憶部１６０は、チェッカー差分画像の情報を記憶する。

投写領域情報生成部１０２は、チェッカー差分画像の情報に基づき、画像歪みセンシング部１８０のセンシング画像における中央画像の領域（中央領域）の位置に関する中央領域情報と、センシング画像における周辺画像の領域（周辺領域）の位置に関する周辺領域情報を生成するとともに、中央領域情報および周辺領域情報に基づき、センシング画像における投写画像１２（投写領域）の位置に関する投写領域情報を生成する（ステップＳ１１）。

具体的には例えば、投写領域情報生成部１０２は、チェッカー差分画像の各画素の値（差分値）が変化する点を判別することにより、中央領域の複数の中央基準位置と、チェッカー差分画像に含まれる周辺領域の周辺基準位置を検出する。そして、投写領域情報生成部１０２は、これらの基準位置に基づいて中央領域の４隅の位置を決定し、当該位置に基づいて投写領域の４隅の位置を決定する。なお、投写領域情報としては、例えば、センシング画像における投写領域の４隅の位置を示す情報等が該当する。

また、投写対象領域情報生成部１０１は、ＧＫ差分画像の情報と、投写領域情報に基づき、センシング画像におけるスクリーン１０の位置に関する投写対象領域情報を生成する（ステップＳ１２）。

具体的には例えば、投写対象領域情報生成部１０１は、投写領域情報に基づく中央領域の４隅の位置から外側に向かってＧＫ差分画像内のエッジ検出を行って境界線を決定することにより投写対象領域情報を生成する。なお、投写対象領域情報としては、例えば、センシング画像におけるスクリーン１０の４隅の位置を示す情報等が該当する。

図６は、第１の実施例における補正情報生成から画像投写までの画像処理の流れを示すフローチャートである。

画像歪み補正部１０３は、投写領域情報と、投写対象領域情報に基づき、投写画像１２の歪みを補正する度合いを示す補正情報を生成する（ステップＳ１３）。

より具体的には、画像歪み補正部１０３は、投写領域情報と、投写対象領域情報に基づき、各領域の形状の相違を判別し、当該相違に応じて投写画像１２の歪みが補正され、投写画像１２が所望のアスペクト比（縦横比）になるように補正情報を生成する。

なお、投写対象領域情報生成部１０１、投写領域情報生成部１０２、画像歪み補正部１０３のより具体的な処理手順は、例えば、特願２００４−１５６２７３号に記載された手法を採用可能であるため、本実施例では説明を省略する。

また、表示領域情報生成部１０４は、補正情報と、投写領域情報に基づき、センシング画像における歪みが補正された投写画像１２の表示領域を示す表示領域情報を生成する（ステップＳ１４）。

制御部１０７は、表示領域情報に基づき、歪み補正後の最適なズーム状態を判別し、最適ズーム状態となるようにズーム部１９４を制御する（ステップＳ１５）。

センシング情報補正部１３０は、制御部１０７からの初期ズーム状態を示す情報および最適ズーム状態を示す情報、第１〜第４の環境影響センシング情報に基づき、最適ズーム状態における表示領域におけるＲＧＢ値の種別ごとの平均値を示す補正センシング情報を生成する（ステップＳ１６）。

また、色補正部１２２は、理想的な色を示す理想的色情報と、補正センシング情報に基づき、理想的な色で投写画像１２が投写されるように３Ｄ−ＬＵＴを生成する（ステップＳ１７）。

また、明るさ補正部１２４は、Ｒ画像の補正センシング情報、Ｇ画像の補正センシング情報およびＢ画像の補正センシング情報の和を演算することにより、白色画像（Ｗ画像）の補正センシング情報を生成する（ステップＳ１８）。より具体的には例えば、明るさ補正部１２４は、Ｒ画像の補正センシング情報、Ｇ画像の補正センシング情報およびＢ画像の補正センシング情報の和からＫ画像の補正センシング情報を２回減算した値をＷ画像の補正センシング情報として生成する。なお、Ｋ画像の補正センシング情報を２回減算するのは、３つの値を加算することによって３重になった外光成分から２つ分の外光成分を除去するためである。

そして、明るさ補正部１２４は、センシング情報補正部１３０からの補正センシング情報と、Ｗ画像の補正センシング情報と、理想的な明るさを示す理想的明るさ情報に基づき、理想的な明るさで投写画像１２が投写されるように１Ｄ−ＬＵＴを生成する（ステップＳ１９）。

プロジェクタ２０は、以上の手順により画像情報の補正準備が完了した状態となる。

そして、ＰＣから画像情報が入力された場合、画像歪み補正部１０３は、投写画像１２の歪みを補正するため、補正情報に基づいて画像情報を補正する（ステップＳ２０）。

また、色補正部１２２は、投写画像１２の色を補正するため、画像歪み補正部１０３によって補正された画像情報を、３Ｄ−ＬＵＴを用いて補正する（ステップＳ２１）。

また、明るさ補正部１２４は、投写画像１２の明るさを補正するため、色補正部１２２によって補正された画像情報を、１Ｄ−ＬＵＴを用いて補正する（ステップＳ２２）。

画像情報出力部１４０は、画像歪み補正処理と環境影響軽減処理が行われた画像情報を投写部１９０に出力する。投写部１９０は、当該画像情報に基づき、画像を投写する（ステップＳ２３）。

以上のように、本実施例によれば、プロジェクタ２０は、歪み補正後の表示領域内のセンシング情報を用いて環境影響軽減処理を実行することにより、投写画像１２の歪み補正処理を行う場合の環境影響軽減処理をより適切に実行することができる。

また、プロジェクタ２０は、ズーム部１９４による大きさ調整後の表示領域内のセンシング情報を用いて環境影響軽減処理を実行することにより、投写画像１２の大きさを調整する場合の環境影響軽減処理をより適切に実行することができる。

また、本実施例によれば、プロジェクタ２０は、画像歪み補正用のキャリブレーション画像と、色や明るさを補正するためのキャリブレーション画像を共通化して５種類のキャリブレーション画像を投写、センシングすることにより、画像処理を効率よく実行できる。すなわち、本実施例によれば、プロジェクタ２０は、画像歪み補正と、外光８０やスクリーン１０の色の影響を考慮した色と明るさの補正をほぼ同時に行うことができる。これにより、プロジェクタ２０は、キャリブレーション処理に必要となる時間を減らし、ユーザーに高い満足感を与えることができる。

また、本実施例によれば、プロジェクタ２０は、位置確認画像を用いて中央画像に相当する領域がスクリーン１０に入っているかユーザーに確認させることにより、チェッカーパターン画像１６の中央画像が確実に環境影響センシング情報に含まれる状態でセンシングすることができる。これにより、プロジェクタ２０は、適切なセンシング情報を用いて画像処理を実行することができる。

また、本実施例によれば、プロジェクタ２０は、一旦自動露出設定で最も輝度値の高いＧ画像をセンシングすることにより、適用環境に適合した露出で第１の画像歪みセンシング情報を生成することができる。また、プロジェクタ２０は、Ｇ画像のセンシング時の露出で第２および第３の画像歪みセンシング情報を生成することにより、差分画像の生成に適した露出で第２および第３の画像歪みセンシング情報を生成することができる。

また、本実施例によれば、画像歪みセンシング部１８０と、環境影響センシング部１８２を設けることにより、目的に応じた必要最低限の機能を有するセンサーを用いることができる。

また、本実施例によれば、プロジェクタ２０は、環境影響センシング部１８２のセンシング範囲を環境影響センシング領域１５に収める光学系を用いることにより、画像歪み補正後の表示領域内の環境影響センシング情報を常に用いることができるため、画像歪み補正処理を実行する場合であっても適切に環境影響軽減処理を実行することができる。

（第２の実施例）
また、画像歪みセンシング部１８０として、例えば、ラインセンサーや位相差センサー等を用いた場合、あるいは、画像歪み補正部１０３が、例えば、画像歪みセンシング情報に含まれる明るさ指標値（例えば、輝度値、照度値等）のピーク位置を検出し、当該ピーク位置に基づき、投写画像１２の歪みを補正する手法を採用した場合、プロジェクタ２０は、投写対象領域情報および投写領域情報を不要とすることもできる。さらに、制御部１０７によりズーム部１９４を制御しない場合には、プロジェクタ２０は、表示領域情報も不要とすることもできる。

次に、プロジェクタ２０が、投写対象領域情報、投写領域情報および表示領域情報を用いないで環境影響軽減処理と画像歪み補正処理を実行する第２の実施例について説明する。

図７は、第２の実施例における補正情報生成から画像投写までの画像処理の流れを示すフローチャートである。

第２の実施例のプロジェクタ２０は、図２に示す投写対象領域情報生成部１０１、投写領域情報生成部１０２、表示領域情報生成部１０４、差分画像生成部１０６、制御部１０７、センシング情報補正部１３０、ズーム部１９４を有していない。

また、第２の実施例では、環境影響センシング部１８２は、カラーフィルターを有するシリコンフォトダイオードと、環境影響センシング領域１５として、常に画像歪み補正後の画像内に含まれる投写画像１２の所定領域をセンシングするための遮光筒光学系を含んで構成されている。また、第２の実施例では、画像歪みセンシング部１８０として、例えば、ラインセンサー等を用いている。

画像歪み補正部１０３は、画像歪みセンシング情報に基づき、投写画像１２の歪みを補正する度合いを示す補正情報を生成する（ステップＳ３１）。

より具体的には、画像歪み補正部１０３は、上述したピーク位置に基づき、投写画像１２の歪みを判別し、当該判別結果に応じて投写画像１２の歪みが補正され、投写画像１２が所望のアスペクト比（縦横比）になるように補正情報を生成する。

また、色補正部１２２は、理想的な色を示す理想的色情報と、第１〜第４の環境影響センシング情報に基づき、理想的な色で投写画像１２が投写されるように３Ｄ−ＬＵＴを生成する（ステップＳ３２）。

また、明るさ補正部１２４は、第１〜第３の環境影響センシング情報に基づき、白色画像（Ｗ画像）の環境影響センシング情報を生成する（ステップＳ３３）。なお、具体的な手法はステップＳ１８の手法と同様である。

そして、明るさ補正部１２４は、第１〜第４およびＷ画像の環境影響センシング情報と、理想的な明るさを示す理想的明るさ情報に基づき、理想的な明るさで投写画像１２が投写されるように１Ｄ−ＬＵＴを生成する（ステップＳ３４）。

ステップＳ２０以降の処理は第１の実施例と同様であるため、説明を省略する。

以上のように、プロジェクタ２０は、投写対象領域情報、投写領域情報および表示領域情報を用いないで環境影響軽減処理と画像歪み補正処理を実行することも可能である。

また、第２の実施例によれば、プロジェクタ２０は、投写対象領域情報が不要となるため、スクリーン１０等の４隅を検出できない場合にも画像の歪みを補正することができる。

もちろん、第２の実施例においても、プロジェクタ２０は、ズーム制御を行ってもよい。

この場合にも、環境影響センシング部１８２は、ズームの制御状態に関わらず、常に画像歪み補正後の画像内に含まれる投写画像１２の所定領域をセンシングすることができるため、プロジェクタ２０は、当該所定領域における環境影響を的確に把握でき、投写画像１２の歪み補正処理を実行する場合の環境影響軽減処理をより適切に実行することができる。

（変形例）
以上、本発明を適用した好適な実施の形態について説明してきたが、本発明の適用は上述した実施例に限定されない。

例えば、上述した実施例では、プロジェクタ２０は、緑色と黒色のチェッカーパターン画像１６を用いたが、例えば、緑色以外の単色（赤色または青色）と黒色のチェッカーパターン画像を用いてもよい。また、チェッカーパターン画像１６を構成する色のパターンを逆にしてもよい。

また、上述した実施例では、プロジェクタ２０は、白色の単色画像を用いていないが、上述した単色画像に加えて白色の単色画像を用い、チェッカーパターン画像１６に代えて白色と黒色のチェッカーパターン画像を用いてもよい。

これによれば、プロジェクタ２０は、新たに白色の単色画像を投写してセンシングする処理が必要となるが、白色の補正センシング情報を生成する処理を不要とすることができる。

また、例えば、処理部１００に外光影響除去手段を設け、外光影響除去手段が、Ｋ画像の画像歪みセンシング情報に所定値以上の輝度値を有する画素領域がある場合、ＧＫ差分画像における当該画素領域の輝度値を、ＧＫ差分画像における当該画素領域近傍の輝度値に置換し、置換後の情報をＫ画像の画像歪みセンシング情報として記憶部１６０に記憶してもよい。

これによれば、プロジェクタ２０は、部分的な外光８０の影響を除外し、適切な画像処理を実行することができる。

また、図４に示す前処理（ステップＳ１）は必須ではなく、プロジェクタ２０は、起動直後にステップＳ２以降の処理を実行してもよい。

また、投写部１９０がズーム機能を有していない場合、画像情報補正部１２０は、補正センシング情報を用いる代わりに表示領域内の環境影響センシング情報を用いて３Ｄ−ＬＵＴおよび１Ｄ−ＬＵＴを生成してもよい。

また、上述した実施例では、プロジェクタ２０は、Ｋ画像を投写してセンシングしたが、変形例として、非投写時のスクリーン１０をセンシングして各センシング情報を生成してもよい。

また、投写画像１２とスクリーン１０の位置関係は図１に示す例に限定されない。例えば、投写画像１２の外枠全部がスクリーン１０の外枠より外側にあってもよいし、内側にあってもよい。

また、チェッカーパターン画像１６は、上述した実施例に限定されない。例えば、中央領域や周辺領域の形状は矩形に限定されず、円形、三角形等であってもよい。

また、スクリーン１０以外の黒板、白板等における投写対象領域に画像を投写する場合であっても本発明は有効である。

また、例えば、上述した実施例では、画像処理システムをプロジェクタ２０に実装した例について説明したが、プロジェクタ２０以外にもＣＲＴ（Cathode Ray Tube）等のプロジェクタ２０以外の画像処理システムに実装してもよい。また、プロジェクタ２０としては、液晶プロジェクタ以外にも、例えば、ＤＭＤ（Digital Micromirror Device）を用いたプロジェクタ等を用いてもよい。なお、ＤＭＤは米国テキサスインスツルメンツ社の商標である。

また、上述したプロジェクタ２０の機能は、例えば、プロジェクタ単体で実装してもよいし、複数の処理装置で分散して（例えば、プロジェクタとＰＣとで分散処理）実装してもよい。

さらに、上述した実施例では、画像歪み画像歪みセンサー６０および環境影響センサー６２をプロジェクタ２０に内蔵した構成であったが、画像歪み画像歪みセンサー６０および環境影響センサー６２を、プロジェクタ２０とは別の独立した装置として構成してもよい。

第１の実施例における画像投写状況を示す概略図である。 第１の実施例におけるプロジェクタの機能ブロック図である。 第１の実施例におけるプロジェクタのハードウェアブロック図である。 第１の実施例における前処理から投写対象領域情報生成までの画像処理の流れを示すフローチャートである。 第１の実施例におけるチェッカーパターン画像を示す図である。 第１の実施例における補正情報生成から画像投写までの画像処理の流れを示すフローチャートである。 第２の実施例における補正情報生成から画像投写までの画像処理の流れを示すフローチャートである。

符号の説明

２０ プロジェクタ（画像処理システム）、６０ 画像歪みセンサー、６２ 環境影響センサー、８０ 外光、１００ 処理部、１０１ 投写対象領域情報生成部、１０２ 投写領域情報生成部、１０３ 画像歪み補正部、１０４ 表示領域情報生成部、１０５ 環境影響軽減部、１０６ 差分画像生成部、１０７ 制御部、１２０ 画像情報補正部、１２２ 色補正部、１２４ 明るさ補正部、１３０ センシング情報補正部、１８０ 画像歪みセンシング部、１８２ 環境影響センシング部、１９０ 投写部、９００ 情報記憶媒体

Claims (13)

1. 投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングすることによって画像歪みセンシング情報を生成する画像歪みセンシング手段と、
   前記投写画像の所定領域をセンシングすることによって前記所定領域における明るさ指標値を示す環境影響センシング情報を生成する環境影響センシング手段と、
   前記投写画像の歪みを補正する画像歪み補正手段と、
   理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
   前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像とを異なる時点において投写する投写手段と、
   を含み、
   前記環境影響センシング手段は、前記所定領域として、常に画像歪み補正後の画像内に含まれる前記投写画像の領域をセンシングすることにより、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像のそれぞれの前記環境影響センシング情報を生成し、
   前記環境影響軽減手段は、各環境影響センシング情報に基づき、前記環境影響を軽減する処理を実行することを特徴とする画像処理システム。
2. 投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングすることによって画像歪みセンシング情報を生成する画像歪みセンシング手段と、
   前記投写画像の中央付近の所定領域をセンシングすることによって前記所定領域における明るさ指標値を示す環境影響センシング情報を生成する環境影響センシング手段と、
   前記画像歪みセンシング情報に基づき、前記画像歪みセンシング手段のセンシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成する投写領域情報生成手段と、
   前記投写画像の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正手段と、
   前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成手段と、
   理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
   前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む複数色画像とを異なる時点において投写する投写手段と、
   所定の差分画像を生成する差分画像生成手段と、
   を含み、
   前記複数色画像は、当該複数色画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成され、
   前記中央画像および前記周辺画像が黒色で前記背景画像が黒色以外の単色であり、あるいは、前記中央画像および前記周辺画像が黒色以外の単色で前記背景画像が黒色であって、
   前記画像歪みセンシング手段は、前記複数色画像および赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによってそれぞれの前記画像歪みセンシング情報を生成し、
   前記環境影響センシング手段は、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像の前記所定領域をセンシングすることによってそれぞれの前記環境影響センシング情報を生成し、
   前記差分画像生成手段は、前記複数色画像の画像歪みセンシング情報と、前記いずれかの単色画像の画像歪みセンシング情報とに基づくパターン差分画像を生成し、
   前記投写領域情報生成手段は、前記パターン差分画像に基づき、前記センシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成するとともに、前記中央領域情報および前記周辺領域情報に基づき、前記投写領域情報を生成し、
   前記環境影響軽減手段は、各環境影響センシング情報と、前記表示領域情報とに基づき、前記環境影響を軽減する処理を実行することを特徴とする画像処理システム。
3. 請求項２において、
   前記表示領域情報に基づき、前記投写対象領域内の前記表示領域に相当する領域に最適な大きさで前記投写画像が投写されるように、前記投写画像の大きさを調整するズーム部を制御するとともに当該調整の度合いを示す調整情報を生成する制御手段を含み、
   前記環境影響軽減手段は、
   前記調整情報に基づき、前記調整による前記投写画像の明るさの変化を判別し、当該明るさの変化に応じて各環境影響センシング情報に含まれる前記表示領域内の情報を補正することによってそれぞれの補正センシング情報を生成するセンシング情報補正手段と、
   各補正センシング情報に基づき、前記投写画像の色および明るさが理想的な状態となるように画像情報を補正する画像情報補正手段と、
   を含むことを特徴とする画像処理システム。
4. 請求項３において、
   前記画像情報補正手段は、
   理想的な色を示す理想的色情報と、前記補正センシング情報とに基づき、前記理想的な色で前記投写画像が投写されるように画像情報を補正する色補正手段と、
   理想的な明るさを示す理想的明るさ情報と、前記補正センシング情報とに基づき、前記理想的な明るさで前記投写画像が投写されるように前記色補正手段によって補正された画像情報を補正する明るさ補正手段と、
   を含むことを特徴とする画像処理システム。
5. 請求項４において、
   前記明るさ補正手段は、赤色、緑色および青色の各単色画像の補正センシング情報に基づき、白色の単色画像の補正センシング情報を生成するとともに、当該白色の単色画像の補正センシング情報と、黒色の単色画像の補正センシング情報とに基づき、前記色補正手段によって補正された画像情報を補正することを特徴とする画像処理システム。
6. 請求項１において、
   前記環境影響補正手段は、画像情報補正手段を含み、
   前記画像情報補正手段は、
   理想的な色を示す理想的色情報と、各環境影響センシング情報とに基づき、前記理想的な色で前記投写画像が投写されるように画像情報を補正する色補正手段と、
   理想的な明るさを示す理想的明るさ情報と、各環境影響センシング情報とに基づき、前記理想的な明るさで前記投写画像が投写されるように前記色補正手段によって補正された画像情報を補正する明るさ補正手段と、
   を含むことを特徴とする画像処理システム。
7. 請求項６において、
   前記明るさ補正手段は、赤色、緑色および青色の各単色画像の環境影響センシング情報に基づき、白色の単色画像の環境影響センシング情報を生成するとともに、当該白色の単色画像の環境影響センシング情報と、黒色の単色画像の環境影響センシング情報とに基づき、前記色補正手段によって補正された画像情報を補正することを特徴とする画像処理システム。
8. 請求項２〜５のいずれかにおいて、
   前記センシング画像における前記投写対象領域の位置に関する投写対象領域情報を生成する投写対象領域情報生成手段を含み、
   前記画像歪みセンシング手段は、前記黒色の単色画像の少なくとも一部を含む領域をセンシングすることによって黒色の単色画像の画像歪みセンシング情報を生成し、
   前記差分画像生成手段は、前記黒色の単色画像の画像歪みセンシング情報と、前記いずれかの単色の単色画像の画像歪みセンシング情報とに基づき、明るさ差分画像を生成し、
   前記投写対象領域情報生成手段は、前記明るさ差分画像と、前記投写領域情報とに基づき、前記投写対象領域情報を生成し、
   前記画像歪み補正手段は、前記投写対象領域情報と、前記投写領域情報とに基づき、前記投写画像の歪みを補正することを特徴とする画像処理システム。
9. 請求項１〜８のいずれかにおいて、
   前記投写手段は、前記投写画像の投写前に前記所定領域に相当する領域が前記投写対象領域に投写されているかユーザーに確認させるための位置確認画像を投写することを特徴とする画像処理システム。
10. 請求項１〜９のいずれかに記載の画像処理システムを有することを特徴とするプロジェクタ。
11. 画像歪みセンシング手段と、環境影響センシング手段と、投写手段とを有するコンピュータにより読み取り可能なプログラムであって、
    コンピュータを、
    前記画像歪みセンシング手段に、投写対象領域に投写された投写画像の少なくとも一部を含む領域をセンシングさせることによって画像歪みセンシング情報を生成させる手段と、
    前記環境影響センシング手段に、前記投写画像の中央付近の所定領域をセンシングさせることによって環境影響センシング情報を生成させる手段と、
    前記画像歪みセンシング情報に基づき、前記画像歪みセンシング手段のセンシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成する投写領域情報生成手段と、
    前記投写画像の歪みを補正するとともに当該補正の度合いを示す補正情報を生成する画像歪み補正手段と、
    前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成する表示領域情報生成手段と、
    理想環境と実際の使用環境の相違によって生じる環境影響を軽減する処理を実行する環境影響軽減手段と、
    前記投写手段に、前記投写画像として、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む複数色画像とを異なる時点において投写させる手段と、
    所定の差分画像を生成する差分画像生成手段として機能させ、
    前記複数色画像は、当該複数色画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成され、
    前記中央画像および前記周辺画像が黒色で前記背景画像が黒色以外の単色であり、あるいは、前記中央画像および前記周辺画像が黒色以外の単色で前記背景画像が黒色であって、
    前記画像歪みセンシング手段は、前記複数色画像および赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによってそれぞれの前記画像歪みセンシング情報を生成し、
    前記環境影響センシング手段は、前記赤色の単色画像、前記緑色の単色画像、前記青色の単色画像および前記黒色の単色画像の前記所定領域をセンシングすることによってそれぞれの前記環境影響センシング情報を生成し、
    前記差分画像生成手段は、前記複数色画像の画像歪みセンシング情報と、前記いずれかの単色画像の画像歪みセンシング情報とに基づくパターン差分画像を生成し、
    前記投写領域情報生成手段は、前記パターン差分画像に基づき、前記センシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成するとともに、前記中央領域情報および前記周辺領域情報に基づき、前記投写領域情報を生成し、
    前記環境影響軽減手段は、各環境影響センシング情報と、前記表示領域情報とに基づき、前記環境影響を軽減する処理を実行することを特徴とするプログラム。
12. 請求項１１に記載のプログラムを記憶したことを特徴とする情報記憶媒体。
13. 画像歪みセンシング手段と、環境影響センシング手段と、処理手段と、投写手段とを有するコンピュータによる画像処理方法であって、
    前記投写手段は、赤色の単色画像と、緑色の単色画像と、青色の単色画像と、黒色の単色画像と、赤色、緑色、青色のいずれかの単色と黒色とを含む画像であって、かつ、当該画像の中央付近に位置する中央画像と、当該中央画像の周辺に位置する周辺画像と、前記中央画像および前記周辺画像以外の背景画像とから構成される画像である複数色画像とを異なる時点において投写し、
    前記画像歪みセンシング手段は、
    投写対象領域に投写された赤色、緑色、青色、黒色のいずれかの単色画像の少なくとも一部を含む領域をセンシングすることによって第１の画像歪みセンシング情報を生成し、
    前記投写対象領域に投写された前記複数色画像の少なくとも一部を含む領域をセンシングすることによって第２の画像歪みセンシング情報を生成し
    前記環境影響センシング手段は、
    前記投写対象領域に投写された緑色の単色画像の前記中央付近の所定領域をセンシングすることによって第１の環境影響センシング情報を生成し、
    前記投写対象領域に投写された赤色の単色画像の前記所定領域をセンシングすることによって第２の環境影響センシング情報を生成し、
    前記投写対象領域に投写された青色の単色画像の前記所定領域をセンシングすることによって第３の環境影響センシング情報を生成し、
    前記投写対象領域に投写された黒色の単色画像の前記所定領域をセンシングすることによって第４の環境影響センシング情報を生成し、
    前記処理手段は、
    前記第１および第２の画像歪みセンシング情報に基づくパターン差分画像を生成し、
    前記パターン差分画像に基づき、前記画像歪みセンシング手段のセンシング画像における前記中央画像の位置に関する中央領域情報と、前記センシング画像における前記周辺画像の位置に関する周辺領域情報とを生成し、
    前記中央領域情報および前記周辺領域情報に基づき、前記センシング画像における前記投写画像の位置に関する情報を示す投写領域情報を生成し、
    前記投写領域情報に基づき、前記投写画像の歪みを補正する度合いを示す補正情報を生成し、
    前記投写領域情報と、前記補正情報とに基づき、前記センシング画像における前記投写画像の歪み補正後の表示領域を示す表示領域情報を生成し、
    前記補正情報に基づき、画像の歪みが補正されるように画像情報を補正し、
    前記第１〜第４の環境影響センシング情報と、前記表示領域情報とに基づき、理想環境と実際の使用環境の相違によって生じる環境影響が軽減されるように、前記画像情報を補正することを特徴とする画像処理方法。

Images