JP3690402B2 - 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 - Google Patents
画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 Download PDFInfo
- Publication number
- JP3690402B2 JP3690402B2 JP2003091720A JP2003091720A JP3690402B2 JP 3690402 B2 JP3690402 B2 JP 3690402B2 JP 2003091720 A JP2003091720 A JP 2003091720A JP 2003091720 A JP2003091720 A JP 2003091720A JP 3690402 B2 JP3690402 B2 JP 3690402B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- pixel
- information
- value
- ratio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 45
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000003384 imaging method Methods 0.000 claims description 102
- 238000012937 correction Methods 0.000 claims description 66
- 238000001514 detection method Methods 0.000 claims description 29
- 239000003086 colorant Substances 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 14
- 238000000034 method Methods 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 8
- 239000000284 extract Substances 0.000 description 7
- 239000004973 liquid crystal related substance Substances 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
-
- E—FIXED CONSTRUCTIONS
- E06—DOORS, WINDOWS, SHUTTERS, OR ROLLER BLINDS IN GENERAL; LADDERS
- E06B—FIXED OR MOVABLE CLOSURES FOR OPENINGS IN BUILDINGS, VEHICLES, FENCES OR LIKE ENCLOSURES IN GENERAL, e.g. DOORS, WINDOWS, BLINDS, GATES
- E06B1/00—Border constructions of openings in walls, floors, or ceilings; Frames to be rigidly mounted in such openings
- E06B1/04—Frames for doors, windows, or the like to be fixed in openings
- E06B1/34—Coverings, e.g. protecting against weather, for decorative purposes
- E06B1/347—Renovation door frames covering the existing old frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Geometry (AREA)
- Structural Engineering (AREA)
- Civil Engineering (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Facsimile Image Signal Circuits (AREA)
- Video Image Reproduction Devices For Color Tv Systems (AREA)
- Image Analysis (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、撮像情報に基づいて投写領域を抽出する画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法に関する。
【０００２】
【背景技術】
長期間、プロジェクタ等の画像表示装置で画像を表示していると画像に色むら（輝度むらによる色むらも含む。）が発生し、画像が徐々に劣化していく。
【０００３】
例えば、店舗や展示場等においては、長期間にわたってプロジェクタを用いてスクリーンに画像を連続的に表示する場合がある。このような場合、長期にわたる投影により早期に液晶パネルや偏光板等が劣化して画像の色むら等が発生することにより、本来の表示効果が損なわれてしまう。
【０００４】
このような問題点に鑑み、例えば、特許文献１では、撮像情報に基づいて投写領域を抽出し、当該撮像情報における投写領域内の輝度値に基づいて経時劣化による色むらをより適切に補正する画像処理システムが提案されている。
【０００５】
【特許文献１】
特開２００２−１４００６０号公報
【０００６】
【発明が解決しようとする課題】
しかし、特許文献１では、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけるための手法が詳述されていない。
【０００７】
特に、画像に歪みが発生している場合、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることが重要となる。
【０００８】
本発明は、上記の課題に鑑みなされたものであり、その目的は、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることが可能な画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法を提供することにある。
【０００９】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る画像処理システムは、少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１０】
また、本発明に係るプロジェクタは、少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１１】
また、本発明に係るプログラムは、コンピュータにより読み取り可能なプログラムであって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させ、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１２】
また、本発明に係る情報記憶媒体は、コンピュータにより読み取り可能なプログラムを記憶した情報記憶媒体であって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させるためのプログラムを記憶し、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１３】
また、本発明に係る画像処理方法は、単色のキャリブレーション画像を、投写する度に色を変えながら複数回投写し、
投写する度に各キャリブレーション画像を撮像して撮像情報を出力し、
当該撮像情報に基づき、複数のキャリブレーション画像の撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算し、
撮影画像領域分の比率情報を生成し、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出し、
前記撮像情報と、検出した端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換し、
当該画素ブロック画像情報に基づき、画像の歪み、画像の色、画像の明るさのうちの少なくとも１つを補正するために、画像信号を補正し、
補正した画像信号に基づき、画像を投写することを特徴とする。
【００１４】
本発明によれば、画像処理システム等は、撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算した比率情報を用いることにより、一般的なフィルタリングによって端点を検出する手法と比べ、投写領域の端点を正確かつ効率的に検出することができる。これにより、画像処理システム等は、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることができる。
【００１５】
また、本発明によれば、画像処理システム等は、差分値ではなく、比率を用いることにより、投写領域の端点の判断基準となる上記第１の所定値を適用環境に応じて変更する必要がないため、より効率的に画像処理を行うことができる。
【００１６】
また、本発明によれば、撮影画像における投写領域を正確に検出できるため、当該投写領域を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確な補正を行うことができるため、正確な画像を表示することが可能となる。
【００１７】
なお、ここで、前記画素ブロック画像情報の画素ブロック数は前記補正手段の処理に応じた画素ブロック数であってもよい。また、ここで、画素領域および画素ブロックとしては、例えば、１画素、複数画素、１画素ライン、複数画素ライン、複数画素で構成される矩形領域等が該当し、画素領域と画素ブロックは同じ単位でなくてもよく、例えば、画素領域が１画素で、画素ブロックが複数画素で構成される矩形領域であってもよい。
【００１８】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記比率情報生成手段は、前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出する手段を含み、
前記画像投写手段によって投写される画像は四角形の画像であって、
前記端点検出手段は、前記仮投写領域に基づき、投写領域の４隅の端点を検出してもよい。
【００１９】
また、前記画像処理方法は、前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出し、
当該仮投写領域に基づき、投写領域の４隅の端点を検出してもよい。
【００２０】
これによれば、画像処理システム等は、一般的に用いられる矩形の画像を投写する場合に、簡易的に仮投写領域を抽出し、当該仮投写領域を基準として実際の投写領域を抽出することにより、投写領域の４隅の端点を正確かつ効率的に検出することができる。
【００２１】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記端点検出手段は、検索によって検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出してもよい。
【００２２】
また、前記画像処理方法は、検索によって検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出してもよい。
【００２３】
これによれば、画像処理システム等は、投写領域の４隅の端点を検出する場合に、３つ以下の端点しか検出できなかった場合であっても、異なる検索方法を用いて端点を検出することができる。これにより、画像処理システム等は、画像が種々の形状に歪んでいる場合であっても、正確かつ効率的に投写領域の４隅の端点を検出することができ、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることができる。
【００２４】
なお、前記第１の所定値および前記第２の所定値は同じ値であってもよいし、異なる値であってもよい。
【００２５】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記補正手段は、
所定のキャリブレーション画像の画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
所定のキャリブレーション画像の画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、画像の歪みと色むらが補正された画像信号に基づき、画像を投写してもよい。
【００２６】
これによれば、画像処理システム等は、撮影画像における投写領域を正確に検出できるため、当該投写領域を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確に画像の歪みと色むらを補正することができるため、正確な画像を表示することが可能となる。
【００２７】
【発明の実施の形態】
以下、本発明を、画像処理システムを有するプロジェクタに適用した場合を例に採り、図面を参照しつつ説明する。なお、以下に示す実施形態は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施形態に示す構成の全てが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。
【００２８】
（システム全体の説明）
図１は、本実施形態の一例に係る画像投写状況を示す概略図である。
【００２９】
プロジェクタ２０は、スクリーン１０へ向け画像を投写する。これにより、スクリーン１０には、投写領域１２が形成される。
【００３０】
このように、プロジェクタ２０等の投写型画像表示装置を用いて長期間画像を表示していると、光学系等の経時劣化により次第に画像に色むら（輝度むらによる色むらも含む。）が発生する。
【００３１】
その上、日光や照明光等の環境光８０によっても投写領域１２における画像の見えは変化する。
【００３２】
さらに、スクリーン１０とプロジェクタ２０の投写光の光軸とのなす角度によって投写領域１２は、歪んでしまう。
【００３３】
このような画像の色むらや歪み等を補正するため、本実施形態のプロジェクタ２０は、撮像手段であるセンサー６０を有する。センサー６０は、投写領域１２を含む領域を撮像する。
【００３４】
なお、本実施例では、センサー６０は、いわゆるリモコンに内蔵され、プロジェクタ２０とは別の装置として構成されているものと仮定する。ユーザーは、リモコンの撮像ボタンを押すことにより、センサー６０を介してスクリーン１０上の投写領域１２の撮像を行う。プロジェクタ２０は、撮影画像領域における画素ごとの画像信号値または当該画像信号値を変換した輝度値を示す撮像情報をセンサー６０から受信する。
【００３５】
図２は、本実施形態の一例に係る撮影画像領域２１０の模式図である。
【００３６】
図２において、撮影画像領域２１０は、所定画素数の矩形状の領域ＡＢＣＤであり、実際に投写された画像の形状を示す投写領域２２０は、ＩＪＫＬの４点で囲まれた領域であり、領域ＩＪＫＬと接する矩形状の領域ＥＦＧＨが仮投写領域２３０である。
【００３７】
本実施形態では、プロジェクタ２０は、白の単色画像投写時の撮影画像領域２１０の画像信号値または輝度値と、黒の単色画像投写時または非投写時の撮影画像領域２１０の画像信号値または輝度値との比率を１画素ごとに演算してメモリに記憶しておく。
【００３８】
そして、プロジェクタ２０は、撮影画像領域２１０の各頂点から撮影画像領域２１０の内側に向かって、所定画素領域（１画素、１ライン、複数画素で構成される矩形領域等）ごとの当該比率の合計値を第１の所定値と比較する。
【００３９】
そして、プロジェクタ２０は、上下左右の４方向の検索によって当該合計値が第１の所定値以上となった画素領域で囲まれた矩形領域を仮投写領域２３０として検出する。
【００４０】
さらに、プロジェクタ２０は、仮投写領域２３０の４隅から仮投写領域２３０の辺上（場合によっては仮投写領域２３０内部）の１画素ごとの上記比率を第２の所定値と比較し、当該比率が第２の所定値以上となった画素を端点とする投写領域２２０を抽出する。
【００４１】
このように、本実施形態によれば、プロジェクタ２０は、簡易的に仮投写領域２３０を検出してから投写領域２２０を検出することにより、従来のようにフィルタリング処理によって投写領域２２０を抽出する必要がないため、より効率的に投写領域２２０を抽出することができる。
【００４２】
さらに、本実施形態では、プロジェクタ２０は、このようにして抽出した投写領域２２０に基づいて所定の画素ブロック画像を生成することにより、投写領域１２と、プロジェクタ２０の表示素子とを対応づける。
【００４３】
これにより、プロジェクタ２０は、より正確に画像の歪みや画像の色等を補正することが可能となる。
【００４４】
次に、このような機能を実現するためのプロジェクタ２０の機能ブロックについて説明する。
【００４５】
図３は、本実施形態の一例に係るプロジェクタ２０の機能ブロック図である。
【００４６】
プロジェクタ２０は、ＰＣ（Personal Computer）等からのアナログＲＧＢ信号（Ｒ１、Ｇ１、Ｂ１）をデジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）に変換する入力信号処理部１１０と、画像の色と明るさを補正するため、当該デジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）をデジタルＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）に変換する色変換部１２０と、色むらを補正するため、当該デジタルＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）をデジタルＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）に変換する色むら補正部１３０と、当該デジタルＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）をアナログＲＧＢ信号（Ｒ５、Ｇ５、Ｂ５）に変換する出力信号処理部１４０と、当該アナログＲＧＢ信号に基づき、画像を投写する画像投写部１９０とを含んで構成されている。
【００４７】
また、ここで、入力信号処理部１１０は、デジタル変換したＲＧＢ信号に対して画像の歪み（台形歪み、キーストン歪み等）を補正する画像歪み補正部１１２を含んで構成されている。
【００４８】
また、色変換部１２０は、画像の色補正用の３Ｄ−ＬＵＴ（３次元ルックアップテーブル）を記憶する３Ｄ−ＬＵＴ記憶部１２２と、画像の明るさ補正用の１Ｄ−ＬＵＴ（１次元ルックアップテーブル）を記憶する１Ｄ−ＬＵＴ記憶部１２４とを含んで構成されている。
【００４９】
また、画像投写部１９０は、空間光変調器１９２と、空間光変調器１９２を駆動する駆動部１９４と、光源１９６と、レンズ１９８とを含んで構成されている。
【００５０】
駆動部１９４は、出力信号処理部１４０からの画像信号に基づき、空間光変調器１９２を駆動する。そして、画像投写部１９０は、光源１９６からの光を、空間光変調器１９２およびレンズ１９８を介して投写する。
【００５１】
また、プロジェクタ２０は、キャリブレーション画像を表示するための画像信号を生成するキャリブレーション信号発生部１７２と、センサー６０からの撮像情報等を一時的に記憶する撮像情報記憶部１８４と、撮像情報に基づいて比率情報を生成するとともに、仮投写領域２３０を抽出する比率情報生成部１５２と、仮投写領域２３０に基づいて投写領域２２０の端点を検出する端点検出部１５４と、当該端点に基づいて画素ブロック画像を生成する画素ブロック画像情報生成部１５６とを含んで構成されている。
【００５２】
さらに、プロジェクタ２０は、画素ブロック画像に基づいて画像歪み補正部１１２のために画像歪み補正量を演算する画像歪み補正量演算部１６２と、画素ブロック画像に基づいて色むら補正部１３０のために色むら補正量を演算する色むら補正量演算部１６４と、画像歪み補正量演算部１６２および色むら補正量演算部１６４からの要求に応じた画素数で撮像するようにセンサー６０を制御する制御信号を生成する撮像画素設定部１８６とを含んで構成されている。
【００５３】
なお、センサー６０と撮像情報記憶部１８４および撮像画素設定部１８６との情報の送受信は、例えば、ブルートゥースや赤外線等の無線通信で行ってもよいし、ＴＣＰ／ＩＰ等のプロトコルに準拠した通信手順によってＬＡＮケーブル等を用いた有線通信で行ってもよい。
【００５４】
また、上述したプロジェクタ２０の各部を実現するためのハードウェアとしては、例えば、以下のものを適用できる。
【００５５】
図４は、本実施形態の一例に係るプロジェクタ２０のハードウェアブロック図である。
【００５６】
例えば、入力信号処理部１１０としては、例えばＡ／Ｄコンバーター９３０等、撮像情報記憶部１８４としては、例えばＲＡＭ９５０等、色むら補正部１３０、比率情報生成部１５２、端点検出部１５４、画素ブロック画像情報生成部１５６およびキャリブレーション信号発生部１７２としては、例えば画像処理回路９７０等、画像歪み補正量演算部１６２、色むら補正量演算部１６４としては、例えばＣＰＵ９１０等、色変換部１２０としては、例えば画像処理回路９７０、ＲＡＭ９５０、ＣＰＵ９１０等、出力信号処理部１４０としては、例えばＤ／Ａコンバーター９４０等、空間光変調器１９２としては、例えば液晶パネル９２０等、駆動部１９４としては、例えば液晶パネル９２０を駆動する液晶ライトバルブ駆動ドライバを記憶するＲＯＭ９６０等を用いて実現できる。
【００５７】
なお、これらの各部はシステムバス９８０を介して相互に情報をやりとりすることが可能である。
【００５８】
また、これらの各部は回路のようにハードウェア的に実現してもよいし、ドライバのようにソフトウェア的に実現してもよい。
【００５９】
さらに、比率情報生成部１５２等としてコンピュータを機能させるためのプログラムを記憶した情報記憶媒体９００からプログラムを読み取って比率情報生成部１５２等の機能をコンピュータに実現させてもよい。
【００６０】
このような情報記憶媒体９００としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＲＯＭ、ＲＡＭ、ＨＤＤ等を適用でき、そのプログラムの読み取り方式は接触方式であっても、非接触方式であってもよい。
【００６１】
また、情報記憶媒体９００に代えて、上述した各機能を実現するためのプログラム等を、伝送路を介してホスト装置等からダウンロードすることによって上述した各機能を実現することも可能である。
【００６２】
（画像処理の流れの説明）
次に、これらの各部を用いた画像処理の流れについて説明する。
【００６３】
図５は、本実施形態の一例に係る画像処理の流れを示すフローチャートである。
【００６４】
まず、プロジェクタ２０は、複数種の単色のキャリブレーション画像を投写する（ステップＳ１）。より具体的には、画像の歪みを補正する場合、プロジェクタ２０は、Ｗ（白）、Ｋ（黒）のキャリブレーション画像を投写する。なお、画像の色と明るさを補正する場合、上記キャリブレーション画像に加え、所定の階調単位で階調を変化させたＲ、Ｇ、Ｂのキャリブレーション画像を投写すればよい。
【００６５】
まず、画像投写部１９０は、第１のキャリブレーション画像をスクリーン１０に投写する（ステップＳ１）。
【００６６】
センサー６０は、プロジェクタ２０の撮像画素設定部１８６から送信された制御情報に基づき所定の画素数で撮像するように設定を変更し、ユーザーのボタン操作に応じて画像投写部１９０によってスクリーン１０に投写された第１のキャリブレーション画像を撮像する（ステップＳ２）。
【００６７】
なお、このように、撮像画素数を調整することにより、情報量の増加を抑制することができるため、撮像情報を目的に応じてより効率的に処理することができる。
【００６８】
そして、センサー６０は、プロジェクタ２０へ向け撮像情報を送信し、撮像情報記憶部１８４は、当該撮像情報を記憶する（ステップＳ３）。
【００６９】
キャリブレーション信号発生部１７２は、すべてのキャリブレーション画像の投写が終了したかどうかを判定し（ステップＳ４）、終了していない場合は、プロジェクタ２０は、ステップＳ１〜Ｓ３の処理を繰り返し実行する。
【００７０】
このようにして、撮像情報記憶部１８４は、すべてのキャリブレーション画像の撮像情報を記憶する。そして、比率情報生成部１５２は、撮像情報記憶部１８４に記憶された白のキャリブレーション画像の撮像情報と、黒のキャリブレーション画像の撮像情報に基づいて撮像情報における画素ごとの比率（Ｒ信号値等の比率）を演算し、当該比率に基づいて矩形状の仮投写領域２３０を抽出する（ステップＳ５）。なお、比率情報生成部１５２は、当該撮像情報の画素ごとの比率を示す比率情報を撮像情報記憶部１８４に記憶する。
【００７１】
ここで、比率としては、例えば、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値−１や、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値等の値を採用してもよい。本実施例では、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値を比率として採用したものと仮定する。
【００７２】
比率情報生成部１５２は、撮影画像領域２１０の各辺から内側に向かって画素ラインごとに比率の合計値が所定値（例えば、２．０＊当該画素ラインを構成する画素数等）以上となるかどうかを検出する。比率情報生成部１５２は、例えば、図２において、辺ＡＢから下方向に画素ラインごとに検索を行い、辺ＥＦの画素ラインにおいて上記合計値が所定値以上となった時点で下方向の検索を終了する。そして、比率情報生成部１５２は、辺ＡＤから右方向、辺ＢＣから左方向、辺ＣＤから上方向に同様の検索を行い、所定値以上となった４辺で囲まれた仮投写領域２３０を抽出する。
【００７３】
また、比率情報生成部１５２は、仮投写領域２３０を抽出する前に、前処理として、画素ごとの輝度値の比が所定値（例えば、２．０等）未満の輝度値を０に変更して撮像情報記憶部１８４に記憶しておいてもよい。
【００７４】
そして、端点検出部１５４は、矩形状の仮投写領域２３０に基づいて投写領域２２０の端点を検出する（ステップＳ６）。ここで、端点の抽出手法についてより具体的に説明する。
【００７５】
基本的には、端点検出部１５４は、仮投写領域２３０の４つの頂点ＥＦＧＨのそれぞれから仮投写領域２３０の各辺上を画素ごとに検索して輝度値が所定値（例えば、２．０等）以上となる画素を投写領域２２０の端点として検出する。
【００７６】
なお、端点検出部１５４は、同一検索方向において、比率が２．０以上の画素を２画素以上連続して検出した場合、比率が２．０以上の画素群のうち最も比率が高い画素を端点として検出してもよいし、最初に比率が２．０以上となった画素を端点として検出してもよい。
【００７７】
さらに、端点検出部１５４は、仮投写領域２３０の各頂点から異なる２辺上を検索する場合、以下の検索手法を採用してもよい。例えば、仮投写領域２３０の左上の頂点（例えば、図２のＥ点）から横方向の辺（例えば、図２の辺ＥＦ）上の画素と、下方向の辺（例えば、図２の辺ＥＨ）上の画素を検索する場合、仮投写領域２３０の左上の頂点から右方向の検索において所定画素以内に比率が２．０以上となる点を検出した場合、上記頂点から下方向の検索においては、比率が２．０以上となる点を検出した場合であっても、その後、比率が２．０未満となる画素を検出するまで検索を続行し、２．０未満となった画素の直前の画素を下方向の辺の端点として検出してもよい。
【００７８】
このように、いずれかの辺上の検索で頂点からすぐに閾値以上の比を持つ画素が見つかった場合、投写領域２２０の一頂点が仮投写領域２３０の一頂点に大変近いため、例えば、量子化誤差の影響によって仮投写領域２３０の他方の辺上に投写領域２２０の辺が重なってしまっている恐れがある。
【００７９】
このような場合であっても、プロジェクタ２０は、第２の検索手法を採用することにより、辺の重複を防止し、適切に投写領域２２０を検出することができる。
【００８０】
しかし、以上のように仮投写領域２３０の辺上だけを検索する手法の場合、端点検出部１５４が端点の検索を完了した状態で、端点の数が３つ以下となる場合がある。このような場合、端点検出部１５４は、仮投写領域２３０の内側の検索も行う。
【００８１】
図６（Ａ）は、検出した端点が３つとなる場合の仮投写領域２３１の模式図であり、図６（Ｂ）は、検出した端点が２つとなる場合の仮投写領域２３２の模式図である。
【００８２】
図６（Ａ）および図６（Ｂ）に示すように、端点検出部１５４が端点の検索を完了した状態で、端点の数が３つ以下の場合、端点検出部１５４は、比率が２．０未満の非投写領域（投写領域２２０以外の撮影画像領域２１０）の４隅から上下左右方向に仮投写領域２３０の内側に向け比率が２．０未満の画素数を画素ラインごとにカウントし、所定画素ラインと当該画素ラインの隣接画素ラインの組ごとにこのカウント数の比を求める。そして、端点検出部１５４は、この比の値と、当該画素ラインより前の２画素ラインのカウント数の比の値の変化率が所定値を超えている場合を基準として端点を検出する。
【００８３】
なお、ここで、所定値としては、例えば、同一検索方向におけるカウント数の比の平均値＊１．２等を採用してもよい。すなわち、端点検出部１５４は、カウント数の比が平均値から乖離した画素ラインを基準として端点を検出してもよい。
【００８４】
例えば、図６（Ａ）および図６（Ｂ）に示す例では、矢印で示す端点が存在する画素ラインに隣接する画素ラインでは画素ごとの輝度値の比率が２．０未満の画素数が大きく異なるため、上記カウント数の比の値の変化率も大きく異なる。
したがって、端点検出部１５４は、点Ｐ１、Ｐ２、Ｐ３をそれぞれ端点として検出することができる。
【００８５】
このようにして端点検出部１５４は投写領域２２０の４つの端点を検出する。
【００８６】
そして、画素ブロック画像情報生成部１５６は、白、赤、緑、青等の所定の撮影画像の撮像情報を、端点検出部１５４からの端点の情報に基づき、画素ブロック画像情報に変換する（ステップＳ７）。
【００８７】
ここで、画素ブロック画像情報について説明する。
【００８８】
画素ブロック画像情報は、端点検出部１５４によって検出された端点で囲まれた投写領域２２０内の比率情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す情報に変換した情報である。また、この画素ブロック数は、例えば、色むら補正部１３０等の補正手段の処理に応じた数でもよい。
【００８９】
例えば、説明をわかりやすくするための極端な例ではあるが、空間光変調器１９２が縦３画素、横４画素である場合、図２に示す投写領域２２０の撮影画像を画素ブロック画像に変換すると図７に示すようになる。
【００９０】
図７は、本実施形態の一例に係る画素ブロック画像の模式図である。
【００９１】
図７に示すように、画素ブロック数は１２個であり、縦３、横４の画素ブロックとなるように投写領域２２０における画素が区分される。
【００９２】
このように、画素ブロック画像情報生成部１５６は、補正手段の処理に応じた画素ブロック群を設定し、撮像情報記憶部１８４に記憶された各キャリブレーション画像の撮像情報に基づき、各画素ブロックを構成する画素群の画像信号値または輝度値の平均値を演算し、画素ブロックごとの輝度値等の平均値を示す画素ブロック画像情報を生成し、当該画素ブロック画像情報をキャリブレーション画像ごとに撮像情報記憶部１８４に記憶する。
【００９３】
画像歪み補正量演算部１６２は、撮像情報記憶部１８４に記憶された白のキャリブレーション画像の画素ブロック画像情報に基づいて輝度値の変化を把握する。そして、画像歪み補正量演算部１６２は、画素ブロックの輝度値の変化に基づいて投写領域１２の歪みを把握し、画像歪み補正量を演算する。
【００９４】
例えば、画像歪み補正量演算部１６２は、投写領域１２の左側の輝度値が高い場合、投写光軸が投写領域１２の中心から左にずれていることを把握でき、投写領域１２が左の辺が短く右の辺が長い台形状に歪んでいることを把握できる。
【００９５】
そして、画像歪み補正部１１２は、画像の歪みを補正するために、画像歪み補正量演算部１６２からの画像歪み補正量に基づき、デジタルＲＧＢ信号を補正してデジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）を生成する（ステップＳ８）。
【００９６】
これにより、プロジェクタ２０は、画像の歪みを補正できる。
【００９７】
また、色むら補正量演算部１６４は、画素ブロック画像情報に基づき、画素ブロックごとに入出力特性データの補正量を演算する。より具体的には、色むら補正量演算部１６４は、例えば、補正後の入出力特性を示す直線の傾きが１になるように補正量を演算する。
【００９８】
なお、ここで、入出力特性データとは、入出力特性を示すデータであって、入力信号の明るさ指標値（例えば、階調値等）と、出力信号の明るさ指標値（例えば、輝度、照度、色情報値等）との関係を示すデータのことである。また、明るさ指標値とは、明るさの指標となる値のことであり、具体的には、例えば、輝度、照度、色情報値（Ｒ信号のデジタル信号値等）、階調値およびこれらの値を正規化等によって変形した値等が該当する。
【００９９】
そして、色むら補正部１３０は、画像の色むらを補正するため、色むら補正量演算部１６４からの色むら補正量に基づき、入出力特性データを補正し、当該入出力特性データに基づき、ＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）をＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）に補正する（ステップＳ９）。
【０１００】
そして、画像投写部１９０は、以上の手順により、画像の歪みと色むらが補正された画像を投写する（ステップＳ１０）。
【０１０１】
以上のように、本実施形態によれば、プロジェクタ２０は、投写領域２２０の４隅を正確に検出することができるため、撮影画像における投写領域２２０の座標と、空間光変調器１９２の表示素子の座標とを正確かつ効率的に対応づけることができる。
【０１０２】
また、本実施形態によれば、プロジェクタ２０は、撮影画像における投写領域２２０の内部を、色むら補正部１３０等の補正手段の処理に応じた画素ブロックに分割して補正を行うことにより、適切に補正を行い、空間光変調器１９２の表示素子の座標とを正確かつ効率的に対応づけることができる。
【０１０３】
また、画素ブロック数は、元の撮影画像の画素数未満のため、プロジェクタ２０は、画像処理をより効率的に行うことができる。
【０１０４】
また、本実施形態によれば、プロジェクタ２０は、撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算した比率情報を用いることにより、一般的なフィルタリングによって端点を検出する手法と比べ、投写領域の端点を正確かつ効率的に検出することができる。
【０１０５】
また、本実施形態によれば、プロジェクタ２０は、差分値ではなく、比率を用いることにより、投写領域２２０の端点の判断基準値を適用環境に応じて変更する必要がないため、より効率的に画像処理を行うことができる。
【０１０６】
さらに、本実施形態によれば、プロジェクタ２０は、投写領域の４隅の端点を検出する場合に、３つ以下の端点しか検出できなかった場合であっても、異なる検索方法を用いて端点を検出することができる。これにより、プロジェクタ２０は、画像が種々の形状に歪んでいる場合であっても、正確かつ効率的に投写領域２２０の４隅の端点を検出することができ、撮影画像における投写領域２２０の座標と、空間光変調器１９２の表示素子の座標とを正確に対応づけることができる。
【０１０７】
また、本実施形態によれば、プロジェクタ２０は、撮影画像における投写領域２２０を正確に検出できるため、当該投写領域２２０を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確に画像の歪みや色むら等を補正することができるため、正確な画像を表示することが可能となる。
【０１０８】
また、本実施形態によれば、プロジェクタ２０は、画素ブロックを用いて画素ブロックごとの色の違いを把握できるため、経時劣化や環境影響（環境光８０がある場合やスクリーン１０が着色されておりむらがある場合等）等による色むらを適切に補正することができる。
【０１０９】
（変形例）
以上、本発明を適用した好適な実施の形態について説明してきたが、本発明の適用は上述した実施例に限定されない。
【０１１０】
例えば、上述した実施例では、プロジェクタ２０は、画像の歪みと色むらの補正を行ったが、これら以外の補正処理に対しても本発明は有効である。
【０１１１】
また、上述した実施例では、プロジェクタ２０は、白のキャリブレーション画像と黒のキャリブレーション画像の撮像情報を用いて比率情報を生成したが、例えば、上記キャリブレーション画像に加え、緑の単色のキャリブレーション画像を投写して撮像し、白と黒、緑と黒のそれぞれの撮像情報に基づいて２種類の比率情報を生成し、当該２種類の比率情報の積集合（ＡＮＤ）を演算して真となる領域を仮投写領域２３０の抽出対象領域として設定してもよい。
【０１１２】
これによれば、撮像時のノイズの影響を低減し、プロジェクタ２０は、より正確に仮投写領域２３０や投写領域２２０を抽出することができる。なお、上述した実施例では、プロジェクタ２０は、仮投写領域２３０を設定してから投写領域２２０を抽出したが、撮像情報から直接投写領域２２０を抽出してもよい。
【０１１３】
また、上述した実施例では、プロジェクタ２０は、所定画素領域として画素ラインを適用して仮投写領域２３０を抽出したが、例えば、１画素、複数画素、複数画素で構成される矩形領域等を画素領域として仮投写領域２３０を抽出してもよい。
【０１１４】
また、上述した実施例では、プロジェクタ２０は、仮投写領域２３０の外側から内側に向かって検索を行ったが、仮投写領域２３０の内側から外側に向かって検索を行ってもよく、検索方法は任意である。
【０１１５】
また、例えば、上述した実施例では、画像処理システムをプロジェクタ２０に実装した例について説明したが、プロジェクタ２０以外にもＣＲＴ（Cathode Ray Tube）等のプロジェクタ２０以外の画像表示装置に実装してもよい。また、プロジェクタ２０としては、液晶プロジェクタ以外にも、例えば、ＤＭＤ（Digital Micromirror Device）を用いたプロジェクタ等を用いてもよい。なお、ＤＭＤは米国テキサスインスツルメンツ社の商標である。
【０１１６】
また、上述したプロジェクタ２０の機能は、例えば、プロジェクタ単体で実現してもよいし、複数の処理装置で分散して（例えば、プロジェクタとＰＣとで分散処理）実現してもよい。
【０１１７】
さらに、上述した実施例では、センサー６０とプロジェクタ２０とを別の装置として構成したが、プロジェクタ２０にセンサー６０の機能を内蔵してもよい。
【図面の簡単な説明】
【図１】 本実施形態の一例に係る画像投写状況を示す概略図である。
【図２】 本実施形態の一例に係る撮影画像領域の模式図である。
【図３】 本実施形態の一例に係るプロジェクタの機能ブロック図である。
【図４】 本実施形態の一例に係るプロジェクタのハードウェアブロック図である。
【図５】 本実施形態の一例に係る画像処理の流れを示すフローチャートである。
【図６】 図６（Ａ）は、検出した端点が３つとなる場合の仮投写領域の模式図であり、図６（Ｂ）は、検出した端点が２つとなる場合の仮投写領域の模式図である。
【図７】 本実施形態の一例に係る画素ブロック画像の模式図である。
【符号の説明】
２０ プロジェクタ、６０ センサー（撮像手段）、１２０ 色変換部、１３０ 色むら補正部、１５２ 比率情報生成部、１５４ 端点検出部、１５６ 画素ブロック画像情報生成部、１８４ 撮像情報記憶部、１８６ 撮像画素設定部、１９０ 画像投写部、９００ 情報記憶媒体
【発明の属する技術分野】
本発明は、撮像情報に基づいて投写領域を抽出する画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法に関する。
【０００２】
【背景技術】
長期間、プロジェクタ等の画像表示装置で画像を表示していると画像に色むら（輝度むらによる色むらも含む。）が発生し、画像が徐々に劣化していく。
【０００３】
例えば、店舗や展示場等においては、長期間にわたってプロジェクタを用いてスクリーンに画像を連続的に表示する場合がある。このような場合、長期にわたる投影により早期に液晶パネルや偏光板等が劣化して画像の色むら等が発生することにより、本来の表示効果が損なわれてしまう。
【０００４】
このような問題点に鑑み、例えば、特許文献１では、撮像情報に基づいて投写領域を抽出し、当該撮像情報における投写領域内の輝度値に基づいて経時劣化による色むらをより適切に補正する画像処理システムが提案されている。
【０００５】
【特許文献１】
特開２００２−１４００６０号公報
【０００６】
【発明が解決しようとする課題】
しかし、特許文献１では、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけるための手法が詳述されていない。
【０００７】
特に、画像に歪みが発生している場合、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることが重要となる。
【０００８】
本発明は、上記の課題に鑑みなされたものであり、その目的は、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることが可能な画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法を提供することにある。
【０００９】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る画像処理システムは、少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１０】
また、本発明に係るプロジェクタは、少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１１】
また、本発明に係るプログラムは、コンピュータにより読み取り可能なプログラムであって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させ、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１２】
また、本発明に係る情報記憶媒体は、コンピュータにより読み取り可能なプログラムを記憶した情報記憶媒体であって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させるためのプログラムを記憶し、
前記画像投写手段は、前記補正手段によって補正された画像信号に基づき、画像を投写することを特徴とする。
【００１３】
また、本発明に係る画像処理方法は、単色のキャリブレーション画像を、投写する度に色を変えながら複数回投写し、
投写する度に各キャリブレーション画像を撮像して撮像情報を出力し、
当該撮像情報に基づき、複数のキャリブレーション画像の撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算し、
撮影画像領域分の比率情報を生成し、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出し、
前記撮像情報と、検出した端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換し、
当該画素ブロック画像情報に基づき、画像の歪み、画像の色、画像の明るさのうちの少なくとも１つを補正するために、画像信号を補正し、
補正した画像信号に基づき、画像を投写することを特徴とする。
【００１４】
本発明によれば、画像処理システム等は、撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算した比率情報を用いることにより、一般的なフィルタリングによって端点を検出する手法と比べ、投写領域の端点を正確かつ効率的に検出することができる。これにより、画像処理システム等は、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることができる。
【００１５】
また、本発明によれば、画像処理システム等は、差分値ではなく、比率を用いることにより、投写領域の端点の判断基準となる上記第１の所定値を適用環境に応じて変更する必要がないため、より効率的に画像処理を行うことができる。
【００１６】
また、本発明によれば、撮影画像における投写領域を正確に検出できるため、当該投写領域を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確な補正を行うことができるため、正確な画像を表示することが可能となる。
【００１７】
なお、ここで、前記画素ブロック画像情報の画素ブロック数は前記補正手段の処理に応じた画素ブロック数であってもよい。また、ここで、画素領域および画素ブロックとしては、例えば、１画素、複数画素、１画素ライン、複数画素ライン、複数画素で構成される矩形領域等が該当し、画素領域と画素ブロックは同じ単位でなくてもよく、例えば、画素領域が１画素で、画素ブロックが複数画素で構成される矩形領域であってもよい。
【００１８】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記比率情報生成手段は、前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出する手段を含み、
前記画像投写手段によって投写される画像は四角形の画像であって、
前記端点検出手段は、前記仮投写領域に基づき、投写領域の４隅の端点を検出してもよい。
【００１９】
また、前記画像処理方法は、前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出し、
当該仮投写領域に基づき、投写領域の４隅の端点を検出してもよい。
【００２０】
これによれば、画像処理システム等は、一般的に用いられる矩形の画像を投写する場合に、簡易的に仮投写領域を抽出し、当該仮投写領域を基準として実際の投写領域を抽出することにより、投写領域の４隅の端点を正確かつ効率的に検出することができる。
【００２１】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記端点検出手段は、検索によって検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出してもよい。
【００２２】
また、前記画像処理方法は、検索によって検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出してもよい。
【００２３】
これによれば、画像処理システム等は、投写領域の４隅の端点を検出する場合に、３つ以下の端点しか検出できなかった場合であっても、異なる検索方法を用いて端点を検出することができる。これにより、画像処理システム等は、画像が種々の形状に歪んでいる場合であっても、正確かつ効率的に投写領域の４隅の端点を検出することができ、撮影画像における投写領域の座標と、表示素子の座標とを正確に対応づけることができる。
【００２４】
なお、前記第１の所定値および前記第２の所定値は同じ値であってもよいし、異なる値であってもよい。
【００２５】
また、前記画像処理システム、前記プロジェクタ、前記プログラムおよび前記情報記憶媒体において、前記補正手段は、
所定のキャリブレーション画像の画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
所定のキャリブレーション画像の画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、画像の歪みと色むらが補正された画像信号に基づき、画像を投写してもよい。
【００２６】
これによれば、画像処理システム等は、撮影画像における投写領域を正確に検出できるため、当該投写領域を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確に画像の歪みと色むらを補正することができるため、正確な画像を表示することが可能となる。
【００２７】
【発明の実施の形態】
以下、本発明を、画像処理システムを有するプロジェクタに適用した場合を例に採り、図面を参照しつつ説明する。なお、以下に示す実施形態は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施形態に示す構成の全てが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。
【００２８】
（システム全体の説明）
図１は、本実施形態の一例に係る画像投写状況を示す概略図である。
【００２９】
プロジェクタ２０は、スクリーン１０へ向け画像を投写する。これにより、スクリーン１０には、投写領域１２が形成される。
【００３０】
このように、プロジェクタ２０等の投写型画像表示装置を用いて長期間画像を表示していると、光学系等の経時劣化により次第に画像に色むら（輝度むらによる色むらも含む。）が発生する。
【００３１】
その上、日光や照明光等の環境光８０によっても投写領域１２における画像の見えは変化する。
【００３２】
さらに、スクリーン１０とプロジェクタ２０の投写光の光軸とのなす角度によって投写領域１２は、歪んでしまう。
【００３３】
このような画像の色むらや歪み等を補正するため、本実施形態のプロジェクタ２０は、撮像手段であるセンサー６０を有する。センサー６０は、投写領域１２を含む領域を撮像する。
【００３４】
なお、本実施例では、センサー６０は、いわゆるリモコンに内蔵され、プロジェクタ２０とは別の装置として構成されているものと仮定する。ユーザーは、リモコンの撮像ボタンを押すことにより、センサー６０を介してスクリーン１０上の投写領域１２の撮像を行う。プロジェクタ２０は、撮影画像領域における画素ごとの画像信号値または当該画像信号値を変換した輝度値を示す撮像情報をセンサー６０から受信する。
【００３５】
図２は、本実施形態の一例に係る撮影画像領域２１０の模式図である。
【００３６】
図２において、撮影画像領域２１０は、所定画素数の矩形状の領域ＡＢＣＤであり、実際に投写された画像の形状を示す投写領域２２０は、ＩＪＫＬの４点で囲まれた領域であり、領域ＩＪＫＬと接する矩形状の領域ＥＦＧＨが仮投写領域２３０である。
【００３７】
本実施形態では、プロジェクタ２０は、白の単色画像投写時の撮影画像領域２１０の画像信号値または輝度値と、黒の単色画像投写時または非投写時の撮影画像領域２１０の画像信号値または輝度値との比率を１画素ごとに演算してメモリに記憶しておく。
【００３８】
そして、プロジェクタ２０は、撮影画像領域２１０の各頂点から撮影画像領域２１０の内側に向かって、所定画素領域（１画素、１ライン、複数画素で構成される矩形領域等）ごとの当該比率の合計値を第１の所定値と比較する。
【００３９】
そして、プロジェクタ２０は、上下左右の４方向の検索によって当該合計値が第１の所定値以上となった画素領域で囲まれた矩形領域を仮投写領域２３０として検出する。
【００４０】
さらに、プロジェクタ２０は、仮投写領域２３０の４隅から仮投写領域２３０の辺上（場合によっては仮投写領域２３０内部）の１画素ごとの上記比率を第２の所定値と比較し、当該比率が第２の所定値以上となった画素を端点とする投写領域２２０を抽出する。
【００４１】
このように、本実施形態によれば、プロジェクタ２０は、簡易的に仮投写領域２３０を検出してから投写領域２２０を検出することにより、従来のようにフィルタリング処理によって投写領域２２０を抽出する必要がないため、より効率的に投写領域２２０を抽出することができる。
【００４２】
さらに、本実施形態では、プロジェクタ２０は、このようにして抽出した投写領域２２０に基づいて所定の画素ブロック画像を生成することにより、投写領域１２と、プロジェクタ２０の表示素子とを対応づける。
【００４３】
これにより、プロジェクタ２０は、より正確に画像の歪みや画像の色等を補正することが可能となる。
【００４４】
次に、このような機能を実現するためのプロジェクタ２０の機能ブロックについて説明する。
【００４５】
図３は、本実施形態の一例に係るプロジェクタ２０の機能ブロック図である。
【００４６】
プロジェクタ２０は、ＰＣ（Personal Computer）等からのアナログＲＧＢ信号（Ｒ１、Ｇ１、Ｂ１）をデジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）に変換する入力信号処理部１１０と、画像の色と明るさを補正するため、当該デジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）をデジタルＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）に変換する色変換部１２０と、色むらを補正するため、当該デジタルＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）をデジタルＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）に変換する色むら補正部１３０と、当該デジタルＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）をアナログＲＧＢ信号（Ｒ５、Ｇ５、Ｂ５）に変換する出力信号処理部１４０と、当該アナログＲＧＢ信号に基づき、画像を投写する画像投写部１９０とを含んで構成されている。
【００４７】
また、ここで、入力信号処理部１１０は、デジタル変換したＲＧＢ信号に対して画像の歪み（台形歪み、キーストン歪み等）を補正する画像歪み補正部１１２を含んで構成されている。
【００４８】
また、色変換部１２０は、画像の色補正用の３Ｄ−ＬＵＴ（３次元ルックアップテーブル）を記憶する３Ｄ−ＬＵＴ記憶部１２２と、画像の明るさ補正用の１Ｄ−ＬＵＴ（１次元ルックアップテーブル）を記憶する１Ｄ−ＬＵＴ記憶部１２４とを含んで構成されている。
【００４９】
また、画像投写部１９０は、空間光変調器１９２と、空間光変調器１９２を駆動する駆動部１９４と、光源１９６と、レンズ１９８とを含んで構成されている。
【００５０】
駆動部１９４は、出力信号処理部１４０からの画像信号に基づき、空間光変調器１９２を駆動する。そして、画像投写部１９０は、光源１９６からの光を、空間光変調器１９２およびレンズ１９８を介して投写する。
【００５１】
また、プロジェクタ２０は、キャリブレーション画像を表示するための画像信号を生成するキャリブレーション信号発生部１７２と、センサー６０からの撮像情報等を一時的に記憶する撮像情報記憶部１８４と、撮像情報に基づいて比率情報を生成するとともに、仮投写領域２３０を抽出する比率情報生成部１５２と、仮投写領域２３０に基づいて投写領域２２０の端点を検出する端点検出部１５４と、当該端点に基づいて画素ブロック画像を生成する画素ブロック画像情報生成部１５６とを含んで構成されている。
【００５２】
さらに、プロジェクタ２０は、画素ブロック画像に基づいて画像歪み補正部１１２のために画像歪み補正量を演算する画像歪み補正量演算部１６２と、画素ブロック画像に基づいて色むら補正部１３０のために色むら補正量を演算する色むら補正量演算部１６４と、画像歪み補正量演算部１６２および色むら補正量演算部１６４からの要求に応じた画素数で撮像するようにセンサー６０を制御する制御信号を生成する撮像画素設定部１８６とを含んで構成されている。
【００５３】
なお、センサー６０と撮像情報記憶部１８４および撮像画素設定部１８６との情報の送受信は、例えば、ブルートゥースや赤外線等の無線通信で行ってもよいし、ＴＣＰ／ＩＰ等のプロトコルに準拠した通信手順によってＬＡＮケーブル等を用いた有線通信で行ってもよい。
【００５４】
また、上述したプロジェクタ２０の各部を実現するためのハードウェアとしては、例えば、以下のものを適用できる。
【００５５】
図４は、本実施形態の一例に係るプロジェクタ２０のハードウェアブロック図である。
【００５６】
例えば、入力信号処理部１１０としては、例えばＡ／Ｄコンバーター９３０等、撮像情報記憶部１８４としては、例えばＲＡＭ９５０等、色むら補正部１３０、比率情報生成部１５２、端点検出部１５４、画素ブロック画像情報生成部１５６およびキャリブレーション信号発生部１７２としては、例えば画像処理回路９７０等、画像歪み補正量演算部１６２、色むら補正量演算部１６４としては、例えばＣＰＵ９１０等、色変換部１２０としては、例えば画像処理回路９７０、ＲＡＭ９５０、ＣＰＵ９１０等、出力信号処理部１４０としては、例えばＤ／Ａコンバーター９４０等、空間光変調器１９２としては、例えば液晶パネル９２０等、駆動部１９４としては、例えば液晶パネル９２０を駆動する液晶ライトバルブ駆動ドライバを記憶するＲＯＭ９６０等を用いて実現できる。
【００５７】
なお、これらの各部はシステムバス９８０を介して相互に情報をやりとりすることが可能である。
【００５８】
また、これらの各部は回路のようにハードウェア的に実現してもよいし、ドライバのようにソフトウェア的に実現してもよい。
【００５９】
さらに、比率情報生成部１５２等としてコンピュータを機能させるためのプログラムを記憶した情報記憶媒体９００からプログラムを読み取って比率情報生成部１５２等の機能をコンピュータに実現させてもよい。
【００６０】
このような情報記憶媒体９００としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＲＯＭ、ＲＡＭ、ＨＤＤ等を適用でき、そのプログラムの読み取り方式は接触方式であっても、非接触方式であってもよい。
【００６１】
また、情報記憶媒体９００に代えて、上述した各機能を実現するためのプログラム等を、伝送路を介してホスト装置等からダウンロードすることによって上述した各機能を実現することも可能である。
【００６２】
（画像処理の流れの説明）
次に、これらの各部を用いた画像処理の流れについて説明する。
【００６３】
図５は、本実施形態の一例に係る画像処理の流れを示すフローチャートである。
【００６４】
まず、プロジェクタ２０は、複数種の単色のキャリブレーション画像を投写する（ステップＳ１）。より具体的には、画像の歪みを補正する場合、プロジェクタ２０は、Ｗ（白）、Ｋ（黒）のキャリブレーション画像を投写する。なお、画像の色と明るさを補正する場合、上記キャリブレーション画像に加え、所定の階調単位で階調を変化させたＲ、Ｇ、Ｂのキャリブレーション画像を投写すればよい。
【００６５】
まず、画像投写部１９０は、第１のキャリブレーション画像をスクリーン１０に投写する（ステップＳ１）。
【００６６】
センサー６０は、プロジェクタ２０の撮像画素設定部１８６から送信された制御情報に基づき所定の画素数で撮像するように設定を変更し、ユーザーのボタン操作に応じて画像投写部１９０によってスクリーン１０に投写された第１のキャリブレーション画像を撮像する（ステップＳ２）。
【００６７】
なお、このように、撮像画素数を調整することにより、情報量の増加を抑制することができるため、撮像情報を目的に応じてより効率的に処理することができる。
【００６８】
そして、センサー６０は、プロジェクタ２０へ向け撮像情報を送信し、撮像情報記憶部１８４は、当該撮像情報を記憶する（ステップＳ３）。
【００６９】
キャリブレーション信号発生部１７２は、すべてのキャリブレーション画像の投写が終了したかどうかを判定し（ステップＳ４）、終了していない場合は、プロジェクタ２０は、ステップＳ１〜Ｓ３の処理を繰り返し実行する。
【００７０】
このようにして、撮像情報記憶部１８４は、すべてのキャリブレーション画像の撮像情報を記憶する。そして、比率情報生成部１５２は、撮像情報記憶部１８４に記憶された白のキャリブレーション画像の撮像情報と、黒のキャリブレーション画像の撮像情報に基づいて撮像情報における画素ごとの比率（Ｒ信号値等の比率）を演算し、当該比率に基づいて矩形状の仮投写領域２３０を抽出する（ステップＳ５）。なお、比率情報生成部１５２は、当該撮像情報の画素ごとの比率を示す比率情報を撮像情報記憶部１８４に記憶する。
【００７１】
ここで、比率としては、例えば、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値−１や、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値等の値を採用してもよい。本実施例では、白のキャリブレーション画像の輝度値／黒のキャリブレーション画像の輝度値を比率として採用したものと仮定する。
【００７２】
比率情報生成部１５２は、撮影画像領域２１０の各辺から内側に向かって画素ラインごとに比率の合計値が所定値（例えば、２．０＊当該画素ラインを構成する画素数等）以上となるかどうかを検出する。比率情報生成部１５２は、例えば、図２において、辺ＡＢから下方向に画素ラインごとに検索を行い、辺ＥＦの画素ラインにおいて上記合計値が所定値以上となった時点で下方向の検索を終了する。そして、比率情報生成部１５２は、辺ＡＤから右方向、辺ＢＣから左方向、辺ＣＤから上方向に同様の検索を行い、所定値以上となった４辺で囲まれた仮投写領域２３０を抽出する。
【００７３】
また、比率情報生成部１５２は、仮投写領域２３０を抽出する前に、前処理として、画素ごとの輝度値の比が所定値（例えば、２．０等）未満の輝度値を０に変更して撮像情報記憶部１８４に記憶しておいてもよい。
【００７４】
そして、端点検出部１５４は、矩形状の仮投写領域２３０に基づいて投写領域２２０の端点を検出する（ステップＳ６）。ここで、端点の抽出手法についてより具体的に説明する。
【００７５】
基本的には、端点検出部１５４は、仮投写領域２３０の４つの頂点ＥＦＧＨのそれぞれから仮投写領域２３０の各辺上を画素ごとに検索して輝度値が所定値（例えば、２．０等）以上となる画素を投写領域２２０の端点として検出する。
【００７６】
なお、端点検出部１５４は、同一検索方向において、比率が２．０以上の画素を２画素以上連続して検出した場合、比率が２．０以上の画素群のうち最も比率が高い画素を端点として検出してもよいし、最初に比率が２．０以上となった画素を端点として検出してもよい。
【００７７】
さらに、端点検出部１５４は、仮投写領域２３０の各頂点から異なる２辺上を検索する場合、以下の検索手法を採用してもよい。例えば、仮投写領域２３０の左上の頂点（例えば、図２のＥ点）から横方向の辺（例えば、図２の辺ＥＦ）上の画素と、下方向の辺（例えば、図２の辺ＥＨ）上の画素を検索する場合、仮投写領域２３０の左上の頂点から右方向の検索において所定画素以内に比率が２．０以上となる点を検出した場合、上記頂点から下方向の検索においては、比率が２．０以上となる点を検出した場合であっても、その後、比率が２．０未満となる画素を検出するまで検索を続行し、２．０未満となった画素の直前の画素を下方向の辺の端点として検出してもよい。
【００７８】
このように、いずれかの辺上の検索で頂点からすぐに閾値以上の比を持つ画素が見つかった場合、投写領域２２０の一頂点が仮投写領域２３０の一頂点に大変近いため、例えば、量子化誤差の影響によって仮投写領域２３０の他方の辺上に投写領域２２０の辺が重なってしまっている恐れがある。
【００７９】
このような場合であっても、プロジェクタ２０は、第２の検索手法を採用することにより、辺の重複を防止し、適切に投写領域２２０を検出することができる。
【００８０】
しかし、以上のように仮投写領域２３０の辺上だけを検索する手法の場合、端点検出部１５４が端点の検索を完了した状態で、端点の数が３つ以下となる場合がある。このような場合、端点検出部１５４は、仮投写領域２３０の内側の検索も行う。
【００８１】
図６（Ａ）は、検出した端点が３つとなる場合の仮投写領域２３１の模式図であり、図６（Ｂ）は、検出した端点が２つとなる場合の仮投写領域２３２の模式図である。
【００８２】
図６（Ａ）および図６（Ｂ）に示すように、端点検出部１５４が端点の検索を完了した状態で、端点の数が３つ以下の場合、端点検出部１５４は、比率が２．０未満の非投写領域（投写領域２２０以外の撮影画像領域２１０）の４隅から上下左右方向に仮投写領域２３０の内側に向け比率が２．０未満の画素数を画素ラインごとにカウントし、所定画素ラインと当該画素ラインの隣接画素ラインの組ごとにこのカウント数の比を求める。そして、端点検出部１５４は、この比の値と、当該画素ラインより前の２画素ラインのカウント数の比の値の変化率が所定値を超えている場合を基準として端点を検出する。
【００８３】
なお、ここで、所定値としては、例えば、同一検索方向におけるカウント数の比の平均値＊１．２等を採用してもよい。すなわち、端点検出部１５４は、カウント数の比が平均値から乖離した画素ラインを基準として端点を検出してもよい。
【００８４】
例えば、図６（Ａ）および図６（Ｂ）に示す例では、矢印で示す端点が存在する画素ラインに隣接する画素ラインでは画素ごとの輝度値の比率が２．０未満の画素数が大きく異なるため、上記カウント数の比の値の変化率も大きく異なる。
したがって、端点検出部１５４は、点Ｐ１、Ｐ２、Ｐ３をそれぞれ端点として検出することができる。
【００８５】
このようにして端点検出部１５４は投写領域２２０の４つの端点を検出する。
【００８６】
そして、画素ブロック画像情報生成部１５６は、白、赤、緑、青等の所定の撮影画像の撮像情報を、端点検出部１５４からの端点の情報に基づき、画素ブロック画像情報に変換する（ステップＳ７）。
【００８７】
ここで、画素ブロック画像情報について説明する。
【００８８】
画素ブロック画像情報は、端点検出部１５４によって検出された端点で囲まれた投写領域２２０内の比率情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す情報に変換した情報である。また、この画素ブロック数は、例えば、色むら補正部１３０等の補正手段の処理に応じた数でもよい。
【００８９】
例えば、説明をわかりやすくするための極端な例ではあるが、空間光変調器１９２が縦３画素、横４画素である場合、図２に示す投写領域２２０の撮影画像を画素ブロック画像に変換すると図７に示すようになる。
【００９０】
図７は、本実施形態の一例に係る画素ブロック画像の模式図である。
【００９１】
図７に示すように、画素ブロック数は１２個であり、縦３、横４の画素ブロックとなるように投写領域２２０における画素が区分される。
【００９２】
このように、画素ブロック画像情報生成部１５６は、補正手段の処理に応じた画素ブロック群を設定し、撮像情報記憶部１８４に記憶された各キャリブレーション画像の撮像情報に基づき、各画素ブロックを構成する画素群の画像信号値または輝度値の平均値を演算し、画素ブロックごとの輝度値等の平均値を示す画素ブロック画像情報を生成し、当該画素ブロック画像情報をキャリブレーション画像ごとに撮像情報記憶部１８４に記憶する。
【００９３】
画像歪み補正量演算部１６２は、撮像情報記憶部１８４に記憶された白のキャリブレーション画像の画素ブロック画像情報に基づいて輝度値の変化を把握する。そして、画像歪み補正量演算部１６２は、画素ブロックの輝度値の変化に基づいて投写領域１２の歪みを把握し、画像歪み補正量を演算する。
【００９４】
例えば、画像歪み補正量演算部１６２は、投写領域１２の左側の輝度値が高い場合、投写光軸が投写領域１２の中心から左にずれていることを把握でき、投写領域１２が左の辺が短く右の辺が長い台形状に歪んでいることを把握できる。
【００９５】
そして、画像歪み補正部１１２は、画像の歪みを補正するために、画像歪み補正量演算部１６２からの画像歪み補正量に基づき、デジタルＲＧＢ信号を補正してデジタルＲＧＢ信号（Ｒ２、Ｇ２、Ｂ２）を生成する（ステップＳ８）。
【００９６】
これにより、プロジェクタ２０は、画像の歪みを補正できる。
【００９７】
また、色むら補正量演算部１６４は、画素ブロック画像情報に基づき、画素ブロックごとに入出力特性データの補正量を演算する。より具体的には、色むら補正量演算部１６４は、例えば、補正後の入出力特性を示す直線の傾きが１になるように補正量を演算する。
【００９８】
なお、ここで、入出力特性データとは、入出力特性を示すデータであって、入力信号の明るさ指標値（例えば、階調値等）と、出力信号の明るさ指標値（例えば、輝度、照度、色情報値等）との関係を示すデータのことである。また、明るさ指標値とは、明るさの指標となる値のことであり、具体的には、例えば、輝度、照度、色情報値（Ｒ信号のデジタル信号値等）、階調値およびこれらの値を正規化等によって変形した値等が該当する。
【００９９】
そして、色むら補正部１３０は、画像の色むらを補正するため、色むら補正量演算部１６４からの色むら補正量に基づき、入出力特性データを補正し、当該入出力特性データに基づき、ＲＧＢ信号（Ｒ３、Ｇ３、Ｂ３）をＲＧＢ信号（Ｒ４、Ｇ４、Ｂ４）に補正する（ステップＳ９）。
【０１００】
そして、画像投写部１９０は、以上の手順により、画像の歪みと色むらが補正された画像を投写する（ステップＳ１０）。
【０１０１】
以上のように、本実施形態によれば、プロジェクタ２０は、投写領域２２０の４隅を正確に検出することができるため、撮影画像における投写領域２２０の座標と、空間光変調器１９２の表示素子の座標とを正確かつ効率的に対応づけることができる。
【０１０２】
また、本実施形態によれば、プロジェクタ２０は、撮影画像における投写領域２２０の内部を、色むら補正部１３０等の補正手段の処理に応じた画素ブロックに分割して補正を行うことにより、適切に補正を行い、空間光変調器１９２の表示素子の座標とを正確かつ効率的に対応づけることができる。
【０１０３】
また、画素ブロック数は、元の撮影画像の画素数未満のため、プロジェクタ２０は、画像処理をより効率的に行うことができる。
【０１０４】
また、本実施形態によれば、プロジェクタ２０は、撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算した比率情報を用いることにより、一般的なフィルタリングによって端点を検出する手法と比べ、投写領域の端点を正確かつ効率的に検出することができる。
【０１０５】
また、本実施形態によれば、プロジェクタ２０は、差分値ではなく、比率を用いることにより、投写領域２２０の端点の判断基準値を適用環境に応じて変更する必要がないため、より効率的に画像処理を行うことができる。
【０１０６】
さらに、本実施形態によれば、プロジェクタ２０は、投写領域の４隅の端点を検出する場合に、３つ以下の端点しか検出できなかった場合であっても、異なる検索方法を用いて端点を検出することができる。これにより、プロジェクタ２０は、画像が種々の形状に歪んでいる場合であっても、正確かつ効率的に投写領域２２０の４隅の端点を検出することができ、撮影画像における投写領域２２０の座標と、空間光変調器１９２の表示素子の座標とを正確に対応づけることができる。
【０１０７】
また、本実施形態によれば、プロジェクタ２０は、撮影画像における投写領域２２０を正確に検出できるため、当該投写領域２２０を画素ブロックに区分して画像信号の補正処理を行った場合であっても、画素ブロックごとに正確に画像の歪みや色むら等を補正することができるため、正確な画像を表示することが可能となる。
【０１０８】
また、本実施形態によれば、プロジェクタ２０は、画素ブロックを用いて画素ブロックごとの色の違いを把握できるため、経時劣化や環境影響（環境光８０がある場合やスクリーン１０が着色されておりむらがある場合等）等による色むらを適切に補正することができる。
【０１０９】
（変形例）
以上、本発明を適用した好適な実施の形態について説明してきたが、本発明の適用は上述した実施例に限定されない。
【０１１０】
例えば、上述した実施例では、プロジェクタ２０は、画像の歪みと色むらの補正を行ったが、これら以外の補正処理に対しても本発明は有効である。
【０１１１】
また、上述した実施例では、プロジェクタ２０は、白のキャリブレーション画像と黒のキャリブレーション画像の撮像情報を用いて比率情報を生成したが、例えば、上記キャリブレーション画像に加え、緑の単色のキャリブレーション画像を投写して撮像し、白と黒、緑と黒のそれぞれの撮像情報に基づいて２種類の比率情報を生成し、当該２種類の比率情報の積集合（ＡＮＤ）を演算して真となる領域を仮投写領域２３０の抽出対象領域として設定してもよい。
【０１１２】
これによれば、撮像時のノイズの影響を低減し、プロジェクタ２０は、より正確に仮投写領域２３０や投写領域２２０を抽出することができる。なお、上述した実施例では、プロジェクタ２０は、仮投写領域２３０を設定してから投写領域２２０を抽出したが、撮像情報から直接投写領域２２０を抽出してもよい。
【０１１３】
また、上述した実施例では、プロジェクタ２０は、所定画素領域として画素ラインを適用して仮投写領域２３０を抽出したが、例えば、１画素、複数画素、複数画素で構成される矩形領域等を画素領域として仮投写領域２３０を抽出してもよい。
【０１１４】
また、上述した実施例では、プロジェクタ２０は、仮投写領域２３０の外側から内側に向かって検索を行ったが、仮投写領域２３０の内側から外側に向かって検索を行ってもよく、検索方法は任意である。
【０１１５】
また、例えば、上述した実施例では、画像処理システムをプロジェクタ２０に実装した例について説明したが、プロジェクタ２０以外にもＣＲＴ（Cathode Ray Tube）等のプロジェクタ２０以外の画像表示装置に実装してもよい。また、プロジェクタ２０としては、液晶プロジェクタ以外にも、例えば、ＤＭＤ（Digital Micromirror Device）を用いたプロジェクタ等を用いてもよい。なお、ＤＭＤは米国テキサスインスツルメンツ社の商標である。
【０１１６】
また、上述したプロジェクタ２０の機能は、例えば、プロジェクタ単体で実現してもよいし、複数の処理装置で分散して（例えば、プロジェクタとＰＣとで分散処理）実現してもよい。
【０１１７】
さらに、上述した実施例では、センサー６０とプロジェクタ２０とを別の装置として構成したが、プロジェクタ２０にセンサー６０の機能を内蔵してもよい。
【図面の簡単な説明】
【図１】 本実施形態の一例に係る画像投写状況を示す概略図である。
【図２】 本実施形態の一例に係る撮影画像領域の模式図である。
【図３】 本実施形態の一例に係るプロジェクタの機能ブロック図である。
【図４】 本実施形態の一例に係るプロジェクタのハードウェアブロック図である。
【図５】 本実施形態の一例に係る画像処理の流れを示すフローチャートである。
【図６】 図６（Ａ）は、検出した端点が３つとなる場合の仮投写領域の模式図であり、図６（Ｂ）は、検出した端点が２つとなる場合の仮投写領域の模式図である。
【図７】 本実施形態の一例に係る画素ブロック画像の模式図である。
【符号の説明】
２０ プロジェクタ、６０ センサー（撮像手段）、１２０ 色変換部、１３０ 色むら補正部、１５２ 比率情報生成部、１５４ 端点検出部、１５６ 画素ブロック画像情報生成部、１８４ 撮像情報記憶部、１８６ 撮像画素設定部、１９０ 画像投写部、９００ 情報記憶媒体
Claims (9)
- 少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記補正手段は、
前記画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
前記画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって画像の歪みと色むらが補正された画像信号に基づき、画像を投写することを特徴とする画像処理システム。 - 請求項１において、
前記比率情報生成手段は、前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出する手段を含み、
前記画像投写手段によって投写される画像は四角形の画像であって、
前記端点検出手段は、前記仮投写領域に基づき、投写領域の４隅の端点を検出することを特徴とする画像処理システム。 - 請求項２において、
前記端点検出手段は、検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出することを特徴とする画像処理システム。 - 少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段と、
を含み、
前記補正手段は、
前記画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
前記画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって画像の歪みと色むらが補正された画像信号に基づき、画像を投写することを特徴とするプロジェクタ。 - コンピュータにより読み取り可能なプログラムであって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させ、
前記補正手段は、
前記画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
前記画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって画像の歪みと色むらが補正された画像信号に基づき、画像を投写することを特徴とするプログラム。 - コンピュータにより読み取り可能なプログラムを記憶した情報記憶媒体であって、
コンピュータを、
少なくとも異なる２色のキャリブレーション画像を、それぞれ異なる時点において投写する画像投写手段と、
投写された各キャリブレーション画像を撮像して撮像情報を出力する撮像手段と、
当該撮像情報に基づき、各キャリブレーション画像の前記撮像手段による撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算して撮影画像領域分の比率情報を生成する比率情報生成手段と、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出する端点検出手段と、
前記撮像情報と、当該端点検出手段によって検出された端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換する画素ブロック画像情報生成手段と、
当該画素ブロック画像情報に基づき、画像信号を補正する補正手段として機能させるためのプログラムを記憶し、
前記補正手段は、
前記画素ブロック画像情報に基づき、画像の歪みを補正するために、画像信号を補正する歪み補正手段と、
前記画素ブロック画像情報に基づき、色むらを補正するために、画像信号を補正する色むら補正手段と、
を含み、
前記画像投写手段は、前記補正手段によって画像の歪みと色むらが補正された画像信号に基づき、画像を投写することを特徴とする情報記憶媒体。 - 単色のキャリブレーション画像を、投写する度に色を変えながら複数回投写し、
投写する度に各キャリブレーション画像を撮像して撮像情報を出力し、
当該撮像情報に基づき、複数のキャリブレーション画像の撮影画像において対応する画素ごとの画像信号値または輝度値の比率を演算し、
撮影画像領域分の比率情報を生成し、
当該比率情報を検索対象として、所定画素領域ごとの前記比率を示す第１の値を検索し、当該第１の値が第１の所定値以上となった画素領域を基準として投写領域の端点を検出し、
前記撮像情報と、検出した端点とに基づき、当該端点で囲まれた投写領域の撮像情報を、１画素以上の画素で構成される画素ブロックごとの画像信号値または輝度値の比率を示す画素ブロック画像情報に変換し、
当該画素ブロック画像情報に基づき、画像の歪みおよび画像の色むらを補正するために、画像信号を補正し、
補正した画像信号に基づき、画像を投写することを特徴とする画像処理方法。 - 請求項７において、
前記撮影画像に対応する領域の端点からの上下左右方向の前記第１の値の検索により、前記第１の所定値以上となった画素領域で囲まれる矩形の領域を仮投写領域として抽出し、
当該仮投写領域に基づき、投写領域の４隅の端点を検出することを特徴とする画像処理方法。 - 請求項８において、
検索によって検出した端点が３つ以下の場合、仮投写領域の各頂点から内側に向かって、２つの撮影画像において対応する画素ごとの比率を示す第２の値が第２の所定値以上となった画素までの画素数を画素ラインごとにカウントし、所定画素ラインのカウント数と当該画素ラインの隣接画素ラインのカウント数の比率の変化率を示す第３の値が第３の所定値以上となった場合、当該画素ラインにおいて前記第２の値が前記第２の所定値以上となった画素を、前記投写領域の端点として検出することを特徴とする画像処理方法。
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003091720A JP3690402B2 (ja) | 2003-03-28 | 2003-03-28 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
| EP04251651A EP1463338B1 (en) | 2003-03-28 | 2004-03-23 | System, method and software for processing a projected image |
| US10/806,207 US7266240B2 (en) | 2003-03-28 | 2004-03-23 | Image processing system, projector, computer-readable medium, and image processing method |
| DE602004019831T DE602004019831D1 (de) | 2003-03-28 | 2004-03-23 | System, Verfahren und Software zur Verarbeitung eines projizierten Bildes |
| CNB2004100079842A CN1258287C (zh) | 2003-03-28 | 2004-03-23 | 图像处理系统，投影机以及图像处理方法 |
| TW093107993A TWI238665B (en) | 2003-03-28 | 2004-03-24 | Image processing system, projector, and image processing method |
| KR1020040020642A KR100600913B1 (ko) | 2003-03-28 | 2004-03-26 | 화상 처리 시스템, 프로젝터 및 화상 처리 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003091720A JP3690402B2 (ja) | 2003-03-28 | 2003-03-28 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004304265A JP2004304265A (ja) | 2004-10-28 |
| JP3690402B2 true JP3690402B2 (ja) | 2005-08-31 |
Family
ID=32821614
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003091720A Expired - Fee Related JP3690402B2 (ja) | 2003-03-28 | 2003-03-28 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7266240B2 (ja) |
| EP (1) | EP1463338B1 (ja) |
| JP (1) | JP3690402B2 (ja) |
| KR (1) | KR100600913B1 (ja) |
| CN (1) | CN1258287C (ja) |
| DE (1) | DE602004019831D1 (ja) |
| TW (1) | TWI238665B (ja) |
Families Citing this family (38)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4150924B2 (ja) * | 2003-07-02 | 2008-09-17 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
| JP3968584B2 (ja) * | 2003-10-02 | 2007-08-29 | 船井電機株式会社 | パネル表示テレビジョン |
| US7517089B2 (en) * | 2004-03-29 | 2009-04-14 | Seiko Epson Corporation | Image processing system, projector, information storage medium, and image processing method |
| TWI261144B (en) * | 2005-01-20 | 2006-09-01 | Coretronic Corp | Rear projection display device with automatic imaging error adjustment |
| JP4085283B2 (ja) * | 2005-02-14 | 2008-05-14 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
| US7583325B2 (en) * | 2005-03-23 | 2009-09-01 | Infocus Corporation | Projection systems and processes for generating images with increased brightness uniformity |
| JP5087830B2 (ja) * | 2005-09-09 | 2012-12-05 | セイコーエプソン株式会社 | プロジェクションシステム |
| JP4923863B2 (ja) * | 2005-10-07 | 2012-04-25 | セイコーエプソン株式会社 | 画像表示システム、画像表示装置、画像補正処理プログラム |
| US7866832B2 (en) * | 2006-02-15 | 2011-01-11 | Mersive Technologies, Llc | Multi-projector intensity blending system |
| US7773827B2 (en) * | 2006-02-15 | 2010-08-10 | Mersive Technologies, Inc. | Hybrid system for multi-projector geometry calibration |
| US20070242240A1 (en) * | 2006-04-13 | 2007-10-18 | Mersive Technologies, Inc. | System and method for multi-projector rendering of decoded video data |
| US20080180467A1 (en) * | 2006-04-13 | 2008-07-31 | Mersive Technologies, Inc. | Ultra-resolution display technology |
| US7893393B2 (en) * | 2006-04-21 | 2011-02-22 | Mersive Technologies, Inc. | System and method for calibrating an image projection system |
| US7740361B2 (en) * | 2006-04-21 | 2010-06-22 | Mersive Technologies, Inc. | Alignment optimization in image display systems employing multi-camera image acquisition |
| US7763836B2 (en) * | 2006-04-21 | 2010-07-27 | Mersive Technologies, Inc. | Projector calibration using validated and corrected image fiducials |
| JP4932504B2 (ja) * | 2007-01-18 | 2012-05-16 | 富士フイルム株式会社 | 画像処理方法、装置及びプログラム並びに撮像装置 |
| US20090262260A1 (en) * | 2008-04-17 | 2009-10-22 | Mersive Technologies, Inc. | Multiple-display systems and methods of generating multiple-display images |
| JP5332620B2 (ja) * | 2009-01-07 | 2013-11-06 | 株式会社ニコン | プロジェクタ |
| JP5430254B2 (ja) * | 2009-07-01 | 2014-02-26 | キヤノン株式会社 | 画像表示装置及びその制御方法 |
| US8390677B1 (en) * | 2009-07-06 | 2013-03-05 | Hewlett-Packard Development Company, L.P. | Camera-based calibration of projectors in autostereoscopic displays |
| CN102857696A (zh) * | 2009-08-18 | 2013-01-02 | 夏普株式会社 | 拍摄条件决定装置、拍摄条件决定方法和不均校正系统 |
| TWI439788B (zh) * | 2010-01-04 | 2014-06-01 | Ind Tech Res Inst | 投影校正系統及方法 |
| CN102142224B (zh) * | 2010-02-01 | 2013-10-23 | 夏普株式会社 | 显示装置、亮度不均补正方法、补正数据制作装置和补正数据制作方法 |
| WO2012120586A1 (ja) * | 2011-03-04 | 2012-09-13 | Ｎｅｃディスプレイソリューションズ株式会社 | 投写型画像表示装置及び光量調整方法 |
| TWI473497B (zh) * | 2011-05-18 | 2015-02-11 | Chip Goal Electronics Corp | 物件追蹤裝置與應用物件追蹤裝置之互動影像播放系統，及相關方法 |
| WO2012160691A1 (ja) * | 2011-05-26 | 2012-11-29 | Ｎｅｃディスプレイソリューションズ株式会社 | プロジェクタおよび処理方法 |
| TWI462583B (zh) * | 2011-05-27 | 2014-11-21 | Qisda Corp | 可根據定位訊號顯示畫面之電視牆系統 |
| JP6070283B2 (ja) * | 2013-03-04 | 2017-02-01 | 株式会社リコー | 撮像装置、露出制御方法およびプログラム |
| KR102025184B1 (ko) * | 2013-07-31 | 2019-09-25 | 엘지디스플레이 주식회사 | 데이터 변환 장치 및 이를 이용한 디스플레이 장치 |
| JP6469130B2 (ja) * | 2014-11-10 | 2019-02-13 | マクセル株式会社 | プロジェクタ及び映像表示方法 |
| CN104683701A (zh) * | 2015-03-12 | 2015-06-03 | 成都品果科技有限公司 | 一种优化前置摄像头自拍照片中人脸肤色的方法和系统 |
| CN105700276B (zh) * | 2016-04-06 | 2017-11-07 | 浙江大学 | 自动定位投影仪及自动定位方法 |
| CN106097309B (zh) * | 2016-05-30 | 2017-12-19 | 广州巧瞳科技有限公司 | 一种智能显示视觉图像的位置信息处理方法及系统 |
| CN106846412B (zh) * | 2017-01-23 | 2020-03-13 | 上海兴芯微电子科技有限公司 | 一种棋盘格角点检测方法及装置 |
| JP2018125719A (ja) * | 2017-02-01 | 2018-08-09 | キヤノン株式会社 | システム、情報処理装置、情報処理方法及びプログラム |
| JP6962372B2 (ja) * | 2017-08-25 | 2021-11-05 | 株式会社ソシオネクスト | 補正装置、補正プログラム及び記録媒体 |
| CN107422590B (zh) * | 2017-09-12 | 2020-09-08 | 中广热点云科技有限公司 | 自动调节投影面大小的家用投影系统 |
| CN110769232B (zh) * | 2019-08-12 | 2021-09-28 | 成都极米科技股份有限公司 | 超短焦投影仪的亮度检测方法、装置及系统 |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5313291A (en) * | 1991-11-25 | 1994-05-17 | Xerox Corporation | Method for matching color prints to color images on a monitor screen |
| JPH08190633A (ja) * | 1995-01-06 | 1996-07-23 | Hitachi Metals Ltd | 欠陥判別方法 |
| KR100355378B1 (ko) * | 1996-01-15 | 2002-12-26 | 삼성전자 주식회사 | 각종 조명광하에서의 칼라이미지 디스플레이방법 |
| JPH1079020A (ja) * | 1996-09-05 | 1998-03-24 | Canon Inc | 画像処理方法及び装置 |
| IL119259A (en) * | 1996-09-17 | 2000-12-06 | Comview Graphics Ltd | Electro-optical display apparatus and method of using same |
| US6483537B1 (en) * | 1997-05-21 | 2002-11-19 | Metavision Corporation | Apparatus and method for analyzing projected images, singly and for array projection applications |
| US6078309A (en) * | 1998-05-22 | 2000-06-20 | Way Tech Development, Inc. | System and method for visually measuring color characteristics of a display |
| JP4415101B2 (ja) * | 1999-03-30 | 2010-02-17 | 独立行政法人情報通信研究機構 | 画像投影装置及び画像投影方法 |
| US6753907B1 (en) * | 1999-12-23 | 2004-06-22 | Justsystem Corporation | Method and apparatus for automatic keystone correction |
| JP4776055B2 (ja) * | 2000-03-06 | 2011-09-21 | ガリストロフ ソフトウェア エルエルシー | 映像調整システム装置 |
| US6771272B2 (en) * | 2000-03-17 | 2004-08-03 | Sun Microsystems, Inc. | Graphics system having a super-sampled sample buffer with hot spot correction |
| JP2001296026A (ja) | 2000-04-12 | 2001-10-26 | Harman Co Ltd | ガスコンロの取付構造 |
| JP3707371B2 (ja) * | 2000-08-28 | 2005-10-19 | セイコーエプソン株式会社 | 画像表示システム、画像処理方法および情報記憶媒体 |
| JP3497805B2 (ja) * | 2000-08-29 | 2004-02-16 | オリンパス株式会社 | 画像投影表示装置 |
| JP2002116500A (ja) * | 2000-10-05 | 2002-04-19 | Olympus Optical Co Ltd | 画像投影表示装置 |
| JP2002140060A (ja) | 2000-11-01 | 2002-05-17 | Seiko Epson Corp | 画像表示システム |
| JP2002144670A (ja) | 2000-11-13 | 2002-05-22 | Canon Inc | 画像形成システム、及びその後処理方法、並びに記憶媒体 |
| JP2002144671A (ja) | 2000-11-14 | 2002-05-22 | Sato Corp | 印刷装置および印刷装置の設定方法 |
| JP3719957B2 (ja) | 2001-06-27 | 2005-11-24 | 株式会社東芝 | 元素定量分析方法のコンピュータプログラム |
| JP3885001B2 (ja) * | 2002-06-27 | 2007-02-21 | キヤノン株式会社 | 画像処理方法及び画像処理装置 |
| US7038727B2 (en) * | 2002-10-30 | 2006-05-02 | The University Of Chicago | Method to smooth photometric variations across multi-projector displays |
-
2003
- 2003-03-28 JP JP2003091720A patent/JP3690402B2/ja not_active Expired - Fee Related
-
2004
- 2004-03-23 DE DE602004019831T patent/DE602004019831D1/de not_active Expired - Lifetime
- 2004-03-23 US US10/806,207 patent/US7266240B2/en not_active Expired - Fee Related
- 2004-03-23 EP EP04251651A patent/EP1463338B1/en not_active Expired - Lifetime
- 2004-03-23 CN CNB2004100079842A patent/CN1258287C/zh not_active Expired - Fee Related
- 2004-03-24 TW TW093107993A patent/TWI238665B/zh not_active IP Right Cessation
- 2004-03-26 KR KR1020040020642A patent/KR100600913B1/ko not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| KR100600913B1 (ko) | 2006-07-13 |
| TWI238665B (en) | 2005-08-21 |
| TW200425748A (en) | 2004-11-16 |
| DE602004019831D1 (de) | 2009-04-23 |
| JP2004304265A (ja) | 2004-10-28 |
| US20040240748A1 (en) | 2004-12-02 |
| CN1258287C (zh) | 2006-05-31 |
| EP1463338B1 (en) | 2009-03-11 |
| EP1463338A3 (en) | 2005-10-26 |
| US7266240B2 (en) | 2007-09-04 |
| KR20040085005A (ko) | 2004-10-07 |
| EP1463338A2 (en) | 2004-09-29 |
| CN1535003A (zh) | 2004-10-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3690402B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP3620537B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| KR100602622B1 (ko) | 화상 처리 시스템, 프로젝터, 정보 기억 매체 및 화상처리 방법 | |
| US7422331B2 (en) | Image processing system, projector, and image processing method | |
| US7949202B2 (en) | Image processing system, projector, and image processing method | |
| JP3871061B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP3731663B2 (ja) | 画像処理システム、プロジェクタおよび画像処理方法 | |
| JP3844076B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP5251202B2 (ja) | プロジェクタの投射画像の歪補正方法、及びプロジェクタ | |
| US10281714B2 (en) | Projector and projection system that correct optical characteristics, image processing apparatus, and storage medium | |
| JPH11113019A (ja) | 画像表示装置 | |
| US11323673B2 (en) | Method for operating control apparatus, and projector | |
| JP5205865B2 (ja) | 投射画像の形状歪補正支援システム、投射画像の形状歪補正支援方法、及びプロジェクタ、並びにプログラム | |
| JP3731666B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP3882928B2 (ja) | 画像処理システム、プロジェクタおよび画像処理方法 | |
| JP2003319292A (ja) | 投写型映像表示装置 | |
| JP3882927B2 (ja) | 画像処理システム、プロジェクタおよび画像処理方法 | |
| JP3731667B2 (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP2004347775A (ja) | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 | |
| JP4511433B2 (ja) | 画像処理システム、プロジェクタ、携帯型装置および画像処理方法 | |
| JP2005341152A (ja) | 画像表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20040712 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20041222 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041228 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050214 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050524 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050606 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090624 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100624 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110624 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110624 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120624 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130624 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130624 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |