JP2014119701A - 投影装置、投影制御装置、投影制御方法及びプログラム - Google Patents
投影装置、投影制御装置、投影制御方法及びプログラム Download PDFInfo
- Publication number
- JP2014119701A JP2014119701A JP2012276799A JP2012276799A JP2014119701A JP 2014119701 A JP2014119701 A JP 2014119701A JP 2012276799 A JP2012276799 A JP 2012276799A JP 2012276799 A JP2012276799 A JP 2012276799A JP 2014119701 A JP2014119701 A JP 2014119701A
- Authority
- JP
- Japan
- Prior art keywords
- image
- projection
- unit
- projected
- display element
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
【課題】被投影面に与えられる特定の領域に投影する画像をより自然に表現する。
【解決手段】マイクロミラー素子12を有した表示系と、表示系で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影レンズ部15を含んだ投影系と、照明画像の情報を記憶した照明画像記憶部24Bと、被投影面内でコンテンツ画像を投影する範囲の形状を取得する撮影レンズ部17、CMOSイメージセンサ18を含む撮像系と、取得した形状によりミラー素子12の表示可能領域内にコンテンツ画像を表示する第1の領域を割当て、第1の領域の外側の領域を含んで照明画像を表示する第2の領域を割当て、夫々割当てた結果に基づいて合成画像を生成してミラー素子12で表示させ、表示させた合成画像を投影系により被投影面に投影させるCPU22とを備える。
【選択図】図2
【解決手段】マイクロミラー素子12を有した表示系と、表示系で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影レンズ部15を含んだ投影系と、照明画像の情報を記憶した照明画像記憶部24Bと、被投影面内でコンテンツ画像を投影する範囲の形状を取得する撮影レンズ部17、CMOSイメージセンサ18を含む撮像系と、取得した形状によりミラー素子12の表示可能領域内にコンテンツ画像を表示する第1の領域を割当て、第1の領域の外側の領域を含んで照明画像を表示する第2の領域を割当て、夫々割当てた結果に基づいて合成画像を生成してミラー素子12で表示させ、表示させた合成画像を投影系により被投影面に投影させるCPU22とを備える。
【選択図】図2
Description
本発明は、商品や絵画の画像の展示などに好適な投影装置、投影制御装置、投影制御方法及びプログラムに関する。
簡易な構成で、スクリーンの形状に一致させた投写映像を表示するが可能な投写型映像表示装置が提案されている。(例えば、特許文献1)
上記特許文献に記載された技術を用いることで、例えば壁面に設置された、内部が空(カラ、無地)の額縁内をスクリーンと見立てて、その形状に一致させた画像を投影させることが可能になると思われる。
しかしながら、実際に上記のように額縁内に画像を投影させる場合、単に形状に合わせて投影を行なうだけでは、各種の環境、例えば額縁内の色やその額縁を照射する光などによって、投影する画像が投影面から浮いた色調となったり、あるいは逆に地の色に埋没したりするなど、不自然な表現となる可能性も多々考えられる。
本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、被投影面の特定の領域に投影する画像をより自然に表現することが可能な投影装置、投影制御装置、投影制御方法及びプログラムを提供することにある。
本発明の一態様は、投影装置であって、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示手段と、上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影手段と、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段と、上記画像合成手段で表示させた合成画像を上記投影手段により上記被投影面に投影させる投影制御手段とを備えたことを特徴とする。
本発明によれば、被投影面の特定の領域に投影する画像をより自然に表現することが可能となる。
以下、本発明を投影装置に適用した場合の一実施形態について図面を参照して説明する。
図1は、本発明に係る投影装置10の使用環境を例示する図である。同図では、投影装置10により画像の投影が可能な範囲AR内の壁面に額縁FRが装架されているものとする。当該額縁FR内は、無地、例えば白色となっているものとする。
投影装置10は、投影範囲AR内に位置する上記額縁FR内の空間に、この投影装置10に入力されている画像信号に応じたコンテンツ画像CIを投影する一方で、予め設定した光源位置、例えば上方から照射されているように見せる照明画像LTを合わせて投影する。
投影装置10は、投影レンズ系内にズームレンズ及びフォーカスレンズを備え、額縁FRを認識した状態では、照明画像LTも考慮して必要な投影角度を自動的に選択し、合焦状態となるようにコンテンツ画像CI及び照明画像LTを投影する。
図2は、本実施形態に係る投影装置10の主として電子回路の機能構成を説明する図である。同図中、入力処理部IPに入力された画像データが、この入力処理部IPで必要に応じてデジタル化された後に、システムバスSBを介して投影画像駆動部11に送られる。
この投影画像駆動部11は、送られてきた画像データに応じて、所定のフォーマットに従ったフレームレート、例えば120[フレーム/秒]と色成分の分割数、及び表示階調数を乗算したより高速な時分割駆動により、表示素子であるマイクロミラー素子12を表示駆動する。
このマイクロミラー素子12は、アレイ状に配列された複数、例えばWXGA(横1280画素×縦768画素)分の微小ミラーの各傾斜角度を個々に高速でオン/オフ動作して表示動作することで、その反射光により光像を形成する。
一方で、光源部13から時分割でR,G,Bの原色光が循環的に出射される。光源部13は、半導体発光素子であるLEDを有し、R,G,Bの原色光を時分割で繰返し出射する。光源部13が有するLEDは、広義でのLEDとして、LD(半導体レーザ)や有機EL素子を含むものとしても良い。この光源部13からの原色光が、ミラー14で全反射して上記マイクロミラー素子12に照射される。
そして、マイクロミラー素子12での反射光で光像が形成され、形成された光像が投影レンズ部15を介して外部に投射して表示される。
上記投影レンズ部15は、内部のレンズ光学系中に、フォーカス位置を移動するためのフォーカスレンズ及びズーム(投影)画角を可変するためのズームレンズを含み、それら各レンズはレンズモータ(M)16により図示しないギヤ機構を介して光軸方向に沿った位置が選択的に駆動される。
また、上記投影レンズ部15と隣接するようにして撮影レンズ部17を配設する。この撮影レンズ部17は、フォーカス位置を移動するためのフォーカスレンズを含み、上記投影レンズ部15の最広角での投影画角をカバーするような撮影画角を有する。撮影レンズ部17に入光する外部の光像は、固体撮像素子であるCMOSイメージセンサ18上に結像される。
CMOSイメージセンサ18での結像により得られる画像信号は、A/D変換器19でデジタル化された後、撮影画像処理部20に送られる。
この撮影画像処理部20は、上記CMOSイメージセンサ18を走査駆動して撮影動作を実行させ、撮影により得た画像データに対する輪郭抽出等の画像処理を実施することで、後述するように画像中から上記図1の額縁FRの位置、形状を抽出する。
加えて撮影画像処理部20は、上記撮影レンズ部17のフォーカスレンズ位置を移動させるためのレンズモータ(M)21を駆動する。
上記各回路の動作すべてをCPU22が制御する。このCPU22は、メインメモリ23及びプログラムメモリ24と直接接続される。メインメモリ23は、例えばSRAMで構成され、CPU22のワークメモリとして機能する。プログラムメモリ24は、電気的書換可能な不揮発性メモリ、例えばフラッシュROMで構成され、CPU22が実行する動作プログラムや各種定型データ等を記憶する。
プログラムメモリ24には、図示する如くコンテンツ画像記憶部24A及び照明画像記憶部24Bが含まれる。コンテンツ画像記憶部24Aには、上記入力処理部IPから入力されたコンテンツ画像の画像データが適宜記憶される。当該コンテンツ画像のデータには、例えば「風景画」「人物画」「静物画」などの属性を示す属性情報が対応付けて記憶されているものとする。
照明画像記憶部24Bには、光源位置の指定によって異なる複数の照明画像のデータが記憶される。この照明画像データは、ここでは、色指定のないモノクロで全画素共フル階調値のフラットパターンの画像データであり、後述する色指定やグラデーション強度によって加工された上で実際の投影に使用されるものとして説明する。
照明画像記憶部24Bには、光源位置の指定によって異なる複数の照明画像のデータが記憶される。この照明画像データは、ここでは、色指定のないモノクロで全画素共フル階調値のフラットパターンの画像データであり、後述する色指定やグラデーション強度によって加工された上で実際の投影に使用されるものとして説明する。
CPU22は、上記プログラムメモリ24に記憶されている動作プログラムや定型データ等を読出し、メインメモリ23に展開して記憶させた上で当該プログラムを実行することにより、この投影装置10を統括して制御する。
上記CPU22は、操作部25からの操作信号に応じて各種投影動作を実行する。この操作部25は、投影装置10の本体に備えるいくつかの操作キーのキー操作信号を受付け、受付けたキー操作信号に応じた信号を上記CPU22へ送出する。
操作部25が備える操作キーとしては、例えば投影装置10の電源のオン/オフを操作する電源キー、ズームキー+/−キー、フォーカス+/−キー、メニューキー、十字キー、決定キー等を含む。
上記CPU22はさらに、上記システムバスSBを介して音声処理部26と接続される。
音声処理部26は、PCM音源等の音源回路を備え、投影動作時に与えられる音声信号をアナログ化し、スピーカ部28を駆動して放音させ、あるいは必要によりビープ音等を発生させる。
音声処理部26は、PCM音源等の音源回路を備え、投影動作時に与えられる音声信号をアナログ化し、スピーカ部28を駆動して放音させ、あるいは必要によりビープ音等を発生させる。
次に上記実施形態の動作について説明する。
まず図3により各種投影モード設定を行なうメニュー画面での設定例を示す。同図は、音声処理部26のメニューキーを操作することにより上記図1のコンテンツ画像CIに代えて投影される画面例である。
まず図3により各種投影モード設定を行なうメニュー画面での設定例を示す。同図は、音声処理部26のメニューキーを操作することにより上記図1のコンテンツ画像CIに代えて投影される画面例である。
ここでは、「通常投影モード」「フィッティングモード」及び「フィッティング+照明用画像投影モード」の3つのモードから1つを選択可能であるものとし、図3では最後の「フィッティング+照明用画像投影モード」が選択されている状態を示す。
「通常投影モード」は、投影範囲AR内にある被投影面内の何らかの額縁FR等に関係なく、任意のズーム角、フォーカス位置で入力された画像の投影を行なうモードである。
「フィッティングモード」は、投影範囲AR内にある被投影面内の額縁FR等を検出した上で、その枠内に収まるように画像を加工して投影するモードである。
「フィッティングモード」は、投影範囲AR内にある被投影面内の額縁FR等を検出した上で、その枠内に収まるように画像を加工して投影するモードである。
「フィッティング+照明用画像投影モード」は、上記図1で示した如く、投影範囲AR内にある被投影面内の額縁FR等を検出した上で、その枠内に収まるように画像を加工すると共に、設定条件に合わせた上記照明画像LTを同時に投影するモードである。
この「フィッティング+照明用画像投影モード」を選択することで、図中に一点鎖線範囲IIIで示す詳細な設定が可能となる。すなわち「フィッティング+照明用画像投影モード」では、「照明用画像範囲設定」「光源位置」及び「照明用画像色設定」の3項目について設定が可能となる。
「照明用画像範囲設定」では、投影範囲AR中の額縁FRの大きさに合わせて上記照明画像LTの大きさを「自動」で調整するか、あるいはユーザ設定により「手動」で調整するかを選択できる。
ここで「自動」が選択された場合、投影範囲AR中の額縁FRの大きさに合わせて上記照明画像LTの大きさが設定される。
また、「手動」が選択された場合、別途図示しない方法でユーザが投影範囲AR中の額縁FRの大きさを設定できるようにしている。
また、図3に示すように、照明用画像範囲設定の際、スライドバーインターフェースにより、照明用画像範囲を狭くしたり、広くしたりするような微調整を可能にしている。
また、同様に、図3に示すように、スライドバーインターフェースにより、照明用画像内の半径方向に、あるいは後述する照明(光源)位置に応じて現れるグラデーションの強度を弱めにしたり、強めにしたりするような微調整を可能にしている。
また上記「光源位置」の設定では、上記照明画像LTを照らす仮想空間での光源の位置を、全面均一な「正面」、あるいは意図してグラデーション状に傾斜分布させる「上」「下」「左」「右」とを選択できるものとする。
「照明用画像色設定」では、コンテンツ画像CIの内容に応じて照明画像LTの色(単色)を「自動」で設定するか、あるいはユーザ設定により「手動」で任意に設定するかを選択できる。
ここで「自動」を選択して設定した場合、さらにコンテンツ画像CIの「属性」、コンテンツ画像CIの「色調」、及び額縁FR周囲の「壁面色」のいずれによって自動的に照明用画像の色設定を行なうかを設定可能とする。
ここで「属性」とは、コンテンツ画像CIに関連付けて記憶される属性情報を示すもので、当該画像が風景画や人物画、静物画など、どのような属性を有する画像かを識別できる情報を指す。
この「属性」を選んだときは、当該画像が風景画や人物画、静物画など、どのような属性を有する画像かを識別して照明用画像の色が自動に選択されるものとする。
この「属性」を選んだときは、当該画像が風景画や人物画、静物画など、どのような属性を有する画像かを識別して照明用画像の色が自動に選択されるものとする。
「色調」を選んだときは、選択したコンテンツ画像CIで使用されている色成分がモノクロ基調、寒色基調、暖色基調など、使用されている画像データ中の色成分の分布から照明用画像の色が自動に選択されるものとする。
「壁面色」を選んだときは、上記投影範囲AR内を撮像することで、額縁FRの周囲となる、被投影面の壁面の色成分から照明用画像の色が自動に選択されるものとする。
「壁面色」を選んだときは、上記投影範囲AR内を撮像することで、額縁FRの周囲となる、被投影面の壁面の色成分から照明用画像の色が自動に選択されるものとする。
次に上記「フィッティング+照明用画像投影モード」を選択した当初に実行するセッティング動作について説明する。
なお以下に示す動作は、上述した如くCPU22がプログラムメモリ24から読出した動作プログラムや定型データ等をメインメモリ23に展開した上で実行するものである。プログラムメモリ24に記憶される動作プログラム等は、この投影装置10の工場出荷時にプログラムメモリ24に記憶されていたもののみならず、ユーザがこの投影装置10を購入後にバージョンアップ用のプログラム等をインストールした内容を含む。
なお以下に示す動作は、上述した如くCPU22がプログラムメモリ24から読出した動作プログラムや定型データ等をメインメモリ23に展開した上で実行するものである。プログラムメモリ24に記憶される動作プログラム等は、この投影装置10の工場出荷時にプログラムメモリ24に記憶されていたもののみならず、ユーザがこの投影装置10を購入後にバージョンアップ用のプログラム等をインストールした内容を含む。
図4は、このときCPU22が実行する処理内容を示すフローチャートである。
まずCPU22は、レンズモータ16により投影レンズ部15中のズームレンズを、焦点距離が最短となる最大広角位置に設定した上で、マイクロミラー素子12で全面が白色となる画像を表示し、被投影面内の投影範囲AR全体を白色光で照らす(ステップS101)。
まずCPU22は、レンズモータ16により投影レンズ部15中のズームレンズを、焦点距離が最短となる最大広角位置に設定した上で、マイクロミラー素子12で全面が白色となる画像を表示し、被投影面内の投影範囲AR全体を白色光で照らす(ステップS101)。
この状態でレンズモータ21により撮影レンズ部17のフォーカスレンズを適宜操作し、例えばコントラスト方式のAF機能により最もCMOSイメージセンサ18から出力される画像のコントラスト値が高くなるように合焦位置を検出することで、被投影面に合焦した投影範囲AR内の画像を撮影する(ステップS102)。
この合焦状態で得られた上記フォーカスレンズの位置により、投影装置10から被投影面までの距離が取得できる。
この合焦状態で得られた上記フォーカスレンズの位置により、投影装置10から被投影面までの距離が取得できる。
次にCPU22は、撮影画像データに対して上記撮影画像処理部20により輪郭抽出処理、パターン検出処理等の画像処理を組み合わせて実行させ、撮影画像中から上記額縁FRの位置を抽出させる(ステップS103)。
次にCPU22は、上記抽出した額縁FRの周囲の壁面と内部の各色成分を分析し、分析した結果を保持しておく(ステップS104)。
次にCPU22は、その時点で設定されている、照明用画像の範囲設定の情報を読出した上で(ステップS105)、範囲は「自動」であるか否かを判断する(ステップS106)。
上記図3で示した如く「自動」が設定されていると判断した場合、CPU22は上記ステップS103で抽出した額縁FRの位置に応じて、レンズモータ16により投影レンズ部15のズームレンズの回動位置を操作し、コンテンツ画像CIと照明画像LTとが収まるように投影画角を設定する(ステップS107)。
また上記ステップS106において、照明用画像の範囲設定が「自動」ではないと判断した場合、CPU22は上記ステップS103で抽出した額縁FRの位置を基準として、その時点でユーザにより手動設定されている範囲に基づいた調整を施した上でレンズモータ16により投影レンズ部15のズームレンズの回動位置を操作し、投影画角を設定する(ステップS108)。
上記ステップS107またはステップS108での処理後、CPU22は次に照明用画像の色設定の情報を読出した上で(ステップS109)、色は「手動」でユーザが任意に設定しているか否かを判断する(ステップS110)。
色設定が「手動」であると判断した場合、CPU22は予めユーザにより設定されている照明画像LTの色設定を読出し、そのまま照明画像LTの色を設定する(ステップS111)。
また上記ステップS110において、色設定が「手動」ではなく「自動」であると判断した場合、CPU22は次にその時点でコンテンツ画像CIとして投影するべく選択されている画像データに対し、その「属性」に応じた色設定を行なうことが設定されているか否かを判断する(ステップS112)。
「属性」に応じた色設定が設定されていると判断した場合、CPU22は画像データに対応付けて記憶されている属性情報に応じて照明画像LTの色を設定する(ステップS113)。
図5(A)は、このときCPU22がプログラムに従って色設定する内容をテーブル化して示すものである。例えば、コンテンツ画像CIが人物画であった場合、当該画像を違和感なく照明するものとしても照明画像LTの色には肌色を設定する。
また上記ステップS112において、「属性」に応じた色設定がされていないと判断した場合、続いてCPU22はコンテンツ画像CIの「色調」に応じた色設定を行なうことが設定されているか否かを判断する(ステップS114)。
「色調」に応じた色設定が設定されていると判断した場合、CPU22は画像データを構成する各画素の色成分の分布傾向を分析し、その分析結果から照明画像LTの色を設定する(ステップS115)。
図5(B)は、このときCPU22がプログラムに従って色設定する内容をテーブル化して示すものである。例えば、コンテンツ画像CIが寒色系であった場合、当該画像を違和感なく照明するものとしても照明画像LTの色には同じく寒色系の例えば水色を設定する。
さらに上記ステップS114において、「色調」に応じた色設定もなされていないと判断した場合、色設定は残る「壁面色」に応じたものであることになるので、上記ステップS104で分析して保持しておいた壁面色に応じて照明画像LTの色を設定する(ステップS116)。
図5(C)は、このときCPU22がプログラムに従って色設定する内容をテーブル化して示すものである。例えば、壁面色が無彩色であるグレーであった場合、そこに位置するコンテンツ画像CIを違和感なく照明するものとして、照明画像LTの色には同じく無彩色である例えば白色を設定する。
上記ステップS113またはS115またはS116の処理後、さらに「自動」による色設定の付加機能として、上記ステップS104で分析した額縁FR内の色分布に従い、投影するコンテンツ画像CIに対する補正設定を行なう(ステップS117)。
図6は、このときCPU22がプログラムに従って補正設定する内容をテーブル化して示すものである。例えば、額縁FR内の色がグレーであった場合、この額縁FR内に投影するコンテンツ画像CIのコントラストが低減してしまうのを防ぐべく、コンテンツ画像CIに対して輪郭強調等のコントラストを強調する画像処理を施した上で投影するものとして補正設定する。
このステップS116の処理後、あるいは上記ステップS111で「手動」設定に基づいた照明画像LTの色設定処理後に、CPU22は上記ステップS103で抽出した額縁FRの位置と、現時点で設定されている投影ズーム角度とにより、表示素子であるマイクロミラー素子12の表示面内で、コンテンツ画像CIを表示するための領域を割り当てる(ステップS118)。
さらに、このコンテンツ画像CIを表示するための領域に合わせて、表示素子であるマイクロミラー素子12の表示面内で、照明画像LTを表示するための領域を割り当てる(ステップS119)。
これらの各割り当てに基づき、CPU22はコンテンツ画像記憶部24Aからその時点で選択されているコンテンツ画像CIの画像データを読出すと共に、照明画像記憶部24Bからその時点で選択されている照明画像LTの画像を読出してそれぞれ投影画像駆動部11で表示用画像として展開させ、コンテンツ画像CIと照明画像LTの合成画像を生成する(ステップS120)。
このとき、コンテンツ画像CIのアスペクト比と額縁FRのアスペクト人が一致しない場合には、例えば読出したコンテンツ画像CIを額縁FRに合致させるようにアスペクト比を変更するマッピング処理か、あるいは額縁FRの縦辺あるいは横辺をコンテンツ画像CIの同辺の長さと合致するようにコンテンツ画像CIの横辺あるいは縦辺の端部をカットするなどのフィッティング処理を実行する。
さらに、照明画像LTに対するグラデーション設定がなされている場合には、光源に近い側が最も強く、光源から離れるに従って弱くなるように照明画像LTの画像をそのグラデーションの設定の度合いを考慮した画素位置毎の減衰処理を施す。
加えて、その減衰処理を施した照明画像LTがコンテンツ画像CIと重なる領域では、コンテンツ画像CIに対して照明画像LTの色成分を適切なバランスで重畳するものとして、コンテンツ画像CIが、照明されていることを考慮した、より自然な画像として認識されるような合成処理を実行する。
こうして得られた合成画像に基づいてマイクロミラー素子12で表示し、光源部13からの光源光により光像を形成して投影レンズ部15から出射させることで投影動作を実行し(ステップS121)、以上で一連の図4の処理を一旦完了したものとして、以後上記投影動作を続行する。
以上詳述した如く本実施形態によれば、コンテンツ画像CIのみならず、これを照明する光源からの光を模した照明画像LTも合わせて投影するものとしたので、被投影面の額縁FR内に投影するコンテンツ画像CIをより自然に表現することが可能となる。
また、別途照明装置を用いることなく、一つの投影装置だけで、照明効果を与えて画像コンテンツをディスプレイすることができる。
なお上記実施形態では、投影装置10が単体で上記動作を行なうものとして説明したが、本発明はこれに限らず、投影装置10にパーソナルコンピュータなどの外部制御機器を接続し、例えば当該パーソナルコンピュータ側にインストールしたアプリケーションプログラムで上記実施形態の投影装置10で行なった画像に対する制御を行なうものとしても良く、同様の効果を奏することができる。
また上記実施形態では、コンテンツ画像CIを額縁FRの形状に合わせてフィッティング処理するものとしたので、額縁FRの形状を活かして違和感なくコンテンツ画像CIの投影が実現できる。
さらに上記実施形態では、画像を投影する範囲を含んで上記投影面を撮影する撮影レンズ部17、CMOSイメージセンサ18を含む撮像手段により額縁FRの形状を取得するものとしたので、ユーザになんら負担をかけることなく、額縁FRの形状取得を自動化できる。
また上記実施形態では、額縁FR内の色等の情報に合わせてコンテンツ画像CIの画像を補正して投影するものとしたので、投影場所の環境を勘案してより見易い画像投影を実現できる。
同様に上記実施形態では、額縁FR内の周囲、背景側の色等の情報に合わせて照明画像LTの画像を補正して投影するものとしたので、投影場所の環境を勘案してより見易い画像投影を実現できる。
また上記実施形態のフロー中では特に説明しなかったが、投影手段での投影をさせた状態で、投影範囲ARの額縁FRを含む範囲を撮影することで、投影位置をフィードバックして、自動的に投影位置合わせを行なうことができる。
さらに上記実施形態では、額縁FRの形状を撮像により自動的に検出するものとしたが、これとは別に、ユーザが手動で指定して選択するものとしても良く、こうすることで額縁FRの形状を正確に取得させることができる。
また上記実施形態では、例えば撮像系が自動合焦を行なうことで投影装置10から投影範囲ARまでの距離を測定するものとしたので、この測距情報を用いることで、投影系での合焦を正確に、且つ迅速に実行できる。
また、上記実施形態では、特に説明なかったが、投影範囲ARまでの距離を多点で測定するようにすれば、台形歪みを自動で補正すると同時に、投影位置も調整することが可能で、より正確に、且つ迅速に、投影を額縁FRの形状に合わせるようにすることできる。
さらに照明画像LTに関しては、予め照明画像記憶部24Bに光源の位置などにより表示態様が異なる複数の設定を用意し、ユーザが任意に選択することを可能としたので、ユーザの好みや投影環境に応じた表現が実現できる。
また上記実施形態では、コンテンツ画像CIの属性や色調などに基づいて照明画像LTの態様を決定して合成画像を生成することが可能となるので、より自然で違和感のない照明画像LTを用いたディスプレイを実現できる。
さらに上記実施形態では、投影レンズ部15がズーム角度を可変する光学ズーム機能を有するものとし、必要に応じてできうる限り投影角度を絞って画像投影を行なうものとしたので、光源部13で発生した光量を無駄にすることなく、またマイクロミラー素子12での表示解像度を活かして、明るく微細な画像表現を実現できる。
なお上記実施形態では説明しなかったが、投影レンズ部15でのズーム角度を最大限に絞っても額縁FRの形状が小さい場合、例えば被投影面の投影範囲ARが投影装置10から至近距離に位置している場合や、台形歪みを生じている場合などでも、マイクロミラー素子12上で表示する画像の範囲を制限、あるいは変形して位置を移動させるなどの制御を行なうデジタル画像変換により、額縁FRの形状を合わせ込んで投影させることができる。
なお上記実施形態は、投影装置10がDLP(Digital Light Processing)(登録商標)方式の投影を行なう場合について説明したが、本発明は投影方式や表示素子の構成等を限定するものではない。
また、図3の設定、図4のフローチャートでは、照明画像LTの色の自動設定の際に、わかりやすさのために、「属性」、「色調」、又は「壁面色」のいずれかひとつが考慮されるような例で説明したが、設定をラジオボタンではなくチェックボックスに変え、選択されているものを複数考慮して、照明画像LTの色が自動設定されるようにしてもよい。
また、照明画像データとして、ある画像を加工する例で説明したが、照明画像データとして加工されたデータを複数記憶しておき、照明画像データを加工することなく選択するだけで合成されるようにしてもよい。
また、投影する範囲として、額縁の例で説明したが、額縁に限らず、花瓶やオブジェ等への投影コンテンツ投影の際にも同様に適用可能である。
その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
請求項1記載の発明は、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示手段と、上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影手段と、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段と、上記画像合成手段で表示させた合成画像を上記投影手段により上記被投影面に投影させる投影制御手段とを備えたことを特徴とする。
請求項1記載の発明は、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示手段と、上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影手段と、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段と、上記画像合成手段で表示させた合成画像を上記投影手段により上記被投影面に投影させる投影制御手段とを備えたことを特徴とする。
請求項2記載の発明は、上記請求項1記載の発明において、上記画像合成手段は、上記第1の領域の形状に合わせて上記合成画像中の上記第1の画像の形状を加工することを特徴とする。
請求項3記載の発明は、上記請求項1または2記載の発明において、上記取得手段は、上記第1の画像を投影する範囲を含んで上記投影面を撮影する撮像手段を含み、当該撮像手段で撮影した画像から上記第1の画像を投影する範囲の形状を取得することを特徴とする。
請求項4記載の発明は、上記請求項3記載の発明において、上記取得手段は、上記撮像手段で撮影した画像により上記被投影面内で第1の画像を投影する範囲の周囲の面情報を取得し、上記表示制御手段は、上記取得手段で取得した面情報に基づいて上記合成画像中の上記第2の画像の表示態様を補正することを特徴とする。
請求項5記載の発明は、上記請求項3記載の発明において、上記取得手段は、上記撮像手段で撮影した画像により上記被投影面内で第1の画像を投影する範囲内の面情報を取得し、上記画像合成手段は、上記取得手段で取得した面情報に基づいて上記合成画像の表示態様を補正することを特徴とする。
請求項6記載の発明は、上記請求項3乃至5いずれか記載の発明において、上記投影制御手段は、上記投影手段での投影をさせた状態で、上記撮像手段で撮影し、当該撮像手段で撮影した画像から上記第1の画像を投影する範囲の位置を取得し、上記合成画像の投影位置を調整させることを特徴とする。
請求項7記載の発明は、上記請求項1乃至6いずれか記載の発明において、上記被投影面までの距離を測定する測距手段をさらに備え、上記投影制御手段は、上記測距手段で測定した距離に基づいて上記合成画像を上記被投影面に投影させることを特徴とする。
請求項8記載の発明は、上記請求項1または2記載の発明において、上記取得手段は、上記被投影面内で上記第1の画像を投影する範囲の形状の指定をユーザに促し、ユーザにより指定された形状を上記第1の画像を投影する範囲の形状として取得することを特徴とする。
請求項9記載の発明は、上記請求項1乃至8いずれか記載の発明において、上記照明画像記憶手段は、表示態様が異なる複数の第2の画像の情報を記憶し、上記複数の第2の画像の情報の指定をユーザに促して指定させる照明画像指定手段をさらに備え、上記画像合成手段は、上記照明画像指定手段で指定された第2の画像の情報により上記合成画像を生成して上記表示素子で表示させることを特徴とする。
請求項10記載の発明は、上記請求項1乃至9いずれか記載の発明において、上記画像合成手段は、上記第1の画像から得られる特性情報に基づいて、上記第2の画像の態様を決定し、合成画像を生成して上記表示手段の表示素子で表示させることを特徴とする。
請求項11記載の発明は、上記請求項1乃至10いずれか記載の発明において、上記投影手段は、投影する画像の画角を光学的に調整する画角調整手段をさらに備え、上記投影制御手段は、上記画像調整手段により合成画像中の上記第1の画像を上記被投影面内で上記第1の画像を投影する範囲に合わせて投影させることを特徴とする。
請求項12記載の発明は、上記請求項1乃至10いずれか記載の発明において、上記画像合成手段は、上記表示素子で表示させる上記合成画像の範囲を可変することを特徴とする。
請求項13記載の発明は、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた投影装置を制御する投影制御装置であって、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像情報を生成して上記投影装置に出力する画像合成手段とを備えたことを特徴とする。
請求項14記載の発明は、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた投影装置での投影制御方法であって、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶工程と、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得工程と、上記取得工程で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当工程と、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当工程と、上記第1及び第2の割当工程でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成工程と、上記画像合成工程で表示させた合成画像を上記投影部により上記被投影面に投影させる投影制御工程とを有したことを特徴とする。
請求項15記載の発明は、入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた装置が内蔵したコンピュータが実行するプログラムであって、上記コンピュータを、照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段、上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段、上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段、上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段、上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段、及び上記画像合成手段で表示させた合成画像を上記投影部により上記被投影面に投影させる投影制御手段として機能させることを特徴とする。
10…投影装置、11…投影画像駆動部、12…マイクロミラー素子、13…光源部、14…ミラー、15…投影レンズ部、16…レンズモータ(M)、17…撮影レンズ部、18…CMOSイメージセンサ、19…A/D変換器、20…撮影画像処理部、21…レンズモータ(M)、22…CPU、23…メインメモリ、24…プログラムメモリ、24A…コンテンツ画像記憶部、24B…照明画像記憶部、25…操作部、26…音声処理部、28…スピーカ部、AR…投影範囲、CI…コンテンツ画像、FR…額縁、LT…照明画像、SB…システムバス。
Claims (15)
- 入力される画像情報に応じた第1の画像を表示する表示素子を有した表示手段と、
上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影手段と、
照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、
上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、
上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、
上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、
上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段と、
上記画像合成手段で表示させた合成画像を上記投影手段により上記被投影面に投影させる投影制御手段と
を備えたことを特徴とする投影装置。 - 上記画像合成手段は、上記第1の領域の形状に合わせて上記合成画像中の上記第1の画像の形状を加工することを特徴とする請求項1記載の投影装置。
- 上記取得手段は、上記第1の画像を投影する範囲を含んで上記投影面を撮影する撮像手段を含み、当該撮像手段で撮影した画像から上記第1の画像を投影する範囲の形状を取得することを特徴とする請求項1または2記載の投影装置。
- 上記取得手段は、上記撮像手段で撮影した画像により上記被投影面内で第1の画像を投影する範囲の周囲の面情報を取得し、
上記表示制御手段は、上記取得手段で取得した面情報に基づいて上記合成画像中の上記第2の画像の表示態様を補正する
ことを特徴とする請求項3記載の投影装置。 - 上記取得手段は、上記撮像手段で撮影した画像により上記被投影面内で第1の画像を投影する範囲内の面情報を取得し、
上記画像合成手段は、上記取得手段で取得した面情報に基づいて上記合成画像の表示態様を補正する
ことを特徴とする請求項3記載の投影装置。 - 上記投影制御手段は、上記投影手段での投影をさせた状態で、上記撮像手段で撮影し、当該撮像手段で撮影した画像から上記第1の画像を投影する範囲の位置を取得し、上記合成画像の投影位置を調整させることを特徴とする請求項3乃至5いずれか記載の投影装置。
- 上記被投影面までの距離を測定する測距手段をさらに備え、
上記投影制御手段は、上記測距手段で測定した距離に基づいて上記合成画像を上記被投影面に投影させる
ことを特徴とする請求項1乃至6いずれか記載の投影装置。 - 上記取得手段は、上記被投影面内で上記第1の画像を投影する範囲の形状の指定をユーザに促し、ユーザにより指定された形状を上記第1の画像を投影する範囲の形状として取得することを特徴とする請求項1または2記載の投影装置。
- 上記照明画像記憶手段は、表示態様が異なる複数の第2の画像の情報を記憶し、
上記複数の第2の画像の情報の指定をユーザに促して指定させる照明画像指定手段をさらに備え、
上記画像合成手段は、上記照明画像指定手段で指定された第2の画像の情報により上記合成画像を生成して上記表示素子で表示させる
ことを特徴とする請求項1乃至8いずれか記載の投影装置。 - 上記画像合成手段は、上記第1の画像から得られる特性情報に基づいて、上記第2の画像の態様を決定し、合成画像を生成して上記表示手段の表示素子で表示させることを特徴とする請求項1乃至9いずれか記載の投影装置。
- 上記投影手段は、投影する画像の画角を光学的に調整する画角調整手段をさらに備え、
上記投影制御手段は、上記画像調整手段により合成画像中の上記第1の画像を上記被投影面内で上記第1の画像を投影する範囲に合わせて投影させる
ことを特徴とする請求項1乃至10いずれか記載の投影装置。 - 上記画像合成手段は、上記表示素子で表示させる上記合成画像の範囲を可変することを特徴とする請求項1乃至10いずれか記載の投影装置。
- 入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた投影装置を制御する投影制御装置であって、
照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段と、
上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段と、
上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段と、
上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段と、
上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像情報を生成して上記投影装置に出力する画像合成手段と
を備えたことを特徴とする投影制御装置。 - 入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた投影装置での投影制御方法であって、
照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶工程と、
上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得工程と、
上記取得工程で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当工程と、
上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当工程と、
上記第1及び第2の割当工程でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成工程と、
上記画像合成工程で表示させた合成画像を上記投影部により上記被投影面に投影させる投影制御工程と
を有したことを特徴とする投影制御方法。 - 入力される画像情報に応じた第1の画像を表示する表示素子を有した表示部、及び上記表示素子で表示する画像に応じた光像を形成し、被投影面に向けて投影する投影部を備えた装置が内蔵したコンピュータが実行するプログラムであって、
上記コンピュータを、
照明効果を与える照明用の第2の画像の情報を記憶した照明画像記憶手段、
上記被投影面内で上記第1の画像を投影する範囲の形状を取得する取得手段、
上記取得手段で取得した形状により上記表示素子の表示可能領域内に上記第1の画像を表示する第1の領域を割り当てる第1の割当手段、
上記表示素子の表示可能領域内で上記第1の領域の外側の領域を含んで上記第2の画像を表示する第2の領域を割り当てる第2の割当手段、
上記第1及び第2の割当手段でそれぞれ割り当てた結果に基づき、上記第1の画像と上記第2の画像の合成画像を生成して上記表示手段の表示素子で表示させる画像合成手段、及び
上記画像合成手段で表示させた合成画像を上記投影部により上記被投影面に投影させる投影制御手段
として機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012276799A JP2014119701A (ja) | 2012-12-19 | 2012-12-19 | 投影装置、投影制御装置、投影制御方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012276799A JP2014119701A (ja) | 2012-12-19 | 2012-12-19 | 投影装置、投影制御装置、投影制御方法及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2014119701A true JP2014119701A (ja) | 2014-06-30 |
Family
ID=51174550
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012276799A Pending JP2014119701A (ja) | 2012-12-19 | 2012-12-19 | 投影装置、投影制御装置、投影制御方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2014119701A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016147236A1 (ja) * | 2015-03-19 | 2016-09-22 | パナソニックIpマネジメント株式会社 | 照明装置 |
JP2022500917A (ja) * | 2018-09-13 | 2022-01-04 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | オーディオビジュアルデータを処理するための装置及び方法 |
CN115334293A (zh) * | 2022-07-11 | 2022-11-11 | 岚图汽车科技有限公司 | 显示系统及其投影控制方法、主副显示系统 |
-
2012
- 2012-12-19 JP JP2012276799A patent/JP2014119701A/ja active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016147236A1 (ja) * | 2015-03-19 | 2016-09-22 | パナソニックIpマネジメント株式会社 | 照明装置 |
JP2022500917A (ja) * | 2018-09-13 | 2022-01-04 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | オーディオビジュアルデータを処理するための装置及び方法 |
JP7519991B2 (ja) | 2018-09-13 | 2024-07-22 | コーニンクレッカ フィリップス エヌ ヴェ | オーディオビジュアルデータを処理するための装置及び方法 |
CN115334293A (zh) * | 2022-07-11 | 2022-11-11 | 岚图汽车科技有限公司 | 显示系统及其投影控制方法、主副显示系统 |
CN115334293B (zh) * | 2022-07-11 | 2023-10-13 | 岚图汽车科技有限公司 | 显示系统及其投影控制方法、主副显示系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9459820B2 (en) | Display processing apparatus, display processing method, and computer program product | |
JP6224822B2 (ja) | 毛髪コンサルテーションツール装置及び方法 | |
US10121271B2 (en) | Image processing apparatus and image processing method | |
CN107193172A (zh) | 投影装置、投影控制方法以及记录介质 | |
JP2007078863A (ja) | 画像表示装置 | |
JP2006293087A (ja) | 映像投射装置、映像出力装置 | |
JP2014119701A (ja) | 投影装置、投影制御装置、投影制御方法及びプログラム | |
JP2006285763A (ja) | 被写体についての陰影のない画像を生成する方法および装置、並びにそれに用いる白色板 | |
JP2014095965A (ja) | 表示処理装置、表示処理方法、及びプログラム | |
JP2009216767A (ja) | プロジェクタ | |
JP6914969B2 (ja) | 投射型映像表示装置 | |
JP6155547B2 (ja) | 投影装置、投影方法及びプログラム | |
JP4982574B2 (ja) | 表示装置及びその制御方法 | |
JP5408175B2 (ja) | 投影装置、投影方法及びプログラム | |
JP2019016894A (ja) | 表示装置、画像処理装置、およびそれらの制御方法ならびに表示システム | |
JP6106969B2 (ja) | 投影装置、ポインタ装置及び投影システム | |
CN108206947B (zh) | 投影装置、投影方法以及记录媒介 | |
JP2012199836A (ja) | 撮像装置および撮像プログラム | |
JP2003198867A (ja) | プロファイルを作成するプログラム、および、プロファイル作成システム | |
JP6776619B2 (ja) | 投影装置、投影制御方法及びプログラム | |
JP2022160498A (ja) | 投影制御装置、投影装置、投影制御方法及びプログラム | |
JP2008083247A (ja) | 映像生成装置 | |
JP6519095B2 (ja) | コンテンツ出力システム、コンテンツ出力装置、コンテンツ出力方法及びプログラム | |
JP2009222958A (ja) | 色むら補正用データ生成装置、および色むら補正用データ生成方法 | |
JP5211703B2 (ja) | プロジェクタ |