JP7062751B2

JP7062751B2 - 投影制御装置、投影装置、投影制御方法、及び投影制御プログラム

Info

Publication number: JP7062751B2
Application number: JP2020502879A
Authority: JP
Inventors: 正樹荒井
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2018-02-28
Filing date: 2019-01-30
Publication date: 2022-05-06
Anticipated expiration: 2039-01-30
Also published as: JPWO2019167527A1; WO2019167527A1

Description

本発明は、投影制御装置、投影装置、投影制御方法、及び投影制御プログラムに関する。

特許文献１－３には、表示すべき画像情報に基づく本体画像と、この本体画像の周囲において特定色の光のみが投写される余白画像とを含む投影像を投影可能な投影装置が記載されている。

特許文献１には、ジェスチャ認識の精度を上げるために余白画像を設けることが記載されている。

特許文献２には、投影像として本体画像のみを投影するモードと、投影像として本体画像と余白画像とを投影するモードとを切り替える投影装置が記載されている。この投影装置は、本体画像のみを投影するモードにおいて本体画像に障害物が重なって本体画像が見えなくなる状況になると、本体画像を縮小することで余白画像を生成し、本体画像に障害物が重ならないようにしている。

特許文献３には、余白画像が投影された部分にコメント等が記入されたことを撮影部の撮影画像によって検知し、このコメントの視認性を上げるために、余白画像の色を制御する投影装置が記載されている。

日本国特開２０１２－０６５００５号公報日本国特開２０１３－０６４８２７号公報日本国特開２０１７－１９８７７９号公報

投影装置においては、投影像を含む範囲を撮影して得た撮影画像を解析することで、スクリーンの前で行われた特定の動き（ジェスチャ）を認識し、その認識結果に応じて投影像を変更することが行われる。しかし、投影装置の使用される環境は暗いことが多く、環境によってはジェスチャを認識できない可能性がある。

特許文献１と特許文献３に記載された投影装置のように、余白画像が常に投影される構成では、本体画像の視認性が低下する。また、本体画像の大きさに制限がかかってしまう。

特許文献２には、余白画像を生成するモードと余白画像を生成しないモードとを切り替えることが記載されている。しかし、この切り替えは、本体画像に障害物が重ならないようにすることが目的であり、ジェスチャ認識の精度向上を目的としていない。

本発明は、上記事情に鑑みてなされたものであり、投影像の視認性向上とジェスチャ認識精度の向上とを両立させることのできる投影制御装置、これを備える投影装置、投影制御方法、及び投影制御プログラムを提供することを目的とする。

本発明の投影制御装置は、画像を被投影面に投影する投影部と、上記投影部から上記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、上記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、上記撮影部により撮影された撮影画像データから、上記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出部と、上記動体検出部で検出された上記動体領域から予め決められた物体形状を認識する認識部と、上記動体領域の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定部と、上記投影部から上記被投影面に投影させる画像を制御する制御部と、を備え、上記制御部は、上記投影部から上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記動体検出部が上記動体領域を検出したとき、上記判定部が上記条件を満たすと判定した場合には、上記認識部によって認識された上記物体形状に基づいて、上記投影部から上記投影可能範囲に投影される画像を制御し、上記判定部が上記条件を満たさないと判定した場合には、上記投影部から、上記第一の画像の周縁に隣接する、少なくとも上記動体領域に対応する領域を含む第二の画像を上記投影可能範囲に投影させて、上記認識部による上記物体形状の認識を可能にする
ものである。

本発明の投影装置は、上記投影制御装置と、上記投影部と、を備えるものである。

本発明の投影装置は、上記投影制御装置と、上記投影部と、上記撮影部と、を備えるものである。

本発明の投影制御方法は、画像を被投影面に投影する投影部と、上記投影部から上記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、上記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、を備える投影装置の投影制御方法であって、上記撮影部により撮影された撮影画像データから、上記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出ステップと、上記動体検出ステップで検出された上記動体領域から予め決められた物体形状を認識する認識ステップと、上記動体領域の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、上記投影部から上記被投影面に投影させる画像を制御する制御ステップと、を備え、上記制御ステップでは、上記投影部から上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記動体検出ステップで上記動体領域を検出したとき、上記判定ステップにおいて上記条件を満たすと判定された場合には、上記認識ステップによって認識された上記物体形状に基づいて、上記投影部から上記投影可能範囲に投影される画像を制御し、上記判定ステップにおいて、上記条件を満たさないと判定された場合には、上記投影部から、上記第一の画像の周縁に隣接する、少なくとも上記動体領域に対応する領域を含む第二の画像を上記投影可能範囲に投影させて、上記認識ステップにおける上記物体形状の認識を可能にするものである。

本発明の投影制御プログラムは、画像を被投影面に投影する投影部と、上記投影部から上記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、上記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、を備える投影装置の投影制御方法をコンピュータに実行させるための投影制御プログラムであって、上記撮影部により撮影された撮影画像データから、上記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出ステップと、上記動体検出ステップで検出された上記動体領域から予め決められた物体形状を認識する認識ステップと、上記動体領域の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、上記投影部から上記被投影面に投影させる画像を制御する制御ステップと、を備え、上記制御ステップでは、上記投影部から上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記動体検出ステップで上記動体領域を検出したとき、上記判定ステップにおいて上記条件を満たすと判定された場合には、上記認識ステップによって認識された上記物体形状に基づいて、上記投影部から上記投影可能範囲に投影される画像を制御し、上記判定ステップにおいて、上記条件を満たさないと判定された場合には、上記投影部から、上記第一の画像の周縁に隣接する、少なくとも上記動体領域に対応する領域を含む第二の画像を上記投影可能範囲に投影させて、上記認識ステップにおける上記物体形状の認識を可能にする処理をコンピュータに実行させるものである。

本発明によれば、投影像の視認性向上とジェスチャ認識精度の向上とを両立させることのできる投影制御装置、これを備える投影装置、投影制御方法、及び投影制御プログラムを提供することができる。

本発明の投影装置の一実施形態であるプロジェクタ１００の概略構成を示す模式図である。図１に示すプロジェクタ１００の表示部１の構成例を示す模式図である。投影部２０による投影可能範囲と撮影部３０による撮影範囲の関係を説明する模式図である。図１に示すプロジェクタ１００のシステム制御部１０の内部構成を示すブロック図である。図３に示す制御部１１の機能ブロック図である。図１に示すプロジェクタ１００の動作を説明するためのフローチャートである。投影可能範囲２０Ａに投影される画像の遷移状態を示す模式図である。投影可能範囲２０Ａに投影される画像の遷移状態を示す模式図である。図６のステップＳ９にて投影可能範囲２０Ａに投影される画像の変形例を示す模式図である。図１に示すプロジェクタ１００の別の動作を説明するためのフローチャートである。図１０のステップＳ１にて投影可能範囲２０Ａに投影された画像の例を示す模式図である。図１０のステップＳ９ｂにて投影可能範囲２０Ａに投影された画像の例を示す模式図である。図６のステップＳ９にて投影可能範囲２０Ａに投影される画像の変形例を示す模式図である。図１に示すプロジェクタ１００の動作の変形例を説明するためのフローチャートである。図５に示す制御部１１の機能ブロックの変形例を示す図である。図１５に示す制御部１１を含むプロジェクタ１００の動作を説明するためのフローチャートである。図１５のステップＳ１０ａにて投影可能範囲２０Ａに投影される画像の例を示す模式図である図１５に示す制御部１１を含むプロジェクタ１００の動作を説明するためのフローチャートである。

図１は、本発明の投影装置の一実施形態であるプロジェクタ１００の概略構成を示す模式図である。図２は、図１に示すプロジェクタ１００の表示部１の構成例を示す模式図である。

プロジェクタ１００は、スクリーンＳＣに画像を投影すると共に、スクリーンＳＣに投影された投影像を含む範囲を撮影可能に構成されている。

プロジェクタ１００は、表示部１と、投影光学系２と、共通光学系３と、光学部材４と、撮影光学系５と、撮像素子６と、全体を統括制御するシステム制御部１０と、を備える。表示部１、投影光学系２、光学部材４、及び共通光学系３により投影部２０が構成されている。撮像素子６、撮影光学系５、光学部材４、及び共通光学系３により撮影部３０が構成されている。

表示部１は、入力される投影用の画像データに基づいて投影用の画像を表示するものである。図２に示すように、表示部１は、光源ユニット４０と、光変調素子４４と、を備える。

光源ユニット４０は、赤色光を出射する赤色光源であるＲ光源４１ｒと、緑色光を出射する緑色光源であるＧ光源４１ｇと、青色光を出射する青色光源であるＢ光源４１ｂと、ダイクロイックプリズム４３と、Ｒ光源４１ｒとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｒと、Ｇ光源４１ｇとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｇと、Ｂ光源４１ｂとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｂと、を備えている。

ダイクロイックプリズム４３は、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂの各々から出射される光を同一光路に導くための光学部材である。すなわち、ダイクロイックプリズム４３は、コリメータレンズ４２ｒによって平行光化された赤色光を透過させて光変調素子４４に出射する。また、ダイクロイックプリズム４３は、コリメータレンズ４２ｇによって平行光化された緑色光を反射させて光変調素子４４に出射する。さらに、ダイクロイックプリズム４３は、コリメータレンズ４２ｂによって平行光化された青色光を反射させて光変調素子４４に出射する。このような機能を持つ光学部材としては、ダイクロイックプリズムに限らない。例えば、クロスダイクロイックミラーを用いてもよい。

Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂは、それぞれ、レーザ又はＬＥＤ（ＬｉｇｈｔＥｍｉｔｔｉｎｇＤｉｏｄｅ）等の発光素子が用いられる。光源ユニット４０に含まれる光源の数は１つ、２つ、又は４つ以上であってもよい。

光変調素子４４は、ダイクロイックプリズム４３から出射された光を画像データに基づいて空間変調し、空間変調した画像光（赤色画像光、青色画像光、及び緑色画像光）を図１の投影光学系２に出射する。

図２は、光変調素子４４としてＤＭＤ（ＤｉｇｉｔａｌＭｉｃｒｏｍｉｒｒｏｒＤｅｖｉｃｅ）を用いた例であるが、光変調素子４４としては、例えば、ＬＣＯＳ（Ｌｉｑｕｉｄｃｒｙｓｔａｌｏｎｓｉｌｉｃｏｎ）、ＭＥＭＳ（ＭｉｃｒｏＥｌｅｃｔｒｏＭｅｃｈａｎｉｃａｌＳｙｓｔｅｍｓ）素子、又は液晶表示素子等を用いることも可能である。

表示部１は、自発光型の有機ＥＬ（ｅｌｅｃｔｒｏ－ｌｕｍｉｎｅｓｃｅｎｃｅ）表示素子を用いて画像を表示し、表示した画像を投影光学系２に入射させるものであってもよい。また、レーザ光を走査することで画像の表示を行うものを用いてもよい。

光学部材４は、例えばハーフミラー、ビームスプリッタ―、又は偏光部材等によって構成されている。光学部材４は、投影光学系２を通過した画像光を透過させて共通光学系３に導き、且つ、共通光学系３を通過した被写体光を反射させて撮影光学系５に導く。

投影光学系２は、表示部１からの画像光が入射される光学系であり、少なくとも１つのレンズを含む。投影光学系２を通過した光は光学部材４に入射され、光学部材４を透過して共通光学系３に入射される。

共通光学系３は、投影光学系２を通過した光を投影対象物であるスクリーンＳＣに投影し、且つ、スクリーンＳＣ側の被写体（投影部２０によって投影された投影像を含む範囲の被写体）を結像させる光学系であり、少なくとも１つのレンズを含んで構成されている。

スクリーンＳＣ側から共通光学系３に入射した被写体光は、共通光学系３を通過し、光学部材４にて反射されて、撮影光学系５に入射される。

撮影光学系５は、共通光学系３を通過して光学部材４にて反射した被写体光を撮像素子６に結像させるための光学系である。撮影光学系５は、撮像素子６の前方に配置されており、光学部材４を透過した被写体光を集光して撮像素子６に結像させる。撮影光学系５は、少なくとも１つのレンズを含んで構成されている。なお、ここでいう「前方」とは、撮像素子６から撮影光学系５に向かって離間する方向をいう。

撮像素子６は、ＣＣＤ（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ）イメージセンサ又はＣＭＯＳ（ＣｏｍｐｌｅｍｅｎｔａｒｙＭｅｔａｌＯｘｉｄｅＳｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等が用いられる。

図３は、投影部２０による投影可能範囲と撮影部３０による撮影範囲の関係を説明する模式図である。

図３に示すように、スクリーンＳＣには、投影部２０が画像を投影することのできる最大の範囲である投影可能範囲２０Ａが存在し、撮影部３０による撮影範囲３０Ａがこの投影可能範囲２０Ａを含み投影可能範囲２０Ａよりも少し大きい範囲として設定されている。なお、撮影範囲３０Ａは、投影可能範囲２０Ａと同じであってもよい。

投影可能範囲２０Ａは、表示部１に入力される投影用の画像データに基づく本体画像（第一の画像）が投影される領域であり、且つ投影可能範囲２０Ａよりも小さい第一の領域２０Ｂと、第一の領域２０Ｂと投影可能範囲２０Ａの周縁との間の領域であり、且つ表示部１に入力される投影用の画像データとは無関係のジェスチャ認識用の余白画像（第二の画像）が投影可能な領域である第二の領域２０Ｃと、により構成されている。

プロジェクタ１００では、投影可能範囲２０Ａの周辺部（例えば第二の領域２０Ｃ）と重なる位置において特定のジェスチャを行うことで、このジェスチャの認識が行われ、そのジェスチャに対応した制御が行われる。

図４は、図１に示すプロジェクタ１００のシステム制御部１０の内部構成を示すブロック図である。

システム制御部１０は、制御部１１と、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）１２と、ＲＡＭ（ＲａｎｄｏｍＡｃｃｓｅｓｓＭｅｍｏｒｙ）１３と、を備える。

制御部１１は、ハードウェア的な構造は、各種のプロセッサである。各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（ＣｅｎｔｒａｌＰｒｏｓｅｓｓｉｎｇＵｎｉｔ）、ＦＰＧＡ（ＦｉｅｌｄＰｒｏｇｒａｍｍａｂｌｅＧａｔｅＡｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（ＰｒｏｇｒａｍｍａｂｌｅＬｏｇｉｃＤｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（ＡｐｐｌｉｃａｔｉｏｎＳｐｅｃｉｆｉｃＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。

制御部１１は、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。

制御部１１は、表示部１の光変調素子４４に入力する投影用の画像データを制御することで、投影部２０からスクリーンＳＣに投影させる投影像の内容、投影像の各画素の輝度、又は投影像の各画素の彩度等を制御する。また、制御部１１は、撮像素子６を制御して、撮像素子６による被写体の撮影を実行する。

図５は、図４に示す制御部１１の機能ブロック図である。制御部１１は、投影制御プログラムを含むアプリケーションプログラムを実行することにより、画像処理部１１Ａ、動体検出部１１Ｂ、認識部１１Ｃ、判定部１１Ｄ、及び制御部１１Ｅを備える投影制御装置として機能する。

画像処理部１１Ａは、撮像素子６が図３に示す撮影範囲３０Ａを撮像して得た撮像画像信号を取得し、これを処理して撮影画像データを生成する。

動体検出部１１Ｂは、画像処理部１１Ａによって生成された撮影画像データに基づいて、投影可能範囲２０Ａ内にある人等の動体を検出する。

例えば、動体検出部１１Ｂは、連続して撮影して得られる複数の撮影画像データのうちの投影可能範囲２０Ａ内の画像データの特徴点同士を比較し、２つの画像データ間で動きがある部分を動体として検出する。

認識部１１Ｃは、画像処理部１１Ａにより生成された撮影画像データのうち、動体検出部１１Ｂによって動体として検出された部分（以下、動体領域という）から、予め決められた特定の物体形状を認識する。

この特定の物体形状は、プロジェクタ１００に対して投影像の変更の指示（例えばプレゼンテーションを行っているときの表示画像の変更指示、表示画像のズーム指示、又は表示画像に含まれるアニメーションの動作開始指示等）を行うための例えば人の手の形状としてＲＯＭ１２に予め記憶されている。

具体的には、認識部１１Ｃは、動体領域から人の肌の色の領域をサーチし、サーチした領域の輪郭と物体形状とのパターンマッチングを行って、撮影画像データにこの特定の物体形状が含まれるか否かの認識を行う。

判定部１１Ｄは、撮影画像データの動体領域が、上記の物体形状を認識するために必要な条件（以下、物体認識条件という）を満たすか否かを判定する。

物体認識条件としては、人の肌の色を検出できる程度の輝度があること、人の肌の色を検出できる程度の彩度があること、又は、人の肌の色を検出できる程度の輝度及び彩度があること等が挙げられる。

動体領域の輝度とは、動体領域を構成する全画素の輝度の平均値又は中央値等の輝度の代表値を示す。動体領域の彩度とは、動体領域を構成する全画素の彩度の平均値又は中央値等の彩度の代表値を示す。

制御部１１Ｅは、判定部１１Ｄによる判定結果と、認識部１１Ｃによる認識結果とに基づいて、投影部２０から投影可能範囲２０Ａに投影させる画像を制御する。

図６は、図１に示すプロジェクタ１００の動作を説明するためのフローチャートである。図７及び図８は、投影可能範囲２０Ａに投影される画像の遷移状態を示す模式図である。

まず、制御部１１は、使用者から指定された投影用の画像データに基づく本体画像を投影部２０によってスクリーンＳＣの投影可能範囲２０Ａのうちの第一の領域２０Ｂに投影させる（ステップＳ１）。図７は、ステップＳ１にて、第一の領域２０Ｂに本体画像ＩＭ１が投影された状態を示している。

ステップＳ１にて投影が開始されると、制御部１１は、スクリーンＳＣに投影された投影像の撮影を撮影部３０に行わせる（ステップＳ２）。

ステップＳ２の撮影で撮像素子６から撮像画像信号が出力されると、画像処理部１１Ａによってこれが処理されて撮影画像データが生成され、この撮影画像データが動体検出部１１Ｂにより取得される（ステップＳ３）。

動体検出部１１Ｂは、取得した撮影画像データから動体領域を検出する処理を行い、動体領域が検出されなかった場合（ステップＳ４：ＮＯ）には、ステップＳ２に処理が戻る。

動体領域が検出された場合（ステップＳ４：ＹＥＳ）には、判定部１１Ｄが、検出された動体領域が物体認識条件を満たすか否かを判定する（ステップＳ５）。図７には、撮影画像データから検出される動体領域に対応する動体ＭＶが示されている。

検出された動体領域が物体認識条件を満たすと判定されると（ステップＳ５：ＹＥＳ）、認識部１１Ｃは、検出された動体領域から上記の特定の物体形状の認識を行う（ステップＳ６）。

ステップＳ６の処理の結果、特定の物体形状が認識されなかった場合（ステップＳ７：ＮＯ）にはステップＳ２に処理が戻る。一方、特定の物体形状が認識された場合（ステップＳ７：ＹＥＳ）にはステップＳ８の処理が行われる。

ステップＳ８において、制御部１１Ｅは、ステップＳ６にて認識された物体形状に対応して予め決められている制御を実行し、ステップＳ１に処理を戻す。この制御は、例えば、表示部１に入力する投影用の画像データを別のものに変更する制御、又は、表示部１に入力している投影用の画像データの輝度を変更する制御等の投影像の変更に関する制御である。

ステップＳ５において、検出された動体領域が物体認識条件を満たさないと判定されると（ステップＳ５：ＮＯ）、制御部１１Ｅは、投影可能範囲２０Ａの第二の領域２０Ｃに投影部２０から余白画像を投影させる（ステップＳ９）。

図８は、ステップＳ９にて、スクリーンＳＣの第二の領域２０Ｃに余白画像ＩＭ２が投影された状態を示している。図８に示すように、ステップＳ９の処理により、投影可能範囲２０Ａには、本体画像ＩＭ１の周縁の全てに隣接する形で余白画像ＩＭ２が投影された状態となる。なお、ここでいう「隣接する」とは、本体画像ＩＭ１の周縁に余白画像ＩＭ２の一部が重畳されて投影される状態も含むものとする。

余白画像は、第二の領域２０Ｃの明るさを補うために投影される画像であり、例えば、単一の色相で構成された単色の画像が用いられる。余白画像としては、光源ユニット４０からの光をなるべく多く透過することのできる白色の画像、又は、人の肌の色の補色の画像等が好ましく用いられる。なお、ここでいう「単色の画像」とは、一つの色相に限定されるものではなく、その他の種々の色相のものを含むことはいうまでもない。

この余白画像の輝度又は彩度の少なくとも一方は、物体認識条件を満たすことができる程度の予め決められた値（目標値）に設定される。

ステップＳ９にて余白画像が投影されると、制御部１１は撮影部３０に撮影を行わせる（ステップＳ１０）。そして、このステップＳ１０の撮影で撮像素子６から撮像画像信号が出力されると、画像処理部１１Ａによってこれが処理されて撮影画像データが生成され、この撮影画像データに基づいて動体検出部１１Ｂにより動体が検出される（ステップＳ１１）。ステップＳ１１の後は、ステップＳ６以降の処理が行われる。

以上のように、プロジェクタ１００によれば、第一の領域２０Ｂにのみ本体画像が投影されている状態において、使用者が第二の領域２０Ｃと重なる位置においてジェスチャを行った場合に、例えばこの第二の領域２０Ｃの明るさがジェスチャの認識に必要な明るさに達していなければ、図８に示すように、第二の領域２０Ｃに余白画像ＩＭ２が追加投影される。この余白画像ＩＭ２を構成している光によって、第二の領域２０Ｃの明るさが向上するため、ジェスチャの認識精度を向上させることができる。

なお、図６のステップＳ９において、制御部１１Ｅは、第二の領域２０Ｃの全体に余白画像を投影させるのではなく、図９に示すように、第二の領域２０Ｃのうちの動体領域に対応する領域（動体ＭＶと重なっている領域）を含む一部分にのみ余白画像ＩＭ２を投影させてもよい。この構成によれば、スクリーンＳＣに投影される投影像全体の変化を少なくすることができ、本体画像の視認性を向上させることが可能となる。

ここまでの説明では、図７に示したように、本体画像ＩＭ１を第一の領域２０Ｂに投影することを前提としたが、プロジェクタ１００では、本体画像ＩＭ１を投影可能範囲２０Ａの全体に投影することも可能である。以下では、この場合のプロジェクタ１００の動作について説明する。

図１０は、図１に示すプロジェクタ１００の別の動作を説明するためのフローチャートである。図１０に示すフローチャートは、ステップＳ９がステップＳ９ａとステップＳ９ｂに変更された点を除いては、図６に示すフローチャートと同じである。図１０において図６と同じ処理には同一符号を付して説明を省略する。

図１１は、図１０のステップＳ１にて投影可能範囲２０Ａに投影された画像の例を示す模式図である。図１２は、図１０のステップＳ９ｂにて投影可能範囲２０Ａに投影された画像の例を示す模式図である。

図１１のステップＳ５の判定がＮＯの場合には、制御部１１Ｅは、図１２に示すように、投影可能範囲２０Ａに投影中の本体画像ＩＭ１を縮小してこの本体画像ＩＭ１を第一の領域２０Ｂに投影させ（ステップＳ９ａ）、更に、本体画像ＩＭ１を縮小することで空いた第二の領域２０Ｃに、余白画像ＩＭ２を投影させる（ステップＳ９ｂ）。

このステップＳ９ａとステップＳ９ｂの処理により、図８と同じ状態が得られる。このため、ジェスチャの認識精度を向上させることができる。なお、ステップＳ９ｂにおいて、制御部１１Ｅは、図９にて例示したように、動体ＭＶと重なる領域だけ余白画像ＩＭ２を投影させてもよい。

図１０の動作によれば、本体画像をより大きく表示させることができるため、投影像の鑑賞性能を高めることができる。

制御部１１Ｅは、本体画像と余白画像をスクリーンＳＣに投影させる場合には、図１３に示すように、本体画像ＩＭ１と余白画像ＩＭ２の境界に線Ｌの画像を追加して投影させることが好ましい。線Ｌが追加されることで、本体画像と余白画像の境目を容易に認識することができるため、本体画像の鑑賞性能を高めることができる。

なお、制御部１１Ｅは、線Ｌを投影像に追加する代わりに、余白画像の輝度又は彩度の少なくとも一方を、本体画像と異ならせることで、投影像の鑑賞性能を高めてもよい。

例えば、制御部１１Ｅは、余白画像の輝度又は彩度の少なくとも一方を、上記の目標値を下限値として、本体画像から遠ざかるほど、つまり、投影可能範囲２０Ａの周縁に近づくほど、小さくする。このようにすることで、本体画像と余白画像の境目が目立たなくなるため、投影像全体の鑑賞性能を高めることができる。

また、制御部１１Ｅは、余白画像を投影させる際に、余白画像の輝度又は彩度の少なくとも一方を、上記の目標値よりも低い値からこの目標値となるまで徐々に変化させてもよい。このようにすることで、余白画像が突然表示されるのを防ぐことができるため、投影像全体の鑑賞性能を高めることができる。

上述した余白画像の輝度又は彩度の少なくとも一方の目標値は、予め決められた固定値としているが、これに限らない。例えば、この目標値を、図６又は図１０のステップＳ４にて検出された動体領域の明るさに基づいて決定してもよい。具体的には、動体領域の明るさが暗いほど、輝度の目標値を高く設定し、動体領域の明るさが暗いほど、彩度の目標値を高く設定すればよい。このようにすることで、物体認識条件をより確実に満たすことが可能となり、ジェスチャ認識精度をより向上させることができる。

また、余白画像の輝度又は彩度の少なくとも一方の目標値を事前に決めるのではなく、物体認識条件を満たす状態となるまで余白画像の輝度又は彩度の少なくとも一方を初期値から上げていくようにしてもよい。この場合の動作を、図１４を参照して説明する。

図１４は、図１に示すプロジェクタ１００の動作の変形例を説明するためのフローチャートである。図１４に示すフローチャートは、図６に示すフローチャートに、ステップＳ１２及びステップＳ１３が追加され、ステップＳ９がステップＳ９ｃに変更されたものである。図１４において図６と同じ処理には同一符号を付して説明を省略する。

ステップＳ５の判定がＮＯの場合には、制御部１１Ｅが、ステップＳ９ｃにて、第二の領域２０Ｃに余白画像を投影させる。このとき、制御部１１Ｅは、余白画像の輝度又は彩度の少なくとも一方を、予め決められた初期値に設定する。

ステップＳ９ｃにて余白画像が投影された後は、ステップＳ１０、ステップＳ１１の処理が行われる。ステップＳ１１の後、判定部１１Ｄは、ステップＳ１１にて検出された動体領域が物体認識条件を満たすか否かを判定する（ステップＳ１２）。

ステップＳ１２の判定がＮＯとなると、制御部１１Ｅは、投影中の余白画像の輝度又は彩度の少なくとも一方の値を所定量だけ増やす（ステップＳ１３）。ステップＳ１３の後はステップＳ１０に処理が戻る。ステップＳ１２の判定がＹＥＳとなると、ステップＳ６以降の処理が行われる。ここでいう「所定量」とは、特定の輝度（値）又は彩度に限定されるものではなく、その他の種々の値が想定され、例えば、投影装置の使用される環境に応じて適当な輝度（値）及び／又は彩度を設定することが可能である。

この構成によれば、より確実に物体認識条件を満たす状態を得ることができ、ジェスチャ認識精度を向上させることができる。

ここまでは、動体検出部１１Ｂによって検出された動体が１つの例を示したが、動体が複数検出されることも考えられる。この場合には、判定部１１Ｄは、撮影画像データにおける複数の動体領域のうちの最も暗いものが上記の物体認識条件を満たすか否かを判定するのが好ましい。

このように、最も暗い動体領域が上記の物体認識条件を満たす状態になるように余白画像を投影すれば、他の動体領域についても物体認識条件を満たす状態を得ることができる。この構成によれば、動体領域毎に個別に物体認識条件を満たすか否かの判定を行う必要がないため、処理を高速化することができる。

図１５は、図５に示す制御部１１の機能ブロックの変形例を示す図である。図１５において図５と同じ構成には同一符号を付して説明を省略する。

図１５に示す制御部１１は、投影制御プログラムを含むアプリケーションプログラムを実行することにより、画像処理部１１Ａ、動体検出部１１Ｂ、認識部１１Ｃ、判定部１１Ｄ、制御部１１Ｅ、及び撮影制御部１１Ｆを備える投影制御装置として機能する。

撮影制御部１１Ｆは、本体画像と余白画像がスクリーンＳＣに投影されている状態において、本体画像を余白画像と同じ画像に変更した状態にて、撮影部３０に撮影範囲３０Ａを撮影させる。

図１５に示す制御部１１の認識部１１Ｃは、撮影制御部１１Ｆの制御によって行われた撮影により得られる撮影画像データから動体検出部１１Ｂにより動体が検出された場合に、この動体から上記の特定の物体形状を認識する。

図１６は、図１５に示す制御部１１を含むプロジェクタ１００の動作を説明するためのフローチャートである。図１６に示すフローチャートは、図６に示すフローチャートのステップＳ１０がステップＳ１０ａ及びステップＳ１０ｂに変更されたものである。図１６において図６と同じ処理には同一符号を付して説明を省略する。

制御部１１ＥがステップＳ９において余白画像を投影させると、撮影制御部１１Ｆは、投影中の本体画像を余白画像と同じ単色の画像に変更し、その状態にて、撮影部３０により撮影を行わせる（ステップＳ１０ａ）。

ステップＳ１０ａの処理が行われると、図１７に示すように、投影可能範囲２０Ａの第二の領域２０Ｃには余白画像ＩＭ２が投影され、第一の領域２０Ｂには、余白画像ＩＭ２と同じ色相で同じ輝度及び彩度の画像ＩＭ３が投影された状態となる。ステップＳ１０ａの後、撮影制御部１１Ｆは、第一の領域２０Ｂに投影中の画像ＩＭ３を元の本体画像に戻す（ステップＳ１０ｂ）。

図１７に示す状態で撮影部３０により撮影をして撮影画像データが得られると、この撮影画像データから動体検出部１１Ｂによって動体領域が検出され（ステップＳ１１）、この動体領域から、認識部１１Ｃによって特定の物体形状の認識が行われる（ステップＳ６）。その後、ステップＳ７以降の処理が行われる。

図１７には、撮影画像データから検出された動体領域に対応する動体ＭＶが、第一の領域２０Ｂと第二の領域２０Ｃの境界を跨いで存在している例が示されている。このように、第一の領域２０Ｂと第二の領域２０Ｃの境界を跨いで動体ＭＶが存在しているケースでは、ステップＳ９にて余白画像の投影が行われ、動体領域の明るさがアップしても、動体領域の一部の部分は本体画像と重なってしまっており、物体認識条件が満たされない可能性がある。

そこで、このようなケースでは、投影可能範囲２０Ａ全体に、余白画像ＩＭ２及びこれと同じ画像ＩＭ３を投影させた状態にて撮影を行い、その撮影で得られる撮影画像データから特定の物体形状の認識を行うことで、物体認識条件を満たした状態にてステップＳ６の処理を実施することができ、ジェスチャ認識精度を高めることができる。

なお、図１０において、ステップＳ１０の代わりに、図１６のステップＳ１０ａ及びステップＳ１０ｂの処理を行っても同様の効果を得ることができる。

また、図１６のステップＳ５の判定がＮＯのときの動作と、図６のステップＳ５の判定がＮＯのときの動作とを切り替えられるようにしてもよい。

図１８は、図１５に示す制御部１１を含むプロジェクタ１００の動作を説明するためのフローチャートである。図１８に示すフローチャートは、図１６に示すフローチャートに、ステップＳ２０と、図６のステップＳ９と、図６のステップＳ１０とが追加されたものである。図１８において図１６及び図６と同じ処理には同一符号を付して説明を省略する。

ステップＳ５の判定がＮＯとなる場合に、検出されている動体領域が第一の領域２０Ｂと第二の領域２０Ｃの境界にあると判定されると（ステップＳ２０：ＹＥＳ）、ステップＳ９、ステップＳ１０ａ、及びステップＳ１０ｂの処理の後、ステップＳ１１の処理が行われる。一方、検出されている動体領域が第一の領域２０Ｂと第二の領域２０Ｃの境界にないと判定されると（ステップＳ２０：ＮＯ）、ステップＳ９及びステップＳ１０の処理の後、ステップＳ１１の処理が行われる。このように、動体領域の位置によって図１７の投影状態を生成する制御を行うか否かを選択することで、ジェスチャ認識精度を向上させることができる。

以上説明してきたプロジェクタ１００は、投影部２０と撮影部３０とシステム制御部１０とを備えるものとしたが、撮影部３０は外部に設けられた構成であってもよい。この場合には、システム制御部１０が、プロジェクタ１００とは別に用意された撮影部３０と通信可能に接続される。

また、投影部２０と撮影部３０とパーソナルコンピュータ等の電子機器とを個別に用意して設置し、この電子機器と投影部２０及び撮影部３０とを通信可能とし、この電子機器にシステム制御部１０の機能を持たせた構成としてもよい。この構成によれば汎用のプロジェクタの改良のみでシステムを実現することができるため、システム構築に要するコストを下げることができる。また、図１に示すように、投影部２０、撮影部３０、及びシステム制御部１０が全て同一筐体内にある構成によれば、重複領域を高精度に補正することができる。また、投影部２０と撮影部３０と電子機器を個別に用意する場合と比較してシステム構築に要する費用を削減することができる。

以上説明してきたように、本明細書には以下の事項が開示されている。

（１）
投影部による画像の投影可能範囲を撮影部により撮影して得られる撮影画像データに基づいて、上記投影可能範囲内にある動体を検出する動体検出部と、
上記撮影画像データから予め決められた物体形状を認識する認識部と、
上記撮影画像データにおける上記動体の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定部と、
上記投影部から上記投影可能範囲に投影させる画像を制御する制御部と、を備え、
上記制御部は、上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記条件を満たすと上記判定部により判定された場合には、上記認識部によって認識された上記物体形状に基づいた制御を行い、上記条件を満たさないと上記判定部により判定された場合には、上記投影可能範囲に、上記第一の画像とは異なり且つ上記第一の画像の周縁の少なくとも一部に隣接する第二の画像を、投影させる投影制御装置。

（２）
（１）記載の投影制御装置であって、
上記制御部は、上記投影可能範囲の一部に上記第一の画像を投影させている状態において、上記条件を満たさないと上記判定部により判定された場合には、上記投影可能範囲のうちの上記第一の画像が未投影の部分に上記第二の画像を投影させる投影制御装置。

（３）
（１）又は（２）記載の投影制御装置であって、
上記制御部は、上記投影可能範囲の全部に上記第一の画像を投影させている状態において、上記条件を満たさないと上記判定部により判定された場合には、上記第一の画像を縮小し、上記投影可能範囲のうちの上記第一の画像が未投影の部分に上記第二の画像を投影させる投影制御装置。

（４）
（１）から（３）のいずれか１つに記載の投影制御装置であって、
上記第二の画像は単色の画像である投影制御装置。

（５）
（４）記載の投影制御装置であって、
上記制御部は、上記第二の画像の輝度又は彩度の少なくとも一方を、上記条件を満たすか否かの判定対象となった上記動体の部分の明るさに基づいて決定する投影制御装置。

（６）
（５）記載の投影制御装置であって、
上記判定部は、上記動体検出部により複数の動体が検出された場合には、上記撮影画像データにおける上記複数の動体の部分のうちの最も暗い部分が上記条件を満たすか否かを判定する投影制御装置。

（７）
（４）から（６）のいずれか１つに記載の投影制御装置であって、
上記制御部は、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を上記第一の画像と異ならせる投影制御装置。

（８）
（７）記載の投影制御装置であって、
上記制御部は、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を上記第一の画像から遠ざかるほど小さくする投影制御装置。

（９）
（４）から（８）のいずれか１つに記載の投影制御装置であって、
上記制御部は、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を目標値まで徐々に変化させる投影制御装置。

（１０）
（４）から（７）のいずれか１つに記載の投影制御装置であって、
上記制御部は、上記第二の画像を投影させる場合には、上記第一の画像と上記第二の画像の境界に線を追加する投影制御装置。

（１１）
（１）から（１０）のいずれか１つに記載の投影制御装置であって、
上記第一の画像と上記第二の画像が投影されている状態において、上記第一の画像を上記第二の画像と同じ画像に変更した状態にて上記撮影部に上記投影可能範囲を撮影させる撮影制御部を更に備え、
上記認識部は、その撮影により得られる撮影画像データから上記動体検出部により検出される動体から上記物体形状を認識する投影制御装置。

（１２）
（１）から（１１）のいずれか１つに記載の投影制御装置と、上記投影部と、を備える投影装置。

（１３）
（１）から（１１）のいずれか１つに記載の投影制御装置と、上記投影部と、上記撮影部と、を備える投影装置。

（１４）
投影部による画像の投影可能範囲を含む撮影範囲を撮影する撮影部により上記撮影範囲を撮影して得られる撮影画像データに基づいて、上記撮影範囲内にある動体を検出する動体検出ステップと、
上記撮影画像データから予め決められた物体形状を認識する認識ステップと、
上記撮影画像データにおける上記動体の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、
上記投影部から上記投影可能範囲に投影させる画像を制御する制御ステップと、を備え、
上記制御ステップでは、上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記条件を満たすと上記判定ステップにより判定された場合には、上記認識ステップによって認識された上記物体形状に基づいた制御を行い、上記条件を満たさないと上記判定ステップにより判定された場合には、上記投影可能範囲のうちの上記動体の部分に対応する領域を含む領域に、上記第一の画像とは異なる第二の画像を投影させる投影制御方法。

（１５）
（１４）記載の投影制御方法であって、
上記制御ステップでは、上記投影可能範囲の一部に上記第一の画像を投影させている状態において、上記条件を満たさないと上記判定ステップにより判定された場合には、上記投影可能範囲のうちの上記第一の画像が未投影の部分に上記第二の画像を投影させる投影制御方法。

（１６）
（１４）記載の投影制御方法であって、
上記制御ステップでは、上記投影可能範囲の全部に上記第一の画像を投影させている状態において、上記条件を満たさないと上記判定ステップにより判定された場合には、上記第一の画像を縮小し、上記投影可能範囲のうちの上記第一の画像が未投影の部分に上記第二の画像を投影させる投影制御方法。

（１７）
（１４）から（１６）のいずれか１つに記載の投影制御方法であって、
上記第二の画像は単色の画像である投影制御方法。

（１８）
（１７）記載の投影制御方法であって、
上記制御ステップでは、上記第二の画像の輝度又は彩度の少なくとも一方を、上記条件を満たすか否かの判定対象となった上記動体の部分の明るさに基づいて決定する投影制御方法。

（１９）
（１８）記載の投影制御方法であって、
上記判定ステップでは、上記動体検出ステップにより複数の動体が検出された場合には、上記撮影画像データにおける上記複数の動体の部分のうちの最も暗い部分が上記条件を満たすか否かを判定する投影制御方法。

（２０）
（１７）から（１９）のいずれか１つに記載の投影制御方法であって、
上記制御ステップでは、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を上記第一の画像と異ならせる投影制御方法。

（２１）
（２０）記載の投影制御方法であって、
上記制御ステップでは、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を上記第一の画像から遠ざかるほど小さくする投影制御方法。

（２２）
（１７）から（２１）のいずれか１つに記載の投影制御方法であって、
上記制御ステップでは、上記第二の画像を投影させる場合には、上記第二の画像の輝度又は彩度の少なくとも一方を目標値まで徐々に変化させる投影制御方法。

（２３）
（１７）から（２０）のいずれか１つに記載の投影制御方法であって、
上記制御ステップでは、上記第二の画像を投影させる場合には、上記第一の画像と上記第二の画像の境界に線を追加する投影制御方法。

（２４）
（１４）から（２３）のいずれか１つに記載の投影制御方法であって、
上記第一の画像と上記第二の画像が投影されている状態において、上記第一の画像を上記第二の画像と同じ画像に変更した状態にて上記撮影部に上記投影可能範囲を撮影させる撮影制御ステップを更に備え、
上記認識ステップでは、その撮影により得られる撮影画像データから上記動体検出ステップにより検出される動体から上記物体形状を認識する投影制御方法。

（２５）
投影制御方法をコンピュータに実行させるための投影制御プログラムであって、
上記投影制御方法は、
投影部による画像の投影可能範囲を含む撮影範囲を撮影する撮影部により上記撮影範囲を撮影して得られる撮影画像データに基づいて、上記撮影範囲内にある動体を検出する動体検出ステップと、
上記撮影画像データから予め決められた物体形状を認識する認識ステップと、
上記撮影画像データにおける上記動体の部分が、上記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、
上記投影部から上記投影可能範囲に投影させる画像を制御する制御ステップと、を備え、
上記制御ステップでは、上記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、上記条件を満たすと上記判定ステップにより判定された場合には、上記認識ステップによって認識された上記物体形状に基づいた制御を行い、上記条件を満たさないと上記判定ステップにより判定された場合には、上記投影可能範囲のうちの上記動体の部分に対応する領域を含む領域に、上記第一の画像とは異なる第二の画像を投影させる投影制御プログラム。

以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。

なお、本出願は、２０１８年２月２８日出願の日本特許出願（特願２０１８－０３５４７４）に基づくものであり、その内容は本出願の中に参照として援用される。

１００プロジェクタ
１表示部
４０光源ユニット
４１ｒＲ光源
４１ｇＧ光源
４１ｂＢ光源
４２ｒ、４２ｇ、４２ｂコリメータレンズ
４３ダイクロイックプリズム
４４光変調素子
２投影光学系
３共通光学系
４光学部材
５撮影光学系
６撮像素子
１０システム制御部
２０Ａ投影可能範囲
２０Ｂ第一の領域
２０Ｃ第二の領域
３０Ａ撮影範囲
１１制御部
１１Ａ画像処理部
１１Ｂ動体検出部
１１Ｃ認識部
１１Ｄ判定部
１１Ｅ制御部
１１Ｆ撮影制御部
１２ＲＯＭ
１３ＲＡＭ
２０投影部
３０撮影部
ＳＣスクリーン
ＭＶ動体
ＩＭ１本体画像
ＩＭ２余白画像
Ｌ線
ＩＭ３画像

Claims

画像を被投影面に投影する投影部と、
前記投影部から前記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、前記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、
前記撮影部により撮影された撮影画像データから、前記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出部と、
前記動体検出部で検出された前記動体領域から予め決められた物体形状を認識する認識部と、
前記動体領域の部分が、前記物体形状を認識するために必要な条件を満たすか否かを判定する判定部と、
前記投影部から前記被投影面に投影させる画像を制御する制御部と、を備え、
前記制御部は、前記投影部から前記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、前記動体検出部が前記動体領域を検出したとき、
前記判定部が前記条件を満たすと判定した場合には、前記認識部によって認識された前記物体形状に基づいて、前記投影部から前記投影可能範囲に投影される画像を制御し、
前記判定部が前記条件を満たさないと判定した場合には、前記投影部から、前記第一の画像の周縁に隣接する、少なくとも前記動体領域に対応する領域を含む第二の画像を前記投影可能範囲に投影させて、前記認識部による前記物体形状の認識を可能にする投影制御装置。
請求項１記載の投影制御装置であって、
前記制御部は、前記投影可能範囲の一部に前記第一の画像を投影させている状態において、前記条件を満たさないと前記判定部により判定された場合には、前記投影可能範囲のうちの前記第一の画像が未投影の部分に前記第二の画像を投影させる投影制御装置。
請求項１又は２記載の投影制御装置であって、
前記制御部は、前記投影可能範囲の全部に前記第一の画像を投影させている状態において、前記条件を満たさないと前記判定部により判定された場合には、前記第一の画像を縮小し、前記投影可能範囲のうちの前記第一の画像が未投影の部分に前記第二の画像を投影させる投影制御装置。
請求項１から３のいずれか１項記載の投影制御装置であって、
前記第二の画像は単色の画像である投影制御装置。
請求項４記載の投影制御装置であって、
前記制御部は、前記第二の画像の輝度又は彩度の少なくとも一方を、前記条件を満たすか否かの判定対象となった前記動体領域の明るさに基づいて決定する投影制御装置。
請求項５記載の投影制御装置であって、
前記判定部は、前記動体検出部により複数の動体領域が検出された場合には、前記撮影画像データにおける前記複数の動体領域のうちの最も暗い部分が前記条件を満たすか否かを判定する投影制御装置。
請求項４から６のいずれか１項記載の投影制御装置であって、
前記制御部は、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を前記第一の画像と異ならせる投影制御装置。
請求項７記載の投影制御装置であって、
前記制御部は、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を前記第一の画像から遠ざかるほど小さくする投影制御装置。
請求項４から８のいずれか１項記載の投影制御装置であって、
前記制御部は、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を目標値より低い値から前記目標値まで徐々に変化させる投影制御装置。
請求項４から７のいずれか１項記載の投影制御装置であって、
前記制御部は、前記第二の画像を投影させる場合には、前記第一の画像と前記第二の画像の境界に線を追加する投影制御装置。
請求項１から１０のいずれか１項記載の投影制御装置であって、
前記第一の画像と前記第二の画像が投影されている状態において、前記第一の画像を前記第二の画像と同じ画像に変更した状態にて前記撮影部に前記投影可能範囲を撮影させる撮影制御部を更に備え、
前記認識部は、当該撮影により得られる撮影画像データから前記動体検出部により検出される動体領域から前記物体形状を認識する投影制御装置。
請求項１から１１のいずれか１項記載の投影制御装置と、前記投影部と、を備える投影装置。
請求項１から１１のいずれか１項記載の投影制御装置と、前記投影部と、前記撮影部と、を備える投影装置。
画像を被投影面に投影する投影部と、前記投影部から前記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、前記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、を備える投影装置の投影制御方法であって、
前記撮影部により撮影された撮影画像データから、前記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出ステップと、
前記動体検出ステップで検出された前記動体領域から予め決められた物体形状を認識する認識ステップと、
前記動体領域の部分が、前記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、
前記投影部から前記被投影面に投影させる画像を制御する制御ステップと、を備え、
前記制御ステップでは、前記投影部から前記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、前記動体検出ステップで前記動体領域を検出したとき、
前記判定ステップにおいて前記条件を満たすと判定された場合には、前記認識ステップによって認識された前記物体形状に基づいて、前記投影部から前記投影可能範囲に投影される画像を制御し、
前記判定ステップにおいて、前記条件を満たさないと判定された場合には、前記投影部から、前記第一の画像の周縁に隣接する、少なくとも前記動体領域に対応する領域を含む第二の画像を前記投影可能範囲に投影させて、前記認識ステップにおける前記物体形状の認識を可能にする投影制御方法。
請求項１４記載の投影制御方法であって、
前記制御ステップでは、前記投影可能範囲の一部に前記第一の画像を投影させている状態において、前記条件を満たさないと前記判定ステップにより判定された場合には、前記投影可能範囲のうちの前記第一の画像が未投影の部分に前記第二の画像を投影させる投影制御方法。
請求項１４記載の投影制御方法であって、
前記制御ステップでは、前記投影可能範囲の全部に前記第一の画像を投影させている状態において、前記条件を満たさないと前記判定ステップにより判定された場合には、前記第一の画像を縮小し、前記投影可能範囲のうちの前記第一の画像が未投影の部分に前記第二の画像を投影させる投影制御方法。
請求項１４から１６のいずれか１項記載の投影制御方法であって、
前記第二の画像は単色の画像である投影制御方法。
請求項１７記載の投影制御方法であって、
前記制御ステップでは、前記第二の画像の輝度又は彩度の少なくとも一方を、前記条件を満たすか否かの判定対象となった前記動体領域の部分の明るさに基づいて決定する投影制御方法。
請求項１８記載の投影制御方法であって、
前記判定ステップでは、前記動体検出ステップにより複数の動体領域が検出された場合には、前記撮影画像データにおける前記複数の動体領域の部分のうちの最も暗い部分が前記条件を満たすか否かを判定する投影制御方法。
請求項１７から１９のいずれか１項記載の投影制御方法であって、
前記制御ステップでは、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を前記第一の画像と異ならせる投影制御方法。
請求項２０記載の投影制御方法であって、
前記制御ステップでは、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を前記第一の画像から遠ざかるほど小さくする投影制御方法。
請求項１７から２１のいずれか１項記載の投影制御方法であって、
前記制御ステップでは、前記第二の画像を投影させる場合には、前記第二の画像の輝度又は彩度の少なくとも一方を目標値より低い値から前記目標値まで徐々に変化させる投影制御方法。
請求項１７から２０のいずれか１項記載の投影制御方法であって、
前記制御ステップでは、前記第二の画像を投影させる場合には、前記第一の画像と前記第二の画像の境界に線を追加する投影制御方法。
請求項１４から２３のいずれか１項記載の投影制御方法であって、
前記第一の画像と前記第二の画像が投影されている状態において、前記第一の画像を前記第二の画像と同じ画像に変更した状態にて前記撮影部に前記投影可能範囲を撮影させる撮影制御ステップを更に備え、
前記認識ステップでは、当該撮影により得られる撮影画像データから前記動体検出ステップにより検出される動体領域から前記物体形状を認識する投影制御方法。
画像を被投影面に投影する投影部と、前記投影部から前記被投影面に画像を投影できる最大範囲を投影可能範囲とするとき、前記投影可能範囲を含む範囲を撮影範囲として撮影する撮影部と、を備える投影装置の投影制御方法をコンピュータに実行させるための投影制御プログラムであって、
前記撮影部により撮影された撮影画像データから、前記投影可能範囲内の周辺近傍で行われるジェスチャの画像領域を動体領域として検出する動体検出ステップと、
前記動体検出ステップで検出された前記動体領域から予め決められた物体形状を認識する認識ステップと、
前記動体領域の部分が、前記物体形状を認識するために必要な条件を満たすか否かを判定する判定ステップと、
前記投影部から前記被投影面に投影させる画像を制御する制御ステップと、を備え、
前記制御ステップでは、前記投影部から前記投影可能範囲の少なくとも一部に第一の画像を投影させている状態において、前記動体検出ステップで前記動体領域を検出したとき、
前記判定ステップにおいて前記条件を満たすと判定された場合には、前記認識ステップによって認識された前記物体形状に基づいて、前記投影部から前記投影可能範囲に投影される画像を制御し、
前記判定ステップにおいて、前記条件を満たさないと判定された場合には、前記投影部から、前記第一の画像の周縁に隣接する、少なくとも前記動体領域に対応する領域を含む第二の画像を前記投影可能範囲に投影させて、前記認識ステップにおける前記物体形状の認識を可能にする処理をコンピュータに実行させる投影制御プログラム。