JP6960522B2 - 投影制御装置、投影制御方法、投影制御プログラム、投影システム - Google Patents
投影制御装置、投影制御方法、投影制御プログラム、投影システム Download PDFInfo
- Publication number
- JP6960522B2 JP6960522B2 JP2020506426A JP2020506426A JP6960522B2 JP 6960522 B2 JP6960522 B2 JP 6960522B2 JP 2020506426 A JP2020506426 A JP 2020506426A JP 2020506426 A JP2020506426 A JP 2020506426A JP 6960522 B2 JP6960522 B2 JP 6960522B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- projection
- shielding
- projected
- difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Projection Apparatus (AREA)
Description
本発明は、投影制御装置、投影制御方法、投影制御プログラム、投影システムに関する。
特許文献1には、スクリーンの背面側に配置されたリア投影装置からスクリーンに対して表示画像を投影するシステムが記載されている。このシステムでは、スクリーンの正面側に配置された撮影装置によってスクリーンを撮影し、この撮影により得られた撮影画像と、リア投影装置から投影している表示画像とを比較して、スクリーンに投影された表示画像における物体により遮られている遮蔽領域を検出する。そして、この遮蔽領域に対し、スクリーンの正面側に配置されたフロント投影装置から画像を投影することで、遮蔽領域の画像を補完している。
特許文献1に記載のシステムでは、補完を行うフロント投影装置とスクリーンとの間に人物がいて、その人物により遮蔽領域が生じている場合には、遮蔽領域を形成している人物が邪魔になって、フロント投影装置による画像の補完を行うことができない可能性がある。
そこで、例えば、リア投影装置が配置される側に、汎用性の高い可視光にて被写体を撮影する撮影装置を配置し、フロント投影装置から観察用のメインの画像をスクリーンに投影する構成を想定する。この構成では、フロント投影装置とスクリーンの間に人物が存在して遮蔽領域が生じた場合に、撮影装置による撮影画像とフロント投影装置から投影している画像との差分によってこの遮蔽領域を検出し、この遮蔽領域に対してリア投影装置から画像を投影して補完を行うことが考えられる。
上記構成において、このような補完処理を行った場合には、撮影装置側からスクリーンをみたときに、遮蔽領域は補完されてしまっているため、フロント投影装置から投影される画像と同じものが見える状態になる。この状態において、フロント投影装置とスクリーンの間の人物がいなくなり、遮蔽領域がなくなると、その遮蔽領域があった部分にリア投影装置から画像が補完されている状態が継続されてしまう。このような状態が継続されると、遮蔽領域があった部分だけ画像が二重に投影されていることになり、画像の明るさ又は色味等が他の場所と異なることになる。
特許文献1には、上記構成は開示されておらず、上述した課題の認識はない。
本発明は、上記事情に鑑みてなされたものであり、観察者に高品質の画像を提示することのできる投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することを目的とする。
本発明の投影システムは、光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、上記第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置と、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置と、上記撮影装置によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、上記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御部、及び、上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定部を有する投影制御装置と、を備え、上記補完投影制御部は、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させるものである。
本発明の投影制御装置は、上記投影システムに使用される上記投影制御装置である。
本発明の投影制御方法は、光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、を備え、上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させるものである。
本発明の投影制御プログラムは、光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、をコンピュータに実行させるための投影制御プログラムであり、上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させるものである。
本発明によれば、観察者に高品質の画像を提示することのできる投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することができる。
以下、本発明の実施の形態の投影システムについて、図面を用いて説明する。
[第一実施形態]
図1は、本発明の第一実施形態の投影システムの構成を示す図である。図1に示す投影システム1は、ステージ上におけるプレゼンテーション又は演出等において好適に利用され、スクリーン40への投影により画像を表示するものである。
図1は、本発明の第一実施形態の投影システムの構成を示す図である。図1に示す投影システム1は、ステージ上におけるプレゼンテーション又は演出等において好適に利用され、スクリーン40への投影により画像を表示するものである。
投影システム1は、第一投影装置10と、第二投影装置20と、撮影装置30と、投影対象物としてのスクリーン40と、制御装置50と、を備える。
スクリーン40は、光の一部を透過することのできる透過型スクリーンである。スクリーン40は、平面状の部材であり、観察者に向けられる観察面40aと、観察面40aと反対側の背面40bと、を有する。スクリーン40は、投影された光を観察面40aと背面40bの各々に拡散することができる性質を持っているものであればよく、例えば、ビニール、アクリル、又はガラス等で構成されたものが用いられる。さらに、撮影装置30がスクリーン40に投影された画像以外を取り込まないように、スクリーン40は不透明な材質であることが望ましい。観察面40aは第一の面を構成し、背面40bは第二の面を構成する。
第一投影装置10と第二投影装置20は、それぞれ、画像を投影して表示を行うものであり、例えば、液晶表示素子又はDMD(Digital Micromirror Device:登録商標)等のライトバルブを搭載した装置等が用いられる。
撮影装置30は、CCD(Charge Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等の撮像素子によって被写体を撮影し、この撮影により撮像素子から出力される撮影画像信号を処理して撮影画像を生成する。撮影装置30により生成された撮影画像は制御装置50に送信される。撮影装置30は、被写体からの可視光を撮像画像に変換するものである。
第一投影装置10は、スクリーン40の観察面40a側に配置されている。第二投影装置20及び撮影装置30は、スクリーン40を挟んで第一投影装置10とは反対側に配置されている。
第一投影装置10は、スクリーン40の観察面40aに表示画像G(第一の画像)を投影する。第二投影装置20は、スクリーン40の背面40bに補完画像P(第二の画像)を投影する。撮影装置30は、スクリーン40の背面40bを撮影する。
図中には、第一投影装置10とスクリーン40の観察面40aの間に位置し、第一投影装置10からスクリーン40に投影される光を遮る遮蔽物Aの例として人物が示されている。
制御装置50は、第一投影装置10、第二投影装置20、及び撮影装置30と有線通信又は無線通信によって通信可能に接続されており、第一投影装置10、第二投影装置20、及び撮影装置30の動作を制御する。制御装置50は、後述する遮蔽領域検出部51、補完投影制御部52、及び遮蔽継続判定部53を備えるものであり、例えば、ノート型のパーソナルコンピュータ又はスマートフォン等の電子機器が使用される。
制御装置50は、第一投影装置10による画像の投影のオンオフ、第二投影装置20による画像の投影のオンオフ、及び第一投影装置10と第二投影装置20から投影させる画像の制御等を行う。
制御装置50は、スクリーン40に投影すべき画像情報を第一投影装置10及び第二投影装置20へ出力する。第一投影装置10及び第二投影装置20は、制御装置50から画像情報を受信すると、この画像情報に基づく画像をスクリーン40に投影する。
この投影システム1は、第二投影装置20によって画像を投影することのできる背面40b上の範囲(第二投影可能範囲という)と、第一投影装置10によって画像を投影することのできる観察面40a上の範囲(第一投影可能範囲という)とが一致し、且つ、第一投影装置10から任意の画像を観察面40aに投影し、この任意の画像を表裏反転させた画像を第二投影装置20から背面40bに投影した状態にて、観察面40aに投影された画像と背面40bに投影された画像とが観察面40a側から見て一致するように調整された状態にて使用される。また、投影システム1は、撮影装置30の撮影範囲が第二投影可能範囲を含むよう調整された状態にて使用される。
このような調整作業により、第一投影装置10から観察面40aの第一投影可能範囲全体に投影される画像の各画素の座標と、第二投影装置20から背面40bの第二投影可能範囲全体に投影される画像の各画素の座標と、撮影装置30によって撮影して得られる背面40bの第二投影可能範囲の画像の各画素の座標とが関連付けて管理される。
図2は、図1に示す投影システム1の制御装置50の内部構成を示すブロック図である。
制御装置50は、制御部50Aと、RAM(Random Accsess Memory)50Bと、記憶部を構成するROM(Read only memory)50Cと、を備える。
制御部50Aは、ハードウェア的な構造は、各種のプロセッサである。各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるCPU(Central Prosessing Unit)、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、又はASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
制御部50Aは、各種のプロセッサのうちの1つで構成されてもよいし、同種又は異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせ又はCPUとFPGAの組み合わせ)で構成されてもよい。
ROM50Cには、第一の情報D1と第二の情報D2が予め記憶されている。
第一の情報D1は、スクリーン40の背面40bに第二投影装置20のみからテスト画像TIを投影した状態におけるこのテスト画像TIを、撮影装置30によって撮影した場合に得られる撮影画像St1の第二投影可能範囲の画像とテスト画像TIとの特性の差を示す情報である。
第二の情報D2は、スクリーン40の背面40bに第二投影装置20からテスト画像TIを投影し、且つ、このテスト画像TIを表裏反転させた反転テスト画像をスクリーン40の観察面40aに第一投影装置10から投影した状態にて、スクリーン40の背面40bを撮影装置30によって撮影した場合に得られる撮影画像St2の第二投影可能範囲の画像とテスト画像TIとの特性の差を示す情報である。
画像の特性として、輝度又は彩度等を挙げることができる。本実施形態では、ROM50Cには、第一の情報D1及び第二の情報D2が、それぞれ、第一投影可能範囲及び第二投影可能範囲の全体に投影される画像を構成する画素単位の情報として記憶されている。
図3は、第一の情報D1と第二の情報D2の登録作業を説明するためのフローチャートである。この登録作業は、上記の調整作業の後に実施される。
先ず、スクリーン40の背面40bの第二投影可能範囲に第二投影装置20からテスト画像TIを投影させ(ステップS1)、そのテスト画像TIを撮影装置30に撮影させる
(ステップS2)。
(ステップS2)。
そして、第二投影装置20から投影させたテスト画像TIと、ステップS2の撮影にて得られた第二投影可能範囲の撮影画像との画素毎の特性の差を求め、それらの値を第一の情報D1としてROM50Cに記憶する(ステップS3)。
次に、第二投影可能範囲に第二投影装置20からテスト画像TIを投影させている状態にて、このテスト画像TIを表裏反転させた反転テスト画像を、スクリーン40の観察面40aの第一投影可能範囲に第一投影装置10から投影させる(ステップS4)。そして、撮影装置30にスクリーン40を撮影させる(ステップS5)。
その後、第二投影装置20から投影させたテスト画像TIと、ステップS5にて撮影装置30により撮影して得られた第二投影可能範囲の撮影画像との画素毎の特性の差を求め、それらの値を第二の情報D2としてROM50Cに記憶する(ステップS6)。以上により登録作業が終了する。
図4は、図2に示す制御部50Aの機能ブロック図である。制御装置50の制御部50Aは、投影システム1用に作成された投影制御プログラムを含むアプリケーションプログラムを実行することにより、遮蔽領域検出部51、補完投影制御部52、及び遮蔽継続判定部53を備える投影制御装置として機能する。
遮蔽領域検出部51は、撮影装置30によって撮影されたスクリーン40の背面40bの撮影画像S(図1参照)を取得し、この撮影画像Sに基づいて、スクリーン40の観察面40aに投影された表示画像Gにおける遮蔽物Aによって生じた遮蔽領域R(図1参照)を検出する。
補完投影制御部52は、スクリーン40の観察面40aに投影された表示画像Gのうちの遮蔽領域Rに対応する補完画像P(図1参照)を、スクリーン40の背面40bにおける遮蔽領域Rと重なる領域Ra(図1参照)に対して第二投影装置20から投影させる。
表示画像Gのうちの遮蔽領域Rに対応する補完画像Pは、表示画像Gのうちの遮蔽領域Rに投影されるべき画像を表裏反転させた画像である。
遮蔽継続判定部53は、撮影画像Sのうちの補完画像Pが投影されている領域Raの画像に基づいて、遮蔽領域Rの存在が継続されているか否かを判定する。
具体的には、遮蔽継続判定部53は、第二投影装置20が投影している補完画像Pと、撮影装置30によって撮影された領域Raの画像である補完撮影画像Q(図1参照)との特性の差ΔPQを求め、この特性の差ΔPQと、ROM50Cに記憶された第一の情報D1及び第二の情報D2とに基づいて、遮蔽領域Rの存在が継続されているか否かを判定する。補完撮影画像Qは第三の画像を構成する。
より詳細には、遮蔽継続判定部53は、補完画像Pを構成する各画素の座標に対応する第一の情報D1と、この各画素に対応する特性の差ΔPQとが全て一致する場合には、遮蔽領域Rの存在が継続されていると判定する。また、遮蔽継続判定部53は、補完画像Pを構成する各画素の座標に対応する第二の情報D2と、この各画素に対応する特性の差ΔPQとが全て一致する場合には、遮蔽領域Rがなくなったと判定する。ここで、「2つの情報が一致する」とは、この2つの情報の差が予め決めたごく小さな値以下となることを言い、理想的には、この差がゼロであることを言う。
各画素における特性の差ΔPQが、この各画素に対応する第一の情報D1と一致する状態は、図3のステップS1の投影状態にて撮影を行ったときと同じ状態になっていることを意味する。したがって、この状態になっている場合には、領域Raの裏側には画像が投影されておらず、遮蔽領域Rが継続していると判定することができる。
一方、各画素における特性の差ΔPQが、この各画素に対応する第二の情報D2と一致する状態は、図3のステップS4の投影状態にて撮影を行ったときと同じ状態になっていることを意味する。したがって、この状態になっている場合には、領域Raの裏側には、補完画像Pを反転させた画像が投影されており、遮蔽領域Rが無くなっていると判定することができる。
補完投影制御部52は、遮蔽継続判定部53により遮蔽領域Rがなくなったと判定された場合には、第二投影装置20による補完画像Pの投影を停止させる。
以下、制御装置50の動作について、フロー図を参照しつつ説明する。
図5は、画像投影時における制御部50Aの一連の処理の流れを示すフロー図である。図6は、図5のステップS15の内容を示すフロー図である。
制御部50Aは、第一投影装置10からスクリーン40への表示画像Gの投影を開始させるのと同時に撮影装置30による撮影を開始させる(ステップS11)。そして、制御部50Aの遮蔽領域検出部51は、撮影装置30によって撮影して得られた撮影画像Sのうちの第二投影可能範囲の画像に基づいて、スクリーン40に投影された表示画像Gにおける遮蔽領域Rを検出する遮蔽領域検出ステップ(ステップS12)を実行する。
ステップS12において、制御部50Aの遮蔽領域検出部51は、例えば、第一投影装置10から投影させている表示画像Gと、撮影画像Sを表裏反転させた画像のうちの第二投影可能範囲の画像とを画素毎に比較し、画素値の差が閾値以上となる画素を含む領域を遮蔽領域Rとして検出する。
次に、制御部50Aの補完投影制御部52は、遮蔽領域Rが検出されたか否か判断する(ステップS13)。遮蔽領域Rが検出されなければ(ステップS13:NO)、ステップS11に処理が戻る。一方、遮蔽領域Rが検出された場合には(ステップS13:YES)、制御部50Aの補完投影制御部52は、補完投影制御ステップ(ステップS14)を実行する。
ステップS14において、制御部50Aの補完投影制御部52は、スクリーン40の観察面40aに投影された表示画像Gのうちの遮蔽領域Rに対応する補完画像Pを、第二投影装置20からスクリーン40の背面40bの領域Raに投影させる。その後、制御部50Aの遮蔽継続判定部53は、遮蔽継続判定ステップ(ステップS15)を実行する。
ステップS15において、制御部50Aの遮蔽継続判定部53は、図6に示すように、第二投影装置20によって領域Raに投影されている補完画像Pと、撮影装置30によって領域Raを撮影して得られた補完撮影画像Qとの特性の差ΔPQを求める(ステップS15a)。次に、制御部50Aの遮蔽継続判定部53は、ROM50Cから第一の情報D1及び第二の情報D2を読み出す(ステップS15b)。
そして、制御部50Aの遮蔽継続判定部53は、補完画像Pと補完撮影画像Qの特性の差ΔPQが第一の情報D1と一致するか否かを補完画像Pの画素毎に判定し(ステップS15c)、補完画像Pの全画素について、特性の差ΔPQが第一の情報D1と一致したならば(ステップS15c:YES)、補完画像Pの裏側に遮蔽領域Rの存在が継続していると判定する(ステップS15d)。
なお、制御部50Aの遮蔽継続判定部53は、ステップS15cにおいて、補完画像Pの全画素のうちの一部の画素(例えば全体の9割の画素等)に対する特性の差ΔPQが第一の情報D1と一致している場合に、遮蔽領域Rの存在が継続していると判定してもよい。
一方、特性の差ΔPQが第一の情報D1と一致しない画素が補完画像Pに存在する場合(ステップS15c:NO)には、制御部50Aの遮蔽継続判定部53は、特性の差ΔPQが第二の情報D2と一致するか否かを補完画像Pの画素毎に判定する(ステップS15e)。
補完画像Pの全画素について、特性の差ΔPQが第二の情報D2と一致したならば(ステップS15e:YES)、制御部50Aの遮蔽継続判定部53は、補完画像Pの裏側の遮蔽領域Rがなくなったと判定する(ステップS15f)。
制御部50Aの遮蔽継続判定部53は、補完画像Pの画素において、特性の差ΔPQが第二の情報D2と一致しない画素があれば(ステップS15eでNo)、ステップS15aに処理を戻す。
なお、制御部50Aの遮蔽継続判定部53は、ステップS15eにおいて、補完画像Pの全画素のうちの一部の画素(例えば全体の9割の画素等)に対する特性の差ΔPQが第二の情報D2と一致している場合に、遮蔽領域Rの存在がなくなったと判定してもよい。
図5に戻り、制御部50Aの補完投影制御部52は、遮蔽継続判定ステップ(ステップS15)によって遮蔽領域Rの存在が継続されていると判定された場合(ステップS16:NO)には、ステップS14に戻り、補完画像Pの投影を第二投影装置20に継続させる。一方、制御部50Aの補完投影制御部52は、遮蔽領域Rがなくなったと判定された場合(ステップS16:YES)には、補完投影停止ステップ(ステップS17)を実行する。
ステップS17において、制御部50Aの補完投影制御部52は、第二投影装置20による補完画像Pの投影を終了させる。
以上のように、投影システム1によれば、第二投影装置20による補完画像Pの投影開始後に、第一投影装置10とスクリーン40との間の遮蔽物Aがなくなり、遮蔽領域Rが無くなった場合には、第二投影装置20による補完画像Pの投影が終了する。このため、遮蔽領域Rが無くなったにもかかわらず、その遮蔽領域Rがあった部分に第二投影装置20から補完画像Pが投影され続けるという事態を防止できる。
よって、第一実施形態の投影システム1によれば、補完画像Pの不必要な投影を防止して、観察者に高品質の画像を提示することができる。また、投影システム1によれば、第二投影装置20を短焦点又は超短焦点のものとすることで、システムの奥行きを短くすることができる。
なお、図3のステップS3とステップS6において、テスト画像TIと撮影画像とをそれぞれ複数ブロックに分割し、テスト画像TIの各ブロックについてそのブロックにおける特性の代表値(例えば輝度(彩度)の平均値又は輝度(彩度)の中心中央値、或いは、そのブロックから選択した代表的な画素の輝度又は彩度等)を求め、撮影画像Sの各ブロックについてそのブロックにおける特性の代表値を求め、ブロック毎に、その代表値の差を求めて第一の情報D1又は第二の情報D2として記憶させてもよい。
このようにした場合には、制御部50Aの遮蔽継続判定部53は、図6のステップ15aにおいて、補完画像Pの輝度又は彩度の平均値と、補完撮影画像Qの輝度又は彩度の平均値との差を特性の差ΔPQとして算出する。
そして、制御部50Aの遮蔽継続判定部53は、図6のステップS15cにおいて、補完画像Pを構成する全画素の座標が含まれるブロックの第一の情報D1と、特性の差ΔPQとが一致している場合に、遮蔽領域Rの存在が継続していると判定する。
また、制御部50Aの遮蔽継続判定部53は、図6のステップS15eにおいて、補完画像Pを構成する全画素の座標が含まれるブロックの第二の情報D2と、特性の差ΔPQとが一致している場合に、遮蔽領域Rがなくなったと判定する。
このような構成によれば、遮蔽継続判定ステップ(ステップS15)を高速に行うことができる。なお、前述してきたように、遮蔽継続判定ステップにおいて、補完画像Pの画素毎に、特性の差ΔPQと第一の情報D1又は第二の情報D2とを比較する方法によれば、遮蔽領域Rの存在が継続するか否かの判定をより高精度に行うことができる。遮蔽領域Rの位置は刻一刻と変化すると予測されるため、この方法によれば、遮蔽領域Rに対する必要な補完を行いつつ、不必要な補完をなくす制御を高い精度で行うことができる。
なお、図3に示した登録作業は、制御装置50の製造工程において行われてもよいが、制御部50Aがこの登録作業を実行するモードを持っていてもよい。例えば、上記の調整作業の終了後、投影システム1を実際の使用環境(例えば照明を落とした状態)に置き、その状態にて、ユーザの操作によってこのモードに移行させる。このようにすることで、図6のステップS15c又はステップS15eの判定に用いられる特性の差ΔPQと、第一の情報D1又は第二の情報D2と、を同一環境下で得たものとすることができる。このため、遮蔽領域Rの継続判定の精度を向上させることができる。
[第二実施形態]
次に、本発明の第二実施形態の投影システムについて説明する。第二実施形態の投影システムの全体構成は、第一実施形態の投影システム1と同様であり、制御部50Aの機能のみが異なる。
次に、本発明の第二実施形態の投影システムについて説明する。第二実施形態の投影システムの全体構成は、第一実施形態の投影システム1と同様であり、制御部50Aの機能のみが異なる。
図7は、第二実施形態の投影システムにおける、第一投影装置10、第二投影装置20、撮影装置30、及び制御装置50の動作タイミングを示す説明図である。
第二実施形態の投影システムでは、制御部50Aが、第一投影装置10による表示画像Gの投影を例えば72fpsで実施させ、図7に示すように、第二投影装置20による画像の投影を定期的(例えば8フレーム毎)に停止させる。
そして、制御部50Aの遮蔽継続判定部53は、図5のステップS14(補完投影制御ステップ)が開始された後、補完画像Pの投影が停止されたタイミングにて、撮影装置30による撮影を実施(図7中の撮影“ON”)することにより、補完画像Pを含まない無補完撮影画像を取得する。そして、制御部50Aの遮蔽継続判定部53は、この無補完撮影画像における補完画像Pが投影されていた領域Raに基づいて遮蔽領域Rの存在が継続しているか否かを判定する(図7中の遮蔽領域継続判定“ON”)。
具体的には、制御部50Aの遮蔽継続判定部53は、無補完撮影画像の領域Raの部分に補完画像Pと同じ画像がある場合に、遮蔽領域Rがなくなったと判定する。一方、制御部50Aの遮蔽継続判定部53は、この領域Raの部分に補完画像Pと同じ画像がない場合には、遮蔽領域Rの存在が継続していると判定する。その他の処理の内容は第一実施形態と同様である。
第二実施形態によれば、図3に示した登録作業を実施することなく、画像の投影中における遮蔽領域Rの継続判定を行うことが可能となる。このため、投影システム1の構築に要するコストを削減することができる。また、第二実施形態によれば、特性の差ΔPQの算出処理及びこの差ΔPQと第一の情報D1又は第二の情報D2との比較処理が不要となり、遮蔽領域継続の判定を高速に行うことができる。
なお、第二実施形態において、第二投影装置20による補完画像Pの投影停止頻度は、人の視覚に影響しない頻度とすることが望ましい。第二投影装置20による投影の停止は、補完画像Pの光路をシャッター(遮光手段)によって機械的に遮る方法、或いは第二投影装置20の投影動作を停止させる方法によって実現可能である。また、第二投影装置20による投影を停止する代わりに、第二投影装置20から黒一色の画像を投影させる制御を行うことで、結果的に背面40bに何も投影されない状態を得てもよい。
投影システム1において、制御装置50の制御部50A、RAM50B、及びROM50Cは、例えば第一投影装置10に内蔵されていてもよいし、第二投影装置20に内蔵されていてもよい。また、第二投影装置20と撮影装置30は別体ではなく一体化されていてもよい。
以上説明してきたように、本明細書には以下の事項が開示されている。
(1)
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、
上記第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置と、
上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置と、
上記撮影装置によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、上記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御部、及び、上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定部を有する投影制御装置と、を備え、
上記補完投影制御部は、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影システム。
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、
上記第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置と、
上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置と、
上記撮影装置によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、上記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御部、及び、上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定部を有する投影制御装置と、を備え、
上記補完投影制御部は、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影システム。
(2)
(1)記載の投影システムに使用される上記投影制御装置。
(1)記載の投影システムに使用される上記投影制御装置。
(3)
(2)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二投影装置が投影している上記第二の画像と、上記撮影装置によって撮影されたその第二の画像が投影されている領域の画像である第三の画像との差に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する投影制御装置。
(2)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二投影装置が投影している上記第二の画像と、上記撮影装置によって撮影されたその第二の画像が投影されている領域の画像である第三の画像との差に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する投影制御装置。
(4)
(3)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二の面に上記第二投影装置のみから画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第一の情報と、上記投影対象物に上記第一投影装置と上記第二投影装置から画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した上記第一の情報と、上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域がなくなったと判定する投影制御装置。
(3)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二の面に上記第二投影装置のみから画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第一の情報と、上記投影対象物に上記第一投影装置と上記第二投影装置から画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した上記第一の情報と、上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域がなくなったと判定する投影制御装置。
(5)
(4)記載の投影制御装置であって、
上記第一の情報と上記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
上記遮蔽継続判定部は、上記第二の画像と上記第三の画像の上記特性の差を画素毎に求め、上記第一の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域がなくなったと判定する投影制御装置。
(4)記載の投影制御装置であって、
上記第一の情報と上記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
上記遮蔽継続判定部は、上記第二の画像と上記第三の画像の上記特性の差を画素毎に求め、上記第一の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域がなくなったと判定する投影制御装置。
(6)
(4)又は(5)記載の投影制御装置であって、
上記特性の差は、輝度の差又は彩度の差である投影制御装置。
(4)又は(5)記載の投影制御装置であって、
上記特性の差は、輝度の差又は彩度の差である投影制御装置。
(7)
(2)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二投影装置による上記第二の画像の投影を停止させた状態にて上記撮影装置により上記投影対象物を撮影させて得られる第四の画像を取得し、上記第四の画像における上記第二の画像が投影されていた領域に上記第二の画像と同じ画像がある場合に、上記遮蔽領域がなくなったと判定する投影制御装置。
(2)記載の投影制御装置であって、
上記遮蔽継続判定部は、上記第二投影装置による上記第二の画像の投影を停止させた状態にて上記撮影装置により上記投影対象物を撮影させて得られる第四の画像を取得し、上記第四の画像における上記第二の画像が投影されていた領域に上記第二の画像と同じ画像がある場合に、上記遮蔽領域がなくなったと判定する投影制御装置。
(8)
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、を備え、
上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影制御方法。
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、を備え、
上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影制御方法。
(9)
(8)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二投影装置が投影している上記第二の画像と、
上記撮影装置によって撮影されたその第二の画像が投影されている領域の画像である第三の画像との差に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する投影制御方法。
(8)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二投影装置が投影している上記第二の画像と、
上記撮影装置によって撮影されたその第二の画像が投影されている領域の画像である第三の画像との差に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する投影制御方法。
(10)
(9)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二の面に上記第二投影装置のみから画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第一の情報と、上記投影対象物に上記第一投影装置と上記第二投影装置から画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した上記第一の情報と、上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域がなくなったと判定する投影制御方法。
(9)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二の面に上記第二投影装置のみから画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第一の情報と、上記投影対象物に上記第一投影装置と上記第二投影装置から画像を投影した状態におけるその画像を上記撮影装置によって撮影した場合に得られる撮影画像とその画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した上記第一の情報と、上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが一致する場合には、上記遮蔽領域がなくなったと判定する投影制御方法。
(11)
(10)記載の投影制御方法であって、
上記第一の情報と上記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
上記遮蔽継続判定ステップでは、上記第二の画像と上記第三の画像の上記特性の差を画素毎に求め、上記第一の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域がなくなったと判定する投影制御方法。
(10)記載の投影制御方法であって、
上記第一の情報と上記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
上記遮蔽継続判定ステップでは、上記第二の画像と上記第三の画像の上記特性の差を画素毎に求め、上記第一の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域の存在が継続されていると判定し、上記第二の情報と上記第三の画像及び上記第二の画像の特性の差とが上記第二の画像の全画素の少なくとも一部について一致する場合に上記遮蔽領域がなくなったと判定する投影制御方法。
(12)
(10)又は(11)記載の投影制御方法であって、
上記特性の差は、輝度の差又は彩度の差である投影制御方法。
(10)又は(11)記載の投影制御方法であって、
上記特性の差は、輝度の差又は彩度の差である投影制御方法。
(13)
(8)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二投影装置による上記第二の画像の投影を停止させた状態にて上記撮影装置により上記投影対象物を撮影させて得られる第四の画像を取得し、上記第四の画像における上記第二の画像が投影されていた領域に上記第二の画像と同じ画像がある場合に、上記遮蔽領域がなくなったと判定する投影制御方法。
(8)記載の投影制御方法であって、
上記遮蔽継続判定ステップでは、上記第二投影装置による上記第二の画像の投影を停止させた状態にて上記撮影装置により上記投影対象物を撮影させて得られる第四の画像を取得し、上記第四の画像における上記第二の画像が投影されていた領域に上記第二の画像と同じ画像がある場合に、上記遮蔽領域がなくなったと判定する投影制御方法。
(14)
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、をコンピュータに実行させるための投影制御プログラムであり、
上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影制御プログラム。
光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの上記遮蔽領域に対応する第二の画像を、上記第一投影装置に対して上記投影対象物を挟んで反対側に配置された第二投影装置から、上記投影対象物の上記第二の面における上記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
上記撮影装置によって撮影される上記投影対象物の上記第二の面の撮影画像のうちの上記第二の画像が投影されている領域の画像に基づいて、上記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、をコンピュータに実行させるための投影制御プログラムであり、
上記補完投影制御ステップでは、上記遮蔽領域がなくなったと判定された場合に、上記第二の画像の投影を停止させる投影制御プログラム。
以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
なお、本出願は、2018年3月15日出願の日本特許出願(特願2018−048488)に基づくものであり、その内容は本出願の中に参照として援用される。
本発明によれば、観察者に高品質の画像を提示することのできる投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することができる。
1 投影システム
10 第一投影装置
20 第二投影装置
30 撮影装置
40 スクリーン
40a 観察面
40b 背面
50 制御装置
50A 制御部
50B RAM
50C ROM
51 遮蔽領域検出部
52 補完投影制御部
53 遮蔽継続判定部
D1 第一の情報
D2 第二の情報
G 表示画像
P 補完画像
Q 補完撮影画像
R 遮蔽領域
Ra 領域
S 撮影画像
A 遮蔽物
10 第一投影装置
20 第二投影装置
30 撮影装置
40 スクリーン
40a 観察面
40b 背面
50 制御装置
50A 制御部
50B RAM
50C ROM
51 遮蔽領域検出部
52 補完投影制御部
53 遮蔽継続判定部
D1 第一の情報
D2 第二の情報
G 表示画像
P 補完画像
Q 補完撮影画像
R 遮蔽領域
Ra 領域
S 撮影画像
A 遮蔽物
Claims (14)
- 光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、
前記第一投影装置に対し、前記投影対象物を挟んで反対側に配置された撮影装置と、
前記第一投影装置に対して前記投影対象物を挟んで反対側に配置された第二投影装置と、
前記撮影装置によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、前記第一の画像のうちの前記遮蔽領域に対応する第二の画像を、前記第二投影装置から、前記投影対象物の前記第二の面における前記遮蔽領域と重なる領域に投影させる補完投影制御部、及び、前記撮影装置によって撮影される前記投影対象物の前記第二の面の撮影画像のうちの前記第二の画像が投影されている領域の画像に基づいて、前記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定部、を有する投影制御装置と、を備え、
前記補完投影制御部は、前記遮蔽領域がなくなったと判定された場合に、前記第二の画像の投影を停止させる投影システム。 - 請求項1に記載の投影システムに使用される前記投影制御装置。
- 請求項2記載の投影制御装置であって、
前記遮蔽継続判定部は、前記第二投影装置が投影している前記第二の画像と、前記撮影装置によって撮影された当該第二の画像が投影されている領域の画像である第三の画像との差に基づいて、前記遮蔽領域の存在が継続されているか否かを判定する投影制御装置。 - 請求項3記載の投影制御装置であって、
前記遮蔽継続判定部は、前記第二の面に前記第二投影装置のみから画像を投影した状態における当該画像を前記撮影装置によって撮影した場合に得られる撮影画像と当該画像との特性の差を示す第一の情報と、前記投影対象物に前記第一投影装置と前記第二投影装置から画像を投影した状態における当該画像を前記撮影装置によって撮影した場合に得られる撮影画像と当該画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した前記第一の情報と、前記第三の画像及び前記第二の画像の特性の差とが一致する場合には、前記遮蔽領域の存在が継続されていると判定し、前記第二の情報と前記第三の画像及び前記第二の画像の特性の差とが一致する場合には、前記遮蔽領域がなくなったと判定する投影制御装置。 - 請求項4記載の投影制御装置であって、
前記第一の情報と前記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
前記遮蔽継続判定部は、前記第二の画像と前記第三の画像の前記特性の差を画素毎に求め、前記第一の情報と前記第三の画像及び前記第二の画像の特性の差とが前記第二の画像の全画素の少なくとも一部について一致する場合に前記遮蔽領域の存在が継続されていると判定し、前記第二の情報と前記第三の画像及び前記第二の画像の特性の差とが前記第二の画像の全画素の少なくとも一部について一致する場合に前記遮蔽領域がなくなったと判定する投影制御装置。 - 請求項4又は5記載の投影制御装置であって、
前記特性の差は、輝度の差又は彩度の差である投影制御装置。 - 請求項2記載の投影制御装置であって、
前記遮蔽継続判定部は、前記第二投影装置による前記第二の画像の投影を停止させた状態にて前記撮影装置により前記投影対象物を撮影させて得られる第四の画像を取得し、前記第四の画像における前記第二の画像が投影されていた領域に前記第二の画像と同じ画像がある場合に、前記遮蔽領域がなくなったと判定する投影制御装置。 - 光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
前記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの前記遮蔽領域に対応する第二の画像を、前記第一投影装置に対して前記投影対象物を挟んで反対側に配置された第二投影装置から、前記投影対象物の前記第二の面における前記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
前記撮影装置によって撮影される前記投影対象物の前記第二の面の撮影画像のうちの前記第二の画像が投影されている領域の画像に基づいて、前記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、を備え、
前記補完投影制御ステップでは、前記遮蔽領域がなくなったと判定された場合に、前記第二の画像の投影を停止させる投影制御方法。 - 請求項8記載の投影制御方法であって、
前記遮蔽継続判定ステップでは、前記第二投影装置が投影している前記第二の画像と、
前記撮影装置によって撮影された当該第二の画像が投影されている領域の画像である第三の画像との差に基づいて、前記遮蔽領域の存在が継続されているか否かを判定する投影制御方法。 - 請求項9記載の投影制御方法であって、
前記遮蔽継続判定ステップでは、前記第二の面に前記第二投影装置のみから画像を投影した状態における当該画像を前記撮影装置によって撮影した場合に得られる撮影画像と当該画像との特性の差を示す第一の情報と、前記投影対象物に前記第一投影装置と前記第二投影装置から画像を投影した状態における当該画像を前記撮影装置によって撮影した場合に得られる撮影画像と当該画像との特性の差を示す第二の情報と、を記憶する記憶部、から読み出した前記第一の情報と、前記第三の画像及び前記第二の画像の特性の差とが一致する場合には、前記遮蔽領域の存在が継続されていると判定し、前記第二の情報と前記第三の画像及び前記第二の画像の特性の差とが一致する場合には、前記遮蔽領域がなくなったと判定する投影制御方法。 - 請求項10記載の投影制御方法であって、
前記第一の情報と前記第二の情報は、それぞれ、画像を構成する画素単位の情報として記憶されており、
前記遮蔽継続判定ステップでは、前記第二の画像と前記第三の画像の前記特性の差を画素毎に求め、前記第一の情報と前記第三の画像及び前記第二の画像の特性の差とが前記第二の画像の全画素の少なくとも一部について一致する場合に前記遮蔽領域の存在が継続されていると判定し、前記第二の情報と前記第三の画像及び前記第二の画像の特性の差とが前記第二の画像の全画素の少なくとも一部について一致する場合に前記遮蔽領域がなくなったと判定する投影制御方法。 - 請求項10又は11記載の投影制御方法であって、
前記特性の差は、輝度の差又は彩度の差である投影制御方法。 - 請求項8記載の投影制御方法であって、
前記遮蔽継続判定ステップでは、前記第二投影装置による前記第二の画像の投影を停止させた状態にて前記撮影装置により前記投影対象物を撮影させて得られる第四の画像を取得し、前記第四の画像における前記第二の画像が投影されていた領域に前記第二の画像と同じ画像がある場合に、前記遮蔽領域がなくなったと判定する投影制御方法。 - 光を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、
前記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記第一の面との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
記第一の画像のうちの前記遮蔽領域に対応する第二の画像を、前記第一投影装置に対して前記投影対象物を挟んで反対側に配置された第二投影装置から、前記投影対象物の前記第二の面における前記遮蔽領域と重なる領域に投影させる補完投影制御ステップと、
前記撮影装置によって撮影される前記投影対象物の前記第二の面の撮影画像のうちの前記第二の画像が投影されている領域の画像に基づいて、前記遮蔽領域の存在が継続されているか否かを判定する遮蔽継続判定ステップと、をコンピュータに実行させるための投影制御プログラムであり、
前記補完投影制御ステップでは、前記遮蔽領域がなくなったと判定された場合に、前記第二の画像の投影を停止させる投影制御プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018048488 | 2018-03-15 | ||
JP2018048488 | 2018-03-15 | ||
PCT/JP2019/008655 WO2019176656A1 (ja) | 2018-03-15 | 2019-03-05 | 投影制御装置、投影制御方法、投影制御プログラム、投影システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019176656A1 JPWO2019176656A1 (ja) | 2021-01-14 |
JP6960522B2 true JP6960522B2 (ja) | 2021-11-05 |
Family
ID=67908164
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020506426A Active JP6960522B2 (ja) | 2018-03-15 | 2019-03-05 | 投影制御装置、投影制御方法、投影制御プログラム、投影システム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6960522B2 (ja) |
WO (1) | WO2019176656A1 (ja) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5023587B2 (ja) * | 2006-07-18 | 2012-09-12 | 富士ゼロックス株式会社 | 画像表示装置及び画像表示方法 |
JP5724064B2 (ja) * | 2010-05-06 | 2015-05-27 | パナソニックIpマネジメント株式会社 | 光投影装置 |
JP2013182061A (ja) * | 2012-02-29 | 2013-09-12 | Nikon Corp | 投影システム |
-
2019
- 2019-03-05 JP JP2020506426A patent/JP6960522B2/ja active Active
- 2019-03-05 WO PCT/JP2019/008655 patent/WO2019176656A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2019176656A1 (ja) | 2019-09-19 |
JPWO2019176656A1 (ja) | 2021-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103119511B (zh) | 用于取景器装置的显示控制方法及装置 | |
WO2018101092A1 (ja) | 撮像装置およびフリッカ判定方法 | |
US10623656B2 (en) | Imaging device and flicker detection method | |
US9131157B2 (en) | Camera and method of controlling operation of same | |
WO2020202786A1 (ja) | 画像処理装置、投影システム、画像処理方法、及び画像処理プログラム | |
WO2014125837A1 (ja) | 撮像装置の異物情報検出装置および異物情報検出方法 | |
JP6960522B2 (ja) | 投影制御装置、投影制御方法、投影制御プログラム、投影システム | |
WO2019167527A1 (ja) | 投影制御装置、投影装置、投影制御方法、及び投影制御プログラム | |
WO2012147368A1 (ja) | 撮影装置 | |
US8462259B2 (en) | Focusing image display device and method for displaying same | |
TWI693577B (zh) | 影像產生方法與電子裝置 | |
US20220132080A1 (en) | Control device, projection system, control method, and control program | |
JPWO2019176594A1 (ja) | 投影制御装置、投影装置、投影制御方法、及び投影制御プログラム | |
JP5928016B2 (ja) | 撮像装置及び撮像方法 | |
JP2018054762A5 (ja) | ||
TW201642008A (zh) | 影像擷取裝置及其動態對焦方法 | |
WO2017085787A1 (ja) | 画像表示装置、画像表示システム、画像表示方法、およびプログラム | |
JP2024006315A (ja) | 表示装置 | |
JP2014236284A (ja) | 撮像装置 | |
US20220353480A1 (en) | Projection apparatus and automatic projection adjustment method | |
JP7355531B2 (ja) | 撮像装置及び撮像誘導方法 | |
US20240114117A1 (en) | Method for adjusting projection system and projection system | |
US10567662B2 (en) | Imaging device and control method therefor using shift direction calculation | |
JP2007166142A (ja) | 撮像装置 | |
JP6651132B2 (ja) | 撮影装置及び撮影方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200720 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210928 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211011 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6960522 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |