JP6728849B2 - 表示装置及び表示装置の制御方法 - Google Patents

Description

本発明は、表示装置及び表示装置の制御方法に関する。

特許文献１には、ＰＣ（Personal Computer）から供給される画像を表示する表示装置において、リモコンの操作に応じて表示装置から制御信号を送ることによりＰＣのカーソル移動やクリック操作を行う技術が開示されている。この技術によれば、例えば、プレゼンテーション用の資料の画像をＰＣから表示装置へ供給している場合、表示装置をリモコンで操作することによりＰＣを操作し、表示している資料のページを進めることや戻すことができる。

特開２００４−５３７６０号公報

外部装置から供給される画像を表示する表示装置においては、指示体を画像の表示面で移動させることにより、指示体の移動軌跡に応じた線の画像を描画するものがある。このような表示装置において、ＰＣが操作されて表示する映像が変わった場合、変化前の画像に対して描画した線が残り、変化後の映像に対して意味をなさない線となってしまう。

本発明は、表示された画像に対して指示体により描画が行われた場合、表示される画像が変化すると、変化後の画像に対応していない描画を消去する技術を提供する。

本発明は、供給される描画像と外部装置から供給される表示画像を表示面に表示する表示部と、前記表示面に対する指示体の位置を特定する位置特定部と、前記描画像を前記位置特定部が特定した位置に応じて生成し、当該描画像を前記表示部へ供給する描画部と、前記表示画像が第１の表示画像から第２の表示画像へ替わった場合、表示していた前記描画像を消去する描画像制御部とを備える表示装置を提供する。
本発明によれば、表示された画像に対して指示体により描画が行われた場合、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

本発明においては、前記表示画像が供給される端子を複数有し、前記表示部は、前記端子から供給される前記表示画像を表示し、前記描画像制御部は、前記表示部へ前記表示画像を供給する端子が変更された場合、前記描画像を消去する構成としてもよい。
この構成によれば、表示画像を供給する装置が替わり、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

また、本発明においては、前記描画像制御部は、前記外部装置から供給される前記表示画像が替わった場合、前記描画像を消去する構成としてもよい。
この構成によれば、供給される表示画像が替わり、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

また、本発明においては、前記表示面を撮影する撮像部を有し、前記撮像部で撮影した前記表示面に表示されている前記表示画像が替わった場合、前記描画像を消去する構成としてもよい。
この構成によれば、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

また、本発明においては、前記描画像制御部は、ユーザーからの指示を取得し、取得した指示が前記表示画像を替える指示である場合、前記描画像を消去する構成としてもよい。
この構成によれば、表示画像を替える指示に応じて表示画像が替わると、変化後の画像に対応していない描画を消去することができる。

また、本発明においては、前記描画像制御部は、予め定められたジェスチャーを前記指示として取得する構成としてもよい。
この構成によれば、ジェスチャーにより表示画像が替わると、変化後の画像に対応していない描画を消去することができる。

また、本発明においては、前記表示画像が前記表示面に表示されていたときに前記表示面に表示された前記描画像を記憶する記憶部を有する構成としてもよい。
この構成によれば、消去する描画像を保存することができる。

また、本発明においては、前記記憶部は、前記描画像制御部が消去した前記描画像と、当該描画像が表示されていたときに表示されていた前記表示画像を表す情報とを対応付けて記憶し、前記描画像制御部は、前記表示部が前記表示画像の表示を終了した後に当該表示画像を再度表示する場合、当該表示画像を表す情報に対応付けて前記記憶部に記憶されている前記描画像を前記表示部へ供給する構成としてもよい。
この構成によれば、消去した描画像を表示した表示画像に応じて復元することができる。

また、本発明においては、前記描画像制御部は、前記表示面内の定められた領域内の前記描画像を消去する構成としてもよい。
この構成によれば、画像を表示する領域のうち特定の領域内にある描画像だけを消去することができる。

また、本発明においては、前記描画像制御部は、予め定められたジェスチャーを、前記領域を定める指示として取得する構成としてもよい。
この構成によれば、描画像を消去する領域を指定することができる。

また、本発明は、供給される描画像と外部装置から供給される表示画像を表示面に表示する表示部を有する表示装置の制御方法であって、前記表示面に対する指示体の位置を特定する位置特定ステップと、前記描画像を前記位置特定ステップで特定した位置に応じて生成し、当該描画像を前記表示部へ供給する描画ステップと、前記表示画像が第１の表示画像から第２の表示画像へ替わった場合、表示していた前記描画像を消去する描画像制御ステップとを備える表示装置の制御方法を提供する。
本発明によれば、表示された画像に対して指示体により描画が行われた場合、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

表示システム１を構成する装置を示した図。 プロジェクター１０と指示体２０のハードウェア構成を示した図。 制御部１１０と制御部２１０の機能ブロック図。 指示体を検出するタイムチャートの一例を示した図。 スクリーンＳＣに投写される画像の一例を示した図。 スクリーンＳＣに投写される画像の一例を示した図。 制御部１１０が行う処理の流れの一例を示したフローチャート。 スクリーンＳＣに投写される画像の一例を示した図。 スクリーンＳＣに投写される画像の一例を示した図。 スクリーンＳＣに投写される画像の一例を示した図。 変形例を説明するための図。 変形例を説明するための図。

［実施形態］
（実施形態の構成）
図１は、本発明の一実施形態に係る表示システム１を構成する装置を示した図である。表示システム１は、画像の表示面となるスクリーンＳＣに画像を投写するプロジェクター１０、指示体２０及び発光装置３０を備える。

表示装置の一例であるプロジェクター１０は、外部装置の一例であるＰＣ（Personal Computer）４０に無線又は有線で接続され、ＰＣ４０から供給された映像信号が表す画像をスクリーンＳＣへ投写する。また、プロジェクター１０は、指示体２０や指が指示した位置に画像を描画する描画機能や、接続されているＰＣのポインティングデバイスとして指示体２０や指を使用するＰＣ操作機能を備えている。

本実施形態に係るプロジェクター１０は、スクリーンＳＣの斜め上方に設置され、スクリーンＳＣに向けて画像を投写する。本実施形態においては、プロジェクター１０は、画像の表示面となるスクリーンＳＣへ画像を投写するが、スクリーンＳＣの代わりに壁面（表示面）に画像を投写してもよい。また、本実施形態においては、プロジェクター１０は、金具によって壁面に設置される構成となっているが、天井に設置してもよい。

ペン型の指示体２０は、上述した描画機能やＰＣ操作機能を使用するときのポインティングデバイスとして機能し、プロジェクター１０が投写するＰＣのＧＵＩ（Graphical User Interface）をユーザーが操作するときや、投写された画像にユーザーが描画を行うときなどに使用される。

発光装置３０は、スクリーンＳＣ上にある指に光（本実施形態では赤外光）を照射する発光部を有する。発光装置３０はスクリーンＳＣの上端より上に設置され、下向きに角度θの範囲に光を拡散させて出射する。発光装置３０から出射された光は、スクリーンＳＣに沿う光の層を形成する。本実施形態では、角度θは、ほぼ１８０度に達し、スクリーンＳＣのほぼ全体に、光の層が形成される。スクリーンＳＣの表面と、発光装置３０により形成される光の層とは近接していることが好ましい。スクリーンＳＣの表面から離れた位置にある指も照射できるように光の層は厚みを持っている。また、発光部を積層することにより、スクリーンＳＣから離れた位置にある指を照射してもよい。発光装置３０からの光の出射は、プロジェクター１０により制御される。

図２は、プロジェクター１０及び指示体２０のハードウェア構成を示した図である。指示体２０は、制御部２１０、通信部２２０、発光部２３０、操作部２４０、電源２５０を有する。電源２５０は、例えば乾電池又は二次電池であり、制御部２１０、通信部２２０、発光部２３０及び操作部２４０へ電力を供給する。操作部２４０は、電源２５０から各部への電力供給を制御するスイッチ（図示略）を備えている。操作部２４０のスイッチがオンとなると、電源２５０から各部へ電力が供給され、操作部２４０のスイッチがオフとなると、電源２５０から各部への電力の供給が停止される。発光部２３０は、赤外光を発する発光ダイオードを有しており、指示体２０の先端に設けられている。発光部２３０の点灯及び消灯は、制御部２１０により制御される。発光部２３０は、点光源であり、発光部２３０が発する光は、指示体２０の先端から球面上に広がる。通信部２２０は、赤外光を受光する受光素子を備えている。通信部２２０は、プロジェクター１０から赤外光で送られる各種信号を受信する。通信部２２０は、受信した各種信号を電気信号に変換して制御部２１０へ供給する。制御部２１０は、発光部２３０及び通信部２２０に接続されている。制御部２１０は、通信部２２０から供給される信号に応じて発光部２３０の制御を開始し、発光部２３０の発光ダイオードの点灯及び消灯を制御する。

プロジェクター１０は、制御部１１０、記憶部１２０、操作部１３０、投写部１４０を備える。また、プロジェクター１０は、映像処理部１５０、映像インターフェース１６０、撮像部１７０Ａ、撮像部１７０Ｂ、通信部１８０を備える。制御部１１０は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）を備えたマイクロコンピューターである。ＲＯＭに記憶されているプログラムをＣＰＵが実行すると、プロジェクター１０においては、制御部１１０が各部を制御し、画像をスクリーンＳＣに投写する機能や、指や指示体２０をポインティングデバイスとして利用する機能、描画機能、ＰＣ操作機能、ユーザーのジェスチャーに応じてＰＣ４０を操作するジェスチャー機能などが実現する。記憶部１２０は、投写する映像の画質に係る設定値や、各種機能に係る情報を記憶する。また、記憶部１２０は、描画機能により描画した画像を記憶する。

映像インターフェース１６０は、ＲＣＡ、Ｄ−Ｓｕｂ、ＨＤＭＩ（登録商標）、ＵＳＢ（Universal Serial Bus）など、映像信号が供給されるコネクター（端子）を複数有し、外部装置からコネクターに供給された映像信号を映像処理部１５０へ供給する。映像インターフェース１６０は、複数の映像信号を取得する映像取得手段の一例である。映像インターフェース１６０は、無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信のインターフェースを有し、無線通信により映像信号を取得してもよい。

操作部１３０は、プロジェクター１０を操作するための複数のボタンを備えている。操作されたボタンに応じて制御部１１０が各部を制御することにより、スクリーンＳＣに投写される画像の調整や、プロジェクター１０が有する各種機能の設定などが行われる。また、操作部１３０は、リモートコントローラー（図示略）からの赤外光の信号を受光する受光部（図示略）を備えている。操作部１３０は、リモートコントローラーから送信された信号を電気信号に変換して制御部１１０へ供給し、制御部１１０は、供給される信号に応じて各部を制御する。

投写部１４０と映像処理部１５０は協働し、画像を表示する表示部として機能する。映像処理部１５０は、映像インターフェース１６０から供給される映像信号を取得する。また、映像処理部１５０は、プロジェクター１０を操作するためのＧＵＩや、描画機能によって描画される画像などのオンスクリーン画像の信号を制御部１１０から取得する。映像処理部１５０は、ＶＲＡＭ（Video RAM）１５１を備えている。ＶＲＡＭ１５１は、映像信号を展開する領域と、オンスクリーン画像の信号を展開する領域を備えており、各信号は、それぞれの領域に展開される。映像処理部１５０は、各種の画像処理機能を備えており、ＶＲＡＭ１５１に展開された映像信号に画像処理を施し、投写する画像の画質を調整する。また、映像処理部１５０は、制御部１１０からオンスクリーン画像の信号が供給された場合には、オンスクリーン画像の信号と映像インターフェース１６０から供給される映像信号とを重畳した映像信号を投写部１４０へ供給する。

映像を投写する投写部１４０は、光源１４１、ライトバルブ１４２、駆動回路１４４及び投写光学系１４３を有している。光源１４１は、光を発するランプであり、光源１４１が発した光は、図示省略した複数のダイクロイックミラーやミラーによって赤、緑、青の光に分光され、分光された赤、緑、青のそれぞれの光はライトバルブ１４２に導かれる。なお、光源１４１は、ランプではなく、発光ダイオード又はレーザ光を発する半導体レーザ装置であってもよい。

駆動回路１４４は、映像処理部１５０から供給される映像信号を取得する。駆動回路１４４に供給される映像信号は、投写する画像における赤の成分の階調を表す階調データ、投写する画像における緑の成分の階調を表す階調データ及び投写する画像における青の成分の階調を表す階調データを有する。駆動回路１４４は、赤、緑、青の各色の階調データを抽出し、抽出した各色の階調データに基づいてライトバルブ１４２を駆動する。

ライトバルブ１４２は、前述の赤の光が入射する液晶ライトバルブ、前述の緑の光が入射する液晶ライトバルブ、及び前述の青の光が入射する液晶ライトバルブを有している。液晶ライトバルブは、透過型の液晶パネルであり、複数行複数列でマトリクス状に配置された画素を備えている。赤の光が入射する液晶ライトバルブは赤の階調データに基づいて駆動され、緑の光が入射する液晶ライトバルブは緑の階調データに基づいて駆動され、青の光が入射する液晶ライトバルブは青の階調データに基づいて駆動される。各液晶ライトバルブは、駆動回路１４４によって各画素が制御されて画素の透過率が変化する。画素の透過率が制御されることにより、液晶ライトバルブを透過した各色の光は、各階調データに対応した画像となる。液晶ライトバルブを透過した赤、緑、青の光の画像は、図示省略したダイクロイックプリズムにより合成されて投写光学系１４３に入射する。投写光学系１４３は、入射した画像を拡大する光学系であり、入射した画像をレンズやミラーによって拡大してスクリーンＳＣに投写する。スクリーンＳＣに画像が投写されると、表示面であるスクリーンＳＣに画像が表示される。なお、透過型の液晶パネルの代わりに反射型の液晶パネルを採用してもよいし、デジタルミラーデバイスなどを用いてもかまわない。

プロジェクター１０は、ステレオ方式により、指示体２０や指の位置及びスクリーンＳＣまでの距離を特定するために、２つの撮像部１７０Ａ及び撮像部１７０Ｂを有している。撮像部１７０Ａ及び撮像部１７０Ｂは、発光部２３０が発する赤外光や、発光装置３０から出射されて指で反射した赤外光を受光する撮像素子（ＣＭＯＳやＣＣＤなど）、撮像素子に像を結像する光学系、撮像素子へ入射する光を制限する絞りなどを備えている。撮像部１７０Ａ及び撮像部１７０Ｂは、スクリーンＳＣを含む範囲を撮像範囲とし、撮像した範囲の画像を生成し、生成した画像を表す画像信号を出力する。なお、本実施形態においては、プロジェクター１０がスクリーンＳＣの斜め上方に設置されるため、撮像部１７０Ａ及び撮像部１７０Ｂは、スクリーンＳＣを含む範囲を斜め上方から撮像することになる。通信部１８０は、赤外光を発する発光ダイオードを備えている。通信部１８０は、制御部１１０により、発光ダイオードの点灯及び消灯が制御され、発光部２３０の点灯及び消灯を制御するための赤外光の信号を送信する。また、通信部１８０は、ＰＣと通信を行うための通信インターフェースを有し、例えば、ＵＳＢやＬＡＮの通信インターフェースを備える。

図３は、制御部１１０がプログラムを実行することにより実現する機能と、制御部２１０において実現する機能の構成を示した機能ブロック図である。まず、プロジェクター１０の制御部１１０において実現する機能について説明する。

位置特定部１１３は、画像の投写領域において指示体２０の発光部２３０の位置や指示体の一例である指の位置を、例えば図４に示したタイムチャートで周期的に特定する。指の位置や発光部２３０の位置を特定する期間は、図４に示したようにフェーズＰ１１からフェーズＰ１４までの４つのフェーズを有する。指の位置や発光部２３０の位置を検出する際には、フェーズＰ１１からフェーズＰ１４までが繰り返される。フェーズＰ１１は、プロジェクター１０が撮像部１７０Ａ及び撮像部１７０Ｂで撮像を行うタイミングと、指示体２０が発光するタイミング及び発光装置３０が赤外光を出射するタイミングを同期させるためのフェーズである。フェーズＰ１１においては、位置特定部１１３は、所定期間ｔｅ１で赤外光の同期信号が出力されるように通信部１８０を制御する。

指示体２０においては、通信部２２０が同期信号を受光し、同期信号を受光してから所定時間が経過すると、予め設定された期間ｔｅ２で発光部２３０が点灯するように、制御部２１０が発光部２３０を制御する。本実施形態においては、フェーズＰ１２、フェーズＰ１３及びフェーズＰ１４の開始時点から発光部２３０が点灯するように制御される。また、位置特定部１１３は、フェーズＰ１２及びフェーズＰ１４の開始時間から期間ｔｅ２で発光装置３０が赤外光を出射するように、発光装置３０を制御する。

位置特定部１１３は、フェーズＰ１２〜フェーズＰ１４において、撮像部１７０Ａ及び撮像部１７０Ｂを制御し、設定されているシャッタースピードでスクリーンＳＣを含む所定範囲を撮像する。撮像部１７０Ａ及び撮像部１７０Ｂにおいて電子シャッター機能により露光が行われる露光期間は、フェーズＰ１２、フェーズＰ１３、フェーズＰ１４の各フェーズの開始時点から始まる。露光が終了する時点は、設定されているシャッタースピードにより定まり、各フェーズの期間内である。撮像部１７０Ａ及び撮像部１７０ＢがフェーズＰ１２〜フェーズＰ１４の露光期間で撮像した画像の画像信号は、位置特定部１１３へ供給される。

位置特定部１１３は、撮像部１７０Ａ及び撮像部１７０Ｂから供給された画像信号が表す画像を用いて、投写された画像上にある指や発光部２３０の位置、スクリーンＳＣから発光部２３０までの距離を特定する。具体的には、フェーズＰ１２とフェーズＰ１４において、発光装置３０が発した赤外光が指に照射されている場合には、撮像部１７０Ａ及び撮像部１７０Ｂで得られた画像に発光装置３０から出射されて指で反射した赤外光が映る。また、フェーズＰ１２とフェーズＰ１４において、発光部２３０が撮像部１７０Ａ及び撮像部１７０Ｂの撮像範囲内にあると、撮像部１７０Ａ及び撮像部１７０Ｂで得られた画像に発光部２３０が発した赤外光も映る。フェーズＰ１３においては、発光装置３０は光を出射しないため、撮像部１７０Ａ及び撮像部１７０Ｂで得られた画像には、発光部２３０が発した赤外光が映る。

位置特定部１１３は、フェーズＰ１２〜フェーズＰ１４において、撮像部１７０Ａ及び撮像部１７０Ｂで得られた画像に映る赤外光の位置及びスクリーンＳＣまでの距離をステレオ法により特定する。位置特定部１１３は、フェーズＰ１２とフェーズＰ１４において位置を特定した赤外光のうち、フェーズＰ１３において位置を特定した赤外光の位置に近い位置の赤外光を特定し、特定した赤外光の位置を発光部２３０の位置とする。また、位置特定部１１３は、フェーズＰ１２とフェーズＰ１４において位置を特定した赤外光のうち、フェーズＰ１３において位置を特定した赤外光から遠い赤外光の位置を指の位置とする。なお、位置特定部１１３は、フェーズＰ１３において赤外光が撮像範囲内に無い場合には、フェーズＰ１２とフェーズＰ１４において特定した位置を指の位置とする。これらの特定した位置は、描画機能やＰＣ操作機能などの各種機能を実行するときに使用される。

描画部１１２は、投写している画像に対し、位置特定部１１３が特定した位置に応じて描画を行う。描画像制御部１１４は、ジェスチャー操作が行われた場合、映像信号を映像処理部１５０へ供給しているコネクターが切り替えられた場合、又は投写する画像が替わった場合、指示体２０又は指により描画された描画像の記憶や当該描画像の表示の制御を行う。

次に、指示体２０の制御部２１０において実現する機能について説明する。信号取得部２１１は、通信部２２０が受信した同期信号を取得する。発光制御部２１２は、信号取得部２１１から同期信号を取得し、同期信号を取得してから所定時間が経過すると、フェーズＰ１２〜フェーズＰ１４において期間ｔｅ２で発光部２３０が点灯するように、発光部２３０を制御する。

（実施形態の動作例）
次に本実施形態の動作例について、図５−１０を用いて説明する。図５、６、８−１０は、スクリーンＳＣに投写される画像の一例を示した図であり、図７は、制御部１１０が行う処理の流れの一例を示したフローチャートである。

ユーザーは、プロジェクター１０に接続されているＰＣ４０において、プレゼンテーション用の文書のファイルを開く。ＰＣ４０が文書の一つのページを表示すると、表示したページを表す映像信号がＰＣ４０からプロジェクター１０へ供給される。映像インターフェース１６０は、ＰＣ４０から供給される映像信号を取得し、取得した映像信号を映像処理部１５０へ供給する。

制御部１１０は、描画機能がオンである場合、ＰＣ４０をジェスチャーで操作するためのオンスクリーン画像の信号を映像処理部１５０へ供給する。映像処理部１５０は、供給された信号をＶＲＡＭ１５１に展開し、ＶＲＡＭ１５１にて画像処理が施された映像信号を投写部１４０へ供給する。投写部１４０は、供給された映像信号が表す画像をスクリーンＳＣに投写する。

図５は、スクリーンＳＣに投写された画像の一例を示した図である。投写部１４０が画像をスクリーンＳＣに投写すると、ＰＣ４０で表示されているページの画像と、ジェスチャー操作のための画像Ｇ１０がスクリーンＳＣに投写される。画像Ｇ１０は、縦方向に並んだ画像Ｇ１０１、画像Ｇ１０２及び画像Ｇ１０３で構成されている。

ユーザーは、投写された映像に対して描画を行う場合、スクリーンＳＣ上に指示体２０を位置させる。制御部１１０（位置特定部１１３）は、指示体２０がスクリーンＳＣ上に位置すると、指示体２０の位置を特定する。制御部１１０は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号を解析し、指示体２０の位置を予め定められた周期で特定する。ユーザーが指示体２０をスクリーンＳＣ上で移動させると、制御部１１０（描画部１１２）は、特定した指示体２０の位置を結ぶ線のオンスクリーン画像（描画像の一例）の信号を映像処理部１５０へ供給する。映像処理部１５０は、このオンスクリーン画像の信号をＶＲＡＭ１５１のオンスクリーン画像の信号を展開する領域に展開し、このオンスクリーン画像をＰＣ４０の画面の画像に重畳した映像信号を投写部１４０へ供給する。投写部１４０が、供給された映像信号の画像を投写すると、例えば、図６に示したように指示体２０の移動に応じた画像Ｐ２０が投写される。

制御部１１０は、描画機能がオンの状態である場合、ジェスチャー操作が行われたか、映像インターフェース１６０において映像信号を映像処理部１５０へ供給しているコネクターが切り替えられたか、又は投写する画像が替わったかを監視している。そして制御部１１０（描画像制御部１１０）は、ジェスチャー操作が行われた場合、映像信号を映像処理部１５０へ供給しているコネクターが切り替えられた場合、又は投写する画像が替わった場合、図７に示した処理を実行する。

具体的には、制御部１１０は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号を解析し、画像Ｇ１０１、画像Ｇ１０２及び画像Ｇ１０３の位置の画像の変化を監視する。例えば、ユーザーが図８に示した位置から手を矢印Ａ方向へ移動させると、ユーザーの手に画像Ｇ１０１、画像Ｇ１０２、画像Ｇ１０３が投写されるため、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号においては、画像Ｇ１０１の位置、画像Ｇ１０２の位置、画像Ｇ１０３の位置の順番で、これらの位置の画像が変化する。

制御部１０１は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号において、画像Ｇ１０１の位置、画像Ｇ１０２の位置、画像Ｇ１０３の位置の順番で画像が変化すると、ユーザーがページを進めるジェスチャーを行ったものと判断する（ステップＳＡ１でＹＥＳ）。制御部１１０は、ユーザーがページを進めるジェスチャーを行ったと判断すると、ページを進める指示を表すメッセージを、ジェスチャーに応じたメッセージとして通信部１８０を制御してＰＣ４０へ送信する（ステップＳＡ２）。制御部１１０は、ステップＳＡ２の処理を終えると、ＶＲＡＭ１５１の内容を監視し、投写する画像が替わったか判断する（ステップＳＡ３）。制御部１１０は投写する画像が替わっていない場合（ステップＳＡ３でＮＯ）、ＶＲＡＭ１５１の内容の監視を続ける。

一方、プロジェクター１０からメッセージを送られたＰＣ４０は、ページを進める指示を表すメッセージを取得すると、開いている文書のページを１ページ目から２ページ目に進め、文書の２ページ目の映像信号をプロジェクター１０へ供給する。このとき、ＰＣ４０から供給されてプロジェクター１０が表示する画像は、１ページ目の画像（第１の表示画像）から２ページ目の画像（第２の表示画像）に変化する。映像処理部１５０は、供給された映像信号をＶＲＡＭ１５１に展開する。ＶＲＡＭ１５１に新たな映像信号が展開されると、投写部１４０が投写する画像は、文書の２ページ目の画像となる。制御部１１０は、投写する映像が替わると（ステップＳＡ３でＹＥＳ）、指示体２０を用いて描画された画像のデータ（ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている画像Ｐ２０のデータ）を記憶部１２０に記憶させる（ステップＳＡ４）。

制御部１１０は、ステップＳＡ４の処理を終えると、ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている描画像のデータを消去する（ステップＳＡ５）。ステップＳＡ５の処理が行われると、描画像のオンスクリーンの画像がなくなるため、投写されていた画像Ｐ２０が表示されなくなり、図９に示したように、ＰＣ４０で表示されている２ページ目の画像がスクリーンＳＣに投写される。

図９の画像が投写されているときにユーザーが指示体２０で描画を行うと、例えば、図１０に示したように、指示体２０の移動に応じた画像Ｐ２１が投写される。
ここで、ユーザーが図１０に示した位置から手を矢印Ｂ方向へ移動させると、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号においては、画像Ｇ１０３の位置、画像Ｇ１０２の位置、画像Ｇ１０１の位置の順番で、これらの位置の画像が変化する。

制御部１０１は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号において、画像Ｇ１０３の位置、画像Ｇ１０２の位置、画像Ｇ１０１の位置の順番で画像が変化すると、ユーザーがページを戻すジェスチャーを行ったものと判断する（ステップＳＡ１でＹＥＳ）。制御部１１０は、ユーザーがページを戻すジェスチャーを行ったと判断すると、ページを戻す指示を表すメッセージを、ジェスチャーに応じたメッセージとして通信部１８０を制御してＰＣ４０へ送信する（ステップＳＡ２）。制御部１１０は、ステップＳＡ２の処理を終えると、ＶＲＡＭ１５１の内容を監視し、投写する映像が替わったか判断する（ステップＳＡ３）。

一方、プロジェクター１０からメッセージを送られたＰＣ４０は、ページを戻す指示を表すメッセージを取得すると、開いている文書のページを２ページ目から１ページ目に戻し、文書の１ページ目の映像信号をプロジェクター１０へ供給する。このとき、ＰＣ４０から供給されてプロジェクター１０が表示する画像は、２ページ目の画像（第２の表示画像）から１ページ目の画像（第１の表示画像）に変化する。映像処理部１５０は、供給された映像信号をＶＲＡＭ１５１に展開する。ＶＲＡＭ１５１に新たな映像信号が展開されると、投写部１４０が投写する画像は、文書の１ページ目の画像となる。制御部１１０は、投写する画像が替わると（ステップＳＡ３でＹＥＳ）、指示体２０を用いて描画された画像のデータ（ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている画像Ｐ２１のデータ）を記憶部１２０に記憶させる（ステップＳＡ４）。

制御部１１０は、ステップＳＡ４の処理を終えると、ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている描画像のデータを消去する（ステップＳＡ５）。ステップＳＡ５の処理が行われると、描画像のオンスクリーンの画像がなくなるため、投写されていた画像Ｐ２１が表示されなくなり、図５に示したように、ＰＣ４０で表示されている１ページ目の画像がスクリーンＳＣに投写される。

次に、ＰＣ４０を操作することによりプロジェクター１０が投写する画像が替わったときの動作例について説明する。例えば、図６に示したように文書の１ページ目の画像と画像Ｐ２０が表示されているときにユーザーがＰＣ４０を操作し、開いている文書のページを２ページ目に進める操作を行うと、文書の２ページ目の映像信号がＰＣ４０から映像インターフェース１６０へ供給される。映像処理部１５０は、映像インターフェース１６０から供給される映像信号をＶＲＡＭ１５１に展開し、ＶＲＡＭ１５１にて画像処理が施された映像信号を投写部１４０へ供給する。投写部１４０は、供給された映像信号が表す２ページ目の画像をスクリーンＳＣに投写する。

制御部１１０は、ＶＲＡＭ１５１の内容を監視し、投写する画像が替わったと判断すると、図７に示した処理を実行する。制御部１１０は、映像信号を取得する映像インターフェース１６０のコネクターを切り替える操作が行われずに投写する画像が替わった場合（ステップＳＡ１でＮＯ、ステップＳＡ６でＮＯ、ステップＳＡ７でＹＥＳ）、指示体２０を用いて描画された画像のデータ（ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている画像Ｐ２０のデータ）を記憶部１２０に記憶させる（ステップＳＡ４）。制御部１１０は、ステップＳＡ４の処理を終えると、ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている描画像のデータを消去する（ステップＳＡ５）。ステップＳＡ５の処理が行われると、描画像のオンスクリーンの画像がなくなるため、投写されていた画像Ｐ２０が表示されなくなり、図９に示したように、ＰＣ４０で表示されている２ページ目の画像がスクリーンＳＣに投写される。なお、制御部１１０は、ステップＳＡ７でＮＯと判断した場合、図７の処理を終了する。

なお、２ページ目の画像が表示されているときに指示体２０で描画を行った後、ユーザーがＰＣ４０を操作し、開いている文書のページを１ページ目に戻す操作を行った場合にも、ＶＲＡＭ１５１に新たな映像信号が展開されて投写する画像が替わるため、制御部１１０は、ステップＳＡ１でＮＯ、ステップＳＡ６でＮＯ、ステップＳＡ７でＹＥＳと判断し、ステップＳＡ４とステップＳＡ５の処理を行う。

次に、映像信号を取得する映像インターフェース１６０のコネクターを切り替える操作がプロジェクター１０において行われたときの動作例について説明する。例えば、ＰＣ４０が映像インターフェースのＤ−ｓｕｂコネクターに接続されており、図６の画像が表示されている状態から、他のＰＣを映像インターフェースのＨＤＭＩコネクターに接続し、ユーザーが映像信号を取得するコネクターをＤ−ｓｕｂからＨＤＭＩに切り替えた場合、制御部１１０は、図７に示した処理を実行する。制御部１１０は、映像信号を取得する映像インターフェース１６０のコネクターを切り替える操作が行われた場合（ステップＳＡ１でＮＯ、ステップＳＡ６でＹＥＳ）、ＶＲＡＭ１５１の内容を監視し、投写する映像が替わったか判断する（ステップＳＡ３）。

ここで映像処理部１５０は、ＨＤＭＩのコネクターから供給される映像信号をＶＲＡＭ１５１に展開する。ＶＲＡＭ１５１に新たな映像信号が展開されると、投写部１４０が投写する画像は、切り替え後のコネクターに接続されたＰＣから供給される映像信号の画像となり、投写する画像が替わる。制御部１１０は、投写する画像が替わると（ステップＳＡ３でＹＥＳ）、指示体２０を用いて描画された画像のデータ（ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている画像Ｐ２１のデータ）を記憶部１２０に記憶させる（ステップＳＡ４）。

制御部１１０は、ステップＳＡ４の処理を終えると、ＶＲＡＭ１５１のオンスクリーン画像を展開する領域に展開されている描画像のデータを消去する（ステップＳＡ５）。ステップＳＡ５の処理が行われると、描画像のオンスクリーンの画像がなくなるため、投写されていた画像Ｐ２１が表示されなくなり、ＨＤＭＩのコネクターから供給される映像信号の画像がスクリーンＳＣに投写される。

以上説明したように本実施形態によれば、指示体２０で描画したときに表示されていた画像が替わると、描画されていた画像が消去される。即ち、表示された画像に対して指示体２０により描画が行われた場合、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

なお、上記の説明においては、指示体２０を用いて描画を行う例を説明したが、本発明においては、指示体としてユーザーの指を使用する場合にも、指の位置に応じた描画を行うことができる。また、本実施形態においては、記憶部１２０に記憶された描画像のデータをＰＣ４０へ送信し、ＰＣ４０で描画像のデータを記憶する構成としてもよい。この構成によれば、記憶した描画像のデータをプリンターで出力したり、ディスプレイで表示したりすることにより、投写した画像に書き込んだ描画像を確認することができる。また、本実施形態においては、記憶部１２０に記憶させた描画像のデータは、プロジェクター１０の電源をオフとするときに消去する構成としてもよい。

［変形例］
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。例えば、上述の実施形態を以下のように変形して本発明を実施してもよい。なお、上述した各実施形態及び以下の変形例は、一つ又は複数を適宜組み合わせて実施してもよい。

上述した実施形態においては、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号が表す画像において、ジェスチャー操作を特定するために画像の変化を監視する監視領域は、画像が投写される投写領域内にある画像Ｇ１０１、画像Ｇ１０２及び画像Ｇ１０３の位置を含む領域内であるが、実施形態の監視領域に限定されるものではない。例えば、監視領域は、投写部１４０によって画像が投写される領域の外側の領域であってもよい。

図１１は、本変形例における監視領域の変形例の一例を示した図である。図１１において、領域Ａ２０は、撮像部１７０Ａ及び撮像部１７０Ａが撮影する領域を表し、領域Ａ１０は、投写部１４０が投写した画像の領域を表している。制御部１１０は、投写部１４０によって画像が投写される投写領域Ａ１０の外側であって、投写領域Ａ１０の左側に、ジェスチャー操作を特定するための監視領域Ａ３０を設ける。制御部１１０は、この監視領域Ａ３０内において、上方から順番に画像が変化した場合には、ユーザーがページを進めるジェスチャーを行ったものと判断し、下方から順番に画像が変化した場合には、ユーザーがページを戻すジェスチャーを行ったものと判断してもよい。

本発明においては、記憶部１２０に記憶された描画像のデータを用いて、消去した描画像を復元するようにしてもよい。本変形例においては、制御部１１０は、ステップＳＡ４で描画像のデータを記憶部１２０に記憶させる際に、例えば、ＶＲＡＭ１５１に展開された映像信号が表す画像において予め定めた領域のチェックサムを、描画像データと対応付けて記憶する。このチェックサムは、外部装置から供給される画像を表す情報の一例である。ステップＳＡ５では描画像が消去されるため、この変形例のステップＳＡ４では、制御部１１０が消去する描画像と、当該描画像を表示していたときに外部装置から供給されていた画像を表す情報とを対応付けて記憶することとなる。制御部１１０は、投写する映像が替わった場合、表示していた描画像をステップＳＡ５で消去した後、新たに外部装置から供給されてＶＲＡＭ１５１に展開された映像信号が表す画像において予め定めた領域のチェックサムを算出する。制御部１１０は、算出したチェックサムが記憶部１２０に記憶されている場合、算出したチェックサムに対応付けて記憶されている描画像のデータを取得し、取得した描画像のデータをＶＲＡＭ１５１に展開する。なお、チェックサムを算出する領域は、例えば、ページ番号を含む領域をユーザーが設定する構成としてもよい。この構成によれば、例えば、文書の１ページ目の画像と描画像を表示している図６の状態から２ページ目の画像を表示している図９の状態に移行した後、表示する画像が１ページ目の画像に戻ると（つまり、１ページ目の画像の表示を終了した後に１ページ目の画像を再度表示すると）、１ページ目の画像のチェックサムに対応付けて記憶されている画像Ｐ２０が再度表示されることとなり、表示する画像に応じて消去した画像を復元することができる。

本発明においては、画像が投写される領域内の全ての描画像を消去する構成に限定されるものではなく、例えば、ユーザーにより指定された特定の領域内の描画像を消去し、指定された領域外の描画像については、描画像を消去しない構成としてもよい。例えば、制御部１１０は、図１２において破線で示したように画像の投写領域を複数の領域に分割し、いずれかの領域内においてジェスチャー操作が行われた場合、ジェスチャー操作が行われた領域内に表示されている描画像を消去し、他の領域内に表示されている描画像を消去しない構成としてもよい。

本発明においては、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号を解析し、投写されている画像が替わったか否かを判断してもよい。本変形例においては、制御部１１０は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号において、投写部１４０により投写された画像が映る領域を予め特定する。制御部１１０は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号を解析し、特定した領域内の画像が替わった場合、上述したステップＳＡ４とステップＳＡ５の処理を行う。なお、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号が表す画像においては、描画像やユーザーが映る場合がある。制御部１１０は、描画像を表示している場合には、表示されている描画像以外の部分の画像の変化により、投写されている画像が替わったか否かを判断する。また、制御部１１０は、撮像部１７０Ａ及び撮像部１７０Ｂから供給される映像信号を解析し、ユーザーが映っている部分を特定する。制御部１１０は、ユーザーが映っている部分がある場合には、ユーザーが映っている部分以外の部分の画像の変化により、投写されている画像が替わったか否かを判断する。

上述した実施形態においては、ＰＣ４０から供給される映像信号が示す画像をプロジェクター１０が投写し、投写された画像に対して描画する画像をプロジェクター１０が生成して投写しているが、この構成に限定されるものではない。例えば、タッチパネルを備える表示装置において、表示された画像に対して指やスタイラスペンで画像の描画を行う。この構成において、表示装置は、表示している画像を上述の実施形態と同様に監視する。表示装置は、表示している画像が替わった場合には、描画像を記憶し、表示していた描画像を消去する。この構成でも、表示された画像に対して指示体により描画が行われた場合、表示される画像が変化すると、変化後の画像に対応していない描画を消去することができる。

１…表示システム、１０…プロジェクター、２０…指示体、３０…発光装置、１１０…制御部、１１２…描画部、１１３…位置特定部、１１４…描画像制御部、１２０…記憶部、１３０…操作部、１４０…投写部、１５０…映像処理部、１６０…映像インターフェース、１７０Ａ、１７０Ｂ…撮像部、１８０…通信部、２１０…制御部、２１１…信号取得部、２１２…発光制御部、２２０…通信部、２３０…発光部、２４０…操作部、２５０…電源、ＳＣ…スクリーン。

Claims (10)

1. 供給される描画像と外部装置から供給される表示画像を表示面に表示する表示部と、
   前記表示面に対する指示体の位置を特定する位置特定部と、
   前記描画像を前記位置特定部が特定した位置に応じて生成し、当該描画像を前記表示部へ供給する描画部と、
   前記表示画像が第１の表示画像から第２の表示画像へ替わった場合、前記表示面内の定められた第１の領域内に表示していた前記描画像を消去し、前記第１の領域外に表示していた前記描画像は消去しない描画像制御部と
   を備える表示装置。
2. 前記表示画像が供給される端子を複数有し、
   前記表示部は、前記端子から供給される前記表示画像を表示し、
   前記描画像制御部は、前記表示部へ前記表示画像を供給する端子が変更された場合、前記第１の領域内に表示していた前記描画像を消去する
   請求項１に記載の表示装置。
3. 前記描画像制御部は、前記外部装置から供給される前記表示画像が替わった場合、前記第１の領域内に表示していた前記描画像を消去する
   請求項２に記載の表示装置。
4. 前記表示面を撮影する撮像部を有し、
   前記撮像部で撮影した前記表示面に表示されている前記表示画像が替わった場合、前記第１の領域内に表示していた前記描画像を消去する
   請求項１から請求項３のいずれか一項に記載の表示装置。
5. 前記描画像制御部は、ユーザーからの指示を取得し、取得した指示が前記表示画像を替える指示である場合、前記第１の領域内に表示していた前記描画像を消去する
   請求項１から請求項４のいずれか一項に記載の表示装置。
6. 前記描画像制御部は、予め定められたジェスチャーを前記指示として取得する
   請求項５に記載の表示装置。
7. 前記表示画像が前記表示面に表示されていたときに前記表示面に表示された前記描画像を記憶する記憶部を有する
   請求項１から請求項６のいずれか一項に記載の表示装置。
8. 前記記憶部は、前記描画像制御部が消去した前記第１の領域内に表示していた前記描画像と、当該消去した前記第１の領域内に表示していた前記描画像が表示されていたときに表示されていた前記表示画像を表す情報とを対応付けて記憶し、
   前記描画像制御部は、前記表示部が前記表示画像の表示を終了した後に当該表示画像を再度表示する場合、当該表示画像を表す情報に対応付けて前記記憶部に記憶されている前記第１の領域内に表示していた前記描画像を前記表示部へ供給する
   請求項７に記載の表示装置。
9. 前記描画像制御部は、前記表示画像の投写領域を複数の領域に分割し、予め定められたジェスチャー操作が行われた前記領域を、前記第１の領域と定める
   請求項１から請求項８のいずれか一項に記載の表示装置。
10. 供給される描画像と外部装置から供給される表示画像を表示面に表示する表示部を有する表示装置の制御方法であって、
    前記表示面に対する指示体の位置を特定する位置特定ステップと、
    前記描画像を前記位置特定ステップで特定した位置に応じて生成し、当該描画像を前記表示部へ供給する描画ステップと、
    前記表示画像が第１の表示画像から第２の表示画像へ替わった場合、前記表示面内の定められた第１の領域内に表示していた前記描画像を消去し、前記第１の領域外に表示していた前記描画像は消去しない描画像制御ステップと
    を備える表示装置の制御方法。

Images