JP2022150346A - 表示方法及び表示システム - Google Patents

Abstract

【課題】一時的に表示される画像と永続的に表示される画像とを容易に書き込むことが可能な表示方法及び表示システムを提供する。【解決手段】表示方法は、発光ペン３による投写面Ｓｐに対する書き込み操作を検出することと、発光ペン３が有する操作ボタン３４ａが押下されたか否かを判定することと、書き込み操作が検出され、かつ、操作ボタン３４ａが押下されたと判定した場合に、書き込み操作に応じた画像を一時的なオブジェクトＯｂとして投写面Ｓｐに表示することと、一時的なオブジェクトＯｂを表示している期間に、操作ボタン３４ａが押下されていないと判定した場合に、一時的なオブジェクトＯｂを消去することと、を含む。【選択図】図１

Description

本発明は、表示方法及び表示システムに関する。

特許文献１には、タッチパネルディスプレイを備えた閲覧装置が記載されている。この閲覧装置では、タッチパネルディスプレイに表示された電子文書にユーザーから書き込みが入力された場合、この書き込みは、一時的な書き込みとして登録される。その後、この書き込みに対してダブルタップが検知された場合、この書き込みは、永続的な書き込みに変更される。

特開２０１８－９２４１８号公報

しかしながら、上記の装置では、一時的な書き込みから永続的な書き込みに変更する場合に、後から１つ１つの書き込みに対してダブルタップをする必要があるため、操作が煩雑であるという課題がある。

表示方法は、指示体による表示面に対する書き込み操作を検出することと、前記指示体に備わる操作ボタンが押下されたか否かを判定することと、前記書き込み操作が検出され、かつ、前記操作ボタンが押下されたと判定した場合に、前記書き込み操作に応じた画像を第１画像として前記表示面に表示することと、前記第１画像を表示している期間に、前記操作ボタンが押下されていないと判定した場合に、前記第１画像を消去することと、を含む。

表示システムは、操作ボタンを有する指示体と、前記指示体による表示面に対する書き込み操作を検出すること、及び、前記操作ボタンが押下されたか否かを判定すること、を行う検出装置と、前記書き込み操作が検出され、かつ、前記操作ボタンが押下されたと判定された場合に、前記書き込み操作に応じた画像を第１画像として前記表示面に表示することと、前記第１画像を表示している期間に、前記操作ボタンが押下されていないと判定された場合に、前記第１画像を消去することと、を行う表示装置と、を含む。

表示システムを示す斜視図。 プロジェクターの概略構成を示すブロック図。 画像投写部の概略構成を示すブロック図。 発光ペンの概略構成を示すブロック図。 プロジェクターの制御部の概略構成を示すブロック図。 描画制御部の動作を説明するためのフローチャート。 描画制御部の動作を説明するための説明図。 描画制御部の動作を説明するための説明図。 描画制御部の動作を説明するための説明図。 投写面上に表示される通知画像を示す図。 変形例に係るメニュー画像を示す図。 変形例に係る通知画像を示す図。

以下、本実施形態の表示システムについて、図面を参照して説明する。
図１は、本実施形態の表示システム１００を示す斜視図である。
図１に示すように、表示システム１００は、表示装置としてのプロジェクター１と、指示体としての発光ペン３とを備えている。プロジェクター１は、外部から入力される画像情報又は予め内部に記憶されている画像情報に基づく入力画像Ｐｉを、表示面としての投写面Ｓｐに投写する。本実施形態のプロジェクター１は、固定部材Ｔを介して壁面に固定されており、同じ壁面に沿って配置されている投写面Ｓｐに向けて画像を投写する。投写面Ｓｐとしては、例えば、スクリーンやホワイトボード等を用いることができるが、壁面自体に画像を投写する態様、即ち壁面を投写面Ｓｐとする態様であってもよい。

また、プロジェクター１は、投写面Ｓｐ上の検出領域Ａｄを含む範囲を撮像可能になっており、発光ペン３の発光部３５から発せられる光の位置に基づいて、検出領域Ａｄ内で発光ペン３により指示された指示位置を検出することができる。このため、ユーザーがこの発光ペン３で投写面Ｓｐ上に描画を行うような動作を行うと、プロジェクター１は、それまで投写していた入力画像Ｐｉ上に、指示位置の軌跡に沿って線が描画されたような画像を重畳して投写することができる。発光ペン３の側面には、ユーザーによって押下され得る操作ボタン３４ａが設けられている。なお、指示位置の軌跡に沿って描画される画像のことを、本明細書ではオブジェクトＯｂと表記する。

なお、本実施形態では、指示位置を検出可能な検出領域Ａｄは、入力画像Ｐｉが投写される投写領域Ａｐと等しいものとするが、投写領域Ａｐより広い範囲又は狭い範囲としてもよい。また、本実施形態では、発光ペン３は、赤外光を発するものとするが、他の波長域の光を発する態様であってもよい。

図２は、プロジェクター１の概略構成を示すブロック図であり、図３は、プロジェクター１が備える画像投写部１７の概略構成を示すブロック図である。
図２に示すように、プロジェクター１は、制御部１０と、記憶部１１と、入力操作部１２と、同期信号送信部１３と、撮像部１４と、画像情報入力部１５と、画像情報処理部１６と、表示部としての画像投写部１７とを一体的に備えて構成されている。プロジェクター１は、画像情報入力部１５に入力される画像情報に基づいて、画像投写部１７から投写面Ｓｐに画像を投写する。

制御部１０は、１つ又は複数のプロセッサーを備えて構成され、記憶部１１に記憶されている制御プログラムに従って動作することによりプロジェクター１の動作を統括制御する。

記憶部１１は、ＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等のメモリーを備えて構成される。ＲＡＭは、各種データ等の一時記憶に用いられ、ＲＯＭは、プロジェクター１の動作を制御するための制御プログラムや制御データ等を記憶する。また、記憶部１１は、画像投写部１７から投写するための画像情報を記憶していてもよい。

入力操作部１２は、ユーザーがプロジェクター１に対して各種指示を行うための複数の操作キーを備えている。入力操作部１２が備える操作キーとしては、電源のオンとオフとを切り替えるための「電源キー」、各種設定を行うためのメニューを表示させる「メニューキー」、メニューの項目を選択するための「方向キー」等がある。ユーザーが入力操作部１２の各種操作キーを操作すると、入力操作部１２は、ユーザーの操作内容に応じた操作信号を制御部１０に出力する。なお、遠隔操作が可能なリモコン（図示せず）を、入力操作部１２として用いる構成としてもよい。この場合、リモコンは、ユーザーの操作内容に応じた赤外線の操作信号を発信し、図示しないリモコン信号受信部がこれを受信して制御部１０に伝達する。

同期信号送信部１３は、同期用のパルス信号である同期信号を発光ペン３に送信するための発光部を有している。発光部の光源としては、例えば、赤外光を発するＬＥＤ（Light Emitting Diode）が用いられる。同期信号送信部１３は、制御部１０の制御に基づいて、例えば、数十ヘルツ程度の周波数で周期的に発光部を発光させて、発光ペン３に同期信号を送信する。発光ペン３は、この同期信号を周期的に受信し、受信した同期信号に同期したタイミングで繰り返し発光部３５を発光させる。

撮像部１４は、ＣＣＤ（Charge Coupled Device）センサー、或いはＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサー等の撮像素子（図示せず）を備えたカメラである。また、撮像部１４は、可視光を吸収して赤外光を透過させる赤外透過フィルターを有しており、この赤外透過フィルターを介して、発光ペン３から発せられる赤外光を撮像する。撮像部１４は、制御部１０の制御に基づいて投写面Ｓｐの検出領域Ａｄを撮像し、その撮像結果である撮像画像情報を制御部１０に出力する。制御部１０は、同期信号送信部１３から送信される同期信号に同期したタイミングで撮像部１４に撮像を行わせる。つまり、撮像部１４は、発光ペン３が発光するタイミングに合わせて撮像を繰り返す。

画像情報入力部１５は、コンピューターや画像再生装置等の外部の画像供給装置（図示せず）に接続され、画像供給装置から画像情報の供給を受ける。また、画像情報入力部１５は、制御部１０から、記憶部１１に記憶されている画像情報の供給を受けることができる。画像情報入力部１５は、入力された画像情報、即ち入力画像Ｐｉを表す画像情報を画像情報処理部１６に出力する。

画像情報処理部１６は、制御部１０の制御に基づいて、画像情報入力部１５から入力される画像情報に対して様々な処理を施し、処理後の画像情報を画像投写部１７のライトバルブ駆動部２４（図３参照）に出力する。例えば、画像情報処理部１６は、明るさやコントラスト等の画質を調整する処理、或いは、オブジェクトＯｂや通知画像等を入力画像Ｐｉに重畳する処理等を必要に応じて画像情報に施す。

なお、画像情報入力部１５及び画像情報処理部１６は、１つ又は複数のプロセッサー等によって構成されてもよいし、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の専用の処理装置によって構成されてもよい。

図３に示すように、画像投写部１７は、光源２１、光変調装置としての３つの液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂ、投写光学系２３、ライトバルブ駆動部２４等を備えて構成されている。画像投写部１７は、光源２１から射出された光を、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂで変調して画像光を形成し、レンズ及びミラーの少なくとも一方を含む投写光学系２３からこの画像光を投写して投写面Ｓｐに画像を表示する。

光源２１は、超高圧水銀ランプやメタルハライドランプ等の放電型の光源ランプ、又は発光ダイオードや半導体レーザー等の固体光源を含んで構成されている。光源２１から射出された光は、図示しないインテグレーター光学系によって輝度分布が略均一な光に変換され、図示しない色分離光学系によって光の３原色である赤色、緑色、青色の各色光成分に分離された後、それぞれ液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂに入射する。

液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂは、それぞれ一対の透明基板間に液晶が封入された透過型の液晶パネル等によって構成される。各液晶パネルには、マトリクス状に配列された複数の画素からなる矩形の画像形成領域２２ｉが形成されており、液晶に対して画素毎に駆動電圧を印加可能になっている。

ライトバルブ駆動部２４は、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂの画像形成領域２２ｉに画像を形成する。具体的には、ライトバルブ駆動部２４は、画像情報処理部１６から入力される画像情報に応じた駆動電圧を、画像形成領域２２ｉの各画素に印加し、各画素を画像情報に応じた光透過率に設定する。光源２１から射出された光は、液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂの画像形成領域２２ｉを透過することによって画素毎に変調され、画像情報に応じた画像光が色光毎に形成される。形成された各色の画像光は、図示しない色合成光学系によって画素毎に合成されてカラー画像を表す画像光となり、投写光学系２３によって投写面Ｓｐに拡大投写される。この結果、投写面Ｓｐ上には、画像情報入力部１５に入力された画像情報に基づく入力画像Ｐｉが表示される。

図４は、発光ペン３の概略構成を示すブロック図である。
図４に示すように、発光ペン３は、制御部３０と、記憶部３１と、同期信号受信部３２と、先端スイッチ３３と、側面スイッチ３４と、発光部３５とを備えて構成される。

制御部３０は、１つ又は複数のプロセッサーを備えて構成され、記憶部３１に記憶されている制御プログラムに従って動作することにより発光ペン３の動作を統括制御する。

記憶部３１は、発光ペン３の動作を制御するための制御プログラムや制御データ等を記憶するメモリー等によって構成される。

同期信号受信部３２は、赤外光を受光する受光素子等によって構成され、プロジェクター１の同期信号送信部１３から周期的に送信される同期信号を受信して、制御部３０に出力する。

先端スイッチ３３は、押圧の有無に応じてオンとオフとが切り替わるスイッチである。先端スイッチ３３は、発光ペン３の先端部に配置され、先端部を投写面Ｓｐに押し付ける操作が行われた場合等に、先端部の押圧を検知し、検知結果を制御部３０に出力する。

側面スイッチ３４も、押圧の有無に応じてオンとオフとが切り替わるスイッチである。側面スイッチ３４は、発光ペン３の側面に配置された操作ボタン３４ａがユーザーに押下されたことを検知して、検知結果を制御部３０に出力する。

発光部３５は、発光ペン３の先端部の近傍に配置されたＬＥＤ等の光源を備えて構成され、制御部３０の制御に基づいて赤外光を発する。制御部３０は、同期信号受信部３２で周期的に受信される同期信号に同期して、発光部３５を繰り返し発光させる。具体的には、制御部３０は、例えば、同期信号の１周期を、「フェーズ」と呼ばれる複数の期間に区分し、このうちいくつかの所定のフェーズでは、発光部３５を必ず発光させて、プロジェクター１に発光ペン３の指示位置を通知する。一方、他のフェーズでは、制御部３０は、先端スイッチ３３及び側面スイッチ３４の状態に基づいて、発光部３５の発光の有無を切り替える。そして、制御部３０は、複数の周期に亘る発光部３５の発光状態の推移、即ち発光シーケンスによって、先端スイッチ３３の状態と、側面スイッチ３４の状態とをプロジェクター１に通知する。なお、本明細書では、発光部３５を必ず発光させるフェーズを、「位置検出用フェーズ」と呼び、先端スイッチ３３及び側面スイッチ３４の状態に基づいて発光させるフェーズを、「状態判定用フェーズ」と呼ぶ。

図５は、プロジェクター１の制御部１０の概略構成を示すブロック図である。
図５に示すように、制御部１０は、制御プログラムによって実現される機能ブロックとして、撮像画像解析部２５と、位置検出部２６と、状態判定部２７と、描画制御部２８とを有している。

撮像画像解析部２５は、撮像部１４から入力される撮像画像情報に基づく画像、即ち撮像部１４が繰り返し撮像した撮像画像のそれぞれを解析し、解析結果を位置検出部２６及び状態判定部２７に出力する。具体的には、撮像画像解析部２５は、撮像画像内の検出領域Ａｄの中から、発光ペン３が発した光を検索し、発光の有無と、その位置とを特定する。撮像画像解析部２５は、撮像画像内の検出領域Ａｄに含まれる赤外光の像のうち、大きさが所定の範囲内のものを、発光ペン３の光であると判定し、所定の範囲外のものについては、ノイズと判定する。

位置検出部２６は、撮像画像解析部２５の解析結果のうち、位置検出用フェーズで撮像された撮像画像を解析した結果に基づいて、発光ペン３の指示位置を検出する。具体的には、位置検出部２６は、発光ペン３の指示位置のＸＹ座標を撮像画像上で特定する。ここで、入力画像Ｐｉ上のＸＹ座標と、撮像画像上のＸＹ座標とは、事前に行われるキャリブレーション処理によって対応付けがなされており、位置検出部２６は、撮像画像上で特定された指示位置のＸＹ座標を、入力画像Ｐｉ上のＸＹ座標に変換することができる。位置検出部２６は、入力画像Ｐｉ上の座標に変換した指示位置のＸＹ座標を描画制御部２８に出力する。

状態判定部２７は、撮像画像解析部２５の解析結果のうち、状態判定用フェーズで撮像された撮像画像を複数の周期に亘って解析した結果に基づいて、発光ペン３の発光シーケンスを認識する。そして、状態判定部２７は、認識した発光シーケンスに基づいて発光ペン３の先端スイッチ３３の状態と、側面スイッチ３４の状態とを判定する。状態判定部２７は、判定した先端スイッチ３３の状態を表す情報と、側面スイッチ３４の状態を表す情報とを描画制御部２８に出力する。なお、先端スイッチ３３が押圧された状態は、先端部を投写面Ｓｐに押し付けて描画がなされている状態、即ち書き込み操作が行われている状態であるため、状態判定部２７が先端スイッチ３３の状態を判定することは、書き込み操作を検出することに相当する。また、状態判定部２７が側面スイッチ３４の状態を判定することは、操作ボタン３４ａが押下されたか否かを判定することに相当する。つまり、状態判定部２７は、投写面Ｓｐに対する書き込み操作を検出する検出部として機能するとともに、操作ボタン３４ａが押下されたか否かを判定する判定部としても機能する。なお、撮像画像を生成する撮像部１４と、その撮像画像を解析する撮像画像解析部２５と、その解析結果に基づいて先端スイッチ３３の状態及び側面スイッチ３４の状態を判定する状態判定部２７とは、検出装置に相当する。

描画制御部２８は、位置検出部２６から出力された指示位置のＸＹ座標と、状態判定部２７によって判定された先端スイッチ３３の状態及び側面スイッチ３４の状態とに基づいて、オブジェクトＯｂの描画を制御する。例えば、描画制御部２８は、先端スイッチ３３が押圧された場合には、位置検出部２６で検出された入力画像Ｐｉ上の指示位置に点状のオブジェクトＯｂを描画する処理を行い、描画したオブジェクトＯｂを入力画像Ｐｉに重畳して表示する処理を画像情報処理部１６に行わせる。そして、ユーザーが発光ペン３を動かして指示位置を移動させると、入力画像Ｐｉ上には、指示位置の軌跡に沿ってオブジェクトＯｂが線状に描画される。

また、描画制御部２８は、先端スイッチ３３の押圧操作、即ち書き込み操作が検出されたときに、操作ボタン３４ａが押下されているか否かに応じて、オブジェクトＯｂに異なる属性を付与する。具体的には、描画制御部２８は、書き込み操作が検出されたときに操作ボタン３４ａが押下されている場合には、描画するオブジェクトＯｂに、一時的な画像であることを示す属性を付与し、一時オブジェクトＯｂ１として画像情報処理部１６に出力する。一方、描画制御部２８は、書き込み操作が検出されたときに操作ボタン３４ａが押下されていない場合には、描画するオブジェクトＯｂに、永続的な画像であることを示す属性を付与し、通常オブジェクトＯｂ２として画像情報処理部１６に出力する。このため、ユーザーは、書き込み操作を行う際に、操作ボタン３４ａを押下しながら書き込み操作を行うか、操作ボタン３４ａを押下せずに書き込み操作を行うかによって、描画されるオブジェクトＯｂを一時オブジェクトＯｂ１とするか、通常オブジェクトＯｂ２とするかを選択することができる。なお、一時オブジェクトＯｂ１と通常オブジェクトＯｂ２とで、オブジェクトＯｂの色、太さ、線種等の態様が異なるようにしてもよいし、同じであってもよい。また、図示しない設定メニュー等によって、一時オブジェクトＯｂ１の態様と、通常オブジェクトＯｂ２の態様のそれぞれをユーザーが指定できるようにしてもよい。なお、一時オブジェクトＯｂ１は、第１画像に相当し、通常オブジェクトＯｂ２は、第２画像に相当する。

操作ボタン３４ａが押下された状態で書き込み操作がなされた際に描画される一時オブジェクトＯｂ１は、操作ボタン３４ａの押下を解除した際に消去される。具体的には、一時オブジェクトＯｂ１が表示されている期間に、状態判定部２７が、操作ボタン３４ａが押下されていないと判定すると、描画制御部２８は、一時オブジェクトＯｂ１を消去させる消去命令を画像情報処理部１６に出力し、画像情報処理部１６は、この消去命令に従って、一時オブジェクトＯｂ１を消去する。一方、永続的な画像である通常オブジェクトＯｂ２は、それが表示されている期間における操作ボタン３４ａの押下状況に拘わらず、表示され続ける。

次に、プロジェクター１の表示方法について説明する。
図６は、描画制御部２８の動作を説明するためのフローチャートである。また、図７Ａ～図７Ｃは、描画制御部２８の動作を説明するための説明図であり、投写面Ｓｐを示す図である。図８は、投写面Ｓｐ上に表示される通知画像Ａ１を示す図である。
図７Ａに示すように、投写面Ｓｐに入力画像Ｐｉが表示されている状態において、図６のステップＳ１０１では、描画制御部２８は、状態判定部２７によって判定された先端スイッチ３３の状態に基づいて、ユーザーにより書き込み操作が開始されたか否かを判定する。そして、描画制御部２８は、先端スイッチ３３が押圧されて書き込み操作が開始されたと判定した場合（ステップＳ１０１／ＹＥＳ）には、ステップＳ１０２に処理を移し、先端スイッチ３３が押圧されておらず、書き込み操作が開始されていないと判定した場合（ステップＳ１０１／ＮＯ）には、本ステップを繰り返す。

書き込み操作が開始されてステップＳ１０２に処理が移行した場合には、描画制御部２８は、状態判定部２７によって判定された側面スイッチ３４の状態に基づいて、操作ボタン３４ａが押下されているか否かを判定する。そして、描画制御部２８は、操作ボタン３４ａが押下されていないと判定した場合（ステップＳ１０２／ＮＯ）には、ステップＳ１０３に処理を移し、操作ボタン３４ａが押下されていると判定した場合（ステップＳ１０２／ＹＥＳ）には、ステップＳ１０５に処理を移す。

ステップＳ１０３に処理が移行した場合、即ちユーザーが操作ボタン３４ａを押下せずに書き込み操作を開始した場合、描画制御部２８は、位置検出部２６が検出した指示位置に通常オブジェクトＯｂ２を描画する。そして、描画制御部２８は、描画した通常オブジェクトＯｂ２を画像情報処理部１６に出力し、入力画像Ｐｉ上に重畳して表示させる。

続くステップＳ１０４では、描画制御部２８は、状態判定部２７によって判定された先端スイッチ３３の状態に基づいて、書き込み操作が終了したか否かを判定する。そして、描画制御部２８は、先端スイッチ３３が押圧された状態のままであって書き込み操作が終了していないと判定した場合（ステップＳ１０４／ＮＯ）には、ステップＳ１０３に処理を戻し、先端スイッチ３３の押圧が解除されて書き込み操作が終了したと判定した場合（ステップＳ１０４／ＹＥＳ）には、ステップＳ１０１に処理を戻す。このように、ユーザーが操作ボタン３４ａを押下せずに書き込み操作と指示位置の移動とを繰り返すと、それらの操作に応じてステップＳ１０１～Ｓ１０４が繰り返され、入力画像Ｐｉ上には、複数の通常オブジェクトＯｂ２が表示され得る（図７Ｂ参照）。

一方、ステップＳ１０５に処理が移行した場合、即ちユーザーが操作ボタン３４ａを押下しながら書き込み操作を開始した場合、描画制御部２８は、位置検出部２６が検出した指示位置に一時オブジェクトＯｂ１を描画する。そして、描画制御部２８は、描画した一時オブジェクトＯｂ１を画像情報処理部１６に出力し、入力画像Ｐｉ上に重畳して表示させる。

続くステップＳ１０６では、描画制御部２８は、状態判定部２７によって判定された先端スイッチ３３の状態に基づいて、書き込み操作が終了したか否かを判定する。そして、描画制御部２８は、先端スイッチ３３が押圧された状態のままであって書き込み操作が終了していないと判定した場合（ステップＳ１０６／ＮＯ）には、ステップＳ１０５に処理を戻し、先端スイッチ３３の押圧が解除されて書き込み操作が終了したと判定した場合（ステップＳ１０６／ＹＥＳ）には、ステップＳ１０７に処理を移す。

書き込み操作が終了してステップＳ１０７に処理が移行した場合には、描画制御部２８は、状態判定部２７によって判定された側面スイッチ３４の状態に基づいて、操作ボタン３４ａの押下が解除されたか否かを判定する。そして、描画制御部２８は、操作ボタン３４ａの押下が解除されていない、即ち操作ボタン３４ａが押下されたままであると判定した場合（ステップＳ１０７／ＮＯ）には、ステップＳ１０８に処理を移し、操作ボタン３４ａの押下が解除された、即ち操作ボタン３４ａが押下されていないと判定した場合（ステップＳ１０７／ＹＥＳ）には、ステップＳ１１０に処理を移す。

操作ボタン３４ａの押下が解除されておらずにステップＳ１０８に処理が移行した場合には、描画制御部２８は、直前のステップＳ１０６で書き込み操作が終了してから所定時間が経過したかを判定する。所定時間としては、例えば、５秒程度の時間が設定されている。描画制御部２８は、所定時間が経過していない場合（ステップＳ１０８／ＮＯ）には、ステップＳ１０９に処理を移し、所定時間が経過した場合（ステップＳ１０８／ＹＥＳ）には、ステップＳ１１１に処理を移す。

書き込み操作が終了してから所定時間が経過しておらずにステップＳ１０９に処理が移行した場合には、描画制御部２８は、状態判定部２７によって判定された先端スイッチ３３の状態に基づいて、新たな書き込み操作が開始したか否かを判定する。そして、描画制御部２８は、先端スイッチ３３が押圧されて書き込み操作が開始したと判定した場合（ステップＳ１０９／ＹＥＳ）には、ステップＳ１０５に処理を戻し、先端スイッチ３３の押圧が解除されたままであって書き込み操作が開始していないと判定した場合（ステップＳ１０９／ＮＯ）には、ステップＳ１０７に処理を戻す。このように、ユーザーが操作ボタン３４ａを押下した状態のままで書き込み操作と指示位置の移動とを繰り返すと、それらの操作に応じてステップＳ１０５～Ｓ１０９が繰り返され、入力画像Ｐｉ上には、複数の一時オブジェクトＯｂ１が表示され得る（図７Ｃ参照）。これらの一時オブジェクトＯｂ１は、通常オブジェクトＯｂ２と同時に表示される。

ステップＳ１０７にて操作ボタン３４ａの押下が解除されたと判定しステップＳ１１０に処理が移行した場合には、描画制御部２８は、一時オブジェクトＯｂ１を消去するための消去命令を画像情報処理部１６に出力し、ステップＳ１０１に処理を戻す。画像情報処理部１６は、この消去命令を受けると、入力画像Ｐｉに重畳して表示しているすべてのオブジェクトＯｂのうち、一時オブジェクトＯｂ１のみを消去する。この結果、投写面Ｓｐ上には、入力画像Ｐｉと通常オブジェクトＯｂ２のみが表示された状態（図７Ｂ参照）に戻る。

また、ステップＳ１０８おいて、直前のステップＳ１０６で書き込み操作が終了してから操作ボタン３４ａを押下したままで所定時間が経過したと判定しステップＳ１１１に処理が移行した場合には、描画制御部２８は、これまでに描画した一時オブジェクトＯｂ１を通常オブジェクトＯｂ２に変更するかどうかをユーザーに問い合わせる通知を行う。具体的には、図８に示すように、描画制御部２８は、画像情報処理部１６に指示をして、「一時オブジェクトを通常オブジェクトに変更しますか？」というメッセージＭ１と、「はい」と書かれたボタン画像Ｂ１と、「いいえ」と書かれたボタン画像Ｂ２とを含む通知画像Ａ１を入力画像Ｐｉ上に表示させる。ユーザーは、投写面Ｓｐに表示されたボタン画像Ｂ１またはボタン画像Ｂ２に発光ペン３の先端部を押し付けることにより、通常オブジェクトＯｂ２に変更するか否かを指示することができる。描画制御部２８は、ユーザーにより通常オブジェクトＯｂに変更することが指示された場合（ステップＳ１１１／ＹＥＳ）には、ステップＳ１１２に処理を移し、ユーザーにより通常オブジェクトＯｂ２に変更しない指示がなされた場合（ステップＳ１１１／ＮＯ）には、書き込み操作が終了してからの経過時間をリセットしたうえで、ステップＳ１０９に処理を移す。

ユーザーにより通常オブジェクトＯｂ２への変更が指示されてステップＳ１１２に処理が移行した場合には、描画制御部２８は、画像情報処理部１６に指示をして、現在表示している一時オブジェクトＯｂ１のすべてについて、通常オブジェクトＯｂ２に属性を変更させ、ステップＳ１０１に処理を戻す。これにより、この時点で表示されているオブジェクトＯｂは、すべて通常オブジェクトＯｂ２となり、この後で操作ボタン３４ａの押下を解除したとしても、消去されずに表示され続ける。

以上説明したように、本実施形態の表示システム１００、プロジェクター１及びその表示方法によれば、以下の効果を得ることができる。

（１）本実施形態によれば、発光ペン３の操作ボタン３４ａを押下しながら書き込み操作を行うことで一時オブジェクトＯｂ１が描画され、この一時オブジェクトＯｂ１は、操作ボタン３４ａの押下を解除することによって消去される。このため、一時的に表示される画像を容易に書き込むことが可能となる。

（２）本実施形態によれば、発光ペン３の操作ボタン３４ａを押下しないで書き込み操作を行うことで通常オブジェクトＯｂ２が描画され、この通常オブジェクトＯｂ２は、その後に操作ボタン３４ａを押下しながら書き込まれた一時オブジェクトＯｂ１が操作ボタン３４ａの押下の解除によって消去された後も、表示を継続し、永続的な書き込みとなる。つまり、一時的な書き込みと、永続的な書き込みを操作ボタン３４ａの押下の有無によって容易に切り替えることが可能となる。

（３）本実施形態によれば、操作ボタン３４ａを押下して一時オブジェクトＯｂ１を書き込んだ後も、所定時間、操作ボタン３４ａを押し続けていることで、一時オブジェクトＯｂ１を通常オブジェクトＯｂ２に変更することに関する通知がなされる。このため、一時的な書き込みから永続的な書き込みへの変更を容易に行うことが可能となる。
また、この通知は、一時オブジェクトＯｂ１から通常オブジェクトＯｂ２への変更を問い合わせる通知であり、その通知に対して変更が指示された場合に、一時オブジェクトＯｂ１が通常オブジェクトＯｂ２に変更される。このため、一時オブジェクトＯｂ１が、誤操作によって意図せずに通常オブジェクトＯｂ２に変更されてしまうことを抑制することができる。

また、上記実施形態は、以下のように変更してもよい。

上記実施形態では、操作ボタン３４ａが、一時オブジェクトＯｂ１を描画する際に利用される態様を示したが、操作ボタン３４ａに他の機能を割り当て可能な構成としてもよい。例えば、操作ボタン３４ａを２回連続して押下するダブルプッシュが実行された場合に、描画制御部２８は、操作ボタン３４ａに割り当て可能な機能の一覧を含むメニュー画像Ｍｎ（図９参照）を入力画像Ｐｉ上に表示させて、ユーザーに所望の機能を選択させるようにしてもよい。メニュー画像Ｍｎで選択可能な機能としては、例えば、上記実施形態で説明した「一時オブジェクトの描画」の他に、オブジェクトＯｂの描画色を変更する「描画色の変更」、指示位置の軌跡に沿って表示中のオブジェクトＯｂを消去する「消しゴム」、表示中のすべてのオブジェクトＯｂを消去する「全オブジェクトの消去」等が含まれている。この態様では、ユーザーは、メニュー画像Ｍｎ上の所望の機能を発光ペン３で指示することにより、操作ボタン３４ａの機能を変更することが可能となる。

上記実施形態では、ステップＳ１０８おいて、操作ボタン３４ａを押下したままで所定時間が経過した場合に、描画制御部２８は、一時オブジェクトＯｂ１を通常オブジェクトＯｂ２に変更するかどうかをユーザーに問い合わせる通知を行っているが、ユーザーに問い合わせることなく、所定時間が経過したことをトリガーとして一時オブジェクトＯｂ１を通常オブジェクトＯｂ２に変更するようにしてもよい。この場合には、描画制御部２８は、例えば、図１０に示すように、「一時オブジェクトを通常オブジェクトに変更しました。」というメッセージＭ２を含む通知画像Ａ２を入力画像Ｐｉ上に表示させて、通常オブジェクトＯｂ２への変更が完了したことをユーザーに通知するようにしてもよい。
この構成によれば、操作ボタン３４ａを押下して一時オブジェクトＯｂ１を書き込んだ後も、所定時間、操作ボタン３４ａを押し続けていることで、一時オブジェクトＯｂ１が通常オブジェクトＯｂ２に変更され、その旨が通知される。このため、一時的な書き込みを容易に永続的な書き込みに変更することが可能となり、さらに、その変更がなされたことをすぐに知ることができる。

上記実施形態では、発光ペン３は、先端スイッチ３３及び側面スイッチ３４の状態を、発光部３５の発光シーケンスによってプロジェクター１に通知しているが、この態様に限定されない。例えば、プロジェクター１と発光ペン３の双方に、Ｂｌｕｅｔｏｏｔｈ（登録商標）等によって無線通信を行うための通信部を備えるようにして、これら通信部を介して通知するようにしてもよい。この場合には、プロジェクター１は、発光ペン３に送信する同期信号についても、通信部を介して送信してもよい。

上記実施形態では、撮像部１４は、指示体である発光ペン３が発する赤外光を撮像する構成になっているが、この構成に限定されない。例えば、撮像部１４が可視光の撮像を行い、その撮像画像からパターンマッチングやエッジ検出等によって指示体を検出する構成としてもよい。この構成によれば、発光ペン３のような光を発する指示体を用いる必要がなくなる。

上記実施形態では、書き込み操作の検出や操作ボタン３４ａの押下の判定を行う状態判定部２７と、撮像部１４と、撮像画像解析部２５とを含む検出装置が、表示装置であるプロジェクター１と一体的に構成された態様を示したが、検出装置は、プロジェクター１とは分離した構成であってもよい。

上記実施形態では、光変調装置として、透過型の液晶ライトバルブ２２Ｒ，２２Ｇ，２２Ｂを用いているが、反射型の液晶ライトバルブ等、反射型の光変調装置を用いることも可能である。また、入射した光の射出方向を、画素としてのマイクロミラー毎に制御することにより、光源２１から射出された光を変調するデジタルミラーデバイス等を用いることもできる。また、色光別に複数の光変調装置を備える構成に限定されず、１つの光変調装置で複数の色光を時分割で変調する構成としてもよい。

上記実施形態では、表示装置の例として、プロジェクター１について説明したが、表示装置はプロジェクター１に限定されず、液晶ディスプレイや有機ＥＬディスプレイ等、他の表示装置であってもよい。

１…プロジェクター、３…発光ペン、１０…制御部、１１…記憶部、１２…入力操作部、１３…同期信号送信部、１４…撮像部、１５…画像情報入力部、１６…画像情報処理部、１７…画像投写部、２１…光源、２２Ｒ，２２Ｇ，２２Ｂ…液晶ライトバルブ、２２ｉ…画像形成領域、２３…投写光学系、２４…ライトバルブ駆動部、２５…撮像画像解析部、２６…位置検出部、２７…状態判定部、２８…描画制御部、３０…制御部、３１…記憶部、３２…同期信号受信部、３３…先端スイッチ、３４…側面スイッチ、３４ａ…操作ボタン、３５…発光部、１００…表示システム、Ａ１，Ａ２…通知画像、Ａｄ…検出領域、Ａｐ…投写領域、Ｂ１，Ｂ２…ボタン画像、Ｍ１，Ｍ２…メッセージ、Ｍｎ…メニュー画像、Ｏｂ…オブジェクト、Ｏｂ１…一時オブジェクト、Ｏｂ２…通常オブジェクト、Ｐｉ…入力画像、Ｓｐ…投写面、Ｔ…固定部材。

Claims (6)

1. 指示体による表示面に対する書き込み操作を検出することと、
   前記指示体に備わる操作ボタンが押下されたか否かを判定することと、
   前記書き込み操作が検出され、かつ、前記操作ボタンが押下されたと判定した場合に、前記書き込み操作に応じた画像を第１画像として前記表示面に表示することと、
   前記第１画像を表示している期間に、前記操作ボタンが押下されていないと判定した場合に、前記第１画像を消去することと、
   を含む、表示方法。
2. 請求項１に記載の表示方法であって、
   前記書き込み操作が検出され、かつ、前記操作ボタンが押下されていないと判定した場合に、前記書き込み操作に応じた画像を第２画像として前記表示面に表示することと、
   前記第１画像および前記第２画像を表示している期間に、前記操作ボタンが押下されていないと判定した場合に、前記第２画像を表示し続ける、表示方法。
3. 請求項２に記載の表示方法であって、
   前記第１画像を表示している期間に前記書き込み操作の終了が検出され、前記書き込み操作の終了が検出されてから所定時間、前記操作ボタンが押下され続けていると判定した場合に、前記第１画像を前記第２画像に変更することに関する通知を行う、表示方法。
4. 請求項３に記載の表示方法であって、
   前記通知は、前記第１画像を前記第２画像に変更するか否かを問い合わせる通知であり、
   前記通知に対して、前記第２画像に変更することが指示された場合に、前記第１画像を前記第２画像に変更する、表示方法。
5. 請求項３に記載の表示方法であって、
   前記第１画像を表示している期間に前記書き込み操作の終了が検出され、前記書き込み操作の終了が検出されてから所定時間、前記操作ボタンが押下され続けていると判定した場合に、前記第１画像を前記第２画像に変更することをさらに含み、
   前記通知は、前記第１画像を前記第２画像に変更したことを知らせる通知である、表示方法。
6. 操作ボタンを有する指示体と、
   前記指示体による表示面に対する書き込み操作を検出すること、及び、前記操作ボタンが押下されたか否かを判定すること、を行う検出装置と、
   前記書き込み操作が検出され、かつ、前記操作ボタンが押下されたと判定された場合に、前記書き込み操作に応じた画像を第１画像として前記表示面に表示することと、
   前記第１画像を表示している期間に、前記操作ボタンが押下されていないと判定された場合に、前記第１画像を消去することと、
   を行う表示装置と、
   を含む、表示システム。

Images