JP6323035B2 - 表示装置および表示方法 - Google Patents

Description

本発明は、表示装置および表示方法に関する。

ユーザーが投写面上で電子的に描画を行うことができるプロジェクターが知られている。特許文献１には、描画機能を備えたプロジェクターにおいて、指示体の姿勢を検出することにより、ユーザーの意図しない描画が行われることを防止する技術が記載されている。特許文献２には、複数の端末機器における表示画面を投写面上に並べて表示する技術が記載されている。

特開２０１３−２２２２８０号公報 特開２００４−０５４１３４号公報

特許文献１に記載の技術では、スクリーン上の異なる領域で同時に複数のホワイトボードモードを実行することはできなかった。特許文献２に記載の技術では、並べて表示された表示画面の各々に対して描画を行うことはできなかった。
本発明は、映像信号に応じて表示された複数の画像のそれぞれに対して描画を行えるようにすることを目的の一つとする。

上述の課題を解決するため、本発明は、映像ソースから映像信号の入力を受け付ける受付手段と、前記映像信号に応じた第１の画像を第１の表示領域に表示させ、当該映像信号に応じた第２の画像を第２の表示領域に表示させる表示手段と、前記第１の表示領域上での指示体の軌跡を検知する第１検知手段と、前記第２の表示領域上での指示体の軌跡を検知する第２検知手段と、前記第１検知手段により検知された軌跡と前記第２検知手段により検知された軌跡とを統合する統合手段と、前記統合手段により統合された軌跡の画像が前記第１の画像に重ねて前記第１の表示領域に表示され、且つ、当該軌跡の画像が前記第２の画像に重ねて前記第２の表示領域に表示されるように前記表示手段を制御する表示制御手段とを有する表示装置を提供する。この表示装置によれば、受け付けた映像信号に応じて表示された複数の画像のそれぞれに対して描画を行うことができる。

別の好ましい態様において、前記第１の表示領域に表示されている画像または前記第２の表示領域に表示されている画像のうち、選択された一方の画像を示す画像データを電子機器に出力する出力手段を有する。この表示装置によれば、第１の表示領域に表示されている画像と第２の表示領域に表示されている画像の両方を示す画像データが電子機器に出力されることが防止される。

別の好ましい態様において、前記第１の表示領域または前記第２の表示領域のうち、選択された一方の表示領域に表示されている第１の画像または第２の画像と、当該表示領域において検知された軌跡とを示す画像データを電子機器に出力する出力手段を有する。この表示装置によれば、選択されていない表示領域において検知された軌跡を示す画像データが電子機器に出力されることが防止される。

別の好ましい態様において、前記第１の表示領域と前記第２の表示領域は、互いに重ならない領域であることを特徴とする。この表示装置によれば、表示領域の一部が欠けることが防止される。

別の好ましい態様において、前記第１の表示領域または前記第２の表示領域のうちいずれか一方の表示領域は、他方の表示領域の中に含まれていることを特徴とする。この表示装置によれば、複数の表示領域のうちの一の表示領域のサイズを縮小することなく、複数の表示領域を設けることができる。

別の好ましい態様において、前記第１検知手段は第１指示体の軌跡を検知し、前記第２検知手段は第２指示体の軌跡を検知し、前記第１検知手段における前記第１指示体の軌跡の検知と前記第２検知手段における前記第２指示体の軌跡の検知が同時に行われることを特徴とする。この表示装置によれば、受け付けた映像信号に応じて表示された複数の画像のそれぞれに対して同時に描画を行うことができる。

また、本発明は、映像ソースから映像信号の入力を受け付けるステップと、前記映像ソースからの映像信号に応じた第１の画像を第１の表示領域に表示させ、当該映像信号に応じた第２の画像を第２の表示領域に表示させるステップと、前記第１の表示領域上での指示体の軌跡を検知するステップと、前記第２の表示領域上での指示体の軌跡を検知するステップと、前記第１の表示領域上で検知された軌跡と前記第２の表示領域上で検知された軌跡とを統合するステップと、統合された軌跡の画像を前記第１の画像に重ねて前記第１の表示領域に表示させ、且つ、当該軌跡の画像を前記第２の画像に重ねて前記第２の表示領域に表示させるステップとを有する表示方法を提供する。この表示方法によれば、受け付けた映像信号に応じて表示された複数の画像のそれぞれに対して描画を行うことができる。

投写システムの全体構成を示す図。 投写システムの機能的構成を示すブロック図。 プロジェクターのハードウェア構成を示すブロック図。 ＰＣのハードウェア構成を示すブロック図。 指示体のハードウェア構成を示すブロック図。 プロジェクターにおける処理を示すフローチャート。 並列投写指示の入力例を示す図。 投写画像を例示する図。 フレームメモリーを示すイメージ図。 投写画像を例示する図。 投写画像を例示する図。 プロジェクターにおける処理を示すフローチャート。 投写画像を例示する図。 投写画像を例示する図。 変形例１に係る投写システムを示す図。 変形例７における投写画像を例示する図。 変形例８に係る投写画像を例示する図。 変形例９に係る投写画像を例示する図。

１．構成
図１は、本発明の一実施形態に係る投写システムＰＳの全体構成を示す図である。投写システムＰＳは、プロジェクター１が、映像ソースから入力された映像信号により示される複数の入力画像を並べて投写するシステムである。投写システムＰＳは、プロジェクター１、パーソナルコンピューター２、指示体３、コントローラーＲ、およびスクリーンＳＣを有する。プロジェクター１は、映像ソースである電子機器から入力された映像信号により示される画像（以下、「入力画像」という）をスクリーンＳＣに投写する表示装置である。プロジェクター１は、フロントプロジェクション型の短焦点のプロジェクターであり、スクリーンＳＣに比較的近い位置に配置される。図１の例では、プロジェクター１は、スクリーンＳＣの上部に配置されている。パーソナルコンピューター２（以下、「ＰＣ２」という）は、映像信号をプロジェクター１に出力する電子機器である。ＰＣ２は、画像信号ケーブルおよびＵＳＢ（Universal Serial Bus）ケーブルによりプロジェクター１と有線接続されている。指示体３は、プロジェクター１から投写される画像（以下、「投写画像」という）に対してユーザーＵＴが電子的に手書きの文字や図形を書き込む（以下、単に「描画」という）際に筆記具として用いられるペン型または棒形状の操作デバイスである。指示体３は、また、プロジェクター１に対する指示を投写面上で入力するために用いられる。なお、指示体３は、レーザーポインターおよびリモートコントローラーなどであってもよい。また、指示体３は、必ずしも操作デバイスでなくてもよく、例えば、ユーザーＵＴの体の一部（例えば指）であってもよい。プロジェクター１は、スクリーンＳＣ上における指示体３の位置を継続的に特定する機能を備える。コントローラーＲは、赤外線通信等の無線でプロジェクター１を制御するための装置、いわゆるリモートコントローラーである。スクリーンＳＣは、投写画像を映し出す平面である。

図１の例では、プロジェクター１は、ＰＣ２から映像信号の入力を受け付けて、入力画像ＩＬ１と入力画像ＩＲ１とを含む投写画像を投写している。入力画像ＩＬ１および入力画像ＩＲ１には、それぞれ独立して、表示倍率の変更およびスクロール（画像内に表示されていない部分を表示すること）などの各種指示を、指示体３を介して入力することができる。図１では、ＰＣ２においてプレゼンテーション用のソフトウェアが起動されており、かけ算の演習問題に関するファイルが開かれている。入力画像ＩＬ１はＰＣ２に表示されている演習問題の画像と等倍の画像であり、入力画像ＩＲ１はＰＣ２に表示されている演習問題の画像の一部を拡大した画像である。ユーザーＵＴは、入力画像ＩＬ１と入力画像ＩＲ１のいずれに対しても、指示体３を介して描画することができる。入力画像ＩＬ１と入力画像ＩＲ１のいずれか一方に対する描画は、他方の入力画像にも反映される。図１の例では、ユーザーＵＴは、入力画像ＩＲ１において、「１×１」という問題に対して「１」と描画しており、その内容が入力画像ＩＬ１にも反映されている。投写システムＰＳにおいて、スクリーンＳＣに投写されるスライドのページを切り替えるための指示の入力は、指示体３を介して行われる。

図２は、投写システムＰＳの機能的構成を示すブロック図である。図２は、投写システムＰＳで用いられる各種デバイスのうちプロジェクター１とＰＣ２との機能的構成を示す。プロジェクター１は、受付手段１０１と、表示手段１０２と、第１検知手段１０３と、第２検知手段１０４と、統合手段１０５と、表示制御手段１０６と、出力手段１０７とを有する。受付手段１０１は、ＰＣ２から映像信号の入力を受け付ける。表示手段１０２は、ＰＣ２からの映像信号に応じた第１の画像を第１の表示領域に表示させ、当該映像信号に応じた第２の画像を第２の表示領域に表示させる。第１検知手段１０３は、第１の表示領域上での指示体３の軌跡を検知する。第２検知手段１０４は、第２の表示領域上での指示体の軌跡を検知する。統合手段１０５は、第１検知手段１０３により検知された軌跡と第２検知手段１０４により検知された軌跡とを統合する。表示制御手段１０６は、統合手段１０５により統合された軌跡の画像が第１の画像に重ねて第１の表示領域に表示されるように表示手段１０２を制御する。表示制御手段１０６は、また、統合手段１０５により統合された軌跡の画像が第２の画像に重ねて第２の表示領域に表示されるように表示手段１０２を制御する。出力手段１０７は、第１の表示領域に表示されている画像または第２の表示領域に表示されている画像のうち、選択された一方の画像を示す画像データを電子機器に出力する。ＰＣ２は、映像信号をプロジェクター１に出力する出力手段２０１を有する。

図３は、プロジェクター１のハードウェア構成を示すブロック図である。プロジェクター１は、ＭＣＵ（Micro Control Unit）１０と、ＲＯＭ（Read Only Memory）１１と、ＲＡＭ（Random Access Memory）１２と、記憶部１３と、ＩＦ（インターフェース）部１４と、画像処理回路１５と、投写ユニット１６と、イメージセンサー１７と、受光部１８と、入力処理部１９とを有する。ＭＣＵ１０は、プログラムを実行することによりプロジェクター１の各部を制御する制御装置である。ＲＯＭ１１は、各種プログラムおよびデータを記憶した不揮発性の記憶装置である。ＲＯＭ１１は、ＭＣＵ１０が実行するプログラムを記憶する。ＲＡＭ１２は、データを記憶する揮発性の記憶装置である。ＲＡＭ１２は、画像をフレーム毎に記憶するフレームメモリーを有する。この例で、ＲＡＭ１２は、以下のフレームメモリーを有する。
（１）入力画像を記憶する（すなわち、表示可能な最大限の画像を記憶する）フレームメモリー（以下、「入力画像フレームメモリー」という）
（２）スクリーンを２つに分割してそれぞれ別の画像を投写する際に、入力画像のうち左側に投写される部分を記憶するフレームメモリー（以下、「左画像フレームメモリー」という）
（３）上記の際に、入力画像のうち右側に投写される部分を記憶するフレームメモリー（以下、「右画像フレームメモリー」という）
（４）スクリーンの左半分に対して描画された画像を記憶するフレームメモリー（以下、「第１手書きフレームメモリー」という）
（５）スクリーンの右半分に対して描画された画像を記憶するフレームメモリー（以下、「第２手書きフレームメモリー」という）
（６）第１手書きフレームメモリーに記憶された画像と第２手書きフレームメモリーに記憶された画像とを合成した画像を記憶するフレームメモリー（以下、「合成描画フレームメモリー」という）
（７）左画像フレームメモリーに記憶された画像および右画像フレームメモリーに記憶された画像と合成描画フレームメモリーに記憶された画像とを合成した画像（すなわち、後述する液晶パネル１６２に書き込まれる画像）を記憶するフレームメモリー（以下、「投写画像フレームメモリー」という）
なお、左画像フレームメモリーと右画像フレームメモリーは、一の画像を記憶するフレームメモリーが分割されたものである。同様に、第１手書きフレームメモリーと第２手書きフレームメモリーも、一の画像を記憶するフレームメモリーが分割されたものである。

記憶部１３は、データおよびプログラムを記憶する記憶装置である。ＩＦ部１４は、ＰＣ２などの外部装置と通信を行なう。ＩＦ部１４は、外部装置と接続するための各種端子（例えば、ＶＧＡ端子、ＵＳＢ端子、有線または無線ＬＡＮインターフェース、Ｓ端子、ＲＣＡ端子、ＨＤＭＩ（High-Definition Multimedia Interface：登録商標）端子など）を備える。本実施形態において、ＩＦ部１４は、ＵＳＢ端子を介してＰＣ２と通信を行う。ＩＦ部１４は、また、ＶＧＡ端子を介してＰＣ２から映像信号の入力を受け付ける。画像処理回路１５は、入力画像に対して所定の画像処理を行い、画像処理後の入力画像を入力画像フレームメモリーに記憶する。画像処理回路１５は、また、入力画像フレームメモリーに記憶された入力画像の少なくとも一部を複製し、複製された画像を左画像フレームメモリーおよび右画像フレームメモリーに記憶する。

投写ユニット１６は、光源１６１と、液晶パネル１６２と、光学系１６３と、光源駆動回路１６４と、パネル駆動回路１６５と、光学系駆動回路１６６とを有する。光源１６１は、高圧水銀ランプ、ハロゲンランプ、若しくはメタルハライドランプなどのランプ、又はＬＥＤ（Light Emitting Diode）若しくはレーザーダイオードなどの固体光源を有し、液晶パネル１６２に光を照射する。液晶パネル１６２は、光源１６１から照射された光を画像データに応じて変調する光変調器である。この例で、液晶パネル１６２は透過型の液晶パネルであり、各画素の透過率が画像データに応じて制御される。プロジェクター１は、ＲＧＢの三原色に対応した３枚の液晶パネル１６２を有する。光源１６１からの光はＲＧＢの３色の色光に分離され、各色光は対応する液晶パネル１６２に入射する。各液晶パネルを通過して変調された色光はクロスダイクロイックプリズム等によって合成され、光学系１６３に射出される。光学系１６３は、液晶パネル１６２により画像光へと変調された光を拡大してスクリーンＳＣに投写するレンズと、投写する画像の拡大・縮小及び焦点の調整を行うズームレンズとを有する。光源駆動回路１６４は、ＭＣＵ１０の制御に従って光源１６１を駆動する。パネル駆動回路１６５は、画像処理回路１５から出力された画像データに応じて液晶パネル１６２を駆動する。光学系駆動回路１６６は、ＭＣＵ１０の制御に従って光学系１６３を駆動し、ズームの度合いの調整およびフォーカスの調整を行う。

イメージセンサー１７は、スクリーンＳＣ上における指示体３の位置を特定するために、スクリーンＳＣを撮像し画像データを生成する固体撮像素子群である。イメージセンサー１７は、例えば、ＣＭＯＳイメージセンサーまたはＣＣＤイメージセンサーなどにより構成される。プロジェクター１は、複数のイメージセンサー１７（イメージセンサー群）を有しており、これらのイメージセンサー１７は、投写ユニット１６が投写画像を投写可能な最大範囲を含む画角でスクリーンＳＣを撮像する。ＭＣＵ１０は、イメージセンサー１７により撮像された画像データから指示体３の軌跡を、指示体３から出力される光により特定し、特定された軌跡に応じて手書きフレームメモリー（第１手書きフレームメモリーおよび第２手書きフレームメモリー）を書き換える。画像処理回路１５は、第１手書きフレームメモリーに記憶された画像と、第２手書きフレームメモリーに記憶された画像とを合成し、合成後の画像を合成描画フレームメモリーに記憶する。画像処理回路１５は、また、左画像フレームメモリーに記憶された画像および右画像フレームメモリーに記憶された画像と、合成描画フレームメモリーに記憶された画像とを合成し、合成後の画像を投写画像フレームメモリーに記憶する。画像処理回路１５は、射画像フレームメモリーに記憶された画像を示す画像データをパネル駆動回路１６５に出力する。

受光部１８は、コントローラーＲから送信される赤外線信号を受光し、受光した赤外線信号をデコードして入力処理部１９に出力する。入力処理部１９は、コントローラーＲによる操作内容を示す情報を生成し、ＭＣＵ１０に出力する。

プロジェクター１において、プログラムを実行しているＭＣＵ１０により制御されているＩＦ部１４は、受付手段１０１および出力手段１０７の一例である。プログラムを実行しているＭＣＵ１０により制御されているパネル駆動回路１６５は、表示手段１０２の一例である。プログラムを実行しているＭＣＵ１０により制御されているイメージセンサー１７は、第１検知手段１０３および第２検知手段１０４の一例である。プログラムを実行しているＭＣＵ１０は、統合手段１０５の一例である。プログラムを実行しているＭＣＵ１０により制御されている画像処理回路１５は、表示制御手段１０６の一例である。

図４は、ＰＣ２のハードウェア構成を示すブロック図である。ＰＣ２は、ＣＰＵ２０と、ＲＯＭ２１と、ＲＡＭ２２と、記憶部２３、ＩＦ部２４と、表示部２５と、入力部２６とを有する。ＣＰＵ２０は、プログラムを実行することによりＰＣ２の各部を制御する制御装置である。ＲＯＭ２１は、各種のプログラム及びデータを記憶した不揮発性の記憶装置である。ＲＡＭ２２は、データを記憶する揮発性の記憶装置である。記憶部２３は、データおよびプログラムを記憶する記憶装置、例えばＨＤＤ（Hard Disk Drive）である。ＩＦ部２４は、プロジェクター１などの外部装置と通信を行なう。ＩＦ部２４は、外部装置と接続するための各種端子を備える。表示部２５は、液晶ディスプレイまたは有機ＥＬ（Electroluminescence）ディスプレイなどの表示装置を有する。入力部２６は、ユーザーによる入力を受け付ける入力デバイスであり、キーボード、マウス、タッチパッド、および各種ボタン等を備える。プロジェクター１において、プログラムを実行しているＣＰＵ２０により制御されているＩＦ部２４は、出力手段２０１の一例である。

図５は、指示体３のハードウェア構成を示すブロック図である。指示体３は、制御部３０と、圧力センサー３１と、ＬＥＤ（Light Emitting Diode）３２とを有する。制御部３０は、指示体３の各部の動作を制御する制御装置である。圧力センサー３１は、指示体３の先端に設けられ、指示体３の先端への圧力を検出する。ＬＥＤ３２は、指示体３に固有の波長の光を出力する。制御部３０は、指示体３の先端への圧力が検出されると、光が出力されるようにＬＥＤ３２を制御する。

２．動作
図６は、プロジェクター１における、単一の映像信号により示される複数の入力画像をスクリーンＳＣに並べて投写する処理（以下、「並列投写処理」という）を示すフローチャートである。以下の処理は、ＰＣ２がプロジェクター１に映像信号を出力している状態で開始される。この状態において、プロジェクター１は、ＰＣ２からの映像信号に応じた単一の入力画像をスクリーンＳＣに投写している。

ステップＳＡ１において、ＭＣＵ１０は、単一の映像信号により示される複数の入力画像をスクリーンＳＣに並べて投写させるための指示（以下、「並列投写指示」という）が入力されたか否かを判断する。プロジェクター１は、プロジェクター１に対する各種指示の入力を受け付けるための複数のアイコンを有するグラフィカルユーザーインタフェース（以下、「ツールパレット」という）をスクリーンＳＣに投写する。並列投写指示は、ユーザーＵＴが、指示体３を用いてツールパレットを操作することにより入力される。並列投写指示が入力されたと判断された場合（ＳＡ１：ＹＥＳ）、ＭＣＵ１０は、処理をステップＳＡ２に移行する。並列投写指示が入力されていないと判断された場合（ＳＡ１：ＮＯ）、ＭＣＵ１０は、処理を待機する。

図７は、並列投写指示の入力例を示す図である。この例で、ツールパレットＴＰは、投写画像の右側の領域に含まれている。ツールパレットＴＰには、並列投写指示を入力するためのアイコンＰＡが含まれている。ユーザーＵＴは、ツールパレットＴＰ上のアイコンＰＡを選択することにより、並列投写指示を入力している。アイコンは、そのアイコンを指示体３を用いて軽く叩く（以下、この動作を「タップする」という）ことにより選択される。

再び図６を参照する。ステップＳＡ２において、ＭＣＵ１０は、単一の映像信号に応じた複数の入力画像をスクリーンＳＣに並べて投写する。具体的には、ＭＣＵ１０は、入力画像を複製し、複製された画像を左画像フレームメモリーおよび右画像フレームメモリーに記憶する。

図８は、ステップＳＡ２における投写画像を例示する図である。図８において、投写画像ＩＰは、表示領域Ｌ１（第１の表示領域の一例）と表示領域Ｒ１（第２の表示領域の一例）とを有する。図８の例で、表示領域Ｌ１と表示領域Ｒ１は互いに重ならない領域である。表示領域Ｌ１と表示領域Ｒ１には、入力画像がそれぞれ表示される。以下では、表示領域Ｌ１に表示された入力画像を「入力画像ＩＬ」と表現し、表示領域Ｒ１に表示された入力画像を「入力画像ＩＲ」と表現する。図８の例では、入力画像ＩＬと入力画像ＩＲとは、画像内に表示されている部分（以下、「表示部分」という）および表示倍率が同じ画像である。表示領域Ｌ１と表示領域Ｒ１には、固有のツールパレットＴＰ（ＴＰＬおよびＴＰＲ）がそれぞれ投写される。入力画像ＩＬに関する各種指示の入力は、表示領域Ｌ１内のツールパレットＴＰＬを操作することにより行われる。入力画像ＩＲに関する各種指示の入力は、表示領域Ｒ１内のツールパレットＴＰＲを操作することにより行われる。したがって、入力画像ＩＬおよび入力画像ＩＲに対しては、表示倍率の変更およびスクロールなどの各種指示の入力が各画像で独立して行われる。表示倍率の変更およびスクロールの指示が入力されたときの処理については後述する。

再び図６を参照する。ステップＳＡ３において、ＭＣＵ１０は、表示領域Ｌ１と表示領域Ｒ１のいずれかにおいて、指示体３の軌跡が検知されたか否かを判断する。具体的には、ＭＣＵ１０は、描画を行うためのモード（以下、「描画モード」という）が実行されている状態で、指示体３の軌跡が検知されたか否かを判断する。描画モードは、図８に示したツールパレットＴＰ上の決められたアイコンをタップすることにより実行される。指示体３の軌跡が検知されたと判断された場合（ＳＡ３：ＹＥＳ）、ＭＣＵ１０は、処理をステップＳＡ４に移行する。指示体３の軌跡が検知されていないと判断された場合（ＳＡ３：ＮＯ）、ＭＣＵ１０は、処理をステップＳＡ７に移行する。

ステップＳＡ４において、ＭＣＵ１０は、検知された軌跡をＲＡＭ１２に記憶する。具体的には、ＭＣＵ１０は、表示領域Ｌ１において軌跡が検知された場合には、当該軌跡を第１手書きフレームメモリーに記憶する。ＭＣＵ１０は、表示領域Ｒ１において軌跡が検知された場合には、当該軌跡を第２手書きフレームメモリーに記憶する。

図９は、フレームメモリーを示すイメージ図である。図９は、第１手書きフレームメモリーＭＬ、第２手書きフレームメモリーＭＲ、および合成描画フレームメモリーＭＩを示す。図９では、説明の便宜上、各フレームメモリーに記憶されている軌跡をビットマップ形式の画像で示す。第１手書きフレームメモリーＭＬ、第２手書きフレームメモリーＭＲ、および合成描画フレームメモリーＭＩは、入力画像フレームメモリーに記憶された入力画像以下、「原画像」という）のサイズに対応している。ＭＣＵ１０は、入力画像ＩＬまたは入力画像ＩＲ上の軌跡の座標を原画像上の座標に変換し、変換後の座標が示す画像を第１手書きフレームメモリーＭＬまたは第２手書きフレームメモリーＭＲに記憶する。図９の例では、ユーザーＵＴは、表示領域Ｌ１において、図８に示した「１×１」に対して「１」と描画しており、「１×２」に対して「２」と描画している。また、ユーザーＵＴは、表示領域Ｒ１において、「１×１」に対してアンダーラインを描画している。

再び図６を参照する。ステップＳＡ５において、ＭＣＵ１０は、表示領域Ｌ１において検知された軌跡と、表示領域Ｒ１において検知された軌跡とを統合する。具体的には、ＭＣＵ１０は、第１手書きフレームメモリーＭＬに記憶された画像と、第２手書きフレームメモリーＭＲに記憶された画像とを合成し、合成後の画像を合成描画フレームメモリーＭＩに記憶する。ステップＳＡ６において、ＭＣＵ１０は、統合後の軌跡を入力画像上に重ねて投写する。具体的には、ＭＣＵ１０は、合成描画フレームメモリーＭＩに記憶された画像を入力画像ＩＬの表示倍率に応じて拡大（または縮小）し、第１手書きフレームメモリーに記憶された画像と合成する。ＭＣＵ１０は、また、合成描画フレームメモリーＭＩに記憶された軌跡を入力画像ＩＲの表示倍率に応じて拡大（または縮小）し、第２手書きフレームメモリーに記憶された画像と合成する。ＭＣＵ１０は、合成後の２つの画像を投写画像フレームメモリーに記憶する。

図１０は、ステップＳＡ６における投写画像ＩＰを例示する図である。図１０は、図８に示した入力画像ＩＬおよび入力画像ＩＲ上に図９に示した統合後の軌跡が重ねて投写された場合の投写画像ＩＰを示す。図１０に示す通り、入力画像ＩＬおよび入力画像ＩＲのいずれか一方に対して行った描画は、他方の入力画像上にも反映される。

再び図６を参照する。ステップＳＡ７において、ＭＣＵ１０は、並列投写処理を終了せせるための指示（以下、「終了指示」という）が入力されたか否かを判断する。終了指示は、例えば、ユーザーＵＴが指示体３を用いてツールパレットＴＰ（ＴＰＬまたはＴＰＲ）上のアイコンＰＡを再びタップすることにより入力される。終了指示が入力されたと判断された場合（ＳＡ７：ＹＥＳ）、ＭＣＵ１０は、処理をステップＳＡ８に移行する。終了指示が入力されていないと判断された場合（ＳＡ７：ＮＯ）、ＭＣＵ１０は、処理をステップＳＡ２に移行する。

ステップＳＡ８において、ＭＣＵ１０は、単一の入力画像を投写する。具体的には、ＭＣＵ１０は、表示領域Ｌ１および表示領域Ｒ１のいずれか一方に表示されている画像をスクリーンＳＣに投写する。例えば、ＭＣＵ１０は、ツールパレットＴＰＬ上のアイコンＰＡがタップされた場合には、表示領域Ｌ１に表示されている画像をスクリーンＳＣに投写し、ツールパレットＴＰＲ上のアイコンＰＡがタップされた場合には、表示領域Ｒ１に表示されている画像をスクリーンＳＣに投写する。

図１１は、ステップＳＡ８における投写画像ＩＰを例示する図である。図１１は、図１０に示した投写画像ＩＰにおいて終了指示が入力された場合の投写画像ＩＰを示す。

図１２は、プロジェクター１における、表示倍率の変更処理およびスクロール処理を示すフローチャートである。以下の処理は、入力画像ＩＬおよび入力画像ＩＲが投写されている間（すなわち、図６において、並列投写指示が入力されてから終了指示が入力されるまでの間）実行される。ステップＳＢ１において、ＭＣＵ１０は、表示倍率を変更するための指示（以下、「倍率変更指示」という）が入力されたか否かを判断する。倍率変更指示は、例えば、ユーザーＵＴが指示体３を用いてツールパレットＴＰ（ＴＰＬまたはＴＰＲ）を操作することにより入力される。倍率変更指示が入力されたと判断された場合（ＳＢ１：ＹＥＳ）、ＭＣＵ１０は、処理をステップＳＢ２に移行する。倍率変更指示が入力されていないと判断された場合（ＳＢ１：ＮＯ）、ＭＣＵ１０は、処理をステップＳＢ３に移行する。

ステップＳＢ２において、ＭＣＵ１０は、入力画像ＩＬまたは入力画像ＩＲの表示倍率を変更する。具体的には、倍率変更指示がツールパレットＴＰＬ上で入力された場合には、入力画像ＩＬの表示倍率を変更する。倍率変更指示がツールパレットＴＰＲ上で入力された場合には、入力画像ＩＲの表示倍率を変更する。ＭＣＵ１０は、倍率変更指示に応じて原画像を拡大（または縮小）し、拡大後（縮小後）の入力画像を左画像フレームメモリーまたは右画像フレームメモリーに書き込む。

図１３は、表示倍率が変更されたときの投写画像ＩＰを例示する図である。図１３は、図１０に示した投写画像ＩＰにおいて、入力画像ＩＲに対して倍率変更指示が入力された場合の投写画像ＩＰを示す。図１３において、入力画像ＩＲは、倍率変更指示に応じて拡大されている。

ステップＳＢ３において、ＭＣＵ１０は、入力画像ＩＬまたは入力画像ＩＲをスクロールさせるための指示（以下、「スクロール指示」という）が入力されたか否かを判断する。スクロール指示は、例えば、ユーザーＵＴが指示体３を用いてツールパレットＴＰ（ＴＰＬまたはＴＰＲ）を操作することにより入力される。スクロール指示が入力されたと判断された場合（ＳＢ３：ＹＥＳ）、ＭＣＵ１０は、処理をステップＳＢ４に移行する。スクロール指示が入力されていないと判断された場合（ＳＢ３：ＮＯ）、ＭＣＵ１０は、処理をステップＳＢ１に移行する。

ステップＳＢ４において、ＭＣＵ１０は、入力画像ＩＬまたは入力画像ＩＲをスクロールさせる。具体的には、スクロール指示がツールパレットＴＰＬ上で入力された場合には、入力画像ＩＬをスクロールし、スクロール指示がツールパレットＴＰＲ上で入力された場合には、入力画像ＩＲをスクロールする。ＭＣＵ１０は、スクロール指示に応じた表示部分を原画像の中から特定し、特定された表示部分を左画像フレームメモリーまたは右画像フレームメモリーに書き込む。

図１４は、入力画像がスクロールされたときの投写画像を例示する図である。図１４は、図１３に示した投写画像において、入力画像ＩＲに対してスクロール指示が入力された場合の投写画像を示す。図１４において、入力画像ＩＲは、スクロール指示に応じて下方向にスクロールされている。

図６および図１２に示した処理により、単一の映像信号により示される複数の入力画像がスクリーンＳＣに並べて投写され、ユーザーＵＴは各入力画像に対して独立して指示を入力することができる。したがって、ユーザーＵＴは、例えば、入力画像ＩＬを等倍で表示させ、また、入力画像ＩＲを拡大して表示させることにより、表示領域Ｌ１で入力画像全体を確認しながら表示領域Ｌ２でより細かい描画を行うことができる。また、別の例で、ユーザーＵＴは、比較対象となる２つのオブジェクトを表示領域Ｌ１および表示領域Ｒ１に表示させることにより、単一の入力画像を表示させた場合に比べて、２つのオブジェクトの相違点を視覚的に把握しやすくすることができる。

＜変形例＞
本発明は、上述の実施形態に限定されるものではなく、種々の変形実施が可能である。以下、変形例をいくつか説明する。以下で説明する変形例のうち、２つ以上のものが組み合わされて用いられてもよい。

（１）変形例１
プロジェクター１は、投写画像を示す画像データを外部装置である電子機器に出力してもよい。例えば、プロジェクター１は、表示領域Ｌ１に表示されている画像または表示領域Ｒ１に表示されている画像のうち、いずれか一方の画像を示す画像データをタブレット端末または他のプロジェクターなどの外部装置に出力してもよい。この場合、画像データの出力がされる表示領域は、例えば、ユーザーＵＴがツールパレットＴＰを操作することにより選択される。なお、外部装置である電子機器は、画像を扱える電子機器であればなんでもよく、例えば、パーソナルコンピューター、スマートフォン、デジタルカメラ、画像記憶装置などでもよい。

図１５は、変形例１に係る投写システムＰＳ１を示す図である。投写システムＰＳ１は、上述した投写システムＰＳの構成に加えて、複数台のタブレット端末４（４Ｔ１〜４Ｔｎ）を有する。タブレット端末４は、プロジェクター１から入力された画像データが示す画像を表示する電子機器である。図１５は、投写システムＰＳ１が学校の教室で利用された場合の例を示している。この例で、ユーザーＵＴは教師であり、複数台のタブレット端末４のユーザーＵｓ（Ｕｓ１からＵｓｎ）は生徒である。複数台のタブレット端末４は、それぞれプロジェクター１と無線接続されている。図１５では、表示領域Ｒ１に表示されている画像を示す画像データがタブレット端末４に出力されている。この例で、教師は、表示領域Ｒ１を操作することにより、タブレット端末４に表示される画像を調節する。なお、図１５に示す例で、ユーザーＵｓ１からＵｓｎは、タブレット端末４のタッチパネルに電子的に手書きの文字や図形を書き込んでもよい。この場合、ユーザーＵＴにより選択された一のユーザーＵｓの書き込みの内容が、スクリーンＳＣに表示されてもよい。

別の例で、プロジェクター１は、表示領域Ｌ１または表示領域Ｒ１のうち選択された一方の表示領域（以下、「選択表示領域」という）に表示されている入力画像と、選択表示領域において検知された軌跡とを示す画像データをタブレット端末４に出力してもよい。この場合、ＭＣＵ１０は、左画像フレームメモリーまたは右画像フレームメモリーに記憶された画像のうち選択表示領域に表示される一方の画像と、第１手書きフレームメモリーまたは第２手書きフレームメモリーに記憶された画像のうち選択表示領域に対応する一方の画像とを合成し、合成後の画像を示す画像データをタブレット端末４に出力する。

（２）変形例２
表示領域Ｌ１および表示領域Ｒ１の位置および大きさは、実施形態に記載されたものに限らない。例えば、表示領域Ｌ１または表示領域Ｒ１のうち、いずれか一方の表示領域は、他方の表示領域の中に含まれていてもよい。この場合、一方の表示領域には、他方の表示領域に表示された入力画像の一部を拡大した画像が表示されてもよい。また、表示領域Ｌ１および表示領域Ｒ１は、例えば、指示体３の操作に応じて移動してもよい。

（３）変形例３
表示領域Ｌ１において指示体３の軌跡が検知されるタイミングと、表示領域Ｒ１において指示体３の軌跡が検知されるタイミングとは同時であってもよい。ここでいう「同時」とは、ユーザーにとって同じタイミングで軌跡が検知されることを意味し、例えば、ユーザーＵＴが指示体３を用いて表示領域Ｌ１に描画を行っている最中に、他のユーザーが他の指示体３を用いて表示領域Ｒ１に描画を行うことができるという意味である。

（４）変形例４
映像ソースは、ＰＣ２などの外部装置に限らない。プロジェクター１は、映像ソースの機能を内蔵していてもよい。例えば、プロジェクター１は、内蔵する映像ソースからの映像信号に応じて白一色の複数の画像をスクリーンＳＣに並べて投写してもよい。

（５）変形例５
入力画像ＩＬおよび入力画像ＩＲのいずれか一方に対して行った描画は、他方の入力画像上に反映されなくてもよい。この場合、ＭＣＵ１０は、ステップＳＡ５における統合を行わずに、左画像フレームメモリーに記憶された画像と第１手書きフレームメモリーに記憶された画像とを合成し、また、右画像フレームメモリーに記憶された画像と第２手書きフレームメモリーに記憶された画像とを合成し、合成後の画像を投写画像フレームメモリーに記憶する。

（６）変形例６
入力画像ＩＬまたは入力画像ＩＲに対する各種指示は、倍率変更指示およびスクロール指示に限らない。入力画像ＩＬまたは入力画像ＩＲに対しては、例えば、画像を印刷するための指示、または、画像を外部装置に送信するための指示を入力する操作がされてもよい。

（７）変形例７
映像ソースは単一である場合に限らない。プロジェクター１は、複数の映像ソースから映像信号の入力を受け付けて、複数の入力画像をスクリーンＳＣに並べて投写してもよい。例えば、プロジェクター１は、複数台のＰＣから映像信号の入力を受け付けて、各映像信号により示される複数の入力画像を投写してもよい。この場合において、各映像ソースの画面は、スクリーンＳＣにサムネイルとして投写されてもよい。

図１６は、変形例７における投写画像ＩＰを例示する図である。この例で、プロジェクター１は、４台のＰＣに接続されており、投写画像ＩＰには各ＰＣに表示されている画像のサムネイルＴＮが含まれている。ユーザーＵＴは、サムネイルＴＮをタップすることにより、一の入力画像を拡大してスクリーンＳＣに投写させる。なお、サムネイルＴＮに対して描画が行われてもよい。

（８）変形例８
プロジェクター１は、複数の映像ソースから映像信号の入力を受け付ける場合、複数の入力画像の差分をスクリーンＳＣに表示してもよい。この場合、ＭＣＵ１０は、例えば、排他的論理和（ＸＯＲ）演算を行うことにより複数の入力画像の差分を抽出し、複数の入力画像を重ね合わせた画像の上に当該差分を強調して表示してもよい。

図１７は、変形例８に係る投写画像ＩＰを例示する図である。この例で、一方のＰＣからの入力画像ＩＡには六芒星が含まれており、他方のＰＣからの入力画像ＩＢには五芒星と六芒星が含まれている。したがって、ＭＣＵ１０は、ＸＯＲ演算を行うことにより五芒星を差分として抽出し、入力画像ＩＡと入力画像ＩＢとを重ね合わせた画像において、五芒星を強調して表示する。差分の強調は、例えば、差分の箇所の色を変えることにより行われる。

（９）変形例９
投写画像ＩＰに含まれる表示領域の数は２つに限らない。投写画像ＩＰは、３つ以上の表示領域を有していてもよい。

図１８は、変形例９に係る投写画像ＩＰを例示する図である。この例で、プロジェクター１は、２台のＰＣに接続されており、一方のＰＣからの入力画像は表示領域Ｌ１に、他方のＰＣからの入力画像は表示領域Ｒ１に表示されている。図１８において、投写画像ＩＰは、表示領域Ｌ１および表示領域Ｒ１に加えて、表示領域Ｃ１を有する。表示領域Ｃ１は、入力画像ＩＬと入力画像ＩＲとの差分を表示するための領域である。ＭＣＵ１０は、例えば、排他的論理和（ＸＯＲ）演算を行うことにより入力画像ＩＬと入力画像ＩＲとの差分を抽出し、表示領域Ｃ１に表示する。図１８に示す例では、六芒星が差分として抽出され、表示領域Ｃ１に六芒星が表示されている。

（１０）変形例１０
プロジェクター１は、単一の、または、複数の映像ソースから異なる映像信号の入力を受け付け、当該映像信号により示される複数の入力画像をスクリーンＳＣに投写してもよい。この場合、変形例５、変形例８または変形例９に示した処理と同様の処理が、複数の入力画像に対して行われてもよい。例えば、医療の分野で、手術前と手術後のレントゲン写真の差分が表示領域Ｃ１に表示されてもよい。

（１１）変形例１１
映像信号が示す画像は、実施形態に示した画像に限らない。映像信号は、例えば、テレビ会議またはＷｅｂ会議における画像を示してもよい。

（１２）変形例１２
プロジェクター１により行われる処理は、図６および図１２に示した処理に限らない。例えば、ステップＳＡ１において並列投写指示が入力された場合に、表示領域Ｌ１および表示領域Ｒ１の位置および大きさをユーザーに指定させるための画面が投写されてもよい。別の例で、入力画像ＩＬおよび入力画像ＩＲのいずれか一方に対して行った描画を、他方の入力画像上に反映させるか否かをユーザーに選択させるための画面が投写されてもよい。

（１３）変形例１３
投写システムＰＳにおいて用いられる各種装置のハードウェア構成は、図３から図５に示した構成に限らない。図６および図１２に示した処理が実行されれば、各種装置はどのようなハードウェア構成を有していてもよい。例えば、液晶パネル１６２は、反射型の液晶パネルであってもよい。また、液晶パネル１６２に代えて、有機ＥＬ（ElectroLuminescence）素子、デジタルミラーデバイス（ＤＭＤ）等の電気光学素子が用いられてもよい。また、液晶パネル１６２は色成分毎に設けられていなくてもよく、プロジェクター１は単一の液晶パネル１６２を有していてもよい。この場合、各色成分の画像は時分割で表示されてもよい。さらに、プロジェクター１のメモリーの構成は、実施形態に示した構成に限らない。例えば、ＲＡＭ１２は、手書きフレームメモリーに代えて、指示体３の軌跡をオブジェクト単位で記憶するメモリーを有してもよい。

（１４）変形例１４
投写システムＰＳの構成は、図１に示した構成に限らない。例えば、プロジェクター１とＰＣ２を接続する方法は、画像信号ケーブルやＵＳＢケーブルに限られず、無線／有線ＬＡＮや近距離無線通信などでもよい。

（１５）変形例１５
本発明が適用される表示装置は、プロジェクターに限らない。タブレット端末およびスマートフォンなどのタッチパネルを備えた機器に本発明が適用されてもよい。

１…プロジェクター、１０１…受付手段、１０２…表示手段、１０３…第１検知手段、１０４…第２検知手段、１０５…統合手段、１０６…表示制御手段、１０７…出力手段、１０…ＭＣＵ、１１…ＲＯＭ、１２…ＲＡＭ、１３…記憶部、１４…ＩＦ部、１５…画像処理回路、１６…投写ユニット、１６１…光源、１６２…液晶パネル、１６３…光学系、１６４…光源駆動回路、１６５…パネル駆動回路、１６６…光学系駆動回路、１７…イメージセンサー、１８…受光部、１９…入力処理部、２…パーソナルコンピューター、２０１…出力手段、２０…ＣＰＵ、２１…ＲＯＭ、２２…ＲＡＭ、２３…記憶部、２４…ＩＦ部、２５…表示部、２６…入力部、３…指示体、３０…制御部、３１…圧力センサー、３２…ＬＥＤ、４…タブレット端末

Claims (9)

1. 映像ソースから映像信号の入力を受け付ける受付手段と、
   前記映像信号に応じて１つの画像を表示している状態で並列投写指示が入力されると、前記映像信号に応じた第１の画像を第１の表示領域に表示させ、当該映像信号に応じた第２の画像を第２の表示領域に表示させる表示手段と、
   前記第１の表示領域上での指示体の軌跡を検知する第１検知手段と、
   前記第２の表示領域上での指示体の軌跡を検知する第２検知手段と、
   前記第１検知手段により検知された軌跡と前記第２検知手段により検知された軌跡とを統合する統合手段と、
   前記統合手段により統合された軌跡の画像が前記第１の画像に重ねて前記第１の表示領域に表示され、且つ、当該軌跡の画像が前記第２の画像に重ねて前記第２の表示領域に表示されるように前記表示手段を制御する表示制御手段と
   を有する表示装置。
2. 前記第１の表示領域に表示されている前記第１の画像または前記第２の表示領域に表示されている前記第２の画像のうち、選択された一方の画像を示す画像データを電子機器に出力する出力手段
   を有する請求項１に記載の表示装置。
3. 前記第１の表示領域または前記第２の表示領域のうち、選択された一方の表示領域に表示されている第１の画像または第２の画像と、当該表示領域において検知された軌跡とを示す画像データを電子機器に出力する出力手段
   を有する請求項１に記載の表示装置。
4. 前記第１の表示領域と前記第２の表示領域は、互いに重ならない領域である
   ことを特徴とする請求項１ないし３のいずれか１項に記載の表示装置。
5. 前記第１の表示領域または前記第２の表示領域のうちいずれか一方の表示領域は、他方の表示領域の中に含まれている
   ことを特徴とする請求項１ないし３のいずれか１項に記載の表示装置。
6. 前記第１検知手段は第１指示体の軌跡を検知し、
   前記第２検知手段は第２指示体の軌跡を検知し、
   前記第１検知手段における前記第１指示体の軌跡の検知と前記第２検知手段における前記第２指示体の軌跡の検知が同時に行われる
   ことを特徴とする請求項１ないし５のいずれか１項に記載の表示装置。
7. 前記第１の表示領域に表示されている前記第１の画像の倍率変更指示が入力されると、前記第１の表示領域に表示されている前記第１の画像の表示倍率を変更し、前記第２の表示領域に表示されている前記第２の画像の倍率変更指示が入力されると、前記第２の表示領域に表示されている前記第２の画像の表示倍率を変更する
   請求項１ないし６のいずれか１項に記載の表示装置。
8. 前記第１の表示領域に表示されている前記第１の画像のスクロール指示が入力されると、前記第１の表示領域に表示されている前記第１の画像をスクロールし、前記第２の表示領域に表示されている前記第２の画像のスクロール指示が入力されると、前記第２の表示領域に表示されている前記第２の画像をスクロールする
   請求項１ないし７のいずれか１項に記載の表示装置。
9. 映像ソースから映像信号の入力を受け付けるステップと、
   前記映像信号に応じて１つの画像を表示している状態で並列投写指示が入力されると、前記映像ソースからの映像信号に応じた第１の画像を第１の表示領域に表示させ、当該映像信号に応じた第２の画像を第２の表示領域に表示させるステップと、
   前記第１の表示領域上での指示体の軌跡を検知するステップと、
   前記第２の表示領域上での指示体の軌跡を検知するステップと、
   前記第１の表示領域上で検知された軌跡と前記第２の表示領域上で検知された軌跡とを統合するステップと、
   統合された軌跡の画像を前記第１の画像に重ねて前記第１の表示領域に表示させ、且つ、当該軌跡の画像を前記第２の画像に重ねて前記第２の表示領域に表示させるステップと
   を有する表示方法。

Images