JP2015053020A - 情報表示装置、情報表示方法およびプログラム - Google Patents

Abstract

【課題】投影面に投影された投影画像を所定の位置で分割し、分割した投影画像の表示位置を入れ替えて表示させることで電子ペン等の指示デバイスを用いて投影画像の上方部分に描画することができる情報表示装置、情報表示方法およびプログラムを提供する。【解決手段】本発明に係る情報表示装置は、投影面に投影する投影画像を取得する画像取得部と、前記投影画像を前記投影面に投影して表示する画像出力部と、前記投影面に投影された投影画像を所定の位置で第１領域と第２領域とに分割処理する画像処理部と、前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する画像生成部と、を備える。【選択図】図２

Description

本発明は、情報表示装置、情報表示方法およびプログラムに関する。

近年、会議や学校の授業などでプロジェクタ等の投影装置によってスクリーン等の投影面に文字などの画像を表示してプレゼンテーションを行うことが普及し始めている。また、スクリーン等の投影面に投影される投影画像に、電子ペン等のポインティングデバイスを利用して、ポインティング位置を移動させることにより電子的に線や文字、絵などを描画できる技術が知られている。

特許文献１には、先に表示していた画像の一部と、その後に表示する画像の一部とを同時に表示可能とし、表示位置等の表示態様を高い自由度で自在に調整できる表示装置が開示されている。特許文献１に記載の表示装置は、入力画像１に対して、リモコンなどの操作装置を用いて一部または全体を範囲指定し、記憶装置に一時的に保存し、その後に表示される入力画像２に重ねて表示することができるものである。

しかしながら、従来のプロジェクタでは、電子ペン等の指示デバイスで投影画像に描画する場合、スクリーン等の投影面の上方部分には手が届かないため投影画像の上方部分に描画することが困難であるという問題がある。

また、特許文献１に記載の表示装置は、複数の入力画像を重畳して同時に表示することができるが、現在表示されている投影画像の上方部分の画像と下方部分の画像を入れ替えることはできないという問題がある。すなわち、特許文献１に記載の表示装置は、現在表示されている投影画像の上方部分の投影画像を下方部分に移動して表示させて電子ペン等の指示デバイスを用いて投影画像の上方部分に描画することができないという問題がある。

本発明は、上記に鑑みてなされたものであって、投影面に投影された投影画像を所定の位置で分割し、分割した投影画像の表示位置を入れ替えて表示させることで電子ペン等の指示デバイスを用いて投影画像の上方部分に描画することができる情報表示装置、情報表示方法およびプログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係る情報表示装置は、投影面に投影する投影画像を取得する画像取得部と、前記投影画像を前記投影面に投影して表示する画像出力部と、前記投影面に投影された投影画像を所定の位置で第１領域と第２領域とに分割処理する画像処理部と、前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する画像生成部と、を備えることを特徴とする。

本発明によれば、投影面に投影された投影画像を所定の位置で分割し、分割した投影画像の表示位置を入れ替えて表示させることで電子ペン等の指示デバイスを用いて投影画像の上方部分に描画することができる、という有利な効果を奏する。

図１は、第１の実施形態に係る情報表示システムの構成例を示す図である。 図２は、第１の実施形態に係る情報処理装置の機能的構成の一例を示す機能ブロック図である。 図３は、表示位置検知部によって保持される情報について説明する図である。 図４は、投影面に投影される投影画像の画面構成例を示す図である。 図５は、表示制御部が有する各操作対象ボタンに対応した対象範囲の座標テーブルと処理動作を説明する図である。 図６Ａは、投影画像の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図６Ｂは、投影画像の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図６Ｃは、投影画像の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図６Ｄは、投影画像の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図７Ａは、操作指示画面により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図７Ｂは、操作指示画面により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図７Ｃは、操作指示画面により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図７Ｄは、操作指示画面により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図８Ａは、操作指示画面により投影画像を２つの領域に垂直分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図８Ｂは、操作指示画面により投影画像を２つの領域に垂直分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図８Ｃは、操作指示画面により投影画像を２つの領域に垂直分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図９Ａは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図９Ｂは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図９Ｃは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１０Ａは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１０Ｂは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１０Ｃは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１０Ｄは、第１投影画像と第２投影画像を、２つの領域に分割して任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１１Ａは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１１Ｂは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１１Ｃは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１１Ｄは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１１Ｅは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。 図１２は、第１の実施形態に係る情報表示装置の制御動作の一例を示すフローチャート図である。 図１３は、第２の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図１４は、第３の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図１５は、第３の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図１６は、第４の実施形態に係る情報表示システムの構成例を示す図である。 図１７は、第４の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図１８は、第４の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図１９は、第５の実施形態に係る情報表示システムの構成例を示す図である。 図２０は、第５の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。 図２１は、第５の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。

以下、添付図面を参照しながら、本発明に係る情報表示装置、情報表示方法およびプログラムの一実施形態を詳細に説明する。

本実施の形態の情報表示装置は、投影面に投影する投影画像を取得して、取得した投影画像を投影面に投影して表示する。情報表示装置は、投影面に投影された投影画像を所定の位置で２つ以上の領域に分割する処理を行う。そして、情報表示装置は、分割処理した２つ以上の領域の表示位置を任意に入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として投影面に投影して表示する。情報表示装置は、変更投影画像での位置を指示する指示デバイスの指示位置に当該指示デバイスの指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として投影面に投影して表示する。これにより、情報表示装置は、投影面に投影された投影画像を分割し、分割した投影画像の表示位置を入れ替えて下方側に表示させることでペン型の指示デバイス等を用いて投影画像の上方部分に描画することができる。

なお、本実施の形態における指示デバイスは、ユーザが手に持って投影面の投影画面上の所望の位置をポインティングできるものであれば、その具体的な形態を限定するものではなく、好ましくは、ペン型の形状とすることができる。以下においては、ペン型の形状を備える指示デバイス（以下、ペンデバイスと表記する。）を採用した場合を例にとって説明する。

以下では、本実施の形態の情報表示装置を、ペンデバイスと、情報表示装置と、外部機器とを備えた情報表示システムの一部の装置として実現する例を説明する。なお、本実施の形態の情報表示装置の一例として、プロジェクタに適用した例を挙げて説明するがこれに限られるものではなく、本発明が適用される情報表示装置の種類は任意であり、例えば、液晶表示パネルに画像を表示する液晶モニターまたは液晶テレビ、ＰＤＰ（プラズマディスプレイパネル）に画像を表示するモニター装置またはテレビ受像機、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ−ｅｍｉｔｔｉｎｇ−ｄｉｏｄｅ）、ＯＥＬ（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）等と呼ばれる有機ＥＬ表示パネルに画像を表示するモニター装置またはテレビ受像機等の自発光型の表示装置などであってもよい。

（第１の実施形態）
図１は、第１の実施形態に係る情報表示システムの構成例を示す図である。第１の実施形態の情報表示システム１００は、図１に示すように、ペンデバイス１０と、情報表示装置２０と、外部機器３０とを備える。ペンデバイス１０は、例えば、ユーザによって操作されるペン型の指示デバイスである。情報表示装置２０は、例えば、スクリーン等の投影面４０に投影画像を投影するプロジェクタである。外部機器３０は、例えば、投影面４０に投影する投影画像を生成して情報表示装置２０に投影画像を送信するＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等である。なお、各装置は、ケーブルや各種無線通信等により接続されている。例えば、図１では、情報表示装置２０と外部機器３０とが有線接続されており、ペンデバイス１０と情報表示装置２０とが無線接続されている一例を示している。

図２は、第１の実施形態に係る情報処理装置の機能的構成の一例を示す機能ブロック図である。なお、図２では、情報表示装置２０の他に、ペンデバイス１０や外部機器３０についても図示している。ペンデバイス１０は、図２に示すように、表示位置検知部１１と、操作指示部１２とを備えている。表示位置検知部１１は、投影面４０の投影画像でのペンデバイス１０の指示位置を表すデバイス情報を検知する。そして、表示位置検知部１１は、検知したペンデバイス１０の指示位置を含むデバイス情報を情報表示装置２０に対して送信する。

図３は、表示位置検知部によって保持される情報について説明する図である。表示位置検知部１１では、図３に示すように、投影面４０上の二次元座標を認識して、ペンデバイス１０の指示位置の座標情報を保持している。図３においては、例えば、投影面をｘｙ座標とした場合、ペンデバイス１０の指示位置の座標が（ｘ_１，ｙ_１）である場合を表している。表示位置検知部１１が認識する投影面４０上でのペンデバイス１０の指示位置の座標（ｘ_１，ｙ_１）は、情報表示装置２０が保持する投影画像での座標（ｘ_１，ｙ_１）と同じである。つまり、情報表示装置２０は、投影面４０でのペンデバイス１０の指示位置の座標（ｘ_１，ｙ_１）をペンデバイス１０から受け付けることにより、情報表示装置２０が保持する投影画像での指示位置の座標（ｘ_１，ｙ_１）を特定することができる。このように、ペンデバイス１０は、投影面４０と投影画像とが対応付けられた座標情報を有しており、表示位置検知部１１は、ペンデバイス１０が投影面４０のどこに位置するのかという座標情報を認識する。

操作指示部１２は、投影面４０に投影された投影画像に対する処理動作を情報表示装置２０に対して送信する。投影画像に対する処理動作は、例えば、現在表示されている投影画像を２つ以上の領域に分割する処理である。また、処理動作は、例えば、現在表示されている投影画像の表示位置を変更する処理、すなわち、２つ以上の領域に分割した投影画像の表示位置を任意の位置に変更する処理である。また、処理動作は、例えば、指示デバイスの指示位置の軌跡で描画を行う描画処理、すなわち、投影面に投影された投影画像での指示デバイスの指示位置に指示デバイスの指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を現在表示されている投影画像に重畳させて表示させる処理である。また、処理動作は、例えば、境界を表す線画像を移動させる処理、すなわち、分割して表示位置を変更した各領域の間に表示させた境界を表す線画像の位置を、指示された新たな位置に変更して表示させる処理である。

これらの処理動作は、任意に設定することができる。ペンデバイス１０における処理動作の選択決定は、例えば、ペンデバイス１０に設けられた処理動作に対応するボタン等を押下することで実行される。なお、本実施の形態においては、ペンデバイス１０が操作指示部１２を備えない構成とすることもできる。ペンデバイス１０が操作指示部１２を備えない場合は、投影面４０に投影された投影画像に対する処理動作は、後述する情報表示装置２０の表示制御部２８が表示する操作指示画面５２を指示選択することにより行うことができる。

図２に戻り、情報表示装置２０は、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、軌跡生成部２７と、表示制御部２８と、記憶部２９とを備えている。

画像取得部２１は、例えば、外部機器３０から情報表示装置２０で投影面４０に投影する投影画像を入力画像として取得する。また、画像取得部２１は、例えば、情報表示装置２０内で新たに生成した変更投影画像を投影面４０に投影する投影画像として取得する。

画像処理部２２は、投影面４０に投影された投影画像または変更投影画像を所定の位置で２つ以上の領域に分割する処理を実行する。画像処理部２２は、例えば、投影画像を２つに分割する場合には、投影画像を任意の位置で第１領域と第２領域とに分割処理する。

画像処理部２２は、後述する操作判定部２５で判定した処理動作が、投影画像を分割する処理である場合に、後述する表示制御部２８が表示した操作指示画面５２で操作された指示画像の指示位置で、当該投影画像を第１領域と第２領域とに分割する処理を実行する。

また、画像処理部２２は、投影画像を２つの領域に分割する処理をした後、それぞれの領域の投影画像を記憶部２９に記憶させる。

画像処理部２２は、後述する表示制御部２８が表示した操作指示画面５２で操作された指示画像６０の指示位置で、投影画像を３つ以上の領域に分割する処理を実行する。

画像処理部２２は、例えば、投影画像を３つに分割する場合には、投影画像を任意の位置で第１領域と第２領域と第３領域とに分割する処理を実行する。そして、分割処理した第１領域と第２領域と第３領域とを記憶部２９に記憶させる。

また、画像処理部２２は、第１投影画像を予め設定された位置で第１領域と第２領域とに分割する処理を実行し、次に表示される第２投影画像を予め設定された位置で第３領域と第４領域とに分割する処理を実行する。そして、分割処理した第１領域と第２領域と第３領域と第４領域とを記憶部２９に記憶させる。

このように、画像処理部２２は、投影面４０に投影する投影画像または変更投影画像を任意の位置で２つ以上の領域に分割する処理を実行する。

なお、投影画像を分割する任意の位置は、予め設定した位置でもよいし、後述する表示制御部２８が表示した操作指示画面５２で操作された指示画像の指示位置でもよいし、投影面４０上の投影画像に対するペンデバイス１０の指示位置でもよい。

画像生成部２３は、画像処理部２２で分割する処理をした第１領域と第２領域との表示位置を入れ替えた変更投影画像を生成し、変更投影画像を投影画像として画像取得部２１へ出力する。

画像生成部２３は、後述する操作判定部２５で判定した処理動作が、投影画像の表示位置を変更する処理である場合に、第１領域と第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

また、画像生成部２３は、後述する表示制御部２８が表示した操作指示画面５２で操作された指示画像６０の指示位置で選択決定された３つ以上の領域のうちの任意の２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

画像生成部２３は、画像処理部２２により先に表示される第１投影画像を第１領域と第２領域とに分割処理し、次に表示される第２投影画像を第３領域と第４領域とに分割処理した場合、第１領域と第２領域とを配置した第１変更投影画像を生成し、第２領域と第３領域とを配置した第２変更投影画像を生成し、第３領域と第４領域とを配置した第３変更投影画像を生成して、生成した第１変更投影画像、第２変更投影画像、第３変更投影画像の順に投影画像として画像取得部２１へ出力する。

画像生成部２３は、第１変更投影画像、第２変更投影画像および第３変更投影画像が投影面に投影画像として表示されている間に、後述する操作判定部２５で判定した処理動作が、当該投影画像を分割する操作である場合に、当該投影画像を構成している２つの領域を後述する記憶部２９から取得して、２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

画像生成部２３は、画像処理部２２が後述する表示制御部２８が表示した操作指示画面５２で操作された指示画像の指示位置で、投影画像を３つ以上の領域に分割処理した場合、前記操作指示画面で操作された前記指示画像の指示位置で選択決定された前記３つ以上の領域のうちの任意の２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する。

受付部２４は、ペンデバイス１０の表示位置検知部１１から送信された投影面４０の投影画像での指示デバイスの指示位置を表す情報を含むデバイス情報を受け付ける。そして、受付部２４は、デバイス情報を操作判定部２５、軌跡生成部２７、表示制御部２８に送信する。

デバイス情報は、例えば、投影面４０上での投影画像におけるペンデバイス１０の指示位置の座標情報を含む。情報表示装置２０は、ペンデバイス１０から受付部２４を介して投影面４０上での投影画像におけるペンデバイス１０の指示位置の座標情報を受け付けることで、情報表示装置２０が保持する投影画像での指示位置の座標を特定することができる。

また、デバイス情報は、例えば、投影面４０に投影された投影画像に対する処理動作を含む。情報表示装置２０は、ペンデバイス１０から受付部２４を介して投影面４０に投影された投影画像に対する処理動作を受け付けることで、各種の処理を行わせることができる。

操作判定部２５は、ペンデバイス１０から送信されたデバイス情報に含まれる投影面４０上でのペンデバイス１０の指示位置の座標情報に基づいて後述する表示制御部２８が表示した操作指示画面５２で指示選択された処理動作を判定する。また、操作判定部２５は、ペンデバイス１０から送信されたデバイス情報に含まれる投影面４０に投影された投影画像に対する処理動作に基づいて指示選択された処理動作を判定する。そして、判定された処理動作を画像処理部２２、画像生成部２３、軌跡生成部２７、表示制御部２８に対して送信する。

ここで、処理動作とは、投影面４０に投影された投影画像に対する処理動作である。投影画像に対する処理動作は、例えば、現在表示されている投影画像を２つ以上の領域に分割する処理である。また、処理動作は、例えば、現在表示されている投影画像の表示位置を変更する処理、すなわち、２つ以上の領域に分割した投影画像の表示位置を任意の位置に変更する処理である。また、処理動作は、例えば、指示デバイスの指示位置の軌跡で描画を行う描画処理である。すなわち、軌跡生成部２７は、投影面に投影された投影画像での指示デバイスの指示位置に指示デバイスの指示位置の軌跡で描画された軌跡画像を生成する。そして、軌跡生成部２７は、生成した軌跡画像を現在表示されている投影画像に重畳した変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部へ出力する処理である。また、処理動作は、例えば、境界を表す線画像を移動させる処理である。すなわち、表示制御部２８は、分割して表示位置を変更した各領域の間に表示させた境界を表す線画像の位置を、指示された新たな位置に変更して表示させる処理などである。

なお、デバイス情報には、投影面４０上でのペンデバイス１０の指示位置の座標情報のみが含まれ、投影面４０に投影された投影画像に対する処理動作が含まれないようにすることもできる。その場合には、操作判定部２５は、ペンデバイス１０から送信されたデバイス情報に含まれる投影面４０上でのペンデバイス１０の指示位置の座標情報に基づいて後述する表示制御部２８が表示した操作指示画面５２で指示選択された処理動作を判定する。

操作判定部２５は、判定された処理動作を画像処理部２２、画像生成部２３、後述する軌跡生成部２７、表示制御部２８に出力する。

画像出力部２６は、画像取得部２１で取得した投影画像を投影面４０に投影して表示させる。また、画像出力部２６は、投影画像を外部機器３０に送信して記憶させることができる。

軌跡生成部２７は、投影面４０に投影された変更投影画像での位置を指示するペンデバイス（指示デバイス）１０のデバイス情報に基づき、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成する。そして、軌跡生成部２７は、軌跡画像１６０を画像生成部２３で生成した変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

軌跡生成部２７は、操作判定部２５で判定した処理動作が、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理である場合に、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成する。そして、軌跡生成部２７は、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

また、軌跡生成部２７は、生成した軌跡画像１６０および変更投影画像を記憶部２９に記憶させる。

ここで、軌跡生成部２７が軌跡画像を生成する方法について説明する。情報表示装置２０の受付部２４では、ペンデバイス１０の表示位置検知部１１から投影面４０上でペンデバイス１０が指示する指示位置の座標（ｘ_１，ｙ_１）を常時受け付けている。投影面４０上でペンデバイス１０が指示する指示位置の座標（ｘ_１，ｙ_１）は、情報表示装置２０が記憶部２９に保持する投影画像での指示位置の座標（ｘ_１，ｙ_１）と対応付けられている。よって、ペンデバイス１０の指示する指示位置の座標の軌跡を繋ぎ合わせることで軌跡画像を生成することができる。なお、軌跡生成部２７は、操作判定部２５で判定した処理動作が、ペンデバイス（指示デバイス）１０の指示位置の軌跡で描画を行う描画処理である場合に軌跡画像を生成する。

表示制御部２８は、投影面４０に投影される投影画像の画面１５０の予め設定された領域に、投影画像に対する処理動作を指示する操作指示画面５２を重畳させて表示する。操作指示画面５２は、予め設定された任意の画像である。

表示制御部２８は、投影画像での指示位置を表す指示画像６０を投影画像の画面１５０に重畳させて表示する。指示画像６０は、予め設定された任意の画像である。

表示制御部２８は、画像生成部２３が投影画像を構成している２つ以上の領域の表示位置を入れ替えた変更投影画像を生成して、変更投影画像が投影画像として投影面に投影された場合に、予め設定された領域に２つ以上の領域の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示する。入替画像５１は、予め設定された任意の画像である。

表示制御部２８は、投影面に投影される投影画像に対して分割処理した、それぞれの領域の間に対応する位置に境界を表す線画像５０を重畳させて表示させる。線画像５０は、予め設定された任意の画像である。

図４は、投影面に投影される投影画像の画面構成例を示す図である。投影画像の画面１５０は、図４に示すように、投影画像の第１領域と第２領域の表示位置を入れ替えたことを表す入替画像５１と、投影画像に対する処理動作を指示選択する操作指示画面５２と、投影画像での指示位置を表す指示画像６０とが含まれた構成である。

なお、投影画像の画面１５０の左上下と右上下とに示された数値は、画面１５０における座標「（ｘ，ｙ）＝（幅，高さ）」を表している。また、画面１５０の座標（ｘ，ｙ）は、情報表示装置２０が保持する投影画像での座標（ｘ，ｙ）と同じである。つまり、情報表示装置２０は、画面１５０でのペンデバイス１０および指示画像６０の指示位置の座標（ｘ，ｙ）を認識して受け取ることで、情報表示装置２０が保持する投影画像での指示位置の座標（ｘ_１，ｙ_１）を特定することができる。

表示制御部２８は、入替画像５１を投影画像の画面１５０の予め設定された領域に重畳させて表示する。図４の例では、入替画像５１は、始点座標「（ｘ，ｙ）＝（３５，２）」、終点座標「（ｘ，ｙ）＝（３８，５）」の領域に表示するように制御される。なお、入替画像５１を重畳する領域は任意に設定することができる。また、入替画像５１の画像は任意に設定することができる。

表示制御部２８は、操作指示画面５２を投影画像の画面１５０の予め設定された領域に重畳させて表示する。図４の例では、操作指示画面５２は、始点座標「（ｘ，ｙ）＝（３３，７）」、終点座標「（ｘ，ｙ）＝（３９，２５）」の領域に表示するように制御される。なお、操作指示画面５２を重畳する領域は任意に設定することができる。また、操作指示画面５２の画像は任意に設定することができる。

操作指示画面５２は、例えば、ボタン５３〜５６と、ボタン５７ａ〜５７ｅとが含まれた構成である。ボタン５３は、例えば、投影画像を水平分割して投影画像の表示位置を変更する処理動作を指示選択するボタンである。ボタン５４は、例えば、投影画像を垂直分割して投影画像の表示位置を変更する処理動作を指示選択するボタンである。ボタン５５は、例えば、投影画像の表示位置を変更する処理動作を指示選択するボタンである。ボタン５６は、例えば、ペンデバイス（指示デバイス）１０の指示位置の軌跡で描画を行う描画処理を指示選択するボタンである。ボタン５７ａ〜５７ｄは、例えば、指示画像６０を上下左右方向に移動させる処理動作を指示選択するボタンである。ボタン５７ｅは、例えば、上記の各ボタン（操作対象）の指示選択を決定するための決定ボタンである。

なお、ボタン５７ａ〜５７ｅを区別しない場合は、方向決定ボタン５７と表記する。また、ボタン５３〜５７を区別しない場合には、操作対象ボタンと表記する。なお、ボタン５３〜５７の数や形状および配置する領域、割り付けられる処理動作などは任意に設定することができる。

指示画像（以下、ポインタともいう）６０は、ユーザによってペンデバイス１０でボタン５７ａ〜５７ｄを指示選択する操作によって、投影画像の画面１５０の任意の位置に移動可能である。また、上述したように画面１５０の座標（ｘ，ｙ）は、情報表示装置２０が保持する投影画像での座標（ｘ，ｙ）と同じであるため、情報表示装置２０は、画面１５０でのペンデバイス１０および指示画像６０の指示位置の座標（ｘ，ｙ）を認識して受け取ることで、情報表示装置２０は保持する投影画像での指示位置の座標（ｘ_１，ｙ_１）を特定することができる。

図５は、表示制御部が記憶部に保持する各操作対象ボタンに対応した対象範囲の座標テーブルと処理動作を説明する図である。表示制御部２８は、図５に示すように、各操作対象ボタン５３〜５７ごとに対象範囲の座標値が割り当てられた座標テーブルを記憶部２９に保持している。例えば、ボタン５３は、対象範囲の中心座標が「（ｘ，ｙ）＝（３６，２３）」であり、対象範囲の始点座標は「（ｘ，ｙ）＝（３５，２２）」、対象範囲の終点座標は「（ｘ，ｙ）＝（３７，２４）」という座標が設定されている。同様にして、図５に示すように、ボタン５４〜５７にも対象範囲の中心座標、対象範囲の始点座標、対象範囲の終点座標が設定されている。

表示制御部２８は、予め設定された各操作対象ボタンに対応した対象範囲の座標テーブルを参照して、投影面４０に投影された投影画像に各操作対象ボタンを配置した操作指示画面５２を所定の領域に重畳させて表示させる。

また、表示制御部２８は、投影面４０に投影された投影画像に、投影画像での指示位置を表す指示画像６０をデフォルトで設定された所定の領域に重畳させて表示させる。図４の例では、指示画像６０のデフォルトの位置は、矢印の先端の座標「（ｘ，ｙ）＝（２９，１０）」である。

また、図５に示すように、各操作対象ボタンには、情報表示装置２０に実行させる処理動作が対応付けられている。ボタン５３には、例えば「投影画像を水平分割する」処理が割り当てられている。ボタン５４には、例えば「投影画像を垂直分割する」処理が割り当てられている。ボタン５５には、例えば「投影画像の表示位置を変更する」処理が割り当てられている。ボタン５６には、例えば「ペンデバイスで描画する」処理が割り当てられている。

ボタン５７ａには、例えば「指示画像を上方向に移動させる」処理が割り当てられている。ボタン５７ｂには、例えば「指示画像を左方向に移動させる」処理が割り当てられている。ボタン５７ｃには、例えば「指示画像を右方向に移動させる」処理が割り当てられている。ボタン５７ｄには、例えば「指示画像を下方向に移動させる」処理が割り当てられている。ボタン５７ｅには、例えば「操作対象ボタンの選択を決定する」処理が割り当てられている。

表示制御部２８は、予め設定された各操作対象ボタンに対応した対象範囲の座標テーブルを参照して、操作指示画面５２でのペンデバイス１０の指示位置の座標から、何の操作対象ボタンが選択されたのかを認識する。そして、表示制御部２８は、認識した操作対象ボタンに対応した処理動作の情報を操作判定部２５に出力する。

記憶部２９は、画像処理部２２が投影画像を分割処理した２つ以上の領域を記憶する。記憶部２９は、画像生成部２３が生成した変更投影画像を記憶する。また、記憶部２９は、上述した各操作対象ボタン５３〜５７ごとに対象範囲の座標値が割り当てられた座標テーブルを記憶する。また、記憶部２９は、座標テーブルと併せて、操作対象ボタン５３〜５７に対応付けられた処理動作のテーブルを記憶する。

次に、図６Ａ〜図６Ｄを参照して、情報表示装置２０が投影画像を２つの領域に分割して、２つの領域の表示位置を入れ替えて変更投影画像を生成する一例について説明する。図６Ａ〜図６Ｄは、投影画像の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。

図６Ａに示すように、投影面４０に投影された画面１０１は、画像取得部２１が取得した入力画像（投影画像）である。投影画像を投影してからある所定の時間が経過した後、画像処理部２２は、図６Ｂに示すように所定の位置１４１で投影画像を第１領域１０２と、第２領域１０３とに分割処理する。所定の位置１４１は予め設定されている。図６Ｂにおいては、投影画像を第１領域（上側領域）１０２と第２領域（下側領域）１０３とに水平分割した一例を示している。なお、表示制御部２８が、変更投影画像に対して、分割した第１領域１０２と第２領域１０３の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

次に、画像生成部２３は、図６Ｃに示すように、第１領域１０２と第２領域１０３の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。従って、図６Ｃで示される変更投影画像が新たに投影面４０に投影される投影画像となる。なお、図６Ｃにおいては、表示制御部２８が第１領域１０２と第２領域１０３の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。

次に、図６Ｃの変更投影画像に対して、図６Ｄに示すように、軌跡生成部２７は、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部へ出力する。従って、図６Ｄに示されている、軌跡画像１６０を重畳させた変更投影画像が新たに投影面４０に投影される投影画像となる。

これにより、情報表示装置２０は、投影画像を投影してからある所定の時間が経過した後、分割した投影画像の表示位置を入れ替えて表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

なお、投影画像を投影してからある所定の時間が経過した後、分割した投影画像の表示位置を入れ替えて表示させる一例を示したが、これに限ることはなく、図６Ｃに示すように、初めから分割した投影画像の表示位置を入れ替えて表示させるようにしてもよい。この場合、図６Ｃで示される変更投影画像が投影面４０に投影される投影画面となる。

次に、図７Ａ〜図７Ｄを参照して操作指示画面５２での操作対象ボタンの指示選択により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えて変更投影画像を生成する一例について説明する。図７Ａ〜図７Ｄは、操作指示画面５２により投影画像を２つの領域に水平分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。

図７Ａに示すように、投影面４０に投影された画面１０４は、画像取得部２１が取得した入力画像（投影画像）である。また、表示制御部２８は、投影面４０に投影される投影画像の画面１０４の予め設定された領域に、投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示する。表示制御部２８は、投影面４０に投影される投影画像の画面１０４での指示位置を表す指示画像６０を投影画像の画面１５０に重畳させて表示する。

ユーザは、図７Ｂに示すように、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示選択して指示画像６０を分割したい位置１４２に移動させて決定ボタン５７ｅを指示選択する。これにより、投影画像を分割する位置を設定する。次に、ペンデバイス１０で、例えば、操作指示画面５２のボタン５３を指示選択する。これにより、ユーザは、投影画像を水平分割する処理を決定する。

そして、画像処理部２２は、図７Ｂに示すように、設定された位置１４２で投影画像を第１領域１０５と、第２領域１０６とに分割処理する。図７Ｂにおいては、投影画像を第１領域（上側領域）１０５と第２領域（下側領域）１０６とに水平分割した一例を示している。なお、表示制御部２８が、変更投影画像に対して、第１領域１０５と第２領域１０６の間に対応する位置１４２に境界を表す線画像５０を重畳させて表示している一例を示している。

次に、一度設定した分割位置を再度変更する場合、図７Ｃに示すように、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示選択して指示画像６０を新たに分割したい位置１４３に移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、投影画像を分割する新たな位置１４３を設定する。

次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５３を指示選択する。これにより、ユーザは、投影画像を水平分割する処理を決定する。そして、画像処理部２２は、図７Ｃに示すように、設定された新たな位置１４３で投影画像を第１領域１０５ａと、第２領域１０６とに分割処理する。

なお、表示制御部２８が、変更投影画像に対して、新たな第１領域１０５ａと新たな第２領域１０６の間に対応する位置１４３に境界を表す線画像５０を新たに重畳させて表示している一例を示している。

次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図７Ｄに示すように、第１領域１０５ａと第２領域１０６の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図７Ｄで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図７Ｄにおいては、表示制御部２８が第１領域１０５ａと第２領域１０６の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。また、表示制御部２８が、変更投影画像に対して、新たな第１領域１０５ａと新たな第２領域１０６の間に対応する位置１４３に境界を表す線画像５０を新たに重畳させて表示している一例を示している。

次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５６を指示選択する。これにより、ユーザは、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理を決定する。軌跡生成部２７は、図６Ｄで示したものと同様に、図７Ｄの変更投影画像に対して、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部へ出力する。従って、図６Ｄで示したように、図７Ｄにおいても軌跡画像１６０を重畳させた変更投影画像が新たに投影面４０に投影される投影画像となる。

これにより、情報表示装置２０は、操作指示画面５２での操作対象ボタンの指示選択により、分割した投影画像の表示位置を入れ替えて表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

次に、図８Ａ〜図８Ｃを参照して操作指示画面５２の操作により投影画像を２つの領域に垂直分割して、２つの領域の表示位置を入れ替えて変更投影画像を生成する一例について説明する。図８Ａ〜図８Ｃは、操作指示画面により投影画像を２つの領域に垂直分割して、２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。

図８Ａに示すように、投影面４０に投影された画面１１１は、画像取得部２１が取得した入力画像（投影画像）である。また、表示制御部２８は、投影面４０に投影される投影画像の画面１１１の予め設定された領域に、投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示する。表示制御部２８は、投影面４０に投影される投影画像の画面１１１での指示位置を表す指示画像６０を投影画像の画面１１１に重畳させて表示する。

ユーザは、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示選択して指示画像６０を分割したい位置に移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、投影画像を分割する位置を設定する。次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５４を指示選択する。これにより、ユーザは、投影画像を垂直分割する処理を決定する。そして、画像処理部２２は、図８Ｂに示すように、設定された位置１４４で投影画像を第１領域１１２と、第２領域１１３とに分割処理する。

図８Ｂにおいては、投影画像を第１領域（左側領域）１１２と第２領域（右側領域）１１３とに垂直分割した一例を示している。なお、表示制御部２８が、変更投影画像に対して、第１領域１１２と第２領域１１３の間に対応する位置１４４に境界を表す線画像５０を重畳させて表示している一例を示している。

次に、ユーザは、ペンデバイス１０で例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、投影画像の表示位置（左右）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図８Ｃに示すように、第１領域１１２と第２領域１１３の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図８Ｃで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図８Ｃにおいては、表示制御部２８が第１領域１１２と第２領域１１３の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。また、表示制御部２８が、変更投影画像に対して、第１領域１１２と第２領域１１３の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５６を指示選択する。これにより、ユーザは、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理を決定する。軌跡生成部２７は、図６Ｄで示したものと同様に、図８Ｃの変更投影画像に対して、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部へ出力する。従って、図６Ｄで示したように、図８Ｃにおいても軌跡画像１６０を重畳させた変更投影画像が新たに投影面４０に投影される投影画像となる。

これにより、情報表示装置２０は、操作指示画面５２での操作対象ボタンの指示選択により、分割した投影画像の表示位置を入れ替えて表示させることで、ユーザは左右に移動することなく手元においてペンデバイス１０を用いて投影画像に描画することができる。

次に、図９Ａ〜図９Ｃおよび図１０Ａ〜１０Ｄを参照して最初に表示される第１投影画像と、次に表示される第２投影画像を、予め所定の位置で２つの領域に分割して、任意の領域の表示位置を入れ替えて変更投影画像を生成する場合について説明する。図９Ａ〜図９Ｃおよび図１０Ａ〜図１０Ｄは、第１投影画像と第２投影画像を、２つの領域に分割して、任意の領域の表示位置を入れ替えた変更投影画像について説明する図である。

図９Ａに示す、先に投影面４０に投影される画面、図１０Ａに示す、次に投影面４０に投影される画面は、画像取得部２１が取得した入力画像（投影画像）である。また、図９Ａに示すように、画像処理部２２は、予め所定の位置１４５で第１投影画像を第１領域１２３と、第２領域１２４とに分割処理する。そして、画像処理部２２は、第１領域１２３と、第２領域１２４とを記憶部２９に記憶させる。

また、図１０Ａに示すように、画像処理部２２は、予め所定の位置１４６で第２投影画像を第３領域１２５と、第４領域１２６とに分割処理する。そして、画像処理部２２は、第３領域１２５と、第４領域１２６とを記憶部２９に記憶させる。なお、所定の位置１４５、１４６は予め設定されている。

また、表示制御部２８は、投影面４０に投影される第１投影画像の画面および第２投影画像の画面の予め設定された領域に、投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示する。表示制御部２８は、投影面４０に投影される投影画像での指示位置を表す指示画像６０を投影画像に重畳させて表示する。なお、表示制御部２８が、各変更投影画像に対して、分割した第１領域１２３と第２領域１２４の間、および分割した第３領域１２５と第４領域１２６の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

画像生成部２３は、第１投影画像の第１領域１２３と第２領域１２４の表示位置を入れ替えずに配置した、図９Ａに示す第１変更画像を生成する。画像生成部２３は、記憶部２９に記憶した第１投影画像の第２領域１２４と第２投影画像の第３領域１２５の表示位置を入れ替えずに配置した、図９Ｂに示す第２変更画像を生成する。画像生成部２３は、第２投影画像の第３領域１２５と第４領域１２６の表示位置を入れ替えずに配置した、図９Ｃに示す第３変更画像を生成する。

画像出力部２６は、生成した第１変更投影画像、第２変更投影画像、第３変更投影画像の順に投影画像として投影面４０に投影して表示する。画像生成部２３は、第１変更投影画像、第２変更投影画像および第３変更投影画像が投影面に投影画像として表示されている間に、操作判定部２５で判定した処理動作が、当該投影画像を分割する処理である場合に当該投影画像を構成している２つの領域を記憶部２９から取得して、２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

すなわち、具体的には、例えば、図９Ａに示す、第１変更画像が投影面に投影画像として表示されている間に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１０Ｂに示すように、第１領域１２３と第２領域１２４の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１０Ｂで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１０Ｂにおいては、表示制御部２８が第１領域１２３と第２領域１２４の表示位置を入れ替えたことを表す入替画像５１を重畳して表示している一例を示している。また、表示制御部２８が、変更投影画像に対して、第１領域１２３と第２領域１２４の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

また、具体的には、例えば、図９Ｂに示す、第２変更投影画像が投影面に投影画像として表示されている間に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１０Ｃに示すように、第２領域１２４と第３領域１２５の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１０Ｃで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１０Ｃにおいては、表示制御部２８が第２領域１２４と第３領域１２５の表示位置を入れ替えたことを表す入替画像５１を重畳して表示している一例を示している。また、表示制御部２８が、変更投影画像に対して、第２領域１２４と第３領域１２５の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

また、具体的には、例えば、図９Ｃに示す、第３変更投影画像が投影面に投影画像として表示されている間に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１０Ｄに示すように、第３領域１２５と第４領域１２６の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１０Ｄで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１０Ｄにおいては、表示制御部２８が第３領域１２５と第４領域１２６の表示位置を入れ替えたことを表す入替画像５１を重畳して表示している一例を示している。また、表示制御部２８が、変更投影画像に対して、第３領域１２５と第４領域１２６の間に対応する位置に境界を表す線画像５０を重畳させて表示している一例を示している。

図１０Ｂで示される投影画像、図１０Ｃで示される投影画像、および図１０Ｄで示される投影画像において、上述したように、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５６を指示選択する。これにより、ユーザは、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理を決定する。軌跡生成部２７は、図６Ｄで示したものと同様に、図１０Ｂ、１０Ｃ、１０Ｄで示す変更投影画像に対して、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳した変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。従って、図６Ｄで示したように、図１０Ｂ、１０Ｃ、１０Ｄにおいても軌跡画像１６０を重畳した変更投影画像が新たに投影面４０に投影される投影画像となる。

これにより、情報表示装置２０は、操作指示画面５２での操作対象ボタンの指示選択により、分割した投影画像の表示位置を入れ替えて表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

次に、図１１Ａ〜図１１Ｅを参照して操作指示画面５２の操作により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えて変更投影画像を生成する場合について説明する。図１１Ａ〜図１１Ｅは、操作指示画面により投影画像を３つの領域に水平分割して、任意の２つの領域の表示位置を入れ替えた変更投影画像について説明する図である。

図１１Ａに示すように、投影面４０に投影された画面１３１は、画像取得部２１が取得した入力画像（投影画像）である。また、表示制御部２８は、投影面４０に投影される投影画像の画面１３１の予め設定された領域に、投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示する。表示制御部２８は、投影面４０に投影される投影画像の画面１３１での指示位置を表す指示画像６０を投影画像の画面１３１に重畳させて表示する。

ユーザは、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示選択して、図１１Ｂに示すように、指示画像６０を分割したい第１位置１４７に移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、投影画像を分割する第１位置１４７を設定する。次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５３を指示選択する。これにより、ユーザは、投影画像を水平分割する処理を決定する。そして、画像処理部２２は、図１１Ｂに示すように、設定された第１位置１４７で投影画像を第１領域１３２と、第２領域１３３とに分割処理する。

図１１Ｂにおいては、投影画像を第１領域（上側領域）１３２と第２領域（下側領域）１３３とに水平分割した一例を示している。なお、表示制御部２８が、変更投影画像に対して、第１領域１３２と第２領域１３３の間に対応する第１位置１４７に境界を表す線画像５０Ａを重畳させて表示している一例を示している。

次に、ユーザは、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示選択して、図１１Ｂに示すように、指示画像６０を分割したい第２位置１４８に移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、投影画像を分割する第２位置１４８を設定する。次に、ユーザは、ペンデバイス１０で操作指示画面５２のボタン５３を指示選択する。これにより、ユーザは、投影画像を水平分割する処理を決定する。そして、画像処理部２２は、図１１Ｂに示すように、設定された第２位置１４８で投影画像を第２領域１３３と、第３領域１３４とに分割処理する。

図１１Ｂにおいては、投影画像を第１領域（上側領域）１３２と第２領域（中間領域）１３３と第３領域（下側領域）１３４とに水平分割した一例を示している。なお、表示制御部２８が、変更投影画像に対して、第１領域１３２と第２領域１３３の間、および第２領域１３３と第３領域１３４との間に対応する第１位置１４７、第２位置１４８に境界を表す線画像５０Ａ、５０Ｂを重畳させて表示している一例を示している。

次に、ユーザは、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示操作して、図１１Ｂに示すように、例えば、表示位置を変更したい第１領域１３２のポイント１５１に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、表示位置を変更したい１つ目の領域１３２を設定する。そして、ユーザは、操作指示画面５２の上下左右ボタン５７ａ〜５７ｄをペンデバイス１０で指示操作して、図１１Ｂに示すように、例えば、表示位置を変更したい第３領域１３４のポイント１５３に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。これにより、ユーザは、表示位置を変更したい２つ目の領域１３４を設定する。

次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、第１領域１３２と第３領域１３４の投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１１Ｃに示すように、第１領域１３２と第３領域１３４の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１１Ｃで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１１Ｃにおいては、表示制御部２８が第１領域１３２と第３領域１３４の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。なお、表示制御部２８が、変更投影画像に対して、第３領域１３４と第２領域１３３の間、および第２領域１３３と第１領域１３２との間に対応する位置に境界を表す線画像５０Ａ、５０Ｂを重畳させて表示している一例を示している。

同様にして、図１１Ｂにおいて、ユーザは、例えば、表示位置を変更したい第１領域１３２のポイント１５１に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。次に、ユーザは、表示位置を変更したい第２領域１３３のポイント１５２に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、第１領域１３２と第２領域１３３の投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１１Ｄに示すように、第１領域１３２と第２領域１３３の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１１Ｄで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１１Ｄにおいては、表示制御部２８が第１領域１３２と第２領域１３３の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。なお、表示制御部２８が、変更投影画像に対して、第３領域１３４と第１領域１３２の間、および第１領域１３２と第２領域１３３との間に対応する位置に境界を表す線画像５０Ａ、５０Ｂを重畳させて表示している一例を示している。

また、同様にして、図１１Ｂにおいて、ユーザは、例えば、表示位置を変更したい第２領域１３３のポイント１５２に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。次に、ユーザは、表示位置を変更したい第３領域１３４のポイント１５３に指示画像６０を移動させて決定ボタン５７ｅを指示選択する。次に、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択する。これにより、ユーザは、第２領域１３３と第３領域１３４の投影画像の表示位置（上下）を変更する処理を決定する。画像生成部２３は、デバイス情報に基づいて操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定した場合、図１１Ｅに示すように、第２領域１３３と第３領域１３４の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

従って、図１１Ｅで示される投影画像が新たに投影面４０に投影される投影画像となる。なお、図１１Ｅにおいては、表示制御部２８が第２領域１３３と第３領域１３４の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示している一例を示している。なお、表示制御部２８が、変更投影画像に対して、第１領域１３２と第３領域１３４の間、および第３領域１３４と第２領域１３３との間に対応する位置に境界を表す線画像５０Ａ、５０Ｂを重畳させて表示している一例を示している。

図１１Ｃで示される投影画像、図１１Ｄで示される投影画像、および図１１Ｅで示される投影画像において、上述したように、ユーザは、ペンデバイス１０で、例えば、操作指示画面５２のボタン５６を指示選択する。これにより、ユーザは、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理を決定する。軌跡生成部２７は、図６Ｄで示したものと同様に、図１１Ｃ、１１Ｄ、１１Ｅの変更投影画像に対して、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部へ出力する。従って、図６Ｄで示したように、図１１Ｃ、１１Ｄ、１１Ｅにおいても軌跡画像１６０を重畳した変更投影画像が新たに投影面４０に投影される投影画像となる。

これにより、情報表示装置２０は、操作指示画面５２での操作対象ボタンの指示選択により、分割した投影画像の表示位置を下方側に入れ替えて表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

このように、本実施の形態の情報表示装置２０は、投影画像の予め設定された領域に投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示すると共に投影画像での指示位置を表す指示画像６０を投影画面に重畳させて表示する。情報表示装置２０は、ペンデバイス１０から送信されたデバイス情報に含まれる投影面４０上でのペンデバイス１０の指示位置の座標情報に基づいて、操作指示画面５２で指示選択された処理動作を判定する。情報表示装置２０は、判定された処理動作が、投影画像を２つ以上の領域に分割する処理である場合、投影画像の任意の位置、または投影画像での指示位置を表す指示画像６０の指示位置で投影画像を２つ以上の領域に分割処理する。そして、情報表示装置２０は、判定された処理動作が、投影画像の表示位置を変更する処理である場合、２つ以上の領域の表示位置を任意に入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として投影面４０に投影して表示する。情報表示装置２０は、判定された処理動作が、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理である場合、ペンデバイス１０のデバイス情報に基づき、ペンデバイス１０の指示位置に当該ペンデバイス１０の指示位置の軌跡で描画された軌跡画像１６０を生成し、生成した軌跡画像１６０を変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を投影画像として投影面４０に投影して表示する。これにより、情報表示装置２０は、投影面に投影された投影画像を分割し、分割した投影画像の表示位置を任意に入れ替えて下方側に表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

次に、本実施の形態に係る情報表示装置の制御動作の一例について説明する。図１２は、第１の実施形態に係る情報表示装置の制御動作の一例を示すフローチャート図である。

情報表示装置２０は、画像取得部２１で、例えば、外部機器３０から情報表示装置２０で投影面４０に投影する投影画像を入力画像として取得する（ステップＳ１０）。情報表示装置２０は、画像出力部２６から取得した投影画像を投影面４０に投影して表示させる（ステップＳ１１）。情報表示装置２０は、表示制御部２８で投影面４０に投影される投影画像の画面１５０の予め設定された領域に、投影画像に対する処理動作を指示選択する操作指示画面５２を重畳させて表示する（ステップＳ１２）。情報表示装置２０は、操作判定部２５でペンデバイス１０から送信されたデバイス情報に含まれる投影面４０上でのペンデバイス１０の指示位置の座標情報に基づいて、表示制御部２８が表示した操作指示画面５２で指示選択された処理動作を判定する（ステップＳ１３）。

情報表示装置２０は、操作判定部２５で判定した処理動作が、投影画像を２つ以上の領域に分割する処理であるか否かを判定する（ステップＳ１４）。分割する処理である場合（ステップＳ１４：Ｙｅｓ）、情報表示装置２０は、投影画像を２つ以上の領域に分割する処理を実行する（ステップＳ１５）。分割する処理でない場合（ステップＳ１４：Ｎｏ）、情報表示装置２０は、ステップＳ２０に移行して処理を継続する。

次に、情報表示装置２０は、操作判定部２５で判定した処理動作が、投影画像の表示位置を入れ替えて変更する処理であるか否かを判定する（ステップＳ１６）。表示位置を変更する処理でない場合（ステップＳ１６：Ｎｏ）、情報表示装置２０は、ステップＳ２０に移行して処理を継続する。表示位置を変更する処理である場合（ステップＳ１６：Ｙｅｓ）、情報表示装置２０は、分割した２つ以上の領域の表示位置を任意に入れ替えた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する（ステップＳ１７）。

次に、情報表示装置２０は、表示制御部２８で変更投影画像に対して、予め設定された領域に２つ以上の領域の表示位置を入れ替えたことを表す入替画像５１を重畳させて表示する（ステップＳ１８）。次に、情報表示装置２０は、表示制御部２８で変更投影画像に対して、それぞれの領域の間に対応する位置に境界を表す線画像５０を重畳させて表示させる（ステップＳ１９）。

次に、情報表示装置２０は、操作判定部２５で判定した処理動作が、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理であるか否かを判定する（ステップＳ２０）。描画処理でない場合（ステップＳ２０：Ｎｏ）、情報表示装置２０は、ステップＳ２２に移行して処理を継続する。描画処理である場合（ステップＳ２０：Ｙｅｓ）、情報表示装置２０は、投影面に投影された投影画像でのペンデバイス１０の指示位置にペンデバイス１０の指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を現在表示されている投影画像に重畳した変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する（ステップＳ２１）。

次に、情報表示装置２０は、画像取得部２１で新たな投影画像を取得したか否かを判定する（ステップＳ２２）。新たな投影画像を取得した場合（ステップＳ２２：Ｙｅｓ）、情報表示装置２０は、ステップＳ１１に戻り、処理を継続する。新たな投影画像を取得しない場合（ステップＳ２２：Ｎｏ）、情報表示装置２０は、操作終了か否かを判定する（ステップＳ２３）。操作終了でない場合（ステップＳ２３：Ｎｏ）、情報表示装置２０は、ステップＳ１１に戻り、処理を継続する。操作終了の場合（ステップＳ２３：Ｙｅｓ）、情報表示装置２０は、処理を終了する。

このように、上述した処理動作を、本実施の形態の情報表示装置２０に実行させる。これにより、本実施の形態の情報表示装置２０は、投影画像を所定の位置で２つ以上の領域に分割処理する。そして、分割処理した２つ以上の領域の表示位置を入れ替えた変更投影画像を生成し、生成した変更投影画像を投影画像として投影して表示する。そして、変更投影画像に対して、分割した２つ以上の領域の間に対応する位置に境界を表す線画像５０を重畳して表示させる。また、２つ以上の領域の表示位置を入れ替えたことを表す入替画像５１を重畳して表示する。そして、情報表示装置２０は、投影面に投影された投影画像でのペンデバイス１０の指示位置にペンデバイス１０の指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を現在表示されている投影画像に重畳した変更投影画像をさらに生成し、当該変更投影画像を投影画像として画像取得部２１へ出力して投影画像を投影面４０に投影して表示する。

以上より、本実施の形態の情報表示装置２０によれば、投影面４０に投影された投影画像を分割し、分割した投影画像の表示位置を入れ替えて下方側に表示させることで、投影画像の上方部分に届かない場合でもペンデバイス１０を用いて投影画像の上方部分に描画することができる。

（第２の実施形態）
次に、第２の実施形態について説明する。図１３は、第２の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。なお、図１３では、情報表示装置１２０の他に、ペンデバイス１０や外部機器３０についても図示している。また、上述した第１の実施形態の図２と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。

第２の実施形態では、情報表示装置１２０が軌跡生成部２７を備えず、ペンデバイス１０が軌跡画像データ生成部１３を備える構成が異なるだけである。従って、第２の実施形態では、以下に示す操作指示部１２、軌跡画像データ生成部１３、画像生成部２３、受付部２４以外の機能および構成、処理については第１の実施形態と同様である。

ペンデバイス１０は、図１３に示すように、表示位置検知部１１と、操作指示部１２と、軌跡画像データ生成部１３とを備えている。操作指示部１２は、ペンデバイス１０の表示位置検知部１１が検知した投影面４０上でのペンデバイス１０の指示位置の軌跡で描画された軌跡画像（以下、本実施の形態においては、軌跡画像データという。）１６０を生成する処理動作を軌跡画像データ生成部１３に送信する。

軌跡画像データ生成部１３は、操作指示部１２からの処理動作の指示を受け付けることにより、ペンデバイス１０の表示位置検知部１１が検知した投影面４０上でのペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を生成する。そして、軌跡画像データ生成部１３は、生成した軌跡画像データ１６０を情報表示装置１２０に対して送信する。

なお、ペンデバイス１０における処理動作の選択決定は、例えば、ペンデバイス１０に設けられた処理動作に対応するボタン等を押下することで実行される。また、軌跡画像データ１６０を生成する処理動作は、例えば、第１の実施形態で上述した情報表示装置２０の表示制御部２８が表示する操作指示画面５２を指示選択することにより実行させることもできる。

ここで、図３を参照して、軌跡画像データ生成部１３が軌跡画像データを生成する方法について説明する。表示位置検知部１１では、図３に示すように、投影面４０上の二次元座標を認識して、ペンデバイス１０の指示位置の座標情報を保持している。図３においては、例えば、投影面をｘｙ座標とした場合、ペンデバイス１０の指示位置の座標が（ｘ_１，ｙ_１）である場合を表している。軌跡画像データ生成部１３は、表示位置検知部１１が認識する投影面４０上でのペンデバイス１０の指示位置の座標（ｘ_１，ｙ_１）の軌跡を繋ぎ合わせることで軌跡画像データを生成することができる。なお、投影面４０上でペンデバイス１０が指示する指示位置の座標（ｘ_１，ｙ_１）は、情報表示装置１２０が保持する投影画像での座標（ｘ_１，ｙ_１）と同じである。

情報表示装置１２０は、図１３に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、表示制御部２８と、記憶部２９とを備えている。

画像生成部２３は、ペンデバイス１０が操作指示部１２から処理動作の指示を受け付けて、ペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を生成して情報表示装置１２０に対して送信した場合に、受付部２４で受け付けたペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

また、画像生成部２３は、操作判定部２５で判定した処理動作が、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理である場合に、受付部２４で受け付けたペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を投影画像として画像取得部２１へ出力する。

受付部２４は、ペンデバイス１０から送信されたペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を受け付けて、画像生成部２３に受け渡す。

このように、本実施の形態の情報表示装置１２０は、ペンデバイス１０が軌跡画像データ１６０を生成して、情報表示装置１２０に対して送信した場合に、受付部２４で受け付けたペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を投影画像として投影面４０に投影して表示する。

また、本実施の形態の情報表示装置１２０は、判定された処理動作が、ペンデバイス１０の指示位置の軌跡で描画を行う描画処理である場合、受付部２４で受け付けたペンデバイス１０の指示位置の軌跡で描画された軌跡画像データ１６０を変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を投影画像として投影面４０に投影して表示する。

これにより、情報表示装置１２０は、投影面に投影された投影画像を分割し、分割した投影画像の表示位置を任意に入れ替えて下方側に表示させることでペンデバイス１０を用いて投影画像の上方部分に描画することができる。

（第３の実施形態）
次に、第３の実施形態について説明する。図１４および図１５は、第３の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。なお、図１４および図１５では、情報表示装置２２０、３２０の他に、ペンデバイス１０や外部機器３０についても図示している。また、上述した第１および第２の実施形態の図２および図１３と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。第３の実施形態では、以下に示す加速度検知部１４、加速度判定部４１以外の機能および構成、処理については第１および第２の実施形態と同様である。

ペンデバイス１０は、図１４に示すように、表示位置検知部１１と、操作指示部１２と、加速度検知部１４とを備えている。また、ペンデバイス１０は、図１５に示すように、表示位置検知部１１と、操作指示部１２と、軌跡画像データ生成部１３と、加速度検知部１４とを備えている。

加速度検知部１４は、指示デバイス（以下、ペンデバイスという。）１０の加速度を検知する加速度センサである。加速度検知部１４は、加速度を検知し、検知した加速度を加速度情報として表示位置検知部１１に対して逐次通知する。表示位置検知部１１は、加速度検知部１４から加速度情報を取得し、取得した加速度情報とペンデバイス１０の指示位置を含むデバイス情報を情報表示装置２２０、３２０に対して送信する。

情報表示装置２２０は、図１４に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、軌跡生成部２７と、表示制御部２８と、記憶部２９と、加速度判定部４１とを備えている。また、情報表示装置３２０は、図１５に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、表示制御部２８と、記憶部２９と、加速度判定部４１とを備えている。

受付部２４は、ペンデバイス１０の表示位置検知部１１から送信された投影面４０の投影画像での指示デバイスの指示位置を表す情報と、加速度情報とを含むデバイス情報を受け付ける。

加速度判定部４１は、一定時間以上におけるペンデバイス１０の加速度情報が、予め定められた加速度パターンと一致するか否かを判定する。一定時間以上は、例えば、２秒以上等である。加速度パターンは、２秒以上、加速度「α」が、任意に設定される値「Ｘ」に対して「α＞Ｘ」の関係を維持するパターンである。

具体的には、ペンデバイス１０が、ある加速度「Ｘ」を超えて２秒以上、例えば、振り回された場合に、加速度判定部４１は、２秒以上における加速度情報が加速度パターンと一致したものとして判定する。そして、加速度判定部４１は、判定結果を操作判定部２５に対して通知する。これにより、操作判定部２５は、現在表示されている投影画像の表示位置を変更する処理、すなわち、２つ以上の領域に分割した投影画像の表示位置を任意の位置に変更する処理が指示選択されたと判定し、画像生成部２３に結果を通知する。

なお、予め定められた加速度パターンはこれに限ることはなく任意に設定することができる。また、一定時間は任意に設定することができる。

第１および第２の実施形態では、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択することにより、投影画像の表示位置（上下、左右）を変更する処理を決定した。そして、操作判定部２５がデバイス情報に基づいて処理動作を、投影画像の表示位置を変更する処理と判定した。

それに対して、第３の実施形態では、加速度判定部４１で判定された一定時間以上におけるペンデバイス１０の加速度情報が、予め定められた加速度パターンと一致する場合に、操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定する。そして、操作判定部２５の判定に基づき、画像生成部２３は、２つ以上の領域に分割した投影画像の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

これにより、ペンデバイス１０を一定時間以上、所定の加速度以上で動かすことにより、操作指示画面５２を操作することなく分割した投影画像の表示位置を入れ替えて表示させることができるため、ペンデバイス１０を用いて投影画像の上方部分に描画することができる。

（第４の実施形態）
次に、第４の実施形態について説明する。図１６は、第４の実施形態に係る情報表示システムの構成例を示す図である。第４の実施形態の情報表示システム２００は、図１６に示すように、ペンデバイス１０と、情報表示装置４２０、５２０と、外部機器３０とを備える。なお、上述した第１の実施形態の図１と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。第４の実施形態では、以下に示す撮像部４２以外の構成については第１の実施形態と同様である。

図１６に示すように、情報表示装置４２０、５２０は撮像部４２を備えている。撮像部４２は、例えば、ユーザを撮像するカメラである。撮像部４２は、ユーザの動きを撮像して映像データを取得する。ユーザの動きとして、具体的には、図１６に示すように、特にユーザのジェスチャ６１、６２を撮像する。なお、カメラとしては、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ−Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等を用いることができる。

図１７および図１８は、第４の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。なお、図１７および図１８では、情報表示装置４２０、５２０の他に、ペンデバイス１０や外部機器３０についても図示している。また、上述した第１および第２の実施形態の図２および図１３と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。第４の実施形態では、以下に示す撮像部４２、動作検出部４３以外の機能および構成、処理については第１および第２の実施形態と同様である。

情報表示装置４２０は、図１７に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、軌跡生成部２７と、表示制御部２８と、記憶部２９、撮像部４２と、動作検出部４３とを備えている。また、情報表示装置５２０は、図１８に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、表示制御部２８と、記憶部２９、撮像部４２と、動作検出部４３とを備えている。

撮像部４２は、ユーザの動きを撮像して映像データを動作検出部４３に対して出力する。また、撮像部４２は撮像した映像データを記憶部２９に記憶させる。ユーザの動きとして、例えば、ユーザの手の動きであるジェスチャを撮像する。

動作検出部４３は、撮像部４２によって撮像された映像データを受け付けて、受け付けた映像データからユーザの手の動きによるジェスチャを検出する。具体的には、動作検出部４３は、所定フレームごとのユーザの動作特徴の差分から認識されたジェスチャについて、動作検出部４３が予め記憶しているジェスチャと同じであるか否かを判定する。動作検出部４３は、予め記憶しているジェスチャと同じであると判定した場合、判定結果を操作判定部２５に対して通知する。この結果、操作判定部２５は、現在表示されている投影画像の表示位置を変更する処理、すなわち、２つ以上の領域に分割した投影画像の表示位置を任意の位置に変更する処理であると判定する。

動作検出部４３が予め記憶しているジェスチャは、例えば、図１６に示すようなパーの動作６１とチョキの動作６２であるとする。そこで、動作検出部４３は、例えば、パーの動作６１の後にチョキの動作６２を検出した場合に、予め記憶しているジェスチャと同じであると判定する。その後、動作検出部４３は、判定結果を操作判定部２５に対して通知する。これにより、操作判定部２５は、現在表示されている投影画像の表示位置を変更する処理が指示選択されたと判定し、画像生成部２３に結果を通知する。なお、動作検出部４３が予め記憶しているジェスチャは、これに限ることはなく任意に設定することができる。

第１および第２の実施形態では、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択することにより、投影画像の表示位置（上下、左右）を変更する処理を決定した。そして、操作判定部２５がデバイス情報に基づいて処理動作を、投影画像の表示位置を変更する処理と判定した。

それに対して、第４の実施形態では、動作検出部４３で検出したジェスチャが、予め記憶しているジェスチャと同じであると判定された場合に、投影画像の表示位置を変更する処理と判定し、判定結果を操作判定部２５に対して通知する。そして、操作判定部２５の判定に基づき、画像生成部２３は、２つ以上の領域に分割した投影画像の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

これにより、ユーザが特定のジェスチャをすることにより、操作指示画面５２を指示選択することなく分割した投影画像の表示位置を入れ替えて表示させることができるため、ペンデバイス１０を用いて投影画像の上方部分に描画することができる。

（第５の実施形態）
次に、第５の実施形態について説明する。図１９は、第５の実施形態に係る情報表示システムの構成例を示す図である。第５の実施形態の情報表示システム３００は、図１９に示すように、ペンデバイス１０と、情報表示装置６２０、７２０と、外部機器３０とを備える。なお、上述した第１の実施形態の図１と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。第５の実施形態では、以下に示す音声取得部４４以外の構成については第１の実施形態と同様である。

図１９に示すように、情報表示装置６２０、７２０は音声取得部４４を備えている。音声取得部４４は、例えば、ユーザの音声データを取得するマイクである。音声取得部４４は、ユーザが発する音声データを取得する。

図２０および図２１は、第５の実施形態に係る情報表示装置の機能的構成の一例を示す機能ブロック図である。なお、図２０および図２１では、情報表示装置６２０、７２０の他に、ペンデバイス１０や外部機器３０についても図示している。また、上述した第１および第２の実施形態の図２および図１３と同様の構成については同一の符号を付し、同様の構成については詳細な説明を適宜省略する。第５の実施形態では、以下に示す音声取得部４４、音声検出部４５以外の機能および構成、処理については第１および第２の実施形態と同様である。

情報表示装置６２０は、図２０に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、軌跡生成部２７と、表示制御部２８と、記憶部２９と、音声取得部４４と、音声検出部４５とを備えている。また、情報表示装置７２０は、図２１に示すように、画像取得部２１と、画像処理部２２と、画像生成部２３と、受付部２４と、操作判定部２５と、画像出力部２６と、表示制御部２８と、記憶部２９と、音声取得部４４と、音声検出部４５とを備えている。

音声取得部４４は、ユーザが発する音声データを取得して音声データを音声検出部４５に対して出力する。また、音声取得部４４は、取得した音声データを記憶部２９に記憶させる。なお、音声取得部４４が取得する音声データは、ユーザの音声データに限ることはなく、笛の音や機器の打撃音などの音声データであってもよい。

音声検出部４５は、音声取得部４４によって取得された音声データを受け付けて、受け付けた音声データからユーザの所定音声を検出する。具体的には、音声検出部４５は、音声認識により、受け付けた音声データが音声検出部４５が予め記憶している音声データと同じであるか否かを判定する。音声検出部４５は、受け付けた音声データが予め記憶している音声データと同じであると判定した場合、判定結果を操作判定部２５に対して通知する。これにより、操作判定部２５は、現在表示されている投影画像の表示位置を変更する処理、すなわち、２つ以上の領域に分割した投影画像の表示位置を任意の位置に変更する処理であると判定する。

音声検出部４５が予め記憶している音声データは、例えば、図１９に示すような「切り替え」という音声データであるとする。そこで、音声検出部４５は、例えば、「切り替え」という音声データを検出した場合に、予め記憶している音声データと同じであると判定する。その後、音声検出部４５は、判定結果を操作判定部２５に対して通知する。これにより、操作判定部２５は、現在表示されている投影画像の表示位置を変更する処理が指示選択されたと判定し、画像生成部２３に結果を通知する。なお、音声検出部４５が予め記憶している音声データは、これに限ることはなく任意に設定することができる。また、音声認識には任意の音声認識技術を適用することができる。

第１および第２の実施形態では、ペンデバイス１０で、例えば、操作指示画面５２のボタン５５を指示選択することにより、投影画像の表示位置（上下、左右）を変更する処理を決定した。そして、操作判定部２５がデバイス情報に基づいて処理動作を、投影画像の表示位置を変更する処理と判定した。

それに対して、第５の実施形態では、音声検出部４５で検出した音声データが、予め記憶している音声データと同じであると判定された場合に、操作判定部２５が処理動作を、投影画像の表示位置を変更する処理と判定し、判定結果を操作判定部２５に対して通知する。そして、操作判定部２５の判定に基づき、画像生成部２３は、２つ以上の領域に分割した投影画像の表示位置を入れ替えた変更投影画像を生成する。そして、画像生成部２３は、生成した変更投影画像を投影画像として画像取得部２１へ出力する。

これにより、ユーザが特定の音声を発することにより、操作指示画面５２を指示選択することなく分割した投影画像の表示位置を入れ替えて表示させることができるため、ペンデバイス１０を用いて投影画像の上方部分に描画することができる。

以上、本発明の実施の形態を説明したが、上述の各実施の形態は、例として提示したものであり、発明の範囲を限定することは意図していない。本発明は、上述の各実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上述の各実施の形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除してもよい。また、以上の各実施の形態および変形例は任意に組み合わせることも可能である。

なお、上述の各実施の形態の情報表示装置２０、１２０、２２０、３２０、４２０、５２０、６２０、７２０で実行される制御プログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

さらに、上述の各実施の形態の情報表示装置２０、１２０、２２０、３２０、４２０、５２０、６２０、７２０で実行される制御プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、上述の各実施の形態の情報表示装置２０、１２０、２２０、３２０、４２０、５２０、６２０、７２０で実行される制御プログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。

１０ ペンデバイス（指示デバイス）
１１ 表示位置検知部
１２ 操作指示部
１３ 軌跡画像データ生成部
１４ 加速度検知部
２０、１２０、２２０、３２０、４２０、５２０、６２０、７２０ 情報表示装置
２１ 画像取得部
２２ 画像処理部
２３ 画像生成部
２４ 受付部
２５ 操作判定部
２６ 画像出力部
２７ 軌跡生成部
２８ 表示制御部
２９ 記憶部
３０ 外部機器（ＰＣ）
４０ 投影面
４１ 加速度判定部
４２ 撮像部
４３ 動作検出部
４４ 音声取得部
４５ 音声検出部
５０ 線画像
５１ 入替画像
５２ 操作指示画面
５３、５４、５５、５６ ボタン
５７ 方向決定ボタン
５７ａ、５７ｂ、５７ｃ、５７ｄ ボタン
５７ｅ 決定ボタン
６０ 指示画像
６１ パーの動作
６２ チョキの動作
１００、２００、３００ 情報表示システム
１０１ 画面
１０２、１０５、１０５ａ、１１２、１２３、１３２ 第１領域（上側又は左側領域）
１０３、１０６、１１３、１２４ 第２領域（下側又は右側領域）
１０４、１３１、１５０ 画面
１２５、１３４ 第３領域（下側領域）
１２６ 第４領域
１３３ 第２領域（下側又は中間領域）
１４１、１４２、１４３、１４４、１４５、１４６ 位置
１４７ 第１位置
１４８ 第２位置
１５１、１５２、１５３ ポイント
１６０ 軌跡画像

特開２０１２−２５３５４３号公報

Claims (17)

1. 投影面に投影する投影画像を取得する画像取得部と、
   前記投影画像を前記投影面に投影して表示する画像出力部と、
   前記投影面に投影された前記投影画像を所定の位置で第１領域と第２領域とに分割処理する画像処理部と、
   前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する画像生成部と、
   を備えることを特徴とする情報表示装置。
2. 前記投影画像の画面の予め設定された領域に投影画像に対する処理動作を指示選択する操作指示画面を重畳させて表示すると共に、前記投影画像での指示位置を表す指示画像を前記投影画像の画面に重畳させて表示する表示制御部と、
   前記投影画像での指示デバイスの指示位置を表す情報を含むデバイス情報を受け付ける受付部と、
   前記デバイス情報に基づいて前記表示制御部が表示した前記操作指示画面で指示選択された処理動作を判定する操作判定部と、
   を備え、
   前記画像処理部は、前記操作判定部で判定した処理動作が、前記投影画像を分割する処理である場合に、前記操作指示画面で操作された前記指示画像の指示位置で当該投影画像を前記第１領域と前記第２領域とに分割処理し、
   前記画像生成部は、前記操作判定部で判定した処理動作が、前記投影画像の表示位置を変更する処理である場合に、前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項１に記載の情報表示装置。
3. 前記画像処理部が分割処理した２つ以上の領域を記憶する記憶部を備え、
   前記画像処理部は、先に表示される第１投影画像を予め設定された位置で第１領域と第２領域とに分割処理し、次に表示される第２投影画像を予め設定された位置で第３領域と第４領域とに分割処理し、
   前記記憶部は、前記第１領域と前記第２領域と前記第３領域と前記第４領域とを記憶し、
   前記画像生成部は、前記第１領域と前記第２領域とを配置した第１変更投影画像を生成し、前記第２領域と前記第３領域とを配置した第２変更投影画像を生成し、前記第３領域と前記第４領域とを配置した第３変更投影画像を生成し、
   生成した前記第１変更投影画像、前記第２変更投影画像、前記第３変更投影画像の順に前記投影画像として前記画像取得部へ出力することを特徴とする請求項２に記載の情報表示装置。
4. 前記画像生成部は、前記第１変更投影画像、前記第２変更投影画像および前記第３変更投影画像が投影面に投影画像として表示されている間に、前記操作判定部で判定した処理動作が、当該投影画像を分割する処理である場合に、当該投影画像を構成している２つの領域を前記記憶部から取得して、２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項３に記載の情報表示装置。
5. 前記画像処理部は、前記表示制御部が表示した前記操作指示画面で操作された前記指示画像の指示位置で、前記投影画像を３つ以上の領域に分割処理し、
   前記画像生成部は、前記操作指示画面で操作された前記指示画像の指示位置で選択決定された前記３つ以上の領域のうちの任意の２つの領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項２に記載の情報表示装置。
6. 前記投影面に投影された前記変更投影画像での位置を指示する指示デバイスの指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を前記変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する軌跡生成部を備えることを特徴とする請求項１から５の何れか一項に記載の情報表示装置。
7. 前記軌跡生成部は、前記操作判定部で判定した処理動作が、前記指示デバイスの指示位置の軌跡で描画を行う描画処理である場合に、前記指示デバイスの指示位置の軌跡で描画された軌跡画像を生成し、生成した軌跡画像を前記変更投影画像に重畳させた変更投影画像をさらに生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項６に記載の情報表示装置。
8. 前記受付部は、前記投影面に投影された前記変更投影画像での位置を指示する指示デバイスの指示位置の軌跡で描画された軌跡画像データを受け付け、
   前記画像生成部は、前記受付部で受け付けた前記軌跡画像データを前記変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項１から５の何れか一項に記載の情報表示装置。
9. 前記画像生成部は、前記操作判定部で判定した処理動作が、前記指示デバイスの指示位置の軌跡で描画を行う描画処理である場合に、前記受付部で受け付けた前記軌跡画像データを前記変更投影画像に重畳させた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力することを特徴とする請求項８に記載の情報表示装置。
10. 一定時間内における前記指示デバイスの加速度情報が、予め設定された加速度パターンと一致するか否かを判定する加速度判定部をさらに有し、
    前記画像生成部は、前記加速度判定部によって一定時間内における前記加速度情報が前記加速度パターンと一致すると判定された場合に、前記変更投影画像を生成することを特徴とする請求項１または２に記載の情報表示装置。
11. ユーザの動作を撮像する撮像部と、
    前記撮像部により撮像された映像データから、予め記憶している所定動作を検出する動作検出部と、
    を備え、
    前記画像生成部は、前記動作検出部によって予め記憶している前記所定動作を検出した場合に、前記変更投影画像を生成することを特徴とする請求項１または２に記載の情報表示装置。
12. ユーザの音声を取得する音声取得部と、
    前記音声取得部で取得された音声データから、予め記憶している所定音声データを検出する音声検出部と、
    を備え、
    前記画像生成部は、前記音声検出部によって予め記憶している前記所定音声データを検出した場合に、前記変更投影画像を生成することを特徴とする請求項１または２に記載の情報表示装置。
13. 前記表示制御部は、２つ以上の領域の表示位置を入れ替えた前記変更投影画像が投影画像として投影面に投影された場合に、２つ以上の領域の間に対応する位置に境界を表す線画像を重畳させて表示することを特徴とする請求項１から１２の何れか一項に記載の情報表示装置。
14. 前記表示制御部は、前記操作指示画面での指示選択によって投影画像の分割位置が変更された場合に、前記境界を表す線画像を新たな位置に重畳させて表示することを特徴とする請求項１３に記載の情報表示装置。
15. 前記表示制御部は、前記画像生成部が前記変更投影画像を生成して、前記変更投影画像が投影面に投影された場合、予め設定された領域に２つ以上の領域の表示位置を入れ替えたことを表す入替画像を重畳させて表示することを特徴とする請求項１から１２の何れか一項に記載の情報表示装置。
16. 投影面に投影する投影画像を取得する画像取得ステップと、
    前記投影画像を前記投影面に投影して表示する画像出力ステップと、
    前記投影面に投影された前記投影画像を所定の位置で第１領域と第２領域とに分割処理する画像処理ステップと、
    前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する画像生成ステップと、
    を備えることを特徴とする情報表示方法。
17. 情報表示装置に、
    投影面に投影する投影画像を取得する画像取得ステップと、
    前記投影画像を前記投影面に投影して表示する画像出力ステップと、
    前記投影面に投影された前記投影画像を所定の位置で第１領域と第２領域とに分割処理する画像処理ステップと、
    前記第１領域と前記第２領域の表示位置を入れ替えた変更投影画像を生成し、当該変更投影画像を前記投影画像として前記画像取得部へ出力する画像生成ステップと、
    を実行させるためのプログラム。

Images