JP5342806B2

JP5342806B2 - 表示方法および表示装置

Info

Publication number: JP5342806B2
Application number: JP2008132436A
Authority: JP
Inventors: 謙二秋友
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2008-05-20
Filing date: 2008-05-20
Publication date: 2013-11-13
Anticipated expiration: 2028-05-20
Also published as: JP2009282637A

Description

本発明は、画像情報などの情報を表示する表示方法および表示装置に関する。
に関する。

従来の技術によるディスプレイ装置（以下「ディスプレイ」ともいう）などの表示装置は、表示画面に複数のウインドウを同時に表示するマルチウインドウ機能を有するものがある。さらに、表示する画像情報の情報量が多いために全体の画像情報を表示画面に表示することができない場合、全体画像を縮小した縮小画像のウインドウを表示画面に表示し、そのウインドウ内に、表示画面に表示されている画像の位置を示す画像を示すことによって、全体画像の中での表示位置を示す機能を有するものがある。

たとえば、特許文献１に記載されるマルチウインドウ表示方式は、ウインドウの解像度が表示画面情報全体を表示する解像度がないとき、表示画面情報の一部をウインドウに表示する。さらに、表示画面情報全体を縮小して別ウインドウに表示するとき、２つのウインドウの重畳部分を半透明表示する。半透明にすることによって、縮小表示ウインドウを見ながら、画面全体のプロポーションを考えた文字、図形などの入力を、表示画面情報の一部を表示する前記ウインドウで行うことができる。

図１０は、従来の技術による地図表示の表示画面９０を示す図である。表示画面９０は、地図情報の一部を表示する画面であり、表示画面９０内に、地図情報全体を縮小した縮小画面を表示するウインドウ９１が表示されている。縮小画像９２は、ウインドウ９１に表示される縮小された地図情報全体の中で、表示画面９０に表示されている地図情報の位置を示している。ユーザは、ウインドウ９１内での操作によって、表示画面９０に表示する地図情報の範囲を変更することができる。

図１１は、従来の技術による仮想デスクトップの表示画面９３を示す図である。表示画面９３は、実物のデスクトップの画面であり、仮想デスクトップの表示画面の一部を表示する。表示画面９３には、仮想デスクトップの表示画面全体を縮小したウインドウ９４が表示されている。縮小画像９５は、表示画面９３に表示されている画面を縮小した画像であり、ウインドウ９４に表示される縮小された仮想デスクトップの中での位置を示している。ユーザは、ウインドウ９４に表示される仮想デスクトップに複数の画面が表示されている場合、いずれかの画面に表示されているアプリケーションのウインドウを、他の画面に移動することができる。

特開平７−２１０７００号公報

図１２は、従来の技術によるタッチパネル機能を有するディスプレイ装置９６を示す図である。薄型ディスプレイの大画面化によって、大型ディスプレイにタッチパネル機能を搭載したホワイトボードなどの大型の表示装置が利用可能になっている。ディスプレイ装置９６は、プレゼンテーションあるいは会議などに用いられるタッチパネル機能を有する大型の表示装置である。操作者は、ディスプレイ装置９６の画面にタッチすることによって、画面を操作したり、描画したりすることができる。しかしながら、画面が大きいと、操作者は、画面の上部に手が届かず、操作あるいは描画をすることができないという問題がある。別の小さいディスプレイに同じ画面を表示しておいて、その画面で操作あるいは描画することも可能であるが、操作者は、自分だけ別の画面を見ることになり、話しづらくなる。

上述したいずれの従来の技術も、ディスプレイ装置が大型になった場合、図１２に示したディスプレイ装置９６と同様に、手が届かないところは操作者が操作することができないという問題がある。

本発明の目的は、大型の表示画面でも操作者が表示画面上で容易に操作することができる表示方法および表示装置を提供することである。

本発明は、表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する表示ステップと、
前記表示画面での操作指示を行う操作指示ステップと、
前記操作指示ステップで操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する変換ステップと、
前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換ステップで変換された位置に対する操作指示に対応する処理を行ない、前記操作指示ステップで操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示ステップで行われた操作指示に対応する処理を行う操作実行ステップと、
操作者の位置を検出する検出ステップとを含み、
前記表示ステップでは、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出ステップで検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出ステップで検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出ステップで検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持し、
前記表示ステップでは、前記縮小画面を表示する領域を、前記表示画面の全領域のうち、前記操作者の手が届く範囲である縮小画面表示領域内に制限することを特徴とする表示方法である。

また本発明は、表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する表示手段と、
前記表示画面での操作指示を行う操作指示手段と、
前記操作指示手段によって操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する変換手段と、
前記操作指示手段によって操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換手段によって変換された位置に対する操作指示に対応する処理を行ない、前記操作指示手段によって操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示に対応する処理を行う操作実行手段と、
操作者の位置を検出する検出手段とを含み、
前記表示手段は、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出手段によって検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出手段によって検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出手段によって検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持し、
前記表示手段は、前記縮小画面を表示する領域を、前記表示画面の全領域のうち、前記操作者の手が届く範囲である縮小画面表示領域内に制限することを特徴とする表示装置である。

本発明によれば、表示ステップでは、表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する。操作指示ステップでは、前記表示画面での操作指示を行う。変換ステップでは、前記操作指示ステップで操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する。そして、操作実行ステップでは、前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換ステップで変換された位置に対する操作指示に対応する処理を行ない、前記操作指示ステップで操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示に対応する処理を行う。前記表示ステップでは、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出ステップで検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出ステップで検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出ステップで検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持する。したがって、本発明に係る表示方法を適
用すれば、大型の表示画面でも操作者が表示画面上で容易に操作することができる。
また、縮小画面を表示する領域を縮小画面表示領域内に制限することによって、タッチパネル機能を設ける領域を小さくすることができるので、コスト削減、精度向上あるいは認識速度の向上を図ることができる。

また本発明によれば、表示手段によって、表示情報を表示する表示画面を縮小した縮小画面が前記表示画面と合成されて表示され、操作指示手段によって、前記表示画面での操作指示が行われ、変換手段によって、前記操作指示手段によって操作指示が行われた位置が、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換され、操作実行手段によって、前記操作指示手段によって操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換手段によって変換された位置に対する操作指示に対応する処理が行われ、前記操作指示手段によって操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示に対応する処理が行われる。前記表示手段は、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出手段によって検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出手段によって検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出手段によって検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持する。したがって、大型の表示画面でも操作者が表示画面上で容易に操作することができる。
また、縮小画面を表示する領域を縮小画面表示領域内に制限することによって、タッチパネル機能を設ける領域を小さくすることができるので、コスト削減、精度向上あるいは認識速度の向上を図ることができる。

図１は、本発明の実施の一形態である表示装置１の構成を示すブロック図である。表示装置１は、情報処理装置１０、ディスプレイ装置２１、入力装置２２および人物認識装置２３を含んで構成される。本発明に係る表示方法は、表示装置１によって実施される。情報処理装置１０は、デバイス認識部１１、座標変換部１２、入力処理部１３、実画面作成部１４、縮小画面作成部１５、映像出力部１６、縮小画面位置記憶部１７および画像記憶部１８などの機能を含んで構成される。

情報処理装置１０は、たとえば図示しない中央処理装置（以下「ＣＰＵ」という）と、半導体メモリあるいはハードディスク装置などの図示しない記憶装置とを含むパーソナルコンピュータによって構成される。記憶装置は、ＣＰＵによって実行される制御プログラムおよび情報処理装置１０を制御するために用いる制御情報、たとえば縮小画面位置記憶部１７および画像記憶部１８に記憶される情報を記憶する。ＣＰＵは、記憶装置に記憶される制御プログラムを実行することによって、デバイス認識部１１、座標変換部１２、入力処理部１３、実画面作成部１４、縮小画面作成部１５、映像出力部１６、縮小画面位置記憶部１７および画像記憶部１８などの機能を実現する。

デバイス認識部１１は、入力装置２２から入力を受けた際に、入力を受けた入力装置２２を認識する。デバイス認識部１１は、たとえば入力装置２２のデバイスタイプおよび同じタイプの各入力装置２２を識別するためのＩＤ（Identification）などによって入力装置２２を認識し、認識したデバイスタイプおよびＩＤなどを表すデバイス情報を入力処理部１３に送る。

変換手段である座標変換部１２は、入力装置２２から、ディスプレイ装置２１の画面に対して操作指示が行われた操作位置を示す操作位置情報を受信する。操作指示は、たとえば表示されているウインドウの位置を動かす処理、ウインドウを閉じる処理、描画する処理などを行うための指示である。さらに、座標変換部１２は、入力装置２２から受信した操作位置情報が示す操作位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する。具体的には、操作位置の座標を、縮小画面の座標（以下「縮小画面座標」ともいう）系から表示画面の座標（以下「実画面座標」ともいう）系に変換する。座標変換部１２は、変換後の操作位置を表す変換位置情報を入力処理部１３に送る。図１に示した実施の形態では、座標変換部１２を情報処理装置１０内に設けているが、情報処理装置１０の外部に設け、外部に設けられた座標変換部１２から、変換後の操作位置を示す変換位置情報を受信してもよい。

操作実行手段である入力処理部１３は、入力装置２２から操作位置情報を受信し、デバイス認識部１１からデバイス情報、および座標変換部１２から変換位置情報を受け取る。そして、受信した操作位置情報、ならびに受け取ったデバイス情報および変換操作位置情報に基づいて、実画面作成部１４および映像出力部１６を制御する。

実画面作成部１４は、ディスプレイ装置２１に表示する表示画面を表す実画面情報を作成し、作成した実画面情報を画像記憶部１８に記憶する。さらに、映像出力部１６からの指示によって、画像記憶部１８に記憶される実画面情報を読み出して映像出力部１６に送る。縮小画面作成部１５は、映像出力部１６からの指示によって、画像記憶部１８に記憶される実画面情報を読み出し、読み出した実画面情報による表示画面を縮小した縮小画面を表す縮小情報を作成し、作成した縮小情報を映像出力部１６に送る。

映像出力部１６は、実画面作成部１４から受け取る実画面情報、または実画面作成部１４から受け取る実画面情報による表示画面と縮小画面作成部１５から受け取る縮小情報による縮小画面とを合成した画面を表す合成情報を、映像信号に変換してディスプレイ装置２１に送信する。

縮小画面位置記憶部１７は、縮小画面を表示しているか否かを示す表示中情報、縮小画面を表示している位置を示す表示位置情報、縮小画面の大きさを示す大きさ情報などの表示制御情報を記憶する。大きさ情報は、たとえば入力装置２２によって縮小画面位置記憶部１７に設定することができる。表示制御情報は、入力処理部１３によって書き込みおよび読み出しが行われる。画像記憶部１８は、実画面作成部１４によって作成された実画面情報を記憶し、記憶する実画面情報は、実画面作成部１４および縮小画面作成部１５によって読み出される。

ディスプレイ装置２１は、大型、たとえば１００インチ超のディスプレイ装置であり、映像出力部１６から映像信号を受信し、受信した映像信号に基づく画面を表示する。実画面作成部１４、縮小画面作成部１５、映像出力部１６およびディスプレイ装置２１は、表示手段である。

操作指示手段である入力装置２２は、タッチパネル、マウスまたはタブレットなどによって構成され、ディスプレイ装置２１の画面内の位置のうち、ユーザが操作指示を行った操作位置を示す操作位置情報を座標変換部１２および入力処理部１３に送信する。さらに、入力装置２２のデバイスタイプおよびＩＤなどのデバイス情報をデバイス認識部１１に送信する。

ＩＤは、各入力装置２２を識別するための識別情報であり、たとえばＵＳＢ（
Universal Serial Bus）接続機器などのように入力装置２２自身に記憶されている。

ＩＤは、必ずしも入力装置２２自身に記憶されている必要はなく、タッチパネル用の各タッチペンのＩＤなどのように、入力装置２２の外部の装置に記憶され、入力装置２２に赤外線（以下「ＩＲ」という）などの通信手段によって伝送されてもよい。

人物認識装置２３は、赤外線センサ、カメラ、またはＩＲ発信機およびＩＲ受信機などによって構成され、ディスプレイ装置２１の近くにいる操作者の位置を認識し、認識した位置を表す人物位置情報を入力処理部１３に送信する。人物認識装置２３として赤外線センサを用いる場合は、たとえば赤外線の発光部および受光部を、ディスプレイ装置２１の下部の数か所に設け、入力処理部１３は、操作者による赤外線の反射を検出した受光部からの信号によって、操作者の位置を特定する。人物認識装置２３としてカメラを用いる場合は、たとえばカメラによって表示画面を撮影し、入力処理部１３は、カメラによって撮影された画像の中から、画像認識によって操作者を認識し、操作者の位置を特定する。人物認識装置２３としてＩＲ発信機およびＩＲ受信機を用いる場合は、たとえば操作者が持つ指示棒あるいはキーホルダにＩＲ発信機を内蔵させ、ディスプレイ装置２１の縁部分の数か所にＩＲ受信機を設ける。入力処理部１３は、ＩＲ発信機からの信号を受信したＩＲ受信機からの信号によって操作者の位置を特定する。

図２は、操作者２の近くに縮小画面３１を表示した表示画面３０の一例を示す図である。表示画面３０は、操作者２がディスプレイ装置２１に近づいたときに、縮小画面３１を操作者２の近くに表示した例である。縮小画面３１は、操作者２の近くに表示されるので、操作者２は、縮小画面３１に対して操作指示を行うことによって、表示画面３０に対する操作指示を行うことができる。

図３は、操作者２の手が届く範囲に縮小画面４２を表示した表示画面４０の一例を示す図である。表示画面４０は、操作者２の手が届く範囲である縮小画面表示領域４１内に、縮小画面４２を表示した例である。表示画面４０の全領域うち縮小画面表示領域４１を除く残余の領域は、人の手が届かない範囲であるので、タッチパネル機能がなくてもよい。人物認識装置２３として抵抗膜方式のタッチパネルを用いる場合、表面積が大きくなるほど精度が下がり、広範囲をカバーするとコストが大きくなる。人物認識装置２３として赤外線あるいは画像認識を用いる場合、広範囲をカバーすると認識速度および精度面に影響がある。したがって、縮小画面を表示する領域を縮小画面表示領域４１内に制限することによって、タッチパネル機能を設ける領域を小さくすることができるので、コスト削減、精度向上あるいは認識速度の向上を図ることができる。

図４は、２種類のタッチペンを用いて操作される表示画面５０の一例を示す図である。表示画面５０は、縮小画面５１を操作者２の近くに表示した例である。操作者２は、縮小画面で操作指示を行うための縮小画面用タッチペン３ａを用い、操作者２ｂは、縮小画面を除く表示画面で操作指示を行うための通常のタッチペン３ｂを用いる。

図４に示した例では、操作者２ｂは、通常のタッチペン３ｂによって描画を行い、操作者２は、縮小画面用タッチペン３ａによって縮小画面の領域内に描画を行っている。操作者２は、縮小画面用タッチペン３ａによって縮小画面の領域内に描画することによって、操作者２ｂが通常のタッチペン３ｂに描画した線と同じ線を縮小画面の領域外に描画することができる。

通常のタッチペン３ｂおよび縮小画面用タッチペン３ａは、それぞれＩＤが割り当てられており、各タッチペンは、それぞれのＩＤを情報処理装置１０に送信する。具体的には、たとえばタッチペンの先端部に、ＩＤを送信するための操作ボタンを設け、タッチペンは、その操作ボタンが操作されたときに、ＩＤをＩＲ信号によってデバイス認識部１１に送信する。

図４に示した例では、ＩＤの異なる２つのタッチペンを用いて、表示画面に対する操作指示と、縮小画面に対する操作指示とを区別しているが、これに限定されるものではなく、入力装置のデバイスタイプの違いによって区別してもよい。たとえば表示画面に対する操作指示をマウスの操作によって行い、縮小画面に対する操作指示をタッチパネルの操作指示によって行ってもよい。通常のタッチペン３ｂおよびマウスは、第１の指示装置である。縮小画面用タッチペン３ａおよびタッチパネルは、第２の指示装置である
図５は、情報処理装置１０が実行する第１の表示処理を示すフローチャートである。第１の表示処理は、図２に示した表示画面３０のように、縮小画面３１を操作者の近くに表示し、表示した縮小画面３１での操作指示を可能にする処理である。表示装置１の電源が投入され、動作可能になると、ステップＡ１に移る。

ステップＡ１では、人物認識装置２３、たとえばカメラで撮影あるいは赤外線を用いたセンサで人物を検出する。ステップＡ２では、人物認識装置２３は、ディスプレイ装置２１に近づいた人物を認識する。ステップＡ３では、入力処理部１３は、人物を認識することができたか否かを判定する。人物認識装置２３から人物位置情報を受信すると、人物を認識することができたと判定し、ステップＡ４に進み、人物認識装置２３から人物位置情報を受信していないと、第１の表示処理を終了し、他の処理、たとえば図６に示すタッチ処理を行った後、ステップＡ１に戻る。

ステップＡ４では、入力処理部１３は、人物の場所を特定する。たとえば人物認識装置２３としてカメラを用いる場合は、カメラで撮影された画像の中から人物の位置を特定し、人物認識装置２３として赤外線を用いる場合は、赤外線を受光した受光部の位置から人物の位置を特定する。

ステップＡ５では、入力処理部１３は、縮小画面を表示中であるか否かを判定する。縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していると、縮小画面を表示中であると判定し、ステップＡ６に進み、縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していないと、縮小画面を表示中でないと判定し、ステップＡ１０に進む。ステップＡ６では、入力処理部１３は、縮小画面位置を呼び出す。具体的には、縮小画面位置記憶部１７に記憶される表示位置情報を読み出す。

ステップＡ７では、入力処理部１３は、縮小画面が人物と一定距離内に表示されているか否かを判定する。縮小画面位置記憶部１７から読み出した表示位置情報が示す位置が、ステップＡ４で特定した位置から一定距離、たとえば人の手が届く距離以内にあれば、縮小画面が人物と一定距離内に表示されていると判定し、第１の表示処理を終了し、他の処理を行った後、ステップＡ１に戻る。縮小画面位置記憶部１７から読み出した表示位置情報が示す位置が、ステップＡ４で特定した位置から一定距離以内になければ、縮小画面が人物と一定距離内に表示されていないと判定し、ステップＡ８に進む。

ステップＡ８では、入力処理部１３は、人物の付近に縮小画面を移動する。具体的には、入力処理部１３は、縮小画面を表示している位置を、ステップＡ４で特定した位置に最も近い位置に移動するように映像出力部１６に指示する。映像出力部１６は、縮小画面作成部１５から受け取る縮小情報による縮小画面を、実画面作成部１４から受け取る実画面情報による表示画面のうち、入力処理部１３から指示された位置で合成し、合成した画面を表す合成情報を映像信号に変換してディスプレイ装置２１に送信する。ディスプレイ装置２１は、映像出力部１６から受信した映像信号に基づく画面を表示する。ステップＡ９では、入力処理部１３は、縮小画面を移動した位置を新たな表示位置情報として縮小画面位置記憶部１７に記憶した後、第１の表示処理を終了し、他の処理を行った後、ステップＡ１に戻る。

ステップＡ１０では、入力処理部１３は、縮小画面を生成する。具体的には、入力処理部１３は、映像出力部１６に、縮小画面を表示画面に合成してディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、縮小画面作成部１５に縮小情報を作成するよう指示する。縮小画面作成部１５は、映像出力部１６からの指示によって、画像記憶部１８に記憶される実画面情報を読み出し、読み出した実画面情報に基づいて縮小情報を作成し、作成した縮小情報を映像出力部１６に送る。縮小画面の大きさは、縮小画面位置記憶部１７に記憶される大きさ情報が入力処理部１３によって読み出され、映像出力部１６を介して縮小画面作成部１５に送られる。

ステップＡ１１は、入力処理部１３は、人物の付近に縮小画面を表示する。具体的には、入力処理部１３は、ステップＡ１０で生成した縮小画面を、ステップＡ４で特定した位置に最も近い位置に表示するように映像出力部１６に指示する。映像出力部１６は、縮小画面作成部１５から受け取る縮小情報による縮小画面を、実画面作成部１４から受け取る実画面情報による表示画面のうち、入力処理部１３から指示された位置で合成し、合成した画面を表す合成情報を映像信号に変換してディスプレイ装置２１に送信する。ディスプレイ装置２１は、映像出力部１６から受信した映像信号に基づく画面を表示する。ステップＡ１２では、入力処理部１３は、縮小画面を表示した位置を表す表示位置情報を縮小画面位置記憶部１７に記憶し、さらに、縮小画面を表示していることを示す表示中情報を縮小画面位置記憶部１７に記憶した後、第１の表示処理を終了し、他の処理を行った後、ステップＡ１に戻る。ステップＡ８またはＡ１１は、表示ステップである。ステップＡ１〜Ａ４は、検出ステップである。

図６は、情報処理装置１０が実行するタッチ処理を示すフローチャートである。タッチ処理は、操作指示に対応する処理を行う処理である。図５に示した第１の表示処理の後、ステップＢ１に移る。

ステップＢ１では、入力装置２２は、画面にタッチされた位置を検出し、検出した位置を示す操作位置情報、たとえば実画面座標系での座標を表す座標情報を入力処理部１３に送信する。ステップＢ２では、入力処理部１３は、画面がタッチされたか否かを判定する。入力装置２２から操作位置情報を受信すると、画面がタッチされたと判定し、ステップＢ３に進み、入力装置２２から操作位置情報を受信しないと、画面がタッチされていないと判定し、ステップＢ１に戻る。

ステップＢ３では、入力処理部１３は、縮小画面を表示中であるか否かを判定する。縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していると、縮小画面を表示中であると判定し、ステップＢ４に進み、縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していないと、縮小画面を表示中でないと判定し、ステップＢ７に進む。ステップＢ４では、入力処理部１３は、縮小画面表示位置を呼び出す。具体的には、縮小画面位置記憶部１７に記憶される表示位置情報および大きさ情報を読み出す。

ステップＢ５では、入力処理部１３は、タッチされた位置が縮小画面上であるか否かを判定する。具体的には、ステップＢ２で受信した操作位置情報が示す位置が、縮小画面位置記憶部１から読み出した表示位置情報が示す位置に、大きさ情報が示す大きさで表示される縮小画面の領域内の位置であると、タッチされた位置が縮小画面上であると判定し、ステップＢ６に進む。ステップＢ２で受信した操作位置情報が示す位置が、縮小画面位置記憶部１から読み出した表示位置情報が示す位置に、大きさ情報が示す大きさで表示される縮小画面の領域内の位置でないと、タッチされた位置が縮小画面上でないと判定し、ステップＢ７に進む。

ステップＢ６では、入力処理部１３は、縮小画面座標から実画面座標に変換する。具体的には、入力処理部１３は、座標変換部１２によって変換された変換後の操作位置を表す変換位置情報を受け取る。ステップＢ７では、入力処理部１３は、座標に対する処理内容を呼び出す。座標は、ステップＢ６で変換した場合は、変換位置情報が示す位置の座標であり、ステップＢ６で変換していない場合は、操作指示が行われた位置の実画面座標での座標である。

座標に対する処理内容は、操作指示による操作の内容であり、たとえば表示されているウインドウの位置を動かす処理、ウインドウを閉じる処理、描画する処理などである。たとえばウインドウを閉じる処理では、入力装置２２による操作指示が、ウインドウを閉じる操作ボタンが表示されている位置に対する操作指示であると、ウインドウを閉じる処理を行う。描画する処理は、たとえば入力装置２２による操作指示があった位置に順次予め定める色の画像を合成して表示する処理である。座標に対する処理内容は、たとえば図示しない記憶装置に記憶されており、記憶装置から座標に対応する処理内容を読み出す。

ステップＢ８では、入力処理部１３は、座標に対する処理を実行する。すなわち、ステップＢ７で呼び出した処理内容を実行する。ステップＢ９では、入力処理部１３は、実画面に結果を反映する。具体的には、実画面作成部１４に、結果が反映された情報に基づいて実画面情報を作成するように指示し、縮小画面表示中でない場合は、作成された実画面情報による表示画面を映像出力部１６によってディスプレイ装置２１に表示させる。ステップＢ１０では、入力処理部１３は、縮小画面を表示中であるか否かを判定する。縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していると、縮小画面を表示中であると判定し、ステップＢ１１に進み、縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していないと、縮小画面を表示中でないと判定し、タッチ処理を終了する。

ステップＢ１１では、入力処理部１３は、縮小画面に結果を反映し、タッチ処理を終了する。具体的には、映像出力部１６に、ステップＢ９で結果が反映された実画面情報による表示画面を縮小した縮小画面を、その表示画面に合成して、ディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、実画面作成部１４から受け取る実画面情報による表示画面と縮小画面作成部１５から受け取る縮小情報による縮小画面とを合成した画面を表す合成情報を映像信号に変換してディスプレイ装置２１に送信し、表示させる。ステップＢ１，Ｂ２は、操作指示ステップである。ステップＢ６は、変換ステップである。ステップＢ７〜Ｂ１１は、操作実行ステップである。

図７は、情報処理装置１０が実行する第２の表示処理を示すフローチャートである。第２の表示処理は、操作者２がタッチした位置に縮小画面を表示し、操作指示に対応する処理を行う処理である。表示装置１の電源が投入され、動作可能になると、ステップＣ１に移る。ステップＣ１〜ステップＣ９は、図６に示したステップＢ１〜Ｂ９とそれぞれ同じであり、重複を避けるために説明は省略する。

ステップＣ１０では、入力処理部１３は、縮小画面に結果を反映し、第２の表示処理を終了し、他の処理を行った後、ステップＣ１に戻る。具体的には、映像出力部１６に、ステップＣ９で結果が反映された実画面情報による表示画面を縮小した縮小画面を、その表示画面に合成して、ディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、実画面作成部１４から受け取る実画面情報による表示画面と縮小画面作成部１５から受け取る縮小情報による縮小画面とを合成した画面を表す合成情報を映像信号に変換してディスプレイ装置２１に送信し、表示させる。

ステップＣ１１では、入力処理部１３は、縮小画面を生成する。具体的には、入力処理部１３は、映像出力部１６に、縮小画面を表示画面に合成してディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、縮小画面作成部１５に縮小情報を作成するよう指示する。縮小画面作成部１５は、映像出力部１６からの指示によって、画像記憶部１８に記憶される実画面情報を読み出し、読み出した実画面情報に基づいて縮小情報を作成し、作成した縮小情報を映像出力部１６に送る。縮小画面の大きさは、縮小画面位置記憶部１７に記憶される大きさ情報が入力処理部１３によって読み出され、映像出力部１６を介して縮小画面作成部１５に送られる。

ステップＣ１２では、入力処理部１３は、タッチ座標を中心に縮小画面を表示する。具体的には、入力処理部１３は、映像出力部１６に、縮小画面の中心をステップＣ２で受信した操作位置情報が示す位置に合わせて、縮小画面を表示画面に合成してディスプレイ装置２１に表示するように指示する。映像出力部１６は、縮小画面作成部１５から受け取る縮小情報による縮小画面の中心をステップＣ２で受信した操作位置情報が示す位置に合わせて、その縮小画面を実画面作成部１４から受け取る実画面情報による表示画面に合成し、ディスプレイ装置２１に表示させる。

ステップＣ１３では、入力処理部１３は、縮小画面を表示した位置を表す表示位置情報を縮小画面位置記憶部１７に記憶し、さらに、縮小画面を表示していることを示す表示中情報を縮小画面位置記憶部１７に記憶した後、第２の表示処理を終了し、他の処理を行った後、ステップＣ１に戻る。ステップＣ１２は、表示ステップである。ステップＣ１，Ｃ２は、操作指示ステップである。ステップＣ６は、変換ステップである。ステップＣ７〜Ｃ１０は、操作実行ステップである。

図８は、情報処理装置１０が実行する第３の表示処理を示すフローチャートである。第３の表示処理は、図４に示した表示画面５０のように、２種類のタッチペンを用いた操作指示を可能にする処理である。表示装置１の電源が投入され、動作可能になると、ステップＤ１に移る。ステップＤ１，Ｄ２，Ｄ５〜Ｄ７，Ｄ１１〜Ｄ１５は、図６に示したステップＢ１〜Ｂ１０とそれぞれ同じであり、重複を避けるために説明は省略する。

ステップＤ３では、入力処理部１３は、ペンＩＤを取得する。具体的には、タッチペンから送信されるＩＤをデバイス認識部１１から取得する。ステップＤ４では、取得したペンＩＤが縮小ペンのＩＤであるか否かを判定する。デバイス認識部１１がタッチペンから受信したＩＤが、縮小画面用タッチペンのＩＤであると、取得したペンＩＤが縮小ペンのＩＤであると判定し、ステップＤ５に進み、デバイス認識部１１がタッチペンから受信したＩＤが、縮小画面用タッチペンのＩＤでないと、取得したペンＩＤが縮小ペンのＩＤでないと判定し、ステップＤ１７に進む。

ステップＤ８では、入力処理部１３は、タッチ座標を中心に縮小画面を表示する。具体的には、入力処理部１３は、映像出力部１６に、縮小画面の中心をステップＤ２で受信した操作位置情報が示す位置に合わせて、縮小画面を表示画面に合成してディスプレイ装置２１に表示するように指示する。映像出力部１６は、縮小画面作成部１５から受け取る縮小情報による縮小画面の中心をステップＤ２で受信した操作位置情報が示す位置に合わせて、その縮小画面を実画面作成部１４から受け取る実画面情報による表示画面に合成し、ディスプレイ装置２１に表示させる。

ステップＤ９では、入力処理部１３は、縮小画面を表示した位置を表す表示位置情報を縮小画面位置記憶部１７に記憶し、さらに、縮小画面を表示していることを示す表示中情報を縮小画面位置記憶部１７に記憶した後、第３の表示処理を終了し、他の処理を行った後、ステップＤ１に戻る。

ステップＤ１０では、入力処理部１３は、縮小画面を生成し、ステップＤ８に進む。具体的には、入力処理部１３は、映像出力部１６に、縮小画面を表示画面に合成してディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、縮小画面作成部１５に縮小情報を作成するよう指示する。縮小画面作成部１５は、映像出力部１６からの指示によって、画像記憶部１８に記憶される実画面情報を読み出し、読み出した実画面情報に基づいて縮小情報を作成し、作成した縮小情報を映像出力部１６に送る。

ステップＤ１６では、入力処理部１３は、縮小画面に結果を反映し、第３の表示処理を終了し、他の処理を行った後、ステップＤ１に戻る。具体的には、映像出力部１６に、ステップＤ１４で結果が反映された実画面情報による表示画面を縮小した縮小画面を、その表示画面に合成して、ディスプレイ装置２１に表示するように指示する。映像出力部１６は、入力処理部１３からの指示によって、実画面作成部１４から受け取る実画面情報による表示画面と縮小画面作成部１５から受け取る縮小情報による縮小画面とを合成した画面を表す合成情報を映像信号に変換してディスプレイ装置２１に送信し、表示させる。

ステップＤ１７では、入力処理部１３は、縮小画面を表示中であるか否かを判定する。縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していると、縮小画面を表示中であると判定し、ステップＤ１８に進み、縮小画面位置記憶部１７に記憶される表示中情報が縮小画面を表示していることを示していないと、縮小画面を表示中でないと判定し、ステップＤ１２に進む。ステップＤ１８では、入力処理部１３は、縮小画面位置を呼び出す。具体的には、縮小画面位置記憶部１７に記憶される表示位置情報および大きさ情報を読み出す。

ステップＤ１９では、入力処理部１３は、タッチされた位置が縮小画面上であるか否かを判定する。具体的には、ステップＤ２で受信した操作位置情報が示す位置が、縮小画面位置記憶部１から読み出した表示位置情報が示す位置に、大きさ情報が示す大きさで表示される縮小画面の領域内の位置であると、タッチされた位置が縮小画面上であると判定し、ステップＤ２０に進む。ステップＤ２で受信した操作位置情報が示す位置が、縮小画面位置記憶部１から読み出した表示位置情報が示す位置に、大きさ情報が示す大きさで表示される縮小画面の領域内の位置でないと、タッチされた位置が縮小画面上でないと判定し、ステップＤ１２に進む。

ステップＤ２０では、入力処理部１３は、縮小画面を消去して、第３の表示処理を終了し、他の処理を行った後、ステップＤ１に戻る。具体的には、入力処理部１３は、映像出力部１６に、表示画面に縮小画面を合成することなく、表示画面をディスプレイ装置２１に表示するように指示する。映像出力部１６は、実画面作成部１４から受け取る実画面情報による表示画面をディスプレイ装置２１に表示させる。ステップＤ８，Ｄ２０は、表示ステップである。ステップＤ１，Ｄ２は、操作指示ステップである。ステップＤ１１は、変換ステップである。ステップＤ１２〜Ｄ１６は、操作実行ステップである。ステップＤ３，Ｄ４は、判定ステップである。

図９は、情報処理装置１０が実行する第４の表示処理を示すフローチャートである。第４の表示処理は、デバイスタイプの異なる２つの入力装置２２、たとえばタッチパネルとマウスとを用いた操作指示を可能にする処理である。表示装置１の電源が投入され、動作可能になると、ステップＥ１に移る。ステップＥ５〜Ｅ１７は、図８に示したステップＤ５〜Ｄ１７とそれぞれ同じであり、重複を避けるために説明は省略する。

ステップＥ１では、入力装置２２は、タッチパネルまたはマウスによって入力された位置を検出し、検出した位置を示す操作位置情報、たとえば実画面座標系での座標を表す座標情報を入力処理部１３に送信する。ステップＥ２では、入力処理部１３は、入力があったか否かを判定する。入力装置２２から操作位置情報を受信すると、入力があったと判定し、ステップＥ３に進み、入力装置２２から操作位置情報を受信しないと、入力がないと判定し、ステップＥ１に戻る。

ステップＥ３では、入力処理部１３は、入力デバイスの確認を行う。具体的には、デバイス認識部１１からデバイス情報を取得する。ステップＥ４では、入力処理部１３は、デバイスがタッチパネルであるか否かを判定する。デバイス認識部１１から取得したデバイス情報が示すデバイスタイプがタッチパネルであると、デバイスがタッチパネルであると判定し、ステップＥ５に進み、デバイス認識部１１から取得したデバイス情報が示すデバイスタイプがタッチパネルでないと、デバイスがタッチパネルでないと判定し、ステップＥ１７に進む。

ステップＥ１８では、入力処理部１３は、縮小画面を消去して、ステップＥ１２に進む。具体的には、入力処理部１３は、映像出力部１６に、表示画面に縮小画面を合成することなく、表示画面をディスプレイ装置２１に表示するように指示する。映像出力部１６は、実画面作成部１４から受け取る実画面情報による表示画面をディスプレイ装置２１に表示させる。ステップＥ８，Ｅ１８は、表示ステップである。ステップＥ１，Ｅ２は、操作指示ステップである。ステップＥ１１は、変換ステップである。ステップＥ１２〜Ｅ１６は、操作実行ステップである。ステップＥ３，Ｅ４は、判定ステップである。

このように、図５に示したステップＡ８またはＡ１１、図７に示したステップＣ１２、図８に示したステップＤ８，Ｄ２０または図９に示したステップＥ８，Ｅ１８では、表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する。図６に示したステップＢ１，Ｂ２、図７に示したステップＣ１，Ｃ２、図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２では、前記表示画面での操作指示を行う。図６に示したステップＢ６、図７に示したステップＣ６、図８に示したステップＤ１１、または図９に示したステップＥ１１では、図６に示したステップＢ１，Ｂ２、図７に示したステップＣ１，Ｃ２、図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する。

そして、図６に示したステップＢ７〜Ｂ１１、図７に示したステップＣ７〜Ｃ１０、図８に示したステップＤ１２〜Ｄ１６または図９に示したステップＥ１２〜Ｅ１６では、図６に示したステップＢ１，Ｂ２、図７に示したステップＣ１，Ｃ２、図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置が、前記縮小画面の領域内であるとき、図６に示したステップＢ６、図７に示したステップＣ６、図８に示したステップＤ１１、または図９に示したステップＥ１１で変換された位置に対する操作指示に対応する処理を行い、図６に示したステップＢ１，Ｂ２、図７に示したステップＣ１，Ｃ２、図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する図６に示したステップＢ１，Ｂ２、図７に示したステップＣ１，Ｃ２、図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で行われた操作指示に対応する処理を行う。したがって、本発明に係る表示方法を適用すれば、大型の表示画面でも操作者が表示画面上で容易に操作することができる。

さらに、図５に示したステップＡ１〜Ａ４では、操作者の位置を検出する。そして、図５に示したステップＡ８またはＡ１１では、前記表示画面の位置うち、図５に示したステップＡ１〜Ａ４で検出された操作者の位置に応じた位置に前記縮小画面を表示するので、縮小画面を操作者の近くに表示することができる。

さらに、図８に示したステップＤ３，Ｄ４または図９に示したステップＥ３，Ｅ４では、前記操作指示が、前記表示画面に対する操作指示を行う通常のタッチペン３ｂまたはマウスによる操作指示であるか、前記縮小画面に対する操作指示を行う縮小画面用タッチペン３ａまたはタッチパネルによる操作指示であるかを判定する。そして、図８に示したステップＤ１１または図９に示したステップＥ１１では、図８に示したステップＤ３，Ｄ４または図９に示したステップＥ３，Ｅ４で前記操作指示が縮小画面用タッチペン３ａまたはタッチパネルによる操作指示であると判定され、かつ図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する。したがって、縮小画像に対する操作指示と、縮小画像を除く領域の表示画像に対する操作指示とを２種類の指示装置によって使い分けることができる。

さらに、図８に示したステップＤ２０または図９に示したステップＥ１８では、図８に示したステップＤ３，Ｄ４または図９に示したステップＥ３，Ｅ４で前記操作指示が通常のタッチペン３ｂまたはマウスによる操作指示であると判定され、かつ図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記縮小画面を合成しない表示画面を表示するので、通常のタッチペン３ｂまたはマウスによって、縮小画面が表示されている領域に対して操作指示を行うことによって、縮小画面を消去することができる。

さらに、図８に示したステップＤ８または図９に示したステップＥ８では、図８に示したステップＤ３，Ｄ４または図９に示したステップＥ３，Ｅ４で前記操作指示が縮小画面用タッチペン３ａまたはタッチパネルによる操作指示であると判定され、かつ図８に示したステップＤ１，Ｄ２、または図９に示したステップＥ１，Ｅ２で操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内であるとき、前記縮小画面を前記操作指示が行われた位置に表示するので、縮小画像を表示する位置を操作しやすい位置に容易に移動することができる。

さらに、実画面作成部１４、縮小画面作成部１５、映像出力部１６およびディスプレイ装置２１によって、表示情報を表示する表示画面を縮小した縮小画面が前記表示画面と合成されて表示され、入力装置２２によって、前記表示画面での操作指示が行われ、座標変換部１２によって、入力装置２２によって操作指示が行われた位置が、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換され、入力処理部１３によって、入力装置２２によって操作指示が行われた位置が、前記縮小画面の領域内であるとき、座標変換部１２によって変換された位置に対する操作指示に対応する処理が行われ、入力装置２２によって操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示に対応する処理が行われる。したがって、大型の表示画面でも操作者が表示画面上で容易に操作することができる。

本発明の実施の一形態である表示装置１の構成を示すブロック図である。操作者２の近くに縮小画面３１を表示した表示画面３０の一例を示す図である。操作者２の手が届く範囲に縮小画面４２を表示した表示画面４０の一例を示す図である。２種類のタッチペンを用いて操作される表示画面５０の一例を示す図である。情報処理装置１０が実行する第１の表示処理を示すフローチャートである。情報処理装置１０が実行するタッチ処理を示すフローチャートである。情報処理装置１０が実行する第２の表示処理を示すフローチャートである。情報処理装置１０が実行する第３の表示処理を示すフローチャートである。情報処理装置１０が実行する第４の表示処理を示すフローチャートである。従来の技術による地図表示の表示画面９０を示す図である。従来の技術による仮想デスクトップの表示画面９３を示す図である。従来の技術によるタッチパネル機能を有するディスプレイ装置９６を示す図である。

符号の説明

１表示装置
１０情報処理装置
１１デバイス認識部
１２座標変換部
１３入力処理部
１４実画面作成部
１５縮小画面作成部
１６映像出力部
１７縮小画面位置記憶部
１８画像記憶部
２１ディスプレイ装置
２２入力装置
２３人物認識装置

Claims

表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する表示ステップと、
前記表示画面での操作指示を行う操作指示ステップと、
前記操作指示ステップで操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する変換ステップと、
前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換ステップで変換された位置に対する操作指示に対応する処理を行ない、前記操作指示ステップで操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示ステップで行われた操作指示に対応する処理を行う操作実行ステップと、
操作者の位置を検出する検出ステップとを含み、
前記表示ステップでは、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出ステップで検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出ステップで検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出ステップで検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持し、
前記表示ステップでは、前記縮小画面を表示する領域を、前記表示画面の全領域のうち、前記操作者の手が届く範囲である縮小画面表示領域内に制限することを特徴とする表示方法。
表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する表示ステップと、
前記表示画面での操作指示を行う操作指示ステップと、
前記操作指示ステップで操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する変換ステップと、
前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換ステップで変換された位置に対する操作指示に対応する処理を行ない、前記操作指示ステップで操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示ステップで行われた操作指示に対応する処理を行う操作実行ステップと、
操作者の位置を検出する検出ステップとを含み、
前記表示ステップでは、前記表示画面の位置のうち、前記検出ステップで検出された操作者の位置に応じた位置に前記縮小画面を表示し、
前記表示ステップでは、前記縮小画面を表示する領域を、前記表示画面の全領域のうち、前記操作者の手が届く範囲である縮小画面表示領域内に制限し、
前記操作指示が、前記表示画面に対する操作指示を行う第１の指示装置による操作指示であるか、前記縮小画面に対する操作指示を行う第２の指示装置による操作指示であるかを判定する判定ステップをさらに含み、
前記変換ステップでは、前記判定ステップで前記操作指示が第２の指示装置による操作指示であると判定され、かつ前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換し、
前記表示ステップでは、前記判定ステップで前記操作指示が第１の指示装置による操作指示であると判定され、かつ前記操作指示ステップで操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記縮小画面を合成しない表示画面を表示することを特徴とする表示方法。
前記表示ステップでは、前記判定ステップで前記操作指示が第２の指示装置による操作指示であると判定され、かつ前記操作指示ステップで操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内であるとき、前記縮小画面を前記操作指示が行われた位置に表示することを特徴とする請求項２に記載の表示方法。
表示情報を表示する表示画面を縮小した縮小画面を前記表示画面と合成して表示する表示手段と、
前記表示画面での操作指示を行う操作指示手段と、
前記操作指示手段によって操作指示が行われた位置を、前記縮小画面を基準とする位置から前記表示画面を基準とする位置に変換する変換手段と、
前記操作指示手段によって操作指示が行われた位置が、前記縮小画面の領域内であるとき、前記変換手段によって変換された位置に対する操作指示に対応する処理を行ない、前記操作指示手段によって操作指示が行われた位置が、前記表示画面の領域のうち前記縮小画面の領域を除く残余の領域内の位置であるとき、前記表示画面を基準とする位置に対する前記操作指示に対応する処理を行う操作実行手段と、
操作者の位置を検出する検出手段とを含み、
前記表示手段は、縮小画面を表示中であるか否かを判定し、表示中でないと判定されると、縮小画面を生成して、前記表示画面の位置のうち、前記検出手段によって検出された操作者の位置に応じた位置に生成した縮小画面を表示し、表示中であると判定されると、表示中の縮小画面の位置が、前記検出手段によって検出された位置から予め定める距離以内であるか否かを判定し、予め定める距離以内でないと判定されると、前記検出手段によって検出された位置に最も近い位置に縮小画面を移動し、予め定める距離以内であると判定されると、縮小画面を移動させることなく位置を維持し、
前記表示手段は、前記縮小画面を表示する領域を、前記表示画面の全領域のうち、前記操作者の手が届く範囲である縮小画面表示領域内に制限することを特徴とする表示装置。