JP2021043484A - ウィンドウ表示システム及びウィンドウの表示制御方法 - Google Patents

Abstract

【課題】複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウのみを前面側に移動させて視認できるようにする。【解決手段】ウィンドウ表示システムは、表示装置が有する表示領域に対してジェスチャが行われたことを検知するジェスチャ検知装置、ジェスチャに応じて表示装置におけるウィンドウの表示状態を制御する制御装置を備える。制御装置は、表示装置において複数の第１のウィンドウが第２のウィンドウによって隠された状態のとき、ジェスチャ判定部が所定のジェスチャであると判定すると、その所定のジェスチャが行われたジェスチャ領域を特定し、第１のウィンドウ毎に、ジェスチャ領域と第１のウィンドウとが重なった部分の面積である重なり面積又は両者間の距離を算出する。重なり面積又は距離に基づいて第２のウィンドウよりも前面側に表示させる第１のウィンドウを選定する。【選択図】図６

Description

本発明は、ウィンドウ表示システム及びウィンドウの表示制御方法に関する。

従来、複数のウィンドウを表示することができる表示装置が知られている。このような表示装置では、表示領域内で複数のウィンドウが重なり、背面側に位置するウィンドウが前面側に位置する他のウィンドウに隠れることがある。このように、複数のウィンドウが重なることで背面側に位置しているウィンドウを前面側に移動させたり、ウィンドウによって隠されたオブジェクトを視認可能な状態に表示させたりする技術が提案されている（例えば、特許文献１〜５参照）。

特開平７−４４５５９号公報 特開２００３−１０８２８１号公報 特開２００９−２８９０４７号公報 特開２０１５−８７８４７号公報 特開２０１７−２０４０９９号公報

ところで、複数のウィンドウが重なった状態となっており、他のウィンドウの背面側に隠れているウィンドウに対して操作を行いたい場合等、その隠れているウィンドウを即座に前面側に移動させたい場合がある。例えば、最前面に表示されたウィンドウ上に存在するオブジェクトをその背面側に位置して隠れているウィンドウに対してドラッグ・アンド・ドロップをしたい場合には、背面側に位置するウィンドウを前面側に移動させたい。このような場合、一旦、オブジェクトの移動先となるウィンドウを前面側に移動させた後にオブジェクトを移動させなければならず、操作が煩雑であった。このような操作を簡略化するために、例えば、作業者の所定の動作を検知したときに、最前面に位置するウィンドウを最背面に移動させることが考えられる。しかしながら、このようなウィンドウの移動により、不要なウィンドウまで表示されることになり、却って全体の作業効率を低下させてしまうことが想定される。前記特許文献に開示された技術は、いずれもこのような問題を解決するものとはなっていない。

１つの側面では、本明細書開示の発明は、複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウを選択して前面側に移動させて視認できるようにすることを目的とする。

１つの態様では、ウィンドウ表示システムは、複数のウィンドウを表示可能な表示領域を有する表示装置と、前記表示領域に対してジェスチャが行われたことを検知するジェスチャ検知装置と、ジェスチャに応じて前記表示装置における前記ウィンドウの表示状態を制御する制御装置と、を備え、前記制御装置は、前記表示装置において、複数の第１のウィンドウが第２のウィンドウによって隠された状態となっているときに、前記ジェスチャ検知装置が検知したジェスチャが所定のジェスチャであるか否かを判定するジェスチャ判定部と、前記所定のジェスチャが行われたジェスチャ領域を特定する特定部と、前記第１のウィンドウ毎に、前記ジェスチャ領域と前記第１のウィンドウとが重なった部分の面積である重なり面積又は前記ジェスチャ領域と前記第１のウィンドウとの距離を算出する算出部と、前記重なり面積又は前記距離に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定するウィンドウ選定部と、前記ウィンドウ選定部によって選定された前記第１のウィンドウを前記第２のウィンドウよりも前面側に表示させる表示変更部と、を備えている。

本明細書開示の発明によれば、複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウを選択して前面側に移動させて視認できるようにすることができる。

図１は第１実施形態におけるウィンドウ表示システムのハードウェア構成の一例を示す説明図である。 図２は第１実施形態におけるウィンドウ表示システムが備える表示装置の表示領域に表示された複数のウィンドウの一例を示す説明図である。 図３は第１実施形態のウィンドウ表示システムが備えるコンピュータによって実現される機能ブロック図の一例である。 図４はジェスチャ領域を特定する方法の一例を示す説明図である。 図５は第１実施形態のウィンドウ表示システムの制御の一例を示すフローチャートである。 図６は第１実施形態のウィンドウ表示システムによってウィンドウの表示重なり順が変更される様子を示す模式図である。 図７（Ａ）は第１実施形態における各ウィンドウの位置、寸法を示すテーブルであり、図７（Ｂ）は第１実施形態におけるジェスチャ領域の位置、寸法を示すテーブルである。 図８は第１実施形態における所定のジェスチャの前後におけるウィンドウの表示重なり順を示すテーブルである。 図９（Ａ）は第１実施形態におけるウィンドウとジェスチャ領域との位置関係の一例を示す説明図であり、図９（Ｂ）はウィンドウ毎に指標値の算出例を示すテーブルである。 図１０は第２実施形態におけるウィンドウ表示システムが備える表示装置の表示領域に表示された複数のウィンドウの一例を示す説明図である。 図１１（Ａ）は第２実施形態における各ウィンドウの位置、寸法を示すテーブルであり、図１１（Ｂ）は第３実施形態におけるジェスチャ領域の位置、寸法を示すテーブルである。 図１２は第２実施形態における所定のジェスチャの前後におけるウィンドウの表示重なり順を示すテーブルである。 図１３は第２実施形態におけるウィンドウ毎の指標値とウィンドウの移動の有無を示すテーブルである。 図１４は第３実施形態におけるウィンドウ表示システムが備える表示装置の表示領域に表示された複数のウィンドウの一例を示す説明図である。 図１５（Ａ）は第３実施形態における各ウィンドウの位置、寸法を示すテーブルであり、図１５（Ｂ）は第３実施形態におけるジェスチャ領域の位置、寸法を示すテーブルである。 図１６は第３実施形態における所定のジェスチャの前後におけるウィンドウの表示重なり順を示すテーブルである。 図１７は第３実施形態におけるウィンドウ毎の指標値とウィンドウの移動の有無を示すテーブルである。 図１８は第４実施形態におけるウィンドウ表示システムが備える表示装置の表示領域に表示された複数のウィンドウの一例を示す説明図である。 図１９は第４実施形態におけるウィンドウ毎の指標値とウィンドウの移動の有無を示すテーブルである。 図２０は第４実施形態におけるウィンドウ表示システムが備える表示装置の表示領域に表示された複数のウィンドウの一例を示す説明図である。 図２１は第４実施形態におけるウィンドウ毎の指標値とウィンドウの移動の有無を示すテーブルである。 図２２はジェスチャ領域を特定する他の例について示す説明図である。 図２３はポインティングデバイスの他の例を示す模式図である。

以下、本発明の実施形態について、添付図面を参照しつつ説明する。ただし、図面中、各部の寸法、比率等は、実際のものと完全に一致するようには図示されていない場合がある。また、図面によっては、説明の都合上、実際には存在する構成要素が省略されていたり、寸法が実際よりも誇張されて描かれていたりする場合がある。

（第１実施形態）
まず、図１〜図４を参照して、第１実施形態のウィンドウ表示システム１００の概略構成について説明する。図１を参照すると、ウィンドウ表示システム１００は、表示装置としてのディスプレイ１と、ジェスチャ検知装置としてのポインティングデバイス１０及び制御装置２０を備えている。

図２を参照すると、ディスプレイ１は、表示領域１ａを備えている。ディスプレイ１は、表示領域１ａに複数のウィンドウを表示することができる。図２に示す例では、ウィンドウＷ１からＷ４が表示されている。但し、図２に示す状態では、第１のウィンドウに相当する複数のウィンドウＷ２からＷ４が第２のウィンドウに相当するウィンドウＷ１によって隠された状態となっている。各ウィンドウは、適宜、その表示重なり順を変更することができる。なお、本明細書における以下の説明では、ある時点のディスプレイ１において、複数のウィンドウを隠す状態とするウィンドウを第２のウィンドウとし、この第２のウィンドウに隠されるウィンドウを第１のウィンドウとしている。このため、図２に示す例では、ウィンドウＷ１が第２のウィンドウであり、ウィンドウＷ２からＷ４が第１のウィンドウとされている。しかしながら、各ウィンドウの寸法や、表示領域１ａ内における表示位置に応じて、いずれのウィンドウが第１のウィンドウ、又は、第２のウィンドウに相当するかは、適宜変更される。

表示領域１ａは、Ｘ方向及びＹ方向に向かって広がっており、原点Ｐ０の座標を（０，０）とすると、原点Ｐ０と対角線上に位置する対角点Ｐ１の座標は、（７９９，３９９）とされている。このような表示領域１ａにおいて、ウィンドウＷ１の位置を示すときは、左上に位置する角部ＰＷ１の座標で示すこととする。同様に、ウィンドウＷ２の位置は角部ＰＷ２の座標、ウィンドウＷ３の位置については角部ＰＷ３の座標、ウィンドウＷ４の位置については角部ＰＷ４の座標によって示すこととする。以下の実施形態の説明においても同様に表示するものとする。なお、本実施形態では、図２に示すように、表示領域１ａの左上角部を原点Ｐ０としているが座標の設定方法は、これに限定されるものではない。

ポインティングデバイス１０は、表示領域１ａに表示されたウィンドウやオブジェクトに対して操作を行うことができる。例えば、あるウィンドウ内又はウィンドウ外に表示されているオブジェクトを所望の位置に移動させるいわゆるドラッグ・アンド・ドロップ操作を行うことができる。本実施形態のポインティングデバイス１０は、表示領域１ａに組み込まれたタッチパネル１２を備えており、ペン１１（図５参照）を用いて表示領域１ａに表示されたウィンドウやオブジェクトに対して所望の操作を行うことができる。タッチパネル１２は、指先で操作してもよい。ポインティングデバイスとしては、マウス等、従来、公知のデバイスを採用することができる。

ポインティングデバイス１０は、ジェスチャ検知装置として機能する。ここで、ジェスチャとは、ポインティングデバイスを操作する動作であり、本実施形態では、ジェスチャのうち、所定のジェスチャを、ウィンドウ表示システム１００を制御する際のコマンドとして規定している。所定のジェスチャは、適宜、規定することができるが、通常のドラッグ・アンド・ドロップで行われるような、直線に近い軌跡や、一方向に向かう軌跡を描く動作と区別し易い特徴的な動きを所定のジェスチャとして採用することが望ましい。例えば、表示領域１ａに接触させたペン１１を表示領域１ａのＸ方向に沿って移動させて折り返す動作や、一定回数以上の円軌跡を描く動作である。本実施形態では、ペン１１をＸ方向に沿って移動させて折り返す往復動を所定回数行ってジグザグの軌跡を描くような動作を所定のジェスチャとしている。ユーザは、表示させたいウィンドウ上やそのようなウィンドウ近傍で所定のジェスチャを行う。このような所定のジェスチャについては、後に詳細に説明する。

本実施形態においてジェスチャ検知装置として機能するポインティングデバイス１０は、２人以上の作業者のジェスチャを同時に検知可能である。すなわち、ポインティングデバイス１０は、複数人によるマルチタスクに対応可能となっている。

制御装置２０は、コンピュータによって構成されている。図１を参照すると、制御装置２０は、ＣＰＵ（Central Processing Unit）２１、ＲＯＭ（Read Only Memory）２２、ＲＡＭ（Random Access Memory）２３、記憶部（ここではＨＤＤ（Hard Disk Drive））２４を備える。また、制御装置２０は、入出力インターフェイス２５、及び可搬型記憶媒体用ドライブ２６等を備えている。これらの制御装置２０の構成各部は、バス２８に接続されている。制御装置２０では、ＲＯＭ２２あるいはＨＤＤ２４に格納されているプログラム、或いは可搬型記憶媒体用ドライブ２６が可搬型記憶媒体２７から読み取ったプログラムをＣＰＵ２１が実行し、制御装置２０の各機能が実現される。なお、図４の各部の機能は、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現されてもよい。ディスプレイ１及びポインティングデバイス１０は、入出力インターフェイス２５を介して制御装置２０に接続されている。

制御装置２０は、図３に示す機能ブロック図に示された機能部分を有する。すなわち、制御装置２０は、操作処理部３０、ウィンドウ管理部３１、ジェスチャ判定部３２、特定部３３、ウィンドウ抽出部３４、算出部３５、ウィンドウ選定部３６及び表示変更部３７を有する。これらの機能部分は、制御装置２０に含まれる各要素が協働することで実現される。

操作処理部３０は、ポインティングデバイス１０がどのように操作されたかを判定し、また、ポインティングデバイス１０の操作に応じてオブジェクト等を移動させたり、ドロップしたりする。

ウィンドウ管理部３１は、各ウィンドウの位置、前後関係の情報を管理する。また、ウィンドウ管理部３１は、オブジェクトのドラッグ開始の判定を行い、オブジェクトのドラッグ操作中の表示移動処理を行い、ドラッグ操作終了の判定を行い、ドラッグ操作終了時の処理を行う。

ジェスチャ判定部３２は、ポインティングデバイス１０と協働してドラッグ操作中に予め指定された所定のジェスチャが行われたか否かを判定する。本実施形態では、ジェスチャ判定部３２は、ペン１１をＸ方向に沿って移動させて折り返す往復動を所定回数行うことでジグザグの軌跡が描かれたか否かを判定する。

特定部３３は、所定のジェスチャが行われた領域を算出し、特定する。本実施形態においては、具体的に、ウィンドウＷ２からＷ４がウィンドウＷ１によって隠された状態となっているときに、ポインティングデバイス１０が所定のジェスチャを検知すると、検知した所定のジェスチャが行われたジェスチャ領域Ａｒｇを特定する。例えば、ジグザグの軌跡を描く所定のジェスチャの出発点から終点までのジェスチャ軌跡ｇの外接矩形をジェスチャ領域として算出し、特定することが考えられる。

ここで、図４を参照して、ジェスチャ領域Ａｒｇの特定の一例について説明する。例えば、Ｘ方向に沿って所定回数往復させてジグザグのジェスチャ軌跡ｇが描かれた場合について説明する。ジェスチャ軌跡ｇの出発点は、第１点ｇ１であり、ジェスチャ軌跡ｇの終点は、第６点ｇ６であるとする。第１点ｇ１は、所定のジェスチャの開始点となる。例えば、ある場所でオブジェクトをドラッグし、その状態でそのオブジェクトを第１点ｇ１まで移動させ、そこから、所定のジェスチャを開始するものとする。

ジェスチャ軌跡ｇは、第１点ｇ１から右下方に進み、第２点ｇ２で左下方へ進むように折り返される。そして、第３点ｇ３で右下方へ進むように折り返され、第４点で左下方へ進むように折り返される。その後、第５点ｇ５で右下方へ進むように折り返され、終点となる第６点ｇ６へ到達するものとする。

所定のジェスチャが行われた否かは、ジェスチャ判定部３２によって判断される。本実施形態では、３回折り返し動作が行われた場合には、所定のジェスチャが行われたものと判断される。本実施形態では、第１点ｇ１から第６点ｇ６に到達するまで４回折り返しされており、３回以上の折り返し動作が確認されることから、ジェスチャ判定部３２は、所定のジェスチャがされたと判断する。

なお、Ｘ方向に沿って折り返す往復回数については、適宜定めることができる。また、本実施形態のように、予め定められた折り返し回数を超えた場合に所定のジェスチャが行われたと判断するようにすることに代えて、予め定められた折り返し回数通りの動作がされた場合に所定のジェスチャが行われたとしてもよい。

ここで、各点の座標は、ｇ１（Ｘｇ１，Ｙｇ１）、ｇ２（Ｘｇ２，Ｙｇ２）、ｇ３（Ｘｇ３，Ｙｇ３）、ｇ４（Ｘｇ４，Ｙｇ４）、ｇ５（Ｘｇ５，Ｙｇ５）、ｇ６（Ｘｇ６，Ｙｇ６）である。そして、これらの点のうち、最も上側に位置しているのは第１点ｇ１であり、最も右側に位置しているのは、第２点ｇ２であり、最も左側に位置しているは、第５点ｇ５である。そして、最も下側に位置しているのは、第６点ｇ６である。

ジェスチャ領域Ａｒｇはジェスチャ軌跡ｇの外接矩形であるので、左上に位置する第１角部Ａｒｇ１、左下に位置する第２角部Ａｒｇ２、右上に位置する第３角部Ａｒｇ３、右下に位置する第４角部Ａｒｇ４を有する矩形の領域となる。このとき、第１角部Ａｒｇ１の座標は（Ｘｇ５,Ｙｇ１）、第２角部Ａｒｇ２の座標は（Ｘｇ５,Ｙｇ６）、第３角部Ａｒｇ３の座標は（Ｘｇ２,Ｙｇ１）、第４角部Ａｒｇ４の座標は（Ｘｇ２,Ｙｇ６）である。

ウィンドウ抽出部３４は、ウィンドウ管理部３１の情報を参照し、ウィンドウＷ１よりも背面側に位置し、ウィンドウＷ１に隠れたウィンドウの集合を抽出する。すなわち、第１のウィンドウに相当するウィンドウ、本実施形態にあっては、ウィンドウＷ２からＷ４を抽出する。

算出部３５は、第１のウィンドウ毎、すなわちウィンドウＷ２からＷ４について、ジェスチャ領域Ａｒｇと重なった部分の面積である重なり面積Ｓ１を算出する。本実施形態では、後に説明するように重なり面積Ｓ１に基づいてウィンドウＷ２からＷ４の中から、ウィンドウＷ１よりも前面側に表示させるウィンドウを選定する。重なり面積Ｓ１は、この選定のためのパラメータの一例である。算出部３５は、この選定のためのパラメータとして、重なり面積Ｓ１に代えてジェスチャ領域ＡｒｇとウィンドウＷ２からＷ４の各ウィンドウとの距離を算出することもできる。

ウィンドウ選定部３６は、重なり面積Ｓ１に基づいて、第１のウィンドウに相当するウィンドウＷ２からＷ４のそれぞれについて指標値を算出し、第２のウィンドウに相当するＷ１よりも前面側に表示させるウィンドウを選定する。本実施形態におけるポインティングデバイス１０は、２人以上の作業者のジェスチャを同時に検知可能である。そこで、ウィンドウ選定部３６は、ウィンドウＷ２からＷ４をウィンドウＷ１よりも前面側に表示したときに、所定のジェスチャを行った第１作業者Ｕ１以外の第２作業者Ｕ２に対してウィンドウＷ２からＷ４のそれぞれが与える影響を示す指標値を算出する（例えば、図６参照）。ウィンドウ選定部３６は、算出した指標値と、予め設定された閾値とを比較し、その比較結果に基づいて第２のウィンドウに相当するウィンドウＷ１よりも前面側に表示させるウィンドウを選定する。基本的に、ウィンドウＷ２からＷ４のうち、ウィンドウＷ１よりも前面側に表示させることで、第２作業者の作業を邪魔することになる等、その影響が大きい場合、そのウィンドウは、ウィンドウＷ１の前面側に表示させない。なお、指標値については、種々変更することができる。他の指標値を用いる例については、後に他の実施形態として説明する。

表示変更部３７は、ウィンドウＷ２からＷ４のうち、ウィンドウ選定部３６によって選定されたウィンドウをウィンドウＷ１よりも前面側に表示させる。そして、ウィンドウ管理部３１が管理する各ウィンドウの位置、前後関係の情報を更新する。

つぎに、図５から図９を参照して、本実施形態のウィンドウ表示システム１００の動作の一例について説明する。図５はウィンドウ表示システム１００の制御の一例を示すフローチャートである。このフローチャートでは、図６において左側に示すウィンドウの表示状態を図６において右側に示すウィンドウの表示状態とする例について説明する。

図６は、第１作業者Ｕ１がディスプレイ１の左側に立ち、ウィンドウＷ１上に存在するオブジェクトｏｂ１に対して作業を行っており、第２作業者Ｕ２がディスプレイ１の右側に立ち、ウィンドウＷ１上のオブジェクトｏｂ２、ｏｂ３に対して作業を行っている。また、図６において左側に示す状態では、ウィンドウＷ２からＷ４のいずれもがウィンドウＷ１によって隠れた状態となっている。

このような状態において、第１作業者Ｕ１は、オブジェクトｏｂ１をウィンドウＷ３に移動させようと考えているが、ウィンドウＷ３はウィンドウＷ２と共にウィンドウＷ１に隠れており、オブジェクトｏｂ１を移動させることができない。

一方、第２作業者Ｕ２は、ウィンドウＷ４を表示させたいとは考えていない。従って、ウィンドウＷ４がウィンドウＷ１よりも前面側に移動すると、第２作業者Ｕ２の作業が邪魔される状態となる。

そこで、本実施形態では、図６の右側に示すように、第１作業者Ｕ１が作業しているディスプレイ１の左側に位置しているウィンドウＷ２及びＷ３のみをウィンドウＷ１よりも前面側に移動させて表示させる。すなわち、第２作業者Ｕ２が作業しているディスプレイ１右側に位置しているウィンドウＷ４はウィンドウＷ１に対してそのままの重なり状態を維持させる。このような表示状態に移行させるために、ウィンドウ表示システム１００によって、以下の制御が行われる。

なお、本実施形態におけるウィンドウＷ１からＷ４の位置及び寸法は、図７（Ａ）に示す通りである。

図５に示すフローチャートを参照すると、ステップｓ１では、ポインティングデバイス１０がドラッグ操作を検知したか否かを操作処理部３０が判断する。例えば、第１作業者Ｕ１がペン１１によって作業対象であるオブジェクトｏｂ１を押えた状態としたか否かが判断される。ステップｓ１で肯定判定（ＹＥＳ）をしたときは、ステップｓ２へ進む。ステップｓ１で否定判定（ＮＯ）をしたときは、ステップｓ１で肯定判定されるまで、ステップｓ１の工程を繰り返す。

ステップｓ２では、操作処理部３０は、ポインティングデバイス１０の動作に基づいてドラッグ対象オブジェクトの移動処理を行う。具体的に、ペン１１によって押えられた状態のオブジェクトｏｂ１をペン１１の操作に応じて移動させる。

ステップｓ２に引き続いて行われるステップｓ３では、ジェスチャ判定部３２は、ポインティングデバイス１０と協働してポインティングデバイス１０が所定のジェスチャを検知したか否かが判定される。例えば、第１作業者Ｕ１がペン１１でオブジェクトｏｂ１を押えた状態で、オブジェクトｏｂ１を表示領域１ａのＸ方向に沿って３回以上折り返して往復させ、ジグザグの軌跡を描いた場合には、肯定判定（ＹＥＳ）がされる。一方、このような所定のジェスチャが検知されなかった場合には、ステップｓ３で否定判定（ＮＯ）され、ステップｓ４へ進む。

ステップｓ４では、操作処理部３０は、ドラッグ操作が終了したか否かの判定をする。例えば、第１作業者Ｕ１がペン１１よってオブジェクトｏｂ１を押える動作を中止したときは、ドラッグ操作は終了したとして、肯定判定（ＹＥＳ）がされる。一方、第１作業者Ｕ１がペン１１によりオブジェクトｏｂ１を押える動作を継続しているときは、否定判定（ＮＯ）がされ、ステップｓ３からの工程が繰り返される。

ステップｓ４で肯定判定がされた場合は、ステップｓ５へ進む。ステップｓ５では、操作処理部３０によってドロップ操作がされる。すなわち、オブジェクトｏｂ１が、ペン１１によって抑えられる動作が解除された地点へドロップされる。但し、所定のジェスチャが検知されることなく、すなわち、ステップｓ３における否定判定を経てステップｓ４における肯定判定がされた場合、オブジェクトｏｂ１は、ウィンドウＷ１上にドロップされる。所定のジェスチャが検知されておらず、ウィンドウＷ１とウィンドウＷ２、Ｗ３との表示順は入れ替わっていないからである。

ステップｓ５の工程が終了した後は、一連の工程は、一旦、エンドとなり、再び、ステップｓ１からの工程が繰り返される。

ステップｓ３において、ジェスチャ判定部３２が肯定判定をした場合、ステップｓ６へ進む。ステップｓ６では、特定部３３がジェスチャ領域Ａｒｇを特定する。ジェスチャ領域Ａｒｇは、図４に示すように特定される。このように特定された本実施形態におけるジェスチャ領域Ａｒｇの位置及び寸法は、図７（Ｂ）に示すとおりである。

ステップｓ６に引き続いて行われるステップｓ７では、ウィンドウ抽出部３４によって、ウィンドウＷ１が他のウィンドウを隠しているか否かが判定される。ウィンドウの前後関係は、ウィンドウ管理部３１によって管理されている。このため、ウィンドウ抽出部３４は、ウィンドウ管理部３１に問い合わせ、ウィンドウの前後関係に関する情報に基づいて、ウィンドウＷ１が他のウィンドウを隠しているか否かを判定する。ここで、図８を参照すると、所定のジェスチャ前の表示重なり順は、ウィンドウＷ１が最前面に位置し、そのすぐ背面側（後側）にウィンドウＷ３とウィンドウＷ４が位置している。そして、ウィンドウＷ３の背面側にウィンドウＷ２が位置している。従って、ウィンドウＷ１がウィンドウＷ２からＷ４を隠した状態となっており、ウィンドウ抽出部３４は、ステップｓ７で肯定判定を行う。ステップｓ７で肯定判定が行われた場合は、ステップｓ８へ進む。一方、ステップｓ７で否定判定が行われた場合は、ステップｓ４へ進む。ステップｓ４及びステップｓ５については、上述の通りであるので、その詳細な説明は省略する。

ステップｓ８では、ウィンドウ抽出部３４がウィンドウＷ１によって隠れているウィンドウを抽出する。従ってウィンドウＷ２からウィンドウＷ４が抽出される。

ステップｓ８に引き続いて行われるステップｓ９では、算出部３５によって重なり面積Ｓ１が算出される。そして、ウィンドウ選定部３６によってこの重なり面積Ｓ１に基づく指標値として差分面積Ｓ２が算出される。

ここで、ウィンドウＷ２からＷ４とジェスチャ領域Ａｒｇとの位置関係及び重なり状態を示す図９（Ａ）を参照すると、ジェスチャ領域Ａｒｇは、ウィンドウＷ２、Ｗ３に重なっている。このような状態におけるジェスチャ領域Ａｒｇの面積Ｓ０、ウィンドウＷ２からＷ４のそれぞれとジェスチャ領域Ａｒｇとの重なり面積Ｓ１及び差分面積Ｓ２は図９（Ｂ）にまとめた通りである。

すなわち、ジェスチャ領域Ａｒｇの面積Ｓ０は、ジェスチャ領域Ａｒｇの幅及び高さから、Ｓ０＝２４０×７０＝１６８００である。このようなジェスチャ領域ＡｒｇとウィンドウＷ２とが重なっている領域は、図９（Ｂ）の重なり面積Ｓ１の欄においてハッチングを付して示した部分であり、重なり面積Ｓ１は、各部の座標に基づいてＳ１＝１２０×５０＝６０００である。そして、差分面積Ｓ２は、ジェスチャ領域Ａｒｇの面積Ｓ０−重なり面積Ｓ１であることからＳ２＝１０８００である。これは、概ね０．６４×Ｓ０に相当する。

同様に、ウィンドウＷ３については、Ｓ１＝１６０×７０＝１１２００であり、差分面積Ｓ２は、Ｓ２＝５６００である。これは、概ね０．３３×Ｓ０に相当する。

また、ウィンドウＷ４については、ジェスチャ領域Ａｒｇと重なっていないことから、重なり面積Ｓ１＝０、差分面積Ｓ２＝１６８００＝１×Ｓ０である。

ここで、本実施形態では、閾値として０．７×Ｓ０が採用されており、差分面積Ｓ２が閾値０．７×Ｓ０以上である場合には、第２作業者Ｕ２へ作業への影響が大きいとして、ウィンドウＷ４のウィンドウＷ１よりも前面側への移動が回避される。すなわち、第１作業者Ｕ１がオブジェクトｏｂ１の移動先として表示させたいウィンドウＷ３と、このウィンドウＷ３と重なっているウィンドウＷ２のみがウィンドウＷ１よりも前面側へ移動される。ウィンドウＷ３がウィンドウＷ１よりも前面側へ移動されることで、第１作業者Ｕ１はオブジェクトｏｂ１をウィンドウＷ３へドロップできるようになる。なお、閾値は適宜設定することができる。

本実施形態では、第１作業者Ｕ１が表示させたいウィンドウＷ３以外にウィンドウＷ２も表示されるが、ウィンドウＷ２が表示されても第２作業者Ｕ２が作業している領域から離れており、第２作業者Ｕ２に対する影響は少ない。

一方、ウィンドウＷ４は第２作業者Ｕ２が作業している領域に位置しているため、ウィンドウＷ１よりも前面側に位置することによる第２作業者Ｕ２への影響が大きい。このように、第２作業者Ｕ２への影響が大きい場合には、ウィンドウＷ１よりも前面側への移動は回避される。

ここで、重なり面積Ｓ１をそのまま指標値として採用してもよいが差分面積Ｓ２を指標値として採用しているのは、以下の理由による。上述のように、差分面積Ｓ２を採用すると、第２作業者Ｕ２への影響が大きい場合に指標値が大きいと指標値の大小関係と、第２作業者Ｕ２への影響の大小関係が一致する。一方、指標値として重なり面積Ｓ１を採用すると、重なり面積が小さいほど、第２作業者Ｕ２への影響が小さいことになり、指標値と、第２作業者Ｕ２への影響の大小関係が直観的に理解し難くなると考えられる。そこで、本実施形態では、差分面積Ｓ２を指標値として採用している。

なお、第１作業者Ｕ１は、表示させたいウィンドウＷ３がウィンドウＷ１に隠れている場合であっても、ウィンドウＷ３が表示領域１ａのどの辺りに位置しているか概ね把握していると考えられる。このため、ジェスチャ領域ＡｒｇがウィンドウＷ３と重なるように所定のジェスチャを容易に行うことができ、ウィンドウＷ３を適切に表示させることができると考えられる。一方、表示させたいウィンドウＷ３の位置がどの辺りであるのか、記憶が曖昧である場合は、ジェスチャ領域Ａｒｇが広くなるように所定のジェスチャを行えば良い。

ステップｓ９における指標値の算出後は、ステップｓ１０へ進む。ステップｓ１０では、ウィンドウ選定部３６によって閾値（＝０．７×Ｓ０）以下の指標値を有するウィンドウが選定される。すなわち、ウィンドウＷ２、Ｗ３が選定される。

ステップｓ１０では、表示変更部３７によってステップｓ９で選定されたウィンドウＷ２、Ｗ３がウィンドウＷ１よりも前面側に移動させられ、表示される。この結果、図８に示すように、ウィンドウＷ３が最前面となり、その後、背面側に向かって、ウィンドウＷ２、ウィンドウＷ１の順に重ねられた状態となり、ウィンドウＷ４が最背面に位置した状態となる。そして、この表示重なり順のデータがウィンドウ管理部３１において更新される。

ステップｓ１１の工程が終了した後は、ステップｓ４へ進む。ステップｓ４及びステップｓ５の工程は、上述しているため、その詳細な説明は省略する。

本明細書開示の発明によれば、複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウを選択して前面側に移動させて視認できるようにすることができる。

（第２実施形態）
つぎに、図１０から図１３を参照して、第２実施形態について説明する。第２実施形態が第１実施形態と異なる点は、指標値の設定の仕方である。すなわち、第１実施形態では、差分面積Ｓ２を指標値として採用しているが、第２実施形態では、ジェスチャ領域ＡｒｇとウィンドウＷ１よって隠れた状態のウィンドウとの距離を指標値として採用している。すなわち、第１実施形態と、第２実施形態とを比較すると、図５に示すフローチャートにおけるステップｓ９、ｓ１０における処理が異なる。ウィンドウ表示システム１００のハード構成や、ジェスチャ領域Ａｒｇを特定する方法については、第１実施形態と同様であるので、その詳細な説明は省略する。

図１０を参照すると、ディスプレイ１の表示領域１ａ内には、ウィンドウＷ１からＷ５が表示されている。各ウィンドウの位置及び寸法は、図１１（Ａ）に示す通りである。また、ジェスチャ領域Ａｒｇの位置及び寸法は、図１１（Ｂ）に示すとおりである。

図１２を参照すると、所定のジェスチャ前の表示重なり順は、ウィンドウＷ１が最前面に位置し、そのすぐ背面側（後側）にウィンドウＷ２とウィンドウＷ４が位置している。そして、ウィンドウＷ２の背面側にウィンドウＷ３が位置し、ウィンドウＷ４の背面側にウィンドウＷ５が位置している。

図１０を参照すると、ジェスチャ領域Ａｒｇは、ウィンドウＷ２、Ｗ３と重なっている。このため、図１３に示すように、ウィンドウＷ２の指標値と、ウィンドウＷ３の指標値は、いずれも０である。再び図１０を参照すると、ウィンドウＷ４とジェスチャ領域Ａｒｇとの距離は１７０であり、ウィンドウＷ５とジェスチャ領域Ａｒｇとの距離は７０である。このため、図１３に示すようにウィンドウＷ４に対する指標値は１７０であり、ウィンドウＷ５に対する指標値は７０である。ここで、各ウィンドウとジェスチャ領域Ａｒｇとの間の距離は、両者の対向する辺縁間の距離としている。例えば、ウィンドウＷ４とジェスチャ領域Ａｒｇとの間の距離は、Ｘ座標が３７０であるジェスチャ領域Ａｒｇの右端縁とＸ座標が５４０であるウィンドウＷ４の左端縁との距離である。同様に、ウィンドウＷ５とジェスチャ領域Ａｒｇとの間の距離は、Ｘ座標が３７０であるジェスチャ領域Ａｒｇの右端縁とＸ座標が４４０であるウィンドウＷ５の左端縁との距離である。なお、指標値とされる距離は、これに限定されることなく、例えば、ウィンドウの中心点とジェスチャ領域Ａｒｇの中心点との距離であってもよい。

図１３を参照すると、本実施形態では閾値として距離１６０が採用されている。この結果、図１２に示すように、所定のジェスチャ後の表示重なり順は、ウィンドウＷ２とウィンドウＷ５が最前面となり、ウィンドウＷ２の背面側にウィンドウＷ３が位置し、その背面側にウィンドウＷ１が位置している。そして、最背面となるウィンドウＷ１の背面側にウィンドウＷ４が位置している。このように、距離（指標値）が閾値１６０以上である場合には、第２作業者Ｕ２へ作業への影響が大きいとして、ウィンドウＷ１よりも前面側への移動が回避される。なお、閾値は適宜設定することができる。例えば、閾値１６０のように絶対距離ではなく、ジェスチャ領域Ａｒｇの幅、高さに基づく相対距離を用いてもよい。相対距離としては、例えば、ジェスチャ領域Ａｒｇの幅×０．５を閾値としてもよい。

このように指標値としてウィンドウとジェスチャ領域Ａｒｇとの距離を採用してもよい。この場合であっても、第１実施形態と同様に、複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウを選択して前面側に移動させて視認できるようにすることができる。

（第３実施形態）
つぎに、図１４から図１７を参照して、第３実施形態について説明する。第３実施形態が第１実施形態と異なる点は、指標値の設定の仕方である。すなわち、第１実施形態では、差分面積Ｓ２を指標値として採用しているが、第３実施形態では、差分面積Ｓ２から前面側に位置する他の第１のウィンドウと重なる部分の面積をさらに差し引いた残存領域面積Ｓ３を指標値として採用している。すなわち、第１実施形態と、第３実施形態とを比較すると、図５に示すフローチャートにおけるステップｓ９、ｓ１０における処理が異なる。ウィンドウ表示システム１００のハード構成や、ジェスチャ領域Ａｒｇを特定する方法については、第１実施形態と同様であるので、その詳細な説明は省略する。

図１４を参照すると、ディスプレイ１の表示領域１ａ内には、ウィンドウＷ１からＷ３及びウィンドウＷ６が表示されている。各ウィンドウの位置及び寸法は、図１５（Ａ）に示す通りである。また、ジェスチャ領域Ａｒｇの位置及び寸法は、図１５（Ｂ）に示すとおりである。

図１６を参照すると、所定のジェスチャ前の表示重なり順は、ウィンドウＷ１が最前面に位置し、そのすぐ背面側（後側）にウィンドウＷ２とウィンドウＷ６が位置している。そして、ウィンドウＷ２の背面側にウィンドウＷ３が位置している。

ここで、ウィンドウＷ２、Ｗ３及びＷ６とジェスチャ領域Ａｒｇとの位置関係及び重なり状態を示す図１７を参照すると、ジェスチャ領域Ａｒｇは、ウィンドウＷ２、Ｗ３に重なっている。

従って、ウィンドウＷ２における残存領域は、図１７のウィンドウ名：Ｗ２においてハッチングを付して示された領域であり、その面積である残存領域面積Ｓ３は、Ｓ３＝１６０×８０＝１２８００である。これは、概ね０．７６×Ｓ０に相当する。ウィンドウＷ２ついては、第１のウィンドウに属する他のウィンドウがウィンドウＷ２よりも前面側に位置していないことから、残存領域面積Ｓ３は、第１実施形態における差分面積Ｓ２と一致する。

ウィンドウＷ３における残存領域は、図１７のウィンドウ名：Ｗ３においてハッチングを付して示された領域であり、その面積である残存領域面積Ｓ３は、Ｓ３＝（５０×１５０）＋（１１０×１０）−（２０×６０）＝７４００である。ウィンドウＷ３は、これよりも前面側にウィンドウＷ２が位置しているため、ウィンドウＷ２と重なっている部分の面積も差し引く。残存領域面積Ｓ３＝７４００は、概ね０．４４×Ｓ０に相当する。なお、このように、他の第１のウィンドウと重なる部分の面積を差し引く措置が取られるのは、ジェスチャ領域Ａｒｇと重なっていることが前提となる。

ウィンドウＷ６は、ジェスチャ領域Ａｒｇと重なっていないだけでなく、第１のウィンドウに属する他のウィンドウと重なっていないことから、残存領域面積Ｓ３は、Ｓ３＝１６０×１５０＝２４０００である。これは、概ね１．１３×Ｓ０に相当する。なお、仮に、ウィンドウＷ６が他の第１のウィンドウと重なっている場合であっても、ウィンドウＷ６がジェスチャ領域Ａｒｇと重なっていない場合には、他の第１のウィンドウと重なっている部分の面積の差し引きは行われない。

ここで、本実施形態では、閾値として１×Ｓ０が採用されている。この結果、図１６に示すように、所定のジェスチャ後の表示重なり順は、ウィンドウＷ２が最前面となり、ウィンドウＷ２の背面側にウィンドウＷ３が位置し、その背面側にウィンドウＷ１が位置している。そして、最背面となるウィンドウＷ１の背面側にウィンドウＷ６が位置している。このように、残存領域面積Ｓ３が閾値１×Ｓ０以上である場合には、第２作業者Ｕ２へ作業への影響が大きいとして、ウィンドウＷ６のウィンドウＷ１よりも前面側への移動が回避される。換言すると、第１作業者Ｕ１がオブジェクトｏｂ１の移動先として表示させたいウィンドウＷ２と、このウィンドウＷ２と重なっているウィンドウＷ３のみがウィンドウＷ１よりも前面側へ移動される。ウィンドウＷ２がウィンドウＷ１よりも前面側へ移動されることで、第１作業者Ｕ１はオブジェクトｏｂ１をウィンドウＷ２へドロップできるようになる。なお、閾値は適宜設定することができる。

このように指標値として残存領域面積Ｓ３を採用してもよい。この場合であっても、第１実施形態と同様に、複数のウィンドウが重なることで一部のウィンドウが視認できない状態となっているときに、所望のウィンドウを選択して前面側に移動させて視認できるようにすることができる。

（第４実施形態）
つぎに、図１８（Ａ）から図２１を参照して、第４実施形態について説明する。第４実施形態が第１実施形態や第２実施形態と異なる点は、指標値の設定の仕方である。すなわち、第１実施形態では、差分面積Ｓ２を指標値として採用し、第２実施形態では、各ウィンドウとジェスチャ領域との距離を指標値として採用している。これに対し、第４実施形態では、ウィンドウとジェスチャ領域Ａｒｇとの距離が大きいほど第１のウィンドウの面積を大きく補正し、補正後の面積に基づいて算出した指標値を採用している。第１実施形態と、第４実施形態とを比較すると、図５に示すフローチャートにおけるステップｓ９、ｓ１０における処理が異なる。ウィンドウ表示システム１００のハード構成や、ジェスチャ領域Ａｒｇを特定する方法については、第１実施形態と同様であるので、その詳細な説明は省略する。

図１８（Ａ）は、ディスプレイ１の表示領域１ａ内に表示されるウィンドウＷ１、ウィンドウＷ２、Ｗ３、Ｗ７及びＷ８とジェスチャ領域Ａｒｇを示している。ウィンドウＷ１は、第２のウィンドウに相当し、第１のウィンドウに分類されるウィンドウＷ２、Ｗ３、Ｗ７及びＷ８を隠すことがある。ここで、ウィンドウＷ７、Ｗ８の幅×高さは、いずれも８０×８０である。またジェスチャ領域Ａｒｇの面積は、幅×高さ＝２７０×１９５＝５２６５０である。

図１８（Ａ）や図１９を参照すると、ジェスチャ領域Ａｒｇは、ウィンドウＷ２、Ｗ３に重なっている。このため、ジェスチャ領域ＡｒｇとウィンドウＷ２との距離、ジェスチャ領域ＡｒｇとウィンドウＷ３との距離は、いずれも０である。これに対し、ジェスチャ領域ＡｒｇとウィンドウＷ７との距離ＬＷ７は７０であり、ジェスチャ領域ＡｒｇとウィンドウＷ８との距離ＬＷ８は１７０である。

このような各ウィンドウとジェスチャ領域Ａｒｇとの位置関係及び寸法である場合、本実施形態では、各ウィンドウとジェスチャ領域Ａｒｇとの距離が大きいほど第１のウィンドウの面積を大きく補正する。そして、補正後の面積である拡大面積Ｓ４を指標値として採用する。

図１８（Ｂ）や図１９を参照すると、ウィンドウＷ７について、距離ＬＷ７を用いて実際の面積を拡大し、拡大面積Ｓ４を算出する。具体的に、ウィンドウＷ７を左右上下方向に距離ＬＷ７ずつ拡大し、拡大面積Ｓ４を算出する。ウィンドウＷ７についての拡大面積Ｓ４は、Ｓ４＝（７０＋８０＋７０）×（７０＋８０＋７０）＝４８４００となる。

同様に、ウィンドウＷ８について、距離ＬＷ８を用いて実際の面積を拡大し、拡大面積Ｓ４を算出する。具体的に、ウィンドウＷ８を左右上下方向に距離ＬＷ８ずつ拡大し、拡大面積Ｓ４を算出する。ウィンドウＷ８についての拡大面積Ｓ４は、Ｓ４＝（１７０＋８０＋１７０）×（１７０＋８０＋１７０）＝１７６４００となる。

ここで、本実施形態では、閾値として１×Ｓ０が採用されている。この結果、図１９に示すように、ジェスチャ領域Ａｒｇの面積５２６５０よりも小さい拡大面積Ｓ４を示すウィンドウＷ２、Ｗ３及びＷ７は、ウィンドウＷ１よりも前面側へ移動させられる。これに対し、ジェスチャ領域Ａｒｇの面積よりも大きい拡大面積Ｓ４を示すウィンドウＷ８のウィンドウＷ１よりも前面側への移動が回避される。

つぎに、図２０（Ａ）を参照すると、図１８（Ａ）と同様に、ディスプレイ１の表示領域１ａ内に表示されるウィンドウＷ１、ウィンドウＷ２、Ｗ３、Ｗ９及びＷ１０とジェスチャ領域Ａｒｇが示されている。ウィンドウＷ１は、第２のウィンドウに相当し、第１のウィンドウに分類されるウィンドウＷ２、Ｗ３、Ｗ９及びＷ１０を隠すことがある。ここで、ウィンドウ９の幅×高さは、ウィンドウＷ、Ｗ８と異なっており、幅×高さは、１６０×１６０とされている。また、ウィンドウＷ１０の幅×高さは、４０×４０とされている。ジェスチャ領域Ａｒｇの面積は、幅×高さ＝２７０×１９５＝５２６５０であり、図１８（Ａ）に示す例と同様である。

図２０（Ａ）や図２１を参照すると、ジェスチャ領域Ａｒｇは、ウィンドウＷ２、Ｗ３に重なっている。このため、ジェスチャ領域ＡｒｇとウィンドウＷ２との距離、ジェスチャ領域ＡｒｇとウィンドウＷ３との距離は、いずれも０である。この点は、図１８（Ａ）に示した例と同様である。これに対し、ジェスチャ領域ＡｒｇとウィンドウＷ９との距離ＬＷ９は４０であり、ジェスチャ領域ＡｒｇとウィンドウＷ１０との距離ＬＷ１０は６０である。

このような各ウィンドウとジェスチャ領域Ａｒｇとの位置関係及び寸法である場合、本実施形態では、各ウィンドウとジェスチャ領域Ａｒｇとの距離が大きいほど第１のウィンドウの面積を大きく補正する。そして、補正後の面積である拡大面積Ｓ４を指標値として採用する。

図２０（Ｂ）や図２１を参照すると、ウィンドウＷ９について、距離ＬＷ９を用いて実際の面積を拡大し、拡大面積Ｓ４を算出する。具体的に、ウィンドウＷ９を左右上下方向に距離ＬＷ９ずつ拡大し、拡大面積Ｓ４を算出する。ウィンドウＷ９についての拡大面積Ｓ４は、Ｓ４＝（４０＋１６０＋４０）×（４０＋１６０＋４０）＝５７６００となる。

同様に、ウィンドウＷ１０について、距離ＬＷ１０を用いて実際の面積を拡大し、拡大面積Ｓ４を算出する。具体的に、ウィンドウＷ１０を左右上下方向に距離ＬＷ１０ずつ拡大し、拡大面積Ｓ４を算出する。ウィンドウＷ１０についての拡大面積Ｓ４は、Ｓ４＝（６０＋４０＋６０）×（６０＋４０＋６０）＝２５６００となる。

本実施形態では、閾値として１×Ｓ０が採用されている。この結果、図２１に示すように、ジェスチャ領域Ａｒｇの面積５２６５０よりも小さい拡大面積Ｓ４を示すウィンドウＷ２、Ｗ３及びＷ１０は、ウィンドウＷ１よりも前面側へ移動させられる。これに対し、ジェスチャ領域Ａｒｇの面積よりも大きい拡大面積Ｓ４を示すウィンドウＷ９のウィンドウＷ１よりも前面側への移動が回避される。

ここで、ウィンドウＷ９、Ｗ１０の移動をウィンドウＷ７、Ｗ８の移動と比較しつつ説明する。ウィンドウＷ７とジェスチャ領域Ａｒｇとの距離ＬＷ７は、ウィンドウＷ８とジェスチャ領域Ａｒｇとの距離ＬＷ８と比較して小さい。また、ウィンドウＷ７の拡大面積Ｓ４は、ウィンドウＷ８の拡大面積Ｓ４と比較して小さい。すなわち、ウィンドウＷ７とウィンドウＷ８を比較した場合、距離を指標値とした場合の大小関係と、拡大面積Ｓ４を指標値とした場合の大小関係は一致している。

これに対しウィンドウＷ９とウィンドウＷ１０では、この関係が逆転する。具体的に、ウィンドウＷ９とジェスチャ領域Ａｒｇとの距離ＬＷ９は、ウィンドウＷ１０とジェスチャ領域Ａｒｇとの距離ＬＷ１０と比較して小さい。一方、ウィンドウＷ９の拡大面積Ｓ４は、ウィンドウＷ１０の拡大面積Ｓ４と比較して大きい。すなわち、ウィンドウＷ９とウィンドウＷ１０を比較した場合、距離を指標値とした場合の大小関係と、拡大面積Ｓ４を指標値とした場合の大小関係は異なるものとなる。

仮に、ウィンドウＷ９について、距離ＬＷ９のみに基く指標値とした場合、ウィンドウＷ９はウィンドウＷ１よりも前面側に移動することが考えられる。しかしながら、ウィンドウＷ９は、幅×高さが大きく、第２作業者Ｕ２への影響が大きいと考えられ、ウィンドウＷ１よりも前面側に移動させると、第２作業者Ｕ２の作業の邪魔となる可能性が高い。

このように、本実施形態によれば、ウィンドウの寸法を考慮してウィンドウＷ１の前面側へ移動させるか否かの判断をすることができる。

（その他の実施形態）

第１実施形態から第４実施形態では、図４を用いて説明したように、ジェスチャ領域Ａｒｇは、ジェスチャ軌跡ｇの外接矩形としている。これに対し、図２２に示すように、Ｙ方向に沿って延びる辺縁をジェスチャ軌跡ｇに基づいて規定すると共に、Ｘ方向に沿って延びる辺縁を表示領域１ａの上端縁１ａ１、下端縁１ａ２によって規定してもよい。

また、第１実施形態から第４実施形態では、ペン１１によって操作するタッチパネル１２を有するポインティングデバイス１０を備えたウィンドウ表示システム１００としているが、図２３に示すようなウィンドウ表示システム２００としてもよい。ウィンドウ表示システム２００は、ポインティングデバイス１０に代えてカメラ１６を備える。また、これに伴って、ウィンドウ表示システム１００のディスプレイ１に代えてプロジェクタ１５を備えている。このようなウィンドウ表示システム２００は、プロジェクタ１５の表示領域上での作業者の動作をカメラ１６で撮影し、その動作を分析することで所望の操作を実現することができる。

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体（ただし、搬送波は除く）に記録しておくことができる。

プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。

プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。

以上本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。

なお、以上の実施形態の説明に関して、更に以下の付記を開示する。
（付記１）
複数のウィンドウを表示可能な表示領域を有する表示装置と、前記表示領域に対してジェスチャが行われたことを検知するジェスチャ検知装置と、ジェスチャに応じて前記表示装置における前記ウィンドウの表示状態を制御する制御装置と、を備え、
前記制御装置は、前記表示装置において、複数の第１のウィンドウが第２のウィンドウによって隠された状態となっているときに、前記ジェスチャ検知装置が検知したジェスチャが所定のジェスチャであるか否かを判定するジェスチャ判定部と、
前記所定のジェスチャが行われたジェスチャ領域を特定する特定部と、
前記第１のウィンドウ毎に、前記ジェスチャ領域と前記第１のウィンドウとが重なった部分の面積である重なり面積又は前記ジェスチャ領域と前記第１のウィンドウとの距離を算出する算出部と、
前記重なり面積又は前記距離に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定するウィンドウ選定部と、
前記ウィンドウ選定部によって選定された前記第１のウィンドウを前記第２のウィンドウよりも前面側に表示させる表示変更部と、
を備えたウィンドウ表示システム。
（付記２）
前記ジェスチャ検知装置は、２人以上の作業者のジェスチャを同時に検知可能であり、
前記ウィンドウ選定部は、前記所定のジェスチャに応じて前記第１のウィンドウそれぞれを前記第２のウィンドウよりも前面側に表示したときに、前記所定のジェスチャを行った作業者以外の作業者に対して前記第１のウィンドウそれぞれが与える影響を示す指標値を、前記重なり面積又は前記距離に基づいて前記複数の第１のウィンドウ毎に算出し、前記指標値に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する付記１に記載のウィンドウ表示システム。
（付記３）
前記ウィンドウ選定部は、前記重なり面積に基づいて前記指標値を算出する際に、前記ジェスチャ領域の面積から前記重なり面積を差し引いた差分面積を前記指標値として算出する付記２に記載のウィンドウ表示システム。
（付記４）
前記ウィンドウ選定部は、前記重なり面積に基づいて前記指標値を算出する際に、前面側に位置する他の前記第１のウィンドウと重なる部分の面積をさらに差し引いて前記指標値を算出する付記３に記載のウィンドウ表示システム。
（付記５）
前記ウィンドウ選定部は、前記距離に基づいて前記指標値を算出する際に、前記距離が大きいほど前記第１のウィンドウの面積を大きく補正し、補正後の面積に基づいて前記指標値を算出する付記２に記載のウィンドウ表示システム。
（付記６）
表示装置が有する表示領域において複数の第１のウィンドウが第２のウィンドウによって隠された状態となっているときに、前記表示領域に対して行われた所定のジェスチャを検知すると共に、検知した前記所定のジェスチャが行われたジェスチャ領域を特定する工程と、
前記第１のウィンドウ毎に、前記ジェスチャ領域と前記第１のウィンドウとが重なった部分の面積である重なり面積又は前記ジェスチャ領域と前記第１のウィンドウとの距離を算出する工程と、
前記重なり面積又は前記距離に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する工程と、
ウィンドウ選定部によって選定された前記第１のウィンドウを前記第２のウィンドウよりも前面側に表示させる工程と、
を含むウィンドウの表示制御方法。
（付記７）
前記表示領域に対し、２人以上の作業者がジェスチャを行っているときに、前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する工程において、前記所定のジェスチャに応じて前記第１のウィンドウそれぞれを前記第２のウィンドウよりも前面側に表示したときに、前記所定のジェスチャを行った作業者以外の作業者に対して前記第１のウィンドウそれぞれが与える影響を示す指標値を、前記重なり面積又は前記距離に基づいて前記複数の第１のウィンドウ毎に算出し、前記指標値に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する付記６に記載のウィンドウの表示制御方法。
（付記８）
前記重なり面積に基づいて前記指標値を算出する際に、前記ジェスチャ領域の面積から前記重なり面積を差し引いた差分面積を前記指標値として算出する付記７に記載のウィンドウの表示制御方法。
（付記９）
前記重なり面積に基づいて前記指標値を算出する際に、前面側に位置する他の前記第１のウィンドウと重なる部分の面積をさらに差し引いて前記指標値を算出する付記８に記載のウィンドウの表示制御方法。
（付記１０）
前記距離に基づいて前記指標値を算出する際に、前記距離が大きいほど前記第１のウィンドウの面積を大きく補正し、補正後の面積に基づいて前記指標値を算出する付記７に記載のウィンドウの表示制御方法。

１ 表示装置
１ａ ディスプレイ（表示領域）
１０ ポインティングデバイス（ジェスチャ検知装置）
１１ ペン
１５ プロジェクタ
１６ カメラ
２０ 制御装置
３１ ウィンドウ管理部
３２ ジェスチャ判定部
３３ 特定部
３４ ウィンドウ抽出部
３５ 算出部
３６ ウィンドウ選定部
３７ 表示変更部
１００、２００ ウィンドウ表示システム
Ｗ１ ウィンドウ（第２のウィンドウ）
Ｗ２からＷ１０（第１のウィンドウ）
Ａｒｇ ジェスチャ領域

Claims (6)

1. 複数のウィンドウを表示可能な表示領域を有する表示装置と、前記表示領域に対してジェスチャが行われたことを検知するジェスチャ検知装置と、ジェスチャに応じて前記表示装置における前記ウィンドウの表示状態を制御する制御装置と、を備え、
   前記制御装置は、前記表示装置において、複数の第１のウィンドウが第２のウィンドウによって隠された状態となっているときに、前記ジェスチャ検知装置が検知したジェスチャが所定のジェスチャであるか否かを判定するジェスチャ判定部と、
   前記所定のジェスチャが行われたジェスチャ領域を特定する特定部と、
   前記第１のウィンドウ毎に、前記ジェスチャ領域と前記第１のウィンドウとが重なった部分の面積である重なり面積又は前記ジェスチャ領域と前記第１のウィンドウとの距離を算出する算出部と、
   前記重なり面積又は前記距離に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定するウィンドウ選定部と、
   前記ウィンドウ選定部によって選定された前記第１のウィンドウを前記第２のウィンドウよりも前面側に表示させる表示変更部と、
   を備えたウィンドウ表示システム。
2. 前記ジェスチャ検知装置は、２人以上の作業者のジェスチャを同時に検知可能であり、
   前記ウィンドウ選定部は、前記所定のジェスチャに応じて前記第１のウィンドウそれぞれを前記第２のウィンドウよりも前面側に表示したときに、前記所定のジェスチャを行った作業者以外の作業者に対して前記第１のウィンドウそれぞれが与える影響を示す指標値を、前記重なり面積又は前記距離に基づいて前記複数の第１のウィンドウ毎に算出し、前記指標値に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する請求項１に記載のウィンドウ表示システム。
3. 前記ウィンドウ選定部は、前記重なり面積に基づいて前記指標値を算出する際に、前記ジェスチャ領域の面積から前記重なり面積を差し引いた差分面積を前記指標値として算出する請求項２に記載のウィンドウ表示システム。
4. 前記ウィンドウ選定部は、前記重なり面積に基づいて前記指標値を算出する際に、前面側に位置する他の前記第１のウィンドウと重なる部分の面積をさらに差し引いて前記指標値を算出する請求項３に記載のウィンドウ表示システム。
5. 前記ウィンドウ選定部は、前記距離に基づいて前記指標値を算出する際に、前記距離が大きいほど前記第１のウィンドウの面積を大きく補正し、補正後の面積に基づいて前記指標値を算出する請求項２に記載のウィンドウ表示システム。
6. 表示装置が有する表示領域において複数の第１のウィンドウが第２のウィンドウによって隠された状態となっているときに、前記表示領域に対して行われた所定のジェスチャを検知すると共に、検知した前記所定のジェスチャが行われたジェスチャ領域を特定する工程と、
   前記第１のウィンドウ毎に、前記ジェスチャ領域と前記第１のウィンドウとが重なった部分の面積である重なり面積又は前記ジェスチャ領域と前記第１のウィンドウとの距離を算出する工程と、
   前記重なり面積又は前記距離に基づいて前記第２のウィンドウよりも前面側に表示させる前記第１のウィンドウを選定する工程と、
   ウィンドウ選定部によって選定された前記第１のウィンドウを前記第２のウィンドウよりも前面側に表示させる工程と、
   を含むウィンドウの表示制御方法。

Images