JP4231413B2 - Ｇｕｉのためのディスプレイを提供する方法 - Google Patents

Description

本発明は、グラフィカルユーザインターレース（ＧＵＩ）用のディスプレイを提供する方法、並びに該方法のためのコンピュータプログラム、コンピュータ読み出し可能な記憶媒体、及び装置に関する。特に、本発明は、ポインタが、非接触入力装置の感知領域の面内のユーザの手の位置に対応する位置でディスプレイ上に表示されるようなＧＵＩ用ディスプレイの提供に関する。

非接触入力装置はよく知られている。例えば、米国特許出願公開第２００２／００００９７７Ａ１号は、三次元対話型表示システムを記載しており、該システムは、スクリーン表面上の透明シールド層上に形成された透明「キャパシフレクタ」カメラを有し、該カメラは、該スクリーン表面の近傍に侵入するプローブ又指のような物体を検知することができる。特に、図１１Ａ及び１１Ｂ（これらはワードプロセッサプログラムにおける基本的カーソル運動を作用させるステップを示しているフロー図である）、及び明細書の対応する段落００５７−００５９は、プローブ又は指の水平方向の運動が、カーシブ即ちポインタに該プローブを実時間で追従させると同時に該ポインタが横切る語、絵及び数式を強調表示させると記載している。前記カーシブの存在は、プローブ又は指の存在に対応しており、点滅して、初めは活発に表示されるカーシブによって示される。

米国特許第６０２５７２６号は、静電容量式感知に対する代替手段を記載しており、非接触感知領域を提供するために、電界感知が使用されている。

本発明によれば、前述のタイプのＧＵＩ用のディスプレイを設ける方法が提供され、該方法は更に、ユーザの手と、感知領域内若しくはこの近傍に位置された基準点、又は前記第１面に平行であって、前記感知領域に渡って若しくは隣接して位置される基準面の何れかとの間の距離についての指示を、該ディスプレイ上に表示するステップを有しており、及び／又は、該方法は前記ポインタを操作する目的によるユーザの手の適当なジェスチャについて、ディスプレイ上に指示を表示する。

前者の場合、前記方法は、ユーザの手が前記基準から所定の距離を越えることに応答して指示を取り除くステップを更に含むことができ、この所定の距離は、恐らく、感知領域の境界に対応し、非接触入力装置がユーザの手の運動を検知することができなくなり、ポインタを操作することができない。更に、前記指示は、ユーザの手と前記基準との間の距離に比例するサイズを有するグラフィックであり得る。

どちらの場合にも、前記指示はポインタの周囲又はこれに隣接して位置され、随意にポインタと動くグラフィックであり得る。

本発明者は、非接触入力装置がユーザの手の位置を追跡できるような感度が、前記感知領域の最も感度の高い部分からのユーザの手の距離、及びジェスチャ即ちユーザによって採用された手の形状にも依存して変化することを理解した。本発明者は、ユーザが前記スクリーンを指差すような不適切なジェスチャを採用した場合、ユーザはポインタがユーザの指の端にあるように期待するかもしれないが、方向、サイズ及びユーザの手のジェスチャに関する不明瞭さを解消することの困難さのような感知技術の実施上における限界により、そうにはならずに、これが該ユーザによって不正確であると知覚されるとも理解した。前記感知領域内又はこの隣接に位置された基準に対するユーザの手との距離について、ディスプレイ上に指示を設けることによって、米国特許出願公開第２００２／００００９７７Ａ１号における単なる存在とは対照的に、ユーザは、如何なる所与の手の位置についても感度の指示を供給される。同様に、ポインタを操作する目的のためにユーザの手の適切なジェスチャについてディスプレイ上に指示を設けることで、該ユーザは不適切なジェスチャをより採用しなくなる。

本発明は、添付図面を参照して、例示としてのみ説明される。

図１は、本発明によって、一体型非接触入力装置１２を有する従来型フラットパネルディスプレイ１１のためのスクリーンディスプレイを生成するように構成されたコンピュータ１０の斜視図であって、前記フラットパネルディスプレイ１１には、前記コンピュータが接続されている。非接触入力装置は、４つのセンサ１２ａ、１２ｂ、１２ｃ、１２ｄを有し、１つずつがディスプレイパネルの四隅のそれぞれに位置され、感知領域を該ディスプレイの前面に設けている。ユーザは、前記ディスプレイ上に表示されたポインタ１３を、ディスプレイに平行である感知領域に渡る面内での手の運動によって操作することができる。前記ポインタは、矢印で示されているが、勿論、ディスプレイ上の点を示すために適切である他のグラフィックの全てが、使用され得る。非接触入力装置がユーザの手の位置を測定することができる正確さは、前記感知領域の最適部からのユーザの手の距離、及びジェスチャ即ちユーザが採用した手の形状にも依存して変化する。

本発明によれば、及び図２を参照して、手１５の画像は、ユーザに、前記ポインタを操作する目的でのユーザの手の最適なジェスチャを思い出させるために、ポインタ１３に隣接して表示されている。これは、ユーザが彼らの手を特定の様式に保持することを促進するので、非接触入力装置がユーザの手の位置を測定することができる正確さを向上させる。前記手１５の画像は、ユーザがポインタを操作するのを継続的に支援するために、ポインタと一緒に動く。

更に、本発明によれば、且つ、図３に示されているように、前記手の画像のサイズは、ユーザの手とディスプレイとの間の距離に比例して変化する。

ユーザの手が前記ディスプレイからより遠くへ動くとき、図３に示されているように、ユーザに、手の位置とポインタの位置との間の不正確な関係が増大していることを知らせるために、前記手の画像は拡大される。これは、正確で、従って予想がつくようなポインタとの対話が必要とされる場合に、ユーザが彼らの手をスクリーンに対してより近くに保つように促進する。逆に、高速で及びあまり正確ではない対話が必要とされるとき、ユーザは彼らの手を前記スクリーンからより遠くに保持するのが適切であるとわかるかもしれない。

前記手の画像に対する代替手段として、如何なる他の適切なグラフィックも使用されることができ、また、このような画像又はグラフィックは、ポインタと共に動く必要はない。例えば、スクリーンの角に位置されたサイズを変化させる簡単な円は、該ディスプレイからのユーザの手の距離についての指示を供給することができる。

ユーザの手がディスプレイからより離れて動くことに応答してサイズが変化する手の画像に対しての代替手段として、前記画像は、代替的に、手／ディスプレイ分離の増加において強度が減衰し、又は恐らくは、臨界的な距離において完全に消滅する程度まで減衰する。更に、非接触入力装置はディスプレイと一体型である必要はなく、ディスプレイから遠くに位置されることができ、例えば、コンピュータに隣接する水平表面上に位置され、ことによると、ユーザに仮想マウスを制御する感覚を与えるかもしれない。

ユーザは、ポインタをディスプレイ上の点上に位置させ、手を所定時間に渡って静止状態に保つか、代替的には、ディスプレイを素早くなで打つ動きをすることによって、ディスプレイ上の該点を選択することができる。

図４は、ディスプレイ１１の上縁の概略図を示している。検知感度の例示的なラインは、２つのセンサ１２ａ及び１２ｂの間に示されている。このようなラインは、電界感知技術が、前記感知領域内のユーザの手の位置を測定するために使用される場合に存在し得る。前記場のこの簡略化した二次元表示においてさえ、ディスプレイに近いライン４１がほぼ直線（三次元で考えたときは平面）であり、均一な離間であることがわかる。この領域は、ディスプレイからより遠い領域よりもより正確な位置感知を供給する。より大きい距離においては、ライン４２はより直線ではなく、不規則な間隔にある。これは、ユーザの手の位置についてより正確でない判断をもたらす。このことから、ユーザは、ポインタを正確に操作することが要求されるとき、手をディスプレイに対してより近くに保持することが好ましいということがわかる。

このようなコンピュータシステムにおける本発明による方法の実施は、ハードウェアによって、ソフトウェア（コンピュータ上にある又は記憶媒体上に記憶されているかの何れか）が適切なコンピュータのプログラミング及び構成配置されることによって、又は両方の組み合わせによって容易に達成することができる。当然、このようなプログラミング又は構成配置はよく知られており、当業者によって、過度の負担なしに達成されるであろう。本発明の教示内容は、非接触入力装置を有する他のタイプの装置にも同様にもあてはまり、上述のコンピュータシステムにのみ該当するわけではないことは、当業者によって更に理解されるだろう。

図１は、一体型非接触入力装置を有すると共に、コンピュータが接続された従来型フラットパネルディスプレイのためのスクリーンディスプレイを、本発明によって生成するように構成されたコンピュータの斜視図である。 図２は、図１の前記コンピュータによって生成されたスクリーンディスプレイを示している。 図３は、図１の前記コンピュータによって生成されたスクリーンディスプレイを示している。 図４は、一体型非接触装置を有する前記フラットパネルディスプレイの断面図であり、ディスプレイ上に据え付けられた非接触入力装置についての検出感度の例示的なラインを示している。

Claims (6)

1. Ｇ Ｕ Ｉ 用のディスプレイを提供する方法であって、
   ポインタを、非接触入力装置の感知領域の面内のユーザの手の位置に対応する位置において、前記ディスプレイ上に表示するステップ、及び
   前記ユーザの手と、前記感知領域内若しくはこれに隣接して位置された基準点、又は、前記第１面に平行であると共に、前記感知領域に渡って若しくは隣接して位置された基準面の何れかとの間の距離についての指示を供給するグラフィックを前記ディスプレイ上に表示し、前記グラフィックは、前記ディスプレイ上に表示するポインタに加えて表示されるグラフィックであるステップ、
   を有する方法。
2. 前記ユーザの手が前記基準から所定の距離を越えることに応答して、前記グラフィックを取り除くステップを更に有する請求項１に記載の方法。
3. 前記グラフィックが前記ユーザの手と前記基準との間の前記距離に比例するサイズである請求項１又は２に記載の方法。
4. 前記ディスプレイが前記非接触入力装置と一体型である請求項１又は２に記載の方法。
5. 前記加えて表示されるグラフィックが、前記ポインタの周囲又はこれに隣接して位置されたグラフィックである請求項１に記載の方法。
6. 前記グラフィックが前記ポインタと一緒に動く請求項５に記載の方法。

Images