JP6447179B2 - 情報入力システムおよび入力装置 - Google Patents

Description

本発明は、情報入力システムおよび入力装置に関する。

従来、表示パネル等の表示手段に表示される画像に対して、ジェスチャ（動作）等により非接触で操作を実行する情報入力システムが存在する。
特許文献１には、手などのジェスチャーパターンにより入力を行うユーザ認証装置が開示されている。特許文献１のユーザ認証装置では、連続を表すジェスチャーパターンを定義し、連続ジェスチャーパターンの入力により、ひとつ前に入力された値と同じ値が繰り返されたと判断することにして、入力行程数を削減することが開示されている。

特開２００９−２０６９１号公報

ところで、表示手段に表示される画像をジェスチャ（動作）により非接触で操作する情報入力システムでは、表示手段に複数ページのうちの一のページの画像が表示されている場合に、表示されるページを一方向に連続して切り替える場合、切り替えを示すジェスチャを繰り返し実行する。同じジェスチャを繰り返し行う場合には、通常、ジェスチャが１回終了する毎に、ジェスチャを行う手指等を元の位置に戻す動作を行う必要がある。この動作が、表示手段に表示される画像を一方向とは異なる方向に切り替えるジェスチャであると誤認識され、操作者の意図とは異なる方向に画像が切り替えられるおそれがある。

本発明は、操作者の動作に応じて画像を変化させる方向を変更しない場合と比較して、操作者の意図に沿わない画像の変化を低減することを目的とする。

請求項１に係る発明は、画像を表示する表示手段と、前記画像を操作する操作者の動作を検知する検知手段と、前記検知手段に検知された操作者の動作が、第１方向に動く第１動作である場合に、前記表示手段に表示される画像を当該第１方向に変化させる一方で、当該第１動作に続く当該第１方向とは異なる第２方向に動く動作に応じて当該画像を当該第２方向に変化させることはせず、操作者の動作が当該第１動作とは異なり且つ当該第１方向に動く第２動作である場合に、当該表示手段に表示される画像を当該第１方向に変化させ、当該第２動作に続く当該第２方向に動く動作に応じて当該画像を当該第２方向に変化させる表示制御手段とを備える情報入力システムである。
請求項２に係る発明は、前記表示制御手段は、前記検知手段に検知された動作が前記第１動作である場合に、当該第１動作が示す方向を前記第１方向とすることを特徴とする請求項１に記載の情報入力システムである。
請求項３に係る発明は、前記表示制御手段は、前記検知手段にて検知された動作の種類に応じて、前記表示手段に画像を変化させることが可能な方向を示す方向指示画像を表示させることを特徴とする請求項１または２に記載の情報入力システムである。
請求項４に係る発明は、前記検知手段は、操作者の動作として操作者の手指の状態を検知し、前記表示制御手段は、前記検知手段により検知された操作者の手指の状態の違いに応じて、前記第１動作および前記第２動作を判別することを特徴とする請求項１乃至３のいずれか１項に記載の情報入力システムである。
請求項５に係る発明は、表示手段に表示される画像を操作する操作者の動作を検知する検知手段と、前記検知手段に検知された動作が、第１方向に動く第１動作である場合に、前記表示手段に表示される画像を当該第１方向に変化させる一方で、当該第１動作に続く当該第１方向とは異なる第２方向に動く動作に応じて当該画像を当該第２方向に変化させることはせず、当該検知手段に検知された動作が当該第１動作とは異なり且つ当該第１方向に動く第２動作である場合に、当該表示手段に表示される画像を当該第１方向に変化させ、当該第２動作に続く当該第２方向に動く動作に応じて当該画像を当該第２方向に変化させる表示制御手段とを備える入力装置である。

請求項１に係る発明によれば、操作者の動作に応じて画像を変化させる方向を変更しない場合と比較して、操作者の意図に沿わない画像の変化を低減することができる。
請求項２に係る発明によれば、第１動作が示す方向を第１方向としない場合と比較して、操作者の意図に応じて画像を変化させることが可能になる。
請求項３に係る発明によれば、操作者に画像を変化させることが可能な方向を示唆することが可能になる。
請求項４に係る発明によれば、手指の状態に応じて動作を判別しない場合と比較して、操作性を向上させることが可能になる。
請求項５に係る発明によれば、操作者の動作に応じて画像を変化させる方向を変更しない場合と比較して、操作者の意図に沿わない画像の変化を低減することができる。

本実施の形態が適用される情報入力システムの全体構成を示した図である。 本実施の形態が適用される情報入力システムの機能構成を示した図である。 本実施の形態の制御部により行われる制御の手順を示したフローチャートである。 ユーザにより一方向モードを示すジェスチャがなされた場合の表示パネルの状態を示した図である。 ユーザにより双方向モードを示すジェスチャがなされた場合の表示パネルの状態を示した図である。 （ａ）〜（ｂ）は、一方向モードまたは双方向モードを認識するためのジェスチャの他の例を示した図である。 （ａ）〜（ｂ）は、一方向モードまたは双方向モードを認識するためのジェスチャの他の例を示した図である。 従来の情報入力システムにおいて生じうる課題について説明する図である。

以下、添付図面を参照して、本発明における実施の形態について詳細に説明する。
図１は、本実施の形態が適用される情報入力システム１の全体構成を示した図である。図１に示すように、情報入力システム１は、画像を表示する表示パネル２と、ユーザ（操作者）のジェスチャ（動作）による情報入力を受け付ける入力装置３とを備えている。本実施の形態の情報入力システム１では、入力装置３の後述する検知センサ４（図２参照）によりユーザのジェスチャ（動作）が検知され、検知されたジェスチャに基づいて、表示パネル２に表示される画像が操作される。この例では、ユーザの手指Ｈによるジェスチャを検知され、手指Ｈのジェスチャに基づいて、表示パネル２に表示される画像が操作される。

本実施の形態の情報入力システム１は、例えば情報入力システム１に接続された外部装置（図示せず）の操作等に用いられ、表示パネル２には、外部装置の操作画面等が表示される。このような外部装置としては、例えば画像形成装置、画像読取装置、ＦＡＸ等を備える複合機等が挙げられる。そして、本実施の形態の情報入力システム１では、ユーザのジェスチャにより、表示パネル２に表示される操作画面に対する操作が非接触で行われるようになっている。
このように、本実施の形態の情報入力システム１は、非接触による外部装置の操作が可能であるため、医療現場や飲食店、食品製造工場等のような衛生的な環境が求められる場所において特に好適に用いられる。

表示パネル２は、表示手段の一例であり、後述する制御部５（図２参照）からの情報に基づき、表示画面２１に画像を表示する。表示パネル２は、例えば液晶ディスプレイ、プラズマディスプレイ等により構成される。

続いて、本実施の形態の入力装置３の機能について説明する。図２は、本実施の形態が適用される情報入力システム１の機能構成を示した図である。
図２に示すように、本実施の形態の入力装置３は、ユーザによるジェスチャ（動作）を検知する検知手段の一例としての検知センサ４と、検知センサ４による検知結果に基づいて表示パネル２に表示される画像の制御を行う表示制御手段の一例としての制御部５とを備えている。

検知センサ４は、例えば、ユーザの体の予め定めた部位やユーザが所持する道具等の位置を三次元で検知する。検知センサ４は、ユーザの体の部位やユーザが所持する道具等の位置を検知可能であれば特に限定されないが、例えば赤外線センサ、レーザセンサ等を用いることができる。
詳細については後述するが、本実施の形態の情報入力システム１では、検知センサ４は、ユーザの手指の位置、移動方向、状態（形状）等を検知する。

制御部５は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）により構成されている。ＲＯＭは、ＣＰＵにより実行される制御プログラムを記憶している。ＣＰＵは、ＲＯＭに記憶されている制御プログラムを読み出し、ＲＡＭを作業エリアにして制御プログラムを実行する。

本実施の形態の制御部５は、図２に示すように、検知センサ４に検知されたユーザによるジェスチャに関する情報を取得するジェスチャ受付部５１と、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づきユーザによるジェスチャを判定するジェスチャ判定部５２と、ジェスチャ判定部５２による判定結果に基づいて表示パネル２に表示される画像を制御する描画制御部５３と、を備えている。

ジェスチャ判定部５２は、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づき、ジェスチャの種類を認識するジェスチャ認識部５２１を備えている。
ジェスチャ認識部５２１は、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づき、ユーザによるジェスチャが表示パネル２に表示される画像の切り替えまたは移動を行うジェスチャであるか、またはその他の処理を行うジェスチャであるかを認識する。
表示パネル２に表示される画像を操作するジェスチャとしては、例えば、画像の切り替えまたは移動を行うジェスチャの他、画像を回転させるジェスチャ、画像の一部の領域を選択するジェスチャ、画像を拡大・縮小するジェスチャ等の複数のジェスチャが存在する。ジェスチャ認識部５２１は、ジェスチャ受付部５１にて受け付けたユーザの手指の位置、移動方向、状態等のジェスチャに関する情報に基づいて、ユーザによるジェスチャが、予め定められた画像の切り替えまたは移動を行うためのジェスチャであるか否かを認識する。

ここで、画像の切り替えとは、例えば複数ページからなる画像データにおける一のページの画像が表示パネル２に表示されている場合に、表示パネル２に表示される画像を当該ページの前ページまたは後ページの画像に切り替えることをいう。また、画像の移動とは、写真や地図等のような画像の一部の領域が表示パネル２に表示されている場合に、表示パネル２に表示される表示範囲を移動させることをいう。なお、本実施の形態では、表示パネル２に表示される画像の切り替えまたは移動を行うことを、画像を表示パネル２の面方向に変化させる、または、単に画像を変化させると称することがある。
また、詳細については後述するが、本実施の形態では、画像の切り替えまたは移動を行うためのジェスチャとして、ユーザの手指を表示パネル２の面方向に沿って移動させる動作（所謂フリック動作）が設定されている。

また、ジェスチャ判定部５２は、ユーザによるジェスチャが、ジェスチャ認識部５２１により画像の切り替えまたは移動を行うジェスチャであると認識された場合に、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づいて、ユーザによるジェスチャが示すモードを認識するモード認識部５２２を備えている。
詳細については後述するが、本実施の形態の入力装置３では、画像の切り替えまたは移動を行う場合に画像を変化させるモードとして、画像の切り替えまたは移動を予め定めた一方向（第１方向）にのみ実行可能な一方向モードと、画像の切り替えまたは移動を予め定めた一方向（第１方向）と当該一方向とは異なる方向（第２方向）との双方向に実行可能な双方向モードとのいずれかが設定されるようになっている。
モード認識部５２２は、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づき、ユーザによるジェスチャが、一方向モードを示すジェスチャであるか、または双方向モードを示すジェスチャであるかを認識する。

さらに、ジェスチャ判定部５２は、ジェスチャ認識部５２１にてユーザによるジェスチャが画像の切り替えまたは移動を行うジェスチャであると認識された場合に、ジェスチャ受付部５１にて受け付けたジェスチャに関する情報に基づいて、ユーザによるジェスチャが示す方向（ユーザの手指が動く方向）を認識する方向認識部５２３を備えている。

ところで、ユーザのジェスチャが示す方向（例えばユーザの手指が動く方向）に応じて表示パネル２に表示される画像の切り替えまたは移動を行う情報入力システム１では、以下のような問題が生じる場合がある。
図８は、従来の情報入力システム１（図１参照）において生じうる課題について説明する図である。図８では、表示パネル２に、複数ページ（この例では７０ページ）からなる画像データの内の一のページ（この例では２ページ目）が表示されている。なお、この例では、情報入力システム１を用いて表示パネル２に表示される画像の切り替えを行う場合を例に挙げて説明する。

ジェスチャにより表示パネル２に表示される画像の操作を行う情報入力システム１では、表示パネル２に複数ページからなる画像データの一のページが表示されている場合、ユーザにより予め定められたジェスチャが行われることで、表示パネル２に表示される画像のページが切り替えられる。例えば、図８に示す例では、ユーザにより手指を右から左へ動かすジェスチャ（図中矢印Ａ１で示す）がなされることで、表示パネル２に表示される画像のページが、現在表示されている一のページ（２ページ目）から後のページ（３ページ目）に切り替えられる。また、ユーザにより手指を左から右へ動かすジェスチャ（図中Ａ２で示す）がなされることで、表示パネル２に表示される画像のページが、現在表示されている一のページ（２ページ目）から前のページ（１ページ目）に切り替えられる。

このような情報入力システム１では、表示パネル２に表示される画像を連続して切り替える場合、画像のページを切り替えるためのジェスチャを、連続して繰り返し行う必要がある。例えば、表示パネル２に表示される画像を、現在表示されている一のページ（２ページ目）から後のページ（３ページ目、４ページ目、５ページ目…）に連続して順次切り替える場合には、手指を右から左へ動かすジェスチャＡ１を連続して繰り返し行う必要がある。
図８に示すように、手指を右から左へ動かすジェスチャＡ１を繰り返し行う場合、１度手指を右から左へ動かすジェスチャＡ１が終了した後に、手指の位置を元の位置に戻す動作（図中矢印Ｂで示す）を行う必要がある。言い換えると、表示パネル２に表示されている画像を連続して切り替える場合には、手指を右から左へ動かすジェスチャＡ１と、手指の位置を元に戻す動作Ｂとを、交互に行う必要がある。

しかしながら、上述したように、手指の位置を元に戻す動作Ｂは、画像のページを前のページに切り替えるための手指を左から右へ動かすジェスチャＡ２と手指の移動方向が等しい。このため、手指の位置を元に戻す動作Ｂが、入力装置３により、画像のページを前のページに切り替えるためのジェスチャであると誤認識される場合がある。そしてこの場合、表示パネル２に表示される画像が、入力装置３により現在表示されている一のページから前のページに切り替えられてしまう。
言い換えると、ユーザが表示パネル２に表示される画像のページを後のページに連続して切り替えようとジェスチャを行った場合であっても、表示パネル２に表示されるページが前後に交互に切り替えられてしまい、連続して切り替えることが困難になる場合がある。

従来の情報入力システム１においてこのような問題の発生を抑制するためには、手指の位置を元に戻す動作Ｂが、画像のページを前のページに切り替えるためのジェスチャ（手指を左から右へ動かすジェスチャＡ２）と認識されないように、ユーザが意識してジェスチャを行う必要がある。このような場合、情報入力システム１の操作性が低下するおそれがあり、好ましくない。

一方、例えば一のページと当該一のページの前後のページとを見比べたい場合等のように、表示パネル２に表示される画像のページを前後の双方向に連続して切り替えたい場合も存在する。したがって、このような場合には、表示パネル２において表示される画像の切り替え方向を、一方向に限定することは好ましくない。
なお、図８では、表示パネル２に表示される画像のページを切り替える場合の課題を例に挙げたが、例えば表示パネル２に表示される画像を移動させる場合にも、同様の課題が生じる。

このような課題に対し、本実施の形態の情報入力システム１では、ユーザが行うジェスチャに応じて、表示パネル２に表示される画像を一方向のみに切り替えまたは移動可能な一方向モードと、画像を一方向および当該一方向とは逆方向の双方に切り替えまたは移動可能な双方向モードとのいずれかが設定されるようになっている。

そして、情報入力システム１においてユーザのジェスチャにより一方向モードが設定された場合には、ユーザのジェスチャが示す方向が予め定めた一方向と一致する場合にのみ表示パネル２に表示される画像が一方向に切り替えまたは移動され、ユーザのジェスチャが示す方向が当該一方向とは異なる方向である場合には画像の切り替えまたは移動が行われない。この結果、連続して一方向を示すジェスチャを行った場合に、手を元の位置に戻す動作Ｂ（図８参照）等によって画像が一方向とは異なる方向に切り替えまたは移動されることが抑制される。

一方、情報入力システム１においてユーザのジェスチャにより双方向モードが設定された場合には、ユーザのジェスチャが示す方向に応じて画像が切り替えまたは移動される。すなわち、双方向モードが設定された場合には、予め定めた一方向を示すジェスチャがなされた場合には、表示パネル２に表示される画像が一方向に切り替えまたは移動され、一方向とは異なる方向を示すジェスチャがなされた場合には、表示パネル２に表示される画像が当該方向に切り替えまたは移動される。
これにより、本実施の形態の情報入力システム１では、表示パネル２に表示される画像に対してユーザが意図しない操作がなされることが抑制される。

続いて、本実施の形態の制御部５により行われる表示パネル２の表示制御について詳細に説明する。
図３は、本実施の形態の制御部５により行われる制御の手順を示したフローチャートである。また、図４は、ユーザにより一方向モードを示すジェスチャがなされた場合の表示パネル２の状態を示した図である。さらに、図５は、ユーザにより双方向モードを示すジェスチャがなされた場合の表示パネル２の状態を示した図である。
まず、ユーザによりジェスチャが行われ検知センサ４にてユーザによるジェスチャの検知が行われると、ジェスチャ受付部５１により、検知センサ４にて検知されたジェスチャに関する情報が取得される（ステップ１０１）。この例では、ジェスチャに関する情報として、ユーザの手指の位置に関する情報、ユーザの手指の形状・向きに関する情報、ユーザの手指が動く方向に関する情報等が取得される。

続いて、ステップ１０１にてジェスチャ受付部５１により取得されたジェスチャに関する情報に基づいて、ジェスチャ認識部５２１により、ユーザにより行われたジェスチャが画像の切り替えまたは移動を行うためのジェスチャであるか否かの判定が行われる（ステップ１０２）。

ジェスチャ認識部５２１により、ユーザによるジェスチャが画像の切り替えまたは移動を行うためのジェスチャであると認識された場合（ステップ１０２にてＹＥＳ）、モード認識部５２２により、ユーザによるジェスチャが一方向モードを示すジェスチャであるか否かの判定が行われる（ステップ１０３）。具体的には、ジェスチャに関する情報に基づいて、モード認識部５２２により、ユーザによるジェスチャが一方向モードを示すジェスチャ（第１動作）に該当するか、または双方向モードを示すジェスチャ（第２動作）に該当するかの判定が行われる。

なおこの例では、一方向モードを示すジェスチャ（第１動作）として、図４に示すように手の側面を表示パネル２に向けた状態で表示パネル２と水平方向に手指を動かすジェスチャが設定されている。また、双方向モードを示すジェスチャ（第２動作）として、図５に示すように手のひらを表示パネル２側に向けた状態で表示パネル２と水平方向に手指を動かすジェスチャが設定されている。

また、上述したように、一方向モードとは、表示パネル２に表示される画像を一方向（第１方向）にのみ切り替えまたは移動させるモードであり、双方向モードとは、表示パネル２に表示される画像を、一方向（第１方向）および当該一方向とは異なる方向（第２方向）の双方に切り替えまたは移動させるモードである。図４および図５に示す例では、一方向モードを、表示パネル２に表示される画像を左方向または右方向のいずれか一方向にのみ移動させるモードとしている。また、双方向モードを、表示パネル２に表示される画像を左方向および右方向の双方向に移動させるモードとしている。

モード認識部５２２により、ユーザによるジェスチャが一方向モードを示すジェスチャであると認識された場合（ステップ１０３にてＹＥＳ）、表示パネル２に表示される画像を切り替えまたは移動させるモードとして、一方向モードが設定される（ステップ１０４）。

続いて、一方向モードに、画像を変化させる方向が予め関連付けられているか否かの判定が行われる（ステップ１０５）。
一方向モードに対して画像を変化させる方向が予め関連付けられている場合（ステップ１０５にてＹＥＳ）、図４に示すように、描画制御部５３により、一方向モードが設定されている旨を示し且つ一方向モードに関連付けられた画像を動かす方向（この例では右から左へ向かう方向）を示す方向指示画像の一例としての一方向モード画像３０が表示パネル２に表示される（ステップ１０６）。

続いて、ステップ１０１にて取得したジェスチャに関する情報に基づき、方向認識部５２３によりユーザによるジェスチャの方向が、一方向モードに設定されている方向に一致するか否かの判定が行われる（ステップ１０７）。この例では、ユーザの手指の移動方向が、右から左へ向かう方向であるか否かの判定が行われる。
そして、ユーザによるジェスチャの方向が一方向モードに関連付けられた方向に一致すると認識された場合（ステップ１０７にてＹＥＳ）、すなわち図４にて矢印Ｃ１で示すようにユーザによるジェスチャが手指を右から左へ動かすジェスチャである場合、描画制御部５３により、表示パネル２に表示される画像が一方向モードに関連付けられた方向に切り替えまたは移動され（ステップ１０８）、一連の処理が終了される。この例では、表示パネル２に表示される画像が右から左へ切り替えられることにより、複数ページのうち２ページ目Ｐ２が表示されている状態から、３ページ目Ｐ３が表示されている状態へ変化される。

一方、方向認識部５２３にて認識されたユーザによるジェスチャの方向が一方向モードに関連付けられた方向とは異なる場合（ステップ１０７にてＮＯ）、例えば図４にて矢印Ｃ２で示すようにユーザによるジェスチャが手指を左から右へ動かすジェスチャである場合、表示パネル２に表示される画像が変化されることなく、一連の処理が終了される。
このため、例えばユーザが表示パネル２に表示されるページを後ページに連続して切り替えようとして、手指を右側から左側に動かすジェスチャＣ１を、手指を左側から右側に戻す動作（図８の矢印Ｂ参照）を挟んで連続して行った場合であっても、手指を左側から右側に戻す動作Ｂによっては画像の切り替えは行われない。これにより、手指を右側から左側に動かすジェスチャＣ１のみに基づいて画像が後ページに連続して切り替えられるようになる。言い換えると、ユーザの意図とは異なる画像の切り替えが行われることが抑制される。

また、一方向モードに対して画像を変化させる方向が予め関連付けられていない場合（ステップ１０５にてＮＯ）、ステップ１０１にて取得したジェスチャに関する情報に基いて方向認識部５２３によりユーザによるジェスチャの方向が認識され、認識された方向が、画像を変化させる一方向として設定される（ステップ１０９）。

次いで、図４に示すように、描画制御部５３により、一方向モードが設定されている旨を示し且つ一方向モードに関連付けられた画像を動かす方向（この例では右から左へ向かう方向）を示す方向指示画像の一例としての一方向モード画像３０が表示パネル２に表示される（ステップ１１０）。
そして、表示パネル２に表示される画像が、描画制御部５３により、方向認識部５２３にて認識されたユーザによるジェスチャの方向に切り替えまたは移動され（ステップ１０８）、一連の処理が終了される。

また、ステップ１０３において、ユーザによるジェスチャが一方向モードを示すジェスチャではないと判定された場合（ステップ１０３にてＮＯ）、すなわちモード認識部５２２によりユーザによるジェスチャが双方向モードを示すジェスチャであると判定された場合、表示パネル２に表示される画像を変化させるモードとして、双方向モードが設定される（ステップ１１１）。
続いて、図５に示すように、描画制御部５３により、双方向モードが設定されている旨を示す方向指示画像の他の一例としての双方向モード画像４０が表示パネル２に表示される（ステップ１１２）。

次いで、ステップ１０１にて取得したジェスチャに関する情報に基づき、方向認識部５２３によりユーザによるジェスチャの方向が認識され、描画制御部５３により、表示パネル２に表示される画像が、認識されたジェスチャの方向に対応する方向に変化され（ステップ１０８）、一連の処理が終了される。
具体的には、図５にて矢印Ｄ１で示すようにユーザにより手指を右から左へ動かすジェスチャがなされた場合、表示パネル２に表示される画像が右から左へ切り替えられることにより、２ページ目Ｐ２が表示されている状態から、３ページ目Ｐ３が表示されている状態へ変化される。一方、図５にて矢印Ｄ２で示すようにユーザにより手指を左から右へ動かすジェスチャがなされた場合、表示パネル２に表示される画像が左から右へ切り替えられることにより、２ページ目Ｐ２が表示されている状態から、１ページ目Ｐ１が表示されている状態へ変化される。

以上説明したように、本実施の形態の情報入力システム１では、ユーザによるジェスチャに応じて、一方向モードまたは双方向モードの何れかが設定される。これにより、ユーザの意図した画像が表示され、またユーザが意図したように画像が変化される。
具体的には、表示パネル２に表示される画像を一方向にのみ切り替えまたは移動させたい場合には、ユーザは一方向モードを示すジェスチャを行うことにより、画像が一方向にのみ切り替えまたは移動されることになり、ユーザの意図しない方向に画像が切り替えまたは移動されることが抑制される。

一方、表示パネル２に表示される画像を双方向に切り替えまたは移動させたい場合には、ユーザは双方向モードを示すジェスチャを行うことにより、ジェスチャの示す方向に応じて表示パネル２に表示される画像を切り替えまたは移動することが可能になる。

なお、図４および図５に示した例では、ユーザによるジェスチャが一方向モードを示すものか双方向モードを示すものかを、表示パネル２に対するユーザの手指の向きにより認識するものとした。しかしながら、ユーザによるジェスチャを認識する方法としては、これに限られるものではない。
図６（ａ）〜（ｂ）および図７（ａ）〜（ｂ）は、一方向モードまたは双方向モードを認識するためのジェスチャの他の例を示した図である。

図６（ａ）〜（ｂ）に示すように、ジェスチャを行うユーザの手指の形状（立てる指の本数）により、一方向モードと双方向モードとを識別してもよい。具体的には、図６（ａ）に示すように、ユーザにより指を５本立てた状態でジェスチャが行われた場合には一方向モードと認識され、図６（ｂ）に示すように、ユーザにより指を立てない状態でジェスチャが行われた場合には双方向モードと認識される。

また、図７（ａ）〜（ｂ）に示すように、ジェスチャを行うユーザの手指と表示パネル２との距離により、一方向モードと双方向モードとを識別してもよい。具体的には、図７（ａ）に示すように、ジェスチャを行うユーザの手指と表示パネル２との距離が予め定めた距離よりも大きい場合（距離ｔ１）には、一方向モードと認識される。また、図７（ｂ）に示すように、ジェスチャを行うユーザの手指と表示パネル２との距離が予め定めた距離以下の場合（距離ｔ２）には、双方向モードと認識される。

また、詳細については省略するが、例えばジェスチャを行うユーザの手指が動くスピードの差により、一方向モードと双方向モードとを識別してもよい。

１…情報入力システム、２…表示パネル、３…入力装置、４…検知センサ、５…制御部、２１…表示画面、３０…一方向モード画像、４０…双方向モード画像、５１…ジェスチャ受付部、５２…ジェスチャ判定部、５３…描画制御部、５２１…ジェスチャ認識部、５２２…モード認識部、５２３…方向認識部

Claims (5)

1. 画像を表示する表示手段と、
   前記画像を操作する操作者の動作を検知する検知手段と、
   前記検知手段に検知された操作者の動作が、第１方向に動く第１動作である場合に、前記表示手段に表示される画像を当該第１方向に変化させる一方で、当該第１動作に続く当該第１方向とは異なる第２方向に動く動作に応じて当該画像を当該第２方向に変化させることはせず、操作者の動作が当該第１動作とは異なり且つ当該第１方向に動く第２動作である場合に、当該表示手段に表示される画像を当該第１方向に変化させ、当該第２動作に続く当該第２方向に動く動作に応じて当該画像を当該第２方向に変化させる表示制御手段と
   を備える情報入力システム。
2. 前記表示制御手段は、前記検知手段に検知された動作が前記第１動作である場合に、当該第１動作が示す方向を前記第１方向とすることを特徴とする請求項１に記載の情報入力システム。
3. 前記表示制御手段は、前記検知手段にて検知された動作の種類に応じて、前記表示手段に画像を変化させることが可能な方向を示す方向指示画像を表示させることを特徴とする請求項１または２に記載の情報入力システム。
4. 前記検知手段は、操作者の動作として操作者の手指の状態を検知し、
   前記表示制御手段は、前記検知手段により検知された操作者の手指の状態の違いに応じて、前記第１動作および前記第２動作を判別することを特徴とする請求項１乃至３のいずれか１項に記載の情報入力システム。
5. 表示手段に表示される画像を操作する操作者の動作を検知する検知手段と、
   前記検知手段に検知された動作が、第１方向に動く第１動作である場合に、前記表示手段に表示される画像を当該第１方向に変化させる一方で、当該第１動作に続く当該第１方向とは異なる第２方向に動く動作に応じて当該画像を当該第２方向に変化させることはせず、当該検知手段に検知された動作が当該第１動作とは異なり且つ当該第１方向に動く第２動作である場合に、当該表示手段に表示される画像を当該第１方向に変化させ、当該第２動作に続く当該第２方向に動く動作に応じて当該画像を当該第２方向に変化させる表示制御手段と
   を備える入力装置。

Images