JP2012133729A - 情報処理装置、情報処理方法、およびプログラム - Google Patents

Abstract

【課題】手袋を装着している場合であっても素手の場合と同様の操作を行うことができるようにする。
【解決手段】タッチパネルから出力された信号により表されるユーザの指までの距離が、ディスプレイの表面に触れてはいないが閾値th1より近い場合、Hoverイベントが検出され、ユーザの指がディスプレイ２に触れている場合、Touchイベントが検出される。手袋操作モードが設定されている場合、HoverイベントよりTouchイベントが優先され、Hoverイベントの検出領域においてもTouchイベントが検出される。手袋操作モードの設定は、本体の設定画面からユーザが意図的に行うことが可能とされる。本発明は、タッチパネルを有する装置に適用することができる。
【選択図】図３

Description

本発明は、情報処理装置、情報処理方法、およびプログラムに関し、特に、手袋を装着している場合であっても素手の場合と同様の操作を行うことができるようにした情報処理装置、情報処理方法、およびプログラムに関する。

近年、携帯電話機やデジタルカメラなどの携帯型の端末の多くに入力インタフェースとしてタッチパネルが用いられている。タッチパネルの方式には、静電容量方式、抵抗膜方式、赤外線遮光方式などの方式がある。

例えば静電容量方式のタッチパネルにおいては、各位置に配置されている電極で静電容量の変化を検出することによって指の位置が検出されるようになされている。電極の静電容量は、指などの、静電容量の変化を起こさせる物体が近づくことに応じて増加し、離れることに応じて減少する。

このように、静電容量方式のタッチパネルを有する端末においては、一般的に、静電容量の強弱に基づいてタッチパネルに触れたことを検出することによって機能の実装が図られている。

ところで、ユーザが手袋をはめており素手で触ることができない場合、タッチパネルに触れたとしても静電容量の変化が起きないためにユーザ操作を検出することが難しくなる。

このことに対応するために、タッチセンサの抵抗値を測定し、基準値より高い場合にはユーザが手袋を装着していると判断してタッチパネル操作のオン／オフを判断する閾値を素手のときの閾値より低く設定する技術がある（特許文献１）。この技術によれば、ユーザが手袋を装着しているときに閾値を低く設定することによって、タッチパネルの感度を向上させることが可能になる。

特開２００８−３３７０１号公報

特許文献１に開示されている技術においては、閾値を一度設定した後、素手で触り直したか否かの確認を繰り返す実装になっており、このことが、タッチセンサをタッチしたか否かといった１つのイベントに基づいて実現されるようになっている。また、素手で操作するモードであるのか、手袋を装着して操作するモードであるのかをユーザが意図的に変更することができない。

本発明はこのような状況に鑑みてなされたものであり、手袋を装着している場合であっても素手の場合と同様の操作を行うことができるようにするものである。

本発明の一側面の情報処理装置は、装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定する設定手段と、所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号を出力する物体検出手段と、前記操作モードとして第１のモードが設定されている場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードが設定されている場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出する入力検出手段と、前記第１の入力が行われたことが検出された場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことが検出された場合、前記第２の入力に応じた処理を行う制御手段とを備える。

前記設定手段には、ユーザによる操作に応じて前記操作モードを設定させることができる。

前記入力検出手段には、さらに、前記第１のモードが設定されている場合と前記第２のモードが設定されている場合のいずれの場合においても、前記検出信号により表される前記物体の状態が、前記所定の距離より遠く、閾値となる他の距離より近い状態であるときに第３の入力が行われたことを検出させることができる。

前記制御手段には、前記第２の入力に応じた処理として、前記第２の入力が行われたことが検出された前記所定の面上の位置に所定の画像を表示させ続ける処理を行わせることができる。

本発明の一側面の情報処理方法は、装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定し、前記操作モードとして第１のモードを設定している場合、物体検出手段から出力された、所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードを設定している場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出し、前記第１の入力が行われたことを検出した場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことを検出した場合、前記第２の入力に応じた処理を行うステップを含む。

本発明の一側面のプログラムは、装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定し、前記操作モードとして第１のモードを設定している場合、物体検出手段から出力された、所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードを設定している場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出し、前記第１の入力が行われたことを検出した場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことを検出した場合、前記第２の入力に応じた処理を行うステップを含む処理をコンピュータに実行させる。

本発明の一側面においては、装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードが設定され、前記操作モードとして第１のモードが設定されている場合、検出信号により表される物体の状態が所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことが検出され、第２のモードが設定されている場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことが、前記所定の距離より近い状態であるときには第２の入力が行われたことがそれぞれ検出される。また、前記第１の入力が行われたことが検出された場合、前記第１の入力に応じた処理が行われ、前記第２の入力が行われたことが検出された場合、前記第２の入力に応じた処理が行われる。

本発明によれば、ユーザは、手袋を装着している場合であっても素手の場合と同様の操作を行うことができる。

本発明の一実施形態に係る情報処理装置の背面側の外観図である。 ディスプレイの表面近傍を示す断面図である。 情報処理装置において検出可能なイベントの例を示す図である。 HoverムーブイベントとTouchムーブイベントを示す図である。 各イベントにおけるユーザの指の状態を説明する図である。 設定画面の例を示す図である。 有効イベントの切り替えの例を示す図である。 情報処理装置の内部の構成例を示すブロック図である。 制御部の機能構成例を示すブロック図である。 通常モードが設定されている場合のイベントの遷移の例を示す図である。 手袋操作モードが設定されている場合のイベントの遷移の例を示す図である。 情報処理装置の操作モード切替処理について説明するフローチャートである。 情報処理装置の制御処理について説明するフローチャートである。 ディスプレイの表面近傍を示す他の断面図である。 情報処理装置において検出可能なイベントの他の例を示す図である。 各イベントにおけるユーザの指の状態を説明する図である。 有効イベントの切り替えの例を示す図である。 通常モード設定時における各イベントの検出可能範囲を示す図である。 手袋操作モード設定時における各イベントの検出可能範囲を示す図である。 通常モードが設定されている場合のイベントの遷移の例を示す図である。 手袋操作モードが設定されている場合のイベントの遷移の例を示す図である。 情報処理装置の他の操作モード切替処理について説明するフローチャートである。 情報処理装置のタッチモード切替処理について説明するフローチャートである。 操作モードの例を示す図である。 コンピュータのハードウェアの構成例を示すブロック図である。

＜第１の実施の形態＞
［情報処理装置の外観構成］
図１は、本発明の一実施形態に係る情報処理装置１の背面側の外観図である。

図１の例においては、情報処理装置１は所定の厚さを有する板状の筐体を有するデジタルカメラとされている。情報処理装置１の図示せぬ正面側にはレンズが設けられ、背面にはそのほぼ全面にディスプレイ２が設けられる。情報処理装置１の上面右側にはシャッタボタン３が設けられる。

情報処理装置１は、ユーザの入力インタフェースとしてタッチパネルが設けられた装置である。ディスプレイ２の表面にはタッチパネルが設けられている。

ディスプレイ２に設けられるタッチパネルは例えば静電容量方式のタッチパネルである。タッチパネルにおいては、ディスプレイ２の各位置における静電容量の値が検出され、検出された静電容量の値を表す信号が出力される。例えば、静電容量の変化を起こさせるユーザの指などの物体がディスプレイ２の表面に近いほど、大きい値を表す信号が出力され、遠いほど、小さい値を表す信号が出力される。

図２は、ディスプレイ２の表面近傍を示す断面図である。図２において、ディスプレイ２の断面を表す長方形の上辺２ａ側がディスプレイ２の表面側である。ディスプレイ２に設けられるタッチパネルからは、ディスプレイ２の表面（上辺２ａ）を基準として、ユーザの指などの、近接された物体までの距離を表す信号が出力される。

以下、ディスプレイ２に近接される物体がユーザの手の指（素手の指、または手袋を装着した手の指）である場合について説明する。破線で示すように、ディスプレイ２の表面からの距離が所定の距離となる位置に閾値th1が設定される。

［検出可能なイベントについて］
図３は、情報処理装置１において検出可能なイベントの例を示す図である。

情報処理装置１においては、操作モードが通常モードである場合、Hoverイベント、Touchイベントなどの複数のイベントを検出することが可能とされる。後述するように、情報処理装置１に対する操作の方法に関するモードである操作モードには通常モードと手袋操作モードが用意されている。ここで、イベントは入力を表す。

タッチパネルから出力された信号により表されるユーザの指までの距離が閾値th1より遠い場合、情報処理装置１においてはイベントOFFとして判断される（図３Ａ）。

また、タッチパネルから出力された信号により表されるユーザの指までの距離が、ディスプレイ２の表面に触れてはいないが閾値th1より近い場合、情報処理装置１においてはHoverイベントが検出される（図３Ｂ）。

タッチパネルから出力された信号によりユーザの指がディスプレイ２の表面にあることが表されている場合、すなわち、ユーザの指がディスプレイ２に触れている場合、情報処理装置１においてはTouchイベントが検出される（図３Ｃ）。

図４Ａに示すように、ディスプレイ２の表面に触れてはいないが、閾値th1より近くにあり、その状態でユーザの指が動いている場合、Hoverムーブイベントとして検出される。一方、図４Ｂに示すように、ディスプレイ２の表面に触れている状態でユーザの指が動いている場合、Touchムーブイベントとして検出される。

図５は、各イベントにおけるユーザの指の状態を説明する図である。

イベントがOFFであることは、ユーザの指が遠方にある状態であることを表す。この場合、情報処理装置１においてはタッチパネルに対する入力が何もないと認識される。

Hoverイベントはユーザの指が近接状態であることを表す。この場合、情報処理装置１においては、ディスプレイ２の上方にあるユーザの指の大体の位置を認識することが可能になる。

Touchイベントは、ユーザの指が接触状態であることを表す。この場合、情報処理装置１においては、ディスプレイ２の表面上にあるユーザの指の位置を認識することが可能になる。

Hoverムーブイベントは、ユーザの指が近接状態のまま動いていることを表す。この場合、情報処理装置１においては、水平方向に動いているユーザの指の大体の位置を認識することが可能になる。

Touchムーブイベントは、ユーザの指が接触状態のまま動いていることを表す。この場合、情報処理装置１においては、水平方向に動いているユーザの指の位置を認識することが可能になる。

HoverムーブイベントをHoverイベントに含め、TouchムーブイベントをTouchイベントに含めて考えると、情報処理装置１の機能は、基本的に、HoverイベントとTouchイベントの２種類のイベントを検出することによって実現される。操作モードが通常モードである場合と手袋操作モードである場合とで有効イベントが切り替えられ、通常モードである場合、HoverイベントとTouchイベントが区別して検出され、それぞれ異なる処理が行われる。操作モードの設定は、本体の設定画面からユーザが意図的に行うことが可能とされる。

図６は設定画面の例を示す図である。

図６に示す本体設定画面は、例えば、情報処理装置１の電源をオンにした後、ユーザがメニュー画面の表示を指示し、メニュー画面に表示される各種の項目の中から、本体設定の項目を選択したときにディスプレイ２に表示される。

図６の本体設定画面の左側には、ディスプレイの明るさの調整の項目を選択するときに操作されるボタン１１、手袋操作モードの切り替えの項目を選択するときに操作されるボタン１２、音量設定の項目を選択するときに操作されるボタン１３が表示されている。

この状態において、例えば、ユーザがボタン１２に指で触れたとき（Touchイベントを検出させたとき）、ボタン１２の右側には、ONボタン２１とOFFボタン２２が表示される。ONボタン２１は、手袋操作モードをONとし、操作モードとして手袋操作モードを設定するときに操作されるボタンであり、OFFボタン２２は、手袋操作モードをOFFとし、操作モードとして通常モードを設定するときに操作されるボタンである。ユーザは、ONボタン２１に指で触れることによって手袋操作モードを設定することができ、OFFボタン２２に指で触れることによって通常モードを設定することができる。

図７は、有効イベントの切り替えの例を示す図である。

操作モードが通常モード（手袋操作モードOFF）である場合、HoverイベントとTouchイベントの２つのイベントが有効とされる。ユーザは、HoverイベントとTouchイベントを情報処理装置１に検出させることができる。

一方、操作モードが手袋操作モード（手袋操作モードON）である場合、Hoverイベントは無効となり、Touchイベントのみが有効とされる。Touchイベントのみが有効であるから、通常モード時にはHoverイベントが検出されるような位置にユーザの指がある場合であっても、Touchイベントが検出されたときと同様の処理が行われる。

すなわち、操作モードが手袋操作モードである場合、情報処理装置１においては、HoverイベントがTouchイベントとして認識されることになる。これにより、ユーザは、手袋を装着した状態であっても、指をディスプレイ２に直接触れることなく、表面に近づけるだけで、素手でディスプレイ２の表面に触れるのと同じ操作を行うことが可能になる。

［情報処理装置の内部構成］
図８は、情報処理装置１の内部の構成例を示すブロック図である。

情報処理装置１は、撮影制御部３１、画像処理部３２、再生制御部３３、制御部３４、表示部３５、タッチパネル３６、外部AV出力部３７、一時記憶部３８、および記憶媒体３９がバス４０を介して接続されることによって構成される。表示部３５とタッチパネル３６によりディスプレイ２が構成される。

撮影制御部３１はCMOS(Complementary Metal Oxide Semiconductor)などの撮像素子よりなり、レンズによって取り込まれた光の光電変換、A/D変換などを行うことによって得られた画像データを画像処理部３２に出力する。

画像処理部３２は、撮影制御部３１から供給された画像データの補正処理、圧縮処理などの各種の処理を行い、各種の処理を行うことによって得られた画像データを記憶媒体３９に記憶させる。

再生制御部３３は、撮影済みの画像の再生が指示された場合、再生が指示された画像データを記憶媒体３９から読み出し、読み出した画像データを対象としてデコードなどの再生処理を行う。再生制御部３３は、再生処理を行うことによって得られたデータを表示部３５に出力し、画像を表示させる。

制御部３４は、CPU(Central Processing Unit)やROM(Read Only Memory)などよりなり、ROMに記憶されているプログラムを一時記憶部３８に展開して実行し、情報処理装置１の全体の動作を制御する。制御部３４は、例えば、タッチパネル３６から供給された信号に基づいてイベントを検出し、検出したイベントに応じて処理を行う。また、制御部３４は、情報処理装置１の操作モードとして、手袋操作モードと通常モードのうちのいずれかを設定し、設定したモードに応じてイベントの有効／無効を切り替える。

表示部３５はLCD(Liquid Crystal Display)などよりなり、制御部３４による制御に従って、再生制御部３３により再生された画像や、メニュー画面などを表示させる。

タッチパネル３６は静電容量方式のタッチパネルであり、表示部３５に重畳して設けられる。タッチパネル３６は、ディスプレイ２の各位置における静電容量の値を所定の周期で検出し、各位置の静電容量の値を表す信号（検出信号）を制御部３４に出力する。

外部AV出力部３７は、再生処理が行われることによって得られた画像データが再生制御部３３から供給された場合、供給された画像データをHDMI(High Definition Multimedia Interface)ケーブルなどを介して外部の機器に出力する。

一時記憶部３８はRAM(Random Access Memory)よりなり、各部が処理を行うときに必要なデータを記憶する。一時記憶部３８には、例えば操作モードが手袋操作モードであるのか通常モードであるのかを表す情報などが記憶される。

記憶媒体３９はフラッシュメモリなどよりなり、撮影制御部３１により撮影され、画像処理部３２により処理が行われた画像データを記憶する。

図９は、制御部３４の機能構成例を示すブロック図である。図９に示す機能部のうちの少なくとも一部は、制御部３４のCPUにより所定のプログラムが実行されることによって実現される。

制御部３４においては、モード設定部５１、イベント検出部５２、およびUI制御部５３が実現される。

モード設定部５１は、ユーザによる操作に応じて操作モードを設定し、現在の操作モードを表す情報をイベント検出部５２に出力する。例えば、モード設定部５１は、デフォルトの操作モードとして通常モードを設定し、通常モードを手袋操作モードに切り替えることが指示されたことをイベント検出部５２から供給された情報に基づいて検出した場合、手袋操作モードを設定する。モード設定部５１により設定されている操作モードを表す情報は一時記憶部３８にも供給され、記憶される。

イベント検出部５２は、タッチパネル３６から供給された信号に基づいてイベントを検出し、検出したイベントを表す情報を、そのイベントが検出されたディスプレイ２上の位置を表す情報とともに出力する。イベント検出部５２から出力された情報はモード設定部５１とUI制御部５３に供給される。

図１０は、通常モードが設定されている場合のイベントの遷移の例を示す図である。

例えば、OFF状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より近い場合、Hover_ONと判定し、矢印＃１に示すようにHoverイベントを検出した状態になる。

また、Hoverイベントの状態において、タッチパネル３６から供給された信号によりユーザの指がディスプレイ２に触れていることが表されている場合、Touch_ONと判定し、矢印＃２に示すようにTouchイベントを検出した状態になる。

Hoverイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より近い場合、Moveと判定し、矢印＃３に示すようにHoverイベントを検出した状態になる。

一方、OFF状態において、タッチパネル３６から供給された信号によりユーザの指がディスプレイ２に触れていることが表されている場合、Touch_ONと判定し、矢印＃４に示すようにTouchイベントを検出した状態になる。ディスプレイ２の所定の位置において、タッチパネル３６による静電容量のサンプリングが終了してから、次のサンプリングまでの間に急にユーザがディスプレイ２の表面に触れた場合、OFF状態からTouchイベントの状態に直接遷移する。

Touchイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が、ディスプレイ２の表面から離れたが閾値th1より近い場合、Touch_OFFと判定し、矢印＃５に示すようにHoverイベントを検出した状態になる。

Touchイベントの状態において、タッチパネル３６から供給された信号によりユーザの指がディスプレイ２に触れていることが表されている場合、Moveと判定し、矢印＃６に示すようにTouchイベントを検出した状態になる。

HoverイベントまたはTouchイベントの状態においてタッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より遠い場合、Hover_OFF，Touch_OFFと判定し、矢印＃７，＃８に示すようにOFF状態が検出される。

操作モードとして通常モードが設定されている場合、イベント検出部５２においては以上のような遷移でイベントが検出される。Hoverイベントが検出された場合にはそのことを表す情報が位置情報とともに出力され、Touchイベントが検出された場合にはそのことを表す情報が位置情報とともに出力される。

図１１は、手袋操作モードが設定されている場合のイベントの遷移の例を示す図である。

例えば、OFF状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より近い場合、または、ディスプレイ２に触れている場合、Touch_ONと判定し、矢印＃１１に示すようにTouchイベントを検出した状態になる。

Touchイベントの状態において、タッチパネル３６から供給された信号によりユーザの指がディスプレイ２に触れていることが表されている場合、または、ディスプレイ２の表面から離れたが閾値th1より近い場合、矢印＃１２に示すようにTouchイベントを検出した状態になる。

Touchイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より遠い場合、Touch_OFFと判定し、矢印＃１３に示すようにOFF状態が検出される。

図９の説明に戻り、UI制御部５３は、イベント検出部５２から供給された情報により表されるイベントの状態に応じて表示部３５の表示を制御する。

例えば、通常モード時においてHoverイベントが検出された場合、UI制御部５３は、ユーザが指を近づけている位置にそのことを表す円形の影などの所定の画像を表示させる。ユーザが指を近づけている位置を表す画像の表示位置は、ユーザの指の動きに追従して切り替えられる。また、Touchイベントが検出された場合、UI制御部５３は、ユーザが触れた位置に表示されているボタンが押されたと判断し、ボタンの色を変えるなどの所定の処理を行う。

［情報処理装置の動作］
ここで、情報処理装置１の動作について説明する。はじめに、図１２のフローチャートを参照して、操作モードを切り替える情報処理装置１の処理について説明する。図１２の処理は、例えば、ユーザが情報処理装置１の電源をオンとし、メニュー画面の表示を指示したときに開始される。

ステップＳ１において、UI制御部５３はメニュー画面を表示部３５に表示させる。メニュー画面には、Touchイベントを検出させることによって操作可能な、各種の項目を選択するときに操作されるボタンが表示される。

メニュー画面に表示される項目の中から本体設定の項目が選択されたとき、ステップＳ２において、UI制御部５３は、図６を参照して説明したような本体設定画面を表示させる。

本体設定画面に表示される項目の中から手袋操作モード切り替えの項目が選択されたとき、ステップＳ３において、UI制御部５３は、手袋操作モードを設定するときに操作されるONボタン２１と通常モードを設定するときに操作されるOFFボタン２２が表示される画面である手袋操作モード切替画面を表示させる。

ステップＳ４において、モード設定部５１は、手袋操作モードOFF、すなわち通常モードが設定されたか否かを判定する。

例えば、OFFボタン２２の表示位置においてTouchイベントが検出されたことから通常モードが設定されたとステップＳ４において判定された場合、ステップＳ５において、イベント検出部５２は、TouchイベントとHoverイベントを有効にする。

TouchイベントとHoverイベントが有効にされた後、ステップＳ６においてその状態での動作が行われる。ユーザは、TouchイベントとHoverイベントを検出させて、情報処理装置１を操作することができる。ステップＳ６において通常モードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ２に戻り、以上の処理が繰り返される。

一方、通常モードではなく手袋操作モードが設定されたとステップＳ４において判定された場合、ステップＳ７において、イベント検出部５２は、Touchイベントのみを有効にする。

Touchイベントが有効にされた後、ステップＳ８においてその状態での動作が行われる。ユーザは、手袋を装着している場合であっても、指をディスプレイ２に近づけるだけで、Touchイベントを検出させることができ、情報処理装置１を操作することができる。ステップＳ８において手袋操作モードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ２に戻り、以上の処理が繰り返される。

次に、図１３のフローチャートを参照して、ユーザの操作に応じて処理を行う情報処理装置１の制御処理について説明する。

ステップＳ１１において、タッチパネル３６は、ディスプレイ２の各位置における静電容量の値を所定の周期で検出し、各位置の静電容量の値を表す信号を出力する。

ステップＳ１２において、イベント検出部５２は、タッチパネル３６から供給された信号に基づいて、操作モードが通常モードである場合には図１０を参照して説明したようにしてイベントを検出する。また、イベント検出部５２は、操作モードが手袋操作モードである場合には図１１を参照して説明したようにしてイベントを検出する。

ステップＳ１３において、UI制御部５３は、イベント検出部５２により検出されたイベントに応じて表示部３５の表示を制御する。その後、処理は終了される。

以上のように、通常モード時にTouchイベントとHoverイベントを有効として区別して検出することによって、情報処理装置１は、ユーザの指がディスプレイ２に触れているときと、近接しているときとで異なる処理を行うことが可能になる。入力インタフェースとしてタッチパネルを有する通常の装置とは異なり、TouchイベントだけでなくHoverイベントを追加することによって、幅広い機能の実装が可能になる。

また、手袋操作モード時にTouchイベントを優先させ、通常モード時にはHoverイベントとして検出される操作をTouchイベントとして検出することによって、手袋を装着しているユーザは、手袋を装着したまま操作を行うことができる。

また、本体設定画面に手袋操作モードの切り替え項目を用意しておくことによって、ユーザは、通常モードと手袋操作モードを意図的に切り替えることが可能になる。

＜第２の実施の形態＞
以上においては、情報処理装置１において検出可能なイベントがTouchイベントとHoverイベントであるものとしたが、他のイベントをさらに検出可能にしてもよい。情報処理装置１の構成は、図８、図９を参照して説明した構成と同じである。

図１４は、ディスプレイ２の表面近傍を示す他の断面図である。図１４の例においては、ディスプレイ２の表面を基準として、閾値th1より遠い位置に閾値th2が設定される。

図１５は、情報処理装置１において検出可能なイベントの他の例を示す図である。

情報処理装置１においては、操作モードが通常モードである場合、HoverイベントとTouchイベントに加えて、Proximityイベントを検出することが可能とされる。図１５に示す各イベントは、Proximityイベントが追加されている点を除いて図３のイベントと同様である。

すなわち、タッチパネル３６から出力された信号により表されるユーザの指までの距離が閾値th2より遠い場合、情報処理装置１においてはイベントOFFとして判断される（図１５Ａ）。

また、タッチパネルから出力された信号により表されるユーザの指までの距離が閾値th1より遠いが閾値th2より近い場合、情報処理装置１においてはProximityイベントが検出される（図１５Ｂ）。

タッチパネルから出力された信号により表されるユーザの指までの距離が、ディスプレイ２の表面に触れてはいないが閾値th1より近い場合、情報処理装置１においてはHoverイベントが検出される（図１５Ｃ）。

タッチパネルから出力された信号により表されるユーザの指の位置が、ディスプレイ２の表面にある場合、すなわち、ユーザの指がディスプレイ２に触れている場合、情報処理装置１においてはTouchイベントが検出される（図１５Ｄ）。

Proximityイベント時のユーザの指の状態を図１６に示す。Proximityイベントはユーザの指が近傍状態（近接状態より遠いが遠方状態ではない状態）であることを表す。この場合、情報処理装置１においては、ディスプレイ２の上方に、ユーザの指などの電荷を帯びたものがあることを認識することが可能になる。Proximityイベント以外の図１６に示す各イベントにおけるユーザの指の状態は図５を参照して説明したものと同じである。

上述したように、操作モードとして通常モードが設定されている場合と手袋操作モードが設定されている場合とで有効イベントが切り替えられるが、Proximityイベントは、操作モードがいずれのモードの場合であっても有効とされる。

図１７は、有効イベントの切り替えの例を示す図である。

操作モードが通常モード（手袋操作モードOFF）である場合、HoverイベントとTouchイベントとProximityイベントの３つのイベントが有効とされる。ユーザは、それぞれのイベントを情報処理装置１に検出させることができる。

一方、操作モードが手袋操作モード（手袋操作モードON）である場合、Hoverイベントは無効となり、TouchイベントとProximityイベントが有効とされる。通常モード時にはHoverイベントが検出されるような位置にユーザの指がある場合であっても、Touchイベントが検出されたときと同様の処理が行われる。

手袋操作モードを設定しておくことにより、ユーザは、手袋を装着した状態であっても、指をディスプレイ２に直接触れることなく、表面に近づけるだけで、素手でディスプレイ２の表面に触れるのと同じ操作を行うことが可能になる。また、Touchイベントとして認識される位置よりも遠い位置に指を近づけることによって、ディスプレイ２の上方に指があることを認識させることが可能になる。

Proximityイベントでは座標点までを認識させることは難しいが、電荷を持つ物体が近傍状態にあることを認識させることができ、一方、Hoverイベントでは大体の座標点までを認識させることができる。双方のイベントに対してそれぞれ異なる機能を割り当て実装することにより、ユーザはイベント毎の処理を行わせることが可能になる。

図１８は、通常モード設定時における各イベントの検出可能範囲について説明する図である。

原点Ｐ０（(x,y,z)=(0,0,0)）、点Ｐ１（(x,y,z)=(x1,0,0)）、点Ｐ２（(x,y,z)=(0,y1,0)）、点Ｐ３（(x,y,z)=(x1,y1,0)）で囲まれる範囲がディスプレイ２の表面の範囲であるものして説明する。

この場合、Touchイベントの検出可能範囲であるTouch領域は、破線で示す、ディスプレイ２の表面の範囲と同じ、点Ｐ０，Ｐ１，Ｐ２，Ｐ３で囲まれる面上の範囲となる。

Hoverイベントの検出可能範囲であるHover領域は、点Ｐ０，Ｐ１，Ｐ２，Ｐ３で囲まれる面を底面とし、一点鎖線で示す点Ｐ１０，Ｐ１１，Ｐ１２，Ｐ１３で囲まれる面を上面とする直方体の範囲内の、底面より上の範囲となる。点Ｐ１０は(x,y,z)=(0,0,th1)で表され、点Ｐ１１は(x,y,z)=(x1,0,th1)で表される。点Ｐ１２は(x,y,z)=(0,y1,th1)で表され、点Ｐ１３は(x,y,z)=(x1,y1,th1)で表される。

Proximityイベントの検出可能範囲であるProximity領域は、点Ｐ１０，Ｐ１１，Ｐ１２，Ｐ１３で囲まれる面を底面とし、実線で示す点Ｐ２０，Ｐ２１，Ｐ２２，Ｐ２３で囲まれる面を上面とする直方体の範囲内となる。点Ｐ２０は(x,y,z)=(0,0,th2)で表され、点Ｐ２１は(x,y,z)=(x1,0,th2)で表される。点Ｐ２２は(x,y,z)=(0,y1,th2)で表され、点Ｐ２３は(x,y,z)=(x1,y1,th2)で表される。

図１９は、手袋操作モード設定時における各イベントの検出可能範囲について説明する図である。

通常モード時におけるHoverイベントがTouchイベントとして認識されるから、Touch領域は、点Ｐ０，Ｐ１，Ｐ２，Ｐ３で囲まれる面を底面とし、点Ｐ１０，Ｐ１１，Ｐ１２，Ｐ１３で囲まれる面を上面とする直方体の範囲内となる。

Proximityイベントの検出可能範囲は、点Ｐ１０，Ｐ１１，Ｐ１２，Ｐ１３で囲まれる面を底面とし、点Ｐ２０，Ｐ２１，Ｐ２２，Ｐ２３で囲まれる面を上面とする直方体の範囲内となる。

図２０は、操作モードとして通常モードが設定されている場合のイベントの遷移の例を示す図である。図１０を参照して説明した遷移と同じものについての説明は省略する。

OFF状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より遠いが閾値th2より近い場合、Proximity_ONと判定し、矢印＃２１に示すようにProximityイベントを検出した状態になる。

Proximityイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より近い場合、Hover_ONと判定し、矢印＃２２に示すようにHoverイベントを検出した状態になる。

Hoverイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が、閾値th1より遠いが閾値th2より近い場合、Hover_OFFと判定し、矢印＃２３に示すようにProximityイベントを検出した状態になる。

Proximityイベントの状態において、タッチパネル３６から供給された信号によりユーザの指がディスプレイ２に触れていることが表されている場合、Touch_ONと判定し、矢印＃２４に示すようにTouchイベントを検出した状態になる。

Touchイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が、閾値th1より遠いが閾値th2より近い場合、Touch_OFF、かつHover_OFFと判定し、矢印＃２５に示すようにProximityイベントを検出した状態になる。

Proximityイベント、Hoverイベント、またはTouchイベントの状態においてタッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th2より遠い場合、Proximity_OFF，Hover_OFF，Touch_OFFと判定し、矢印＃２６に示すようにOFF状態が検出される。

通常モードが設定されている場合、イベント検出部５２においては以上のような遷移でイベントが検出される。Proximityイベントが検出された場合にはそのことを表す情報が出力され、Hoverイベントが検出された場合にはそのことを表す情報が位置情報とともに出力される。また、Touchイベントが検出された場合にはそのことを表す情報が位置情報とともに出力される。

図２１は、操作モードとして手袋操作モードが設定されている場合のイベントの遷移の例を示す図である。図１１を参照して説明した遷移と同じものについての説明は省略する。

OFF状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より遠いが閾値th2より近い場合、Proximity_ONと判定し、矢印＃３１に示すようにProximityイベントを検出した状態になる。

Proximityイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th1より近い場合、または、ディスプレイ２に触れている場合、Touch_ONと判定し、矢印＃３２に示すようにTouchイベントを検出した状態になる。

Touchイベントの状態において、タッチパネル３６から供給された信号により表されるユーザの指までの距離が、閾値th1より遠いが閾値th2より近い場合、Touch_OFFと判定し、矢印＃３３に示すようにProximityイベントを検出した状態になる。

Proximityイベントの状態においてタッチパネル３６から供給された信号により表されるユーザの指までの距離が閾値th2より遠い場合、Proximity_OFFと判定し、矢印＃３４に示すようにOFF状態が検出される。

ここで、図２２のフローチャートを参照して、操作モードを切り替える情報処理装置１の他の処理について説明する。

図２２の処理は、通常モード時にはTouchイベントとHoverイベントだけでなくProximityイベントをも有効とし、手袋操作モード時にはTouchイベントだけでなくProximityイベントをも有効とする点を除いて、図１２を参照して説明した処理と同じである。重複する説明については適宜省略する。

ステップＳ２１において、UI制御部５３はメニュー画面を表示部３５に表示させ、本体設定の項目が選択されたとき、ステップＳ２２において本体設定画面を表示させる。

手袋操作モード切り替えの項目が選択されたき、ステップＳ２３において、UI制御部５３は手袋操作モード切替画面を表示させる。

ステップＳ２４において、モード設定部５１は、手袋操作モードOFF、すなわち通常モードが設定されたか否かを判定する。

通常モードが設定されたとステップＳ２４において判定された場合、ステップＳ２５において、イベント検出部５２は、TouchイベントとHoverイベントとProximityイベントを有効にする。

TouchイベントとHoverイベントとProximityイベントが有効にされた後、ステップＳ２６においてその状態での動作が行われる。ステップＳ２６において通常モードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ２２に戻り、以上の処理が繰り返される。

一方、通常モードではなく手袋操作モードが設定されたとステップＳ２４において判定された場合、ステップＳ２７において、イベント検出部５２は、TouchイベントとProximityイベントを有効にする。

TouchイベントとProximityイベントが有効にされた後、ステップＳ２８においてその状態での動作が行われる。ステップＳ２８において手袋操作モードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ２２に戻り、以上の処理が繰り返される。

＜変形例＞
タッチパネル３６が、同時に２点以上の多点のタッチ操作が可能ないわゆるマルチタッチに対応したタッチパネルである場合、複数のイベントが同時に以上のようにして検出されるようにしてもよい。マルチタッチでの操作が可能なモードであるマルチタッチモードと、シングルタッチでの操作が可能なモードであるシングルタッチモードをユーザが切り替えることができるようにしてもよい。

図２３のフローチャートを参照して、タッチモードを切り替える情報処理装置１の処理について説明する。タッチモードの切り替えも、操作モードの切り替えと同様に本体設定画面から行われる。

メニュー画面の表示が指示されたとき、ステップＳ３１において、UI制御部５３はメニュー画面を表示部３５に表示させる。

メニュー画面に表示される項目の中から本体設定の項目が選択されたとき、ステップＳ３２において、UI制御部５３は本体設定画面を表示させる。本体設定画面には、本体の設定に関する各種の項目を選択するときに操作されるボタンが表示され、タッチモードの切り替えの項目を選択するときに操作されるボタンも含まれる。

タッチモードの切り替えの項目が選択されたき、ステップＳ３３において、UI制御部５３はマルチタッチ切替画面を表示させる。マルチタッチ切替画面には、マルチタッチモードを設定するときに操作されるボタンとシングルタッチモードを設定するときに操作されるボタンが表示される。

ステップＳ３４において、モード設定部５１は、マルチタッチOFF、すなわちシングルタッチモードが設定されたか否かを判定する。

シングルタッチモードが設定されたとステップＳ３４において判定された場合、ステップＳ３５において、イベント検出部５２はマルチタッチを無効にする。

マルチタッチが無効にされた後、ステップＳ３６において、シングルタッチで行われるユーザの操作に応じたイベントが検出され、検出されたイベントに応じて動作が行われる。ステップＳ３６においてシングルタッチモードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ３２に戻り、以上の処理が繰り返される。

一方、シングルタッチモードではなくマルチタッチモードが設定されたとステップＳ３４において判定された場合、ステップＳ３７において、イベント検出部５２はマルチタッチを有効にする。

マルチタッチが有効にされた後、ステップＳ３８において、マルチタッチで行われるユーザの操作に応じたイベントが検出され、検出されたイベントに応じて動作が行われる。ステップＳ３８においてマルチタッチモードでの処理が行われ、再度、本体設定画面の表示が指示された後、ステップＳ３２に戻り、以上の処理が繰り返される。

マルチタッチでの操作を可能とすることによって、ユーザは、例えば２点の触り方や動かし方によって操作するジェスチャー操作が可能になる。ジェスチャー操作によれば、多点の触り方や動かし方によって、その触り方と動かし方に応じた処理が実行される。

図２４は、手袋操作モードのON/OFFと、マルチタッチモードのON/OFFを組み合わせたときに実現される操作モードの例を示す図である。

例えば、情報処理装置１において検出可能なイベントがTouchイベントとHoverイベントであるものとすると、手袋操作モードOFF、かつマルチタッチモードOFFの場合、普通の動作モードとなる。ユーザは、一本の指でTouchイベントとHoverイベントを検出させて操作を行うことになる。

また、手袋操作モードON、かつマルチタッチモードOFFの場合、手袋を装着した状態でHover領域上での操作が可能な動作モードである手袋動作モードとなる。手袋操作モードOFF、かつマルチタッチモードONの場合、Touch領域上で、多点に触れることで操作が可能なるマルチタッチ動作モードとなる。手袋操作モードON、かつマルチタッチモードONの場合、Hover領域上で、多点での操作が可能な動作モードとなる。

このように、情報処理装置１をマルチタッチによる操作に対応させることにより、ユーザは例えばHover領域で多点を認識させることにより所定の処理を実行させたり、多点を用いたジェスチャー操作を認識させたりすることが可能になる。また、情報処理装置１においては機能の拡張を実現することできる。

以上においては、情報処理装置１がデジタルカメラである場合について説明したが、上述した処理は、携帯電話機やパーソナルコンピュータなどの、タッチパネルを有する各種の装置に適用可能である。

［コンピュータの構成例］
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。

図２５は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。

CPU(Central Processing Unit)１０１、ROM(Read Only Memory)１０２、RAM(Random Access Memory)１０３は、バス１０４により相互に接続されている。

バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、キーボード、マウスなどよりなる入力部１０６、ディスプレイ、スピーカなどよりなる出力部１０７が接続される。また、入出力インタフェース１０５には、ハードディスクや不揮発性のメモリなどよりなる記憶部１０８、ネットワークインタフェースなどよりなる通信部１０９、リムーバブルメディア１１１を駆動するドライブ１１０が接続される。

以上のように構成されるコンピュータでは、CPU１０１が、例えば、記憶部１０８に記憶されているプログラムを入出力インタフェース１０５及びバス１０４を介してRAM１０３にロードして実行することにより、上述した一連の処理が行われる。

CPU１０１が実行するプログラムは、例えばリムーバブルメディア１１１に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供され、記憶部１０８にインストールされる。

なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。

１ 情報処理装置， ２ ディスプレイ， ３４ 制御部， ３５ 表示部， ３６ タッチパネル， ５１ モード設定部， ５２ イベント検出部， ５３ UI制御部

Claims (6)

1. 装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定する設定手段と、
   所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号を出力する物体検出手段と、
   前記操作モードとして第１のモードが設定されている場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードが設定されている場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出する入力検出手段と、
   前記第１の入力が行われたことが検出された場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことが検出された場合、前記第２の入力に応じた処理を行う制御手段と
   を備える情報処理装置。
2. 前記設定手段は、ユーザによる操作に応じて前記操作モードを設定する
   請求項１に記載の情報処理装置。
3. 前記入力検出手段は、さらに、前記第１のモードが設定されている場合と前記第２のモードが設定されている場合のいずれの場合においても、前記検出信号により表される前記物体の状態が、前記所定の距離より遠く、閾値となる他の距離より近い状態であるときに第３の入力が行われたことを検出する
   請求項１に記載の情報処理装置。
4. 前記制御手段は、前記第２の入力に応じた処理として、前記第２の入力が行われたことが検出された前記所定の面上の位置に所定の画像を表示させ続ける処理を行う
   請求項１に記載の情報処理装置。
5. 装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定し、
   前記操作モードとして第１のモードを設定している場合、物体検出手段から出力された、所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードを設定している場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出し、
   前記第１の入力が行われたことを検出した場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことを検出した場合、前記第２の入力に応じた処理を行う
   ステップを含む情報処理方法。
6. 装置に対する操作の方法に関する操作モードとして、複数のモードの中から所定のモードを設定し、
   前記操作モードとして第１のモードを設定している場合、物体検出手段から出力された、所定の面を基準として、前記所定の面の各位置における、近接された物体までの距離に応じた信号である検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときと所定の距離より近い状態であるときに第１の入力が行われたことを検出し、第２のモードを設定している場合、前記検出信号により表される前記物体の状態が前記所定の面に触れている状態であるときには前記第１の入力が行われたことを、前記所定の距離より近い状態であるときには第２の入力が行われたことをそれぞれ検出し、
   前記第１の入力が行われたことを検出した場合、前記第１の入力に応じた処理を行い、前記第２の入力が行われたことを検出した場合、前記第２の入力に応じた処理を行う
   ステップを含む処理をコンピュータに実行させるプログラム。

Images