JP5801177B2 - 情報処理装置の入力方法、及び情報処理装置 - Google Patents

Description

本発明は、パソコンやワークステーション、ゲーム機、ＰＤＡ、小型端末、携帯電話等の情報処理装置の入力装置に関し、特にアイコン表示を用いた入力装置におけるアイコンの操作性向上を実現する技術に関するものである。

近年、情報処理装置においては、情報表示部にキーボードの代わりとなるグラフィックユーザーインターフェース（ＧＵＩ）を表示し、それらを指でタッチ選択して情報入力を行うタッチ入力式のディスプレイ（タッチパネル）が採用されている。この場合、ＧＵＩを操作するときに、自分の指が邪魔になることがある。

そこで、ＧＵＩを操作するときに自分の指が邪魔にならないように操作するための技術として、例えば特許文献１に開示された情報処理装置が知られている。

上記特許文献１に開示された情報処理装置１００では、図１０に示すように、情報を表示する透明な表示装置１０１と、その裏面に透明なタッチ入力式センサ１０２とを備え、タッチ入力式センサ１０２に指１０３を接触させて表示装置１０１に表示されるグラフィックユーザーインターフェース（ＧＵＩ）をタッチ選択するようになっている。

したがって、表示装置１０１の裏面側から操作するので、自分の指が邪魔にならないものとなっている。

また、例えば特許文献２に開示された入力システム２００では、図１１に示すように、筋電センサ２０１を用いて、画面を操作することができるようになっている。

上記入力システム２００では、画面のタッチ操作を伴わないので、自分の指が邪魔にならないものとなっている。

さらに、例えば特許文献３に開示されたアイコン制御方法では、図１３に示すように、タッチパネル３０１において、指３０２による複数点の同時タッチによってアイコン３０３を操作できるようになっている。

この結果、アイコン３０３を指３０２で挟むので、アイコン３０３を見るためには自分の指が邪魔にならないものとなっている。

特開２０１１−７６５６０号公報（２０１１年４月１４日公開） 特開２００８−３０５１９９号公報（２００８年１２月１８日公開） 特開２００１−３５６８７８号公報（２００１年１２月２６日公開）

しかしながら、上記従来の入力装置では、以下の問題点を有している。

まず、特許文献１に開示された情報処理装置１００では、表示装置１０１の裏面側から操作するので、操作感覚が表面側からの操作とは逆の感覚になり、操作し難いという問題を有している。

また、特許文献２に開示された入力システム２００では、操作対象のデバイスとは別に操作検知用のセンサを利用者が装着する必要があるという問題点を有している。

さらに、特許文献３に開示されたアイコン制御方法では、タッチパネル３０１上において複数点をタッチしてアイコンを操作するようになっているが、タッチパネルから離れた状態でのドラッグを解除することができないという問題点を有している。

本発明は、上記従来の問題点に鑑みなされたものであって、その目的は、特別な操作検知用のデバイスを利用者が装着せず、検出部からの高さを認識して適切なドラッグ操作を行い得る情報処理装置の入力方法、及び情報処理装置を提供することにある。

本発明の情報処理装置の入力方法は、上記課題を解決するために、表示部と、表示面当接検出部及び表示面近接検出部とを備えると共に、表示部には複数の対象物が表示される情報処理装置の入力方法であって、第１の指を上記表示面当接検出部に当接した状態で、上記表示面近接検出部への表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、上記移動可能工程における第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより対象物を移動する移動工程と、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含むことを特徴としている。

上記の発明によれば、情報処理装置は、表示部と、表示面当接検出部及び表示面近接検出部とを備えている。このような情報処理装置において、従来では、表示装置の裏面側から操作するので、操作し難いという問題、操作検知用のセンサを利用者が装着する必要があるという問題、検出部から離れた状態でのドラッグを解除することができないという問題があった。

そこで、このような問題を解決するために、本発明では、第１の指を上記表示面当接検出部に当接した状態で、上記表示面近接検出部への表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、上記移動可能工程における第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより対象物を移動する移動工程と、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含んでいる。

すなわち、本発明では、表示面当接検出部への当接を離れるとドラッグ状態を固定し、再度、第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配することにより、対象物を落下可能状態とし、そのときの第１の指と第２の指との距離を閾値よりも大きくなったこと、つまり第１の指と第２の指との間隔が広がったことを検知したときに落下操作つまりドラッグ解除確定と認識する。

このため、情報処理装置の表面側からの操作が可能となるので、操作感覚が表面側からの操作とは逆の感覚になり、操作し難いという問題が解消される。

また、操作検知用のセンサを利用者が装着する必要はない。さらに、ドラッグ解除工程においては、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除する。したがって、ドラッグの解除においては、第１の指及び第２の指を表示面近接検出範囲内において閾値距離内から閾値距離外に広げることにより、ドラッグの解除を確定することが可能となる。このため、ドラッグ中に検出部から指が離れすぎて、対象物をうっかり落としてしまうということがない。さらに、対象物のドラッグ中に第１指Ｆ１と第２指Ｆ２との距離が離れたときに、ドラッグが解除されて、目的の位置以外に対象物の移動位置が決まってしまう、つまりドラッグ中に対象物を落としてしまうということがない。

したがって、特別な操作検知用のデバイスを利用者が装着せず、検出部からの高さを認識して適切なドラッグ操作を行い得る情報処理装置の入力方法、及び情報処理装置を提供することにある。

本発明の情報処理装置の入力方法では、前記表示部には対象物としての複数個のアイコンが表示されると共に、前記ドラッグ開始工程においては、前記第１の指を前記表示面当接検出部に当接した状態で、前記表示面近接検出部の表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより少なくとも１個のアイコンが選択され、前記移動可能工程においては、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することによりアイコンを移動可能状態とし、前記移動工程においては、第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することによりアイコンを移動し、前記ドラッグ解除工程においては、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることによりアイコンのドラッグを解除することが可能である。

これにより、表示部には対象物としての複数個のアイコンが表示され、アイコンのドラッグ操作を適切に行うことができる。

本発明の情報処理装置の入力方法では、前記ドラッグ開始工程において少なくとも１個のアイコンを選択して移動可能工程及び移動工程を経た後、移動途中にて第１の指を表示面当接検出部に当接することにより、アイコンの追加選択を行うことが可能である。

これにより、アイコンのドラッグ操作を行う場合に、アイコンの複数選択によるドラッグ操作を適切に行うことができる。

本発明の情報処理装置の入力方法では、前記ドラッグ開始工程において少なくとも１個のアイコンが選択されたときには、前記表示部には、アイコンが選択されていることを示すアイコン選択マークが付されることが好ましい。

これにより、ドラッグ操作において、アイコンを選択していることが、表示部におけるアイコン選択マークにて容易に認識することができる。

本発明の情報処理装置の入力方法では、前記表示部には対象物としての複数個の表示エリアが表示されると共に、前記ドラッグ開始工程においては、前記第１の指を前記表示面当接検出部に当接した状態で、前記表示面近接検出部の表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより少なくとも１個の表示エリアが選択され、前記移動可能工程においては、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより表示エリアをスクロール可能状態とし、前記移動工程においては、第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより表示エリアのスクロールを移動し、前記ドラッグ解除工程においては、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより表示エリアのスクロールを終了することが可能である。

これにより、表示部には対象物としての複数個の表示エリアが表示され、表示エリアのドラッグ操作としてのスクロールを適切に行うことができる。

本発明の情報処理装置の入力方法では、前記移動可能工程においては、前記表示部の表示エリアが拡大表示されることが好ましい。

これにより、ドラッグ操作において、表示エリアを選択していることが、表示部における表示エリアの拡大表示にて容易に認識することができる。

本発明の情報処理装置は、上記課題を解決するために、前記記載の情報処理装置の入力方法を使用する情報処理装置であって、第１の指又は第２の指の表示面当接検出部への当接座標を検知し、かつ第１の指又は第２の指の表示面近接検出部への表示面近接座標を検知する状態管理手段と、上記状態管理手段での当接座標の検知又は表示面近接座標の検知に基づいて、対象物のドラッグ処理を行う処理手段と、処理手段でのドラッグ処理に基づいて表示部での表示を制御する表示制御手段とが設けられていることを特徴としている。

上記の発明によれば、特別な操作検知用のデバイスを利用者が装着せず、検出部からの高さを認識して適切なドラッグ操作を行い得る情報処理装置の入力方法を使用した情報処理装置を提供することができる。

本発明の情報処理装置の入力方法は、以上のように、第１の指を上記表示面当接検出部に当接した状態で、上記表示面近接検出部への表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、上記移動可能工程における第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより対象物を移動する移動工程と、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含む方法である。

本発明の情報処理装置は、以上のように、前記記載の情報処理装置の入力方法を使用する情報処理装置であって、第１の指又は第２の指の表示面当接検出部への当接座標を検知し、かつ第１の指又は第２の指の表示面近接検出部への表示面近接座標を検知する状態管理手段と、上記状態管理手段での当接座標の検知又は表示面近接座標の検知に基づいて、対象物のドラッグ処理を行う処理手段と、処理手段でのドラッグ処理に基づいて表示部での表示を制御する表示制御手段とが設けられているものである。

それゆえ、特別な操作検知用のデバイスを利用者が装着せず、検出部からの高さを認識して適切なドラッグ操作を行い得る情報処理装置の入力方法、及び情報処理装置を提供するという効果を奏する。

（ａ）は、本発明における情報処理装置の入力方法、及び情報処理装置の実施の一形態を示すものであって、ドラッグ操作における移動可能工程を示す側面図であり、（ｂ）はドラッグ操作における移動工程を示す側面図であり、（ｃ）（ｄ）はドラッグ操作におけるドラッグ解除工程を示す側面図である。 感圧方式タッチパネルと静電容量方式タッチパネルとを備えた上記情報処理装置の構成を示す断面図である。 （ａ）（ｂ）は、上記静電容量方式タッチパネルの構成を示す断面図である。 上記情報処理装置の構成を示すブロック図である。 （ａ）（ｂ）は、上記情報処理装置の入力方法でのドラッグ操作のドラッグ開始工程を示す側面図である。 （ａ）（ｂ）（ｃ）は、図１（ａ）〜（ｄ）及び図５（ａ）（ｂ）以外の第１指Ｆ１及び第２指Ｆ２の配置形態を示す側面図である。 上記情報処理装置における表示部に表示されたアイコンを示す平面図である。 （ａ）（ｂ）（ｃ）は、上記情報処理装置における表示部に表示されたアイコンのドラッグ操作を示す平面図である。 （ａ）（ｂ）（ｃ）（ｄ）は、上記情報処理装置における表示部に表示されたアイコンを複数選択する場合のドラッグ操作を示す平面図である。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作における基本操作を示すフローチャートである。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作における第１ドラッグ操作を示すフローチャートである。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作における第２ドラッグ操作を示すフローチャートである。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作におけるアイコン複数選択操作を示すフローチャートである。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作におけるアイコンのホールド解除操作を示すフローチャートである。 上記情報処理装置の入力方法におけるアイコンのドラッグ操作におけるアイコンの移動操作を示すフローチャートである。 本発明における情報処理装置の入力方法、及び情報処理装置の他の実施の形態を示すものであって、情報処理装置の表示部における全体画面を示す平面図である。 （ａ）（ｂ）（ｃ）（ｄ）は、上記情報処理装置における表示部に表示された表示エリアのドラッグ操作を示す平面図である。 上記情報処理装置の入力方法における表示エリアのドラッグ操作における基本操作を示すフローチャートである。 上記情報処理装置の入力方法における表示エリアのドラッグ操作における第１スクロール操作を示すフローチャートである。 上記情報処理装置の入力方法における表示エリアのドラッグ操作における第２スクロール操作を示すフローチャートである。 上記情報処理装置の入力方法における表示エリアのドラッグ操作における表示エリアのホールド解除操作を示すフローチャートである。 上記情報処理装置の入力方法における表示エリアのドラッグ操作における表示エリアの移動操作を示すフローチャートである。 従来の情報処理装置の入力方法を示す断面図である。 従来の他の情報処理装置の入力方法を示す正面図である。 従来のさらに他の情報処理装置の入力方法を示す平面図である。

本発明の一実施形態について図１〜図１５に基づいて説明すれば、以下のとおりである。

（情報処理装置の構成）
本実施の形態の情報処理装置の構成について、図２〜図４に基づいて説明する。図２は本実施の形態の情報処理装置の構成を示す断面図であり、図３（ａ）（ｂ）は上記情報処理装置の静電容量方式タッチパネルの構成を示す断面図であり、図４は上記情報処理装置の構成を示すブロック図である。

本実施の形態の情報処理装置１は、表示面当接検出部としての感圧方式タッチパネルと表示面近接検出部としての静電容量方式タッチパネルとの両方を備えた検出部としての静電式感圧式併用タッチパネルを有している。

上記静電式感圧式併用タッチパネル１０は、図２に示すように、表示部１１と静電式検出部１２と感圧式検出部１３とをこの順に積層したものからなっている。

上記表示部１１は、例えば、液晶表示装置からなっており、後述する表示制御部２３からの制御命令により画面の表示を行う。

上記静電式検出部１２は、静電式感圧式併用タッチパネル１０の表面に、例えば指を近づけたときの、該指の位置の座標情報と高さ情報とを後述する処理部２２に送るようになっている。

上記静電式検出部１２は、図３（ａ）に示すように、ガラス基板１２ａと、電極パターン層１２ｂと、絶縁体フィルムからなる保護カバー１２ｃとがこの順に積層されてなっている。

電極パターン層１２ｂは、図３（ｂ）に示すように、例えばＩＴＯ（Indium Tin Oxide：インジウムすず酸化物）からなるＸ方向の透明電極層（Ｘ）とＹ方向の透明電極層（Ｙ）との縦横２層からなる多数のモザイク状電極パターンを構成している。

静電式検出部１２は、投影型静電容量方式タッチパネルとなっており、指Ｆと上記透明電極層（Ｘ）及び透明電極層（Ｙ）からなる導電膜との間での静電容量の変化を捉えて指Ｆの位置を検出するようになっている。すなわち、指Ｆが保護カバー１２ｃに近づくと、その付近における電極の静電容量の変化を縦横２つの電極列から知ることによって、その位置を精密に判別できるようになっている。

この結果、静電式検出部１２では、指Ｆと透明電極層（Ｘ）及び透明電極層（Ｙ）との間の一定高さまでは、静電容量の変化を捉えることができるが、それ以上の高さになると検出することができない。尚、静電式検出部１２では実際に該静電式検出部１２に直接触れなくても、近づいた指Ｆの座標位置を検出することができる。したがって、本明細書では、静電式検出部１２においては、指Ｆの座標位置を検出した状態を、「静電タッチ」という。

次に、感圧式検出部１３は、例えば銀行のＡＴＭ等に使用されているタッチパネルと同じ座標検出機構を有している。すなわち、感圧式検出部１３では、マトリクス状に配列された電極スイッチが並んでおり、操作者がその面の一部を指Ｆで押さえると、その座標位置の上下２層の電極が接触することによって電気回路が構成され、縦と横との位置情報を検出する仕組みとなっている。尚、本明細書においては、感圧式検出部１３に指Ｆを当接してその位置を検出した場合、「感圧タッチ」という。さらに、静電式検出部１２と感圧式検出部１３との両方の検出を示すときには、単に「タッチした」という。

上記静電式感圧式併用タッチパネル１０を備えた情報処理装置１の制御装置２０は、図４に示すように、状態管理手段としての状態管理部２１、処理手段としての処理部２２及び表示制御手段としての表示制御部２３を備えている。

状態管理部２１は、処理部２２と連携してグラフィックユーザーインターフェース（ＧＵＩ）に表示している内容や前回のタッチ座標等の状態管理を行う。

処理部２２は、感圧式検出部１３及び静電式検出部１２からのタッチ情報を基に、状態管理部２１との状態からＧＵＩへの表示内容を処理し表示制御部２３に送る。また、処理内容の結果、記憶内容に変更があれば記憶装置３０の制御を行う。

表示制御部２３は、処理部２２から送られた画面情報を表示部１１へ送る。

尚、本実施の形態の静電式感圧式併用タッチパネル１０は静電式、感圧式複合型のタッチパネルとなっているが、本発明においては、必ずしもこれに限らず、タッチパネルに接触した状態での座標、高さ等の検知ができれば形式は問わない。このようなものとして、例えば、タッチパネルでは、光学式タッチパネル、物体近接検出装置(光変調パネル)が該当し、一般的なセンサでは、超音波式の非接触位置検出センサ技術が該当する。また、検出部として、例えば赤外線方式又はカメラ方式を採用することも可能である。特に、表示部がホログラム方式等の立体投影装置の場合には、タッチパネルが存在せず、赤外線方式又はカメラ方式によって指の空間座標を検出し、表示面への当接、近接が判定される。

（指操作の各種形態）
次に、上記構成の情報処理装置１における静電式感圧式併用タッチパネル１０上に指Ｆが存在するときの各種基本形態について、図５（ａ）（ｂ）、図１（ａ）（ｂ）（ｃ）、及び図７（ａ）（ｂ）（ｃ）に基づいて説明する。尚、図５（ａ）（ｂ）、図１（ａ）（ｂ）（ｃ）、及び図６（ａ）（ｂ）（ｃ）において、静電式検出部１２の下側に設けられている表示部１１は省略している。また、Ｈは静電式検出部１２での静電式検出範囲を示している。さらに、Ｄは検出座標間距離を示している。

まず、図５（ａ）は、第１の指としての第１指Ｆ１が感圧式検出部１３に感圧タッチ状態となっており、第１指Ｆ１が感圧式検出部１３によって該感圧タッチ座標にて感圧検出されている状態を表している。一方、第２の指としての第２指Ｆ２については、該第２指Ｆ２が感圧式検出部１３から表示面近接検出範囲としての静電式検出範囲Ｈ内の静電式検出高さＨ_Ｘ に存在することにより、第２指Ｆ２が静電式検出部１２によって該静電タッチ座標にて静電検出されている状態を表している。上記静電式検出高さＨ_Ｘは、静電式検出範囲Ｈ内であれば、静電式検出部１２にて検出した静電量にて求めることが可能である。

ここで、第１指Ｆ１は、感圧式検出部１３に感圧タッチ状態となっていると共に、静電式検出範囲Ｈ内の静電式検出高さＨ_Ｘ に存在する。このため、第１指Ｆ１は静電式検出部１２に静電タッチされた状態にもなっている。しかし、第１指Ｆ１が静電式検出部１２に静電タッチされている静電タッチ座標は、感圧式検出部１３の感圧タッチ座標と同じである。

ここで、第１指Ｆ１は定常的にタッチパネル操作に用いられる指を想定しており、大抵の場合は人差し指であることを想定している。また、第２指Ｆ２は、本実施の形態のつまみ操作を実現する場合の利用者の指を想定しており、大抵の場合は親指であることを想定している。

次に、図５（ｂ）は、図５（ａ）の状態から、第２指Ｆ２が第１指Ｆ１に近づくように移動し、その結果、検出座標間距離Ｄが閾値以下の短い距離になり、つまむ状態つまり選択状態となったことを示している。すなわち、つまむ状態とは、従来のパソコン等におけるアイコンの選択状態を想定しており、ブラウザ等であれば１点を選択した状態を想定している。

次に、図１（ａ）は、図５（ｂ）の状態から第１指Ｆ１と第２指Ｆ２とを上方に移動させたことにより、第１指Ｆ１が静電式検出範囲Ｈ内の静電式検出高さＨ_Ｘ に存在し、第２指Ｆ２が静電式検出範囲Ｈ外に存在する状態を示している。この結果、第１指Ｆ１のみが該静電タッチ座標にて静電タッチした状態となっている。

次に、図１（ｂ）は、図１（ａ）の状態から、第１指Ｆ１が静電式検出範囲Ｈ内で移動し、移動先の静電タッチ座標にて静電タッチした状態を示している。この結果、第１指Ｆ１はタッチ状態で元の静電タッチ座標から移動先の静電タッチ座標まで移動したことになる。この操作は、従来のパソコン等におけるアイコンの移動操作、又はブラウザ等における画面のスクロール操作を示している。

さらに、図１（ｃ）は、図１（ｂ）の状態から、第２指Ｆ２が静電式検出範囲Ｈにおいて第１指Ｆ１への閾値内の近接位置である静電タッチ座標にて静電タッチした状態を示している。さらに、図１（ｄ）は、図１（ｃ）の状態から、第２指Ｆ２が静電式検出範囲Ｈにおいて第１指Ｆ１への閾値よりも大きくなる静電タッチ座標にて静電タッチした状態を示している。すなわち、この操作は、静電式検出範囲Ｈに存在する第１指Ｆ１及び第２指Ｆ２を閾値内の距離から閾値外の距離へと広げたことにより、アイコンのドラッグを解除した操作を示している。

また、図６（ａ）（ｂ）（ｃ）は、第１指Ｆ１及び第２指Ｆ２の他の操作形態を示している。

まず、図６（ａ）は、第１指Ｆ１のみが感圧式検出への感圧タッチ検知をしており、第２指Ｆ２は感圧タッチ検出座標及び静電タッチ検出座標がない状態を示している。

また、図６（ｂ）は、図６（ａ）の状態から、第１指Ｆ１が静電タッチ位置Ｐ１を静電検出すると共に、第２指Ｆ２が静電タッチ位置Ｐ２を静電検出している状態となっている。尚、図６（ｂ）が図１（ａ）と異なる点は、図６（ｂ）の方が、第１指Ｆ１と第２指Ｆ２との距離が大きいことにある。

さらに、図６（ｃ）は、第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ外に存在し、静電式感圧式併用タッチパネル１０ではタッチ位置を検出できない状態を示している。

（アイコン表示される待ち受け画面におけるアイコンの各種表示状態）
次に、上記構成の静電式感圧式併用タッチパネル１０におけるアイコンの移動操作における各種表示状態について、図７、図８（ａ）（ｂ）（ｃ）に基づいて説明する。

まず、図７は本実施の形態の表示部１１に表示されているアイコンの配置状態を示している。すなわち、図７においては、例えば９個のアイコンが配されている。

上記表示部１１における９個のアイコンが配された図８の状態から１個のアイコンＩをドラッグするときの表示部１１の各状態を図８（ａ）（ｂ）（ｃ）に基づいて説明する。

まず、図８（ａ）は、図８に示す左上隅のアイコンＩをドラッグするために、つまんだ状態つまり選択した状態を示している。このように、本実施の形態では、アイコンＩをつまんだ状態つまり選択した状態となった場合には、「×」マークが付される。

また、図８（ｂ）は、画面左上隅のアイコンＩを、画面右下隅にドラッグつまり移動した状態を示している。

さらに、図８（ｃ）は、画面右下隅のアイコンＩをドラッグ解除つまり画面右下隅にアイコンＩの移動確定をした状態を示している。

次に、上記表示部１１における９個のアイコンが配された図７の状態から２個のアイコンＩをドラッグするときの表示部１１の各画面を図９（ａ）（ｂ）（ｃ）（ｄ）に基づいて説明する。

まず、図９（ａ）は、図８（ａ）に示す左上隅のアイコンＩをドラッグするためにつまんだ状態つまり選択した状態から、他のアイコンＩの上まで座標を移動したときの表示部１１の画面を表している。

図９（ｂ）は、アイコンＩが追加でドラッグ状態となったときの表示部１１の画面を表している。

図９（ｃ）は、２つのアイコンＩをドラッグして、表示部１１の右下隅まで移動した状態を表している。

図９（ｄ）は、２つのアイコンＩのドラッグ解除により、表示部１１の右下隅に２つのアイコンＩが再配置された状態を表している。

（アイコン表示される待ち受け画面におけるアイコンのドラッグ操作の流れ）
上記構成を備えた静電式感圧式併用タッチパネル１０において、アイコンＩをドラッグするときの制御流れを、図１０〜図１５に基づいて説明する。ここで、図１０〜図１５はアイコンのドラッグ操作を示すフローチャートである。

最初に、図７に示す表示部１１における左上隅のアイコンＩを選択するために、アイコンＩをつまむ操作について説明する。

まず、図１０に示すように、第１指Ｆ１が静電式感圧式併用タッチパネル１０における感圧式検出部１３に感圧タッチされているかを検出する（Ｓ１）。指操作としては、図５（ａ）に示す状態となる。尚、指操作は、厳密には、図５（ａ）に示す状態の前に図６（ａ）に示す状態となるが、本実施の形態の静電式感圧式併用タッチパネル１０では、何も操作していない状態からは、感圧式検出部１３での感圧タッチを契機とする。

次いで、第１指Ｆ１がアイコンＩを感圧タッチしているかを判断する（Ｓ２）。具体的には、第１指Ｆ１における感圧タッチ座標に基づいて、表示部１１に現在表示されている画面状態に基づいて、第１指Ｆ１がアイコンＩを感圧タッチしているかを判断する。表示部１１に現在表示されている画面状態としては、図７に示すアイコンＩ上を感圧タッチしているかを判定する。

そして、第１指Ｆ１が図７に示すアイコンＩ上を感圧タッチしていると判断したときには、第２指Ｆ２における静電式感圧式併用タッチパネル１０の静電式検出部１２での静電タッチを検出する（Ｓ３）。すなわち、Ｓ３では、アイコンＩをつまむ操作を検出するために静電式検出部１２での静電タッチ座標の検出を行う。指操作としては、図５（ａ）又は図５（ｂ）に示す状態となる。

次いで、第２指Ｆ２の静電タッチ座標が、第１指Ｆ１の感圧タッチ座標に近接しているかどうかを判定する（Ｓ４）。詳細には、第２指Ｆ２の静電タッチ座標と第１指Ｆ１の感圧タッチ座標とが閾値よりも小さいか否かを判断する。そして、第２指Ｆ２の静電タッチ座標と第１指Ｆ１の感圧タッチ座標とが閾値よりも小さい場合には、つまむ操作と認識する（Ｓ５）。そのときの表示部１１の画面は、図７の表示を維持している。すなわち、つまむ操作と認識するだけでは画面に変化はない。

次いで、つまんだアイコンＩをドラッグする。このドラッグ方法については、一般的な第１指Ｆ１の感圧タッチを維持した状態でドラッグする第１ドラッグ操作と、第１指Ｆ１の感圧タッチを解除し、かつ静電タッチを維持した状態でドラッグする第２ドラッグ操作とが存在する（Ｓ６）。

最初に、つまんだアイコンＩを第１ドラッグ操作にてドラッグする場合の流れについて、図１１に基づいて説明する。図１１は第１ドラッグ操作を示すフローチャートである。

すなわち、第１ドラッグ操作は、利用者が感圧式検出部１３から第１指Ｆ１を離さず座標移動をするドラッグ操作である。

まず、第１指Ｆ１の感圧式検出部１３での感圧タッチを維持した状態にて第１指Ｆ１を移動することにより、感圧タッチ座標の移動を行う（Ｓ１１）。

次いで、表示部１１における画面において、アイコンＩの移動を行う（Ｓ１２）。画面操作としては、図７に示す画面から、図８（ｃ）に示す画面へと遷移する。

次に、つまんだアイコンＩを第２ドラッグ操作にてドラッグする場合の流れについて、図１２に基づいて説明する。図１２は第２ドラッグ操作を示すフローチャートである。

すなわち、第２ドラッグ操作は、利用者が感圧式検出部１３から第１指Ｆ１を離した場合のドラッグ操作である。

図１２に示すように、まず、静電式感圧式併用タッチパネル１０の感圧式検出部１３での第１指Ｆ１の感圧タッチが解除され、第１指Ｆ１は静電式検出部１２のみにて静電タッチが検出される（Ｓ２１）。指操作としては、図１（ａ）若しくは図６（ｂ）、又は図１（ｃ）の状態である。すなわち、第１指Ｆ１が静電式検出範囲Ｈ内に存在していればよい。したがって、第２指Ｆ２は静電式検出範囲Ｈ外となっていてよく、又は第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在し、かつ第１指Ｆ１と第２指Ｆ２が閾値内に近接している状態であってもよい。

このとき、表示部１１の画面において、つまむ操作によるホールド状態としての画面表示を行う（Ｓ２２）。具体的には、図８（ａ）に示すように、つまんだアイコンＩに対して例えば「×」の表示を行う。尚、この「×」の表示はこれに限るものではない。尚、アイコンＩをホールド状態としたときには、第１指Ｆ１の静電タッチ座標は空の状態となる。

次いで、その後、静電式検出部１２において第１指Ｆ１の静電タッチ座標の移動が行われたか否かが判断される（Ｓ２３）。そして、Ｓ２３において、第１指Ｆ１における静電タッチ座標の移動の検出が行われたときには、アイコンＩをホールドした状態での画面操作が行われる（Ｓ２４）。具体的には、アイコンＩの複数選択又はアイコンＩのホールド解除である。尚、Ｓ２４の後、Ｓ２３に戻って、静電式検出部１２における第１指Ｆ１の静電タッチ座標の移動検出待ちとなる。

一方、Ｓ２３において、静電式検出部１２における第１指Ｆ１の静電タッチ座標の移動検出が行われなかったときには、アイコンＩのホールド状態を維持し、画面は、図８（ａ）を維持し、その後、例えばアイコンＩの移動操作を行う（Ｓ２５）。

次に、Ｓ２４におけるアイコンＩをホールドした状態での画面操作として、アイコンＩを複数選択する操作について、図１３に基づいて説明する。図１３は、アイコンＩの複数選択操作の流れを示すフローチャートである。

まず、静電式感圧式併用タッチパネル１０における感圧式検出部１３において、第１指Ｆ１の再度の感圧タッチを行う（Ｓ３１）。すなわち、指操作においては、図１（ａ）に示す状態から、第１指Ｆ１における静電式検出範囲Ｈ内の位置を維持した状態で、図１（ｂ）に示すように、第１指Ｆ１及び第２指Ｆ２の移動を行う。これにより、表示部１１では、図９（ａ）の画面状態に遷移する。このとき、その位置で、図６（ａ）に示すように、第１指Ｆ１の再度の感圧タッチを行う。

図１３に示すフローチャートでは、このとき、第１指Ｆ１の感圧式検出部１３での感圧タッチ座標が２つ目のアイコンＩ上を感圧タッチしているかを判断する（Ｓ３２）。第１指Ｆ１が２つ目のアイコンＩ上を感圧タッチしているときには、２つ目のアイコンＩもホールド状態となる（Ｓ３３）。すなわち、アイコンＩの複数選択状態となる。表示部１１においては、図９（ａ）から図９（ｂ）の画面状態に遷移し、２つ目のアイコンＩの位置に、例えば「×」マークが２個付される。そして、Ｓ３４が終了すると、図１２のＳ２３に戻る。したがって、第１指Ｆ１による感圧式検出部１３での感圧タッチを繰り返すと、さらに例えば隣のアイコンＩが複数ホールド状態となる。また、感圧式検出部１３での検出がなくなり、静電式検出部１２での検出になれば、図１２に示すＳ２５の操作へと遷移する。

尚、図１３のＳ３２において、第１指Ｆ１が２つ目のアイコンＩ上を感圧タッチしていないときには、終了し、図１２のＳ２３に戻る。

次に、図１２のＳ２４におけるアイコンＩをホールドした状態での画面操作として、アイコンＩのホールドを解除する操作について、図１４に基づいて説明する。図１４は、アイコンＩのホールドを解除する操作の流れを示すフローチャートである。

まず、アイコンＩをホールドした状態での第１指Ｆ１及び第２指Ｆ２は、前述したように、図１（ｂ）若しくは図６（ｂ）、又は図１（ｃ）に示す状態となっている。したがって、図１（ｃ）に示す状態から、アイコンＩのホールドを解除するには、静電式検出範囲Ｈ内に存在する２つの第１指Ｆ１と第２指Ｆ２との距離が閾値よりも大きいことを検出する（Ｓ４１）。指操作においては、図１（ｃ）に示す状態から図１（ｄ）に示す状態、つまり第１指Ｆ１及び第２指Ｆ２との間隔が閾値よりも離れた状態である。

尚、図１（ｂ）又は図６（ｂ）に示す状態から、アイコンＩのホールドを解除するには、図１（ｃ）に示すように、一旦、第２指Ｆ２を第１指Ｆ１との距離が閾値内になるように静電式検出範囲Ｈ内に存在させる。その後、上述したように、指操作を、図１（ｃ）に示す状態から図１（ｄ）に示す状態、つまり第１指Ｆ１及び第２指Ｆ２との間隔が閾値よりも離れた状態にする。

上記の操作により、アイコンＩをつまむ操作が解除されたことを検出し、アイコンＩのホールド状態が解除される（Ｓ４２）。このときの表示部１１の表示は、図８（ｃ）及び図９（ｄ）となっており、「×」マーク又は「××」マークが元のアイコンＩの表示となる。

すなわち、本実施の形態では、静電式検出範囲Ｈ内の２つの第１指Ｆ１及び第２指Ｆ２が、閾値よりも離れたときに、ホールド状態を解除するようになっている。

次に、前記図１２のＳ２５におけるアイコンＩのホールド状態を維持して、その後、アイコンＩの所望位置への移動操作を行う操作について、図１５に基づいて説明する。図１５はドラッグ状態のアイコンＩの所望位置への移動操作を示すフローチャートである。

まず、アイコンＩのホールド状態を維持している状態においては、指操作は図１（ａ）若しくは図６（ｂ）、又は図１（ｃ）の状態となっている。すなわち、第１指Ｆ１の感圧式検出部１３での感圧タッチが離れ、かつ第１指Ｆ１が静電式検出範囲Ｈ内に存在している状態つまりホールド状態となっている。この状態で、第１指Ｆ１を所望の位置まで移動させ、図１５に示すように、アイコンＩの移動を行う（Ｓ５１）。表示部１１においては、図８（ａ）に示す状態から図８（ｂ）に示す状態に遷移する。また、２つのアイコンＩをドラッグしているときには、図９（ｂ）に示す状態から図９（ｃ）に示す状態に遷移する。

次いで、第１指Ｆ１の所望位置への移動が完了したときに、図１５に示すように、第１指Ｆ１が感圧式検出部１３での感圧タッチから離れ、かつ第１指Ｆ１が静電式検出部１２における静電タッチのみの状態を確認すべく検出する（Ｓ５２）。

次いで、静電式検出部１２での検出座標が２つ未満か否か、又は静電式検出部１２での検出座標が２つである場合には、その距離が閾値内であるか否かを判断する（Ｓ５３）。すなわち、静電式検出部１２での検出座標が２つ未満ということは、図１（ｂ）又は図６（ｂ）に示すように、第１指Ｆ１による１つの静電タッチが検出され、第２指Ｆ２が静電式検出範囲Ｈ外となっている状態を示す。また、静電式検出部１２での検出座標が２つである場合にはその距離が閾値内であるということは、図１（ｃ）の状態であることを示す。

そして、本実施の形態では、これ以外の状態については、誤動作として２つの座標を破棄し、ホールド状態を維持するようになっている（Ｓ５４）。

次いで、Ｓ５３の条件を満たす場合には、その後、時系列で静電式検出範囲Ｈ内での静電タッチ座標の検出が、時系列で１点から２点になったことを検出する。このときの指操作は、図１（ｃ）に示すように、第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在している状態であり、かつ、第１指Ｆ１と第２指Ｆ２との距離は閾値内となっている。尚、図１（ｃ）の状態で移動した場合には、静電タッチ座標は最初から２点であることを検出している。

このときの表示部１１での表示は、図８（ｂ）又は図９（ｃ）となっている。

その後、静電式検出範囲Ｈ内の２つの第１指Ｆ１及び第２指Ｆ２が、閾値よりも離れたことを検出する（Ｓ５５）。指操作は、図１（ｄ）に示すように、第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在し、かつ第１指Ｆ１と第２指Ｆ２との距離が閾値よりも大となっている。これにより、アイコンＩのホールド状態が解除される（Ｓ５６）。表示部１１の表示においては、図８（ｃ）又は図９（ｄ）となっている。すなわち、表示部１１の左下隅にドラッグして移動されたアイコンＩが表示されたものとなっている。

したがって、本実施の形態では、ドラッグ状態でのアイコンＩの移動は、第１指Ｆ１を感圧タッチ移動させる場合を除き、第１指Ｆ１が静電式検出範囲Ｈ内に存在すると共に、第２指Ｆ２は静電式検出範囲Ｈ外に存在した状態、又は第１指Ｆ１と第２指Ｆ２とが閾値よりも近接して静電式検出範囲内に存在した状態にて行う。いずれにしても、第１指Ｆ１を静電式検出範囲Ｈ内に存在させた状態にてアイコンＩを移動する。そして、ドラッグ解除する場合には、静電式検出範囲Ｈ内に存在する第１指Ｆ１と第２指Ｆ２との距離を閾値内から閾値外に広げることによって、ドラッグ解除するようになっている。

このように、本実施の形態の情報処理装置１は、表示部１１と、感圧方式タッチパネル及び静電容量方式タッチパネルとを備える。表示部１１には複数の対象物が表示される。

このような情報処理装置において、従来では、表示装置の裏面側から操作するので、操作し難いという問題、操作検知用のセンサを利用者が装着する必要があるという問題、タッチパネルから離れた状態でのドラッグを解除することができないという問題があった。

そこで、このような問題を解決するために、本実施の形態における情報処理装置１の入力方法では、第１指Ｆ１にて感圧方式タッチパネルを感圧タッチした状態で、静電容量方式タッチパネルの静電式検出範囲Ｈ内に、第１指Ｆ１との間隔が閾値距離内となるように第２指Ｆ２を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、第１指Ｆ１における感圧タッチを解除しかつ該第１指Ｆ１を静電式検出範囲Ｈ内に配し、さらに第２指Ｆ２を静電式検出範囲Ｈ外に配するか又は第２指Ｆ２を静電式検出範囲Ｈ内において第１指Ｆ１との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、移動可能工程における第１指Ｆ１及び第２指Ｆ２の配置を維持して該第１指Ｆ１及び第２指Ｆ２を移動することにより対象物を移動する移動工程と、移動先にて第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配し、かつ該第１指Ｆ１と第２指Ｆ２との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含んでいる。

すなわち、本実施の形態では、感圧方式タッチパネルの感圧タッチを離れるとドラッグ状態を固定し、再度、第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配することにより、対象物を落下可能状態とし、そのときの第１指Ｆ１と第２指Ｆ２との距離を閾値よりも大きくなったこと、つまり第１指Ｆ１と第２指Ｆ２との間隔が広がったことを検知したときに落下操作つまりドラッグ解除確定と認識する。

このため、情報処理装置１の表面側からの操作が可能となるので、操作感覚が表面側からの操作とは逆の感覚になり、操作し難いという問題が解消される。

また、操作検知用のセンサを利用者が装着する必要はない。さらに、ドラッグ解除工程においては、移動先にて第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配し、かつ該第１指Ｆ１と第２指Ｆ２との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除する。したがって、ドラッグの解除においては、第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内から閾値距離外に配することにより、ドラッグの解除を確定することが可能となる。このため、ドラッグ中に静電式感圧式併用タッチパネル１０から指が離れすぎて、対象物をうっかり落としてしまうということがない。さらに、対象物のドラッグ中に第１指Ｆ１と第２指Ｆ２との距離が離れたときに、ドラッグが解除されて、目的の位置以外に対象物の移動位置が決まってしまう、つまりドラッグ中に対象物を落としてしまうということがない。

したがって、特別な操作検知用のデバイスを利用者が装着せず、静電式感圧式併用タッチパネル１０からの高さを認識して適切なドラッグ操作を行い得る情報処理装置１の入力方法を提供することができる。

また、本実施の形態の情報処理装置１の入力方法では、表示部１１には対象物としての複数個のアイコンＩが表示される。そして、ドラッグ開始工程においては、第１指Ｆ１にて感圧方式タッチパネルを感圧タッチした状態で、静電容量方式タッチパネルの静電式検出範囲Ｈ内に、第１指Ｆ１との間隔が閾値距離内となるように第２指Ｆ２を配することにより少なくとも１個のアイコンＩが選択される。移動可能工程においては、第１指Ｆ１における感圧タッチを解除しかつ該第１指Ｆ１を静電式検出範囲Ｈ内に配し、さらに第２指Ｆ２を静電式検出範囲Ｈ外に配するか又は第２指Ｆ２を静電式検出範囲Ｈ内において第１指Ｆ１との間隔を閾値距離内に維持することによりアイコンＩを移動可能状態とする。移動工程においては、第１指Ｆ１及び第２指Ｆ２の配置を維持して該第１指Ｆ１及び第２指Ｆ２を移動することによりアイコンＩを移動する。ドラッグ解除工程においては、移動先にて第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配し、かつ該第１指Ｆ１と第２指Ｆ２との間隔を該閾値距離内から閾値距離外となるように広げることによりアイコンＩのドラッグを解除することが可能である。

これにより、表示部１１には対象物としての複数個のアイコンＩが表示され、アイコンＩのドラッグ操作を適切に行うことができる。

また、本実施の形態の情報処理装置１の入力方法では、ドラッグ開始工程において少なくとも１個のアイコンＩを選択して移動可能工程及び移動工程を経た後、移動途中にて第１指Ｆ１を感圧タッチすることにより、アイコンＩの追加選択を行う。

これにより、アイコンＩのドラッグ操作を行う場合に、アイコンＩの複数選択によるドラッグ操作を適切に行うことができる。

また、本実施の形態の情報処理装置１の入力方法では、ドラッグ開始工程において少なくとも１個のアイコンが選択されたときには、表示部１１には、アイコンＩが選択されていることを示すアイコン選択マークとしての「×」マークが付される。

これにより、ドラッグ操作において、アイコンＩを選択していることが、表示部１１における「×」マークにて容易に認識することができる。

また、本実施の形態の情報処理装置１は、第１指Ｆ１又は第２指Ｆ２の感圧方式タッチパネルでの感圧タッチ座標を検知し、かつ第１指Ｆ１又は第２指Ｆ２の静電容量方式タッチパネルでの静電タッチ座標を検知する状態管理部２１と、状態管理部２１での感圧タッチ座標の検知又は静電タッチ座標の検知に基づいて、対象物のドラッグ処理を行う処理部２２と、処理部２２でのドラッグ処理に基づいて表示部１１での表示を制御する表示制御部２３とが設けられている。

これにより、特別な操作検知用のデバイスを利用者が装着せず、静電式感圧式併用タッチパネル１０からの高さを認識して適切なドラッグ操作を行い得る情報処理装置１の入力方法を使用した情報処理装置１を提供することができる。

〔実施の形態２〕
本発明の他の実施の形態について図１６〜図２２に基づいて説明すれば、以下のとおりである。尚、本実施の形態において説明すること以外の構成は、前記実施の形態１と同じである。また、説明の便宜上、前記の実施の形態１の図面に示した部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。

前記実施の形態１では、表示部１１においてアイコン表示される待ち受け画面の該アイコンＩのドラッグについて説明した。しかし、本実施の形態では、表示部１１においてブラウザ等のビューアの画面表示におけるスクロールについて説明する。

尚、情報処理装置の構成、及び指操作の各種形態は、実施の形態１と同一であるので、その説明を省略する。

（ブラウザ等のビューアにおける画面表示の形態）
最初に、ブラウザ等のビューアにおける画面表示の各種形態について、図１６及び図１７（ａ）〜（ｄ）に基づいて説明する。

まず、図１６は、ビューア画面で表示する内容の全体イメージを表している。便宜上、表示エリアＡ１〜表示エリアＡ６までの表示エリアＡの配置があるが、利用者の可読性を保った表示サイズでは、表示エリアＡ１〜表示エリアＡ６は静電式感圧式併用タッチパネル１０の１画面に収まらない表示エリアであるとしている。

図１７（ａ）は、図１６の全体イメージにおいて、実際に表示をしたときの初期画面を表している。

図１７（ｂ）は、図１７（ａ）からホールド操作を実行し、画面が拡大された状態を表している。

図１７（ｃ）は、 図１７（ｂ）に示すホールド状態において、静電タッチ座標が移動したときの状態を表している。

図１７（ｄ）は、図１７（ｃ）に示す状態からホールド状態を解除したときの表示される画面を表している。

（ブラウザ等のビューアにおける画面表示のスクロール操作の流れ）
上記構成を備えた静電式感圧式併用タッチパネル１０において、ブラウザ等のビューアにおける画面表示をスクロールするときの制御流れを、図１８〜図２２に基づいて説明する。ここで、図１８〜図２２は画面表示のスクロール操作を示すフローチャートである。尚、前記図１１〜図１５の同じ内容の操作については、同一のステップ名を記載して説明する。

最初に、図１６に示す静電式感圧式併用タッチパネル１０の表示部１１における表示エリアＡ１を選択するために該表示エリアＡ１をつまむ操作について説明する。

まず、図１８に示すように、第１指Ｆ１が静電式感圧式併用タッチパネル１０における感圧式検出部１３に感圧タッチされているかを検出する（Ｓ１）。指操作としては、図５（ａ）に示す状態となる。尚、指操作は、厳密には、図５（ａ）に示す状態の前に図６（ａ）に示す状態となるが、本実施の形態の静電式感圧式併用タッチパネル１０では、何も操作していない状態からは、感圧式検出部１３での感圧タッチを契機とする。

次いで、第１指Ｆ１が例えば表示エリアＡ１等の表示エリアＡを感圧タッチしているかを判断する（Ｓ２’）。具体的には、第１指Ｆ１における感圧タッチ座標に基づいて、表示部１１に現在表示されている画面状態に基づいて、第１指Ｆ１が表示エリアＡを感圧タッチしているかを判断する。表示部１１に現在表示されている画面状態としては、図１６に示す表示エリアＡ上を感圧タッチしているかを判定する。

そして、第１指Ｆ１が図１６に示す表示エリアＡ上を感圧タッチしていると判断したときには、第２指Ｆ２における静電式感圧式併用タッチパネル１０の静電式検出部１２での静電タッチを検出する（Ｓ３）。すなわち、Ｓ３では、表示エリアＡをつまむ操作を検出するために静電式検出部１２での静電タッチ座標の検出を行う。指操作としては、図５（ａ）又は図５（ｂ）に示す状態となる。

次いで、第２指Ｆ２の静電タッチ座標が、第１指Ｆ１の感圧タッチ座標に近接しているかどうかを判定する（Ｓ４）。具体的には、第２指Ｆ２の静電タッチ座標と第１指Ｆ１の感圧タッチ座標とが閾値よりも小さいか否かを判断する。そして、第２指Ｆ２の静電タッチ座標と第１指Ｆ１の感圧タッチ座標とが閾値よりも小さい場合には、つまむ操作と認識する（Ｓ５）。そのときの表示部１１の画面は、図１７（ａ）の表示を維持している。すなわち、つまむ操作と認識するだけでは画面に変化はない。

次いで、つまんだ表示エリアＡ１等の表示エリアＡをスクロールする。このスクロール方法については、一般的な第１指Ｆ１の感圧タッチを維持した状態でスクロールする第１スクロール操作と、第１指Ｆ１の感圧タッチを解除し、かつ静電タッチを維持した状態でスクロールする第２スクロール操作とが存在する（Ｓ６’）。

最初に、つまんだ表示エリアＡを第１スクロール操作にてスクロールする場合の流れについて、図１９に基づいて説明する。図１９は第１スクロール操作を示すフローチャートである。

すなわち、第１スクロール操作は、利用者が感圧式検出部１３から第１指Ｆ１を離さず座標移動をするスクロール操作である。

まず、第１指Ｆ１の感圧式検出部１３での感圧タッチを維持した状態にて第１指Ｆ１を移動することにより、感圧タッチ座標の移動を行う（Ｓ１１）。

次いで、表示部１１における画面において、表示エリアＡのスクロールを行う（Ｓ１２’）。画面操作としては、図１７（ａ）に示す画面から、例えば図１７（ｃ）に示す画面へと遷移する。

次に、つまんだ表示エリアＡを第２スクロール操作にてスクロールする場合の流れについて、図２０に基づいて説明する。図２０は第２スクロール操作を示すフローチャートである。

すなわち、第２スクロール操作は、利用者が感圧式検出部１３から第１指Ｆ１を離した場合のスクロール操作である。

図２０に示すように、まず、静電式感圧式併用タッチパネル１０の感圧式検出部１３での第１指Ｆ１の感圧タッチが解除され、第１指Ｆ１は静電式検出部１２のみにて静電タッチが検出される（Ｓ２１）。指操作としては、図１（ａ）若しくは図６（ｂ）、又は図１（ｃ）の状態である。すなわち、第１指Ｆ１が静電式検出範囲Ｈ内に存在していればよい。したがって、第２指Ｆ２は静電式検出範囲Ｈ外となっていてよく、又は第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在し、かつ第１指Ｆ１と第２指Ｆ２が閾値内に近接している状態であってもよい。これにより、表示エリアＡである表示エリアＡ１は、つまむ操作によりホールド状態となる（Ｓ２２’）。このとき、表示部１１の画面においては、図１７（ｂ）に示すように、表示エリアＡ１が表示部１１の画面において、拡大して表示されるようになる。尚、表示エリアＡをホールド状態としたときには、第１指Ｆ１の静電タッチ座標は空の状態となる。

次いで、その後、静電式検出部１２において第１指Ｆ１の静電タッチ座標の移動が行われたか否かが判断される（Ｓ２３）。そして、Ｓ２３において、第１指Ｆ１における静電タッチ座標の移動の検出が行われたときには、表示エリアＡをホールドした状態での画面操作が行われる（Ｓ２４’）。具体的には、表示エリアＡのホールド解除である。尚、Ｓ２４’の後、Ｓ２３に戻って、静電式検出部１２における第１指Ｆ１の静電タッチ座標の移動検出待ちとなる。

一方、Ｓ２３において、静電式検出部１２における第１指Ｆ１の静電タッチ座標の移動検出が行われなかったときには、表示エリアＡのホールド状態を維持し、画面は、図１７（ａ）を維持し、その後、例えば表示エリアＡのホールド状態解除を行う（Ｓ２５’）。

次に、Ｓ２４における表示エリアＡをホールドした状態での画面操作として、表示エリアＡのホールドを解除する操作について、図２１に基づいて説明する。図２１は、表示エリアＡのホールドを解除する操作の流れを示すフローチャートである。

まず、表示エリアＡをホールドした状態での第１指Ｆ１及び第２指Ｆ２は、前述したように、図１（ｂ）若しくは図６（ｂ）、又は図１（ｃ）に示す状態となっている。したがって、図１（ｃ）に示す状態から、表示エリアＡのホールドを解除するには、静電式検出範囲Ｈ内に存在する２つの第１指Ｆ１と第２指Ｆ２との距離が閾値よりも大きいことを検出する（Ｓ４１）。指操作においては、図１（ｃ）に示す状態から図１（ｄ）に示す状態、つまり第１指Ｆ１及び第２指Ｆ２との間隔が閾値よりも離れた状態である。

尚、図１（ｂ）又は図６（ｂ）に示す状態から、表示エリアＡのホールドを解除するには、図１（ｃ）に示すように、一旦、第２指Ｆ２を第１指Ｆ１との距離が閾値内になるように静電式検出範囲Ｈ内に存在させる。その後、上述したように、指操作を、図１（ｃ）に示す状態から図１（ｄ）に示す状態、つまり第１指Ｆ１及び第２指Ｆ２との間隔が閾値よりも離れた状態にする。

上記の操作により、表示エリアＡをつまむ操作が解除されたことを検出し、表示エリアＡのホールド状態が解除される（Ｓ４２’）。このときの表示部１１の表示は、図１７（ｄ）に示すように、表示エリアＡのスクロールが完了した状態となっている。

すなわち、本実施の形態では、静電式検出範囲Ｈ内の２つの第１指Ｆ１及び第２指Ｆ２が、閾値よりも離れたときに、ホールド状態を解除するようになっている。

次に、前記図２０のＳ２５’における表示エリアＡのホールド状態を維持して、その後、表示エリアＡ１のホールド状態を解除する操作について、図２２に基づいて説明する。図２２はドラッグ状態において画面をスクロールする操作を示すフローチャートである。

まず、表示エリアＡ１のホールド状態を維持している状態においては、指操作は図１（ａ）若しくは図６（ｂ）、又は図１（ｃ）の状態となっている。すなわち、第１指Ｆ１の感圧式検出部１３での感圧タッチが離れ、かつ第１指Ｆ１が静電式検出範囲Ｈ内に存在している状態つまりホールド状態となっている。この状態で、第１指Ｆ１を所望の位置まで移動させ、図２２に示すように、表示エリアＡの移動を行う（Ｓ５１’）。表示部１１においては、図１７（ｂ）に示す状態から図１７（ｃ）に示す状態に遷移する。すなわち、ドラッグ状態によって、拡大表示された表示エリアＡ１の拡大率を維持した状態で図１７（ｃ）に遷移する。これにより、表示エリアＡ１の拡大率にて、表示エリアＡ３が表示される。

次いで、第１指Ｆ１の所望位置への移動が完了したときに、図１５に示すように、第１指Ｆ１が感圧式検出部１３での感圧タッチから離れ、かつ第１指Ｆ１が静電式検出部１２における静電タッチしてのみの状態を確認すべく検出する（Ｓ５２）。

次いで、静電式検出部１２での検出座標が２つ未満か否か、又は静電式検出部１２での検出座標が２つである場合には、その距離が閾値内であるか否かを判断する（Ｓ５３）。すなわち、静電式検出部１２での検出座標が２つ未満ということは、図１（ｂ）又は図６（ｂ）に示すように、第１指Ｆ１による１つの静電タッチが検出され、第２指Ｆ２が静電式検出範囲Ｈ外となっている状態を示す。また、静電式検出部１２での検出座標が２つである場合にはその距離が閾値内であるということは、図１（ｃ）の状態であることを示す。

そして、本実施の形態では、これ以外の状態については、誤動作として２つの座標を破棄し、ホールド状態を維持するようになっている（Ｓ５４）。

次いで、Ｓ５３の条件を満たす場合には、その後、時系列で静電式検出範囲Ｈ内での静電タッチ座標の検出が、時系列で１点から２点になったことを検出する。このときの指操作は、図１（ｃ）に示すように、第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在している状態であり、かつ、第１指Ｆ１と第２指Ｆ２との距離は閾値内となっている。尚、図１（ｃ）の状態で移動した場合には、静電タッチ座標は最初から２点であることを検出している。

このときの表示部１１での表示は、図１７（ｃ）となっている。

その後、静電式検出範囲Ｈ内の２つの第１指Ｆ１及び第２指Ｆ２が、閾値よりも離れたことを検出する（Ｓ５５）。指操作は、図１（ｄ）に示すように、第１指Ｆ１と第２指Ｆ２との両方が静電式検出範囲Ｈ内に存在し、かつ第１指Ｆ１と第２指Ｆ２との距離が閾値よりも大となっている。これにより、表示エリアＡのホールド状態が解除される（Ｓ５６’）。表示部１１の表示においては、図１７（ｄ）となっている。すなわち、表示エリアＡ３を表示した状態で、ドラッグ解除されたので、表示エリアＡ３が表示部１１の左上隅に表示され、かつこの拡大率は、図１７（ａ）に示す表示と同じ拡大率となっている。

したがって、本実施の形態では、ドラッグ状態での表示エリアＡの移動は、第１指Ｆ１を感圧タッチ移動させる場合を除き、第１指Ｆ１が静電式検出範囲Ｈ内に存在すると共に、第２指Ｆ２は静電式検出範囲Ｈ外に存在した状態、又は第１指Ｆ１と第２指Ｆ２とが閾値よりも近接して静電式検出範囲内に存在した状態にて行う。いずれにしても、第１指Ｆ１を静電式検出範囲Ｈ内に存在させた状態にて表示エリアＡを移動する。そして、ドラッグ解除する場合には、静電式検出範囲Ｈ内に存在する第１指Ｆ１と第２指Ｆ２との距離を閾値内から閾値外に広げることによって、ドラッグ解除するようになってる。

このように、本実施の形態の情報処理装置１は、表示部１１と、感圧方式タッチパネル及び静電容量方式タッチパネルとを備える。表示部１１には複数の対象物が表示される。

そして、本実施の形態の情報処理装置１の入力方法は、第１指Ｆ１にて感圧方式タッチパネルを感圧タッチした状態で、静電容量方式タッチパネルの静電式検出範囲Ｈ内に、第１指Ｆ１との間隔が閾値距離内となるように第２指Ｆ２を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、第１指Ｆ１における感圧タッチを解除しかつ該第１指Ｆ１を静電式検出範囲Ｈ内に配し、さらに第２指Ｆ２を静電式検出範囲Ｈ外に配するか又は第２指Ｆ２を静電式検出範囲Ｈ内において第１指Ｆ１との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、移動可能工程における第１指Ｆ１及び第２指Ｆ２の配置を維持して該第１指Ｆ１及び第２指Ｆ２を移動することにより対象物を移動する移動工程と、移動先にて第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配し、かつ該第１指Ｆ１と第２指Ｆ２との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含んでいる。

したがって、特別な操作検知用のデバイスを利用者が装着せず、静電式感圧式併用タッチパネル１０からの高さを認識して適切なドラッグ操作を行い得る情報処理装置１の入力方法を提供することができる。

また、本実施の形態の情報処理装置１の入力方法では、表示部１１には対象物としての複数個の表示エリアＡが表示される。そして、ドラッグ開始工程においては、第１指Ｆ１にて感圧方式タッチパネルを感圧タッチした状態で、静電容量方式タッチパネルの静電式検出範囲Ｈ内に、第１指Ｆ１との間隔が閾値距離内となるように第２指Ｆ２を配することにより少なくとも１個の表示エリアＡが選択される。移動可能工程においては、第１指Ｆ１における感圧タッチを解除し、かつ該第１指Ｆ１を静電式検出範囲Ｈ内に配し、さらに第２指Ｆ２を静電式検出範囲Ｈ外に配するか又は第２指Ｆ２を静電式検出範囲Ｈ内において第１指Ｆ１との間隔を閾値距離内に維持することにより表示エリアＡをスクロール可能状態とする。移動工程においては、第１指Ｆ１及び第２指Ｆ２の配置を維持して該第１指Ｆ１及び第２指Ｆ２を移動することにより表示エリアＡをスクロールする。ドラッグ解除工程においては、移動先にて第１指Ｆ１及び第２指Ｆ２を静電式検出範囲Ｈ内において閾値距離内に配し、かつ該第１指Ｆ１と第２指Ｆ２との間隔を該閾値距離内から閾値距離外となるように広げることにより表示エリアＡのスクロールを終了する。

これにより、表示部１１には対象物としての複数個の表示エリアＡが表示され、表示エリアＡのドラッグ操作としてのスクロールを適切に行うことができる。

また、本実施の形態の情報処理装置１の入力方法では、移動可能工程においては、表示部１１の表示エリアＡが拡大表示される。これにより、ドラッグ操作において、表示エリアＡを選択していることが、表示部１１における表示エリアＡの拡大表示にて容易に認識することができる。

本発明は、感圧方式タッチパネルと静電容量方式タッチパネルとを備えたパソコン若しくはワークステーション、又はゲーム機、ＰＤＡ、小型端末、携帯電話等の情報処理装置の入力方法、及び情報処理装置に関し、アイコン表示、ビューア等の画面を用いた入力装置におけるアイコンの操作性向上を実現する技術に適用することができる。

１ 情報処理装置
１０ 静電式感圧式併用タッチパネル（検出部）
１１ 表示部
１２ 静電式検出部
１３ 感圧式検出部
２０ 制御装置
２１ 状態管理部（状態管理手段）
２２ 処理部（処理手段）
２３ 表示制御部（表示制御手段）
３０ 記憶装置
Ｄ 検出座標間距離
Ｆ 指
Ｆ１ 第１指（第１の指）
Ｆ２ 第２指（第２の指）
Ｈ 静電式検出範囲（表示面近接検出範囲）
Ｈ_Ｘ 静電式検出高さ

Claims (7)

1. 表示部と、表示面当接検出部及び表示面近接検出部とを備えると共に、表示部には複数の対象物が表示される情報処理装置の入力方法であって、
   第１の指を上記表示面当接検出部に当接した状態で、上記表示面近接検出部への表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより対象物をドラッグ開始状態とするドラッグ開始工程と、
   上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより対象物を移動可能状態とする移動可能工程と、
   上記移動可能工程における第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより対象物を移動する移動工程と、
   移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより対象物のドラッグを解除するドラッグ解除工程とを含むことを特徴とする情報処理装置の入力方法。
2. 前記表示部には対象物としての複数個のアイコンが表示されると共に、
   前記ドラッグ開始工程においては、前記第１の指を前記表示面当接検出部に当接した状態で、前記表示面近接検出部の表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより少なくとも１個のアイコンが選択され、
   前記移動可能工程においては、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することによりアイコンを移動可能状態とし、
   前記移動工程においては、第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することによりアイコンを移動し、
   前記ドラッグ解除工程においては、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることによりアイコンのドラッグを解除することを特徴とする請求項１記載の情報処理装置の入力方法。
3. 前記ドラッグ開始工程において少なくとも１個のアイコンを選択して移動可能工程及び移動工程を経た後、移動途中にて第１の指を表示面当接検出部に当接することにより、アイコンの追加選択を行うことを特徴とする請求項２記載の情報処理装置の入力方法。
4. 前記ドラッグ開始工程において少なくとも１個のアイコンが選択されたときには、前記表示部には、アイコンが選択されていることを示すアイコン選択マークが付されることを特徴とする請求項２又は３記載の情報処理装置の入力方法。
5. 前記表示部には対象物としての複数個の表示エリアが表示されると共に、
   前記ドラッグ開始工程においては、前記第１の指を前記表示面当接検出部に当接した状態で、前記表示面近接検出部の表示面近接検出範囲内に、上記第１の指との間隔が閾値距離内となるように第２の指を配することにより少なくとも１個の表示エリアが選択され、
   前記移動可能工程においては、上記第１の指における表示面当接検出部への当接を解除しかつ該第１の指を上記表示面近接検出範囲内に配し、さらに第２の指を上記表示面近接検出範囲外に配するか又は第２の指を表示面近接検出範囲内において第１の指との間隔を閾値距離内に維持することにより表示エリアをスクロール可能状態とし、
   前記移動工程においては、第１の指及び第２の指の配置を維持して該第１の指及び第２の指を移動することにより表示エリアのスクロールを移動し、
   前記ドラッグ解除工程においては、移動先にて第１の指及び第２の指を表示面近接検出範囲内において閾値距離内に配し、かつ該第１の指と第２の指との間隔を該閾値距離内から閾値距離外となるように広げることにより表示エリアのスクロールを終了することを特徴とする請求項１記載の情報処理装置の入力方法。
6. 前記移動可能工程においては、前記表示部の表示エリアが拡大表示されることを特徴とする請求項５記載の情報処理装置の入力方法。
7. 請求項１〜６のいずれか１項に記載の情報処理装置の入力方法を使用する情報処理装置であって、
   第１の指又は第２の指の表示面当接検出部への当接座標を検知し、かつ第１の指又は第２の指の表示面近接検出部への表示面近接座標を検知する状態管理手段と、
   上記状態管理手段での当接座標の検知又は表示面近接座標の検知に基づいて、対象物のドラッグ処理を行う処理手段と、
   処理手段でのドラッグ処理に基づいて表示部での表示を制御する表示制御手段とが設けられていることを特徴とする情報処理装置。