JP5511040B2 - 端末装置及びプログラム - Google Patents

Description

この発明は、表示手段に表示されているアイコンなどのオブジェクトに対して処理を行う端末装置及びプログラムに関する。

従来、携帯電話機などの端末装置においては、各種のデータや情報を表示する表示部（表示画面）上での操作として、接触操作、非接触操作を行うことができるものがある。すなわち、物体の接触を検出する透明な接触センサを表示部の表面に配設し、その接触センサによって表示部への操作器具や指の接触を接触操作として検出するようにしている。なお、接触センサには、接触の他に操作器具や指の押し込み（押圧）を検出するようになっているものもあり、そのような接触センサを配設することによって、接触と押圧を検出するようにしている。また、静電容量などで近距離に存在する物体の動きを検出する非接触センサを配設し、その非接触センサによって表示部上（表示部に接触していなくてもよい）での操作器具や指の動きを非接触操作として検出するようにしている。

ところで、表示部に表示されているアイコンなどのオブジェクトを上述の接触操作によって別の位置に移動させる場合には、１本の指（操作器具）をオブジェクトに接触してそのオブジェクトを選択状態にしてから、その指をスライド（表示部に接触したままの移動）して所望する位置までオブジェクトを移動させたのち、その接触を解除すると、そのオブジェクトの選択状態も解除されるという操作が一般的である（例えば、特許文献１参照）。

特開２００１−１９５１７０号公報

しかしながら、このような操作は容易である反面、誤操作が起きやすい。例えば、指などが不用意に表示部に触れただけでもその位置のオブジェクトが選択状態になってしまったり、指をスライドさせているときに表示部から指が離れてしまって選択状態が解除されてしまったりするなどの誤操作が起きやすい。

この発明の課題は、ユーザの意図に応じてオブジェクトを適切に選択状態にすることができると共に、現実の感覚に近い直感的な操作で選択状態にすることができるようにすることである。

上述した課題を解決するために請求項１記載の発明は、表示手段に表示されているオブジェクトに対して処理を行う端末装置であって、前記表示手段上で行われる第１操作を検出する第１検出手段と、前記第１操作の操作位置と、前記表示手段に表示されているオブジェクトの表示位置とに基づいて、選択状態にするための候補のオブジェクトを特定する特定手段と、この特定手段によってオブジェクトが特定されている状態にあって、前記表示手段上で行われる第２操作を検出する第２検出手段と、前記第１操作の操作位置と前記第２操作の操作位置とに基づいて、前記特定手段によって特定されたオブジェクトを選択状態にする選択手段と、この選択手段によって選択状態にされたオブジェクトに対して処理を行う処理手段と、前記特定手段によって特定されたオブジェクトの表示態様を、指で掴むことができるような表示態様に変更する変更手段と、を具備したことを特徴とする。

請求項１に従属する発明として、前記特定手段は、前記表示手段に複数のオブジェクトが表示されている場合に、前記第１操作の操作位置と表示されている複数のオブジェクトの表示位置とに基づいて所定のオブジェクトを特定する、ようにしたことを特徴とする請求項２記載の発明であってもよい。

請求項１または２いずれかに従属する発明として、前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作、前記第２操作のうち少なくともいずれかの操作の操作位置の移動に基づいて、前記選択状態になったオブジェクトを移動する移動手段を更に備える、ようにしたことを特徴とする請求項３記載の発明であってもよい。

請求項１乃至３いずれかに従属する発明として、前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作及び第２操作が解除された場合に、前記選択状態になったオブジェクトの選択状態を解除する解除手段を更に備える、ようにしたことを特徴とする請求項４記載の発明であってもよい。

請求項１乃至４いずれかに従属する発明として、前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作及び第２操作が解除され、再度の前記第１操作、前記第２操作のうち少なくともいずれかの操作が検出された場合に、その操作位置に基づいて、前記選択状態になったオブジェクトを移動する移動手段を更に備える、ようにしたことを特徴とする請求項５記載の発明であってもよい。

請求項１乃至５いずれかに従属する発明として、前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段に対する接触操作である、ことを特徴とする請求項６記載の発明であってもよい。

請求項１乃至５いずれかに従属する発明として、前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段に対する押圧操作である、ことを特徴とする請求項７記載の発明であってもよい。

請求項１乃至５いずれかに従属する発明として、前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段上で行われる非接触操作である、ことを特徴とする請求項８記載の発明であってもよい。

また、上述した課題を解決するために請求項９記載の発明は、表示手段上で行われる第１操作を検出する機能と、前記第１操作の操作位置と、前記表示手段に表示されているオブジェクトの表示位置とに基づいて、選択状態にするための候補のオブジェクトを特定する機能と、前記オブジェクトが特定されている状態にあって、前記表示手段上で行われる第２操作を検出する機能と、前記第１操作の操作位置と前記第２操作の操作位置とに基づいて、前記特定されたオブジェクトを選択状態にする機能と、前記選択状態にされたオブジェクトに対して処理を行う機能と、前記特定されたオブジェクトの表示態様を、指で掴むことができるような表示態様に変更する機能と、を実現させるためのプログラムを特徴とする。

この発明によれば、ユーザの意図に応じてオブジェクトを適切に選択状態にすることができると共に、現実の感覚に近い直感的な操作で選択状態にすることができ、オブジェクトの選択を確実かつ容易にすることができる。

端末装置として適用した携帯電話機が利用可能な通信ネットワークシステムを示したブロック図。 携帯電話機１の基本的な構成要素を示したブロック図。 携帯電話機１の外観図で、（ａ）は、操作部筐体１Ａと表示部筐体１Ｂとの折り畳みを開いた状態のオープンスタイル、（ｂ）は、オープンスタイルにおいて表示部筐体１Ｂを１８０度反転させてから折り畳んだ状態のビュースタイルを示した図。 携帯電話機１の全体動作の概要を示したフローチャート。 オブジェクト制御処理（図４のステップＡ４）を詳述するためのフローチャート。 選択処理（図５のステップＢ２）を詳述するためのフローチャート。 移動処理（図５のステップＢ３）を詳述するためのフローチャート。 複数オブジェクトの表示例を示した図で、（ａ）はデータを削除するための任意のデータアイコン表示、（ｂ）は、アドレス帳のデータアイコン表示、（ｃ）は機能アイコン（メニュー）の表示を示した図。 （ａ）〜（ｃ）は、アイコン（オブジェクト）を拡大した状態の表示例で、このオブジェクトを２本の指（例えば、親指と人差し指）で掴むようなタッチ操作で当該オブジェクトの表示形態が遷移する様子を例示した図、（ｄ）〜（ｆ）は、他の表示例を示した図。 第２実施形態における選択処理（図５のステップＢ２）を詳述するためのフローチャート。 第２実施形態における移動処理（図５のステップＢ３）を詳述するためのフローチャート。 （ａ）〜（ｄ）は、アイコン（オブジェクト）を拡大した状態での表示例で、このオブジェクトを親指と人差し指で掴むようにタッチ操作することで当該オブジェクトの表示形態が遷移する様子を例示した図。 第３実施形態における選択処理（図５のステップＢ２）を詳述するためのフローチャート。 第３実施形態における移動処理（図５のステップＢ３）を詳述するためのフローチャート。 （ａ）、（ｂ）は、アイコン（オブジェクト）を拡大した状態での表示例で、このオブジェクトを親指と人差し指で掴むようにタッチ操作することによって当該オブジェクトの表示形態が遷移する様子を例示した図。

（実施形態１）
以下、図１〜図９を参照して本発明の第１実施形態を説明する。
この実施形態は、端末装置として携帯電話機に適用した場合を例示したもので、図１は、この携帯電話機が利用可能な通信ネットワークシステムを示したブロック図である。
携帯電話機１は、通話機能、電子メール機能、インターネット接続機能（Ｗｅｂアクセス機能）などが備えられている。携帯電話機１は、最寄りの基地局２Ａ、交換機２Ｂから無線通信網（移動体通信網）２に接続されると、この無線通信網２を介して他の携帯電話機１との間で通話可能状態となる。また、携帯電話機１は、無線通信網２を介してインターネット３に接続されると、インターネット３、無線通信網２を介してＷｅｂサイトをアクセスして閲覧可能となり、また、Ｗｅｂサイトから音楽、映画などのコンテンツをダウンロード可能となる。

図２は、携帯電話機１の基本的な構成要素を示したブロック図である。
中央制御部１１は、二次電池を備えた電池部１２からの電力供給によって動作し、記憶部１３内の各種のプログラムに応じてこの携帯電話機１の全体動作を制御する中央演算処理装置、メモリなどを有している。記憶部１３には、プログラム記憶部Ｍ１、各種情報一時記憶部Ｍ２などが設けられている。このプログラム記憶部Ｍ１は、図４〜図７に示す動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されていると共に、それに必要な各種の情報が記憶されている。各種情報一時記憶部Ｍ２は、画面情報、フラグ情報、タイマ情報など、携帯電話機１が動作するために必要な各種の情報を一時的に記憶するワーク領域である。

無線通信部１４は、無線部、ベースバンド部、多重分離部などを備え、例えば、通話機能、電子メール機能、インターネット接続機能などの動作時に、最寄りの基地局２Ａとの間でデータの送受信を行うもので、通話機能の動作時にはベースバンド部の受信側から信号を取り込んで受信ベースバンド信号に復調したのち、音声信号処理部１５を介して通信用スピーカＳＰから音声出力させ、また、通信用マイクＭＣからの入力音声データを音声信号処理部１５から取り込み、送信ベースバンド信号に符号化したのち、ベースバンド部の送信側に与えてアンテナから発信出力させる。

表示部１６は、高精細液晶あるいは有機ＥＬなどを使用し、例えば、文字情報、待受画像、データアイコン、機能アイコンなど、各種の情報を表示させるもので、その表示パネルの表面に、指、器具などの物体の接触を検出する接触操作部（透明な接触センサ）１７を積層配設することによってタッチスクリーン（タッチ画面）ＴＤを構成している。なお、表示部１６の全面をタッチ画面ＴＤとする場合に限らず、その一部分をタッチ画面ＴＤとしてもよい。

接触操作部１７は、表示部１６に対する接触操作（タッチ操作）が行われた際に、表示部１６への接触をタッチ操作として検出し、その検出結果を中央制御部１１に与える。なお、接触操作部１７は、接触の他に操作器具や指の押し込み（押圧）も検出可能となっている。中央制御部１１は、接触操作部１７からの操作信号に基づいてタッチ操作や押圧操作の有無を検出したり、その操作位置（タッチ領域）を検出したりする。そして、中央制御部１１は、表示部１６にメニュー項目などの複数のアイコン（オブジェクト）が表示されている状態において、その中から１以上のオブジェクトが選択状態になるようにするために、表示部１６上で行われる第１操作（タッチ操作）を検出すると、この第１操作の操作位置（タッチ領域）とオブジェクトの表示位置（オブジェクト表示領域）に基づいて選択状態になる候補のオブジェクト（選択候補のオブジェクト）を特定するようにしている。

表示部１６に表示されている複数のオブジェクトの中から１以上の選択候補のオブジェクトを特定すると、この選択候補のオブジェクトは、指で掴むことができるような表示態様に変更される。例えば、矩形のオブジェクトの角部が捲られたような形状に変形される。この状態において、表示部１６上で行われる第２操作（タッチ操作）を検出すると、中央制御部１１は、第１操作のタッチ領域と第２操作のタッチ領域に基づいて選択候補のオブジェクトを選択状態にする。なお、上述した第１操作は、選択候補のオブジェクトを特定するための操作であり、第２操作はその選択候補のオブジェクトを選択状態にするための操作である。

キー操作部１８は、ダイヤル入力、文字入力、コマンド入力などを入力するもので、中央制御部１１は、入力操作信号に応じた処理を実行する。ＲＴＣ（リアルタイムクロックモジュール）１９は、時計部を構成するもので、中央制御部１１は、ＲＴＣ１９から現在日時を取得する。報知部２０は、サウンドスピーカ２１、ＬＥＤ（発光ダイオード）２２、振動モータ２３を備え、着信時に駆動されて着信報知を行うほか、アラーム報知時などでも駆動される。

図３は、携帯電話機１の外観図である。
携帯電話機１は、その機器本体（装置本体）を構成する複数の筐体の連結状態に応じて複数のスタイルに変更可能な２軸ヒンジタイプで、操作部筐体１Ａと表示部筐体１Ｂとは、折り畳み開閉自在及び回動自在にヒンジ部１Ｃを介して連結されている。ヒンジ部１Ｃには操作部筐体１Ａと表示部筐体１Ｂとを折り畳み開閉するための開閉用ヒンジ軸が設けられているほか、この開閉用ヒンジ軸と略直交して、一方の筐体を他方の筐体に対して回動するための回動用ヒンジ軸とが設けられている。

このような２軸ヒンジタイプの携帯電話機１は、操作部筐体１Ａと表示部筐体１Ｂとが、どのように連結されているかに応じて携帯電話機１の形態を複数のスタイル（クローズスタイル、オープンスタイル、反オープンスタイル、ビュースタイル）に変更可能なもので、図３（ａ）は、操作部筐体１Ａと表示部筐体１Ｂとの折り畳みを開いた状態のオープンスタイルを示している。なお、操作部筐体１Ａの内面には、キー操作部１８が配置され、また、表示部筐体１Ｂの内面には、タッチ画面ＴＤが配置されている。なお、操作部筐体１Ａの内面側には、通信用マイクＭＣが配置され、表示部筐体１Ｂの内面には、通信用スピーカＳＰが配置されている。図３（ｂ）は、オープンスタイルにおいて表示部筐体１Ｂを１８０度反転させてから折り畳んだ状態のビュースタイルを示し、オープンスタイルで内側となっていたタッチ画面ＴＤは、ビュースタイルでは外側に向くようになる。

次に、この第１実施形態における携帯電話機１の動作概念を図４〜図７に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施形態特有の動作を実行することもできる。

図４は、携帯電話機１の全体動作の概要を示したフローチャートである。
先ず、中央制御部１１は、電源を投入する電源オン操作が行われると（ステップＡ１でＹＥＳ）、電源供給を開始させて所定のメモリなどを初期化する電源オン処理を実行したのち、所定の待受画像を読み出して表示させたり、基地局２Ａとの間で通信を行って位置登録をしたりする待受処理を行ったのち（ステップＡ２）、操作部２０をアクセスして操作有無をチェックし、オブジェクト表示操作の有無を調べる（ステップＡ３）。ここで、“オブジェクト表示操作”とはオブジェクトを表示させるための操作で、例えば、データを削除するための任意のデータアイコン表示操作、アドレス帳のデータアイコン表示操作、機能アイコン（メニュー）表示操作などであり、このオブジェクト表示操作が行われると、それに応答して、後で詳述するオブジェクト制御処理の実行に移る（ステップＡ４）。

また、着信を検出すると（ステップＡ５でＹＥＳ）、通話可能状態とすると共に、通話履歴を記憶したり、通話に関する情報を表示したりする通話処理を実行したのち（ステップＡ６）、上述のステップＡ３に戻る。また、電源オフ操作が行われたときには（ステップＡ７でＹＥＳ）、電源オフ処理を実行して（ステップＡ８）、このフローの終了となるが、その他の操作が行われたときには（ステップＡ９でＹＥＳ）、その操作に応じた処理として、例えば、通話発信処理、メール発信処理などを実行する（ステップＡ１０）。

図５は、上述のオブジェクト制御処理（図４のステップＡ４）を詳述するためのフローチャートである。
先ず、中央制御部１１は、オブジェクト表示処理を実行し、オブジェクトをタッチ画面ＴＤに表示させる。例えば、オブジェクトとして、図８（ａ）に示すようにデータを削除するための任意のデータアイコンを表示させたり、図８（ｂ）に示すようにアドレス帳のデータを並べ替えるためのデータアイコンを表示させたり、図８（ｃ）に示すように機能を並べ替えるためのアイコン（メニュー）を表示させりする（ステップＢ１）。

なお、図８（ａ）において、「ａ」〜「ｋ」のアイコンのうち、選択状態になったアイコンを「ゴミ箱」の位置まで移動させると、そのアイコンのデータは削除される。なお、複数のアイコンを選択状態にすれば、その各アイコンのデータを一括して削除することもできる。また、図８（ｂ）において、選択状態になったアドレス帳のデータアイコンを移動させると、このデータアイコンは移動先のデータアイコンと入れ替わる。また、図８（ｃ）において、選択状態になった機能アイコンを移動させると、この機能アイコンは移動先の機能アイコンと入れ替わる。このようにタッチ画面ＴＤに表示されている複数のオブジェクトの中から１以上のオブジェクトを選択状態にするための選択処理を実行したのち（ステップＢ２）、この選択状態になったオブジェクトを他の位置まで移動する移動処理に移る（ステップＢ３）。

次に、図６のフローチャートを参照して上述の選択処理（図５のステップＢ２）を詳述する。以下、この選択処理を図９の表示例に基づいて具体的に説明するものとする。なお、図９は、アイコン（オブジェクト）を拡大した状態を示した表示例で、このオブジェクトを２本の指（例えば、親指と人差し指）で掴むようなタッチ操作で当該オブジェクトの表示形態が遷移する様子を例示した図である。
先ず、中央制御部１１は、接触操作部１７からの操作信号に基づいてタッチ画面ＴＤへのタッチ操作の有無を調べながら操作待ち状態となる（ステップＣ１）。いま、タッチ画面ＴＤ上で行われるタッチ操作を検出すると（ステップＣ１でＹＥＳ）、このタッチ操作を第１操作としてその操作位置（タッチ領域）を検出したのち（ステップＣ２）、各オブジェクトの表示位置（オブジェクト表示領域）を検出する（ステップＣ３）。

そして、検出したタッチ領域とオブジェクト表示領域に基づいて選択候補のオブジェクトを特定する（ステップＣ４）。例えば、タッチ領域と表示領域が重なるオブジェクトを選択候補として特定したり、タッチ領域から所定距離内に表示されているオブジェクトを選択候補として特定したりする。そして、タッチ領域とオブジェクト表示領域に基づいてオブジェクトの一部の表示態様を、特定されたことを示す表示態様（指で掴むことができるような表示態様）に変更する（ステップＣ５）。

例えば、図９（ａ）に示すように矩形の「１」のオブジェクトが表示されている状態において、第１操作として親指で「１」のオブジェクト上がタッチされたものとすると、図９（ｂ）に示すように、「１」のオブジェクトの枠線を太くするほか、タッチ領域の近傍の角部として、親指の近くの角部（右下角部）が捲れたような形状となるようにその部分を変形、言い換えれば、その部分を指で掴むことができるような表示態様（視覚的に摘みたくなるような表示態様）に変更することによって、選択候補として特定されたオブジェクトであることを明示する。なお、指のタッチ領域が、例えば、オブジェクトの左上の位置であれば、オブジェクトの左上角部が捲れたような表示態様に変更される。

この状態において、オブジェクトの右下角部を２本指（親指と人差し指）で掴むように、親指をタッチしたまま人差し指をタッチすると、中央制御部１１は、この人差し指によるタッチ操作を表示部１６上で行われる第２操作として検出すると共に（ステップＣ６）、そのタッチ領域を検出する（ステップＣ７）。そして、第１操作のタッチ領域（親指のタッチ領域）と第２操作のタッチ領域（人差し指のタッチ領域）とを比較し、両方のタッチ領域は近いかを調べ（ステップＣ８）、両方が距離的に離れていれば（ステップＣ８でＮＯ）、タッチ操作のやり直しを可能とするために上述のステップＣ６に戻る。

また、図９（ｃ）に示すように両方のタッチ領域が距離的に近ければ（ステップＣ８でＹＥＳ）、その選択候補のオブジェクトを選択状態にすると共に（ステップＣ９）、選択状態になったことを明示するためにそのオブジェクトの全体又は一部の表示色を変えたり、点滅したりして当該オブジェクトを識別表示させる（ステップＣ１０）。そして、選択状態になったオブジェクトに対応する選択フラグ（図示せず）をオンする（ステップＣ１１）。なお、この選択フラグは、選択状態になったオブジェクトであることを示すためのフラグで、選択可能なオブジェクトの数が２以上であれば、２以上のオブジェクトが選択状態になってそれらの選択フラグがオンされる。

なお、図９（ｄ）〜（ｆ）は、他の表示例を示したもので、上述した図９（ａ）〜（ｃ）では、タッチ領域がオブジェクト表示領域に重なる場合を例示し、かつ、タッチ領域の近くの角部を変形する場合を例示したが、図９（ｄ）〜（ｆ）では、タッチ領域がオブジェクト表示領域に重ならなくても、オブジェクトから所定の距離内（例えば、オブジェクトのサイズに相当する距離内）にあればよく、また、変形する角部もタッチ領域の近くの角部に限らず、所定の角部とした場合を例示している。すなわち、図９（ｄ）に示すように「１」のオブジェクトが表示されている状態において、図９（ｅ）に示すように、第１操作として親指でオブジェクトの外側をタッチすると、このオブジェクトの枠線が太くなるほか、指で掴むことができるような表示態様として、所定の角部（図示の例では、右下角部）が捲れたような表示態様に変形される（ステップＣ１〜Ｃ５）。

この状態において、図９（ｆ）に示すように、第２操作として人指し指でオブジェクトの外側をタッチすると、第１操作のタッチ領域（親指のタッチ領域）と第２操作のタッチ領域（人差し指のタッチ領域）とを比較し、両方のタッチ領域は近いかを調べるが（ステップＣ８）、いま、図９（ｆ）のように両方のタッチ領域が距離的に近ければ、そのオブジェクトを選択状態にすると共に（ステップＣ９）、選択状態になったことを明示するためにそのオブジェクトの全体又は一部の表示色を変えたり、点滅したりして当該オブジェクトを識別表示させる（ステップＣ１０）。このようにタッチ領域がオブジェクトの外側であってもオブジェクトから所定の距離内にあればよいので、小型の表示部１６のようにオブジェクト自身が小さく表示されていても、オブジェクトを掴む操作はしやすくなる。

次に、図７のフローチャートを参照して上述の移動処理（図５のステップＢ３）を詳述する。
先ず、中央制御部１１は、上述の選択処理によって選択状態になったオブジェクト（選択フラグがオンになっているオブジェクト）に対して移動操作が行われたかを調べる（ステップＤ１）。ここで、移動操作とは、第１操作及び又は第２操作の移動を意味している。つまり、上述した選択処理において最初のタッチ操作（第１操作）と２番目のタッチ操作（第２操作）の両方を移動する場合でもよいし、どちらか一方のタッチ操作を移動する場合であってもよいことを意味している。いま、図９（ｃ）に示す状態においてユーザが親指と人差し指の両方を移動したり、どちらか一方の指を移動したりすると（ステップＤ１でＹＥＳ）、中央制御部１１は、この移動操作に応じて移動先の新たなタッチ領域を検出すると共に（ステップＤ２）、選択状態となっているオブジェクトをその新たなタッチ領域まで移動させる（ステップＤ３）。なお、移動操作が第１操作及び第２操作の移動であれば、それらの中間点を新たなタッチ領域として検出し、この中間点に選択状態になっているオブジェクトを移動させるようにしてもよい。

このような移動処理（図５のステップＢ３）が終わると、タッチ操作が解除されたかを検出し、それが解除されるまで待ち状態となる（ステップＢ４）。いま、タッチ操作が解除されると、選択状態になっているオブジェクトの表示形態を元の状態である通常表示に戻したのち（ステップＢ５）、そのオブジェクトの選択フラグをオフする（ステップＢ６）。すなわち、オブジェクトが選択状態になったのち、第１操作及び第２操作が解除された場合には、このオブジェクトの選択状態を解除する。その後、各機能に応じた処理を実行する（ステップＢ７）。例えば、データを削除するために、データアイコンがゴミ箱の上に移動されたときには、アイコンの表示を消してデータを削除する処理を実行し、並べ替えるためにアドレス帳データアイコンや機能アイコンが他の位置まで移動されたときには、移動先にあるアイコンと入れ替えたりする処理を実行する。

以上のように、この第１実施形態においては、第１操作（例えば、親指タッチ）に応じてオブジェクトを特定し、第２操作（例えば、人差し指タッチ）に応じてそのオブジェクトを選択状態になるようにしたので、ユーザは、あたかも第１操作で物に触り、続いて第２操作で物を掴むという現実の感覚に近い直感的な操作で、オブジェクトを容易に選択状態にすることができ、ユーザの意図に応じて適切にオブジェクトを選択状態にすることが可能となる。

特定したオブジェクトの表示態様を変更するようにしたので、ユーザはオブジェクトの表示態様を確認しながら所望のオブジェクトを選択状態にすることができる。

オブジェクトの一部分を変更する場合に、第１操作の操作位置に近い部分の表示態様を変更するようにしたので、ユーザに第１操作の操作位置の近傍で第２操作を行えばよいということを連想させることができる。

オブジェクトを掴むことができるような表示態様に変更するようにしたので、ユーザは、物を掴むという現実の感覚に近い直感的な操作で、オブジェクトを容易に選択状態にすることができる。

複数のオブジェクトが表示されている場合には、第１操作の操作位置と複数のオブジェクトの表示位置とに応じて選択候補のオブジェクトを特定するようにしたので、ユーザは容易に複数のオブジェクトの中から所望のオブジェクトを選択状態にすることができる。例えば、第１操作の操作位置と重なる表示位置のオブジェクトを選択候補として特定するようにすれば、ユーザは所望のオブジェクトの表示位置で第１の操作を行うだけで容易にオブジェクトを選択状態にすることができる。また、例えば、第１操作の操作位置に最も近い表示位置のオブジェクトを選択候補として特定するようにすれば、ユーザは所望するオブジェクトの表示位置の近傍で第１の操作を行うだけで容易にそのオブジェクトを選択状態にすることができる。

また、選択状態になったオブジェクトを第１操作及び又は第２操作の操作位置の移動に応じて移動するようにしたので、ユーザは、掴んだ物を移動させるという現実の感覚に近い直感的な操作で、オブジェクトを容易に移動させることができる。

オブジェクトが選択状態になったのち、第１操作及び第２操作が解除された場合に、オブジェクトの選択状態を解除するようにしたので、ユーザは、掴んだ物を離すという現実の感覚に近い直感的な操作で、オブジェクトの選択状態を容易に解除することができる。

第１操作及び第２操作を、表示部１６に対する接触操作（タッチ操作）としたので、ユーザは、操作対象のオブジェクトの表示位置やその近傍で接触操作を行うだけで、選択候補のオブジェクトの特定やオブジェクトの選択を容易に行うことができる。

（実施形態２）。
以下、この発明の第２実施形態について図１０〜図１２を参照して説明する。
なお、上述した第１実施形態の選択処理では、選択候補のオブジェクトを特定するための第１操作としてタッチ操作を示したが、第２実施形態の選択処理では、タッチ操作後の押圧操作（タッチだけでなく押し込む操作）を選択候補のオブジェクトを特定するための第１操作としたものである。また、第１実施形態の移動処理では、タッチ操作が移動された場合に選択状態となっているオブジェクトを移動するようにしたが、第２実施形態の移動処理では、第１操作及び第２操作が解除されたのち、再度のタッチ操作を検出した場合に、その操作位置に基づいて、選択状態になっているオブジェクトを移動するようにしたものである。ここで、両実施形態において基本的あるいは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第２実施形態の特徴部分を中心に説明するものとする。

図１０は、第２実施形態における選択処理（図５のステップＢ２）を詳述するためのフローチャートである。以下、この選択処理を図１２の表示例に基づいて具体的に説明するものとする。なお、図１２は、アイコン（オブジェクト）を拡大した状態を示した表示例で、このオブジェクトを親指と人差し指で掴むようにタッチ操作することで当該オブジェクトの表示形態が遷移する様子を例示した図である。
先ず、中央制御部１１は、タッチ操作の有無を調べながら操作待ち状態となる（ステップＥ１）。いま、表示部１６上で行われる第１操作（タッチ操作）を検出すると（ステップＥ１でＹＥＳ）、そのタッチ領域を検出したのち（ステップＥ２）、各オブジェクトの表示位置（オブジェクト表示領域）を検出する（ステップＥ３）。

そして、検出したタッチ領域とオブジェクト表示領域に基づいて、押し込み操作の対象になるオブジェクトを特定する（ステップＥ４）。例えば、タッチ領域と表示領域が重なるオブジェクトを特定したり、タッチ領域から所定距離内に表示されているオブジェクトを特定したりする。そして、オブジェクトの表示態様を、例えば、オブジェクトの枠線を太くするなど、押し込み操作の対象となったことを明示する表示態様に変更する（ステップＥ５）。例えば、図１２（ａ）に示すように矩形の「１」のオブジェクトが表示されている状態において、第１操作として「１」のオブジェクトの上を親指でタッチしたものとすると、図１２（ｂ）に示すように、「１」のオブジェクトの枠線が太くなる。

このように第１操作としてオブジェクトの上を親指でタッチしている状態において、タッチしながら指の押し込む押圧操作が行われると（ステップＥ６でＹＥＳ）、この押圧操作の対象となったオブジェクトを選択候補のオブジェクトとして特定する（ステップＥ７）。例えば、タッチ領域と表示領域が重なるオブジェクトを選択候補として特定したり、タッチ領域から所定距離内に表示されているオブジェクトを選択候補として特定したりする。そして、タッチ領域とオブジェクト表示領域に基づいて、オブジェクトの表示態様を変更する（ステップＥ８）。例えば、図１２（ｃ）に示すように、タッチ領域の近傍の角部（右下角部）が捲れたような形状となるようにその部分を変形（指で掴むことができるような表示態様に変更）して、選択候補として特定されたことを明示する。

この状態において、例えば、その右下角部を親指と人差し指で掴むように、親指をタッチしたまま人差し指をタッチすると、中央制御部１１は、この人差し指によるタッチ操作を表示部１６上で行われる第２操作として検出して（ステップＥ９）、そのタッチ領域を検出する（ステップＥ１０）。そして、第１操作のタッチ領域（親指のタッチ領域）と第２操作のタッチ領域（人差し指のタッチ領域）とは距離的に近いかを調べ（ステップＥ１１）、両方のタッチ領域が離れていれば、タッチ操作のやり直しを可能とするために上述のステップＥ９に戻る。

また、図１２（ｄ）に示すように両方のタッチ領域が近ければ（ステップＥ１１でＹＥＳ）、その選択候補のオブジェクトを選択状態にして（ステップＥ１２）、選択状態になったことを明示するためにそのオブジェクトの全体又は一部の表示色を変えたり、点滅したりして当該オブジェクトを識別表示させる（ステップＥ１３）。そして、この識別表示されたオブジェクトに対応する選択フラグ（図示せず）をオンする（ステップＥ１４）。

なお、図１０の選択処理では、タッチ操作後の押圧操作を選択候補のオブジェクトを特定するための第１操作とした場合を示したが、選択候補のオブジェクトを選択状態にするための第２操作であってもよく、タッチ操作後の押圧操作を第１操作及び第２操作としてもよい。

図１１は、第２実施形態における移動処理（図５のステップＢ３）を詳述するためのフローチャートである。
先ず、中央制御部１１は、上述した第１操作及び第２操作（親指と人差し指によるタッチ操作）が解除されたことを検出したのち（ステップＦ１でＹＥＳ）、再度のタッチ操作（第１操作及び又は第２操作）を検出すると（ステップＦ２でＹＥＳ）、そのタッチ領域を検出したのち（ステップＦ３）、選択状態になっているオブジェクト（選択フラグがオンになっているオブジェクト）を当該タッチ領域まで移動する（ステップＦ４）。

以上のように、この第２実施形態においては、第１操作及び第２操作の少なくともいずれか一方を、表示手段に対する押圧操作としたので、ユーザは、操作対象のオブジェクトの表示位置やその近傍で押圧操作を行うだけで、選択候補のオブジェクトの特定やオブジェクトの選択を容易に行うことができる。また、物を掴むという現実の感覚に近い直感的な操作で、オブジェクトを操作することができる。

また、オブジェクトが選択状態になったのち、第１操作及び第２操作が解除され、再度の行われた第１操作及び又は第２操作の操作位置に応じて、選択状態になったオブジェクトを移動するようにしたので、ユーザは、物を掴んで持ち上げ移動先に下ろすという現実の感覚に近い直感的な操作で、オブジェクトを容易に移動させることができる。また、ユーザは誤って第１操作や第２操作を解除してもオブジェクトを移動させることができる。

（実施形態３）。
以下、この発明の第３実施形態について図１３〜図１５を参照して説明する。
なお、上述した第１実施形態の選択処理では、第１操作、第２操作の操作位置（タッチ領域）が近いときに、選択候補のオブジェクトを選択状態にするようにしたが、第３実施形態では、第１操作、第２操作のタッチ領域及び操作タイミングが近いときに、選択候補のオブジェクトを選択状態にするようにしたものである。また、第１実施形態の移動処理では、タッチ操作が移動された際に、選択状態となっているオブジェクトを移動するようにしたが、第３実施形態の移動処理では、第１操作、第２操作のタッチ領域及び操作タイミングが近いときに、選択状態となっているオブジェクトを移動するようにしたものである。ここで、第１実施形態から第３実施形態において基本的あるいは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第３実施形態の特徴部分を中心に説明するものとする。

図１３は、第３実施形態における選択処理（図５のステップＢ２）を詳述するためのフローチャートである。以下、この選択処理を図１５の表示例に基づいて具体的に説明するものとする。なお、図１５は、アイコン（オブジェクト）を拡大した状態を示した表示例で、このオブジェクトを親指と人差し指で掴むようにタッチ操作することによって当該オブジェクトの表示形態が遷移する様子を例示した図である。
先ず、中央制御部１１は、タッチ画面ＴＤへのタッチ操作の有無を調べながら操作待ち状態となる（ステップＧ１）。

いま、例えば、図１５（ａ）に示すように矩形の「１」のオブジェクトが表示されている状態において、第１操作として、例えば、親指によるタッチ操作を検出すると（ステップＧ１でＹＥＳ）、そのタッチ領域を検出すると共に（ステップＧ２）、その操作タイミングを検出する（ステップＧ３）。同様に、第２操作（例えば、人差し指によるタッチ操作）を検出すると（ステップＧ４でＹＥＳ）、そのタッチ領域を検出すると共に（ステップＧ５）、その操作タイミングを検出する（ステップＧ６）。なお、操作タイミングとしては、それぞれのタッチ操作の時刻を検出してもよいし、最初のタッチ操作を検出したときにタイマを起動し、次のタッチ操作までの時間を計測してもよい（以下、同様）。

そして、第１操作、第２操作のタッチ領域は距離的に近いかを調べ（ステップＧ７）、距離的に離れていれば、タッチ操作のやり直しを可能とするために上述のステップＧ１に戻るが、図１５（ｂ）に示すように、「１」のオブジェクトの左外側を親指でタッチし、その右外側を人差し指で略同時にタッチした場合のように、両方のタッチ領域が距離的に近ければ（ステップＧ７でＹＥＳ）、両方の操作タイミングは近いか（第１操作及び第２操作の操作タイミングの差が所定時間以内か）、例えば、両方の操作タイミングの差が１秒以内であるかを調べる（ステップＧ８）。

いま、時間的に近くなければ（ステップＧ８でＮＯ）、タッチ操作のやり直しを可能とするために上述のステップＧ１に戻るが、例えば、図１５（ｂ）に示すように、親指と人差し指で略同時にタッチした場合のように、両方の操作タイミングが時間的に近ければ（ステップＧ８でＹＥＳ）、タッチ領域とオブジェクト表示領域に基づいて選択候補のオブジェクトを特定する（ステップＧ９）。例えば、タッチ領域と表示領域が重なるオブジェクトを選択候補として特定したり、タッチ領域から所定距離内に表示されているオブジェクトを選択候補として特定したりする。

そして、タッチ領域とオブジェクト表示領域に基づいて、オブジェクトの表示態様を、特定されたことを示す表示態様に変更する（ステップＧ１０）。例えば、図１５（ｂ）に示すように、オブジェクトの枠線を太くするほかに、タッチ領域の近傍の角部（右下角部）が捲れたような形状となるようにその部分を変形して、選択候補として特定したことを明示する。そして、この選択候補のオブジェクトを選択状態にすると共に（ステップＧ１１）、選択状態になったことを明示するためにそのオブジェクトの全体又は一部の表示色を変えたり、点滅したりして当該オブジェクトを識別表示させる（ステップＧ１２）。そして、この識別表示されたオブジェクトに対応する選択フラグ（図示せず）をオンする（ステップＧ１３）。

図１４は、第３実施形態における移動処理（図５のステップＢ３）を詳述するためのフローチャートである。
先ず、中央制御部１１は、上述した第１操作及び第２操作（親指と人差し指によるタッチ操作）が解除されたことを検出したのち（ステップＨ１でＹＥＳ）、再度のタッチ操作を検出すると（ステップＨ２でＹＥＳ）、このタッチ操作を第１操作としてそのタッチ領域を検出すると共に（ステップＨ３）、その操作タイミングを検出する（ステップＨ４）。同様に、第２操作としのタッチ操作を検出すると（ステップＨ５でＹＥＳ）、そのタッチ領域を検出すると共に（ステップＨ６）、その操作タイミングを検出する（ステップＨ７）。

そして、第１操作、第２操作のタッチ領域は距離的に近いかを調べ（ステップＨ８）、距離的に離れていれば、タッチ操作のやり直しを可能とするために上述のステップＨ２に戻るが、両方のタッチ領域が距離的に近い場合には（ステップＨ８でＹＥＳ）、両方の操作タイミングは時間的に近いか、例えば、両方の操作タイミングの時間差が１秒以内であるかを調べる（ステップＨ９）。いま、時間的に近くなければ、タッチ操作のやり直しを可能とするために上述のステップＨ２に戻るが、両方の操作タイミングが時間的に近ければ（ステップＨ９でＹＥＳ）、選択状態になっているオブジェクト（選択フラグがオンになっているオブジェクト）を移動する（ステップＨ１０）。この場合、移動先となる新たなタッチ領域は、第１操作のタッチ領域と第２操作のタッチ領域の中間点又はその一方の操作のタッチ領域であってもよい。

以上のように、この第３実施形態においては、第１操作及び第２操作の操作タイミングに応じてオブジェクトを選択状態にするか否かを制御するようにしたので、ユーザは所定の操作タイミングで行われる第１操作及び第２操作という２つの操作でオブジェクトを選択状態にすることができ、誤操作でオブジェクトを選択状態にすることを防止することができる。また、あたかも第１操作と第２操作で物を掴むという現実の感覚に近い直感的な操作で、オブジェクトを容易に選択状態にすることができる。

第１操作及び第２操作の操作タイミングの差が所定時間以内の場合に、オブジェクトを選択状態にするようにしたので、ユーザは、第１操作と第２操作で物を掴むという現実の感覚に近い直感的な操作で、オブジェクトを容易に選択状態にすることができる。

また、選択状態になったオブジェクトの表示態様を変更するようにしたので、ユーザはオブジェクトが選択状態になったことを確認することができる。

選択状態になったオブジェクトを第１操作及び又は第２操作の操作位置の移動に応じて移動するようにしたので、ユーザは、掴んだ物を移動させるという現実の感覚に近い直感的な操作で、オブジェクトを容易に移動させることができる。

オブジェクトが選択状態になったのち、第１操作及び第２操作が解除され、再度の行われた第１操作及び又は第２操作の操作位置に応じて、選択状態になったオブジェクトを移動するようにしたので、ユーザは、物を掴んで持ち上げ移動先に下ろすという現実の感覚に近い直感的な操作で、オブジェクトを容易に移動させることができる。また、ユーザは誤って第１操作や第２操作を解除してもオブジェクトを移動させることができる。

なお、上述した各実施形態においては、複数オブジェクト表示として、データを削除するための任意のデータアイコン表示、アドレス帳データアイコン表示、機能アイコン（メニュー）表示を表示例としたが、任意のアイコン表示であってもよい。また、オブジェクトの表示位置やサイズは、実施形態で示したものに限らず、例えば、不規則な位置に表示されたオブジェクト、又はサイズや形状が異なるオブジェクトなど、任意のオブジェクトであってもよい。

上述した各実施形態においては、タッチ操作の操作位置やオブジェクトの表示位置として、タッチ領域や表示領域を利用したが、その領域の中心などの操作点、表示点を利用するようにしてもよい。

また、上述した各実施形態においては、第１操作及び第２操作を表示手段に対する接触操作（タッチ操作）としたが、表示手段上で行われる非接触操作としてもよい。また、第１操作、第２操作のいずれか一方を接触操作とし、他方を非接触操作としてもよい。例えば、静電容量などで近距離に存在する物体の動きを検出する非接触センサを配設しておけば、ユーザは、操作対象のオブジェクトの表示位置やその近傍で非接触操作を行うだけで、選択候補のオブジェクトの特定やオブジェクトの選択を容易に行うことができる。

また、選択処理と移動処理の組み合わせは上述した各実施形態の組み合わせに限らない。例えば、第１実施形態の選択処理と第２実施形態の移動処理の組み合わせ、第３実施形態の選択処理と第１実施形態の移動処理の組み合わせのように、任意の組み合わせでよい。

また、上述した各実施形態においては、オブジェクトを２次元で表示されているものとしたが、立体表示が可能な表示部で３次元表示されているオブジェクトでもよい。
その他、端末装置としては、携帯電話機に限らず、パーソナルコンピュータ、ＰＤＡ、デジタルカメラ、音楽プレイヤーなど、任意の端末装置であってもよい。

１ 携帯電話機
１１ 中央制御部
１３ 記憶部
１６ 表示部
１７ 接触操作部
１８ キー操作部
ＴＤ タッチ画面
Ｍ１ プログラム記憶部
Ｍ２ 各種情報一時記憶部

Claims (9)

1. 表示手段に表示されているオブジェクトに対して処理を行う端末装置であって、
   前記表示手段上で行われる第１操作を検出する第１検出手段と、
   前記第１操作の操作位置と、前記表示手段に表示されているオブジェクトの表示位置とに基づいて、選択状態にするための候補のオブジェクトを特定する特定手段と、
   この特定手段によってオブジェクトが特定されている状態にあって、前記表示手段上で行われる第２操作を検出する第２検出手段と、
   前記第１操作の操作位置と前記第２操作の操作位置とに基づいて、前記特定手段によって特定されたオブジェクトを選択状態にする選択手段と、
   この選択手段によって選択状態にされたオブジェクトに対して処理を行う処理手段と、
   前記特定手段によって特定されたオブジェクトの表示態様を、指で掴むことができるような表示態様に変更する変更手段と、
   を具備したことを特徴とする端末装置。
2. 前記特定手段は、前記表示手段に複数のオブジェクトが表示されている場合に、前記第１操作の操作位置と表示されている複数のオブジェクトの表示位置とに基づいて所定のオブジェクトを特定する、
   ようにしたことを特徴とする請求項１記載の端末装置。
3. 前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作、前記第２操作のうち少なくともいずれかの操作の操作位置の移動に基づいて、前記選択状態になったオブジェクトを移動する移動手段を更に備える、
   ようにしたことを特徴とする請求項１または２いずれかに記載の端末装置。
4. 前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作及び第２操作が解除された場合に、前記選択状態になったオブジェクトの選択状態を解除する解除手段を更に備える、
   ようにしたことを特徴とする請求項１乃至３いずれかに記載の端末装置。
5. 前記選択手段によってオブジェクトが選択状態になったのち、前記第１操作及び第２操作が解除され、再度の前記第１操作、前記第２操作のうち少なくともいずれかの操作が検出された場合に、その操作位置に基づいて、前記選択状態になったオブジェクトを移動する移動手段を更に備える、
   ようにしたことを特徴とする請求項１乃至４いずれかに記載の端末装置。
6. 前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段に対する接触操作である、
   ことを特徴とする請求項１乃至５いずれかに記載の端末装置。
7. 前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段に対する押圧操作である、
   ことを特徴とする請求項１乃至５いずれかに記載の端末装置。
8. 前記第１操作及び第２操作の少なくともいずれか一方は、前記表示手段上で行われる非接触操作である、
   ことを特徴とする請求項１乃至５いずれかに記載の端末装置。
9. コンピュータに対して、
   表示手段上で行われる第１操作を検出する機能と、
   前記第１操作の操作位置と、前記表示手段に表示されているオブジェクトの表示位置とに基づいて、選択状態にするための候補のオブジェクトを特定する機能と、
   前記オブジェクトが特定されている状態にあって、前記表示手段上で行われる第２操作を検出する機能と、
   前記第１操作の操作位置と前記第２操作の操作位置とに基づいて、前記特定されたオブジェクトを選択状態にする機能と、
   前記選択状態にされたオブジェクトに対して処理を行う機能と、
   前記特定されたオブジェクトの表示態様を、指で掴むことができるような表示態様に変更する機能と、
   を実現させるためのプログラム。

Images