本発明を実施するための実施形態を、図面を参照しつつ詳細に説明する。以下では、電子機器の一例として、タッチスクリーンディスプレイを備えるスマートフォンについて説明する。
(実施形態)
図1から図3を参照しながら、実施形態に係るスマートフォン1の外観について説明する。図1から図3に示すように、スマートフォン1は、ハウジング20を有する。ハウジング20は、フロントフェイス1Aと、バックフェイス1Bと、サイドフェイス1C1〜1C4とを有する。フロントフェイス1Aは、ハウジング20の正面である。バックフェイス1Bは、ハウジング20の背面である。サイドフェイス1C1〜1C4は、フロントフェイス1Aとバックフェイス1Bとを接続する側面である。以下では、サイドフェイス1C1〜1C4を、どの面であるかを特定することなく、サイドフェイス1Cと総称することがある。
スマートフォン1は、タッチスクリーンディスプレイ2と、ボタン3A〜3Cと、照度センサ4と、近接センサ5と、レシーバ7と、マイク8と、カメラ12とをフロントフェイス1Aに有する。スマートフォン1は、カメラ13をバックフェイス1Bに有する。スマートフォン1は、ボタン3D〜3Fと、コネクタ14とをサイドフェイス1Cに有する。以下では、ボタン3A〜3Fを、どのボタンであるかを特定することなく、ボタン3と総称することがある。
タッチスクリーンディスプレイ2は、ディスプレイ2Aと、タッチスクリーン2Bとを有する。ディスプレイ2Aは、液晶ディスプレイ(Liquid Crystal Display)、有機ELパネル(Organic Electro−Luminescence panel)、又は無機ELパネル(Inorganic Electro−Luminescence panel)等の表示デバイスを備える。ディスプレイ2Aは、文字及び図形等を表示する。
タッチスクリーン2Bは、タッチスクリーンディスプレイ2に対する指、又はスタイラスペン等の接触を検出する。タッチスクリーン2Bは、複数の指、又はスタイラスペン等がタッチスクリーンディスプレイ2に接触した位置を検出することができる。
タッチスクリーン2Bの検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式(又は超音波方式)、赤外線方式、電磁誘導方式、及び荷重検出方式等の任意の方式でよい。以下では、説明を簡単にするため、タッチスクリーン2Bがタッチスクリーンディスプレイ2に対する接触を検出する指、又はスタイラスペン等を単に「指」ということがある。
スマートフォン1は、タッチスクリーン2Bにより検出された接触及び接触が行われた位置に基づいてジェスチャの種別を判別する。ジェスチャは、タッチスクリーンディスプレイ2に対して行われる操作である。スマートフォン1によって判別されるジェスチャには、タッチ、ロングタッチ、リリース、スワイプ、タップ、ダブルタップ、ロングタップ、ドラッグ、フリック、ピンチイン、ピンチアウト等が含まれる。
タッチは、タッチスクリーン2Bに指が触れるジェスチャである。スマートフォン1は、タッチスクリーン2Bに指が接触するジェスチャをタッチとして判別する。ロングタッチとは、タッチスクリーン2Bに指が一定時間以上触れるジェスチャである。スマートフォン1は、タッチスクリーン2Bに指が一定時間以上接触するジェスチャをロングタッチとして判別する。
リリースは、指がタッチスクリーン2Bから離れるジェスチャである。スマートフォン1は、指がタッチスクリーン2Bから離れるジェスチャをリリースとして判別する。スワイプは、指がタッチスクリーンディスプレイ2上に接触したままで移動するジェスチャである。スマートフォン1は、指がタッチスクリーンディスプレイ2上に接触したままで移動するジェスチャをスワイプとして判別する。
タップは、タッチに続いてリリースをするジェスチャである。スマートフォン1は、タッチに続いてリリースをするジェスチャをタップとして判別する。ダブルタップは、タッチに続いてリリースをするジェスチャが2回連続するジェスチャである。スマートフォン1は、タッチに続いてリリースをするジェスチャが2回連続するジェスチャをダブルタップとして判別する。
ロングタップは、ロングタッチに続いてリリースをするジェスチャである。スマートフォン1は、ロングタッチに続いてリリースをするジェスチャをロングタップとして判別する。ドラッグは、移動可能なオブジェクトが表示されている領域を始点としてスワイプをするジェスチャである。スマートフォン1は、移動可能なオブジェクトが表示されている領域を始点としてスワイプをするジェスチャをドラッグとして判別する。
フリックは、タッチに続いて指が一方方向へ高速で移動しながらリリースするジェスチャである。スマートフォン1は、タッチに続いて指が一方方向へ高速で移動しながらリリースするジェスチャをフリックとして判別する。フリックは、指が画面の上方向へ移動する上フリック、指が画面の下方向へ移動する下フリック、指が画面の右方向へ移動する右フリック、指が画面の左方向へ移動する左フリック等を含む。
ピンチインは、複数の指が近付く方向にスワイプするジェスチャである。スマートフォン1は、複数の指が近付く方向にスワイプするジェスチャをピンチインとして判別する。ピンチアウトは、複数の指が遠ざかる方向にスワイプするジェスチャである。スマートフォン1は、複数の指が遠ざかる方向にスワイプするジェスチャをピンチアウトとして判別する。
スマートフォン1は、タッチスクリーン2Bを介して判別するこれらのジェスチャに従って動作を行う。したがって、利用者にとって直感的で使いやすい操作性が実現される。判別されるジェスチャに従ってスマートフォン1が行う動作は、タッチスクリーンディスプレイ2に表示されている画面に応じて異なる。
図4を参照しながら、ディスプレイ2Aに表示される画面の例について説明する。図4は、ホーム画面の一例を示している。ホーム画面は、デスクトップ、又は待受画面と呼ばれることもある。ホーム画面は、ディスプレイ2Aに表示される。ホーム画面は、スマートフォン1にインストールされているアプリケーションのうち、どのアプリケーションを実行するかを利用者に選択させる画面である。スマートフォン1は、ホーム画面で選択されたアプリケーションをフォアグランドで実行する。フォアグランドで実行されるアプリケーションは、ホーム画面とは異なる画面をディスプレイ2Aに表示させる。
スマートフォン1は、ホーム画面にアイコンを配置することができる。図4に示すホーム画面40には、複数のアイコン50が配置されている。それぞれのアイコン50は、スマートフォン1にインストールされている特定のアプリケーションと予め対応付けられている。スマートフォン1は、アイコン50に対する特定のジェスチャ(例えば、タップ)を検出すると、そのアイコン50に対応付けられているアプリケーションを実行する。例えば、スマートフォン1は、メールアプリケーションに対応付けられたアイコン50に対するタップが検出されると、メールアプリケーションを実行する。
アイコン50は、画像と文字列を含む。アイコン50は、画像に代えて、記号又は図形を含んでもよい。アイコン50は、画像又は文字列のいずれか一方を含まなくてもよい。アイコン50は、所定の規則に従って配置される。アイコン50の背後には、壁紙41が表示される。壁紙は、フォトスクリーン又はバックスクリーンと呼ばれることもある。スマートフォン1は、任意の画像を壁紙41として用いることができる。画像は、例えば、利用者の設定に従って壁紙として決定される。
スマートフォン1は、ホーム画面の数を増減することができる。スマートフォン1は、例えば、ホーム画面の数を利用者による設定に従って決定する。スマートフォン1は、ホーム画面を表示する場合、ホーム画面の数が複数であっても、それらのうちから選択された1つをディスプレイ2Aに表示する。
スマートフォン1は、ホーム画面上に、1つ又は複数のロケータを表示する。ロケータの数は、ホーム画面の数と一致する。ロケータは、現在表示されているホーム画面の位置を示す。現在表示されているホーム画面に対応するロケータは、他のロケータと異なる態様で表示される。
図4に示す例では、4つのロケータ51が表示されている。これは、ホーム画面40の数が4つであることを示す。また、図4に示す例では、左から2番目のシンボルが他のシンボルと異なる態様で表示されている。これは、左から2番目のホーム画面が現在表示されていることを示している。
スマートフォン1は、ホーム画面を表示中に特定のジェスチャを検出すると、ディスプレイ2Aに表示するホーム画面を切り替える。例えば、スマートフォン1は、右フリックを検出すると、ディスプレイ2Aに表示するホーム画面を1つ左のホーム画面に切り替える。また、スマートフォン1は、左フリックを検出すると、ディスプレイ2Aに表示するホーム画面を1つ右のホーム画面に切り替える。
ディスプレイ2Aの上端には、領域42が設けられている。領域42には、充電池の残量を示す残量マーク43、及び通信用の電波の電界強度を示す電波レベルマーク44が表示される。スマートフォン1は、領域42に、現在時刻、天気の情報、実行中のアプリケーション、通信システムの種別、電話のステータス、装置のモード、装置に生じたイベント等を表示してもよい。このように、領域42は、利用者に対して各種の通知を行うために用いられる。領域42は、ホーム画面40以外の画面でも設けられることがある。領域42が設けられる位置は、ディスプレイ2Aの上端に限られない。
なお、図4に示したホーム画面40は、一例であり、各種の要素の形態、各種の要素の配置、ホーム画面40の数、及びホーム画面40での各種の操作の仕方等は上記の説明の通りでなくてもよい。
図5は、スマートフォン1の構成を示すブロック図である。スマートフォン1は、タッチスクリーンディスプレイ2と、ボタン3と、照度センサ4と、近接センサ5と、通信ユニット6と、レシーバ7と、マイク8と、ストレージ9と、コントローラ10と、カメラ12及び13と、コネクタ14と、加速度センサ15と、方位センサ16と、ジャイロスコープ17とを有する。
タッチスクリーンディスプレイ2は、上述したように、ディスプレイ2Aと、タッチスクリーン2Bとを有する。ディスプレイ2Aは、文字、画像、記号、又は図形等を表示する。タッチスクリーン2Bは、ジェスチャを検出する。
ボタン3は、利用者によって操作される。ボタン3は、ボタン3A〜ボタン3Fを有する。コントローラ10はボタン3と協働することによってボタンに対する操作を検出する。ボタンに対する操作は、例えば、クリック、ダブルクリック、プッシュ、及びマルチプッシュである。
例えば、ボタン3A〜3Cは、ホームボタン、バックボタンまたはメニューボタンである。例えば、ボタン3Dは、スマートフォン1のパワーオン/オフボタンである。ボタン3Dは、スリープ/スリープ解除ボタンを兼ねてもよい。例えば、ボタン3E及び3Fは、音量ボタンである。
照度センサ4は、照度を検出する。例えば、照度とは、光の強さ、明るさ、輝度等である。照度センサ4は、例えば、ディスプレイ2Aの輝度の調整に用いられる。近接センサ5は、近隣の物体の存在を非接触で検出する。近接センサ5は、例えば、タッチスクリーンディスプレイ2が顔に近付けられたことを検出する。
通信ユニット6は、無線により通信する。通信ユニット6によって行われる通信方式は、無線通信規格である。例えば、無線通信規格として、2G、3G、4G等のセルラーフォンの通信規格がある。例えば、セルラーフォンの通信規格として、LTE(Long Term Evolution)、W−CDMA、CDMA2000、PDC、GSM、PHS(Personal Handy−phone System)等がある。例えば、無線通信規格として、WiMAX(Worldwide Interoperability for Microwave Access)、IEEE802.11、Bluetooth(登録商標)、IrDA、NFC等がある。通信ユニット6は、上述した通信規格の1つ又は複数をサポートしていてもよい。
レシーバ7は、コントローラ10から送信される音声信号を音声として出力する。マイク8は、利用者等の音声を音声信号へ変換してコントローラ10へ送信する。なお、スマートフォン1は、レシーバ7に加えて、または、レシーバ7に代えて、スピーカをさらに有してもよい。
ストレージ9は、プログラム及びデータを記憶する。また、ストレージ9は、コントローラ10の処理結果を一時的に記憶する作業領域としても利用される。ストレージ9は、半導体記憶デバイス、及び磁気記憶デバイス等の任意の記憶デバイスを含んでよい。また、ストレージ9は、複数の種類の記憶デバイスを含んでよい。また、ストレージ9は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。
ストレージ9に記憶されるプログラムには、フォアグランドまたはバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。アプリケーションは、例えば、ディスプレイ2Aに所定の画面を表示させ、タッチスクリーン2Bによって検出されるジェスチャに応じた処理をコントローラ10に実行させる。制御プログラムは、例えば、OSである。アプリケーション及び制御プログラムは、通信ユニット6による無線通信又は記憶媒体を介してストレージ9にインストールされてもよい。
ストレージ9は、例えば、制御プログラム9A、メールアプリケーション9B、ブラウザアプリケーション9C、設定データ9Zを記憶する。メールアプリケーション9Bは、電子メールの作成、送信、受信、及び表示等のための電子メール機能を提供する。ブラウザアプリケーション9Cは、WEBページを表示するためのWEBブラウジング機能を提供する。設定データ9Zは、スマートフォン1の動作に関する各種の設定に関する情報を含む。
制御プログラム9Aは、スマートフォン1を稼働させるための各種制御に関する機能を提供する。制御プログラム9Aは、例えば、通信ユニット6、レシーバ7、及びマイク8等を制御することによって、通話を実現させる。制御プログラム9Aが提供する機能には、タッチスクリーン2Bを介して検出されたジェスチャに応じて、ディスプレイ2Aに表示されている情報を変更する等の各種制御を行う機能が含まれる。なお、制御プログラム9Aが提供する機能は、メールアプリケーション9B等の他のプログラムが提供する機能と組み合わせて利用されることがある。
コントローラ10は、例えば、CPU(Central Processing Unit)である。コントローラ10は、通信ユニット6等の他の構成要素が統合されたSoC(System−on−a−chip)等の集積回路であってもよい。コントローラ10は、スマートフォン1の動作を統括的に制御して各種の機能を実現する。
具体的には、コントローラ10は、ストレージ9に記憶されているデータを必要に応じて参照しつつ、ストレージ9に記憶されているプログラムに含まれる命令を実行して、ディスプレイ2A及び通信ユニット6等を制御することによって各種機能を実現する。コントローラ10は、タッチスクリーン2B、ボタン3、加速度センサ15等の各種検出部の検出結果に応じて、制御を変更することもある。
コントローラ10は、例えば、制御プログラム9Aを実行することにより、タッチスクリーン2Bを介して検出されたジェスチャに応じて、ディスプレイ2Aに表示されている情報を変更する等の各種制御を実行する。
カメラ12は、フロントフェイス1Aに面している物体を撮影するインカメラである。カメラ13は、バックフェイス1Bに面している物体を撮影するアウトカメラである。
コネクタ14は、他の装置が接続される端子である。コネクタ14は、USB(Universal Serial Bus)、HDMI(High−Definition Multimedia Interface)、ライトピーク(サンダーボルト)、イヤホンマイクコネクタのような汎用的な端子であってもよい。コネクタ14は、Dockコネクタのような専用に設計された端子でもよい。コネクタ14に接続される装置には、例えば、外部ストレージ、スピーカ、通信装置が含まれる。
加速度センサ15は、スマートフォン1に働く加速度の方向及び大きさを検出する。方位センサ16は、地磁気の向きを検出する。ジャイロスコープ17は、スマートフォン1の回転を検出する。加速度センサ15、方位センサ16及びジャイロスコープ17の検出結果は、スマートフォン1の位置及び姿勢の変化を検出するために、組み合わせて利用される。
なお、図5においてストレージ9が記憶することとしたプログラムの一部又は全部は、通信ユニット6による無線通信で他の装置からダウンロードされてもよい。また、図5においてストレージ9が記憶することとしたプログラムの一部又は全部は、ストレージ9に含まれる読み取り装置が読み取り可能な記憶媒体に記憶されていてもよい。また、図5においてストレージ9が記憶することとしたプログラムの一部又は全部は、コネクタ14に接続される読み取り装置が読み取り可能なCD、DVD、又はBlu−ray等の記憶媒体に記憶されていてもよい。
また、図5に示したスマートフォン1の構成は一例であり、本発明の要旨を損なわない範囲において適宜変更してよい。例えば、ボタン3の数と種類は図5の例に限定されない。例えば、スマートフォン1は、画面に関する操作のためのボタンとして、ボタン3A〜3Cに代えて、テンキー配列又はQWERTY配列等のボタンを備えていてもよい。また、スマートフォン1は、画面に関する操作のために、ボタンを1つだけ備えてよいし、ボタンを備えなくてもよい。また、図5に示した例では、スマートフォン1が2つのカメラを備えることとしたが、スマートフォン1は、1つのカメラのみを備えてもよいし、カメラを備えなくてもよい。また、図5に示した例では、スマートフォン1が位置及び姿勢を検出するために3種類のセンサを備えることとしたが、スマートフォン1は、このうちいくつかのセンサを備えなくてもよいし、位置及び姿勢を検出するための他の種類のセンサを備えてもよい。
図6から図12を参照しながら、制御プログラム9Aが提供する機能に基づく制御の例について説明する。制御プログラム9Aが提供する機能には、利用者の指示に従ってホーム画面上のアイコン(第1オブジェクト)の内部に他のアイコン(第2オブジェクト)を格納する機能が含まれる。アイコン(第1オブジェクト)の内部に他のアイコン(第2オブジェクト)を格納する機能は、他のアイコンに対応付けられているデータをアイコンに対応付けられたデータに変更する処理を実行する。つまり、他のアイコンをアイコンの内部に格納する機能は、データを対応付ける対象のアイコンを変更する処理を実行する。なお、利用者の指示に従ってホーム画面上の他のアイコンをアイコンの内部に格納する機能は、他のアイコンをアイコンの下位の階層に対応付ける処理を実行してもよい。また、データとしては、1つのデータファイル、または、データファイルを格納することができるフォルダが用いられる。また、アイコンに対応付けられたデータを格納する他のアイコンは、基本的にフォルダが対応付けられている。他のアイコンをアイコンの内部に格納する機能は、アイコンに対応付けられたフォルダ内に、他のアイコンに対応付けられたデータを格納する。以下に、利用者の指示に従って他のアイコンをアイコンの内部に格納する複数の例を示す。なお、アイコンは、前述したように、フォルダまたはデータファイルを示すものであってもよいし、特定のアプリケーションを起動するためのショートカットアイコンであってもよい。
図6に示すステップS1では、ディスプレイ2Aにホーム画面40が表示されている。ステップS1で表示されているホーム画面40には、壁紙41の上に12個のアイコン50が配置されている。また、図6では、説明のために、ホーム画面40上に配置されている12個のアイコンの画像としてAからLを割り当てている。12個のアイコン50は、3行4列で配置されている。1列の3個のアイコン50は、左側から順にA、B、Cの画像が表示されている。2列の3個のアイコン50は、左側から順にD、E、Fの画像が表示されている。3列の3個のアイコン50は、左側から順にG、H、Iの画像が表示されている。4列の3個のアイコン50は、左側から順にJ、K、Lの画像が表示されている。ステップS1では、利用者の指FがKの画像が表示されているアイコン50をロングタップしている。Kの画像が表示されているアイコン50は、以下単にKの画像のアイコン50という。また、他のアイコンについても表示されているアルファベットの画像のアイコン50という。この場合、スマートフォン1は、タッチスクリーン2Bを介して、Kの画像のアイコン50のロングタップを検出する。スマートフォン1はKの画像のアイコン50のロングタップが検出されると、ディスプレイ2Aに表示されているアイコン50の表示を調整する移動モードを起動し、移動処理を実行する。
ステップS2では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、Kの画像のアイコン50が表示されていた位置から画面の右斜め上方向に移動し、Hの画像のアイコン50とIの画像のアイコン50とLの画像のアイコン50との間をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS1でKの画像のアイコン50が表示されていた位置を基点とするスワイプを検出する。スマートフォン1は、ステップS1でKの画像のアイコン50が表示されていた位置を基点とするスワイプが検出されると、ステップS2に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているKの画像のアイコン50の表示位置を変化させる。つまり、スマートフォン1は、指Fの接触を検出している位置にKの画像のアイコン50を表示させる。また、スマートフォン1は、指Fの接触を検出している位置の周囲、つまりステップS2でKの画像のアイコン50の周囲にあるHの画像のアイコン50とIの画像のアイコン50とLの画像のアイコン50との3つのアイコン50の画像を小さくする。
ステップS3では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS2でKの画像のアイコン50が表示されていた位置から画面の上方向に移動し、Eの画像のアイコン50とFの画像のアイコン50とHの画像のアイコン50とIの画像のアイコン50との間をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS2で検出したスワイプの接触位置がさらに移動したことを検出する。スマートフォン1は、スワイプの接触位置が移動したことが検出されると、ステップS3に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているKの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、指Fの接触を検出している位置の周囲、つまりステップS3でKの画像のアイコン50の周囲にあるEの画像のアイコン50とFの画像のアイコン50とHの画像のアイコン50とIの画像のアイコン50との4つのアイコン50の画像を小さくする。
ステップS4では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS3でKの画像のアイコン50が表示されていた位置から画面の上方向に移動し、Bの画像のアイコン50とCの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との間をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS3で検出したスワイプの接触位置がさらに移動したことを検出する。スマートフォン1は、スワイプの接触位置が移動したことが検出されると、ステップS4に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているKの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、指Fの接触を検出している位置の周囲、つまりステップS4でKの画像のアイコン50の周囲にあるBの画像のアイコン50とCの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との4つのアイコン50の画像を小さくする。
ステップS5では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS4でKの画像のアイコン50が表示されていた位置から画面の右斜め上方向に移動し、Cの画像のアイコン50が表示されている位置を他のアイコンに触れること無くタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS4で検出したスワイプの接触位置がさらにCの画像のアイコン50が表示されている位置に移動したことを検出する。スマートフォン1は、スワイプの接触位置がCの画像のアイコン50が表示されている位置に移動したことが検出されると、ステップS5に示すように、移動させているKの画像のアイコン50と重なったCの画像のアイコン50をKの画像のアイコン50に格納する。これにより移動させているアイコン50は、Kの画像のアイコン50に対応付けられたデータとCの画像のアイコン50に対応付けられたデータの両方が対応付けられたアイコンとなる。スマートフォン1は、ステップS5に示すように、移動させているアイコン50を、C、Kの画像を含むアイコン50とする。また、スマートフォン1は、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、Kの画像のアイコン50の表示位置を変化させる。また、ステップS5では、指Fの接触位置、つまりC、Kの画像のアイコン50の表示位置と他のアイコン50の表示位置とが一定距離以上離れているため、C、Kの画像のアイコン50の周囲にあるアイコン50を表示する大きさは、小さくなっていない。
ステップS6では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS5でC、Kの画像のアイコン50が表示されていた位置から画面の左斜め下方向に移動し、Bの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との間をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS5で検出したスワイプの接触位置がさらに移動したことを検出する。スマートフォン1は、スワイプの接触位置が移動したことが検出されると、ステップS6に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、Kの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、指Fの接触を検出している位置の周囲、つまりステップS6でC、Kの画像のアイコン50の周囲にあるBの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との3つのアイコン50の画像を小さくする。
ステップS7では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS6でC、Kの画像のアイコン50が表示されていた位置から画面の左方向に移動し、Aの画像のアイコン50とBの画像のアイコン50とDの画像のアイコン50とEの画像のアイコン50との間をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS6で検出したスワイプの接触位置がさらに移動したことを検出する。スマートフォン1は、スワイプの接触位置が移動したことが検出されると、ステップS7に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、Kの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、指Fの接触を検出している位置の周囲、つまりステップS6でC、Kの画像のアイコン50の周囲にあるAの画像のアイコン50とBの画像のアイコン50とDの画像のアイコン50とEの画像のアイコン50との4つのアイコン50の画像を小さくする。
ステップS8では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS7でKの画像のアイコン50が表示されていた位置から画面の左斜め下方向に移動し、Dの画像のアイコン50が表示されている位置を他のアイコンに触れること無くタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS7で検出したスワイプの接触位置がさらにDの画像のアイコン50が表示されている位置に移動したことを検出する。スマートフォン1は、スワイプの接触位置がDの画像のアイコン50が表示されている位置に移動したことが検出されると、ステップS8に示すように、移動させているC、Kの画像のアイコン50と重なったDの画像のアイコン50をC、Kの画像のアイコン50に格納する。これにより移動させているアイコン50は、Cの画像のアイコン50に対応付けられたデータとKの画像のアイコン50に対応付けられたデータとDの画像のアイコン50に対応付けられたデータの両方が対応付けられたアイコンとなる。スマートフォン1は、ステップS8に示すように、移動させているアイコン50を、C、D、Kの画像を含むアイコン50とする。また、スマートフォン1は、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、D、Kの画像のアイコン50の表示位置を変化させる。また、ステップS8では、指Fの接触位置、つまりC、D、Kの画像のアイコン50の表示位置と他のアイコン50の表示位置とが一定距離以上離れているため、C、D、Kの画像のアイコン50の周囲にあるアイコン50を表示する大きさは、小さくなっていない。
以上のように、スマートフォン1は、アイコン50を基点とし、かつ、他のアイコン50を通過するスワイプジェスチャを検出した場合、基点となったアイコン50(第1オブジェクト)に他のアイコン50(第2オブジェクト)を格納する。つまり、スマートフォン1は、スワイプジェスチャで移動させているアイコン50が他のアイコン50と重なったことを検出した場合、他のアイコン50に対応付けられたデータをスワイプジェスチャで移動させているアイコン50に対応付ける。すなわち、スマートフォン1は、複数の他のアイコンにそれぞれ対応付けられているデータを移動させているアイコン50に対応付けられたデータとする。ここで、スマートフォン1は、移動させているアイコン50を選択すると格納したデータに元々対応していた他のアイコン50が表示される設定としてもよい。また、スマートフォン1は、移動させているアイコン50に元々対応付けられていたデータと他のアイコン50に対応付けられていたデータを同様の階層に表示させるようにしてもよい。これにより、スマートフォン1は、1回のスワイプジェスチャで、移動させているアイコン50に複数の他のアイコン50を格納することが可能となり、簡単な操作でアイコンの整理を行うことが可能となる。例えば、スマートフォン1は、ディスプレイ2Aに表示している複数のアイコンを1つのアイコンにまとめたい場合、複数のアイコンのそれぞれを1つのアイコンに個別に移動させなくても、まとめるアイコンで複数のアイコンをスワイプするだけで、ディスプレイ2Aに表示している複数のアイコンを1つのアイコンにまとめることができる。
スマートフォン1は、移動させているアイコン50がフォルダのアイコンである場合、移動させているアイコン50と重なったアイコン50をフォルダに格納すればよい。この場合、スマートフォン1は、移動させているフォルダのアイコン50を開く操作を検出したら、格納したアイコン50を表示させる設定とすればよい。また、スマートフォン1は、移動させているアイコン50がフォルダのアイコンではない場合、移動させているアイコン50と他のアイコン50とが重なったことを検出したら、移動させているアイコン50をフォルダのアイコンに変更し、元の移動させているアイコン50と他のアイコン50との2つをフォルダに格納すればよい。なお、スマートフォン1は、移動させているアイコン50に、重なったアイコン50に対応付けられたデータを格納すればよく、格納方法は、上述した各種方法を含む種々の方法を用いることができる。
また、上記実施形態では、移動させているアイコン50が他のアイコン50に重なったことを検出した場合、他のアイコン50を移動させているアイコン50に格納する処理、例えば、他のアイコン50に対応付けられたデータを移動させているアイコン50に対応付ける処理を実行したが、これに限定されない。スマートフォン1は、移動させているアイコン50の表示位置を他のアイコン50の表示位置に移動させる操作を検出した場合、他のアイコン50を移動させているアイコン50に格納する処理を実行すればよい。
スマートフォン1は、図6に示すように、スワイプジェスチャで接触している位置の近傍、つまり移動させているアイコンから一定距離以内にあるアイコンを小さく表示させることで、移動させているアイコンと他のアイコンとを重なりにくくすることができる。つまり、移動させているアイコンの周囲のアイコンを小さく表示させることで、移動させているアイコンの移動時に移動させているアイコンと他のアイコンとを重なりにくくすることができる。これにより、スマートフォン1は、スワイプジェスチャの入力時に、利用者が意図しないアイコンと移動させているアイコンとを重なりにくくすることができ、スワイプジェスチャでアイコンを移動させやすくすることができる。
スマートフォン1は、移動させているアイコン以外のアイコンを小さく表示させるようにしてもよい。以下、図7を用いてアイコンを整理する制御の他の例を説明する。
図7に示すステップS11では、ディスプレイ2Aにホーム画面40が表示されている。ステップS11で表示されているホーム画面40には、壁紙41の上に12個のアイコン50が配置されている。ステップS11では、利用者の指FがKの画像のアイコン50をロングタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、Kの画像のアイコン50のロングタップを検出する。スマートフォン1はKの画像のアイコン50のロングタップが検出されると、ディスプレイ2Aに表示されているアイコン50の表示位置を移動する移動モードを起動し、移動処理を実行する。
スマートフォン1は、移動モードを起動すると、ステップS12に示すように、ロングタップされているKの画像のアイコン50以外の11個のアイコン50を小さく表示させる。
ステップS13では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、Kの画像のアイコン50が表示されていた位置から画面の右斜め上方向に移動し、Cの画像のアイコン50が表示されている位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS12でKの画像のアイコン50が表示されていた位置を基点とし、接触位置がCの画像のアイコン50が表示されている位置に移動したスワイプを検出する。スマートフォン1は、ステップS12でKの画像のアイコン50が表示されていた位置を基点とするスワイプが検出されると、ステップS13に示すように、移動させているKの画像のアイコン50と重なったCの画像のアイコン50をKの画像のアイコン50に格納する。これにより移動させているアイコン50は、Kの画像のアイコン50に対応付けられたデータとCの画像のアイコン50に対応付けられたデータの両方が対応付けられたアイコンとなる。スマートフォン1は、ステップS13に示すように、移動させているアイコン50を、C、Kの画像を含むアイコン50とする。また、スマートフォン1は、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、Kの画像のアイコン50の表示位置を変化させる。
ステップS14では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS5でC、Kの画像のアイコン50が表示されていた位置から画面の左斜め下方向に移動し、Dの画像のアイコン50が表示されている位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS13で検出したスワイプの接触位置がさらにDの画像のアイコン50が表示されている位置に移動したことを検出する。スマートフォン1は、スワイプの接触位置がDの画像のアイコン50が表示されている位置に移動したことが検出されると、ステップS14に示すように、移動させているC、Kの画像のアイコン50と重なったDの画像のアイコン50をC、Kの画像のアイコン50に格納する。これにより移動させているアイコン50は、Cの画像のアイコン50に対応付けられたデータとKの画像のアイコン50に対応付けられたデータとDの画像のアイコン50に対応付けられたデータの両方が対応付けられたアイコンとなる。スマートフォン1は、ステップS14に示すように、移動させているアイコン50を、C、D、Kの画像を含むアイコン50とする。また、スマートフォン1は、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、D、Kの画像のアイコン50の表示位置を変化させる。
ステップS15は、利用者の指FがDの画像のアイコン50が表示されていた位置でリリースされている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS11からステップS14で検出したスワイプがDの画像のアイコン50が表示されていた位置を終点として、終了したことを検出する。スマートフォン1は、スワイプのリリース位置を検出したら、移動させていたC、D、Kの画像のアイコン50の表示位置をスワイプのリリース位置に基づいて決定する。ステップS15では、リリース位置であるDの画像のアイコン50が表示されていた位置をC、D、Kの画像のアイコン50の表示位置とする。
スマートフォン1は、図7に示すように、移動モードが起動された場合、ディスプレイ2Aに表示しているアイコン50のうち、移動させるアイコン以外の全てのアイコンを小さく表示させるようにしてもよい。このように、移動させているアイコン以外の全てのアイコンを小さく表示させることでも、上述と同様に、移動させているアイコンを移動させやすくすることができる。
スマートフォン1は、移動させているアイコンの一定距離内にあるアイコンの表示位置を移動させているアイコンから離れる方向に移動させるようにしてもよい。以下、図8を用いてアイコンを整理する制御の他の例を説明する。
図8に示すステップS21では、ディスプレイ2Aにホーム画面40が表示されている。ステップS21で表示されているホーム画面40には、壁紙41の上に12個のアイコン50が配置されている。ステップS21では、利用者の指FがKの画像が表示されているアイコン50をロングタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、Kの画像のアイコン50のロングタップを検出する。スマートフォン1はKの画像のアイコン50のロングタップが検出されると、ディスプレイ2Aに表示されているアイコン50の表示を調整する移動モードを起動し、移動処理を実行する。
スマートフォン1は、移動モードを起動すると、ステップS22に示すように、ロングタップされているKの画像のアイコン50と他のアイコン50を同じ大きさで表示させる。
ステップS23では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、Kの画像のアイコン50が表示されていた位置から画面の右斜め上方向に移動し、Cの画像のアイコン50が表示されている位置の左斜め下の近傍をタップしている。つまり、利用者の指Fは、Cの画像のアイコン50の左斜め下でかつ、Bの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50とに隣接した位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS22でKの画像のアイコン50が表示されていた位置を基点とし、接触位置がCの画像のアイコン50が表示されている位置の左斜め下の近傍に移動したスワイプを検出する。スマートフォン1は、ステップS22でKの画像のアイコン50が表示されていた位置を基点とするスワイプが検出されると、ステップS23に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているKの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、Kの画像のアイコン50の近傍にあるBの画像のアイコン50とCの画像のアイコンとEの画像のアイコン50とFの画像のアイコン50との表示位置をKの画像のアイコン50の表示位置から離れた位置に移動させる。
ステップS23では、Kの画像のアイコン50がCの画像のアイコン50の左斜め下に表示されている場合を示したが、ステップS22からステップS23の間に検出するスワイプは、Hの画像のアイコンとIの画像のアイコン50との間を通り、Eの画像のアイコンとFの画像のアイコン50との間を通る。スマートフォン1は、スワイプの接触位置の移動にあわせてKの画像のアイコン50の表示位置を変更し、さらに、Kの画像のアイコン50の近傍にある他のアイコン50の表示位置もKの画像のアイコン50の表示位置から離れる位置に変更する。また、スマートフォン1は、他のアイコン50がKの画像のアイコン50の表示位置から一定距離以上離れた場合、他のアイコン50の表示位置を初期位置に戻す。
ステップS24では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、Kの画像のアイコン50が表示されていた位置から画面の右斜め上方向に移動し、Cの画像のアイコン50が表示されている位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、スワイプの接触位置がCの画像のアイコン50が表示されている位置に移動したことを検出する。スマートフォン1は、ステップS23でKの画像のアイコン50が表示されていた位置から接触位置が移動したことが検出されると、ステップS24に示すように、移動させているKの画像のアイコン50と重なったCの画像のアイコン50をKの画像のアイコン50に格納する。これにより移動させているアイコン50は、Kの画像のアイコン50に対応付けられたデータとCの画像のアイコン50に対応付けられたデータの両方が対応付けられたアイコンとなる。スマートフォン1は、ステップS24に示すように、移動させているアイコン50を、C、Kの画像を含むアイコン50とする。また、スマートフォン1は、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているC、Kの画像のアイコン50の表示位置を変化させる。また、スマートフォン1は、Kの画像のアイコン50の近傍にあるBの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との表示位置をKの画像のアイコン50の表示位置から離れた位置に移動させる。
スマートフォン1は、図8に示すように、移動させているアイコン50から一定距離以内にある他のアイコン50は、移動させているアイコン50から離れる方向に表示位置を移動させることでも、上述のように他のアイコン50を小さくさせる場合と同様に、移動させているアイコン50を移動させやすくすることができる。また、利用者は、移動させているアイコン50に他のアイコン50を格納する場合、移動させているアイコン50から離れていくアイコン50を追いかけて重ねる操作を入力する必要がある。このため、利用者は、移動させているアイコン50に他のアイコン50を格納する場合、移動させているアイコン50を他のアイコン50に積極的に近づけていく操作を入力することになり、移動経路上にあるアイコン50なのか、格納する対象のアイコン50なのかの識別をより明確にすることができる。これにより、移動経路上にあるアイコン50が利用者の意図に反して移動させているアイコン50に格納されることを抑制することができる。
ここで、スマートフォン1は、移動させているアイコン50の近傍にある他のアイコン50は、予め設定した領域内で移動させているアイコン50から離れる方向に移動させることが好ましい。これにより、移動させているアイコン50と他のアイコン50とを重ねやすくすることができる。また、ディスプレイ2Aに表示させているアイコン50のレイアウトが大きく変化したり、他のアイコン50が重なったりすることを抑制することができる。
また、スマートフォン1は、移動させているアイコン50の中心が他のアイコン50の中心と重なった場合、移動させているアイコン50と他のアイコン50とが重なったと判定し、移動させているアイコン50に他のアイコン50を格納するようにしてもよい。以下、図9を用いて説明する。ここで、図9は、アイコン100が指Fのスワイプによって移動されているアイコンとなり、アイコン102が他のアイコンとなる。また、スマートフォン1は、アイコン102を可動範囲104の範囲内で移動させる設定である。また、図9に示す例は、スマートフォン1が、アイコン100が表示されている位置を基点とするスワイプを検出しており、スワイプの接触位置の移動が継続している状態である。
ステップS31では、指Fがアイコン102の可動範囲104の左下にタッチしている。この場合、スマートフォン1は、スワイプの接触位置が、指Fがアイコン102の可動範囲104の左下に移動していることを検出する。
ステップS32では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS31でアイコン100が表示されていた位置から画面の右斜め上方向に移動し、ステップS31でアイコン102が表示されている位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS32で接触位置がステップS31でアイコン102が表示されている位置に移動したことを検出する。スマートフォン1は、ステップS32でスワイプの接触位置が移動したことが検出されると、ステップS32に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているアイコン100の表示位置を変化させる。また、スマートフォン1は、アイコン100の近傍にあるアイコン102の表示位置を可動範囲104の中でアイコン100の表示位置から離れた位置に移動させる。ステップS32では、アイコン102を可動領域104の画面右上隅に表示させる。なお、スマートフォン1は、アイコン100の移動にあわせてアイコン102の表示位置を徐々に移動させる。
ステップS33では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS32でアイコン100が表示されていた位置から画面の右方向に移動した位置をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS33で接触位置が移動したことを検出する。スマートフォン1は、ステップS33でスワイプの接触位置が移動したことが検出されると、ステップS33に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているアイコン100の表示位置を変化させる。ステップS33では、アイコン102を可動領域104の画面右上隅に表示させた状態を維持する。
ステップS34では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS33でアイコン100が表示されていた位置からさらに画面の右方向に移動した位置、具体的には、可動範囲104の内側でかつ右側の端部近傍をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS34で接触位置が移動したことを検出する。スマートフォン1は、ステップS34でスワイプの接触位置が移動したことが検出されると、ステップS34に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているアイコン100の表示位置を変化させる。ステップS34では、アイコン100の一部が可動領域104の外側に表示される。ステップS34では、アイコン102を可動領域104の画面右上隅に表示させた状態を維持する。
ステップS35では、利用者の指Fがタッチスクリーンディスプレイ2に接触した状態を維持して、ステップS34でアイコン100が表示されていた位置からさらに画面の右方向に移動した位置、具体的には、可動範囲104の外側をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、ステップS35で接触位置が移動したことを検出する。スマートフォン1は、ステップS35でスワイプの接触位置が移動したことが検出されると、ステップS34に示すように、指Fの接触位置の移動にあわせてディスプレイ2Aに表示されているアイコン100の表示位置を変化させる。ステップS35では、アイコン100の中心が可動領域104の外側に表示される。スマートフォン1は、ステップS35に示すように、接触位置が可動領域104の外側に移動し、アイコン100の中心が可動領域104の外側に表示されると、ステップS36に示すように、アイコン102を可動領域104内で、アイコン100から離れる方向に移動させる。ステップS36では、アイコン102を可動量領域104内の画面左上端に移動させる。
スマートフォン1は、図9に示すように、可動領域104内をアイコン100が通過する場合も、移動させているアイコン100の中心と他のアイコン102の中心とが重ならないで通過した場合は、他のアイコン102を移動されているアイコン100に格納しない。また、スマートフォン1は、可動領域104内をアイコン100が通過する際に、移動させているアイコン100の中心と他のアイコン102の中心とが重なったと判定したら、他のアイコン102を移動されているアイコン100に格納する。これにより、スマートフォン1は、アイコンの一部が重なってもアイコンが格納されないようにすることができるため、ディスプレイ2にアイコンを大きく表示させることが可能となる。また、利用者は、アイコンを移動させやすくすることができる。また、図9に示す例は、可動領域104内でアイコン102を移動させるため、アイコン100の移動時にアイコン102を重ねやすくすることができる。
また、スマートフォン1は、スワイプでアイコンを移動させている状態で、所定のジェスチャを検出した場合、ホーム画面を移動させることが好ましい。また、スマートフォン1は、ホーム画面を移動させる場合も、移動させているアイコンの近傍にある他のアイコンは、移動させているアイコンから離れる方向に表示位置を移動させることが好ましい。以下、図10を用いて説明する。なお、図10は、スマートフォン1に設定されている4つのホーム画面のうち、左から2番目のホーム画面40aと3番目のホーム画面40bを示している。また、図10に示す2つのホーム画面40a、40bのうち、外周にスマートフォン1として表示されているホーム画面が表示されているホーム画面であり、他方のホーム画面は実際には表示されていないデータ上のホーム画面である。
ステップS41では、スマートフォン1にホーム画面40aが表示されている。ホーム画面40aは、11個のアイコンを含む。ホーム画面40aは、11個のアイコン50のうち、C、Kの画像のアイコン50が移動されているアイコンとなっている。また、スマートフォン1は、C、Kの画像のアイコン50の近傍にあるBの画像のアイコン50とEの画像のアイコン50とFの画像のアイコン50との表示位置をC、Kの画像のアイコン50の表示位置から離れた位置に表示させる。また、スマートフォン1に表示されていないホーム画面40bは、A´からL´の12個のアイコン50を含む。
ステップS41では、指Fがホーム画面40aの右端の上側近傍をロングタップしている。利用者は、指Fを移動させているアイコンが最初に表示されていた位置を基点とし、タッチスクリーン2Bへの接触維持しつつ、タッチスクリーン2Bの接触位置を移動させ、ホーム画面40aの右端の上側近傍をロングタップする。この場合、スマートフォン1は、タッチスクリーン2Bを介して、スワイプが右端の上側近傍のロングタップを含むことを検出する。スマートフォン1は、アイコンを移動させているスワイプが右端の上側近傍のロングタップを含むことが検出されると、ステップS42に示すように、スマートフォン1にホーム画面40bを表示させる。
ステップS42では、スマートフォン1にホーム画面40bが表示されている。ホーム画面40bは、ステップS41で含まれていたA´からL´の12個のアイコン50と、ホーム画面40aに含まれていたC、Kの画像のアイコン50との13個のアイコンを含む。ホーム画面40aは、C、Kの画像のアイコン50を除く10個のアイコン50を含む。ステップS42では、指Fがホーム画面40aの右端の上側近傍をタップしている。この場合、スマートフォン1は、タッチスクリーン2Bを介して、スワイプの接触位置が右端の上側近傍であることを検出する。スマートフォン1は、ホーム画面の切り替え後にアイコンを移動させているスワイプの接触位置が右端の上側近傍であることが検出されると、ステップS42に示すように、指Fの接触位置にC、Kの画像のアイコン50を表示させる。また、スマートフォン1は、C、Kの画像のアイコン50の近傍にあるB´の画像のアイコン50とC´の画像のアイコンとE´の画像のアイコン50とF´の画像のアイコン50との表示位置をC、Kの画像のアイコン50の表示位置から離れた位置に移動させる。
スマートフォン1は、ホーム画面を移動する場合、図10に示すように、移動先のホーム画面40bの表示時に、移動されているアイコン50の近傍にある他のアイコン50の表示位置を移動されているアイコン50から離れる位置に移動させる。これにより、移動先のホーム画面のアイコンが利用者の意図に反して移動させているアイコン50に格納されることを抑制することができる。
また、上記実施形態のスマートフォン1は、スワイプジェスチャでアイコンを移動させたがこれに限定されない。スマートフォン1は、フリック、マルチタップ等の他のジェスチャにアイコン50を移動させる操作を対応させてもよい。
また、スマートフォン1は、タッチスクリーンディスプレイ2に対して行われるジェスチャ以外の操作に応じてアイコン50の移動(移動させているアイコン50の表示位置の移動)を対応付けてもよい。例えば、スマートフォン1は、ボタン3を介して検出される操作に応じてアイコン50を移動させてもよい。また、スマートフォン1は、加速度センサ15等を介して検出されるスマートフォン1を振る操作、傾ける操作に応じてアイコン50を移動させてもよい。また、スマートフォン1は、音声による操作に応じてアイコン50を移動させてもよい。音声による操作は、例えば、マイク8から送信される音声信号に対してコントローラ10が音声認識処理を実行することによって実現されてもよい。また、音声による操作は、マイク8から送信される音声信号を通信ユニット6を介して他の装置へ送信し、他の装置に行わせた音声認識処理の結果に基づいて実現されてもよい。
図11および図12を参照しながら、制御プログラム9Aが提供する機能に基づく制御の処理手順の例について説明する。図11および図12は、利用者の指示に従ってホーム画面上のアイコンを整理する制御、より具体的には移動させているアイコンに他のアイコンを格納する処理の処理手順を示している。図11および図12に示す処理手順は、コントローラ10が、制御プログラム9Aを実行することによって実現される。なお、図11および図12に示す処理手順は、ホーム画面40がディスプレイ2Aに表示されている間、繰り返して実行される。コントローラ10は、図11および図12に示す処理手順と並行して、ホーム画面40に関する制御のための他の処理手順を実行することがある。
コントローラ10は、ステップS102として、タッチスクリーン2Bの検出結果を取得し、取得した検出結果に基づいて、ジェスチャが検出されたかを判定する。コントローラ10は、ステップS102でジェスチャが検出されてない(ステップS102でNo)と判定した場合、ステップS102に進む。つまり、コントローラ10は、タッチスクリーン2Bでジェスチャが検出されるまで、ステップS102の処理を繰り返す。
コントローラ10は、ステップS102でジェスチャが検出された(ステップS102でYes)と判定した場合、ステップS104としてアイコンへのロングタッチであるかを判定する。つまり、コントローラ10は、ステップS102で検出されたジェスチャがアイコンへのロングタッチであるかを判定する。コントローラ10は、ステップS104でアイコンへのロングタッチである(ステップS104でYes)と判定した場合、ステップS106として、移動処理を実行し、本処理を終了する。コントローラ10は、ステップS104でアイコンへのロングタッチではない(ステップS104でNo)と判定した場合、ステップS108として、検出したジェスチャの処理を実行し、本処理を終了する。ここで、検出したジェスチャの処理としては、アイコンに対応するアプリケーションの起動処理や、ホーム画面の移動処理等、コントローラ10がホーム画面を表示している際に実行する種々の処理が含まれる。
次に、図12を用いて、ステップS106で実行する移動処理について説明する。コントローラ10は、ステップS120として、アイコンの表示を変更する。つまり、コントローラ10は、ホーム画面に表示させている各アイコンの表示を移動処理の起動にあわせて変更する。例えば、上述の各実施形態のように、移動させているアイコン(ロングタップされているアイコン)の近傍のアイコンを縮小表示させたり、移動させているアイコンの近傍のアイコンの表示位置を移動させているアイコンから離れた位置に移動させたりする。
コントローラ10は、ステップS120でアイコンの表示態様を変更した場合、ステップS122として、タッチされたアイコンの移動があるかを判定する。つまりコントローラ10は、ステップS104で検出したアイコンへのロングタップの接触位置が移動されて、スワイプとなったかを判定する。コントローラ10は、ステップS122でタッチされたアイコンの移動なし、つまり接触位置の移動なし(ステップS122でNo)と判定した場合、ステップS130に進む。
コントローラ10は、ステップS122でアイコンの移動あり、つまり接触位置が移動した(ステップS122でYes)と判定した場合、ステップS124として、アイコンの移動に対応してホーム画面の各アイコンの表示を変更し、ステップS126として、格納条件を満たすアイコンがあるかを判定する。ここで、格納条件とは、ホーム画面に表示されている他のアイコンを移動させているアイコンに格納する条件である。コントローラ10は、ステップS126で格納条件を満たすアイコンがない(ステップS126でNo)と判定した場合、ステップS130に進む。
コントローラ10は、ステップS126で格納条件を満たすアイコンがある(ステップS126でYes)と判定した場合、ステップS128として対象のアイコンをタッチされたアイコンに格納し、つまり格納条件を満たすアイコンを移動させているアイコンに格納する。コントローラ10は、ステップS130として、画面端部での停止時間>閾値時間であるかを判定する。つまり、コントローラ10は、スワイプしたアイコンが画面端部に閾値時間より長く停止した状態で維持されているかを判定する。コントローラ10は、ステップS130で画面端部での停止時間>閾値時間である(ステップS130でYes)と判定した場合、ステップS132して、ホーム画面を移動させる。つまり、コントローラ10は、アイコンをスワイプした状態を維持し、かつ、表示するホーム画面を画面端部側に隣接するホーム画面に変更する。コントローラ10は、ステップS132の処理を行った後、ステップS134に進む。
コントローラ10は、ステップS130で画面端部での停止時間>閾値時間ではない(ステップS130でNo)と判定した場合またはステップS132の処理を行った後、ステップS134としてリリースがあるかを判定する。つまり、コントローラ10は、ステップS134として、検出しているスワイプの接触が終了したかを判定する。
コントローラ10は、ステップS134でリリースなし(No)、つまりアイコンをタップ継続していると判定した場合、ステップS122に進み、上記処理を繰り返す。コントローラ10は、ステップS134でリリースあり(Yes)、つまりアイコンへのタップが終了した判定した場合、ステップS136としてタッチされたアイコンをリリース位置に表示し、ステップS138としてアイコンの表示地位を変更、つまりアイコンを自動配列し、本処理を終了する。なお、コントローラ10は、ステップS132でホーム画面を移動している場合、アイコンの移動元のホーム画面と、アイコンの移動先のホーム画面の両方に対して、アイコンの自動配列処理を行う。
ここで、図12に示す処理の例では、ステップS130およびステップS132の処理で、スワイプされているアイコンが一定時間の間、画面端部で維持された場合、ホーム画面を移動させる処理を行ったが、本処理は必ずしも行わなくてもよい。
図12に示す処理の例では、ステップS138としてアイコンを自動配列することで、アイコンの移動元のホーム画面と、アイコンの移動先のホーム画面の両方で、アイコンを整列した状態で表示させることができる。なお、アイコンの自動配列は必ずしも行わなくてもよい。
また、スマートフォン1は、アイコンのロングタップを検出した場合、移動処理を実行する移動モードを起動するようにしてもよい。この場合、移動モードを終了するまでは、スワイプ操作を検出する毎に、スワイプ操作の基点のアイコンを移動させているアイコンとして処理を実行する。
ここで、上記実施形態では、いずれも画面に表示させるアイコンを操作対象としたがこれに限定されない。スマートフォンは、ショートカット機能を備えるアイコンに限定されず画面上に表示され、データが対応付けられた種々のオブジェクトを操作対象とすることができる。
また、スマートフォン1は、ホーム画面に表示させる移動させているアイコンを移動方向の先端が開口した画像としてディスプレイに表示させることが好ましい。以下、図13Aおよび図13Bを用いて説明する。図13Aに示す例は、アイコンの画像を、ファイルケースを模した画像とした例である。スマートフォン1は、移動処理が実行されるまでの間、ステップS202に示すようにアイコン100をファイルケースが閉じた画像で表示する。スマートフォン1は、アイコン100を移動させているアイコンとして移動処理が実行されると、ステップS204に示すように、移動させているアイコン102をファイルケースが開いた画像とする。また、スマートフォン1は、アイコン102のファイルケースが開いた画像と移動されているアイコン102の移動方向、ステップS204の矢印104の方向とを同じ方向にする。また、スマートフォン1は、ステップS206の示すように移動させているアイコン102の移動方向が画面右方向、つまり矢印104aとなったら、アイコン102のファイルが開いている方向も画面右側にする。つまり、スマートフォン1は、移動されているアイコンの移動方向に応じて、アイコンの向きを変化させる。
図13Bに示す例は、アイコンの画像を、ひもでとじられた袋を模した画像とした例である。スマートフォン1は、移動処理が実行されるまでの間、ステップS212に示すようにアイコン110を袋がひもで閉じられた画像で表示する。スマートフォン1は、アイコン110を移動させているアイコンとして移動処理が実行されると、ステップS214に示すように、移動させているアイコン112を袋が開いた画像とする。また、スマートフォン1は、アイコン112の袋が開いた画像と移動されているアイコン112の移動方向、ステップS214の矢印114の方向とを同じ方向にする。また、スマートフォン1は、ステップS216の示すように移動させているアイコン102の移動方向が画面下方向、つまり矢印114aとなったら、アイコン102の袋が開いている方向も画面下側にする。つまり、スマートフォン1は、移動されているアイコンの移動方向に応じて、アイコンの向きを変化させる。
このように、スマートフォン1は、ホーム画面に表示させる移動させているアイコンを移動方向の先端が開口した画像としてディスプレイに表示させることで、利用者が移動させているアイコンが他のアイコンを格納する処理を実行していることを直感的に理解することができる。また、アイコンの移動する向きを利用者が把握しやすくすることができる。ここで、スマートフォン1は、移動されているアイコンに指定される前の画像と移動されているアイコンに指定された後の画像を関連する画像としたが、別の画像としてもよい。
また、スマートフォン1は、移動されているアイコンが他のアイコンを格納する処理について説明したが、他のジェスチャでアイコンが移動される場合、移動されているアイコンを他のアイコンに格納する処理を実行してもよい。
本発明を完全かつ明瞭に開示するために特徴的な実施例に関し記載してきた。しかし、添付の請求項は、上記実施例に限定されるべきものでなく、本明細書に示した基礎的事項の範囲内で当該技術分野の当業者が創作しうるすべての変形例及び代替可能な構成を具現化するように構成されるべきである。例えば、スマートフォン1は、移動させているアイコンの近傍をアイコンの表示を小さくし、かつ、表示位置を移動させているアイコンから離れた位置に移動させるようにしてもよい。また、スマートフォン1は、移動させているアイコンの少なくとも一部が他のアイコンと重なったら当該他のアイコンを格納してもよいし、移動させているアイコンの中心が他のアイコンの少なくとも一部と重なったら当該他のアイコンを格納してもよい。また、スマートフォン1は、移動させているアイコンの表示位置の少なくとも一部が、他のアイコンの表示位置に移動したら、当該他のアイコンを格納してもよい。
例えば、図5に示した各プログラムは、複数のモジュールに分割されていてもよいし、他のプログラムと結合されていてもよい。
また、上記の実施形態では、タッチスクリーンディスプレイを備える電子機器の一例として、スマートフォンについて説明したが、添付の請求項に係る電子機器は、スマートフォンに限定されない。例えば、添付の請求項に係る電子機器は、モバイルフォン、携帯型パソコン、デジタルカメラ、メディアプレイヤ、電子書籍リーダ、ナビゲータ、又はゲーム機等の携帯電子機器であってもよい。また、添付の請求項に係る電子機器は、デスクトップパソコン、テレビ受像器等の据え置き型の電子機器であってもよい。
また、電子機器は、本実施形態のようにタッチスクリーンディスプレイを備え、タッチスクリーンを操作部として用いることが好ましい。これにより、アイコン等のオブジェクトを直感的に操作することができる。このように電子機器は、操作部としてタッチスクリーンを用いることが好ましいがこれに限定されない。電子機器は、アイコンを移動させる操作を入力する操作部を備えていればよい。