JP2017091445A - 携帯電子機器、制御方法及び制御プログラム - Google Patents

Abstract

【課題】ミラーリングで外部表示装置に表示された画像の操作性を向上することができる携帯電子機器、制御方法及び制御プログラムを提供する。【解決手段】スマートフォン１は、画像を生成する制御部１０と、制御部１０で生成された画像を表示する表示部２Ａと、制御部１０で生成された画像を大型ディスプレイ１００に転送する転送部３Ｂと、外表面に配置され、画像に対する操作を検出するタッチセンサ６と、移動状態を検出する加速度センサ５と、を有する。制御部１０は、加速度センサ５の検出結果に基づいて、画像上のカーソルを移動させ、タッチセンサ６で検出された操作に基づいて、カーソルに対応する位置の操作を実行する。【選択図】図１

Description

本出願は、携帯電子機器、制御方法及び制御プログラムに関する。

送信側機器としての電子機器（携帯電子機器）で表示される画像を、テレビを含む受信側機器（外部表示装置）に転送して共有するミラーリングに関する技術が知られている（例えば、特許文献１参照）。この技術において、送信側機器は、受信側機器に表示用情報を送信する。これにより、受信側機器は、送信側機器で表示される画像を共有する。この場合、送信側機器において画像を操作すると、操作結果を反映した画像が、受信側機器に表示される。

特開２０１５−１６２０４０号公報

特許文献１に記載の技術は、ミラーリングで外部表示装置に表示された画像を見ながらの操作性の向上に改善の余地がある。

本発明は、上記に鑑みてなされたものであって、ミラーリングで外部表示装置に表示された画像の操作性を向上することができる携帯電子機器、制御方法及び制御プログラムを提供することを目的とする。

１つの態様に係る携帯電子機器は、画像を生成する制御部と、前記制御部で生成された画像を表示する表示部と、前記制御部で生成された画像を外部表示装置に転送する転送部と、外表面に配置され、前記画像に対する操作を検出する入力部と、移動状態を検出する移動検出センサと、を有し、前記制御部は、前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上のカーソルを移動させ、前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行する。

１つの態様に係る制御方法は、画像を生成する制御部と、前記制御部で生成された画像を表示する表示部と、前記制御部で生成された画像を外部表示装置に転送する転送部と、外表面に配置され、前記画像に対する操作を検出する入力部と、移動状態を検出する移動検出センサとを有する携帯電子機器の制御方法であって、カーソルを含む画像を生成し、生成した画像を前記転送部で転送するステップと、前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上の前記カーソルを移動させるステップと、前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行するステップとを含む。

１つの態様に係る制御プログラムは、画像を生成する制御部と、前記制御部で生成された画像を表示する表示部と、前記制御部で生成された画像を外部表示装置に転送する転送部と、外表面に配置され、前記画像に対する操作を検出する入力部と、移動状態を検出する移動検出センサと、を有する携帯電子機器に、カーソルを含む画像を生成し、生成した画像を前記転送部で転送するステップと、前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上の前記カーソルを移動させるステップと、前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行するステップとを実行させる。

図１は、第１実施形態に係るスマートフォンのブロック図である。 図２は、スマートフォンと大型ディスプレイとでミラーリングを実行している一例を示す概略図である。 図３は、スマートフォンの正面図である。 図４は、スマートフォンの背面図である。 図５は、スマートフォンに対する操作の一例を示す概略図である。 図６は、スマートフォンに対する操作の一例を示す概略図である。 図７は、スマートフォンに対する操作の一例を示す概略図である。 図８は、スマートフォンに対する操作の一例を示す概略図である。 図９は、スマートフォンに対する操作の一例を示す概略図である。 図１０は、ミラーリングで大型ディスプレイに表示される画像の一例を示す概略図である。 図１１は、スマートフォンが行う制御の一例を示すフロー図である。 図１２は、第２実施形態に係るスマートフォンが行う制御の一例を示すフロー図である。

本発明を実施するための実施形態を、図面を参照しつつ詳細に説明する。以下では、携帯電子機器の例として、スマートフォンについて説明する。

（第１実施形態）
図１から図４を参照しながら、実施形態に係るスマートフォン１の全体的な構成について説明する。スマートフォン１は、外部表示装置に画像を表示するミラーリング機能を有する。ミラーリング機能は、例えば、Ｍｉｒａｃａｓｔ（登録商標）又はＡｉｒＰｌａｙ（登録商標）と称する技術を使用する。Ｍｉｒａｃａｓｔは、Ｗｉ−Ｆｉ Ａｌｌｉａｎｃｅによって策定された機器間の画像の無線伝送技術である。本実施形態において、スマートフォン１と外部表示装置とは、Ｍｉｒａｃａｓｔを使用してミラーリング機能を実現するものとして説明する。本実施形態のスマートフォン１は、大型ディスプレイ１００をミラーリング機能で画像を表示させる外部表示装置とする。

大型ディスプレイ（外部表示装置）１００は、図１に示すように、表示部１０１と、転送部１０２と、制御部１１０とを備える。大型ディスプレイ１００は、図２に示すように、ミラーリングでスマートフォン１から転送された画像を表示部１０１に表示する。

表示部１０１は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機ＥＬディスプレイ（ＯＥＬＤ：Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）、又は無機ＥＬディスプレイ（ＩＥＬＤ：Ｉｎｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）等の画面を有する表示デバイスを備える。表示部１０１は、スマートフォン１からの画像情報に基づいて文字、画像、記号、及び図形等を画面に表示する。なお、本実施形態の表示部１０１は、画像を表示させる場合で説明するが、プロジェクタ等、画像を投影する装置であってもよい。

転送部１０２は、近距離無線通信の通信規格をサポートしている。転送部１０２は、ＷｉＦｉ（登録商標）により近距離無線通信を行う。近距離無線通信の規格には、ＩＥＥＥ８０２．１１（ＩＥＥＥは、Ｔｈｅ Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃｓ Ｅｎｇｉｎｅｅｒｓ， Ｉｎｃ．の略称である）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＺｉｇＢｅｅ（登録商標）、ＤＥＣＴ（Ｄｉｇｉｔａｌ Ｅｎｈａｎｃｅｄ Ｃｏｒｄｌｅｓｓ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、Ｚ−Ｗａｖｅ、Ｗｉ−Ｓｕｎ（Ｗｉｒｅｌｅｓｓ Ｓｍａｒｔ Ｕｔｉｌｉｔｙ Ｎｅｔｗｏｒｋ）等が含まれる。本実施形態において、転送部１０２は、近距離無線通信の一つであるＷｉ−ＦｉのＷｉＦｉ Ｄｉｒｅｃｔ（登録商標）をサポートし、ミラーリングを実現するものとするが、これに限定されるものではない。

制御部１１０は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ）、ＭＣＵ（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）、及びＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）を含むが、これらに限定されない。制御部１１０は、大型ディスプレイ１００の動作を統括的に制御して各種の機能を実現する。

具体的に、制御部１１０は、図示しない記憶部に記憶されているデータを必要に応じて参照しつつ、記憶部に記憶されているプログラムに含まれる命令を実行する。そして、制御部１１０は、データ及び命令に応じて表示部１０１と転送部１０２とを制御し、それによって各種機能を実現する。

スマートフォン１は、タッチパネル２と、通信ユニット３と、記憶部４と、加速度センサ（移動検出センサ）５と、タッチセンサ（外表面の入力部）６と、制御部１０とを有する。

スマートフォン１は、図３、図４に示すように、ハウジング２０を有する。ハウジング２０は、フロントフェイス（第一面）１Ａと、バックフェイス（第二面）１Ｂと、サイドフェイス１Ｃ１〜１Ｃ４とを有する。フロントフェイス１Ａは、ハウジング２０の正面である。バックフェイス１Ｂは、ハウジング２０の背面である。サイドフェイス１Ｃ１〜１Ｃ４は、フロントフェイス１Ａとバックフェイス１Ｂとを接続する側面である。図３、図４に示したスマートフォン１の構成は例であり、本発明の要旨を損なわない範囲において適宜変更してよい。

スマートフォン１は、タッチパネル２がフロントフェイス１Ａに配置されている。

タッチパネル２は、表示部２Ａと、タッチセンサ２Ｂとを有する。図３の例では、表示部２Ａ及びタッチセンサ２Ｂはそれぞれ略長方形状であるが、表示部２Ａ及びタッチセンサ２Ｂの形状はこれに限定されない。表示部２Ａ及びタッチセンサ２Ｂは、それぞれが多角形又は円形等のどのような形状もとりうる。図３の例では、表示部２Ａ及びタッチセンサ２Ｂは重ねて配置されているが、表示部２Ａ及びタッチセンサ２Ｂの配置はこれに限定されない。表示部２Ａ及びタッチセンサ２Ｂは、例えば、並べて配置されてもよいし、離して配置されてもよい。図３の例では、表示部２Ａの長辺はタッチセンサ２Ｂの長辺に沿っており、表示部２Ａの短辺はタッチセンサ２Ｂの短辺に沿っているが、表示部２Ａ及びタッチセンサ２Ｂの重ね方はこれに限定されない。表示部２Ａとタッチセンサ２Ｂとが重ねて配置される場合、例えば、表示部２Ａの１ないし複数の辺がタッチセンサ２Ｂのいずれの辺とも沿っていなくてもよい。

表示部２Ａは、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機ＥＬディスプレイ（ＯＥＬＤ：Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）、又は無機ＥＬディスプレイ（ＩＥＬＤ：Ｉｎｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）等の画面を有する表示デバイスを備える。表示部２Ａは、制御部１０からの画像情報に基づいて、文字、画像、記号、及び図形等を表示する。

タッチセンサ２Ｂは、表示部２Ａに表示された画像に対する操作を検出する。タッチセンサ２Ｂは、タッチセンサ２Ｂに対する、例えば、指Ｆ、ペン、又はスタイラスペン等の接触を検出する。タッチセンサ２Ｂは、複数の指Ｆ、ペン、又はスタイラスペン等がタッチセンサ２Ｂに接触した位置を検出することができる。タッチセンサ２Ｂの検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式（又は超音波方式）、赤外線方式、電磁誘導方式、及び荷重検出方式等の任意の方式でよい。

タッチセンサ２Ｂは、表示部２Ａに対する接触、接触が検出された位置、接触が検出された位置の変化、接触が検出された間隔、及び接触が検出された回数の少なくとも一つを検出してタッチセンサ接触情報（以下、「第一接触情報」という）を制御部１０に出力する。

本実施形態において、タッチセンサ２Ｂには、操作者によって、例えば、「タッチ」、「ロングタッチ」、「リリース」、「スワイプ」、「タップ」、「ダブルタップ」、「ロングタップ」、「ドラッグ」、「フリック」、「ピンチイン」、及び「ピンチアウト」の少なくとも一つが操作として入力され得る。

タッチセンサ２Ｂは、接触の検出開始、検出停止が、制御部１０で制御される。より詳しくは、タッチセンサ２Ｂは、スマートフォン１の通常の使用時は、制御部１０で、タッチセンサ２Ｂでの接触の検出が有効とされる。具体的には、タッチセンサ２Ｂは、スマートフォン１の通常の使用時は、制御部１０で、タッチセンサ２Ｂに対する接触が検出開始されている。このとき、タッチセンサ２Ｂは、タッチセンサ２Ｂに対する接触を検出して第一接触情報を制御部１０に出力する。タッチセンサ２Ｂは、スマートフォン１のミラーリング時は、制御部１０で、タッチセンサ２Ｂでの接触の検出が無効とされる。具体的には、タッチセンサ２Ｂは、スマートフォン１のミラーリング時は、制御部１０で、タッチセンサ２Ｂに対する接触が検出停止されている。

通信ユニット３は、外部表示装置と無線により通信する。通信ユニット３は、通信部３Ａと、転送部３Ｂとを有する。

通信部３Ａは、例えば、２Ｇ、３Ｇ、４Ｇ等のセルラーフォンの通信規格をサポートしている。セルラーフォンの通信規格は、例えば、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅ Ａｃｃｅｓｓ）、ＣＤＭＡ２０００（Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅ Ａｃｃｅｓｓ ２０００）、ＰＤＣ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ｃｅｌｌｕｌａｒ）、ＧＳＭ（登録商標）（Ｇｌｏｂａｌ Ｓｙｓｔｅｍ ｆｏｒ Ｍｏｂｉｌｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙ−ｐｈｏｎｅ Ｓｙｓｔｅｍ）等を含む。通信部３Ａは、例えば、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ ｆｏｒ Ｍｉｃｒｏｗａｖｅ Ａｃｃｅｓｓ）、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ、ＺｉｇＢｅｅ、ＤＥＣＴ、Ｚ−Ｗａｖｅ、ＷｉＳｕｎ、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）等を含む無線通信規格をサポートしていてもよい。

転送部３Ｂは、制御部１０で生成された画像を大型ディスプレイ１００に転送する。転送部３Ｂは、ミラーリングを実現するための、例えば近距離無線通信の通信規格をサポートしている。本実施形態において、転送部３Ｂは、ＷｉＦｉのＷｉＦｉ Ｄｉｒｅｃｔをサポートし、ミラーリングを実現するものとするが、これに限定されるものではない。

記憶部４は、プログラム及びデータを記憶する。記憶部４は、制御部１０の処理結果を一時的に記憶する作業領域としても使用される。記憶部４は、半導体記憶媒体、及び磁気記憶媒体等の任意の非一過的（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）な記憶媒体を含んでよい。記憶部４は、複数の種類の記憶媒体を含んでよい。記憶部４は、メモリカード、光ディスク、又は光磁気ディスク等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。記憶部４は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の一時的な記憶領域として使用される記憶デバイスを含んでよい。

記憶部４が記憶するプログラム及びデータの一部又は全部は、通信ユニット３による通信で他の装置からダウンロードされてもよい。記憶部４が記憶するプログラム及びデータの一部又は全部は、記憶部４に含まれる読み取り装置が読み取り可能な非一過的な記憶媒体に記憶されていてもよい。記憶部４が記憶するプログラム及びデータの一部又は全部は、図示しないコネクタに接続される読み取り装置が読み取り可能な非一過的な記憶媒体に記憶されていてもよい。非一過的な記憶媒体は、例えば、ＣＤ（登録商標）、ＤＶＤ（登録商標）、Ｂｌｕ−ｒａｙ（登録商標）等の光ディスク、光磁気ディスク、磁気記憶媒体、メモリカード、及びソリッドステート記憶媒体を含むが、これらに限定されない。

記憶部４は、例えば、制御プログラム４Ａ、その他のスマートフォン１としての機能を実現するメールアプリケーション、ブラウザアプリケーションを含むアプリケーション、及び、プログラム又はアプリケーションの実行に必要なデータを記憶する。制御プログラム４Ａは、スマートフォン１を稼働させるための各種制御に関する機能を提供する。制御プログラム４Ａは、ミラーリング機能及びミラーリング機能の実行中の画面の画像の操作機能を提供する。メールアプリケーションは、電子メールの作成、送信、受信、及び表示等のための電子メール機能を提供する。ブラウザアプリケーションは、ＷＥＢページを表示するためのＷＥＢブラウジング機能を提供する。

加速度センサ５は、スマートフォン１に作用する加速度の方向及び大きさを検出する。加速度センサ５は、例えば、図５に示すように、スマートフォン１を移動させた際にスマートフォン１に作用する加速度を検出する。これにより、加速度センサ５は、スマートフォン１の移動状態を検出する。加速度センサ５は、例えば、静電容量の変化、ピエゾ抵抗の変化又は相対位置の変化等で加速度を検出するセンサなど、種々の方法で加速度を検出するセンサを用いてもよい。加速度センサ５は、検出結果として検出した加速度の方向及び大きさを含む加速度情報を制御部１０に出力する。

タッチセンサ６は、バックフェイス１Ｂに配置されている。図４の例では、タッチセンサ６は略矩形状であるが、タッチセンサ６の形状はこれに限定されない。タッチセンサ６は、多角形又は円形等のどのような形状もとりうる。図４の例では、タッチセンサ６の長辺はハウジング２０の長辺に沿っており、タッチセンサ６の短辺はハウジング２０の短辺に沿っているが、タッチセンサ６の配置はこれに限定されない。

タッチセンサ６は、タッチセンサ６に対する、例えば、指Ｆ、ペン、又はスタイラスペン等の接触を検出する。タッチセンサ６は、複数の指Ｆ、ペン、又はスタイラスペン等がタッチセンサ６に接触した位置を検出することができる。以下の説明において、操作者は、指Ｆを用いてタッチセンサ６に接触するものとする。タッチセンサ６の検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式（又は超音波方式）、赤外線方式、電磁誘導方式、及び荷重検出方式等の任意の方式でよい。タッチセンサ６は、操作者から見て左側の領域６１と右側の領域６２における接触をそれぞれ検出する。本実施形態のスマートフォン１は、ミラーリングで大型ディスプレイ１００に画像を表示している場合、当タッチセンサ６に対する操作を大型ディスプレイ１００に表示している画像に対する操作として検出する。この場合、タッチセンサ６は、入力された操作を、ポインティングデバイス、いわゆるマウスのボタンが検出する操作として検出する。

タッチセンサ６は、タッチセンサ６に対する接触、接触が検出された位置、接触が検出された位置の変化、接触が検出された間隔、及び接触が検出された回数の少なくとも一つを検出してタッチセンサ接触情報（以下、「第二接触情報」という）を制御部１０に出力する。

タッチセンサ６は、「クリック」、「ダブルクリック」、「スクロール」及び「ドラッグ」の少なくとも一つを検出可能とする。本実施形態において、タッチセンサ６には、操作者によって、例えば、「クリック」、「ダブルクリック」、「スクロール」及び「ドラッグ」の少なくともいずれか一つが操作として入力され得る。「クリック」には、「左クリック」と「右クリック」とを含む。

タッチセンサ６は、接触の検出開始、検出停止が、制御部１０で制御される。より詳しくは、タッチセンサ６は、スマートフォン１の通常の使用時は、制御部１０で、タッチセンサ６での接触の検出が無効とされる。具体的には、タッチセンサ６は、スマートフォン１の通常の使用時は、制御部１０で、タッチセンサ６に対する接触が検出停止されている。タッチセンサ６は、スマートフォン１のミラーリング時は、制御部１０で、タッチセンサ６での接触の検出が有効とされる。具体的には、タッチセンサ６は、スマートフォン１のミラーリング時は、制御部１０で、タッチセンサ６に対する接触が検出開始されている。このとき、タッチセンサ６は、タッチセンサ６に対する接触を検出して第二接触情報を制御部１０に出力する。

制御部１０は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ）、ＭＣＵ（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）、及びＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）を含むが、これらに限定されない。制御部１０は、スマートフォン１の動作を統括的に制御して各種の機能を実現する。

具体的に、制御部１０は、記憶部４に記憶されているデータを必要に応じて参照しつつ、記憶部４に記憶されている制御プログラム４Ａを含むプログラムに含まれる命令を実行する。そして、制御部１０は、データ及び命令に応じて表示部２Ａとタッチセンサ２Ｂと転送部３Ｂとタッチセンサ６とを制御し、それによって各種機能を実現する。

まず、スマートフォン１の通常の使用時において、制御部１０が行う処理について説明する。

制御部１０は、表示部２Ａに表示する画像を生成する。制御部１０は、生成した画像の画像情報を表示部２Ａに出力する。制御部１０は、例えばメールの作成画面のように文字又は図形を入力する画面を生成する場合、キーボードカーソルＣｋに対応する位置にカーソル画像を重ねて図示した画像を生成する。なお、制御部１０は、表示部２Ａに画像を表示させる場合、キーボードカーソルＣｋを表示させなくてもよいし、タッチセンサ２Ｂで操作を検出している間のみ表示させるようにしてもよい。

制御部１０は、タッチセンサ２Ｂに入力された操作を有効とし、タッチセンサ６に入力された操作を無効とする。制御部１０は、タッチセンサ２Ｂに対する接触を検出開始し、タッチセンサ６に対する接触を検出停止する。

制御部１０は、タッチセンサ２Ｂに入力された操作に基づいて、スマートフォン１の動作を制御する。より詳しくは、制御部１０は、タッチパネル２のタッチセンサ２Ｂに入力された操作に基づいて、タッチセンサ２Ｂで接触を検出した位置の操作を実行する。そして、制御部１０は、タッチセンサ２Ｂで接触を検出した位置の操作を実行した画像を生成して画像情報を表示部２Ａに出力する。タッチセンサ２Ｂで接触を検出した位置の操作とは、タッチセンサ２Ｂで接触を検出した位置における、例えば、「タッチ」、「ロングタッチ」、「リリース」、「スワイプ」、「タップ」、「ダブルタップ」、「ロングタップ」、「ドラッグ」、「フリック」、「ピンチイン」、及び「ピンチアウト」などの操作をいう。

この他、制御部１０は、スマートフォン１として有する、メールアプリケーション、ブラウザアプリケーションを含む各種アプリケーションの機能を実行する。

次に、転送部３Ｂを介して大型ディスプレイ１００に画像が転送された、スマートフォン１のミラーリング時において、制御部１０が行う処理について説明する。

制御部１０は、転送部３Ｂを介して大型ディスプレイ１００に転送する画像を生成する。制御部１０は、生成した画像の画像情報を転送部３Ｂに出力する。制御部１０は、図１０に示すように、カーソルＣに対応する位置にカーソル画像を重ねて図示した画像を生成する。カーソルＣは、画面上において文字又は図形を入力又は表示する位置を指し示す。カーソルＣは、図１０に示す例では、縦棒のカーソル画像で表示されるキーボードカーソルＣｋと、十字型のカーソル画像で表示されるマウスカーソル（ポインタ）Ｃｍとを含む。キーボードカーソルＣｋは、文字の次の入力位置を示す。マウスカーソルＣｍは、操作対象を指し示す。

制御部１０は、加速度センサ５の検出結果の加速度情報に基づいて、カーソルＣｍを移動させた画像を生成する。制御部１０は、加速度の方向に、加速度の大きさに応じて、カーソルＣｍを移動させた画像を生成する。制御部１０は、カーソルＣｍをスマートフォン１の移動に連動して移動させた画像を生成する。制御部１０は、生成した画像の画像情報を転送部３Ｂに出力する。制御部１０は、加速度情報に含まれるスマートフォン１の移動距離に対するカーソルＣｍの移動距離を変更可能である。例えば、制御部１０は、予め記憶部４に記憶された設定情報に基づいて、スマートフォン１の移動距離に対するカーソルＣｍの移動距離を変更してもよい。例えば、制御部１０は、カーソルＣｍに対応する位置に応じて、スマートフォン１の移動距離に対するカーソルＣｍの移動距離を変更してもよい。例えば、制御部１０は、加速度情報に含まれる加速度の方向又は加速度の大きさに応じて、スマートフォン１の移動距離に対するカーソルＣｍの移動距離を変更してもよい。

制御部１０は、スマートフォン１をマウスとしての使用状態に切り替える。制御部１０は、タッチセンサ６に入力された操作を有効とし、タッチセンサ２Ｂに入力された操作を無効とする。制御部１０は、タッチセンサ６に対する接触を検出開始し、タッチセンサ２Ｂに対する接触を検出停止する。

制御部１０は、タッチセンサ６に入力された操作に基づいて、カーソルＣｍに対応する位置の操作を実行する。そして、制御部１０は、カーソルＣｍに対応する位置の操作を実行した画像を生成して画像情報を転送部３Ｂに出力する。カーソルＣｍに対応する位置の操作とは、カーソルＣｍに対応する位置における、例えば、「クリック」、「ダブルクリック」、「スクロール」及び「ドラッグ」の少なくともいずれかの一つの操作をいう。具体的に、制御部１０は、タッチセンサ６に入力された操作に基づいて、以下のような操作を行う。

例えば、制御部１０は、タッチセンサ６から、図６に示すタッチセンサ６の左側の領域６１に第二指Ｆ２が触れて離れる操作を検出した旨の第二接触情報が入力されると、「左クリック」がされたと判別する。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタン又はメニューを選択又は実行する。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタン又はメニューを選択又は実行した画像を生成して画像情報を転送部３Ｂに出力する。

例えば、制御部１０は、タッチセンサ６から、図７に示すタッチセンサ６の右側の領域６２に第三指Ｆ３が触れて離れる操作を検出した旨の第二接触情報が入力されると、「右クリック」がされたと判別する。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタン又はメニューに関連するメニューを表示する。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタン又はメニューに関連するメニューを表示した画像を生成して画像情報を転送部３Ｂに出力する。

例えば、制御部１０は、タッチセンサ６から、タッチセンサ６に所定時間内に「左クリック」を２回繰り返す操作がされた旨の第二接触情報が入力されると、「ダブルクリック」がされたと判別する。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタンを実行したり、ファイルを開いたりする。そして、制御部１０は、画像中のカーソルＣｍに対応する位置にあるボタンを実行したり、ファイルを開いたりした画像を生成して画像情報を転送部３Ｂに出力する。

例えば、制御部１０は、図８に示すタッチセンサ６の左側の領域６１と右側の領域６２とにそれぞれ第二指Ｆ２、第三指Ｆ３が接触した状態でスライドする操作がされた旨の第二接触情報が入力されると、「スクロール」がされたと判別する。そして、制御部１０は、加速度の方向に、加速度の大きさに応じて、画像をスクロールする。そして、制御部１０は、加速度の方向に、加速度の大きさに応じて、画像をスクロールした画像を生成して画像情報を転送部３Ｂに出力する。

例えば、制御部１０は、加速度センサ５とタッチセンサ６から、図９に示すように、タッチセンサ６に第二指Ｆ２が接触した状態で、スマートフォン１を移動する操作がされた旨の加速度情報と第二接触情報とを検出すると、「ドラッグ」がされたと判別する。そして、制御部１０は、スライドの方向に、スライドの加速度の大きさに応じて、画像中のカーソルＣｍに対応する位置にあるファイル、フォルダ又はスクロールバーを移動する。そして、制御部１０は、スライドの方向に、スライドの加速度の大きさに応じて、画像中のカーソルＣｍに対応する位置にあるファイル、フォルダ又はスクロールバーを移動した画像を生成して画像情報を転送部３Ｂに出力する。あるいは、制御部１０は、加速度の方向に応じて、画像中のカーソルＣｍに対応する範囲を選択する。そして、制御部１０は、加速度の方向に応じて、画像中のカーソルＣｍに対応する範囲を選択した画像を生成して画像情報を転送部３Ｂに出力する。

次に、このように構成されるスマートフォン１を使用した制御方法及び制御プログラム４Ａとその作用について説明する。図１１は、スマートフォン１が行う制御の一例を示すフロー図である。

制御部１０は、ミラーリングが開始されたか否かを常時監視する（ステップＳ１１）。具体的に、制御部１０は、転送部３Ｂを介してＷｉＦｉ Ｄｉｒｅｃｔによる画像の転送が開始されたか否かを監視する。

制御部１０は、ミラーリングが開始されていない（ステップＳ１１でＮｏ）と判定した場合、処理を終了する。この場合、制御部１０は、上記のような、スマートフォン１の通常の使用時における処理を実行する。

制御部１０は、ミラーリングが開始された（ステップＳ１１でＹｅｓ）と判定した場合、画像を生成する（ステップＳ１２）。そして、制御部１０は、ステップＳ１２で生成した画像を大型ディスプレイ１００に転送する（ステップＳ１３）。制御部１０は、生成した画像の画像情報を、転送部３Ｂを介してＷｉＦｉ Ｄｉｒｅｃｔを使用して大型ディスプレイ１００に転送する。大型ディスプレイ１００は、制御部１１０で、スマートフォン１からの画像情報を表示部１０１に出力する。大型ディスプレイ１００は、画像情報に基づいて表示部１０１に画像を表示する。

制御部１０は、スマートフォン１をマウスとしての使用状態に切り替える（ステップＳ１４）。制御部１０は、タッチセンサ６に対する接触を検出開始し、タッチパネル２のタッチセンサ２Ｂに対する接触を検出停止する。このようにして、スマートフォン１は、マウスとしての使用状態となる。

制御部１０は、スマートフォン１への入力の有無を監視する（ステップＳ１５）。制御部１０は、スマートフォン１の移動、又は、タッチセンサ６への入力があった場合、入力有り、と判定する。制御部１０は、加速度センサ５から加速度情報が入力された場合、又は、タッチセンサ６から第二接触情報が入力された場合、入力有り、と判定する。制御部１０は、スマートフォン１の移動、又は、タッチセンサ６への入力、のいずれもない場合、入力無し、と判定する。制御部１０は、加速度センサ５の加速度情報及びタッチセンサ６の第二接触情報のいずれもが入力されない場合、入力無し、と判定する。

制御部１０は、入力無し（ステップＳ１５でＮｏ）と判定した場合、ステップＳ１５に戻ってスマートフォン１への入力の有無の監視を継続する。

制御部１０は、入力有り（ステップＳ１５でＹｅｓ）と判定した場合、入力された操作を判別する（ステップＳ１６）。制御部１０は、加速度センサ５からの加速度情報とタッチセンサ６からの第二接触情報とに基づいて、タッチセンサ６に対する操作を判別する。より詳しくは、制御部１０は、加速度センサ５からの加速度情報と、タッチセンサ６からの第二接触情報との組み合わせに基づいて入力された操作を判別する。制御部１０によって判別される操作は、タッチセンサ６への操作を伴わずスマートフォン１を移動する操作とタッチセンサ６への操作とがある。

制御部１０は、加速度センサ５からの加速度情報が入力され、かつ、タッチセンサ６から第二接触情報の入力がない場合、タッチセンサ６への操作を伴わずスマートフォン１を移動する操作がされたと判別する。より詳しくは、制御部１０は、タッチセンサ６から第二接触情報の入力がなく、かつ、加速度センサ５からの加速度情報に基づいて算出したスマートフォン１に作用する加速度の大きさがゼロより大きい場合、タッチセンサ６への操作を伴わずスマートフォン１が移動したと判別する。

制御部１０は、タッチセンサ６から第二接触情報が入力された場合、タッチセンサ６への操作がされたと判別する。制御部１０は、タッチセンサ６への操作が、どのような操作であるか、例えば「クリック」、「ダブルクリック」、「スクロール」及び「ドラッグ」のいずれの操作であるかを判別する。

制御部１０は、ステップＳ１６で判別した操作に基づいて、画像を生成する（ステップＳ１７）。制御部１０は、ステップＳ１６で、タッチセンサ６への操作を伴わずスマートフォン１が移動したと判別した場合、又は、「ドラッグ」がされたと判別した場合、加速度センサ５の検出結果の加速度情報に基づいて、カーソルＣｍが移動した画像を生成する。

制御部１０は、ステップＳ１７で生成した画像を大型ディスプレイ１００に転送する（ステップＳ１８）。制御部１０は、生成した画像の画像情報を、転送部３Ｂを介してＷｉＦｉ Ｄｉｒｅｃｔを使用して大型ディスプレイ１００に転送する。大型ディスプレイ１００は、制御部１１０で画像情報を表示部１０１に出力する。大型ディスプレイ１００は、画像情報に基づいて表示部１０１に画像を表示する。

制御部１０は、ミラーリングが終了されたか否かを判定する（ステップＳ１９）。具体的に、制御部１０は、転送部３Ｂを介してＷｉＦｉ Ｄｉｒｅｃｔによる画像の転送が終了したか否かを判別する。

制御部１０は、ミラーリングが終了されていない（ステップＳ１９でＮｏ）と判定した場合、ステップＳ１５に戻ってスマートフォン１への入力の有無の監視を継続する。

制御部１０は、ミラーリングが終了された（ステップＳ１９でＹｅｓ）と判定した場合、スマートフォン１のマウスとしての使用状態を終了して（ステップＳ２０）、処理を終了する。制御部１０は、タッチセンサ６に対する接触を検出停止する。制御部１０は、タッチセンサ２Ｂに対する接触を検出開始する。このようにして、スマートフォン１は、マウスとしての使用状態が終了する。そして、制御部１０は、スマートフォン１の通常の使用時における処理に復帰する。

このように、スマートフォン１は、ミラーリングを開始すると、マウスとしての使用状態に切り替えられる。これにより、操作者は、大型ディスプレイ１００に表示された画像に対して、スマートフォン１でマウスのような、カーソルの移動、カーソルで指定した位置に対するクリック、ダブルクリック、スクロール及びドラッグアンドドロップ操作をする。

上記実施形態によれば、スマートフォン１は、スマートフォン１を使用したミラーリングを開始すると、スマートフォン１をマウスとしての使用状態に切り替える。これにより、スマートフォン１は、加速度センサ５を用いて、カーソルの移動操作を検出する。スマートフォン１は、タッチセンサ６で、例えば、クリック、ダブルクリック、スクロール及びドラッグの少なくともいずれか一つの操作を検出する。ミラーリングで大型ディスプレイ１００に表示された画像は、スマートフォン１を使用して、例えば、クリック、ダブルクリック、スクロール及びドラッグの少なくともいずれか一つの操作をすることができる。

スマートフォン１は、大型ディスプレイ１００に表示された画像にスマートフォン１の移動に連動して移動するカーソルＣｍを表示することができる。このため、操作者は、ミラーリングで大型ディスプレイ１００に表示された画像を見ながら、あたかもマウスを使用しているのと同様に、操作することができる。操作者は、従来のように、スマートフォン１の表示部２Ａに表示された画像を見ながら、タッチセンサ２Ｂで、例えば、タップ又はフリックなどの操作をしなくてもよい。このように、スマートフォン１は、ミラーリングで大型ディスプレイ１００に表示された画像の操作性を向上することができる。

スマートフォン１によれば、ミラーリングで大型ディスプレイ１００に表示された画像の転送元であるスマートフォン１を、スマートフォン１のミラーリング時に、マウスとしての使用状態に切り替えて画像の操作に使用することができる。操作者は、ミラーリングで大型ディスプレイ１００に表示された画像を操作するために、他の操作装置を用意しなくてよい。このため、スマートフォン１は、ミラーリングで大型ディスプレイ１００に表示された画像の操作性を向上することができる。

（第２実施形態）
図１２を参照しながら、スマートフォン１を使用した制御方法及び制御プログラム４Ａとその作用について説明する。図１２は、第２実施形態に係るスマートフォンが行う制御の一例を示すフロー図である。スマートフォン１の構成は、制御部１０における一部の処理を除いて、第１実施形態のスマートフォン１の構成と同様である。以下の説明においては、スマートフォン１と同様の構成要素には、同一の符号又は対応する符号を付し、その詳細な説明は省略する。

制御部１０は、ステップＳ３１において、表示部２Ａが操作台である平坦部２００（図２参照）と向かい合って、平坦部２００に載置されたか否かを判定し、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されていると判定した場合、スマートフォン１をマウスとしての使用状態に切り替える点が第１実施形態と異なる。本実施形態で、操作台が平坦部２００であるものとして説明するが、平坦面を有する形状に限定されるものではない。制御部１０は、ステップＳ３１〜ステップＳ４０の処理を実行する。ステップＳ３２〜ステップＳ３８、ステップＳ４０の各ステップの処理は、第１実施形態のステップＳ１２〜ステップＳ１８、ステップＳ２０の各ステップの処理と同様であるので、説明を省略する。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されたか否かを常時監視する（ステップＳ３１）。具体的に、制御部１０は、加速度センサ５の加速度情報や図示しない近接センサからの近接情報などに基づいて、表示部２Ａの姿勢を判定し、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されたか否かを監視する。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されていない（ステップＳ３１でＮｏ）と判定した場合、処理を終了する。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されている（ステップＳ３１でＹｅｓ）と判定した場合、ステップＳ３２に進む。

制御部１０は、ステップＳ３２〜ステップＳ３８の後、再び、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されたか否かを判定する（ステップＳ３９）。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されている（ステップＳ３９でＹｅｓ）と判定した場合、ステップＳ３５に戻ってスマートフォン１への入力の有無の監視を継続する。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されていない（ステップＳ３９でＮｏ）と判定した場合、ステップＳ４０に進み、処理を終了する。

このように、スマートフォン１は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されると、マウスとしての使用状態に切り替えられる。これにより、操作者は、大型ディスプレイ１００に表示された画像に対して、スマートフォン１でマウスのような、クリック、ダブルクリック、スクロール及びドラッグ操作をする。

上記実施形態によれば、スマートフォン１は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されると、スマートフォン１を、マウスとしての使用状態に切り替える。このため、第１実施形態と同様に、スマートフォン１は、ミラーリングで大型ディスプレイ１００に表示された画像の操作性を向上することができる。

制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されたか否かに基づいて、スマートフォン１をマウスとしての使用状態に切り替える。このため、操作者は、スマートフォン１をマウスとしての使用状態に切り替えるために、ボタンを押下するなどの操作を行わなくてもよい。このように、スマートフォン１をマウスとして使用するために、スマートフォン１を平坦部２００に載置するという自然な動作の中で、制御部１０は、スマートフォン１をマウスとしての使用状態に切り替えることができる。スマートフォン１は、ミラーリングで大型ディスプレイ１００に表示された画像の操作性を向上することができる。

本出願の開示する実施形態は、発明の要旨及び範囲を逸脱しない範囲で変更することができる。さらに、本出願の開示する実施形態及びその変形例は、適宜組み合わせることができる。例えば、上記の実施形態は、以下のように変形してもよい。

例えば、図１に示した通信ユニット３は、通信部３Ａと転送部３Ｂとを有するものとして説明したが、通信部３Ａと転送部３Ｂとは結合されていてもよい。

携帯電子機器の例として、スマートフォンについて説明したが、添付の請求項に係る装置は、スマートフォンに限定されない。添付の請求項に係る装置は、スマートフォン以外の携帯電子機器であってもよい。携帯電子機器は、例えば、モバイルフォン、タブレット、携帯型パソコン、デジタルカメラ、メディアプレイヤ、電子書籍リーダ、ナビゲータ、及びゲーム機を含むが、これらに限定されない。

移動検出センサとして、加速度センサ５を使用するものとして説明したが、スマートフォン１の移動状態を検出可能であれば、これに限定されるものではない。スマートフォン１は、例えば、赤外線センサやカメラを用いて、スマートフォン１と対面している面に対する移動を検出し、検出した移動に基づいてカーソルを移動させてもよい。

制御部１０は、スマートフォン１のミラーリング時において、転送部３Ｂを介して大型ディスプレイ１００に転送されている画像を、表示部２Ａに表示してもよい。

上記実施形態において、スマートフォン１をマウスとしての使用状態に切り替えた際に、スマートフォン１は、タッチセンサ６においてミラーリングで大型ディスプレイ１００に表示された画像に対する操作を検出することができるものとして説明したが、タッチセンサ２Ｂにおいても操作を検出することができるものとしてもよい。この場合、タッチセンサ２Ｂは、スマートフォン１をマウスとしての使用状態に切り替えた際に、タップ、スワイプ、フリック、ピンチイン、及びピンチアウト等を含む通常の操作に替えて、タッチセンサ６と同様にクリック、ダブルクリック、スクロール及びドラッグの少なくともいずれか一つを含むマウスとしての操作を検出する。

具体的に、例えば、制御部１０は、バックフェイス１Ｂが平坦部２００と向かい合って、平坦部２００に載置されていると判定した場合、制御部１０で、タッチセンサ２Ｂをマウスとしての使用状態に切り替える。そして、制御部１０は、加速度センサ５からの加速度情報とタッチセンサ２Ｂからの第一接触情報とに基づいて、タッチセンサ２Ｂに対する、例えば、「クリック」、「ダブルクリック」、「スクロール」、「ドラッグ」を含む操作を判別する。操作者は、表示部２Ａに表示された画像に接触して操作するのではなく、タッチセンサ２Ｂをマウスとして操作することができる。

一方、制御部１０は、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されていると判定した場合、上述したように、タッチセンサ６に対する接触を検出開始する。

このようにして、バックフェイス１Ｂが平坦部２００と向かい合って、平坦部２００に載置されたか、表示部２Ａが平坦部２００と向かい合って、平坦部２００に載置されたか、に基づいて、タッチセンサ２Ｂ又はタッチセンサ６のどちらで、マウスとしての操作を検出するかを切り替えることができる。これにより、操作者は、スマートフォン１をマウスとして使用するために平坦部２００に載置する際に、表示部２Ａの向きを気にしなくてよい。このため、スマートフォン１、制御方法及び制御プログラム４Ａは、ミラーリングで大型ディスプレイ１００に表示された画像の操作性をより向上することができる。

添付の請求項に係る技術を完全かつ明瞭に開示するために特徴的な実施形態に関し記載してきた。しかし、添付の請求項は、上記実施形態に限定されるべきものでなく、本明細書に示した基礎的事項の範囲内で当該技術分野の当業者が創作しうるすべての変形例及び代替可能な構成を具現化するように構成されるべきである。

１ スマートフォン（携帯電子機器）
１Ａ フロントフェイス（第一面）
１Ｂ バックフェイス（第二面）
２ タッチパネル
２Ａ 表示部
２Ｂ タッチセンサ
３ 通信ユニット
３Ａ 通信部
３Ｂ 転送部
４ 記憶部
４Ａ 制御プログラム
５ 加速度センサ（移動検出センサ）
６ タッチセンサ（入力部）
１０ 制御部
２０ ハウジング
１００ 大型ディスプレイ（外部表示装置）
２００ 平坦部（操作台）
Ｃ カーソル

Claims (9)

1. 画像を生成する制御部と、
   前記制御部で生成された画像を表示する表示部と、
   前記制御部で生成された画像を外部表示装置に転送する転送部と、
   外表面に配置され、前記画像に対する操作を検出する入力部と、
   移動状態を検出する移動検出センサと、を有し、
   前記制御部は、前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上のカーソルを移動させ、前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行する携帯電子機器。
2. 前記制御部は、前記転送部から前記外部表示装置に前記画像を転送している場合、前記入力部での操作の検出を有効とする請求項１に記載の携帯電子機器。
3. 前記制御部は、前記表示部が配置された第一面が操作台と向かい合った状態で操作台に載置された場合、前記入力部での操作の検出を有効とする請求項１又は２に記載の携帯電子機器。
4. 前記入力部は、前記第一面及び前記第一面の背面である第二面の少なくとも一方に配置され、クリック操作、ダブルクリック操作、スクロール操作及びドラッグ操作の少なくともいずれか一つを検出する請求項３に記載の携帯電子機器。
5. 前記入力部は、前記第一面及び前記第一面の背面である第二面にそれぞれ配置され、
   前記制御部は、前記転送部から前記外部表示装置に前記画像を転送している場合、前記第二面の前記入力部での操作の検出を有効とし、前記第一面の前記入力部での操作の検出を無効とする請求項３に記載の携帯電子機器。
6. 前記制御部は、前記移動検出センサで検出した前記移動状態での移動距離に対する前記カーソルの移動距離を変更可能である請求項１から５のいずれか一項に記載の携帯電子機器。
7. 前記制御部は、前記転送部から前記外部表示装置に前記画像を転送している場合、前記転送部から前記外部表示装置に転送している前記画像を前記表示部に表示する請求項１から６のいずれか一項に記載の携帯電子機器。
8. 画像を生成する制御部と、前記制御部で生成された画像を表示する表示部と、前記制御部で生成された画像を外部表示装置に転送する転送部と、外表面に配置され、前記画像に対する操作を検出する入力部と、移動状態を検出する移動検出センサとを有する携帯電子機器の制御方法であって、
   カーソルを含む画像を生成し、生成した画像を前記転送部で転送するステップと、
   前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上の前記カーソルを移動させるステップと、
   前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行するステップと、を含む制御方法。
9. 画像を生成する制御部と、前記制御部で生成された画像を表示する表示部と、前記制御部で生成された画像を外部表示装置に転送する転送部と、外表面に配置され、前記画像に対する操作を検出する入力部と、移動状態を検出する移動検出センサと、を有する携帯電子機器に、
   カーソルを含む画像を生成し、生成した画像を前記転送部で転送するステップと、
   前記移動検出センサの検出結果に基づいて、前記外部表示装置へ転送された画像上の前記カーソルを移動させるステップと、
   前記入力部で検出された操作に基づいて、前記カーソルに対応する位置の操作を実行するステップとを実行させる制御プログラム。

Images