JP5322161B2 - 電子機器、情報処理システム、電子機器の制御方法および電子機器の制御プログラム - Google Patents

Description

本発明は、電子機器、情報処理システム、電子機器の制御方法および電子機器の制御プログラムに関する。特に、本発明は、２つの表示画面を有する電子機器あるいは情報処理システム、ならびに２つの表示画面を有する電子機器の制御方法および制御プログラムに関する。

現在、パーソナルコンピュータや携帯情報端末などの電子機器が、広く普及している。また、最近では、２つの画面を表示する電子機器が普及しつつある。

例えば、特許文献１（特開２０００−１７２３９５号公報）に開示されている携帯情報端末は、コンテンツを２つの画面のうち一方の画面に表示する。また、この携帯情報端末は、コンテンツのメニューバーやスライドバーを他方の画面に表示する。

特許文献２（特開２００１−３０６２９１号公報）には、主表示装置と補助表示装置とを備える情報処理装置が開示されている。この情報処理装置は、通常時には、コンテンツおよびコンテンツの付加情報の両方を主表示装置に表示する。情報処理装置は、コンテンツをフル画面表示するとき、付加情報をサブ画面に表示させる。

特許文献３（特開２００３−２０２９４８号公報）に開示されている電子装置は、主表示部と補助表示部とを有し、電子装置の通信の接続ステータスを補助表示部に表示する。

特許文献４（特開２００３−２１６２９７号公報）に開示されている電子装置も、特許文献３に記載の電子装置と同様、主表示部と補助表示部とを有する。この電子装置は、文字によるメッセージと、シンボルと、補助表示部の表示色および／または点滅表示との組み合わせにより、電子装置の状態情報を補助表示部に表示する。

特許文献５（特開２００４−５１０５号公報）に開示されている情報処理装置は、メインディスプレイ、メインディスプレイのコントローラ、表示一体型のポインティングデバイス、および、ポインティングデバイス専用のコントローラを備える。この情報処理装置は、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）の起動前に、ポインティングデバイスによってＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）などのシステム設定を行なえる。

特許文献６（特開２００４−５２１２号公報）にも、特許文献５に記載の情報処理装置と同様に、メインディスプレイ、メインディスプレイのコントローラ、表示一体型のポインティングデバイス、および、ポインティングデバイス専用のコントローラを備える情報処理装置が開示されている。特許文献６に開示されている情報処理装置は、誤操作の防止のために、ポインティングデバイスの表示画面が切り替わった際に、ポインティングデバイスの表示画面をメインディスプレイに表示する。

特開２０００−１７２３９５号公報 特開２００１−３０６２９１号公報 特開２００３−２０２９４８号公報 特開２００３−２１６２９７号公報 特開２００４−５１０５号公報 特開２００４−５２１２号公報

特許文献５や６に記載のような、外部からの入力を受付可能なサブディスプレイは、様々な目的に用いることができる。

まず、電子機器のユーザは、サブディスプレイを、従来の多くのノートパソコンに備えられているタッチパッドと同様に使うことができる。つまり、ユーザは、サブディスプレイを、メインディスプレイに表示されるカーソルの位置を移動したり、クリックやドラッグなどによりアプリケーションに指示を与えるためのポインティングデバイスとして利用することができる。

さらに、電子機器のユーザは、特許文献５のシステム設定画面のように、サブディスプレイにアプリケーションの操作画面が表示されている場合、サブディスプレイに入力を行なうことで、アプリケーションを操作することができる。

サブディスプレイに複数種類の動作をさせるために、電子機器は、キー入力や時間経過などに応じて、サブディスプレイへの入力の処理方法を切り替えている。ある状況では、電子機器は、サブディスプレイへの入力を、メインディスプレイのカーソル移動指示や、メインディスプレイに実行画面が表示されているアプリケーションの動作指示とみなす。また、別の状況では、電子機器は、サブディスプレイへの入力を、サブディスプレイに表示された操作画面への直接的な指示とみなす。

ところで、特許文献５や６は、入力の処理方法の切り替えの際に、電子機器をどのように制御すべきかについて詳しく考慮していない。従来の技術を単純に利用した電子機器は、処理方法の切り替え時に、操作性の低下を招く可能性がある。例えば、処理方法の切り替え前後で、サブディスプレイへの入力に応じて動作するアプリケーションの動作が一貫しないといった事態が起きうる。

本発明は、上記のような問題を解決するためになされたものであって、２つの表示画面を有し、かつ、操作性の高い電子機器あるいは情報処理システムを提供することを課題とする。さらに、本発明は、２つの表示画面を有する電子機器の操作性を向上させる電子機器の制御方法および制御プログラムを提供することを課題とする。

本発明の１つの局面に従うと、電子機器であって、第１の画面を表示するディスプレイと、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、記憶部と、ディスプレイ、タブレットおよび記憶部を制御する制御手段とを備え、制御手段は、制御手段の第１の動作モードと第２の動作モードとを切り替えるモード切替手段と、プログラムを実行する実行手段とを含み、実行手段は、第１の動作モードにおいて、タブレットへの入力に応じてプログラムを実行し、実行されたプログラムが作成した画像をディスプレイに表示し、第２の動作モードにおいて、タブレットへの入力に応じてプログラムを実行し、実行されたプログラムが作成した画像をタブレットに表示し、第２の動作モードにおいて実行されるプログラムの動作を決定する動作要素を記憶部に格納し、第２の動作モードの再開後に、格納された動作要素に基づいてプログラムを実行する。

好ましくは、動作要素は、第２の動作モードにおけるタブレットへの入力の履歴を表わす入力履歴を含む。

好ましくは、実行手段は、第２の動作モードにおいて発生した所定のイベントからの経過時間をカウントし、動作要素は、カウントされた経過時間を含み、実行手段は、第１の動作モードの間、経過時間のカウント動作を停止する。

さらに好ましくは、実行手段は、第２の動作モードにおけるタブレットへの入力の開始または終了イベントに応じて、停止されたカウント動作を再開する。

さらに好ましくは、実行手段は、停止されたカウント動作の再開にあたり、経過時間を初期値から再カウントする。

さらに好ましくは、実行手段は、第２の動作モードから第１の動作モードへの移行に応じてカウントされた経過時間をリセットする。

さらに好ましくは、実行手段は、カウントされた経過時間が閾値を超えたときにプログラムによる所定の処理を実行する。

さらに好ましくは、実行手段は、第２の動作モードにおけるタブレットへの入力からのカウントされた経過時間が閾値を超えたときに所定の処理を実行する。

さらに好ましくは、実行手段は、第２の動作モードにおけるタブレットへの入力からのカウントされた経過時間が閾値を超えたときに、第２の動作モードにおけるタブレットへの入力の履歴を文字認識する。

好ましくは、プログラムは、第１のプログラムと第２のプログラムとを含み、実行手段は、第１の動作モードにおいて、タブレットへの入力に応じて第１のプログラムを実行し、第２の動作モードにおいて、タブレットへの入力に応じて第２のプログラムを実行する。

さらに好ましくは、実行手段は、第１の実行手段と、第２の実行手段とを含み、第１の実行手段は、第１の動作モードにおいてタブレットへの入力に応じて第１のプログラムを実行し、第２の実行手段は、第２の動作モードにおいてタブレットへの入力に応じて第２のプログラムを実行する。

本発明の他の局面に従うと、第１の情報処理ユニットと第２の情報処理ユニットとを備える情報処理システムであって、第１の情報処理ユニットは、第１の画面を表示するディスプレイと、第２の情報処理ユニットとデータの授受を行なう第１のインターフェース部と、ディスプレイおよび第１のインターフェース部を制御する第１の制御手段とを備え、第１の制御手段は、第１のプログラムを実行し、実行された第１のプログラムが作成した画像をディスプレイに表示する第１の実行手段を含み、第２の情報処理ユニットは、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、第１の情報処理ユニットとデータの授受を行なう第２のインターフェース部と、タブレットおよび第２のインターフェース部を制御する第２の制御手段とを備え、第２の制御手段は、第２の制御手段の第１の動作モードと第２の動作モードとを切り替えるモード切替手段と、第２のプログラムを実行する第２の実行手段とを含み、第２の実行手段は、第１の動作モードにおいて、タブレットへの入力に応じて第１のプログラムのコマンドを作成し、第２のインターフェース部を制御してコマンドを第１の情報処理ユニットに送信し、第２の動作モードにおいて、タブレットへの入力に応じて第２のプログラムを実行し、実行された第２のプログラムが作成した画像をタブレットに表示し、第２のプログラムの動作を決定する動作要素を情報処理システム内の記憶装置に格納し、第２の動作モードの再開後に、格納された動作要素に基づいて第２のプログラムを実行する。

本発明のさらに他の局面に従うと、第１の画面を表示するディスプレイと、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、プログラムを実行する実行手段とを有する電子機器の制御方法であって、電子機器の第１の動作モードと第２の動作モードとを切り替えるステップと、第１の動作モードにおいて、タブレットへの入力に応じて実行手段によりプログラムを実行し、実行されたプログラムが作成した画像をディスプレイに表示するステップと、第２の動作モードにおいて実行されるプログラムの動作を決定する動作要素を記憶部に格納するステップと、第２の動作モードにおいて、タブレットへの入力に応じて実行手段によりプログラムを実行し、実行されたプログラムが作成した画像をタブレットに表示するステップとを備え、第２の動作モードにおいてプログラムを実行するステップは、第２の動作モードの再開後に、格納された動作要素に基づいてプログラムを実行するステップを含む。

本発明のさらに他の局面に従うと、第１の画面を表示するディスプレイと、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットとを有する電子機器の制御プログラムであって、電子機器の第１の動作モードと第２の動作モードとを切り替えるステップと、第１の動作モードにおいて、タブレットへの入力に応じてプログラムを実行し、実行されたプログラムが作成した画像をディスプレイに表示するステップと、第２の動作モードにおいて実行するプログラムの動作を決定する動作要素を記憶部に格納するステップと、第２の動作モードにおいて、タブレットへの入力に応じてプログラムを実行し、実行されたプログラムが作成した画像をタブレットに表示するステップとを備え、第２の動作モードにおいてプログラムを実行するステップは、第２の動作モードの再開後に、格納された動作要素に基づいてプログラムを実行するステップとを含む。

本発明に係る電子機器（あるいは情報処理システム）には、互いに切り替え可能な、第１の動作モードと第２の動作モードとがある。電子機器は、第２の動作モードにおいて実行されるプログラムの動作を決定する動作要素を記憶部に格納し、第２の動作モードの再開後に、格納された動作要素に基づいてプログラムを実行する。その結果、本発明によれば、２つの表示画面を有する電子機器の操作性を向上させる電子機器あるいは情報処理システムを提供することができる。あるいは、本発明によれば、２つの表示画面を有する電子機器の操作性を向上させる電子機器の制御方法および制御プログラムを提供することができる。

電子機器の外観を示す概略図である。 電子機器のハードウェア構成を表わすブロック図である。 液晶パネルの構成と当該液晶パネルの周辺回路とを示した図である。 液晶パネルとバックライトとの断面図である。 光センサ回路を動作させる際のタイミングチャートを示した図である。 スキャンの際にフォトダイオードがバックライトからの光を受光する構成を示した断面図である。 コマンドの概略構成を示した図である。 種別「０００」のコマンドを説明するための図である。 種別「００１」のコマンドを説明するための図である。 種別「０１０」のコマンドを説明するための図である。 種別「０１１」のコマンドを説明するための図である。 種別「１００」のコマンドを説明するための図である。 種別「１０１」のコマンドを説明するための図である。 応答データの概略構成を示した図である。 指をスキャンすることにより得られた画像（スキャン画像）を示した図である。 図３に示したものと異なる光センサ内蔵液晶パネルの回路図である。 スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。 電子機器の変形例のハードウェア構成を表すブロック図である。 電子機器の機能的構成をブロック図形式で示す図である。 マウスモードおよびタブレットモードのそれぞれにおいて電子機器が表示する画面を説明するための図である。 マウス画面の具体例を示す図である。 ホームメニュー画面の具体例を示す図である。 タブレットモードにおいて液晶パネルに表示される画面の遷移図である。 マウスモードとタブレットモードとの切り替え時の電子機器の動作について説明するための図である。 通常起動時の動作モードを模式的に示した図である。 復帰時の動作モードを模式的に示した図である。 タブレットモード時の電子機器の動作について説明するための図である。 文字入力画面の一例を示す図である。 手書き文字入力パッド利用時の電子機器の動作を説明するための第１の図である。 手書き文字入力パッド利用時の電子機器の動作を説明するための第２の図である。 テキストボックスが一杯のときの電子機器の動作を説明するための図である。 イラスト入力画面の一例を示す図である。 電卓画面の一例を示す図である。 インターネット画面の一例を示す図である。 スクロールバーを含むインターネット画面の一例を示す図である。 辞書選択画面の一例を示す図である。 スクロールバーを含む辞書選択画面の一例を示す図である。 手書き文字入力アプリケーションの動作に際して起こるおそれのある不都合について説明するための図である。 図３８に示した電子機器のカウント動作について説明するための図である。 本実施の形態に係る手書き入力動作について説明するための図である。 第１のタイムカウントについて説明するための図である。 第２のタイムカウントについて説明するための図である。 第３のタイムカウントについて説明するための図である。 第４のタイムカウントについて説明するための図である。 電子機器が行なう処理の流れをフローチャート形式で示す図である。 マウスモード動作の処理の流れをフローチャート形式で示す図である。 タブレットモード動作の処理の流れをフローチャート形式で示す図である。 モード切替（マウスモードからタブレットモード）動作の処理の流れをフローチャート形式で示す図である。 モード切替（タブレットモードからマウスモード）動作の第１の処理の流れをフローチャート形式で示す図である。 モード切替（タブレットモードからマウスモード）動作の第２の処理の流れをフローチャート形式で示す図である。 タブレットモード時の第１のサブアプリケーション動作の流れをフローチャート形式で示す図である。 タブレットモード時の第２のサブアプリケーション動作の流れをフローチャート形式で示す図である。 タブレットモード時の第３のサブアプリケーション動作の流れをフローチャート形式で示す図である。 タブレットモード時の第４のサブアプリケーション動作の流れをフローチャート形式で示す図である。

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部分には同一の符号を付してある。それらの名称および機能も同じである。したがってそれらについての詳細な説明は繰り返さない。

＜電子機器の外観＞
図１は、本実施の形態に係る電子機器１００の外観を示した図である。図１を参照して、電子機器１００は、第１の筐体１００Ａと第２の筐体１００Ｂとを含む。

第１の筐体１００Ａと第２の筐体１００Ｂとは、ヒンジ１００Ｃにより折畳み可能に接続されている。第１の筐体１００Ａは、光センサ内蔵液晶パネル１４０を備える。第２の筐体１００Ｂは、光センサ内蔵液晶パネル２４０を備える。このように、電子機器１００は、光センサ内蔵液晶パネルを２つ備える。第２の筐体１００Ｂは、さらに、左クリックキー２４１、センターキー２４２および右クリックキー２４３を備える。

本実施の形態では、電子機器１００は、ノート型のパーソナルコンピュータとして構成される。なお、電子機器１００は、ＰＤＡ（Personal Digital Assistant）、携帯型電話機、電子辞書などの表示機能を有するデバイスとして構成されてもよい。

＜ハードウェア構成について＞
次に、図２を参照して、電子機器１００の具体的構成の一態様について説明する。図２は、電子機器１００のハードウェア構成を表わすブロック図である。

電子機器１００は、第１ユニット１００１と、第２ユニット１００２とを含む。第２ユニット１００２は、電子機器１００から着脱可能に第１ユニット１００１に接続されている。第１ユニット１００１は、本体装置１０１と、表示装置１０２とを含む。第２ユニット１００２は、表示装置１０３と、本体装置１０４とを含む。

第１の筐体１００Ａは、表示装置１０２を含む。第２の筐体１００Ｂは、本体装置１０１を含む。また、第２の筐体１００Ｂは、第２ユニット１００２を含む。

（第１ユニットについて）
本体装置１０１は、ＣＰＵ（Central Processing Unit）１１０と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）１７０と、ＲＡＭ（Random Access Memory）１７１と、ＲＯＭ（Read-Only Memory）１７２と、メモリカードリーダライタ１７３と、外部通信部１７４と、マイク１７５と、スピーカ１７６と、操作キー１７７と、電源スイッチ１９１と、電源回路１９２と、電源検出部１９３と、ＵＳＢ（Universal Serial Bus）コネクタ１９４と、アンテナ１９５と、ＬＡＮ（Local Area Network）コネクタ１９６とを含む。各構成要素（１１０，１７１〜１７７，１９３）は、相互にデータバスＤＢ１によって接続されている。メモリカードリーダライタ１７３には、メモリカード１７３１が装着される。

ＣＰＵ１１０は、プログラムを実行する。操作キー１７７は、電子機器１００の使用者による指示の入力を受ける。ＨＤＤ１７０は、データの書込みおよび読出しが可能な記憶装置である。ただし、ＨＤＤ１７０は、そのような記憶装置の一例である。電子機器１００は、ＨＤＤ１７０のかわりに、フラッシュメモリなどの記憶装置を用いてもよい。ＲＡＭ１７１は、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、または操作キー１７７を介して入力されたデータを揮発的に格納する。ＲＯＭ１７２は、データを不揮発的に格納する。また、ＲＯＭ１７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。

外部通信部１７４は、他の電子機器と通信を行なう。具体的には、外部通信部１７４は、ＵＳＢコネクタ１９４を介して、たとえば第２ユニット１００２と通信を行なう。また、外部通信部１７４は、アンテナ１９５を介して、たとえば第２ユニット１００２と無線通信を行なう。さらに、外部通信部１７４は、ＬＡＮコネクタ１９６を介して、他の電子機器との間で有線通信を行なう。

なお、本体装置１０１は、Ｂｌｕｅｔｏｏｔｈ（登録商標）以外の無線通信により、他の電子機器と通信を行なってもよい。たとえば、外部通信部１７４は、図示しない無線ＬＡＮアンテナを介して、ＬＡＮに接続された他の電子機器との間で無線通信を行なってもよい。あるいは、図示しない赤外線ポートを介して、他の電子機器との間で無線通信を行なってもよい。

電源スイッチ１９１は、電子機器１００を起動させるためのスイッチである。
電源スイッチ１９１がオンすると、電源回路１９２は、電源検出部１９３を介して、データバスＤＢ１に接続されている各構成要素と表示装置１０２とに電力を供給する。また、電源スイッチ１９１がオンすると、電源回路１９２は、電源検出部１９３を介することなく、外部通信部１７４に電力を供給する。

電源検出部１９３は、電源回路１９２からの出力を検出する。また、電源検出部１９３は、当該検出した出力に関する情報（たとえば、電圧値や電流値）を、ＣＰＵ１１０に送る。

ＵＳＢコネクタ１９４は、第１ユニット１００１を第２ユニット１００２に接続するために用いられる。なお、本体装置１０１は、ＵＳＢコネクタ１９４に加えて他のＵＳＢコネクタを備えていてもよい。

第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２にデータを送信する。また、第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２からデータを受信する。さらに、第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２に電力を供給する。なお、第１ユニット１００１は、電源回路１９２からの電力を、ＵＳＢコネクタ１９４を介さず、直接に、第２ユニット１００２に供給してもよい。

アンテナ１９５は、第１ユニット１００１と、他の通信装置（たとえば第２ユニット１００２）との間における、Ｂｌｕｅｔｏｏｔｈ（登録商標）の規格に沿った通信に用いられる。ＬＡＮコネクタ１９６は、電子機器１００をＬＡＮに接続するために用いられる。

表示装置１０２は、ドライバ１３０と、光センサ内蔵液晶パネル１４０（以下、液晶パネル１４０と称する）と、内部ＩＦ１７８と、バックライト１７９と、画像処理エンジン１８０とを含む。

ドライバ１３０は、液晶パネル１４０およびバックライト１７９を駆動するための駆動回路である。ドライバ１３０に含まれる各種の駆動回路については、後述する。

液晶パネル１４０は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、液晶パネル１４０は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行うことができる。液晶パネル１４０の詳細については、後述する。

内部ＩＦ（Interface）１７８は、本体装置１０１と表示装置１０２との間で、データの遣り取りを仲介する。

バックライト１７９は、液晶パネル１４０の裏面に配置された光源である。バックライト１７９は、当該裏面に対して均一な光を照射する。

画像処理エンジン１８０は、ドライバ１３０を介して液晶パネル１４０の動作を制御する。ここで、当該制御は、内部ＩＦ１７８を介して本体装置１０１から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン１８０は、液晶パネル１４０から出力されるデータを処理し、処理したデータを内部ＩＦ１７８を介して本体装置１０１に送る。さらに、画像処理エンジン１８０は、ドライバ制御部１８１と、タイマ１８２と、信号処理部１８３とを含む。

ドライバ制御部１８１は、ドライバ１３０に対して制御信号を送ることによりドライバ１３０の動作を制御する。また、ドライバ制御部１８１は、本体装置１０１から送られてくるコマンドを解析する。そして、ドライバ制御部１８１は、当該解析の結果に基づいた制御信号をドライバ１３０に送る。ドライバ１３０の動作の詳細については、後述する。

タイマ１８２は、時刻情報を生成し、信号処理部１８３に対して時刻情報を送る。
信号処理部１８３は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部１８３は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部１８３は、当該デジタルデータに対して、本体装置１０１から送られてくるコマンドの内容に応じたデータ処理を行う。そして、信号処理部１８３は、上記データ処理を行った後のデータと、タイマ１８２から取得した時刻情報とを含んだデータ（以下、応答データと称する）を本体装置１０１に送る。また、信号処理部１８３は、後述するスキャンデータを連続して複数格納できるＲＡＭ（図示せず）を備えている。

上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する（図７，図８，および図１４）。

なお、タイマ１８２は、必ずしも画像処理エンジン１８０に備えられている必要はない。たとえば、タイマ１８２は、表示装置１０２内における、画像処理エンジン１８０の外部に備えられていてもよい。あるいは、タイマ１８２は、本体装置１０１に備えられていてもよい。また、マイク１７５およびスピーカ１７６は、電子機器１００が常に備える構成ではなく、電子機器１００の実施例によっては、マイク１７５およびスピーカ１７６のいずれかあるいは両方を有さない構成であってもよい。

ここで、表示装置１０２は、システム液晶を含んでいる。なお、システム液晶とは、液晶パネル１４０の周辺機器を当該液晶パネル１４０のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、液晶パネル１４０のガラス基板上に一体形成されている。なお、表示装置１０２が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、上記ガラス基板以外の基板に構成されていてもよい。

（第２ユニットについて）
第２ユニット１００２は、第１ユニット１００１から電力の供給を受ける。具体的には、後述するＵＳＢコネクタ２９４と第１ユニット１００１のＵＳＢコネクタ１９４とを接続することにより、第２ユニット１００２は、第１ユニット１００１の電源回路１９２から電力の供給を受ける。ただし、第２ユニット１００２への電力の供給方法はこれに限られない。例えば、第２ユニット１００１は、電源回路１９２から直接に電力の供給を受けてもよい。

本体装置１０４は、ＣＰＵ２１０と、ＲＡＭ２７１と、ＲＯＭ２７２と、タイマ２７３と、左クリックキー２４１と、センターキー２４２と、右クリックキー２４３と、外部通信部２７４と、電源検出部２９３と、ＵＳＢコネクタ２９４と、アンテナ２９５と、信号強度検出部２９７とを含む。各構成要素（２１０，２４１〜２４３，２７１，２７２，２７３，２７４，２９３）は、相互にデータバスＤＢ２によって接続されている。

ＣＰＵ２１０は、プログラムを実行する。ＲＡＭ２７１は、ＣＰＵ２１０によるプログラムの実行により生成されたデータを揮発的に格納する。ＲＯＭ２７２は、データを不揮発的に格納する。また、ＲＯＭ２７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。

外部通信部２７４は、他の電子機器との間で通信を行なう。具体的には、外部通信部２７４は、ＵＳＢコネクタ２９４を介して、たとえば第１ユニット１００１と通信を行なう。また、外部通信部２７４は、アンテナ２９５を介して、たとえば第１ユニット１００１と通信を行なう。

なお、本体装置１０４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）以外の無線通信により、他の電子機器（たとえば、第１ユニット１００１）と通信を行なってもよい。たとえば、外部通信部２７４は、図示しない赤外線ポートを介して、他の電子機器との間で無線通信を行なってもよい。

信号強度検出部２９７は、アンテナ２９５を介して受信した信号についての強度を検出する。そして、信号強度検出部２９７は、検出した強度を外部通信部２７４に送る。

ＵＳＢコネクタ２９４は、第２ユニット１００２を第１ユニット１００１に接続するために用いられる。

第２ユニット１００２は、ＵＳＢコネクタ２９４を介して、第１ユニット１００１にデータを送信する。また、第２ユニット１００２は、ＵＳＢコネクタ２９４を介して、第１ユニット１００１からデータを受信する。さらに、第２ユニット１００２は、上述したように、ＵＳＢコネクタ２９４を介して、第１ユニット１００１から電力の供給を受ける。なお、第２ユニット１００２は、第１ユニット１００１から供給された電力を、図示しないバッテリに蓄電する。

アンテナ２９５は、第２ユニット１００２と、たとえば第１ユニット１００１との間における、Ｂｌｕｅｔｏｏｔｈ（登録商標）の規格に沿った通信に用いられる。

電源検出部２９３は、ＵＳＢコネクタ２９４を介して給電された電力を検出する。また、電源検出部２９３は、当該検出した電力についての情報を、ＣＰＵ２１０に送る。

また、本体装置１０４は、赤外線通信を行なう機能を備えていてもよい。
表示装置１０３は、ドライバ２３０と、光センサ内蔵液晶パネル２４０（以下、「液晶パネル２４０」と称する）と、内部ＩＦ２７８と、バックライト２７９と、画像処理エンジン２８０とを含む。画像処理エンジン２８０は、ドライバ制御部２８１と、タイマ２８２と、信号処理部２８３とを含む。

表示装置１０３は、表示装置１０２と同様な構成を有する。つまり、ドライバ２３０、液晶パネル２４０、内部ＩＦ２７８、バックライト２７９、および画像処理エンジン２８０は、表示装置１０２における、ドライバ１３０、液晶パネル１４０、内部ＩＦ１７８、バックライト１７９、画像処理エンジン１８０と同じ構成をそれぞれ有する。ドライバ制御部２８１、タイマ２８２、および信号処理部２８３は、表示装置１０２における、ドライバ制御部１８１、タイマ１８２、信号処理部１８３と同じ構成をそれぞれ有する。したがって、表示装置１０３に含まれる各機能ブロックについての説明は、繰り返さない。

ところで、電子機器１００における処理は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、ＲＯＭ１７２またはＨＤＤ１７０に予め記憶されている場合がある。また、ソフトウェアは、メモリカード１７３１その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ１７３その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部１７４または通信ＩＦ（図示せず）を介してダウンロードされた後、ＲＯＭ１７２またはＨＤＤ１７０に一旦格納される。そのソフトウェアは、ＣＰＵ１１０によってＲＯＭ１７２またはＨＤＤ１７０から読み出され、ＲＡＭ１７１に実行可能なプログラムの形式で格納される。ＣＰＵ１１０は、そのプログラムを実行する。

図２に示される電子機器１００の本体装置１０１を構成する各構成要素は、一般的なものである。したがって、本発明の本質的な部分は、ＲＡＭ１７１、ＲＯＭ１７２またはＨＤＤ１７０、メモリカード１７３１その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、電子機器１００の本体装置１０１のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。

なお、記憶媒体としては、メモリカードに限られず、ＣＤ−ＲＯＭ、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。

ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。

＜光センサ内蔵液晶パネルの構成および駆動について＞
次に、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路の構成とについて説明する。図３は、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路とを示した図である。

図３を参照して、液晶パネル１４０は、画素回路１４１と、光センサ回路１４４と、走査信号線Ｇｉと、データ信号線ＳＲｊと、データ信号線ＳＧｊと、データ信号線ＳＢｊと、センサ信号線ＳＳｊと、センサ信号線ＳＤｊと、読出信号線ＲＷｉと、リセット信号線ＲＳｉとを含む。なお、ｉは、１≦ｉ≦ｍを満たす自然数であり、ｊは１≦ｊ≦ｎを満たす自然数である。

また、図２に示した表示装置１０２のドライバ１３０は、液晶パネル１４０の周辺回路として、走査信号線駆動回路１３１と、データ信号線駆動回路１３２と、光センサ駆動回路１３３と、スイッチ１３４と、アンプ１３５とを含む。

走査信号線駆動回路１３１は、図２に示すドライバ制御部１８１から制御信号ＴＣ１を受ける。そして、走査信号線駆動回路１３１は、制御信号ＴＣ１に基づき、各走査信号線（Ｇ１〜Ｇｍ）に対して、走査信号線Ｇ１から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路１３１は、単位時間毎に走査信号線（Ｇ１〜Ｇｍ）の中から１つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するＴＦＴ（Thin Film Transistor）１４２のゲートをターンオンできるだけの電圧（以下、ハイレベル電圧）を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。

データ信号線駆動回路１３２は、図２に示すドライバ制御部１８１から画像データ（ＤＲ，ＤＧ，ＤＢ）を受ける。そして、データ信号線駆動回路１３２は、３ｎ個のデータ信号線（ＳＲ１〜ＳＲｎ，ＳＧ１〜ＳＧｎ，ＳＢ１〜ＳＢｎ）に対して、上記単位時間毎に、１行分の画像データに対応する電圧を順次印加する。

なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。

画素回路１４１は、１つの画素の輝度（透過率）を設定するための回路である。また、画素回路１４１は、マトリクス状にｍ×ｎ個配されている。より詳しくは、画素回路１４１は、図３の縦方向にｍ個、横方向にｎ個配されている。

画素回路１４１は、Ｒサブピクセル回路１４１ｒと、Ｇサブピクセル回路１４１ｇと、Ｂサブピクセル回路１４１ｂとからなる。これら３つの回路（１４１ｒ，１４１ｇ，１４１ｂ）は、それぞれ、ＴＦＴ１４２と、画素電極と対向電極とからなる１組の電極対１４３と、図示しないコンデンサとを含む。

なお、ｎ型のトランジスタとｐ型のトランジスタとを作れるＣＭＯＳ（Complementary Metal Oxide Semiconductor）を実現できること、キャリア（電子または正孔）の移動速度がアモルファスシリコン薄膜トランジスタ（a-Si TFT）に比べて数百倍早いことなどから、表示装置１０２では、ＴＦＴ１４２として多結晶シリコン薄膜トランジスタ(p-Si TFT)が用いられる。なお、ＴＦＴ１４２は、ｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４２がｐ型チャネルの電界効果トランジスタであってもよい。

Ｒサブピクセル回路１４１ｒ内のＴＦＴ１４２のソースはデータ信号線ＳＲｊに接続されている。また、当該ＴＦＴ１４２のゲートは走査信号線Ｇｉに接続されている。さらに、当該ＴＦＴ１４２のドレインは、電極対１４３の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Ｇサブピクセル回路１４１ｇおよびＢサブピクセル回路１４１ｂについても、各ＴＦＴ１４２のソースが接続されるデータ信号線が異なる以外は、Ｒサブピクセル回路１４１ｒと同じ構成である。このため、これら２つの回路（１４１ｇ，１４１ｂ）についての説明は、繰り返さない。

ここで、画素回路１４１における輝度の設定について説明する。まず、走査信号線Ｇｉに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、ＴＦＴ１４２のゲートがターンオンする。このようにＴＦＴ１４２のゲートがターンオンした状態で、各データ信号線（ＳＲｊ，ＳＧｊ，ＳＢｊ）に対して、それぞれ指定された電圧（１画素分の画像データに対応する電圧）を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ（補助容量）によって、次のフレーム期間において走査信号線Ｇｉが選択されるまで保持される。

光センサ駆動回路１３３は、図２に示すドライバ制御部１８１から制御信号ＴＣ２を受ける。

そして、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎にリセット信号線（ＲＳ１〜ＲＳｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧ＶＳＳＲを印加したままとする。たとえば、電圧ＶＤＤＲを０Ｖに、電圧ＶＳＳＲを−５Ｖに設定すればよい。

また、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎に読出信号線（ＲＷ１〜ＲＷｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤを印加する。なお、選択されていない読出信号線に対しては、上記電圧ＶＳＳＲを印加したままとする。たとえば、ＶＤＤの値を８Ｖに設定すればよい。

なお、電圧ＶＤＤＲを印加するタイミング、および電圧ＶＤＤを印加するタイミングについては、後述する。

光センサ回路１４４は、フォトダイオード１４５と、コンデンサ１４６と、ＴＦＴ１４７とを含む。なお、以下では、ＴＦＴ１４７がｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４７がｐ型チャネルの電界効果トランジスタであってもよい。

フォトダイオード１４５のアノードは、リセット信号線ＲＳｉに接続されている。一方、フォトダイオード１４５のカソードは、コンデンサ１４６の一方の電極に接続されている。また、コンデンサ１４６の他方の電極は、読出信号線ＲＷｉに接続されている。なお、以下では、フォトダイオード１４５とコンデンサ１４６との接続点をノードＮと称する。

ＴＦＴ１４７のゲートは、ノードＮに接続されている。また、ＴＦＴ１４７のドレインは、センサ信号線ＳＤｊに接続されている。さらに、ＴＦＴ１４７のソースは、センサ信号線ＳＳｊに接続されている。光センサ回路１４４を用いたセンシングの詳細については、後述する。

スイッチ１３４は、センサ信号線（ＳＤ１〜ＳＤｎ）に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ１３４の切り換え動作は、光センサ駆動回路１３３により行われる。なお、スイッチ１３４が導通状態となった場合にセンサ信号線（ＳＤ１〜ＳＤｎ）に印加される電圧については、後述する。

アンプ１３５は、各センサ信号線（ＳＳ１〜ＳＳｎ）から出力された電圧を増幅する。なお、増幅された電圧は、図２に示した信号処理部１８３に送られる。

なお、画素回路１４１を用いて画像を液晶パネル１４０に表示させるタイミングと、光センサ回路１４４を用いてセンシングするタイミングとについては、画像処理エンジン１８０が制御する。

図４は、液晶パネル１４０とバックライト１７９との断面図である。図４を参照して、液晶パネル１４０は、アクティブマトリクス基板１５１Ａと、対向基板１５１Ｂと、液晶層１５２とを含む。対向基板１５１Ｂは、アクティブマトリクス基板１５１Ａに対向して配されている。液晶層１５２は、アクティブマトリクス基板１５１Ａと対向基板１５１Ｂとに挟まれている。バックライト１７９は、アクティブマトリクス基板１５１Ａに関し液晶層１５２と反対側に配されている。

アクティブマトリクス基板１５１Ａは、偏光フィルタ１６１と、ガラス基板１６２と、電極対１４３を構成する画素電極１４３ａと、フォトダイオード１４５と、データ信号線１５７と、配向膜１６４とを含む。さらに、図４には示していないが、アクティブマトリクス基板１５１Ａは、図３に示した、コンデンサ１４６と、ＴＦＴ１４７と、ＴＦＴ１４２と、走査信号線Ｇｉとを含む。

また、アクティブマトリクス基板１５１Ａにおいては、バックライト１７９側から、偏光フィルタ１６１、ガラス基板１６２、画素電極１４３ａ、および配向膜１６４が、この順に配されている。フォトダイオード１４５とデータ信号線１５７とは、ガラス基板１６２の液晶層１５２側に形成されている。

対向基板１５１Ｂは、偏光フィルタ１６１と、ガラス基板１６２と、遮光膜１６３と、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と、電極対１４３を構成する対向電極１４３ｂと、配向膜１６４とを含む。

また、対向基板１５１Ｂにおいては、液晶層１５２側から、配向膜１６４、対向電極１４３ｂ、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）、ガラス基板１６２、および偏光フィルタ１６１が、この順に配されている。遮光膜１６３は、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と同一の層に形成されている。

カラーフィルタ１５３ｒは、赤色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｇは、緑色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｂは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード１４５は、カラーフィルタ１５３ｂに対向する位置に配されている。

液晶パネル１４０は、外光やバックライト１７９などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、液晶パネル１４０は、画素電極１４３ａと対向電極１４３ｂとの間に電圧を印加することにより液晶層１５２の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ１６１を配置している。

なお、フォトダイオード１４５の位置は、上記の位置に限定されるものではなく、カラーフィルタ１５３ｒに対向する位置やカラーフィルタ１５３ｇに対向する位置に設けることも可能である。

ここで、光センサ回路１４４の動作について説明する。図５は、光センサ回路１４４を動作させる際のタイミングチャートを示した図である。図５において、電圧ＶＩＮＴは、光センサ回路１４４内のノードＮにおける電位を示している。また、電圧ＶＰＩＸは、図３に示したセンサ信号線ＳＳｊからの出力電圧であって、アンプ１３５によって増幅される前の電圧を示している。

以下では、光センサ回路１４４をリセットするためのリセット期間と、光センサ回路１４４を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。

まず、リセット期間について説明する。リセット期間においては、リセット信号線ＲＳｉに印加する電圧を、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤＲ）へと瞬間的に切り換える。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。このように、リセット信号線ＲＳｉに上記ハイレベルの電圧を印加することにより、フォトダイオード１４５の順方向（アノード側からカソード側）に電流が流れ始める。その結果、ノードＮの電位である電圧ＶＩＮＴは、以下の式（１）で示す値となる。なお、式（１）では、フォトダイオード１４５における順方向の電圧降下量をＶｆとしている。

ＶＩＮＴ＝ＶＳＳＲ＋｜ＶＤＤＲ−ＶＳＳＲ｜−Ｖｆ … （１）
それゆえ、ノードＮの電位は、図５に示すとおり、電圧ＶＤＤＲよりもＶｆだけ小さな値となる。

ここで、電圧ＶＩＮＴは、ＴＦＴ１４７のゲートをターンオンさせる閾値以下であるため、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。また、コンデンサ１４６の電極間には、上記電圧ＶＩＮＴ分の差が生じる。このため、コンデンサ１４６には、当該差に応じた電荷が蓄積される。

次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線ＲＳｉに印加する電圧は、ハイレベル（電圧ＶＤＤＲ）からローレベル（電圧ＶＳＳＲ）へと瞬間的に切り換わる。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。

このように、リセット信号線ＲＳｉに印加する電圧をローレベルに変化させることにより、ノードＮの電位は、リセット信号線ＲＳｉの電圧および読出信号線ＲＷｉの電圧よりも高くなる。このため、フォトダイオード１４５においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード１４５は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード１４５が受光すると、フォトダイオード１４５のカソード側からアノード側へと電流が流れ始める。その結果、図５に示すとおり、ノードＮの電位（つまり、電圧ＶＩＮＴ）は時間の経過とともに低くなる。

なお、このように電圧ＶＩＮＴが低下し続けるため、ＴＦＴ１４７のゲートはターンオンした状態にはならない。それゆえ、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。

次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線ＲＳｉに印加する電圧をローレベル（電圧ＶＳＳＲ）のままとする。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤ）へと瞬間的に切り換わる。ここで、電圧ＶＤＤは、電圧ＶＤＤＲよりも高い値である。

このように、読出信号線ＲＷｉにハイレベルの電圧を瞬間的に印加することにより、図５に示すとおり、コンデンサ１４６を介してノードＮの電位が引き上げられる。なお、ノードＮの電位の上昇幅は、読出信号線ＲＷｉに印加する電圧に応じた値となる。ここで、ノードＮの電位（つまり、電圧ＶＩＮＴ）が、ＴＦＴ１４７のゲートをターンオンさせる閾値以上まで引き上げられるため、ＴＦＴ１４７のゲートがターンオンする。

この際、ＴＦＴ１４７のドレイン側に接続されたセンサ信号線ＳＤｊ（図３参照）に予め一定電圧を印加しておけば、ＴＦＴ１４７のソース側に接続されたセンサ信号線ＳＳｊからは、図５のＶＰＩＸのグラフに示すとおり、ノードＮの電位に応じた電圧が出力される。

ここで、フォトダイオード１４５が受光する光の量（以下、受光量と称する）が少ないと、図５のＶＩＮＴのグラフに示す直線の傾きが緩やかになる。その結果、電圧ＶＰＩＸは、受光量が多い場合に比べて高くなる。このように、光センサ回路１４４は、フォトダイオード１４５の受光量に応じて、センサ信号線ＳＳｊに出力する電圧の値を変化させる。

ところで、上記においては、ｍ×ｎ個存在する光センサ回路のうち、１つの光センサ回路１４４に着目して、その動作を説明した。以下では、液晶パネル１４０における各光センサ回路の動作について説明する。

まず、光センサ駆動回路１３３は、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路１３３は、リセット信号線ＲＳ１に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、他のリセット信号線（ＲＳ２〜ＲＳｍ）および読出信号線（ＲＷ１〜ＲＷｍ）については、ローレベルの電圧を印加したままの状態とする。これにより、図３における１行目のｎ個の光センサ回路が、上述したリセット期間に入る。その後、１行目のｎ個の光センサ回路は、センシング期間に入る。さらに、その後、１行目のｎ個の光センサ回路は、読出期間に入る。

なお、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。

１行目のｎ個の光センサ回路の読出期間が終了すると、光センサ駆動回路１３３は、リセット信号線ＲＳ２に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。つまり、２行目のｎ個の光センサ回路のリセット期間に入る。リセット期間が終了すると、２行目のｎ個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。

以降は、上述した処理が、順に、３行目のｎ個の光センサ回路、４行目のｎ個の光センサ回路、…ｍ行目のｎ個の光センサ回路に対して行われる。その結果、センサ信号線（ＳＳ１〜ＳＳｎ）からは、１行目のセンシング結果、２行目のセンシング結果、…、ｍ行目のセンシング結果が、この順に出力される。

なお、表示装置１０２においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果が液晶パネル１４０から出力される。このため、以下では、液晶パネル１４０から出力される１行目からｍ行目までのｍ行分の電圧に関するデータに対して、信号処理部１８３が上述したデータ処理を行った後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物（たとえば、ユーザの指）をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。

また、上記においては、ｍ×ｎ個の光センサ回路全てを用いてスキャンを行う構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、液晶パネル１４０の表面の一部の領域に関してスキャンを行うことも構成としてもよい。

以下では、電子機器１００が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー１７７を介した入力などに基づく本体装置１０１から送られてくるコマンドにより行われるものとする。なお、液晶パネル１４０の表面の一部の領域に関してスキャンを行う場合、画像処理エンジン１８０が、スキャン対象領域の設定を行う。なお、当該領域の設定を、操作キー１７７を介してユーザが指定できる構成としてもよい。

このように、液晶パネル１４０の表面の一部の領域に関してスキャンを行う場合には、画像の表示に関し、以下のような利用の態様がある。１つ目は、上記一部の領域（以下、スキャン領域と称する）以外の表面の領域において、画像を表示させる態様である。２つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体装置１０１から画像処理エンジン１８０に送られてくるコマンドに基づく。

図６は、液晶パネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。

図６を参照して、ユーザの指９００が液晶パネル１４０の表面に接触している場合、バックライト１７９から発せられた光の一部は、当該接触している領域ではユーザの指９００（略平面）にて反射される。そして、フォトダイオード１４５は、当該反射された光を受光する。

また、指９００が接触していない領域においても、バックライト１７９から発せられた光の一部は、ユーザの指９００にて反射される。この場合においても、フォトダイオード１４５は、当該反射された光を受光する。ただし、当該領域においては液晶パネル１４０の表面に指９００が接触していないため、指９００が接触している領域よりも、フォトダイオード１４５の受光量は少なくなる。なお、バックライト１７９から発せられた光のうち、ユーザの指９００に到達しない光のほとんどについては、フォトダイオード１４５は受光できない。

ここで、バックライト１７９を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路１４４は、ユーザの指９００により反射した光の光量に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９の点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって光が反射されることにより得られる像（以下、反射像とも称する）をスキャンすることができる。

なお、指９００以外のスキャン対象物としては、スタイラスなどが挙げられる。
ところで、本実施の形態においては、電子機器１００の表示装置として液晶パネルを例に挙げて説明しているが、液晶パネルの代わりに有機ＥＬ（Electro-Luminescence）パネルなどの他のパネルを用いてもよい。

＜データについて＞
次に、第１ユニット１００１と第２ユニット１００２との間でやり取りされるコマンド、および第１ユニット１００１内の本体装置１０１と表示装置１０２との間でやり取りされるコマンドについて説明する。

図７は、コマンドの概略構成を示した図である。図７を参照して、コマンドは、ヘッダＤＡ０１と、第１フィールドＤＡ０２と、第２フィールドＤＡ０３と、第３フィールドＤＡ０４と、第４フィールドＤＡ０５と、第５フィールドＤＡ０６と、予備のデータ領域ＤＡ０７とを含む。

図８は、種別「０００」のコマンド（つまり、センシングコマンド）を説明するための図である。ＣＰＵ１１０は、種別「０００」のコマンド（以下、「第１コマンド」と称する）を、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ１１０は、第１コマンドを、本体装置１０１から表示装置１０２に送る。なお、以下においては、ＣＰＵ１１０が第１コマンドを第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る場合を例に挙げて説明する。

ＣＰＵ１１０は、ヘッダＤＡ０１に、コマンドの種別（「０００」）、コマンドの送信先等を書き込む。ＣＰＵ１１０は、第１フィールドＤＡ０２に、番号が「１」のタイミングの値を書き込む。ＣＰＵ１１０は、第２フィールドＤＡ０３に、番号が「２」のデータ種別の値を書き込む。ＣＰＵ１１０は、第３フィールドＤＡ０４に、番号が「３」の読取方式の値を書き込む。ＣＰＵ１１０は、第４フィールドＤＡ０５に、番号が「４」の画像階調の値を書き込む。ＣＰＵ１１０は、第５フィールドＤＡ０６に、番号が「５」の解像度の値を書き込む。

第１フィールドＤＡ０２に「００」が設定された第１コマンドは、画像処理エンジン２８０に対して、そのときのスキャンデータの送信を要求する。つまり、センシング第１コマンドは、当該第１コマンドを画像処理エンジン２８０が受信した後に、液晶パネル２４０の光センサ回路を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、第１フィールドＤＡ０２に「０１」が設定された第１コマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、第１フィールドＤＡ０２に「１０」が設定された第１コマンドは、一定周期毎にスキャンデータの送信を要求する。

第２フィールドＤＡ０３に「００１」が設定された第１コマンドは、部分画像における中心座標の座標値の送信を要求する。また、第２フィールドＤＡ０３に「０１０」が設定された第１コマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、第２フィールドＤＡ０３に「１００」が設定された第１コマンドは、全体画像の送信を要求する。

ここで、「全体画像」とは、ｍ×ｎ個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン２８０により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。

なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、液晶パネル２４０の表面の一部の領域に関してスキャンを行う構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。

第３フィールドＤＡ０４に「００」が設定されたセンシング第１コマンドは、バックライト２７９を点灯してスキャンすることを要求する。また、第３フィールドＤＡ０４に「０１」が設定された第１コマンドは、バックライト２７９を消灯してスキャンすることを要求する。なお、バックライト２７９を消灯してスキャンする構成については後述する（図１７）。さらに、第３フィールドＤＡ０４に「１０」が設定された第１コマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト２７９を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行うことを指す。

第４フィールドＤＡ０５に「００」が設定された第１コマンドは、白黒の２値の画像データを要求する。また、第４フィールドＤＡ０５に「０１」が設定された第１コマンドは、多階調の画像データを要求する。さらに、第４フィールドＤＡ０５に「１０」が設定された第１コマンドは、ＲＧＢのカラーの画像データを要求する。

第５フィールドＤＡ０６に「０」が設定された第１コマンドは、解像度の高い画像データを要求する。また、第５フィールドＤＡ０６に「１」が設定された第１コマンドは、解像度の低い画像データを要求する。

また、上記第１コマンドには、図８に示したデータ以外に、スキャンを行う領域（光センサ回路１４４を駆動する画素の領域）の指定、スキャンを行うタイミング、バックライト１７９の点灯のタイミングなどが記述されている。

なお、画像処理エンジン２８０は、第１コマンドの内容を解析し、当該解析の結果に従ったデータ（つまり、応答データ）を本体装置１０１に送り返す。

図９は、種別「００１」のコマンド（以下、「第２コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第２コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。

ＣＰＵ１１０は、ヘッダＤＡ０１に、コマンドの種別（「００１」）、コマンドの送信先等を書き込む。ＣＰＵ１１０は、第１フィールドＤＡ０２に、番号が「１」の表示要求の値を書き込む。ＣＰＵ１１０は、第２フィールドＤＡ０３に、番号が「２」の個数／種類に関する情報を書き込む。ＣＰＵ１１０は、第３フィールドＤＡ０４に、番号が「３」の表示範囲の値を書き込む。ＣＰＵ１１０は、第４フィールドＤＡ０５に、番号が「４」の画像データに関する情報を書き込む。

第１フィールドＤＡ０２に「００１」が設定された第２コマンドは、液晶パネル２４０（サブ画面）に画像を表示させることを画像処理エンジン２８０に対して要求する。また、第１フィールドＤＡ０２に「０１０」が設定された第２コマンドは、液晶パネル２４０にアイコンを表示させることを画像処理エンジン２８０に対して要求する。さらに、第１フィールドＤＡ０２に「０１１」が設定された第２コマンドは、液晶パネル２４０に手書領域を表示させることを画像処理エンジン２８０に対して要求する。

第２フィールドＤＡ０３には、液晶パネル２４０に表示させる画像の個数、および手書言語の種類を指定する番号が格納される。画像処理エンジン２８０は、当該画像の個数、または言語の種類に応じた処理を行う。

第３フィールドＤＡ０４に「０１」が設定された第２コマンドは、液晶パネル２４０における表示範囲を座標にて指定することを、画像処理エンジン２８０に対して要求する。また、第３フィールドＤＡ０４に「１０」が設定された第２コマンドは、液晶パネル２４０における表示範囲を表示領域の全体にすることを、画像処理エンジン２８０に対して要求する。

第４フィールドＤＡ０５には、液晶パネル２４０に表示させる画像データと、当該画像データを表示する位置情報とが格納される。画像処理エンジン２８０は、当該位置情報で特定される位置に当該画像データを表示する処理を行う。

図１０は、種別「０１０」のコマンド（以下、「第３コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第３コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ２１０は、第３コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ１１０，２１０は、ヘッダＤＡ０１に、コマンドの種別（「０１０」）、コマンドの送信先等を書き込む。ＣＰＵ１１０，２１０は、第１フィールドＤＡ０２に、番号が「１」のＯＳ（Operating System）処理要求の値を書き込む。ＣＰＵ１１０，２１０は、第２フィールドＤＡ０３に、番号が「２」のＯＳ情報の値を書き込む。

第１フィールドＤＡ０２に「０１」または「１０」が設定された第３コマンドは、第２ユニット１００２から第１ユニット１００１に送信される。

第１フィールドＤＡ０２に「０１」が設定された第３コマンドは、第１ユニット１００１に対して、当該第１ユニット１００１（メイン装置）のＯＳの種類を示した情報の送信を要求する。また、第１フィールドＤＡ０２に「１０」が設定された第３コマンドは、第１ユニット１００１に対して、ＯＳ情報にて指定されたＯＳの起動を要求する。

第２フィールドＤＡ０３に「０００」、「００１」、または「０１０」が設定された第３コマンドは、第２ユニット１００２から第１ユニット１００１に送信される。

第２フィールドＤＡ０３に「０００」が設定された第３コマンドは、第１ユニット１００１におけるＯＳの起動を要求しない。また、第２フィールドＤＡ０３に「００１」が設定された第３コマンドは、第２ユニット１００２が第１ＯＳの起動を選択したことを示す。さらに、第２フィールドＤＡ０３に「０１０」が設定された第３コマンドは、第２ユニット１００２が第２ＯＳの起動を選択したことを示す。

図１１は、種別「０１１」のコマンド（以下、「第４コマンド」と称する）を説明するための図である。ＣＰＵ２１０は、第４コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ２１０は、ヘッダＤＡ０１に、コマンドの種別（「０１１」）、コマンドの送信先等を書き込む。ＣＰＵ２１０は、第１フィールドＤＡ０２に、番号が「１」の起動アプリに関する情報を書き込む。ＣＰＵ２１０は、第２フィールドＤＡ０３に、番号が「２」の起動時情報を書き込む。

第１フィールドＤＡ０２には、第１ユニット１００１において起動させるアプリを指定する情報が格納される。第２フィールドＤＡ０３には、起動設定時に用いる情報、および起動後に用いる情報が格納される。

図１２は、種別「１００」のコマンド（以下、「第５コマンド」と称する）を説明するための図である。ＣＰＵ２１０は、第５コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ２１０は、ヘッダＤＡ０１に、コマンドの種別（「１００」）、コマンドの送信先等を書き込む。ＣＰＵ２１０は、第１フィールドＤＡ０２に、番号が「１」の受信要求に関する情報を書き込む。ＣＰＵ２１０は、第２フィールドＤＡ０３に、番号が「２」の個数に関する情報を書き込む。ＣＰＵ２１０は、第３フィールドＤＡ０４に、番号が「３」のファイルに関する情報を書き込む。

第１フィールドＤＡ０２に「０１」が設定された第５コマンドは、第１ユニット１００１に対してファイルの受信を要求する。また、第２フィールドＤＡ０３には、第２ユニット１００２が第１ユニット１００１に送信するファイルの個数が格納される。さらに、第３フィールドＤＡ０４には、第２ユニット１００２が第１ユニット１００１に送信するファイルが格納される。

図１３は、種別「１０１」のコマンド（以下、「第６コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第６コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ２１０は、第６コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ１１０，２１０は、ヘッダＤＡ０１に、コマンドの種別（「１０１」）、コマンドの送信先等を書き込む。ＣＰＵ１１０，２１０は、第１フィールドＤＡ０２に、番号が「１」の通信種別の値を書き込む。ＣＰＵ１１０，２１０は、第２フィールドＤＡ０３に、番号が「２」の接続先の値を書き込む。ＣＰＵ１１０，２１０は、第３フィールドＤＡ０４に、番号が「３」の転送先の値を書き込む。ＣＰＵ１１０，２１０は、第４フィールドＤＡ０５に、番号が「４」の信号強度の取得タイミングの値を書き込む。

第１フィールドＤＡ０２に「００１」が設定された第６コマンドは、相手側の装置に対して赤外線通信を行なうことを要求する。また、第１フィールドＤＡ０２に「０１０」が設定された第６コマンドは、相手側の装置に対してＢｌｕｅｔｏｏｔｈ（登録商標）による無線通信を行なうことを要求する。さらに、第１フィールドＤＡ０２に「０１１」が設定された第６コマンドは、相手側の装置に対してＬＡＮ通信を行なうことを要求する。

第２フィールドＤＡ０３に「０００」が設定された第６コマンドは、通信の接続先を指定する情報を有していないことを示す。

また、第２フィールドＤＡ０３に「００１」が設定された第６コマンドは、第１ユニット１００１によって、当該第１ユニット１００１の接続先の装置に送信される。そのような第６コマンドは、第１ユニット１００１が接続する装置に関する情報の送信を要求する。

さらに、第２フィールドＤＡ０３に「０１０」が設定された第６コマンドは、第２ユニット１００２によって、当該第２ユニット１００２の接続先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２が接続する第１ユニット１００１に関する情報の送信を要求する。

また、第２フィールドＤＡ０３に「０１１」が設定された第６コマンドは、第２ユニット１００２によって、当該第２ユニット１００２の接続先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２に関する情報を接続先の機器情報として設定することを要求する。

さらに、第２フィールドＤＡ０３に「１００」が設定された第６コマンドは、第１ユニット１００１によって、当該第１ユニット１００１の接続先の装置（たとえば、第２ユニット１００２）に送信される。そのような第６コマンドは、第１ユニット１００１に関する情報を接続先の機器情報として設定することを要求する。

第３フィールドＤＡ０４に「０００」が設定された第６コマンドは、データ（たとえば、ファイル）の転送先を指定する情報を有していないことを示す。

また、第３フィールドＤＡ０４に「００１」が設定された第６コマンドは、第１ユニット１００１によって、データ転送先の装置に送信される。そのような第６コマンドは、データ転送先の装置に関する情報の送信を要求する。

さらに、第３フィールドＤＡ０４に「０１０」が設定された第６コマンドは、第２ユニット１００２によって、データ転送先の第１ユニット１００１に送信される。そのような第６コマンドは、データ転送先の第１ユニット１００１に関する情報の送信を要求する。

また、第３フィールドＤＡ０４に「０１１」が設定された第６コマンドは、第２ユニット１００２によって、データ転送先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２に関する情報をデータ転送元の機器情報として設定することを要求する。

さらに、第３フィールドＤＡ０４に「１００」が設定された第６コマンドは、第１ユニット１００１によって、データ転送先の装置（たとえば、第２ユニット１００２）に送信される。そのような第６コマンドは、第１ユニット１００１に関する情報をデータ転送元の機器情報として設定することを要求する。

第４フィールドＤＡ０５に「００」、「０１」、「１０」、または「１１」が設定された第６コマンドは、第１ユニット１００１によって、第２ユニット１００２に送信される。

第４フィールドＤＡ０５に「００」が設定された第６コマンドは、第２ユニット１００２に対して、信号強度を示したデータの送信を要求しない。また、第４フィールドＤＡ０５に「０１」が設定された第６コマンドは、信号強度検出部２９７に対して、そのときの信号強度を示したデータの送信を要求する。さらに、第４フィールドＤＡ０５に「１０」が設定された第６コマンドは、信号強度に変化があったときの信号強度を示したデータの送信を要求する。また、第４フィールドＤＡ０５に「１１」が設定された第６コマンドは、一定周期毎に信号強度を示したデータの送信を要求する。

図１４は、応答データの概略構成を示した図である。応答データは、第１コマンド（センシングコマンド）の内容に応じたデータである。

第１コマンドが本体装置１０１から第２ユニット１００２に送信された場合、ＣＰＵ２１０は、応答データを、表示装置１０３から第１ユニット１００１に送信する。また、第１コマンドが本体装置１０１から第１ユニット１００１の表示装置１０２に送信された場合、画像処理エンジン１８０は、応答データを、画像処理エンジン１８０から本体装置１０１に送信する。なお、以下では、第１コマンドが本体装置１０１から第２ユニット１００２に送信された場合を例に挙げて説明する。

図１４を参照して、応答データは、ヘッダのデータ領域ＤＡ１１と、座標を示すデータ領域ＤＡ１２と、時刻を示すデータ領域ＤＡ１３と、画像を示すデータ領域ＤＡ１４とを含む。ここで、座標を示すデータ領域ＤＡ１２には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン２８０のタイマ２８２から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン２８０により処理がされた後の画像データ（つまり、スキャンデータ）が書き込まれる。

図１５は、指９００をスキャンすることにより得られた画像（つまり、スキャン画像）を示した図である。図１５を参照して、太実線で囲まれた領域Ｗ１の画像が全体画像であり、破線で囲まれた領域Ｐ１の画像が部分画像である。また、太線で示した十字の中心点Ｃ１が、中心座標となる。

本実施の形態では、矩形の領域であって、かつセンサ信号線ＳＳｊからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素（つまり、予め定められた階調または予め定められた輝度以上の画素）全てを含む領域を、部分画像の領域としている。

また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点（つまり図心）との距離とに基づき、重み付け処理を行うことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。

ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。

第１コマンドのデータ種別を示すデータ領域に「００１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に上記中心座標の値を書き込む。この場合、画像処理エンジン２８０は、画像を示すデータ領域ＤＡ１４には画像データを書き込まない。画像処理エンジン２８０は、上記中心座標の値の書き込みを行なった後、当該中心座標の値を含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値を含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「００１」が設定されている場合には、第１コマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。

また、第１コマンドのデータ種別を示すデータ領域に「０１０」が設定されている場合には、画像処理エンジン２８０は、画像を示すデータ領域ＤＡ１４に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン２８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン２８０は、上記スキャン結果が変化した部分画像の画像データの書き込みを行なった後、当該部分画像の画像データを含む応答データを本体装置１０４に送る。本体装置１０４は、当該部分画像の画像データを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１０」が設定されている場合には、第１コマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。

なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指９００などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。

また、第１コマンドのデータ種別を示すデータ領域に「０１１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン２８０は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値と当該部分画像の画像データとを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１１」が設定されている場合には、第１コマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。

また、第１コマンドのデータ種別を示すデータ領域に「１００」が設定されている場合には、画像処理エンジン２８０は、図１４に示した応答データの画像を示すデータ領域ＤＡ１４に、全体画像の画像データを書き込む。この場合、画像処理エンジン２８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン２８０は、上記全体画像の画像データの書き込みを行なった後、当該全体画像の画像データを含む応答データを本体装置１０４に送る。本体装置１０４は、当該全体画像の画像データを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「１００」が設定されている場合には、第１コマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。

また、第１コマンドのデータ種別を示すデータ領域に「１０１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４に全体画像の画像データを書き込む。その後、画像処理エンジン２８０は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値と当該全体画像の画像データとを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「１０１」が設定されている場合には、第１コマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。

＜構成の第１の変形例について＞
ところで、液晶パネル１４０の構成は、図３に示した構成に限定されるものではない。以下では、図３とは異なる態様の液晶パネルについて説明する。

図１６は、上記異なる態様である光センサ内蔵液晶パネル１４０Ａの回路図である。図１６を参照して、光センサ内蔵液晶パネル１４０Ａ（以下、液晶パネル１４０Ａと称する）は、１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含んでいる。このように液晶パネル１４０Ａが１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を備える点において、液晶パネル１４０Ａは、１画素内に１つの光センサ回路を備える液晶パネル１４０と異なる。なお、光センサ回路１４４の構成と、３つの各光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）との構成は同じである。

また、１画素内における３つのフォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれ、カラーフィルタ１５３ｒ、カラーフィルタ１５３ｇ、カラーフィルタ１５３ｂに対向する位置に配されている。それゆえ、フォトダイオード１４５ｒは赤色の光を受光し、フォトダイオード１４５ｇは緑色の光を受光し、フォトダイオード１４５ｂは青色の光を受光する。

また、液晶パネル１４０は１画素内において１つの光センサ回路１４４しか含まないため、１画素内に配設されるＴＦＴ１４７用のデータ信号線は、センサ信号線ＳＳｊとセンサ信号線ＳＤｊとの２本であった。しかしながら、液晶パネル１４０Ａは１画素内において３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含むため、１画素内に配設されるＴＦＴ（１４７ｒ，１４７ｇ，１４７ｂ）用のデータ信号線は６本となる。

具体的には、カラーフィルタ１５３ｒに対向する位置に配されたフォトダイオード１４５ｒのカソードに接続されたＴＦＴ１４７ｒに対応して、センサ信号線ＳＳＲｊとセンサ信号線ＳＤＲｊとが配設される。また、カラーフィルタ１５３ｇに対向する位置に配されたフォトダイオード１４５ｇのカソードに接続されたＴＦＴ１４７ｇに対応して、センサ信号線ＳＳＧｊとセンサ信号線ＳＤＧｊとが配設される。さらに、カラーフィルタ１５３ｂに対向する位置に配されたフォトダイオード１４５ｂのカソードに接続されたＴＦＴ１４７ｂに対応して、センサ信号線ＳＳＢｊとセンサ信号線ＳＤＢｊとが配設される。

このような液晶パネル１４０Ａにおいては、バックライト１７９から照射された白色光は、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過し、液晶パネル１４０Ａの表面では、赤、緑、および青とが混ざり白色光となる。ここで、スキャン対象物により白色光が反射されると、スキャン対象物の表面の色素に白色光の一部が吸収され、また一部が反射される。そして、反射された光は、再度、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過する。

この際、カラーフィルタ１５３ｒは赤色の波長の光を透過し、フォトダイオード１４５ｒは、当該赤色の波長の光を受光する。また、カラーフィルタ１５３ｇは緑色の波長の光を透過し、フォトダイオード１４５ｇは、当該緑色の波長の光を受光する。また、カラーフィルタ１５３ｂは青色の波長の光を透過し、フォトダイオード１４５ｂは、当該青色の波長の光を受光する。つまり、スキャン対象物によって反射された光は３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）によって３原色（Ｒ，Ｇ，Ｂ）に色分解され、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれに対応した色の光を受光する。

スキャン対象物の表面の色素に白色光の一部が吸収されると、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）の受光量が各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）で異なることになる。このため、センサ信号線ＳＳＲｊとセンサ信号線ＳＳＧｊとセンサ信号線ＳＳＢｊとの出力電圧は互いに異なる。

それゆえ、各出力電圧に応じて、Ｒの階調とＧの階調とＢの階調とを画像処理エンジン１８０が決定することにより、画像処理エンジン１８０はＲＧＢのカラー画像を本体装置１０１へ送ることができる。

以上述べたように、電子機器１００が液晶パネル１４０Ａを備えた構成とすることにより、スキャン対象物をカラーでスキャンできることになる。

次に、図１７を参照して、前述のスキャンの方法（つまり、図６における反射像をスキャンする方法）とは異なるスキャンの方法について説明する。

図１７は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。同図に示すとおり、外光の一部は、指９００によって遮られる。それゆえ、指９００と接触している液晶パネル１４０の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指９００の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。

ここで、バックライト１７９を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路１４４は、液晶パネル１４０の表面に対する指９００の位置に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９を点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって外光が遮られることにより得られる像（以下、影像とも称する）をスキャンすることができる。

さらに、表示装置１０２を、バックライト１７９を点灯させてスキャンを行った後に、バックライト１７９を消灯させて再度スキャンを行う構成としてもよい。あるいは、表示装置１０２を、バックライト１７９を消灯させてスキャンを行った後に、バックライト１７９を点灯させて再度スキャンを行う構成としてもよい。

この場合には、２つのスキャン方式を併用することになるため、２つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。

＜表示装置について＞
表示装置１０３の動作は、表示装置１０２の動作と同様、本体装置１０１からのコマンド（たとえば、第１コマンド）に応じて制御される。表示装置１０３は表示装置１０２と同様な構成を有する。それゆえ、表示装置１０３が表示装置１０２と同じコマンドを本体装置１０１から受け付けた場合、表示装置１０３は表示装置１０２と同様の動作を行う。このため、表示装置１０３の構成や動作についての説明は繰り返さない。

なお、本体装置１０１は、表示装置１０２と表示装置１０３とに対して、命令が異なるコマンドを送ることができる。この場合、表示装置１０２と表示装置１０３とは別々の動作を行う。また、本体装置１０１は、表示装置１０２および表示装置１０３のいずれかに対して、コマンドを送ってもよい。この場合、一方の表示装置のみがコマンドに応じた動作を行う。また、本体装置１０１が、表示装置１０２と表示装置１０３とに命令が同じコマンドを送ってもよい。この場合、表示装置１０２と表示装置１０３とは、同じ動作を行う。

なお、表示装置１０２の液晶パネル１４０のサイズと表示装置１０３の液晶パネル２４０のサイズとは、同じであってもよいし又は異なっていてもよい。また、液晶パネル１４０の解像度と液晶パネル２４０の解像度とは、同じであってもよいし又は異なっていてもよい。

＜構成の第２の変形例について＞
本実施の形態では、電子機器１００が、液晶パネル１４０と液晶パネル２４０といったそれぞれに光センサを内蔵した液晶パネルを備える構成について説明するが、一方の液晶パネルのみが光センサを内蔵している構成であってもよい。

図１８は、電子機器１３００のハードウェア構成を表すブロック図である。電子機器１３００は、電子機器１００と同様、第１の筐体１００Ａと、第２の筐体１００Ｂとを含む。また、図１８を参照して、電子機器１３００は、第１ユニット１００１Ａと、第２ユニット１００２とを含む。第１ユニット１００１Ａは、本体装置１０１と、表示装置１０２Ａとを含む。第２ユニット１００２は、本体装置１０４と、表示装置１０３とを含む。

表示装置１０２Ａは、光センサを内蔵しない液晶パネル（つまり、表示機能のみを有する液晶パネル）を含む。電子機器１３００は、第１ユニット１００１Ａが光センサを内蔵しない液晶パネルを含む点で、第１ユニット１００１が光センサを内蔵した液晶パネル２４０を含む電子機器１００と異なる。このような電子機器１３００は、第２ユニット１００２の表示装置１０３を用いて上述したセンシングを行なう。

また、第１ユニット１００１は、光センサを内蔵した液晶パネル１４０の代わりに、たとえば抵抗膜方式や静電容量方式のタッチパネルを備えてもよい。

また、本実施の形態では、表示装置１０２がタイマ１８２を備え、表示装置１０３がタイマ２８２を備える構成として説明するが、表示装置１０２と表示装置１０３とが１つのタイマを共有する構成としてもよい。

また、本実施の形態では、電子機器１００を折畳型の機器として説明するが、電子機器１００は必ずしも折畳型に限定されるものではない。たとえば、電子機器１００は、第１の筐体１００Ａが第２の筐体１００Ｂに対してスライドする構成のスライド式の機器であってもよい。

本実施の形態に係る電子機器１００は、上記のように構成されているため、第２ユニット１００２が、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１に着脱自在になっている。

そして、本実施の形態に係る電子機器１００は、たとえば電源投入時において、以下のような機能を発揮することができる。まず、ユーザが第１ユニット１００１の電源スイッチ１９１を押下すると、第１ユニット１００１は電源回路１９２からの電力を利用することによってＢＩＯＳ（Basic Input/Output System）を起動させる。

第２ユニット１００２は、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１から電力を取得する。第２ユニット１００２は、当該電力を利用することによって、第１ユニット１００１との間でデータを送受信することができる。このとき、第２ユニット１００２のＣＰＵ２１０は、ＵＳＢコネクタ１９４，２９４からの電力を使用することによって、液晶パネル２４０にＯＳ（Operation System）の種類を選択可能に表示させることができる。

ユーザは、液晶パネル２４０を介して、起動したいＯＳを選択する。ＣＰＵ２１０は、ユーザの選択に応じ、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１へと、起動すべきＯＳを指定するコマンド（たとえば、図１０に示す「第１のＯＳ」コマンド）を送信する。第１ユニット１００１は、当該コマンドに応じて、ＯＳを起動する。

また、たとえば、第２ユニット１００２は、アンテナ２９５を介して外部の携帯電話などとの間でデータの送受信を行う。第２ユニット１００２のＣＰＵ２１０は、アンテナ２９５を介して、外部の携帯電話から写真画像データや対応するサムネイルデータを取得して、当該写真画像データや対応するサムネイルデータをＲＡＭ２７１などに格納する。ＣＰＵ２１０は、ＲＡＭ２７１からサムネイルデータを読み出して、液晶パネル２４０に写真のサムネイル画像を選択可能に表示させる。

そして、外部からの選択命令に応じて、ＣＰＵ２１０は、液晶パネル２４０に写真画像を表示させる。あるいは、ＣＰＵ２１０は、ＵＳＢコネクタ２９４を介して、写真画像を液晶パネル１４０あるいは表示装置１０２Ａに表示させる。

＜機能的構成＞
図１９は、本実施の形態に係る電子機器１００の機能的構成をブロック図形式で示す図である。電子機器１００は、すでに説明したとおり、第１ユニット１００１と、第２ユニット１００２とを含む。以下、図１９を参照して、電子機器１００の機能的構成について説明する。

第１ユニット１００１は、表示部３１０と、入力部３２０と、記憶部３３０と、インターフェース部３４０と、制御部３５０とを含む。第１ユニット１００１は、電子機器１００の主要な動作を行なう。

表示部３１０は、第１ユニット１００１内部の情報を外部に表示する。入力部３２０は、外部からの指示を受け付ける。本実施の形態では、液晶パネル１４０が、表示部３１０および入力部３２０の機能を兼ね備える。ただし、表示部３１０としては、他の表示装置、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）などのディスプレイを用いてもよい。また、操作キー１７７も入力部３２０の機能を果たす。

記憶部３３０は、第１ユニット１００１の表示部３１０（液晶パネル１４０）に表示される画面の基となる表示データ３３３、プログラム３３４、動作パラメータ３３５などの情報を格納する。記憶部３３０は、一般に、複数のプログラム３３４を格納する。ここでのプログラム３３４としては、汎用的なアプリケーションソフト、例えば、ワープロやＷｅｂブラウザなどがある。

動作パラメータ３３５は、プログラム３３４の動作条件を与えるための情報である。動作パラメータ３３５としては、例えば、マルチウィンドウのプログラム３３４において、操作キー１７７の押下などに応じて動作するアクティブなウィンドウを示すデータがある。

インターフェース部３４０は、第２ユニット１００２側のインターフェース部４４０との間で情報の授受を行なう。本実施の形態では、第１ユニット１００１と第２ユニット１００２が直接接続されている場合、ＵＳＢコネクタ１９４がインターフェース部３４０として機能する。第１ユニット１００１と第２ユニット１００２が直接接続されていない場合、アンテナ１９５がインターフェース部３４０として機能する。ただし、インターフェース部３４０による情報の授受方法は、これに限られるわけではない。

制御部３５０は、入力部３２０からの指示等に基づいて、表示部３１０、記憶部３３０、および、インターフェース部３４０の動作を制御する。制御部３５０は、入力処理部３５２と、表示制御部３５６と、プログラム実行部３５８とを含む。本実施の形態では、ＣＰＵ１１０および画像処理エンジン１８０が制御部３５０に相当する。ただし、ＣＰＵ１１０の各機能は、専用回路などのハードウェアによって実現されてもよい。また、画像処理エンジン１８０の各機能は、ソフトウェアを実行するＣＰＵ１１０によって実現されてもよい。すなわち、制御部３５０の各機能は、ハードウェアによって実現されてもよいし、ソフトウェアによって実現されてもよい。

入力処理部３５２は、入力部３２０から受け取った信号を、プログラム実行部３５８に送信する。表示制御部３５６は、記憶部３３０に格納される表示データ３３３に基づいて、表示部３１０の動作を制御する。プログラム実行部３５８は、入力部３２０から受け付けた指示などに基づいて、プログラム３３４を実行する。具体的には、ＲＡＭ１７１をワーキングメモリとして用いて、プログラム３３４を実行するＣＰＵ１１０がプログラム実行部３５８に相当する。

第２ユニット１００２は、表示部４１０と、入力部４２０と、記憶部４３０と、インターフェース部４４０と、制御部４５０と、タイマ２７３とを含む。

表示部４１０は、第２ユニット１００２内部の情報を外部に表示する。入力部４２０は、外部からの指示を受け付ける。本実施の形態では、光センサ内蔵液晶パネル２４０、左クリックキー２４１、センターキー２４２、および、右クリックキー２４３が入力部４２０に相当する。また、本実施の形態では、光センサ内蔵液晶パネル２４０が、表示部４１０および入力部４２０（パネル入力部４２２）の機能を兼ね備える。ただし、表示部４１０としては、他の表示装置、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）などのディスプレイを用いてもよい。また、入力部４２０としては、光センサ内蔵液晶パネル２４０に限られず、入力位置を認識する機能を有するデバイス（タブレット）を用いることができる。例えば、入力部４２０として、静電容量型のタッチパネルを用いてもよい。このように表示部４１０と入力部４２０との機能を実現する構成物を、「表示一体型タッチパッド」とよぶ。

記憶部４３０は、入力データ４３１、表示データ４３３、プログラム４３４、動作パラメータ４３５、時刻データ４３６、およびモードデータ４３７などの情報を格納する。

入力データ４３１は、入力部４２０が受け付けた入力に基づき作成されたデータである。特に、本実施の形態においては、入力データ４３１は、入力の履歴に対応する入力履歴４３２を含む。入力履歴４３２は、手書き文字データ４３２ａおよびイラストデータ４３２ｂを含む。手書き文字データ４３２ａおよびイラストデータ４３２ｂの詳細は後述する。

表示データ４３３は、第２ユニット１００２の表示部４１０（液晶パネル２４０）に表示される画面の基となる。表示データ４３３には、記憶部４３０に格納されている画像データ（壁紙など）や、プログラム４３４の実行にともない作成された画像データが含まれる。

本実施の形態においては、記憶部４３０は、複数のプログラム４３４を格納する。プログラム４３４は、液晶パネル２４０に動作画面を表示するアプリケーションソフト（例えば、手書き文字入力ソフトや、手描きイラスト入力ソフトや、電卓ソフト）を含む。プログラム４３４の詳細については、後述する。

動作パラメータ４３５は、第１ユニット１００１における動作パラメータ３３５と同様、プログラム３３４の動作条件を与えるための情報である。特に、本実施の形態では、動作パラメータ４３５は、プログラム４３４によって作成された所定のイベントからの経過時間のカウント値を含む。

時刻データ４３６は、タイマ２７３で測定された時刻を表わす。時刻データ４３６は、時間経過に応じて所定の動作を行なうプログラム４３４の実行の際などに、利用される。

モードデータ４３７は、入力処理部４５２の動作モードを表わす情報である。入力処理部４５２の動作モードは複数あり、モードデータ４３７は、現在の動作モードを表わす。具体的には、例えば、所定の記憶領域に格納されたフラグを、モードデータ４３７とみなせる。なお、入力処理部４５２の動作モードの詳細については、後述する。

インターフェース部４４０は、第１ユニット１００１側のインターフェース部３４０との間で情報の授受を行なう。本実施の形態では、第１ユニット１００１と第２ユニット１００２が直接接続されている場合、ＵＳＢコネクタ２９４がインターフェース部４４０として機能する。第１ユニット１００１と第２ユニット１００２が直接接続されていない場合、アンテナ２９５がインターフェース部４４０として機能する。ただし、インターフェース部４４０による情報の授受方法は、これに限られるわけではない。

制御部４５０は、入力部４２０が受け付けた指示等に基づいて、表示部４１０、記憶部４３０、および、インターフェース部４４０の動作を制御する。制御部４５０は、入力処理部４５２と、表示制御部４５６と、プログラム実行部４５８とを含む。

入力処理部４５２は、入力部４２０からの信号を、プログラム実行部４５８またはインターフェース部４４０に送信する。入力処理部４５２は、パネル入力処理部４５３と、モード設定部４５４とを含む。

パネル入力処理部４５３は、パネル入力部４２２からの信号を処理する。例えば、パネル入力処理部４５３は、信号の履歴に基づいて、入力履歴４３２（手書き文字データ４３２ａやイラストデータ４３２ｂなど）を作成する。パネル入力処理部４５３の動作の詳細については後述する。

モード設定部４５４は、入力部４２０からの所定の信号（センターキー２４２の押下による信号など）に基づいて、パネル入力処理部４５３の動作モードを設定する。モード設定部４５４の動作の詳細については後述する。

表示制御部４５６は、表示データ４３３に基づいて、表示部４１０の動作を制御する。表示制御部４５６は、例えば、表示部４１０に、プログラム４３４の実行の結果、作成された画面（動作画面）などを表示する。

プログラム実行部４５８は、入力部４２０から受け付けた指示などに基づいて、プログラム４３４を実行する。具体的には、ＲＡＭ２７１をワーキングメモリとして用いて、プログラム４３４を実行するＣＰＵ２１０がプログラム実行部４５８に相当する。

＜動作の概略＞
（マウスモードとタブレットモード）
電子機器１００は、液晶パネル２４０への指示、すなわち、液晶パネル２４０への物体（指９００やスタイラス９５０など）の接触に応じて、アプリケーションの動作のための指示を出す。電子機器１００（より特定的には、パネル入力処理部４５３）には、「マウスモード」と「タブレットモード」との２つの動作モードがある。電子機器１００は、動作モードに応じて動作する。

電子機器１００は、マウスモードにおいては、液晶パネル２４０への入力に応じてプログラム３３４を実行し、実行されたプログラム３３４が作成した画像（以下、「プログラムの動作画面」とよぶ）を液晶パネル１４０に表示する。

具体的には、電子機器１００は、マウスモードにおいて、液晶パネル２４０への入力位置の変化に応じて、リアルタイムに、液晶パネル１４０の動作画面中のカーソルを移動する。なお、ここで、「カーソル」とは、文字や、図、表示オブジェクトなどの入力位置を指し示す表示のことを指す。

また、電子機器１００は、マウスモードにおいて、液晶パネル２４０への所定の入力に応じて、第１ユニット１００１のプログラム３３４に所定の動作を指示するコマンドを作成する。例えば、電子機器１００は、液晶パネル２４０がクリックやダブルクリック、ドラッグなどに相当する入力を受け付けたと判断すると、入力に応じて、プログラム３３４を実行する。この際に電子機器１００が行なう動作は、プログラム３３４によって決まる。

すなわち、電子機器１００がマウスモードにあるとき、ユーザは、液晶パネル２４０をタッチパッドとして使うことができる。以下では、簡単のため、カーソル位置の移動および液晶パネル２４０への所定の入力に応じたプログラム３３４の動作を総称して、「マウス動作」と呼ぶことにする。

タブレットモードにおいては、電子機器１００は、液晶パネル２４０への入力に応じてプログラム４３４（またはプログラム３３４）を実行し、実行されたプログラムの動作画面を液晶パネル２４０に表示する。また、電子機器１００は、液晶パネル２４０に動作画面が表示されるプログラムに対するコマンドを作成する。例えば、液晶パネル２４０に操作ボタンが表示されている場合、電子機器１００は、プログラムを実行し、タッチされた操作ボタンに応じた動作を行なう。すなわち、電子機器１００がタブレットモードにあるとき、ユーザは、液晶パネル２４０をタッチスクリーンとして使うことができる。

電子機器１００は、動作モードを、所定の指示に基づいて、切り替える。本実施の形態では、電子機器１００は、センターキー２４２の押下に応じて、動作モードを切り替える。

ただし、動作モードの切替指示は、センターキー２４２の押下に限られない。電子機器１００は、センターキー２４２以外の操作キー１７７の押下に応じて動作モードを切り替えてもよい。また、電子機器１００は、液晶パネル１４０または液晶パネル２４０に表示される操作ボタンの選択に応じて、動作モードを切り替えてもよい。また、電子機器１００は、電子機器の動作状態（起動処理中、スリープや休止状態からの復帰中など）によっても動作モードを切り替える。この点については、後で詳しく説明する。

マウスモードおよびタブレットモードでの液晶パネル１４０および液晶パネル２４０の表示について、図２０を参照して説明する。図２０は、マウスモードおよびタブレットモードのそれぞれにおいて電子機器が表示する画面を説明するための図である。

マウスモードにおいて、電子機器１００は、液晶パネル１４０にワープロソフトやＷｅｂブラウザなどのソフトの動作画面５００を表示する。画面５００は、現在広く普及している（すなわち１つのディスプレイを持つ）パーソナルコンピュータによる表示画面と同様なものである。ただし、図２０においては、簡単のため、画面５００の中身は描いていない。また、画面５００は、この具体例に限られるわけではない。

画面５００は、カーソル５１０を含む。ここでは、カーソル５１０は、画面５００上を自由に移動可能なポインタ（マウスポインタ）であるとする。ただし、カーソル５１０は、ポインタに限られない。カーソル５１０は、文字や表示オブジェクトの入力位置を指し示す表示であればよい。また、カーソル５１０の表示形態は、図２０に示すもの（矢印）に限られるわけではない。また、電子機器１００は、カーソル５１０の表示形態を、その指し示す位置によって変えてもよい。

また、マウスモードにおいて、電子機器１００は、液晶パネル２４０に画面６００を表示する。以下、マウスモード時に液晶パネル２４０に表示される画面を「マウス画面」とも呼ぶ。図２０を参照して、画面６００は、ガイダンス表示６１０を含む。

ガイダンス表示６１０は、左クリックキー２４１、センターキー２４２、および右クリックキー２４３が押下されたときの電子機器１００の動作の説明を表わすための表示である。ガイダンス表示６１０は、左ガイダンス表示６１２と、センターガイダンス表示６１４と、右ガイダンス表示６１６とを含む。

左ガイダンス表示６１２と、センターガイダンス表示６１４と、右ガイダンス表示６１６とは、それぞれ、左クリックキー２４１、センターキー２４２、および右クリックキー２４３が押下されたときの電子機器１００の動作を説明する文字および／または記号を含む（ただし、そのような文字および記号は、図２０には示していない）。

なお、マウス画面は、左ガイダンス表示６１２、センターガイダンス表示６１４および右ガイダンス表示６１６を、常には表示していなくてもよい。本実施の形態では、電子機器１００は、対応するキーが無効のときは、左ガイダンス表示６１２、センターガイダンス表示６１４および右ガイダンス表示６１６を液晶パネル２４０に表示しない。

マウス画面の１つの具体例を図２１に示す。図２１を参照して、画面６００は、左ガイダンス表示６１２と、センターガイダンス表示６１４と、右ガイダンス表示６１６とを含む。

図２１では、左ガイダンス表示６１２は、文字「左クリック」を含む。この表示がなされているときは、電子機器１００は、左クリックキー２４１の押下に応じて、左クリック動作（決定処理など）を行なう。左クリック動作は、起動中のプログラムによって決まる。

図２１では、センターガイダンス表示６１４は、文字「タッチスクリーン操作」を含む。この表示がなされるのは、電子機器１００がマウスモードにあるときである。この表示がなされているときは、電子機器１００は、センターキー２４２の押下に応じて、タブレットモードに移行する。

なお、電子機器１００は、タブレットモードにあるときは、センターガイダンス表示６１４に文字「マウス操作」を表示する。この表示がなされているときは、電子機器１００は、センターキー２４２の押下に応じて、マウスモードに移行する。

右ガイダンス表示６１６は、文字「右クリック」を含む。これは、右クリックキー２４３の押下に応じて、電子機器１００が右クリック動作（メニューの表示など）を行なうことを示している。右クリック動作は、起動中のプログラムによって決まる。

なお、本実施の形態では、マウス画面は、ユーザが設定できるものとする。ユーザは、電子機器１００に格納した写真などの画像をマウス画面の壁紙に設定できてもよい。また、壁紙は、時計やカレンダーなどユーザ操作を必要としないアクセサリの動作画面であってもよい。また、壁紙は起動中や省電力状態からの復帰中など電子機器１００の状態によっても自動的に変わり得る。また、ユーザがマウス画面を設定できない場合も、マウス画面は、図２１に示すものに限られるものではない。

図２０に戻って、タブレットモード時の画面について説明する。タブレットモードにおいて、液晶パネル１４０は、ワープロソフトやＷｅｂブラウザなどのソフトの動作画面７００を表示する。動作画面７００の内容は、動作画面５００と同様である。

また、タブレットモードにおいて、電子機器１００は、液晶パネル２４０に画面８００を表示する。以下、タブレットモード時に液晶パネル２４０に表示される画面を「タブレット画面」とも呼ぶ。図２０を参照して、画面８００は、ガイダンス表示８１０および操作ボタン表示８２０を含む。

ガイダンス表示８１０は、マウスモードにおけるガイダンス表示６１０と同様に、左ガイダンス表示８１２と、センターガイダンス表示８１４と、右ガイダンス表示８１６とを含む。これらの役割および動作は、それぞれ、左ガイダンス表示６１２と、センターガイダンス表示６１４と、右ガイダンス表示６１６と同様であり、これらの詳細な説明は繰り返さない。

操作ボタン表示８２０は、アプリケーションの選択に用いられる。電子機器１００は、操作ボタン表示８２０に対応する領域内に、外部物体（指９００あるいはスタイラス９５０など）の接触を検知すると、領域に対応した所定の動作を開始する。

（プログラムについて）
ここで、電子機器１００において、実行されるプログラムについて説明しておく。

本実施の形態に係る電子機器１００が実行するプログラムには、液晶パネル１４０に動作画面が表示されるプログラム（以下、「メインアプリケーション」とよぶ）と、液晶パネル２４０に動作画面が表示されるプログラム（以下、「サブアプリケーション」とよぶ）とがある。

メインアプリケーションとしては、ブラウザ、辞書、ブックビューア、フォトビューアなど、現在の電子機器上で動作するアプリケーションを想定することができる。サブアプリケーションとしては、例えば、液晶パネル２４０への入力を利用する入力パッド（手書き文字入力パッド、手描きイラスト入力パッド、電卓／数字入力パッドなど）や、メインアプリケーションの操作補助用のアプリケーションがある。

本実施の形態の説明においては、サブアプリケーションは、メインアプリケーションと独立であるとしている。メインアプリケーションは、第１ユニット１００１の記憶部３３０に格納されている。一方、サブアプリケーションは、第２ユニット１００２の記憶部４３０に格納されている。

このように、メインアプリケーションは、サブアプリケーションと分離している。そのため、メインアプリケーションとしては、他の電子機器でも動作する汎用的なアプリケーションを利用することができる。この場合、サブアプリケーションのメインアプリケーションとのデータのやり取りの仕様を、メインアプリケーションの仕様に合わせる。例えば、サブアプリケーションによるマウス動作の指示は、従来のタッチパッドやマウスからの動作指示に合わせる。

さらに、本実施の形態では、メインアプリケーションを実行するプログラム実行部３５８と、サブアプリケーションを実行するプログラム実行部４５８とは、独立である。このようにすることで、メインアプリケーションを実行するプロセッサ（本実施の形態では、ＣＰＵ１１０）の負荷を減らすことができる。特に、電子機器１００のＣＰＵの性能が低い場合には、このようにプログラム実行部を分割することが有効である。

本実施の形態のように第１ユニット１００１および第２ユニット１００２のそれぞれに制御部および記憶部を備えることで、第１ユニット１００１と第２ユニット１００２との間のデータのやりとりを少なくでき、処理を高速化しうる。

ただし、サブアプリケーションは、必ずしもメインアプリケーションと独立でなくてもよい。すなわち、同一のプログラムが、メインアプリケーションおよびサブアプリケーションの両方として機能してもよい。具体的には、プログラムの一部が、液晶パネル１４０に表示する画面を作成し、プログラムの他の一部が、液晶パネル２４０に表示する画面を作成してもよい。

また、メインアプリケーションおよびサブアプリケーションは、同一のプロセッサによって実行されてもよい。この場合は、アプリケーションを実行するプロセッサが、液晶パネル１４０および液晶パネル２４０の両方の動作を制御することになる。

（サブアプリケーション）
本実施の形態においては、電子機器１００は、タブレットモードにおいて、複数のサブアプリケーションのいずれかを実行する。また、サブアプリケーションの１つに、実行するアプリケーションを決定するための「ホームアプリケーション」がある。

ホームアプリケーションは、アプリケーション選択のためのランチャーである。ホームアプリケーションは、複数のサブアプリケーションの中からの１つのサブアプリケーションの選択のための画面（以下、「ホームメニュー画面」）を液晶パネル２４０に表示する。

図２２に、ホームメニュー画面の具体例を示す。図２２を参照して、ホームメニュー画面は、ガイダンス表示８１０と、操作ボタン表示８２０ａ〜８２０ｉと、マウス不可表示８３０とを含む。操作ボタン表示８２０ａ〜８２０ｉがタッチされると、ホームアプリケーションは、操作ボタン表示８２０ａ〜８２０ｉに対応するサブアプリケーションを呼び出す。マウス不可表示８３０は、電子機器１００が、液晶パネル２４０への入力によって、マウス動作を行なわないことを示すための表示である。この表示は、ユーザが、タブレットモードにおける電子機器１００の動作を正確に理解するのに役立つ。また、ユーザが、マウスモードとタブレットモードとを区別するのにも役立つ。

本実施の形態においては、電子機器１００は、ユーザの指示に基づいて、ホームメニュー画面をカスタマイズ可能であるとする。なお、ホームメニュー画面のカスタマイズが不可能な場合であっても、ホームメニュー画面の構成は、図２２に示すものに限られるわけではない。例えば、操作ボタン表示８２０の個数や配置は、図２２に示すものに限られない。また、マウス不可表示８３０も、図２２に示すものに限られない。あるいは、マウス不可表示８３０は、ホームメニュー画面に含まれていなくてもよい。

なお、タブレットモードにおけるデフォルトのサブアプリケーションは、ホームアプリケーションであるとする。すなわち、電子機器１００が、起動後（電源を入れた後）、最初にタブレットモードで動作するときは、ホームアプリケーションを実行する。

タブレットモードにおいて液晶パネル２４０に表示される画面８００の遷移について、図２３を参照して説明する。図２３は、タブレットモードにおいて液晶パネル２４０に表示される画面８００の遷移図である。

図２３を参照して、ユーザがホームメニュー画面８００ａの操作ボタン表示８２０（手描きイラスト）を選択すると、電子機器１００は、手描きイラストアプリケーションを実行し、画面８００ｂを液晶パネル２４０に表示する。画面８００ｂは、手描きイラストアプリケーションの動作画面である。図２３に示す画面８００ｂでは、その手描き入力枠内に犬の絵が描かれている。

画面８００ｂにおいて、ユーザが、操作ボタン表示８２０（ホーム）を選択すると、電子機器１００は、ウィンドウ８００ｄを液晶パネル２４０に表示する。ここで、電子機器１００は、ウィンドウ８００ｄを画面８００ｂのかわりに表示してもよいし、ウィンドウ８００ｄを画面８００ｂに重畳して表示してもよい。ウィンドウ８００ｄは、作成した手描きイラストを保存するかを問い合わせる文章と、“はい”“いいえ”“キャンセル”の操作ボタン表示８２０とを含む。

ウィンドウ８００ｄの“はい”が選択されると、電子機器１００は、ウィンドウ８００ｄの表示前に入力枠になされている手描きイラストを、電子機器１００内部あるいは外付けの記憶装置（ハードディスクやフラッシュメモリなど）に格納する。また、電子機器１００は、ホームメニュー画面８００ａを、液晶パネル２４０に表示する。

ウィンドウ８００ｄの“いいえ”が選択されると、電子機器１００は、ホームメニュー画面８００ａを、液晶パネル２４０に表示する。この場合、電子機器１００は、ウィンドウ８００ｄの表示前に入力枠になされている手描きイラストを、記憶装置に格納しない。

ウィンドウ８００ｄの“キャンセル”が選択されると、電子機器１００は、ウィンドウ８００ｄの表示前の画面８００ｂを、液晶パネル２４０に表示する。すなわち、ユーザは、キャンセルを選択すれば、引き続き、手描きイラストの作成を行なうことができる。

ユーザがホームメニュー画面８００ａの操作ボタン表示８２０（インターネット）を選択すると、電子機器１００は、Ｗｅｂブラウザを実行し、Ｗｅｂブラウザの動作画面８００ｃを液晶パネル１４０に表示する。

画面８００ｃにおいて、ユーザが、操作ボタン表示８２０（ホーム）を選択すると、電子機器１００は、ホームメニュー画面８００ａを、液晶パネル２４０に表示する。この場合は、電子機器１００は、入力されたデータの保存処理は行なわない。したがって、電子機器１００は、ウィンドウ８００ｄのような問合せ画面を表示することはしない。

＜モードの切り替え＞
ここからは、マウスモードとタブレットモードとの切り替えに際しての電子機器１００の動作について、図２４を参照しつつ、詳しく説明する。図２４は、マウスモードとタブレットモードとの切り替え時の電子機器１００の動作について説明するための図である。

本実施の形態においては、電子機器１００は、すでに説明したように、基本的には、センターキー２４２の押下に応じて、動作モードを切り替える。電子機器１００は、タブレットモードからマウスモードに移行することも、マウスモードからタブレットモードに移行することも可能である。

本実施の形態では、電子機器１００は、タブレットモードからマウスモードに移行する際に、液晶パネル２４０への入力の処理方法の変更を行なう。すなわち、電子機器１００は、液晶パネル２４０への入力を、サブアプリケーションへの動作指示ではなく、マウス動作指示であるとして扱うようにする。また、電子機器１００は、マウスモードへの移行時に、液晶パネル２４０にマウス画面を表示する。

ただし、電子機器１００は、マウスモードに移行した後も、タブレットモードにおいて実行していたアプリケーションを動作させ続けておく。このことにより、電子機器１００は、マウスモードからタブレットモードに移行する際に、スムーズに液晶パネル２４０に画面を表示することができる。これは、サブアプリケーションの立ち上げ時間が不要であるためである。

また、タブレットモードにおいて実行していたアプリケーションを動作させ続けてることにより、ユーザがタブレットモードの途中に一時的に液晶パネル１４０によりマウス動作を行なう場合の操作性が向上する。例えば、電子機器１００が、タブレットモードからマウスモードに移行したのち、タブレットモードに再び移行することを考える。電子機器１００は、上のように動作するため電子機器１００は、マウスモードへの移行前と移行後において、同一のサブアプリケーションの動作画面を液晶パネル２４０に表示する。したがって、ユーザは、マウス動作を行なった後、マウス動作前のサブアプリケーションを引き続き利用することができる。

また、電子機器１００は、マウスモードのみならずタブレットモードにおいても、メインアプリケーションの動作画面を液晶パネル１４０に表示する。したがって、電子機器１００は、メインアプリケーションの動作画面の見易さを損なうことなく、ユーザに、サブアプリケーションの操作を行なわせることができる。

（動作開始時のモード）
特に、電子機器１００の動作開始時に関係する動作モードの切り替えについて説明しておく。本実施の形態においては、電子機器１００の動作開始には、大きく分けて、（ｉ）電源オフ状態からの起動（以下、通常起動とよぶ）と、（ｉｉ）省電力状態からの起動（以下、再開とよぶ）との２つがあるものとする。

ここで、「電源オフ状態」とは、電子機器１００の各部（電子機器１００の起動に必要な部分を除く）の動作が停止した状態である。「省電力状態」は、電子機器１００の動作の一部が停止した状態である。

省電力状態には、「スタンバイ状態」と、「休止状態」と、スタンバイ状態と休止状態との組み合わせである「スリープ状態」とがある。

スタンバイ状態への移行指示を受け付けると、電子機器１００は、作業中のデータをＲＡＭ１７１に保存する。また、電子機器１００は、動作の再開に必要な部分（電源回路１９２、電源検出部１９３、ＲＡＭ１７１など）を除く部分への電源の供給を止める。

休止状態への移行指示を受け付けると、電子機器１００は、作業中のデータをハードディスク１７０に保存する。また、電子機器１００は、動作の再開に必要な部分（電源回路１９２、電源検出部１９３など）以外への電源の供給を停止する。

スリープ処理の指示時には、電子機器１００は、作業中のデータを、まずメモリに格納する。そして、電子機器１００は、スリープ状態で、指示から所定の時間が経過すると、メモリに格納されたデータをメモリからハードディスクに移す。

ただし、省電力状態の種類は、上述のものに限られるわけではない。また、電子機器１００は、必ずしもこれらすべての省電力化処理を準備できなくてもよい。

さて、まず、（ｉ）通常起動における動作モードについて図２５を参照しつつ説明する。図２５は、通常起動時の動作モードを模式的に示した図である。

通常起動時には、電子機器１００は、まず、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）を起動するためのブート処理を行なう。ブート処理の間、電子機器１００は、液晶パネル１４０に、ブート画面２５０１を表示する。また、ブート処理の間、電子機器１００の動作モードは、マウスモードである。電子機器１００は、液晶パネル２４０に所定のマウス画面（以下、固定画面とよぶ）２５０２を表示する。固定画面２５０２は、ガイダンス表示を含まない。ブート処理の間、モード切替は実行不可能であるためである。

ブート処理が完了すると、電子機器１００は、ログイン画面２５０３を液晶パネル１４０に表示する。この時も、電子機器１００は、固定画面２５０４を表示する。

電子機器１００は、ログインが完了すると、液晶パネル１４０にデスクトップ画面２５０５を表示する。また、電子機器１００は、液晶パネル２４０にマウス画面２５０６を表示する。この段階において、電子機器１００は、マウスモードからタブレットモードへの切り替えを行なうことができるようになっている。これにともない、マウス画面２５０６は、図２１に示したマウス画面６００と同様に、ガイダンス表示を含む。

なお、タブレットモードにおけるデフォルトのサブアプリケーションは、ホームアプリケーションであるとする。すなわち、電子機器１００が、起動後（電源を入れた後）、最初にタブレットモードで動作するときは、ホームアプリケーションを実行する。

次に、（ｉｉ）復帰における動作モードについて図２６を参照しつつ説明する。図２６は、復帰時の動作モードを模式的に示した図である。

再開時には、電子機器１００は、まず、メモリやハードディスクなどの記憶装置に格納された、作業状態に関するデータを読み出す。この間、電子機器１００は、液晶パネル１４０に、再開中画面２６０１を表示する。また、この間、電子機器１００の動作モードは、マウスモードである。電子機器１００は、液晶パネル２４０に固定画面２６０２を表示する。

作業状態の読出しが完了すると、電子機器１００は、ログイン画面２６０３を液晶パネル１４０に表示する。この時も、電子機器１００は、固定画面２６０４を表示する。

電子機器１００は、ログインが完了すると、読み出した作業状態に基づいて、液晶パネル１４０に、省電力状態への移行直前に液晶パネル１４０に表示されていた表示画面２６０５を再び表示する。また、電子機器１００は、液晶パネル２４０に、省電力状態への移行直前に動作していたサブアプリケーションに基づく表示画面２６０６を表示する。

なお、電子機器１００は、ログインの完了後、液晶パネル１４０に、必ず、マウス画面を表示してもよい。再開後にユーザが最初に行なう動作がマウス動作であることが見込まれる場合などには、この処理によって操作性を向上することができる。

＜タブレットモード時の動作＞
ここからは、タブレットモード時の電子機器１００の動作について、図２７を参照しつつ、より詳しく説明する。図２７は、タブレットモード時の電子機器１００の動作について説明するための図である。

タブレットモードにおいて、電子機器１００は、大きく分けて、ホームアプリケーションの実行、入力パッドアプリケーションの実行、または、サブ画面活用ソフトの実行のいずれかを行なう。

電子機器１００は、ホームアプリケーションの実行中、ホームメニュー画面８００ａを液晶パネル２４０に表示する。電子機器１００は、ホームアプリケーションの実行中、液晶パネル２４０への所定位置（操作ボタン表示によって示される）へのタッチを受け付けると、入力パッドを呼び出す。また、電子機器１００は、ホームアプリケーションの実行中、液晶パネル２４０への所定位置へのタッチを受け付けると、サブ画面活用ソフトの実行を開始する。

電子機器１００は、入力パッドを呼び出すと、入力用の画面を液晶パネル２４０に表示する。図２７を参照して、本実施の形態においては、３種の入力パッド、すなわち、手書き文字入力パッドと、手描きイラスト入力パッドと、電卓／数字入力パッドとがある。液晶パネル２４０に表示される画面２７０２〜２７０４は、それぞれ、手書き文字入力パッドと、手描きイラスト入力パッドと、電卓／数字入力パッドの動作画面である。各入力パッドの詳細については後述する。

また、電子機器１００は、入力パッドの実行時に所定の指示を受け付けると、ホームアプリケーションを起動する。本実施の形態では、入力パッドの動作画面は、ホームボタンを含んでおり、電子機器１００は、ホームボタンへのタッチに応じて、入力パッドを終了し、ホームアプリケーションを起動する。

図２７を参照して、本実施の形態におけるサブ画面活用ソフトとしては、２画面活用ガイド、インターネット、辞書、本、写真、ゲームがある。

「２画面活用ガイド」は、オンラインマニュアルである。電子機器１００は、２画面活用ガイドを実行すると、外部サーバからマニュアルを取得し、液晶パネル２４０（または液晶パネル１４０、あるいは、液晶パネル１４０および液晶パネル２４０の両方）にマニュアルを表示する。

「インターネット」は、Ｗｅｂブラウザを起動し、ホームページを呼び出すためのソフトであり、以下、Ｗｅｂページ呼び出しソフトとよぶ。このソフトの動作の詳細については、後述する。

「辞書」は、電子辞書を呼び出すためのソフトであり、以下、辞書呼び出しソフトと呼ぶ。本実施の形態では、このソフトは、複数の電子辞書の中から１つの電子辞書を呼び出す。このソフトの動作の詳細については、後述する。

「本」は、ブックビューアで閲覧する電子書籍（例えば、ＸＭＤＦ形式の書籍）を選択するためのソフトである。「写真」は、写真スライドショーの表示のためのソフトである。

「ゲーム」は、液晶パネル２４０にゲーム画面を表示するゲームソフトである。本実施の形態では、「ゲーム」は、液晶パネル２４０のタッチ操作を活かしたゲームであるとする。

電子機器１００は、サブ画面活用ソフトの実行時に所定の指示を受け付けると、サブ画面活用ソフトを終了し、ホームアプリケーションを起動する。本実施の形態では、サブ画面活用ソフトの動作画面は、ホームボタンを含んでおり、電子機器１００は、ホームボタンへのタッチに応じて、ホームアプリケーションを起動する。

（手書き文字入力パッド）
手書き文字入力パッドを実行する電子機器１００（具体的にはアプリケーションを実行するＣＰＵ２１０）の動作について、図２８を参照しつつ説明する。図２８は、手書き文字入力パッドの起動中に電子機器１００が液晶パネル２４０に表示する画面（文字入力画面）の一例を示す図である。

図２８を参照して、文字入力画面は、センターガイダンス表示８１４と、マウス不可表示８３０と、ホームボタン８４０と、テキストボックス２８０１と、貼付ボタン２８０２と、候補エリア２８０３と、後退ボタン２８０４と、手書きエリア２８０５と、認識モード切替ボタン２８０６と、認識ボタン２８０７と、消去ボタン２８０８とを含む。

テキストボックス２８０１は、手書き文字認識の結果、確定した文字を表示する。テキストボックス２８０１は、確定した文字を最大１０文字まで表示可能である。ただし、テキストボックス２８０１に表示される文字の最大数は、これに限られるわけではない。

貼付ボタン２８０２が、テキストボックス２８０１に文字列（１文字または複数の文字）が存在する場合に、押下されると、電子機器１００は、液晶パネル１４０に表示されているアクティブなアプリケーションに文字列を送信する。

また、貼付ボタン２８０２は、テキストボックス２８０１に文字列が存在しない場合は、Ｅｎｔｅｒキーとして機能する。例えば、ユーザは、貼付ボタン２８０２を押下して、検索ボックスに文字列を送信した後、再び、貼付ボタン２８０２を押すことで、アプリケーションに検索を実行させることができる。なお、テキストボックス２８０１に文字列が存在しない（あるいは、貼付ボタン２８０２がＥｎｔｅｒキーとして機能する）場合、電子機器１００は、貼付ボタン２８０２に表示する文字を「Ｅｎｔｅｒ」に変更する。

候補エリア２８０３は、入力の認識候補を表示する。本実施の形態では、候補エリア２８０３は、認識候補を、第１候補から順に上から最大で５つ表示する。ただし、候補エリア２８０３に表示される候補の最大数は、これに限られるわけではない。

本実施の形態では、電子機器１００は、第１候補（候補エリア２８０３の１番上の文字）は、自動的にテキストボックス２８０１に追加する。また、電子機器１００は、候補エリア２８０３内の候補の選択に応じて、追加された文字を変更することができる。第１候補は、ユーザ入力しようとしていた文字である可能性が高いため、第１候補を自動的にテキストボックス２８０１に追加することで、ユーザによる操作回数を削減できる。

後退ボタン２８０４が押下されると、電子機器１００は、テキストボックス２８０１内の文字列のうち最後の文字を消去する。なお、テキストボックス２８０１に文字列がない場合は、電子機器１００は、後退ボタン２８０４の押下にともなう動作は行なわない。

手書きエリア２８０５は、外部からの入力を受け付ける。電子機器１００は、手書きエリア２８０５への入力の履歴に対応する手書き文字データ４３２ａを作成し、記憶部４３０に格納する。電子機器１００は、例えば、所定の時間内に入力があった座標すべて、あるいは、所定の時間内で時間的に連続する入力の開始および終了時の座標を、手書き文字データ４３２ａとして作成する。また、電子機器１００は、入力を受け付けた座標（あるいは手書き文字データ４３２ａ）に対応する図形を手書きエリア２８０５に表示する。

本実施の形態では、手書きエリア２８０５は、２つの領域（エリア２８０５ａおよびエリア２８０５ｂ）を含む。電子機器１００は、エリア２８０５ａおよびエリア２８０５ｂのそれぞれの手書き文字データ４３２ａを作成する。なお、手書きエリア２８０５は２つの領域とは限らない。

認識モード切替ボタン２８０６は、手書き入力の認識モードを切り替える。本実施の形態では、「自動モード」および「手動モード」の２つの認識モードがある。なお、手書き入力パッドを最初に起動したときの認識モードは、自動モードであるとする。

「自動モード」では、電子機器１００は、ペンアップ（手書きエリア２８０５への入力の終了）から所定の時間経過後に、自動的に、手書きエリア２８０５への入力の文字認識を開始する。自動モードには、ユーザの操作回数を削減できるという利点がある。なお、電子機器１００は、自動モードにおいて、ペンアップではなく、他のイベント、例えば、手書きエリア２８０５への入力開始から所定の時間経過後に、文字認識を自動開始してもよい。また、手書き入力を行なっていた手書きエリア２８０５ａ（または２８０５ｂ）とは別の手書きエリア２８０５ｂ（または２８０５ａ）への入力の開始も文字認識の自動開始イベントとなる。

「手動モード」では、電子機器１００は、認識ボタン２８０７の押下まで、文字認識を開始しない。手動モードには、ユーザが落ち着いて文字入力を行なうことができるという利点がある。

認識ボタン２８０７が押下されると、電子機器１００は、入力エリア２８０５への入力に基づく手書き文字データ４３２ａの文字認識を開始する。なお、自動モード中にも、認識開始時間よりも先に認識ボタン２８０７が押下されれば、電子機器１００は、手書き文字データ４３２ａの文字認識を開始する。

消去ボタン２８０８が押下されると、電子機器１００は、入力エリア２８０５に表示されている図形および手書き文字データ４３２ａを消去する。消去ボタン２８０５は、ユーザが文字認識前に手書きした文字を書きなおす際に使用される。

手書き文字入力パッドの利用方法について、図２９および図３０を参照して説明する。図２９および図３０は、それぞれ、手書き文字入力パッド利用時の電子機器１００の動作を説明するための図である。ここでは、ユーザが、検索ボックスを含む画面を表示するアプリケーション（Ｗｅｂブラウザなど）の利用中に、液晶パネル２４０を利用して「河豚（ふぐ）」に関する検索を行なう場合の動作例を説明する。

図２９（ａ）は、マウスモードにおいて液晶パネル１４０および液晶パネル２４０が表示する画面を示す。この時、液晶パネル２４０は、マウス画面２９２０を表示している。液晶パネル１４０は、メインアプリケーションの動作画面２９１０を表示する。動作画面２９１０は、検索ボックス２９１２および検索開始ボタン２９１４を含む。液晶パネル２４０上の指９００の移動にともなうマウス動作により、検索ボックス２９１２がアクティブになっているものとする。

図２９（ｂ）は、図２９（ａ）に示す状態で、モードの切替指示（具体的には、センターキー２４２の押下）があったあとの液晶パネル２４０の表示画面２９３０を示す。
ここでは、表示画面２９３０は、ホームメニュー画面である。

図２９（ｃ）は、図２９（ｂ）に示す状態で、手書き文字入力パッドの呼び出し用のボタン（図２９（ｂ）中黒丸で囲んでいる）が押下されたあとの液晶パネル２４０の表示画面２９４０を示す。表示画面２９４０は、文字入力画面である。

図２９（ｄ）は、スタイラス９５０により表示画面２９４０に対し手書き入力がなされたときの液晶パネル２４０の表示画面２９５０を示す。表示画面２９５０の入力エリアには、手書き入力に対応する図形２９５２が表示される。

図２９（ｅ）は、図２９（ｄ）に示すスタイラス９５０が液晶パネル２４０から離れたときの液晶パネル２４０の表示画面２９６０を示す。表示画面２９５０の候補エリアには、手書き入力に対応する候補文字が表示されている。また、テキストボックスには、第１候補の文字２９６２（ここでは、文字「河」）が表示される。

図２９（ｆ）は、第１候補の文字２９６２が確定されたときの液晶パネル２４０の表示画面２９７０を示す。文字２９７２は、確定された文字である。

図３０（ｇ）は、図２９（ｆ）に示す時点のあと、ユーザがスタイラス９５０による手書き入力を行なった状態の液晶パネル２４０の表示画面３０１０を示す図である。表示画面３０１０は、手書き入力に対応する図形３０１２を含む。

図３０（ｈ）は、図３０（ｇ）に示すスタイラス９５０が液晶パネル２４０から離れたときの液晶パネル２４０の表示画面３０２０を示す。表示画面２９５０の候補エリアには、手書き入力に対応する候補文字が表示されている。また、テキストボックスには、第１候補の文字３０２２（ここでは、文字「膝」）が、すでに確定された文字「河」の右側に追加される。

図３０（ｉ）は、図３０（ｈ）に示す状態で、スタイラス９５０により候補エリア内の文字３０３２（「豚」）が押下されたときの液晶パネル２４０の表示画面３０３０を示す。文字３０３２の押下にともない、テキストボックス内に表示されていた文字「膝」が「豚」（文字３０３４）に変化する。

図３０（ｊ）は、文字３０３４（「豚」）が確定されたあとの、液晶パネル１４０の表示画面３０４０および液晶パネル２４０の表示画面３０５０を示す。表示画面３０４０は、検索ボックス３０４２および検索開始ボタン３０４４を含む。文字３０３４の確定後、表示画面３０５０内の貼付ボタンがスタイラス９５０により押下されると、テキストボックス内の文字列「河豚」が、アクティブな検索ボックス３０４２に入力される。これにともない、検索ボックス３０４２には、文字列「河豚」が表示される。

図３０（ｋ）は、図３０（ｊ）に示す状態の後、Ｅｎｔｅｒボタン（貼付ボタン）が押下されたあとの、液晶パネル１４０の表示画面３０６０および液晶パネル２４０の表示画面３０７０を示す。表示画面３０７０内のＥｎｔｅｒボタンの押下は、検索開始キー３０４４の押下と同じ効果を発揮する。すなわち、メインアプリケーションは、Ｅｎｔｅｒボタンの押下に応じて、検索ボックス３０４２内の文字列「河豚」に関する検索を実行し、検索結果を示す表示画面３０６０を液晶パネル１４０に表示する。

なお、本実施の形態では、テキストボックスが一杯（テキストボックスに、入力可能な最大数の文字が入力されている）ときは、電子機器１００は、それ以上、手書きを受け付けない。テキストボックスが一杯のときの電子機器１００の動作を図３１を参照して説明する。図３１は、テキストボックスが一杯のときの電子機器１００の動作を説明するための図である。

図３１（ａ）は、すでにテキストボックスが一杯の（テキストボックスに１０文字入っている）状態で、ユーザがスタイラス９５０により入力エリアに入力をしようとしている状態を示している。この時の液晶画面２４０の表示画面３１１０のテキストボックスには、文字列３１１２（１０文字の文字列「あいうえおかきくけこ」）が表示されている。

スタイラス９５０が液晶パネル２４０に接触すると、電子機器１００は、警告表示３１２２を含む画面３１２０を液晶パネル２４０に表示する（図３１（ｂ）参照）。警告表示３１２２は、文字の確定、すなわち、貼付ボタンの押下を促す文字列を含む。ここでは、警告表示３１２２が含む文字列は「貼付ボタンにタッチしてください」としているが、文字列はこれに限られるわけではない。

警告表示３１２２の表示後、液晶パネル２４０は、表示画面３１１０と同様の表示画面３１３０を表示する（図３１（ｃ）参照）。ユーザは、この表示画面３１３０の表示中に、貼付ボタンを押して文字列を確定したり、後退ボタンを押してすでに入力された文字を消去したりすることで、文字入力を続けることができる。なお、電子機器１００は、例えば、警告表示３１２２の表示から所定の時刻の経過後に自動的に、あるいは、液晶パネル２４０への何らかの指示に応じて、図３１（ｂ）の状態から図３１（ｃ）の状態に移行するものとする。

なお、本実施の形態では、手書き文字データ４３２ａは、ＲＡＭ２７１などに一時的に記憶されており、電子機器１００は、手書き文字入力パッドの終了の際、手書き文字データ４３２ａを破棄するものとする。したがって、手書き文字入力パッドを再度呼び出した際には、ユーザは、新しく文字を入力することができる。

ただし、電子機器１００は、手書き文字データ４３２ａを保持しておき、再度の手書き入力パッドの利用時に、ユーザが前回の続きから手書き入力を行なえるようにしてもよい。この場合、電子機器１００は、手書き文字入力パッドの再開時に、手書き文字データ４３２ａに基づいて、手書き文字データ４３２ａに対応する図形を液晶パネル２４０に表示する。

なお、ユーザが、手書き文字入力パッドに上の２つの動作のいずれを行なわせるかを選択できてもよい。この場合、ユーザは、手書き文字入力パッドが上の２つの動作のいずれを行なわせるかを、手書き文字入力の使用態様に応じて、適宜定めることができる。

（手描きイラスト入力パッド）
手描きイラスト入力パッドを実行する電子機器１００（具体的にはアプリケーションを実行するＣＰＵ２１０）の動作について、図３２を参照しつつ説明する。図３２は、手描きイラスト入力パッドの起動中に電子機器１００が液晶パネル２４０に表示する画面（イラスト入力画面）の一例を示す図である。

図３２を参照して、イラスト入力画面は、センターガイダンス表示８１４と、マウス不可表示８３０と、ホームボタン８４０と、描画エリア３２０１と、元に戻すボタン３２０２と、ペン／定規／消しゴムボタン３２０３と、ペン太さボタン３２０４と、ペン色ボタン３２０５と、スタンプボタン３２０６と、フレームボタン３２０７と、全消去ボタン３２０８と、画面キャプチャーボタン３２０９と、メール添付ボタン３２１０と、ファイル保存ボタン３２１１と、貼付ボタン３２１２とを含む。

描画エリア３２０１は、外部からの入力を受け付ける。電子機器１００は、描画エリア３２０１への入力および描画設定（入力ツール、ペン太さ、ペン色など）に基づいて、イラストデータ４３２ｂを作成し、記憶部４３０に格納する。イラストデータ４３２ｂは、手書き文字データ４３２ａと同様に、所定の時間内に入力があった座標すべて、あるいは、所定の時間内で時間的に連続する入力の開始および終了時の座標を含む。イラストデータ４３２ｂは、さらに、描画設定（入力ツール、ペン太さ、ペン色など）に関するデータを含む。

本実施の形態では、描画エリア３２０１の横長さと縦長さとの比は、４：３である。これは、手書きイラスト入力パッドを用いて、写真の加工も行なうためである。ただし、描画エリア３２０１の縦横比は、これに限られるものではない。

元に戻すボタン３２０２は、描画エリア３２０１への直前の入力動作を取り消すためのボタンである。電子機器１００は、入力履歴４３２に記録されている入力を時間順に管理しており、元に戻すボタン３２０２が押下されると、直前の入力を入力履歴４３２から削除する。それと同時に、電子機器１００は、直前の入力に対応する描画データに基づく図形の表示も描画エリア３２０１から消去する。

ペン／定規／消しゴムボタン３２０３は、描画エリア３２０１への描画ツールを選択するためのボタンである。ペン／定規／消しゴムボタン３２０３の押下に応じて、電子機器１００は、描画ツールをペン、定規、消しゴム、ペン…の順に切り替える。

ペン太さボタン３２０４は、ペン太さの設定のためのボタンである。電子機器１００は、ペン太さボタン３２０４の押下に応じて、ペンツールの選択時に描画エリア３２０１への入力に応じて描かれる線の太さの設定を変更する。あるいは、電子機器１００は、ペン太さボタン３２０４が押下されると、線の太さをユーザに設定させるための画面を液晶パネル２４０に表示してもよい。

ペン色ボタン３２０５は、ペン色の設定のためのボタンである。ペン色ボタン３２０５の押下に応じて、ペンツールの選択時に描画エリア３２０１への入力に応じて描かれる線の色の設定を変更する。あるいは、電子機器１００は、ペン色ボタン３２０５が押下されると、線の色をユーザに設定させるための画面を液晶パネル２４０に表示してもよい。

スタンプボタン３２０６は、描画エリア３２０１への入力に応じて、描画エリア３２０１にスタンプが描かれるようにするためのボタンである。

フレームボタン３２０７は、描画エリア３２０１に描かれるイラストに、飾り枠などのフレームを追加するためのボタンである。

全消去ボタン３２０８は、イラストデータ４３２ｂを全て削除するためのボタンである。ユーザは、このボタンを押すことで、描画エリア３２０１を、手描きイラスト入力パッド起動時の状態（無地）にすることができる。

画面キャプチャーボタン３２０９は、液晶パネル２４０に表示されている画面全体を保存するためのボタンである。メール添付ボタン３２１０は、イラストデータ４３２ｂを、電子メールに添付するためのボタンである。ファイル保存ボタン３２１１は、イラストデータ４３２ｂを、指定された記憶領域に保存するためのボタンである。イラストデータ４３２ｂを記憶する領域は、固定のものであってもよいし、ユーザにより指定可能であってもよい。

貼付ボタン３２１２は、イラストデータ４３２ｂを、アクティブなメインアプリケーションに送るためのボタンである。貼付ボタン３２１２が押下されると、電子機器１００は、手描きイラスト入力パッドが作成したイラストデータ４３２ｂを、アクティブなメインアプリケーションに与える。ユーザは、手描きイラスト入力パッドを用いて、例えば、メインアプリケーションで作成中の書類の中に、イラストを挿入することができる。

なお、本実施の形態では、図２３を参照して説明したように、手描きイラスト入力パッドは、手描きイラスト入力パッドの終了指示を受け付けた際に、作成した手描きイラストデータ４３２ｂの保存の要否を問い合わせる。ただし、この問い合わせは、必須ではない。手描きイラスト入力パッドは、終了時に、それまでに作成された手描きイラストデータ４３２ｂを自動的に破棄してもよい。

（電卓／数字入力パッド）
電卓／数字入力パッドを実行する電子機器１００（具体的にはアプリケーションを実行するＣＰＵ２１０）の動作について、図３３を参照しつつ説明する。図３３は、電卓／数字入力パッドの起動中に電子機器１００が液晶パネル２４０に表示する画面（電卓画面）の一例を示す図である。

図３３を参照して、電卓画面は、センターガイダンス表示８１４と、マウス不可表示８３０と、ホームボタン８４０と、数字ボックス３３０１と、貼付ボタン３３０２と、数字ボタン３３０３と、機能ボタン３３０４とを含む。

数字ボックス３３０１は、入力された数字、または、計算結果の数字を表示する。数字ボックス３３０１が表示できる数字の最大数は、８つであるとする。ただし、最大数は、８つに限られない。

貼付ボタン３３０２が押下されると、電子機器１００は、液晶パネル１４０に表示されているアクティブなアプリケーションに数字ボックス３３０１に表示されている数字を送信する。

数字ボタン３３０３は、数字ボックス３３０１に数字を入力するためのボタンである。機能ボタン３３０４は、四則演算などの所定の演算を指示するボタンである。数字ボタン３３０３および機能ボタン３３０４が押下されたときの電子機器１００の動作は、通常の電卓あるいは電卓アプリケーションの動作と同様であるので、ここでは、その詳細な説明を繰り返さない。

（インターネット）
サブ画面活用ソフトの１つであるＷｅｂページ呼び出しソフトを実行する電子機器１００（具体的にはアプリケーションを実行するＣＰＵ２１０）の動作について、図３４を参照しつつ説明する。図３４は、Ｗｅｂページ呼び出しソフトの起動中に電子機器１００が液晶パネル２４０に表示する画面（インターネット画面）の一例を示す図である。

図３４を参照して、インターネット画面は、ガイダンス表示８１０（左ガイダンス表示８１２、センターガイダンス表示８１４および右ガイダンス表示８１６）と、複数の操作ボタン表示８２０と、マウス不可表示８３０と、ホームボタン８４０とを含む。

操作ボタン表示８２０は、それぞれ、呼び出すＷｅｂページに対応している。各操作ボタン表示８２０は、対応するＷｅｂページの名称（図中、「インターネット２」など）を表わす文字を含む。電子機器１００は、操作ボタン表示８２０に対応する領域へのタッチを検出すると、Ｗｅｂブラウザを起動して、選択されたＷｅｂページを液晶パネル１４０（あるいは液晶パネル２４０）に表示する。

なお、Ｗｅｂページ呼び出しソフトは、液晶パネル２４０にスクロールバーを表示してもよい。スクロールバーを含むインターネット画面の一例を図３５に示す。図３５を参照して、インターネット画面は、スクロールバー３５００を含む。ユーザが、スクロールバー３５００中のスライダ３５０２をドラッグすると、Ｗｅｂページ呼び出しソフトは、インターネット画面をスクロールする。

（辞書）
サブ画面活用ソフトの１つである辞書呼び出しソフトを実行する電子機器１００（具体的にはアプリケーションを実行するＣＰＵ２１０）の動作について、図３６を参照しつつ説明する。図３６は、辞書呼び出しソフトの起動中に電子機器１００が液晶パネル２４０に表示する画面（辞書選択画面）の一例を示す図である。

図３６を参照して、辞書選択画面は、ガイダンス表示８１０（左ガイダンス表示８１２、センターガイダンス表示８１４および右ガイダンス表示８１６）と、複数の操作ボタン表示８２０と、マウス不可表示８３０と、ホームボタン８４０とを含む。

操作ボタン表示８２０は、それぞれ、呼び出す電子辞書に対応している。各操作ボタン表示８２０は、対応する電子辞書の名称（図中、「英和辞典」など）を表わす文字を含む。電子機器１００は、操作ボタン表示８２０に対応する領域へのタッチを検出すると、電子辞書を起動して、起動した電子辞書の画面を液晶パネル１４０（あるいは液晶パネル２４０）に表示する。

なお、辞書呼び出しソフトは、液晶パネル２４０にスクロールバーを表示してもよい。スクロールバーを含む辞書選択画面の一例を図３７に示す。図３７を参照して、辞書選択ト画面は、スクロールバー３７００を含む。ユーザが、スクロールバー３７００中のスライダ３７０２をドラッグすると、辞書呼び出しソフトは、辞書選択画面をスクロールする。

＜タイムカウント制御＞
すでに述べたように、本実施の形態では、タブレットモードからマウスモードへの移行後も、タブレットモードで動作していたサブアプリケーションは動作し続けている。このようにサブアプリケーションを動作させると、サブアプリケーションがユーザの予期しない動作を行なう不都合が発生する可能性がある。

具体例として、手書き文字入力アプリケーションの動作に際して起こるおそれのある不都合について、図３８を参照して、説明する。図３８は、手書き文字入力アプリケーションの動作に際して起こるおそれのある不都合について説明するための図である。

図３８（ａ）は、タブレットモードにおける、手書き文字入力アプリケーションの動作画面３８１０を示す。動作画面３８１０は、ユーザがスタイラス９５０により入力エリアに手書き入力を行ない、文字認識がまだなされていない時点でのものである。

図３８（ａ）に示す状態においてセンターキー２４２の押下などによるモード切替指示があったとき、液晶パネル２４０は、液晶パネル２４０にマウス画面３８２０を表示する。

ただし、マウス画面３８２０の表示中も、手書き文字入力アプリケーションは動作し続ける。この間の動作について、図３８（ｃ）および図３８（ｄ）を参照して説明する。図３８（ｃ）および図３８（ｄ）は、それぞれ、マウスモードへの切り替えがないとした場合に、手書き文字入力アプリケーションにより液晶パネル２４０に表示される仮想的な画面を示す図である。

ここでの例では、手書き文字入力アプリケーションの認識モードは、「自動モード」であるとする。したがって、ペンアップから第１の所定の時間（ｔ１とする）の経過後に、手書き文字入力アプリケーションは、文字認識を開始する。図３８（ｃ）の画面３８３０は、文字認識後の仮想的な画面である。このときの認識の第１候補は、文字「洶」であったとする。

さらに、文字認識から第２の所定の時間（ｔ２とする）の経過後に、手書き文字入力アプリケーションは、文字を確定する。図３８（ｄ）の画面３８４０は、文字確定後の仮想的な画面である。

マウスモードへの切り替えから、ｔ１＋ｔ２を超える時間が経過した後、再び、タブレットモードへの切替指示があると、液晶パネル２４０は、手書き文字入力アプリケーションの動作画面３８５０を表示する。

図３８に示した電子機器１００のカウント動作について、図３９を参照して、まとめておく。図３９は、図３８に示した電子機器１００のカウント動作について説明するための図である。

手書き文字入力アプリケーションが実行されている間、手書き文字入力アプリケーションを実行するＣＰＵ２１０は、タイマ２７３から取得した時刻データ４３６に基づいて、所定のイベントからの経過時間をカウントする。具体的には、ＣＰＵ２１０は、液晶パネル２４０の手書きエリアへのタッチの終了、あるいは、文字認識の終了からの経過時間をカウントする。

より具体的には、ＣＰＵ２１０は、手書きエリアへのタッチを示す信号を受け取っていない間、経過時間のカウンタ値を時間の経過にあわせて増加させる。ＣＰＵ２１０は、手書きエリアへのタッチを示す信号を受け付けると、または、文字認識が終了すると、カウンタ値をリセットする（０にする）。

タブレットモードにおけるタッチが終了し、動作モードがタブレットモードからマウスモードになったあとも、ＣＰＵ２１０は、経過時間のカウントを続ける。そのため、マウスモードの間に、カウンタ値が、文字認識のための待ち時間ｔ１に到達する。ＣＰＵ２１０は、この時点で、文字認識を実行する。

さらに、文字認識後、ＣＰＵ２１０は、カウンタを一度リセットした後、経過時間のカウントを続ける。マウスモードの間に、カウンタ値が、文字確定のための待ち時間ｔ２に到達する。ＣＰＵ２１０は、この時点で、文字を確定する。なお、文字を確定するためのカウンタ値をｔ１＋ｔ２に設定するのであれば、ＣＰＵ２１０は、文字認識器の終了時に、カウンタをリセットする必要はない。

図３８および図３９を用いて説明してきたように、マウスモードの間にサブアプリケーションを単純に動作させると、ユーザが行なっていた手書き入力が、認識および確定されてしまうことがある。このようなマウスモード中のサブアプリケーションの動作は、ユーザの意図に反している可能性がある。

例えば、ユーザは、マウスモードへの移行前に行なっていた手書き入力に続けて、さらに手書き入力を行なうことができなくなることがある。また、確定されたユーザの文字が意図していた文字と異なる可能性もある。実際、図３８に示す場合では、ユーザは、「河」と手書き入力していたが、確定された文字は「洶」である。このような場合、ユーザは、確定された文字の取り消し、および、再度の手書き入力といった余分な操作を行なわなければならなくなる。

そこで、本実施の形態に係る電子機器１００は、入力を中断してマウスモードに移行する際には、タイマのカウントを停止する。そのため、ユーザは、タブレットモードの再開後に、マウスモードへの移行前に行なっていた手書き入力に続けて、手書き入力を行なうことができる。本実施の形態に係る手書き入力動作について図４０を参照して説明する。図４０は、本実施の形態に係る手書き入力動作について説明するための図である。

図４０（ａ）〜図４０（ｅ）に示す画面４０１０〜画面４０５０は、それぞれ、図３８（ａ）〜図３８（ｅ）に示す画面３８１０〜画面３８５０に対応する。ユーザは、液晶パネル２４０に対し、図３８に示したものと同様の動作を行なうものとする。

図３８との違いは、マウスモード時に、タイマのカウントが行なわれないことにある。したがって、図４０（ｃ）および図４０（ｄ）に示す仮想的な画面４０３０および４０４０は、マウスモードへの切り替え前の画面４０１０に同じである。また、タブレットモード再開時の画面４０５０も、画面４０１０に同じである。つまりユーザはタブレットモード再開時に、画面４０１０と同じ内容の画面４０５０を表示している液晶パネル２４０にタッチすることで、マウスモードへの移行前に行なっていた入力の続きから再び入力を行なうことができる。

以下、電子機器１００が行なうタイムカウントについて具体的に説明する。電子機器１００は、以下の４種類のタイムカウントを行なうことができる。電子機器１００は、例えば、ユーザによる設定にしたがって、１つのタイムカウントを行なう。あるいは、電子機器１００は、サブアプリケーションの種類によって、自動的に実行するタイムカウントを決定してもよい。ただし、電子機器１００は、以下の４種類のタイムカウントすべてを行なえる必要はない。電子機器１００は、少なくとも１種類のタイムカウントを行なえればよい。

（第１のタイムカウント：カウント停止）
第１のタイムカウントを行なう場合、ＣＰＵ２１０は、マウスモードの間、タイムカウントを停止する。すなわち、ＣＰＵ２１０は、マウスモードの間、時間が経過しても、カウンタ値を増加させず、カウンタ値をマウスモードへの移行直前の値に保つ。また、ＣＰＵ２１０は、マウスモードからタブレットモードへの切替指示に応じて、タイムカウントを再開する。

図４１を参照して、第１のタイムカウントを行なった場合のＣＰＵ２１０の動作について説明する。図４１は、第１のタイムカウントについて説明するための図である。図４１では、図３８や図３９の場合と同様に、ユーザが、手書き入力の途中に、マウスモードとタブレットモードとの切り替えを行なう場合のＣＰＵ２１０の動作例を示している。図４１より、タブレットモードからマウスモードに切替えた時点でカウンタ動作が停止し、マウスモード中はカウンタ値が一定であることが分る。また、マウスモードからタブレットモードに復帰したタイミングでカウント動作が再開され、手書き入力動作（タッチ）が開始されるまでカウンタが増えている。タッチが再開されるとカウンタがリセットされ、次にタッチが終了するまでカウント動作が抑制され（すなわちタッチ中はカウント動作を行なわない）、タッチ終了後にカウンタが既定値（ｔ１）を迎えた時点で認識動作を開始する。なお、タブレットモード再開後のタッチ開始以降の動作は通常の手書認識動作と同一である。

第１のタイムカウントによれば、電子機器１００は、マウスモードの間に、文字の認識や確定を行なうことがない。すなわち、電子機器１００は、マウスモードの間に、ユーザの意図によらない動作を行なうことがない。したがって、ユーザの操作性が向上する。具体的には、ユーザは、タブレットモードでの操作の連続性を妨げられることなしに、タブレットモードでの操作中に一時的にマウスモードによる操作を行なうことができる。

（第２のタイムカウント：カウント停止＋リセット）
第２のタイムカウントを行なう場合、ＣＰＵ２１０は、第１のタイムカウントを行なう場合と同様、マウスモードの間、タイムカウントを停止し、マウスモードからタブレットモードへの切替指示に応じて、タイムカウントを再開する。

さらに、ＣＰＵ２１０は、第２のタイムカウントを行なう場合、ＣＰＵ２１０は、タブレットモードからマウスモードへの切替指示に応じて、カウンタ値をリセットする。

図４２を参照して、第２のタイムカウントを行なった場合のＣＰＵ２１０の動作について説明する。図４２は、第２のタイムカウントについて説明するための図である。図４２では、図３８から図４１の場合と同様に、ユーザが、手書き入力の途中に、マウスモードとタブレットモードとの切り替えを行なう場合のＣＰＵ２１０の動作例を示している。図４２では、第２のタイムカウントを行なう場合のカウンタ値の変化を実線で示す。また、図４２には、参照のため、第１のタイムカウントを行なう場合のカウンタ値の変化を点線で示している。

第２のタイムカウントによれば、第１のタイムカウントと同様、電子機器１００は、マウスモードの間に、文字の認識や確定を行なうことがない。すなわち、電子機器１００は、マウスモードの間に、ユーザの意図によらない動作を行なうことがない。したがって、ユーザの操作性が向上する。

さらに、第２のタイムカウントによれば、タブレットモードの再開時には、ＣＰＵ２１０は、初期値（“０”）からタイムカウントを行なう。そのため、第１のタイムカウントに比べ、タブレットモードの再開から文字認識や確定などの動作が実行されるまでの時間が長い。第１のタイムカウントの場合、タブレットモードの再開後、ユーザが何もしないと、図４２の丸で囲んだ時点で、文字認識が確定する。しかし、第２のタイムカウントを行なう場合、この時点では、まだ文字認識は確定しない。

したがって、ユーザは、タブレットモードの再開後、余裕を持って、サブアプリケーションを操作することができる。特に、タブレットモードからマウスモードへの復帰時のカウンタ値が閾値（ｔ１やｔ２）をわずかに下回る値であった場合に、この方法は有効である。

なお、以上では、ＣＰＵ２１０が、タブレットモードからマウスモードへの切替指示に応じて、カウンタ値をリセットするとしている。しかしながら、カウンタ値をリセットするタイミングはこれに限られない。ＣＰＵ２１０は、タブレットモードの再開時点で、初期値からカウントを行なえるように、カウンタ値をリセットすればよい。例えば、ＣＰＵ２１０は、タブレットモードの再開時に、カウンタ値をリセットしてもよい。

（第３のタイムカウント：カウント停止＋入力開始または終了で再開）
第３のタイムカウントを行なう場合、ＣＰＵ２１０は、第１のタイムカウントを行なう場合と同様、マウスモードの間、タイムカウントを停止する。

さらに、ＣＰＵ２１０は、第３のタイムカウントを行なう場合、ＣＰＵ２１０は、タブレットモードの再開後、液晶パネル２４０へのタッチの開始時点または終了時点までは、タイムカウント動作を停止する。すなわちＣＰＵ２１０は、液晶パネル２４０への最初のタッチの開始または終了イベントに応じて、タイムカウント動作を再開する。ただし、タッチの開始イベントに応じてタイムカウント動作を再開する場合は、実際にはタッチの終了時まではタッチ操作そのものがカウントを抑制する機能を有しているためカウンタが増加することはなく、見掛け上はタッチの終了時からカウント動作を再開した場合と区別が付かない。

図４３を参照して、第３のタイムカウントを行なった場合のＣＰＵ２１０の動作について説明する。図４３は、第３のタイムカウントについて説明するための図である。図４３では、図３８から図４２の場合と同様に、ユーザが、手書き入力の途中に、マウスモードとタブレットモードとの切り替えを行なう場合のＣＰＵ２１０の動作例を示している。図４３では、第３のタイムカウントを行なう場合（タッチ開始でカウントを再開する場合）のカウンタ値の変化を実線で示す。このとき、ＣＰＵ２１０がタッチ開始でカウンタ値をリセットしており、タッチ終了まではカウント動作は抑制され、タッチ終了と共にカウント値が上昇する。

また、タッチ終了でカウントを再開する場合のカウンタ値の変化を点線Ｉで示す。この場合タッチ終了までは、カウンタ値はリセットされずマウスモード時と同じ値であり、タッチ終了時に、初期値にリセットされると共にカウント動作が始まる。

なお、以上では、手書き文字入力アプリケーションは、タッチ開始または終了時に、初期値からのカウント動作を開始するものとして説明してきた。しかしながら、本実施の形態では、アプリケーションは、タッチの開始または終了後に、カウンタ値をリセットしなくてもよい。図４３には点線ＩＩで、タッチの開始または終了時に、カウンタ値をリセットしない場合を示している。

また、図４３には、参照のため、第１のタイムカウントを行なう場合のカウンタ値の変化を点線（タブレットモードの再開時点から右上に伸びる点線）で示している。

第３のタイムカウントによれば、第１のタイムカウントと同様、電子機器１００は、マウスモードの間に、文字の認識や確定を行なうことがない。すなわち、電子機器１００は、マウスモードの間に、ユーザの意図によらない動作を行なうことがない。したがって、ユーザの操作性が向上する。

さらに、第３のタイムカウントによれば、タブレットモードの再開時には、ＣＰＵ２１０は、液晶パネル２４０の手書き入力エリアへのタッチの開始または終了イベントがあるまで、タイムカウント動作を再開しない。そのため、第１のタイムカウントに比べ、タブレットモードの再開から文字認識や確定などの動作が実行されるまでの時間が長い。第１のタイムカウントの場合、タブレットモードの再開後、ユーザが何もしないと、図４３の丸で囲んだ時点で、文字認識が確定する。しかし、第３のタイムカウントを行なう場合、この時点では、まだ文字認識は確定しない。

したがって、ユーザは、タブレットモードの再開後、余裕を持って、サブアプリケーションを操作することができる。カウント動作の再開のきっかけはユーザ操作であるので、タブレットモードの再開後に、ＣＰＵ２１０が、ユーザの指示なしに、ユーザの意図しない動作を行なうことはない。

（第４のタイムカウント：カウント停止＋リセット＋入力で再開）
以上の第３のタイムカウントの説明では、ＣＰＵ２１０は、タブレットモードの再開後の、最初のタッチ開始または終了時に、ＣＰＵ２１０が、カウント動作を再開していた。しかしながら、これらの動作に加え、タブレットモードの再開後の最初のタッチ開始または終了時に、ＣＰＵ２１０が、カウンタ値をリセットすることは必須ではない。

そこで、第４のタイムカウントを行なう場合、ＣＰＵ２１０は、第１から第３のタイムカウントを行なう場合と同様、マウスモードの間、タイムカウントを停止する。さらに、ＣＰＵ２１０は、第２のタイムカウントの場合と同様、タブレットモードからマウスモードへの移行時に、カウンタ値をリセットする。さらに、ＣＰＵ２１０は、第３のタイムカウントの場合と同様、タブレットモードの再開後、液晶パネル２４０へのタッチ開始または終了時点まで、カウント動作を停止する。

図４４を参照して、第４のタイムカウントを行なった場合のＣＰＵ２１０の動作について説明する。図４４は、第４のタイムカウントについて説明するための図である。図４４では、図３８から図４３の場合と同様に、ユーザが、手書き入力の途中に、マウスモードとタブレットモードとの切り替えを行なう場合のＣＰＵ２１０の動作例を示している。図４４では、第４のタイムカウントを行なう場合のカウンタ値の変化を実線で示す。また、図４４には、参照のため、第１のタイムカウントあるいは第３のタイムカウントを行なう場合のカウンタ値の変化を点線で示している。ＣＰＵ２１０がカウンタのリセットを行なうタイミングは、図４４のようにタブレットモードからマウスモードへの移行時のほかに、マウスモードからタブレットモードに復帰時［Ｉ］や、タブレットモードの再開後の液晶パネル２４０へのタッチ開始時［ＩＩ］、およびタッチ終了時［ＩＩＩ］などが考えられる。

カウンタのリセットをもたらさない場合の、タッチ動作の開始または終了イベントがカウンタ再開のきっかけとなる第３のタイムカウントに比べて、第４のタイムカウントは、ユーザに更なる操作の余裕を提供することができる。

＜処理の流れ＞
（基本的な流れ）
図４５を参照して、本実施の形態に係る電子機器１００が行なう処理の流れについて説明する。図４５は、電子機器１００が行なう処理の流れをフローチャート形式で示す図である。なお、図４５では、第１ユニット１００１内の制御部３５０が行なう処理および第２ユニット１００２内の制御部４５０が行なう処理をまとめて示している。

ステップＳ１０１において、制御部３５０および制御部４５０は、電子機器１００の通常起動の指示あるいは再開の指示を受け付けると、通常起動処理あるいは再開処理を行なう。

通常起動とは、すでに説明しているとおり、電源オフ状態からの起動である。制御部３５０が行なう通常起動処理としては、例えば、ブート処理や、液晶パネル１４０へのブート画面の表示がある。制御部４５０が行なう通常起動処理としては、液晶パネル２４０へのブート画面の表示がある。

制御部３５０および制御部４５０は、電源オフ状態での所定のボタン（電源スイッチ１９１など）の押下などを通常起動の指示として扱う。なお、一方の制御部（制御部４５０または３５０）が、通常起動の指示を受け付けて、自らの通常起動処理を行なうとともに、他方の制御部（制御部３５０または４５０）へ通常起動処理の指示を与える構成であってもよい。

再開とは、すでに説明しているとおり、省電力状態からの起動である。制御部３５０が行なう再開処理としては、ＲＡＭ１７１やＨＤＤ１７０などに格納された作業状態の読み出しや、液晶パネル１４０への再開中画面の表示がある。制御部４５０が行なう再開処理としては、ＲＡＭ２７１やＨＤＤ１７０などに格納された作業状態の読み出しや、液晶パネル２４０への再開中画面の表示がある。

制御部３５０および制御部４５０は、省電力状態での所定のボタン（電源スイッチ１９１など）の押下や液晶パネル２４０へのタッチなどを再開処理の指示として扱う。なお、一方の制御部（４５０または３５０）は、再開指示を受け付けた他方の制御部（３５０または４５０）からの指示に応じて、再開処理を行ってもよい。

ステップＳ１０３において、制御部４５０に含まれるモード設定部４５４は、動作モードをマウスモードまたはタブレットモードのいずれかに決定する。

本実施の形態では、通常起動の場合の動作モードは、マウスモードに決められている。モード設定部４５４は、通常起動の場合、記憶部４３０内のモードデータ４３７をマウスモードを表わすデータに設定する。

また、モード設定部４５４は、再開時には、モードデータ４３７を、省電力状態前のモードデータ４３７の動作モードに基づいて決定する。この場合、制御部４５０は、省電力状態への移行時または再開時に、省電力状態前のモードデータ４３７をＲＡＭ２７１などに格納しておくものとする。あるいは、モード設定部４５４は、再開時には、モードデータ４３７を、常にマウスモードを表わすデータに設定してもよい。この場合、制御部４５０は、省電力状態前のモードデータ４３７の記憶処理を行なわなくてよい。

ステップＳ１０５において、入力処理部４５２は、動作モードがマウスモードであるか判定する。すなわち、入力処理部４５２は、モードデータ４３７に基づいて、動作モードがマウスモードかどうか判断する。

動作モードがマウスモードである場合（ステップＳ１０５においてＹＥＳ）、制御部３５０および制御部４５０は、ステップＳ１０７のマウスモード動作に進む。動作モードがマウスモードでない場合（ステップＳ１０５においてＮＯ）、制御部３５０および制御部４５０は、ステップＳ１１３のタブレットモード動作に進む。

ステップＳ１０７において、制御部３５０および制御部４５０は、マウスモード動作を行なう。すなわち、制御部３５０および制御部４５０は、液晶パネル２４０への入力がメインアプリケーションのマウス動作を起こすように、電子機器１００の各部を制御する。マウスモード動作の詳細については後述する。

ステップＳ１０９において、モード設定部４５４は、モード切替指示を受け付けたかどうか判断する。具体的には、モード設定部４５４は、センターキー２４２の押下に応じた信号を受け付けたかどうか判断する。ただし、モード切替指示は、センターキー２４２の押下に限られるわけではない。

マウスモード中にモード切替指示があった場合（ステップＳ１０９においてＹＥＳ）、制御部４５０は、ステップＳ１１１のマウスモードからタブレットモードへの切替処理を実行する。モード切替指示がない場合（ステップＳ１０９においてＮＯ）、制御部３５０および制御部４５０は、ステップＳ１０７（マウスモード動作）からの処理を繰り返す。

ステップＳ１１１において、制御部４５０は、マウスモードからタブレットモードへの切替処理を実行する。例えば、制御部４５０は、ステップＳ１１１において、サブアプリケーションの動作画面の液晶パネル２４０への表示、パネル入力処理部４５３の動作切り替えを行なう。マウスモードからタブレットモードへの切替処理の詳細については後述する。ステップＳ１１１の終了後、制御部３５０および制御部４５０は、ステップＳ１１３のタブレットモード動作に進む。

ステップＳ１１３において、制御部３５０および制御部４５０は、タブレットモード動作を行なう。すなわち、制御部３５０および制御部４５０は、サブアプリケーションが液晶パネル２４０への入力に応じて動作するように、電子機器１００の各部を制御する。タブレットモード動作の詳細については後述する。

ステップＳ１１５において、モード設定部４５４は、モード切替指示を受け付けたかどうか判断する。具体的には、モード設定部４５４は、センターキー２４２の押下に応じた信号を受け付けたかどうか判断する。ただし、モード切替指示は、センターキー２４２の押下に限られるわけではない。

タブレットモード中にモード切替指示があった場合（ステップＳ１１５においてＹＥＳ）、制御部４５０は、ステップＳ１１７のタブレットモードからマウスモードへの切替処理を実行する。モード切替指示がない場合（ステップＳ１１５においてＮＯ）、制御部３５０および制御部４５０は、ステップＳ１１３（タブレットモード動作）からの処理を繰り返す。

ステップＳ１１７において、制御部４５０は、タブレットモードからマウスモードへの切替処理を実行する。例えば、制御部４５０は、ステップＳ１１７において、マウス画面の液晶パネル２４０への表示、パネル入力処理部４５３の動作切り替えを行なう。タブレットモードからマウスモードへの切替処理の詳細については後述する。ステップＳ１１７の終了後、制御部３５０および制御部４５０は、ステップＳ１０７のマウスモード動作に進む。

なお、制御部３５０および制御部４５０は、電源オフの指示あるいは省電力状態への移行指示を受け付けた時点で、電源切断処理あるいは省電力状態への移行処理を行なう。これらの処理は割り込み処理であり、図４５のいずれかのステップの後に行われる。ただし、これらの処理は、図４５には示していない。

（マウスモード動作）
図４５のステップＳ１０７におけるマウスモード動作について、図４６を参照しつつ、詳細に説明する。図４６は、マウスモード動作の処理の流れをフローチャート形式で示す図である。

まず、第１ユニット１００１側の制御部３５０の動作について説明する。制御部３５０の動作の流れは、図４６中、左側に示されている。

ステップＳ２０１において、制御部３５０は、インターフェース部３４０から座標データを取得する。この座標データは、第２ユニット１００２側の制御部４５０が、インターフェース部４４０を介してインターフェース部３４０に送信したものである。

ステップＳ２０３において、制御部３５０は、座標データに基づいて、カーソル位置を決定する。ステップＳ２０３の処理を行なうのは、より具体的には、制御部３５０に含まれるプログラム実行部３５８である。プログラム実行部３５８は、プログラム３３４を実行して、カーソル位置を決定する。

ステップＳ２０５において、制御部３５０は、インターフェース部３４０からコマンドを取得する。このコマンドは、第２ユニット１００２側の制御部４５０が、インターフェース部４４０を介してインターフェース部３４０に送信したものである。

ステップＳ２０７において、制御部３５０は、コマンドに応じたアプリケーション動作を行なう。具体的には、プログラム実行部３５８が、プログラム３３４を実行してアプリケーション動作を行なう。プログラム実行部３５８は、アプリケーションの種類、カーソル位置およびコマンドの種類に基づいて、アプリケーション動作を決定する。

アプリケーション動作は、現在普及しているアプリケーションのマウスのクリックにともなう動作と同様のものである。アプリケーション動作は、例えば、カーソル位置にあるファイルやフォルダの選択や起動、あるいは、カーソル位置にあるボタン（最小（最大）化ボタン、閉じるボタンなど）に応じた処理の実行などを含む。

続いて、第２ユニット１００２側の制御部４５０の動作について説明する。制御部４５０の動作の流れは、図４６中、右側に示されている。

ステップＳ３０１において、制御部４５０の入力処理部４５２に含まれるパネル入力処理部４５３は、液晶パネル２４０（パネル入力部４２２）からスキャン画像を取得する。

ステップＳ３０３において、パネル入力処理部４５３は、ステップＳ３０１にて取得したスキャン画像に基づいて、液晶パネル２４０への入力位置を特定する座標データを計算する。

ステップＳ３０５において、パネル入力処理部４５３は、インターフェース部４４０を制御し、座標データを、第１ユニット１００１側のインターフェース部３４０へ送信する。

ステップＳ３０７において、パネル入力処理部４５３は、ステップＳ３０１の実行から、所定のスキャンサイクル時間が経過したかどうか判断する。スキャンサイクル時間が経過している場合（ステップＳ３０７においてＹＥＳ）、パネル入力処理部４５３は、ステップＳ３０１（スキャン画像の取得）からの処理を繰り返す。スキャンサイクル時間が経過していない場合（ステップＳ３０７においてＮＯ）、制御部４５０は、ステップＳ３０９の処理に進む。

ステップＳ３０９において、入力処理部４５２は、クリック動作があったかどうか判断する。具体的には、入力処理部４５２は、左クリックキー２４１または右クリックキー２４３の押下があったかどうかを判断する。なお、入力処理部４５２は、液晶パネル２４０へのタップ動作をクリック動作と判定してもよい。入力処理部４５２は、具体的には、所定の短時間内に液晶パネル２４０中の特定領域で、外部物体の検出開始および検出終了があった場合に、タップ動作があったと判断する。

クリック動作がない場合（ステップＳ３０９においてＮＯ）、制御部４５０は、ステップＳ３０７からの処理を繰り返す。クリック動作があった場合（ステップＳ３０９においてＹＥＳ）、制御部４５０は、ステップＳ３１１の処理に進む。

ステップＳ３１１において、入力処理部４５２は、インターフェース部４４０を制御し、ステップＳ３０９におけるクリック動作に応じて、コマンドを第１ユニット１００１側のインターフェース部３４０に送信する。

ここで、入力処理部４５２は、クリック動作の種類に応じてコマンドの種類を決定するものとする。例えば、入力処理部４５２は、左クリックキー２４１が押下されたときと、右クリックキー２４３が押下されたときとで、異なるコマンドを送信する。

なお、以上では、クリック動作によるコマンド送信を説明してきた。しかしながら、コマンド送信を引き起こす動作は、クリック動作に限られない。例えば、入力処理部４５２は、ダブルクリックやドラッグなどに応じたコマンドを送信してもよい。

（タブレットモード動作）
図４５のステップＳ１１３におけるタブレットモード動作について、図４７を参照しつつ、詳細に説明する。図４７は、タブレットモード動作の処理の流れをフローチャート形式で示す図である。

まず、第１ユニット１００１側の制御部３５０の動作について説明する。制御部３５０の動作の流れは、図４７中、左側に示されている。

ステップＳ４０１において、制御部３５０は、インターフェース部３４０からデータを取得する。ここでの「データ」とは、第２ユニット１００２側の制御部４５０が、サブアプリケーションを実行することにより作成したものである。

「データ」は、具体的には、例えば、文字（あるいは数字）データやイラストデータである。また、データは、コマンドであることもある。例えば、手書き文字入力パッドの動作画面中の「Ｅｎｔｅｒ」がタッチされた場合には、制御部３５０は、コマンドを作成する。

ステップＳ４０３において、制御部３５０は、データに応じたアプリケーション動作を行なう。具体的には、プログラム実行部３５８が、プログラム３３４を実行してアプリケーション動作を行なう。プログラム実行部３５８は、ステップＳ４０１にて取得したデータを、実行しているメインアプリケーションにより処理する。ステップＳ４０３が終了すると、制御部３５０は、ステップＳ４０１の処理に戻る。

続いて、第２ユニット１００２側の制御部４５０の動作について説明する。制御部４５０の動作の流れは、図４７中、右側に示されている。

ステップＳ５０１において、制御部４５０の入力処理部４５２に含まれるパネル入力処理部４５３は、液晶パネル２４０（パネル入力部４２２）からスキャン画像を取得する。

ステップＳ５０３において、パネル入力処理部４５３は、ステップＳ５０１にて取得したスキャン画像に基づいて、液晶パネル２４０への入力位置を特定する座標データを計算する。

ステップＳ５０５において、パネル入力処理部４５３は、ステップＳ５０１の実行から、所定のスキャンサイクル時間が経過したかどうか判断する。スキャンサイクル時間が経過している場合（ステップＳ５０５においてＹＥＳ）、パネル入力処理部４５３は、ステップＳ５０１（スキャン画像の取得）からの処理を繰り返す。スキャンサイクル時間が経過していない場合（ステップＳ５０５においてＮＯ）、制御部４５０は、ステップＳ５０７の処理に進む。

ステップＳ５０７において、制御部４５０は、サブアプリケーション動作を行なう。サブアプリケーション動作は、タイムカウントによる動作実行を含む。制御部４５０は、ステップＳ５０７において、インターフェース部４４０を制御し、データを第１ユニット１００１側に送信することもある。ステップＳ５０７におけるサブアプリケーション動作（タブレットモードでのサブアプリケーション動作）の詳細については、後述する。

ステップＳ５０９において、制御部４５０は、実行されているアプリケーションの動作を決定するデータ（「動作要素」とよぶ）を記憶部４３０に格納する。本実施の形態では、イベントからの経過時間などを含む動作パラメータ４３５や、入力履歴４３２が、動作要素に該当する。なお、制御部４５０は、ステップＳ５０９の処理を、所定の時間間隔、動作要素の変更時、動作要素の保存時（例えば、イラストの保存時）などに行なうものとする。制御部４５０は、ステップＳ５０９の実行後、ステップＳ５０５からの処理を繰り返す。

（モード切替：マウスモードからタブレットモード）
図４５のステップＳ１１１におけるモード切替（マウスモードからタブレットモード）について、図４８を参照しつつ、詳細に説明する。図４８は、モード切替（マウスモードからタブレットモード）動作の処理の流れをフローチャート形式で示す図である。

ステップＳ６０１において、制御部４５０に含まれるモード設定部４５４は、記憶部４３０に格納されている、直前アプリケーションの動作定義をロードする。

ここで、「直前アプリケーション」とは、モード設定部４５４が、タブレットモードへのモード切替指示を受け付ける前で、最後にタブレットモードで動作していたサブアプリケーションである。本実施の形態では、マウスモード時にもサブアプリケーションは動作し続けるので、直前アプリケーションは、モード切替指示時に動作しているサブアプリケーションと同一である。

ステップＳ６０３において、制御部４５０に含まれるプログラム実行部４５８は、ステップＳ６０１でロードした動作定義に基づいて、直前アプリケーションを実行する。そして、プログラム実行部４５８は、表示制御部４５６を制御して、表示部４１０に、サブアプリケーションの動作画面を表示する。

ただし、プログラム実行部４５８は、ステップＳ６０１の処理を、ステップＳ６０３の処理中に、随時、行なってもよい。すなわち、直前アプリケーションの実行中、必要に応じて、記憶部４３０に格納された動作定義を読み出し、読み出したデータに基づいて、サブアプリケーションを実行してもよい。

ステップＳ６０５において、制御部４５０に含まれるパネル入力処理部４５３は、パネル入力部４２２からの信号の処理方法を切り替える。すなわち、パネル入力処理部４５３は、パネル入力部４２２からの信号を、サブアプリケーションの動作指示に変換するようにする。

（モード切替：タブレットモードからマウスモード）
ここからは、図４５のステップＳ１１７におけるモード切替（タブレットモードからマウスモード）について、詳細に説明する。

まず、時刻カウンタのリセットをともなわないタイムカウント制御（上述の第１のタイムカウント、第３のタイムカウント）を行なう場合の、制御部４５０のモード切替（タブレットモードからマウスモード）時の動作について図４９を参照して説明する。図４９は、モード切替（タブレットモードからマウスモード）動作の第１の処理の流れをフローチャート形式で示す図である。

ステップＳ７０１において、制御部４５０に含まれるプログラム実行部４５８は、時刻カウンタ４５９の動作を停止する。なお、プログラム実行部４５８が、時刻をカウントしない場合には、制御部４５０は、ステップＳ７０１の処理を行なわない。「時刻をカウントしない場合」には、はじめからタイムカウントに絡んだ動作がないアプリケーションを実行する場合と、アプリケーションにはタイムカウントに絡んだ動作があるものの、タイムカウントを行なわないことが動作定義に設定されている場合（手書き入力パッドのモードが「手動モード」になっている場合など）とがある。

ステップＳ７０３において、制御部４５０に含まれる表示制御部４５６は、モード設定部４５４からモードの切替指示があった旨を表わす信号を受け取ると、表示データ４３３に基づいて、液晶パネル２４０にマウスモード画面を表示する。

ステップＳ７０５において、制御部４５０に含まれるパネル入力処理部４５３は、パネル入力部４２２からの信号の処理方法を切り替える。すなわち、パネル入力処理部４５３は、パネル入力部４２２からの信号を、液晶パネル１４０上のマウス動作用の信号に変換するようにする。

次に、時刻カウンタのリセットをともなうタイムカウント制御（上述の第２のタイムカウント、第４のタイムカウント）を行なう場合の、制御部４５０のモード切替（タブレットモードからマウスモード）時の動作について図５０を参照して説明する。図５０は、モード切替（タブレットモードからマウスモード）動作の第２の処理の流れをフローチャート形式で示す図である。

ステップＳ８０１において、制御部４５０に含まれるプログラム実行部４５８は、時刻カウンタ４５９による時刻のカウンタ値をリセットする。すなわち、プログラム実行部４５８は、カウンタ値を所定の初期値に設定する。初期値は、一般的には「０」であるが、これに限られるわけではない。

ステップＳ８０３からステップＳ８０７までの処理は、それぞれ、図４９に示すステップＳ７０１からステップＳ７０５までの処理と同様であり、これらの説明は繰り返さない。

（タブレットモードでのサブアプリケーション動作）
ここからは、図４７のステップＳ５０７におけるアプリケーション動作、すなわち、タブレットモード時のサブアプリケーション動作について、詳細に説明する。

まず、第１のタイムカウント動作（カウント停止）に係る、タブレットモード時のサブアプリケーション動作について図５１を参照して説明する。図５１は、タブレットモード時の第１のサブアプリケーション動作の流れをフローチャート形式で示す図である。

ステップＳ９０１において、制御部４５０に含まれるプログラム実行部４５８は、サブアプリケーションによる時刻カウントを開始する。ただし、時刻カウントを行なわない場合は、プログラム実行部４５８は、ステップＳ９０１の処理を行なわない。

ステップＳ９０３において、プログラム実行部４５８は、時刻のカウンタ値が所定の値（タイムアウト値）に達したかどうかを判断する。カウンタ値がタイムアウト値に達した場合（ステップＳ９０３においてＹＥＳ）、プログラム実行部４５８は、ステップＳ９０５の処理に進む。カウンタ値がタイムアウト値に達していない場合（ステップＳ９０３においてＮＯ）、プログラム実行部４５８は、ステップＳ９０７の処理に進む。

ステップＳ９０５において、プログラム実行部４５８は、所定のタイムアウト動作を行なう。タイムアウト動作としては、すでに説明したように、文字認識の開始や、文字の確定などがある。ステップＳ９０５のあと、プログラム実行部４５８は、ステップＳ９０７の処理に進む。

ステップＳ９０７において、プログラム実行部４５８は、入力処理部４５２からデータ送信指示を受け付けたかどうか判断する。ここで、「データ送信指示」とは、プログラム実行部４５８に、データを第１ユニット１００１のプログラム実行部３５８に対して送信することを命令する指示である。データ送信指示によって送信が指示されるデータは、サブアプリケーションにより作成されたデータ（例えば、手書き認識の結果の文字や手描きイラスト）や、メインアプリケーションの動作指示（例えば、ＥＮＴＥＲボタンの押下にともなう指示）を含む。

データ送信指示を受け付けた場合（ステップＳ９０７においてＹＥＳ）、プログラム実行部４５８は、インターフェース部４４０を制御し、第１ユニット１００１のプログラム実行部３５８へデータを送信する。その後、プログラム実行部３５８は、ステップＳ９０３（タイムアウトの判断）からの処理を繰り返す。

データ送信指示を受け付けていない場合（ステップＳ９０７においてＮＯ）、プログラム実行部３５８は、データを送信することなく、ステップＳ９０３（タイムアウトの判断）からの処理を繰り返す。

次に、第２のタイムカウント動作（タブレットモード再開時に時刻カウントをリセットするカウント動作）に係る、タブレットモード時のサブアプリケーション動作について図５２を参照して説明する。図５２は、タブレットモード時の第２のサブアプリケーション動作の流れをフローチャート形式で示す図である。

ステップＳ１００１において、プログラム実行部４５８は、時刻のカウンタ値をリセットする。すなわち、図５０のステップＳ８０１と同様に、プログラム実行部４５８は、カウンタ値を所定の初期値に設定する。初期値は、一般的には「０」であるが、これに限られるわけではない。

ステップＳ１００３からステップＳ１０１１の処理は、それぞれ、ステップＳ９０１からステップＳ９０９の処理と同様である。したがって、これらの説明は繰り返さない。

次に、第３のタイムカウント動作（タブレットモード再開後、入力の開始または終了に応じて、時刻カウントを再開するカウント動作）に係る、タブレットモード時のサブアプリケーション動作について図５３を参照して説明する。図５３は、タブレットモード時の第３のサブアプリケーション動作の流れをフローチャート形式で示す図である。

ステップＳ１１０１において、制御部４５０に含まれるプログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）したかどうか判断する。すなわち、プログラム実行部３５８は、入力処理部４５２から、所定の入力に対応する信号を受け付けた（あるいは信号が終了した）かどうか判断する。例えば、プログラム実行部３５８は、液晶パネル２４０内、あるいは、液晶パネル２４０内の所定の領域（手書きエリアなど）内へのタッチを表わす入力処理部４５２からの信号が開始した（または終了した）かどうか判断する。

プログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）していないと判断すると（ステップＳ１１０１においてＮＯ）、ステップＳ１１０１の処理を再び行なう。プログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）したと判断すると（ステップＳ１１０１においてＹＥＳ）、ステップＳ１１０３の処理に進む。

ステップＳ１１０３からステップＳ１１１１の処理は、それぞれ、ステップＳ９０１からステップＳ９０９の処理と同様である。したがって、これらの説明は繰り返さない。

最後に、第４のタイムカウント動作（カウント停止＋リセット＋入力開始または終了で再開）に係る、タブレットモード時のサブアプリケーション動作について図５４を参照して説明する。図５４は、タブレットモード時の第４のサブアプリケーション動作の流れをフローチャート形式で示す図である。

ステップＳ１２０１において、プログラム実行部４５８は、時刻のカウンタ値をリセットする。すなわち、プログラム実行部４５８は、カウンタ値を所定の初期値に設定する。

ステップＳ１２０３において、制御部４５０に含まれるプログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）したかどうか判断する。この処理は、ステップＳ１１０１と同様である。したがって、その詳細な説明は繰り返さない。

プログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）していないと判断すると（ステップＳ１２０３においてＮＯ）、ステップＳ１２０３の処理を再び行なう。プログラム実行部４５８は、液晶パネル２４０へのタッチが開始（または終了）したと判断すると（ステップＳ１２０３においてＹＥＳ）、ステップＳ１２０５の処理に進む。

ステップＳ１２０５からステップＳ１２１３の処理は、それぞれ、ステップＳ１００５からステップＳ１０１１の処理と同様である。したがって、これらの説明は繰り返さない。

［その他］
本発明の実施の形態にあたっては、液晶パネル１４０は、入力部としての機能を持たず、画面の表示のみを行なうディスプレイ（単機能ディスプレイ）であってもよい。液晶パネル１４０が大型でタッチパネルにするのが困難な場合に、この構成は有用である。

上記の実施の形態に係る電子機器１００は、タブレットモードからマウスモードへの移行後、マウスモードの間も、サブアプリケーションの実行を続けている。ただし、電子機器１００は、マウスモードへの移行時に、サブアプリケーションを終了しても構わない。

この場合、電子機器１００は、タブレットモードの間に、アプリケーションの設定を記憶部４３０に格納しておく。これは、タブレットモードの再開時に、ユーザがマウスモード移行前のサブアプリケーションを引き続き実行できるようにするためである。電子機器１００は、アプリケーションの設定を、例えば、所定の時間間隔で、記憶部４３０に格納する。あるいは、電子機器１００は、マウスモードへの移行時に、アプリケーションの設定を記憶部４３０に格納してもよい。また、電子機器１００は、上記の両方のタイミングで、アプリケーションの設定を記憶部４３０に格納してもよい。

さらに、上では、タイムカウント処理をともなうサブアプリケーションとして、手書き文字入力パッドについて説明してきた。しかしながら、本実施の形態に係る電子機器１００で実行することが有益なサブアプリケーションは、これに限られるわけではない。電子機器１００は、より一般的な時間変化するサブアプリケーションを実行する際に、ユーザの利便性を向上することができる。

例えば、電子機器１００を用いて動画再生ソフトを実行することを考える。この場合、電子機器１００が、マウスモードにおいて、動画進行に関するカウントを停止することで、ユーザは、マウスモードの前後で、動画を連続して見ることができる。

また、第１ユニット１００１と第２ユニット１００２とは、データのやり取りを除いて独立に動作する。そのため、第２ユニット１００２は、取り外し可能であってもよい。さらに、第２ユニット１００２は、第２ユニット１００２と同等の機能を有する他のユニット（例えば、携帯情報端末）と取り替え可能であってもよい。したがって、第１ユニット１００１を備える電子機器と、その電子機器に接続されている、あるいは接続可能なユニットとを含むシステムを、本発明の一態様と考えることができる。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

１００ 電子機器、１００Ａ 筐体、１００Ｂ 筐体、１００Ｃ ヒンジ、１０１ 本体装置、１０２ 表示装置、１０２Ａ 表示装置、１０３ 表示装置、１０４ 本体装置、１３０ ドライバ、１３１ 走査信号線駆動回路、１３２ データ信号線駆動回路、１３３ 光センサ駆動回路、１３４ スイッチ、１３５ アンプ、１４０ 光センサ内蔵液晶パネル、１４０Ａ 光センサ内蔵液晶パネル、１４１ 画素回路、１４１ｂ サブピクセル回路、１４１ｇ サブピクセル回路、１４１ｒ サブピクセル回路、１４３ 電極対、１４３ａ 画素電極、１４３ｂ 対向電極、１４４ 光センサ回路、１４５ フォトダイオード、１４５ｂ フォトダイオード、１４５ｇ フォトダイオード、１４５ｒ フォトダイオード、１４６ コンデンサ、１５１Ａ アクティブマトリクス基板、１５１Ｂ 対向基板、１５２ 液晶層、１５３ｂ カラーフィルタ、１５３ｇ カラーフィルタ、１５３ｒ カラーフィルタ、１５７ データ信号線、１６１ 偏光フィルタ、１６２ ガラス基板、１６３ 遮光膜、１６４ 配向膜、１７０ ハードディスク、１７３ メモリカードリーダライタ、１７４ 外部通信部、１７５ マイク、１７６ スピーカ、１７７ 操作キー、１７９ バックライト、１８０ 画像処理エンジン、１８１ ドライバ制御部、１８２ タイマ、１８３ 信号処理部、１９１ 電源スイッチ、１９２ 電源回路、１９３ 電源検出部、１９４ コネクタ、１９５ アンテナ、１９６ コネクタ、２３０ ドライバ、２４０ 光センサ内蔵液晶パネル，２４１ 左クリックキー、２４２ センターキー、２４３ 右クリックキー、２７３ タイマ、２７４ 外部通信部、２７９ バックライト、２８０ 画像処理エンジン、２８１ ドライバ制御部、２８２ タイマ、２８３ 信号処理部、２９３ 電源検出部、２９４ コネクタ、２９５ アンテナ、２９７ 信号強度検出部、３１０ 表示部、３２０ 入力部、３３０ 記憶部、３３３ 表示データ、３３４ プログラム、３３５ 動作パラメータ、３４０ インターフェース部、３５０ 制御部、３５２ 入力処理部、３５６ 表示制御部、３５８ プログラム実行部、４１０ 表示部、４２０ 入力部、４２２ パネル入力部、４３０ 記憶部、４３１ 入力データ、４３２ 入力履歴、４３２ａ 文字データ、４３２ｂ イラストデータ、４３３ 表示データ、４３４ プログラム、４３５ 動作パラメータ、４３６ 時刻データ、４３７ モードデータ、４４０ インターフェース部、４５０ 制御部、４５２ 入力処理部、４５３ パネル入力処理部、４５４ モード設定部、４５６ 表示制御部、４５８ プログラム実行部、４５９ 時刻カウンタ、５００ 動作画面、５１０ カーソル、６００ マウス画面、６１０ ガイダンス表示、６１２ 左ガイダンス表示、６１４ センターガイダンス表示、６１６ 右ガイダンス表示、７００ 動作画面、８００ 画面、８００ａ ホームメニュー画面、８００ｂ 画面、８００ｃ 画面、８００ｄ ウィンドウ、８１０ ガイダンス表示、８１２ 左ガイダンス表示、８１４ センターガイダンス表示、８１６ 右ガイダンス表示、８２０ 操作ボタン表示、８３０ マウス不可表示、８４０ ホームボタン、９００ 指、９５０ スタイラス、１００１ 第１のユニット、１００１Ａ ユニット、１００２ 第２のユニット、１３００ 電子機器、１７３１ メモリカード。

Claims (13)

1. 第１の画面を表示するディスプレイと、
   第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、
   記憶部と、
   前記ディスプレイ、前記タブレットおよび前記記憶部を制御する制御手段とを備え、
   前記制御手段は、
   前記制御手段の第１の動作モードと第２の動作モードとを切り替えるモード切替手段と、
   プログラムを実行する実行手段とを含み、
   前記実行手段は、
   前記第１の動作モードにおいて、前記タブレットへの前記入力に応じて前記プログラムを実行し、実行された前記プログラムが作成した画像を前記ディスプレイに表示し、
   前記第２の動作モードにおいて、前記タブレットへの前記入力に応じて前記プログラムを実行し、実行された前記プログラムが作成した画像を前記タブレットに表示し、
   前記第２の動作モードにおいて実行される前記プログラムの動作を決定する動作要素を前記記憶部に格納し、前記第２の動作モードの再開後に、格納された前記動作要素に基づいて前記プログラムを実行し、
   前記第２の動作モードにおいて発生した所定のイベントからの経過時間をカウントし、
   前記動作要素は、カウントされた前記経過時間を含み、
   前記実行手段は、前記第１の動作モードの間、前記経過時間のカウント動作を停止する、電子機器。
2. 前記動作要素は、前記第２の動作モードにおける前記タブレットへの前記入力の履歴を表わす入力履歴を含む、請求項１に記載の電子機器。
3. 前記実行手段は、前記第２の動作モードにおける前記タブレットへの前記入力の開始または終了イベントに応じて、停止された前記カウント動作を再開する、請求項１または２に記載の電子機器。
4. 前記実行手段は、停止された前記カウント動作の再開にあたり、前記経過時間を初期値から再カウントする、請求項１〜３のいずれか１項に記載の電子機器。
5. 前記実行手段は、前記第２の動作モードから前記第１の動作モードへの移行に応じてカウントされた前記経過時間をリセットする、請求項１〜３のいずれか１項に記載の電子機器。
6. 前記実行手段は、カウントされた前記経過時間が閾値を超えたときに前記プログラムによる所定の処理を実行する、請求項１〜５のいずれか１項に記載の電子機器。
7. 前記実行手段は、前記第２の動作モードにおける前記タブレットへの前記入力からのカウントされた前記経過時間が前記閾値を超えたときに前記所定の処理を実行する、請求項６に記載の電子機器。
8. 前記実行手段は、前記第２の動作モードにおける前記タブレットへの前記入力からのカウントされた前記経過時間が前記閾値を超えたときに、前記第２の動作モードにおける前記タブレットへの前記入力の履歴を文字認識する、請求項７に記載の電子機器。
9. 前記プログラムは、第１のプログラムと第２のプログラムとを含み、
   前記実行手段は、前記第１の動作モードにおいて、前記タブレットへの入力に応じて前記第１のプログラムを実行し、前記第２の動作モードにおいて、前記タブレットへの入力に応じて前記第２のプログラムを実行する、請求項１から８のいずれか１項に記載の電子機器。
10. 前記実行手段は、
    第１の実行手段と、
    第２の実行手段とを含み、
    前記第１の実行手段は、前記第１の動作モードにおいて前記タブレットへの入力に応じて前記第１のプログラムを実行し、
    前記第２の実行手段は、前記第２の動作モードにおいて前記タブレットへの入力に応じて前記第２のプログラムを実行する、請求項９に記載の電子機器。
11. 第１の情報処理ユニットと第２の情報処理ユニットとを備える情報処理システムであって、
    前記第１の情報処理ユニットは、
    第１の画面を表示するディスプレイと、
    前記第２の情報処理ユニットとデータの授受を行なう第１のインターフェース部と、
    前記ディスプレイおよび前記第１のインターフェース部を制御する第１の制御手段とを備え、
    前記第１の制御手段は、
    第１のプログラムを実行し、実行された前記第１のプログラムが作成した画像を前記ディスプレイに表示する第１の実行手段を含み、
    前記第２の情報処理ユニットは、
    第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、
    前記第１の情報処理ユニットとデータの授受を行なう第２のインターフェース部と、
    前記タブレットおよび前記第２のインターフェース部を制御する第２の制御手段とを備え、
    前記第２の制御手段は、
    前記第２の制御手段の第１の動作モードと第２の動作モードとを切り替えるモード切替手段と、
    第２のプログラムを実行する第２の実行手段とを含み、
    前記第２の実行手段は、
    前記第１の動作モードにおいて、前記タブレットへの前記入力に応じて前記第１のプログラムのコマンドを作成し、前記第２のインターフェース部を制御して前記コマンドを前記第１の情報処理ユニットに送信し、
    前記第２の動作モードにおいて、前記タブレットへの前記入力に応じて前記第２のプログラムを実行し、実行された前記第２のプログラムが作成した画像を前記タブレットに表示し、
    前記第２のプログラムの動作を決定する動作要素を前記情報処理システム内の記憶装置に格納し、前記第２の動作モードの再開後に、格納された前記動作要素に基づいて前記第２のプログラムを実行し、
    前記第２の動作モードにおいて発生した所定のイベントからの経過時間をカウントし、
    前記動作要素は、カウントされた前記経過時間を含み、
    前記第２の実行手段は、前記第１の動作モードの間、前記経過時間のカウント動作を停止する、情報処理システム。
12. 第１の画面を表示するディスプレイと、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、記憶部と、プログラムを実行する実行手段とを有する電子機器の制御方法であって、
    前記電子機器の第１の動作モードと第２の動作モードとを切り替えるステップと、
    前記第１の動作モードにおいて、前記タブレットへの前記入力に応じて前記実行手段により前記プログラムを実行し、実行された前記プログラムが作成した画像を前記ディスプレイに表示するステップと、
    前記第２の動作モードにおいて実行される前記プログラムの動作を決定する動作要素を前記記憶部に格納するステップと、
    前記第２の動作モードにおいて、前記タブレットへの前記入力に応じて前記実行手段により前記プログラムを実行し、実行された前記プログラムが作成した画像を前記タブレットに表示するステップとを備え、
    前記第２の動作モードにおいて前記プログラムを実行するステップは、前記第２の動作モードの再開後に、格納された前記動作要素に基づいて前記プログラムを実行するステップと、
    前記第２の動作モードにおいて発生した所定のイベントからの経過時間をカウントするステップとを含み、
    前記動作要素は、カウントされた前記経過時間を含み、
    前記第２の動作モードにおいて前記プログラムを実行するステップは、前記第１の動作モードの間、前記経過時間のカウント動作を停止するステップをさらに含む、電子機器の制御方法。
13. 第１の画面を表示するディスプレイと、第２の画面を表示し、かつ、外部からの入力を受け付け可能な表示一体型のタブレットと、記憶部とを有する電子機器の制御プログラムであって、
    前記電子機器の第１の動作モードと第２の動作モードとを切り替えるステップと、
    前記第１の動作モードにおいて、前記タブレットへの前記入力に応じてプログラムを実行し、実行された前記プログラムが作成した画像を前記ディスプレイに表示するステップと、
    前記第２の動作モードにおいて実行する前記プログラムの動作を決定する動作要素を前記記憶部に格納するステップと、
    前記第２の動作モードにおいて、前記タブレットへの前記入力に応じて前記プログラムを実行し、実行された前記プログラムが作成した画像を前記タブレットに表示するステップとを備え、
    前記第２の動作モードにおいて前記プログラムを実行するステップは、前記第２の動作モードの再開後に、格納された前記動作要素に基づいて前記プログラムを実行するステップと、
    前記第２の動作モードにおいて発生した所定のイベントからの経過時間をカウントするステップとを含み、
    前記動作要素は、カウントされた前記経過時間を含み、
    前記第２の動作モードにおいて前記プログラムを実行するステップは、前記第１の動作モードの間、前記経過時間のカウント動作を停止するステップをさらに含む、電子機器の制御プログラム。

Images