JP2010134625A - 電子機器、表示制御方法、およびプログラム - Google Patents

Abstract

【課題】入力領域を示した画像を移動させるための操作入力を受付けたとき、当該操作入力に応じた位置に当該画像を表示するとともに、当該位置とは異なる位置に他の入力領域を示した画像を表示する。
【解決手段】電子機器１００は、液晶パネル２４０の表示領域の少なくとも一部の領域に、第１入力領域を示す第１画像を表示させる表示制御部１１と、第１画像が選択されたことを検知する第１検知部１３と、選択された第１画像を移動させるための操作入力を受け付けたことを検知する第２検知部１４とを備える。操作入力を受け付けたことが検知された場合、表示制御部１１は、第１画像の表示位置を、選択された際に表示されていた位置から、操作入力に応じた位置に切換える。さらに、表示制御部１１は、表示領域のうち、操作入力に応じた位置とは異なる位置に、第２入力領域を示す第２画像を表示させる。
【選択図】図１４

Description

本発明は、タッチパネルを備えた電子機器、電子機器における表示制御方法、および表示制御方法を電子機器に実行させるためのプログラムに関する。

従来、キーボード操作とポインティングデバイス操作との操作移行時に、ユーザの腕の動きを少なくすることが可能な入力装置が知られている。

このような入力装置の１つとして、特許文献１には、キーボードの表示パターンデータとポインティングデバイスの表示パターンデータとを入力装置の表示パターンとして格納する記憶手段を備える入力装置が開示されている。当該入力装置は、記憶手段から選択されて読出される表示パターンデータに従って入力装置のパターン表示を行なう液晶表示装置と、表示されるパターンを表面から目視可能に重ねて配置されたタッチセンサパネルとを備える。さらに、入力装置は、タッチセンサパネルに対して指示された位置情報からその位置に対応する液晶表示装置上の領域が表象する情報を取得し、当該取得した情報を所定のコードデータとして出力する。当該構成により、入力装置は、単一の機器でキーボードによる操作とポインティングデバイスによる操作とを切換え可能としている。

また、特許文献２には、仮想キー入力方式と手書き文字認識方式とを切換えることができる情報入力装置が開示されている。当該情報入力装置は、初期状態においては、仮想キー入力方式を選択する。情報入力装置は、スイッチがオフであれば、仮想キー入力方式を維持する。一方、情報入力装置は、スイッチがオンの場合、仮想キーを消去して手書入力文字認識方式を選択する。

また、特許文献３には、タブレット上で機能切換えシートを交換しながら各種機能を実行するペン入力装置が開示されている。当該ペン入力装置は、機能切換えシートによって、たとえばキーボードとして機能する。
特開平７−５９６９号公報 特開平６−４２１１号公報 特開平９−３２５８４８号公報

しかしながら、特許文献１の入力装置は、キーボードとポインティングデバイスとを同時に表示することはできない。また、特許文献２の情報入力装置は、仮想キーと手書文字認識領域とを同時に表示することはできない。また、特許文献３のペン入力装置は、シートを交換して各種機能を実行する構成であるため、各機能を実行するための複数の画面を同時に表示できない。

さらに、特許文献１の入力装置は、キーボードの表示位置を変更することはできない。また、特許文献２の情報入力装置は、仮想キーの表示位置を変更することはできない。また、特許文献３には、シートをタブレット上で移動することについては開示されていない。このため、特許文献３のペン入力装置は、機能切換えシートが他の機能切換えシートに交換されてもキー配列を変更するだけであり、キーボード自体の表示位置は変更しない。

本願発明は上記の問題点を鑑みなされたものであって、その目的は、入力を受付ける入力領域を示した画像を移動させるための操作入力を受付けたとき、当該操作入力に応じた位置に当該画像を表示することが可能であるとともに、当該位置とは異なる位置に他の入力を受付ける入力領域を示した画像をさらに表示可能な電子機器、表示制御方法、およびプログラムを提供することにある。

本発明のある局面に従うと、電子機器は、第１表示領域を有するタッチパネルと、第１表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させる表示制御手段と、表示されている第１画像が選択されたことを検知する第１検知手段と、選択された第１画像を移動させるための第１操作入力を受付けたことを検知する第２検知手段とを備える。第１操作入力を受付けたことが検知された場合、表示制御手段は、第１画像の表示位置を、選択された際に表示されていた位置から、第１操作入力に応じた位置に切換え、第１表示領域のうち、第１操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させる。

好ましくは、表示制御手段は、第１画像の移動の方向に基づき、第２画像の表示位置を決定する。

好ましくは、電子機器は、第２画像が表示される位置に応じて、第２画像の表示内容を決定する第１決定手段をさらに備える。表示制御手段は、決定された表示内容の第２画像を当該位置に表示させる。

好ましくは、電子機器は、第２表示領域を有する表示装置と、アプリケーションが実行され、かつ当該アプリケーションに基づく画像が前記第２表示領域に表示されている場合、当該アプリケーションに応じて、第２画像の表示内容を決定する第１決定手段をさらに備える。表示制御手段は、第１操作入力に応じた位置とは異なる位置に、決定された表示内容の第２画像を表示させる。

好ましくは、第１操作入力に応じた位置とは異なる位置に第２画像が表示された場合、表示制御手段は、第１操作入力に応じた位置に、第１画像を縮小した縮小画像を表示させる。

好ましくは、電子機器は、第１画像の表示位置を切換える場合に、前記受付けた第１操作入力に基づいて、第１画像の全体が第１表示領域に表示可能であるか否かを判断する判断手段をさらに備える。第１表示領域に表示可能ではないと判断された場合、表示制御手段は、第１画像のうちの第１表示領域に表示可能でない部分を非表示とする。

好ましくは、電子機器は、第１操作入力を受付けたことが検知された場合、第１操作入力に応じた位置に基づき、第２画像を表示する領域のサイズを決定する第２決定手段と、決定されたサイズに基づき、第２画像の表示態様を決定する第３決定手段とをさらに備える。表示制御手段は、第１操作入力に応じた位置とは異なる位置に、決定された表示態様にて第２画像を表示させる。

好ましくは、第２検知手段は、さらに、選択された第１画像を当該第１画像の移動の方向とは反対の方向に移動させるための第２操作入力を受付けたことを検知する。第２操作入力が受付けられたことが検知された場合、表示制御手段は、第１画像の表示位置を、第１操作入力に応じた位置から、選択された際に表示されていた位置に切換え、さらに第２画像を非表示にする。

好ましくは、電子機器は、第２表示領域を有する表示装置をさらに備える。第２画像は、第２表示領域に表示されているアプリケーションに基づく画像に関連する画像である。アプリケーションが終了した場合、表示制御手段は、第１画像の表示位置を、第１操作入力に応じた位置から、選択された際に表示されていた位置に切換え、さらに第２画像を非表示にする。

好ましくは、第２画像は、第２表示領域に表示されているアプリケーションに基づく画像に関連する画像である。アプリケーションが終了した場合、表示制御手段は、第１画像の表示位置を、第１操作入力に応じた位置から、選択された際に表示されていた位置に切換え、さらに第２画像を非表示にする。

好ましくは、電子機器は、第１操作入力に応じた位置とは異なる位置に第２画像が表示された場合に、第１入力領域を介した第１入力と第２入力領域を介した第２入力とを受付ける受付手段をさらに備える。

好ましくは、第１画像は、ソフトウェアキーボードのキーボードを示す画像である。
好ましくは、タッチパネルは、多点入力を受付け、第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含む。第１検知手段は、第１キー群のうちの少なくとも１つのキーを指定する入力と、第２キー群のうちの少なくとも１つのキーを指定する入力とを、多点入力として受付けたことを検知し、当該多点入力を受付けたことを検知することにより、第１画像が選択されたことを検知する。第１操作入力が、第１要素画像を移動させるための入力である場合、表示制御手段は、第１要素画像の表示位置を、選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。

好ましくは、タッチパネルは、多点入力を受付け、第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含む。第１検知手段は、第１キー群のうちの少なくとも１つのキーを指定する入力と、第２キー群のうちの少なくとも１つのキーを指定する入力とを、多点入力として受付けたことを検知し、当該多点入力を受付けたことを検知することにより、第１画像が選択されたことを検知する。第１操作入力が、第１要素画像および第２要素画像を移動させるための入力である場合、表示制御手段は、第１要素画像の表示位置および第２要素画像の表示位置を、選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。

好ましくは、タッチパネルは、表示領域に沿って内蔵された複数の光センサを含む。
本発明の他の局面に従うと、表示制御方法は、タッチパネルを備える電子機器における表示制御方法であって、タッチパネルにおける表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させるステップと、表示されている第１画像が選択されたことを検知するステップと、選択された第１画像を移動させるための操作入力を受付けたことを検知するステップと、操作入力を受付けたことが検知された場合、第１画像の表示位置を、選択された際に表示されていた位置から、操作入力に応じた位置に切換えるとともに、表示領域のうち、操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させるステップとを備える。

本発明のさらに他の局面に従うと、プログラムは、タッチパネルを備える電子機器における表示制御方法を電子機器に実行させるためのプログラムであって、表示制御方法は、タッチパネルにおける表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させるステップと、表示されている第１画像が選択されたことを検知するステップと、選択された第１画像を移動させるための操作入力を受付けたことを検知するステップと、操作入力を受付けたことが検知された場合、第１画像の表示位置を、選択された際に表示されていた位置から、操作入力に応じた位置に切換えるとともに、表示領域のうち、操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させるステップとを備える。

電子機器が、第１入力を受付ける第１入力領域を示した第１画像が表示している場合に、第２入力を受付ける第２入力領域を示した第２画像をさらに表示するとき、電子機器は、第１画像を移動させるための操作入力に応じた位置に第１画像を表示することができる。

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

本発明に係る電子機器の一実施態様について、図１から図２８を参照して説明すると以下のとおりである。

＜電子機器の外観＞
図１は、本実施の形態に係る電子機器１００の外観を示した図である。図１を参照して、電子機器１００は、第１の筐体１００Ａと第２の筐体１００Ｂとを含む。

第１の筐体１００Ａと第２の筐体１００Ｂとは、ヒンジ１００Ｃにより折畳み可能に接続されている。第１の筐体１００Ａは、光センサ内蔵液晶パネル１４０を備える。第２の筐体１００Ｂは、光センサ内蔵液晶パネル２４０を備える。このように、電子機器１００は、光センサ内蔵液晶パネルを２つ備える。

なお、電子機器１００は、ＰＤＡ（Personal Digital Assistant）、ノート型のパーソナルコンピュータ、携帯型電話機、電子辞書などの表示機能を有する携帯型デバイスとして構成される。

＜ハードウェア構成について＞
次に、図２を参照して、電子機器１００の具体的構成の一態様について説明する。図２は、電子機器１００のハードウェア構成を表わすブロック図である。電子機器１００は、主たる構成要素として、本体装置１０１と、表示装置１０２と、表示装置１０３とを含む。

第１の筐体１００Ａは、表示装置１０２を含む。第２の筐体１００Ｂは、本体装置１０１と表示装置１０３とを含む。なお、電子機器１００は、第２の筐体１００Ｂの代わりに第１の筐体１００Ａに本体装置１０１を含んでもよい。

本体装置１０１は、ＣＰＵ（Central Processing Unit）１１０と、ＲＡＭ（Random Access Memory）１７１と、ＲＯＭ（Read-Only Memory）１７２と、メモリカードリーダライタ１７３と、通信部１７４と、マイク１７５と、スピーカ１７６と、操作キー１７７とを含む。各構成要素は、相互にデータバスＤＢ１によって接続されている。メモリカードリーダライタ１７３には、メモリカード１７３１が装着される。

ＣＰＵ１１０は、プログラムを実行する。操作キー１７７は、電子機器１００の使用者による指示の入力を受ける。ＲＡＭ１７１は、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、または操作キー１７７を介して入力されたデータを揮発的に格納する。ＲＯＭ１７２は、データを不揮発的に格納する。また、ＲＯＭ１７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。通信部１７４は、図示しない他の電子機器との間で無線通信を行なう。なお、図２には図示していないが、電子機器１００が、他の電子機器に有線により接続するためのインターフェイス（ＩＦ）を備える構成としてもよい。

表示装置１０２は、ドライバ１３０と、光センサ内蔵液晶パネル１４０（以下、液晶パネル１４０と称する）と、内部ＩＦ１７８と、バックライト１７９と、画像処理エンジン１８０とを含む。

ドライバ１３０は、液晶パネル１４０およびバックライト１７９を駆動するための駆動回路である。ドライバ１３０に含まれる各種の駆動回路については、後述する。

液晶パネル１４０は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、液晶パネル１４０は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行なうことができる。液晶パネル１４０の詳細については、後述する。

内部ＩＦ（Interface）１７８は、本体装置１０１と表示装置１０２との間で、データの遣り取りを仲介する。

バックライト１７９は、液晶パネル１４０の裏面に配置された光源である。バックライト１７９は、当該裏面に対して均一な光を照射する。

画像処理エンジン１８０は、ドライバ１３０を介して液晶パネル１４０の動作を制御する。ここで、当該制御は、内部ＩＦ１７８を介して本体装置１０１から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン１８０は、液晶パネル１４０から出力されるデータを処理し、処理したデータを内部ＩＦ１７８を介して本体装置１０１に送る。さらに、画像処理エンジン１８０は、ドライバ制御部１８１と、タイマ１８２と、信号処理部１８３とを含む。

ドライバ制御部１８１は、ドライバ１３０に対して制御信号を送ることによりドライバ１３０の動作を制御する。また、ドライバ制御部１８１は、本体装置１０１から送られてくるコマンドを解析する。そして、ドライバ制御部１８１は、当該解析の結果に基づいた制御信号をドライバ１３０に送る。ドライバ１３０の動作の詳細については、後述する。

タイマ１８２は、時刻情報を生成し、信号処理部１８３に対して時刻情報を送る。
信号処理部１８３は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部１８３は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部１８３は、当該デジタルデータに対して、本体装置１０１から送られてくるコマンドの内容に応じたデータ処理を行なう。そして、信号処理部１８３は、上記データ処理を行なった後のデータと、タイマ１８２から取得した時刻情報とを含んだデータ（以下、応答データと称する）を本体装置１０１に送る。また、信号処理部１８３は、後述するスキャンデータを連続して複数格納できるＲＡＭ（図示せず）を備えている。

上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する（図７〜図９）。

なお、タイマ１８２は、必ずしも画像処理エンジン１８０に備えられている必要はない。たとえば、タイマ１８２は、表示装置１０２内における、画像処理エンジン１８０の外部に備えられていてもよい。あるいは、タイマ１８２は、本体装置１０１に備えられていてもよい。また、マイク１７５およびスピーカ１７６は、電子機器１００が常に備える構成ではなく、電子機器１００の実施例によっては、マイク１７５およびスピーカ１７６のいずれかあるいは両方を有さない構成であってもよい。

ここで、表示装置１０２は、システム液晶を含んでいる。なお、システム液晶とは、液晶パネル１４０の周辺機器を当該液晶パネル１４０のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、液晶パネル１４０のガラス基板上に一体形成されている。なお、表示装置１０２が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、上記ガラス基板以外の基板に構成されていてもよい。

表示装置１０３は、ドライバ２３０と、光センサ内蔵液晶パネル２４０（以下、「液晶パネル２４０」と称する）と、内部ＩＦ２７８と、バックライト２７９と、画像処理エンジン２８０とを含む。画像処理エンジン２８０は、ドライバ制御部２８１と、タイマ２８２と、信号処理部２８３とを含む。

表示装置１０３は、表示装置１０２と同様な構成を有する。つまり、ドライバ２３０、液晶パネル２４０、内部ＩＦ２７８、バックライト２７９、および画像処理エンジン２８０は、表示装置１０２における、ドライバ１３０、液晶パネル１４０、内部ＩＦ１７８、バックライト１７９、画像処理エンジン１８０と同じ構成をそれぞれ有する。ドライバ制御部２８１、タイマ２８２、および信号処理部２８３は、表示装置１０２における、ドライバ制御部１８１、タイマ１８２、信号処理部１８３と同じ構成をそれぞれ有する。したがって、表示装置１０３に含まれる各機能ブロックについての説明は、繰り返さない。

ところで、電子機器１００における処理は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、ＲＯＭ１７２に予め記憶されている場合がある。また、ソフトウェアは、メモリカード１７３１その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ１７３その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部１７４または通信ＩＦ（図示せず）を介してダウンロードされた後、ＲＯＭ１７２に一旦格納される。そのソフトウェアは、ＣＰＵ１１０によってＲＯＭ１７２から読み出され、ＲＡＭ１７１に実行可能なプログラムの形式で格納される。ＣＰＵ１１０は、そのプログラムを実行する。

図２に示される電子機器１００の本体装置１０１を構成する各構成要素は、一般的なものである。したがって、本発明の本質的な部分は、ＲＡＭ１７１、ＲＯＭ１７２、メモリカード１７３１その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、電子機器１００の本体装置１０１のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。

なお、記憶媒体としては、メモリカードに限られず、ＣＤ−ＲＯＭ、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。

ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。

＜光センサ内蔵液晶パネルの構成および駆動について＞
次に、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路の構成とについて説明する。図３は、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路とを示した図である。

図３を参照して、液晶パネル１４０は、画素回路１４１と、光センサ回路１４４と、走査信号線Ｇｉと、データ信号線ＳＲｊと、データ信号線ＳＧｊと、データ信号線ＳＢｊと、センサ信号線ＳＳｊと、センサ信号線ＳＤｊと、読出信号線ＲＷｉと、リセット信号線ＲＳｉとを含む。なお、ｉは、１≦ｉ≦ｍを満たす自然数であり、ｊは１≦ｊ≦ｎを満たす自然数である。

また、図２に示した表示装置１０２のドライバ１３０は、液晶パネル１４０の周辺回路として、走査信号線駆動回路１３１と、データ信号線駆動回路１３２と、光センサ駆動回路１３３と、スイッチ１３４と、アンプ１３５とを含む。

走査信号線駆動回路１３１は、図２に示すドライバ制御部１８１から制御信号ＴＣ１を受ける。そして、走査信号線駆動回路１３１は、制御信号ＴＣ１に基づき、各走査信号線（Ｇ１〜Ｇｍ）に対して、走査信号線Ｇ１から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路１３１は、単位時間毎に走査信号線（Ｇ１〜Ｇｍ）の中から１つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するＴＦＴ（Thin Film Transistor）１４２のゲートをターンオンできるだけの電圧（以下、ハイレベル電圧）を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。

データ信号線駆動回路１３２は、図２に示すドライバ制御部１８１から画像データ（ＤＲ，ＤＧ，ＤＢ）を受ける。そして、データ信号線駆動回路１３２は、３ｎ個のデータ信号線（ＳＲ１〜ＳＲｎ，ＳＧ１〜ＳＧｎ，ＳＢ１〜ＳＢｎ）に対して、上記単位時間毎に、１行分の画像データに対応する電圧を順次印加する。

なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。

画素回路１４１は、１つの画素の輝度（透過率）を設定するための回路である。また、画素回路１４１は、マトリクス状にｍ×ｎ個配されている。より詳しくは、画素回路１４１は、図３の縦方向にｍ個、横方向にｎ個配されている。

画素回路１４１は、Ｒサブピクセル回路１４１ｒと、Ｇサブピクセル回路１４１ｇと、Ｂサブピクセル回路１４１ｂとからなる。これら３つの回路（１４１ｒ，１４１ｇ，１４１ｂ）は、それぞれ、ＴＦＴ１４２と、画素電極と対向電極とからなる１組の電極対１４３と、図示しないコンデンサとを含む。

なお、ｎ型のトランジスタとｐ型のトランジスタとを作れるＣＭＯＳ（Complementary Metal Oxide Semiconductor）を実現できること、キャリア（電子または正孔）の移動速度がアモルファスシリコン薄膜トランジスタ（a-Si TFT）に比べて数百倍早いことなどから、表示装置１０２では、ＴＦＴ１４２として多結晶シリコン薄膜トランジスタ(p-Si TFT)が用いられる。なお、ＴＦＴ１４２は、ｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４２がｐ型チャネルの電界効果トランジスタであってもよい。

Ｒサブピクセル回路１４１ｒ内のＴＦＴ１４２のソースはデータ信号線ＳＲｊに接続されている。また、当該ＴＦＴ１４２のゲートは走査信号線Ｇｉに接続されている。さらに、当該ＴＦＴ１４２のドレインは、電極対１４３の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Ｇサブピクセル回路１４１ｇおよびＢサブピクセル回路１４１ｂについても、各ＴＦＴ１４２のソースが接続されるデータ信号線が異なる以外は、Ｒサブピクセル回路１４１ｒと同じ構成である。このため、これら２つの回路（１４１ｇ，１４１ｂ）についての説明は、繰り返さない。

ここで、画素回路１４１における輝度の設定について説明する。まず、走査信号線Ｇｉに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、ＴＦＴ１４２のゲートがターンオンする。このようにＴＦＴ１４２のゲートがターンオンした状態で、各データ信号線（ＳＲｊ，ＳＧｊ，ＳＢｊ）に対して、それぞれ指定された電圧（１画素分の画像データに対応する電圧）を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ（補助容量）によって、次のフレーム期間において走査信号線Ｇｉが選択されるまで保持される。

光センサ駆動回路１３３は、図２に示すドライバ制御部１８１から制御信号ＴＣ２を受ける。

そして、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎にリセット信号線（ＲＳ１〜ＲＳｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧ＶＳＳＲを印加したままとする。たとえば、電圧ＶＤＤＲを０Ｖに、電圧ＶＳＳＲを−５Ｖに設定すればよい。

また、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎に読出信号線（ＲＷ１〜ＲＷｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤを印加する。なお、選択されていない読出信号線に対しては、上記電圧ＶＳＳＲを印加したままとする。たとえば、ＶＤＤの値を８Ｖに設定すればよい。

なお、電圧ＶＤＤＲを印加するタイミング、および電圧ＶＤＤを印加するタイミングについては、後述する。

光センサ回路１４４は、フォトダイオード１４５と、コンデンサ１４６と、ＴＦＴ１４７とを含む。なお、以下では、ＴＦＴ１４７がｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４７がｐ型チャネルの電界効果トランジスタであってもよい。

フォトダイオード１４５のアノードは、リセット信号線ＲＳｉに接続されている。一方、フォトダイオード１４５のカソードは、コンデンサ１４６の一方の電極に接続されている。また、コンデンサ１４６の他方の電極は、読出信号線ＲＷｉに接続されている。なお、以下では、フォトダイオード１４５とコンデンサ１４６との接続点をノードＮと称する。

ＴＦＴ１４７のゲートは、ノードＮに接続されている。また、ＴＦＴ１４７のドレインは、センサ信号線ＳＤｊに接続されている。さらに、ＴＦＴ１４７のソースは、センサ信号線ＳＳｊに接続されている。光センサ回路１４４を用いたセンシングの詳細については、後述する。

スイッチ１３４は、センサ信号線（ＳＤ１〜ＳＤｎ）に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ１３４の切り換え動作は、光センサ駆動回路１３３により行われる。なお、スイッチ１３４が導通状態となった場合にセンサ信号線（ＳＤ１〜ＳＤｎ）に印加される電圧については、後述する。

アンプ１３５は、各センサ信号線（ＳＳ１〜ＳＳｎ）から出力された電圧を増幅する。なお、増幅された電圧は、図２に示した信号処理部１８３に送られる。

なお、画素回路１４１を用いて画像を液晶パネル１４０に表示させるタイミングと、光センサ回路１４４を用いてセンシングするタイミングとについては、画像処理エンジン１８０が制御する。

図４は、液晶パネル１４０とバックライト１７９との断面図である。図４を参照して、液晶パネル１４０は、アクティブマトリクス基板１５１Ａと、対向基板１５１Ｂと、液晶層１５２とを含む。対向基板１５１Ｂは、アクティブマトリクス基板１５１Ａに対向して配されている。液晶層１５２は、アクティブマトリクス基板１５１Ａと対向基板１５１Ｂとに挟まれている。バックライト１７９は、アクティブマトリクス基板１５１Ａに関し液晶層１５２と反対側に配されている。

アクティブマトリクス基板１５１Ａは、偏光フィルタ１６１と、ガラス基板１６２と、電極対１４３を構成する画素電極１４３ａと、フォトダイオード１４５と、データ信号線１５７と、配向膜１６４とを含む。さらに、図４には示していないが、アクティブマトリクス基板１５１Ａは、図３に示した、コンデンサ１４６と、ＴＦＴ１４７と、ＴＦＴ１４２と、走査信号線Ｇｉとを含む。

また、アクティブマトリクス基板１５１Ａにおいては、バックライト１７９側から、偏光フィルタ１６１、ガラス基板１６２、画素電極１４３ａ、および配向膜１６４が、この順に配されている。フォトダイオード１４５とデータ信号線１５７とは、ガラス基板１６２の液晶層１５２側に形成されている。

対向基板１５１Ｂは、偏光フィルタ１６１と、ガラス基板１６２と、遮光膜１６３と、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と、電極対１４３を構成する対向電極１４３ｂと、配向膜１６４とを含む。

また、対向基板１５１Ｂにおいては、液晶層１５２側から、配向膜１６４、対向電極１４３ｂ、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）、ガラス基板１６２、および偏光フィルタ１６１が、この順に配されている。遮光膜１６３は、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と同一の層に形成されている。

カラーフィルタ１５３ｒは、赤色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｇは、緑色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｂは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード１４５は、カラーフィルタ１５３ｂに対向する位置に配されている。

液晶パネル１４０は、外光やバックライト１７９などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、液晶パネル１４０は、画素電極１４３ａと対向電極１４３ｂとの間に電圧を印加することにより液晶層１５２の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ１６１を配置している。

なお、フォトダイオード１４５の位置は、上記の位置に限定されるものではなく、カラーフィルタ１５３ｒに対向する位置やカラーフィルタ１５３ｇに対向する位置に設けることも可能である。

ここで、光センサ回路１４４の動作について説明する。図５は、光センサ回路１４４を動作させる際のタイミングチャートを示した図である。図５において、電圧ＶＩＮＴは、光センサ回路１４４内のノードＮにおける電位を示している。また、電圧ＶＰＩＸは、図３に示したセンサ信号線ＳＳｊからの出力電圧であって、アンプ１３５によって増幅される前の電圧を示している。

以下では、光センサ回路１４４をリセットするためのリセット期間と、光センサ回路１４４を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。

まず、リセット期間について説明する。リセット期間においては、リセット信号線ＲＳｉに印加する電圧を、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤＲ）へと瞬間的に切り換える。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。このように、リセット信号線ＲＳｉに上記ハイレベルの電圧を印加することにより、フォトダイオード１４５の順方向（アノード側からカソード側）に電流が流れ始める。その結果、ノードＮの電位である電圧ＶＩＮＴは、以下の式（１）で示す値となる。なお、式（１）では、フォトダイオード１４５における順方向の電圧降下量をＶｆとしている。

ＶＩＮＴ＝ＶＳＳＲ＋｜ＶＤＤＲ−ＶＳＳＲ｜−Ｖｆ … （１）
それゆえ、ノードＮの電位は、図５に示すとおり、電圧ＶＤＤＲよりもＶｆだけ小さな値となる。

ここで、電圧ＶＩＮＴは、ＴＦＴ１４７のゲートをターンオンさせる閾値以下であるため、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。また、コンデンサ１４６の電極間には、上記電圧ＶＩＮＴ分の差が生じる。このため、コンデンサ１４６には、当該差に応じた電荷が蓄積される。

次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線ＲＳｉに印加する電圧は、ハイレベル（電圧ＶＤＤＲ）からローレベル（電圧ＶＳＳＲ）へと瞬間的に切り換わる。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。

このように、リセット信号線ＲＳｉに印加する電圧をローレベルに変化させることにより、ノードＮの電位は、リセット信号線ＲＳｉの電圧および読出信号線ＲＷｉの電圧よりも高くなる。このため、フォトダイオード１４５においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード１４５は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード１４５が受光すると、フォトダイオード１４５のカソード側からアノード側へと電流が流れ始める。その結果、図５に示すとおり、ノードＮの電位（つまり、電圧ＶＩＮＴ）は時間の経過とともに低くなる。

なお、このように電圧ＶＩＮＴが低下し続けるため、ＴＦＴ１４７のゲートはターンオンした状態にはならない。それゆえ、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。

次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線ＲＳｉに印加する電圧をローレベル（電圧ＶＳＳＲ）のままとする。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤ）へと瞬間的に切り換わる。ここで、電圧ＶＤＤは、電圧ＶＤＤＲよりも高い値である。

このように、読出信号線ＲＷｉにハイレベルの電圧を瞬間的に印加することにより、図５に示すとおり、コンデンサ１４６を介してノードＮの電位が引き上げられる。なお、ノードＮの電位の上昇幅は、読出信号線ＲＷｉに印加する電圧に応じた値となる。ここで、ノードＮの電位（つまり、電圧ＶＩＮＴ）が、ＴＦＴ１４７のゲートをターンオンさせる閾値以上まで引き上げられるため、ＴＦＴ１４７のゲートがターンオンする。

この際、ＴＦＴ１４７のドレイン側に接続されたセンサ信号線ＳＤｊ（図３参照）に予め一定電圧を印加しておけば、ＴＦＴ１４７のソース側に接続されたセンサ信号線ＳＳｊからは、図５のＶＰＩＸのグラフに示すとおり、ノードＮの電位に応じた電圧が出力される。

ここで、フォトダイオード１４５が受光する光の量（以下、受光量と称する）が少ないと、図５のＶＩＮＴのグラフに示す直線の傾きが緩やかになる。その結果、電圧ＶＰＩＸは、受光量が多い場合に比べて高くなる。このように、光センサ回路１４４は、フォトダイオード１４５の受光量に応じて、センサ信号線ＳＳｊに出力する電圧の値を変化させる。

ところで、上記においては、ｍ×ｎ個存在する光センサ回路のうち、１つの光センサ回路１４４に着目して、その動作を説明した。以下では、液晶パネル１４０における各光センサ回路の動作について説明する。

まず、光センサ駆動回路１３３は、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路１３３は、リセット信号線ＲＳ１に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、他のリセット信号線（ＲＳ２〜ＲＳｍ）および読出信号線（ＲＷ１〜ＲＷｍ）については、ローレベルの電圧を印加したままの状態とする。これにより、図３における１行目のｎ個の光センサ回路が、上述したリセット期間に入る。その後、１行目のｎ個の光センサ回路は、センシング期間に入る。さらに、その後、１行目のｎ個の光センサ回路は、読出期間に入る。

なお、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。

１行目のｎ個の光センサ回路の読出期間が終了すると、光センサ駆動回路１３３は、リセット信号線ＲＳ２に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。つまり、２行目のｎ個の光センサ回路のリセット期間に入る。リセット期間が終了すると、２行目のｎ個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。

以降は、上述した処理が、順に、３行目のｎ個の光センサ回路、４行目のｎ個の光センサ回路、…ｍ行目のｎ個の光センサ回路に対して行われる。その結果、センサ信号線（ＳＳ１〜ＳＳｎ）からは、１行目のセンシング結果、２行目のセンシング結果、…、ｍ行目のセンシング結果が、この順に出力される。

なお、表示装置１０２においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果が液晶パネル１４０から出力される。このため、以下では、液晶パネル１４０から出力される１行目からｍ行目までのｍ行分の電圧に関するデータに対して、信号処理部１８３が上述したデータ処理を行なった後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物（たとえば、ユーザの指）をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。

また、上記においては、ｍ×ｎ個の光センサ回路全てを用いてスキャンを行なう構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、液晶パネル１４０の表面の一部の領域に関してスキャンを行なうことも構成としてもよい。

以下では、電子機器１００が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー１７７を介した入力などに基づく本体装置１０１から送られてくるコマンドにより行われるものとする。なお、液晶パネル１４０の表面の一部の領域に関してスキャンを行なう場合、画像処理エンジン１８０が、スキャン対象領域の設定を行なう。なお、当該領域の設定を、操作キー１７７を介してユーザが指定できる構成としてもよい。

このように、液晶パネル１４０の表面の一部の領域に関してスキャンを行なう場合には、画像の表示に関し、以下のような利用の態様がある。１つ目は、上記一部の領域（以下、スキャン領域と称する）以外の表面の領域において、画像を表示させる態様である。２つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体装置１０１から画像処理エンジン１８０に送られてくるコマンドに基づく。

図６は、液晶パネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。

図６を参照して、ユーザの指９００が液晶パネル１４０の表面に接触している場合、バックライト１７９から発せられた光の一部は、当該接触している領域ではユーザの指９００（略平面）にて反射される。そして、フォトダイオード１４５は、当該反射された光を受光する。

また、指９００が接触していない領域においても、バックライト１７９から発せられた光の一部は、ユーザの指９００にて反射される。この場合においても、フォトダイオード１４５は、当該反射された光を受光する。ただし、当該領域においては液晶パネル１４０の表面に指９００が接触していないため、指９００が接触している領域よりも、フォトダイオード１４５の受光量は少なくなる。なお、バックライト１７９から発せられた光のうち、ユーザの指９００に到達しない光のほとんどについては、フォトダイオード１４５は受光できない。

ここで、バックライト１７９を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路１４４は、ユーザの指９００により反射した光の光量に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９の点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって光が反射されることにより得られる像（以下、反射像とも称する）をスキャンすることができる。

なお、指９００以外のスキャン対象物としては、スタイラスなどが挙げられる。
ところで、本実施の形態においては、電子機器１００の表示装置として液晶パネルを例に挙げて説明しているが、液晶パネルの代わりに有機ＥＬ（Electro-Luminescence）パネルなどの他のパネルを用いてもよい。

＜データについて＞
次に、センシングコマンドについて説明する。なお、表示装置１０２においては、画像処理エンジン１８０は、センシングコマンドの内容を解析し、当該解析の結果に従ったデータ（つまり、応答データ）を本体装置１０１に送り返す。

図７は、センシングコマンドの概略構成を示した図である。図７を参照して、センシングコマンドは、ヘッダのデータ領域ＤＡ０１と、タイミングを示すデータ領域ＤＡ０２と、データ種別を示すデータ領域ＤＡ０３と、読取方式を示すデータ領域ＤＡ０４と、画像階調を示すデータ領域ＤＡ０５と、解像度を示すデータ領域ＤＡ０６と、予備のデータ領域ＤＡ０７とを含む。

図８は、センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。

図８を参照して、タイミングを示すデータ領域に「００」が設定されたセンシングコマンドは、画像処理エンジン１８０に対して、そのときのスキャンデータの送信を要求する。つまり、センシングコマンドは、当該センシングコマンドを画像処理エンジン１８０が受信した後に、光センサ回路１４４を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、タイミングを示すデータ領域に「０１」が設定されたセンシングコマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、タイミングを示すデータ領域に「１０」が設定されたセンシングコマンドは、一定周期毎にスキャンデータの送信を要求する。

データ種別を示すデータ領域に「００１」が設定されたセンシングコマンドは、部分画像における中心座標の座標値の送信を要求する。また、データ種別を示すデータ領域に「０１０」が設定されたセンシングコマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、データ種別を示すデータ領域に「１００」が設定されたセンシングコマンドは、全体画像の送信を要求する。

ここで、「全体画像」とは、ｍ×ｎ個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン１８０により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。

なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、液晶パネル１４０の表面の一部の領域に関してスキャンを行なう構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。

読取方式を示すデータ領域に「００」が設定されたセンシングコマンドは、バックライト１７９を点灯してスキャンすることを要求する。また、読取方式を示すデータ領域に「０１」が設定されたセンシングコマンドは、バックライト１７９を消灯してスキャンすることを要求する。なお、バックライト１７９を消灯してスキャンする構成については後述する（図１２）。さらに、読取方式を示すデータ領域に「１０」が設定されたセンシングコマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト１７９を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行なうことを指す。

画像階調を示すデータ領域に「００」が設定されたセンシングコマンドは、白黒の２値の画像データを要求する。また、画像階調を示すデータ領域に「０１」が設定されたセンシングコマンドは、多階調の画像データを要求する。さらに、画像階調を示すデータ領域に「１０」が設定されたセンシングコマンドは、ＲＧＢのカラーの画像データを要求する。

解像度を示すデータ領域に「０」が設定されたセンシングコマンドは、解像度の高い画像データを要求する。また、解像度を示すデータ領域に「１」が設定されたセンシングコマンドは、解像度の低い画像データを要求する。

また、センシングコマンドには、図７および図８に示したデータ以外に、スキャンを行なう領域（光センサ回路１４４を駆動する画素の領域）の指定、スキャンを行なうタイミング、バックライト１７９の点灯のタイミングなどが記述されている。

図９は、応答データの概略構成を示した図である。応答データは、センシングコマンドの内容に応じたデータであって、表示装置１０２の画像処理エンジン１８０が本体装置１０１に対して送信するデータである。

図９を参照して、応答データは、ヘッダのデータ領域ＤＡ１１と、座標を示すデータ領域ＤＡ１２と、時刻を示すデータ領域ＤＡ１３と、画像を示すデータ領域ＤＡ１４とを含む。ここで、座標を示すデータ領域ＤＡ１２には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン１８０のタイマ１８２から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン１８０により処理がされた後の画像データ（つまり、スキャンデータ）が書き込まれる。

図１０は、指９００をスキャンすることにより得られた画像（つまり、スキャン画像）を示した図である。図１０を参照して、太実線で囲まれた領域Ｗ１の画像が全体画像であり、破線で囲まれた領域Ｐ１の画像が部分画像である。また、太線で示した十字の中心点Ｃ１が、中心座標となる。

本実施の形態では、矩形の領域であって、かつセンサ信号線ＳＳｊからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素（つまり、予め定められた階調または予め定められた輝度以上の画素）全てを含む領域を、部分画像の領域としている。

また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点（つまり図心）との距離とに基づき、重み付け処理を行なうことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。

ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。

センシングコマンドのデータ種別を示すデータ領域に「００１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に上記中心座標の値を書き込む。この場合、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４には画像データを書き込まない。画像処理エンジン１８０は、上記中心座標の値の書き込みを行なった後、当該中心座標の値を含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「００１」が設定されている場合には、センシングコマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。

また、センシングコマンドのデータ種別を示すデータ領域に「０１０」が設定されている場合には、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記スキャン結果が変化した部分画像の画像データの書き込みを行なった後、当該部分画像の画像データを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１０」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。

なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指９００などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。

また、センシングコマンドのデータ種別を示すデータ領域に「０１１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。

また、センシングコマンドのデータ種別を示すデータ領域に「１００」が設定されている場合には、画像処理エンジン１８０は、図９に示した応答データの画像を示すデータ領域ＤＡ１４に、全体画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記全体画像の画像データの書き込みを行なった後、当該全体画像の画像データを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「１００」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。

また、センシングコマンドのデータ種別を示すデータ領域に「１０１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４に全体画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「１０１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。

＜構成の第１の変形例について＞
ところで、液晶パネル１４０の構成は、図３に示した構成に限定されるものではない。以下では、図３とは異なる態様の液晶パネルについて説明する。

図１１は、上記異なる態様である光センサ内蔵液晶パネル１４０Ａの回路図である。図１１を参照して、光センサ内蔵液晶パネル１４０Ａ（以下、液晶パネル１４０Ａと称する）は、１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含んでいる。このように液晶パネル１４０Ａが１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を備える点において、液晶パネル１４０Ａは、１画素内に１つの光センサ回路を備える液晶パネル１４０と異なる。なお、光センサ回路１４４の構成と、３つの各光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）との構成は同じである。

また、１画素内における３つのフォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれ、カラーフィルタ１５３ｒ、カラーフィルタ１５３ｇ、カラーフィルタ１５３ｂに対向する位置に配されている。それゆえ、フォトダイオード１４５ｒは赤色の光を受光し、フォトダイオード１４５ｇは緑色の光を受光し、フォトダイオード１４５ｂは青色の光を受光する。

また、液晶パネル１４０は１画素内において１つの光センサ回路１４４しか含まないため、１画素内に配設されるＴＦＴ１４７用のデータ信号線は、センサ信号線ＳＳｊとセンサ信号線ＳＤｊとの２本であった。しかしながら、液晶パネル１４０Ａは１画素内において３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含むため、１画素内に配設されるＴＦＴ（１４７ｒ，１４７ｇ，１４７ｂ）用のデータ信号線は６本となる。

具体的には、カラーフィルタ１５３ｒに対向する位置に配されたフォトダイオード１４５ｒのカソードに接続されたＴＦＴ１４７ｒに対応して、センサ信号線ＳＳＲｊとセンサ信号線ＳＤＲｊとが配設される。また、カラーフィルタ１５３ｇに対向する位置に配されたフォトダイオード１４５ｇのカソードに接続されたＴＦＴ１４７ｇに対応して、センサ信号線ＳＳＧｊとセンサ信号線ＳＤＧｊとが配設される。さらに、カラーフィルタ１５３ｂに対向する位置に配されたフォトダイオード１４５ｂのカソードに接続されたＴＦＴ１４７ｂに対応して、センサ信号線ＳＳＢｊとセンサ信号線ＳＤＢｊとが配設される。

このような液晶パネル１４０Ａにおいては、バックライト１７９から照射された白色光は、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過し、液晶パネル１４０Ａの表面では、赤、緑、および青とが混ざり白色光となる。ここで、スキャン対象物により白色光が反射されると、スキャン対象物の表面の色素に白色光の一部が吸収され、また一部が反射される。そして、反射された光は、再度、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過する。

この際、カラーフィルタ１５３ｒは赤色の波長の光を透過し、フォトダイオード１４５ｒは、当該赤色の波長の光を受光する。また、カラーフィルタ１５３ｇは緑色の波長の光を透過し、フォトダイオード１４５ｇは、当該緑色の波長の光を受光する。また、カラーフィルタ１５３ｂは青色の波長の光を透過し、フォトダイオード１４５ｂは、当該青色の波長の光を受光する。つまり、スキャン対象物によって反射された光は３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）によって３原色（Ｒ，Ｇ，Ｂ）に色分解され、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれに対応した色の光を受光する。

スキャン対象物の表面の色素に白色光の一部が吸収されると、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）の受光量が各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）で異なることになる。このため、センサ信号線ＳＳＲｊとセンサ信号線ＳＳＧｊとセンサ信号線ＳＳＢｊとの出力電圧は互いに異なる。

それゆえ、各出力電圧に応じて、Ｒの階調とＧの階調とＢの階調とを画像処理エンジン１８０が決定することにより、画像処理エンジン１８０はＲＧＢのカラー画像を本体装置１０１へ送ることができる。

以上述べたように、電子機器１００が液晶パネル１４０Ａを備えた構成とすることにより、スキャン対象物をカラーでスキャンできることになる。

次に、図１２を参照して、前述のスキャンの方法（つまり、図６における反射像をスキャンする方法）とは異なるスキャンの方法について説明する。

図１２は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。図１２に示されるように、外光の一部は、指９００によって遮られる。それゆえ、指９００と接触している液晶パネル１４０の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指９００の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。

ここで、バックライト１７９を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路１４４は、液晶パネル１４０の表面に対する指９００の位置に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９を点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって外光が遮られることにより得られる像（以下、影像とも称する）をスキャンすることができる。

さらに、表示装置１０２を、バックライト１７９を点灯させてスキャンを行なった後に、バックライト１７９を消灯させて再度スキャンを行なう構成としてもよい。あるいは、表示装置１０２を、バックライト１７９を消灯させてスキャンを行なった後に、バックライト１７９を点灯させて再度スキャンを行なう構成としてもよい。

この場合には、２つのスキャン方式を併用することになるため、２つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。

＜表示装置について＞
表示装置１０３の動作は、表示装置１０２の動作と同様、本体装置１０１からのコマンド（たとえば、センシングコマンド）に応じて制御される。表示装置１０３は表示装置１０２と同様な構成を有する。それゆえ、表示装置１０３が表示装置１０２と同じコマンドを本体装置１０１から受付けた場合、表示装置１０３は表示装置１０２と同様の動作を行なう。このため、表示装置１０３の構成や動作についての説明は繰り返さない。

なお、本体装置１０１は、表示装置１０２と表示装置１０３とに対して、命令が異なるコマンドを送ることができる。この場合、表示装置１０２と表示装置１０３とは別々の動作を行なう。また、本体装置１０１は、表示装置１０２および表示装置１０３のいずれかに対して、コマンドを送ってもよい。この場合、一方の表示装置のみがコマンドに応じた動作を行なう。また、本体装置１０１が、表示装置１０２と表示装置１０３とに命令が同じコマンドを送ってもよい。この場合、表示装置１０２と表示装置１０３とは、同じ動作を行なう。

なお、表示装置１０２の液晶パネル１４０のサイズと表示装置１０３の液晶パネル２４０のサイズとは、同じであってもよいし又は異なっていてもよい。また、液晶パネル１４０の解像度と液晶パネル２４０の解像度とは、同じであってもよいし又は異なっていてもよい。

＜構成の第２の変形例について＞
本実施の形態では、電子機器１００が、液晶パネル１４０と液晶パネル２４０といったそれぞれに光センサを内蔵した液晶パネルを備える構成について説明するが、一方の液晶パネルのみが光センサを内蔵している構成であってもよい。

図１３は、電子機器１３００のハードウェア構成を表すブロック図である。電子機器１３００は、電子機器１００と同様、第１の筐体１００Ａと、第２の筐体１００Ｂとを含む。第１の筐体１００Ａは、光センサを内蔵しない液晶パネル（つまり、表示機能のみを有する液晶パネル）を含む。第２の筐体１００Ｂは、表示装置１０３を含む。電子機器１３００は、第１の筐体１００Ａが光センサを内蔵しない液晶パネルを含む点で、第１の筐体１００Ａが光センサを内蔵した液晶パネル１４０を含む電子機器１００と異なる。このような電子機器１３００は、第２の筐体１００Ｂの表示装置１０３を用いて上述したセンシングを行なう。

また、本実施の形態では、表示装置１０２がタイマ１８２を備え、表示装置１０３がタイマ２８２を備える構成として説明するが、表示装置１０２と表示装置１０３とが１つのタイマを共有する構成としてもよい。

また、本実施の形態では、電子機器１００を折畳型の機器として説明するが、電子機器１００は必ずしも折畳型に限定されるものではない。たとえば、電子機器１００は、第１の筐体１００Ａが第２の筐体１００Ｂに対してスライドする構成のスライド式の機器であってもよい。
＜＜具体的な実現例＞＞
次に、上述の構成を用いる電子機器１００の具体的な実現例について説明する。なお、以下では、液晶パネル２４０の表示領域に接触するものが「指」である場合を例に挙げて説明する。

＜電子機器１００の機能ブロック＞
図１４は、電子機器１００の機能ブロックを示した図である。図１４を参照して、電子機器１００は、制御部１０と、記憶装置９０と、液晶パネル１４０，２４０とを備える。制御部１０は、表示制御部１１と、データ受付部１２と、第１検知部１３と、第２検知部１４と、第１決定部１５と、判断部１６と、第２決定部１７と、第３決定部１８とを含む。なお、記憶装置９０は、ＲＡＭ１７１やハードディスク（図示せず）により構成される。

表示制御部１１は、記憶装置９０内のＶＲＡＭ（図示せず）に格納された画像データに基づき、液晶パネル１４０,２４０に画像を表示させる。表示制御部１１は、液晶パネル２４０の表示領域において表示されている画像の当該表示領域での位置を示した位置情報を、第１検知部１３、第２検知部１４、第１決定部１５、判断部１６、および第２決定部１７に送る。表示制御部１１は、液晶パネル２４０の表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させる。

データ受付部１２は、液晶パネル１４０，２４０から上述したスキャンデータを受付ける。データ受付部１２は、受信したスキャンデータを、表示制御部１１、第１検知部１３、および第２検知部１４に送る。

表示制御部１１は、データ受付部１２から送られてきたスキャンデータに基づき、液晶パネル１４０，２４０における表示態様を変更する。たとえば、上記スキャンデータが液晶パネル１４０に表示されたアイコンを指定するデータに相当する場合、表示制御部１１は、表示態様を、アイコンが選択されたことを示す態様に変更する。たとえば、表示制御部１１は、アイコンの色を上記選択前とは異なる色に変更する。

ユーザの指が液晶パネル２４０の表示領域に接触した場合、第１検知部１３は、上記スキャンデータと上記位置情報とに基づき、液晶パネル２４０に表示されている第１画像が選択されたことを検知する。第１検知部１３は、第１画像が選択されたことを示すデータを、表示制御部１１および第２検知部１４に送る。なお、表示制御部１１が当該データを受付けた場合、表示制御部１１は、第１画像の表示態様を、第１画像が選択されていることを示す態様に変化させる。

第２検知部１４は、上記スキャンデータおよび上記位置情報に基づいて、上記選択された第１画像を移動させるための第１操作入力を受付けたことを検知する。第２検知部１４は、第１操作入力を示したデータ（以下、「第１操作データ」という）を表示制御部１１および判断部１６に送る。表示制御部１１は、当該第１操作データに基づいて、第１画像の表示位置を、当該第１画像が選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。さらに、表示制御部１１は、液晶パネル２４０の表示領域のうち、第１操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させる。

ここで、第１操作入力および後述する第２操作入力とは、たとえば、ユーザの指を液晶パネル２４０の表示領域に接触した状態で、当該指を表示領域上で移動させることにより、電子機器１００が受付ける入力である。また、第２検知部１４は、第１操作入力を受付けたことを検知した後、スキャンデータに基づいて、ユーザが指を離したことを検知する。第２検知部１４は、指が離れたことを検知すると、表示制御部１１は、第１画像の表示位置を確定する。なお、第２検知部１４は、指が離れてから予め定めた時間経過後に、第１画像の表示位置を確定してもよい。

表示制御部１１は、第２画像を表示させる場合、第１画像の移動の方向に基づき当該第２画像の表示位置を決定する。表示位置の具体例については、後述する（図１６〜図１９等参照）。また、表示制御部１１は、たとえば、ユーザの指が表示領域上で移動している間、当該指の移動に追従して、第１画像の表示位置を連続的に変更する構成とすることが好ましい。このように、第１画像の表示位置を連続的に変更することにより、ユーザは、第１画像が移動している状態を視認できるためである。

また、第２検知部１４は、上記スキャンデータおよび上記位置情報に基づいて、上記選択された第１画像を上記移動方向とは反対の方向に移動させるための第２操作入力を受付けたことを検知する。第２検知部１４が当該第２操作入力が受付けられたことを検知した場合、表示制御部１１は、第１画像の表示位置を、第１操作入力に応じた位置から、上記選択された際に表示されていた位置に切換える。さらに、表示制御部１１は、第２画像を非表示にする。

第１決定部１５は、第２画像が表示される位置に応じて、当該第２画像の表示内容を決定する。この場合、制御部１０は、当該第２画像の表示内容に応じた処理を行なう。

上記第１操作入力に基づき第１画像の表示位置を切換える場合、判断部１６は、上記第１操作データおよび上記位置情報に基づいて、第１画像の全体が液晶パネル２４０の表示領域に表示可能であるか否かを判断する。判断部１６が当該表示領域に表示可能ではないと判断した場合、表示制御部１１は、第１画像のうちの当該表示領域に表示可能でない部分を非表示とする。

第２検知部１４が上記第１操作入力を受付けたことを検知した場合、第２決定部１７は、当該第１操作入力に応じた位置に基づき、第２画像を表示する領域のサイズを決定する。第２決定部１７は、表示制御部１１から送られてくる上記位置情報を用いて、上記サイズの決定を行なう。たとえば、第２画像を表示する領域を矩形の領域であると予め電子機器１００において定めている場合、第２決定部１７は、第２画像を表示する領域の縦および横のサイズを決定する。第２決定部１７は、決定したサイズを示したデータを第３決定部１８に送る。

第３決定部１８は、第２決定部１７が決定したサイズに基づき、第２画像の表示態様を決定する。第３決定部１８が表示態様を決定した場合、表示制御部１１は、第１操作入力に応じた位置とは異なる位置に、当該決定された表示態様にて第２画像を表示させる。表示態様の具体例については、後述する（図２５，図２６参照）。

以下では、第１入力領域が、文字や数字などの入力を受付けるための領域である場合を例に挙げて説明する。具体的には、制御部１０が、第１入力領域を、ソフトウェアキーボードによる処理のための領域として設定した場合について説明する。この場合、第１画像は、ソフトウェアキーボードのキーボードを示した画像（以下、「キーボード画像」という）であり、第１入力はキー入力である。なお、ソフトウェアキーボードとは、ハードウェアであるキーボードを用いて行なう入力処理をソフトウェアにより実現したものである。なお、キーボード画像が選択されたことを第１検知部１３が検知した場合、制御部１０は、電子機器１００の状態を、ソフトウェアキーボードによるキー入力を受付ける状態に遷移させる。

さらに、以下では、第２入力領域が、液晶パネル２４０の表示領域における点および方向を指示する入力、表示領域に示されたカーソルの移動を指する入力、その他の入力（第２入力）を受付けるための領域である場合を例に挙げて説明する。具体的には、制御部１０が、第２入力領域を、タッチパッドと同様な機能を実行するための領域として設定した場合について説明する。以下では、第２画像を「タッチパッド画像」という。なお、制御部１０は、液晶パネル２４０の第２入力領域を、タッチパッドの表面の入力領域（つまり指が触れる領域）に相当する領域として機能させる。

また、以下では、表示制御部１１は、第１画像を、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とに分けて、当該第１要素画像と当該第２要素画像との表示制御を独立して行なう場合について説明する。第１画像（キーボード画像）における文字の配列が、たとえばＱＷＥＲＴＹ配列の場合、第１キー群とは、たとえばＦキーを含むキー群であり、第２キー群とは、たとえばＪキーを含むキー群である。

なお、第１検知部１３は、第１キー群のうちの少なくとも１つのキーを指定する入力と、第２キー群のうちの少なくとも１つのキーを指定する入力とを、多点入力として受付けたことを検知する。そして、第１検知部１３は、当該多点入力を受付けたことを検知することにより、第１画像が選択されたことを検知する。なお、第１キー群のうちの少なくとも１つのキーを指定する入力、および第２キー群のうちの少なくとも１つのキーを指定する入力は、それぞれ、少なくとも１本の指で行なう。

ここで、「多点入力を受け付ける」とは、電子機器１００が、複数の入力を同時に受付けることをいう。ここで、「複数の入力を同時に受け付ける」とは、予め定められた時間に複数の入力を受け付けることをいう。この場合、電子機器１００は、複数の点が同時に指定されたこと検知する。

ところで、文字や数字を入力するキー入力か、第１画像を移動させる操作入力かの判断は、以下のように制御部１０が判断する。ユーザの指が、ある文字（たとえば「Ａ」）を示した領域に接触することにより、当該文字が選択されたことを制御部１０が検知した場合、予め定められた第１の時間までに当該接触が解除されると、制御部１０は、当該文字の入力であると判断する。また、上記第１の時間以上である予め定められた第２の時間を越えて、当該接触が続いている場合、制御部１０は、当該文字の連続入力であると判断する。さらに、上記第１の時間以上かつ第２の時間未満の間に、第２検知部１４が第１画像を移動させる操作入力を受付けたことを検知した場合、制御部１０は、当該文字の入力とは判断せずに、第１画像を移動させる操作入力と判断する。このようにして、制御部１０は、文字や数字を入力するキー入力か、第１画像を移動させる操作入力かを判断する。

＜画面遷移について＞
図１５は、キーボード画像３０１が表示された領域に指が接触した状態を示した図である。当該接触により、第１検知部１３は、キーボード画像３０１が選択されたことを検知する。
（第１の例）
図１６は、キーボード画像３０１を移動させるための第１操作入力を第２検知部１４が受付けたことを検知した後の、液晶パネル２４０の表示内容を示した図である。図１６を参照して、左手８０１の指および右手８０２の指が表示領域に接触した状態で、ユーザが各指をそれぞれ矢印７０１，７０２で示す方向（つまり反対方向）に移動させた場合、表示制御部１１は、キーボード画像３０１を、第１キー群を示した第１要素画像３０１Ａと第２キー群を示した第２要素画像３０１Ｂとに分割し、第１要素画像３０１Ａと第２要素画像３０１Ｂとを、液晶パネル２４０に表示させる。

この際、表示制御部１１は、第１操作入力に応じた位置に、第１要素画像３０１Ａおよび第２要素画像３０１Ｂを表示させる。具体的には、表示制御部１１は、矢印７０１が示す方向の位置に第１要素画像３０１Ａを表示させ、矢印７０２が示す方向の位置に第２要素画像３０１Ｂを表示させる。

また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。表示制御部１１は、キーボード画像の移動によりキーボード画像が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、第１要素画像３０１Ａと第２要素画像３０１Ｂとの間に、タッチパッド画像４０１を表示させる。
（第２の例）
図１７は、キーボード画像３０１を移動させるための他の第１操作入力を第２検知部１４が受付けたことを検知した後の、液晶パネル２４０の表示内容を示した図である。図１７を参照して、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが各指をそれぞれ矢印７１１，７１２で示す方向（つまり同方向）に移動させた場合、表示制御部１１は、キーボード画像３０１を分割することなく、キーボード画像３０１を液晶パネル２４０に表示させる。

この際、表示制御部１１は、当該第１操作入力に応じた位置に、キーボード画像３０１を表示させる。また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。より詳しくは、表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、キーボード画像３０１の左側の領域にタッチパッド画像４０１を表示させる。
（第３の例）
図１８は、キーボード画像３０１を移動させるためのさらに他の第１操作入力を第２検知部１４が受付けたことを検知した後の、液晶パネル２４０の表示内容を示した図である。図１８を参照して、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが各指をそれぞれ矢印７２１，７２２で示す方向（つまり同方向）に移動させた場合、表示制御部１１は、キーボード画像３０１を分割することなく、キーボード画像３０１を液晶パネル２４０に表示させる。

この際、表示制御部１１は、当該第１操作入力に応じた位置に、キーボード画像３０１を表示させる。また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。また、表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、キーボード画像３０１の下側の領域にタッチパッド画像４０１を表示させる。
（第４の例）
図１９は、キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部１４が検知した後の、液晶パネル２４０の表示内容を示した図である。図１９を参照して、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが右手８０２の当該指を矢印７３１で示す方向に移動させた場合、表示制御部１１は、キーボード画像３０１を、第１キー群を示した第１要素画像３０１Ａと第２キー群を示した第２要素画像３０１Ｂとに分割し、第１要素画像３０１Ａと第２要素画像３０１Ｂとを、液晶パネル２４０に表示させる。

この際、表示制御部１１は、第１操作入力に応じた位置に、第２要素画像３０１Ｂを表示させる。具体的には、表示制御部１１は、矢印７３１が示す方向の位置に第２要素画像３０１Ｂを表示させる。

また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、第１要素画像３０１Ａの右側の領域であって、かつ第２要素画像３０１Ｂの下側の領域に、タッチパッド画像４０１を表示させる。
（第５の例）
次に、キーボード画像の表示位置を切換える際に、キーボード画像の全体が液晶パネル２４０の表示領域に表示可能でないと判断部１６が判断した場合について説明する。

図２０は、キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部１４が検知した後の、液晶パネル２４０の表示内容を示した図である。図２０を参照して、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが当該各指をそれぞれ矢印７４１，７４２で示す方向（つまり反対方向）に移動させた場合、表示制御部１１は、キーボード画像３０１を第１キー群を示した第１要素画像３０１Ａと第２キー群を示した第２要素画像３０１Ｂとに分割し、第１要素画像３０１Ａと第２要素画像３０１Ｂとを、液晶パネル２４０に表示させる。

この際、表示制御部１１は、第１操作入力に応じた位置に、第１要素画像３０１Ａおよび第２要素画像３０１Ｂを表示させる。具体的には、表示制御部１１は、矢印７４１が示す方向の位置に第１要素画像３０１Ａを表示させ、矢印７４２が示す方向の位置に第２要素画像３０１Ｂを表示させる。キーボード画像の全体が液晶パネル２４０の表示領域に表示可能でないため、表示制御部１１は、キーボード画像のうち当該表示領域に表示可能でない部分３５１Ａ，３５１Ｂを非表示とする。

また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、第１要素画像３０１Ａと第２要素画像３０１Ｂとの間に、タッチパッド画像４０１を表示させる。
（第６の例）
キーボード画像３０１の全体を表示領域に表示可能ではないと判断部１６が判断した場合、表示制御部１１は、キーボード画像のうちの当該表示領域に表示可能でない部分を非表示とせずに、第１操作入力に応じた位置にキーボード画像３０１を縮小した縮小画像を表示させてもよい。以下、表示制御部１１が縮小画像を表示させる場合について説明する。

図２１は、キーボード画像を移動させるためのさらに他の第１操作入力を第２検知部１４が受付けたことを検知した後の、液晶パネル２４０の表示内容を示した図である。図２１を参照して、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが当該各指をそれぞれ矢印７５１，７５２で示す方向（つまり反対方向）に移動させた場合、表示制御部１１は、キーボード画像３０１を、第１キー群を示した第１要素画像３０１Ａと第２キー群を示した第２要素画像３０１Ｂとに分割し、第１要素画像３０１Ａと第２要素画像３０１Ｂとを、液晶パネル２４０に表示させる。

この際、表示制御部１１は、第１操作入力に応じた位置に、第１要素画像３０１Ａおよび第２要素画像３０１Ｂを表示させる。具体的には、表示制御部１１は、矢印７５１が示す方向の位置に第１要素画像３０１Ａ表示させ、矢印７５２が示す方向の位置に第２要素画像３０１Ｂを表示させる。

キーボード画像３０１の全体が液晶パネル２４０の表示領域に表示可能でないため、表示制御部１１は、キーボード画像３０１を縮小した縮小画像を表示領域に表示させる。具体的には、表示制御部１１は、画像３６１Ａを縮小した第１要素画像３０１Ａと、画像３６１Ｂを縮小した第２要素画像３０１Ｂとを表示領域に表示させる。

また、表示制御部１１は、タッチパッド画像４０１を、第１操作入力に応じた位置とは異なる位置に表示させる。表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、第１要素画像３０１Ａと第２要素画像３０１Ｂとの間に、タッチパッド画像４０１を表示させる。

なお、上記においては、判断部１６の判断結果に基づき、表示制御部１１が縮小画像を液晶パネル２４０に表示させる構成を例に挙げて説明した。しかしながら、判断部１６の判断結果に関わりなく、表示制御部１１が縮小画像を液晶パネル２４０に表示させてもよい。

ところで、上記第１の例から上記第６の例の各例においては、キーボード画像３０１や要素画像３０１Ａ，３０１Ｂが表示された領域に指が物理的に接触した場合について説明したが、当該領域に指が物理的に接触していなくてもよい。つまり、光センサを内蔵した液晶パネル２４０を備えた電子機器１００においては、たとえばキーボード画像３０１が表示された領域に指が物理的に接触していなくても、当該領域に指が近接した状態となれば、第１検知部１３はキーボード画像３０１が選択されたことを検知する。また、同様に、当該領域に指が近接した状態において上記第１操作入力が行なわれる場合であっても、第２検知部１４は当該第１操作入力を受付けたことを検知可能である。また、同様に、タッチパッド画像４０１が表示された領域に指が近接した状態となれば、電子機器１００は、上記第２入力を受け付けたことを検知する。

このように、各種入力の検知にあたり、液晶パネル２４０の表示領域に指が物理的に接触している必要はなく、電子機器１００が入力を検知したと判断する程度に、液晶パネル２４０の表示領域に指が近接していればよい。つまり、電子機器１００は、物理的な接触だけに限らず、論理的な接触であっても、入力を検知可能である。

なお、電子機器１００が、ペンタブレットに液晶パネルを統合させた液晶ペンタブレットを液晶パネル２４０の代わりに備える構成においても、ペンが当該ペンタブレットの入力面に近接した状態となれば、上述した検知が可能である。

＜処理フロー＞
図２２は、電子機器１００における処理のフローを示したフローチャートである。図２２を参照して、ステップＳ２において、電子機器１００は第１画像（キーボード画像）を表示する。ステップＳ４において、電子機器１００は、第１検知部１３による検知結果に基づき、第１画像が選択されたか否かを判断する。

電子機器１００が、第１画像が選択されたと判断した場合（ステップＳ４においてＹＥＳ）、ステップＳ６において、電子機器１００は、第１検知部１４による検知結果に基づき、第１画像を移動させる第１操作入力を受付けたか否かを判断する。一方、電子機器１００が、第１画像が選択されていないと判断した場合（ステップＳ４においてＮＯ）、電子機器１００は、処理をステップＳ４に戻す。

電子機器１００が、第１画像を移動させる第１操作入力を受付けたと判断した場合（ステップＳ６においてＹＥＳ）、ステップＳ８において、電子機器１００は、第１操作データに基づいて、第１画像の表示位置を、当該第１画像が選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。ステップＳ１０において、電子機器１００は、液晶パネル２４０の表示領域のうち、第１操作入力に応じた位置とは異なる位置に、第２画像（タッチパネル画像）を表示させる。そして、電子機器１００は、一連の処理を終了する。

一方、電子機器１００が、第１画像を移動させる第１操作入力を受付けていないと判断した場合（ステップＳ６においてＮＯ）、ステップＳ１２において、電子機器１００は、ステップＳ４において第１画像が選択されてから予め定めた時間が経過したか否かを判断する。電子機器１００が、予め定めた時間が経過したと判断した場合（ステップＳ１２においてＹＥＳ）、電子機器１００は一連の処理を終了する。一方、電子機器１００が予めだ定めた時間が経過していないと判断した場合（ステップＳ１２においてＮＯ）、電子機器１００は、処理をステップＳ６に戻す。

＜第２入力領域の変形例＞
上記においては、制御部１０が、第２入力領域を、タッチパッドと同様な機能を実行するための領域に設定した。しかしながら、電子機器１００は、第２入力領域を、タッチパッドと異なる機能を実行するための領域に設定してもよい。

図２３は、タッチパッドと異なる第１の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネル２４０に表示される第２画像を示した図である。図２３を参照して、表示制御部１１は、たとえば、アプリケーションのコントロールボタンの画像４０１Ａを、液晶パネル２４０に表示させる。

図２４は、タッチパッドと異なる第２の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネル２４０に表示される第２画像を示した図である。図２４を参照して、表示制御部１１は、たとえば、第２画像として、選択肢を示すメニュー画像４０１Ｂを液晶パネル２４０に表示させる。

図２５は、タッチパッドと異なる第３の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネル２４０における、第２画像の一表示態様を示した図である。図２５を参照して、表示制御部１１は、たとえば、第２画像としてアプリケーションの各ツールを示したアイコン群の画像４０１Ｃを液晶パネル２４０に表示させる。

ところで、上述したように、第３決定部１８は、第２決定部１７が決定したサイズに基づき、第２画像の表示態様を決定する。そして、第３決定部１８が表示態様を決定した場合、表示制御部１１は、第１操作入力に応じた位置とは異なる位置に、当該決定された表示態様にて第２画像を表示させる。以下では、第２決定部が決定したサイズが図２５で示したサイズと異なる場合について、図２６に基づき説明する。

図２６は、第２入力領域を上記第３の機能を実行するための領域に設定した場合に、液晶パネル２４０における、第２画像の他の表示態様を示した図である。具体的には、図２６は、第２画像の表示領域の横のサイズが、図２５よりも小さい場合を示した図である。

図２６を参照して、表示制御部１１は、第２画像としてアプリケーションの各ツールを示したアイコン群の画像４０１Ｄを液晶パネル２４０に表示させる。第２画像の表示領域の横サイズが、図２５における横サイズよりも小さいため、表示制御部１１は、横方向に配して表示するアイコンの数を減少させる。さらに、表示制御部１１は、縦方向に配して表示するアイコンの数を増加させる。

なお、第２画像としては、たとえばテンキーの画像を表示する構成としてもよい。当該構成の場合、制御部１０は、第２入力領域をテンキーと同様な機能を実行するための領域に設定する。

＜電子機器１００のまとめ＞
（１）電子機器１００は、液晶パネル２４０の表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させる表示制御部１１を備える。また、電子機器１００は、表示されている第１画像が選択されたことを検知する第１検知部１３を備える。さらに、電子機器１００は、上記選択された第１画像を移動させるための第１操作入力を受付けたことを検知する第２検知部１４を備える。

第１検知部１３が第１操作入力を受付けたことを検知した場合、表示制御部１１は、第１画像の表示位置を、上記選択された際に表示されていた位置から、上記第１操作入力に応じた位置に切換える。さらに、表示制御部１１は、液晶パネル２４０の表示領域のうち、第１操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させる。

したがって、電子機器１００は、第１入力を受付ける第１入力領域を示した第１画像を表示している場合に、第１画像を移動させるための操作入力を受付けたとき、当該第１操作入力に応じた位置に第１画像を表示できる。さらに、電子機器１００は、当該操作入力を受付けたとき、第２入力を受付ける第２入力領域を示した第２画像を表示できる。その結果、ユーザは、第１操作入力を電子機器１００に対して行なうことにより、第１画像の表示位置を切換えることができるとともに、第１画像が表示された状態で第２画像を用いた電子機器１００への入力が可能となる。

特に、上述したように、ユーザが、第１操作入力を、ユーザの指を液晶パネル２４０の表示領域と接触した状態で電子機器１００に対して行なう場合、ユーザは、当該表示領域から手を離すことなく、電子機器１００に第２画像を表示させることができる。また、電子機器１００は、第２入力を受付けるためのハードウェアを別途備える必要なく、第２入力を受付けることができる。

（２）好ましくは、表示制御部１１は、第１画像の移動の方向に基づき、第２画像の表示位置を決定する。したがって、ユーザは、第１操作入力において第１画像の移動方向を指定することにより、第２画像の表示位置を所望の位置に表示させることができる。

さらに好ましくは、電子機器１００は、第２画像が表示される位置に応じて、第２画像の表示内容を決定する第１決定部１５をさらに備える。表示制御部１１は、当該決定された表示内容の第２画像を上記位置に表示させる。したがって、ユーザは、第１操作入力において第１画像の移動方向を指定することにより、第２画像の表示位置を所望の位置に表示させることができるとともに、第２画像の表示内容も選ぶことができる。

（３）好ましくは、第１操作入力に応じた位置とは異なる位置に第２画像が表示された場合、表示制御部１１は、第１操作入力に応じた位置に、第１画像を縮小した縮小画像を表示させる。したがって、電子機器１００は、第２画像を表示させるための表示領域の確保が容易となる。

（４）好ましくは、電子機器１００は、第１画像の表示位置を切換える場合、第１操作入力に基づいて、第１画像の全体が液晶パネル２４０の表示領域に表示可能であるか否かを判断する判断部１６をさらに備える。判断部１６が、当該表示領域に表示可能ではないと判断した場合、表示制御部１１は、第１画像のうちの当該表示領域に表示可能でない部分を非表示とする。したがって、電子機器１００は、第１画像を縮小することなく、第２画像を液晶パネル２４０の表示領域に表示することができる。

（５）好ましくは、電子機器１００は、第１操作入力を受付けたことが検知された場合、第１操作入力に応じた位置に基づき、第２画像を表示する領域のサイズを決定する第２決定部１７をさらに備える。また、電子機器１００は、第２決定部１７が決定したサイズに基づき、第２画像の表示態様を決定する第３決定部１８をさらに備える。表示制御部１１は、第１操作入力に応じた位置とは異なる位置に、当該決定された表示態様にて第２画像を表示させる。

したがって、電子機器１００は、第２画像を表示する領域のサイズに応じて、第２画像の表示態様を決定する。それゆえ、ユーザは、第１操作入力において第１画像の移動方向および移動量を指定することにより、液晶パネル２４０の表示領域に、所望の表示態様で第２画像を表示させることができる。

（６）好ましくは、第２検知部１４は、さらに、上記選択された第１画像を上記移動の方向とは反対の方向に移動させるための第２操作入力を受付けたことを検知する。第２操作入力が受付けられたことを第２検知部１４が検知した場合、表示制御部１１は、第１画像の表示位置を、第１操作入力に応じた位置から、上記選択された際に表示されていた位置に切換える。さらに、表示制御部１１は、第２画像を非表示にする。

したがって、電子機器１００は、選択された第１画像をさらに上記移動の方向とは反対の方向に移動させるための第２操作入力を受付けた場合、第２画像を非表示とする。また、電子機器１００は、第１画像の表示位置を、第１操作入力を受付ける前の位置に戻す。それゆえ、ユーザが第２操作入力を電子機器１００に対して行なうことにより、ユーザは、第１操作入力を受付ける前の位置で、第１画像を用いた電子機器１００への入力が可能となる。

特に、上述したように、ユーザが、第２操作入力を、ユーザの指を液晶パネル２４０の表示領域と接触した状態で電子機器１００に対して行なう場合、ユーザは、当該表示領域から手を離すことなく、第２画像を非表示させる指示を電子機器１００に対して行なうことができる。

（７）好ましくは、第１画像は、ソフトウェアキーボードのキーボードを示す画像である。したがって、ユーザは、ソフトウェアキーボードを用いて電子機器１００への入力を行なっている場合に、ソフトウェアキーボードを用いた入力とは異なる入力を第２入力領域を用いて行なうことができる。

（８）好ましくは、第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含む。第１検知部１３は、第１キー群のうちの少なくとも１つのキーを指定する入力と、第２キー群のうちの少なくとも１つのキーを指定する入力とを、多点入力として受付けたことを検知する。第１検知部１３は、当該多点入力を受付けたことを検知することにより、第１画像が選択されたことを検知する。第１操作入力が、第１要素画像を移動させるための入力である場合、表示制御部１１は、第１要素画像の表示位置を、上記選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。

したがって、電子機器１００は、第１要素画像を移動させるための第１操作入力を受付けた場合、第２要素画像の表示位置は切換えずに、第１要素画像の表示位置を切換える。それゆえ、ユーザが当該第１操作入力を電子機器１００に対して行なうことにより、ユーザは、キーボードを示す画像のうちの第１要素画像のみの表示位置を、上記選択された際に表示されていた位置から、第１操作入力に応じた位置に切換えることができる。

（９）好ましくは、第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含む。第１検知部１３は、第１キー群のうちの少なくとも１つのキーを指定する入力と、第２キー群のうちの少なくとも１つのキーを指定する入力とを、多点入力として受付けたことを検知する。第１検知部１３は、当該多点入力を受付けたことを検知することにより、第１画像が選択されたことを検知する。第１操作入力が、第１要素画像および第２要素画像を移動させるための入力である場合、表示制御部１１は、第１要素画像の表示位置および第２要素画像の表示位置を、上記選択された際に表示されていた位置から、第１操作入力に応じた位置に切換える。

したがって、電子機器１００は、第１要素画像および第２要素画像を移動させるための第１操作入力を受付けた場合、第１要素画像および第２要素画像の表示位置を切換える。それゆえ、ユーザが当該第１操作入力を電子機器１００に対して行なうことにより、ユーザは、第１要素画像と第２要素画像との表示位置を、上記選択された際に表示されていた位置から、第１操作入力に応じた位置に切換えることができる。

特に、ユーザが、第１要素画像を移動させる方向と、第２要素画像を移動させる方向とが異なるように第１操作入力を電子機器１００に対して行なった場合、ユーザは、第１要素画像と第２要素画像とを別方向に移動させることができる。

＜電子機器１００の変形例＞
（１）上記においては、左手８０１の指および右手８０２の指とが表示領域に接触した状態で、ユーザが当該各指を移動させた場合に、表示制御部１１がキーボード画像３０１の表示位置を切換える構成について説明した。しかしながら、表示制御部１１は、この構成に限定されない。たとえば、一方の手の指が表示領域に接触した状態でユーザが当該指を移動させた場合に、表示制御部１１は、第１操作入力に従ってキーボード画像の表示位置を切換えてもよい。

図２７は、左手８０１の指が、キーボード画像３０１の表示領域に接触した状態を示した図である。図２８は、図２７の状態において、ユーザが左手８０１の当該指を矢印７６１の方向に移動させた場合を示した図である。図２８を参照して、表示制御部１１は、第１操作入力に応じた位置に、キーボード画像３０１を表示させる。また、表示制御部１１は、タッチパッド画像４０１を第１操作入力に応じた位置とは異なる位置に表示させる。より詳しくは、表示制御部１１は、キーボード画像３０１の移動によりキーボード画像３０１が表示されなくなった領域の少なくとも一部に、タッチパッド画像４０１を表示させる。具体的には、表示制御部１１は、キーボード画像３０１の右側の領域にタッチパッド画像４０１を表示させる。

（２）第１決定部１５は、第２画像が表示される位置に応じて、当該第２画像の表示内容を決定する構成に限定されるものではない。アプリケーションが実行され、かつ当該アプリケーションに基づく画像が液晶パネル１４０の表示領域に表示されている場合、当該アプリケーションに応じて、第２画像の表示内容を決定してもよい。たとえば、電子機器１００が、Ｗｅｂページを閲覧するためのアプリケーションを実行しており、液晶パネル１４０に当該アプリケーションの画像を表示している場合、第１決定部１５は、たとえば、当該アプリケーションのコントロールボタンの画像（図２３参照）を液晶パネル２４０に表示させることを決定する。

（３）第２画像が、液晶パネル１４０の表示領域に表示されている上記アプリケーションに基づく画像に関連する画像である場合、制御部１０が当該アプリケーションが終了すると、表示制御部１１は、以下の処理を行なうことが好ましい。すなわち、当該アプリケーションが終了した場合、表示制御部１１は、第１画像の表示位置を、第１操作入力に応じた位置から、選択された際に表示されていた位置に切換えるとともに、第２画像を非表示にすることが好ましい。

（４）上記においては、電子機器１００が、光センサを内蔵した液晶パネル２４０を備える構成を例に挙げて説明した。しかしながら、電子機器１００が備える第２の筐体１００Ｂの表示装置は、光センサを内蔵した液晶パネル２４０に限定されるものではない。電子機器１００は、第２の筐体１００Ｂの表示装置として、多点入力が可能な表示装置を備えていればよい。

（５）上記においては、電子機器１００が、液晶パネル２４０において第１画像の表示位置の切換えを行なう構成を例に挙げて説明したが、上記の内容は、電子機器１００が、液晶パネル１４０において第１画像の表示位置の切換えを行なう場合にも適用可能である。

（６）上記においては、第２検知部１４が、ユーザの指が離れたことを検知すると、表示制御部１１は、切換え後の第１画像の表示位置を確定した。第１画像の表示位置の確定は、以下のようにしてもよい。すなわち、第２検知部１４が、第１操作入力として、第１画像を第１方向に移動させる操作入力と、当該第１画像を第２方向に移動させる操作入力を受付けたことを連続して検知した場合、当該第１画像を第２方向に移動させる操作入力を受付けたことを検知することにより、表示制御部１１は第１画像の表示位置を確定してもよい。具体的には、表示制御部１１は、当該第１画像を第２方向に移動させる操作入力の開始を受付けた時点におけるユーザの指の位置に基づいて、第１画像の表示位置を確定すればよい。

（７）上記においては、第２検知部１４が、第１操作入力に基づく移動方向とは反対方向の第２操作入力を検知すると、表示制御部１１は、第１画像の表示位置を、第１操作入力に応じた位置から、上記選択された際に表示されていた位置に切換えた。つまり、表示制御部１１は、第１画像の表示位置を、元の位置に戻す処理を行なった。この際の第２操作入力は、第１画像の元の位置までのストロークデータの入力であってもよいし、あるいは当該元の位置に達する途中までのストロークデータの入力であってもよい。

また、第２検知部１４が、第１操作入力の後に指が離れたことを検知すると、表示制御部１１は、第１画像の表示位置を上記元の位置まで戻してもよい。なお、この場合、ユーザは、指を表示領域に接触させた状態で、第２入力領域を用いた入力を行なうことになる。

また、表示制御部１１は、第２画像を表示した際に、第１画像の表示位置を元の位置に戻すための入力を受付ける領域を、第２画像の表示領域、あるいは他の表示領域に設けてもよい。なお、この場合、ユーザは、第１画像の表示位置を元の位置に戻すための入力を受付ける領域を指で選択することにより、第１画像の表示位置を元の位置に戻すことができる。

また、たとえば、第２操作入力が、第２画像と重なる位置まで第１要素画像または第２要素画像を移動させる入力であるとき、表示制御部１１は、第１画像の表示位置を元の位置に戻してもよい。

また、表示制御部１１が第２画像を表示領域に表示させた場合、制御部１０が、第１画像と第２画像とが表示されている領域以外の領域においてユーザの指が接触したことを検知すると、表示制御部１１は、第１画像の表示位置を元の位置に戻してもよい。

（８）制御部１０は、第１要素画像が表示された領域と第２要素画像が表示された領域とに、それぞれ２本の指が接触した状態であることを条件に、第１操作入力および第２操作入力の受付けを許可してもよい。

（９）第２検知部１４が第１操作入力を受付けたことを検知する度に、表示制御部１１は、前回表示した内容とは異なる内容の第２画像を、表示領域に表示させてもよい。

（１０）第１画像は、キーボード画像に限定されるものではない。第１画像は、第２入力とは異なる第１入力を行なうための第１入力領域を示す画像であればよい。第２画像がタッチパッドである場合、たとえば、第１画像をテンキーの画像や携帯電話機の操作キーを示した画像としてもよい。第１画像は、文字や数字を入力をするための画像ではなくて、複数の項目から少なくとも１つ以上の項目を選択するための画像であってもよい。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

電子機器の外観を示した図である。 電子機器のハードウェア構成を表わすブロック図である。 電子機器の液晶パネルの構成と、当該液晶パネルの周辺回路とを示した図である。 液晶パネルとバックライトとの断面図である。 光センサ回路を動作させる際のタイミングチャートを示した図である。 液晶パネルとバックライトとの断面図であって、スキャンの際にフォトダイオードがバックライトからの光を受光する構成を示した図である。 センシングコマンドの概略構成を示した図である。 センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。 応答データの概略構成を示した図である。 指をスキャンすることにより得られた画像を示した図である。 他の光センサ内蔵液晶パネルの回路図である。 スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。 他の電子機器のハードウェア構成を表すブロック図である。 電子機器の機能ブロックを示した図である。 キーボード画像が表示された領域に指が接触した状態を示した図である。 キーボード画像を移動させるための第１操作入力を第２検知部が受付けたことを検知した後の、液晶パネルの表示内容を示した図である。 キーボード画像を移動させるための他の第１操作入力を受付けたことを第２検知部が検知した後の、液晶パネルの表示内容を示した図である。 キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部が検知した後の、液晶パネルの表示内容を示した図である。 キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部が検知した後の、液晶パネルの表示内容を示した図である。 キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部が検知した後の、液晶パネルの表示内容を示した図である。 キーボード画像を移動させるためのさらに他の第１操作入力を受付けたことを第２検知部が検知した後の、液晶パネルの表示内容を示した図である。 電子機器における処理のフローを示したフローチャートである。 タッチパッドと異なる第１の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネルに表示される第２画像を示した図である。 タッチパッドと異なる第２の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネルに表示される第２画像を示した図である。 タッチパッドと異なる第３の機能を実行するための領域に第２入力領域を設定した場合に、液晶パネルにおける、第２画像の一表示態様を示した図である。 第２入力領域を上記第３の機能を実行するための領域に設定した場合に、液晶パネルにおける、第２画像の他の表示態様を示した図である。 左手の指が、キーボード画像の表示領域に接触した状態を示した図である。 図２７の状態において、ユーザが左手の指を矢印の方向に移動させた場合を示した図である。

符号の説明

１０ 制御部、１１ 表示制御部、１２ データ受付部、１３ 第１検知部、１４ 第２検知部、１５ 第１決定部、１６ 判断部、１７ 第２決定部、１８ 第３決定部、９０ 記憶装置、１４０ 液晶パネル、２４０ 液晶パネル。

Claims (17)

1. 電子機器であって、
   第１表示領域を有するタッチパネルと、
   前記第１表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させる表示制御手段と、
   前記表示されている第１画像が選択されたことを検知する第１検知手段と、
   前記選択された第１画像を移動させるための第１操作入力を受付けたことを検知する第２検知手段とを備え、
   前記第１操作入力を受付けたことが検知された場合、前記表示制御手段は、
   前記第１画像の表示位置を、前記選択された際に表示されていた位置から、前記第１操作入力に応じた位置に切換え、
   前記第１表示領域のうち、前記第１操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させる、電子機器。
2. 前記表示制御手段は、前記第１画像の移動の方向に基づき、前記第２画像の表示位置を決定する、請求項１に記載の電子機器。
3. 前記電子機器は、前記第２画像が表示される位置に応じて、前記第２画像の表示内容を決定する第１決定手段をさらに備え、
   前記表示制御手段は、前記決定された表示内容の第２画像を前記位置に表示させる、請求項２に記載の電子機器。
4. 前記電子機器は、
   第２表示領域を有する表示装置と、
   アプリケーションが実行され、かつ当該アプリケーションに基づく画像が前記第２表示領域に表示されている場合、当該アプリケーションに応じて、前記第２画像の表示内容を決定する第１決定手段とをさらに備え、
   前記表示制御手段は、前記第１操作入力に応じた位置とは異なる位置に、前記決定された表示内容の第２画像を表示させる、請求項１または２に記載の電子機器。
5. 前記第１操作入力に応じた位置とは異なる位置に前記第２画像が表示された場合、前記表示制御手段は、前記第１操作入力に応じた位置に、前記第１画像を縮小した縮小画像を表示させる、請求項１から４のいずれか１項に記載の電子機器。
6. 前記電子機器は、前記第１画像の表示位置を切換える場合に、前記受付けた第１操作入力に基づいて、前記第１画像の全体が前記第１表示領域に表示可能であるか否かを判断する判断手段をさらに備え、
   前記第１表示領域に表示可能ではないと判断された場合、前記表示制御手段は、前記第１画像のうちの前記第１表示領域に表示可能でない部分を非表示とする、請求項１から４のいずれか１項に記載の電子機器。
7. 前記電子機器は、
   前記第１操作入力を受付けたことが検知された場合、前記第１操作入力に応じた位置に基づき、前記第２画像を表示する領域のサイズを決定する第２決定手段と、
   前記決定されたサイズに基づき、前記第２画像の表示態様を決定する第３決定手段とをさらに備え、
   前記表示制御手段は、前記第１操作入力に応じた位置とは異なる位置に、前記決定された表示態様にて前記第２画像を表示させる、請求項１から６のいずれか１項に記載の電子機器。
8. 前記第２検知手段は、さらに、前記選択された第１画像を当該第１画像の移動の方向とは反対の方向に移動させるための第２操作入力を受け付けたことを検知し、
   前記第２操作入力が受け付けられたことが検知された場合、前記表示制御手段は、前記第１画像の表示位置を、前記第１操作入力に応じた位置から、前記選択された際に表示されていた位置に切換え、さらに前記第２画像を非表示にする、請求項１から７のいずれか１項に記載の電子機器。
9. 前記電子機器は、第２表示領域を有する表示装置をさらに備え、
   前記第２画像は、前記第２表示領域に表示されている前記アプリケーションに基づく画像に関連する画像であり、
   前記アプリケーションが終了した場合、前記表示制御手段は、前記第１画像の表示位置を、前記第１操作入力に応じた位置から、前記選択された際に表示されていた位置に切換え、さらに前記第２画像を非表示にする、請求項１，２，３，５，６，および７のいずれか１項に記載の電子機器。
10. 前記第２画像は、前記第２表示領域に表示されている前記アプリケーションに基づく画像に関連する画像であり、
    前記アプリケーションが終了した場合、前記表示制御手段は、前記第１画像の表示位置を、前記第１操作入力に応じた位置から、前記選択された際に表示されていた位置に切換え、さらに前記第２画像を非表示にする、請求項４に記載の電子機器。
11. 前記電子機器は、前記第１操作入力に応じた位置とは異なる位置に前記第２画像が表示された場合に、前記第１入力領域を介した前記第１入力と前記第２入力領域を介した前記第２入力とを受け付ける受付手段をさらに備える、請求項１から１０のいずれか１項に記載の電子機器。
12. 前記第１画像は、ソフトウェアキーボードのキーボードを示す画像である、請求項１から１１のいずれか１項に記載の電子機器。
13. 前記タッチパネルは、多点入力を受け付け、
    前記第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含み、
    前記第１検知手段は、前記第１キー群のうちの少なくとも１つのキーを指定する入力と、前記第２キー群のうちの少なくとも１つのキーを指定する入力とを、前記多点入力として受け付けたことを検知し、当該多点入力を受付けたことを検知することにより、前記第１画像が選択されたことを検知し、
    前記第１操作入力が、前記第１要素画像を移動させるための入力である場合、前記表示制御手段は、前記第１要素画像の表示位置を、前記選択された際に表示されていた位置から、前記第１操作入力に応じた位置に切換える、請求項１２に記載の電子機器。
14. 前記タッチパネルは、多点入力を受付け、
    前記第１画像は、第１キー群を示した第１要素画像と第２キー群を示した第２要素画像とを含み、
    前記第１検知手段は、前記第１キー群のうちの少なくとも１つのキーを指定する入力と、前記第２キー群のうちの少なくとも１つのキーを指定する入力とを、前記多点入力として受付けたことを検知し、当該多点入力を受付けたことを検知することにより、前記第１画像が選択されたことを検知し、
    前記第１操作入力が、前記第１要素画像および前記第２要素画像を移動させるための入力である場合、前記表示制御手段は、前記第１要素画像の表示位置および前記第２要素画像の表示位置を、前記選択された際に表示されていた位置から、前記第１操作入力に応じた位置に切換える、請求項１２に記載の電子機器。
15. 前記タッチパネルは、前記表示領域に沿って内蔵された複数の光センサを含む、請求項１から１４のいずれか１項に記載の電子機器。
16. タッチパネルを備える電子機器における表示制御方法であって、
    前記タッチパネルにおける表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させるステップと、
    前記表示されている第１画像が選択されたことを検知するステップと、
    前記選択された第１画像を移動させるための操作入力を受付けたことを検知するステップと、
    前記操作入力を受付けたことが検知された場合、前記第１画像の表示位置を、前記選択された際に表示されていた位置から、前記操作入力に応じた位置に切換えるとともに、前記表示領域のうち、前記操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させるステップとを備える、表示制御方法。
17. タッチパネルを備える電子機器における表示制御方法を前記電子機器に実行させるためのプログラムであって、
    前記表示制御方法は、
    前記タッチパネルにおける表示領域の少なくとも一部の領域に、第１入力を受付けるための第１入力領域を示す第１画像を表示させるステップと、
    前記表示されている第１画像が選択されたことを検知するステップと、
    前記選択された第１画像を移動させるための操作入力を受付けたことを検知するステップと、
    前記操作入力を受付けたことが検知された場合、前記第１画像の表示位置を、前記選択された際に表示されていた位置から、前記操作入力に応じた位置に切換えるとともに、前記表示領域のうち、前記操作入力に応じた位置とは異なる位置に、第２入力を受付けるための第２入力領域を示す第２画像を表示させるステップとを備える、プログラム。

Images