JP5526397B2

JP5526397B2 - コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラム

Info

Publication number: JP5526397B2
Application number: JP2008277131A
Authority: JP
Inventors: 治裏谷
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2008-10-28
Filing date: 2008-10-28
Publication date: 2014-06-18
Anticipated expiration: 2028-10-28
Also published as: JP2010108088A

Description

本発明は、動画像などのコンテンツを表示するコンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムに関し、特に、複数の表示パネルを有し、当該複数の表示パネルの一方にコンテンツを表示するとともに、当該複数の表示パネルの他方にコンテンツの表示を操作するための操作画像を表示するコンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムに関する。

動画像などのコンテンツを表示（再生）することができる電子機器（コンテンツ表示装置）が知られている。そのような電子機器の中には、表示パネルと操作パネルとを有するものがある。より詳細には、電子機器は、表示パネルを介してユーザにコンテンツを表示するとともに、タブレット機能などを搭載した操作パネルを介してユーザからマウスを移動するための移動命令などを受け付ける。そのような電子機器として、たとえばノート型のパーソナルコンピュータなどが挙げられる。

そして、特開２００４−５１０５号公報（特許文献１）には、メイン表示装置のコントローラの起動状態や処理状況とは独立して、サブ表示装置を用いてユーザに対する表示を行うことができ、ユーザビリティの向上が図れた情報処理装置が開示されている。特開２００４−５１０５号公報（特許文献１）によると、ＯＳ起動前の段階で、ＢＩＯＳにパスワードが設定されていた場合に、ＢＩＯＳは、メインディスプレイ及びそのコントローラと比較して軽い（即ち少ない設定項目の）制御のサブディスプレイ及びそのコントローラをまず表示可能な状態とし、設定されたパスワードの入力要求をサブディスプレイに表示するよう制御する。このメッセージ表示を受けてパスワードが入力され、パスワードが一致すると、ＢＩＯＳは、グラフィックスコントローラ及びメインディスプレイの初期化を実行し、ＨＤＤのＯＳを起動して、次の処理へと進む。

また、特開２００４−５２１２号公報（特許文献２）には、二つのディスプレイデバイスを備え、それぞれのディスプレイデバイスに操作画像を表示する構成に於いて、誤操作を未然に防止してブラインドタッチ操作を円滑に行うことのできる情報処理装置およびコンピュータの操作方法が開示されている。特開２００４−５２１２号公報（特許文献２）によると、メインＣＰＵは、ＵＳＢコントローラを介して、ｃＰａｄデバイスの制御プログラムより、ｃＰａｄの画面が切り替わるイベント通知を受けると、メインディスプレイ上に表示されているマウスポインタの近くに、切り替えメニュー画面の表示エリアを確保して、そのエリアにｃＰａｄデバイスで扱う切り替えメニュー画面を表示する。

また、特開２００４−２３４５０４号公報（特許文献３）には、サウンド出力の無効化操作に拘わらず、サウンドデータを扱っている状態をユーザに正確に通知できる機能を備えた情報処理機器および状態通知方法が開示されている。特開２００４−２３４５０４号公報（特許文献３）によると、ＥＣ／ＫＢＣは、サウンド出力検知部から出力されるサウンド出力検出信号（ＯＤＴ）、およびオア回路から出力されるサウンド検出信号（ＳＤＴ）を入力して、これらの信号をもとにサウンドモニタドライブ信号（ＳＭＤ）を生成し、当該サウンドモニタドライブ信号（ＳＭＤ）によりサウンドモニタを動作制御する。

また、特開２０００−３３９０９７号公報（特許文献４）には、情報処理装置が開示されている。特開２０００−３３９０９７号公報（特許文献４）によると、情報処理装置は、タッチパッドの背面にＬＣＤが設けられ、機能ボタンが操作されたとき、ＬＣＤに機能を選択するメニューが表示される。ユーザが、タッチパッドを操作して、メニューの中から、例えばテンキーを選択すると、ＬＣＤにテンキーが表示される。タッチパッドを介して、そのテンキーを操作することで演算を行うことができる。
特開２００４−５１０５号公報特開２００４−５２１２号公報特開２００４−２３４５０４号公報特開２０００−３３９０９７号公報

しかしながら、入力される命令の目的や対象が異なれば、ユーザにとって操作性がよい操作画像（操作画面）は異なる。たとえば、動画像の再生を制御するのに便利な操作画面と、表示パネルに表示されているポインタの移動を制御するのに便利な操作画面とは異なる。この点に関し、従来のコンテンツ表示装置は、状況に応じて適宜ユーザが操作し易い操作パネルを提供することはできなかった。たとえば、従来のコンテンツ表示装置は、ユーザがコンテンツの再生を制御する可能性が高い場合であっても、ポインタの移動を制御するのに適した操作画面をユーザに提供していた。

本発明は、かかる問題を解決するためになされたものであり、その目的は、状況に応じてユーザが操作し易い操作画面を提供することができるコンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムを提供することである。

この発明のある局面に従うと、コンテンツ表示装置が提供される。コンテンツ表示装置は、第１および第２の表示パネルと、第１の表示パネルにコンテンツを表示させる第１の表示制御手段と、表示されるコンテンツの表示態様を変更する変更命令を受け付ける受付手段と、表示態様が所定条件を満たすか否かを判断する第１の判断手段と、第１の判断手段が表示態様が所定条件を満たすと判断した場合に、第２の表示パネルにコンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させる第２の表示制御手段とを備える。

コンテンツ表示装置は、第１の判断手段が表示態様が所定条件を満たすと判断した場合に第１のモードに切り替え、第１の判断手段が表示態様が所定条件を満たさないと判断した場合に第２のモードに切り替える切替手段をさらに備える。第１の表示制御手段は、第２のモードにおいて、第１の表示パネルにポインタを表示させる。受付手段は、第２のモードにおいて、第２の表示パネルを介してポインタを移動させるための第１の移動命令を受け付ける。

第１の表示制御手段は、第２のモードにおいて、第１の表示パネルに、コンテンツとコンテンツの表示を操作するための操作命令を受け付けるための第２の画像とを表示させる。第１の表示制御手段は、第２のモードに切り替わった際に、第１の表示パネルに、第２の画像のうちの、最後に受け付けられた操作命令に対応する箇所にポインタを表示させる。

好ましくは、第１の表示制御手段は、第１のモードにおいて、第１の表示パネルに第２の画像を表示させることなく、第１の表示パネルにコンテンツを表示させる。

好ましくは、コンテンツ表示装置は、第２のモードにおいて、受付手段が第２の画像を所定エリアに移動させる第２の移動命令を受け付けたか否かを判断する第２の判断手段をさらに備える。第２の判断手段が受付手段が第２の移動命令を受け付けたと判断した場合、切替手段が第１のモードに切り替えるとともに、第１の表示制御手段が第１の表示パネルにコンテンツを全画面表示させる。

好ましくは、コンテンツ表示装置は、第１のモードにおいて、受付手段が第２の所定命令を受け付けたか否かを判断する第３の判断手段をさらに備える。第３の判断手段が受付手段が第２の所定命令を受け付けたと判断した場合、切替手段が第２のモードに切り替えるとともに、第１の表示制御手段が第１の表示パネルにポインタを表示させる。

好ましくは、受付手段は、第１のモードにおいて、第２の表示パネルを介して入力される絶対座標に基づいて操作命令を生成し、第２のモードにおいて、第２の表示パネルを介して入力される相対座標に基づいて第１の移動命令を生成する。

好ましくは、コンテンツの表示態様とは、コンテンツの表示サイズである。第１の表示制御手段は、変更命令に基づいてコンテンツの表示サイズを変更する。

好ましくは、第１の判断手段は、第１の表示制御手段が第１の表示パネルにコンテンツを全画面表示させている場合に、表示態様が所定条件を満たすと判断し、第１の表示制御手段が第１の表示パネルにコンテンツを全画面表示させていない場合に、表示態様が所定条件を満たさないと判断する。

好ましくは、第２の表示パネルは、入射光に応じて入力信号を生成する複数の光センサ回路と、出力信号に応じて光を発する複数の画素回路とを含む。受付手段は、複数の光センサ回路からの入力信号に基づいて操作命令を受け付ける。第２の表示制御手段は、画素回路に出力信号を出力することによって、第２の表示パネルに第１の画像を表示させる。

この発明の別の局面に従うと、第１および第２の表示パネルと演算処理部とを備えるコンテンツ表示装置におけるコンテンツ表示方法が提供される。コンテンツ表示方法は、演算処理部が、第１の表示パネルにコンテンツを表示させるステップと、演算処理部が、表示されるコンテンツの表示態様を変更する変更命令を受け付けるステップと、演算処理部が、表示態様が所定条件を満たすか否かを判断するステップと、演算処理部が、表示態様が所定条件を満たすと判断した場合に、第２の表示パネルにコンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させるステップと、演算処理部が、表示態様が所定条件を満たすと判断した場合に、第１のモードに切り替えるステップと、演算処理部が、表示態様が所定条件を満たさないと判断した場合に、第２のモードに切り替えるステップとを備え、第２のモードでは、第１の表示パネルに、ポインタと、コンテンツと、コンテンツの表示を操作するための操作命令を受け付けるための第２の画像とが表示され、演算処理部が、第２のモードにおいて、第２の表示パネルを介してポインタを移動させるための第１の移動命令を受け付けるステップと、演算処理部が、第２のモードに切り替わった際に、第１の表示パネルに、第２の画像のうちの、最後に受け付けられた操作命令に対応する箇所にポインタを表示させるステップとをさらに備える。

この発明の別の局面に従うと、第１および第２の表示パネルと演算処理部とを備えるコンテンツ表示装置にコンテンツ表示させるためのコンテンツ表示プログラムが提供される。コンテンツ表示プログラムは、演算処理部に、第１の表示パネルにコンテンツを表示させるステップと、表示されるコンテンツの表示態様を変更する変更命令を受け付けるステップと、表示態様が所定条件を満たすか否かを判断するステップと、表示態様が所定条件を満たすと判断した場合に、第２の表示パネルにコンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させるステップと、表示態様が所定条件を満たすと判断した場合に、第１のモードに切り替えるステップと、表示態様が所定条件を満たさないと判断した場合に、第２のモードに切り替えるステップとを実行させ、第２のモードでは、第１の表示パネルに、ポインタと、コンテンツと、コンテンツの表示を操作するための操作命令を受け付けるための第２の画像とが表示され、演算処理部に、第２のモードにおいて、第２の表示パネルを介してポインタを移動させるための第１の移動命令を受け付けるステップと、第２のモードに切り替わった際に、第１の表示パネルに、第２の画像のうちの、最後に受け付けられた操作命令に対応する箇所にポインタを表示させるステップとをさらに実行させる。

以上のように、本発明によって、状況に応じてユーザが操作し易い操作画面を提供できるコンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムが提供される。

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

［実施の形態１］
＜電子機器１００の全体構成＞
まず、本実施の形態に係るコンテンツ表示装置の一例である電子機器１００の全体構成について説明する。

図１は、本実施の形態に係る電子機器１００の外観を示す概略図である。より詳細には、図１（Ａ）は第１の表示パネル１４０（あるいは表示装置１０２Ａ）にコンテンツを小さく表示させたときのイメージ図であり、図１（Ｂ）は第１の表示パネル１４０にコンテンツを大きく表示させたときのイメージ図である。

図１（Ａ）および図１（Ｂ）を参照して、電子機器１００は、第１の筐体１００Ａと第２の筐体１００Ｂとを含む。第１の筐体１００Ａと第２の筐体１００Ｂとは、ヒンジ１００Ｃにより折畳み可能に接続されている。第１の筐体１００Ａは、第１の光センサ内蔵液晶パネル１４０（以下、第１の表示パネル１４０ともいう。）を備える。第２の筐体１００Ｂは、操作キーと第２の光センサ内蔵液晶パネル２４０（以下、第２の表示パネル２４０あるいはサブ画面ともいう。）を備える。このように、本実施の形態に係る電子機器１００は、光センサ内蔵液晶パネルを２つ備える。なお、電子機器１００は、ＰＤＡ（Personal Digital Assistant）、ノート型のパーソナルコンピュータ、携帯型電話機、電子辞書などの表示機能を有する携帯型デバイスとして構成される。

そして、本実施の形態に係る電子機器１００は、第１の表示パネル１４０を用いて動画像１４０Ａなどのコンテンツを表示するとともに、操作キー１７７および第２の表示パネル２４０を介してユーザからの命令を受け付ける。第２の表示パネル２４０は、第１の表示パネル１４０に表示されるポインタの移動命令や、第１の表示パネル１４０に表示される動画像１４０Ａなどの再生を制御する操作命令を受け付ける。

なお、第１の表示パネル１４０は、光センサ内蔵液晶パネルである必要はなく、コンテンツが表示可能であればよい。一方、第２の表示パネル２４０は、ユーザによるタッチ操作を検出できる必要があるため、タブレット機能と表示機能とを有するタッチパネルや、光センサ内蔵液晶パネルを利用することが好ましい。

＜電子機器１００の動作概要＞
次に、図１（Ａ）および図１（Ｂ）を参照して、本実施の形態に係る電子機器１００の動作概要について説明する。

図１（Ａ）を参照して、電子機器１００は、第１の表示パネル１４０に動画像１４０Ａを小さいウィンドウ上で表示させる。動画像１４０Ａが小さいウィンドウ上で表示されている場合、電子機器１００は通常モードに設定される。通常モードにおいては、電子機器１００は、第１の表示パネル１４０にポインタ１４０Ｂを表示し、第２の表示パネル２４０を介してポインタ１４０Ｂの移動命令（第１の移動命令）を受け付ける。これによって、ユーザは、第２の表示パネル２４０に対するタッチ操作を行うことにより、第１の表示パネル１４０に表示されているポインタ１４０Ｂを移動させることができる。

このとき、電子機器１００は、第１の表示パネル１４０に、コンテンツの再生を制御するためのメイン操作画像１４０Ｃ（第２の画像）を表示させる。同時に、電子機器１００は、第２の表示パネル２４０に、現在通常モードであることを示す画像２４０Ａを表示する。

図１（Ｂ）に示すように、ユーザは、操作キー１７７や第２の表示パネル２４０を介して、コンテンツを全画面表示することができる。すなわち、ユーザは、操作キー１７７や第２の表示パネル２４０を介して、第１の表示パネル１４０によるコンテンツの表示態様を変更することができる。コンテンツが全画面表示されている場合、電子機器１００は全画面モードに設定される。

全画面モードにおいては、電子機器１００は、第２の表示パネル２４０に、コンテンツの再生を制御するためのサブ操作画像２４０Ｃ（第１の画像）を表示させる。このとき、電子機器１００は、第２の表示パネル２４０に、現在全画面モードであることを示す画像２４０Ｂを表示する。

このようにして、ユーザは、第２の表示パネル２４０のサブ操作画像２４０Ｃにタッチすることによって、容易にコンテンツの再生を制御することができる。換言すれば、本実施の形態に係る電子機器１００は、状況に応じてユーザが操作し易い操作画面を提供することによって、入力される命令の目的や対象が異なればユーザにとって操作性がよい操作画像（操作画面）が異なるという問題点を克服することができる。

より詳細には、第１の表示パネル１４０を介して表示されるコンテンツの表示態様に応じて、ユーザが第２の表示パネル２４０（操作パネル）を介して入力したい操作命令は変化する。

第１の表示パネル１４０にアプリケーション用のウィンドウが大きく表示されている場合には、ユーザは第２の表示パネル２４０を介して当該アプリケーションの動作を制御するための操作命令を入力する可能性は高いが、他のアプリケーションを制御するための命令を入力する可能性は低い。たとえば、第１の表示パネル１４０に動画像を再生するアプリケーション用のウィンドウが大きく表示されている場合には、ユーザは動画像の再生を制御するための操作命令を入力する可能性は高いが、ポインタの移動命令を入力する可能性は低い。

逆に、第１の表示パネル１４０にアプリケーション用のウィンドウが小さく表示されている場合には、ユーザが他のアプリケーションを制御するための命令を入力する可能性が高い。たとえば、第１の表示パネル１４０に動画像を再生するウィンドウを小さく表示している場合には、ユーザがポインタの移動命令を入力する可能性が高い。

本実施の形態に係る電子機器１００は、上記の観点に基づいて、状況に応じてユーザが操作し易い操作画面を提供するものである。以下、このような機能を実現するための構成について詳述する。

＜電子機器１００のハードウェア構成＞
次に、図２を参照して、電子機器１００の具体的構成の一態様について説明する。図２は、電子機器１００のハードウェア構成を表わすブロック図である。

電子機器１００は、第１ユニット１００１（メイン装置）と、第２ユニット１００２とを含む。第２ユニット１００２は、電子機器１００から着脱可能に第１ユニット１００１に接続されている。第１ユニット１００１は、本体装置１０１と、表示装置１０２とを含む。第２ユニット１００２は、表示装置１０３と、本体装置１０４とを含む。

第１の筐体１００Ａは、表示装置１０２を含む。第２の筐体１００Ｂは、本体装置１０１を含む。また、第２の筐体１００Ｂは、第２ユニット１００２を含む。

（第１ユニットについて）
本体装置１０１は、ＣＰＵ（Central Processing Unit）１１０と、ＲＡＭ（Random Access Memory）１７１と、ＲＯＭ（Read-Only Memory）１７２と、メモリカードリーダライタ１７３と、外部通信部１７４と、マイク１７５と、スピーカ１７６と、操作キー１７７と、電源スイッチ１９１と、電源回路１９２と、電源検出部１９３と、ＵＳＢ（Universal Serial Bus）コネクタ１９４と、アンテナ１９５と、ＬＡＮ（Local Area Network）コネクタ１９６とを含む。各構成要素（１１０，１７１〜１７７，１９３）は、相互にデータバスＤＢ１によって接続されている。メモリカードリーダライタ１７３には、メモリカード１７３１が装着される。

ＣＰＵ１１０は、プログラムを実行する。操作キー１７７は、電子機器１００の使用者による指示の入力を受ける。ＲＡＭ１７１は、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、または操作キー１７７を介して入力されたデータを揮発的に格納する。ＲＯＭ１７２は、データを不揮発的に格納する。また、ＲＯＭ１７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。

外部通信部１７４は、他の電子機器と通信を行う。具体的には、外部通信部１７４は、ＵＳＢコネクタ１９４を介して、たとえば第２ユニット１００２と通信を行う。また、外部通信部１７４は、アンテナ１９５を介して、たとえば第２ユニット１００２と無線通信を行う。さらに、外部通信部１７４は、ＬＡＮコネクタ１９６を介して、他の電子機器との間で有線通信を行う。

なお、本体装置１０１は、Ｂｌｕｅｔｏｏｔｈ（登録商標）以外の無線通信により、他の電子機器と通信を行ってもよい。たとえば、外部通信部１７４は、図示しない無線ＬＡＮアンテナを介して、ＬＡＮに接続された他の電子機器との間で無線通信を行ってもよい。あるいは、図示しない赤外線ポートを介して、他の電子機器との間で無線通信を行ってもよい。

電源スイッチ１９１は、電子機器１００を起動させるためのスイッチである。
電源スイッチ１９１がオンすると、電源回路１９２は、電源検出部１９３を介して、データバスＤＢ１に接続されている各構成要素と表示装置１０２とに電力を供給する。また、電源スイッチ１９１がオンすると、電源回路１９２は、電源検出部１９３を介することなく、外部通信部１７４に電力を供給する。

電源検出部１９３は、電源回路１９２からの出力を検出する。また、電源検出部１９３は、当該検出した出力に関する情報（たとえば、電圧値や電流値）を、ＣＰＵ１１０に送る。

ＵＳＢコネクタ１９４は、第１ユニット１００１を第２ユニット１００２に接続するために用いられる。なお、本体装置１０１は、ＵＳＢコネクタ１９４に加えて他のＵＳＢコネクタを備えていてもよい。

第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２にデータを送信する。また、第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２からデータを受信する。さらに、第１ユニット１００１は、ＵＳＢコネクタ１９４を介して、第２ユニット１００２に電力を供給する。

アンテナ１９５は、第１ユニット１００１と、他の通信装置（たとえば第２ユニット１００２）との間における、Ｂｌｕｅｔｏｏｔｈ（登録商標）の規格に沿った通信に用いられる。ＬＡＮコネクタ１９６は、電子機器１００をＬＡＮに接続するために用いられる。

表示装置１０２は、ドライバ１３０と、光センサ内蔵液晶パネル１４０（以下、表示パネル１４０と称する）と、内部ＩＦ１７８と、バックライト１７９と、画像処理エンジン１８０とを含む。

ドライバ１３０は、表示パネル１４０およびバックライト１７９を駆動するための駆動回路である。ドライバ１３０に含まれる各種の駆動回路については、後述する。

表示パネル１４０は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、表示パネル１４０は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行うことができる。表示パネル１４０の詳細については、後述する。

内部ＩＦ（Interface）１７８は、本体装置１０１と表示装置１０２との間で、データの遣り取りを仲介する。

バックライト１７９は、表示パネル１４０の裏面に配置された光源である。バックライト１７９は、当該裏面に対して均一な光を照射する。

画像処理エンジン１８０は、ドライバ１３０を介して表示パネル１４０の動作を制御する。ここで、当該制御は、内部ＩＦ１７８を介して本体装置１０１から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン１８０は、表示パネル１４０から出力されるデータを処理し、処理したデータを内部ＩＦ１７８を介して本体装置１０１に送る。さらに、画像処理エンジン１８０は、ドライバ制御部１８１と、タイマ１８２と、信号処理部１８３とを含む。

ドライバ制御部１８１は、ドライバ１３０に対して制御信号を送ることによりドライバ１３０の動作を制御する。また、ドライバ制御部１８１は、本体装置１０１から送られてくるコマンドを解析する。そして、ドライバ制御部１８１は、当該解析の結果に基づいた制御信号をドライバ１３０に送る。ドライバ１３０の動作の詳細については、後述する。

タイマ１８２は、時刻情報を生成し、信号処理部１８３に対して時刻情報を送る。
信号処理部１８３は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部１８３は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部１８３は、当該デジタルデータに対して、本体装置１０１から送られてくるコマンドの内容に応じたデータ処理を行う。そして、信号処理部１８３は、上記データ処理を行った後のデータと、タイマ１８２から取得した時刻情報とを含んだデータ（以下、応答データと称する）を本体装置１０１に送る。また、信号処理部１８３は、後述するスキャンデータを連続して複数格納できるＲＡＭ（図示せず）を備えている。

上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する（図７，図８，および図１４）。

なお、タイマ１８２は、必ずしも画像処理エンジン１８０に備えられている必要はない。たとえば、タイマ１８２は、表示装置１０２内における、画像処理エンジン１８０の外部に備えられていてもよい。あるいは、タイマ１８２は、本体装置１０１に備えられていてもよい。また、マイク１７５およびスピーカ１７６は、電子機器１００が常に備える構成ではなく、電子機器１００の実施例によっては、マイク１７５およびスピーカ１７６のいずれかあるいは両方を有さない構成であってもよい。

ここで、表示装置１０２は、システム液晶を含んでいる。なお、システム液晶とは、表示パネル１４０の周辺機器を当該表示パネル１４０のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、表示パネル１４０のガラス基板上に一体形成されている。なお、表示装置１０２が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、上記ガラス基板以外の基板に構成されていてもよい。

（第２ユニットについて）
第２ユニット１００２は、第１ユニット１００１から電力の供給を受ける。具体的には、後述するＵＳＢコネクタ２９４と第１ユニット１００１のＵＳＢコネクタ２９４とを接続することにより、第２ユニット１００２は、第１ユニット１００１の電源回路１９２から電力の供給を受ける。

本体装置１０４は、ＣＰＵ２１０と、ＲＡＭ２７１と、ＲＯＭ２７２と、外部通信部２７４と、電源検出部２９３と、ＵＳＢコネクタ２９４と、アンテナ２９５と、信号強度検出部２９７とを含む。各構成要素（２１０，２７１，２７２，２７４，２９３）は、相互にデータバスＤＢ２によって接続されている。

ＣＰＵ２１０は、プログラムを実行する。ＲＡＭ２７１は、ＣＰＵ２１０によるプログラムの実行により生成されたデータを揮発的に格納する。ＲＯＭ２７２は、データを不揮発的に格納する。また、ＲＯＭ２７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。

外部通信部２７４は、他の電子機器との間で通信を行う。具体的には、外部通信部２７４は、ＵＳＢコネクタ２９４を介して、たとえば第１ユニット１００１と通信を行う。また、外部通信部２７４は、アンテナ２９５を介して、たとえば第１ユニット１００１と通信を行う。

なお、本体装置１０４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）以外の無線通信により、他の電子機器（たとえば、第１ユニット１００１）と通信を行ってもよい。たとえば、外部通信部２７４は、図示しない赤外線ポートを介して、他の電子機器との間で無線通信を行ってもよい。

信号強度検出部２９７は、アンテナ２９５を介して受信した信号についての強度を検出する。そして、信号強度検出部２９７は、検出した強度を外部通信部２７４に送る。

ＵＳＢコネクタ１９４は、第２ユニット１００２を第１ユニット１００１に接続するために用いられる。

第２ユニット１００２は、ＵＳＢコネクタ２９４を介して、第１ユニット１００１にデータを送信する。また、第２ユニット１００２は、ＵＳＢコネクタ２９４を介して、第１ユニット１００１からデータを受信する。さらに、第２ユニット１００２は、上述したように、ＵＳＢコネクタ２９４を介して、第１ユニット１００１から電力の供給を受ける。なお、第２ユニット１００２は、第１ユニット１００１から供給された電力を、図示しないバッテリに蓄電する。

アンテナ２９５は、第２ユニット１００２と、たとえば第１ユニット１００１との間における、Ｂｌｕｅｔｏｏｔｈ（登録商標）の規格に沿った通信に用いられる。

電源検出部１９３は、ＵＳＢコネクタ２９４を介して給電された電力を検出する。また、電源検出部１９３は、当該検出した電力についての情報を、ＣＰＵ２１０に送る。

また、本体装置１０４は、赤外線通信を行う機能を備えていてもよい。
表示装置１０３は、ドライバ２３０と、光センサ内蔵液晶パネル２４０（以下、「表示パネル２４０」と称する）と、内部ＩＦ２７８と、バックライト２７９と、画像処理エンジン２８０とを含む。画像処理エンジン２８０は、ドライバ制御部２８１と、タイマ２８２と、信号処理部２８３とを含む。

表示装置１０３は、表示装置１０２と同様な構成を有する。つまり、ドライバ２３０、表示パネル２４０、内部ＩＦ２７８、バックライト２７９、および画像処理エンジン２８０は、表示装置１０２における、ドライバ１３０、表示パネル１４０、内部ＩＦ１７８、バックライト１７９、画像処理エンジン１８０と同じ構成をそれぞれ有する。ドライバ制御部２８１、タイマ２８２、および信号処理部２８３は、表示装置１０２における、ドライバ制御部１８１、タイマ１８２、信号処理部１８３と同じ構成をそれぞれ有する。したがって、表示装置１０３に含まれる各機能ブロックについての説明は、繰り返さない。

ところで、電子機器１００における処理は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、ＲＯＭ１７２に予め記憶されている場合がある。また、ソフトウェアは、メモリカード１７３１その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ１７３その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部１７４または通信ＩＦ（図示せず）を介してダウンロードされた後、ＲＯＭ１７２に一旦格納される。そのソフトウェアは、ＣＰＵ１１０によってＲＯＭ１７２から読み出され、ＲＡＭ１７１に実行可能なプログラムの形式で格納される。ＣＰＵ１１０は、そのプログラムを実行する。

図２に示される電子機器１００の本体装置１０１を構成する各構成要素は、一般的なものである。したがって、本発明の本質的な部分は、ＲＡＭ１７１、ＲＯＭ１７２、メモリカード１７３１その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、電子機器１００の本体装置１０１のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。

なお、記憶媒体としては、メモリカードに限られず、ＣＤ−ＲＯＭ、ＦＤ（Flexible Disk）、ハードディスク、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。

ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。

＜光センサ内蔵液晶パネルの構成および駆動について＞
次に、表示パネル１４０の構成と、当該表示パネル１４０の周辺回路の構成とについて説明する。図３は、表示パネル１４０の構成と、当該表示パネル１４０の周辺回路とを示した図である。

図３を参照して、表示パネル１４０は、画素回路１４１と、光センサ回路１４４と、走査信号線Ｇｉと、データ信号線ＳＲｊと、データ信号線ＳＧｊと、データ信号線ＳＢｊと、センサ信号線ＳＳｊと、センサ信号線ＳＤｊと、読出信号線ＲＷｉと、リセット信号線ＲＳｉとを含む。なお、ｉは、１≦ｉ≦ｍを満たす自然数であり、ｊは１≦ｊ≦ｎを満たす自然数である。

また、図２に示した表示装置１０２のドライバ１３０は、表示パネル１４０の周辺回路として、走査信号線駆動回路１３１と、データ信号線駆動回路１３２と、光センサ駆動回路１３３と、スイッチ１３４と、アンプ１３５とを含む。

走査信号線駆動回路１３１は、図２に示すドライバ制御部１８１から制御信号ＴＣ１を受ける。そして、走査信号線駆動回路１３１は、制御信号ＴＣ１に基づき、各走査信号線（Ｇ１〜Ｇｍ）に対して、走査信号線Ｇ１から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路１３１は、単位時間毎に走査信号線（Ｇ１〜Ｇｍ）の中から１つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するＴＦＴ（Thin Film Transistor）１４２のゲートをターンオンできるだけの電圧（以下、ハイレベル電圧）を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。

データ信号線駆動回路１３２は、図２に示すドライバ制御部１８１から画像データ（ＤＲ，ＤＧ，ＤＢ）を受ける。そして、データ信号線駆動回路１３２は、３ｎ個のデータ信号線（ＳＲ１〜ＳＲｎ，ＳＧ１〜ＳＧｎ，ＳＢ１〜ＳＢｎ）に対して、上記単位時間毎に、１行分の画像データに対応する電圧を順次印加する。

なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。

画素回路１４１は、１つの画素の輝度（透過率）を設定するための回路である。また、画素回路１４１は、マトリクス状にｍ×ｎ個配されている。より詳しくは、画素回路１４１は、図３の縦方向にｍ個、横方向にｎ個配されている。

画素回路１４１は、Ｒサブピクセル回路１４１ｒと、Ｇサブピクセル回路１４１ｇと、Ｂサブピクセル回路１４１ｂとからなる。これら３つの回路（１４１ｒ，１４１ｇ，１４１ｂ）は、それぞれ、ＴＦＴ１４２と、画素電極と対向電極とからなる１組の電極対１４３と、図示しないコンデンサとを含む。

なお、ｎ型のトランジスタとｐ型のトランジスタとを作れるＣＭＯＳ（Complementary Metal Oxide Semiconductor）を実現できること、キャリア（電子または正孔）の移動速度がアモルファスシリコン薄膜トランジスタ（a-Si TFT）に比べて数百倍早いことなどから、表示装置１０２では、ＴＦＴ１４２として多結晶シリコン薄膜トランジスタ(p-Si TFT)が用いられる。なお、ＴＦＴ１４２は、ｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４２がｐ型チャネルの電界効果トランジスタであってもよい。

Ｒサブピクセル回路１４１ｒ内のＴＦＴ１４２のソースはデータ信号線ＳＲｊに接続されている。また、当該ＴＦＴ１４２のゲートは走査信号線Ｇｉに接続されている。さらに、当該ＴＦＴ１４２のドレインは、電極対１４３の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Ｇサブピクセル回路１４１ｇおよびＢサブピクセル回路１４１ｂについても、各ＴＦＴ１４２のソースが接続されるデータ信号線が異なる以外は、Ｒサブピクセル回路１４１ｒと同じ構成である。このため、これら２つの回路（１４１ｇ，１４１ｂ）についての説明は、繰り返さない。

ここで、画素回路１４１における輝度の設定について説明する。まず、走査信号線Ｇｉに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、ＴＦＴ１４２のゲートがターンオンする。このようにＴＦＴ１４２のゲートがターンオンした状態で、各データ信号線（ＳＲｊ，ＳＧｊ，ＳＢｊ）に対して、それぞれ指定された電圧（１画素分の画像データに対応する電圧）を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ（補助容量）によって、次のフレーム期間において走査信号線Ｇｉが選択されるまで保持される。

光センサ駆動回路１３３は、図２に示すドライバ制御部１８１から制御信号ＴＣ２を受ける。

そして、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎にリセット信号線（ＲＳ１〜ＲＳｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧ＶＳＳＲを印加したままとする。たとえば、電圧ＶＤＤＲを０Ｖに、電圧ＶＳＳＲを−５Ｖに設定すればよい。

また、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎に読出信号線（ＲＷ１〜ＲＷｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤを印加する。なお、選択されていない読出信号線に対しては、上記電圧ＶＳＳＲを印加したままとする。たとえば、ＶＤＤの値を８Ｖに設定すればよい。

なお、電圧ＶＤＤＲを印加するタイミング、および電圧ＶＤＤを印加するタイミングについては、後述する。

光センサ回路１４４は、フォトダイオード１４５と、コンデンサ１４６と、ＴＦＴ１４７とを含む。なお、以下では、ＴＦＴ１４７がｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４７がｐ型チャネルの電界効果トランジスタであってもよい。

フォトダイオード１４５のアノードは、リセット信号線ＲＳｉに接続されている。一方、フォトダイオード１４５のカソードは、コンデンサ１４６の一方の電極に接続されている。また、コンデンサ１４６の他方の電極は、読出信号線ＲＷｉに接続されている。なお、以下では、フォトダイオード１４５とコンデンサ１４６との接続点をノードＮと称する。

ＴＦＴ１４７のゲートは、ノードＮに接続されている。また、ＴＦＴ１４７のドレインは、センサ信号線ＳＤｊに接続されている。さらに、ＴＦＴ１４７のソースは、センサ信号線ＳＳｊに接続されている。光センサ回路１４４を用いたセンシングの詳細については、後述する。

スイッチ１３４は、センサ信号線（ＳＤ１〜ＳＤｎ）に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ１３４の切り換え動作は、光センサ駆動回路１３３により行われる。なお、スイッチ１３４が導通状態となった場合にセンサ信号線（ＳＤ１〜ＳＤｎ）に印加される電圧については、後述する。

アンプ１３５は、各センサ信号線（ＳＳ１〜ＳＳｎ）から出力された電圧を増幅する。なお、増幅された電圧は、図２に示した信号処理部１８３に送られる。

なお、画素回路１４１を用いて画像を表示パネル１４０に表示させるタイミングと、光センサ回路１４４を用いてセンシングするタイミングとについては、画像処理エンジン１８０が制御する。

図４は、表示パネル１４０とバックライト１７９との断面図である。図４を参照して、表示パネル１４０は、アクティブマトリクス基板１５１Ａと、対向基板１５１Ｂと、液晶層１５２とを含む。対向基板１５１Ｂは、アクティブマトリクス基板１５１Ａに対向して配されている。液晶層１５２は、アクティブマトリクス基板１５１Ａと対向基板１５１Ｂとに挟まれている。バックライト１７９は、アクティブマトリクス基板１５１Ａに関し液晶層１５２と反対側に配されている。

アクティブマトリクス基板１５１Ａは、偏光フィルタ１６１と、ガラス基板１６２と、電極対１４３を構成する画素電極１４３ａと、フォトダイオード１４５と、データ信号線１５７と、配向膜１６４とを含む。さらに、図４には示していないが、アクティブマトリクス基板１５１Ａは、図３に示した、コンデンサ１４６と、ＴＦＴ１４７と、ＴＦＴ１４２と、走査信号線Ｇｉとを含む。

また、アクティブマトリクス基板１５１Ａにおいては、バックライト１７９側から、偏光フィルタ１６１、ガラス基板１６２、画素電極１４３ａ、および配向膜１６４が、この順に配されている。フォトダイオード１４５とデータ信号線１５７とは、ガラス基板１６２の液晶層１５２側に形成されている。

対向基板１５１Ｂは、偏光フィルタ１６１と、ガラス基板１６２と、遮光膜１６３と、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と、電極対１４３を構成する対向電極１４３ｂと、配向膜１６４とを含む。

また、対向基板１５１Ｂにおいては、液晶層１５２側から、配向膜１６４、対向電極１４３ｂ、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）、ガラス基板１６２、および偏光フィルタ１６１が、この順に配されている。遮光膜１６３は、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と同一の層に形成されている。

カラーフィルタ１５３ｒは、赤色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｇは、緑色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｂは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード１４５は、カラーフィルタ１５３ｂに対向する位置に配されている。

表示パネル１４０は、外光やバックライト１７９などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、表示パネル１４０は、画素電極１４３ａと対向電極１４３ｂとの間に電圧を印加することにより液晶層１５２の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ１６１を配置している。

なお、フォトダイオード１４５の位置は、上記の位置に限定されるものではなく、カラーフィルタ１５３ｒに対向する位置やカラーフィルタ１５３ｇに対向する位置に設けることも可能である。

ここで、光センサ回路１４４の動作について説明する。図５は、光センサ回路１４４を動作させる際のタイミングチャートを示した図である。図５において、電圧ＶＩＮＴは、光センサ回路１４４内のノードＮにおける電位を示している。また、電圧ＶＰＩＸは、図３に示したセンサ信号線ＳＳｊからの出力電圧であって、アンプ１３５によって増幅される前の電圧を示している。

以下では、光センサ回路１４４をリセットするためのリセット期間と、光センサ回路１４４を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。

まず、リセット期間について説明する。リセット期間においては、リセット信号線ＲＳｉに印加する電圧を、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤＲ）へと瞬間的に切り換える。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。このように、リセット信号線ＲＳｉに上記ハイレベルの電圧を印加することにより、フォトダイオード１４５の順方向（アノード側からカソード側）に電流が流れ始める。その結果、ノードＮの電位である電圧ＶＩＮＴは、以下の式（１）で示す値となる。なお、式（１）では、フォトダイオード１４５における順方向の電圧降下量をＶｆとしている。

ＶＩＮＴ＝ＶＳＳＲ＋｜ＶＤＤＲ−ＶＳＳＲ｜−Ｖｆ … （１）
それゆえ、ノードＮの電位は、図５に示すとおり、電圧ＶＤＤＲよりもＶｆだけ小さな値となる。

ここで、電圧ＶＩＮＴは、ＴＦＴ１４７のゲートをターンオンさせる閾値以下であるため、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。また、コンデンサ１４６の電極間には、上記電圧ＶＩＮＴ分の差が生じる。このため、コンデンサ１４６には、当該差に応じた電荷が蓄積される。

次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線ＲＳｉに印加する電圧は、ハイレベル（電圧ＶＤＤＲ）からローレベル（電圧ＶＳＳＲ）へと瞬間的に切り換わる。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。

このように、リセット信号線ＲＳｉに印加する電圧をローレベルに変化させることにより、ノードＮの電位は、リセット信号線ＲＳｉの電圧および読出信号線ＲＷｉの電圧よりも高くなる。このため、フォトダイオード１４５においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード１４５は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード１４５が受光すると、フォトダイオード１４５のカソード側からアノード側へと電流が流れ始める。その結果、図５に示すとおり、ノードＮの電位（つまり、電圧ＶＩＮＴ）は時間の経過とともに低くなる。

なお、このように電圧ＶＩＮＴが低下し続けるため、ＴＦＴ１４７のゲートはターンオンした状態にはならない。それゆえ、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。

次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線ＲＳｉに印加する電圧をローレベル（電圧ＶＳＳＲ）のままとする。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤ）へと瞬間的に切り換わる。ここで、電圧ＶＤＤは、電圧ＶＤＤＲよりも高い値である。

このように、読出信号線ＲＷｉにハイレベルの電圧を瞬間的に印加することにより、図５に示すとおり、コンデンサ１４６を介してノードＮの電位が引き上げられる。なお、ノードＮの電位の上昇幅は、読出信号線ＲＷｉに印加する電圧に応じた値となる。ここで、ノードＮの電位（つまり、電圧ＶＩＮＴ）が、ＴＦＴ１４７のゲートをターンオンさせる閾値以上まで引き上げられるため、ＴＦＴ１４７のゲートがターンオンする。

この際、ＴＦＴ１４７のドレイン側に接続されたセンサ信号線ＳＤｊ（図３参照）に予め一定電圧を印加しておけば、ＴＦＴ１４７のソース側に接続されたセンサ信号線ＳＳｊからは、図５のＶＰＩＸのグラフに示すとおり、ノードＮの電位に応じた電圧が出力される。

ここで、フォトダイオード１４５が受光する光の量（以下、受光量と称する）が少ないと、図５のＶＩＮＴのグラフに示す直線の傾きが緩やかになる。その結果、電圧ＶＰＩＸは、受光量が多い場合に比べて高くなる。このように、光センサ回路１４４は、フォトダイオード１４５の受光量に応じて、センサ信号線ＳＳｊに出力する電圧の値を変化させる。

ところで、上記においては、ｍ×ｎ個存在する光センサ回路のうち、１つの光センサ回路１４４に着目して、その動作を説明した。以下では、表示パネル１４０における各光センサ回路の動作について説明する。

まず、光センサ駆動回路１３３は、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路１３３は、リセット信号線ＲＳ１に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、他のリセット信号線（ＲＳ２〜ＲＳｍ）および読出信号線（ＲＷ１〜ＲＷｍ）については、ローレベルの電圧を印加したままの状態とする。これにより、図３における１行目のｎ個の光センサ回路が、上述したリセット期間に入る。その後、１行目のｎ個の光センサ回路は、センシング期間に入る。さらに、その後、１行目のｎ個の光センサ回路は、読出期間に入る。

なお、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。

１行目のｎ個の光センサ回路の読出期間が終了すると、光センサ駆動回路１３３は、リセット信号線ＲＳ２に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。つまり、２行目のｎ個の光センサ回路のリセット期間に入る。リセット期間が終了すると、２行目のｎ個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。

以降は、上述した処理が、順に、３行目のｎ個の光センサ回路、４行目のｎ個の光センサ回路、…ｍ行目のｎ個の光センサ回路に対して行われる。その結果、センサ信号線（ＳＳ１〜ＳＳｎ）からは、１行目のセンシング結果、２行目のセンシング結果、…、ｍ行目のセンシング結果が、この順に出力される。

なお、表示装置１０２においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果が表示パネル１４０から出力される。このため、以下では、表示パネル１４０から出力される１行目からｍ行目までのｍ行分の電圧に関するデータに対して、信号処理部１８３が上述したデータ処理を行った後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物（たとえば、ユーザの指）をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。

また、上記においては、ｍ×ｎ個の光センサ回路全てを用いてスキャンを行う構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、表示パネル１４０の表面の一部の領域に関してスキャンを行うことも構成としてもよい。

以下では、電子機器１００が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー１７７を介した入力などに基づく本体装置１０１から送られてくるコマンドにより行われるものとする。なお、表示パネル１４０の表面の一部の領域に関してスキャンを行う場合、画像処理エンジン１８０が、スキャン対象領域の設定を行う。なお、当該領域の設定を、操作キー１７７を介してユーザが指定できる構成としてもよい。

このように、表示パネル１４０の表面の一部の領域に関してスキャンを行う場合には、画像の表示に関し、以下のような利用の態様がある。１つ目は、上記一部の領域（以下、スキャン領域と称する）以外の表面の領域において、画像を表示させる態様である。２つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体装置１０１から画像処理エンジン１８０に送られてくるコマンドに基づく。

図６は、表示パネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。

図６を参照して、ユーザの指９００が表示パネル１４０の表面に接触している場合、バックライト１７９から発せられた光の一部は、当該接触している領域ではユーザの指９００（略平面）にて反射される。そして、フォトダイオード１４５は、当該反射された光を受光する。

また、指９００が接触していない領域においても、バックライト１７９から発せられた光の一部は、ユーザの指９００にて反射される。この場合においても、フォトダイオード１４５は、当該反射された光を受光する。ただし、当該領域においては表示パネル１４０の表面に指９００が接触していないため、指９００が接触している領域よりも、フォトダイオード１４５の受光量は少なくなる。なお、バックライト１７９から発せられた光のうち、ユーザの指９００に到達しない光のほとんどについては、フォトダイオード１４５は受光できない。

ここで、バックライト１７９を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路１４４は、ユーザの指９００により反射した光の光量に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９の点灯と消灯とを制御することにより、表示パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、表示パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって光が反射されることにより得られる像（以下、反射像とも称する）をスキャンすることができる。

なお、指９００以外のスキャン対象物としては、スタイラスなどが挙げられる。
ところで、本実施の形態においては、電子機器１００の表示装置として表示パネルを例に挙げて説明しているが、表示パネルの代わりに有機ＥＬ（Electro-Luminescence）パネルなどの他のパネルを用いてもよい。

＜データについて＞
次に、第１ユニット１００１と第２ユニット１００２との間でやり取りされるコマンド、および第１ユニット１００１内の本体装置１０１と表示装置１０２との間でやり取りされるコマンドについて説明する。

図７は、コマンドの概略構成を示した図である。図７を参照して、コマンドは、ヘッダＤＡ０１と、第１フィールドＤＡ０２と、第２フィールドＤＡ０３と、第３フィールドＤＡ０４と、第４フィールドＤＡ０５と、第５フィールドＤＡ０６と、予備のデータ領域ＤＡ０７とを含む。

図８は、種別「０００」のコマンド（つまり、センシングコマンド）を説明するための図である。ＣＰＵ１１０は、種別「０００」のコマンド（以下、「第１コマンド」と称する）を、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ１１０は、第１コマンドを、本体装置１０１から表示装置１０２に送る。なお、以下においては、ＣＰＵ１１０が第１コマンドを第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る場合を例に挙げて説明する。

ＣＰＵ１１０は、ヘッダＤＡ０１に、コマンドの種別（「０００」）、コマンドの送信先等を書き込む。ＣＰＵ１１０は、第１フィールドＤＡ０２に、番号が「１」のタイミングの値を書き込む。ＣＰＵ１１０は、第２フィールドＤＡ０３に、番号が「２」のデータ種別の値を書き込む。ＣＰＵ１１０は、第３フィールドＤＡ０４に、番号が「３」の読取方式の値を書き込む。ＣＰＵ１１０は、第４フィールドＤＡ０５に、番号が「４」の画像階調の値を書き込む。ＣＰＵ１１０は、第５フィールドＤＡ０６に、番号が「５」の解像度の値を書き込む。

第１フィールドＤＡ０２に「００」が設定された第１コマンドは、画像処理エンジン２８０に対して、そのときのスキャンデータの送信を要求する。つまり、センシング第１コマンドは、当該第１コマンドを画像処理エンジン２８０が受信した後に、表示パネル２４０の光センサ回路を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、第１フィールドＤＡ０２に「０１」が設定された第１コマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、第１フィールドＤＡ０２に「１０」が設定された第１コマンドは、一定周期毎にスキャンデータの送信を要求する。

第２フィールドＤＡ０３に「００１」が設定された第１コマンドは、部分画像における中心座標の座標値の送信を要求する。また、第２フィールドＤＡ０３に「０１０」が設定された第１コマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、第２フィールドＤＡ０３に「１００」が設定された第１コマンドは、全体画像の送信を要求する。

ここで、「全体画像」とは、ｍ×ｎ個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン２８０により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。

なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、表示パネル２４０の表面の一部の領域に関してスキャンを行う構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。

第３フィールドＤＡ０４に「００」が設定されたセンシング第１コマンドは、バックライト２７９を点灯してスキャンすることを要求する。また、第３フィールドＤＡ０４に「０１」が設定された第１コマンドは、バックライト２７９を消灯してスキャンすることを要求する。なお、バックライト２７９を消灯してスキャンする構成については後述する（図１７）。さらに、第３フィールドＤＡ０４に「１０」が設定された第１コマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト２７９を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行うことを指す。

第４フィールドＤＡ０５に「００」が設定された第１コマンドは、白黒の２値の画像データを要求する。また、第４フィールドＤＡ０５に「０１」が設定された第１コマンドは、多階調の画像データを要求する。さらに、第４フィールドＤＡ０５に「１０」が設定された第１コマンドは、ＲＧＢのカラーの画像データを要求する。

第５フィールドＤＡ０６に「０」が設定された第１コマンドは、解像度の高い画像データを要求する。また、第５フィールドＤＡ０６に「１」が設定された第１コマンドは、解像度の低い画像データを要求する。

また、上記第１コマンドには、図８に示したデータ以外に、スキャンを行う領域（光センサ回路１４４を駆動する画素の領域）の指定、スキャンを行うタイミング、バックライト１７９の点灯のタイミングなどが記述されている。

なお、画像処理エンジン２８０は、第１コマンドの内容を解析し、当該解析の結果に従ったデータ（つまり、応答データ）を本体装置１０１に送り返す。

図９は、種別「００１」のコマンド（以下、「第２コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第２コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。

ＣＰＵ１１０は、ヘッダＤＡ０１に、コマンドの種別（「００１」）、コマンドの送信先等を書き込む。ＣＰＵ１１０は、第１フィールドＤＡ０２に、番号が「１」の表示要求の値を書き込む。ＣＰＵ１１０は、第２フィールドＤＡ０３に、番号が「２」の個数／種類に関する情報を書き込む。ＣＰＵ１１０は、第３フィールドＤＡ０４に、番号が「３」の表示範囲の値を書き込む。ＣＰＵ１１０は、第４フィールドＤＡ０５に、番号が「４」の画像データに関する情報を書き込む。

第１フィールドＤＡ０２に「００１」が設定された第２コマンドは、表示パネル２４０に画像を表示させることを画像処理エンジン２８０に対して要求する。また、第１フィールドＤＡ０２に「０１０」が設定された第２コマンドは、表示パネル２４０にアイコンを表示させることを画像処理エンジン２８０に対して要求する。さらに、第１フィールドＤＡ０２に「０１１」が設定された第２コマンドは、表示パネル２４０に手書領域を表示させることを画像処理エンジン２８０に対して要求する。

第２フィールドＤＡ０３には、表示パネル２４０に表示させる画像の個数、および手書言語の種類を指定する番号が格納される。画像処理エンジン２８０は、当該画像の個数、または言語の種類に応じた処理を行う。

第３フィールドＤＡ０４に「０１」が設定された第２コマンドは、表示パネル２４０における表示範囲を座標にて指定することを、画像処理エンジン２８０に対して要求する。また、第３フィールドＤＡ０４に「１０」が設定された第２コマンドは、表示パネル２４０における表示範囲を表示領域の全体にすることを、画像処理エンジン２８０に対して要求する。

第４フィールドＤＡ０５には、表示パネル２４０に表示させる画像データと、当該画像データを表示する位置情報とが格納される。画像処理エンジン２８０は、当該位置情報で特定される位置に当該画像データを表示する処理を行う。

図１０は、種別「０１０」のコマンド（以下、「第３コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第３コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ２１０は、第３コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ１１０，２１０は、ヘッダＤＡ０１に、コマンドの種別（「０１０」）、コマンドの送信先等を書き込む。ＣＰＵ１１０，２１０は、第１フィールドＤＡ０２に、番号が「１」のＯＳ（Operating System）処理要求の値を書き込む。ＣＰＵ１１０，２１０は、第２フィールドＤＡ０３に、番号が「２」のＯＳ情報の値を書き込む。

第１フィールドＤＡ０２に「０１」または「１０」が設定された第３コマンドは、第２ユニット１００２から第１ユニット１００１に送信される。

第１フィールドＤＡ０２に「０１」が設定された第３コマンドは、第１ユニット１００１に対して、当該第１ユニット１００１のＯＳの種類を示した情報の送信を要求する。また、第１フィールドＤＡ０２に「１０」が設定された第３コマンドは、第１ユニット１００１に対して、ＯＳ情報にて指定されたＯＳの起動を要求する。

第２フィールドＤＡ０３に「０００」、「００１」、または「０１０」が設定された第３コマンドは、第２ユニット１００２から第１ユニット１００１に送信される。

第２フィールドＤＡ０３に「０００」が設定された第３コマンドは、第１ユニット１００１におけるＯＳの起動を要求しない。また、第２フィールドＤＡ０３に「００１」が設定された第３コマンドは、第２ユニット１００２が第１ＯＳの起動を選択したことを示す。さらに、第２フィールドＤＡ０３に「０１０」が設定された第３コマンドは、第２ユニット１００２が第２ＯＳの起動を選択したことを示す。

図１１は、種別「０１１」のコマンド（以下、「第４コマンド」と称する）を説明するための図である。ＣＰＵ２１０は、第４コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ２１０は、ヘッダＤＡ０１に、コマンドの種別（「０１１」）、コマンドの送信先等を書き込む。ＣＰＵ２１０は、第１フィールドＤＡ０２に、番号が「１」の起動アプリに関する情報を書き込む。ＣＰＵ２１０は、第２フィールドＤＡ０３に、番号が「２」の起動時情報を書き込む。

第１フィールドＤＡ０２には、第１ユニット１００１において起動させるアプリを指定する情報が格納される。第２フィールドＤＡ０３には、起動設定時に用いる情報、および起動後に用いる情報が格納される。

図１２は、種別「１００」のコマンド（以下、「第５コマンド」と称する）を説明するための図である。ＣＰＵ２１０は、第５コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ２１０は、ヘッダＤＡ０１に、コマンドの種別（「１００」）、コマンドの送信先等を書き込む。ＣＰＵ２１０は、第１フィールドＤＡ０２に、番号が「１」の受信要求に関する情報を書き込む。ＣＰＵ２１０は、第２フィールドＤＡ０３に、番号が「２」の個数に関する情報を書き込む。ＣＰＵ２１０は、第３フィールドＤＡ０４に、番号が「３」のファイルに関する情報を書き込む。

第１フィールドＤＡ０２に「０１」が設定された第５コマンドは、第１ユニット１００１に対してファイルの受信を要求する。また、第２フィールドＤＡ０３には、第２ユニット１００２が第１ユニット１００１に送信するファイルの個数が格納される。さらに、第３フィールドＤＡ０４には、第２ユニット１００２が第１ユニット１００１に送信するファイルが格納される。

図１３は、種別「１０１」のコマンド（以下、「第６コマンド」と称する）を説明するための図である。ＣＰＵ１１０は、第６コマンドを、第１ユニット１００１の本体装置１０１から第２ユニット１００２に送る。あるいは、ＣＰＵ２１０は、第６コマンドを、第２ユニット１００２の本体装置１０４から第１ユニット１００１に送る。

ＣＰＵ１１０，２１０は、ヘッダＤＡ０１に、コマンドの種別（「１０１」）、コマンドの送信先等を書き込む。ＣＰＵ１１０，２１０は、第１フィールドＤＡ０２に、番号が「１」の通信種別の値を書き込む。ＣＰＵ１１０，２１０は、第２フィールドＤＡ０３に、番号が「２」の接続先の値を書き込む。ＣＰＵ１１０，２１０は、第３フィールドＤＡ０４に、番号が「３」の転送先の値を書き込む。ＣＰＵ１１０，２１０は、第４フィールドＤＡ０５に、番号が「４」の信号強度の取得タイミングの値を書き込む。

第１フィールドＤＡ０２に「００１」が設定された第６コマンドは、相手側の装置に対して赤外線通信を行うことを要求する。また、第１フィールドＤＡ０２に「０１０」が設定された第６コマンドは、相手側の装置に対してＢｌｕｅｔｏｏｔｈ（登録商標）による無線通信を行うことを要求する。さらに、第１フィールドＤＡ０２に「０１１」が設定された第６コマンドは、相手側の装置に対してＬＡＮ通信を行うことを要求する。

第２フィールドＤＡ０３に「０００」が設定された第６コマンドは、通信の接続先を指定する情報を有していないことを示す。

また、第２フィールドＤＡ０３に「００１」が設定された第６コマンドは、第１ユニット１００１によって、当該第１ユニット１００１の接続先の装置に送信される。そのような第６コマンドは、第１ユニット１００１が接続する装置に関する情報の送信を要求する。

さらに、第２フィールドＤＡ０３に「０１０」が設定された第６コマンドは、第２ユニット１００２によって、当該第２ユニット１００２の接続先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２が接続する第１ユニット１００１に関する情報の送信を要求する。

また、第２フィールドＤＡ０３に「０１１」が設定された第６コマンドは、第２ユニット１００２によって、当該第２ユニット１００２の接続先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２に関する情報を接続先の機器情報として設定することを要求する。

さらに、第２フィールドＤＡ０３に「１００」が設定された第６コマンドは、第１ユニット１００１によって、当該第１ユニット１００１の接続先の装置（たとえば、第２ユニット１００２）に送信される。そのような第６コマンドは、第１ユニット１００１に関する情報を接続先の機器情報として設定することを要求する。

第３フィールドＤＡ０４に「０００」が設定された第６コマンドは、データ（たとえば、ファイル）の転送先を指定する情報を有していないことを示す。

また、第３フィールドＤＡ０４に「００１」が設定された第６コマンドは、第１ユニット１００１によって、データ転送先の装置に送信される。そのような第６コマンドは、データ転送先の装置に関する情報の送信を要求する。

さらに、第３フィールドＤＡ０４に「０１０」が設定された第６コマンドは、第２ユニット１００２によって、データ転送先の第１ユニット１００１に送信される。そのような第６コマンドは、データ転送先の第１ユニット１００１に関する情報の送信を要求する。

また、第３フィールドＤＡ０４に「０１１」が設定された第６コマンドは、第２ユニット１００２によって、データ転送先の第１ユニット１００１に送信される。そのような第６コマンドは、第２ユニット１００２に関する情報をデータ転送元の機器情報として設定することを要求する。

さらに、第３フィールドＤＡ０４に「１００」が設定された第６コマンドは、第１ユニット１００１によって、データ転送先の装置（たとえば、第２ユニット１００２）に送信される。そのような第６コマンドは、第１ユニット１００１に関する情報をデータ転送元の機器情報として設定することを要求する。

第４フィールドＤＡ０５に「００」、「０１」、「１０」、または「１１」が設定された第６コマンドは、第１ユニット１００１によって、第２ユニット１００２に送信される。

第４フィールドＤＡ０５に「００」が設定された第６コマンドは、第２ユニット１００２に対して、信号強度を示したデータの送信を要求しない。また、第４フィールドＤＡ０５に「０１」が設定された第６コマンドは、信号強度検出部２９７に対して、そのときの信号強度を示したデータの送信を要求する。さらに、第４フィールドＤＡ０５に「１０」が設定された第６コマンドは、信号強度に変化があったときの信号強度を示したデータの送信を要求する。また、第４フィールドＤＡ０５に「１１」が設定された第６コマンドは、一定周期毎に信号強度を示したデータの送信を要求する。

図１４は、応答データの概略構成を示した図である。応答データは、第１コマンド（センシングコマンド）の内容に応じたデータである。

第１コマンドが本体装置１０１から第２ユニット１００２に送信された場合、ＣＰＵ２１０は、応答データを、表示装置１０３から第１ユニット１００１に送信する。また、第１コマンドが本体装置１０１から第１ユニット１００１の表示装置１０２に送信された場合、画像処理エンジン１８０は、応答データを、画像処理エンジン１８０から本体装置１０１に送信する。なお、以下では、第１コマンドが本体装置１０１から第２ユニット１００２に送信された場合を例に挙げて説明する。

図１４を参照して、応答データは、ヘッダのデータ領域ＤＡ１１と、座標を示すデータ領域ＤＡ１２と、時刻を示すデータ領域ＤＡ１３と、画像を示すデータ領域ＤＡ１４とを含む。ここで、座標を示すデータ領域ＤＡ１２には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン２８０のタイマ２８２から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン２８０により処理がされた後の画像データ（つまり、スキャンデータ）が書き込まれる。

図１５は、指９００をスキャンすることにより得られた画像（つまり、スキャン画像）を示した図である。図１５を参照して、太実線で囲まれた領域Ｗ１の画像が全体画像であり、破線で囲まれた領域Ｐ１の画像が部分画像である。また、太線で示した十字の中心点Ｃ１が、中心座標となる。

本実施の形態では、矩形の領域であって、かつセンサ信号線ＳＳｊからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素（つまり、予め定められた階調または予め定められた輝度以上の画素）全てを含む領域を、部分画像の領域としている。

また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点（つまり図心）との距離とに基づき、重み付け処理を行うことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。

ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。

第１コマンドのデータ種別を示すデータ領域に「００１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に上記中心座標の値を書き込む。この場合、画像処理エンジン２８０は、画像を示すデータ領域ＤＡ１４には画像データを書き込まない。画像処理エンジン２８０は、上記中心座標の値の書き込みを行った後、当該中心座標の値を含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値を含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「００１」が設定されている場合には、第１コマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。

また、第１コマンドのデータ種別を示すデータ領域に「０１０」が設定されている場合には、画像処理エンジン２８０は、画像を示すデータ領域ＤＡ１４に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン２８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン２８０は、上記スキャン結果が変化した部分画像の画像データの書き込みを行った後、当該部分画像の画像データを含む応答データを本体装置１０４に送る。本体装置１０４は、当該部分画像の画像データを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１０」が設定されている場合には、第１コマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。

なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指９００などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。

また、第１コマンドのデータ種別を示すデータ領域に「０１１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン２８０は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値と当該部分画像の画像データとを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１１」が設定されている場合には、第１コマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。

また、第１コマンドのデータ種別を示すデータ領域に「１００」が設定されている場合には、画像処理エンジン２８０は、図１４に示した応答データの画像を示すデータ領域ＤＡ１４に、全体画像の画像データを書き込む。この場合、画像処理エンジン２８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン２８０は、上記全体画像の画像データの書き込みを行った後、当該全体画像の画像データを含む応答データを本体装置１０４に送る。本体装置１０４は、当該全体画像の画像データを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「１００」が設定されている場合には、第１コマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。

また、第１コマンドのデータ種別を示すデータ領域に「１０１」が設定されている場合には、画像処理エンジン２８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４に全体画像の画像データを書き込む。その後、画像処理エンジン２８０は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体装置１０４に送る。本体装置１０４は、当該中心座標の値と当該全体画像の画像データとを含む応答データを第１ユニット１００１の本体装置１０１に送る。このように、データ種別を示すデータ領域に「１０１」が設定されている場合には、第１コマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。

＜構成の第１の変形例について＞
次に、図１６を参照して、前述のスキャンの方法（つまり、図６における反射像をスキャンする方法）とは異なるスキャンの方法について説明する。

図１６は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。同図に示すとおり、外光の一部は、指９００によって遮られる。それゆえ、指９００と接触している表示パネル１４０の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指９００の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。

ここで、バックライト１７９を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路１４４は、表示パネル１４０の表面に対する指９００の位置に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９を点灯と消灯とを制御することにより、表示パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、表示パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。

以上により、表示装置１０２は、指９００によって外光が遮られることにより得られる像（以下、影像とも称する）をスキャンすることができる。

さらに、表示装置１０２を、バックライト１７９を点灯させてスキャンを行った後に、バックライト１７９を消灯させて再度スキャンを行う構成としてもよい。あるいは、表示装置１０２を、バックライト１７９を消灯させてスキャンを行った後に、バックライト１７９を点灯させて再度スキャンを行う構成としてもよい。

この場合には、２つのスキャン方式を併用することになるため、２つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。

＜表示装置について＞
表示装置１０３の動作は、表示装置１０２の動作と同様、本体装置１０１からのコマンド（たとえば、第１コマンド）に応じて制御される。表示装置１０３は表示装置１０２と同様な構成を有する。それゆえ、表示装置１０３が表示装置１０２と同じコマンドを本体装置１０１から受け付けた場合、表示装置１０３は表示装置１０２と同様の動作を行う。このため、表示装置１０３の構成や動作についての説明は繰り返さない。

なお、本体装置１０１は、表示装置１０２と表示装置１０３とに対して、命令が異なるコマンドを送ることができる。この場合、表示装置１０２と表示装置１０３とは別々の動作を行う。また、本体装置１０１は、表示装置１０２および表示装置１０３のいずれかに対して、コマンドを送ってもよい。この場合、一方の表示装置のみがコマンドに応じた動作を行う。また、本体装置１０１が、表示装置１０２と表示装置１０３とに命令が同じコマンドを送ってもよい。この場合、表示装置１０２と表示装置１０３とは、同じ動作を行う。

なお、表示装置１０２の表示パネル１４０のサイズと表示装置１０３の表示パネル２４０のサイズとは、同じであってもよいし又は異なっていてもよい。また、表示パネル１４０の解像度と表示パネル２４０の解像度とは、同じであってもよいし又は異なっていてもよい。

＜構成の第２の変形例について＞
本実施の形態では、電子機器１００が、光センサを内蔵した第１の表示パネル１４０と光センサを内蔵した第２の表示パネル２４０とを備えているが、前述したように、第２の表示パネル２４０のみがタブレットや光センサを内蔵している構成であってもよい。

図１７は、電子機器１３００のハードウェア構成を表すブロック図である。電子機器１３００は、電子機器１００と同様、第１の筐体１００Ａと、第２の筐体１００Ｂとを含む。また、図１７を参照して、電子機器１３００は、第１ユニット１００１Ａと、第２ユニット１００２とを含む。第１ユニット１００１Ａは、本体装置１０１と、表示装置１０２Ａとを含む。第２ユニット１００２は、本体装置１０４と、表示装置１０３とを含む。

表示装置１０２Ａは、光センサを内蔵しない表示パネル（つまり、表示機能のみを有する表示パネル）である。電子機器１３００は、第１ユニット１００１Ａが光センサを内蔵しない表示パネルを含む点で、第１ユニット１００１が光センサを内蔵した表示パネル２４０を含む電子機器１００と異なる。このような電子機器１３００は、第２ユニット１００２の表示装置１０３を用いて上述したセンシングを行う。

また、第１ユニット１００１は、光センサを内蔵した表示パネル１４０の代わりに、たとえば抵抗膜方式や静電容量方式のタッチパネルを備えてもよい。

また、本実施の形態では、表示装置１０２がタイマ１８２を備え、表示装置１０３がタイマ２８２を備える構成として説明するが、表示装置１０２と表示装置１０３とが１つのタイマを共有する構成としてもよい。

また、本実施の形態では、電子機器１００を折畳型の機器として説明するが、電子機器１００は必ずしも折畳型に限定されるものではない。たとえば、電子機器１００は、第１の筐体１００Ａが第２の筐体１００Ｂに対してスライドする構成のスライド式の機器であってもよい。

本実施の形態に係る電子機器１００は、上記のように構成されているため、第２ユニット１００２が、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１に着脱自在になっている。

そして、本実施の形態に係る電子機器１００は、たとえば電源投入時において、以下のような機能を発揮することができる。まず、ユーザが第１ユニット１００１の電源スイッチ１９１を押下すると、第１ユニット１００１は電源回路１９２からの電力を利用することによってＢＩＯＳ（Basic Input/Output System）を起動させる。

第２ユニット１００２は、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１から電力を取得する。第２ユニット１００２は、当該電力を利用することによって、第１ユニット１００１との間でデータを送受信することができる。このとき、第２ユニット１００２のＣＰＵ２１０は、ＵＳＢコネクタ１９４，２９４からの電力を使用することによって、表示パネル２４０にＯＳ（Operation System）の種類を選択可能に表示させることができる。

ユーザは、表示パネル２４０を介して、起動したいＯＳを選択する。ＣＰＵ２１０は、ユーザの選択に応じ、ＵＳＢコネクタ１９４，２９４を介して第１ユニット１００１へと、起動すべきＯＳを指定するコマンド（たとえば、図１０に示す「第１のＯＳ」コマンド）を送信する。第１ユニット１００１は、当該コマンドに応じて、ＯＳを起動する。

また、たとえば、第２ユニット１００２は、アンテナ２９５を介して外部の携帯電話などとの間でデータの送受信を行う。第２ユニット１００２のＣＰＵ２１０は、アンテナ２９５を介して、外部の携帯電話から写真画像データや対応するサムネイルデータを取得して、当該写真画像データや対応するサムネイルデータをＲＡＭ２７１などに格納する。ＣＰＵ２１０は、ＲＡＭ２７１からサムネイルデータを読み出して、表示パネル２４０に写真のサムネイル画像を選択可能に表示させる。

そして、外部からの選択命令に応じて、ＣＰＵ２１０は、表示パネル２４０に写真画像を表示させる。あるいは、ＣＰＵ２１０は、ＵＳＢコネクタ２９４を介して、写真画像を表示パネル１４０あるいは表示装置１０２Ａに表示させる。

なお、上述したように、電子機器１００の第２の表示パネル２４０は、タブレット機能と表示機能とを有する通常のタッチパネルであってもよい。

＜本実施の形態に係る電子機器１００の機能構成＞
以下では、図１、図２、図１８を参照して、本実施の形態に係る電子機器１００（１３００）の機能構成について説明する。なお、図１８は、本実施の形態に係る電子機器１００（１３００）の機能構成を示すブロック図である。

本実施の形態に係る電子機器１００は、第１の表示制御部１１１と、受付部１１２と、サイズ判断部１１３と、切替部１１４と、第２の表示制御部１１５とを含む。また、電子機器１００は、図２にも示したように、ＲＡＭ１７１と、第１の表示パネル１４０（あるいは表示装置１０２Ａ）と、複数の光センサ回路２４４および複数の画素回路２４１とを含む第２の表示パネル２４０とを含む。

まず、ＲＡＭ１７１は、表示モードを切り替えるか否かを判断する際に利用される所定条件を格納する条件データ１７１Ａと、動画像を表わす動画像データや静止画像や写真画像を表わす静止画像データなどのコンテンツデータ１７１Ｂとを記憶する。

第１の表示パネル１４０は、第１の表示制御部１１１からの画像データやテキストデータに基づいて、すなわちＣＰＵ１１０からの出力信号に基づいて外部に可視光を発する。より詳細には、第１の表示パネル１４０は、画像処理エンジン１８０（図２）などを介して、第１の表示制御部１１１からの画像データやテキストデータに基づいて、バックライト１７９からの光を利用しながらコンテンツやテキストなどを表示する。

第２の表示パネル２４０の複数の光センサ回路２４４のそれぞれは、入射光を受光して、入射光に応じた電気信号を生成する。複数の光センサ回路２４４は全体として、画像処理エンジン２８０（図２）などを介して、入射光に対応する電気信号を受付部１１２に入力する。なお、複数の光センサ回路２４４は、図１６に示すようにバックライト１７９を消灯させた状態で、指９００やスタイラスペンなどの接触位置を読み取ってもよい。

このように、本実施の形態に係る複数の光センサ回路２４４および画像処理エンジン２８０は全体として操作部を実現する。そして、操作部は、第２の表示パネル２４０を介して、第１の表示パネル１４０に表示されているコンテンツの再生を制御するための操作命令を受け付けたり、第１の表示パネル１４０に表示されているポインタを移動させる移動命令（第１の移動命令）を受け付けたり、第１の表示パネル１４０に表示されているコンテンツのサイズを変更する変更命令を受け付けたりする。

第２の表示パネル２４０の複数の画素回路２４１のそれぞれは、第２の表示制御部１１５からの画像データやテキストデータに基づいて、すなわちＣＰＵ１１０からの出力信号に基づいて外部に可視光を発する。より詳細には、複数の画素回路２４１は全体として、画像処理エンジン２８０（図２）などを介して、第２の表示制御部１１５からの画像データやテキストデータに基づいて、バックライト１７９からの光を利用しながらコンテンツやテキストなどを表示する。

このように、本実施の形態に係る複数の画素回路２４１および画像処理エンジン２８０は全体として表示部を実現する。すなわち、表示部は、第２の表示パネル２４０に操作画像やその他の画像やテキストなどを表示させる。

第１の表示制御部１１１と、受付部１１２と、サイズ判断部１１３と、切替部１１４と、第２の表示制御部１１５とは、ＣＰＵ１１０などによって実現される機能である。より詳細には、ＣＰＵ１１０が有する各機能は、ＣＰＵ１１０がＲＡＭ１７１などに記憶される制御プログラムを実行して、図２に示される各ハードウェアを制御することによって実現される機能である。

まず、第１の表示制御部１１１は、ＲＡＭ１７１からコンテンツデータ１７１Ｂを読み出して、第１の表示パネル１４０にコンテンツを表示させる。たとえば、第１の表示制御部１１１は、第１の表示パネル１４０に動画像を再生させる。

本実施の形態に係る第１の表示制御部１１１は、設定されている表示モードに応じて、表示するオブジェクトも変更する。たとえば、第１の表示制御部１１１は、通常モードにおいては、第１の表示パネル１４０に通常サイズのコンテンツを表示させる。第１の表示制御部１１１は、通常モードにおいてはポインタを表示させる。第１の表示制御部１１１は、通常モードにおいてはコンテンツの表示を操作するためのメイン操作画像１４０Ｃを表示する。第１の表示制御部１１１は、全画面モードにおいては、第１の表示パネル１４０にコンテンツを全画面表示させる。

第１の表示制御部１１１は、受付部１１２からの変更命令に基づいて、コンテンツの表示態様を変更する。たとえば、第１の表示制御部１１１は、受付部１１２からのウィンドウサイズを変更する旨の変更命令に応じて、コンテンツの表示サイズを変更する。ユーザは、ポインタ１４０Ｂを用いて、動画像１４０Ａ（コンテンツ）を表示するウィンドウの端部をつまみ、当該ウィンドウのサイズを変更し、当該端部をリリースすることによって、動画像１４０Ａ（コンテンツ）の表示サイズを変更する。

また、第１の表示制御部１１１は、受付部１１２からの操作命令に基づいて、コンテンツの表示を操作する。たとえば、第１の表示制御部１１１は、動画像を再生したり、動画像を早送りしたり、静止画像のスライドショウを実行する。

また、通常モードにおいては、第１の表示制御部１１１は、受付部１１２からの移動命令に基づいてポインタを移動させる。

受付部１１２は、操作キー１７７からの電気信号、あるいは複数の光センサ回路２４４から画像処理エンジン２８０を介して入力される電気信号に基づいて、第２の表示パネル２４０に入力された操作命令や移動命令や変更命令などを受け付ける。より詳細には、受付部１１２は、センシング時間毎に第２の表示パネル２４０の画像処理エンジン２８０から出力される画像データを取得して、当該画像データに基づいて操作命令や移動命令や変更命令などを生成する。

そして、受付部１１２は、画像処理エンジン１８０から出力された画像データをＲＡＭ１７１に記憶してもよい。すなわち、第１の受付部１１２は、ＲＡＭ１７１の画像データを常時最新の画像データに更新してもよい。なお、第１の受付部１１２は、ＣＰＵ１１０と第１の表示パネル１４０の複数の光センサ回路１４４とによって実現される機能であってもよい。すなわち、第１の受付部１１２は、ＣＰＵ１１０の一部の機能と第１の表示パネル１４０の受光機能とを含む機能ブロックを示す概念であってもよい。

このようにして、受付部１１２は、たとえば、操作キー１７７や第２の表示パネル２４０からの電気信号に基づいて、表示されるコンテンツの表示態様を変更する変更命令を生成する。受付部１１２は、変更命令を第１の表示制御部１１１へ受け渡す。たとえば、変更命令は、コンテンツの表示サイズ（あるいはコンテンツを表示するウィンドウのサイズ）を変更する命令である。

あるいは、受付部１１２は、通常モードにおいては、操作キー１７７あるいは第２の表示パネル２４０を介して入力される全画面モードへの移行命令を変更命令として受け付けて、当該移行命令を第１の表示制御部１１１に受け渡す。受付部１１２は、全画面モードにおいて、操作キー１７７あるいは第２の表示パネル２４０を介して入力される通常モードへの移行命令を変更命令として受け付けて、当該移行命令を第１の表示制御部１１１に受け渡す。なお、受付部１１２は、第２の表示パネル２４０を介して戻るボタン２４０Ｄ（図１（Ｂ）を参照。）が押下されたことを検知することによって、通常モードへの移行命令を受け付ける。

また、受付部１１２は、全画面モードにおいて、第２の表示パネル２４０を介して入力される絶対座標に基づいて、コンテンツの表示を制御するための操作命令を生成する。受付部１１２は操作命令を第１の表示制御部１１１へ受け渡す。たとえば、受付部１１２は、動画像を再生する操作命令や早送りする操作命令や頭出しをする操作命令などを生成する（受け付ける）。受付部１１２は、操作命令を第１の表示制御部１１１に受け渡す。

受付部１１２は、通常モードにおいて、第２の表示パネル２４０を介して入力される相対座標に基づいて、ポインタを移動させるための移動命令を生成する（受け付ける）。受付部１１２は、移動命令を第１の表示制御部１１１へ受け渡す。

サイズ判断部１１３は、ＲＡＭ１７１から条件データ１７１Ａを読み出して、第１の表示制御部１１１が第１の表示パネル１４０に表示させているコンテンツの表示態様が所定条件を満たすか否かを判断し、判断結果を切替部１１４に出力する。サイズ判断部１１３は、たとえば、コンテンツが表示されているエリアの第１の表示パネル１４０全体に対して占める割合が所定値以上である場合に、コンテンツの表示態様が所定条件を満たすと判断する。あるいは、サイズ判断部１１３は、第１の表示制御部１１１が第１の表示パネル１４０にコンテンツを全画面表示させている場合に、表示態様が所定条件を満たすと判断し、第１の表示制御部１１１が第１の表示パネル１４０にコンテンツを全画面表示させていない場合に、表示態様が所定条件を満たさないと判断する。

切替部１１４は、サイズ判断部１１３からの判断結果に基づいて、表示モードを切替える。切替部１１４は、サイズ判断部１１３が表示態様が所定条件を満たすと判断した場合に全画面モードに切り替え、サイズ判断部１１３が表示態様が所定条件を満たさないと判断した場合に通常モードに切り替える。

第２の表示制御部１１５は、サイズ判断部１１３が表示態様が所定条件を満たすと判断した場合に、第２の表示パネル２４０にコンテンツの表示を操作するための操作命令を受け付けるサブ操作画像２４０Ｃを表示させる。すなわち、第２の表示制御部１１５は、全画面モードにおいて、第２の表示パネル２４０にサブ操作画像２４０Ｃを表示させる。これによって、たとえば、第２の表示パネル２４０が動画像の再生を制御するための操作画面の役割を果たし、ユーザの操作性が向上する。

一方、第２の表示制御部１１５は、サイズ判断部１１３がコンテンツの表示態様が所定条件を満たさないと判断した場合には、第２の表示パネル２４０に壁紙画像を表示させる。すなわち、第２の表示制御部１１５は、通常モードにおいて、第２の表示パネル２４０に壁紙画像を表示させる。あるいは、第２の表示制御部１１５は、通常モードにおいては何も表示しない。

第２の表示制御部１１５は、通常モードにおいては、第２の表示パネル２４０に、通常モードであること、すなわち第２の表示パネル２４０がマウス機能を発揮していることを示す画像２４０Ａを表示させる。第２の表示制御部１１５は、全画面モードにおいては、第２の表示パネル２４０に、全画面モードであること、すなわち第２の表示パネル２４０がコンテンツ専用の操作画面の機能を発揮していること示す画像２４０Ｂを表示させる。

＜本実施の形態に係るコンテンツ表示処理＞
次に、図１、図２、図１８、図１９を参照して、本実施の形態に係る電子機器１００におけるコンテンツ表示処理について説明する。なお、図１９は、本実施の形態に係る電子機器１００におけるコンテンツ表示処理の処理手順を示すイメージ図である。以下では、予め第１の表示パネル１４０に動画像を表示させる場合について説明する。

まず、第１の表示制御部１１１として機能するＣＰＵ１１０は、ＲＡＭ１７１からコンテンツデータ１７１Ｂを読み出して、第１の表示パネル１４０に動画像を表示させている。受付部１１２として機能するＣＰＵ１１０が、コンテンツの表示サイズの変更を受け付けると（ステップＳ１０２にてＹＥＳである場合）、サイズ判断部１１３として機能するＣＰＵ１１０は、変更後のコンテンツの表示態様が所定条件を満たすか否かを判断する（ステップＳ１０４）。

ここでは、ＣＰＵ１１０は、コンテンツが第１の表示パネル１４０に全画面表示されているか否かを判断する（ステップＳ１０４）。図１（Ｂ）に示すように、コンテンツが第１の表示パネル１４０に全画面表示されている場合（ステップＳ１０４にてＹＥＳである場合）、切替部１１４として機能するＣＰＵ１１０は全画面モードに切り替える。すなわち、第２の表示制御部１１５として機能するＣＰＵ１１０は、第２の表示パネル２４０にサブ操作画像２４０Ｃを表示させる（ステップＳ１０６）。たとえば、第２の表示制御部１１５は、第２の表示パネル２４０に、操作用の再生ボタンや早送りボタンや巻き戻しボタンや頭出しボタンなどを選択可能（押下可能）に表示させる。受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介してコンテンツの再生を制御するための操作命令を受け付ける（ステップＳ１０８）。

一方、図１（Ａ）に示すように、コンテンツが第１の表示パネル１４０の一部に表示されている場合（ステップＳ１０４にてＮＯである場合）、切替部１１４として機能するＣＰＵ１１０は通常モードに切り替える。すなわち、第２の表示制御部１１５として機能するＣＰＵ１１０は、第２の表示パネル２４０に通常の画像（たとえば壁紙画像など）を表示させる（ステップＳ１１０）。あるいは、第２の表示制御部１１５は、第２の表示パネル２４０には何も表示させない、すなわち第２の表示パネル２４０は光センサとしてのみ機能する。受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介してポインタ１４０Ｂの移動命令を受け付ける（ステップＳ１１２）。すなわち、第２の表示パネル２４０は、マウス同様の機能を発揮する。

＜本実施の形態に係る電子機器１００の第１の付加機能＞
次に、図１、図２、図２０を参照して、本実施の形態に係る電子機器１００（１３００）の第１の付加機能について説明する。図２０は、第１の付加機能を有する電子機器１００（１３００）の機能構成を示すブロック図である。

上記のように、本実施の形態に係る電子機器１００は、第２の表示パネル２４０がサブ操作画像２４０Ｃ（第１の画像）を表示する状態へと移行するときに便利な機能を有するものであった。一方、ここで説明する第１の付加機能は、第１の表示パネル１４０がメイン操作画像１４０Ｃ（第２の画像）を表示する状態へと移行するときに便利な機能である。

第１の表示パネル１４０、第２の表示パネル２４０、サイズ判断部１１３、切替部１１４、第２の表示制御部１１５の機能は上述したものと同様であるため、ここでは説明を繰り返さない。以下では、主に受付部１１２と第１の表示制御部１１１とに付加された機能について説明する。

受付部１１２は、上述した機能に加えて、操作キー１７７や第２の表示パネル２４０のサブ操作画像２４０Ｃなどを介して入力される操作命令に基づいて、命令データ１７１ＣをＲＡＭ１７１に記憶する。より詳細には、受付部１１２は、新たに受け付けた操作命令に応じて、ＲＡＭ１７１に記憶されている命令データ１７１Ｃを更新する。これによって、ＲＡＭ１７１には、常に最後の（最新の）操作命令に対応する命令データ１７１Ｃが記憶される。

第１の表示制御部１１１は、上述した機能に加えて、全画面モードから通常モードへと切り替わる際に、ＲＡＭ１７１から最新の命令データを読み出して、第１の表示パネル１４０に最新の操作命令に対応する位置にポインタを表示させる。第１の表示制御部１１１は、命令データに基づいて、メイン操作画像１４０Ｃに含まれる操作ボタンのうちの操作命令に対応する操作ボタン上にポインタを重畳して表示させる。

図２１は、第１の付加機能を有する電子機器１００の画面推移を示すイメージ図である。図２１（Ａ）に示すように、全画面モードにおいては、第２の表示制御部１１５は第２の表示パネル２４０にサブ操作画像２４０Ｃを表示させる。そして、ユーザが第２の表示パネル２４０の早送りボタン２４０Ｘを押下した場合、すなわち受付部１１２が第２の表示パネル２４０を介して動画像の早送り命令を受け付けた場合、受付部１１２は早送り命令を示す命令データ１７１ＣをＲＡＭ１７１に記憶する。

その後、受付部１１２が通常モードへ移行する旨の命令を受け付けると、図２１（Ｂ）に示すように、第１の表示制御部１１１は第１の表示パネル１４０にメイン操作画像１４０Ｃを表示させる。このとき、第１の表示制御部１１１は、第１の表示パネル１４０にメイン操作画像１４０Ｃの早送りボタン１４０Ｘが表示されている位置にポインタ１４０Ｂを表示させる。

これによって、ユーザは、再度動画像の早送りを行いたい場合に、ポインタ１４０Ｂを早送りボタン１４０Ｘまで移動させる必要がなくなる。換言すれば、ポインタ１４０Ｂを移動させるために、第２の表示パネル２４０への精緻なタッチ操作を行なう必要がなくなる。つまり、本実施の形態に係る電子機器１００は、状況に応じてユーザが操作し易い操作画面を提供できる。

＜第１の付加機能を有する電子機器１００におけるコンテンツ表示処理＞
次に、図１、図２、図２０、図２１、図２２を参照して、本実施の形態に係る電子機器１００におけるコンテンツ表示処理について説明する。なお、図２２は、第１の付加機能を有する電子機器１００におけるコンテンツ表示処理の処理手順を示すイメージ図である。以下では、予め第１の表示パネル１４０に動画像を表示させる場合について説明する。

ここでは、ＣＰＵ１１０は、コンテンツが第１の表示パネル１４０に全画面表示されているか否かを判断する（ステップＳ１０４）。図１（Ｂ）に示すように、コンテンツが第１の表示パネル１４０に全画面表示されている場合（ステップＳ１０４にてＹＥＳである場合）、切替部１１４として機能するＣＰＵ１１０は全画面モードに切り替える。すなわち、第２の表示制御部１１５として機能するＣＰＵ１１０は、第２の表示パネル２４０にサブ操作画像２４０Ｃを表示させる（ステップＳ１０６）。たとえば、第２の表示制御部１１５は、第２の表示パネル２４０に、操作用の再生ボタンや早送りボタン２４０Ｘや巻き戻しボタンや頭出しボタンなどを選択可能（押下可能）に表示させる。受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介してコンテンツの再生を制御するための操作命令を受け付ける（ステップＳ１０８）。

受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０のサブ操作画像２４０Ｃを介して、ユーザからの操作命令を受け付ける（ステップＳ２０２）。ＣＰＵ１１０は、操作命令に対応する命令データ１７１ＣをＲＡＭ１７１に記憶する（更新する）（ステップＳ２０４）。

一方、図１（Ａ）に示すように、コンテンツが第１の表示パネル１４０の一部に表示されている場合（ステップＳ１０４にてＮＯである場合）、切替部１１４として機能するＣＰＵ１１０は通常モードに切り替える。すなわち、第２の表示制御部１１５として機能するＣＰＵ１１０は、第２の表示パネル２４０に通常の画像（たとえば壁紙画像など）を表示させる（ステップＳ１１０）。あるいは、第２の表示制御部１１５は、第２の表示パネル２４０には何も表示させない、すなわち第２の表示パネル２４０は光センサとしてのみ機能する。

第１の表示制御部１１１として機能するＣＰＵ１１０は、ＲＡＭ１７１から最新の命令データ１７１Ｃを読み出す（ステップＳ２０６）。ＣＰＵ１１０は、第１の表示パネル１４０に、メイン操作画像１４０Ｃのうちの、ユーザから受け付けた最新の操作命令に対応する位置に（早送りボタン１４０Ｘの上に）ポインタ１４０Ｂを表示させる（ステップＳ２０８）。受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介してポインタ１４０Ｂの移動命令を受け付ける（ステップＳ１１２）。すなわち、第２の表示パネル２４０は、マウス同様の機能を発揮する。

＜本実施の形態に係る電子機器１００の第２の付加機能＞
次に、図１、図２、図２３を参照して、本実施の形態に係る電子機器１００（１３００）の第２の付加機能について説明する。図２３は、第２の付加機能を有する電子機器１００（１３００）の機能構成を示すブロック図である。

上記のように、第１の付加機能は、第１の表示パネル１４０がメイン操作画像１４０Ｃ（第２の画像）を表示する状態へと移行するときに便利な機能であった。一方、ここで説明する第２の付加機能は、コンテンツが全画面表示された状態のままで第１の表示パネル１４０がポインタ１４０Ｂを表示するための機能である。なお、第２の付加機能を実現するストローク判断部１１７などは、第１の付加機能を有する電子機器１００に追加的に適用することもできる。

第１の表示パネル１４０、第２の表示パネル２４０、サイズ判断部１１３、第２の表示制御部１１５の機能は上述したものと同様であるため、ここでは説明を繰り返さない。電子機器１００は、第２の付加機能としてストローク判断部１１７を含む。以下では、受付部１１２と第１の表示制御部１１１とに付加された機能およびストローク判断部１１７の機能について説明する。

受付部１１２は、上述した機能に加えて、第２の表示パネル２４０を介してユーザから各種の接触操作を受け付ける。接触操作は、たとえば、指９００が第２の表示パネル２４０に接触したまま第２の表示パネル２４０上をスライドするストローク操作や、指９００が第２の表示パネル２４０にタッチするタップ操作（第２の表示パネル２４０上をほとんどスライドしない操作）を含む。

受付部１１２は、全画面モードにおいて、第２の表示パネル２４０から取得する画像データに基づいて、ユーザによる第２の表示パネル２４０への接触操作を検知する。たとえば、受付部１１２は、第２の表示パネル２４０からの随時送られてくる画像データに基づいて、当該画像データ毎の指９００の第２の表示パネル２４０への接触位置（指９００の第２の表示パネル２４０への接触箇所の中心座標）を取得し、当該接触位置の時系列データを接触操作データとしてストローク判断部１１７に受け渡す。

ストローク判断部１１７は、全画面モードにおいて、動画像などのコンテンツに対する操作命令（タップ操作）を受け付けたのか、第２の表示パネル２４０にポインタを表示させるための表示命令（ストローク操作）を受け付けたのかを判断する。すなわち、ストローク判断部１１７は、全画面モードにおいて、受付部１１２からの接触操作データに基づいて表示命令を受け付けたか否かを判断する。

本実施の形態に係るストローク判断部１１７は、ユーザの第２の表示パネル２４０に対する接触操作のストロークの長さが予め設定された所定距離以上であるか否かを判断する。具体的には、ストローク判断部１１７は、接触操作データに基づいて、接触操作の開始位置と接触操作の終了位置とを距離を計算することによって、接触操作のストロークの長さを計算する。そして、ストローク判断部１１７は、接触操作のストロークの長さが予め設定された所定距離以上である場合に、ユーザがポインタを表示させるための表示命令を入力したと判断する。一方、ストローク判断部１１７は、接触操作のストロークの長さが予め設定された所定距離未満である場合に、ユーザが操作ボタンを押下した、すなわちユーザがコンテンツに対する操作命令を入力したと判断する。

切替部１１４は、ストローク判断部１１７が表示命令が入力されたと判断した場合、通常モードへ切り替える。同時に、第１の表示パネル１４０は、ストローク判断部１１７が表示命令が入力されたと判断した場合、第１の表示パネル１４０にポインタ１４０Ｂを表示させる。これによって、受付部１１２は、第２の表示パネル２４０を介して、ユーザからポインタ１４０Ｂを移動する旨のポインタ移動命令の受け付けを開始する。

図２４は、第２の付加機能を有する電子機器１００の画面推移を示すイメージ図である。図２４（Ａ）に示すように、全画面モードにおいては、第２の表示制御部１１５は第２の表示パネル２４０を介してサブ操作画像２４０Ｃを表示する。そして、ユーザの指９００が、第２の表示パネル２４０の早送りボタン２４０Ｘに接触して、スライドすることなく第２の表示パネル２４０から離れた場合、ストローク判断部１１７は、コンテンツに対する操作命令、たとえばコンテンツの早送り命令を受け付ける。このとき、全画面モードのまま移行せず、第１の表示パネル１４０の画面も第２の表示パネル２４０の画面も変化しない。すなわち、ユーザが第２の表示パネル２４０に対してタップ操作をした場合、第２の表示パネル２４０は全画面モードから変化しない。

一方、図２４（Ｂ）に示すように、ユーザの指９００が、第２の表示パネル２４０に接触し、所定距離以上スライドしてから第２の表示パネル２４０から離れた場合、すなわちストローク判断部１１７がユーザの指９００のスライドした距離（接触操作のストロークの長さ）が所定距離以上であると判断した場合、図２４（Ｃ）に示すように、切替部１１４は全画面モードから通常モードへと切り替える。すなわち、切替部１１４は、第１の表示制御部１１１と第２の表示制御部１１５に切替命令を送る。これによって、第１の表示制御部１１１は、コンテンツを全画面表示したまま、第１の表示パネル１４０にポインタ１４０Ｂを表示させる。そして、受付部１１２は、第２の表示パネル２４０を介してポインタ１４０Ｂの移動命令を受け付け始める。すなわち、ユーザが第２の表示パネル２４０に対してストローク操作をした場合、第２の表示パネル２４０は全画面モードから通常モードへと移行する。

ただし、ユーザが第２の表示パネル２４０に対してストローク操作をした場合に、第１の表示制御部１１１が第１の表示パネル１４０の一部にコンテンツを表示させてもよい。また、図２１（Ｂ）に示すように、第１の表示制御部１１１が第１の表示パネル１４０にポインタ１４０Ｂやメイン操作画像１４０Ｃを表示させてもよい。そして、サイズ判断部１１３が、第１の表示制御部１１１が第１の表示パネル１４０に表示させているコンテンツの表示態様が所定条件を満たすか否か（コンテンツが全画面表示されているか）を判断する。

ここでは、コンテンツが全画面表示されていないため、切替部１１４が通常モードに切り替える。つまり、通常モードにおいて、第２の表示制御部１１５は、第２の表示パネル２４０に壁紙画像を表示させる。あるいは、第２の表示制御部１１５は、通常モードにおいては何も表示しない。

これによって、ユーザは、全画面モード中でも、たとえばポインタ１４０Ｂを所望のオブジェクト上に移動させて、電子機器１００の第１の表示パネル１４０や第２の表示パネル２４０に当該オブジェクトの説明を表示させることなどができる。すなわち、本実施の形態に係る電子機器１００は、表示状態に応じてユーザが操作し易い操作画面を提供するとともに、ユーザの意思のみによって操作画面を変更することもできる。

＜第２の付加機能を有する電子機器１００におけるコンテンツ表示処理＞
次に、図１、図２、図２３、図２４、図２５を参照して、本実施の形態に係る電子機器１００におけるコンテンツ表示処理について説明する。なお、図２５は、第２の付加機能を有する電子機器１００におけるコンテンツ表示処理の処理手順を示すイメージ図である。以下では、予め第１の表示パネル１４０に動画像を表示させる場合について説明する。

受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介して、ユーザからの接触操作を待ち受ける（ステップＳ３０２）。ストローク判断部１１７として機能するＣＰＵ１１０は、ユーザからの接触操作を受け付けると（ステップＳ３０２にてＹＥＳである場合）、接触操作データに基づいて接触操作のストロークの長さを計算する（ステップＳ３０４）。ＣＰＵ１１０は、ストローク長さが所定距離以上であるか否かを判断する（ステップＳ３０６）。

ストローク長さが所定距離以上である場合（ステップＳ３０６にてＹＥＳである場合）、ＣＰＵ１１０は、第１の表示パネル１４０にコンテンツ上にポインタ１４０Ｂを表示させたうえで、ステップＳ１１０からの処理を繰り返す。逆に、ストローク長さが所定距離未満である場合（ステップＳ３０６にてＮＯである場合）、ＣＰＵ１１０はステップＳ３０２からの処理を繰り返す。

受付部１１２として機能するＣＰＵ１１０は、第２の表示パネル２４０を介してポインタの移動命令を受け付ける（ステップＳ１１２）。すなわち、第２の表示パネル２４０は、マウス同様の機能を発揮する。

＜本実施の形態に係る電子機器１００の第３の付加機能＞
次に、図１、図２、図２６を参照して、本実施の形態に係る電子機器１００（１３００）の第３の付加機能について説明する。図２６は、第３の付加機能を有する電子機器１００（１３００）の機能構成を示すブロック図である。

上記のように、本実施の形態に係る電子機器１００は第１の表示パネル１４０の表示状態に応じて第２の表示パネル２４０に表示させる内容や第２の表示パネル２４０を介して受け付ける命令を変更するものであって、すなわち第１の表示パネル１４０の表示状態に応じて全画面モードと通常モードとが切り替わるものであった。ここで説明する第３の付加機能は、ユーザ操作に応じて、すなわちユーザが能動的に、第１の表示パネル１４０の表示状態や、第２の表示パネル２４０に表示させる内容や、第２の表示パネル２４０を介して受け付ける命令を変更するものである。

なお、第３の付加機能を実現する命令判断部１１８などは、第１の付加機能を有する電子機器１００に適用することもできるし、第２の付加機能を有する電子機器１００に追加的に適用することもできるし、第１の付加機能および第２の付加機能を有する電子機器１００に追加的に適用することもできる。

第１の表示パネル１４０、第２の表示パネル２４０、サイズ判断部１１３、第２の表示制御部１１５の機能は上述したものと同様であるため、ここでは説明を繰り返さない。電子機器１００は、第３の付加機能として命令判断部１１８を含む。以下では、受付部１１２と第１の表示制御部１１１とに付加された機能および命令判断部１１８の機能について説明する。

第１の表示パネル１４０が光センサ内蔵型液晶パネルやタッチパネルである場合、受付部１１２は、通常モードにおいて、第１の表示パネル１４０から取得される画像データに基づいて、ユーザによる第１の表示パネル１４０への接触操作を検知する。たとえば、受付部１１２は、第１の表示パネル２４０からの随時送られてくる画像データに基づいて、当該画像データ毎の指９００の第１の表示パネル２４０への接触位置（指９００の第１の表示パネル１４０への接触箇所の中心座標）を取得する。

また、受付部１１２は、第２の表示パネル２４０から取得する画像データに基づいて、ユーザによる第２の表示パネル２４０への接触操作を検知する。たとえば、受付部１１２は、第２の表示パネル２４０から随時送られてくる画像データに基づいて、当該画像データ毎の指９００の第２の表示パネル２４０への接触位置（指９００の第２の表示パネル２４０への接触箇所の中心座標）を取得する。

このように、ユーザは、第２の表示パネル２４０を介して電子機器１００に、メイン操作画像１４０Ｃを移動させるための移動命令（第２の移動命令）を入力する。そして、第１の表示パネル１４０が光センサ内蔵型液晶パネルやタッチパネルである場合には、ユーザは、第１の表示パネル１４０を介しても電子機器１００にメイン操作画像１４０Ｃを移動（ドラッグ）させるための移動命令（第２の移動命令）を入力することができる。

受付部１１２は、接触位置とメイン操作画像１４０Ｃの表示位置とに基づいて、メイン操作画像１４０Ｃを選択（ホールド）状態にする。受付部１１２は、ホールド状態における接触位置の時系列データを移動命令データとしてストローク判断部１１７に受け渡す。

命令判断部１１８は、通常モードにおいて、移動命令データに基づいて、ホールドされたメイン操作画像１４０Ｃが第１の表示パネル１４０の下端（第１の表示パネル１４０のうちの第２の表示パネル２４０側の端部）へと移動させられたか否かを判断する。より詳細には、命令判断部１１８は、メイン操作画像１４０Ｃがホールドされた状態で、接触位置が所定エリアに達したか否かを判断する。あるいは、命令判断部１１８は、移動命令データに基づいて接触位置を示す座標値や接触位置の移動方向や接触位置の移動速度を取得して、座標値や移動方向や移動速度に基づいてメイン操作画像１４０Ｃが第１の表示パネル１４０の下端へと消えていったか否かを判断する。

切替部１１４は、命令判断部１１８が接触位置が下方へ移動しながら第１の表示パネル１４０の下端に設定された所定エリアに達したと判断した場合に、ユーザからのモード切替命令が入力されたと判断する。すなわち、切替部１１４は、通常モードにおいて、命令判断部１１８が接触位置が下方へ移動しながら第１の表示パネル１４０の下端に設定された所定エリアに達したと判断した場合に、全画面モードへ切り替える。

より詳細には、第１の表示パネル１４０は、命令判断部１１８が接触位置が下方へ移動しながら第１の表示パネル１４０の下端に設定された所定エリアに達したと判断した場合、第１の表示パネル１４０にコンテンツを全画面表示させる。そして、サイズ判断部１１３が、第１の表示制御部１１１が第１の表示パネル１４０に表示させているコンテンツの表示態様が所定条件を満たすか否か（コンテンツが全画面表示されているか）を判断する。

ここでは、コンテンツが全画面表示されているため、切替部１１４が全画面モードに切り替える。つまり、全画面モードにおいて、第２の表示制御部１１５は、第２の表示パネル２４０にサブ操作画像２４０Ｃを表示させる。受付部１１２は、第２の表示パネル２４０を介して、ユーザからコンテンツに対する操作命令の受け付けを開始する。

図２７は、第３の付加機能を有する電子機器１００の画面推移を示すイメージ図である。ここでは、第１の表示パネル１４０が光センサ内蔵型液晶パネルやタッチパネルである場合について説明する。図２７（Ａ）に示すように、通常モードにおいて、ユーザの指９００が第１の表示パネル１４０のメイン操作画像１４０Ｃが表示されている位置に接触すると、受付部１１２はメイン操作画像１４０Ｃをホールド状態に設定する。メイン操作画像１４０Ｃがホールド状態において、ユーザの指９００が第１の表示パネル１４０の表面上をスライドすると、第１の表示パネル１４０と指９００との接触位置に従って、メイン操作画像１４０Ｃが第１の表示パネル１４０上を移動する。

図２７（Ｂ）に示すように、ユーザの指９００がメイン操作画像１４０Ｃを保持して第１の表示パネル１４０の下端（第１の表示パネル１４０の下部に設けられる所定エリア）へと移動させると、命令判断部１１８がメイン操作画像１４０Ｃが所定エリアに達したと判断し、切替部１１４は全画面モードへ切り替える。

図２７（Ｃ）に示すように、全画面モードに移行すると、第１の表示パネル１４０はコンテンツを全画面表示する。換言すれば、第１の表示パネル１４０がコンテンツを全画面表示すると、切替部１１４が全画面モードへ切り替える。全画面モードにおいて、第２の表示パネル２４０は、サブ操作画像２４０Ｃを表示する。受付部１１２は、第２の表示パネル２４０の操作画面を介してコンテンツに対する操作命令を受け付ける。

＜第３の付加機能を有する電子機器１００におけるコンテンツ表示処理＞
次に、図１、図２、図２６、図２７、図２８を参照して、本実施の形態に係る電子機器１００におけるコンテンツ表示処理について説明する。なお、図２８は、第３の付加機能を有する電子機器１００におけるコンテンツ表示処理の処理手順を示すイメージ図である。以下では、予め第１の表示パネル１４０に動画像を表示させる場合について説明する。

受付部１１２として機能するＣＰＵ１１０は、第１の表示パネル１４０あるいは第２の表示パネル２４０を介して、ユーザからのメイン操作画像１４０Ｃの移動命令を待ち受ける（ステップＳ４０２）。命令判断部１１８として機能するＣＰＵ１１０は、ユーザからの移動命令を受け付けると（ステップＳ４０２にてＹＥＳである場合）、移動命令データに基づいてメイン操作画像１４０Ｃが所定エリアに達したか否かを判断する（ステップＳ４０４）。たとえば、ＣＰＵ１１０は、メイン操作画像１４０Ｃの下部が、第１の表示パネル１４０の下方へと消えていったか否かを判断する。

メイン操作画像１４０Ｃが所定エリアに達した場合（ステップＳ４０４にてＹＥＳである場合）、ＣＰＵ１１０は、第１の表示パネル１４０にコンテンツを全画面表示したうえで、ステップＳ１０６からの処理を繰り返す。逆に、メイン操作画像１４０Ｃが所定エリアに達しない場合（ステップＳ４０４にてＮＯである場合）、ＣＰＵ１１０はステップＳ４０２からの処理を繰り返す。

＜その他の実施の形態＞
本発明は、システム或いは装置にプログラムを供給することによって達成される場合にも適用できることはいうまでもない。そして、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、本発明の効果を享受することが可能となる。

この場合、記憶媒体から読出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。

プログラムコードを供給するための記憶媒体としては、例えば、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード（ＩＣメモリカード）、ＲＯＭ（マスクＲＯＭ、フラッシュＥＥＰＲＯＭなど）などを用いることができる。

また、コンピュータが読出したプログラムコードを実行することにより、前述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。

さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

本実施の形態に係る電子機器の外観を示す概略図である。電子機器のハードウェア構成を表わすブロック図である。表示パネルの構成と当該表示パネルの周辺回路とを示した図である。表示パネルとバックライトとの断面図である。光センサ回路を動作させる際のタイミングチャートを示した図である。スキャンの際にフォトダイオードがバックライトからの光を受光する構成を示した断面図である。コマンドの概略構成を示した図である。種別「０００」のコマンドを説明するための図である。種別「００１」のコマンドを説明するための図である。種別「０１０」のコマンドを説明するための図である。種別「０１１」のコマンドを説明するための図である。種別「１００」のコマンドを説明するための図である。種別「１０１」のコマンドを説明するための図である。応答データの概略構成を示した図である。指をスキャンすることにより得られた画像（スキャン画像）を示した図である。スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。電子機器の変形例のハードウェア構成を表すブロック図である。本実施の形態に係る電子機器の機能構成を示すブロック図である。本実施の形態に係る電子機器におけるコンテンツ表示処理の処理手順を示すフローチャートである。第１の付加機能を有する電子機器の機能構成を示すブロック図である。第１の付加機能を有する電子機器の画面推移を示すイメージ図である。第１の付加機能を有する電子機器におけるコンテンツ表示処理の処理手順を示すイメージ図である。第２の付加機能を有する電子機器の機能構成を示すブロック図である。第２の付加機能を有する電子機器の画面推移を示すイメージ図である。第２の付加機能を有する電子機器におけるコンテンツ表示処理の処理手順を示すイメージ図である。第３の付加機能を有する電子機器の機能構成を示すブロック図である。第３の付加機能を有する電子機器の画面推移を示すイメージ図である。第３の付加機能を有する電子機器におけるコンテンツ表示処理の処理手順を示すイメージ図である。

符号の説明

１００，１３００電子機器、１０１本体装置、１０２，１０２Ａ，１０３表示装置、１１０ＣＰＵ、１１１第１の表示制御部、１１２受付部、１１３判断部、１１４切替部、１１５第２の表示制御部、１１７ストローク判断部、１１８命令判断部、１３０ドライバ、１３１走査信号線駆動回路、１３２データ信号線駆動回路、１３３光センサ駆動回路、１３４スイッチ、１３５アンプ、１４０第１の光センサ内蔵液晶パネル（第１の表示パネル）、１４１，２４１画素回路、１４１ｂ，１４１ｇ，１４１ｒサブピクセル回路、１４３電極対、１４３ａ画素電極、１４３ｂ対向電極、１４４，２４４光センサ回路、１４５，１４５ｂ，１４５ｇ，１４５ｒフォトダイオード、１４６コンデンサ、１５１Ａアクティブマトリクス基板、１５１Ｂ対向基板、１５２液晶層、１５３ｂ，１５３ｇ，１５３ｒカラーフィルタ、１５７データ信号線、１６１偏光フィルタ、１６２ガラス基板、１６３遮光膜、１６４配向膜、１７１ＲＡＭ、１７３メモリカードリーダライタ、１７４通信装置、１７５マイク、１７６スピーカ、１７７操作キー、１７９バックライト、１８０画像処理エンジン、１８１ドライバ制御部、１８２タイマ、１８３信号処理部、２４０第２の光センサ内蔵液晶パネル（第２の表示パネル）、１００１第１のユニット、１００２第２のユニット、１７３１メモリカード、ＤＢ１，ＤＢ２データバス。

Claims

第１および第２の表示パネルと、
前記第１の表示パネルにコンテンツを表示させる第１の表示制御手段と、
表示される前記コンテンツの表示態様を変更する変更命令を受け付ける受付手段と、
前記表示態様が所定条件を満たすか否かを判断する第１の判断手段と、
前記第１の判断手段が前記表示態様が前記所定条件を満たすと判断した場合に、前記第２の表示パネルに前記コンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させる第２の表示制御手段と、
前記第１の判断手段が前記表示態様が前記所定条件を満たすと判断した場合に第１のモードに切り替え、前記第１の判断手段が前記表示態様が前記所定条件を満たさないと判断した場合に第２のモードに切り替える切替手段とを備え、
前記第１の表示制御手段は、前記第２のモードにおいて、前記第１の表示パネルに、ポインタと、前記コンテンツと、前記コンテンツの表示を操作するための操作命令を受け付けるための第２の画像とを表示させ、
前記受付手段は、前記第２のモードにおいて、前記第２の表示パネルを介して前記ポインタを移動させるための第１の移動命令を受け付け、
前記第１の表示制御手段は、前記第２のモードに切り替わった際に、前記第１の表示パネルに、前記第２の画像のうちの、最後に受け付けられた前記操作命令に対応する箇所に前記ポインタを表示させる、コンテンツ表示装置。
前記第１の表示制御手段は、前記第１のモードにおいて、前記第１の表示パネルに前記第２の画像を表示させることなく、前記第１の表示パネルに前記コンテンツを表示させる、請求項１に記載のコンテンツ表示装置。
前記第２のモードにおいて、前記受付手段が前記第２の画像を所定エリアに移動させる第２の移動命令を受け付けたか否かを判断する第２の判断手段をさらに備え、
前記第２の判断手段が前記受付手段が前記第２の移動命令を受け付けたと判断した場合、前記切替手段が前記第１のモードに切り替えるとともに、前記第１の表示制御手段が前記第１の表示パネルに前記コンテンツを全画面表示させる、請求項１または請求項２に記載のコンテンツ表示装置。
前記第１のモードにおいて、前記受付手段が第２の所定命令を受け付けたか否かを判断する第３の判断手段をさらに備え、
前記第３の判断手段が前記受付手段が前記第２の所定命令を受け付けたと判断した場合、前記切替手段が前記第２のモードに切り替えるとともに、前記第１の表示制御手段が前記第１の表示パネルに前記ポインタを表示させる、請求項１〜請求項３のいずれか１項に記載のコンテンツ表示装置。
前記受付手段は、
前記第１のモードにおいて、前記第２の表示パネルを介して入力される絶対座標に基づいて前記操作命令を生成し、
前記第２のモードにおいて、前記第２の表示パネルを介して入力される相対座標に基づいて前記第１の移動命令を生成する、請求項１〜請求項４のいずれか１項に記載のコンテンツ表示装置。
前記コンテンツの表示態様とは、コンテンツの表示サイズであり、
前記第１の表示制御手段は、前記変更命令に基づいて前記コンテンツの表示サイズを変更する、請求項１〜請求項５のいずれか１項に記載のコンテンツ表示装置。
前記第１の判断手段は、
前記第１の表示制御手段が前記第１の表示パネルに前記コンテンツを全画面表示させている場合に、前記表示態様が前記所定条件を満たすと判断し、
前記第１の表示制御手段が前記第１の表示パネルに前記コンテンツを全画面表示させていない場合に、前記表示態様が前記所定条件を満たさないと判断する、請求項６に記載のコンテンツ表示装置。
前記第２の表示パネルは、
入射光に応じて入力信号を生成する複数の光センサ回路と、
出力信号に応じて光を発する複数の画素回路とを含み、
前記受付手段は、前記複数の光センサ回路からの入力信号に基づいて前記操作命令を受け付け、
前記第２の表示制御手段は、前記画素回路に前記出力信号を出力することによって、前記第２の表示パネルに前記第１の画像を表示させる、請求項１〜請求項７のいずれか１項に記載のコンテンツ表示装置。
第１および第２の表示パネルと演算処理部とを備えるコンテンツ表示装置におけるコンテンツ表示方法であって、
前記演算処理部が、前記第１の表示パネルにコンテンツを表示させるステップと、
前記演算処理部が、表示される前記コンテンツの表示態様を変更する変更命令を受け付けるステップと、
前記演算処理部が、前記表示態様が所定条件を満たすか否かを判断するステップと、
前記演算処理部が、前記表示態様が前記所定条件を満たすと判断した場合に、前記第２の表示パネルに前記コンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させるステップと、
前記演算処理部が、前記表示態様が前記所定条件を満たすと判断した場合に、第１のモードに切り替えるステップと、
前記演算処理部が、前記表示態様が前記所定条件を満たさないと判断した場合に、第２のモードに切り替えるステップとを備え、
前記第２のモードでは、前記第１の表示パネルに、ポインタと、前記コンテンツと、前記コンテンツの表示を操作するための操作命令を受け付けるための第２の画像とが表示され、
前記演算処理部が、前記第２のモードにおいて、前記第２の表示パネルを介して前記ポインタを移動させるための第１の移動命令を受け付けるステップと、
前記演算処理部が、前記第２のモードに切り替わった際に、前記第１の表示パネルに、前記第２の画像のうちの、最後に受け付けられた前記操作命令に対応する箇所に前記ポインタを表示させるステップとをさらに備える、コンテンツ表示方法。
第１および第２の表示パネルと演算処理部とを備えるコンテンツ表示装置にコンテンツ表示させるためのコンテンツ表示プログラムであって、
前記演算処理部に、
前記第１の表示パネルにコンテンツを表示させるステップと、
表示される前記コンテンツの表示態様を変更する変更命令を受け付けるステップと、
前記表示態様が所定条件を満たすか否かを判断するステップと、
前記表示態様が前記所定条件を満たすと判断した場合に、前記第２の表示パネルに前記コンテンツの表示を操作するための操作命令を受け付けるための第１の画像を表示させるステップと、
前記表示態様が前記所定条件を満たすと判断した場合に、第１のモードに切り替えるステップと、
前記表示態様が前記所定条件を満たさないと判断した場合に、第２のモードに切り替えるステップとを実行させ、
前記第２のモードでは、前記第１の表示パネルに、ポインタと、前記コンテンツと、前記コンテンツの表示を操作するための操作命令を受け付けるための第２の画像とが表示され、
前記演算処理部に、
前記第２のモードにおいて、前記第２の表示パネルを介して前記ポインタを移動させるための第１の移動命令を受け付けるステップと、
前記第２のモードに切り替わった際に、前記第１の表示パネルに、前記第２の画像のうちの、最後に受け付けられた前記操作命令に対応する箇所に前記ポインタを表示させるステップとをさらに実行させる、コンテンツ表示プログラム。