JP2011107832A - センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器 - Google Patents

センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器 Download PDF

Info

Publication number
JP2011107832A
JP2011107832A JP2009260255A JP2009260255A JP2011107832A JP 2011107832 A JP2011107832 A JP 2011107832A JP 2009260255 A JP2009260255 A JP 2009260255A JP 2009260255 A JP2009260255 A JP 2009260255A JP 2011107832 A JP2011107832 A JP 2011107832A
Authority
JP
Japan
Prior art keywords
sensor
voltage
reset
photoelectric conversion
storage node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009260255A
Other languages
English (en)
Other versions
JP5510998B2 (ja
Inventor
Michiru Senda
みちる 千田
Masato Takatoku
真人 高徳
Tsutomu Harada
勉 原田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2009260255A priority Critical patent/JP5510998B2/ja
Priority to TW099136118A priority patent/TWI437473B/zh
Priority to US12/941,276 priority patent/US8593442B2/en
Priority to CN2010105374703A priority patent/CN102063224A/zh
Publication of JP2011107832A publication Critical patent/JP2011107832A/ja
Application granted granted Critical
Publication of JP5510998B2 publication Critical patent/JP5510998B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal (AREA)

Abstract

【課題】温度変化に伴う暗電流の影響を軽減して、安定した検出動作を行うことができるようにする。
【解決手段】リセット電圧制御部16が、温度による光電変換素子の特性変化に応じてリセット電圧Vrst1の値を可変制御する。リセット電圧制御部16は、例えば、センサ素子33の光電変換素子で発生する暗電流による蓄積ノードの充電電圧に相当する電圧値を取得し、その電圧値に応じてリセット電圧Vrst1の値を可変制御する。この際、例えば、センサ素子33と実質的に同一構造のモニタ用センサ33Mを配置し、モニタ用センサ33Mの光電変換素子で発生する暗電流による蓄積ノードの充電電圧に相当する電圧値を取得し、その電圧値に応じてリセット電圧Vrst1の値を可変制御する。
【選択図】図8

Description

本発明は、近接する物体の位置などをセンサ素子によって検出するセンサ装置、そのようなセンサ装置に適用されるセンサ素子の駆動方法、センサ機能(入力機能)と表示機能とを有する入力機能付き表示装置、ならびに、そのような表示装置を備えた電子機器に関する。
従来より、表示装置の表示面に接触あるいは近接する物体の位置などを検出する技術が知られている。例えば、表示パネル上に透明なフィルム状のタッチパネルを重ねて設置した構造のものが知られている。このようなタッチパネルの方式としては、感圧式や静電容量式のものが従来より知られている。
また、表示パネル内に表示画素と共に受光素子をマトリクス状に配置することで、表示パネルそのものに光学式のセンサ機能を持たせた表示装置が開発されている(特許文献1,2参照)。
特開2006−276223号公報 特開2008−233257号公報
上記のような光学式のセンサ機能を持つ表示装置では、受光素子として例えばPIN型のフォトダイオードなどの光電変換素子を用いている。そして、受光量に応じて発生した光電変換素子からの電荷を蓄積ノードに蓄積し、その蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する。パネル表面に近接した物体の位置、距離、および大きさ等に応じて光電変換素子に入射する光量が変化し、センサ検出信号も変化するので、マトリクス状に配置された複数の受光素子からの各センサ検出信号を適切に信号処理することで、パネル上に近接した物体の位置等を検出することができる。このような装置では、光電変換素子による所定の受光(露光)期間後に、読み出し動作をし、その後、蓄積ノードの電圧値を所定のリセット電圧にリセットした後、再び受光、読み出しをするといった動作を繰り返す。
ところで、光電変換素子は、入射光がない状態であっても暗電流(熱励起電流)が流れることが知られている。この暗電流は、温度によって変化し、高温になるほど多くの電流が流れる特性がある。このため、入射光量が同じであっても、温度が違うと蓄積ノードの電圧に変化が生じ、検出結果に悪影響を及ぼしてしまうことがある。特に高温になった場合には、暗電流の影響が大きくなり、蓄積ノードの電圧が上昇して蓄積ノードが飽和状態になってしまうおそれがある。従って、この温度変化に伴う暗電流の影響を軽減する何らかの対策が必要であるが、従来ではその対策が不十分であった。
本発明はかかる問題点に鑑みてなされたもので、その目的は、温度変化に伴う暗電流の影響を軽減して、安定した検出動作を行うことができるようにしたセンサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器を提供することにある。
本発明によるセンサ装置は、1または複数のセンサ素子と、センサ素子を駆動するセンサ駆動手段とを備え、センサ素子が、受光量に応じた電荷を発生する光電変換素子と、光電変換素子によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動する蓄積ノードと、一端が光電変換素子と蓄積ノードとに接続され、蓄積ノードの電圧値をリセット電圧にリセットするリセット用トランジスタと、蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する読み出し手段とを有するものである。そして、センサ駆動手段が、温度による光電変換素子の特性変化に応じてリセット電圧の値を可変制御するリセット電圧制御手段を有するものである。
具体的には例えば、リセット電圧制御手段が、光電変換素子で発生する暗電流による蓄積ノードの充電電圧に相当する電圧値を取得し、その電圧値に応じてリセット電圧の値を可変制御するようにしたものである。
本発明によるセンサ素子の駆動方法は、受光量に応じた電荷を発生する光電変換素子と、光電変換素子によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動する蓄積ノードと、一端が光電変換素子と蓄積ノードとに接続され、蓄積ノードの電圧値をリセット電圧にリセットするリセット用トランジスタと、蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する読み出し手段とを有する1または複数のセンサ素子を駆動する際に、温度による光電変換素子の特性変化に応じてリセット電圧の値を可変制御するようにしたものである。
本発明による入力機能付き表示装置は、複数の表示画素と複数のセンサ素子とが配置された表示パネルと、複数の前記表示画素を駆動する表示駆動手段と、複数の前記センサ素子を駆動するセンサ駆動手段とを備えたものである。そして、複数のセンサ素子のそれぞれに対して、上記本発明によるセンサ装置のセンサ駆動手段と同様の制御を行うようにしたものである。
本発明による電子機器は、本発明による入力機能付き表示装置を備えたものである。
本発明によるセンサ装置、センサ素子の駆動方法、入力機能付き表示装置または電子機器では、センサ素子において、受光量に応じた電荷が光電変換素子で発生する。そして、光電変換素子によって変換された電荷が蓄積ノードに蓄積され、蓄積ノードの蓄積電荷に応じた電圧値がセンサ検出信号として出力される。蓄積ノードの電圧値は、リセット用トランジスタによってリセット電圧にリセットされる。リセット電圧の値は、温度による光電変換素子の特性変化に応じて可変制御される。
具体的には例えば、光電変換素子で発生する暗電流による蓄積ノードの充電電圧に相当する電圧値が取得され、その電圧値に応じてリセット電圧の値が可変制御される。これにより、温度変化に伴う暗電流の悪影響が軽減される。
本発明のセンサ装置、センサ素子の駆動方法、入力機能付き表示装置または電子機器によれば、センサ素子における蓄積ノードの電圧値をリセットするためのリセット電圧を、温度による光電変換素子の特性変化に応じて可変制御するようにしたので、温度変化に伴う暗電流の影響を軽減して、安定した検出動作を行うことができる。
本発明の一実施の形態に係る入力機能付き表示装置の構成例を表すブロック図である。 図1に示したI/Oディスプレイパネルの構成例を表すブロック図である。 図2に示した表示エリア(センサエリア)内の画素配置例を表す平面図である。 図3に示した画素配置におけるセンサ素子(撮像画素)と信号線との接続関係の一例を表す平面模式図である。 図1に示した表示装置におけるセンサ素子の構成例を表す回路図である。 モニタ用センサの配置位置についての説明図である。 モニタ用センサの配置部分の構造を示す断面図である。 リセット電圧の可変制御に関わる回路を機能的に示したブロック図である。 リセット電圧制御部の具体的な回路構成例を示す回路図である。 図1に示した表示装置におけるセンサ動作(撮像動作)の一例を表すタイミング波形図である。 (A)は図1に示した表示装置において、強い外光がある場合にセンサエリアに近接物体がある状態を示し、(B)はその状態におけるセンサ出力電圧の例を示す説明図である。 (A)は図1に示した表示装置において、外光が弱い場合にセンサエリアに近接物体がある状態を示し、(B)はその状態におけるセンサ出力電圧の例を示す説明図である。 差分画像を用いた近接物体の検出方法について説明するための写真図である。 センサ素子における温度上昇による蓄積ノードの電圧変化を示す特性図である。 光電変換素子単独での温度特性を示す特性図である。 リセット電圧の可変制御の流れを示す説明図である。 図16に示すリセット電圧の可変制御を、基準温度よりも低温にある場合に実行した例を示す説明図である。 図16に示すリセット電圧の可変制御を、基準温度よりも低温にある場合に実行した場合に、センサ出力電圧の差分値αが所定オフセット値−βに収束する様子を示す説明図である。 図16に示すリセット電圧の可変制御を、基準温度よりも高温にある場合に実行した例を示す説明図である。 図16に示すリセット電圧の可変制御を、基準温度よりも高温にある場合に実行した場合に、センサ出力電圧の差分値αが所定オフセット値−βに収束する様子を示す説明図である。 (A)は図1に示した表示装置において近接物体の検出処理の結果を利用したアプリケーションプログラムの第1の実行例を示し、(B)は第2の実行例を示す説明図である。 近接物体の検出処理の結果を利用したアプリケーションプログラムの第3の実行例を示す説明図である。 近接物体の検出処理の結果を利用したアプリケーションプログラムの第4の実行例を示す説明図である。 近接物体の検出処理の結果を利用したアプリケーションプログラムの第5の実行例を示す説明図である。 図1に示した表示装置の第1の適用例の外観を表す斜視図である。 (A)は第2の適用例の表側から見た外観を表す斜視図であり、(B)は裏側から見た外観を表す斜視図である。 第3の適用例の外観を表す斜視図である。 第4の適用例の外観を表す斜視図である。 (A)は第5の適用例の開いた状態の正面図、(B)はその側面図、(C)は閉じた状態の正面図、(D)は左側面図、(E)は右側面図、(F)は上面図、(G)は下面図である。
以下、本発明を実施するための最良の形態(以下、単に実施の形態という)について、図面を参照して詳細に説明する。
[入力機能付き表示装置の全体構成]
図1は、本発明の一実施の形態に係る入力機能付き表示装置(表示撮像装置)の全体構成の一例を表すものである。この表示装置は、I/Oディスプレイパネル20と、バックライト15と、表示ドライブ回路12と、受光ドライブ回路13と、画像処理部14と、アプリケーションプログラム実行部11とを備えている。
I/Oディスプレイパネル20は、例えば液晶パネル(LCD(Liquid Crystal Display))からなる。I/Oディスプレイパネル20は、後述する図3に示すように複数の表示画素31RGBが行列状にマトリクス配置され、線順次動作をしながら表示データに基づく所定の図形や文字などの画像を表示する表示パネルとしての機能(表示機能)を有している。I/Oディスプレイパネル20にはまた、後述する図3に示すように複数のセンサ素子33が撮像画素として行列状にマトリクス配置され、パネル表面に接触または近接する物体(近接物体)を検出、撮像するセンサパネルとしての機能(検出機能、撮像機能)を有している。
I/Oディスプレイパネル20にはさらに、後述するモニタ用センサ33M(図6、図7)が、センサ素子33とは異なる領域に少なくとも1つ配置されている。
バックライト15は、I/Oディスプレイパネル20の表示および検出用の光源であり、例えば複数の発光ダイオードが配置されたものである。バックライト15は、表示ドライブ回路12によって駆動制御され、後述するようにI/Oディスプレイパネル20の動作タイミングに同期した所定のタイミングで、高速にオン・オフ(点灯・消灯)動作が可能となっている。バックライト15は、I/Oディスプレイパネル20の背面側からパネル表面に向けて周期的に照明光Lonを照射するようになっている。
表示ドライブ回路12は、I/Oディスプレイパネル20において表示データに基づく画像が表示されるように(表示動作を行うように)、このI/Oディスプレイパネル20の表示画素31RGBの駆動を行う(線順次表示動作の駆動を行う)回路である。表示ドライブ回路12はまた、バックライト15のオン・オフ(点灯・消灯)制御を行うようになっている。
受光ドライブ回路13は、I/Oディスプレイパネル20の各センサ素子(撮像画素)33からセンサ検出信号(撮像信号)が得られるように(物体を検出、撮像するように)、このI/Oディスプレイパネル20の駆動を行う(線順次撮像動作の駆動を行う)回路である。なお、各センサ素子33からのセンサ検出信号(撮像信号)は、例えばフレーム単位でフレームメモリ13Aに蓄積され、検出画像(撮像画像)として画像処理部14へ出力されるようになっている。
受光ドライブ回路13は、後述するリセット電圧制御部16(図8)を有している。
画像処理部14は、受光ドライブ回路13から出力される撮像画像に基づいて所定の画像処理(演算処理)を行うものである。画像処理部14は、画像処理を行った結果として、例えばI/Oディスプレイパネル20に近接等する物体に関する物体情報(位置座標データ、物体の形状や大きさに関するデータなど)を検出し、取得するようになっている。
アプリケーションプログラム実行部11は、画像処理部14による検知結果に基づいて所定のアプリケーションソフトに応じた処理を実行するものである。この処理としては例えば、検知した物体の位置座標を表示データに含むようにし、I/Oディスプレイパネル20上に表示させるものなどが挙げられる。なお、このアプリケーションプログラム実行部11で生成される表示データは、表示ドライブ回路12へ供給されるようになっている。
[I/Oディスプレイパネル20の構成例]
図2は、I/Oディスプレイパネル20の構成例を示している。I/Oディスプレイパネル20は、表示エリア(センサエリア)21と、表示用Hドライバ22と、表示用Vドライバ23と、センサ読み出し用Hドライバ25と、センサ用Vドライバ24とを有している。
図1および図2において、受光ドライブ回路13、センサ用Vドライバ24およびセンサ読み出し用Hドライバ25は、本発明における「センサ駆動手段」の一具体例に対応している。表示ドライブ回路12、表示用Hドライバ22および表示用Vドライバ23は、「表示駆動手段」の一具体例に対応している。I/Oディスプレイパネル20は、「表示パネル」および「センサパネル」の一具体例に対応している。受光ドライブ回路13および画像処理部14は、「信号処理手段」の一具体例に対応している。
表示エリア(センサエリア)21は、バックライト15からの光を変調して照射光(表示光と、例えば赤外光源等(図示せず)による検出用の照射光とを含むもの。以下同様。)を出射すると共にこのエリアに接触または近接する物体を検出(撮像)する領域である。表示エリア(センサエリア)21には、表示素子31RGBとして例えば液晶素子と、後述するセンサ素子33とが、それぞれマトリクス状に配置されている。
表示用Hドライバ22は、表示ドライブ回路12から供給される表示駆動用の表示信号および制御クロックに基づいて、表示用Vドライバ23と共に表示エリア21内の表示素子31RGBを線順次駆動するものである。
センサ読み出し用Hドライバ25は、受光ドライブ回路13による駆動制御に従って、センサ用Vドライバ24と共にセンサエリア21内の撮像画素としてのセンサ素子33を線順次駆動し、検出信号(撮像信号)を取得するものである。受光ドライブ回路13は、近接物体に対してバックライト15からの照射光が照射されているときに、照射光による反射光と環境光(外光)との合算光量に応じてセンサ素子33に充電電荷が蓄積されるような駆動制御を行うようになっている。また、バックライト15からの照射光が照射されていないときに、環境光の光量に応じてセンサ素子33に充電電荷が蓄積されるような駆動制御を行うようになっている。センサ読み出し用Hドライバ25は、これらの駆動制御によりセンサ素子33から取得された、バックライト15がオン時とオフ時とにおける各センサ検出信号(撮像信号)を受光ドライブ回路13に出力するようになっている。
図3は、表示エリア(センサエリア)21における各画素の詳細構成例を示している。例えば図3に示したように、表示エリア21の画素31は、表示画素31RGBと、撮像画素としてのセンサ素子33と、センサ素子33用の配線が形成された配線部32とから構成されている。表示画素31RGBは、赤(R)用の表示画素31Rと、緑(G)用の表示画素31Gと、青(B)用の表示画素31Bとから構成されている。これら表示画素31RGB、センサ素子33および配線部32はそれぞれ、表示エリア(センサエリア)21上でマトリクス状に並んで配置されている。また、センサ素子33と、このセンサ素子33を駆動するための配線部32とが、一定周期で互いに分離配置されている。このような配置により、センサ素子32および配線部33からなるセンサリアを表示画素31RGBに対して極めて認識しづらくなると共に、表示画素31RGBにおける開口率低減が最小限に抑えられるようになっている。また、配線部32を、表示画素31RGBの開口に寄与しない領域(例えば、ブラックマトリクスで遮光された領域や反射領域など)に配置するようにすれば、表示品位を落とすことなく受光回路を配置することが可能となる。なお、各センサ素子33には、例えば図4に示したように、リセット制御信号線Reset_1〜Reset_nおよびリード制御信号線Read_1〜Read_nが、水平ライン方向に沿って接続されるようになっている。
[センサ素子33の構成例]
センサ素子33は、例えば図5に示したように、光電変換素子PD1と、リセット用トランジスタTr1と、蓄積ノードP1と、増幅用トランジスタTr2と、選択・読み出し用トランジスタTr3とを有している。
光電変換素子PD1は、入射光量に応じた電荷を発生させるものであり、例えばPIN型のフォトダイオードにより構成されている。PIN型のフォトダイオードは、p型半導体領域と、n型半導体領域と、p型半導体領域とn型半導体領域との間に形成された真性半導体領域(i領域)とを有するものである。光電変換素子PD1は、アノード電極、カソード電極およびゲート電極を有している。光電変換素子PD1をPIN型のフォトダイオードで構成する場合、p型半導体領域にアノード電極を接続し、n型半導体領域にカソード電極を接続する。光電変換素子PD1のカソード電極は、電源電圧VDDを供給する電源線に接続されている。光電変換素子PD1のアノード電極は、リセット用トランジスタTr1の一端(ドレイン)に接続されている。
蓄積ノードP1は、光電変換素子PD1のアノード電極とリセット用トランジスタTr1のドレインとに接続されている。蓄積ノードP1は、光電変換素子PD1によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動するようになっている。蓄積ノードP1には、配線による寄生容量などにより等価的に蓄積容量C0が形成されている。この蓄積容量C0により電荷が蓄積されるようになっている。
リセット用トランジスタTr1、増幅用トランジスタTr2および選択・読み出し用トランジスタTr3はそれぞれ、例えば薄膜トランジスタ(TFT;ThinFilm Transistor)などにより構成されている。
リセット用トランジスタTr1のゲートはリセット制御信号線Reset(図4参照)に接続され、ソースはリセット電圧Vrst1の供給線に接続されている。リセット用トランジスタTr1のドレインおよび増幅用トランジスタTr2のゲートは、蓄積ノードP1に接続されている。増幅用トランジスタTr2のソースは、電源電圧VDDを供給する電源線に接続されている。増幅用トランジスタTr2のドレインは、選択・読み出し用トランジスタTr3のドレインに接続されている。選択・読み出し用トランジスタTr3のゲートは、リード制御信号を供給するリード制御信号線Readに接続され、ソースは読み出し線41に接続されている。
リセット用トランジスタTr1は、蓄積ノードP1の電圧値をリセット電圧Vrst1にリセットする(蓄積ノードP1の蓄積電荷を放出させる)ためのものである。リセット用トランジスタTr1に供給されるリセット電圧Vrst1は、後述するリセット電圧制御部(図8)により、可変制御されるようになっている。
増幅用トランジスタTr2と選択・読み出し用トランジスタTr3は、ソースフォロワを形成し、蓄積ノードP1の蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力するようになっている。センサ検出信号は、選択・読み出し用トランジスタTr3がゲートに印加されたリード制御信号に応じてオンされたタイミングで、読み出し線41に出力されるようになっている。
増幅用トランジスタTr2と選択・読み出し用トランジスタTr3は、本発明における「読み出し手段」の一具体例に対応している。
[モニタ用センサ33Mの構成例]
図6は、モニタ用センサ33Mの配置位置および回路構成を示している。モニタ用センサ33Mは、後述するリセット電圧制御部16において、温度に応じてセンサ素子33のリセット電圧Vrst1の値を可変制御するための温度モニタ用に設けられている。モニタ用センサ33Mは、I/Oディスプレイパネル20において、センサ素子33が配置された表示エリア(センサエリア)21とは異なる領域に、少なくとも1つ配置されている。例えばパネル上部20Aまたはパネル下部20Bの少なくとも一方に配置されている。
モニタ用センサ33Mは、回路構成としては図5に示したセンサ素子33と同一構造である。すなわち、モニタ用センサ33Mは、センサ素子33と同様に、光電変換素子PD1、蓄積ノードP1、リセット用トランジスタTr1、増幅用トランジスタTr2および選択・読み出し用トランジスタTr3を有している。ただし、モニタ用センサ33Mは、温度による光電変換素子PD1の特性変化(暗電流の変化)の影響をモニタするために、遮光体37によって、外光L0に対して遮光された構造となっている。
図7は、モニタ用センサ33Mの配置部分の断面構造を示している。I/Oディスプレイパネル20は、バックライト15側から順に、画素基板34と、対向基板35とを有している。画素基板34には、センサ素子33およびモニタ用センサ33M等が形成されている。例えば、画素基板34上において、光電変換素子PD1が配置され、光電変換素子PD1に対して上層側にセンサ素子33およびモニタ用センサ33Mを駆動制御するための配線部36が形成されている。遮光体37は、例えば対向基板35の内面側に形成され、光電変換素子PD1を外部から遮光するようになっている。図7から分かるように、モニタ用センサ33Mは外光L0に対して遮光されているが、バックライト15による照明光Lonは入射するようになっている。これにより、モニタ用センサ33Mは、入射光に関して、外光L0以外の条件はセンサ素子33と同等とされている。
[リセット電圧制御部16の構成例]
図8は、リセット電圧Vrst1の可変制御に関わる回路を機能的に示している。リセット電圧制御部16は、フィードバック演算部17と、リセット電圧生成部18とを有している。リセット電圧制御部16は、光電変換素子PD1で発生する暗電流による蓄積ノードP1の充電電圧に相当する電圧値を、モニタ用センサ33Mから取得するようになっている。そして、その電圧値に応じてセンサ素子33とモニタ用センサ33Mとにおけるリセット電圧Vrst1の値を可変制御するようになっている。
図9は、リセット電圧制御部16の具体的な回路構成例を示している。図9に示した回路は、後述する図16の流れ図に示すリセット電圧の可変制御を実現するための具体的な回路構成例である。リセット電圧制御部16は、増幅器50と、A/D(アナログ/デジタル)変換器51と、RAM(Random Access Memory)52と、増幅器53と、A/D変換器54とを有している。リセット電圧制御部16はまた、差分器55と、加算器56と、乗算器57と、RAM58と、加算器59と、D/A変換器60とを有している。
[表示装置の動作]
まず、この表示装置による画像の表示動作および物体の検出動作(撮像動作)の概要について説明する。
この表示装置では、アプリケーションプログラム実行部11から供給される表示データに基づいて、表示用ドライブ回路12において表示用の駆動信号が生成される。この駆動信号により、I/Oディスプレイパネル20に対して線順次表示駆動がなされ、画像が表示される。また、このときバックライト15も表示ドライブ回路12によって駆動され、I/Oディスプレイパネル20と同期した周期的な点灯・消灯動作がなされる。
I/Oディスプレイパネル20に接触または近接する物体(指先等の近接物体)がある場合、受光ドライブ回路13による線順次撮像駆動により、I/Oディスプレイパネル20における各センサ素子(撮像画素)33においてその物体が検出(撮像)される。各センサ素子33からの検出信号(撮像信号)は、I/Oディスプレイパネル20から受光ドライブ回路13へ供給される。受光ドライブ回路13では、センサ素子33の検出信号を1フレーム分、蓄積し、撮像画像として画像処理部14へ出力する。ここで、画像処理部14へ出力されるのは、バックライト15をオン状態にして得られたセンサ素子33からのセンサ検出信号に基づく画像と、バックライト15をオフ状態にして得られたセンサ素子33からのセンサ検出信号に基づく画像との2フレームの画像である。
画像処理部14では、この撮像画像に基づいて、所定の画像処理(演算処理)を行うことにより、I/Oディスプレイパネル20に接触または近接する物体に関する物体情報(位置座標データ、物体の形状や大きさに関するデータなど)を取得する。例えば受光ドライブ回路13において生成された差分画像の重心を判定する演算処理がなされ、接触(近接)中心の特定が行われる。そして、近接物体の検出結果が画像処理部14からアプリケーションプログラム実行部11へ出力される。アプリケーションプログラム実行部11では、後述するようなアプリケーションプログラムを実行する。
[センサ動作の詳細]
図10は、この表示装置におけるセンサ動作(撮像動作)の一例を示している。図10の上部に示した上方から下方に延びる矢印は、I/Oディスプレイパネル20におけるセンサ素子33およびモニタ用センサ33Mの駆動タイミングを模式的に示している。横方向は時間、縦方向はI/Oディスプレイパネル20の走査ラインに相当する。この駆動タイミングチャートの下部には、バックライト15のオン・オフ状態を模式的に示している。バックライト15のオン・オフ状態を示す部分において、黒くなっている部分はバックライト15がオフしていることを示す。図10の下部には、後述のリセット電圧Vrst1の可変制御で用いる信号取得のタイミングを模式的に示している。なお、図10において、「H」は、1水平ラインの撮像(検出)期間に相当する。この例では、センサ素子33およびモニタ用センサ33Mを垂直方向に60ライン設けている場合の例を示している。従って、例えば60Hは、線順次で1画面分の撮像(検出)を行っている期間に相当する。
まず、初期状態として、センサ素子33およびモニタ用センサ33Mにおける蓄積ノードP1の電圧値を所定の基準リセット電圧(Vrst1=0(V))によってリセットししつつ、蓄積ノードP1の電圧値をセンサ検出信号として読み出す処理を行う(Reset&Read期間)。この処理は、I/Oディスプレイパネル20の上ラインから下ラインに向かって順次、行われる。
次に、上ラインから下ラインに向かって順次、センサ素子33およびモニタ用センサ33Mにおける蓄積ノードP1の電圧値をリセット電圧Vrst1でリセットする処理を行う(Reset期間)。次に、バックライト15がオンしている状態で露光(光電変換素子PD1によって変換された電荷を蓄積ノードP1に蓄積)を行う(露光期間(明))。次に、上ラインから下ラインに向かって順次、センサ素子33およびモニタ用センサ33Mにおける蓄積ノードP1の電圧値をセンサ検出信号として読み出す処理を行う(Read期間)。
次に、再び、上ラインから下ラインに向かって順次、センサ素子33およびモニタ用センサ33Mにおける蓄積ノードP1の電圧値をリセット電圧Vrst1でリセットする処理を行う(Reset期間)。次に、バックライト15がオフしている状態で露光(光電変換素子PD1によって変換された電荷を蓄積ノードP1に蓄積)を行う(露光期間(滅))。次に、上ラインから下ラインに向かって順次、センサ素子33およびモニタ用センサ33Mにおける蓄積ノードP1の電圧値をセンサ検出信号として読み出す処理を行う(Read期間)。
以上のように、Reset期間を挟みつつ、バックライト15がオンしている状態での露光とオフしている状態での露光を行い、各状態でのセンサ検出信号を読み出す処理を行う。以降、この一連の処理を順次繰り返す。なお、(Reset&Read期間)は、一連の(Reset期間)、(露光期間)、および(Read期間)を所定数繰り返すごとに行われる。
[近接物体の検出の具体例]
図11(A)は、この表示装置において、強い外光L0がある場合にI/Oディスプレイパネル20のセンサエリア21に近接物体(指f)がある状態を示し、図11(B)はその状態におけるセンサ出力電圧(受光出力電圧)の例を示している。例えば図11(A)に示したように、入射する外光(環境光)L0が強い場合には、バックライト15を点灯させた状態での受光出力電圧Von101は、図11(B)に示したようになる。すなわち、パネル上のセンサエリア21内において指fが近接する個所以外では、ほとんど外光L0の明るさのみに対応した電圧値Vaとなる。また、指fが近接する個所では、指fの表面で反射したバックライト15からの照明光Lonの明るさに対応した電圧値Vbに低下する。これに対して、バックライト15を消灯させた状態での受光出力電圧Voff101は、指fが近接する個所以外では、外光L0の明るさに対応した電圧値Vaとなる点は同じであるが、指fが近接する個所では、ほとんど外光L0が遮断された状態であり、非常にレベルの低い電圧値Vcとなる。
図12(A)は、この表示装置において、外光L0が弱い場合にI/Oディスプレイパネル20のセンサエリア21に近接物体(指f)がある状態を示し、図12(B)はその状態におけるセンサ出力電圧(受光出力電圧)の例を示している。例えば図12(A)に示したように、入射する外光L0が弱い(ほとんどない)状態では、バックライト105を点灯させた状態での受光出力電圧Von201は、図12(B)に示したようになる。すなわち、センサエリア21内において指fが近接する個所以外では、外光L0が少ないために非常にレベルの低い電圧値Vcとなる。また、センサエリア21内において指fが近接する個所では、指fの表面で反射したバックライト15からの照明光Lonの明るさに対応した電圧値Vbに上昇する。これに対して、バックライト15を消灯させた状態での受光出力電圧Voff2は、指fが近接する個所とそれ以外の個所のいずれでも、非常にレベルの低い電圧値Vcのままで変化がない。
このようにして、センサエリア21のうちの指fが近接していない個所では、外光L0がある場合とない場合とで、受光出力電圧が大きく異なっている。一方、表示エリア21のうちの指fが近接している個所では、外光L0の有無に関係なく、バックライト15の点灯時の電圧Vbと、バックライト15の消灯時の電圧Vcとが、ほぼ同じような状態となっている。よって、バックライト10の点灯時の電圧と消灯時の電圧との差分を検出することにより、電圧Vbと電圧Vcとの差のように、一定以上の差がある個所が、物体が近接等した個所であると判断することができる。
画像処理部14(図1)では、例えば図13に示したような差分画像Cを求める。画像Bは、バックライト15による照明光Lonが照射されている状態で得られたセンサ素子33からのセンサ検出信号に基づく画像の例を示している。画像Aは、バックライト15による照明光Lonが照射されていない状態で得られたセンサ素子33からのセンサ検出信号に基づく画像の例を示している。これら画像Aと画像Bとの差分画像Cから、物体の位置などを検出することができる。
[温度による特性変化]
図14は、センサ素子33における温度上昇による蓄積ノードP1の電圧変化を示している。なお、図14は、センサ素子33に入射光がない状態(暗状態)での特性である。横軸は温度、縦軸は蓄積ノードP1の電圧を示している。図14には、光電変換素子PD1が温度上昇した場合の蓄積ノードP1の電圧変化と、リセット用トランジスタTr1が温度上昇した場合の蓄積ノードP1の電圧変化とを示している。図14から分かるように、光電変換素子PD1の温度変化が、蓄積ノードP1の電圧に影響を与えている。一方、リセット用トランジスタTr1の温度変化は、蓄積ノードP1の電圧にほとんど影響を与えない、
図15は、光電変換素子PD1の単独での温度特性を示している。なお、図15は、光電変換素子PD1に入射光がない状態(暗状態)での特性である。すなわち、光電変換素子PD1の暗電流の温度特性を示している。図15に示したように、光電変換素子PD1は、入射光がない状態であっても暗電流(熱励起電流)が流れるが、この暗電流は、温度によって変化し、高温になるほど多くの電流が流れる特性がある。この暗電流があることにより、図14に示したような、温度による蓄積ノードP1の電圧変化を生じさせる。特に高温になった場合には、暗電流の影響が大きくなり、蓄積ノードP1の電圧が上昇して蓄積ノードP1が飽和状態になってしまい、センサとしての検出動作に悪影響を与えるおそれがある。
本実施の形態では、この温度変化に伴う暗電流の影響を軽減するために、モニタ用センサ33Mを用いて、暗電流による蓄積ノードP1の充電電圧に相当する電圧値を取得し、それに基づいて以下で説明するような、リセット電圧Vrst1の可変制御を行う。
[リセット電圧制御部16による制御動作の具体例]
図16は、図8および図9の回路によって実現されるリセット電圧Vrst1の可変制御の流れを示している。リセット電圧制御部16は、モニタ用センサ33Mにおいて、蓄積ノードP1の電圧値を所定の基準リセット電圧(Vrst1=0(V))によってリセットしている期間中に読み出されたセンサ検出信号の基準電圧値をVsig0とする(ステップS1,S2)。図9の回路では、増幅器50、A/D変換器51およびRAM52による処理に対応する。
また、蓄積ノードP1の電圧値がリセット用トランジスタTr1によってリセットされた後、所定の露光期間経過後に読み出されたセンサ検出信号の電圧値をVsigとする(ステップS3)。図9の回路では、増幅器53、およびA/D変換器54による処理に対応する。この電圧値Vsigは、バックライト15による照明光が照射されていない状態での露光期間(図10の(露光期間(滅)))の経過後に読み出されたものであることが好ましい。
そして、次に、
Vsig0−Vsig=α
で表される差分αを、暗電流による蓄積ノードP1の充電電圧に相当する電圧値として求める(ステップS4)。図9の回路では、差分器55による処理に対応する。なお、モニタ用センサ33Mが複数ある場合には、例えば、複数のモニタ用センサ33Mのそれぞれから求められた差分αの値を平均し、その平均値を差分αとして後の処理で用いるなどすれば良い。
次に、リセット電圧制御部16は、差分αに所定のオフセット値βを重畳し、1以下の所定の係数kを掛けた値、
k(α+β)
を求める(ステップS5,S6)。図9の回路では、加算器56および乗算器57による処理に対応する。係数kは、変化に対する応答が小さくなるように(リセット電圧Vrst1の急激な変化が起こらないように)するための係数である。係数kは、例えば0.25程度に設定される。βは例えば−1.5〜0程度の値に設定される。
次に、1つ前のリセット電圧Vrst1を(Vrst1_old)とし、k(α+β)に加算した値、
Vrst1=Vrst1_old+k(α+β)
を求め、これをあらたなリセット電圧Vrst1として出力する(ステップS7)。図9の回路では、RAM58、加算器59、およびD/A変換器60による処理に対応する。
その後、あらたなリセット電圧Vrst1でリセットした後のセンサ検出信号の電圧値Vsigを求め、差分αを再度求める処理を行う(ステップS8,S9)。そして、ステップS5〜S7の処理を繰り返すループを行う。このループを繰り返すことにより、差分αが所定のオフセット値−βの範囲内に収まるように制御される。すなわち、蓄積ノード電圧が−βになるよう、制御される。また、所定数のループを繰り返すごとに、ステップS1と同様にして、基準電圧値Vsig0を求める処理を再度行う(ステップS10)。これにより、温度変化による基準電圧値Vsig0の変化にも対応することができる。
このようにして、リセット電圧制御部16は、差分αに所定のオフセット値βを重畳し、1以下の所定の係数kを掛けた値、
k(α+β)
をセンサ素子33とモニタ用センサ33Mとにおけるリセット電圧Vrst1に反映させるフィードバック制御を行う。これにより、モニタ用センサ33Mにおけるセンサ検出信号の電圧値Vsigが所定のオフセット値βの範囲内に収まるように制御される。
図17は、図16に示したリセット電圧Vrst1の可変制御を、基準温度よりも低温にある場合に実行した例を示している。図18は、図16に示すリセット電圧の可変制御を、基準温度よりも低温にある状態で実行した場合に、センサ出力電圧の差分値αが所定オフセット値−βに収束する様子を示している。なお、図17および図18において、横軸はフレーム数を単位とした時間経過を表している。ここでいうフレーム数とは、図16に示したフローにおいて、1回目の露光期間を経て得られた検出信号(撮像フレーム)をframe1とし、N回目(N=2以上の整数)の露光期間を経て得られた検出信号をframeNとしたものであることを意味している。
図19は、図16に示すリセット電圧の可変制御を、基準温度よりも高温にある場合に実行した例を示している。図20は、図16に示すリセット電圧の可変制御を、基準温度よりも高温にある状態で実行した場合に、センサ出力電圧の差分値αが所定オフセット値−βに収束する様子を示している。図19および図20において、横軸は図17および図18と同様、フレーム数を単位とした時間経過を表している。
このように本実施の形態に係る入力機能付き表示装置によれば、センサ素子33における蓄積ノードP1の電圧値をリセットするためのリセット電圧Vrst1を、温度による光電変換素子の特性変化に応じて可変制御するようにしたので、温度変化に伴う暗電流の影響を軽減して、安定した検出動作を行うことができる。
ところで、光電変換素子PD1が受光するバックライト15からの照明光Lonには、近接物体からの反射光だけでなく、直接的に光電変換素子PD1に入射したり、さらにはパネル内での内部反射により入射する成分がある。このバックライト15からの直接光または内部反射光の成分が、蓄積ノードP1に蓄積されてしまう問題がある。リセット電圧Vrst1の可変制御を行うことにより、この直接光または内部反射光による充電電圧の影響も軽減することができる。また、センサ素子33において、リセット電圧Vrst1を与えた場合に、素子や配線間の容量カップリングによって、蓄積ノードP1に電圧降下が生じる問題がある。リセット電圧Vrst1の可変制御を行うことにより、この電圧降下による充電電圧の影響も軽減することができる。
[アプリケーションプログラムの実行例]
次に、図21〜図24を参照して、上述した近接物体の検出処理によって検出された物体の位置情報等を利用した、アプリケーションプログラム実行部11によるアプリケーションプログラム実行例について、いくつか説明する。
図21(A)に示した第1の例は、I/Oディスプレイパネル20の表面を指先61で触れて、その触れた個所の軌跡を描画ライン611として画面に表示させるようにした例である。
図21(B)に示した第2の例は、手の形を用いたジェスチャ認識のものである。具体的には、I/Oディスプレイパネル20に触れた(または近接した)手62の形状を認識して、その認識した手の形を画像として表示させ、その表示オブジェクトの移動621で、何らかの処理を行うようにしたものである。
図22に示した第3の例は、閉じた状態の手63Aから、開いた状態の手63Bに変化させて、それぞれの状態の手の接触または近接をI/Oディスプレイパネル20で画像認識させて、その画像認識に基づいた処理を実行させるようにしたものである。これらの認識に基づいて処理を行うことで、例えばズームインなどの指示を行うことができる。また、このような指示ができることで、例えばI/Oディスプレイパネル20をパーソナルコンピュータ装置に接続して、そのコンピュータ装置上でコマンドを切り替えている操作などを、これらの画像認識で、より自然な形で入力することができる。
図23に示した第4の例は、I/Oディスプレイパネル20を2台用意して、2台のI/Oディスプレイパネル20を何らかの伝送手段で接続するようにしたものである。このような構成で、一方のI/Oディスプレイパネル20において接触または近接を検出した画像を、他方のI/Oディスプレイパネル20に伝送して表示させて、両ディスプレイパネルを操作するユーザ間でコミュニケーションをとるようにしてもよい。例えば図23に示したように、一方のI/Oディスプレイパネル20で画像認識した手65の手形の画像を送信して、他方のI/Oディスプレイパネル20に同一の手形642を表示させる処理が可能になる。また例えば、他方のI/Oディスプレイパネル20を手64で触れて表示された軌跡641を、一方のI/Oディスプレイパネル20に送って表示させる等の処理が可能になる。このようにして、描画している状態を動画で伝達し、手書きの文字や図形などを相手に送ることで、新しいコミュニケーションツールとなる可能性がある。このような例としては、例えば、I/Oディスプレイパネル20を携帯電話端末の表示パネルに適用すること等が想定される。なお、図23ではI/Oディスプレイパネル20を2台用意した例を示したが、3台以上のI/Oディスプレイパネル20を伝送手段で接続して同様の処理を行うことも可能である。
また、図24の第5の例に示したように、筆66を使用してI/Oディスプレイパネル20の表面で文字を書くように触れさせて、その筆66が触れた個所をI/Oディスプレイパネル20に画像661として表示させることで、毛筆による手書きの入力が可能になる。この場合には、毛筆の細かいタッチまで認識して実現することが可能である。従来の手書き認識の場合には、例えば一部のデジタイザにおいて、特殊なペンの傾きを電界検出で実現していたが、本例では、本物の毛筆の接触面そのものを検知することにより、より現実的な感覚で情報入力を行える。
<モジュールおよび適用例>
次に、図25〜図29を参照して、以上で説明した入力機能付き表示装置の適用例について説明する。この表示装置は、外部から入力された映像信号あるいは内部で生成した映像信号を、画像あるいは映像として表示するあらゆる分野の電子機器に適用することが可能である。例えば以下で説明するようなテレビジョン装置,デジタルカメラ,ノート型パーソナルコンピュータ、携帯電話等の携帯端末装置あるいはビデオカメラなどの電子機器に適用することが可能である。
(適用例1)
図25は、電子機器の第1の例としてのテレビジョン装置の外観を表したものである。このテレビジョン装置は、例えば、フロントパネル511およびフィルターガラス512を含む映像表示画面部510を有している。このようなテレビジョン装置における映像表示画面部510に、上述の入力機能付き表示装置を適用することが可能である。
(適用例2)
図26(A),(B)は、電子機器の第2の例としてのデジタルカメラの外観を表したものである。このデジタルカメラは、例えば、フラッシュ用の発光部521、表示部522、メニュースイッチ523およびシャッターボタン524を有している。このようなデジタルカメラにおける表示部522に、上述の入力機能付き表示装置を適用することが可能である。
(適用例3)
図27は、電子機器の第3の例としてのノート型パーソナルコンピュータの外観を表したものである。このノート型パーソナルコンピュータは、例えば、本体531,文字等の入力操作のためのキーボード532および画像を表示する表示部533を有している。このようなノート型パーソナルコンピュータにおける表示部533に、上述の入力機能付き表示装置を適用することが可能である。
(適用例4)
図28は、電子機器の第4の例としてのビデオカメラの外観を表したものである。このビデオカメラは、例えば、本体部541,この本体部541の前方側面に設けられた被写体撮影用のレンズ542,撮影時のスタート/ストップスイッチ543および表示部544を有している。このようなビデオカメラにおける表示部544に、上述の入力機能付き表示装置を適用することが可能である。
(適用例5)
図29(A)〜(G)は、電子機器の第5の例としての携帯電話機の外観を表したものである。この携帯電話機は、例えば、上側筐体710と下側筐体720とを連結部(ヒンジ部)730で連結したものであり、ディスプレイ740,サブディスプレイ750,ピクチャーライト760およびカメラ770を有している。このような携帯電話機におけるディスプレイ740またはサブディスプレイ750に、上述の入力機能付き表示装置を適用することが可能である。
<他の実施の形態>
本発明は、上記実施の形態、およびその適用例に限定されず種々の変形実施が可能である。
例えば、上記実施の形態等では、バックライト15を備えた液晶パネルからなるI/Oディスプレイパネル20の場合で説明したが、表示用のバックライトが検出用照明を兼ねてもよいし、検出専用の照明を設けてもよい。また、検出用照明を設ける場合には、可視光領域以外の波長領域の光(例えば、赤外光)を用いるのがより好ましい。
さらに、上記実施の形態等では、複数の表示画素31RGBと複数のセンサ素子33とを含む表示パネル(I/Oディスプレイパネル20)を有する入力機能付き表示装置について説明したが、本発明は表示装置以外にも適用可能である。例えば表示機能のない単なるセンサ装置としても適用可能である。この場合、例えばI/Oディスプレイパネル20に代えて、表示画素31RGBを設けずに複数のセンサ素子33のみを1つの面内にマトリクス状に配置することにより構成されたセンサパネルを備えるようにすれば良い。
11…アプリケーションプログラム実行部、12…表示ドライブ回路、13…受光ドライブ回路、13A…フレームメモリ、14…画像処理部、15…バックライト、16…リセット電圧制御部、17…フィードバック演算部、18…リセット電圧生成部、20…I/Oディスプレイパネル、20A…パネル上部、20B…パネル下部、21…表示エリア(センサエリア)、22…表示用Hドライバ、23…表示用Vドライバ、24…センサ用Vドライバ、25…センサ読み出し用Hドライバ、31…画素、31R,31G,31B,31RGB…表示画素、32…配線部、33…センサ素子(撮像画素)、33M…モニタ用センサ、34…画素基板、35…対向基板、36…配線部、37…遮光体、41…読み出し線、50…増幅器、51…A/D変換器、52…RAM、53…増幅器、54…A/D変換器、55…差分器、56…加算器、57…乗算器、58…RAM、59…加算器、60…D/A変換器、510…映像表示画面部、511…フロントパネル、512…フィルターガラス、521…発光部、522…表示部、523…メニュースイッチ、524…シャッターボタン、531…本体、532…キーボード、533…表示部、541…本体部、542…レンズ、543…スタート/ストップスイッチ、544…表示部、710…上部筐体、720…下部筐体、730…連結部、740…ディスプレイ、750…サブディスプレイ、760…ピクチャーライト、770…カメラ、61…指先、611…描画ライン、62…手、621…オブジェクトの移動(手のひらツール)、63A,63B,64,65…手、641…軌跡、642…手形、66…筆、661…画像、Reset…リセット制御信号線、Read…リード制御信号線、PD1…光電変換素子、Tr1…リセット用トランジスタ、Tr2…増幅用トランジスタ、Tr3…選択・読み出し用トランジスタ、C0…蓄積容量、P1…蓄積ノード、Vsig…モニタ出力値、Vsig0…初期モニタ出力値、VDD…電源電圧、Vrst1…リセット電圧、L0…外光(環境光)、Lon…バックライトによる照明光、f…物体(指)、ob1…物体(ペン)。

Claims (10)

  1. 1または複数のセンサ素子と、
    前記センサ素子を駆動するセンサ駆動手段と
    を備え、
    前記センサ素子は、
    受光量に応じた電荷を発生する光電変換素子と、
    前記光電変換素子によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動する蓄積ノードと、
    一端が前記光電変換素子と前記蓄積ノードとに接続され、前記蓄積ノードの電圧値をリセット電圧にリセットするリセット用トランジスタと、
    前記蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する読み出し手段と
    を有し、
    前記センサ駆動手段は、
    温度による前記光電変換素子の特性変化に応じて前記リセット電圧の値を可変制御するリセット電圧制御手段を有する
    センサ装置。
  2. 前記リセット電圧制御手段は、前記光電変換素子で発生する暗電流による蓄積ノードの充電電圧に相当する電圧値を取得し、その電圧値に応じて前記リセット電圧の値を可変制御する
    ようになされている請求項1に記載のセンサ装置。
  3. 前記センサ素子と同一構造の光電変換素子、蓄積ノード、リセット用トランジスタ、および読み出し手段を有すると共に、外光に対して遮光されたモニタ用センサをさらに備え、
    前記リセット電圧制御手段は、前記暗電流による蓄積ノードの充電電圧に相当する電圧値を前記モニタ用センサから取得し、その電圧値に応じて前記センサ素子と前記モニタ用センサとにおける前記リセット電圧の値を可変制御する
    請求項2に記載のセンサ装置。
  4. 前記リセット電圧制御手段は、前記モニタ用センサにおいて、前記蓄積ノードの電圧値を所定の基準リセット電圧によってリセットしている期間中に読み出されたセンサ検出信号の基準電圧値をVsig0とし、前記蓄積ノードの電圧値が前記リセット用トランジスタによってリセットされた後、所定の露光期間経過後に読み出されたセンサ検出信号の電圧値をVsigとしたとき、
    Vsig0−Vsig=α
    で表される差分αを、前記暗電流による蓄積ノードの充電電圧に相当する電圧値として求める
    請求項3に記載のセンサ装置。
  5. 前記リセット電圧制御手段は、前記差分αに所定のオフセット値βを重畳し、1以下の所定の係数kを掛けた値、
    k(α+β)
    を前記センサ素子と前記モニタ用センサとにおける前記リセット電圧に反映させるフィードバック制御を行い、前記モニタ用センサにおける前記センサ検出信号の電圧値Vsigが所定のオフセット値βの範囲内に収まるようにする
    請求項4に記載のセンサ装置。
  6. 複数の前記センサ素子が所定のセンサエリアにマトリクス状に配置されると共に、前記所定のセンサエリアとは異なる領域に前記モニタ用センサが配置されたセンサパネルと、
    前記センサパネルの背面側から前記センサパネル表面に向けて周期的に照明光を照射するバックライトと、
    前記バックライトによる照明光が照射されている状態で得られた前記センサ素子からのセンサ検出信号と、前記バックライトによる照明光が照射されていない状態で得られた前記センサ素子からのセンサ検出信号との差分に基づいて前記センサパネル表面に近接する物体の検出を行う信号処理手段と
    をさらに備え、
    前記リセット電圧制御手段は、前記バックライトによる照明光が照射されていない状態において、前記蓄積ノードの電圧値が前記リセット用トランジスタによってリセットされた後、所定の露光期間経過後に読み出されたセンサ検出信号の電圧値をVsigとする
    ようになされている請求項4に記載のセンサ装置。
  7. 前記光電変換素子は、アノード電極に接続されたp型半導体領域と、カソード電極に接続されたn型半導体領域と、前記p型半導体領域と前記n型半導体領域との間に形成された真性半導体領域とを有するPIN型のフォトダイオードである
    請求項1ないし6のいずれか1項に記載のセンサ装置。
  8. 受光量に応じた電荷を発生する光電変換素子と、
    前記光電変換素子によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動する蓄積ノードと、
    一端が前記光電変換素子と前記蓄積ノードとに接続され、前記蓄積ノードの電圧値をリセット電圧にリセットするリセット用トランジスタと、
    前記蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する読み出し手段と
    を有する1または複数のセンサ素子を駆動する際に、
    温度による前記光電変換素子の特性変化に応じて前記リセット電圧の値を可変制御するようにした
    センサ素子の駆動方法。
  9. 複数の表示画素と複数のセンサ素子とが配置された表示パネルと、
    複数の前記表示画素を駆動する表示駆動手段と、
    複数の前記センサ素子を駆動するセンサ駆動手段と
    を備え、
    前記複数のセンサ素子はそれぞれ、
    受光量に応じた電荷を発生する光電変換素子と、
    前記光電変換素子によって変換された電荷が蓄積され、その蓄積電荷に応じて電圧変動する蓄積ノードと、
    一端が前記光電変換素子と前記蓄積ノードとに接続され、前記蓄積ノードの電圧値をリセット電圧にリセットするリセット用トランジスタと、
    前記蓄積ノードの蓄積電荷に応じた電圧値を読み出してセンサ検出信号として出力する読み出し手段と
    を有し、
    前記センサ駆動手段は、
    温度による前記光電変換素子の特性変化に応じて前記リセット電圧の値を可変制御するリセット電圧制御手段を有する
    入力機能付き表示装置。
  10. 請求項8に記載の入力機能付き表示装置を備えた電子機器。
JP2009260255A 2009-11-13 2009-11-13 センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器 Expired - Fee Related JP5510998B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2009260255A JP5510998B2 (ja) 2009-11-13 2009-11-13 センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
TW099136118A TWI437473B (zh) 2009-11-13 2010-10-22 感測器裝置,感測器元件之驅動方法,具有輸入功能之顯示裝置及電子裝置
US12/941,276 US8593442B2 (en) 2009-11-13 2010-11-08 Sensor device, method of driving sensor element, display device with input function and electronic apparatus
CN2010105374703A CN102063224A (zh) 2009-11-13 2010-11-08 传感器设备、传感器元件驱动方法,显示设备及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009260255A JP5510998B2 (ja) 2009-11-13 2009-11-13 センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器

Publications (2)

Publication Number Publication Date
JP2011107832A true JP2011107832A (ja) 2011-06-02
JP5510998B2 JP5510998B2 (ja) 2014-06-04

Family

ID=43998528

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009260255A Expired - Fee Related JP5510998B2 (ja) 2009-11-13 2009-11-13 センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器

Country Status (4)

Country Link
US (1) US8593442B2 (ja)
JP (1) JP5510998B2 (ja)
CN (1) CN102063224A (ja)
TW (1) TWI437473B (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140134529A (ko) * 2013-05-14 2014-11-24 삼성전자주식회사 촬상 장치 및 제어 방법
TWI471681B (zh) * 2012-06-11 2015-02-01 Omnivision Tech Inc 使用次要相機之快門釋放
JP2015530669A (ja) * 2012-09-29 2015-10-15 華為技術有限公司Huawei Technologies Co.,Ltd. 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置
KR101854989B1 (ko) 2016-08-31 2018-05-03 한국광기술원 다각도 명암 검출을 이용한 디스플레이 장치

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140014839A1 (en) * 2012-07-11 2014-01-16 Tom Chang Sensor design based on light sensing
US9454259B2 (en) 2016-01-04 2016-09-27 Secugen Corporation Multi-level command sensing apparatus
TWI615626B (zh) * 2016-07-07 2018-02-21 九齊科技股份有限公司 物體偵測裝置
CN109037250B (zh) * 2017-06-12 2021-11-05 上海耕岩智能科技有限公司 一种影像侦测显示装置、器件及其制备方法
CN109326676B (zh) * 2017-07-31 2020-12-11 上海耕岩智能科技有限公司 一种光侦测薄膜、器件、显示装置、制备方法
CN107478329B (zh) * 2017-08-31 2019-09-17 京东方科技集团股份有限公司 测光模块、测光电路和电子设备
US11222933B2 (en) * 2020-04-28 2022-01-11 Himax Technologies Limited Display panel equipped with function of detecting an object, and method for detecting an object on a display panel
CN112866602A (zh) * 2021-02-26 2021-05-28 广东长虹电子有限公司 一种用于室内监测的液晶电视
TWI845012B (zh) * 2022-11-08 2024-06-11 奔馳科技股份有限公司 電源偵測調適系統與電源偵測調適方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007018458A (ja) * 2005-07-11 2007-01-25 Sony Corp 表示装置、センサ信号の補正方法並びに撮像装置
JP2007310628A (ja) * 2006-05-18 2007-11-29 Hitachi Displays Ltd 画像表示装置
JP2008203504A (ja) * 2007-02-20 2008-09-04 Hitachi Displays Ltd 画面入力機能付き画像表示装置
JP2009193096A (ja) * 2008-02-12 2009-08-27 Lg Display Co Ltd 液晶表示装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57111421A (en) * 1980-12-29 1982-07-10 Fuji Photo Film Co Ltd Measuring device of multielement sensor
JP2006276223A (ja) 2005-03-28 2006-10-12 Sony Corp 表示装置及び表示方法
JP2007065004A (ja) * 2005-08-29 2007-03-15 Sanyo Epson Imaging Devices Corp 照度検出方法、輝度制御方法、電気光学装置及び電子機器
JP4735575B2 (ja) 2007-03-16 2011-07-27 ソニー株式会社 表示装置
KR20090025935A (ko) * 2007-09-07 2009-03-11 삼성전자주식회사 광 측정 회로와 이를 포함하는 액정 표시 장치 및 그 구동방법
JP5660755B2 (ja) 2007-11-02 2015-01-28 株式会社ジャパンディスプレイ 表示装置および表示制御方法ならびに電子機器
JP4835578B2 (ja) * 2007-11-09 2011-12-14 ソニー株式会社 表示撮像装置、物体検出プログラムおよび物体の検出方法
JP5196963B2 (ja) * 2007-11-09 2013-05-15 株式会社ジャパンディスプレイウェスト 表示装置および表示制御方法ならびに電子機器
JP5014971B2 (ja) * 2007-12-19 2012-08-29 ソニーモバイルディスプレイ株式会社 ディスプレイ装置
WO2009119417A1 (ja) * 2008-03-24 2009-10-01 ソニー株式会社 撮像装置、表示撮像装置、電子機器および物体の検出方法
KR100975871B1 (ko) * 2008-10-17 2010-08-13 삼성모바일디스플레이주식회사 광 센싱 회로, 이를 포함하는 터치 패널, 및 광 센싱 회로의 구동 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007018458A (ja) * 2005-07-11 2007-01-25 Sony Corp 表示装置、センサ信号の補正方法並びに撮像装置
JP2007310628A (ja) * 2006-05-18 2007-11-29 Hitachi Displays Ltd 画像表示装置
JP2008203504A (ja) * 2007-02-20 2008-09-04 Hitachi Displays Ltd 画面入力機能付き画像表示装置
JP2009193096A (ja) * 2008-02-12 2009-08-27 Lg Display Co Ltd 液晶表示装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI471681B (zh) * 2012-06-11 2015-02-01 Omnivision Tech Inc 使用次要相機之快門釋放
JP2015530669A (ja) * 2012-09-29 2015-10-15 華為技術有限公司Huawei Technologies Co.,Ltd. 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置
KR20140134529A (ko) * 2013-05-14 2014-11-24 삼성전자주식회사 촬상 장치 및 제어 방법
KR102025928B1 (ko) * 2013-05-14 2019-09-26 삼성전자주식회사 촬상 장치 및 제어 방법
KR101854989B1 (ko) 2016-08-31 2018-05-03 한국광기술원 다각도 명암 검출을 이용한 디스플레이 장치

Also Published As

Publication number Publication date
US8593442B2 (en) 2013-11-26
TWI437473B (zh) 2014-05-11
JP5510998B2 (ja) 2014-06-04
US20110115767A1 (en) 2011-05-19
CN102063224A (zh) 2011-05-18
TW201140395A (en) 2011-11-16

Similar Documents

Publication Publication Date Title
JP5510998B2 (ja) センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
JP5464583B2 (ja) センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
JP5721994B2 (ja) 放射線撮像装置
JP5481127B2 (ja) センサ素子およびその駆動方法、センサ装置、ならびに入力機能付き表示装置および電子機器
JP5291090B2 (ja) 撮像装置、表示撮像装置、および電子機器
JP5079384B2 (ja) 表示装置および電子機器
JP5660755B2 (ja) 表示装置および表示制御方法ならびに電子機器
JP5196963B2 (ja) 表示装置および表示制御方法ならびに電子機器
US8188987B2 (en) Display and imaging apparatus and object detecting method
JP4270248B2 (ja) 表示撮像装置、情報入力装置、物体検出プログラムおよび物体の検出方法
US20110084934A1 (en) Information input device, information input method, information input/output device, computer readable non-transitory recording medium and electronic unit
JP2009116778A (ja) 表示撮像装置、物体検出プログラムおよび物体の検出方法
JP5246795B2 (ja) センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
JPWO2008102767A1 (ja) 撮像装置、表示撮像装置および撮像処理装置
JP5634005B2 (ja) 表示装置および表示制御方法ならびに電子機器
JP2009146173A (ja) センシング装置、表示装置および電子機器
JP2008059253A (ja) 表示撮像装置、物体検出プログラムおよび物体の検出方法
JP2009199204A (ja) 電気光学装置、及びその制御方法、並びに電子機器
JP4788755B2 (ja) 表示撮像装置、物体検出プログラムおよび物体の検出方法
JP5697725B2 (ja) 表示装置および表示制御方法ならびに電子機器

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20120330

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120919

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20130328

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130604

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130605

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130801

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20130801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140311

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140320

R150 Certificate of patent or registration of utility model

Ref document number: 5510998

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees