JP5710932B2 - 表示装置 - Google Patents

表示装置 Download PDF

Info

Publication number
JP5710932B2
JP5710932B2 JP2010232285A JP2010232285A JP5710932B2 JP 5710932 B2 JP5710932 B2 JP 5710932B2 JP 2010232285 A JP2010232285 A JP 2010232285A JP 2010232285 A JP2010232285 A JP 2010232285A JP 5710932 B2 JP5710932 B2 JP 5710932B2
Authority
JP
Japan
Prior art keywords
display panel
photosensor
detected
light
shadow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010232285A
Other languages
English (en)
Other versions
JP2011118876A (ja
JP2011118876A5 (ja
Inventor
黒川 義元
義元 黒川
池田 隆之
隆之 池田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Semiconductor Energy Laboratory Co Ltd
Original Assignee
Semiconductor Energy Laboratory Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Semiconductor Energy Laboratory Co Ltd filed Critical Semiconductor Energy Laboratory Co Ltd
Priority to JP2010232285A priority Critical patent/JP5710932B2/ja
Publication of JP2011118876A publication Critical patent/JP2011118876A/ja
Publication of JP2011118876A5 publication Critical patent/JP2011118876A5/ja
Application granted granted Critical
Publication of JP5710932B2 publication Critical patent/JP5710932B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/13338Input devices, e.g. touch panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10KORGANIC ELECTRIC SOLID-STATE DEVICES
    • H10K59/00Integrated devices, or assemblies of multiple devices, comprising at least one organic light-emitting element covered by group H10K50/00
    • H10K59/40OLEDs integrated with touch screens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction

Description

技術分野は、表示装置及び半導体装置に関する。また、それらの駆動方法及びそれらの作製方法に関する。
近年、タッチセンサを搭載した表示パネルが注目されている。タッチセンサには、動作原理の違いにより、抵抗膜方式、静電容量方式、光方式などがあり、被検出物(ペン、指など)が表示装置に接触することで表示装置にデータを入力することができる。
このような光方式のタッチセンサを有する装置の一例として、画像取り込みを行う密着型エリアセンサを配置することによって画像取り込み機能を備えた表示装置が挙げられる(例えば、特許文献1を参照)。
また、指紋認証装置等の表示パネルを必須としない装置にも、タッチセンサを搭載し、本人認証を行う技術が提案されている。
特開2001−292276号公報
上記の様なタッチセンサを搭載した表示パネル(入力部ともいう)の場合、表示パネルの表面を被検出物で触れ続けることになる。したがって、表示パネルが汚れ易く、表示品質を低下させるおそれがある。また、表示パネルに相応の機械的強度が要求される。さらに、表示パネルの表面が硬い場合には、表示パネルの利用者が疲労し易いなどの問題がある。同様に、表示パネルを搭載しない装置においても、被検出物が接する部分(入力部ともいう)が汚れ易いなどの問題が生じる。
上記の問題に鑑み、被検出物が入力部に非接触の場合でも、被検出物の位置及び動きを検出可能とすることを目的の一とする。
また、被検出物が入力部に非接触の場合、及び被検出物が入力部に接触する場合の両方において、被検出物を検出可能とすることを目的の一とする。
本発明の一態様は、フォトセンサが配置された入力部を有し、被検出物が入力部に接近する際に、外光を遮ることで入力部に投影される影をフォトセンサによって検出する半導体装置である。被検出物の影により、被検出物の位置又は動きが検出される。なお、半導体装置は、表示パネルを有する装置(表示装置ともいう)でもよく、表示パネルを有さない装置でもよい。
また本発明の他の一態様は、フォトセンサが配置された表示パネルを有し、被検出物が表示パネルに接近する際に、表示パネルから照射され被検出物で反射された光をフォトセンサによって検出する表示装置である。すなわち、被検出物からの反射光により、被検出物の位置又は動きが検出される。
これらのような構成により、被検出物が入力部(表示パネル)に非接触の場合でも、被検出物の検出が可能となる。
また本発明の他の一態様は、フォトセンサを有する画素がマトリックス状に配置された表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を有する表示装置であって、前記フォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有する表示装置である。
また本発明の他の一態様は、フォトセンサを有する画素がマトリックス状に配置された表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を備えた表示装置であって、前記フォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有し、前記被検出物の位置を検出する手段は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち前記被検出物の影を検出した画素を最も多く含む領域の位置データを前記被検出物の位置データとして取得する表示装置である。
また本発明の他の一態様は、フォトセンサを有する画素がマトリックス状に配置された表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を備えた表示装置であって、前記フォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有し、前記被検出物の位置を検出する手段は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち前記被検出物の影を検出した画素を最も多く含む領域の位置データを前記被検出物の位置データとして取得し、前記被検出物の動きを検出する手段は、前記位置データを連続的に取得し、連続的に取得された前記位置データを比較することで、前記被検出物の動きを検出する表示装置である。
また本発明の他の一態様は、第1のフォトセンサを有する画素がマトリックス状に配置された光検出部、及び第2のフォトセンサを有する画素がマトリックス状に配置されたエリアセンサを有する表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を備えた表示装置であって、前記第1のフォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有する表示装置である。
また本発明の他の一態様は、第1のフォトセンサを有する画素がマトリックス状に配置された光検出部と、第2のフォトセンサを有する画素がマトリックス状に配置されたエリアセンサとを有する表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を備えた表示装置であって、前記第1のフォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有し、前記被検出物の位置を検出する手段は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち前記被検出物の影を検出した画素を最も多く含む領域の位置データを前記被検出物の位置データとして取得する表示装置である。
また本発明の他の一態様は、第1のフォトセンサを有する画素がマトリックス状に配置された光検出部、及び第2のフォトセンサを有する画素がマトリックス状に配置されたエリアセンサを有する表示パネルと、画像処理部とを有し、非接触の被検出物に対する検出機能を備えた表示装置であって、第1のフォトセンサは、前記表示パネルに投影される前記被検出物の影を検出する手段を有し、前記画像処理部は、前記被検出物の影の位置から前記被検出物の位置を検出する手段と、前記影の動きから前記被検出物の動きを検出する手段とを有し、前記被検出物の位置を検出する手段は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち前記被検出物の影を検出した画素を最も多く含む領域の位置データを前記被検出物の位置データとして取得し、前記被検出物の動きを検出する手段は、前記位置データを連続的に取得し、連続的に取得された前記位置データを比較することで、前記被検出物の動きを検出する表示装置である。
また本発明の他の一態様は、赤外光センサを有する画素がマトリックス状に配置された光検出部、及び可視光センサを有する画素がマトリックス状に配置されたエリアセンサを有する表示パネルを有し、前記光検出部は、被検出物が前記表示パネルに非接触の際に、前記表示パネルから照射され前記被検出物で反射された光を検出する手段を有し、前記エリアセンサは、前記被検出物が前記表示パネルに接触する際に、前記表示パネルから照射され前記被検出物で反射された光を検出する手段を有する表示装置である。
また、前記第2のフォトセンサの数は、前記第1のフォトセンサの数より多くてもよい。
また、前記第1のフォトセンサの周囲には、前記第2のフォトセンサが配置されていてもよい。
非接触の被検出物を検出可能とすることで、被検出物が入力部(表示パネル)に触れる回数を低減し、表示品質の低下を防止することができる。
また、非接触の被検出物を検出する機能と、接触した被検出物を検出する機能とを用途に応じて使い分けることができる。
表示パネルの構成を説明する図。 表示パネルの構成を説明する図。 表示パネルの構成を説明する図。 タイミングチャート。 表示パネルの構成を説明する図。 表示パネルの断面図。 表示パネルの断面図。 表示パネルの構成を説明する図。 電子機器の一例を説明する図。 画像処理を説明する図。 画像処理を説明する図。 表示パネルの断面図。 電子機器の一例を説明する図。
以下に、実施の形態について、図面を用いて詳細に説明する。但し、以下の実施の形態は多くの異なる態様で実施することが可能であり、趣旨及びその範囲から逸脱することなくその形態及び詳細を様々に変更し得ることは、当業者であれば容易に理解される。従って、以下に示す実施の形態の記載内容に限定して解釈されるものではない。なお、実施の形態を説明するための全図において、同一部分又は同様な機能を有する部分には同一の符号を付し、その繰り返しの説明は省略する。
(実施の形態1)
本実施の形態では、表示パネルの一例について説明する。
図1は、表示パネルの構成の一例である。表示パネル100は、画素回路101、表示素子制御回路102及びフォトセンサ制御回路103を有する。画素回路101は、行列方向にマトリクス状に配置された複数の画素104を有する。各々の画素104は、表示素子105とフォトセンサ106を有する。なお、フォトセンサ106は、画素104の外に設けてもよい。また、フォトセンサ106の個数は、表示素子105の個数と異なっていてもよい。
表示素子105は、薄膜トランジスタ(Thin Film Transistor:TFT)、保持容量、及び液晶素子などを有する。薄膜トランジスタは、保持容量への電荷の注入もしくは保持容量からの電荷の排出を制御する機能を有する。保持容量は、液晶素子に印加する電圧に相当する電荷を保持する機能を有する。液晶素子に電圧を印加し、光の透過又は非透過を制御することで、階調表示が行われる。液晶素子を透過する光には、光源(バックライト)によって液晶表示装置の裏面から照射される光が用いられる。
なお、表示素子105が液晶素子を有する場合について説明したが、発光素子などの他の素子を有していてもよい。発光素子は、電流または電圧によって輝度が制御される素子であり、具体的には発光ダイオード、OLED(Organic Light Emitting Diode)等が挙げられる。
フォトセンサ106は、受光することで電気信号を生成する機能を有する素子(受光素子ともいう)と、薄膜トランジスタとを有する。受光素子としては、フォトダイオード等を用いることができる。なお、フォトセンサ106が受光する光は、表示装置の内部(バックライト等)から発せられ被検出物で反射されたもの、外光等が被検出物によって反射されたもの、被検出物自体から発せられたもの、又は、外光等が被検出物に遮られたもの(影)である。
表示素子制御回路102は、表示素子105を制御するための回路であり、ビデオデータ信号線などの信号線(「ソース信号線」ともいう)を介して表示素子105に信号を入力する表示素子駆動回路107と、走査線(「ゲート信号線」ともいう)を介して表示素子105に信号を入力する表示素子駆動回路108を有する。例えば、走査線に接続された表示素子駆動回路108は、特定の行に配置された画素が有する表示素子105を選択する機能を有する。また、信号線に接続された表示素子駆動回路107は、表示素子駆動回路108が選択する表示素子105に任意の電位を与える機能を有する。なお、走査線に接続された表示素子駆動回路108により高電位を印加された表示素子では、薄膜トランジスタが導通状態となり、信号線に接続された表示素子駆動回路107により与えられる電荷が供給される。
フォトセンサ制御回路103は、フォトセンサ106を制御するための回路であり、フォトセンサ出力信号線、フォトセンサ基準信号線等の信号線に接続されたフォトセンサ読み出し回路109と、走査線に接続されたフォトセンサ駆動回路110を有する。走査線に接続されたフォトセンサ駆動回路110は、特定の行に配置された画素が有するフォトセンサ106を選択して、後述するリセット動作と選択動作とを行う機能を有する。また、信号線に接続されたフォトセンサ読み出し回路109は、選択されたフォトセンサ106の出力信号を取り出す機能を有する。なお、信号線に接続されたフォトセンサ読み出し回路109は、アナログ信号であるフォトセンサの出力信号を、OPアンプを用いてアナログ信号のまま表示パネル外部に取り出す構成や、A/D変換回路を用いてデジタル信号に変換してから表示パネル外部に取り出す構成が考え得る。
画素104の回路図について、図2を用いて説明する。画素104は、トランジスタ201、保持容量202及び液晶素子203を有する表示素子105と、フォトダイオード204、トランジスタ205及びトランジスタ206を有するフォトセンサ106とを有する。
トランジスタ201は、ゲートがゲート信号線207に、ソース又はドレインの一方がビデオデータ信号線210に、ソース又はドレインの他方が保持容量202の一方の電極と液晶素子203の一方の電極に電気的に接続されている。保持容量202の他方の電極と液晶素子203の他方の電極は一定の電位に保たれている。液晶素子203は、一対の電極と、該一対の電極の間に液晶層を含む素子である。
トランジスタ201は、ゲート信号線207に電位”H(high)”が印加されると、ビデオデータ信号線210の電位を保持容量202と液晶素子203に印加する。保持容量202は、印加された電位を保持する。液晶素子203は、印加された電位により、光の透過率を変更する。
フォトダイオード204は、一方の電極がフォトダイオードリセット信号線208に、他方の電極がトランジスタ205のゲートに電気的に接続されている。トランジスタ205は、ソース又はドレインの一方がフォトセンサ基準信号線212に、ソース又はドレインの他方がトランジスタ206のソース又はドレインの一方に電気的に接続されている。トランジスタ206は、ゲートがゲート信号線209に、ソース又はドレインの他方がフォトセンサ出力信号線211に電気的に接続されている。
次に、フォトセンサ読み出し回路109の構成について、図3を用いて説明する。図3において、画素1列分のフォトセンサ読み出し回路300は、p型トランジスタ301、保持容量302、を有する。また、当該画素列のフォトセンサ出力信号線211、プリチャージ信号線303を有する。
フォトセンサ読み出し回路300では、画素内におけるフォトセンサの動作に先立ち、フォトセンサ出力信号線211の電位を基準電位に設定する。図3では、プリチャージ信号線303を電位”L(low)”とすることで、フォトセンサ出力信号線211を基準電位である高電位に設定することができる。なお、保持容量302は、フォトセンサ出力信号線211の寄生容量が大きい場合には、特別に設けなくても良い。なお、基準電位は、低電位とする構成も可能である。この場合、n型トランジスタを用い、プリチャージ信号線303を”H”とすることで、フォトセンサ出力信号線211を基準電位である低電位に設定することができる。
次に、本表示パネルにおけるフォトセンサの読み出し動作について、図4のタイミングチャートを用いて説明する。図4において、信号401〜信号404は、それぞれ図2におけるフォトダイオードリセット信号線208、トランジスタ206のゲートが接続されたゲート信号線209、トランジスタ205のゲートが接続されたゲート信号線213、フォトセンサ出力信号線211の電位に相当する。また、信号405は、図3におけるプリチャージ信号線303の電位に相当する。
時刻Aにおいて、フォトダイオードリセット信号線208の電位(信号401)を”H”とする(リセット動作)と、フォトダイオード204が導通し、トランジスタ205のゲートが接続されたゲート信号線213の電位(信号403)が”H”となる。また、プリチャージ信号線303の電位(信号405)を”L”とすると、フォトセンサ出力信号線211の電位(信号404)は”H”にプリチャージされる。
時刻Bにおいて、フォトダイオードリセット信号線208の電位(信号401)を”L”にする(累積動作)と、フォトダイオード204のオフ電流により、トランジスタ205のゲートが接続されたゲート信号線213の電位(信号403)が低下し始める。フォトダイオード204は、光が照射されるとオフ電流が増大するので、照射される光の量に応じてトランジスタ205のゲートが接続されたゲート信号線213の電位(信号403)は変化する。すなわち、トランジスタ205のソースとドレイン間の電流が変化する。
時刻Cにおいて、ゲート信号線209の電位(信号402)を”H”にする(選択動作)と、トランジスタ206が導通し、フォトセンサ基準信号線212とフォトセンサ出力信号線211とが、トランジスタ205とトランジスタ206とを介して導通する。すると、フォトセンサ出力信号線211の電位(信号404)は、低下していく。なお、時刻C以前に、プリチャージ信号線303の電位(信号405)は”H”とし、フォトセンサ出力信号線211のプリチャージを終了しておく。ここで、フォトセンサ出力信号線211の電位(信号404)が低下する速さは、トランジスタ205のソースとドレイン間の電流に依存する。すなわち、フォトセンサ出力信号線211の電位は、フォトダイオード204に照射されている光の量に応じて変化する。
時刻Dにおいて、ゲート信号線209の電位(信号402)を”L”にすると、トランジスタ206が遮断され、フォトセンサ出力信号線211の電位(信号404)は、時刻D以後、一定値となる。ここで、当該一定値は、フォトダイオード204に照射されている光の量に応じて決まるものである。したがって、フォトセンサ出力信号線211の電位を取得することで、フォトダイオード204に照射されている光の量を知ることができる。
上記のように、フォトダイオード204に照射されている光の量の大小を知ることで、外光が入射しているか、あるいは、非接触の被検出物により外光が遮られているか、すなわち、外光が遮られている部分が影になっているか、を判別することができる。
図5に、非接触の被検出物において、被検出物の影から被検出物の動きを検出する表示パネルシステム500を示す。表示パネルシステム500は、表示パネル100、制御回路501、画像処理回路502、画像データを保存する記憶装置503を有する。制御回路501は、表示パネルを駆動するための各種タイミング信号を生成する。画像処理回路502は、フォトセンサで得られた影の撮像データに対して演算処理を行い、影の動きを検出する。また、画像処理回路502は、後の画像処理に必要となる画像データを記憶装置503に格納し、また、必要に応じて記憶装置503に格納されたデータを読み出して演算処理を行う。
画像処理回路502にて行う画像処理の具体的な方法の一例を、図10を用いて説明する。図10では、画素数を12×12とした表示領域を示している。
画像処理としては、(1)被検出物の影を撮像したデータ(撮像データともいう)からの被検出物の位置の抽出、(2)連続的に取得した被検出物の位置データからの被検出物の動きの検出、(3)被検出物の動きに対応した処理などを行う。
まず、(1)被検出物の影の撮像データから被検出物の位置を抽出する手法について説明する。例えば、図10の太枠で示すように、表示領域を領域2001、領域2002、領域2003、及び領域2004の4領域に分割し、各々の領域における被検出物の影と認識される領域の割合を計数する。より具体的には、各画素におけるフォトセンサで取得した光の量が、特定のしきい値より少ない場合に、当該画素は被検出物の影になっているとする。
そして、当該領域2001乃至2004において、全画素中の影になっている画素の割合が最も大きい領域を、被検出物の位置として抽出する。図10では、影になる画素を斜線で示している。各領域での影になる画素の割合は、領域2001では25/36、領域2002では12/36、領域2003では3/36、領域2004では6/36であり、領域2001において影になる画素の割合が最も大きいため、領域2001を被検出物の位置として抽出し、位置データを取得する。
なお、表示領域の分割数をより多くすることで、より緻密な位置を抽出することができる。
次に、(2)連続的に取得した被検出物の位置データから被検出物の動きを検出する手法について説明する。例えば、上記の位置データを連続的に取得し、対象となる位置データと前後の位置データとを比較することで、被検出物の動きを知ることができる。具体的には、直前の位置データが右で、今回の位置データが左であった場合、被検出物は、右から左へ移動したと検出できる。また、より緻密な位置を抽出している場合には、被検出物の移動方向に加えて、移動の速さなど、より緻密な動きを検出することもできる。
続いて、(3)被検出物の動きに対応した処理を行う手法について説明する。当該処理の一例としては、被検出物の動きに対応して表示を制御する処理が挙げられる。具体的には、被検出物を左から右に動かした際に動画を再生する処理、又は被検出物を上から下に動かした際に動画の再生を停止させる処理などがある。そして、被検出物の動きに対応して当該処理を行うための信号(入力データ)を生成することで、処理が行われる。
また、当該処理の別の例としては、被検出物の動きの軌跡を文字や絵として認識させる処理が挙げられる。すなわち、被検出物によって描かれた文字や絵を信号(入力データ)とすることができる。また、被検出物の動きに対応して、あらかじめ設定された文字や絵を読み出してもよい。
また、フォトセンサの感度を、光の量に応じて可変とすることが有効である。例えば、図2又は図3の構成において、フォトセンサに印加する電位(フォトダイオードリセット信号線208の電位、ゲート信号線209の電位、フォトセンサ基準信号線212の電位、又はプリチャージ信号線303の電位)を変更することで、感度を可変とすることができる。
このように、フォトセンサの感度を可変とすることで、表示パネルの使用環境(明るさなど)に応じて最適な感度に設定することができ、非接触の被検出物の影を容易に判別できる。また、非接触の被検出物の影の検出をする他、表示パネルを密着型エリアセンサとして利用することも可能になる。
以上のような形態とすることで、非接触の被検出物に対して検出可能となり、データの入力を行うことが可能な表示パネルを提供することができる。
また、上記の画像処理は、被検出物の影を検出する場合だけでなく、被検出物からの反射光を用いる場合にも適用できる。反射光を用いる場合、被検出物が接近する位置に配置されたフォトセンサは、他の位置と比較して強い光を受ける。すなわち、上記の画像処理を適用し、表示領域において強い光を受光した領域を特定することで、被検出物の位置、動き、又は形状を検出することができる。この場合、図10の例において斜線をつけた画素は、被検出物からの反射光により強い光を受けた画素となる。
また、表示パネルに、非接触の被検出物の検出を行う第1のフォトセンサと、接触した被検出物の検出を行う第2のフォトセンサとを設ける事も有効である。第2のフォトセンサは密着型エリアセンサとして用いるものである。このような構成とすることで、非接触の被検出物を検出可能な表示パネルでありながら、接触した被検出物に対しても検出可能な表示パネルを提供することができる。即ち、用途に応じて2つの検出機能を使い分けることができる。
第1のフォトセンサを有する画素と第2のフォトセンサを有する画素とが、それぞれマトリクス状に表示パネルに配置される。その際、第2のフォトセンサの数は、第1のフォトセンサの数より多いことが望ましい。密着型エリアセンサとして用いる第2のフォトセンサは、撮像画像において高解像度が要求されるため、第2のフォトセンサの間隔(ピッチ)を狭くすることで解像度を高くすることができる。一方、影を検出する第1のフォトセンサは、被検出物の位置が判別できれば十分であり、密着型エリアセンサとして用いる第2のフォトセンサほどの高い解像度が必要ない。すなわち、第2のフォトセンサが配置された間隔を、第1のフォトセンサの配置された間隔より狭くすればよい。
なお、影を検出する第1のフォトセンサを設ける画素は、密着型エリアセンサとして用いる第2のフォトセンサが抜けた画素となる。したがって、画像処理により第2のフォトセンサが抜けた画素の画像が復元できるように、影を検出する第1のフォトセンサの周囲1〜3画素程度には、密着型エリアセンサとして用いる第2のフォトセンサを設けることが望ましい。
図11(A)に、影の検出を行う第1のフォトセンサと密着型エリアセンサとして用いる第2のフォトセンサとを配置した画素の例を示す。図11(A)及び図11(B)では、画素数は12×12としているが、これには限定されない。
図11(A)において、第1のフォトセンサは斜線で示す画素に配置され、その他の画素に第2のフォトセンサが配置され、それぞれが間隔を取ってマトリクス状に配置されている。上記の理由で、第2のフォトセンサの数は、第1のフォトセンサの数より多い。
なお、図11(A)のように必ずしも一定の間隔を取って配置されている必要はなく、図11(B)のように、異なる間隔で配置されていてもよい。より実用的な画素数として640×480を用いた場合、10×10の100画素の領域に分割して考えると、100画素のうち1個に第1のフォトセンサを配置し、99個に第2のフォトセンサを配置することで、被検出物の影を検出しつつ、密着型エリアセンサとしての機能を十分に果たすことができる。ただしこれに限定されず、第1のフォトセンサと第2のフォトセンサとを配置する割合は、検出精度に応じて決定すればよく、例えば第1のフォトセンサと第2のフォトセンサとを同数とすることも可能である。
なお、影を検出する第1のフォトセンサと密着型エリアセンサとして用いる第2のフォトセンサとにおいて、各々のフォトセンサに印加する電位(例えば、図2又は図3におけるフォトダイオードリセット信号線208の電位、ゲート信号線209の電位、フォトセンサ基準信号線212の電位、又はプリチャージ信号線303の電位)を独立に設定することが有効である。また、各々のフォトセンサにおいて、フォトダイオードのサイズ又はフォトセンサの回路構成を、変えることが有効である。
また、本実施の形態では、表示パネルを用いる装置について説明したが、表示パネルを用いない装置としてもよい。その場合、被検出物が接触又は接近する部分(入力部ともいう)にフォトセンサを設け、上記と同様に画像処理部等を設ければよい。
本実施の形態は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
(実施の形態2)
本実施の形態では、被検出物からの反射光を用いる場合に、フォトセンサの検出精度を高める方法を説明する。
非接触の被検出物を検出するためには、被検出物が反射する微弱な光を効果的に検出する必要がある。具体的には、次のような構成がある。
赤外光を検出するセンサ(赤外光センサ)をフォトセンサとして表示パネルに設ける。そして、表示パネルから赤外光を照射し、被検出物で反射した光を、当該赤外光センサで検出する構成とする。赤外光センサは、例えば、受光素子上に異なる色のカラーフィルタ(例えば、R(赤)とB(青)、R(赤)とG(緑)など)を重ねて設ける構造とすることができる。このような構造とすることで、可視光以外の光(赤外光)の光を受光素子に入射させることができる。なお、上記のカラーフィルタを、カラー表示を行うためのフィルタと兼用することで、工程数を削減することができる。また、バックライトに、可視光(白色)に加えて赤外光を発する光源も加えることで、表示パネルから赤外光を照射することができる。赤外光は可視光に比べ波長が長く散乱が少ないので、検出感度を高めることが容易になる。特に被検出物が人の指や手の場合、赤外光を検出する構成が効果的である。
赤外光センサと可視光センサとを異なる材料で形成する場合、赤外光センサには、可視光以外の光(赤外光)の光を吸収する材料でセンサを形成すればよい。例えば、InGaAs、PbS、又はPbSe等により形成されたフォトセンサは効率よく赤外光を吸収する。
実施の形態1で説明した、表示パネルに非接触の被検出物の検出を行う第1のフォトセンサと、接触した被検出物を検出する第2のフォトセンサとを設ける構成において、第1のフォトセンサを赤外光センサとし、第2のフォトセンサを可視光センサとすることで、非接触の被検出物を検出する機能と、密着型エリアセンサとしての機能との、両方の精度を高めることが可能となる。第1のフォトセンサ(赤外光センサ)及び第2のフォトセンサ(可視光センサ)の配置は、実施の形態1と同様に行うことができる。
また、実施の形態1で説明した画像処理を適用することができる。
本実施の形態は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
(実施の形態3)
図6に、表示パネルの断面図の一例を示す。図6に示す表示パネルでは、絶縁表面を有する基板(TFT基板)1001上に、フォトダイオード1002、トランジスタ1003、保持容量1004、液晶素子1005が設けられている。
フォトダイオード1002と、保持容量1004とは、トランジスタ1003を作製するプロセスにおいて、トランジスタ1003と共に形成することが可能である。フォトダイオード1002は横型接合タイプのpinダイオードであり、フォトダイオード1002が有する半導体膜1006は、p型の導電性を有する領域(p層)と、i型の導電性を有する領域(i層)と、n型の導電性を有する領域(n層)とを有している。なお、本実施の形態では、フォトダイオード1002がpinダイオードである場合を例示しているが、フォトダイオード1002はpnダイオードであっても良い。横型接合タイプのpin接合またはpn接合は、p型を付与する不純物と、n型を付与する不純物とを、それぞれ半導体膜1006の特定の領域に添加することで、形成することが出来る。
また、TFT基板1001上に成膜した一の半導体膜をエッチングなどにより所望の形状に加工(パターニング)することで、フォトダイオード1002の島状の半導体膜と、トランジスタ1003の島状の半導体膜と、保持容量1004の島状の半導体膜(下部電極)とを一緒に形成することができる。そうすることで、作製工程を削減することが可能であり、コストを低減できる。
なお、横型接合タイプのフォトダイオードとせずに、p層、i層、及びn層を積層させた構造を採用することもできる。
液晶素子1005は、画素電極1007と、液晶1008と、対向電極1009とを有する。画素電極1007は、TFT基板1001上に形成されており、トランジスタ1003と、保持容量1004と、導電膜1010を介して電気的に接続されている。また、基板(対向基板)1013には対向電極1009が設けられており、画素電極1007と対向電極1009の間に、液晶1008が挟まれている。なお、図6では、フォトセンサに用いられているトランジスタについては図示していないが、当該トランジスタも、トランジスタ1003を作製するプロセスにおいて、トランジスタ1003と共にTFT基板1001上に形成することが可能である。
画素電極1007と、対向電極1009の間のセルギャップは、スペーサー1016を用いて制御することが出来る。図6では、フォトリソグラフィーで選択的に形成された柱状のスペーサー1016を用いてセルギャップを制御しているが、球状のスペーサーを画素電極1007と対向電極1009の間に分散させることで、セルギャップを制御することも出来る。
また液晶1008は、TFT基板1001と対向基板1013の間において、封止材により囲まれている。液晶1008の注入は、ディスペンサ式(滴下式)を用いても良いし、ディップ式(汲み上げ式)を用いていても良い。
画素電極1007には、透光性を有する導電性材料を用いることができる。例えば、インジウム錫酸化物(ITO)、酸化珪素を含むインジウム錫酸化物(ITSO)、有機インジウム、有機スズ、酸化亜鉛、酸化亜鉛を含むインジウム亜鉛酸化物(IZO)、ガリウムを含む酸化亜鉛、酸化スズ、酸化タングステンを含むインジウム酸化物、酸化タングステンを含むインジウム亜鉛酸化物、酸化チタンを含むインジウム酸化物、酸化チタンを含むインジウム錫酸化物などを用いることが出来る。
また、本実施の形態では、透過型の液晶素子1005を例に挙げているので、画素電極1007と同様に、対向電極1009にも上述した透光性を有する導電性材料を用いることが出来る。
画素電極1007と液晶1008の間には配向膜1011が、対向電極1009と液晶1008の間には配向膜1012が、それぞれ設けられている。配向膜1011、配向膜1012はポリイミド、ポリビニルアルコールなどの有機樹脂を用いて形成することができる。そして、配向膜1011及び配向膜1012の表面は、ラビングなどの、液晶分子を一定方向に配列させるための配向処理が施されている。ラビングは、配向膜に圧力をかけながら、ナイロンなどの布を巻いたローラーを回転させて、上記配向膜の表面を一定方向に擦ることで、行うことが出来る。なお、酸化珪素などの無機材料を用い、配向処理を施すことなく、蒸着法で配向特性を有する配向膜1011、配向膜1012を直接形成することも可能である。
また、液晶素子1005と重なるように、特定の波長領域の光を通すことができるカラーフィルタ1014が、対向基板1013に設けられている。カラーフィルタ1014は、顔料を分散させたアクリル系樹脂などの有機樹脂を基板1013上に塗布した後、フォトリソグラフィー法を用いて選択的に形成することができる。また、顔料を分散させたポリイミド系樹脂を基板1013上に塗布した後、エッチングを用いて選択的に形成することもできる。或いは、インクジェットなどの液滴吐出法を用いることで、選択的にカラーフィルタ1014を形成することもできる。
また、フォトダイオード1002と重なるように、光を遮蔽することが出来る遮蔽膜1015が、対向基板1013に設けられている。遮蔽膜1015を設けることで、対向基板1013を透過して表示パネル内に入射した光が、直接フォトダイオード1002に当たるのを防ぐことができる。また、遮蔽膜1015を設けることで、画素間における液晶1008の配向の乱れに起因するディスクリネーションが視認されるのを防ぐことができる。遮蔽膜1015には、カーボンブラック、低次酸化チタンなどの黒色顔料を含む有機樹脂を用いることができる。または、クロムを用いた膜で、遮蔽膜1015を形成することも可能である。
また、TFT基板1001の画素電極1007が形成されている面とは反対の面に、偏光板1017を設け、対向基板1013の対向電極1009が形成されている面とは反対の面に、偏光板1018を設ける。
液晶素子の表示モードは、TN(Twisted Nematic)型の他、VA(Vertical Alignment)型、OCB(optically compensated Birefringence)型、IPS(In−Plane Switching)型等であっても良い。なお、本実施の形態では、画素電極1007と対向電極1009の間に液晶1008が挟まれている構造の液晶素子1005を例に挙げて説明したが、本発明の一態様に係る表示パネルはこの構成に限定されない。IPS型のように、一対の電極が、共にTFT基板1001側に形成されている液晶素子であっても良い。
また、本実施の形態では、フォトダイオード1002、トランジスタ1003、保持容量1004に、薄膜の半導体膜を用いている場合を例に挙げているが、単結晶半導体基板、SOI基板などを用いて形成されていても良い。
バックライトからの光は、対向基板1013側から照射される。すなわち、矢印1020で示すように液晶素子1005を通って、TFT基板1001側にある被検出物1021に照射される。そして、被検出物1021において反射された光は、矢印1022で示すように、フォトダイオード1002に入射する。
また、外光を検出する場合、外光はTFT基板1001側から照射される。被検出物1021において外光が遮られるため、フォトダイオード1002への入射光が遮られる。すなわち、フォトダイオード1002は、被検出物の影を検出することになる。
以上のような形態の表示パネルは、被検出物の動きを検出することで、データの入力を行うことができる。
また、本実施の形態の表示装置は、被検出物が表示パネルから近接した距離にある場合にも検出することが可能である。その距離は3cm以下にすることができ、CCDイメージセンサ等を設けた場合に比べて有効である。
また、本実施の形態の表示装置は、フォトセンサ(フォトダイオード1002)の受光面の向きと、表示パネルの表示面(TFT基板1001側)の向きとが同一である。そのため、表示パネルにおいて、被検出物を撮像することができ、CCDイメージセンサ等を設けた場合に比べて有効である。
本実施の形態は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
(実施の形態4)
図7に、実施の形態3とは異なる表示パネルの断面図の一例を示す。図7では、フォトダイオード1002に遮蔽膜2019が形成されている。そして、遮蔽膜2019は、トランジスタ1003のゲート電極を構成する導電膜1019と同じ材料を用いて、導電膜1019と共に構成される。フォトダイオード1002に遮蔽膜を形成することで、バックライトの光が受光部に直接入射することを回避できる。そのため、被検出物からの反射光のみを効率良く検出することができる。
また、p型の導電性を有する領域(p層)とn型の導電性を有する領域(n層)とを形成する際に、遮蔽膜2019をマスクとして用いることで、セルフアラインで不純物を添加することができる。これは、微細なフォトダイオードを作成する際に有効であり、画素サイズの縮小や開口率の向上に有効である。
このような形態の表示パネルにおいても、実施の形態3と同様に、被検出物の動きを検出することで、データの入力を行うことができる。
なお、図7では横型接合タイプのフォトダイオードを採用しているが、p層、i層、及びn層を積層させた構造を採用することもできる。
なお、表示パネルのその他の構造について、フォトダイオード1002への入射光について、被検出物と表示パネルとの距離について、及びフォトセンサの受光面と表示パネルの表示面との向きについては、実施の形態3と同様である。
本実施の形態は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
(実施の形態5)
図12に、実施の形態3及び実施の形態4とは異なる表示パネルの断面図の別の一例を示す。図12では、バックライトからの光が、TFT基板1001側から照射する点において、図6及び図7と異なる。すなわち、矢印2020で示すように液晶素子1005を通って、対向基板1013側にある被検出物1021に照射される。そして、被検出物1021において反射された矢印2022で示す光が、フォトダイオード1002に入射する。この場合、フォトダイオード1002の上部の遮蔽膜1015に開口を設ける等、被検出物1021で反射された光がフォトダイオード1002に入射するようにすればよい。
本実施の形態では、フォトダイオード1002の下部に遮蔽膜2015を設ける。遮蔽膜2015を設けることで、TFT基板1001を透過して表示パネル内に入射したバックライトからの光が、直接フォトダイオード1002に当たるのを防ぐことができ、高精度の画像撮像が可能な表示パネルを提供することができる。遮蔽膜2015には、カーボンブラック、低次酸化チタンなどの黒色顔料を含む有機樹脂を用いることができる。または、クロムを用いた膜で、遮蔽膜2015を形成することも可能である。
フォトダイオード1002において赤外光を検出する場合、フォトダイオード1002上に赤外光を透過させるカラーフィルタ1014を形成すればよい。その場合、異なる色のカラーフィルタの積層構造とすることが好ましい。
なお、図12では横型接合タイプのフォトダイオードを採用しているが、p層、i層、及びn層を積層させた構造を採用することもできる。
また、外光を検出する場合、外光は対向基板1013側から照射される。被検出物1021において外光が遮られるため、フォトダイオード1002への入射光が遮られる。すなわち、フォトダイオード1002は、被検出物の影を検出することになる。
被検出物と表示パネルとの距離について、及びフォトセンサの受光面と表示パネルの表示面との向きについては、実施の形態3と同様である。フォトセンサの受光面が表示パネルの表示面(対向基板1013側)に向いていることで、表示パネルにおいて被検出物を撮像できる。
本実施の形態は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
本実施例では、本発明の表示パネルにおける、パネルと光源の配置について説明する。図8は、本発明の表示パネルの構造を示す斜視図の一例である。図8に示す表示パネルは、一対の基板間に液晶素子、フォトダイオード、薄膜トランジスタなどを含む画素が形成されたパネル1601と、第1の拡散板1602と、プリズムシート1603と、第2の拡散板1604と、導光板1605と、反射板1606と、複数の光源1607を有するバックライト1608と、回路基板1609とを有している。
パネル1601と、第1の拡散板1602と、プリズムシート1603と、第2の拡散板1604と、導光板1605と、反射板1606とは、順に積層されている。光源1607は導光板1605の端部に設けられており、導光板1605内部に拡散された光源1607からの光は、第1の拡散板1602、プリズムシート1603及び第2の拡散板1604によって、対向基板側から均一にパネル1601に照射される。
なお、本実施例では、第1の拡散板1602と第2の拡散板1604とを用いているが、拡散板の数はこれに限定されず、単数であっても3以上であっても良い。そして、拡散板は導光板1605とパネル1601の間に設けられていれば良い。よって、プリズムシート1603よりもパネル1601に近い側にのみ拡散板が設けられていても良いし、プリズムシート1603よりも導光板1605に近い側にのみ拡散板が設けられていても良い。
またプリズムシート1603は、図8に示した断面が鋸歯状の形状に限定されず、導光板1605からの光をパネル1601側に集光できる形状を有していれば良い。
回路基板1609には、パネル1601に入力される各種信号を生成もしくは処理する回路、パネル1601から出力される各種信号を処理する回路などが設けられている。そして図8では、回路基板1609とパネル1601とが、FPC(Flexible Printed Circuit)1611を介して接続されている。なお、上記回路は、COG(Chip ON Glass)法を用いてパネル1601に接続されていても良いし、上記回路の一部がFPC1611にCOF(Chip ON Film)法を用いて接続されていても良い。
図8では、光源1607の駆動を制御する、制御系の回路が回路基板1609に設けられており、該制御系の回路と光源1607とがFPC1610を介して接続されている例を示している。ただし、上記制御系の回路はパネル1601の中に形成されていても良く、この場合はパネル1601と光源1607とがFPCなどにより接続されるようにする。
なお、図8は、導光部1605の端部に光源1607が配置されるエッジライト型の光源を例示しているが、本発明の表示パネルは光源1607がパネル1601の直下に配置される直下型であっても良い。
例えば、被検出物である指1612をTFT基板側からパネル1601に近づけると、バックライト1608からの光が、パネル1601を通過し、その一部が指1612において反射し、再びパネル1601に入射する。各色に対応する光源1607を順に点灯させ、色ごとに撮像データの取得を行うことで、被検出物である指1612のカラーの撮像データを得ることが出来る。
本実施例は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
本発明の一態様に係る表示パネルは、非接触で被検出物の動きを検出することで、データ入力を行うことができるという特徴を有している。よって、本発明の一態様に係る表示パネルを用いた電子機器は、表示パネルをその構成要素に追加することにより、より高機能のアプリケーションを搭載することができるようになる。本発明の表示パネルは、表示装置、ノート型パーソナルコンピュータ、記録媒体を備えた画像再生装置(代表的にはDVD:Digital Versatile Disc等の記録媒体を再生し、その画像を表示しうるディスプレイを有する装置)に用いることができる。その他に、本発明の一態様に係る表示パネルを用いることができる電子機器として、携帯電話、携帯型ゲーム機、携帯情報端末、電子書籍、ビデオカメラ、デジタルスチルカメラ、ゴーグル型ディスプレイ(ヘッドマウントディスプレイ)、ナビゲーションシステム、音響再生装置(カーオーディオ、デジタルオーディオプレイヤー等)、複写機、ファクシミリ、プリンター、プリンター複合機、現金自動預け入れ払い機(ATM)、自動販売機などが挙げられる。これら電子機器の具体例を図9に示す。
図9(A)は表示装置であり、筐体5001、表示部5002、支持台5003等を有する。本発明の一態様に係る表示パネルは、表示部5002に用いることができる。表示部5002に本発明の一態様に係る表示パネルを用いることで、高分解能である撮像データの取得を行うことができ、より高機能のアプリケーションが搭載された表示装置を提供することができる。なお、表示装置には、パーソナルコンピュータ用、TV放送受信用、広告表示用などの全ての情報表示用表示装置が含まれる。
図9(B)は携帯情報端末であり、筐体5101、表示部5102、スイッチ5103、操作キー5104、赤外線ポート5105等を有する。本発明の一態様に係る表示パネルは、表示部5102に用いることができる。表示部5102に本発明の一態様に係る表示パネルを用いることで、高分解能である撮像データの取得を行うことができ、より高機能のアプリケーションが搭載された携帯情報端末を提供することができる。
図9(C)は現金自動預け入れ払い機であり、筐体5201、表示部5202、硬貨投入口5203、紙幣投入口5204、カード投入口5205、通帳投入口5206等を有する。本発明の一態様に係る表示パネルは、表示部5202に用いることができる。表示部5202に本発明の一態様に係る表示パネルを用いることで、高分解能である撮像データの取得を行うことができ、より高機能のアプリケーションが搭載された現金自動預け入れ払い機を提供することができる。そして、本発明の一態様に係る表示パネルを用いた現金自動預け入れ払い機は、指紋、顔、手形、掌紋及び手の静脈の形状、虹彩等の、生体認証に用いられる生体情報の読み取りを、より高精度で行うことが出来る。よって、生体認証における、本人であるにもかかわらず本人ではないと誤認識してしまう本人拒否率と、他人であるにもかかわらず本人と誤認識してしまう他人受入率とを、低く抑えることができる。
図9(D)は携帯型ゲーム機であり、筐体5301、筐体5302、表示部5303、表示部5304、マイクロホン5305、スピーカー5306、操作キー5307、スタイラス5308等を有する。本発明の一態様に係る表示パネルは、表示部5303または表示部5304に用いることができる。表示部5303または表示部5304に本発明の一態様に係る表示パネルを用いることで、高分解能である撮像データの取得を行うことができ、より高機能のアプリケーションが搭載された携帯型ゲーム機を提供することができる。なお、図9(D)に示した携帯型ゲーム機は、2つの表示部5303と表示部5304とを有しているが、携帯型ゲーム機が有する表示部の数は、これに限定されない。
なお、指紋認証装置などのように表示パネルを必須としない装置にも、本発明を適用することが可能である。当該装置は、フォトセンサが設けられた入力部を有し、入力部に接触又は接近する被検出物をフォトセンサにより検出することができる。
本実施例は、他の実施の形態又は実施例と適宜組み合わせて実施することが可能である。
本実施例では、電子機器の一例について、図13を用いて説明する。
図13は、ライティングボード(黒板、ホワイトボード等)である。本体9001のライティング部9101に、本発明の一態様に係る表示パネル等の入力部を設けることができる。
ここで、ライティング部9101の表面には、マーカー等を用いて自由に書き込みができる。
なお、定着剤が含まれていないマーカー等を用いれば文字の消去が容易である。
また、マーカーのインクを落としやすくするため、ライティング部9101の表面は十分な平滑性を有していると良い。
例えば、ライティング部9101の表面がガラス基板等であれば平滑性は十分である。
また、ライティング部9101の表面に透明な合成樹脂シート等を貼り付けてもよい。
合成樹脂としては例えばアクリル等を用いると好ましい。この場合、合成樹脂シートの表面を平滑にしておくと好ましい。
また、ライティング部9101が特定の表示を行う際に、表面に絵や文字を記載することができる。そして、ライティング部9101は、記載された絵や文字と表示された画像とを合成することができる。
更に、フォトセンサを用いているため、記載した後、時間が経った場合でもいつでもセンシングが可能であるが、抵抗膜方式、静電容量方式等を用いた場合、記載と同時にしかセンシングをすることができない。
本実施例は、他の実施の形態又は実施例と適宜組み合わせて実施することができる。
100 表示パネル
101 画素回路
102 表示素子制御回路
103 フォトセンサ制御回路
104 画素
105 表示素子
106 フォトセンサ
107 表示素子駆動回路
108 表示素子駆動回路
109 フォトセンサ読み出し回路
110 フォトセンサ駆動回路
201 トランジスタ
202 保持容量
203 液晶素子
204 フォトダイオード
205 トランジスタ
206 トランジスタ
207 ゲート信号線
208 フォトダイオードリセット信号線
209 ゲート信号線
210 ビデオデータ信号線
211 フォトセンサ出力信号線
212 フォトセンサ基準信号線
213 ゲート信号線
300 フォトセンサ読み出し回路
301 p型トランジスタ
302 保持容量
303 プリチャージ信号線
401 信号
402 信号
403 信号
404 信号
405 信号
1001 基板
1002 フォトダイオード
1003 トランジスタ
1004 保持容量
1005 液晶素子
1006 半導体膜
1007 画素電極
1008 液晶
1009 対向電極
1010 導電膜
1011 配向膜
1012 配向膜
1013 基板
1014 カラーフィルタ
1015 遮蔽膜
1016 スペーサー
1017 偏光板
1018 偏光板
1019 導電膜
1020 矢印
1021 被検出物
1022 矢印
1601 パネル
1602 第1の拡散板
1603 プリズムシート
1604 第2の拡散板
1605 導光板
1606 反射板
1607 光源
1608 バックライト
1609 回路基板
1610 FPC
1611 FPC
1612 指
2015 遮蔽膜
2019 遮蔽膜
2020 矢印
2022 矢印
5001 筐体
5002 表示部
5003 支持台
5101 筐体
5102 表示部
5103 スイッチ
5104 操作キー
5105 赤外線ポート
5201 筐体
5202 表示部
5203 硬貨投入口
5204 紙幣投入口
5205 カード投入口
5206 通帳投入口
5301 筐体
5302 筐体
5303 表示部
5304 表示部
5305 マイクロホン
5306 スピーカー
5307 操作キー
5308 スタイラス
9001 本体
9101 ライティング部

Claims (4)

  1. 第1のフォトセンサが配置された光検出部と、第2のフォトセンサが配置されたエリアセンサを有する表示パネルと、
    画像処理部とを有し、
    光検出部は、前記表示パネルに投影される前記被検出物の影を検出する機能を有し、
    前記被検出物の影は、前記被検出物が表示パネルに接近したときに、前記表示装置周囲の光が前記被検出物で遮られることで形成されたものであり、
    前記画像処理部は、前記被検出物の影の位置を検出する第1の機能と、前記影の動きを検出する第2の機能とを有し、
    前記第1の機能は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち、前記第1のフォトセンサで取得した光の量が、所定の値より小さい画素を最も多く含む領域の位置データを前記被検出物の影の位置データとして取得する機能であることを特徴とする表示装置。
  2. 第1のフォトセンサが配置された光検出部と、第2のフォトセンサが配置されたエリアセンサを有する表示パネルと、
    画像処理部とを有し、
    前記光検出部は、前記表示パネルに投影される前記被検出物の影を検出する機能を有し、
    前記被検出物の影は、前記被検出物が表示パネルに接近したときに、前記表示装置周囲の光が前記被検出物で遮られることで形成されたものであり、
    前記画像処理部は、前記被検出物の影の位置を検出する第1の機能と、前記影の動きを検出する第2の機能とを有し、
    前記第1の機能は、前記表示パネルを複数の領域に分割し、前記複数の領域のうち前記第1のフォトセンサで取得した光の量が、所定の値より小さい画素を最も多く含む領域の位置データを前記被検出物の影の位置データとして取得する機能であり、
    前記第2の機能は、前記被検出物の影の位置データを連続的に取得し、連続的に取得された前記位置データを比較することで、前記被検出物の影の動きを検出する機能であることを特徴とする表示装置。
  3. 請求項1又は2において、
    前記第2のフォトセンサの数は、前記第1のフォトセンサの数より多いことを特徴とする表示装置。
  4. 請求項1乃至のいずれか一において、
    前記第1のフォトセンサの周囲には、前記第2のフォトセンサが配置されていることを特徴とする表示装置。
JP2010232285A 2009-10-26 2010-10-15 表示装置 Expired - Fee Related JP5710932B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010232285A JP5710932B2 (ja) 2009-10-26 2010-10-15 表示装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009245530 2009-10-26
JP2009245530 2009-10-26
JP2010232285A JP5710932B2 (ja) 2009-10-26 2010-10-15 表示装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015043509A Division JP6117836B2 (ja) 2009-10-26 2015-03-05 表示装置

Publications (3)

Publication Number Publication Date
JP2011118876A JP2011118876A (ja) 2011-06-16
JP2011118876A5 JP2011118876A5 (ja) 2013-11-28
JP5710932B2 true JP5710932B2 (ja) 2015-04-30

Family

ID=43897996

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2010232285A Expired - Fee Related JP5710932B2 (ja) 2009-10-26 2010-10-15 表示装置
JP2015043509A Expired - Fee Related JP6117836B2 (ja) 2009-10-26 2015-03-05 表示装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2015043509A Expired - Fee Related JP6117836B2 (ja) 2009-10-26 2015-03-05 表示装置

Country Status (7)

Country Link
US (1) US20110096009A1 (ja)
EP (1) EP2494427A4 (ja)
JP (2) JP5710932B2 (ja)
KR (2) KR101751902B1 (ja)
CN (1) CN102612677B (ja)
TW (1) TWI517008B (ja)
WO (1) WO2011052343A1 (ja)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI433310B (zh) * 2009-07-02 2014-04-01 Au Optronics Corp 有機發光二極體顯示裝置
KR101719587B1 (ko) * 2010-10-29 2017-03-27 삼성디스플레이 주식회사 터치 스크린 기능을 구비한 유기전계발광 표시장치
KR101843559B1 (ko) * 2010-11-05 2018-03-30 가부시키가이샤 한도오따이 에네루기 켄큐쇼 촬상 기능을 구비한 표시 장치 및 그 구동 방법
JP2012256020A (ja) 2010-12-15 2012-12-27 Semiconductor Energy Lab Co Ltd 半導体装置及びその駆動方法
KR102021908B1 (ko) * 2011-05-03 2019-09-18 삼성전자주식회사 광터치 스크린 장치 및 그 구동 방법
JP6057407B2 (ja) * 2012-02-22 2017-01-11 学校法人東京電機大学 タッチ位置入力装置及びタッチ位置入力方法
US9817520B2 (en) * 2013-05-20 2017-11-14 Semiconductor Energy Laboratory Co., Ltd. Imaging panel and imaging device
EP2821888B1 (en) * 2013-07-01 2019-06-12 BlackBerry Limited Gesture detection using ambient light sensors
US9342671B2 (en) 2013-07-01 2016-05-17 Blackberry Limited Password by touch-less gesture
US9489051B2 (en) 2013-07-01 2016-11-08 Blackberry Limited Display navigation using touch-less gestures
US9398221B2 (en) 2013-07-01 2016-07-19 Blackberry Limited Camera control using ambient light sensors
US9423913B2 (en) 2013-07-01 2016-08-23 Blackberry Limited Performance control of ambient light sensors
US9323336B2 (en) 2013-07-01 2016-04-26 Blackberry Limited Gesture detection using ambient light sensors
US9367137B2 (en) 2013-07-01 2016-06-14 Blackberry Limited Alarm operation by touch-less gesture
US9256290B2 (en) 2013-07-01 2016-02-09 Blackberry Limited Gesture detection using ambient light sensors
US9405461B2 (en) 2013-07-09 2016-08-02 Blackberry Limited Operating a device using touchless and touchscreen gestures
US9304596B2 (en) 2013-07-24 2016-04-05 Blackberry Limited Backlight for touchless gesture detection
US9465448B2 (en) 2013-07-24 2016-10-11 Blackberry Limited Backlight for touchless gesture detection
US9194741B2 (en) 2013-09-06 2015-11-24 Blackberry Limited Device having light intensity measurement in presence of shadows
GB2525605B (en) * 2014-04-28 2018-10-24 Flexenable Ltd Method of bonding flexible printed circuits
US9891743B2 (en) 2014-05-02 2018-02-13 Semiconductor Energy Laboratory Co., Ltd. Driving method of an input device
JP6314040B2 (ja) * 2014-06-10 2018-04-18 日本電産サンキョー株式会社 カード挿入部およびカードリーダ
JP2016157072A (ja) * 2015-02-26 2016-09-01 株式会社ジャパンディスプレイ 表示装置
CN104867964B (zh) * 2015-05-18 2019-02-22 京东方科技集团股份有限公司 阵列基板、其制造方法以及有机发光二极管显示装置
WO2016192076A1 (en) * 2015-06-04 2016-12-08 Huawei Technologies Co., Ltd. Input device, user equipment and method for determining movement
CN107683109B (zh) * 2015-06-25 2021-06-08 费森尤斯医疗控股股份有限公司 直接光差分测量系统
CN105044963B (zh) * 2015-08-11 2018-03-30 深圳市华星光电技术有限公司 显示面板及其制作方法
CN106557212A (zh) * 2015-09-30 2017-04-05 南昌欧菲光科技有限公司 触摸显示装置
CN105334657B (zh) 2015-11-26 2019-12-03 小米科技有限责任公司 液晶显示组件及电子设备
CN105334659B (zh) * 2015-11-26 2019-01-18 小米科技有限责任公司 液晶显示组件及电子设备
CN106056099A (zh) 2016-06-23 2016-10-26 京东方科技集团股份有限公司 一种指纹识别显示面板及显示装置
KR102599536B1 (ko) * 2017-01-26 2023-11-08 삼성전자 주식회사 생체 센서를 갖는 전자 장치
CN107065301A (zh) * 2017-04-13 2017-08-18 上海与德科技有限公司 背光板、显示模组及电子设备
CN107329620B (zh) * 2017-07-03 2022-11-18 京东方科技集团股份有限公司 一种悬浮触控显示装置
CN107479760B (zh) * 2017-09-22 2021-09-24 京东方科技集团股份有限公司 阵列基板及其制作方法、显示面板和显示系统
US20190172385A1 (en) * 2017-12-01 2019-06-06 Innolux Corporation Display device and detecting method for signal from subject using the same
TWI652525B (zh) 2017-12-22 2019-03-01 友達光電股份有限公司 顯示裝置
US10598936B1 (en) * 2018-04-23 2020-03-24 Facebook Technologies, Llc Multi-mode active pixel sensor
CN110174974B (zh) 2018-07-25 2020-07-24 京东方科技集团股份有限公司 触控电路、触控装置和触控方法
CN110134034A (zh) * 2019-03-26 2019-08-16 华为技术有限公司 一种光传感器状态控制方法及电子设备
US10817018B1 (en) 2019-04-29 2020-10-27 Apple Inc. Electronic devices with ambient light sensors and emissive displays
CN110244482B (zh) * 2019-05-21 2022-07-19 华为技术有限公司 一种显示组件、显示屏和电子设备
CN113721792A (zh) * 2021-09-08 2021-11-30 吴建国 一种led背光板结构的显示触控一体非接触虚拟触摸屏
WO2023223376A1 (ja) 2022-05-16 2023-11-23 三菱電機株式会社 人検知装置、人検知システム、人検知方法、及び人検知プログラム

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6747638B2 (en) * 2000-01-31 2004-06-08 Semiconductor Energy Laboratory Co., Ltd. Adhesion type area sensor and display device having adhesion type area sensor
JP4444488B2 (ja) * 2000-12-08 2010-03-31 キヤノン株式会社 レンズ及び撮像システム
US7006080B2 (en) * 2002-02-19 2006-02-28 Palm, Inc. Display system
JP4257221B2 (ja) * 2003-03-31 2009-04-22 東芝松下ディスプレイテクノロジー株式会社 表示装置および情報端末装置
WO2005104234A1 (ja) * 2004-04-19 2005-11-03 Hitachi, Ltd. 撮影機能一体型表示装置
JP2007011152A (ja) * 2005-07-01 2007-01-18 Toshiba Matsushita Display Technology Co Ltd 平面表示装置
JP4826174B2 (ja) * 2005-08-24 2011-11-30 ソニー株式会社 表示装置
JP4669768B2 (ja) * 2005-09-30 2011-04-13 富士フイルム株式会社 解像度可変型x線撮像装置及びx線ct装置
GB2439118A (en) * 2006-06-12 2007-12-19 Sharp Kk Image sensor and display
JP4270248B2 (ja) * 2006-08-31 2009-05-27 ソニー株式会社 表示撮像装置、情報入力装置、物体検出プログラムおよび物体の検出方法
JP4270247B2 (ja) * 2006-08-31 2009-05-27 ソニー株式会社 表示撮像装置、物体検出プログラムおよび物体の検出方法
US8610670B2 (en) * 2006-08-31 2013-12-17 Japan Display West Inc. Imaging and display apparatus, information input apparatus, object detection medium, and object detection method
US8094129B2 (en) * 2006-11-27 2012-01-10 Microsoft Corporation Touch sensing using shadow and reflective modes
US7973778B2 (en) * 2007-04-16 2011-07-05 Microsoft Corporation Visual simulation of touch pressure
TWI341406B (en) * 2007-07-23 2011-05-01 Au Optronics Corp Diaply panel and its application
KR100882679B1 (ko) * 2007-09-14 2009-02-06 삼성모바일디스플레이주식회사 발광표시장치 및 그의 제조방법
JP2009069730A (ja) * 2007-09-18 2009-04-02 Seiko Epson Corp 電気光学装置、電子機器及び指示物体の検出方法
JP5301240B2 (ja) * 2007-12-05 2013-09-25 株式会社ジャパンディスプレイウェスト 表示装置
JP2009181085A (ja) * 2008-02-01 2009-08-13 Lg Display Co Ltd 液晶表示装置
US20100283765A1 (en) * 2008-03-03 2010-11-11 Sharp Kabushiki Kaisha Display device having optical sensors
JP4623110B2 (ja) * 2008-03-10 2011-02-02 ソニー株式会社 表示装置および位置検出方法
US8358288B2 (en) * 2008-03-21 2013-01-22 Sharp Kabushiki Kaisha Touch-sensor-provided liquid crystal display device
KR101454241B1 (ko) * 2008-06-19 2014-10-23 엘지전자 주식회사 휴대 단말기
US8130278B2 (en) * 2008-08-01 2012-03-06 Omnivision Technologies, Inc. Method for forming an improved image using images with different resolutions
KR20100038046A (ko) * 2008-10-02 2010-04-12 가부시키가이샤 한도오따이 에네루기 켄큐쇼 터치 패널 및 터치 패널의 구동방법
US8154532B2 (en) * 2008-10-15 2012-04-10 Au Optronics Corporation LCD display with photo sensor touch function
KR100975869B1 (ko) * 2008-10-17 2010-08-13 삼성모바일디스플레이주식회사 터치 포인트 검출 방법 및 장치
US8253713B2 (en) * 2008-10-23 2012-08-28 At&T Intellectual Property I, L.P. Tracking approaching or hovering objects for user-interfaces
JP2010122936A (ja) * 2008-11-20 2010-06-03 Seiko Epson Corp センシング回路、表示装置および電子機器
WO2010083335A1 (en) * 2009-01-14 2010-07-22 Perceptive Pixel Inc. Touch-sensitive display
JP4699536B2 (ja) * 2009-03-06 2011-06-15 シャープ株式会社 位置検出装置、制御方法、制御プログラムおよび記録媒体
US8884925B2 (en) * 2009-04-05 2014-11-11 Radion Engineering Co. Ltd. Display system and method utilizing optical sensors
US20100295821A1 (en) * 2009-05-20 2010-11-25 Tom Chang Optical touch panel
TWI507934B (zh) * 2009-11-20 2015-11-11 Semiconductor Energy Lab 顯示裝置
WO2011111504A1 (en) * 2010-03-08 2011-09-15 Semiconductor Energy Laboratory Co., Ltd. Electronic device and electronic system
US20130197736A1 (en) * 2012-01-30 2013-08-01 Google Inc. Vehicle control based on perception uncertainty

Also Published As

Publication number Publication date
WO2011052343A1 (en) 2011-05-05
KR101843561B1 (ko) 2018-03-30
TWI517008B (zh) 2016-01-11
JP2015158918A (ja) 2015-09-03
EP2494427A4 (en) 2015-09-02
JP6117836B2 (ja) 2017-04-19
JP2011118876A (ja) 2011-06-16
EP2494427A1 (en) 2012-09-05
CN102612677B (zh) 2015-09-02
KR20120098737A (ko) 2012-09-05
TW201135563A (en) 2011-10-16
KR20170075027A (ko) 2017-06-30
US20110096009A1 (en) 2011-04-28
KR101751902B1 (ko) 2017-06-28
CN102612677A (zh) 2012-07-25

Similar Documents

Publication Publication Date Title
JP6117836B2 (ja) 表示装置
JP5771262B2 (ja) 表示装置
JP5947363B2 (ja) フォトセンサ
JP5679530B2 (ja) 電子機器
JP5828928B2 (ja) タッチパネル
JP2011123876A (ja) 半導体装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131010

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131010

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140610

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140730

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150305

R150 Certificate of patent or registration of utility model

Ref document number: 5710932

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees