具体实施方式
下面,将基于附图来描述本发明的实施方式。
<显示装置的概述>
图1是根据本实施方式的显示装置的示意性构成图。具体地,作为本实施方式的显示装置的显示面板10包括:显示区(传感器区)11;选择开关12,执行用于显示的沿H(水平)方向的扫描;V驱动器13,执行用于显示的沿V(垂直)方向的扫描;显示驱动器14;传感器驱动器15;以及多个光电传感器PS。
显示区(传感器区)11调制来自背光(图中未示出)的光,并输出显示光。多个光电传感器PS被设置在显示区11的周边,并且被传感器驱动器15驱动。显示驱动器14和传感器驱动器15被集中在集成电路中,并且作为芯片组件被安装在基板上。
选择开关12基于由显示驱动器14供给的用于显示驱动的显示信号和控制时钟与V驱动器13一起线顺序地驱动显示区11中的各个像素的液晶元件。
在显示区11周围,设置多个光电传感器PS。例如,光电传感器PS由二极管构造或晶体管构造形成,并且在与在显示区11中形成的驱动元件相同的基板上形成。
显示面板10经由电缆被连接至外部接口(例如,显示器接口、CPU接口)和背光控制装置,并且基于来自这些单元的控制信号和视频信号被驱动。
尽管在图1所示的实例中对应于显示区11的拐角处提供了四个光电传感器PS,但是提供至少两个光电传感器就足够了。这两个光电传感器中的任一个用作检测外部光的光量的第一光电传感器,而另一个用作检测当光被遮挡时生成的暗电流的第二光电传感器。在本实施方式中,控制单元(背光控制装置)基于通过这些光电传感器进行的检测结果来控制背光的光量。
图2是根据本实施方式的另一显示装置的示意性构成图。除了光电传感器PS的布置不同之外,作为图2所示的显示装置的显示面板10与上述图1所示的显示面板10相同。具体地,在图2所示的显示面板10中,光电传感器PS设置在显示区11中,并且通过设置在显示区11中的光电传感器PS来检测外部光的光量。
尽管在图2所示的实例中在显示区11中提供了四个光电传感器PS,但是提供至少两个光电传感器就足够了。在这两个光电传感器中,一个光电传感器PS被设置在显示区11中,而另一个光电传感器PS被设置在显示区11中或设置在显示区11的周边。
设置在显示区11中的光电传感器PS用作检测外部光的光量的第一光电传感器,并且设置在显示区11或显示区11的周边的另一个传感器PS用作检测当光被遮挡时生成的暗电流的第二光电传感器。在本实施方式中,控制单元(背光控制装置)基于通过这些光电传感器进行的检测结果来控制背光的光量。
下面,将描述上述显示装置中的两个光电传感器的具体应用实例。
<第一实施方式:用于消除比较器特性的个体差异的影响的构造>
本实施方式具有下面的电路构造。具体地,基于执行用于作为在相同基板上的显示区附近或显示区中所形成的光电传感器的检测外部光的光量的第一光电传感器和检测当光被遮挡时产生的暗电流的第二光电传感器的输出的运算操作的构造,通过在第一光电传感器与第二光电传感器之间切换通过使用相同的比较器来保持检测结果,并且通过差分计算电路来获得这些检测结果之间的差值。
在图23所示的常规例中,暗电流被自动去除。然而,当使用图22的方法时,输出侧上的暗电流的去除是必要的。为了去除暗电流,设置了两个光电传感器,并且一个传感器通过滤色片(黑色)来遮光,以便防止被光辐射。被遮光的传感器的输出仅对应于暗电流,因此,仅通过计算与被光辐射的传感器的输出的差值就可以算出光电流。
然而,获得具有LTPS的常规结构涉及比较器的个体差异很大以及由此差异引起输出升高的问题。
为了解决该问题,在本实施方式中,如图3所示,转换开关SW1和SW2被分别连接至调光侧(dimming side)和遮光侧上的光电传感器PS1和PS2的输出端,并且通过使用相同的比较器102以时间分割的方式读出检测结果。这使得可以消除比较器102的误差,并且实现减小电路面积的效果。
<根据第一实施方式的显示装置的显示控制方法>
如上所述,在根据本实施方式的显示装置中设置检测外部光的光量的第一光电传感器PS1和检测当光被遮挡时生成的暗电流的第二光电传感器PS2,并且利用该显示装置中的一个比较器102来执行通过这些光电传感器进行的检测结果与预定参考值之间的比较。为此,执行第一光电传感器PS1与第二光电传感器PS2之间的切换,并且以时间分割的方式操作比较器102。
首先,断开第一光电传感器PS1的转换开关SW1,而接通第二光电传感器PS2的转换开关SW2。在这种状态下,第二光电传感器PS2的复位被接通/断开一次,并且开始检测。由于为第二光电传感器PS2提供了黑色滤色片,所以这种检测相当于当光被遮挡时产生的暗电流的测量。检测结果被传送至比较器102的一个输入端。向比较器102的另一个输入端输入当选择第二光电传感器PS2时所使用的预定参考值。
随后,对从检测开始至第二光电传感器PS2的检测值超过预定参考值的定时的时间(例如,步长数)进行计数,并存储在差分计算电路104的存储器中。
随后,断开第二光电传感器PS2的转换开关SW2,而接通第一光电传感器PS1的转换开关SW1。在这种状态下,第一光电传感器PS1的复位被接通/断开一次,并且开始检测。第一光电传感器PS1可以接收环境光,因此,该检测相当于光辐射时产生的电流的测量。检测结果被传送至比较器102的一个输入端。向比较器102的另一个输入端输入当选择第一光电传感器PS1时所使用的预定参考值。
随后,对从检测开始至第一光电传感器PS1的检测值超过预定参考值的定时的时间(例如,步长数)进行计数,并存储在差分计算电路104的存储器中。
随后,读出在差分计算电路104的存储器中所存储的通过第一光电传感器PS1进行的检测结果和通过第二光电传感器PS2进行的检测结果,并且差分计算电路104执行从通过第一光电传感器PS1进行的检测结果中减去通过第二光电传感器PS2进行的检测结果的操作。这允许实现通过从在光辐射时获得的检测结果中减去对应于暗电流的分量(component)而产生的结果。基于该计算结果,照射到显示区11(参见图1)上的背光的光量通过背光控制装置来控制。例如,当环境光量较大时,背光的光量增加,而当环境光的光量较小时,背光的光量降低。
以这种方式,通过使用一个比较器102来比较关于两个光电传感器PS1和PS2的检测结果,并且通过所述值的使用来执行计算。因此,可以精确地进行光量检测,而不会受比较器102的特性变化的影响。
<第二实施方式:用于消除光电传感器特性的个体差异影响的构造>
图4是用于说明根据第二实施方式的显示装置的主要部分的电路图。该显示装置与第一实施方式(参见图3)相同,其中,显示装置包括:第一光电传感器PS1,检测外部光的光量;第二光电传感器PS2,检测当光被遮挡时产生的暗电流;转换开关SW1和SW2,用于在第一光电传感器PS1与第二光电传感器PS2之间进行切换;以及比较器102。然而,该显示装置与第一实施方式不同,其中,连接至第一光电传感器PS1和第二光电传感器PS2共用的输出线的附加电容C是可变的,并且比较器102的参考值是可变的。
本实施方式的显示装置中的附加电容C可以在当选择第一光电传感器PS1时与当选择第二光电传感器PS2时之间进行切换。此外,本实施方式的显示装置中的比较器102的参考值也可以在当选择第一光电传感器PS1时与当选择第二光电传感器PS2时之间进行切换。
在利用第一光电传感器PS1和第二光电传感器PS2的光量检测中,在第一光电传感器PS1与第二光电传感器PS2之间的元件特性的个体差异的存在引起光电传感器的输出的精度降低。
为了解决该问题,本实施方式采用可以改变如上所述的附加电容C和比较器102的参考值的构造,作为用于调节光电传感器PS1和PS2之间的元件个体差异的方案。
在这样的构造中,可以通过执行关于显示装置的初始校准及其值的反馈来消减(absorbed)光电传感器PS1和PS2之间的元件个体差异。例如,在初始校准中(例如,在产品发货时的校准中),调节附加电容C或参考值,使得当通过第一光电传感器PS1检测暗电流时所获得的检测结果与当通过第二光电传感器PS2检测暗电流时所获得的检测结果一致。
具体地,在调节附加电容C的情况下,最初,将比较器102的参考值设定为恒定值ref1,并且通过第一光电传感器PS1来检测当采用某个附加电容C(在该实例中,称作C1)时产生的暗电流,并且获得了通过比较器102进行的比较结果。
随后,如同先前的检测一样,使用比较器102的参考值ref1,通过第二光电传感器PS2来检测暗电流,并且获得了通过比较器102进行的比较结果。在该检测中,改变附加电容C,从而确定提供与先前利用第一光电传感器PS1所检测的比较结果相一致的比较结果的附加电容C(在该实例中,称作C2)。
此外,在调节参考值的情况下,最初,将附加电容C固定为C1,并且将比较器102的参考值设定为恒定值ref1。随后,通过第一光电传感器PS1来检测暗电流,并且获得了通过比较器102进行的比较结果。随后,如先前的检测一样,使用附加电容C 1,通过第二光电传感器PS2来检测暗电流,并且获得了通过比较器102进行的比较结果。在该检测中,改变比较器102的参考值,从而确定提供与先前利用第一光电传感器PS1所检测的比较结果相一致的比较结果的参考值(在该实例中,称作ref2)。
随后,存储与第一光电传感器PS1对应的附加电容C 1或参考值ref1以及与第二光电传感器PS2对应的附加电容C2或参考值ref2,并且在实际光量测量中使用这些值。
<通过根据第二实施方式的显示装置进行的显示控制方法>
如上所述,在根据本实施方式的显示装置中设置检测外部光的光量的第一光电传感器PS1和检测当光被遮挡时产生的暗电流的第二光电传感器PS2,并且利用该显示装置中的一个比较器102来进行通过这些光电传感器进行的检测结果与预定参考值之间的比较。为此,通过转换开关SW1和SW2来进行第一光电传感器PS1与第二光电传感器PS2之间的切换,并且以时间分割的方式来操作比较器102。此外,在对应于第一光电传感器PS1的附加电容C1或参考值ref1以及对应于第二光电传感器PS2的附加电容C2或参考值ref2被预先存储的前提下,通过在这些值之间的切换来执行测量。
首先,断开第一光电传感器PS1的转换开关SW1,而接通第二光电传感器PS2的转换开关SW2。此外,对被预先存储并对应于第二光电传感器PS2的附加电容C2或参考值ref2进行设定。在这种状态下,第二光电传感器PS2的复位被接通/断开一次,并且开始检测。由于为第二光电传感器PS2提供黑色滤色片,所以该检测相当于当光被遮挡时产生的暗电流的测量。将检测结果传送至比较器102的一个输入端。向比较器102的另一个输入端输入当选择第二光电传感器PS2时所使用的预定参考值ref2。
随后,对从检测开始至第二光电传感器的检测值超过预定参考值ref2的定时的时间(例如,步长数)进行计数,并存储在差分计算电路104的存储器中。
随后,断开第二光电传感器PS2的转换开关SW2,而接通第一光电传感器PS1的转换开关SW1。此外,对被预先存储并对应于第一光电传感器PS1的附加电容C1或参考值ref1进行设定。在这种状态下,第一光电传感器PS1的复位被接通/断开一次,并且开始检测。第一光电传感器PS1可以接收环境光,因此,该检测相当于光辐射时产生的电流的测量。将检测结果传送至比较器102的一个输入端。向比较器102的另一个输入端输入当选择第一光电传感器PS1时所使用的预定参考值ref1。
随后,对从检测开始至第一光电传感器PS1的检测值超过预定参考值ref1的定时的时间(例如,步长数)进行计数,并存储在差分计算电路104的存储器中。
随后,读出在差分计算电路104的存储器中存储的通过第一光电传感器PS1进行的检测结果和通过第二光电传感器PS2进行的检测结果,并且差分计算电路104(参见图3)执行从通过第一光电传感器PS1进行的检测结果中减去通过第二光电传感器PS2进行的检测结果的操作。这允许实现由从在光辐射时所获得的检测结果中减去对应于暗电流的分量而产生的结果。基于该计算结果,通过背光控制装置来控制照射到显示区11(参见图1)上的背光的光量。例如,当环境光的光量较大时,背光的光量增加,而当环境光的光量较小时,背光的光量降低。
以这种方式,在为两个光电传感器PS1和PS2中的每一个设定附加电容C1、C2或参考值ref1、ref2后,执行检测,并且通过一个比较器102来比较检测结果。因此,可以精确地进行光量检测,而不受两个光电传感器PS1和PS2之间的特性变化以及比较器102特性变化的影响。
作为用于抑制两个光电传感器PS1和PS1之间的特性变化的构造,除了采用附加电容C或参考值的切换的上述构造之外,可以是下面的构造。
(1)具有改变两个光电传感器(或其中任一个)的元件尺寸的功能并且包括能够外部控制这些光电传感器的元件尺寸的电路的构造。图5是示出了能够改变第二光电传感器的元件尺寸的构造的电路图。并行提供多个第二光电传感器PS2,并且可以通过开关来选择使用它们中的多少个光电传感器。预先在初始校准中确定该选择,并且将其应用于利用第二光电传感器PS2的光量(暗电流)的检测。所选择的元件尺寸可以为预先在非易失性存储器中记录的值。此外,代替开关可以提供保险丝,并且保险丝可以依赖于所选择的元件尺寸而被熔化。
(2)包括在与显示区相同的基板上形成的光电传感器并且可以依赖于光电传感器的元件特性来改变光电传感器元件的电源电压的构造。
(3)具有改变在两个光电传感器(或其中任一个)的复位时被供给至光电传感器的电压的功能并且包括能够外部控制被供给至光电传感器的电压的电路的构造。在初始校准中预先获得复位时所供给的电压,并且将其应用于使用光电传感器的光量(暗电流)的检测。
<第三实施方式:用于避免依赖于温度和外部光照度的分辨率的降低的构造>
本实施方式为一种使用具有图4和图5所示的构造的显示装置来避免依赖于温度和外部光照度的光电传感器的分辨率降低的方案。
如图6所示,LTPS具有作为暗电流(晶体管泄漏)特性的急剧的温度特性。因此,在图4和图5所示的显示装置的构造中,在将流过光电传感器元件的电流充入到电容中并通过比较器将其作为时间输出的传感器电路的情况下,如果暗电流在更高的温度侧增大,则充入到电容中的电荷增多。这会导致输出时间缩短从而检测分辨率降低的问题。
为了解决该问题,在本实施方式中,利用了在图4和图5所示的显示装置中使用的、并且其电容值可以从外部选择的附加电容C,从而避免依赖于温度及环境光照度的光电传感器的分辨率的降低。
具体地,在当温度很高或照度很高时电荷被快速累积在附加电容C中并且分辨率降低的情况下,附加电容C基于来自外部的控制而被增大,从而电荷充入附加电容C中的时间被延长,因此提高了光电传感器的分辨率。相反,当由于低温或低照度而引起电流很小时,通过减小附加电容C来控制电荷充入附加电容C中的时间,使得测量时间被缩短。
在上述通过第二光电传感器PS2进行的暗电流检测以及通过第一光电传感器PS1进行的环境光量检测之前的初始化期间中执行附加电容C的这种切换控制。初始化期间的实例包括在显示区11(参见图1)上的图像显示中的垂直消隐(blanking)期间。
<通过根据第三实施方式的显示装置进行的显示控制方法>
下面,将描述通过本实施方式的显示装置进行的具体显示控制方法。如上所述,LTPS的暗电流具有急剧的温度特性。因此,如果在图4所示的显示装置中,通过分别使用遮光测量侧上的光电传感器(第二光电传感器PS2)以及光辐射测量侧上的光电传感器(第一光电传感器PS1)来执行测量并且计算光电传感器的输出端之间的差值从而测量光电流,则为了确保高分辨率,对附加电容C进行改变。然而,因为依赖于温度的暗电流的变化很大,所以附加电容C的设定范围需要很宽,并且很难选择最佳的电容。
为了解决该问题,在本实施方式中,通过下面的方法来选择最佳附加电容C,从而实现显示控制。
首先,利用与校准时相同的设定来进行遮光测量侧上的第二光电传感器PS2的测量,并且将测量值与在校准中所获得的值进行比较。这允许测量暗电流的变化。具体地,因为在校准中在恒温环境下执行暗电流检测,所以可以通过在通过第二光电传感器PS2进行的检测值与校准时的检测值之间的比较,将通过第二光电传感器PS2进行的暗电流的检测值转换成依赖于温度的暗电流的变化。
图7是用于说明以该原则为前提的本实施方式的显示控制方法的流程的示图。首先,作为初始化,进行第二光电传感器的选择以及在校准中所使用的比较器参考值和附加电容的选择。之后,通过第二光电传感器来测量当光被遮挡时产生的电流(第一测量步骤)。
随后,作为初始化,进行第二光电传感器的选择以及在校准中所使用的比较器参考值的选择。另外,根据在第一步骤中通过第二光电传感器进行的测量结果与校准时的测量结果之间的比率,估计出暗电流量,并且选择最佳电容。之后,通过第二光电传感器再次测量当光被遮挡时产生的电流(第二测量步骤)。
随后,作为初始化,进行第一光电传感器的选择、在校准中所使用的比较器参考值的选择、以及最佳电容的选择。之后,通过第一光电传感器来测量环境光量(第三测量步骤)。根据该测量结果,按照下面的计算方程式来算出照度。
Lout=L0×SL×Sbk/(Sbk-SL)/Sc
在该方程式中,
Lout:输出照度[lx]
Sbk:在校准中通过第二光电传感器测量的、基于当光被遮挡时产生的暗电流的比较器输出值[时间(例如,步长)]
SL:在校准中通过第一光电传感器测量的、基于用某个照度L0[lx]的光辐射时产生的电流的比较器输出值[时间(例如,步长)]
上面方程式中的Sc表示如下。
Sc=St×SRTbk/(Stbk-St)
在该方程式中,
St:在实际测量中通过第一光电传感器检测的、基于光辐射时所获得的电流值的比较器输出值[时间(例如,步长)]
Stbk:在实际测量中通过第二光电传感器检测的、基于当光被遮挡时所获得的电流值的比较器输出值[时间(例如,步长)]
SRTbk:在利用与在校准中相同的附加电容的实际测量中通过第二光电传感器检测的、基于当光被遮挡时所获得的电流值的比较器输出值[时间(例如,步长)]
根据上面的计算方程式来连续地进行照度计算,使得将从上述第一测量步骤至第三测量步骤的步骤定义为一个周期。这使得在避免依赖于温度和外部光照度的分辨率的降低的情况下,可以获得精确的照度。
在本实施方式的显示装置中,利用在上述实施方式中获得的照度通过背光控制装置来控制照射到显示区11(参见图1)上的背光的光量。例如,获得的照度越高,背光的光量设定得就越大。相反,获得的照度越低,背光的光量设定得越小。
可以与在显示区11上的图像显示的定时独立地来执行本实施方式中的照度计算以及背光的光量的控制。然而,为了避免对图像显示的不利影响并防止传感器受所显示图像的内容和显示驱动本身的影响,并且在系统构造的容易性方面,期望与图像显示的定时配合地执行一定的处理。
图8A和图8B是示出了在显示区上的图像显示以及通过光电传感器进行的检测的定时的示图。重复进行在显示区上的图像显示,使得垂直消隐期间和显示期间被定义为一个场(field)。在图8A和图8B所示的实例中,提供了四个光电传感器,并且每个光电传感器重复执行从第一测量步骤至第三测量步骤的上述这些步骤。从第一测量步骤至第三测量步骤的一个周期由图中的虚线框来表示。在图像显示过程中,在垂直消隐期间中执行每个步骤中的初始化。这可以避免对图像显示的影响,并且防止传感器受显示图像的内容和显示驱动本身的不利影响。
此外,在每个光电传感器中,检测期间(激活)的长度依赖于光量而不同。这是因为比较器输出值依赖于光接收量而不同。
图9是用于说明在初始化期间中的操作定时的示图。如上所述,每个光电传感器在图像显示的垂直消隐期间内执行每个测量步骤中的初始化。具体地,作为初始化,执行差分计算电路的存储器的复位以及各种数据的输出。输出数据为关于第一光电传感器或第二光电传感器待被选择的信息、关于待选择的比较器参考值的信息、以及关于待选择的附加电容的信息。
随后,通过使用由各个光电传感器检测的值来算出显示区的外部光的光量(照度),并且图1所示的背光控制装置基于该光量(照度)来控制背光的光量。
<电子设备>
根据本实施方式的显示装置包括具有类似于图10所示的平坦模块状的装置。例如,如下获得该显示模块。在绝缘基板200上设置使均包括液晶元件、薄膜晶体管、薄膜电容器、光接收元件等的像素集成形成为矩阵的像素阵列部。此外,设置粘合剂,使得围绕该像素阵列部(像素矩阵部)201,并且将由玻璃等构成的对基板202粘结至绝缘基板200。根据需要可以为该透明的对基板提供滤色片、保护膜、遮光膜等。可以为显示模块提供例如FPC(柔性印刷电路),作为用于将信号等从外部输入至像素阵列部或从像素阵列部输出至外部的连接器203。
根据上述本实施方式的显示装置可以被应用于任何领域中的电子设备中包括的显示装置,并且基于被输入至电子设备或在电子设备中产生的视频信号来显示图像或视频。具体地,显示装置可以被应用于图11~图15所示的各种电子设备,诸如数码照像机、笔记本式个人计算机、以便携式电话为代表的便携式终端设备、以及摄像机中的显示装置。下面,将描述应用了本实施方式的电子设备的实例。
图11是示出了应用了本实施方式的电视机的透视图。根据本应用实例的电视机包括由前面板120、滤光玻璃130等构成的视频显示屏110,并且通过使用根据本实施方式的显示装置作为视频显示屏110而被制造。
图12是示出了应用了本实施方式的数码照像机的透视图:(A)为前侧透视图,而(B)为后侧透视图。根据本应用实例的数码照像机包括用于闪光的发光单元111、显示部112、菜单开关113、快门按钮114等,并且通过使用根据本实施方式的显示装置作为显示部112而被制造。
图13是示出了应用了本实施方式的笔记本式个人计算机的透视图。根据本应用实例的笔记本式个人计算机在其主体121中包括在字符等的输入中所操作的键盘122、用于图像显示的显示部123等。通过使用根据本实施方式的显示装置作为显示部123来制造该笔记本式个人计算机。
图14是示出了应用了本实施方式的摄像机的透视图。根据本应用实例的摄像机包括主体131、设置在朝向前侧的侧面上并被用于拍摄目标图像的透镜132、在成像时使用的启动/停止开关133、显示部134等。通过使用根据本实施方式的显示装置作为显示部134来制造该摄像机。
图15是示出了应用了本实施方式的便携式终端设备的示图,具体地,例如便携式电话:(A)和(B)分别为打开状态的前视图和侧视图,而(C)、(D)、(E)、(F)以及(G)分别为闭合状态的前视图、左侧视图、右侧视图、顶视图以及底视图。根据本应用实例的便携式电话包括上壳体141、下壳体142、连接部(在该实例中,铰链)143、显示屏144、辅助显示屏145、图像灯(picture light)146、照像机147等。通过使用根据本实施方式的显示装置作为显示屏144和辅助显示屏145来制造该便携式电话。
<显示和成像装置>
根据本实施方式的显示装置可以被应用于下面的显示和成像装置。该显示和成像装置可以被应用于上述各种电子设备。图16示出了显示和成像装置的整个构造。该显示和成像装置包括I/O显示面板2000、背光1500、显示驱动电路1200、光接收驱动电路1300、图像处理单元1400以及应用程序执行单元1100。
I/O显示面板2000由液晶面板(LCD(液晶显示器))形成,其中,在整个表面上以矩阵方式布置多个像素。I/O显示面板2000具有通过线顺序操作基于显示数据来显示诸如图形和字符的预定图像的功能(显示功能),并且具有捕捉与如后面描述的I/O显示面板2000接触或在其附近的目标的图像的功能(成像功能)。通过布置例如多个发光二极管来获得背光1500,并且将其用作I/O显示面板2000的光源。如下所述,背光1500与I/O显示面板2000的操作定时同步地以预定的定时高速执行开/关操作。
显示驱动电路1200驱动I/O显示面板2000(驱动线顺序操作),用于基于在I/O显示面板2000上显示数据来显示图像(用于显示操作)。
光接收驱动电路1300驱动I/O显示面板2000(驱动线连续操作),用于通过I/O显示面板2000获取光接收数据(用于目标(物体)的成像)。例如,通过各个像素进行的光接收数据在逐帧基础上被累积在帧存储器1300A中,并且作为捕捉图像被输出至图像处理单元1400。
图像处理单元1400基于由光接收驱动电路1300输出的捕捉图像来执行预定的图像处理(运算处理),并且检测并获取关于与I/O显示面板2000接触或在其附近的物体的信息(位置坐标数据、与物体的形状和尺寸相关的数据等)。后面将详细地描述检测的处理细节。
应用程序执行单元1100基于通过图像处理单元1400进行的检测结果来执行对应于预定应用软件的处理。处理的实例包括将检测的物体的位置坐标并入到显示数据中,从而在I/O显示面板2000上显示目标。将通过应用程序执行单元1100所生成的显示数据供给至显示驱动电路1200。
下面,将参照图17来描述I/O显示面板2000的详细构成例。I/O显示面板2000包括显示区(传感器区)2100、显示H驱动器2200、显示V驱动器2300、传感器读出H驱动器2500以及传感器V马区动器2400。
显示区(传感器区)2100为用于输出通过调制来自背光1500的光的显示光并捕捉与该区域接触或在其附近的物体的图像的区域。在该区域中,以矩阵形式布置作为发光元件(显示元件)的液晶元件和后面待描述的光接收元件(成像元件)。
显示H驱动器2200基于由显示驱动电路1200供给的用于显示驱动的显示信号和控制时钟与显示V驱动器2300一起来线顺序驱动显示区2100中的各个像素的液晶元件。
传感器读出H驱动器2500与传感器V驱动器2400一起线顺序驱动传感器区2100中的各个像素的光接收元件,从而获取光接收信号。
下面,将参照图18来描述显示区2100中的每个像素的详细构成例。图18中所示的像素3100包括作为显示元件的液晶元件和光接收元件。
具体地,在显示元件侧,由薄膜晶体管(TFT)等形成的切换元件(开关元件)3100a设置在沿水平方向延伸的栅电极3100h与沿垂直方向延伸的漏电极3100i的交叉点。包括液晶的像素电极3100b设置在切换元件3100a与对电极之间。切换元件3100a基于通过栅电极3100h供给的驱动信号来执行开/关操作。当切换元件3100a处于开状态时,基于通过漏电极3100i供给的显示信号,将像素电压施加于像素电极3100b,使得显示状态被设定。
另一方面,在与显示元件邻近的光接收元件侧上,设置由例如光电二极管形成的光接收传感器3100c,并且将电源电压VDD供给至其中。将复位开关3100d和电容器3100e连接至光接收传感器3100c。依赖于光接收量的电荷被累积在电容器3100e中,并且通过复位开关3100d来使电荷复位。在读出开关3100g的接通定时中,累积的电荷通过缓冲放大器3100f被供给至信号输出电极3100j,并被输出至外部。通过由复位电极3100k供给的信号来控制复位开关3100d的开/关操作。通过由读出控制电极3100k供给的信号来控制读出开关3100g的开/关操作。
参照图19,将在下面描述显示区2100中的各个像素与传感器读出H驱动器2500之间的连接关系。在该显示区2100中,布置用于红色(R)的像素3100、用于绿色(G)的像素3200以及用于蓝色(B)的像素3300。
在连接至各个像素中的光接收传感器3100c、3200c和3300c的电容器中所累积的电荷分别通过缓冲放大器3100f、3200f和3300f来放大,并且在读出开关3100g、3200g和3300g的接通定时处分别通过信号输出电极被供给至传感器读出H驱动器2500。将恒电流源4100a、4100b和4100c连接至各个信号输出电极,因此,依赖于光接收量的信号以高灵敏度被传感器读出H驱动器2500检测。
下面,将详细地描述显示和成像装置的操作。
首先,将在下面描述该显示和成像装置的基本操作,即,在像素中的显示操作和物体成像操作。
在该显示和成像装置中,基于由应用程序执行单元1100供给的显示数据在显示驱动电路1200中生成用于显示的驱动信号,并且通过该驱动信号来进行I/O显示面板2000的线顺序显示驱动,使得图像被显示。此时,也通过显示驱动电路1200来驱动背光1500,使得执行与I/O显示面板2000同步的发光和发光停止操作。
参照图20,下面将描述背光1500的开/关状态与I/O显示面板2000的显示状态之间的关系。
首先,在利用例如1/60秒的帧周期进行图像显示的情况下,背光1500停止发光(处于关闭状态),因此,在每个帧期间的前半期间(1/120秒)内不执行显示。另一方面,在每个帧期间的后半期间内,背光1500执行发光(处于接通状态),并且将显示信号供给至各个像素,使得对应于该帧期间的图像被显示。
如上,每个帧期间的前半期间为期间显示光没有从I/O显示面板2000中输出的无光期间。另一方面,每个帧期间的后半期间为期间显示光从I/O显示面板2000输出的有光期间。
当存在与I/O显示面板2000接触或在其附近的物体(诸如指尖)时,通过由光接收驱动电路1300进行的线顺序光接收驱动,借助于I/O显示面板2000中的各个像素的光接收元件来捕捉物体图像,并且将来自各个光接收元件的光接收信号供给至光接收驱动电路1300。对应于一个帧的像素的光接收信号被累积在光接收驱动电路1300中,并且作为捕捉图像被输出至图像处理单元1400。
图像处理单元1400基于该捕捉的图像来执行下面待描述的预定的图像处理(运算处理),使得关于与I/O显示面板2000接触或在其附近的物体的信息(位置坐标数据、与物体的形状和尺寸相关的数据等)被检测。