CN101206546A - 具有多触点识别功能的显示器件及其驱动方法 - Google Patents

具有多触点识别功能的显示器件及其驱动方法 Download PDF

Info

Publication number
CN101206546A
CN101206546A CNA2007101020680A CN200710102068A CN101206546A CN 101206546 A CN101206546 A CN 101206546A CN A2007101020680 A CNA2007101020680 A CN A2007101020680A CN 200710102068 A CN200710102068 A CN 200710102068A CN 101206546 A CN101206546 A CN 101206546A
Authority
CN
China
Prior art keywords
touch
angle
camera
display device
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101020680A
Other languages
English (en)
Other versions
CN101206546B (zh
Inventor
沈莲心
张亨旭
裵相赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Display Co Ltd
Original Assignee
LG Philips LCD Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Philips LCD Co Ltd filed Critical LG Philips LCD Co Ltd
Publication of CN101206546A publication Critical patent/CN101206546A/zh
Application granted granted Critical
Publication of CN101206546B publication Critical patent/CN101206546B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Position Input By Displaying (AREA)

Abstract

一种具有多触点识别功能的显示器件,包括具有集成在显示面板边缘的多个照相机的集成模块;对应所述多个照相机中各照相机并且在大约0到大约90度范围内的多个补偿角度的查询表;以及处理器,其采用由多个照相机分别捕获的至少第一和第二图像检测触摸区域,并且用多个补偿角度之一补偿检测的触摸区域。

Description

具有多触点识别功能的显示器件及其驱动方法
本申请要求享有2006年12月15日提出的申请号为No.10-2006-128529的韩国专利申请和2007年3月12日提出的申请号为No.10-2007-024180的韩国专利申请的优生权,在此结合其全部内容作为参考。
技术领域
本发明的实施方式涉及一种显示器件,尤其涉及一种显示器件及其驱动方法。本发明的实施方式适合于广泛范围的应用。具体的,本发明的实施方式适合于为显示器件在多触点识别中补偿透镜失真。
背景技术
一般来说,触摸屏是一种附加在显示器件上的用户接口,具有在手或笔接触屏幕的触摸点其电特征改变的特性。触摸屏已经用于各种应用,例如小型便携终端,办公设备等等。然而,如果由两个或多个基本上同时的触摸点产生多接触,触摸屏可能故障或由预设置程序选择任一接触。
为了克服相关技术的触摸屏中多触点识别的局限性,目前已经开发了同时识别多个触点的多触点识别器件。
多触点识别器件在采用具有透镜的照相机的情况下由于透镜的误差等可能有错误的识别触摸位置。此外,多触点识别器件可能具有照相机的与触摸表面光学未对准的位置。并且,由于此,由照相机测量的触摸点的角度存在偏置值并且可能引起与实际触摸点的偏置一样多的差别。近来,已经尝试在多触点识别器件中为触摸表面预先计算按照相机位置产生的偏置值,存储该偏置值在内存中,并且将该偏置值反映到触摸点。然而,相关技术没有办法补偿在多触点识别器件中透镜本身中产生的失真。
此外,多触点识别器件存在触摸识别电路从显示器件的驱动电路分离的问题,从而显示动作和触摸识别动作不同步,从而无法高效地实现电路。
虽然存在在显示器件的各像素中嵌入多触点识别器件的光学传感器的方法,但是该方法存在另一个问题,由于光学传感器使显示器件的孔径比减小从而降低其亮度。
发明内容
因此,本发明的实施方式意在一种基本上消除了由于相关技术的限制和缺陷所引起的一个或多个问题的具有多触点识别功能的显示器件及其驱动方法。
本发明的一个目的在于提供一种具有多触点识别功能的显示器件,对于触摸识别系统获得强结构稳定性。
本发明的另一个目的在于提供一种保持显示器件外观的具有多触点识别功能的显示器件。
本发明的另一个目的在于提供针对显示器件在多触点识别中的透镜失真补偿。
本发明的其他特征和优点将在以下示例性实施方式的说明中予以阐述并从示例性实施方式的说明部分的明白或从本发明的实施例中了解到。本发明的这些和其他优点可以通过说明书和权利要求书中以及附图中特定指出的结构来实现和获得。
为了实现这些目的和其他优点并根据本发明的意图,如在此体现和广泛描述的,一种具有多触点识别功能的显示器件,包括:具有集成在显示面板边缘的多个照相机的集成模块;对应于所述多个照相机中各照相机并且在大约0到大约90度范围内的多个补偿角度的查询表;以及处理器,其采用由多个照相机分别捕获的至少第一和第二图像检测触摸区域,并且用多个补偿角度之一补偿检测的触摸区域。
另一方面,一种识别显示器件上多触点的方法,所述显示器件包括具有与显示面板结合的多个照相机的集成模块以及存储部分,所述存储部分用于存储对应各多个照相机大约0到大约90度范围的多个补偿角度,所述方法包括:用所述照相机捕获第一和第二图像;用所述第一和第二图像检测触摸区域;以及用多个所述补偿角度补偿之一补偿检测的触摸区域。
另一方面,一种识别显示器件的显示面板上多触点的方法,所述显示器件包括和显示面板结合的第一和第二捕获器件,所述方法包括:在显示面板的表面选择第一参照点,第一参照点相对第一和第二捕获器件具有第一和第二参考角度;触摸所述选择的第一参照点;用所述第一捕获器件捕获触摸后的第一参照点的第一捕获图像;用所述第二捕获器件捕获触摸后的第一参照的第二捕获图像;通过在第一和第二捕获图像的基础上三角测量操作,分别检测触摸后的第一参照点相对第一和第二捕获器件的第一和第二接触角度;并且按照第一和第二参考角度和第一和第二接触角度之间对应的差别,分别计算对应第一和第二捕获器件的第一和第二补偿角度。
另一方面,一种识别显示器件上多触点的方法,所述显示器件包括具有和显示面板结合的多个照相机的集成模块以及存储部分,所述存储部分用于存储对应多个照相机中各照相机产大约0到大约90度范围内的多个补偿角度的,所述方法包括:用多个照相机中的第一、第二、第三和第四照相机基本上同时捕获第一、第二、第三和第四图像;采用第一和第二图像检测一个或多个触摸区域;采用第三和第四图像检测该一个或多个触摸区域;用对应第一、第二、第三和第四照相机的补偿角度分别补偿检测的一个或多个触摸区域;以及利用第三和第四照相机检测到的一个或多个触摸区域验证用第一和第二图像检测的该一个或多个触摸区域。
另一方面,一种识别显示器件的显示面板上多触点的方法,所述显示器件包括和显示面板结合的捕获器件,所述方法包括:在显示面板的表面选择参照点,所述参照点相对所述捕获器件具有参考角度;触摸所述选择的参照点;用所述捕获器件捕获触摸后的参照点的图像;用捕获的图像计算触摸后的参照点的触摸角度;根据触摸角度和参考角度之间的差别计算补偿角度。
应当理解,本发明的上述一般性说明和之后的详细说明都是示例性和说明性的,意在对本发明的权利要求做进一步说明。
附图说明
本申请所包含的附图用于进一步理解本发明,其与说明书结合构成申请的一部分,示出了本发明的实施方式并且与说明书一起用于解释本发明的实施方式的原理。在附图中:
图1所示为根据本发明实施方式的具有多触点识别功能的示例性显示器件的方框图;
图2示出了图1的显示器件的示意性说明;
图3示出了图2的一部分像素阵列的电路图;
图4示出了根据本发明的实施方式附加在显示器的照相机的视角的示例;
图5是图1的显示器件的横截面图,示出了根据本发明的实施方式非反射部件的示例性位置;
图6是根据本发明的实施方式表示多触点信号处理程序的控制顺序的流程图;
图7示出了根据本发明实施方式的显示器件上示例性触摸区域;
图8示出了根据本发明的实施方式的示例性触摸区域标识的示意性说明;
图9表示透镜的视角为90°的示意图;
图10示出了由透镜失真引起失真的触摸位置;
图11为根据本发明第二实施方式在透镜失真补偿方法中产生的校正角度示例的示意图;
图12为根据本发明第二实施方式表示透镜失真补偿方法的控制序列的流程图;
图13为由用户顺序触摸的触摸点的示例的示意图;
图14至图17详细表示图13中的触摸点的角度计算过程;
图18示出了根据本发明第二实施方式的透镜失真补偿方法中计算值和测量值之间的角度误差;
图19表示通过对图18的角度误差曲线执行多项式曲线拟合修正后的透镜失真角度误差的曲线;
图20是用于解释三角测量的示意图;
图21是表示多触点处理器的测量角度补偿电路的电路图;
图22示出了各触摸点的位置的验证过程;
图23示出了使用两个照相机两个触摸位置与两个照相机之一对准的示例性检测;
图24示出了使用两个照相机,两个触摸位置与四个照相机之一个或多个对准的示例性检测。
具体实施方式
现详细参照附图示出的示例,描述本发明的优选实施方式。
图1所示为根据本发明实施方式的具有多触点识别功能的示例性显示器件的方框图。参照图1,根据本发明的实施方式具有多触点识别功能的显示器件包括触摸和显示集成模块20,其中照相机21A至21D设置在其上显示图像的像素阵列10A的四个角;控制板30,控制触摸和显示集成模块20并计算触摸点的坐标;以及系统40用于向控制板30提供待显示的数据RGB以及时序信号。
图2示出了图1的显示器件的示意性说明。参照图2,触摸和显示集成模块20包括液晶显示面板10,在该液晶显示面板中形成在其上显示图像的像素阵列10A;源驱动器11,用于向液晶显示面板10的数据线D1至Dm施加数据电压;栅驱动器12,用于向液晶显示面板10的栅线G1至Gn施加扫描脉冲;以及照相机21A至21D,各设置在液晶显示面板10的四个角附近。
图3示出了图2中一部分像素阵列的电路图。参照图2和3,液晶显示面板10包括薄膜晶体管(下文中,称为“TFT”)基板和滤色基板。在TFT基板和滤色基板之间形成有液晶层。在TFT基板中,数据线D1至Dm和栅线G1至Gn彼此垂直交叉地形成在下玻璃基板上,而液晶单元C1c以矩阵图案设置在由数据线D1至Dm和栅线G1至Gn限定的单元区域中。在数据线D1至Dm和栅线G1至Gn的交叉部分形成的TFT向液晶单元的像素电极传输通过数据线D1至Dm施加的数据电压。为此,TFT的栅极连接到栅线G1至Gn,而其源极连接到数据线D1至Dm。TFT的漏极连接到液晶单元Clc的像素电极。公共电压Vcom施加给面对像素电极的公共电极。
滤色基板包括在上玻璃基板上形成的黑矩阵和滤色片。
另一方面,公共电极以垂直电场驱动方法在上玻璃基板上形成,例如扭曲向列(TN)模式和垂直对准(VA)模式,以及和像素电极一起以水平电场驱动方法在下玻璃基板上形成,例如共平面开关(IPS)模式和边缘场开关(FFS)模式。
存储电容Cst可以通过重叠栅线和液晶单元Clc的像素电极形成。作为选择,存储电容Cst也可以通过重叠像素电极和分离的公共线形成。
源驱动器11包括多个数据集成电路(下文中,称为“IC”)。源驱动器11在控制板30的控制之下,转换从控制板30输入的数字视频数据RGB为正极性或负极性的伽马补偿电压,并且向数据线D1至Dm施加模拟伽马补偿电压作为模拟数据电压。
栅驱动器12包括多个栅IC。栅驱动器12在控制板30的控制之下,向栅线G1至Gn顺序施加扫描脉冲。源驱动器11的数据IC和栅驱动器12的栅IC可以在下玻璃基板上通过玻上芯片(COG)方法或采用载带封装(TCP)的带式自动焊接(TAB)方法形成。栅驱动器12的栅IC可以通过与TFT工艺相同的工艺在像素阵列10A的TFT形成的同时在下玻璃基板上直接形成。
例如,照相机21A至21D可以是CMOS(互补金属氧化物半导体)传感器。照相机21A至21D可以位于液晶显示面板10上像素阵列10A的四角。各照相机21A至21D拍摄对应像素区域及其附近的显示面板表面的图像。用作照相机21A至21D的CMOS传感器可以具有从大约320×240像素到大约1280×1024像素的分辨率。从各照相机21A至21D拍摄到的触摸图像提供给控制板30。
图4示出了根据本发明的实施方式附加在显示器的照相机的视角的示例。参照图4,各照相机21A至21D的透镜视角选择为大约90°。照相机21A至21D的透镜视角可以按照液晶显示面板10和照相机21A至21D之间的距离或者液晶显示面板的尺寸改变。在本发明的一实施方式中,各照相机21A至21D的视角大约80°到90°。这是因为如果照相机21A至21D的透镜视角窄于80°,由照相机21A至21D不能拍摄到的阴影区域增加,从而阻碍多触点区域的正确检测。此外,如果透镜的视角宽于90°,包括了液晶显示面板外的部分,也会阻碍多触点区域的正确检测。
图5是图1的显示器件的横截面图,示出了根据本发明的实施方式非反射部件的示例性位置。参照图5,非反射部件13设置在液晶显示面板10的玻璃基板的边缘附近。非反射部件13包括下述任意之一:抗反射器、黑层和其光学吸收轴互相交叉的两片极性滤片。非反射部件13设置在照相机21A至21D的透镜之前,并且从玻璃基板的表面向上提升到和指定高度(h1)一样高。非反射部件13和液晶显示面板10的玻璃基板的表面之间的高度(h1)与液晶显示面板10的尺寸成反比,与玻璃基板和照相机透镜之间的距离成正比。在一个实施方式中,高度h1的范围从几毫米到几十毫米。
非反射部件13和照相机21A至21D固定在支撑触摸和显示集成模块20的支架14的边缘。非反射部件13吸收或屏蔽外部光并且用于防止由外部光入射到照相机21A至21D的透镜引起的光干扰现象。
控制板30通过柔性印刷电路(FRC)和连接器连接到源驱动器11和栅驱动器12。控制板30包括时序控制器31和多触点处理器32。时序控制器31采用垂直/水平信号V,H和时钟CLK,产生用于控制栅驱动器12的工作时序的栅控制信号和用于控制源驱动器11的工作时序的数据控制信号。此外,时序控制器31向源驱动器11提供从系统40输入的数字视频信号RGB。
多触点处理器32通过执行多触点信号处理程序补偿由照相机21A至21D的透镜特征引起的失真,并且通过比较之前拍摄到的背景图像和由照相机21A至21D现在拍摄到的触摸图像来提取触摸图像。
这里,之前由照相机21A至21D拍摄到的背景图像存储在多触点处理器32的内存中。并且,多触点处理器32为触摸图像计算坐标并且将其结果Txy提供给系统40。多触点处理器32与时序控制器31共享时序信号例如垂直/水平同步信号V,H和时钟CLK,从而与时序控制器31同步工作。因此,因为时序控制器31和多触点处理器32同步,触摸图像和液晶显示面板10中显示的背景图像的合成图像的显示和触摸点的坐标计算处理可以同步。
系统40包括:内存,其中嵌入有应用程序;中央处理单元(CPU),用于执行应用程序;以及图像处理电路,用于组合背景图像和触摸图像并且处理合成数据的信号插值、及其分辨率转换等。系统40从多触点处理器32接收坐标数据Txy并执行链接到坐标数据的坐标值的应用程序。例如,如果在触摸点的坐标中存在特定程序的图标,系统40下载该程序到内存中并执行程序。此外,系统40可以在个人计算机(PC)上实现,并且和多触点处理器32通过串行或通用串行总线USB结口交换数据。
图6是根据本发明的实施方式表示多触点信号处理程序的控制顺序的流程图。图7示出了根据本发明实施方式的显示器件上示例性触摸区域。参照图6,多触点信号处理程序接收由照相机21A至21D拍摄到的触摸图像并通过窗口处理提取有效触摸区域的图像(S1和S2)。参照图7,从照相机21A至21D拍摄到的触摸图像包括与触摸表面上方的空间有关的无效触摸区域的图像和在像素阵列的触摸表面中拍摄到的有效触摸区域的图像。因此,多触摸信号处理程序通过窗口处理从各照相机21A到21D拍摄到的图像中提取在该触摸表面附近进行触摸的有效触摸区域的图像(阴影部分)。窗口处理采用图像提取技术,即通过子矩阵操作仅提取目标图像仅为输入图像信号。
然后,多触点信号处理程序将包括在通过窗口处理提取的有效触摸区域的图像中的R、G、B数据转换为灰度值或灰度级亮度(S3)。由照相机21A至21D拍摄到的图像包括R、G、B数据,而由窗口处理提取的有效触摸图像也包括R、G、B数据。来自有效触摸图像的R、G、B数据在步骤S3中按照下面的数学公式1转换为灰度值。为了检测该触摸信息,液晶显示面板10的像素区域10A中显示的背景图像中的灰度值和由照相机捕获到图像的灰度值在灰度电平的基础上比较。
【数学公式1】
灰度级亮度=pR+qG+sB
这里,‘p’、‘q’和‘s’是互不相同的常数。
在本发明的一实施方式中,通过比较如液晶显示面板10的像素区域10A中显示的图像的背景图像和由照相机21A至21D之一捕获的图像来提取表示在哪里进行了实际触摸的对应的触摸图像,从而执行触摸图像检测。在另一实施方式中,通过比较之前存储的由照相机21A至21D之一捕获的图像和由照相机21A至21D中对应的那个照相机捕获的新图像来提取表示在哪里进行了实际触摸的相应触摸图像,从而执行触摸图像检测。例如,通过背景(或之前存储的捕获的图像)和新捕获的图像之间的差别操作可以实现触摸图像的提取。(S4)
然后,多触点信号处理程序比较在步骤S4中提取的触摸图像的灰阶亮度和预设置的阈值。并且,多触点信号处理程序将触摸图像的灰阶亮度中不小于阈值的数据转换为白数据,并且将阈值以下的数据转换为黑数据(S5)。白数据表示有效触摸位置,而黑数据表示触摸图像中没有实际触摸到的无效数据。阈值可以通过实验确定。
图8示出了根据本发明的实施方式的示例性触摸区域标识的示意性说明。参照图8,在步骤S6中,多触点信号处理程序针对各白数据,即有效触摸位置数据,采用唯一的标识符(例如,1到5)标识检测的触摸区域。
然后,多触点信号处理程序采用角度计算算法测量面对有效触摸位置的照相机的角度,为了给各转换为白数据的有效触摸位置找到二维平面上的位置。(S7)
照相机和在步骤S7中测量到的有效触摸位置之间的各测量角度包括和照相机21A至21D的透镜像差(aberration)一样的失真量。因此,多触点信号处理程序在查找表中查找有效触摸位置和照相机之间的各角度的补偿值并给测量角度加上查询表中的补偿角度,从而补偿在测量角度中由透镜特性引起的失真量(S8)。透镜失真补偿方法分为第一实施方式和第二实施方式。
将结合图9至11说明根据本发明第一实施方式的透镜失真补偿方法。如图9所示,在照相机21A至21D的透镜中,如果视角是90°,由透镜的特性,由透镜像差引起的失真满足参照相对45°的参考线Lref左右对称。
图10示意性的表示在参考线的右表面中示例的透镜的失真模型。如果照相机21A面对有效触摸位置‘A’,进行实际触摸的有效触摸位置的测量角度应该为‘θ’,但是因为透镜像差,照相机21A认为有效触摸点为位于误认为的测量角度‘θ’’中的‘A’’。因此,其中没有补偿透镜像差的测量角度包括“θ-θ”’的误差。为了补偿测量角度的该误差,多触点信号处理程序为不高于45°的测量角度“θ”’采用如下数学公式2的补偿公式计算补偿角度。
【数学公式2】
A=tanθ
A’=c×(A×sin(90-θ)/sin(90-0.5θ))×sin(90-0.5θ)
θ’=arctan(A’)
θerror=θ-θ’
这里,‘c’是常数,即透镜系数,表示透镜的唯一特性,并具有0<c≤1的值。
对于所有0°到45°的角度都可以获得由数学公式2获得的补偿角度θerror可以得到的所有角度。
图11表示当假设透镜系数‘c’为1时,在0°到35.1°的角度之间,通过数学公式2计算的补偿角度θerror。图11中,水平轴是10×测量角度(θ’)反映由透镜像差引起失真,而纵轴是通过数学公式2计算的补偿角度θerror。如图11可以知道,补偿角度θerror随着角度增加非线性增加。45°-90°的测量角度(θ’)的补偿角度θerror是0°-45°的角度。这是因为如上所述由透镜像差引起的失真量在透镜视角45°的基础上是对称的。例如,60°的补偿角度θerror与通过数学公式2计算的30°的补偿角度相同。以这种方法计算的0°-90°的补偿角度θerro映射到各测量角度,从而登记在查询表中。查询表存储在多触点处理器32的嵌入式内存中。
将结合图12至19说明根据本发明的第二实施方式的透镜失真补偿方法。参照图12,根据本发明的第二实施方式的透镜失真补偿方法设置透镜失真计算需要的参考触摸点(S101)。如图13,参考触摸点在像素阵列10A的触摸表面的附近设置为N。例如,N可以在5-90之间。
然后,为各照相机21A至21D对应各参考触摸点计算参考角度(S102)。通过包括像素阵列10A、照相机21A至21D的位置值和参考触摸点的位置的水平和垂直距离的三角函数进行步骤S102中的参考角度计算,并且不考虑透镜像差。这将结合图14至图17说明。图14中,“Coffset”表示照相机21A至21D和像素阵列10A之间的距离,“Hlen”表示像素阵列10A的水平距离,以及“Vlen”表示像素阵列10A的垂直距离。这些参数依靠像素阵列10A的大小和照相机21A至21D的位置值求微分。如图14所示设置这些参数之后,如果用户通过使用用户界面在像素阵列10A中设置“P1”,并且输入如图15所示的‘P1’和‘P2’之间的间距,那么在像素阵列10A中自动产生沿着顺时针旋转相距所述间距的多个触摸点,并且在像素阵列10A中顺序显示。这里‘P1’是首先显示的触摸点,而‘P2’是以顺时针旋转相邻于‘P1’。假设‘P1’的坐标值是(x1,y1)。用户顺序触摸显示的触摸点。通过该触摸操作,采用如下数学公式3的三角函数计算各触摸点不反应透镜像差的照相机21A至21D的理想角度。
【数学公式3】
θi 1 = arctan ( C offset / 2 + y 1 C offset / 2 + x 1 )
θi 2 = arctan ( C offset / 2 + y 1 H len + C offset / 2 - x 1 )
θi 3 = arctan ( V len + C offset / 2 - y 1 C offset / 2 + x 1 )
θi 4 = arctan ( V len + C offset / 2 - y 1 H len + C offset / 2 - x 1 )
第一照相机21A测量存在于图17中‘B’和‘C’表面的触摸点,并且第二照相机21B测量存在于图17中‘C’和‘D’表面的触摸点。第三照相机21C测量存在于图17中‘A’和‘B’表面的触摸点,并且第四照相机21D测量存在于图17中‘A’和‘D’表面的触摸点。如果照相机21A至21D和触摸点之间的距离变短,触摸点的大小显示的比其实际更大。这样,触摸点可能被错误识别。由于上述问题,照相机21A至21D用在位于相对远的位置的触摸点的测量。
在下面的验证过程中,针对各触摸点四个照相机都使用。
对于步骤S104中的触摸点,触摸点的计算的值成为用于用计算实际触摸时测得的测量值计算误差的标准。
如果触摸点被顺序显示并且用户顺序触摸在屏幕上显示的触摸点,为触摸点测量了照相机的角度(S103)。步骤S103的角度测量通过后面说明的三角测量法计算,并且包括根据透镜像差的失真量。如图8所示,测量值的角度和步骤S102中计算值的角度之间是由透镜像差引起的误差。为在照相机面对的触摸表面的角度范围内,即0°-90°的各角度计算该误差,从而存储在内存中(S104)。
图18是表示计算值和测量值之间的角度误差的示例。图18中,x轴是对N个触摸点的计算值,而y轴是对N个触摸点的角度误差。为了使角度误差曲线更精确并且得到如图18中的精确角度误差值,根据本发明的第二实施方式的透镜失真补偿方法采用如数学公式4所示的三阶或更高阶多项式表达式执行多项式曲线拟合(S105)。
【数学公式4】
y=a0+a1x+a2x2+a3x3    ------(1)
y=xa                  ------(2)
a=(xTx)-1xTy          ------(3)
这里,‘x’是个触摸点的角度计算值(N×4矩阵),‘y’是各触摸点的测量值和计算值之间的误差值(N×1矩阵),以及“a”是三阶多项式系数(4×1矩阵)。数学公式4的(1)式是用于拟合照相机误差曲线的三阶多项式表达式,而数学公式4的(2)式是N个测量值和其误差值之间关系。并且数学公式4的(3)式是通过对数学公式4的(2)式应用线性最小平方推导出的算术表达式并且表示对于‘y-xa’使欧几里得范数的大小最小的‘a’值。
图19表示通过对图18的角度误差曲线执行多项式曲线拟合修正后的透镜失真角度误差曲线。透镜失真角度误差曲线通过具有通过数学表达式3计算的多项式系数的多项式表达式近似。包括多项式系数数据的误差数据是补偿角度θerror,并且映射到角度以存储在内存中,从而形成查询表(S106)。
通过根据本发明的第一或第二实施方式的透镜失真补偿方法获得的补偿角度θerror的数据加给测量角度来补偿透镜失真。
参照图6,使用,多触点信号处理程序采用如数学公式4的三角测量由在步骤S8中补偿了透镜失真的测量角度θ各有效触摸位置计算在二维平面中的位置(S9)。数学公式5是用于为一个触摸位置计算二维xy坐标值的算术表达式,并且包括两个照相机的测量角度A、B,触摸位置和照相机之间的角度C,以及两个照相机和触摸位置之间的距离a、b、c,如图20所示。触摸位置和照相机之间的角度C通过“C=180-A-B”计算。
【数学公式5】
a = c * sin A sin B
b = c * sin B sin C
x=b*cos A
y=b*sin A
这样,如果由多触点信号处理程序计算各触摸位置的x、y坐标数据(Txy),系统40采用其坐标数据产生触摸数据并且合成该触摸数据和在液晶显示面板10中显示的背景数据。与背景数据合成的触摸数据被发送到时序控制器31以在液晶显示面板10中显示(S10)。与背景数据合成的触摸数据可以根据用户的方便成为各种形式。
图21表示多触点处理器32的测量角度补偿电路。参照图21,多触点处理器32包括:查询表321,其中输入有含有由透镜像差引起的失真量的测量角度θ’;以及加法器322,连接到查询表321的输出端。
查询表321包括:内存,其存储0°-90°的补偿角度θerror;以及内存控制器,用于控制内存的读/写。因为存储查询表321的内存针对各利用透镜具有不同的透镜失真,优选地选择EEPROM(电可擦除可编程只读存储器)作为内存从而可以根据透镜特性更新补偿角度θerror。查询表321通过使含有由透镜像差引起的失真量的测量角度θ’作为首要地址相对测量角度θ’输出补偿角度θerror
加法器322给含有由透镜像差引起的失真量的测量角度θ’加上来自查询表321的补偿角度θerror,从而输出失真量得到补偿的测量角度θ。
在S9的多触点位置计算处理中,具有根据本发明实施方式的多触点识别功能的显示器件的驱动方法包括验证通过如数学公式4的三角测量计算的触摸点的位置的过程。
图22示出了各触摸点位置的验证过程。参照图22,假设在显示表面10A上存在两个多触摸点(X1,Y1)、(X2,Y2),如数学公式6,比较和确定对于各两个点,四对互相相邻的照相机(21C和21D、21A和21B、21B和21D、21A和21C)的三角测量结果。
【数学公式6】
X1:A×cos(θ1)&&(L-C×sin(θ3))&&(H-E×cos(θ6))&& G×sin(θ8)
Y1:A×sin(θ1)&&(L-C×cos(θ3))&&(H-E×sin(θ6))&& G×cos(θ8)
X2:B×cos(θ2)&&(L-D×sin(θ4))&&(H-F×cos(θ5))&& H×sin(θ7)
Y2:B×sin(θ2)&&(L-D×cos(θ4))&&(H-F×sin(θ5))&& H×cos(θ7)
数学公式6中,各变量如图22所示,其中运算符“&&”表示比较运算。
图23表示两个触摸点与照相机之一对准的示例性检测。参照图23,两个触摸位置(X3,Y3)和(X4,Y4)与照相机2对准。例如,两个触摸位置(X3,Y3)和(X4,Y4)可以在显示面板的对角线上,因为两个触摸位置(X3,Y3)和(X4,Y4)相对于照相机1的角度θ1和θ2分别是不同的,所以照相机1可以检测到两个触摸位置(X3,Y3)和(X4,Y4)为不同的触摸位置。相反的,照相机2不能在测量角度θ3的基础上区分两个触摸位置(X3,Y3)和(X4,Y4)。特别是,检测到两个触摸位置(X3,Y3)和(X4,Y4)相对照相机2在同一视线上。
图24表示两个触摸点与采用四个照相机中的一个或多个照相机对准的示例性检测。参照图24,两个触摸位置(X3,Y3)和(X4,Y4)与照相机21A和21D对准。例如,两个触摸位置(X3,Y3)和(X4,Y4)可以在显示面板的对角线上。各照相机21B和21C可以检测到两个触摸位置(X3,Y3)和(X4,Y4)为不同的触摸位置,因为两个触摸位置(X3,Y3)和(X4,Y4)相对于照相机21C的角度θ1和θ2分别是不同的并且两个触摸位置(X3,Y3)和(X4,Y4)相对于照相机21B的角度θ5和θ4分别也是不同的。相反,照相机21A和21D没有一个能够在测量角度θ3和θ6的基础上分别区分两个触摸位置(X3,Y3)和(X4,Y4)。特别是,检测到两个触摸位置(X3,Y3)和(X4,Y4)相对各照相机21A和21D在同一视线上。在一个实施方式中,可以通过采用照相机21A和21C的三角测量接着通过照相机21B和21D的三角测量和验证确定点(X3,Y3)和(X4,Y4)的位置。
如图22和数学公式6,如果由相邻照相机对(21C和21D、21A和21B、21B和21D、21A和21C)在验证过程中测量的位置的误差值超过预设置的临界值,多触点信号处理程序不把该位置作为触摸位置,而确定其为错误。
根据本发明实施方式的具有多触点识别功能的显示器件及其驱动方法不仅可以通过在除了像素阵列之外的区域设置照相机来使孔径比的恶化因子最小,而且在集成触摸识别模块和液晶显示模块的集成显示器件没有出现变形的情况下,使结构稳定性的恶化最小。特别是,本发明补偿由于透镜的独特特性产生的触摸位置和照相机之间测量角度的失真,来防止触摸位置的误识别,从而使得可以精确感知各触摸位置。
在另一方面,触摸和显示集成模块20可以具有液晶显示面板10和分开的照相机。并且这种情况下,本发明在液晶显示面板10和照相机模块中设置可分离的器件从而液晶显示面板10和照相机模块可以结构性组合。此外,触摸和显示集成模块20的液晶显示面板10可以用其它平板显示面板代替,例如有机发光二极管OLED显示面板、等离子显示面板PDP,场发光显示FED显示面板,或者包括平板显示面板的三维图像显示器件的显示面板。
如上所述,根据本发明实施方式的具有多触点识别功能的显示器件及其驱动方法可以通过补偿取拍摄多触摸点图像的照相机的透镜失真精确检测各触摸位置,并且还可以优化控制液晶显示模块的电路并且将该触摸识别处理为信号。
显然,对于熟悉本领域的技术人员可对本发明的实施方式进行各种修改和变形。因此,本发明意在覆盖处于所附权利要求书及其等同物范围内提供的本发明的修改和变形。

Claims (14)

1.一种具有多触点识别功能的显示器件,包括:
集成模块,具有集成在显示面板边缘的多个照相机;
对应所述多个照相机中各照相机在大约0到大约90度范围内的多个补偿角度的查询表;以及
处理器,采用由多个照相机分别捕获的至少第一和第二图像检测触摸区域,并且用多个补偿角度之一补偿检测到的触摸区域。
2.根据权利要求1所述的显示器件,其特征在于,所述补偿角度关于45度对称。
3.根据权利要求1所述的显示器件,其特征在于,各补偿角度表示相对对应照相机的轴在对应的角度的失真。
4.根据权利要求1所述的显示器件,其特征在于,还包括加法器,用于给检测的触摸区域加上补偿角度。
5.一种识别显示器件上多触点的方法,所述显示器件包括具有多个和显示面板结合的照相机的集成模块以及存储部分,所述存储部分用于存储对应于所述多个照相机中各照相机并且在大约0到大约90度范围的多个补偿角度,所述方法包括:
用所述照相机捕获第一和第二图像;
用所述第一和第二图像检测触摸区域;以及
用多个所述补偿角度补偿之一补偿检测的触摸区域。
6.根据权利要求5所述的方法,其特征在于,所述补偿角度关于45度对称。
7.根据权利要求5所述的方法,其特征在于,各补偿角度表赤相对对应照相机的轴在对应的角度的失真。
8.根据权利要求5所述的方法,其特征在于,所述补偿的步骤包括给检测的触摸区域加上补偿角度。
9.根据权利要求5所述的方法,其特征在于,所述补偿角度‘θerror’如下定义
A=tanθ
A’=c×(A×sin(90-θ)/sin(90-0.5θ))×sin(90-0.5θ)
θ’=arctan(A’)
θerror=θ-θ’
这里,‘A’是精确测量角度‘θ’中的实际触摸区域,‘A’’是反映透镜失真的测量角度‘θ’’中的误识别的触摸区域,并且‘c’是常数,即透镜系数,表示透镜的独特特性,具有0<c≤1的值。
10.一种识别显示器件的显示面板上多触点的方法,所述显示器件包括和显示面板结合的第一和第二捕获器件,所述方法包括:
在显示面板的表面选择第一参照点,第一参照点相对第一和第二捕获器件具有第一和第二参考角度;
触摸所述选择的第一参照点;
用所述第一捕获器件捕获触摸后的第一参照点的第一捕获图像;
用所述第二捕获器件捕获触摸后的第一参照点的第二捕获图像;
通过在第一和第二捕获图像的基础上三角测量操作,分别检测触摸后的第一参照点相对于第一和第二捕获器件的第一和第二接触角度;以及
按照第一和第二参考角度和第一和第二接触角度之间对应的差别分别计算对应第一和第二捕获器件的第一和第二补偿角度。
11.根据权利要求10所述的方法,其特征在于,还包括将第一和第二补偿角度拟合为基本上多项式曲线。
12.根据权利要求11所述的方法,其特征在于,还包括在可改写存储部分中存储对应基本上的多项式曲线的多个系数。
13.一种识别显示器件上多触点的方法,所述显示器件包括具有多个与显示面板结合的照相机的集成模块以及存储部分,所述存储部分用于存储对应各多个照相机并且在大约0到大约90度范围的多个补偿角度,所述方法包括:
用多个照相机中的第一、第二、第三和第四照相机基本上同时捕获第一、第二、第三和第四图像;
采用第一和第二图像检测一个或多个触摸区域;
采用第三和第四图像检测该一个或多个触摸区域;
用对应第一、第二、第三和第四照相机的补偿角度分别补偿检测到的一个或多个触摸区域;以及
用利用第三和第四照相机检测到的一个或多个触摸区域验证利用第一和第二图像检测的该一个或多个触摸区域。
14.一种识别显示器件的显示面板上多触点的方法,所述显示器件包括和显示面板结合的捕获器件,所述方法包括:
在显示面板的表面选择参照点,所述参照点相对所述捕获器件具有参考角度;
触摸所述选择的参照点;
用所述捕获器件捕获触摸后的参照点的图像;
用捕获到的图像计算触摸后参照点的触摸角度;
根据触摸的角度和参考角度之间的差别计算补偿角度。
CN2007101020680A 2006-12-15 2007-05-14 具有多触点识别功能的显示器件及其驱动方法 Expired - Fee Related CN101206546B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR10-2006-0128529 2006-12-15
KR20060128529 2006-12-15
KR1020060128529 2006-12-15
KR1020070024180A KR101346865B1 (ko) 2006-12-15 2007-03-12 멀티 터치인식 기능을 가지는 표시장치와 그 구동방법
KR10-2007-0024180 2007-03-12
KR1020070024180 2007-03-12

Publications (2)

Publication Number Publication Date
CN101206546A true CN101206546A (zh) 2008-06-25
CN101206546B CN101206546B (zh) 2012-05-02

Family

ID=39566799

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101020680A Expired - Fee Related CN101206546B (zh) 2006-12-15 2007-05-14 具有多触点识别功能的显示器件及其驱动方法

Country Status (2)

Country Link
KR (1) KR101346865B1 (zh)
CN (1) CN101206546B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101840279B (zh) * 2009-03-18 2012-08-22 宏碁股份有限公司 对挠性板进行校正的方法
CN102736796A (zh) * 2011-04-01 2012-10-17 纬创资通股份有限公司 光学式坐标输入装置及其坐标计算的方法
CN101826306B (zh) * 2009-03-06 2013-04-17 上海天马微电子有限公司 液晶显示装置驱动方法及液晶显示装置
CN103376954A (zh) * 2012-04-19 2013-10-30 纬创资通股份有限公司 光学触控装置及触控感测方法
CN113778249A (zh) * 2020-06-09 2021-12-10 京东方科技集团股份有限公司 触控显示驱动模组、方法和显示装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8485794B2 (en) 2008-06-13 2013-07-16 Doowon Technical College Reciprocating compressor with rotary valve
KR101381928B1 (ko) * 2011-02-18 2014-04-07 주식회사 브이터치 포인터를 사용하지 않는 가상 터치 장치 및 방법
KR101870895B1 (ko) 2012-02-06 2018-06-25 삼성전자주식회사 멀티 터치 인식 장치 및 그 제어방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5042437B2 (ja) * 2000-07-05 2012-10-03 スマート テクノロジーズ ユーエルシー カメラベースのタッチシステム
US6919880B2 (en) * 2001-06-01 2005-07-19 Smart Technologies Inc. Calibrating camera offsets to facilitate object position determination using triangulation
US7256772B2 (en) * 2003-04-08 2007-08-14 Smart Technologies, Inc. Auto-aligning touch system and method
JP4148187B2 (ja) * 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826306B (zh) * 2009-03-06 2013-04-17 上海天马微电子有限公司 液晶显示装置驱动方法及液晶显示装置
CN101840279B (zh) * 2009-03-18 2012-08-22 宏碁股份有限公司 对挠性板进行校正的方法
CN102736796A (zh) * 2011-04-01 2012-10-17 纬创资通股份有限公司 光学式坐标输入装置及其坐标计算的方法
CN103376954A (zh) * 2012-04-19 2013-10-30 纬创资通股份有限公司 光学触控装置及触控感测方法
CN103376954B (zh) * 2012-04-19 2016-06-15 纬创资通股份有限公司 光学触控装置及触控感测方法
CN113778249A (zh) * 2020-06-09 2021-12-10 京东方科技集团股份有限公司 触控显示驱动模组、方法和显示装置
CN113778249B (zh) * 2020-06-09 2024-01-23 京东方科技集团股份有限公司 触控显示驱动模组、方法和显示装置

Also Published As

Publication number Publication date
KR101346865B1 (ko) 2014-01-02
CN101206546B (zh) 2012-05-02
KR20080055577A (ko) 2008-06-19

Similar Documents

Publication Publication Date Title
US8139045B2 (en) Display device having multi-touch recognizing function and driving method thereof
JP4787213B2 (ja) マルチタッチ認識機能を有する表示装置
CN101206546B (zh) 具有多触点识别功能的显示器件及其驱动方法
CN101751177B (zh) 液晶显示器
CN102902400B (zh) 触控检测方法及触控传感器
US8970532B2 (en) Touch sensor integrated type display device and method of manufacturing the same
CN100390714C (zh) 使用光束输入信息的显示器件
EP2249233A2 (en) Method and apparatus for recognizing touch operation
US8884894B2 (en) Input detection device, input detection method, input detection program, and computer readable media
US8749530B2 (en) Optical touch display, a calibration apparatus and a calibration method thereof
US8564572B2 (en) Method for auto angle setting of infrared sensor module and display device having the same applied thereto
CN111913610B (zh) 触控显示面板及触控坐标获取方法
JP2012073668A (ja) 電子機器
KR20090097095A (ko) 표시장치
EP2447811B1 (en) Infrared sensor module, touch sensing method thereof, and auto calibration method applied to the same
KR20080055478A (ko) 멀티 터치인식 기능을 가지는 표시장치와 그 구동방법
KR101407290B1 (ko) 멀티 터치인식 기능을 가지는 표시장치와 그 구동방법
KR101726629B1 (ko) 터치 검출 방법
KR101451587B1 (ko) 적외선 센서모듈과 이의 터치 센싱 방법 및 이에 이용되는 자동 교정 방법
KR101633097B1 (ko) 멀티 터치 감지방법 및 장치
KR20080068384A (ko) 터치 포지션 결정방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120502

Termination date: 20200514

CF01 Termination of patent right due to non-payment of annual fee