CN104076989B - 一种光学多点触控装置、触控框及实现触控的方法 - Google Patents
一种光学多点触控装置、触控框及实现触控的方法 Download PDFInfo
- Publication number
- CN104076989B CN104076989B CN201310229668.9A CN201310229668A CN104076989B CN 104076989 B CN104076989 B CN 104076989B CN 201310229668 A CN201310229668 A CN 201310229668A CN 104076989 B CN104076989 B CN 104076989B
- Authority
- CN
- China
- Prior art keywords
- camera module
- image
- camera
- circuit
- touch
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Studio Devices (AREA)
Abstract
本发明公开了一种光学多点触控装置、触控框及实现触控的方法,光学多点触控装置包括四个摄像头模组、背景光源发光组件、主板和三个从板;主板的主控电路,控制背景光源发光组件;通过主板的第一摄像头模组控制电路控制第一摄像头模组;还与第二和第四摄像头模组控制电路通信,进而控制第二和第四摄像头模组;通过第一从板和第二从板的第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信,进而控制第三摄像头模组;并根据各个摄像头模组采集的图像,获得触摸物的位置,通过触摸物的位置来获得屏幕坐标;将获得的屏幕坐标发送给与其相连的上位机。本发明简化了光学多点触控装置的结构和处理过程。
Description
技术领域
本发明涉及触控技术,特别涉及一种光学多点触控装置、触控框及实现触控的方法。
背景技术
目前,市场上的光学式多点触控装置为了提供4点(含)的触控操作,通常采用四个摄像头模组(每个摄像头模组包括光学传感器和镜头模组)来实现。摄像头模组中的光学传感器可以为线阵传感器或者面阵传感器,但因为线阵传感器在大尺寸(超过60英寸)下,对结构强度要求非常高,量产可靠性较差,因此通常采用面阵传感器。其机械结构和电路结构分别参见图1和图2。
如图1所示,现有技术的光学式多点触控装置,包括分别安装在屏幕左上、右上、左下、右下的四个摄像头模组101-104、主控板105、与四个摄像头模组对应相连,且均与主控板105相连的四个接口板106-109。在每个摄像头模组安装的位置分别对应配置了光源,四个摄像头模组对应的光源及安装在屏幕四边回归反射条带110-113组成的背景光源发光组件构造出一个背景光源。另外,主控板105还与各个摄像头模组对应的光源及一个上位机100相连。
如图2所示,现有技术的光学式多点触控装置的电路包括:设置在主控板上的主控电路201、分别设置在四个接口板上的第一-第四接口板电路202-205。其中,每个接口板电路202-205分别对应连接一个摄像头模组中的光学传感器206-209。主控电路201还与上位机200和各个摄像头模组对应的光源(图2中未示出)相连。
通常,现有技术中主控电路201及四个接口板电路202-205中,均采用DSP及外围电路来实现。其基本工作过程包括:
步骤1、主控电路控制四个摄像头模组对应的光源发光,在屏幕前构造出一个背景光源,并控制四个光学传感器开启。
步骤2、四个光学传感器开启后,按相同的时序,分别将采集的图像发送给对应的接口板电路。
步骤3、各个接口板电路中的DSP分别对图像进行初步处理,获得触摸物一维坐标信息发送给主控电路。
步骤4、主控电路对各个接口板电路发送来的一维的坐标信息进行数据处理,获得一个或多个触摸物的位置,并通过各个触摸物的位置来计算各个触摸物的屏幕坐标。
步骤5、主控电路将计算出的各个触摸物的屏幕坐标发送给上位机,从而实现一点或多点触摸控制。
可见,现有技术的光学式多点触控装置存在如下缺陷:
1、采用一个主控板连接四个接口板的安装结构比较复杂,很难集成到屏幕边框中,不便于拆装。
2、由于四个接口板电路都是将初步处理后的一维图像信息发给主控电路进行处理,一旦主控电路处理数据时发现某个接口板电路发送的数据有误,需要向接口板电路反馈,接口板电路再重新采集图像数据,再获得一维图像信息后再返回给主控电路,这样处理复杂。
3、由于背景光源采用回归反射条,且各个光学传感器按照相同的时序采集图像数据,因此,每个摄像头模组中光学传感器采集的图像都会被对角的摄像头模组的光源所影响。参见图3a-图3c,其中,图3a示出了触摸物与对角光源不重合时的图像,此时,在背景图像上,对角光源形成白色的图像,而触摸物体形成黑色的图像,由于算法中是在背景图像中查找黑色图像,所以这种情况下,能够正确识别出触摸物体。图3b示出了触摸物与对角光源重合时图像,此时,在背景图像上对角光源形成白色的图像被触摸物体形成黑色的图像所覆盖,这种情况下,也能够正确识别出触摸物体。图3c示出了触摸物原本应该的成像和触摸物与对角光源部分重合时的图像,此时,在背景图像上对角光源形成白色的图像被触摸物形成黑色的图像部分覆盖,这种情况下,难以正确识别出触摸物。
发明内容
有鉴于此,本发明实施例的目的在于提供一种光学多点触控装置、触控框及实现触控的方法,以降低光学式多点触控装置的结构复杂度。
为达到上述目的,本发明实施例公开了一种光学多点触控装置,包括四个摄像头模组、背景光源发光组件,还包括一个主板和三个从板;
所述主板包括主控电路和与之相连的第一摄像头模组控制电路、第一从板包括第二摄像头模组控制电路、第二从板包括第三摄像头模组控制电路、第三从板包括第三摄像头模组控制电路;
所述主板的第一摄像头模组控制电路与第一摄像头模组相连;第一从板的第二摄像头模组控制电路与第二摄像头模组相连;第二从板的第三摄像头模组控制电路与第三摄像头模组相连;第三从板的第四摄像头模组控制电路与第四摄像头模组相连;
所述主板的第一摄像头模组控制电路还与第一从板的第二摄像头模组控制电路和第三从板的第四摄像头模组控制电路分别相连;
其中,所述第一摄像头模组控制电路将第一摄像头模组采集的图像、从第二摄像头模组控制电路和第四摄像头模组控制电路接收的图像转发给主控电路;其中,从第二摄像头模组控制电路接收的图像包括:第二摄像头模组采集的图像和第三摄像头模组控制电路转发的第三摄像头模组采集的图像;从第四摄像头模组控制电路接收的图像为第四摄像头模组采集的图像;
所述主控电路,控制背景光源发光组件发光;通过第一摄像头模组控制电路控制第一摄像头模组;通过第一摄像头模组控制电路与第二和第四摄像头模组控制电路通信,进而控制第二和第四摄像头模组;通过第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信,进而控制第三摄像头模组;并根据各个摄像头模组采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标;将获得的一个或多个屏幕坐标发送给与其相连的上位机。
较佳地,所述第一摄像头模组控制电路、第二摄像头模组控制电路、第三摄像头模组控制电路和第四摄像头模组控制电路均由可编程逻辑门阵列FPGA电路实现,
其中,所述第一摄像头模组控制电路的FPGA电路通过两个LVDS串行I/O口分别与第二摄像头模组控制电路的FPGA电路和第四摄像头模组控制电路的FPGA电路进行通信;第二摄像头模组控制电路的FPGA电路也通过LVDS串行I/O口与第三摄像头模组控制电路进行通信。
较佳地,所述的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下;所述背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条;所述主控电路与所述四个光源相连。
较佳地,所述的每个摄像头模组包括:光学传感器和镜头;所述光学多点触控装置还包括四个模组外壳;每个模组外壳都具有使光源、光学传感器和镜头外露的孔,和用于安装连接线的孔;
所述主板、第一摄像头模组和对应的第一光源固定在第一模组外壳内;
所述第一从板、第二摄像头模组和对应的第二光源固定在第二模组外壳内;
所述第二从板、第三摄像头模组和对应的第三光源固定在第三模组外壳内;
所述第三从板、第四摄像头模组和对应的第四光源固定在第三模组外壳内。
较佳地,所述主板、和三个从板具有预留的接线端子,各个接线端子安装于所述各个模组外壳上用于安装连接线的孔的位置。
较佳地,所述主控电路通过HID USB接口与上位机通信。
本发明还公开了一种触控框,应用于上述的光学多点触控装置,包括:与屏幕形状和尺寸匹配的边框框架、设置在边框框架的左上、右上、右下和左下的四个模组外壳;
所述边框框架由四条单独的边框组装实现,单独的边框采用中空结构,用于安装相邻模组外壳之间的连接线;
所述第一模组外壳用于安装主板、第一摄像头模组及对应的光源;所述第二模组外壳用于安装第一从板、第二摄像头模组及对应的光源;所述第三模组外壳用于安装第二从板、第三摄像头模组及对应的光源;所述第四模组外壳用于安装第三从板、第四摄像头模组及对应的光源。
较佳地,所述的每个摄像头模组包括:光学传感器和镜头;每个模组外壳都具有使光源、光学传感器和镜头外露的孔,和用于安装连接线的孔。
较佳地,所述主板、和三个从板具有预留的接线端子,各个接线端子安装于所述各个模组外壳上用于安装连接线的孔的位置。
本发明实施例还公开了一种实现触控的方法,应用于上述的光学多点触控装置,包括如下步骤:
A、主板上的主控电路控制背景光源发光组件发光;
B、主控电路分别与第一、第二、第三和第四摄像头模组控制电路进行通信,控制第一、第二、第三和第四摄像头模组开启;
其中,主控电路通过第一摄像头模组控制电路与第二和第四摄像头模组控制电路通信;通过第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信;
C、主控电路通过第一摄像头模组控制电路接收第一摄像头模组采集的图像、第二和第四摄像头模组控制电路转发的图像;
其中,第二摄像头模组控制电路转发的图像包括:第二摄像头模组采集的图像和第三摄像头模组控制电路转发的第三摄像头模组采集的图像;第四摄像头模组控制电路转发的图像为第四摄像头模组采集的图像;
D、主控电路根据各个摄像头模组采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标;
E、主控电路将获得的一个或多个屏幕坐标发送给与其相连的上位机。
较佳地,所述的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下;所述背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条;
所述步骤A和步骤B中,主控电路控制与安装在左上和右下的摄像头模组对应的两个光源的点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间均错开1/2帧;并控制与安装在右上和左下的摄像头模组对应的两个光源点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间错开1/2帧。
较佳地,所述步骤C中:
所述主控电路接收的第一摄像头模组采集的图像为:第一摄像头模组采集的图像的完整数据,或将所述第一摄像头模组采集的图像转换为一行图像后的图像数据;
所述第二摄像头模组控制电路转发的第二摄像头模组采集的图像为:第二摄像头模组采集的图像的完整数据,或将所述第二摄像头模组采集的图像转换为一行图像后的图像数据;
所述第三摄像头模组控制电路转发的第三摄像头模组采集的图像为:第三摄像头模组采集的图像的完整数据,或将所述第三摄像头模组采集的图像转换为一行图像后的图像数据;
所述第四摄像头模组控制电路转发的第四摄像头模组采集的图像为:
第四摄像头模组采集的图像的完整数据,或将所述第四摄像头模组采集的图像转换为一行图像后的图像数据。
较佳地,所述步骤D包括:
D1、对每一个摄像头模组的图像数据进行预处理,获得每个摄像头模组采集的图像中触控点的位置信息;
D2、根据各个摄像头模组触控点的位置信息,计算触摸物的位置及触摸区域;
D3、根据触摸物的位置及触摸区域,计算获得一个或多个屏幕坐标。
由上述的技术方案可见,本发明实施例的光学多点触控装置及实现触控的方法,针对包括4个摄像头模组的情况,采用了一个主板和三个从板的安装结构,简化了光学多点触控装置的结构。同时,由于发明中的主控电路是根据各个摄像头模组采集的图像,来实现触控,简化了各个摄像头模组控制电路的数据处理,使得当出现数据错误时,无需再向从板反馈,简化了处理过程。
另外,在本发明的较佳实施例中,主控电路控制与安装在对角位置的两个摄像头模组对应的两个光源点亮时间错开1/2帧,不是按相同的时序开启对角的摄像头模组,减少了摄像头模组中光学传感器采集的图像都会被对角的摄像头模组的光源所影响,提高了触控的准确性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为现有技术的光学式多点触控装置的机械结构示意图;
图2为现有技术的光学式多点触控装置的电路结构示意图;
图3a为采用现有技术的光学式多点触控装置,触摸物与对角光源不重合时的图像;
图3b为采用现有技术的光学式多点触控装置,触摸物与对角光源重合时图像;
图3c为采用现有技术的光学式多点触控装置,触摸物原本应该的成像和触摸物体与对角光源部分重合时的图像;
图4为本发明一个较佳实施例的光学式多点触控装置的机械结构示意图;
图5为图4所示实施例的光学式多点触控装置的电路结构示意图;
图6为图4所示实施例采用的触控框的结构示意图;
图7为本发明实现触控的方法第一实施例的处理流程图;
图8a为本发明实现触控的方法第二实施例的处理流程示意图;
图8b为图8a所述流程中,第一摄像头模组和第三摄像头模组的时序示意图;
图9为图8a所示流程中步骤816的具体处理流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了一种光学式多点触控装置,针对包括4个摄像头模组的情况,采用了一个主板和三个从板的安装结构。如图4所示,本发明一较佳实施例的光学式多点触控装置,包括:四个摄像头模组401-403、背景光源发光组件(本实施例中包括分别与四个摄像头模组对应的四个光源及四个反光条,图1中仅示出反光条)、一个主板405和三个从板406-408。其中,四个摄像头模组401-403安装在屏幕的左上、右上、右下和左下四角。四个反光条409-412分别安装在屏幕四边。主板405连接一上位机400,并与第一从板406和第三从板408分别相连。第一从板406与第二从板407相连。本实施例中的每个摄像头模组均包括:光学传感器和镜头。
如图5所示,本实施例的光学式多点触控装置中,主板510包括主控电路511和与之相连的第一摄像头模组控制电路512、第一从板520包括第二摄像头模组控制电路521、第二从板530包括第三摄像头模组控制电路531、第三从板540包括第三摄像头模组控制电路541。
所述主板510的第一摄像头模组控制电路512与第一摄像头模组550相连,本实施例中可以与第一光学传感器551相连。
第一从板520的第二摄像头模组控制电路521与第二摄像头模组560相连,本实施例中可以与第二光学传感器561相连。
第二从板530的第三摄像头模组控制电路531与第三摄像头模组570相连,本实施例中可以与第三光学传感器571相连。
第三从板540的第四摄像头模组控制电路541与第四摄像头模组580相连,本实施例中可以与第四光学传感器581相连。
如图5所示,主板510的第一摄像头模组控制电路512还与第一从板520的第二摄像头模组控制电路521和第三从板540的第四摄像头模组控制电路541分别相连。
另外,本实施例中背景光源发光组件中与四个摄像头模组对应的四个光源也与主控电路511相连(图5中未示出)。
其中,所述第一摄像头模组控制电路512将第一摄像头模组550采集的图像(本实施例中可以是第一光学传感器551采集的图像)、从第二摄像头模组控制电路520和第四摄像头模组控制电路540接收的图像转发给主控电路511。
所述从第二摄像头模组控制电路520接收的图像包括:第二摄像头模组560采集的图像(本实施例中可以是第二光学传感器561采集的图像)和第三摄像头模组控制电路531转发的第三摄像头模组570采集的图像(本实施例中可以是第三光学传感器571采集的图像)。所述从第四摄像头模组控制电路541接收的图像为第四摄像头模组580采集的图像(本实施例中可以是第四光学传感器581采集的图像)。
所述主控电路511控制背景光源发光组件中的光源发光;通过第一摄像头模组控制电路512控制第一摄像头模组550。通过第一摄像头模组控制电路512与第二和第四摄像头模组控制电路521、541通信,进而控制第二和第四摄像头模组560、580.通过第一和第二摄像头模组控制电路520、530与第三摄像头模组控制电路531通信,进而控制第三摄像头模组570。本根据各个摄像头模组550-580采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标;将获得的一个或多个屏幕坐标发送给与其相连的上位机550。
本实施例中,所述第一摄像头模组控制电路512、第二摄像头模组控制电路521、第三摄像头模组控制电路531和第四摄像头模组控制电路541均由可编程逻辑门阵列FPGA电路实现。
其中,所述第一摄像头模组控制电路的FPGA电路通过两个LVDS串行I/O口分别与第二摄像头模组控制电路的FPGA电路和第四摄像头模组控制电路的FPGA电路进行通信;第二摄像头模组控制电路的FPGA电路也通过LVDS串行I/O口与第三摄像头模组控制电路进行通信。
在实际应用中,本实施例的主板可以由一颗MCU(Micro Control Unit)及一颗FPGA(Field Programmable Gate Array)芯片和外围电路构成。其中MCU用来实现主控电路的功能,可以选用ARM Cortex M3系列低成本MCU。FPGA可以用来实现第一摄像头模组控制电路的功能,其需要有多个支持LVDS接收/发送的I/O,以便实现与第一从板和第三从板直接的通信。一种较佳的实现方式中,选择有可以存储近10行640字节图像数据的片内存储空间,一定的可编程资源的FPGA芯片。
主板需要获得从板的图像数据,然后进行处理,获得触控点。以一图像为640个像素,120帧/秒的图像帧率为例,主控板与从板之间的速率为:640×10×120×8=6.144Mbps。本发明支持主控板及从板之间最大距离为2米,因此这个距离下,为了实现该传输速率,主控板及从板之间采用LVDS串行数据来传输交互数据(包括主控板给从板的控制信号,及从板返回的图像数据及其他数据)。主板的FPGA与第一从板和第三从板的FPGA分别相连。
第一~第三从板的电路结构一样,主要包括一颗FPGA及外围电路以实现第二~第四摄像头模组控制电路的功能。该FPGA可以采用与主控板上FPGA一样的芯片,且其代码也基本一样,唯一差别的为I/O的配置。具体地,第一从板的FPGA需要提供一个主板与第二从板之间的交互数据直通通道。主板及从板的FPGA获得各个摄像头模组的图像数据,并通过各个数据直通通道最终送给主板中的MCU。
本实施例中,主板与各个从板之间、从板与从板之间都采用LVDS信号及串行数据总线来传递信号。为了节省LVDS驱动及译码芯片,就直接采用FPGA的I/O来实现LVDS信号的发送及接收。
本实施例中各个摄像头模组中的光学传感器都和对应的实现摄像头模组控制电路功能的FPGA相连,其控制命令都由主板的MCU下达,通过对应FPGA转发到相应的光学传感器中。
另外,本实施例中的主板MCU带USB接口,将其声明为HID(Human InteractiveDevice)设备,可以直接与电脑相连,达到了免驱的效果。
本实施例中,由于采用了FPGA芯片,并直接用其LVDS接口进行通信,省去了LVDS驱动及译码芯片,降低了电路板的复杂度,也省了一定的空间,使得每一块电路板都可以达到<=10mmx100mm的规格。这就为实现便于拆装的触控框提供了基础条件。
进一步地,本实施例中,可以将各个摄像头模组及与其对应的光源集成安装到模组外壳内,以实现便于拆装的触控框。
如图6所示,本发明实施例还提供了一种便于拆装的触控框,包括:与屏幕形状和尺寸匹配的边框框架610,设置在边框框架的左上、右上、右下和左下四个模组外壳611-614。
本实施例中,每个模组外壳内集成了包括光学传感器和镜头的摄像头模组及与其对应的光源。且每个模组外壳都具有使光源、光学传感器和镜头外露的孔,和用于安装连接线的孔。具体地,所述主板、第一摄像头模组和对应的第一光源固定在第一模组外壳611内。所述第一从板、第二摄像头模组和对应的第二光源固定在第二模组外壳612内。所述第二从板、第三摄像头模组和对应的第三光源固定在第三模组外壳613内。所述第三从板、第四摄像头模组和对应的第四光源固定在第三模组外壳614内。
本实施例中,主板、和三个从板都可以具有预留的接线端子,各个接线端子安装于所述各个模组外壳上用于安装连接线的孔的位置。
另外,本实施例中,边框框架可以由四条单独的边框组装实现,各个单独的边框可以采用中空结构。其中,第一模组外壳611内电路与第二模组外壳612内电路及第四模组外壳614内电路的连接线621和622、第二模组外壳612内电路与第三模组外壳613内电路的连接线623可以安装在边框内。
这样,应用本实施例的触控框,运输的时候可以将该触控边框拆开为4个触控模组、3条互连线、1条USB线、4根边框。到达用户手里后,再进行简单的互连线/USB线与触控模组预留的接线端子相连,触控模组与边框相连即可组装为一个触控边框。
本发明还提供了一种应用于前述光学多点触控装置实现触控的方法,参见图7,该实现触控的方法的第一实施例包括如下步骤:
步骤701、主板上的主控电路控制背景光源发光组件发光。
本实施例可以用于图4所示的光学多点触控装置,该触控装置的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下。背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条。
对应图4所示的触控装置,本步骤可以是主控电路控制与四个摄像头模组对应的四个光源发光。
步骤702、主控电路分别与第一、第二、第三和第四摄像头模组控制电路进行通信,控制第一、第二、第三和第四摄像头模组开启。
本实施例中,主控电路通过第一摄像头模组控制电路与第二和第四摄像头模组控制电路通信;通过第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信,以控制各个摄像头模组启动。
步骤703、主控电路通过第一摄像头模组控制电路接收第一摄像头模组采集的图像、第二和第四摄像头模组控制电路转发的图像。
本实施例中,第二摄像头模组控制电路转发的图像包括:第二摄像头模组采集的图像和第三摄像头模组控制电路转发的第三摄像头模组采集的图像;第四摄像头模组控制电路转发的图像为第四摄像头模组采集的图像。
步骤704、主控电路根据各个摄像头模组采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标。
步骤705、主控电路将获得的一个或多个屏幕坐标发送给与其相连的上位机。
参见图8a,本发明实现触控的方法的第二实施例。
本实施例中,主控电路的功能由MCU及外围电路实现,各个摄像头模组控制电路由FPGA及外围电路实现,且用于实现第一摄像头模组控制电路的FPGA具有多个支持LVDS接收/发送的I/O,能够实现与第一从板上的第二摄像头模组控制电路和第三从板上的第四摄像头模组控制电路直接通信。第一从板上的第二摄像头模组控制电路的FPGA也具有多个支持LVDS接收/发送的I/O,能够实现与主板上的第一摄像头模组控制电路和第二从板上的第三摄像头模组控制电路直接通信。即主板与各个从板之间、从板与从板之间都采用LVDS信号及串行数据总线来传递信号。
在上电后,实现触控的过程包括如下步骤:
步骤801,依次初始化实现第一~第四摄像头模组控制电路功能的各个FPGA。
步骤802,依次初始化各个摄像头模组中的光学传感器,然后执行步骤803、804和813。
步骤803和804,分别启动第一、第四摄像头模组和启动第二、第三摄像头模组。
本实施例中,第一摄像头模组安装在屏幕的左上,第二摄像头模组安装在屏幕的右上,第三摄像头模组安装在屏幕的右下,第二摄像头模组安装在屏幕的左下。
为了减少对角光源对摄像头模组图像的影响,本步骤中,主控电路控制与安装在左上和右下的摄像头模组对应的两个光源的点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间均错开1/2帧;并控制与安装在右上和左下的摄像头模组对应的两个光源点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间错开1/2帧。
具体地,第一摄像头模组和第三摄像头模组的时序关系如图8b所示,这两个摄像头模组对应的两个光源点亮时间、光学传感器的曝光时间及VSYNC时间均错开1/2帧。
本实施例中,由于不是按相同的时序开启对角的摄像头模组,减少了摄像头模组中光学传感器采集的图像被对角的摄像头模组的光源所造成的影响,提高了触控的准确性。
步骤805和806,等待预定的时间。
这个时间可以根据镜头曝光的时间来设置。
步骤807和808分别判断第一、第四摄像头模组是否采集完一帧数据,及第二、第三摄像头模组是否采集完一帧数据。如果是,分别执行步骤809和810,否则分别返回步骤805和806,继续等待。
具体判断的方法属于现有技术,这里不再赘述。
步骤809和810,启动直接内存存取(DMA)模式,获得第一摄像头模组的图像数据;启动DMA模式,获得第二摄像头模组的图像数据。
步骤811和812,启动DMA模式,获得第四摄像头模组的图像数据;启动DMA模式,获得第三摄像头模组的图像数据。获得图像数据后,再返回执行步骤803和804,以循环获得图像数据。
采用DMA模式获得数据的方法属于现有技术,这里不再赘述。
本实施例中,各个摄像头模组控制电路发送的图像信息,可以是与其对应的摄像头模组采集的图像的完整数据,或将该摄像头模组采集的图像转换为一行图像后的图像数据。
本实施例中,由于采用了LVDS信号进行串行数据传输,传输速度快,因此各个摄像头模组控制电路可以发送与其对应的摄像头模组采集的完整的图像数据。
当然,为了减少要传输的数据量,在实际应用中,也可以由各个摄像头模组控制电路,先将与其对应的摄像头模组采集的图像进行转换。通常,摄像头模组采集的图像是多行数据,转换时,可以将多行数据转换成一行图像数据。具体的转换过程,可以采用现有的图像处理或图像压缩算法来实现,这里不再赘述。
步骤813,开启触控主循环程序。
实现触控的过程,实际是一个实时接收各个摄像头模组采集的数据,进行处理的一个循环过程。
步骤814,等待预设时间。
这个时间可以根据镜头曝光的时间和图像数据传输的时间来设置。
步骤815,判断是否接收到图像的当前帧数据,如果是则执行步骤816,否则返回步骤814,继续等待。
步骤816,处理当前帧数据,处理后返回步骤814,也就是等待接收下一帧数据。
如图8a所示,当前帧数据可以通过中断等方式传递给触控主循环程序。
参见图9,图9为图8a所示流程中步骤816的具体处理流程示意图。该流程包括:
步骤901,对每一个摄像头模组采集的图像数据进行预处理。
本步骤就是用来滤除干扰信号,进行图像增强。
步骤902,获得每个摄像头模组采集图像的触控点位置信息。
具体地,本步骤中可以结合背景图像,计算触摸点位置及相关信息,并更新背景图像。
本步骤可以通过固定阈值的二值化处理的方法来实现,固定阈值的二值化处理的方法是本领域技术人员进行图像数据处理的常见方法。这里不再赘述。
步骤903,根据各个摄像头模组的触摸点位置信息,进行触摸区域计算。
本步骤中,就是叠加各个模组的触摸点信息,计算触摸物体的位置及相关触摸区域。
本步骤中,本领域技术人员能够采用现有的触摸区域计算的算法来实现,这里不再详述。
步骤904,初步确认触摸点。
本步骤中,可以根据步骤902获得的触控点位置信息,得到触摸点的个数,并对触摸区域进行标记,将一些多触摸物重合的区域重新分割为各个触摸物,并剔除重叠导致的虚假区域。
本步骤中,本领域技术人员可以利用现有的剔除重叠导致的虚假区域的算法来实现,这里不再详述。
步骤905,判断已确认的触摸点是否完备,如果是,则执行步骤907,否则执行步骤906。
本步骤中,可以对初步标记完成的触摸区域与从各个摄像头模组获得的图像数据进行比较,确认触摸区域的标记是否已经完备。
步骤906,根据每一个摄像头模组的图像,进一步确认触摸点。
本步骤中,可以根据各个摄像头模组的图像,进一步标记触摸区域。
本步骤与步骤904类似,也是用来剔除重叠导致的虚假区域。
步骤907,根据历史帧信息,进行触摸点匹配。
本步骤中,可以根据历史帧坐标、运动速度、图像灰度、触摸物大小等信息进行触摸点的匹配工作,最终确定一个或多个触摸物的坐标。
本步骤中,历史帧坐标是在处理完上一帧图像时记录下来的,而运动速度、图像灰度和触摸物大小等信息,则是在根据接收的图像数据,在获得的触控点位置信息之后,结合图像数据和触控点位置信息,通过简单转化获得的。例如:可以通过两图像帧中,触摸物坐标变化计算出移动的距离,再用距离和每帧的时间,来计算出运动速度等等…。本领域技术人员可以采用现有技术常用算法来实现。
本步骤中,本领域技术人员也可以采用已有的算法来实现,这里不再详述。
本实施例中,主控电路,是直接接收各个摄像头模组采集的图像,并据此来实现触控,简化了各个摄像头模组控制电路的数据处理,并使得当出现数据错误时,无需再向各个摄像头模组控制电路反馈,简化了处理过程。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (12)
1.一种光学多点触控装置,包括四个摄像头模组、背景光源发光组件,其特征在于:还包括一个主板和三个从板;
所述主板包括主控电路和与之相连的第一摄像头模组控制电路、第一从板包括第二摄像头模组控制电路、第二从板包括第三摄像头模组控制电路、第三从板包括第四摄像头模组控制电路;
所述主板的第一摄像头模组控制电路与第一摄像头模组相连;第一从板的第二摄像头模组控制电路与第二摄像头模组相连;第二从板的第三摄像头模组控制电路与第三摄像头模组相连;第三从板的第四摄像头模组控制电路与第四摄像头模组相连;
所述主板的第一摄像头模组控制电路还与第一从板的第二摄像头模组控制电路和第三从板的第四摄像头模组控制电路分别相连;
其中,所述第一摄像头模组控制电路将第一摄像头模组采集的图像、从第二摄像头模组控制电路和第四摄像头模组控制电路接收的图像转发给主控电路;其中,从第二摄像头模组控制电路接收的图像包括:第二摄像头模组采集的图像和第三摄像头模组控制电路转发的第三摄像头模组采集的图像;从第四摄像头模组控制电路接收的图像为第四摄像头模组采集的图像;
所述主控电路,控制背景光源发光组件发光;通过第一摄像头模组控制电路控制第一摄像头模组;通过第一摄像头模组控制电路与第二和第四摄像头模组控制电路通信,进而控制第二和第四摄像头模组;通过第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信,进而控制第三摄像头模组;并根据各个摄像头模组采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标;将获得的一个或多个屏幕坐标发送给与其相连的上位机;
所述的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下;所述背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条;
所述主控电路控制与安装在左上和右下的摄像头模组对应的两个光源的点亮时间、所述这两个摄像头模组中光学传感器的曝光时间及VSYNC时间均错开1/2帧;并控制与安装在右上和左下的摄像头模组对应的两个光源点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间错开1/2帧。
2.根据权利要求1所述的光学多点触控装置,其特征在于:所述第一摄像头模组控制电路、第二摄像头模组控制电路、第三摄像头模组控制电路和第四摄像头模组控制电路均由可编程逻辑门阵列FPGA电路实现,
其中,所述第一摄像头模组控制电路的FPGA电路通过两个LVDS串行I/O口分别与第二摄像头模组控制电路的FPGA电路和第四摄像头模组控制电路的FPGA电路进行通信;第二摄像头模组控制电路的FPGA电路也通过LVDS串行I/O口与第三摄像头模组控制电路进行通信。
3.根据权利要求2所述的光学多点触控装置,其特征在于:所述的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下;所述背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条;所述主控电路与所述四个光源相连。
4.根据权利要求3所述的光学多点触控装置,其特征在于:所述的每个摄像头模组包括:光学传感器和镜头;所述光学多点触控装置还包括四个模组外壳;每个模组外壳都具有使光源、光学传感器和镜头外露的孔,和用于安装连接线的孔;
所述主板、第一摄像头模组和对应的第一光源固定在第一模组外壳内;
所述第一从板、第二摄像头模组和对应的第二光源固定在第二模组外壳内;
所述第二从板、第三摄像头模组和对应的第三光源固定在第三模组外壳内;
所述第三从板、第四摄像头模组和对应的第四光源固定在第三模组外壳内。
5.根据权利要求4所述的光学多点触控装置,其特征在于:所述主板、和三个从板具有预留的接线端子,各个接线端子安装于所述各个模组外壳上用于安装连接线的孔的位置。
6.根据权利要求1-4任一项所述的光学多点触控装置,其特征在于:所述主控电路通过HID USB接口与上位机通信。
7.一种触控框,应用于权利要求1所述的光学多点触控装置,其特征在于,包括:与屏幕形状和尺寸匹配的边框框架、设置在边框框架的左上、右上、右下和左下的四个模组外壳;
所述边框框架由四条单独的边框组装实现,单独的边框采用中空结构,用于安装相邻模组外壳之间的连接线;
第一模组外壳用于安装主板、第一摄像头模组及对应的光源;第二模组外壳用于安装第一从板、第二摄像头模组及对应的光源;第三模组外壳用于安装第二从板、第三摄像头模组及对应的光源;第四模组外壳用于安装第三从板、第四摄像头模组及对应的光源。
8.根据权利要求7所述的触控框,其特征在于:所述的每个摄像头模组包括:光学传感器和镜头;每个模组外壳都具有使光源、光学传感器和镜头外露的孔,和用于安装连接线的孔。
9.根据权利要求8所述的触控框,其特征在于:所述主板、和三个从板具有预留的接线端子,各个接线端子安装于所述各个模组外壳上用于安装连接线的孔的位置。
10.一种实现触控的方法,其特征在于:应用于权利要求1所述的光学多点触控装置,包括如下步骤:
A、主板上的主控电路控制背景光源发光组件发光;
B、主控电路分别与第一、第二、第三和第四摄像头模组控制电路进行通信,控制第一、第二、第三和第四摄像头模组开启;
其中,主控电路通过第一摄像头模组控制电路与第二和第四摄像头模组控制电路通信;通过第一和第二摄像头模组控制电路与第三摄像头模组控制电路通信;
C、主控电路通过第一摄像头模组控制电路接收第一摄像头模组采集的图像、第二和第四摄像头模组控制电路转发的图像;
其中,第二摄像头模组控制电路转发的图像包括:第二摄像头模组采集的图像和第三摄像头模组控制电路转发的第三摄像头模组采集的图像;第四摄像头模组控制电路转发的图像为第四摄像头模组采集的图像;
D、主控电路根据各个摄像头模组采集的图像,获得一个或多个触摸物的位置,通过触摸物的位置来获得一个或多个屏幕坐标;
E、主控电路将获得的一个或多个屏幕坐标发送给与其相连的上位机;
所述的四个摄像头模组分别安装在屏幕的左上、右上、右下和左下;所述背景光源发光组件包括:分别与四个摄像头模组对应的四个光源及安装在屏幕四边的反光条;
所述步骤A和步骤B中,主控电路控制与安装在左上和右下的摄像头模组对应的两个光源的点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间均错开1/2帧;并控制与安装在右上和左下的摄像头模组对应的两个光源点亮时间、这两个摄像头模组中光学传感器的曝光时间及VSYNC时间错开1/2帧。
11.根据权利要求10所述的方法,其特征在于,所述步骤C中:
所述主控电路接收的第一摄像头模组采集的图像为:第一摄像头模组采集的图像的完整数据,或将所述第一摄像头模组采集的图像转换为一行图像后的图像数据;
所述第二摄像头模组控制电路转发的第二摄像头模组采集的图像为:第二摄像头模组采集的图像的完整数据,或将所述第二摄像头模组采集的图像转换为一行图像后的图像数据;
所述第三摄像头模组控制电路转发的第三摄像头模组采集的图像为:第三摄像头模组采集的图像的完整数据,或将所述第三摄像头模组采集的图像转换为一行图像后的图像数据;
所述第四摄像头模组控制电路转发的第四摄像头模组采集的图像为:
第四摄像头模组采集的图像的完整数据,或将所述第四摄像头模组采集的图像转换为一行图像后的图像数据。
12.根据权利要求10所述的方法,其特征在于:所述步骤D包括:
D1、对每一个摄像头模组的图像数据进行预处理,获得每个摄像头模组采集的图像中触控点的位置信息;
D2、根据各个摄像头模组触控点的位置信息,计算触摸物的位置及触摸区域;
D3、根据触摸物的位置及触摸区域,计算获得一个或多个屏幕坐标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310229668.9A CN104076989B (zh) | 2013-03-25 | 2013-06-08 | 一种光学多点触控装置、触控框及实现触控的方法 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310098959.9 | 2013-03-25 | ||
CN2013100989599 | 2013-03-25 | ||
CN201310098959 | 2013-03-25 | ||
CN201310229668.9A CN104076989B (zh) | 2013-03-25 | 2013-06-08 | 一种光学多点触控装置、触控框及实现触控的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104076989A CN104076989A (zh) | 2014-10-01 |
CN104076989B true CN104076989B (zh) | 2017-06-13 |
Family
ID=51598295
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310229668.9A Expired - Fee Related CN104076989B (zh) | 2013-03-25 | 2013-06-08 | 一种光学多点触控装置、触控框及实现触控的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104076989B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113778263A (zh) * | 2021-09-14 | 2021-12-10 | 北京网格蔚来科技有限公司 | 一种多功能触控一体机 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101788872A (zh) * | 2010-02-12 | 2010-07-28 | 矽创电子股份有限公司 | 侦测多点触控的位置侦测装置 |
CN101866246A (zh) * | 2009-04-17 | 2010-10-20 | 华宇光能股份有限公司 | 多点触控式光学输入装置 |
CN102955618A (zh) * | 2011-08-22 | 2013-03-06 | 无锡海森诺科技有限公司 | 一种摄像式光学多点触控装置 |
CN203405794U (zh) * | 2013-03-25 | 2014-01-22 | 南京瓦迪电子科技有限公司 | 一种光学多点触控装置及触控框 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102216890A (zh) * | 2008-09-15 | 2011-10-12 | 智能技术无限责任公司 | 带有图像传感器和信号处理器的触摸输入 |
-
2013
- 2013-06-08 CN CN201310229668.9A patent/CN104076989B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101866246A (zh) * | 2009-04-17 | 2010-10-20 | 华宇光能股份有限公司 | 多点触控式光学输入装置 |
CN101788872A (zh) * | 2010-02-12 | 2010-07-28 | 矽创电子股份有限公司 | 侦测多点触控的位置侦测装置 |
CN102955618A (zh) * | 2011-08-22 | 2013-03-06 | 无锡海森诺科技有限公司 | 一种摄像式光学多点触控装置 |
CN203405794U (zh) * | 2013-03-25 | 2014-01-22 | 南京瓦迪电子科技有限公司 | 一种光学多点触控装置及触控框 |
Also Published As
Publication number | Publication date |
---|---|
CN104076989A (zh) | 2014-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103327083A (zh) | 一种基于异构网络Android平台的嵌入式家庭监测系统 | |
CN104122987A (zh) | 光感测模块及系统 | |
CN105787421A (zh) | 指纹识别系统 | |
CN101901087B (zh) | 基于线性图像传感器的表面定位装置及方法 | |
CN106506749A (zh) | 闪光灯组件、移动终端 | |
CN100593772C (zh) | 红外线发射接收电路板单元及应用该电路板单元的红外线触摸屏 | |
CN114833038A (zh) | 一种涂胶路径规划方法及其系统 | |
CN104076989B (zh) | 一种光学多点触控装置、触控框及实现触控的方法 | |
CN102184062B (zh) | 一种红外线触摸系统及其控制方法 | |
CN201548484U (zh) | 通用多路数字图像模拟源 | |
CN201259667Y (zh) | 一种红外线发射或接收电路板单元及红外线触摸屏 | |
CN102289326B (zh) | 适用于振动及潮湿环境的光学式多点触摸屏装置及方法 | |
CN108124032A (zh) | 电子装置 | |
CN101526867B (zh) | 一种红外线发射或接收电路板单元及红外线触摸屏 | |
CN107782354A (zh) | 动作传感器检测系统以及方法 | |
CN202018647U (zh) | 虚拟键盘 | |
WO2017000348A1 (zh) | 一种指纹采集识别方法、装置及终端 | |
CN107817964A (zh) | 电子设备、显示系统及其集成控制装置 | |
KR20180036205A (ko) | 시뮬레이션용 스마트 테이블 장치 | |
CN203405794U (zh) | 一种光学多点触控装置及触控框 | |
CN201084128Y (zh) | 图像定位触摸装置 | |
US10856374B2 (en) | Method and system for controlling an electronic device having smart identification function | |
CN109901714A (zh) | 一种电子纸笔系统及其控制方法 | |
US10261618B2 (en) | Touch driving circuit and touch sensitive display panel | |
CN104423723A (zh) | 触摸屏 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170613 Termination date: 20180608 |
|
CF01 | Termination of patent right due to non-payment of annual fee |