CN102339169A - 一种大尺寸多点触摸系统的标定方法 - Google Patents

一种大尺寸多点触摸系统的标定方法 Download PDF

Info

Publication number
CN102339169A
CN102339169A CN2010102396151A CN201010239615A CN102339169A CN 102339169 A CN102339169 A CN 102339169A CN 2010102396151 A CN2010102396151 A CN 2010102396151A CN 201010239615 A CN201010239615 A CN 201010239615A CN 102339169 A CN102339169 A CN 102339169A
Authority
CN
China
Prior art keywords
distortion
screen
coordinate
point
fault image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010102396151A
Other languages
English (en)
Other versions
CN102339169B (zh
Inventor
戴志军
谭国富
张凤军
王宏安
戴国忠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Software of CAS
Original Assignee
Institute of Software of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Software of CAS filed Critical Institute of Software of CAS
Priority to CN201010239615.1A priority Critical patent/CN102339169B/zh
Publication of CN102339169A publication Critical patent/CN102339169A/zh
Application granted granted Critical
Publication of CN102339169B publication Critical patent/CN102339169B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)

Abstract

本发明公开一种大尺寸多点触摸系统的标定方法,属于多点触摸技术领域。本方法为:1)将屏幕分为M×N的网格,得到网格交点的屏幕坐标;2)点击网格交点并采集畸变图像,计算所点击交点在畸变图像中的畸变图像坐标;3)选取若干屏幕坐标及与其对应畸变图像坐标,计算屏幕坐标到畸变校正后的图像点坐标;4)将原始畸变图像的坐标点和校正后的图像坐标点输入畸变模型,计算畸变模型参数;5)利用畸变模型参数,将畸变图像坐标点映射到正常的无畸变图像点;6)选取若干无畸变的图像点及与其对应的屏幕坐标点计算得到收敛的畸变模型参数;7)利用收敛畸变模型参数对多点触摸系统进行标定。本方法的触摸位置定位更加精确,使得触摸屏更加实用。

Description

一种大尺寸多点触摸系统的标定方法
技术领域
本发明属于多点触摸技术领域,具体地涉及一种大尺寸多点触摸系统的标定方法。
背景技术
多点触摸系统最近几年逐步走向实用,衡量多点触摸系统一个比较重要的指标就是触摸点定位的精度,这需要对系统运行的一些关键参数进行比较准确的标定。在大尺寸的桌面系统中,最近使用红外摄像头来跟踪定位用户手的运动逐渐流行起来。红外摄像头采用红外线成像可以使得整个系统对光照不敏感,适合很多场景应用。
多点触摸系统当中,当桌面较大时,往往采用多个红外摄像头来覆盖整个桌面场景,这种方式增加了硬件成本,并且多个摄像头之间的拼接运算量大、处理起来比较复杂。
单个红外摄像头如果是透视模型,视角就比较小、很难覆盖整个桌面。对广角镜头,视觉大,但是所得到的图像畸变较大。
目前在使用一个广角镜头的情况下,并没有消除多点触摸系统由于镜头畸变而产生的定位误差,如何较为方便准确的计算系统的各项参数,从而使得单红外摄像头多点触摸系统具有较高的定位精度,是一个急待解决的问题。
发明内容
为了解决现有技术中镜头畸变的问题,本发明目的是提出一种大尺寸多点触摸系统的标定方法。
为实现上述目的,本发明提供一种大尺寸多点触摸系统的标定方法,包括步骤:
步骤S1:将屏幕划分M*N的网格,得到每个网格十字交点的屏幕坐标;
步骤S2:在每个网格十字交点,用红外线光笔点击,通过红外摄像头得到的畸变图像计算所点击交点在畸变图像的畸变图像坐标。
步骤S3:利用得到的屏幕坐标和畸变图像坐标,选择图像中靠近中心畸变较小的一些点对两个平面之间的单应矩阵进行初步估计。估计的方法是通过点的对应关系建立起关于单应矩阵的方程,然后多个点的对应关系可得到关于单应矩阵的方程组,对方程组进行奇异值分解可求得单应矩阵。
步骤S4:通过单应矩阵的逆变换,计算屏幕坐标到红外摄像头畸变校正后的图像点坐标。
步骤S5:利用原始畸变图像的坐标点和校正后的图像坐标点,根据畸变模型,计算畸变模型的参数。
步骤S6:利用畸变模型参数,将所有畸变图像坐标点映射到正常的无畸变图像点。
步骤S7:利用无畸变的图像点和屏幕坐标点重新计算单应矩阵。
步骤S8:重复S4-S7直至所有参数收敛。
与现有技术相比,本发明的有益效果是:
本发明提供了对红外多点触摸屏幕的标定方法,只需要得到网格的屏幕坐标点和畸变图像的坐标点,便可确定模型参数。通过迭代计算,精确度高,鲁棒性好。本发明使得基于红外的触摸屏幕的触摸位置定位更加精确,使得触摸屏更加实用。
附图说明
图1为系统布局示意图;
1、桌面,2、红外灯,3、摄像机,4、投影仪,5、主机;
图2为屏幕的网格划分图;
图3为本发明的流程图。
具体实施方式
下面结合附图详细说明本发明技术方案中所涉及的各个细节问题。应指出的是,所描述的实施例仅旨在便于对本发明的理解,而对其不起任何限定作用。
为了实现本发明的方法,实施时采用一台CPU是1.6G,内存是512M,硬盘320G的计算机或其他类型的计算机,多点触摸桌面的长度为1.5米,宽度为1.15米。系统布局示意图和样机如图1所示。在计算机上采用Matlab编制相关程序,本发明方法的流程图请参见图3,本发明方法的具体实施步骤如下:
1).如图2所示,将屏幕划分为17*13的网格,得到每个网格十字交点的坐标数据。
2).按照系统提示,如图2右上角标记点,依次用红外笔点击网格点,记录下每个网格点对应的红外图像点的位置数据,即计算所点击交点在畸变图像的畸变图像坐标。
3).利用得到的屏幕坐标和畸变图像坐标,选择畸变图像中靠近中心且畸变较小的9个点以及与其对应的屏幕坐标,所选的畸变图像中的9个点构成一平面,对应的9个屏幕坐标构成一平面,对两个平面之间大小为3×3单应矩阵M进行初步估计,得到单应矩阵M。对方程的建立采用齐次坐标的形式,用(xs,ys,1)表示屏幕坐标,(xd,yd,1)表是其对应的畸变图像坐标,那么这两个点之间的对应可以建立方程M(xd,yd,1)=λ(xs,ys,1)T,其中λ为比例因子。9对点可以建立9个这样的方程,对方程组进行奇异值分解,这样解算出M。
4).利用单应矩阵M的逆变换,计算屏幕坐标到红外摄像头畸变校正后的图像点坐标。即(xud,yud,1)=λM-1(xs,ys,1)T(xu,yu,1)表示图像校正后的点坐标。
5).采用的畸变模型为:
xu=xd+(xd-xc)(k1r2+k2r4)    (2)
yu=yd+(yd-yc)(k1r2+k2r4)    (3)
式中
Figure BSA00000210724100031
k1,k2是模型参数,(xd,yd)是畸变图像的坐标点,(xc,yc)为畸变图像中心点的位置,(xu,yu)为校正后的畸变图像点的位置,。根据(xd,yd)与(xu,yu)的对应建立关于k1,k2的方程组,通过奇异值分解法求得k1,k2
目前,已提出的相机畸变模型比较多,本发明也可以采用其他畸变模型,比如比较常见的除式模型、有理模型等(参考文献:“Camera calibration with distortion models and accuracyevaluation”J Weng,P Cohen,M Herniou-IEEE Transactions on Pattern Analysis and MachineIntelligence,1992;或文献“A Rational Function Lens Distortion Model for GeneralCameras,”David Claus,Andrew W.Fitzgibbon,pp.213-219,2005 IEEE Computer SocietyConference on Computer Vision and Pattern Recognition(CVPR′05)-Volume 1,2005)。
6).利用畸变模型参数,将畸变图像坐标点映射到正常的无畸变图像点。
7).利用无畸变的图像点和屏幕坐标点重新计算单应矩阵M。计算方法同步骤3
8).对S4-S7的步骤重复100次得到比较准确的参数。
通过上述过程对系统参数准确标定之后,就可以对用户接触屏幕点的位置进行准备定位。即首先把得到的畸变点位置变换到无畸变点位置坐标,再通过单应矩阵变换即得所在屏幕点的准确位置。
用上述方法对我们的系统进行标定,得到的参数为:
k1=1.54906466892895e-06
k2=1.38178611351497e-11
M = 0.00107758686034155 0.000248684841743937 - 0.00212563826192699 2.49564274888042 e - 05 - 0.00125705390372788 0.727050565391658 - 4.19849238908676 e - 06 0.000440374590019624 0.745892514386055
以上所述,仅为本发明中的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉该技术的人在本发明所揭露的技术范围内,可理解想到的变换或替换,都应涵盖在本发明的包含范围之内,因此,本发明的保护范围应该以权利要求书的保护范围为准。

Claims (9)

1.一种大尺寸多点触摸系统的标定方法,其步骤为:
1)将多点触摸系统的屏幕划分为M×N的网格,得到每个网格十字交点的屏幕坐标;其中M、N为自然数;
2)用红外线光笔点击网格十字交点并采集屏幕畸变图像,计算所点击交点在畸变图像中的畸变图像坐标;
3)选取若干屏幕坐标及与其对应的畸变图像坐标,并根据所选坐标间的对应关系建立单应矩阵方程组,求解出单应矩阵;
4)利用单应矩阵的逆变换,计算屏幕坐标到畸变校正后的图像点坐标;
5)将原始畸变图像的坐标点和畸变校正后的图像坐标点输入畸变模型,计算畸变模型的参数;
6)利用畸变模型的参数,将所有畸变图像坐标点映射到正常的无畸变图像点;
7)选取若干无畸变的图像点及与其对应的屏幕坐标点重新计算单应矩阵;
8)重复若干次步骤4)~7),得到收敛的畸变模型参数,然后利用畸变模型参数对多点触摸系统进行标定。
2.如权利要求1所述的方法,其特征在于选取屏幕中心且畸变最小的若干屏幕坐标及与其对应的畸变图像坐标。
3.如权利要求2所述的方法,其特征在于选取9个屏幕坐标及与其对应的畸变图像坐标,建立一3×3单应矩阵方程组。
4.如权利要求1或2或3所述的方法,其特征在于采用齐次坐标的形式建立所述单应矩阵方程组。
5.如权利要求4所述的方法,其特征在于对所述单应矩阵方程组进行奇异值分解方法,求解出所述单应矩阵。
6.如权利要求1所述的方法,其特征在于所述畸变模型为:
xu=xd+(xd-xc)(k1r2+k2r4)
yu=yd+(yd-yc)(k1r2+k2r4)
其中:
Figure FSA00000210724000011
k1,k2是模型参数,(xd,yd)是畸变图像的坐标点,(xc,yc)为畸变图像中心点坐标,(xu,yu)为畸变校正后的图像坐标点。
7.如权利要求1所述的方法,其特征在于多点触摸系统采用红外摄像头采集屏幕畸变图像。
8.如权利要求1所述的方法,其特征在于所述畸变模型为除式模型。
9.如权利要求1所述的方法,其特征在于所述畸变模型为有理模型。
CN201010239615.1A 2010-07-27 2010-07-27 一种大尺寸多点触摸系统的标定方法 Expired - Fee Related CN102339169B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201010239615.1A CN102339169B (zh) 2010-07-27 2010-07-27 一种大尺寸多点触摸系统的标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010239615.1A CN102339169B (zh) 2010-07-27 2010-07-27 一种大尺寸多点触摸系统的标定方法

Publications (2)

Publication Number Publication Date
CN102339169A true CN102339169A (zh) 2012-02-01
CN102339169B CN102339169B (zh) 2014-04-30

Family

ID=45514929

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010239615.1A Expired - Fee Related CN102339169B (zh) 2010-07-27 2010-07-27 一种大尺寸多点触摸系统的标定方法

Country Status (1)

Country Link
CN (1) CN102339169B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793112A (zh) * 2014-03-10 2014-05-14 航天海鹰光电信息技术(天津)有限公司 一种触摸屏的校准方法及系统
CN105141826A (zh) * 2015-06-30 2015-12-09 广东欧珀移动通信有限公司 一种畸变校正方法及终端
CN105160632A (zh) * 2015-06-30 2015-12-16 广东欧珀移动通信有限公司 一种畸变校正方法及移动终端
CN107146205A (zh) * 2017-03-21 2017-09-08 北京建筑大学 一种畸变图像校正方法、触控位置识别方法及装置
CN113587792A (zh) * 2021-07-26 2021-11-02 陕西绿能电子科技有限公司 一种充电控制器lcd屏幕校准触发方法、系统、设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1719477A (zh) * 2005-05-19 2006-01-11 上海交通大学 摄像机或照相机几何畸变的标定方法
CN1878319A (zh) * 2006-07-06 2006-12-13 上海交通大学 基于平面单应矩阵特征线的摄像机标定方法
CN101572828A (zh) * 2009-05-20 2009-11-04 长春理工大学 基于gpu的相机/摄像机实时畸变校正方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1719477A (zh) * 2005-05-19 2006-01-11 上海交通大学 摄像机或照相机几何畸变的标定方法
CN1878319A (zh) * 2006-07-06 2006-12-13 上海交通大学 基于平面单应矩阵特征线的摄像机标定方法
CN101572828A (zh) * 2009-05-20 2009-11-04 长春理工大学 基于gpu的相机/摄像机实时畸变校正方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103793112A (zh) * 2014-03-10 2014-05-14 航天海鹰光电信息技术(天津)有限公司 一种触摸屏的校准方法及系统
CN103793112B (zh) * 2014-03-10 2018-06-19 天津津航技术物理研究所 一种触摸屏的校准方法及系统
CN105141826A (zh) * 2015-06-30 2015-12-09 广东欧珀移动通信有限公司 一种畸变校正方法及终端
CN105160632A (zh) * 2015-06-30 2015-12-16 广东欧珀移动通信有限公司 一种畸变校正方法及移动终端
CN105160632B (zh) * 2015-06-30 2017-11-07 广东欧珀移动通信有限公司 一种畸变校正方法及移动终端
CN107657595A (zh) * 2015-06-30 2018-02-02 广东欧珀移动通信有限公司 一种畸变校正方法及移动终端和相关介质产品
CN105141826B (zh) * 2015-06-30 2018-03-27 广东欧珀移动通信有限公司 一种畸变校正方法及终端
CN107146205A (zh) * 2017-03-21 2017-09-08 北京建筑大学 一种畸变图像校正方法、触控位置识别方法及装置
CN107146205B (zh) * 2017-03-21 2019-12-13 北京建筑大学 一种畸变图像校正方法、触控位置识别方法及装置
CN113587792A (zh) * 2021-07-26 2021-11-02 陕西绿能电子科技有限公司 一种充电控制器lcd屏幕校准触发方法、系统、设备及介质
CN113587792B (zh) * 2021-07-26 2024-01-19 绿能慧充数字技术有限公司 一种充电控制器lcd屏幕校准触发方法、系统、设备及介质

Also Published As

Publication number Publication date
CN102339169B (zh) 2014-04-30

Similar Documents

Publication Publication Date Title
US11842438B2 (en) Method and terminal device for determining occluded area of virtual object
US9392153B2 (en) Plenoptic camera resolution
TWI435250B (zh) 光學觸控螢幕的準確度校正方法
WO2018019282A1 (zh) 双目全景图像获取方法,装置及存储介质
CN103838437A (zh) 基于投影图像的触控定位控制方法
US10726580B2 (en) Method and device for calibration
CN105005980B (zh) 图像处理方法及装置
CN104048674A (zh) 利用不准确的校准靶的机器视觉系统校准
CN102339169B (zh) 一种大尺寸多点触摸系统的标定方法
AU2017272304B2 (en) Auto vr: an assistant system for virtual reality painting
CN107407554A (zh) 对多相机成像系统进行仿真
CN109901123A (zh) 传感器标定方法、装置、计算机设备和存储介质
WO2023093739A1 (zh) 一种多视图三维重建的方法
CN109740487B (zh) 点云标注方法、装置、计算机设备和存储介质
JP2016515236A (ja) 電子デバイスによる対話型画像戯画化のためのシステムおよび方法
CN107481309A (zh) 三维反射渲染方法及装置
CN107682595B (zh) 一种交互投影方法、系统及计算机可读存储介质
CN113793387A (zh) 单目散斑结构光系统的标定方法、装置及终端
CN107507248A (zh) 图像校正方法及装置
CN106406702B (zh) 一种图片显示方法及装置
Hedayati et al. Modeling standard plenoptic camera by an equivalent camera array
CN114049401A (zh) 双目相机标定方法、装置、设备及介质
Gay et al. Factorization based structure from motion with object priors
CN102110299A (zh) 在三维模型中应用畸变的投影方法及装置
JP2012198076A (ja) カメラシミュレーション装置、カメラシミュレーション方法、及びカメラシミュレーションプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140430