CN107229376A - 采用红外边框作为触控源的人机交互系统 - Google Patents

采用红外边框作为触控源的人机交互系统 Download PDF

Info

Publication number
CN107229376A
CN107229376A CN201610603352.5A CN201610603352A CN107229376A CN 107229376 A CN107229376 A CN 107229376A CN 201610603352 A CN201610603352 A CN 201610603352A CN 107229376 A CN107229376 A CN 107229376A
Authority
CN
China
Prior art keywords
image
square
calibration
enhancing
pixel value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610603352.5A
Other languages
English (en)
Other versions
CN107229376B (zh
Inventor
谭登峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of CN107229376A publication Critical patent/CN107229376A/zh
Application granted granted Critical
Publication of CN107229376B publication Critical patent/CN107229376B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Processing (AREA)

Abstract

本发明的实施例中公开了一种采用红外边框作为触控源的人机交互系统，其特征在于，采用增强校准点附近图像相对于周围环境图像对比度的方法来进行抗环境光干扰。该方法还包括，其一是增强校准点附近图像对于周围环境图像的亮度差，其二是增强校准点附近图像边缘的光滑程度。采用本发明所示的方法，使得光学触摸屏自动定位的抗环境光干扰能力大为提高。

Description

采用红外边框作为触控源的人机交互系统
技术领域
本发明涉及触控源的人机交互系统，尤其是指一种采用红外边框作为触控源的人机交互系统。
背景技术
本人在申请号为2010201357371所描述的专利中公开了一种采用红外边框作为触控源的人机交互系统。
该专利中，为了实现控制光点和显示屏幕光标的位置重合，在设备初始化中采用了自动定位方法。方法是用四边形来逼近采集图像中的显示区域：先识别出整个显示区域所在的矩形四个顶点，再利用控制光点相对于这四个顶点的相对位置，利用几何关系来确定控制光点相对于显示屏幕的位置。利用该方法来做摄像定标，对于摄像机几何失真比较严重的情况下，得到的结果会有较大的误差。
所描述的专利中公开了一种提高光学触摸屏定位精度的方法。该方法采用若干多边形逼近的方法来使得光学触摸屏定位的精度大为提高。先在整个显示屏幕上面显示出六个等距排列的白色方块(①～⑥)，其他的显示区域均用黑色；再用摄像机拍摄出来带有整个显示屏幕白色方块的实物图；然后采用图像识别的方法，识别出来各个白方块的顶点位置座标，此为摄像机的定位坐标；最后，标定出来的定位点，按照从左到右、从上到下的顺序排列；其中方块①～⑥每个顶点的位置坐标即为显示屏幕中方块①～⑥的各顶点在摄像拍得图像中的位置坐标；整个定位过程中，无需人工参与，自动完成。
在实际使用中，摄像机拍摄的原始图片里各种光源比较复杂，如图1所示，若用校准原始图(101)直接来计算校准点，图中(103)所指的区域对方块(102)在整体图像中的亮度有较大的干扰，以至于很难精确的计算出各个方块的顶点。
发明内容
有鉴于此，本发明实施例的主要目的在于提供一种采用红外边框作为触控源的人机交互系统。
采用本新型所示的方法，能够使得光学触摸屏自动定位的抗环境光干扰能力大为提高。
采用红外边框作为触控源的人机交互系统，其特征在于，采用增强校准点附近图像相对于周围环境图像对比度的方法来进行抗环境光干扰。
优选的，其特征在于，增强校准点附近图像相对于周围环境图像对比度的方法，还包括，其一是增强校准点附近图像对于周围环境图像的亮度差，其二是增强校准点附近图像边缘的光滑程度。
优选的，其特征在于，增强校准点附近图像对于周围环境图像的亮度差的方法，还包括，利用拍摄反色图像相减的方法，以减小周围环境光的亮度干扰。
优选的，其特征在于，拍摄反色图像相减的方法，还包括，在显示屏幕上显示校准原始图及其反色图像，利用拍摄所得的图像相减获得最终使用的经过亮度差增强校准图；实施的过程还包括，
先在屏幕上显示校准图，并拍摄下来获得校准原始图(101)；
然后紧接着在屏幕上显示校准图的反色图，并拍摄下来获得矫正参考图(104)；
由于校准原始图(101)和矫正参考图(104)相邻拍摄，从拍摄获得的图像可看出，周围环境光比较类似；
这时，用校准原始图(101)减去矫正参考图(104)，得到最终使用的经过亮度差增强的校准图(106)；
由此可见，若用校准原始图(101)直接来计算校准点，图中(103)所指的区域对方块(102)在整体图像中的亮度有较大的影响，很难精确的计算出各个方块的顶点；而在获得的最终使用的经过亮度差增强的校准图(106)中，如(103)所指的区域被(105)所指的区域减掉一样，校准原始图(101)和矫正参考图(104)中不变的环境光部分被减掉了；此时，图(106)中方块较周围环境光的亮度对比十分明显；更易于图像识别，获得更准确的定位。
优选的，其特征在于，两幅图像相减的算法，还包括，
用两幅图相同坐标位置的像素点的像素值相减获得在该位置的结果图案像素值：如图1所示，设坐标点x，y处第一幅图(101)的像素值为a，相同坐标点x，y处第二幅图(104)的像素值为b，则在该坐标点x，y处两幅图的相减图(106)的像素值为a-b；其中，若a-b的值小于零，则设为0；
优选的，其特征在于，增强校准点附近图像边缘的光滑度的方法，还包括，是增强方块相对于周围环境图像边缘的光滑度。
优选的，其特征在于，增强方块相对于周围环境图像边缘的光滑度的方法，还包括，增强方块顶点附近图像边缘的光滑度。
优选的，其特征在于，增强方块顶点附近图像边缘的光滑度的方法，还包括，在显示屏幕上特别显示出方块四个顶点附近小区域的图像，用以获得更光滑的方块顶点附近图像边缘。
优选的，其特征在于，获得更光滑的方块顶点附近图像边缘的方法，实施过程还包括，
首先，利用权利要求4所述的方法，用仅含方块四个顶点附近小区域的校准原始图(201)减去其矫正参考图(202)获得经过亮度差增强的方块顶点附近小区域图(203)；图(203)中方块顶点附近图像相比于周围图像亮度值增强。
然后，获得方块中心的填充图案。为了后续图像处理中提取方块顶点的方便，需要将图(203)的方块中心填上。然后，利用权利要求4所述的方法，用方块扣除四个顶点附近小区域后剩下的中心区域图片(301)减去其矫正参考图(302)获得经过亮度差增强的方块中心填充图(303)；图(303)中方块中心填充图案相比于周围图像亮度值增强。
最后，将经过亮度差增强的方块顶点附近小区域图(203)加上方块中心的填充图(303)，获得最终使用的校准图(401)。
优选的，其特征在于，两幅图相加的算法，还包括，
用两幅图相同坐标位置的像素点的像素值相加获得在该位置的结果图案像素值；设坐标点x,y处第一幅图(203)的像素值为a，相同坐标点x,y处第二幅图(303)的像素值为b，则在该坐标点x,y处两幅图的相加图(401)的像素值为a+b；其中，若a+b的值大于255，则设为255。
优选的，其特征在于，获得方块中心的填充图的方法，还包括，需要将填充图案设置为略大于方块减去其顶点附近区域后的空白区域，才能更有利于后续图像处理中提取方块顶点。
附图说明
图1为本发明实施例所述的利用拍摄反色图像相减来增强校准方块相对于环境图案亮度示意图；
图2为本发明实施例所述的利用反色图像相减来获得相对于周围亮度增强的方块顶点附近的区域示意图。
具体实施方式
为使本发明的目的、技术方案和优点表达得更加清楚明白，下面结合附图及具体实施例对本发明再作进一步详细的说明。
如图1所示，(101)为摄像拍摄到的一张校准原始图，图中(102)所指的6个方块的顶点即为校准点，自动校准的目的是利用图像处理的方法精确的提取出这些顶点的位置坐标。
在使用中，由于环境光的情况是不断变化着的，尤其是在周围环境光比较亮的情况下，用于定位的方块对于环境图像的区分度并不十分明显。仅仅靠图(101)来计算自动对准所需的方块顶点，往往会失败。因为从图像处理的要求来说，计算方块顶点的结果(即自动对准的精确度)取决于方块相对于周围环境图像的对比度。图中(102)所指方块相对于周围环境图像的对比度越大，最终能够提取出的顶点位置坐标越精确。
方块(102)相对于环境图像的对比度主要体现在两个参数上：其一是方块对于周围环境图像的亮度，其二是方块边缘的光滑程度，尤其是方块顶点附近图像边缘的光滑程度。
要做到更精确的自动对准，就得增强摄像获得的对准图中方块相对于周围环境的对比度。为了提高光学触摸屏的自动定位精度，增强其在各种环境光下自动对准的抗环境光干扰能力，我们设计了如下方法：
方法一是增强方块相对于周围环境图像的亮度，以减小周围环境光的亮度干扰。可以采用拍摄显示区域的反色图像，利用图像相减的方法。
具体的校准过程是：
先在显示屏幕上面显示含有校准方块的校准图，并拍摄下来获得校准原始图(101)；然后紧接着在显示屏幕上面显示校准图的反色图，并拍摄下来获得矫正参考图(104)。由于图(101)和图(104)相邻拍摄，从获得的图像可看出，图片中的环境光互相类似。
这时，用校准原始图(101)减去矫正参考图(104)，得到最终使用的经过亮度差增强的校准图(106)。
从获得的图像可看出，若用校准原始图(101)直接来计算校准点，图中(103)所指的区域对方块(102)在整体图像中的亮度有较大的影响，很难精确的计算出各个方块的顶点。而在获得的最终使用的经过亮度差增强的校准图(106)中，如(103)所指的区域被(105)所指的区域减掉一样，校准原始图(101)和矫正参考图(104)中不变的环境光部分被减掉了；此时，图(106)中方块较周围环境光的亮度对比十分明显；更易于图像识 别，获得更准确的定位。
其中，两幅图像相减的算法是：用两幅图相同坐标位置的像素点的像素值相减获得在该位置的结果图案像素值：如图1所示，设坐标点x，y处第一幅图(101)的像素值为a，相同坐标点x，y处第二幅图(104)的像素值为b，则在该坐标点x，y处两幅图的相减图(106)的像素值为a-b；其中，若a-b的值小于零，则设为0；
方法二是增强方块边缘的光滑度，尤其是增强方块顶点附近图像边缘的光滑度。可以采用在显示屏幕上特别显示出方块四个顶点附近小区域的图像，用以获得更光滑的方块顶点附近图像边缘。如下是一个具体的实施过程：
首先，获得方块顶点附近的增强图案。
利用图1所示的方法，用仅含方块四个顶点附近小区域的校准原始图(201)减去其矫正参考图(202)获得经过亮度差增强的方块顶点附近小区域图(203)；图(203)中方块顶点附近图像相比于周围图像亮度值增强。
然后，获得方块中心的填充图案。
为了后续图像处理中提取方块顶点的方便，需要将图(203)的方块中心填上。然后，利用图1所示的方法，用方块扣除四个顶点附近小区域后剩下的中心区域图片(301)减去其矫正参考图(302)获得经过亮度差增强的方块中心填充图(303)；图(303)中方块中心填充图案相比于周围图像亮度值增强。
最后，将经过亮度差增强的方块顶点附近小区域图(203)加上方块中心的填充图(303)，获得最终使用的校准图(401)。
两幅图相加的算法是：用两幅图相同坐标位置的像素点的像素值相加获得在该位置的结果图案像素值；设坐标点x,y处第一幅图(203)的像素值为a，相同坐标点x,y处第二幅图(303)的像素值为b，则在该坐标点x,y处两幅图的相加图(401)的像素值为a+b；其中，若a+b的值大于255，则设为255。
需要注意的是，实测表明，需要将图(301)方块中心的菱形区域略大于图(201)中方块中心的空白区域，才能更有利于后续图像处理中提取方块顶点。
可以看到经过抗干扰处理获得的校准点坐标精度得到了很大的提高。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种采用红外边框作为触控源的人机交互系统，其特征在于，采用增强校准点附近图像相对于周围环境图像对比度的方法来进行抗环境光干扰。
2.依据权利要求1所述的方法，其特征在于，增强校准点附近图像相对于周围环境图像对比度的方法还包括，其一是增强校准点附近图像对于周围环境图像的亮度差，其二是增强校准点附近图像边缘的光滑程度。
3.依据权利要求2所述的方法，其特征在于，增强校准点附近图像对于周围环境图像的亮度差的方法还包括，利用拍摄反色图像相减的方法，以减小周围环境光的亮度干扰。
4.依据权利要求3所述的方法，其特征在于，拍摄反色图像相减的方法还包括，在显示屏幕上显示校准原始图及其反色图像，利用拍摄所得的图像相减获得最终使用的经过亮度差增强校准图；实施的过程还包括，
先在屏幕上显示校准图，并拍摄下来获得校准原始图(101)；
然后紧接着在屏幕上显示校准图的反色图，并拍摄下来获得矫正参考图(104)；
其次，用校准原始图(101)减去其矫正参考图(104)，得到最终使用的经过亮度差增强的校准图(106)。
5.依据权利要求2所述的的方法，其特征在于，增强校准点附近图像边缘的光滑度的方法还包括，增强方块相对于周围环境图像边缘的光滑度。
6.依据权利要求5所述的方法，其特征在于，增强方块相对于周围环境图像边缘的光滑度的方法，还包括，增强方块顶点附近图像边缘的光滑度。
7.依据权利要求6所述的方法，其特征在于，增强方块顶点附近图像边缘的光滑度的方法还包括，在显示屏幕上特别显示出方块四个顶点附近小区域的图像，用以获得更光滑的方块顶点附近图像边缘。
8.依据权利要求7所述的方法，其特征在于，获得更光滑的方块顶点附近图像边缘，其实施过程还包括，
首先，利用权利要求4所述的方法，用仅含方块四个顶点附近小区域的校准原始图(201)减去其矫正参考图(202)获得经过亮度差增强的方块顶点附近小区域图(203)；
然后，利用权利要求4所述的方法，用方块扣除四个顶点附近小区域后剩下的中心区域图片(301)减去其矫正参考图(302)获得经过亮度差增强的方块中心填充图；
最后，将经过亮度差增强的方块顶点附近小区域图(203)加上方块中心的填充图(303)，获得最终使用的校准图(401)。
9.依据权利要求4和权利要求8所述的两幅图像相加减的算法，其特征在于，还包括，用两幅图相同坐标位置的像素点的像素值相减获得在该位置的结果图案像素值：如图1所示，设坐标点x，y处第一幅图(101)的像素值为a，相同坐标点x，y处第二幅图(104)的像素值为b，则在该坐标点x，y处两幅图的相减图(106)的像素值为a-b；其中，若a-b的值小于零，则设为0；
用两幅图相同坐标位置的像素点的像素值相加获得在该位置的结果图案像素值：如图4所示，设坐标点x，y处第一幅图(203)的像素值为a，相同坐标点x，y处第二幅图(303)的像素值为b，则在该坐标点x，y处两幅图的相加图(401)的像素值为a+b；其中，若a+b的值大于255，则设为255。
10.依据权利要求8所述的方法，其特征在于，获得方块中心的填充图的方法还包括，需要将填充图案设置为略大于方块减去其顶点附近区域后的空白区域，才能更有利于后续图像处理中提取方块顶点。
CN201610603352.5A 2016-03-26 2016-07-28 一种自动定位的抗干扰方法 Active CN107229376B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201620236536 2016-03-26
CN2016202365368 2016-03-26

Publications (2)

Publication Number Publication Date
CN107229376A true CN107229376A (zh) 2017-10-03
CN107229376B CN107229376B (zh) 2023-08-01

Family

ID=59932066

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610603352.5A Active CN107229376B (zh) 2016-03-26 2016-07-28 一种自动定位的抗干扰方法

Country Status (1)

Country Link
CN (1) CN107229376B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014243A (zh) * 2010-12-27 2011-04-13 杭州华三通信技术有限公司 一种图像增强方法和装置
CN102147684A (zh) * 2010-11-30 2011-08-10 广东威创视讯科技股份有限公司 一种触摸屏屏幕扫描方法及其系统
US20140168486A1 (en) * 2012-12-18 2014-06-19 Google Inc. Determining Exposure Times Using Split Paxels
CN105430264A (zh) * 2015-11-26 2016-03-23 努比亚技术有限公司 移动终端及其拍摄处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102147684A (zh) * 2010-11-30 2011-08-10 广东威创视讯科技股份有限公司 一种触摸屏屏幕扫描方法及其系统
CN102014243A (zh) * 2010-12-27 2011-04-13 杭州华三通信技术有限公司 一种图像增强方法和装置
US20140168486A1 (en) * 2012-12-18 2014-06-19 Google Inc. Determining Exposure Times Using Split Paxels
CN105430264A (zh) * 2015-11-26 2016-03-23 努比亚技术有限公司 移动终端及其拍摄处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
黄书锦等: "基于动态范围调整的图像亮度修正方法", 《计算机应用与软件》 *

Also Published As

Publication number Publication date
CN107229376B (zh) 2023-08-01

Similar Documents

Publication Publication Date Title
CN106157310B (zh) 基于混合自适应水平集模型与多通道结合的TFT LCD mura缺陷检测方法
CN109314753B (zh) 使用光流生成中间视图的方法和计算机可读存储介质
US10319104B2 (en) Method and system for determining datum plane
CN107071376B (zh) 一种投影拼接显示校正方法及装置
US20160371855A1 (en) Image based measurement system
CN104702928B (zh) 修正图像交叠区的方法、记录介质以及执行装置
US9049397B2 (en) Image processing device and image processing method
US20210152796A1 (en) Image calibration for projected images
CN101321303A (zh) 非平面多投影显示的几何与光学校正方法
CN107507558A (zh) 一种led显示屏的校正方法
CN112272292B (zh) 投影校正方法、装置和存储介质
CN106600638B (zh) 一种增强现实的实现方法
CN109495729B (zh) 投影画面校正方法和系统
CN110324534B (zh) 图像处理方法、装置及电子设备
JP6942566B2 (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
CN104516482A (zh) 一种无影投影系统及方法
CN106023170B (zh) 一种基于gpu处理器的双目3d畸变矫正方法
CN109271123B (zh) 一种画面显示方法及画面显示装置
US20130278626A1 (en) Systems and methods for simulating accessory display on a subject
CN106445223B (zh) 一种光学触摸屏自动定位的抗干扰方法
JP5691290B2 (ja) 表示システムの設定方法、表示システムの設定装置、およびコンピューター読み取り可能な記憶媒体
CN105005985B (zh) 背光图像微米级边缘检测方法
CN107229376A (zh) 采用红外边框作为触控源的人机交互系统
US20210247852A1 (en) Control device for detection
Zoido et al. Optimized methods for multi-projector display correction

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant