CN105912173B - 一种适用于光学触摸板的自适应三点识别方法 - Google Patents
一种适用于光学触摸板的自适应三点识别方法 Download PDFInfo
- Publication number
- CN105912173B CN105912173B CN201610222035.9A CN201610222035A CN105912173B CN 105912173 B CN105912173 B CN 105912173B CN 201610222035 A CN201610222035 A CN 201610222035A CN 105912173 B CN105912173 B CN 105912173B
- Authority
- CN
- China
- Prior art keywords
- point
- sequence
- contact
- touch
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Position Input By Displaying (AREA)
Abstract
本发明提出了一种适用于光学触摸板的自适应三点识别方法,包括以下步骤:步骤1,在无触点时,获取触摸板表面的背景序列;步骤2,在有触点按下时,识别触点的数量、位置坐标及半径;步骤3,三点触控模式下,去除假点;步骤4,将触点的位置坐标转为直角坐标,得到触摸坐标。该方法可根据周围环境的变化自动调整照明LED亮度并自动保存背景序列,实现自适应控制。运行此方法的触摸板可支持三点触摸以及单击、双击、平移、按压、滚动以及旋转等不同手势,实现友好的人机交互。
Description
技术领域
本发明涉及一种人机交互技术领域,特别是一种适用于光学触摸板的自适应三点识别方法。
背景技术
随着计算机的普及,使用电脑收集信息,展示成果已成为一种时尚。光学触摸板作为一种不同于现有的电容、电阻和红外等触摸技术的最新方案,以其易于使用、大尺寸应用、反应速度快、节省空间等优点,使其越来越受欢迎。
三点触控方式是指在单一显示界面上进行单点、双点或三点的多用户的交互操作,摒弃了键盘、鼠标的单点操作方式。用户可通过双手进行三点触摸和单击、双击、平移、滚动以及旋转等不同手势触摸板幕,实现随心所欲操控。
由于触摸技术的不断发展,光学触摸板的劣势也逐渐变得突出,其最明显的缺陷便是存在假点,所以方法上必须考虑加入假点的抑制,以提高触点识别的准确率。
发明内容
本发明针对现有技术的不足,提出一种可有效去除假点,具有更高精确度的适用于光学触摸板的自适应三点识别方法。
本发明是适用于光学触摸板的自适应三点识别方法,包括以下步骤:
步骤1,在无触点时,获取触摸板表面的背景序列;
步骤2,在有触点按下时,识别触点的数量、位置坐标及半径;
步骤3,三点触控模式下,去除假点;
步骤4,将触点的位置坐标转为直角坐标,得到触摸坐标。
其中,步骤1包括如下步骤:
步骤1-1,获取触摸板表面的背景序列并调整触摸板LED照明灯的亮度;
步骤1-2,重新获取触摸板表面的背景序列并保存,记为参考序列。
步骤1-1包括如下步骤:
步骤1-1-1,将触摸板LED照明灯亮度设定为最低,LED照明灯亮度分为8级;
步骤1-1-2,从触摸板摄像头获取此时触摸板表面的背景序列,计算背景序列的灰度均值,若此灰度均值低于预设的阈值(灰度取值范围为0-255,阈值通常设为50),则提高1级LED亮度;
步骤1-1-3,重复执行步骤1-1-2,直至背景序列的灰度均值高于阈值,则LED照明灯亮度调整完毕,此后LED照明灯亮度不再改变。
步骤2包括如下步骤:
步骤2-1,当有触点按下时,通过触摸板背景传感器获取触摸板表面的背景序列记为触摸序列,用触摸序列减去步骤1-2获取的参考序列,得到背景变化的部分,记为变化序列;
步骤2-2,采用高斯滤波处理变化序列;
步骤2-3,通过高斯滤波后的变换序列计算触点的数量、位置坐标及半径,触点的半径即触点在变换序列中的像素数;若触点数量为1、2、3,则分别进入单点、双点、三点触控模式。
步骤3包括如下步骤:
步骤3-1,三点触控模式下,对步骤2-3中得到的触点半径按由大到小排序;
步骤3-2,触摸板左侧摄像头识别到的半径较大的点对应于右侧摄像头识别到的坐标值较小的点,右侧摄像头识别到的半径较大的点对应于左侧摄像头识别到的坐标值较小的点,中间摄像头对屏幕按角度进行精细划分,提供关于触摸点的角度信息;根据触摸点的角度信息去除假点,并确定真实触点的位置坐标。
步骤4包括:
单点触控模式下,设步骤2-3得到的触点位置坐标(mL,mR),其中mL,mR分别指此触点在左摄像头采集序列中的位置和在右摄像头采集序列中的位置,将此触点位置坐标按照以下公式转化为极坐标(α,β):
按照公式将极坐标(α,β)转化为直角坐标(x,y),NL和NR分别指左摄像头采集序列的长度和右摄像头采集序列的长度。
双点及三点触控模式的坐标计算与单点触控类似,区别仅在于双点和三点触控分别需要计算两个和三个触点的坐标。以双点为例,设左序列得到的两个触点位置分别为mL1和mL2,右序列得到的触点位置分别为mR1和mR2。经步骤3-2中方法判别,可得到双点的触点位置坐标,分别设为(mL1,mR1)和(mL2,mR2),再分别代入单点位置坐标转直角坐标过程,得到双点的直角坐标。
有益效果:
本发明具有如下有益效果:
本发明提出了一种适用于光学触摸板的自适应三点识别方法,其具有如下优点:
1、由于采用差值的方法来获取触摸序列信息,所以能够自动适应不同亮度的环境。
2、每次开机运行时均保存初始背景序列,能够自适应触摸板外框形变与触摸板附近环境的变化。
3、采用半径排序法消除假点,不需添加额外硬件,具有成本低优势。
附图说明
图1为光学触摸板的结构。
图2为光学触摸板上三点识别方法流程图。
图3为光学触摸板三点触摸示意图。
图4为计算坐标点所在的坐标系。
图5为三点触摸且存在假点时左侧、右侧摄像头获取的变化序列。
图6为三点触摸且存在假点时中间摄像头获取的变化序列。
具体实施方式
为了使本技术领域的人员更好地理解本发明,下面结合附图来对本发明中的技术方案进行清楚、完整的描述说明,应理解这些实施例仅用于说明本发明技术方案的具体实施方式,而不用于限制本发明的范围。在阅读了本发明之后,本领域技术人员对本发明的各种等同形式的修改和替换均落于本申请权利要求所限定的保护范围。
本发明公开了一种适用于光学触摸板的自适应三点识别方法,包括以下步骤:
步骤1,在无触点时,获取触摸板表面的背景序列;
步骤2,在有触点按下时,识别触点的数量、位置坐标及半径;
步骤3,三点触控模式下,去除假点;
步骤4,将触点的位置坐标转为直角坐标,得到触摸坐标。
其中,步骤1包括如下步骤:
步骤1-1,获取触摸板表面的背景序列并调整触摸板LED照明灯的亮度;
步骤1-2,重新获取触摸板表面的背景序列并保存,记为参考序列。
步骤1-1包括如下步骤:
步骤1-1-1,将触摸板LED照明灯亮度设定为最低,LED照明灯亮度分为8级;
步骤1-1-2,从触摸板摄像头获取此时触摸板表面的背景序列,计算背景序列的灰度均值,若此灰度均值低于预设的阈值(通常设为50),则提高1级LED亮度;
步骤1-1-3,重复执行步骤1-1-2,直至背景序列的灰度均值高于阈值,则LED照明灯亮度调整完毕,此后LED照明灯亮度不再改变。
步骤2包括如下步骤:
步骤2-1,当有触点按下时,通过触摸板背景传感器获取触摸板表面的背景序列记为触摸序列,用触摸序列减去步骤1-2获取的参考序列,得到背景变化的部分,记为变化序列;
步骤2-2,采用高斯滤波处理变化序列;
步骤2-3,通过高斯滤波后的变换序列计算触点的数量、位置坐标及半径;若触点数量为1、2、3,则分别进入单点、双点、三点触控模式。
步骤3包括如下步骤:
步骤3-1,三点触控模式下,对步骤2-3中得到的触点半径按由大到小排序;
步骤3-2,触摸板左侧摄像头识别到的半径较大的点对应于右侧摄像头识别到的坐标值较小的点,右侧摄像头识别到的半径较大的点对应于左侧摄像头识别到的坐标值较小的点,中间摄像头对屏幕按角度进行精细划分,提供关于触摸点的角度信息;根据触摸点的角度信息去除假点,并确定真实触点的位置坐标。
步骤4包括:
单点触控模式下,设步骤2-3得到的触点位置坐标为(mL,mR),其中mL,mR分别指此触点在左摄像头采集序列中的位置和在右摄像头采集序列中的位置,将此触点位置坐标按照以下公式转化为极坐标(α,β):
按照公式将极坐标(α,β)转化为直角坐标(x,y),NL和NR分别指左摄像头采集序列的长度和右摄像头采集序列的长度。
双点及三点触控模式的坐标计算与单点触控极为类似,区别仅在于双点和三点触控分别需要计算两个和三个触点的坐标。以双点为例,设左序列得到的两个触点位置分别为mL1和mL2,右序列得到的触点位置分别为mR1和mR2。经步骤3-2中方法判别,可得到双点的触点位置坐标,分别设为(mL1,mR1)和(mL2,mR2),再分别代入单点位置坐标转直角坐标过程,得到双点的直角坐标。
实施例
1、光学触摸板架构
图1即为光学触摸板的主要结构,1为反射条,2为摄像头,3为显示器外框,4为控制单元线路板,3个摄像头分别安装在左上角、右上角、中间位置,分别记为左侧摄像头、右侧摄像头和中间摄像头。左侧及右侧摄像头与竖直方向成45°指向反射条方向,中间摄像头则与竖直方向同向,反射条将LED发出的光线反射回摄像头。当存在触摸时,会遮挡部分反射回摄像头的光线,形成触摸序列,经过处理此序列即可识别触摸的位置。
2、三点识别方法流程
光学触摸板的双触点识别方法,主要分为以下4个部分:(1)获取背景序列;(2)触点位置识别;(3)三点模式下去除假点;(4)极坐标转直角坐标。流程图如图2所示。
3、背景序列获取
在无触点的情况下,从摄像头获取的序列即为背景序列。为了给下面的识别方法提供清晰的背景序列与触摸序列,必须调整LED的亮度。LED亮度分为8级。首先将LED亮度设定为最低,从摄像头获取此时的背景序列,计算背景序列的灰度均值,若此灰度均值低于预设的阈值,则提高1级LED亮度,重复从获取背景图像到提高1级LED亮度的步骤,直至背景图像灰度均值高于阈值。此时LED亮度调整完毕,这时从摄像头获取的图像即为最终的背景图像,保存此背景图像供后续使用。此后照明LED亮度不必再改变。
4、触点位置识别
当有触点按下时,触摸板的触点情况如图3所示,以触点在A处为例。此时,从摄像头获取的序列即为触摸序列。用背景序列减去触摸序列即可得图像变化的部分,称作变化序列,三点模式下变化序列如图5所示。由于手指的遮挡出现了黑斑,黑斑中心的位置即为触摸的位置。记黑斑中心距图像最左侧为m像素,记图像长N像素,则根据如下公式计算得到A点处距左边框的角度值α:
由右侧摄像头图像按照计算α的方法计算得A点距上边框的角度值β。
黑斑的半径r为黑斑右边界坐标er减去黑斑左边接坐标el,即:
r=er-el (2)
4、去除假点
以有两个点相互遮挡为例,论述假点去除过程。当三个触点时,设为A点、B点与D点。由于触摸点相互遮挡,左侧摄像头与右侧摄像头均产生如图5所示的两个黑斑,中间摄像头则有三个黑斑,如图6所示。通过上述触点位置识别方法,可计算出三个触点与左边框的夹角α1,α2,α3,其中α2=α3;与上边框的夹角β1,β2,β3,其中β1=β2。此种情况下,产生4个触点坐标点组合P(α1,β1),P(α1,β3),P(α2,β1),P(α2,β3)。实际触摸点为3个,需要去除假点。
根据中间摄像头获得的黑斑序列,对三个触点的角度关系进行更明确的划分。假若真点从左至右为C、B、D,则C点和B点的角度和B与D的角度相当,但从黑斑序列可看出,第1点距离第2点角度更大,因而排除C点,最终确定真点为A、B、D,极坐标分别为(α1,β1),(α2,β1),(α2,β2)。
以上对于有两个点相互遮挡的假点去除分析,可推广至更多遮挡和无遮挡情况。当触摸点没有相互遮挡时,最多会出现9种可能的情况,此时需先通过左侧和右侧摄像头的黑斑半径大小来去除部分假点。记左侧摄像头三黑斑的大小为r1,r2,r3。将触点的半径进行由大到小的排序,得r1>r2>r3,左侧摄像头识别到的半径较大的点对应于右侧摄像头识别到的坐标值较小的点,根据上述规律可排除5个假点坐标,剩余的1个假点坐标采用中间摄像头进行精确角度分析来排除。
5、极坐标转直角坐标
极坐标(α,β)不可直接使用,需转换为直角坐标。将极坐标带入公式:
即可得到归一化的直角坐标(x,y),以两摄像头之间的直线距离L为单位1,如图3中所示。以两摄像头所确定的直线为x轴,以垂直于x轴,过两摄像头连线中点的直线为y轴构成坐标系,如图4所示。
本发明提供了一种适用于光学触摸板的自适应三点识别方法,具体实现该技术方案的方法和途径很多,以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。本实施例中未明确的各组成部分均可用现有技术加以实现。
Claims (1)
1.一种适用于光学触摸板的自适应三点识别方法,其特征在于,包括以下步骤:
步骤1,在无触点时,获取触摸板表面的背景序列;
步骤2,在有触点按下时,识别触点的数量、位置坐标及半径;
步骤3,三点触控模式下,去除假点;
步骤4,将触点的位置坐标转为直角坐标,得到触摸坐标;
步骤1包括如下步骤:
步骤1-1,获取触摸板表面的背景序列并调整触摸板照明灯的亮度;
步骤1-2,重新获取触摸板表面的背景序列并保存,记为参考序列;
步骤1-1包括如下步骤:
步骤1-1-1,将触摸板LED照明灯亮度设定为最低,LED照明灯亮度分为8级;
步骤1-1-2,从触摸板摄像头获取此时触摸板表面的背景序列,计算背景序列的灰度均值,若此灰度均值低于预设的阈值,则提高1级LED亮度;
步骤1-1-3,重复执行步骤1-1-2,直至背景序列的灰度均值高于阈值,则照明灯亮度调整完毕,此后LED照明灯亮度不再改变;
步骤2包括如下步骤:
步骤2-1,当有触点按下时,通过触摸板背景传感器获取触摸板表面的背景序列记为触摸序列,用触摸序列减去步骤1-2获取的参考序列,得到背景变化的部分,记为变化序列;
步骤2-2,采用高斯滤波处理变化序列;
步骤2-3,通过高斯滤波后的变换序列计算触点的数量、位置坐标及半径,触点的半径即触点在变换序列中的像素数;若触点数量为1、2、3,则分别进入单点、双点、三点触控模式;
步骤3包括如下步骤:
步骤3-1,三点触控模式下,对步骤2-3中得到的触点半径按由大到小排序;
步骤3-2,3个摄像头分别安装在左上角、右上角、中间位置,分别记为左侧摄像头、右侧摄像头和中间摄像头;左侧及右侧摄像头与竖直方向成45°指向反射条方向,中间摄像头则与竖直方向同向,触摸板左侧摄像头识别到的半径较大的点对应于右侧摄像头识别到的坐标值较小的点,右侧摄像头识别到的半径较大的点对应于左侧摄像头识别到的坐标值较小的点,中间摄像头对屏幕按角度进行精细划分,提供关于触摸点的角度信息;根据触摸点的角度信息去除假点,并确定真实触点的位置坐标,当三个触点时,设为A点、B点与D点,左侧摄像头与右侧摄像头均产生两个黑斑,中间摄像头则有三个黑斑,通过触点位置识别方法,计算出三个触点与左边框的夹角α1,α2,α3,其中α2=α3;与上边框的夹角β1,β2,β3,其中β1=β2,产生4个触点坐标点组合P(α1,β1),P(α1,β3),P(α2,β1),P(α2,β3),实际触摸点为3个,根据中间摄像头获得的黑斑序列,对三个触点的角度关系进行划分,根据黑斑序列排除C点,最终确定真点为A、B、D,极坐标分别为(α1,β1),(α2,β1),(α2,β2);
步骤4包括:
单点触控模式下,设步骤2-3得到的触点位置坐标为(mL,mR),其中mL,mR分别指此触点在左摄像头采集序列中的位置和在右摄像头采集序列中的位置,将此触点位置坐标按照以下公式转化为极坐标(α,β):
按照公式将极坐标(α,β)转化为直角坐标(x,y),NL和NR分别指左摄像头采集序列的长度和右摄像头采集序列的长度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610222035.9A CN105912173B (zh) | 2016-04-11 | 2016-04-11 | 一种适用于光学触摸板的自适应三点识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610222035.9A CN105912173B (zh) | 2016-04-11 | 2016-04-11 | 一种适用于光学触摸板的自适应三点识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105912173A CN105912173A (zh) | 2016-08-31 |
CN105912173B true CN105912173B (zh) | 2019-04-30 |
Family
ID=56745015
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610222035.9A Active CN105912173B (zh) | 2016-04-11 | 2016-04-11 | 一种适用于光学触摸板的自适应三点识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105912173B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114020204B (zh) * | 2021-09-03 | 2023-07-07 | 统信软件技术有限公司 | 一种任务执行方法、装置、计算设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102023762A (zh) * | 2010-12-08 | 2011-04-20 | 成都际洲科技有限公司 | 一种光学多点触摸屏及其实现方法 |
CN102163108A (zh) * | 2011-04-26 | 2011-08-24 | 广东威创视讯科技股份有限公司 | 多触摸点识别方法及装置 |
CN103793113A (zh) * | 2014-03-10 | 2014-05-14 | 航天海鹰光电信息技术(天津)有限公司 | 一种光学触摸模组的成像定位方法及光学触摸控制设备 |
CN104571729A (zh) * | 2015-01-14 | 2015-04-29 | 东南大学 | 应用于光学触摸屏的多触点识别方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7532206B2 (en) * | 2003-03-11 | 2009-05-12 | Smart Technologies Ulc | System and method for differentiating between pointers used to contact touch surface |
-
2016
- 2016-04-11 CN CN201610222035.9A patent/CN105912173B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102023762A (zh) * | 2010-12-08 | 2011-04-20 | 成都际洲科技有限公司 | 一种光学多点触摸屏及其实现方法 |
CN102163108A (zh) * | 2011-04-26 | 2011-08-24 | 广东威创视讯科技股份有限公司 | 多触摸点识别方法及装置 |
CN103793113A (zh) * | 2014-03-10 | 2014-05-14 | 航天海鹰光电信息技术(天津)有限公司 | 一种光学触摸模组的成像定位方法及光学触摸控制设备 |
CN104571729A (zh) * | 2015-01-14 | 2015-04-29 | 东南大学 | 应用于光学触摸屏的多触点识别方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105912173A (zh) | 2016-08-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9262016B2 (en) | Gesture recognition method and interactive input system employing same | |
KR102335132B1 (ko) | 하나의 단일 감지 시스템을 이용하는 멀티 모드 제스처 기반의 상호작용 시스템 및 방법 | |
JP5991041B2 (ja) | 仮想タッチスクリーンシステム及び双方向モード自動切換方法 | |
US8339359B2 (en) | Method and system for operating electric apparatus | |
US9494415B2 (en) | Object position determination | |
Ewerling et al. | Finger and hand detection for multi-touch interfaces based on maximally stable extremal regions | |
US10198627B2 (en) | Gesture identification with natural images | |
US9916043B2 (en) | Information processing apparatus for recognizing user operation based on an image | |
WO2007035343A1 (en) | System and method for providing an interactive interface | |
US9363444B2 (en) | Background model update method for image process | |
WO2017029749A1 (ja) | 情報処理装置、その制御方法、プログラム、及び記憶媒体 | |
CN108846371A (zh) | 显示装置及其指纹识别方法 | |
CN103336634A (zh) | 基于自适应分层结构光的触碰检测系统及方法 | |
CN105912173B (zh) | 一种适用于光学触摸板的自适应三点识别方法 | |
US9489077B2 (en) | Optical touch panel system, optical sensing module, and operation method thereof | |
CN105278760B (zh) | 光学触控系统 | |
CN107256089B (zh) | 以自然影像进行的手势识别方法 | |
TWI444875B (zh) | 多點觸碰輸入裝置及其使用單點觸控感應板與影像感測器之資料融合之介面方法 | |
TW201312380A (zh) | 光學觸控系統 | |
CN109947291A (zh) | 应用于光学触摸屏的多触点识别方法 | |
EP3126950A1 (en) | Three-part gesture | |
TWI536228B (zh) | 感應式移動偵測裝置 | |
CN104571729A (zh) | 应用于光学触摸屏的多触点识别方法 | |
JP2017045332A (ja) | 情報処理装置、その制御方法、プログラム、記憶媒体 | |
Ahn et al. | Depth Camera-based Screen Control System Employing Fingertip |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20190327 Address after: 210007 1 East Street, alfalfa garden, Qinhuai District, Nanjing, Jiangsu. Applicant after: China Electric Rice Information System Co., Ltd. Address before: 210007 1 East Street, alfalfa garden, Nanjing, Jiangsu Applicant before: China Electronic Technology Corporation (Group) 28 Institute |
|
GR01 | Patent grant | ||
GR01 | Patent grant |