CN103605422A - 一种触摸屏操作方法和装置 - Google Patents

一种触摸屏操作方法和装置 Download PDF

Info

Publication number
CN103605422A
CN103605422A CN201310504961.1A CN201310504961A CN103605422A CN 103605422 A CN103605422 A CN 103605422A CN 201310504961 A CN201310504961 A CN 201310504961A CN 103605422 A CN103605422 A CN 103605422A
Authority
CN
China
Prior art keywords
eyeball
event
touch
controlled
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310504961.1A
Other languages
English (en)
Inventor
杨睿琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SUZHOU ACTION PROWAVE TECHNOLOGY CO LTD
Original Assignee
SUZHOU ACTION PROWAVE TECHNOLOGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SUZHOU ACTION PROWAVE TECHNOLOGY CO LTD filed Critical SUZHOU ACTION PROWAVE TECHNOLOGY CO LTD
Priority to CN201310504961.1A priority Critical patent/CN103605422A/zh
Publication of CN103605422A publication Critical patent/CN103605422A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明涉及电子技术领域,公开了一种触摸屏操作方法及装置,能够加快眼球识别技术的推广应用。该触摸屏操作方法包括:通过眼球识别系统接收眼球操控事件;将所述眼球操控事件传递到触摸屏系统中;将所述眼球操控事件转换成触摸事件;根据所述触摸事件在所述触摸屏系统中执行相应的动作。该触摸屏操作方法及装置用于眼球识别技术的推广应用。

Description

一种触摸屏操作方法和装置
技术领域
本发明涉及电子技术领域,特别涉及一种触摸屏操作方法和装置。
背景技术
眼球识别技术就是在静态图像或者动态视频序列中,利用某种检测算法,能够识别或者标记出人的眼球的位置区域、瞳孔中心、虹膜信息甚至视线方向等相关重要信息的技术。目前,眼球识别技术广泛应用于生物识别、医疗辅助、人机交互及驾驶辅助等领域。眼球识别技术的应用可以基于安卓(android)系统。安卓系统是个分层设计的系统,从下到上依次为硬件层、驱动层、中间层及应用层。在眼球识别技术中,硬件层可以为前摄像头,驱动层可以为摄像头驱动,中间层可以为眼球事件识别中间件,应用层可以为眼球识别应用程序,用于接收眼球操控事件。这种系统分层要求应用层必须接收眼球操控事件才能工作,但由于眼球操控接口为非安卓标准接口,触摸屏操控都是标准的安卓接口,而目前大部分的应用层都是支持触摸屏操作的,因此,现有技术中,大部分的应用需要将应用层的非安卓标准接口修改为标准的安卓接口才能接收眼球操控指令,这样的应用方法给该眼球识别技术的应用带来了不便,使得该技术的推广较慢。
发明内容
本发明的目的在于提供一种触摸屏操作方法和装置,能够将眼球操控事件转换为触摸事件,应用方便,有利于眼球识别技术的推广。
为解决上述技术问题,本发明的实施方式提供了一种触摸屏操作方法,包括:
通过眼球识别系统接收眼球操控事件;
将所述眼球操控事件传递到触摸屏系统中;
将所述眼球操控事件转换成触摸事件;
根据所述触摸事件在所述触摸屏系统中执行相应的动作。
本发明的实施方式还提供了一种触摸屏操作装置,包括:
接收单元,用于通过眼球识别系统接收眼球操控事件;
传递单元,用于将所述眼球操控事件传递到触摸屏系统中;
转换单元,用于将所述眼球操控事件转换成触摸事件;
执行单元,用于根据所述触摸事件在所述触摸屏系统中执行相应的动作。
本发明实施方式相对于现有技术而言,通过将接收到的眼球操控事件传递到触摸屏系统中,再将该眼球操控事件转换为触摸事件,最后应用程序根据触摸事件在触摸屏上执行相应的动作。对上层应用程序来说,等同于手指对触摸屏的操控,无需对上层应用程序进行改动,可以将眼球识别技术应用到各种现有的软件程序中,该触摸屏操作方法应用方便,有利于眼球识别技术的推广。
另外,所述通过眼球识别系统接收眼球操控事件具体包括:驱动前置摄像头;接收所述眼球操控动作;对所述眼球操控动作进行解析,得到眼球操控事件。
在眼球识别系统中,首先通过前置摄像头接收眼球操控动作,然后,再将该眼球操控动作解析成眼球操控事件,对后面将该眼球操控动作转换成在触摸屏上的触摸动作提供了方便。
附图说明
图1是本发明第一实施方式的触摸屏操作方法流程示意图;
图2是本发明第一实施方式的眼球识别系统及触摸屏操作系统连接示意图;
图3是本发明第二实施方式的触摸屏操作装置结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的各实施方式进行详细的阐述。然而,本领域的普通技术人员可以理解,在本发明各实施方式中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请各权利要求所要求保护的技术方案。
本发明第一实施方式提供一种触摸屏操作方法,如图1所示,该触摸屏操作方法包括:
101、驱动前置摄像头。
通过眼球识别系统中的摄像头驱动驱动前置摄像头。
102、接收眼球操控动作。
前置摄像头驱动先将前摄像头激活,这样,前置摄像头就可以用来捕捉用户眼球的动作,将捕捉到的用户眼球的动作称为眼球操控动作。
示例的,眼球操控动作可以是在一定时间长度内盯着一个图标、眼球上移、眼球下移、眼球左移、眼球右移、或者眼球在原操作点的基础上做任意角度的移动等。
103、对眼球操控动作进行解析,得到眼球操控事件。
示例的,对用户在一定时间长度内,眼球盯着某个图标的眼球操控动作解析为用户希望打开该图标对应的页面或程序。对眼球操控动作进行解析的方法为现有技术,本发明在此不作赘述。
眼球操控事件可以为手势翻页、打开页面、关闭页面、点击图标等。
104、将眼球操控事件传递到触摸屏系统中。
示例的,如图2所示,触摸屏系统的硬件层为触摸屏,驱动层为触摸屏驱动,中间层为安卓输入输出子系统,应用层为所有既有的触摸屏应用。可以在触摸屏系统中添加一个虚拟的触摸屏驱动程序,将眼球识别中间件解析出的眼球操控事件首先传递到触摸屏系统中的虚拟触摸屏驱动程序中。
105、将眼球操控事件转换成触摸事件。
即将该眼球操控事件转换成对应的触摸事件。
示例的,如图2所示,虚拟触摸屏驱动程序接收眼球事件识别中间件传递的眼球操控事件,并将该眼球操控事件转换成满足安卓输入输出子系统标准输入输出接口要求的触摸事件。
又一示例的,当眼球操控事件为手势翻页时,认为用户在触摸屏上的应用程序A中要完成翻页,因此,该眼球操控事件对应的触摸事件为对应用程序A的翻页;当眼球操控事件为打开页面时,认为用户在触摸屏上的应用程序B中要完成打开眼球对应的页面,则该眼球操控事件对应的触摸事件为打开应用程序B中的页面。
106、根据触摸事件在触摸屏系统中执行相应的动作。
如图2所示,在触摸屏系统中根据安卓输入输出子系统输出的触摸事件对所有既有应用中对应应用执行相应的触摸动作,示例的,可以对应用程序A执行翻页的动作。这样,在触摸屏上,用户就会看到应用程序A中的页面为翻页后的页面。
本发明实施方式相对于现有技术而言,通过将接收到的眼球操控事件传递到触摸屏系统中,再将该眼球操控事件转换为触摸事件,最后应用程序根据触摸事件在触摸屏上执行相应的动作。对上层应用程序来说,等同于手指对触摸屏的操控,无需对上层应用程序进行改动,可以将眼球识别技术应用到各种现有的软件程序中,该触摸屏操作方法应用方便,有利于眼球识别技术的推广。
本发明的第二实施方式涉及一种触摸屏操作装置30,如图3所示,该触摸屏操作装置30包括:
接收单元301,用于通过眼球识别系统接收眼球操控事件。
传递单元302,用于将所述眼球操控事件传递到触摸屏系统中。
转换单元303,用于将所述眼球操控事件转换成触摸事件。
执行单元304,用于根据所述触摸事件在所述触摸屏系统中执行相应的动作。
所述接收单元301具体用于:驱动前置摄像头;接收所述眼球操控动作;对所述眼球操控动作进行解析,得到眼球操控事件。
所述眼球操控事件为:手势翻页、打开页面、关闭页面、点击图标。
当所述眼球操控事件为手势翻页时,所述转换单元303具体用于:将所述手势翻页的眼球操控事件转换为触摸屏系统中对触摸屏进行翻页的事件。
本发明实施方式相对于现有技术而言,首先,接收单元将接收到的眼球操控事件通过传递单元传递到触摸屏系统中,然后,转换单元再将该眼球操控事件转换为触摸事件,接着,报告单元将所述触摸事件上报给触摸屏,最后,执行单元根据触摸事件在触摸屏上执行相应的动作。对上层应用程序来说,等同于手指对触摸屏的操控,无需对上层应用程序进行改动,可以将眼球识别技术应用到各种现有的软件程序中,该触摸屏操作方法应用方便,有利于眼球识别技术的推广。
值得一提的是,本实施方式中所涉及到的各模块均为逻辑模块,在实际应用中,一个逻辑单元可以是一个物理单元,也可以是一个物理单元的一部分,还可以以多个物理单元的组合实现。各个物理单元的工作原理可以参考方法实施例中的叙述,本发明在此不再赘述。此外,为了突出本发明的创新部分,本实施方式中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入,但这并不表明本实施方式中不存在其它的单元。
本领域的普通技术人员可以理解,上述各实施方式是实现本发明的具体实施例,而在实际应用中,可以在形式上和细节上对其作各种改变,而不偏离本发明的精神和范围。

Claims (8)

1.一种触摸屏操作方法,其特征在于,包括:
通过眼球识别系统接收眼球操控事件;
将所述眼球操控事件传递到触摸屏系统中;
将所述眼球操控事件转换成触摸事件;
根据所述触摸事件在所述触摸屏系统中执行相应的动作。
2.根据权利要求1所述的触摸屏操作方法,其特征在于,所述通过眼球识别系统接收眼球操控事件具体包括:
驱动前置摄像头;
接收所述眼球操控动作;
对所述眼球操控动作进行解析,得到眼球操控事件。
3.根据权利要求1所述的触摸屏操作方法,其特征在于,所述眼球操控事件为:
手势翻页、打开页面、关闭页面、点击图标。
4.根据权利要求1至3所述的触摸屏操作方法,其特征在于,当所述眼球操控事件为手势翻页时,所述将所述眼球操控事件转换成触摸事件具体包括:
将所述手势翻页的眼球操控事件转换为触摸屏系统中对触摸屏进行翻页的事件。
5.一种触摸屏操作装置,其特征在于,包括:
接收单元,用于通过眼球识别系统接收眼球操控事件;
传递单元,用于将所述眼球操控事件传递到触摸屏系统中;
转换单元,用于将所述眼球操控事件转换成触摸事件;
执行单元,用于根据所述触摸事件在所述触摸屏系统中执行相应的动作。
6.根据权利要求5所述的触摸屏操作装置,其特征在于,所述接收单元具体用于:
驱动前置摄像头;
接收所述眼球操控动作;
对所述眼球操控动作进行解析,得到眼球操控事件。
7.根据权利要求5所述的触摸屏操作装置,其特征在于,所述眼球操控事件为:
手势翻页、打开页面、关闭页面、点击图标。
8.根据权利要求5至7所述的触摸屏操作装置,其特征在于,当所述眼球操控事件为手势翻页时,所述转换单元具体用于:
将所述手势翻页的眼球操控事件转换为触摸屏系统中对触摸屏进行翻页的事件。
CN201310504961.1A 2013-10-23 2013-10-23 一种触摸屏操作方法和装置 Pending CN103605422A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310504961.1A CN103605422A (zh) 2013-10-23 2013-10-23 一种触摸屏操作方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310504961.1A CN103605422A (zh) 2013-10-23 2013-10-23 一种触摸屏操作方法和装置

Publications (1)

Publication Number Publication Date
CN103605422A true CN103605422A (zh) 2014-02-26

Family

ID=50123655

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310504961.1A Pending CN103605422A (zh) 2013-10-23 2013-10-23 一种触摸屏操作方法和装置

Country Status (1)

Country Link
CN (1) CN103605422A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104915099A (zh) * 2015-06-16 2015-09-16 努比亚技术有限公司 一种图标整理方法和终端设备
CN105338192A (zh) * 2015-11-25 2016-02-17 努比亚技术有限公司 移动终端及其操作处理方法
WO2016029422A1 (en) * 2014-08-29 2016-03-03 Hewlett-Packard Development Company, L.P. Touchscreen gestures
CN105824403A (zh) * 2015-09-21 2016-08-03 维沃移动通信有限公司 一种对终端进行操作的方法及终端
CN110825226A (zh) * 2019-10-30 2020-02-21 维沃移动通信有限公司 消息查看方法及终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101344919A (zh) * 2008-08-05 2009-01-14 华南理工大学 视线跟踪方法及应用该方法的残疾人辅助系统
JP2009054101A (ja) * 2007-08-29 2009-03-12 Saga Univ 視線入力装置、視線入力方法、及び、視線入力プログラム
CN102902352A (zh) * 2011-06-23 2013-01-30 艾利维公司 运动控制作为控制装置
CN103345305A (zh) * 2013-07-22 2013-10-09 百度在线网络技术(北京)有限公司 用于移动终端输入法的候选词控制方法、装置和移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009054101A (ja) * 2007-08-29 2009-03-12 Saga Univ 視線入力装置、視線入力方法、及び、視線入力プログラム
CN101344919A (zh) * 2008-08-05 2009-01-14 华南理工大学 视线跟踪方法及应用该方法的残疾人辅助系统
CN102902352A (zh) * 2011-06-23 2013-01-30 艾利维公司 运动控制作为控制装置
CN103345305A (zh) * 2013-07-22 2013-10-09 百度在线网络技术(北京)有限公司 用于移动终端输入法的候选词控制方法、装置和移动终端

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016029422A1 (en) * 2014-08-29 2016-03-03 Hewlett-Packard Development Company, L.P. Touchscreen gestures
TWI564780B (zh) * 2014-08-29 2017-01-01 惠普發展公司有限責任合夥企業 觸控螢幕姿態技術
US10599326B2 (en) 2014-08-29 2020-03-24 Hewlett-Packard Development Company, L.P. Eye motion and touchscreen gestures
CN104915099A (zh) * 2015-06-16 2015-09-16 努比亚技术有限公司 一种图标整理方法和终端设备
CN105824403A (zh) * 2015-09-21 2016-08-03 维沃移动通信有限公司 一种对终端进行操作的方法及终端
CN105338192A (zh) * 2015-11-25 2016-02-17 努比亚技术有限公司 移动终端及其操作处理方法
CN110825226A (zh) * 2019-10-30 2020-02-21 维沃移动通信有限公司 消息查看方法及终端

Similar Documents

Publication Publication Date Title
US11269459B2 (en) Methods and apparatuses for applying free space inputs for surface constrained controls
CN103605422A (zh) 一种触摸屏操作方法和装置
US9632587B2 (en) Interactive recognition system and display device
CN109032494B (zh) 智能交互系统、书写轨迹显示方法、装置、平板及介质
US20140009623A1 (en) Gesture recognition system and glasses with gesture recognition function
EP2631739A2 (en) Method and device for contact-free control by hand gesture
WO2010138470A3 (en) Gesture coach
CN106598342A (zh) 智能白板电视的多系统同时使用一个触控框的设计方法
EP1914745A3 (en) Display apparatus, display system, and control method thereof
US11269421B2 (en) Method and apparatus for applying free space input for surface constrained control
CN102221891A (zh) 实现视像手势识别的方法和系统
CN102830891A (zh) 一种非接触式手势控制设备及其锁定和解锁方法
CN107643884B (zh) 用于至少两台计算机和一个屏幕交互的方法和系统
WO2017012378A1 (zh) 用于操作电脑的系统、穿戴设备及其操作电脑的方法
CN103197801A (zh) 一体机及其实现外部设备与内置系统同时触摸的方法
KR20150087665A (ko) 핸드라이팅 정보 운용 방법 및 이를 지원하는 전자 장치
CN103336582A (zh) 一种运动信息控制人机交互方法
CN205028278U (zh) 背投式互动显示装置
CN104679337A (zh) 一种触摸屏通道控制器
CN111124236B (zh) 一种数据处理方法、装置和机器可读介质
CN104007915A (zh) 一种电子装置的三维触摸式操作结构及操作方法
US20170085784A1 (en) Method for image capturing and an electronic device using the method
CN109213312B (zh) 电子装置及电子装置的显示控制方法
CN204331626U (zh) 一种智能医疗监控系统
US10613623B2 (en) Control method and equipment

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140226