CN106415472A - 一种手势控制方法、装置、终端设备和存储介质 - Google Patents
一种手势控制方法、装置、终端设备和存储介质 Download PDFInfo
- Publication number
- CN106415472A CN106415472A CN201580029659.2A CN201580029659A CN106415472A CN 106415472 A CN106415472 A CN 106415472A CN 201580029659 A CN201580029659 A CN 201580029659A CN 106415472 A CN106415472 A CN 106415472A
- Authority
- CN
- China
- Prior art keywords
- gesture
- touch
- touch action
- type
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
- G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
- G06F2200/163—Indexing scheme relating to constructional details of the computer
- G06F2200/1636—Sensing arrangement for detection of a tap gesture on the housing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
本发明实施例公开了一种手势控制方法,包括:检测对终端设备的触摸屏的触摸动作;获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。相应的,本发明实施例还提供了一种手势控制装置和终端设备,可丰富终端设备的交互方式。
Description
本发明实施例涉及触摸控制领域,尤其涉及一种手势控制方法、装置、终端设备和存储介质。
触摸屏作为一种人机交互设备,其应用范围越来越广泛。用户在触摸屏上执行按下、移动或抬起等基本触摸动作生成各种类型的触摸手势。由于操作的便捷性,现有的终端设备上使用最多的触摸手势为点击手势,对于一个输入的点击手势,终端设备将输入的点击手势的位置,确定该位置对应的应用程序,触发应用程序执行相应的操作,否则该位置不对应应用程序,则不触发任何操作。
目前终端设备对触摸手势的识别都是基于位置和轨迹的,随着终端设备上的功能数量和应用软件数量的增加,这种基于二维平面的触摸手势越来越不能满足终端设备的交互需求,急需引入一种新的交互方式。
发明内容
本发明实施例所要解决的技术问题在于,提供一种手势控制方法、装置、终端设备和存储介质,可丰富终端设备的交互方式。
为了解决上述技术问题,本发明实施例第一方面提供了一种手势控制方法,包括:
检测对终端设备的触摸屏的触摸动作;
获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;
若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
结合第一方面,在第一种可能的实现方式中,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
结合第一方面,在第二种可能的实现方式中,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面;
若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
结合第一方面,在第三种可能的实现方式中,所述识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
结合第一方面至第三种可能的实现方式中的任意一种,在第四种可能的实现方式中,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
结合第一方面至第四种可能的实现方式中的任意一种,在第五种可能的实现方式中,所述获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度包括:
获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;
计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);
通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
结合第一方面至第四种可能的实现方式中的任意一种,在第五种可能的实现方式中,所述检测对终端设备的触摸屏的触摸动作之前,还包括:
自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中。
本发明实施例第二方面提供了一种手势控制装置,包括:
检测模块,用于检测对终端设备的触摸屏的触摸动作;
获取模块,用于获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;
确定模块,用于若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;
调用模块,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
结合第二方面,在第一种可能的实现方式中,所述调用模块包括:
第一确定单元,用于确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;
第一调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
结合第二方面,在第二种可能的实现方式中,所述调用模块包括:
第二确定单元,用于确定所述关节触摸动作发生的界面;
第二调用单元,用于若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
结合第二方面,在第三种可能的实现方式中,所述调用模块包括:
第三确定单元,用于确定所述关节触摸动作发生的界面;
第三调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
结合第二方面至第三种可能的实现方式中的任意一种,在第四种可能的实现方式中,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
结合第二方面至第四种可能的实现方式中的任意一种,在第五种可能的实现方式中,所述获取模块包括:
第一获取单元,用于获取所述触摸动作在所述触摸屏上的接触区域内的像
素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;
计算单元,用于计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);
第二获取单元,用于通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
结合第二方面至第五种可能的实现方式中的任意一种,在第六种可能的实现方式中,映射模块,用于自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中
本发明实施例第三方面提供了一种手势识别装置,包括处理器和存储器,所述存储器中存储一组程序代码,所述处理器调用所述存储器中存储的程序代码,用于执行以下操作:
检测对终端设备的触摸屏的触摸动作;
获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;
若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
结合第三方面,在第一种可能的实现方式中,所述处理器执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:
确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
结合第三方面,在第二种可能的实现方式中,所述处理器执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:
确定所述关节触摸动作发生的界面;
若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
结合第三方面,在第三种可能的实现方式中,所述调用模块包括:
第三确定单元,用于确定所述关节触摸动作发生的界面;
第三调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
结合第三方面至第三种可能的实现方式中的任意一种,在第四种可能的实现方式中,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
结合第三方面至第四种可能的实现方式中的任意一种,在第五种可能的实现方式中,所述处理器执行所述获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度包括:
获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;
计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);
通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
结合第三方面至第五种可能的实现方式中的任意一种,在第六种可能的实现方式中,所述处理器还用于执行:
自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中。
本发明实施例第五方面提供了一种终端设备,包括上述任意一种手势控制装置、触摸屏和重力传感器。
本发明实施例第六方面提供了一种用于控制计算机设备执行手势控制方法,所述方法包括以下步骤:
检测对终端设备的触摸屏的触摸动作;
获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;
若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终
端设备的预设功能。
实施本发明,具有如下有益效果:
通过获取触摸屏上发生的接触面积和z轴加速度,识别出关节触摸动作,识别关节触摸动作对应的手势类型,根据手势类型调用终端设备的预设功能,增加了基于接触面积和z轴加速度的触摸手势对终端设备的交互方法,使终端设备的交互方法更加丰富。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种手势控制方法的流程示意图;
图2为本发明实施例提供的一种手势控制方法的另一流程示意图;
图3是本发明实施例提供的一种手势控制装置的结构示意图;
图4是本发明实施例提供的一种手势控制装置的另一结构示意图;
图5a是图4中调用模块的一种结构示意图;
图5b是图4中调用模块的另一结构示意图;
图5c是图4中调用模块的又一结构示意图;
图6是图4中获取模块的结构示意图;
图7是本发明实施例提供的一种手势控制装置的又一结构示意图;
图8是本发明实施例提供的一种终端设备的结构示意图。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,为本发明实施例提供的一种手势控制方法的流程示意图,在本
发明实施例中,所述方法包括S101-S104。
S101、检测对终端设备的触摸屏的触摸动作。
具体的,可以在亮屏状态或黑屏状态下检测手指对终端设备的触摸屏的触摸动作,并且产生触摸信号。其中,亮屏状态指触摸屏的背景灯点亮的情况,亮屏状态包括锁屏亮屏状态或非锁屏亮屏状态,黑屏状态指触摸屏的背景灯熄灭的情况。该触摸屏可以是专门的触摸屏,也可以是具备触摸功能的显示设备。在多点触控制技术中,触摸屏可以通过触摸事件处理功能接收一个或多个触摸点的触摸动作,并且产生相应的手势,不同的手势指示不同的操作。触摸手势的识别和获取可以因触摸技术的工作原理的不同而不同,本发明对此不作限定。手指的基本触摸动作可以包括手指的按下(down)、移动(move)以及抬起(up)等动作,通过不同的基本触摸动作的组合成不同类型的手势。例如,点击手势由按下和抬起两个基本触摸动作组成,滑动手势由按下、移动和抬起三个基本触摸动作组成。手指与触摸屏接触时,触摸屏上会产生触摸信号,根据触摸信号检测对终端设备的触摸屏的触摸动作。
应该理解的是,本发明并不限于手指对触摸屏的触摸动作,也可以是其他物体对触摸屏的触摸动作,不同的触摸技术其触摸屏能感应不同类型的物体的触摸动作。
S102、获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度。
具体的,接触面积指手指与触摸屏接触时产生的接触区域的面积,手指首次按下时,获取首次按下的接触区域的面积;手指刚接触到触摸屏时在z轴方向存在一定大小的速度,由于触摸屏是刚性的,手指的速度在很短的时间内衰减为零,从而在z轴方向产生重力加速度,手指z轴方向的速度越大,在z轴方向产生的重力加速度就越大。优选的,触摸动作是手指的指关节与触摸屏接触时的动作。
在本发明实施例中的z轴是指垂直触摸屏的方向。可以理解的是,手指以一定的速度与触摸屏接触时,该速度的方向并非完全垂直触摸屏,因此可以获取的z轴加速度利用角度的余弦值进行修正,角度的大小无法直接进行测量,可以根据经验值进行设置。
S103、若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,
确定所述触摸动作为关节触摸动作。
具体的,若S102获取的接触面积大于预设面积且z轴加速度大于预设加速度,确定触摸屏上的触摸动作为关节触摸动作。可以理解的是,本发明实施例中的关节触摸动作是定义的一种新的触摸动作,并非一定由手指关节触发的动作,也有可能是其他物体以很快的速度敲击触摸屏触发的动作,只要满足上述接触面积和z轴加速度的限制条件均可称为本发明实施例的关节触摸动作。
S104、识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
具体的,触摸动作由至少一个基本触摸动作组成,根据关节触摸动作对应的手势类型,根据手势类型调用终端设备对应的预设功能,终端设备对应的预设功能包括:启动/关闭终端设备上的应用程序或调用应用程序中的功能。例如开启终端设备上对应的应用程序,包括进入设置菜单、启动照相机、启动截图、更换主题等;或调用短信应用程序中的回复功能、调用即时通信应用程序中视频通话功能、调用浏览器应用程序中的截屏功能等。不同手势类型对应的不同功能可以预先由用户进行自定义。其中,应用程序可以是系统应用程序或第三方应用程序,系统应用程序指终端设备操作系统自带的应用程序,例如,系统应用程序对应的功能包括拨号功能、进行设置功能、进入短信界面功能等,第三应用程序指安装在终端设备上的应用程序。
可选的,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
具体的,应用程序在终端设备上呈现多个不同的界面,且应用程序内包括多种预设功能。当终端设备上发生关节触摸动作时,确定关节触摸动作发生的界面,以及界面所属的应用程序,识别关节触摸动作对应的手势类型,手势类型包括点击手势或滑动手势,根据手势类型调用所属的应用程序内的预设功能。
例如,关节触摸动作发生的界面为即时通信软件的界面,关节触摸动作对
应的手势类型为两点单击手势,两点单击手势在即时通信软件内对应的预设功能为部分截屏功能,则启动截屏功能,在关节触摸动作发生的界面上显示一个大小可调节的截屏区域,用户调节好所需的截屏区域后,将截取的图片保存至终端设备的指定位置。或关节触摸动作发生的界面为即时通信软件的界面,关节触摸动作对应的手势类型为三点单击手势,三点单击手势在即时通信软件内对应的预设功能为截取全屏功能,则截取整个屏幕生成图片,将生成的图片保存至终端设备的指定位置。
又例如,关节触摸动作发生的界面为照相应用软件的界面,关节触摸动作对应的手势类型为S轨迹手势,S轨迹手势在照相应用软件内对应的预设功能为拍照功能,则启动拍照功能。或M轨迹手势在照相应用软件内对应的预设功能为录像功能。
需要说明的是,在不同类型的应用程序中,相同的手势类型对应的预设功能可能相同,也可能不相同,手势类型对应的预设功能可以根据需要进行自定义。
可选的,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面;
若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
具体的,当终端设备上发生关节触摸动作时,确定关节触摸动作发生的界面,判断界面的类型,若该界面为终端设备的系统桌面,查询手势类型关联的应用程序,并获取关联的应用程序的运行状态,如果关联的应用程序为未启动状态,启动所述关联的应用程序,在终端设备上显示启动后的界面;如果关联的应用程序为后台运行状态,关闭关联的应用程序。本发明实施例中的应用程序可以是系统应用程序或第三方应用程序,此处不作限制。可以理解的是,在移动终端中,由于触摸屏尺寸的限制,移动终端的系统桌面一般划分为多个子界面,当关节触摸动作发生的界面为其中的任意一个子界面时,则可以确定关节触摸动作发生的界面为系统桌面。
例如,当检测到终端设备上发生关节触摸动作时,确定出关节触摸动作发
生的界面为系统桌面,识别关节触摸动作对应的手势类型为C轨迹手势,查询出C轨迹手势对应的预设功能为调用照相应用程序,获取照相应用程序的运行状态,如果照相应用程序为未启动状态,则启动照相应用程序,在终端设备上显示照相机界面,如果照相应用程序未后台运行状态,则关闭照相应用程序;或识别关节触摸动作对应的手势类型为S轨迹手势,查询S轨迹手势对应的预设功能为调用短信应用程序,获取短信应用程序的运行状态,如果短信应用程序为未启动状态,则启动短信应用程序,在终端设备上显示短信编辑界面,如果短信应用程序为后台运行状态,则关闭短信应用程序;或识别关节触摸动作对应的实施为单点三击手势,查询单点三击手势对应的应用程序为调用音乐播放器应用程序,获取音乐播放应用程序的运行状态,如果音乐播放应用程序为未启动状态则启动音乐播放应用程序,在终端设备上显示音乐播放器的歌曲列表界面,如果应用播放应用程序为后台运行状态,则关闭音乐播放应用程序。本发明实施例中的手势类型可以是点击手势或滑动手势,手势类型与应用程序的关联关系可以根据用户需要进行自定义。
可选的,所述识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:
确定所述关节触摸动作发生的界面;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作。
具体的,当终端设备上发生关节触摸动作时,确定关节触摸动作发生的界面,识别关节触摸动作对应的手势类型,根据手势类型对界面进行操作。不同的应用程序在终端设备上呈现不同的界面,且相同的应用程序在终端设备上呈现多个不同的界面,本发明实施例只对关节触摸动作发生的界面进行操作,例如排列图标、更换主题或截屏等操作;其中,相同的手势类型在不同的界面中对应的操作可以相同,也可以不相同。
例如,关节触摸动作发生的界面为即时通信应用程序的设置界面,关节触摸动作对应的手势类型为两点单击手势,两点单击手势对应截屏功能,则调用截图功能对当前的设置界面进行截屏操作;或关节触摸动作发生的界面为终端设备的系统桌面,关节触摸动作对应的手势类型为两点单击手势,两点单击手
势对应截屏功能,则调用截图功能对当前的系统桌面进行截屏操作;或关节触摸动作发生的界面为终端设备的系统桌面,关节触摸动作对应的手势类型为1轨迹手势,1轨迹手势对应图标排列,则调用图片排列功能对当前的系统桌面进行重新排列。
实施本发明的实施例,通过获取触摸屏上发生的接触面积和z轴加速度,识别出关节触摸动作,识别关节触摸动作对应的手势类型,根据手势类型调用终端设备的预设功能,增加了基于接触面积和z轴加速度的触摸手势对终端设备的交互方法,使终端设备的交互方法更加丰富。
参见图2,为本发明实施例提供的一种手势的控制方法的另一流程示意图,在本发明实施例中,所述方法包括S201-S209。
S201、自定义关节触摸动作对应的手势类型与预设功能的映射关系,并将映射关系保存至映射关系库中。
具体的,终端设备预先设置多种关节触摸动作对应的手势类型,用户可通过选择终端设备上的不同的功能与不同的手势类型进行关联。同时,终端设备也可以学习新的手势类型,将新的手势类型保存到本地。
示例性,终端设备预设的手势类型包括:单点单击手势、单点双击手势、两点单击手势、向上滑动手势、向下滑动手势,其中,上述手势均为关节触摸动作。用户可以进行映射关系编辑界面,映射关系编辑界面中显示有上述手势,用户可以选择其中一个手势与需要的功能进行关联,例如,将单点单击手势与进入设置选项的操作指令进行关联,将单点双击手势与启动截屏的操作指令进行关联,将两点单击手势与将目标应用转入后台运行的操作指令进行关联,将向上滑动手势与启动浏览器的操作指令进行关联,将向下滑动指令与切换主体的操作指令进行关联。
需要学习新的手势类型时,用户可以进入手势学习界面,在手势学习界面上绘制自定义手势至少两次,如果自定义手势为滑动手势,当每次自定义手势的滑动轨迹的相似度大于预设阈值时,表示学习新的手势成功;如果自定义手势为点击手势时,当每次的点击次数和触摸点数量相同,表明学习新的手势成功,将学习到的新的手势保存至本地的手势库中,当用户进入映射关系编辑界面中,新的手势就会显示在映射关系编辑界面中,供用户选择操作指令与新的
手势进行关联。
示例性的,需要学习的新的手势为画字母C,用户进入手势学习界面中,根据向导信息的提示,分两次在手势学习界面上画字母C,获取两次绘制得到的滑动轨迹,将滑动轨迹拟合成平面图形,采用相似度算法比较二者的相似度,相似度越大表明两次的滑动轨迹的形状越接近,反之形状差异越大,若计算得到的相似度大于预设阈值,表明新的手势学习成功;需要学习的画字母C的手势为三点单击手势,根据向导信息的提示,分两次在手势学习界面上进行三点单击手势,比较两次的触摸点的数量均为3次且每个触摸点上的点击次数均为1次,表明学习三点单击手势成功。
需要说明的是,预设功能可以是启动/关闭终端设备上的应用程序、启动应用程序内的一项功能。
S202、检测对终端设备的触摸屏的触摸动作。
具体的,可以在亮屏状态下检测手指对终端设备的触摸屏的触摸动作,并且产生触摸信号,亮屏状态包括锁屏亮屏状态和非锁屏亮屏状态。该触摸屏可以是专门的触摸屏,也可以是具备触摸功能的显示设备。在多点触控制技术中,触摸屏可以通过触摸事件处理功能接收一个或多个触摸点的触摸动作,并且产生相应的手势,不同的手势指示不同的操作。触摸手势的识别和获取可以因触摸技术的工作原理的不同而不同,本发明对此不作限定。手指的基本触摸动作可以包括手指的按下(down)、移动(move)以及抬起(up)等动作,通过不同的基本触摸动作的组合成不同类型的手势。例如,点击手势由按下和抬起两个基本触摸动作组成,滑动手势由按下、移动和抬起三个基本触摸动作组成。手指与触摸屏接触时,触摸屏上会产生触摸信号,根据触摸信号检测对终端设备的触摸屏的触摸动作。
示例性的,终端设备的触摸屏为电容触摸屏,电容触摸屏的4个角上设置为4个电极,电容触摸屏的表面有高频信号,当手指与触摸屏接触时,在接触区域上产生一个耦合电容,于是会产生一个接触区域到手指方向的小电流,4个电极上的电流会发生变化,可以通过检测电极上的电流的变化检测对终端设备的触摸动作。
应该理解的是,本发明并不限于手指对触摸屏的触摸动作,也可以是其他
物体对触摸屏的触摸动作,不同的触摸技术触摸屏能感应不同类型的物体的触摸动作。
S203、获取触摸动作在触摸屏上的接触区域内的像素点数量m,以及触摸屏的像素点数量n,触摸屏的面积s;计算得到触摸动作在触摸屏上的接触面积为s*(m/n);通过终端设备自带的重力加速度传感器获取触摸动作的z轴重力减速度。
具体的,接触面积指手指与触摸屏接触时产生的接触区域的面积,手指首次按下时,获取首次按下的接触区域的面积;手指刚接触到触摸屏时在z轴方向存在一定大小的速度,由于触摸屏是刚性的,手指的速度在很短的时间内衰减为零,从而在z轴方向产生重力加速度,手指z轴方向的速度越大,在z轴方向产生的重力加速度就越大。在本发明实施例中的z轴是指垂直触摸屏的方向。计算接触面积的方法可以是:获取触摸动作在触摸屏上的接触区域内的像素点数量m,获取触摸屏的像素点数量n,其中,触摸屏的像素点数量n是固定的,由触摸屏的分辨率决定的是,获取触摸屏的面积s,触摸屏的面积s也是固定的,面积s可以预先存储在终端设备的ROM中,通过公式s*(m/n)计算得到接触区域的面积。通过终端设备自带的重力加速度传感器获取触摸动作的z轴加速度,重力加速度传感器现在普遍内置于智能手机、平板电脑等终端设备中。
需要说明的是,本发明实施例的z轴加速度指以重力加速度为基准的加速度的绝对值,本领域技术人员可知,重力加速度为9.8N/S,z轴加速度为以9.8N/S为基准的变化量的绝对值,变化量的变化趋势可以是正向变化或反向变化。
其中,获取触摸动作在触摸屏上的接触区域内的像素点数量m的方法可以是:以触摸屏为电容触摸屏为例,由上述电容触摸屏的原理可知,当用户的手指接触电容触摸屏时,由于人体电场的作用手指和接触区域之间形成一个耦合电容,接触区域上存在高频信号,于是手指吸收走一个电流,这个电流分别从电容触摸屏的四个角上的电极中流出,理论上流经四个电极的电流与手指到四角的距离成反比,通过对四个电极上的电流可以计算出触摸动作的接触区域,对接触区域进行去噪声和图形拟合处理得到一个平面图形,此时可以统计该平面图形中的像素点的数量m。
S204、是否同时满足接触面积大于预设面积和z轴加速度大于预设加速度。
具体的,根据S203计算得到的接触面积与预设面积进行比较,以及根据S203计算得到的z轴加速度与预设加速度进行比较,如果二者的比较结果均满足大于的限制条件,执行S205,否则执行S206。
其中,预设面积和预设加速度可以根据需要进行设置,本发明不作限制。
S205、确定触摸动作为关节触摸动作。
其中,本发明实施例中的关节触摸动作是定义的一种新的触摸动作,并非一定由手指关节触发的动作,也有可能是其他物体以很快的速度敲击触摸屏触发的动作,只要满足上述接触面积和z轴加速度的限制条件均可称为本发明实施例的关节触摸动作。
S206、确定触摸动作不为关节触摸动作,获取触摸动作的位置,根据位置调用终端设备的功能。
其中,通过触摸动作的位置调用终端设备的预设功能,现有技术已作详细的披露,此处不再赘述。
S207、识别关节触摸动作对应的手势类型。
其中,在触摸操作的持续过程中,根据关节触摸动作包含的基本触摸动作识别对应的手势类型,例如,单点单击手势为在一个触摸点上发生依次按下动作和抬起动作、单点双击手势为在一个触摸点上发生两次按下动作和抬起动作,且两次动作的时间间隔小于预设时长;滑动手势为在一个触摸点上发生按下动作,在另一个触摸点上发生抬起动作,移动的过程中形成滑动轨迹。
S208、获取滑动手势的滑动轨迹,在终端设备的映射关系库中查询滑动轨迹关联的操作指令,并执行查询到的操作指令所指示的操作。
例如,滑动手势的滑动轨迹为封闭图形,在终端设备的映射关系库中查询封闭图形关联的操作指令为启动截屏,则执行启动截屏的操作,在用户界面上显示一个可调节大小的截图框,当用户确定保存截图时将截图框内的图片保存到终端设备的指定位置;滑动手势的滑动轨迹为非封闭图形,在终端设备的映射关系库中查询非封闭图形关联的操作指令为主题切换,则执行主题切换的操作,显示包含多个主题缩略图的界面,在用户选择所需的主题后,将当前主题
切换为选择的主题。滑动手势的滑动轨迹为圆圈,在终端设备的映射关系库中查询关联的操作指令为启动截取部分屏幕的指令,对圆圈内包含的区域进行截图,将截图的图片保存至终端设备的指定位置。
可以理解的是,为了实现支持更多的操作指令,可以进一步的对滑动轨迹的形状进行细分,不同的形状对应不同的操作指令,例如滑动轨迹为字母或数字等,本发明不作限制。
S209、在终端设备的映射关系库中查询点击手势关联的操作指令,并执行查询到的操作指令所指示的操作。
例如,点击手势为单点点击手势,在终端设备的映射关系库中查询到单点点击手势关联的操作指令为进入应用设置,则执行进入应用设置的操作;点击手势为单点双击手势,查询终端设备的映射关系库查询到单点点击手势关联的操作指令为启动浏览器,则执行启动浏览器的操作;点击手势为双点单击手势,在终端设备的映射关系库查询到双点单击手势关联的操作为启动照相机,则执行启动照相机的操作;点击手势为单点三击手势,在终端设备的映射关系库中查询到单点三击手势关联的操作指令为启动截取全屏,则执行截取全屏的操作,将截取的图片保存到终端设备的指定位置。
实施本发明的实施例,通过获取触摸屏上发生的接触面积和z轴加速度,识别出关节触摸动作,识别关节触摸动作对应的手势类型,根据手势类型调用终端设备的预设功能,增加了基于接触面积和z轴加速度的触摸手势对终端设备的交互方法,使终端设备的交互方法更加丰富。
参见图3,为本发明实施例提供的一种手势控制装置的结构示意图,在本发明实施例中,所述手势控制装置包括:检测模块30、获取模块31、确定模块32和调用模块33。
检测模块30,用于检测对终端设备的触摸屏的触摸动作。
获取模块31,用于获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度。
确定模块32,用于若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作。
调用模块33,用于识别所述关节触摸动作对应的手势类型,并根据所述
手势类型调用所述终端设备的预设功能。
本发明实施例的手势控制装置用于执行方法实施例一的手势控制方法,与方法实施例一基于同一构思,其带来的技术效果也相同,具体过程请参照方法实施例一的描述,此处不再赘述。
参见图4-图6,为本发明实施例提供的一种手势控制装置的另一结构示意图,在本发明实施例中,所述手势控制装置除包括检测模块30、获取模块31、确定模块32和调用模块33,还包括映射模块34。
映射模块34,用于自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至所述映射关系库中。
可选的,调用模块33包括:第一确定单元331和第二调用单元332。
第一确定单元331,用于确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序。
第一调用单元332,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
可选的,调用模块33包括:第二确定单元333和第二调用单元334。
第二确定单元333,用于确定所述关节触摸动作发生的界面。
第二调用单元334,用于若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
可选的,调用模块33包括:第三确定单元335和第三调用单元336。
第三确定单元,用于确定所述关节触摸动作发生的界面;
第三调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
可选的,所述点击手势包括:所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
可选的,获取模块31包括:第一获取单元311、计算单元312和第二获取单元313。
第一获取单元311,用于获取所述触摸动作在所述触摸屏上的接触区域内
的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s。
计算单元312,用于计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n)。
第二获取单元313,用于通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
本发明实施例的手势控制装置用于执行方法实施例二的手势控制方法,与方法实施例一和二基于同一构思,其带来的技术效果也相同,具体过程请参照方法实施例一和二的描述,此处不再赘述。
参见图7,为本发明实施例提供的一种手势控制装置的又一结构示意图,在本发明实施例中手势控制装置用于实现本发明实施例的手势控制方法,手势控制装置包括处理器71、存储器72和通信接口73,手势控制装置中的处理器71的数量可以是一个或多个,图7以一个处理器为例。本发明的一些实施例中,处理器71、存储器72和通信接口73可通过总线或其他方式连接,图7中以总线连接为例。
其中,存储器72中存储一组程序代码,且处理器71用于调用存储器72中存储的程序代码,用于执行以下操作:
检测对终端设备的触摸屏的触摸动作;
获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;
若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
在本发明的一些实施例中,处理器71执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:
确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
在本发明的一些实施例中,处理器71执行所述识别所述关节触摸动作的
对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:
确定所述关节触摸动作发生的界面;
若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
在本发明的一些实施例中,处理器71执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:
确定所述关节触摸动作发生的界面;
识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
在本发明的一些实施例中,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
在本发明的一些实施例中,处理器71执行所述获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度包括:
获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;
计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);
通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
在本发明的一些实施例中,处理器71还用于执行:
自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中。
实施本发明的实施例,通过获取触摸屏上发生的接触面积和z轴加速度,识别出关节触摸动作,识别关节触摸动作对应的手势类型,根据手势类型调用终端设备的预设功能,增加了基于接触面积和z轴加速度的触摸手势对终端设备的交互方法,使终端设备的交互方法更加丰富。
本发明实施例还提供了一种终端设备,包括触摸屏83、重力传感器82和手势控制装置81,触摸屏83、重力传感器82和手势控制装置81之间可通过总线连接,也可通过其他方式连接,手势识别装置81为装置实施例一和二中
所述的手势识别装置,重力传感器用于获取触摸动作接触触摸屏时产生的z轴加速度。其中终端设备可以是智能手机、平板电脑或其他带触摸屏的设备。终端设备的具体工作过程可参照方法实施例一和二的描述,此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本发明权利要求所作的等同变化,仍属于发明所涵盖的范围。
Claims (23)
- 一种手势控制方法,其特征在于,包括:检测对终端设备的触摸屏的触摸动作;获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
- 如权利要求1所述的方法,其特征在于,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
- 如权利要求1所述的方法,其特征在于,所述识别关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:确定所述关节触摸动作发生的界面;若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
- 如权利要求1所述的方法,其特征在于,所述识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能包括:确定所述关节触摸动作发生的界面;识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
- 如权利要求1-4任意一项所述的方法,其特征在于,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
- 如权利要求1-5任意一项所述的方法,其特征在于,所述获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度包括:获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
- 如权利要求1-6任意一项所述的方法,其特征在于,所述检测对终端设备的触摸屏的触摸动作之前,还包括:自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中。
- 一种手势控制装置,其特征在于,包括:检测模块,用于检测对终端设备的触摸屏的触摸动作;获取模块,用于获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;确定模块,用于若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;调用模块,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
- 如权利要求8所述的装置,其特征在于,所述调用模块包括:第一确定单元,用于确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;第一调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
- 如权利要求8所述的装置,其特征在于,所述调用模块包括:第二确定单元,用于确定所述关节触摸动作发生的界面;第二调用单元,用于若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
- 如权利要求8所述的装置,其特征在于,所述调用模块包括:第三确定单元,用于确定所述关节触摸动作发生的界面;第三调用单元,用于识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
- 如权利要求8-11任意一项所述的装置,其特征在于,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
- 如权利要求8-12任意一项所述的装置,其特征在于,所述获取模块包括:第一获取单元,用于获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;计算单元,用于计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);第二获取单元,用于通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
- 如权利要求8-13任意一项所述的装置,其特征在于,还包括:映射模块,用于自定义所述关节触摸动作对应的手势类型与预设功能的映 射关系,并将所述映射关系保存至映射关系库中。
- 一种手势识别装置,其特征在于,包括处理器和存储器,所述存储器中存储一组程序代码,所述处理器调用所述存储器中存储的程序代码,用于执行以下操作:检测对终端设备的触摸屏的触摸动作;获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
- 如权利要求15所述的装置,其特征在于,所述处理器执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:确定所述关节触摸动作发生的界面,以及所述界面所属的应用程序;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述应用程序对应的预设功能。
- 如权利要求15所述的装置,其特征在于,所述处理器执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:确定所述关节触摸动作发生的界面;若所述关节动作发生的界面为所述终端设备的系统桌面,查询与所述手势类型关联的应用程序,并启动或关闭所述应用程序。
- 如权利要求15所述的装置,其特征在于,所述处理器执行所述识别所述关节触摸动作的对应手势类型,并根据所述手势类型调用所述终端设备对应的预设功能包括:确定所述关节触摸动作发生的界面;识别所述关节触摸动作对应的手势类型,并根据所述手势类型对所述界面进行操作;其中,所述操作包括截屏、图标排列或更换主题。
- 如权利要求15-18任意一项所述的装置,其特征在于,所述触摸动作对应的手势类型包括点击手势或滑动手势,所述点击手势包括:单点单次点击手势、单点多次点击手势和多点点击手势中的至少一个;所述滑动轨迹包括封闭轨迹和非封闭轨迹中的至少一个。
- 如权利要求15-19任意一项所述的装置,其特征在于,所述处理器执行所述获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度包括:获取所述触摸动作在所述触摸屏上的接触区域内的像素点数量m,以及所述触摸屏的像素点数量n、所述触摸屏的面积s;计算得到所述触摸动作在所述触摸屏上的接触面积为s*(m/n);通过终端设备自带的重力加速度传感器获取所述触摸动作的z轴加速度。
- 如权利要求15-20任意一项所述的装置,其特征在于,所述处理器还用于执行:自定义所述关节触摸动作对应的手势类型与预设功能的映射关系,并将所述映射关系保存至映射关系库中。
- 一种终端设备,其特征在于,包括如权利要求8-22任意一项所述的手势控制装置、触摸屏和重力传感器。
- 一种存储介质,用于控制计算机设备执行手势控制方法,所述方法包括以下步骤:检测对终端设备的触摸屏的触摸动作;获取所述触摸动作在所述触摸屏上的接触面积和接触所述触摸屏时产生的z轴加速度;若所述接触面积大于预设面积且所述z轴加速度大于预设加速度,确定所述触摸动作为关节触摸动作;识别所述关节触摸动作对应的手势类型,并根据所述手势类型调用所述终端设备的预设功能。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2015/076536 WO2016165066A1 (zh) | 2015-04-14 | 2015-04-14 | 一种手势控制方法、装置、终端设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106415472A true CN106415472A (zh) | 2017-02-15 |
CN106415472B CN106415472B (zh) | 2020-10-09 |
Family
ID=57125459
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580029659.2A Active CN106415472B (zh) | 2015-04-14 | 2015-04-14 | 一种手势控制方法、装置、终端设备和存储介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10802704B2 (zh) |
EP (1) | EP3276480A4 (zh) |
JP (1) | JP6598089B2 (zh) |
CN (1) | CN106415472B (zh) |
WO (1) | WO2016165066A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105320436A (zh) * | 2015-07-07 | 2016-02-10 | 崔景城 | 一种以手指关节敲击屏幕来触发截屏的方法 |
CN109408263A (zh) * | 2018-09-27 | 2019-03-01 | 惠州Tcl移动通信有限公司 | 一种界面稳定切换的方法、存储介质及智能终端 |
CN112445410A (zh) * | 2020-12-07 | 2021-03-05 | 北京小米移动软件有限公司 | 触控事件识别方法、装置及计算机可读存储介质 |
CN112532226A (zh) * | 2020-11-05 | 2021-03-19 | 广东瑞德智能科技股份有限公司 | 一种新型触摸人机交互处理方法 |
CN113805487A (zh) * | 2020-07-23 | 2021-12-17 | 荣耀终端有限公司 | 控制指令的生成方法、装置、终端设备及可读存储介质 |
CN114911401A (zh) * | 2021-02-08 | 2022-08-16 | 华为技术有限公司 | 电子设备及其触摸操作的分析方法和可读介质 |
CN116225274A (zh) * | 2023-04-28 | 2023-06-06 | 荣耀终端有限公司 | 触控操作的识别方法、装置、电子设备及存储介质 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6819423B2 (ja) * | 2017-04-04 | 2021-01-27 | 富士ゼロックス株式会社 | 無線通信装置 |
CN110275665A (zh) * | 2019-05-23 | 2019-09-24 | 深圳龙图腾创新设计有限公司 | 一种触摸屏操作方法、电子设备及存储介质 |
CN110502153B (zh) * | 2019-08-30 | 2022-11-11 | Oppo(重庆)智能科技有限公司 | 触摸屏报点率的调整方法、触摸屏、电子设备及存储介质 |
KR102436970B1 (ko) * | 2021-02-16 | 2022-08-26 | 서울과학기술대학교 산학협력단 | 사운드 기계학습에 기반한 제스처 검출 장치 및 방법 |
EP4287005A1 (en) * | 2021-04-06 | 2023-12-06 | Samsung Electronics Co., Ltd. | Electronic device for performing capture function and method for operating electronic device |
KR20230015785A (ko) * | 2021-07-23 | 2023-01-31 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100194692A1 (en) * | 2009-01-30 | 2010-08-05 | Research In Motion Limited | Handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device |
CN101848275A (zh) * | 2009-03-27 | 2010-09-29 | 索尼爱立信移动通信股份公司 | 移动终端装置和启动应用的方法 |
CN101943990A (zh) * | 2009-07-03 | 2011-01-12 | 索尼公司 | 操作控制装置、操作控制方法及计算机程序 |
CN102736791A (zh) * | 2011-04-13 | 2012-10-17 | 株式会社电装 | 操作输入装置和用于控制操作输入装置的方法 |
US20130169565A1 (en) * | 2011-12-28 | 2013-07-04 | Nintendo Co., Ltd. | Computer-readable non-transitory storage medium, information processing apparatus, information processing system, and information processing method |
CN104049728A (zh) * | 2013-03-15 | 2014-09-17 | Lg电子株式会社 | 电子设备及其控制方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008192092A (ja) * | 2007-02-08 | 2008-08-21 | Fuji Xerox Co Ltd | タッチパネル装置、情報処理装置及びプログラム |
JP5160337B2 (ja) * | 2008-08-11 | 2013-03-13 | ソニーモバイルコミュニケーションズ, エービー | 入力処理装置、入力処理方法、入力処理プログラム、及び携帯端末装置 |
US8836648B2 (en) * | 2009-05-27 | 2014-09-16 | Microsoft Corporation | Touch pull-in gesture |
JP2012058856A (ja) * | 2010-09-06 | 2012-03-22 | Sony Corp | 情報処理装置、情報処理方法及び情報処理プログラム |
CN102799292B (zh) | 2011-05-24 | 2016-03-30 | 联想(北京)有限公司 | 一种触摸控制方法、装置及电子设备 |
KR101858608B1 (ko) * | 2011-10-28 | 2018-05-17 | 엘지전자 주식회사 | 이동 단말기 및 이동 단말기의 제어 방법 |
US20130342468A1 (en) * | 2012-06-20 | 2013-12-26 | Chimei Innolux Corporation | Method for determining touch location on a touch panel and touch panel module |
JP5460793B2 (ja) * | 2012-08-21 | 2014-04-02 | シャープ株式会社 | 表示装置、表示方法、テレビジョン受信機及び表示制御装置 |
CN103809882B (zh) | 2012-11-07 | 2017-05-24 | 联想(北京)有限公司 | 一种信息处理的方法、电子设备及触控输入装置 |
JP6132644B2 (ja) * | 2013-04-24 | 2017-05-24 | キヤノン株式会社 | 情報処理装置、表示制御方法、コンピュータプログラム、及び記憶媒体 |
KR101474467B1 (ko) * | 2013-07-09 | 2014-12-19 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어방법 |
JP2015060455A (ja) | 2013-09-19 | 2015-03-30 | シャープ株式会社 | 電子装置、制御方法及びプログラム |
WO2015085526A1 (en) * | 2013-12-12 | 2015-06-18 | Empire Technology Development Llc | Visualization of size of objects |
CN104049759A (zh) | 2014-06-25 | 2014-09-17 | 华东理工大学 | 触摸屏和行为感知联合的指令输入与防护方法 |
-
2015
- 2015-04-14 US US15/566,582 patent/US10802704B2/en active Active
- 2015-04-14 EP EP15888771.1A patent/EP3276480A4/en not_active Ceased
- 2015-04-14 JP JP2017553945A patent/JP6598089B2/ja active Active
- 2015-04-14 WO PCT/CN2015/076536 patent/WO2016165066A1/zh active Application Filing
- 2015-04-14 CN CN201580029659.2A patent/CN106415472B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100194692A1 (en) * | 2009-01-30 | 2010-08-05 | Research In Motion Limited | Handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device |
CN101848275A (zh) * | 2009-03-27 | 2010-09-29 | 索尼爱立信移动通信股份公司 | 移动终端装置和启动应用的方法 |
CN101943990A (zh) * | 2009-07-03 | 2011-01-12 | 索尼公司 | 操作控制装置、操作控制方法及计算机程序 |
CN102736791A (zh) * | 2011-04-13 | 2012-10-17 | 株式会社电装 | 操作输入装置和用于控制操作输入装置的方法 |
US20130169565A1 (en) * | 2011-12-28 | 2013-07-04 | Nintendo Co., Ltd. | Computer-readable non-transitory storage medium, information processing apparatus, information processing system, and information processing method |
CN104049728A (zh) * | 2013-03-15 | 2014-09-17 | Lg电子株式会社 | 电子设备及其控制方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105320436A (zh) * | 2015-07-07 | 2016-02-10 | 崔景城 | 一种以手指关节敲击屏幕来触发截屏的方法 |
CN109408263A (zh) * | 2018-09-27 | 2019-03-01 | 惠州Tcl移动通信有限公司 | 一种界面稳定切换的方法、存储介质及智能终端 |
CN113805487A (zh) * | 2020-07-23 | 2021-12-17 | 荣耀终端有限公司 | 控制指令的生成方法、装置、终端设备及可读存储介质 |
CN113805487B (zh) * | 2020-07-23 | 2022-09-23 | 荣耀终端有限公司 | 控制指令的生成方法、装置、终端设备及可读存储介质 |
CN112532226A (zh) * | 2020-11-05 | 2021-03-19 | 广东瑞德智能科技股份有限公司 | 一种新型触摸人机交互处理方法 |
CN112445410A (zh) * | 2020-12-07 | 2021-03-05 | 北京小米移动软件有限公司 | 触控事件识别方法、装置及计算机可读存储介质 |
CN114911401A (zh) * | 2021-02-08 | 2022-08-16 | 华为技术有限公司 | 电子设备及其触摸操作的分析方法和可读介质 |
CN116225274A (zh) * | 2023-04-28 | 2023-06-06 | 荣耀终端有限公司 | 触控操作的识别方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2018511892A (ja) | 2018-04-26 |
JP6598089B2 (ja) | 2019-10-30 |
WO2016165066A1 (zh) | 2016-10-20 |
CN106415472B (zh) | 2020-10-09 |
US20180095657A1 (en) | 2018-04-05 |
EP3276480A1 (en) | 2018-01-31 |
US10802704B2 (en) | 2020-10-13 |
EP3276480A4 (en) | 2018-05-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106415472A (zh) | 一种手势控制方法、装置、终端设备和存储介质 | |
CN107025019B (zh) | 虚拟按键的交互方法及终端设备 | |
CN108958627B (zh) | 触控操作方法、装置、存储介质及电子设备 | |
CN105242870A (zh) | 具有触摸屏的终端的防误触方法及装置 | |
CN104077003A (zh) | 一种将手机返回键、home键和菜单键合并的方法及装置 | |
CN102023735A (zh) | 一种触摸输入设备、电子设备及手机 | |
CN105426091B (zh) | 一种控制黑屏手势处理的方法及终端 | |
CN105589636A (zh) | 用于在触摸屏上实现虚拟指针控制的方法和移动终端 | |
CN108845752A (zh) | 触控操作方法、装置、存储介质及电子设备 | |
US11455071B2 (en) | Layout method, device and equipment for window control bars | |
CN104020989B (zh) | 基于远程应用的控制方法和系统 | |
CN107577404B (zh) | 信息处理方法、装置和电子设备 | |
CN103324410A (zh) | 用于检测触摸的方法和装置 | |
CN108845756B (zh) | 触控操作方法、装置、存储介质及电子设备 | |
US10078443B2 (en) | Control system for virtual mouse and control method thereof | |
CN105446629A (zh) | 内容面板的切换方法、装置及终端 | |
CN106845190B (zh) | 显示控制系统及方法 | |
CN111198644B (zh) | 智能终端的屏幕操作的识别方法及系统 | |
CN106775406A (zh) | 一种移动终端触摸屏的防误触控制方法、装置及移动终端 | |
CN108021313B (zh) | 一种图片浏览方法及终端 | |
CN113535057B (zh) | 一种手势交互方法及终端设备 | |
CN104679312A (zh) | 电子装置及其触控系统、触控方法 | |
CN110941339B (zh) | 一种手势感应方法及电子设备、存储介质 | |
CN110007748B (zh) | 终端的控制方法、处理装置、存储介质及终端 | |
CN106502515B (zh) | 一种图片输入方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20210428 Address after: Unit 3401, unit a, building 6, Shenye Zhongcheng, No. 8089, Hongli West Road, Donghai community, Xiangmihu street, Futian District, Shenzhen, Guangdong 518040 Patentee after: Honor Device Co.,Ltd. Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd. |
|
TR01 | Transfer of patent right |