CN103955275B - 应用控制方法和装置 - Google Patents

应用控制方法和装置 Download PDF

Info

Publication number
CN103955275B
CN103955275B CN201410160826.4A CN201410160826A CN103955275B CN 103955275 B CN103955275 B CN 103955275B CN 201410160826 A CN201410160826 A CN 201410160826A CN 103955275 B CN103955275 B CN 103955275B
Authority
CN
China
Prior art keywords
gesture
application
feature point
capture
static
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410160826.4A
Other languages
English (en)
Other versions
CN103955275A (zh
Inventor
王川
李创奇
刘小鹤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Priority to CN201410160826.4A priority Critical patent/CN103955275B/zh
Publication of CN103955275A publication Critical patent/CN103955275A/zh
Application granted granted Critical
Publication of CN103955275B publication Critical patent/CN103955275B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本公开关于一种应用控制方法和装置,属于终端领域。该应用控制方法包括:捕获预设范围内的手势;检测前台运行的应用;根据所述应用的类型,获取所述手势对应的操作指令;在所述应用的运行过程中,执行所述操作指令。本发明只需用户做出手势即可在该应用的运行过程中执行该手势对应的操作指令,操作简便快捷。

Description

应用控制方法和装置
技术领域
本公开是关于终端领域,尤其是关于应用控制方法和装置。
背景技术
随着智能电视技术的发展,在智能电视上可以安装多个应用,以实现不同的功能。但是,智能电视的应用场景以及用户的操作习惯决定了智能电视仍然需要依靠遥控器来进行操作,由于遥控器上仅提供了方向键、确认键等按键,当智能电视上的应用较多时,用户需要点击多次按键才能启动智能电视上的某一应用,在该应用运行过程中用户还需要点击多次按键来控制该应用。以视频应用为例,用户需要点击多次按键才能找到该视频应用,之后还需要点击多次按键才能在该视频应用中找到希望观看的视频,又需要点击多次按键才能开始播放该视频,控制操作过于繁琐,耗时过长。
发明内容
为了解决相关技术中存在的问题,本公开提供了一种应用控制方法和装置。所述技术方案如下:
根据本公开实施例的第一方面,提供了一种应用控制方法,所述方法包括:
捕获预设范围内的手势;
检测前台运行的应用;
根据所述应用的类型,获取所述手势对应的操作指令;
在所述应用的运行过程中,执行所述操作指令。
所述根据所述应用的类型,获取所述手势对应的操作指令包括:
当所述应用为主桌面应用时,根据第一预设对应关系,获取所述手势对应的应用标识,所述第一预设对应关系包括手势与应用标识之间的对应关系。
所述在所述应用的运行过程中,执行所述操作指令包括:
在所述主桌面应用的运行过程中,启动所述应用标识所指示的应用。
所述根据所述应用的类型,获取所述手势对应的操作指令包括:
当所述应用为主桌面应用以外的应用时,根据第二预设对应关系,获取所述手势对应的控制操作,所述第二预设对应关系包括手势与所述应用的控制操作之间的对应关系。
所述在所述应用的运行过程中,执行所述操作指令包括:
在所述应用的运行过程中,对所述应用执行所述控制操作。
所述捕获预设范围内的手势包括:
捕获所述预设范围内的静态手势;或,
捕获所述预设范围内的动态手势。
所述捕获所述预设范围内的静态手势包括:
捕获所述预设范围内的至少一个手势特征点;
获取所述至少一个手势特征点的位置信息;
根据所述至少一个手势特征点的位置信息,生成所述静态手势。
所述捕获所述预设范围内的动态手势包括:
捕获所述预设范围内的至少一个手势特征点;
获取所述至少一个手势特征点在运动周期的每个采样周期的位置信息,所述运动周期包括多个采样周期;
根据所述每个采样周期的位置信息,生成多个静态手势,并获取所述至少一个手势特征点的运动轨迹;
根据所述多个静态手势和所述至少一个手势特征点的运动轨迹中的至少一项,生成所述动态手势。
所述手势特征点包括手指关节、手指指段和手掌中的至少一项。
根据本公开实施例的第二方面,提供了一种应用控制装置,所述装置包括:
手势捕获模块,用于捕获预设范围内的手势;
检测模块,用于检测前台运行的应用;
指令获取模块,用于根据所述应用的类型,获取所述手势对应的操作指令;
指令执行模块,用于在所述应用的运行过程中,执行所述操作指令。
所述指令获取模块包括:
应用标识获取单元,用于当所述应用为主桌面应用时,根据第一预设对应关系,获取所述手势对应的应用标识,所述第一预设对应关系包括手势与应用标识之间的对应关系。
所述指令执行模块用于在所述主桌面应用的运行过程中,启动所述应用标识所指示的应用。
所述指令获取模块包括:
控制操作获取单元,用于当所述应用为主桌面应用以外的应用时,根据第二预设对应关系,获取所述手势对应的控制操作,所述第二预设对应关系包括手势与所述应用的控制操作之间的对应关系。
所述指令执行模块用于在所述应用的运行过程中,对所述应用执行所述控制操作。
所述手势捕获模块包括:
静态捕获单元,用于捕获所述预设范围内的静态手势;或,
动态捕获单元,用于捕获所述预设范围内的动态手势。
所述静态捕获单元用于捕获所述预设范围内的至少一个手势特征点;获取所述至少一个手势特征点的位置信息;根据所述至少一个手势特征点的位置信息,生成所述静态手势。
所述动态捕获单元用于捕获所述预设范围内的至少一个手势特征点;获取所述至少一个手势特征点在运动周期的每个采样周期的位置信息,所述运动周期包括多个采样周期;根据所述每个采样周期的位置信息,生成多个静态手势,并获取所述至少一个手势特征点的运动轨迹;根据所述多个静态手势和所述至少一个手势特征点的运动轨迹中的至少一项,生成所述动态手势。
所述手势特征点包括手指关节、手指指段和手掌中的至少一项。
本公开的实施例提供的技术方案可以包括以下有益效果:
本实施例提供的方法和装置,通过捕获预设范围内的手势;检测前台运行的应用;根据该应用的类型,获取该手势对应的操作指令;在该应用的运行过程中,执行该操作指令。只需用户做出手势即可在该应用的运行过程中执行该手势对应的操作指令,操作简便快捷。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种应用控制方法的流程图;
图2是根据一示例性实施例示出的一种应用控制方法的流程图;
图3a是根据一示例性实施例示出的静态手势示意图;
图3b是根据一示例性实施例示出的一种通话手势示意图;
图3c是根据一示例性实施例示出的一种射击手势示意图;
图3d是根据一示例性实施例示出的一种旋转方向盘的手势示意图;
图3e是根据一示例性实施例示出的一种音乐手势示意图;
图3f是根据一示例性实施例示出的一种拍摄手势示意图;
图4是根据一示例性实施例示出的一种应用控制方法的流程图;
图5a是根据一示例性实施例示出的一种点击手势示意图;
图5b是根据一示例性实施例示出的一种确认手势示意图;
图5c是根据一示例性实施例示出的另一种确认手势示意图;
图5d是根据一示例性实施例示出的一种顶评论手势示意图;
图5e是根据一示例性实施例示出的另一种顶评论手势示意图;
图5f是根据一示例性实施例示出的一种踩评论手势示意图;
图5g是根据一示例性实施例示出的一种调整音量手势示意图;
图5h是根据一示例性实施例示出的一种菜单调用手势示意图;
图5i是根据一示例性实施例示出的一种翻页手势示意图;
图5j是根据一示例性实施例示出的一种暂停手势示意图;
图5k是根据一示例性实施例示出的一种快进手势示意图;
图5l是根据一示例性实施例示出的一种快退手势示意图;
图5m是根据一示例性实施例示出的一种关闭手势示意图;
图6是根据一示例性实施例示出的一种应用控制装置示意图;
图7是根据一示例性实施例示出的一种装置的框图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚明白,下面结合实施方式和附图,对本公开做进一步详细说明。在此,本公开的示意性实施方式及其说明用于解释本公开,但并不作为对本公开的限定。
本公开实施例提供一种应用控制方法和装置,以下结合附图对本公开进行详细说明。
图1是根据一示例性实施例示出的一种应用控制方法的流程图,如图1所示,该应用控制方法用于终端中,包括以下步骤:
在步骤101中,捕获预设范围内的手势。
在步骤102中,检测前台运行的应用。
在步骤103中,根据该应用的类型,获取该手势对应的操作指令。
在步骤104中,在该应用的运行过程中,执行该操作指令。
本实施例提供的方法,通过捕获预设范围内的手势;检测前台运行的应用;根据该应用的类型,获取该手势对应的操作指令;在该应用的运行过程中,执行该操作指令。只需用户做出手势即可在该应用的运行过程中执行该手势对应的操作指令,操作简便快捷。
该根据该应用的类型,获取该手势对应的操作指令包括:
当该应用为主桌面应用时,根据第一预设对应关系,获取该手势对应的应用标识,该第一预设对应关系包括手势与应用标识之间的对应关系。
该在该应用的运行过程中,执行该操作指令包括:
在该主桌面应用的运行过程中,启动该应用标识所指示的应用。
该根据该应用的类型,获取该手势对应的操作指令包括:
当该应用为主桌面应用以外的应用时,根据第二预设对应关系,获取该手势对应的控制操作,该第二预设对应关系包括手势与该应用的控制操作之间的对应关系。
该在该应用的运行过程中,执行该操作指令包括:
在该应用的运行过程中,对该应用执行该控制操作。
该捕获预设范围内的手势包括:
捕获该预设范围内的静态手势;或,
捕获该预设范围内的动态手势。
该捕获该预设范围内的静态手势包括:
捕获该预设范围内的至少一个手势特征点;
获取该至少一个手势特征点的位置信息;
根据该至少一个手势特征点的位置信息,生成该静态手势。
该捕获该预设范围内的动态手势包括:
捕获该预设范围内的至少一个手势特征点;
获取该至少一个手势特征点在运动周期的每个采样周期的位置信息,该运动周期包括多个采样周期;
根据该每个采样周期的位置信息,生成多个静态手势,并获取该至少一个手势特征点的运动轨迹;
根据该多个静态手势和该至少一个手势特征点的运动轨迹中的至少一项,生成该动态手势。
该手势特征点包括手指关节、手指指段和手掌中的至少一项。
上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
在一个实施例中,图2是应用控制方法的示例性流程图,该实施例的执行主体为终端,参见图2,包括以下步骤:
在步骤201中,该终端捕获预设范围内的手势。
其中,该终端可以为电视、电脑、手机等设备,该终端配置有体感采集设备,通过该体感采集设备可以捕获用户做出的手势,该体感采集设备可以为体感摄像头或者数据手套等等,该预设范围由该体感采集设备的采集范围确定,本实施例对此均不做限定。以电视为例,电视上配置体感摄像头,该体感摄像头与该电视电气相连,根据该体感摄像头的摄像范围可以确定该预设范围,该体感摄像头可以捕获该预设范围内用户做出的手势。
人的手可以分为手掌、大拇指、食指、中指、无名指和小拇指,每个手指由指段和关节组成,随着手指关节的运动,可以形成不同的手势。在本实施例中,为了捕获该预设范围内的手势,该终端监控该预设范围,当检测到该预设范围内出现物体时,对该物体进行识别,判断该物体是否为人的手,当确定该物体为人的手时,获取该物体的姿势,即为手势。那么,当用户希望启动应用时,需将手伸入该终端的预设范围内,在该预设范围内做出该应用标识所对应的手势。
用户做出的手势可以分为静态手势和动态手势,相应的,该步骤201“该终端捕获预设范围内的手势”可以包括以下步骤201a或201b:
201a、该终端捕获该预设范围内的静态手势。
静态手势是指用户做出的处于静止状态的手势。用户将手放入该终端的预设范围内,做出手势且静止不动时,该终端即可捕获到静态手势。
在本实施例中,该终端可以将手的手指关节、手指指段和手掌中的至少一项作为手势特征点,该终端检测该预设范围内是否出现任一手势特征点,当该终端捕获到该预设范围内的手势特征点时,即可根据该手势特征点捕获手势。即该步骤201a可以包括以下步骤201a-1至201a-3:
201a-1、该终端捕获该预设范围内的至少一个手势特征点。
该终端可以预先提取每个手势特征点的特征,当检测到该预设范围内出现物体时,提取该物体的特征,判断该物体的特征是否与每个手势特征点的特征匹配,当该物体的特征与任一手势特征点的特征匹配时,可以确定捕获到该手势特征点。例如,该终端确定该物体的特征与手指关节的特征匹配时,确定捕获到手指关节。
201a-2、该终端获取该至少一个手势特征点的位置信息。
该终端可以设定三维坐标系,当该终端捕获到该至少一个手势特征点时,确定该至少一个手势特征点的位置,将该至少一个手势特征点的位置以该三维坐标系中的坐标值的形式表示,从而得到该至少一个手势特征点的位置信息。
201a-3、该终端根据该至少一个手势特征点的位置信息,生成该静态手势。
该终端可以根据该至少一个手势特征点的位置信息进行曲线拟合,得到该静态手势。以手指关节为例,该终端捕获该预设范围内的所有手指关节,获取每个手指关节的位置信息,根据每个手指关节的位置信息进行曲线拟合,生成该静态手势。
201b、该终端捕获该预设范围内的动态手势。
动态手势是指用户做出的处于运动状态的手势。用户将手放入该终端的预设范围内,做出运动状态下的手势时,该终端即可捕获到动态手势。
基于上述手势特征点,该步骤201b可以包括以下步骤201b-1至201b-4:
201b-1、该终端捕获该预设范围内的至少一个手势特征点。
201b-2、该终端获取该至少一个手势特征点在运动周期的每个采样周期的位置信息,该运动周期包括多个采样周期;
该终端可以预先设定运动周期的时长,该运动周期包括多个采样周期,该采样周期是指该终端配置的体感采集设备的采样时间间隔。当该终端捕获到该至少一个手势特征点时,该运动周期开始,该终端获取该至少一个手势特征点当前的位置信息,之后每经过一个采样周期时,该终端获取一次位置信息,则在该运动周期结束时,该终端可以得到该至少一个手势特征点的多个位置信息。
例如,该终端设定该运动周期的时长为1s,该采样周期的时长为0.1s,假设该终端在0s时捕获到该至少一个手势特征点,则获取该至少一个手势特征点当前的位置信息,之后每隔0.1s,获取该至少一个手势特征点的位置信息,直至到达1s时,该终端可以获取到该至少一个手势特征点的11个位置信息。
201b-3、该终端根据该每个采样周期的位置信息,生成多个静态手势,并获取该至少一个手势特征点的运动轨迹;
对于一个采样周期来说,该终端根据该至少一个手势特征点的位置信息可以进行曲线拟合,可以得到一个静态手势。而对于一个手势特征点来说,该终端根据该手势特征点在每个采样周期的位置信息进行曲线拟合,可以获取该手势特征点的运动轨迹。
201b-4、该终端根据该多个静态手势和该至少一个手势特征点的运动轨迹中的至少一项,生成该动态手势。
在本实施例中,该终端可以根据该多个静态手势,对人手从上一个静态手势切换至下一个静态手势时所做的运动进行模拟,得到该动态手势,或者,根据该至少一个手势特征点的运动轨迹,对人手的运动轨迹进行模拟,生成该动态手势,或者,根据该多个静态手势和该至少一个手势特征点的运动轨迹,生成该动态手势。
参见图3a,该终端得到多个静态手势,对人手从上一个静态手势切换至下一个静态手势时所做的运动进行模拟,可以得到手掌左右摆动的手势。
在步骤202中,该终端检测前台运行的应用,判断该应用是否为主桌面应用。
在本实施例中,正在前台运行的应用可以为该终端上安装的任一应用,可能为主桌面应用或者其他应用。该终端可以检测前台运行的应用,判断该应用是否为主桌面应用,当该应用为主桌面应用时,该终端确定该手势用于启动该手势对应的应用,而当该应用为该主桌面应用以外的应用时,该终端确定该手势用于控制该应用执行该手势对应的控制操作。
在步骤203中,当该应用为主桌面应用时,该终端根据第一预设对应关系,获取该手势对应的应用标识。
本实施例仅以该前台运行的应用为主桌面应用为例进行说明。该第一预设对应关系包括手势与应用标识之间的对应关系,该应用标识可以为应用名称、应用编号等,本实施例对此不做限定。在本实施例中,该终端还可以根据该第一预设对应关系,预先向用户展示每个应用标识对应的手势的图像,使得用户可以获知启动每个应用时需做出的手势。
在步骤204中,该终端启动该应用标识所指示的应用。每个应用标识指示一个应用,当该终端获取到该应用标识时,即可启动该应用标识所指示的应用。
在本实施例中,该终端上安装多个应用,并确定多个应用标识对应的手势,当该终端捕获到任一手势时,可以根据该第一预设对应关系,获取该手势对应的应用标识,从而启动该应用标识所指示的应用,操作简便快捷。
举例来说,该方法包括以下步骤(2-1)至(2-5)中的任一项:
(2-1)当该终端捕获到通话手势时,启动通话应用。
其中,该通话应用可以为视频通话应用或者音频通话应用等。参见图3b,当该终端检测到大拇指和小拇指伸出、其他手指握拳时,确定捕获到该通话手势,则启动通话应用。
(2-2)当该终端捕获到射击手势时,启动射击游戏应用。
参见图3c,当该终端检测到大拇指和食指伸出、其他手指握拳时,确定捕获到该射击手势,则启动射击游戏应用。
(2-3)当该终端捕获到旋转方向盘的手势时,启动赛车游戏应用。
参见图3d,当该终端检测到双手握拳并顺时针旋转时,确定捕获到该旋转方向盘的手势,则启动赛车游戏应用。
(2-4)当该终端捕获到音乐手势时,启动音乐应用。
参见图3e,当该终端检测到大拇指、食指和小拇指伸出、其他手指握拳时,确定捕获到该音乐手势,则启动音乐应用。
(2-5)当该终端捕获到拍摄手势时,启动相机应用。
参见图3f,当该终端检测到双手的大拇指和食指伸出、并形成一个方框时,确定捕获到该拍摄手势,则启动相机应用。
需要说明的是,上述举例仅是给出几个用于启动应用的手势,但并不构成对手势的限定。进一步需要说明的是,上述举例中的“左”、“右”、“顺时针”、“逆时针”均是从用户的角度进行说明的。由于当用户面对该终端时,从用户的角度确定的方向与从该终端的角度确定的方向是相反的,如用户的左方是该终端的右方,用户的手指顺时针旋转时,从该终端的方向上来看,用户的手指在逆时针旋转。因此,该终端在捕获到手势特征点时,可以垂直轴为对称轴,将该手势特征点旋转180o,从而得到用户做出的实际手势。
本实施例提供的方法,通过该终端捕获预设范围内的手势,当前台运行的应用为主桌面应用时,根据该手势和该第一预设对应关系获取应用标识,启动该应用标识所指示的应用,只需用户做出手势即可从多个应用中启动该手势对应的应用,操作简便快捷。进一步地,该终端捕获该预设范围内的静态手势和动态手势,提高了灵活性。
图4是根据一示例性实施例示出的一种应用控制方法的流程图,如图4所示,该应用控制方法用于终端中,包括以下步骤:
在步骤401中,该终端捕获预设范围内的手势。
该步骤401与步骤201类似,在此不再赘述。
在步骤402中,该终端检测前台运行的应用,判断该应用是否为主桌面应用。
在步骤403中,当该应用为主桌面应用以外的应用时,该终端根据第二预设对应关系,获取该手势对应的控制操作。
本实施例仅以该前台运行的应用不是主桌面应用为例进行说明。该第二预设对应关系包括手势与该应用的控制操作之间的对应关系,该应用的控制操作可以为点击该应用中任一按键的操作、关闭该应用的操作等等,本实施例对此不做限定。
在本实施例中,对于相同的手势来说,在不同的应用中该手势可以对应不同的控制操作,则该终端可以预先确定每个应用的第二预设对应关系,对于每个应用来说,该终端获取该应用的第二预设对应关系,从而根据该第二预设对应关系,获取该手势对应的控制操作。另外,该终端还可以根据该第二预设对应关系,预先向用户展示每个控制操作对应的手势的图像,使得用户可以获知控制该应用时需做出的手势。
在步骤404中,该终端对该应用执行该控制操作。
在本实施例中,当该终端在该应用运行过程中捕获到任一手势时,可以根据该第二预设对应关系,获取该手势对应的控制操作,从而对该应用执行该控制操作,操作简便快捷。
举例来说,该方法包括以下步骤(4-1)至(4-11)中的任一项:
(4-1)当该终端捕获到点击手势时,获取当前选中的选项,执行点击该选项的操作。
参见图5a,当该终端检测到食指伸出指向该终端、其他手指握拳时,确定捕获到该点击手势,则该终端获取当前选中的选项,执行点击该选项的操作。
(4-2)当该终端捕获到确认手势时,执行对当前显示信息的确认操作。
在该应用运行过程中,该终端可能会显示询问型的信息,并显示对应的确认按键和取消按键,当该终端捕获到该确认手势时,即可确认该信息,执行对该信息的确认操作。如该终端显示“是否关闭该应用”,当该终端捕获到该确认手势时,关闭该应用。
参见图5b,当该终端检测到大拇指和食指相接成环状、其他手指伸出时,确定捕获到确认手势,则执行对当前显示信息的确认操作。或者,参见图5c,当该终端检测到食指伸出且食指的运动轨迹为“V”字形时,确定捕获到确认手势,则执行对当前显示信息的确认操作。
(4-3)当该终端捕获到顶评论手势时,执行对当前显示信息的顶评论操作。
在该应用运行过程中,该终端可能会显示信息展示平台上发布的信息,此时用户可以对该信息进行评论,如顶评论和踩评论等,当该终端捕获到顶评论手势时,执行对当前显示信息的顶评论操作。
参见图5d,当该终端检测到大拇指伸出且垂直向上、其他手指握拳时,确定捕获到顶评论手势,则执行对当前显示信息的顶评论操作。或者,参见图5e,当检测到双手的食指相接、大拇指相接时,确定捕获到顶评论手势,则执行对当前显示信息的顶评论操作。
(4-4)当该终端捕获到踩评论手势时,执行对当前显示信息的踩评论操作。
参见图5f,当该终端检测到大拇指伸出且垂直向下、其他手指握拳时,确定捕获到踩评论手势,则执行对当前显示信息的踩评论操作。
(4-5)当该终端捕获到调整音量手势时,调整音量。
当该终端检测到食指伸出并旋转,其他手指握拳时,确定捕获到调整音量手势,则根据食指旋转的方向调整音量。当确定食指顺时针旋转时,提高音量,当确定食指逆时针旋转时,降低音量。参见图5g,该终端检测到食指顺时针旋转时提高音量。
(4-6)当该终端捕获到菜单调用手势时,打开当前选中的菜单。
参见图5h,当该终端检测到五指并拢且垂直向上、手掌面向该终端且左右摆动时,确定捕获到菜单调用手势,则确定当前选中的菜单,打开该菜单。
(4-7)当该终端捕获到翻页手势时,根据手掌的摆动方向进行翻页。
参见图5i,当该终端检测到双手的五指并拢且水平、两个手掌均面向该终端、左手掌向左摆动且右手掌向右摆动时,确定捕获到翻至下一页的手势,则翻至下一页,当该终端捕获到双手的五指并拢且水平、两个手掌均面向该终端、左手掌向右摆动且右手掌向左摆动时,确定捕获到翻至上一页的手势,则翻至上一页。
(4-8)当该终端捕获到暂停手势时,暂停播放当前的文件。
参见图5j,当该终端在播放文件的过程中检测到左手平放、右手的手指顶住左手掌心时,确定捕获到该暂停手势,则该终端暂停播放该文件。
(4-9)当该终端捕获到快进手势时,将当前播放的文件快进预设时长。
参见图5k,当该终端在播放文件的过程中检测到大拇指和食指相接成环状、其他手指伸出、手掌向右移动时,确定捕获到快进手势,则该终端将该文件快进预设时长。
(4-10)当该终端捕获到快退手势时,将当前播放的文件倒退该预设时长。
参见图5l,当该终端在播放文件的过程中检测到大拇指和食指相接成环状、其他手指伸出、手掌向左移动时,确定捕获到快退手势,则该终端将该文件倒退预设时长。
(4-11)当该终端捕获到关闭手势时,关闭该应用。
参见图5m,当该终端检测到食指伸出且食指的运动轨迹为“×”字形时,确定捕获到关闭手势,则关闭该应用。
需要说明的是,上述举例仅是给出几个用于控制该应用的手势,但并不构成对手势的限定。进一步需要说明的是,上述举例中的“左”、“右”、“顺时针”、“逆时针”均是从用户的角度进行说明的。由于当用户面对该终端时,从用户的角度确定的方向与从该终端的角度确定的方向是相反的,如用户的左方是该终端的右方,用户的手指顺时针旋转时,从该终端的方向上来看,用户的手指在逆时针旋转。因此,该终端在捕获到手势特征点时,可以垂直轴为对称轴,将该手势特征点旋转180°,从而得到用户做出的实际手势。
本实施例提供的方法,通过该终端捕获预设范围内的手势,当前台运行的应用为主桌面应用以外的应用时,根据该手势和该第二预设对应关系获取控制操作,从而对该应用执行该控制操作,只需用户做出手势即对该应用执行该手势对应的控制操作,操作简便快捷。
图6是根据一示例性实施例示出的一种应用控制装置示意图。参照图6,该装置包括手势捕获模块601,检测模块602、指令获取模块603和指令执行模块604。
该手势捕获模块601被配置为用于捕获预设范围内的手势;
该检测模块602被配置为用于检测前台运行的应用;
该指令获取模块603被配置为用于根据该应用的类型,获取该手势对应的操作指令;
该指令执行模块604被配置为用于在该应用的运行过程中,执行该操作指令。
本实施例提供的装置,通过该终端捕获预设范围内的手势;检测前台运行的应用;根据该应用的类型,获取该手势对应的操作指令;在该应用的运行过程中,执行该操作指令。本发明只需用户做出手势即可在该应用的运行过程中执行该手势对应的操作指令,操作简便快捷。
该指令获取模块603包括:
应用标识获取单元,用于当该应用为主桌面应用时,根据第一预设对应关系,获取该手势对应的应用标识,该第一预设对应关系包括手势与应用标识之间的对应关系。
该指令执行模块604用于在该主桌面应用的运行过程中,启动该应用标识所指示的应用。
该指令获取模块603包括:
控制操作获取单元,用于当该应用为主桌面应用以外的应用时,根据第二预设对应关系,获取该手势对应的控制操作,该第二预设对应关系包括手势与该应用的控制操作之间的对应关系。
该指令执行模块604用于在该应用的运行过程中,对该应用执行该控制操作。
该手势捕获模块601包括:
静态捕获单元,用于捕获该预设范围内的静态手势;或,
动态捕获单元,用于捕获该预设范围内的动态手势。
该静态捕获单元用于捕获该预设范围内的至少一个手势特征点;获取该至少一个手势特征点的位置信息;根据该至少一个手势特征点的位置信息,生成该静态手势。
该动态捕获单元用于捕获该预设范围内的至少一个手势特征点;获取该至少一个手势特征点在运动周期的每个采样周期的位置信息,该运动周期包括多个采样周期;根据该每个采样周期的位置信息,生成多个静态手势,并获取该至少一个手势特征点的运动轨迹;根据该多个静态手势和该至少一个手势特征点的运动轨迹中的至少一项,生成该动态手势。
该手势特征点包括手指关节、手指指段和手掌中的至少一项。
上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
需要说明的是:上述实施例提供的应用控制装置在控制应用时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将终端的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的应用控制装置与应用控制方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图7是根据一示例性实施例示出的一种装置700的框图,该装置700可以用于启动应用或者控制应用。例如,装置700可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图7,装置700可以包括以下一个或多个组件:处理组件702,存储器704,电源组件706,多媒体组件708,音频组件710,输入/输出(I/O)的接口712,传感器组件714,以及通信组件716。
处理组件702通常控制装置700的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理元件702可以包括一个或多个处理器720来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件702可以包括一个或多个模块,便于处理组件702和其他组件之间的交互。例如,处理部件702可以包括多媒体模块,以方便多媒体组件708和处理组件702之间的交互。
存储器704被配置为存储各种类型的数据以支持在设备700的操作。这些数据的示例包括用于在装置700上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器704可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件706为装置700的各种组件提供电力。电力组件706可以包括电源管理系统,一个或多个电源,及其他与为装置700生成、管理和分配电力相关联的组件。
多媒体组件708包括在所述装置700和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件708包括一个前置摄像头和/或后置摄像头。当设备700处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件710被配置为输出和/或输入音频信号。例如,音频组件710包括一个麦克风(MIC),当装置700处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器704或经由通信组件716发送。在一些实施例中,音频组件710还包括一个扬声器,用于输出音频信号。
I/O接口712为处理组件702和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件714包括一个或多个传感器,用于为装置700提供各个方面的状态评估。例如,传感器组件714可以检测到设备700的打开/关闭状态,组件的相对定位,例如所述组件为装置700的显示器和小键盘,传感器组件714还可以检测装置700或装置700一个组件的位置改变,用户与装置700接触的存在或不存在,装置700方位或加速/减速和装置700的温度变化。传感器组件714可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件714还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件714还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件716被配置为便于装置700和其他设备之间有线或无线方式的通信。装置700可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信部件716经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信部件716还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置700可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器704,上述指令可由装置700的处理器720执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当该存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种应用控制方法,该方法包括:
捕获预设范围内的手势;
检测前台运行的应用;
根据该应用的类型,获取该手势对应的操作指令;
在该应用的运行过程中,执行该操作指令。
该根据该应用的类型,获取该手势对应的操作指令包括:
当该应用为主桌面应用时,根据第一预设对应关系,获取该手势对应的应用标识,该第一预设对应关系包括手势与应用标识之间的对应关系。
该在该应用的运行过程中,执行该操作指令包括:
在该主桌面应用的运行过程中,启动该应用标识所指示的应用。
该根据该应用的类型,获取该手势对应的操作指令包括:
当该应用为主桌面应用以外的应用时,根据第二预设对应关系,获取该手势对应的控制操作,该第二预设对应关系包括手势与该应用的控制操作之间的对应关系。
该在该应用的运行过程中,执行该操作指令包括:
在该应用的运行过程中,对该应用执行该控制操作。
该捕获预设范围内的手势包括:
捕获该预设范围内的静态手势;或,
捕获该预设范围内的动态手势。
该捕获该预设范围内的静态手势包括:
捕获该预设范围内的至少一个手势特征点;
获取该至少一个手势特征点的位置信息;
根据该至少一个手势特征点的位置信息,生成该静态手势。
该捕获该预设范围内的动态手势包括:
捕获该预设范围内的至少一个手势特征点;
获取该至少一个手势特征点在运动周期的每个采样周期的位置信息,该运动周期包括多个采样周期;
根据该每个采样周期的位置信息,生成多个静态手势,并获取该至少一个手势特征点的运动轨迹;
根据该多个静态手势和该至少一个手势特征点的运动轨迹中的至少一项,生成该动态手势。
该手势特征点包括手指关节、手指指段和手掌中的至少一项。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (14)

1.一种应用控制方法,其特征在于,所述方法包括:
捕获预设范围内的手势;
检测前台运行的应用;
根据所述应用的类型,获取所述手势对应的操作指令;
在所述应用的运行过程中,执行所述操作指令;
所述捕获预设范围内的手势包括:捕获所述预设范围内的静态手势;或,捕获所述预设范围内的动态手势;
所述捕获所述预设范围内的动态手势,包括:
捕获所述预设范围内的至少一个手势特征点;
获取所述至少一个手势特征点在运动周期的每个采样周期的位置信息,所述运动周期包括多个采样周期;
对于所述多个采样周期中的每个采样周期,根据所述至少一个手势特征点在所述采样周期的位置信息进行曲线拟合,获取所述采样周期得到的静态手势,则获取所述多个采样周期得到的多个静态手势,根据所述多个静态手势,对人手从上一个静态手势切换至下一个静态手势时所做的运动进行模拟,得到动态手势;或者,
对于所述至少一个手势特征点中的每个手势特征点,根据所述手势特征点在每个采样周期的位置信息进行曲线拟合,获取所述手势特征点的运动轨迹,则获取所述至少一个手势特征点的运动轨迹,根据所述至少一个手势特征点的运动轨迹,对人手的运动轨迹进行模拟,生成动态手势。
2.根据权利要求1所述的方法,其特征在于,所述根据所述应用的类型,获取所述手势对应的操作指令包括:
当所述应用为主桌面应用时,根据第一预设对应关系,获取所述手势对应的应用标识,所述第一预设对应关系包括手势与应用标识之间的对应关系。
3.根据权利要求2所述的方法,其特征在于,所述在所述应用的运行过程中,执行所述操作指令包括:
在所述主桌面应用的运行过程中,启动所述应用标识所指示的应用。
4.根据权利要求1所述的方法,其特征在于,所述根据所述应用的类型,获取所述手势对应的操作指令包括:
当所述应用为主桌面应用以外的应用时,根据第二预设对应关系,获取所述手势对应的控制操作,所述第二预设对应关系包括手势与所述应用的控制操作之间的对应关系。
5.根据权利要求4所述的方法,其特征在于,所述在所述应用的运行过程中,执行所述操作指令包括:
在所述应用的运行过程中,对所述应用执行所述控制操作。
6.根据权利要求1所述的方法,其特征在于,所述捕获所述预设范围内的静态手势包括:
捕获所述预设范围内的至少一个手势特征点;
获取所述至少一个手势特征点的位置信息;
根据所述至少一个手势特征点的位置信息,生成所述静态手势。
7.根据权利要求1或6所述的方法,其特征在于,所述手势特征点包括手指关节、手指指段和手掌中的至少一项。
8.一种应用控制装置,其特征在于,所述装置包括:
手势捕获模块,用于捕获预设范围内的手势;
检测模块,用于检测前台运行的应用;
指令获取模块,用于根据所述应用的类型,获取所述手势对应的操作指令;
指令执行模块,用于在所述应用的运行过程中,执行所述操作指令;
所述手势捕获模块包括:
静态捕获单元,用于捕获所述预设范围内的静态手势;或,
动态捕获单元,用于捕获所述预设范围内的动态手势;
所述动态捕获单元用于捕获所述预设范围内的至少一个手势特征点;获取所述至少一个手势特征点在运动周期的每个采样周期的位置信息,所述运动周期包括多个采样周期;对于所述多个采样周期中的每个采样周期,根据所述至少一个手势特征点在所述采样周期的位置信息进行曲线拟合,获取所述采样周期得到的静态手势,则获取所述多个采样周期得到的多个静态手势,根据所述多个静态手势,对人手从上一个静态手势切换至下一个静态手势时所做的运动进行模拟,得到动态手势;或者,对于所述至少一个手势特征点中的每个手势特征点,根据所述手势特征点在每个采样周期的位置信息进行曲线拟合,获取所述手势特征点的运动轨迹,则获取所述至少一个手势特征点的运动轨迹,根据所述至少一个手势特征点的运动轨迹,对人手的运动轨迹进行模拟,生成动态手势。
9.根据权利要求8所述的装置,其特征在于,所述指令获取模块包括:
应用标识获取单元,用于当所述应用为主桌面应用时,根据第一预设对应关系,获取所述手势对应的应用标识,所述第一预设对应关系包括手势与应用标识之间的对应关系。
10.根据权利要求9所述的装置,其特征在于,所述指令执行模块用于在所述主桌面应用的运行过程中,启动所述应用标识所指示的应用。
11.根据权利要求8所述的装置,其特征在于,所述指令获取模块包括:
控制操作获取单元,用于当所述应用为主桌面应用以外的应用时,根据第二预设对应关系,获取所述手势对应的控制操作,所述第二预设对应关系包括手势与所述应用的控制操作之间的对应关系。
12.根据权利要求11所述的装置,其特征在于,所述指令执行模块用于在所述应用的运行过程中,对所述应用执行所述控制操作。
13.根据权利要求8所述的装置,其特征在于,所述静态捕获单元用于捕获所述预设范围内的至少一个手势特征点;获取所述至少一个手势特征点的位置信息;根据所述至少一个手势特征点的位置信息,生成所述静态手势。
14.根据权利要求8或13所述的装置,其特征在于,所述手势特征点包括手指关节、手指指段和手掌中的至少一项。
CN201410160826.4A 2014-04-21 2014-04-21 应用控制方法和装置 Active CN103955275B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410160826.4A CN103955275B (zh) 2014-04-21 2014-04-21 应用控制方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410160826.4A CN103955275B (zh) 2014-04-21 2014-04-21 应用控制方法和装置

Publications (2)

Publication Number Publication Date
CN103955275A CN103955275A (zh) 2014-07-30
CN103955275B true CN103955275B (zh) 2017-07-14

Family

ID=51332560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410160826.4A Active CN103955275B (zh) 2014-04-21 2014-04-21 应用控制方法和装置

Country Status (1)

Country Link
CN (1) CN103955275B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105223959B (zh) * 2015-09-28 2018-07-13 佛山市南海区广工大数控装备协同创新研究院 一种无人机手套控制系统及控制方法
CN105511781B (zh) * 2015-11-30 2019-06-11 深圳市万普拉斯科技有限公司 启动应用程序的方法、装置和用户设备
CN105491235B (zh) * 2015-12-01 2019-11-26 Tcl移动通信科技(宁波)有限公司 一种手机基于手势和动作识别的报警方法及其系统
CN105787971B (zh) * 2016-03-23 2019-12-24 联想(北京)有限公司 一种信息处理方法和电子设备
CN105955635B (zh) * 2016-04-20 2019-11-15 北京小米移动软件有限公司 界面显示方法及装置
CN106227350B (zh) * 2016-07-28 2019-07-09 青岛海信电器股份有限公司 基于手势进行操作控制的方法及智能设备
CN106453836A (zh) * 2016-09-09 2017-02-22 珠海格力电器股份有限公司 应用关闭方法及装置
CN107566871A (zh) * 2017-08-08 2018-01-09 广东长虹电子有限公司 一种人体姿态检测调用菜单的电视系统及其控制方法
CN108536291A (zh) * 2018-03-29 2018-09-14 努比亚技术有限公司 一种应用操作方法、可穿戴设备及存储介质
CN109701263B (zh) * 2018-11-30 2021-10-22 腾讯科技(深圳)有限公司 操作的控制方法及操作控制器
CN109960406B (zh) * 2019-03-01 2020-12-08 清华大学 基于双手手指之间动作的智能电子设备手势捕获与识别技术
CN110069133A (zh) * 2019-03-29 2019-07-30 湖北民族大学 基于手势识别的演示系统控制方法及控制系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101482772A (zh) * 2008-01-07 2009-07-15 纬创资通股份有限公司 电子装置及其操作方法
CN102221885A (zh) * 2011-06-15 2011-10-19 青岛海信电器股份有限公司 电视机及其控制方法和装置
CN102253709A (zh) * 2010-05-19 2011-11-23 禾瑞亚科技股份有限公司 手势判断的方法与装置
CN103226389A (zh) * 2013-04-27 2013-07-31 苏州佳世达电通有限公司 依据手势执行应用程序的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101482772A (zh) * 2008-01-07 2009-07-15 纬创资通股份有限公司 电子装置及其操作方法
CN102253709A (zh) * 2010-05-19 2011-11-23 禾瑞亚科技股份有限公司 手势判断的方法与装置
CN102221885A (zh) * 2011-06-15 2011-10-19 青岛海信电器股份有限公司 电视机及其控制方法和装置
CN103226389A (zh) * 2013-04-27 2013-07-31 苏州佳世达电通有限公司 依据手势执行应用程序的方法

Also Published As

Publication number Publication date
CN103955275A (zh) 2014-07-30

Similar Documents

Publication Publication Date Title
CN103955275B (zh) 应用控制方法和装置
CN103955274B (zh) 应用控制方法和装置
CN104090721B (zh) 终端控制方法和装置
CN104866750B (zh) 应用启动方法和装置
CN104238912B (zh) 应用控制方法及装置
CN105657173B (zh) 音量调节方法、装置及移动终端
CN104867506B (zh) 自动控制音乐的方法和装置
CN106572299A (zh) 摄像头开启方法及装置
CN108052079A (zh) 设备控制方法、装置、设备控制装置及存储介质
CN104866199B (zh) 单手模式下的按键操作处理方法及装置、电子设备
CN105653085B (zh) 触摸响应方法和装置
CN104615240B (zh) 终端的解锁方法和装置
CN104536684B (zh) 界面显示方法及装置
CN104808522B (zh) 状态切换方法及装置
CN106648412A (zh) 投影仪控制方法、装置和投影仪
CN105049807B (zh) 监控画面声音采集方法及装置
CN109885174A (zh) 手势操控方法、装置、移动终端及存储介质
CN106412710A (zh) 直播中通过图形标签进行信息交互的方法及装置
CN104394137B (zh) 一种提醒语音通话的方法及装置
CN106375782A (zh) 视频播放方法及装置
CN108255369A (zh) 屏内指纹图标的显示方法、装置及计算机可读存储介质
CN107529699A (zh) 电子设备控制方法及装置
CN106528081A (zh) 操作执行方法及装置
CN106502859A (zh) 控制终端设备的方法及装置
CN106550252A (zh) 信息的推送方法、装置及设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant