CN102778954A

CN102778954A - 一种手势操作管理方法及装置

Info

Publication number: CN102778954A
Application number: CN2012102233030A
Authority: CN
Inventors: 李贞贞
Original assignee: TCL Corp
Current assignee: TCL Corp
Priority date: 2012-06-29
Filing date: 2012-06-29
Publication date: 2012-11-14
Anticipated expiration: 2032-06-29
Also published as: CN102778954B

Abstract

本发明适用于计算机应用领域，提供了一种手势操作管理方法及装置，所述方法包括：提供一个手势管理接口，通过手势管理接口预先在所有应用的每个界面上对应界面的操作设置一个或多个策略；启动应用后，在应用的当前界面上采集有效的手势动作信息；调用当前界面上对手势动作信息具有控制权的策略根据所述手势动作信息执行对应的指令。通过设置手势管理接口，设备上的应用程序均可根据该接口对应应用的每个界面的操作设置一个或多个策略，所有应用在使用时均可根据该手势管理接口采集有效手势动作信息并调用当前界面上对手势动作信息具有控制权的策略执行对应的指令，不用每个程序单独实现手势操作方案，手势操作的升级和修改也更简便。

Description

一种手势操作管理方法及装置

技术领域

本发明属于计算机应用领域，尤其涉及一种手势操作管理方法及装置。

背景技术

智能设备的发展，使得当今的智能设备具备了很多强大的休闲娱乐及其它功能，这些功能的发展导致了越来越多的操作方式的出现，手势操作就是其中之一。对于当今智能设备上的手势操作而言，由于每个应用软件界面上手势操作要实现的界面效果不同，因而手势都是针对单个的应用软件单独实现的。每个应用软件实现手势操作时都要单独对手势操作进行手势识别的检错流程，手势识别的开启关闭流程，手势识别界面提示图标的更换及显示等，浪费时间及人力，而且应用研发人员在设计手势操作方案时，设计的方案各不相同，在遇到手势操作需要修改维护时，每个应用都需要去进行各自方案的更改，更改过于麻烦，且这些更改有可能破坏系统稳定性，存在潜在隐患，更改越多，隐患发生的几率就越大。

发明内容

本发明实施例的目的在于提供一种手势操作管理方法及装置，旨在解决现有的手势识别都是基于各个应用软件单独实现的，修改过于麻烦且更改容易造成系统隐患的问题。

本发明实施例是这样实现的，一种手势操作管理方法，所述方法包括：

提供一个手势管理接口，并通过该手势管理接口预先在所有应用的每个界面上对应界面的操作设置一个或多个策略；

启动应用后，在所述应用的当前界面上采集有效的手势动作信息；

调用当前界面上对所述手势动作信息具有控制权的策略，所述策略根据所述手势动作信息执行对应的指令。

本发明实施例的另一目的在于提供一种手势操作管理装置，所述装置包括一个用于管理应用的手势操作的手势管理接口，所述手势管理接口包括：

策略设置模块，用以预先分别在所有应用的每个界面上对应该界面的操作设置一个或多个策略；

手势识别模块，用于在应用启动后，在该应用的当前界面上采集有效的手势动作信息；

手势接口模块，用于调用当前界面上对所述有效手势动作信息具有控制权的策略，所述策略根据所述有效手势动作信息执行对应的指令。

在本发明实施例中，通过在设备中设置一个手势管理接口，设备上的所有应用程序均可根据该接口由开发人员在应用的每个界面上对应界面的操作设置一个或多个策略，随之，所有应用在使用时均可根据采集到的有效手势动作信息调用当前界面上对手势动作信息具有控制权的策略，该策略根据手势动作信息执行对应的指令，而不用每个程序单独实现手势操作方案，因而手势操作的升级和修改也较为简便。

附图说明

图1是本发明实施例提供的手势操作管理方法的流程图；

图2是本发明实施例提供的同一个界面上，策略对手势动作信息的控制权发生变更的示意图；

图3是本发明实施例提供的不同界面之间由于策略对手势动作信息的控制权发生变更导致界面转换的示意图；

图4是本发明实施例提供的手势操作管理装置的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例提供了一种手势操作管理方法，通过在设备中预先设置一个手势管理接口，设备上的所有应用程序均可根据该接口由开发人员在应用的每个界面上对应界面的操作设置一个或多个策略，随之，所有应用均可根据采集到的有效手势动作信息调用当前界面上对手势动作信息具有控制权的策略，该策略根据手势动作信息执行对应的指令，则不再需要各个应用软件单独开发手势操作的方案。

为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。

实施例一：

如图1所示为本发明提供的手势操作管理方法的流程图，为了便于说明，仅示出了与本发明实施例相关的部分。

在步骤S101中，提供一个手势管理接口，并通过该手势管理接口预先在所有应用的每个界面上对应界面的操作设置一个或多个策略，并将所设置的策略添加至策略列表中。

在本发明实施例中，该手势管理接口包括三个模块，即策略设置模块、手势识别模块以及手势接口模块。所述策略设置模块用于在所有应用的每个界面上对应界面的操作设置一个或多个策略。所述手势识模块用于识别手势动作的有效性。所述手势接口模块用于统一管理手势识别的过程，处理采集到的手势动作信息，并管理预先在应用界面上设置的策略。

在本发明实施例中，手势管理接口通过策略设置模块预先在所有应用的每个界面上对应该界面的操作设置有一个或多个策略，对于每个应用而言，逐层打开应用界面后预先在每个不同的界面上分别对应该界面的操作设置一个或多个策略，并将所设置的策略添加到手势接口模块的策略列表中，由手势接口模块对策略列表进行管理。其中，策略是指在一个界面上进行操作时，一组具有相同级别处理权限的手势动作与一组执行指令的对应集合，策略对其所包括的一个或多个手势动作信息具有控制权，对其他策略的手势动作信息则不享有控制权，策略仅能调用及执行具有控制权的手势动作信息所对应的执行指令。如：在采集到具有控制权的手势动作信息其中之一时，策略可调用与该手势动作信息相对应的执行指令并执行。

在步骤S102中，启动应用，在该应用的当前界面上采集有效的手势动作信息。

在本发明实施例中，进入应用后，在该应用的当前界面上，由手势接口模块启动手势操作，并清理以前采集的手势动作信息记录，初始化手势操作，随之在当前界面上，利用摄像头等采集手势视频流。采集到手势视频流后，手势识别模块从手势视频流中分离出手势图片，并通过分析手势图片提取手势特征获得手势动作信息，最终根据预先定义的手势动作有效性判定所述手势动作信息的有效性，以从中获取符合预先定义的手势动作有效性的手势动作信息。若手势识别模块未从手势视频流中提取出手势动作信息，或提取出的手势动作信息不符合预先定义的手势动作有效性，则视为该次采集手势动作信息失败。

在步骤S103中，从手势接口模块的策略列表中调用当前界面上对上述有效的手势动作信息具有控制权的策略，该策略根据手势动作信息执行对应的指令。

在本发明实施例中，在手势识别模块采集到有效的手势动作信息后，手势接口模块通过回调接口获得采集到的有效手势动作信息，然后从手势接口模块的策略列表中调用当前界面上对所采集到的手势动作信息具有控制权的策略，该策略根据所采集到的手势动作信息调用对应的指令并执行。此时，该策略享有对手势动作信息的控制权，其他策略无权获得手势动作信息。其中，当接收到的是代表确认的手势动作信息或代表退出的手势确认信息时，则策略之间会发生手势动作信息控制权的变更，如下所述。

具体为，当手势接口模块获取的有效手势动作信息是确认时，当前界面上的当前策略失去对手势动作信息的控制权，当前界面上的下一个策略获得对手势动作信息的控制权，调用当前界面上的下一个策略，后续采集到的用户手势动作信息，将由当前界面上的下一个策略执行对应的指令。如图2所示，在策略1拥有手势动作信息的控制权时，若采集到手势动作信息是确认时，策略1失去手势动作信息的控制权，策略2获得手势动作信息的控制权。若当前策略为当前界面上的最后一个策略（即当前界面上没有下一个策略），则进入下一个界面，调用下一个界面上的第一个策略，使得下一个界面的第一个策略获得手势动作信息的控制权，由下一个界面的第一个策略来根据后续手势动作信息执行对应的指令。如图3所示，界面1上的最后一个策略(策略n)拥有手势动作信息的控制权时，若采集到手势动作信息是确认时，界面1上的策略n失去手势动作信息的控制权，界面2上的策略1获得手势动作信息的控制权。其中，若当前界面为最后一个界面且当前策略为当前节目的最后一个策略时（即没有下一个界面），则当前策略保持手势动作信息的控制权，如图3所示，界面2上的策略n拥有手势动作信息的控制权时，若采集到手势动作信息是确认，则界面2上的策略n保持手势动作信息的控制权。

当手势接口模块获取的有效手势动作信息是退出时，当前界面上的当前策略失去对手势动作信息的控制权，当前界面上的上一个策略获得对手势动作信息的控制权，调用当前界面上的上一个策略，后续采集到的用户的手势动作信息，将由当前界面上的上一个策略执行对应的指令。如图2所示，在策略2拥有手势动作信息的控制权时，若采集到用户的手势动作信息是退出时，则策略2失去手势动作信息的控制权，策略1获得手势动作信息的控制权。若当前策略为当前界面上的第一个策略（即当前界面上没有上一个策略），则返回上一个界面，调用上一个界面上的最后一个策略，使得上一个界面的最后一个策略获得手势动作信息的控制权，由上一个界面的最后一个策略来根据后续手势动作信息执行对应的指令，如图3所示，界面2上的第一个策略(策略1)拥有手势动作信息的控制权时，若采集到手势动作信息是退出时，界面2上的策略1失去手势动作信息的控制权，界面1上的最后一个策略(策略n)获得手势动作信息的控制权。其中，若当前界面为第一个界面时且当前策略是当前界面的第一个策略时（即没有上一个界面），则手势接口模块结束手势识别操作，手势策略失效，停止采集手势动作信息，退出当前界面后结束当前应用，如图3所示，界面1上的策略1拥有手势动作信息的控制权时，若采集到手势动作信息是退出，则退出当前界面后结束当前应用。

优选的，为了使用户更为直观地看到手势动作信息，在调用当前界面上对手势动作信息具有控制权的策略，该策略根据手势动作信息执行对应的指令的同时，在设备上显示与所采集到的手势动作信息相对应的图片，每采集到一个有效的手势动作信息，就在设备上更换一次与手势动作信息相对应的图片。如：采集到一个向左移动的手势动作信息，就在设备上显示一个向左挥动的手掌图片。

在本发明实施例中，通过在设备中设置一个手势管理接口，设备上的所有应用程序均可根据该接口由开发人员在应用的每个界面上对应该界面的操作设置一个或多个策略，随之，所有应用在使用时均可根据采集到的有效手势动作信息调用当前界面上对手势动作信息具有控制权的策略，该策略根据手势动作信息执行对应的指令，而不用每个程序单独实现手势操作方案，因而手势操作的升级和修改也较为简便。

实施例二：

图4为本发明实施例提供的手势操作管理装置的结构示意图，对应实现实施例一中的步骤S101-S103，为了便于说明，仅示出了与本发明实施例相关的部份。该装置可以是内置于手机、电视机等多媒体智能设备中的软件模块、硬件模块或者软硬件相结合的模块，或者作为独立的挂件集成到这些多媒体智能设备或多媒体智能设备的应用系统中。其中：

手势操作管理装置包括一个用于管理应用的手势操作的手势管理接口4，所述手势管理接口4包括三个模块，分别为：策略设置模块41、手势识别模块42及手势接口模块43，其中：

策略设置模块41，用以预先在所有应用的每个界面上对应该界面的操作设置一个或多个策略，并将所设置的策略添加到手势接口模块43的策略列表中。

手势识别模块42，用于在应用启动后，在该应用的当前界面上采集有效的手势动作信息。

在本发明实施例中，所述手势识别模块42包括三个子模块，分别为：

视频采集模块421，用于采集手势视频流。

手势特征提取模块422，用于从手势视频流中分离出手势图片，分析手势图片提取手势特征后获得手势动作信息。

手势有效性判定模块423，用于根据预先定义的手势动作有效性判定所述手势动作信息是否有效，从而获取符合预先定义的手势动作有效性的手势动作信息。

手势接口模块43，包括调用模块431，用于在手势识别模块获取有效的手势动作信息后，从手势接口模块43的策略列表中调用当前界面上对有效手势动作信息具有控制权的策略，该策略根据有效手势动作信息执行对应的指令。

优选的，在本发明实施例中，所述手势接口模块43还包括：策略控制权变更模块432，用于当获取的手势动作信息是退出或确认时，变更策略对手势动作信息的控制权。

其中，所述策略控制权变更模块432包括两个子模块，分别为：

确认策略控制权变更模块4321，用于当获取的有效手势动作信息是确认时，调用当前界面上的下一个策略，后续采集到的用户的手势动作信息，将由当前界面上的下一个策略执行对应的指令；若当前策略为当前界面上的最后一个策略，则进入下一个界面，调用下一个界面上的第一个策略；若当前界面为最后一个界面且当前策略为当前界面的最后一个策略，则当前界面的最后一个策略保有控制权。

退出策略控制权变更模块4322，用于当获取的有效手势动作信息是退出时，调用当前界面上的上一个策略，后续采集到的用户的手势动作信息，将由当前界面上的上一个策略执行对应的指令；若当前策略为当前界面上的第一个策略，则返回上一个界面，调用上一个界面上的最后一个策略；若当前界面为第一个界面且当前策略是当前界面的第一个策略，则当前界面的第一个策略失去控制权，并退出当前界面后结束当前应用。

本领域普通技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以在存储于一计算机可读取存储介质中，所述的存储介质，如ROM/RAM、磁盘、光盘等。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims

1.一种手势操作管理方法，其特征在于，所述方法包括下述步骤：

2.如权利要求1所述的方法，其特征在于，所述调用当前界面上对所述手势动作信息具有控制权的策略，所述策略根据所述手势动作信息执行对应的指令的步骤之后，所述方法还包括：

当获取的有效手势动作信息是确认时，调用当前界面上的下一个策略，后续采集到的用户的手势动作信息，将由所述当前界面上的下一个策略执行对应的指令；若当前策略为当前界面上的最后一个策略，则进入下一个界面，调用下一个界面上的第一个策略；若当前界面为最后一个界面且当前策略为当前节目的最后一个策略，则当前界面最后一个策略保有控制权。

3.如权利要求1所述的方法，其特征在于，所述调用当前界面上对所述手势动作信息具有控制权的策略，由所述策略根据所述手势动作信息执行对应的指令的步骤之后，所述方法还包括：

当获取的有效手势动作信息是退出时，调用当前界面上的上一个策略，后续采集到的用户的手势动作信息，将由所述当前界面上的上一个策略执行对应的指令；若当前策略为当前界面上的第一个策略，则返回上一个界面，调用上一个界面上的最后一个策略；若当前界面为第一个界面且当前策略是当前界面的第一个策略，则第一个策略失去控制权，并退出当前界面后结束当前应用。

4.如权利要求1所述的方法，其特征在于，所述启动应用后，在所述应用的当前界面上采集有效的手势动作信息包括：

启动应用，在所述应用的当前界面上采集手势视频流；

从所述手势视频流中分离出手势图片，分析所述手势图片，提取手势特征后获得手势动作信息；

获取手势动作信息符合预先定义的手势动作有效性的手势动作信息。

5.一种手势操作管理装置，其特征在于，所述装置包括一个用于管理应用的手势操作的手势管理接口，所述手势管理接口包括：

策略设置模块，用以预先在所有应用的每个界面上对应该界面的操作设置一个或多个策略；

6.如权利要求5所述的装置，其特征在于，所述手势识别模块包括：

视频采集模块，用于采集手势视频流；

手势特征提取模块，用于从所述手势视频流中分离出手势图片，分析所述手势图片，提取手势特征后获得手势动作信息；

手势有效性判定模块，用于获取手势动作信息符合预先定义的手势动作有效性的手势动作信息。

7.如权利要求5所述的装置，其特征在于，所述手势接口模块包括：

调用模块，用于在手势识别模块获取有效的手势动作信息后，调用当前界面上对所述有效手势动作信息具有控制权的策略，所述策略根据所述有效手势动作信息执行对应的指令；

策略控制权变更模块，用于当获取的手势动作信息是退出或确认时，变更策略对手势动作信息的控制权。

8.如权利要求7所述的装置，其特征在于，所述策略控制权变更模块包括：

确认策略控制权变更模块，用于当获取的有效手势动作信息是确认时，调用当前界面上的下一个策略，后续采集到的用户的手势动作信息，将由所述当前界面上的下一个策略执行对应的指令；若当前策略为当前界面上的最后一个策略，则进入下一个界面，调用下一个界面上的第一个策略；若当前界面为最后一个界面且当前策略为当前节目的最后一个策略，则当前界面的最后一个策略保有控制权；

退出策略控制权变更模块，用于当获取的有效手势动作信息是退出时，调用当前界面上的上一个策略，后续采集到的用户的手势动作信息，将由所述当前界面上的上一个策略执行对应的指令；若当前策略为当前界面上的第一个策略，则返回上一个界面，调用上一个界面上的最后一个策略；若当前界面为第一个界面且当前策略是当前界面的第一个策略，则当前界面的第一个策略失去控制权，并退出当前界面后结束当前应用。