CN107844759A - 一种手势识别方法、终端及存储介质 - Google Patents
一种手势识别方法、终端及存储介质 Download PDFInfo
- Publication number
- CN107844759A CN107844759A CN201711003742.XA CN201711003742A CN107844759A CN 107844759 A CN107844759 A CN 107844759A CN 201711003742 A CN201711003742 A CN 201711003742A CN 107844759 A CN107844759 A CN 107844759A
- Authority
- CN
- China
- Prior art keywords
- gesture
- default
- data
- current
- gesture data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种手势识别方法,该方法包括:当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;调用系统底层的预设手势识别算法;根据预设手势识别算法对当前手势数据进行处理,识别当前手势数据对应的当前手势。本发明还提出了一种终端和一种计算机可读存储介质,通过实施上述方案,整体上提高了终端实现手势识别的执行效率。
Description
技术领域
本发明涉及电子信息技术领域,尤其涉及一种手势识别方法、终端及存储介质。
背景技术
随着移动通信技术的不断发展,手势识别成为了一种新兴的人机交互方式,用户只需通过手势便能与对终端实现控制。
目前,终端上基于摄像头实现手势识别的方案中,终端通过预先安装手势识别应用,打开摄像头,并抓取实时的摄像头数据流进行算法处理,解析出相应的动作后,再调用相关接口控制应用做出相应的响应动作。
然而,在上述现有的技术方案中,大量的摄像头数据需要从底层进程转移到手势识别应用中,终端的内存消耗较大,并且,手势识别算法是在手势识别应用中实现,执行效率较低,终端需要调用相关接口控制应用做出相应的响应动作,即向应用发送相关命令,这些相关命令的执行的效率也较低。也就是说,终端实现手势识别的过程中,整体执行效率较低。
发明内容
为了解决上述问题,本发明实施例提供了一种手势识别方法、终端及存储介质,整体上提高了终端实现手势识别的执行效率。
本发明的技术方案是这样实现的:
本发明实施例提供了一种手势识别方法,所述方法包括:
当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;
根据所述预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;
调用所述系统底层的预设手势识别算法;
根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势。
在上述方案中,所述根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势,包括:
按照预设条件,对所述当前手势数据进行预处理,获得预处理手势数据;
按照预设特征,从所述预处理手势数据中提取目标手势数据;
根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势。
在上述方案中,所述根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,所述方法还包括:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,识别出所述当前手势时,根据所述当前手势,以及预设手势和按键事件的对应关系,确定所述当前手势对应的目标按键事件;
将所述目标按键事件通过标准流程上报给所述第一应用。
在上述方案中,所述根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,所述方法还包括:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,无法识别出所述当前手势时,在显示界面上显示提醒消息;所述提醒消息用于提醒无法识别所述当前手势。
在上述方案中,所述将所述目标按键事件通过标准流程上报给所述第一应用之后,所述方法还包括:
控制所述第一应用执行所述目标按键事件;
当检测到所述第一应用中的预设手势识别开关关闭时,关闭所述系统底层的预设守护进程。
本发明实施例还提供了一种终端,所述终端包括:处理器、存储器以及通信总线;
所述通信总线,用于实现所述处理器和所述存储器之间的连接通信;
所述处理器,用于执行所述存储器中存储的手势识别程序,以实现以下步骤:
当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据所述预设守护进程,调用所述摄像头的硬件层接口获取当前手势数据;调用底层的预设手势识别算法;根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势。
在上述终端中,所述处理器具体用于执行所述手势识别程序,以实现以下步骤:
按照预设条件,对所述当前手势数据进行预处理,获得预处理手势数据;按照预设特征,从所述预处理手势数据中提取目标手势数据;根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势。
在上述终端中,所述处理器在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,识别出所述当前手势时,根据所述当前手势,以及预设手势和按键事件的对应关系,确定所述当前手势对应的目标按键事件;将所述目标按键事件通过标准流程上报给所述第一应用;控制所述第一应用执行所述目标按键事件;当检测到所述第一应用中的预设手势识别开关关闭时,关闭所述系统底层的预设守护进程。
在上述终端中,所述处理器在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,无法识别出所述当前手势时,在显示界面上显示提醒消息;所述提醒消息用于提醒无法识别所述当前手势。
本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可以被一个或者多个处理器执行,以实现上述手势识别方法。
由此可见,在本发明实施例的技术方案中,终端当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;调用系统底层的预设手势识别算法;根据预设手势识别算法对当前手势数据进行处理,识别当前手势数据对应的当前手势。在本发明实施例的技术方案中,终端从摄像头的硬件层接口,获取当前手势数据,降低了终端进行手势识别时的内存消耗,并且,预设手势识别算法设置在终端系统的底层,提高了预设手势识别算法的执行效率,此外,终端通过预设手势和按键事件的对应关系,避免调用应用接口,提高了终端进行手势识别的执行效率。也就是说,本发明实施例提出的手势识别方法,整体上提高了终端实现手势识别的执行效率。
附图说明
图1为实现本发明各个实施例的一种可选的移动终端的硬件结构示意图;
图2为本发明实施例提供的一种通信网络系统架构图;
图3为本发明提供的一种手势识别方法的流程示意图;
图4为本发明实施例提供的一种按照预设手势识别算法识别当前手势的方法的流程示意图;
图5(a)为本发明实施例提供的一种示例性的预处理手势数据组成的手势图像;
图5(b)为本发明实施例提供的一种示例性的目标手势数据组成的手势图像;
图6(a)为本发明实施例提供的一种示例性的当前手势的示意图;
图6(b)为本发明实施例提供的一种示例性的执行目标按键事件的示意图;
图6(c)为本发明实施例提供的一种示例性的执行目标按键事件后显示界面的示意图;
图7为本发明实施例提供的一种示例性的提醒消息的显示界面图;
图8为本发明实施例提供的一种终端的结构示意图。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明的技术方案,并不用于限定本发明的保护范围。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant,PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端,以及诸如数字TV、台式计算机等固定终端。
后续描述中将以移动终端为例进行说明,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
请参阅图1,其为实现本发明各个实施例的一种可选的移动终端的硬件结构示意图,该移动终端100可以包括:射频RF(Radio Frequency,RF)单元101、Wi-Fi模块102、音频输出单元103、音频/视频(A/V)输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图1中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图1对移动终端的各个部件进行具体的介绍:
射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global System of Mobilecommunication,GSM)、通用分组无线服务(General Packet Radio Service,GPRS)、码分多址2000(Code Division Multiple Access 2000,CDMA2000)、宽带码分多址(WidebandCode Division Multiple Access,WCDMA)、时分同步码分多址(Time Division-Synchronous Code Division Multiple Access,TD-SCDMA)、频分双工长期演进(Frequency Division Duplexing-Long Term Evolution,FDD-LTE)和分时双工长期演进(Time Division Duplexing-Long Term Evolution,TDD-LTE)等。
Wi-Fi属于短距离无线传输技术,移动终端通过Wi-Fi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了Wi-Fi模块102,但是可以理解的是,其并不属于移动终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
音频输出单元103可以在移动终端100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101或Wi-Fi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。
A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或Wi-Fi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除或抑制算法以消除或抑制在接收和发送音频信号的过程中产生的噪声或者干扰。
移动终端100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在移动终端100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107可包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作),并根据预先设定的程式驱动相应的连接装置。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种,具体此处不做限定。
进一步的,触控面板1071可覆盖显示面板1061,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图1中,触控面板1071与显示面板1061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元108用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
移动终端100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图1未示出,移动终端100还可以包括蓝牙模块等,在此不再赘述。
为了便于理解本发明实施例,下面对本发明的移动终端所基于的通信网络系统进行描述。
请参阅图2,图2为本发明实施例提供的一种通信网络系统架构图,该通信网络系统为通用移动通信技术的LTE系统,该LTE系统包括依次通讯连接的用户设备(UserEquipment,UE)201,演进式UMTS陆地无线接入网(Evolved UMTS Terrestrial RadioAccess Network,E-UTRAN)202,演进式分组核心网(Evolved Packet Core,EPC)203和运营商的IP业务204。
具体地,UE201可以是上述终端100,此处不再赘述。
E-UTRAN202包括eNodeB2021和其它eNodeB2022等。其中,eNodeB2021可以通过回程(backhaul)(例如X2接口)与其它eNodeB2022连接,eNodeB2021连接到EPC203,eNodeB2021可以提供UE201到EPC203的接入。
EPC203可以包括移动性管理实体(Mobility Management Entity,MME)2031,归属用户服务器(Home Subscriber Server,HSS)2032,其它MME2033,服务网关(Serving GateWay,SGW)2034,分组数据网络网关(PDN Gate Way,PGW)2035和政策和资费功能实体(Policy and Charging Rules Function,PCRF)2036等。其中,MME2031是处理UE201和EPC203之间信令的控制节点,提供承载和连接管理。HSS2032用于提供一些寄存器来管理诸如归属位置寄存器(图中未示)之类的功能,并且保存有一些有关服务特征、数据速率等用户专用的信息。所有用户数据都可以通过SGW2034进行发送,PGW2035可以提供UE201的IP地址分配以及其它功能,PCRF2036是业务数据流和IP承载资源的策略与计费控制策略决策点,它为策略与计费执行功能单元(图中未示)选择及提供可用的策略和计费控制决策。
IP业务204可以包括因特网、内联网、IP多媒体子系统(IP MultimediaSubsystem,IMS)或其它IP业务等。
虽然上述以LTE系统为例进行了介绍,但本领域技术人员应当知晓,本发明不仅仅适用于LTE系统,也可以适用于其他无线通信系统,例如GSM、CDMA2000、WCDMA、TD-SCDMA以及未来新的网络系统等,此处不做限定。
基于上述移动终端硬件结构以及通信网络系统,提出本发明方法各个实施例。
实施例一
本发明实施例提供了一种手势识别的方法,图3为本发明提供的一种手势识别方法的流程示意图。如图3所示,该手势识别方法主要包括以下步骤:
S301、当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程。
在本发明的实施例中,终端在系统的底层加入了一个预设守护进程,当终端检测到第一应用中的预设手势识别开关打开时,立即启动系统底层的预设守护进程。
需要说明的是,在本发明的实施例中,终端是通过预设守护进程实现第一应用的手势识别。也就是说,终端在启动了系统底层的预设守护进程后,按照预设守护进程,对第一应用进行手势识别。
需要说明的是,在本发明的实施例中,用户可以根据自身的需求对终端中的不同应用预设手势识别开关。具体的预设手势识别开关数目和预设手势识别开关的设置对象本发明不作限制。
需要说明的是,在本发明的实施例的技术方案中,为了降低终端实现手势识别过程中的内存消耗,整体上提高了终端实现手势识别的执行效率,主要从以下几个方面进行实现:第一,终端从摄像头的硬件层接口,获取当前手势数据,降低了终端进行手势识别时的内存消耗,第二,预设手势识别算法设置在终端系统的底层,提高了预设手势识别算法的执行效率,第三,终端通过预设手势和按键事件的对应关系,避免调用应用接口,提高了终端进行手势识别的执行效率。
S302、根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据。
在本发明的实施例中,终端当启动系统底层的预设守护进程后,即终端开始执行预设守护进程,根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据。
需要说明的是,在本发明的实施例中,终端执行的为基于摄像头的手势识别,终端上配置有摄像头,用于当需要进行手势识别时,获取当前手势数据。
需要说明的是,在本发明的实施例中,当前手势数据实际上就是当前手势图像中每一个像素点对应的数据值。
可以理解的是,在现有技术中,终端中实现手势识别的主体是手势识别应用,也就是说,终端需要先通过摄像头获取到当前手势数据,将当前手势数据从底层进程转移到手势识别应用的进程中,之后执行手势识别处理,在此过程中,大量的当前手势数据的转移将导致终端的内存消耗较大。而在本发明的技术方案中,终端的系统底层存在预设守护进程,当终端中的第一应用需要进行手势识别时,终端执行的是系统底层的预设守护进程,通过执行预设守护进程,对当前手势进行识别,将识别结果上报给第一应用。也就是说,在本发明的技术方案中,终端是通过执行预设守护进程来识别当前手势,是在系统底层直接进行手势识别,即终端不需要将当前手势数据转移从底层进程转移到手势识别应用的进程中,从而降低了终端的内存消耗。
S303、调用系统底层的预设手势识别算法。
在本发明的实施例中,终端上保存有预设手势识别算法,而预设手势识别算法具体保存在终端系统的底层。当终端启动预设守护进程,根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据之后,调用系统底层的预设手势识别算法。
需要说明的是,在本发明的实施例中,预设手势识别算法可以用户根据终端的配置情况或者自身的需求在终端上自主设置,因此,若在将来出现了其它手势识别算法,本发明实施例同样适用,即具体的预设手势识别算法本发明不作限定。
可以理解的是,在现有技术中,预设手势识别算法设置在手势识别应用中,即在应用层执行预设手势识别算法,预设手势识别算法具体为JAVA程序。而在本发明的技术方案中,预设手势识别算法设置在底层,预设手势识别算法具体为C++程序,即在底层执行预设手势识别算法。在执行效率方面,JAVA程序的执行效率要低于C++程序,因此,本发明通过将预设手势识别算法设置在底层,能够在一定程序上提高预设手势识别算法的执行效率。
S304、根据预设手势识别算法对当前手势数据进行处理,识别当前手势数据对应的当前手势。
在本发明的实施例中,终端调用系统底层的预设手势识别算法之后,根据预设手势识别算法对当前手势数据进行处理,识别当前手势数据对应的当前手势。
图4为本发明实施例提供的一种按照预设手势识别算法识别当前手势的方法的流程示意图。如图4所示,终端按照预设手势识别算法识别当前手势的方法主要包括以下步骤:
S401、按照预设条件,对当前手势数据进行预处理,获得预处理手势数据。
在本发明的实施例中,终端可以按照预设条件,对当前手势数据进行预处理,从而获得到预处理手势数据。
示例性的,终端可以保存有预设阈值,根据预设阈值和当前手势数据,判断出当前手势的起点和终点,并且对当前手势数据按照预设补偿方法进行误差补偿、滤波、归一化等处理,从而获得预处理手势数据。
需要说明的是,在本发明的实施例中,用户可以在终端上设置不同的预设条件,对当前手势数据进行预处理,预设条件的类型和预设条件的数目本发明不作限定。
可以理解的是,在本发明的实施例中,按照预设条件,对当前手势数据进行预处理,实际上就是对当前手势数据构成的当前手势图像进行图像处理,可以使当前手势图像的边缘更加清晰,去掉不必要的噪声,从而在一定程度上提高手势识别的准确度。
S402、按照预设特征,从预处理手势数据中提取目标手势数据。
在本发明的实施例中,终端在按照预设条件,对当前手势数据进行预处理,获得预处理手势数据后,进一步的,终端将按照预设特征,从获得的预处理手势数据中提取目标手势数据。也就是说,终端将对预处理手势数据执行特征提取操作。
可以理解的是,由于手势具有丰富的形变、运动,以及纹理特征,因此,终端选取合理的特征对预处理手势数据进行特性提取,获得目标手势数据尤为重要。目前,常用的手势特征有:轮廓、边缘、图像距、图像特征向量,以及区域直方图等等。
需要说明的是,在本发明的实施例中,用户可以根据自身的喜好或者实际需求在终端上设置一种或多种预设特征,还可以根据终端的实际性能以及精确度、复杂度等方面考虑预设特征的设置。用于从预处理手势数据中提取目标手势数据,具体的预设特征本发明不作限定。
示例性的,终端保存的预设特征为轮廓特征,则终端在获得预处理手势数据后,检测预处理手势数据中当前手势图像边缘的手势数据,并进行提取,从而获得目标手势数据。
举例来说,终端获取到的预处理手势数据组成了图5(a)的手势图像,那么终端可以对预处理手势数据进行处理,只保留手势图像中轮廓部分的手势数据,即提取目标手势数据,而目标手势数据即可组成如图5(b)所示的手势图像。之后,终端再根据目标手势数据执行手势识别方法的下一步骤。
可以理解的是,在本发明的实施例中,终端按照预设特征,从预处理手势数据中提取目标手势数据,可以减少终端识别当前手势的工作量,根据预设特征提取出的目标手势数据,有利于终端进行之后的分析,识别出当前手势。
S403、根据目标手势数据,以及预设手势数据和手势的对应关系,识别当前手势。
在本发明的实施例中,终端在按照预设特征,从预处理手势数据中提取目标手势数据之后,可以根据目标手势数据,以及预设手势数据和手势的对应关系,对当前手势进行识别。
具体的,在本发明的实施例中,终端保存有预设手势数据和手势的对应关系,即终端可以根据目标手势数据,查找到对应的手势,该对应的手势,即为终端识别出的当前手势。
需要说明的是,在本发明的实施例中,终端保存的预设手势数据和手势的对应关系,可以由用户自主设定,例如,用户确定一种手势,并拍摄一张该手势的图像,将该手势的图像对应的手势数据保存,即建立了该手势与该手势图像的对应关系。因此,具体的预设手势数据和手势的对应关系本发明不作限定。
可以理解的是,由于手势的变化性过高,终端上可以保存一个预设误差范围,终端在根据目标手势数据,以及预设手势数据和手势的对应关系,对当前手势进行识别时,如果目标手势数据与某一手势对应的手势数据处于预设误差范围内,即确定当前手势为上述某一手势。
示例性的,终端根据目标手势数据,以及预设手势数据和手势的对应关系,确定出预设手势数据和手势的对应关系中,第一手势数据和目标手势数据处于预设误差范围内,即识别当前手势为第一手势。
需要说明的是,在本发明的实施例中,终端是根据匹配的方法进行当前手势的识别,此外,终端也可以根据统计分析技术对当前预处理手势数据进行分类,进行当前手势的识别,或者,也可以根据神经网络技术,其具有的自组织和自学习能力,分布性特点,以及能有效的抗噪声等特性对预处理手势数据进行处理,进行当前手势识别。也就是说,在本发明的实施例中,终端根据当前手势识别数据识别当前手势的具体方法本发明不作限定。
进一步的,在步骤S403之后,终端可以根据识别的结果,判断需要执行的按键事件。
具体的,在本发明的实施例中,当根据目标手势数据,以及预设手势数据和手势的对应关系,识别出当前手势时,根据当前手势,以及预设手势和按键事件的对应关系,确定当前手势对应的目标按键事件,将目标按键事件通过标准流程上报给第一应用。当根据目标手势数据,以及预设手势数据和手势的对应关系,无法识别出当前手势时,在显示界面上显示提醒消息,该提醒消息用于提醒无法识别当前手势。
可以理解的是,在现有技术中,当识别出当前手势之后,终端需要调用先关系统接口控制第一应用执行相应的动作,例如,当终端中手势识别应用识别出需要对一个图片进行翻转等手势动作时,需要向图库应用发送相关命令,这些命令执行效率也较低。而在本发明的技术方案中,终端的系统中保存有按键事件,终端可以直接确定目标按键事件,上报给第一应用执行相应显示,从而避免了调用第一应用接口。
需要说明的是,在本发明的实施例中,终端保存有预设手势和按键事件的对应关系。也就是说,每一种手势对应着一种按键事件,终端根据识别的当前手势,即可确定对对应的目标按键事件。具体的预设手势和按键事件的对应关系,可以由用户根据自身喜好在终端上自主设定,本发明实施例不作限定。
需要说明的是,在本发明的实施例中,预设手势和按键事件的对应关系中,按键事件实际上指的就是终端根据当前手势需要控制第一应用执行的响应动作,例如,定义按键事件EYCODE_LEFT为左翻页。
示例性的,终端识别出当前手势为第一手势,根据预设手势和按键事件的对应关系,确定出第一手势对应的为按键事件为第一按键事件,即目标按键事件为第一按键事件。之后,终端再将第一按键事件上报给第一应用。
进一步的,当终端将目标按键事件上报给第一应用后,控制第一应用执行目标按键事件。之后,当终端检测到第一应用中的预设手势识别开关关闭时,关闭系统底层的预设守护进程。
可以理解的是,当终端检测到第一应用中的预设手势识别开关关闭时,即说明用户当前并不需要进行手势识别,因此,终端自主关闭系统底层的预设守护进程。
举例来说,终端识别出当前手势为图6(a)所示的手势时,根据预设手势和按键事件的对应关系,确定出该手势对应的目标按键事件为:左翻页,那么终端将左翻页事件上报给第一应用,第一应用即可执行目标按键事件,将显示界面上第一应用的显示内容执行向左翻操作,如图6(b)所示,最后,当执行完向左翻页后,终端的显示界面如图6(c)所示。
可以理解的是,在本发明的实施例中,终端根据目标手势数据,以及预设手势数据和手势的对应关系,可能由于当前手势并未保存到预设手势数据和手势的对应关系中,或者,当前手势不够标准,误差较大,将无法识别出当前手势,此时终端可在显示界面上显示提醒消息,进行提醒。
图7为本发明实施例提供的一种示例性的提醒消息的显示界面图。如图7所示,当终端未识别出当前手势时,即在显示界面上显示“无法识别当前手势”,用户从而可以重新进行手势识别。
本发明实施例提供的一种手势识别方法,终端当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;调用系统底层的预设手势识别算法;根据预设手势识别算法对当前手势数据进行处理,识别当前手势数据对应的当前手势。在本发明实施例的技术方案中,终端从摄像头的硬件层接口,获取当前手势数据,降低了终端进行手势识别时的内存消耗,并且,预设手势识别算法设置在终端系统的底层,提高了预设手势识别算法的执行效率,此外,终端通过预设手势和按键事件的对应关系,避免调用应用接口,提高了终端进行手势识别的执行效率。也就是说,本发明实施例提出的手势识别方法,整体上提高了终端实现手势识别的执行效率。
实施例二
图8为本发明实施例提供的一种终端的结构示意图。如图8所示,所述终端包括:处理器801、存储器802、摄像头803以及通信总线804;
所述通信总线804,用于实现所述处理器801和所述存储器802之间的连接通信;
所述处理器801,用于执行所述存储器802中存储的手势识别程序,以实现以下步骤:
当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据所述预设守护进程,调用所述摄像头803的硬件层接口获取当前手势数据;调用底层的预设手势识别算法;根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的所述当前手势。
可选的,所述处理器801具体用于执行所述手势识别程序,以实现以下步骤:
按照预设条件,对所述当前手势数据进行预处理,获得预处理手势数据;按照预设特征,从所述预处理手势数据中提取目标手势数据;根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势。
可选的,所述处理器801在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,识别出所述当前手势时,根据所述当前手势,以及预设手势和按键事件的对应关系,确定所述当前手势对应的目标按键事件;将所述目标按键事件通过标准流程上报给所述第一应用;控制所述第一应用执行所述目标按键事件;当检测到所述第一应用中的预设手势识别开关关闭时,关闭所述系统底层的预设守护进程。
可选的,所述处理器801在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,无法识别出所述当前手势时,在显示界面上显示提醒消息;所述提醒消息用于提醒无法识别所述当前手势。
本发明实施例提供了一种终端,终端当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;调用系统底层的预设手势识别算法;根据预设手势识别算法对所述当前手势数据进行处理,识别当前手势数据对应的所述当前手势。在本发明实施例的技术方案中,终端从摄像头的硬件层接口,获取当前手势数据,降低了终端进行手势识别时的内存消耗,并且,预设手势识别算法设置在终端系统的底层,提高了预设手势识别算法的执行效率,此外,终端通过预设手势和按键事件的对应关系,避免调用应用接口,提高了终端进行手势识别的执行效率。也就是说,本发明实施例提供终端,通过执行上述手势识别方法,整体上提高了终端实现手势识别的执行效率。
本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可以被一个或者多个处理器执行,以实现上述手势识别方法。计算机可读存储介质可以是是易失性存储器(volatile memory),例如随机存取存储器(Random-Access Memory,RAM);或者非易失性存储器(non-volatile memory),例如只读存储器(Read-Only Memory,ROM),快闪存储器(flash memory),硬盘(Hard DiskDrive,HDD)或固态硬盘(Solid-State Drive,SSD);也可以是包括上述存储器之一或任意组合的各自设备,如移动电话、计算机、平板设备、个人数字助理等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。
Claims (10)
1.一种手势识别的方法,其特征在于,所述方法包括:
当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;
根据所述预设守护进程,调用摄像头的硬件层接口,获取当前手势数据;
调用所述系统底层的预设手势识别算法;
根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势。
2.根据权利要求1所述的方法,其特征在于,所述根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势,包括:
按照预设条件,对所述当前手势数据进行预处理,获得预处理手势数据;
按照预设特征,从所述预处理手势数据中提取目标手势数据;
根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势。
3.根据权利要求2所述的方法,其特征在于,所述根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,所述方法还包括:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,识别出所述当前手势时,根据所述当前手势,以及预设手势和按键事件的对应关系,确定所述当前手势对应的目标按键事件;
将所述目标按键事件通过标准流程上报给所述第一应用。
4.根据权利要求2所述的方法,其特征在于,所述根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,所述方法还包括:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,无法识别出所述当前手势时,在显示界面上显示提醒消息;所述提醒消息用于提醒无法识别所述当前手势。
5.根据权利要求3所述的方法,其特征在于,所述将所述目标按键事件通过标准流程上报给所述第一应用之后,所述方法还包括:
控制所述第一应用执行所述目标按键事件;
当检测到所述第一应用中的预设手势识别开关关闭时,关闭所述系统底层的预设守护进程。
6.一种终端,其特征在于,所述终端包括:处理器、存储器、摄像头以及通信总线;
所述通信总线,用于实现所述处理器和所述存储器之间的连接通信;
所述处理器,用于执行所述存储器中存储的手势识别程序,以实现以下步骤:
当检测到第一应用中的预设手势识别开关打开时,启动系统底层的预设守护进程;根据所述预设守护进程,调用所述摄像头的硬件层接口获取当前手势数据;调用底层的预设手势识别算法;根据所述预设手势识别算法对所述当前手势数据进行处理,识别所述当前手势数据对应的当前手势。
7.根据权利要求6所述的终端,其特征在于,所述处理器具体用于执行所述手势识别程序,以实现以下步骤:
按照预设条件,对所述当前手势数据进行预处理,获得预处理手势数据;按照预设特征,从所述预处理手势数据中提取目标手势数据;根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势。
8.根据权利要求7所述的终端,其特征在于,所述处理器在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,识别出所述当前手势时,根据所述当前手势,以及预设手势和按键事件的对应关系,确定所述当前手势对应的目标按键事件;将所述目标按键事件通过标准流程上报给所述第一应用;控制所述第一应用执行所述目标按键事件;当检测到所述第一应用中的预设手势识别开关关闭时,关闭所述系统底层的预设守护进程。
9.根据权利要求7所述的终端,其特征在于,所述处理器在根据所述目标手势数据,以及预设手势数据和手势的对应关系,识别所述当前手势之后,还用于执行所述手势识别程序,以实现以下步骤:
当根据所述目标手势数据,以及所述预设手势数据和手势的对应关系,无法识别出所述当前手势时,在显示界面上显示提醒消息;所述提醒消息用于提醒无法识别所述当前手势。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可以被一个或者多个处理器执行,以实现权利要求1-5任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711003742.XA CN107844759A (zh) | 2017-10-24 | 2017-10-24 | 一种手势识别方法、终端及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711003742.XA CN107844759A (zh) | 2017-10-24 | 2017-10-24 | 一种手势识别方法、终端及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107844759A true CN107844759A (zh) | 2018-03-27 |
Family
ID=61663078
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711003742.XA Pending CN107844759A (zh) | 2017-10-24 | 2017-10-24 | 一种手势识别方法、终端及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107844759A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109815876A (zh) * | 2019-01-17 | 2019-05-28 | 西安电子科技大学 | 基于地址事件流特征的手势识别方法 |
CN109920309A (zh) * | 2019-01-16 | 2019-06-21 | 深圳壹账通智能科技有限公司 | 手语转换方法、装置、存储介质和终端 |
CN110738118A (zh) * | 2019-09-16 | 2020-01-31 | 平安科技(深圳)有限公司 | 手势识别方法、系统及管理终端、计算机可读存储介质 |
WO2021000683A1 (zh) * | 2019-07-03 | 2021-01-07 | 中兴通讯股份有限公司 | 一种手势识别方法、装置及计算机可读存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102339151A (zh) * | 2010-07-20 | 2012-02-01 | 德信无线通讯科技(上海)有限公司 | 用于触摸屏手机的手势快捷启动的方法 |
CN103186749A (zh) * | 2011-12-29 | 2013-07-03 | 希姆通信息技术(上海)有限公司 | 一种防止通信终端被误操作的方法 |
CN103534669A (zh) * | 2011-05-23 | 2014-01-22 | 索尼爱立信移动通讯有限公司 | 手指在屏上显示器检测 |
CN103902101A (zh) * | 2014-04-10 | 2014-07-02 | 上海思立微电子科技有限公司 | 智能终端的手势识别方法以及实现该方法的智能终端 |
CN105068754A (zh) * | 2015-08-28 | 2015-11-18 | 硕诺科技(深圳)有限公司 | 一种在任意界面实现手势检测的方法 |
CN106227350A (zh) * | 2016-07-28 | 2016-12-14 | 青岛海信电器股份有限公司 | 基于手势进行操作控制的方法及智能设备 |
CN106980554A (zh) * | 2017-03-08 | 2017-07-25 | 广东欧珀移动通信有限公司 | 一种进程处理方法及装置 |
-
2017
- 2017-10-24 CN CN201711003742.XA patent/CN107844759A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102339151A (zh) * | 2010-07-20 | 2012-02-01 | 德信无线通讯科技(上海)有限公司 | 用于触摸屏手机的手势快捷启动的方法 |
CN103534669A (zh) * | 2011-05-23 | 2014-01-22 | 索尼爱立信移动通讯有限公司 | 手指在屏上显示器检测 |
CN103186749A (zh) * | 2011-12-29 | 2013-07-03 | 希姆通信息技术(上海)有限公司 | 一种防止通信终端被误操作的方法 |
CN103902101A (zh) * | 2014-04-10 | 2014-07-02 | 上海思立微电子科技有限公司 | 智能终端的手势识别方法以及实现该方法的智能终端 |
CN105068754A (zh) * | 2015-08-28 | 2015-11-18 | 硕诺科技(深圳)有限公司 | 一种在任意界面实现手势检测的方法 |
CN106227350A (zh) * | 2016-07-28 | 2016-12-14 | 青岛海信电器股份有限公司 | 基于手势进行操作控制的方法及智能设备 |
CN106980554A (zh) * | 2017-03-08 | 2017-07-25 | 广东欧珀移动通信有限公司 | 一种进程处理方法及装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109920309A (zh) * | 2019-01-16 | 2019-06-21 | 深圳壹账通智能科技有限公司 | 手语转换方法、装置、存储介质和终端 |
CN109815876A (zh) * | 2019-01-17 | 2019-05-28 | 西安电子科技大学 | 基于地址事件流特征的手势识别方法 |
WO2021000683A1 (zh) * | 2019-07-03 | 2021-01-07 | 中兴通讯股份有限公司 | 一种手势识别方法、装置及计算机可读存储介质 |
CN110738118A (zh) * | 2019-09-16 | 2020-01-31 | 平安科技(深圳)有限公司 | 手势识别方法、系统及管理终端、计算机可读存储介质 |
CN110738118B (zh) * | 2019-09-16 | 2023-07-07 | 平安科技(深圳)有限公司 | 手势识别方法、系统及管理终端、计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107436779A (zh) | 一种应用程序管理方法、设备及计算机可读存储介质 | |
CN107729133A (zh) | 一种运行应用程序的方法、终端和计算机可读存储介质 | |
CN107566635A (zh) | 屏幕亮度设置方法、移动终端和计算机可读存储介质 | |
CN107329682A (zh) | 边缘交互方法及移动终端 | |
CN107340833A (zh) | 终端温度控制方法、终端及计算机可读存储介质 | |
CN107809536A (zh) | 显示屏指纹识别处理方法、移动终端及存储介质 | |
CN110046597A (zh) | 人脸识别方法、移动终端及计算机可读存储介质 | |
CN108521658A (zh) | 降低干扰方法、移动终端及计算机可读存储介质 | |
CN108345426A (zh) | 一种终端控制方法、终端及计算机可读存储介质 | |
CN107844759A (zh) | 一种手势识别方法、终端及存储介质 | |
CN107592415A (zh) | 语音发送方法、终端和计算机可读存储介质 | |
CN107346200A (zh) | 一种间隔截图方法及终端 | |
CN108196777A (zh) | 一种柔性屏应用方法、设备及计算机可读存储介质 | |
CN107678698A (zh) | 缓存数据清理方法、服务器、终端及计算机可读存储介质 | |
CN107390856A (zh) | 一种降低移动终端功耗的方法、移动终端及存储介质 | |
CN110460568A (zh) | 一种自动举报方法、终端及计算机可读存储介质 | |
CN107608613A (zh) | 一种防止误操作的方法及终端 | |
CN108062241A (zh) | 一种显示界面的切换方法、终端及存储介质 | |
CN107846725A (zh) | 一种通知消息的处理方法、终端及存储介质 | |
CN108280334A (zh) | 一种指纹解锁方法、移动终端以及计算机可读存储介质 | |
CN107563316A (zh) | 一种拍摄方法、终端及计算机可读存储介质 | |
CN107239218A (zh) | 移动终端的控制方法、移动终端及计算机可读存储介质 | |
CN110213444A (zh) | 移动终端消息的显示方法、装置、移动终端及存储介质 | |
CN110401806A (zh) | 一种移动终端的视频通话方法、移动终端及存储介质 | |
CN107704173A (zh) | 一种应用程序显示方法、终端和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180327 |
|
RJ01 | Rejection of invention patent application after publication |