CN106569596A - 一种手势控制方法和设备 - Google Patents

Abstract

本发明实施例公开了一种手势控制设备，所述设备包括：接收单元、第一获取单元、第二获取单元和第一处理单元，其中：所述接收单元，用于接收用户发送的手势控制指令；所述第一获取单元，用于根据所述手势控制指令，获取终端设备的摄像头的映射区域；其中，所述摄像头的映射区域与所述终端设备的显示屏幕具有对应关系；所述第二获取单元，用于在所述映射区域内，获取所述用户的手势操作指令；所述第一处理单元，用于根据所述用户的手势操作指令，执行对应的操作。本发明实施例同时还公开了一种手势控制方法。

Description

一种手势控制方法和设备

技术领域

本发明涉及通信领域中的交互控制技术，尤其涉及一种手势控制方法和设备。

背景技术

随着互联网技术的快速发展，在办公、生活、娱乐过程中人们越来越离不开计算机的使用。为了方便用户与计算机系统之间进行信息交换，人们设计了向计算机输入数据和信息的输入设备，例如常见的键盘、鼠标、摄像头、扫描仪等。目前，在计算机或者其他设备的使用过程中，用户主要通过控制鼠标来进行对计算机的操作，随着计算机技术的发展和用户的需求的多样化，现有技术对鼠标、键盘等外接设备具有较强的依赖性，尤其是长期使用鼠标对用户的身心健康带来了巨大的影响，例如鼠标手、鼠标上细菌滋长，对用户身体健康带来隐患等。

发明内容

有鉴于此，本发明实施例期望提供一种手势控制方法和设备，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

为达到上述目的，本发明的技术方案是这样实现的：

一种手势控制设备，所述设备包括：接收单元、第一获取单元、第二获取单元和第一处理单元，其中：

所述接收单元，用于接收用户发送的手势控制指令；

所述第一获取单元，用于根据所述手势控制指令，获取终端设备的摄像头的映射区域；其中，所述摄像头的映射区域与所述终端设备的显示屏幕具有对应关系；

所述第二获取单元，用于在所述映射区域内，获取所述用户的手势操作指令；

所述第一处理单元，用于根据所述用户的手势操作指令，执行对应的操作。

可选的，所述设备还包括：第三获取单元和第二处理单元，其中：

所述第三获取单元，用于获取预设手势集合；其中，所述预设手势集合中包括至少一种手势；

所述第二处理单元，用于设置所述预设手势集合中的每一手势与鼠标之间对应的功能，获得手势集合功能关系表。

可选的，所述第二获取单元，包括：获取模块、判断模块、第一处理模块和第二处理模块，其中：

所述获取模块，用于在所述映射区域内，获取所述用户的第一手势；

所述判断模块，用于判断所述第一手势是否存在于所述预设手势集合中；

所述第一处理模块，用于若所述第一手势存在于所述预设手势集合中，则根据所述第一手势和所述预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到所述第一手势对应的鼠标的功能；

所述第二处理模块，用于获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令。

可选的，所述第二处理模块，具体用于：

当所述第一手势的运动数据为所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为鼠标的位移指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的点击指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值，所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的选择指令；其中，所述第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

可选的，所述设备还包括：设置单元，其中：

所述设置单元，用于在所述终端设备的显示屏幕上设置预览窗口，所述预览窗口用于显示所述映射区域内的图像。

一种手势控制方法，所述方法包括：

接收用户发送的手势控制指令；

响应所述手势控制指令，获取终端设备的摄像头的映射区域；其中，所述摄像头的映射区域与所述终端设备的显示屏幕具有对应关系；

在所述映射区域内，获取用户的手势操作指令；

根据所述用户的手势操作指令，执行对应的操作。

可选的，所述方法还包括：

获取预设手势集合；其中，所述预设手势集合中包括至少一种手势；

设置所述预设手势集合中的每一手势与鼠标的功能之间的对应关系。

可选的，所述在所述映射区域内，获取用户的手势操作指令，包括：

在所述映射区域内，获取所述用户的第一手势；

判断所述第一手势是否存在于所述预设手势集合中；

若所述第一手势存在于所述预设手势集合中，则根据所述第一手势和所述预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到所述第一手势对应的鼠标的功能；

获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令。

可选的，所述获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令，包括：

当所述第一手势的运动数据为所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为鼠标的位移指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的点击指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值，所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的选择指令；其中，所述第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

可选的，所述方法还包括：

在所述终端设备的显示屏幕上设置预览窗口，所述预览窗口用于显示所述映射区域内的图像。

本发明的实施例所提供的手动控制法和设备，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。。

附图说明

图1为实现本发明各个实施例的一个可选的移动终端的硬件结构示意图；

图2为本发明实施例提供的移动终端能够操作的通信系统结构示意图；

图3为本发明实施例提供的一种手势控制方法的流程示意图；

图4为本发明实施例提供的另一种手势控制方法的流程示意图；

图5为本发明实施例提供的又一种手势控制方法的流程示意图；

图6为本发明实施例提供的一种通过终端摄像头获取对应鼠标左键功能的预设手势的示意图；

图7为本发明实施例提供的一种通过终端摄像头获取对应鼠标右键功能的预设手势的示意图；

图8为本发明实施例提供的一种通过终端摄像头获取对应鼠标滚轮功能的预设手势的示意图；

图9为本发明实施例提供的一种手势控制设备的结构示意图；

图10为本发明实施例提供的另一种手势控制设备的结构示意图；

图11为本发明实施例提供的又一种手势控制设备的结构示意图；

图12为本发明另一实施例提供的一种手势控制设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

现在将参考附图1来描述实现本发明各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，"模块"与"部件"可以混合地使用。

移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、个人数字助理(PDA)、平板电脑(PAD)、便携式多媒体播放器(PMP)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。

图1为实现本发明各个实施例的移动终端的硬件结构示意。

移动终端100可以包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件，可以替代地实施更多或更少的组件，将在下面详细描述移动终端的元件。

无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信系统或网络之间的无线电通信。例如，无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。

广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且，广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供，并且在该情况下，广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在，例如，其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播系统接收信号广播。特别地，广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H)，前向链路媒体(MediaFLO@)的数据广播系统、地面数字广播综合服务(ISDB-T)等等的数字广播系统接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播系统以及上述数字广播系统。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器160(或者其它类型的存储介质)中。

移动通信模块112将无线电信号发送到基站(例如，接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。

无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。

短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。

位置信息模块115是用于检查或获取移动终端的位置信息的模块。位置信息模块115的典型示例是GPS(全球定位系统)。根据当前的技术，作为GPS的位置信息模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法，从而根据经度、纬度和高度准确地计算三维当前位置信息。当前，用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外，GPS模块115能够通过实时地连续计算当前位置信息来计算速度信息。

A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122，相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送，可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风122接收声音(音频数据)，并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块112发送到移动通信基站的格式输出。麦克风122可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。

用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息，并且可以包括键盘、触摸板(例如，检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)等等。特别地，当触摸板以层的形式叠加在显示单元151上时，可以形成触摸屏。

感测单元140检测移动终端100的当前状态，(例如，移动终端100的打开或关闭状态)、移动终端100的位置、用户对于移动终端100的接触(即，触摸输入)的有无、移动终端100的取向、移动终端100的加速或减速移动和方向等等，并且生成用于控制移动终端100的操作的命令或信号。例如，当移动终端100实施为滑动型移动电话时，感测单元140可以感测该滑动型电话是打开还是关闭。另外，感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。

接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元170可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。

输出单元150可以包括显示模块151和音频输出模块152等等。

显示单元151可以显示在移动终端100中处理的信息。例如，当移动终端100处于电话通话模式时，显示单元151可以显示与通话或其它通信(例如，文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时，显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。

同时，当显示模块151和触摸板以层的形式彼此叠加以形成触摸屏时，显示模块151可以用作输入装置和输出装置。显示模块151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看，这可以称为透明显示器，典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式，移动终端100可以包括两个或更多显示单元(或其它显示装置)，例如，移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。

音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时，将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且，音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括扬声器、蜂鸣器等等。

存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等，或者可以暂时地存储已经输出或将要输出的数据。而且，存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。

存储器160可以包括至少一种类型的存储介质，所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且，移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。

控制器180通常控制移动终端的总体操作。例如，控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外，控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181，多媒体模块181可以构造在控制器180内，或者可以构造为与控制器180分离。控制器180可以执行模式识别处理，以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。

电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。

这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施，这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施，在一些情况下，这样的实施方式可以在控制器180中实施。对于软件实施，诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施，软件代码可以存储在存储器160中并且由控制器180执行。

至此，已经按照其功能描述了移动终端。下面，为了简要起见，将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此，本发明能够应用于任何类型的移动终端，并且不限于滑动型移动终端。

如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。

现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。

这样的通信系统可以使用不同的空中接口和/或物理层。例如，由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地，长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例，下面的描述涉及CDMA通信系统，但是这样的教导同样适用于其它类型的系统。

参考图2，CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干已知的接口中的任一种来构造，所述接口包括例如E1/T1、ATM，IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是，如图2中所示的系统可以包括多个BSC275。

每个BS270可以服务一个或多个分区(或区域)，由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者，每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配，并且每个频率分配具有特定频谱(例如，1.25MHz，5MHz等等)。

分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子系统(BTS)或者其它等效术语。在这样的情况下，术语"基站"可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为"蜂窝站"。或者，特定BS270的各分区可以被称为多个蜂窝站。

如图2中所示，广播发射器(BT)295将广播信号发送给在系统内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中，示出了几个全球定位系统(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。

在图2中，描绘了多个卫星300，但是理解的是，可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外，可以使用可以跟踪移动终端的位置的其它技术。另外，至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。

作为无线通信系统的一个典型操作，BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280，其提供用于与PSTN290形成接口的额外的路由服务。类似地，PSTN290与MSC280形成接口，MSC280与BSC275形成接口，并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。

基于上述移动终端硬件结构以及通信系统，提出本发明各个实施例。

本发明的实施例提供一种手势控制方法，参照图3所示，该方法包括以下步骤：

步骤301、接收用户发送的手势控制指令。

具体的，步骤301接收用户发送的手势控制指令可以是由手势控制设备来实现的。该手势控制设备可以是终端，优选的可以是计算机终端，例如可以是具有摄像头功能的台式计算机、笔记本、iPad、移动电话(手机)等终端。

手势控制指令可以是用户向终端发送的，用于驱动终端中用于接收并识别用户发送的手势的对应功能正常工作的控制指令。用户可以通过按压终端中设置的手势控制按键或者定义手势控制指令的快捷方式，通过键盘向终端发送手势控制指令的快捷方式等方式向终端发送手势控制指令，以便于控制终端识别用户发送的手势，实现用户使用手势控制终端进行相应的操作。

终端也称终端设备，是计算机网络中处于网络最外围的设备，主要用于用户信息的输入以及处理结果的输出等。在早期计算机系统中，由于计算机主机昂贵，因此一个主机一般会配置多个终端，这些终端本身不具备计算能力，仅仅承担信息输入输出的工作，运算和处理均由主机来完成。在个人计算机时代，个人计算机可以运行称为终端仿真器的程序来模仿一个终端的工作。随着移动网络的发展，移动终端(如手机、PAD)等得到了广泛的应用。此时，终端不仅能承担输入输出的工作，同时也能进行一定的运算和处理，实现部分系统功能。

计算机是指一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能，其能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。计算机由硬件系统和软件系统所组成，其中，硬件系统包括：运算器、控制器、存储器、输入设备和输出设备，运算器用来进行算数或者逻辑运算以及移位循环等操作；控制器负责从存储器中读取指令，经译码分析后向全机发出取数、执行、存数等控制指令，确保正确完成程序要求的功能，与运算器构成计算机的中央处理器；存储器包括内存储器和外存储器，是计算机的存储和记忆装置，用来存放指令、原始数据、中间结果和最终结果；输入/输出设备：是计算机和外界进行信息交换的桥梁，程序、数据及现场信息通过输入设备发送给计算机，计算机的输出结果通过输出设备输出，以便于用户的使用。

计算机的软件系统主要分为系统软件和应用软件两大类，其中，系统软件由一组控制计算机系统并管理其资源的程序组成，其功能包括：启动计算机，存储、加载和执行应用程序，对文件进行排序、检索，将程序语言翻译成机器语言等；应用软件主要是用于解决各类实际问题而设计的程序系统，从其服务的对象又可以分为通用软件和专用软件两类。系统软件的功能包括：1)操作系统(Operating System，OS)是管理、控制和监督计算机软件硬件资源协调运行的程序系统，由一系列具有不同控制和管理功能的程序组成，它是直接运行在计算机硬件上的、最基本的系统软件，是系统软件的核心。2)语言处理系统(翻译程序)：人和计算机交流信息使用的语言称为计算机语言或称程序设计语言。计算机语言通常分为机器语言、汇编语言和高级语言三类。如果要在计算机上运行高级语言程序就必须配备程序语言翻译程序(下简称翻译程序)。翻译程序本身是一组程序，不同的高级语言都有相应的翻译程序。翻译的方法有两种：一种称为“解释”。另一种称为“编译”，它调用相应语言的编译程序，把源程序变成目标程序(以.OBJ为扩展名)，然后再用连接程序，把目标程序与库文件相连接形成可执行文件。对源程序进行解释和编译任务的程序，分别叫作编译程序和解释程序。3)服务程序：服务程序能够提供一些常用的服务性功能，它们为用户开发程序和使用计算机提供了方便，像微机上经常使用的诊断程序、调试程序、编辑程序均属此类。4)数据库管理系统：数据库管理系统是能够对数据库进行加工、管理的系统软件。其主要功能是建立、消除、维护数据库及对库中数据进行各种操作。计算机具有运算速度快，计算精度高、逻辑运算能力强、存储容量大、自动化程度高和性价比高的特点，计算机可分为超级计算机、工业控制计算机、网络计算机、个人计算机、嵌入式计算机五类，较先进的计算机有生物计算机、光子计算机、量子计算机等。

步骤302、响应手势控制指令，获取终端设备的摄像头的映射区域。

其中，摄像头的映射区域与终端设备的显示屏幕具有对应关系。

具体的，步骤302响应手势控制指令，获取终端设备的摄像头的映射区域可以是由手势控制设备来实现的。终端响应用户发送的手势控制指令，驱动终端的摄像头工作，并获取摄像头的摄像区域，建立摄像头的摄像区域与终端显示屏幕之间的映射关系，根据两者之间具有对应关系得到映射区域，以便于确定用户手势控制对应的显示屏幕上的位置。

步骤303、在映射区域内，获取用户的手势操作指令。

具体的，步骤303在映射区域内，获取用户的手势操作指令可以是由手势控制设备来实现的。用户的手势操作指令可以是提前通过终端的摄像头获取的用户的手势，并设置用户的手势为对应的鼠标的功能确定的，用于控制终端的操作指令。在摄像头的摄像区域内，终端通过摄像头接收用户发送的手势，根据预先设置的手势对应鼠标的功能，识别用户发送的手势对应的鼠标的控制功能，得到用户的手势操作指令。

步骤304、根据用户的手势操作指令，执行对应的操作。

具体的，步骤304根据用户的手势操作指令，执行对应的操作可以由手势控制设备来实现的。终端根据获得的用户的手势操作指令，执行与手势操作指令对应的操作，实现用户通过手势对终端的控制。

本发明的实施例所提供的手势控制方法，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

本发明的实施例提供一种手势控制方法，参照图4所示，该方法包括以下步骤：

步骤401、手势控制设备接收用户发送的手势控制指令。

步骤402、手势控制设备响应手势控制指令，获取终端设备的摄像头的映射区域。

其中，摄像头的映射区域与终端设备的显示屏幕具有对应关系。

步骤403、手势控制设备获取预设手势集合。

其中，预设手势集合中包括至少一种手势。

具体的，预设手势集合可以是终端通过摄像头获取的用户发送的特定的手势。例如，预设手势集合可以是用户的手势为右手的食指伸出、其他手指紧握，用户右手的中指伸出、其他手指握紧，用户右手的食指和中指并拢伸出、其他手指握紧等用户展示的各种手势。

步骤404、手势控制设备设置预设手势集合中的每一手势与鼠标的功能之间的对应关系。

具体的，用户根据自己使用鼠标的习惯，将发送的预设手势集合中的每一个手势设置为对应的鼠标的控制功能。例如，预设手势集合中的每一手势与鼠标的功能之间的对应关系可以是：通过终端的摄像头获取用户的手势为右手的食指伸出、其他手指紧握对应的定义为鼠标的左键，获取用户右手的中指伸出、其他手指握紧的手势对应的定义为鼠标的右键，获取用户右手的食指和中指并拢伸出、其他手指握紧的手势对应的定义为鼠标的滚轮。

需要说明的是，步骤403～404可以在步骤402之前执行，或者步骤403～404与步骤402同时执行，步骤402与步骤403～404之间没有先后顺序之分，可以根据具体的应用场景来决定。

步骤405、在映射区域内，手势控制设备获取用户的第一手势。

具体的，在终端的摄像头摄像区域内，接收用户发送的控制终端的手势。例如，在终端的摄像头摄像区域内，终端接收到用户发送的第一手势为右手的食指伸出、其他手指紧握。

步骤406、手势控制设备判断第一手势是否存在于预设手势集合中。

具体的，终端可以判断采集到的用户的手势是否与预设手势集合中的至少一种手势相同，如果用户的手势与预设手势集合中的至少一种手势相同，说明第一手势存在于预设手势集合中；如果用户的手势与预设手势集合中的任何一种手势都不相同，说明第一手势不存在与预设手势集合中。

步骤407、若第一手势存在于预设手势集合中，则手势控制设备根据第一手势和预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到第一手势对应的鼠标的功能。

具体的，若用户发送的手势在预设手势集合中，根据定义的预设手势集合中每一手势与鼠标的功能之间的关系，可以得到与用户发送的手势对应鼠标的功能，实现用户发送的手势实现对应的鼠标功能；若用户发送的手势不在预设手势集合中，则终端忽略该手势，不做任何处理。以终端接收到用户发送的手势是右手的食指伸出、其他手指握紧为例进行说明，终端接收到用户发送的手势是右手的食指伸出、其他手指握紧，判断该手势在预设手势集合中，根据手势集合中手势为右手的食指伸出、其他手指握紧对应鼠标的左键的关系，终端可以确定用户发送的手势对应的是鼠标的左键。

步骤408、手势控制设备获取第一手势的运动数据，并根据第一手势的运动数据和第一手势对应的鼠标的功能，确定用户的手势操作指令。

具体的，终端获取用户的手势为右手的食指伸出、其他手指握紧的运动数据，根据运动数据，确定用户的手势操作指令为实现鼠标左键的功能。

需要说明的是，本实施例中与其它实施例中相同步骤或概念的解释可以参考其它实施例中的描述，此处不再赘述。

本发明的实施例所提供的手势控制方法，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

本发明的实施例提供一种手势控制方法，参照图5所示，该方法包括以下步骤：

步骤501、手势控制设备接收用户发送的手势控制指令。

步骤502、手势控制设备响应手势控制指令，获取终端设备的摄像头的映射区域。

其中，摄像头的映射区域与终端设备的显示屏幕具有对应关系。

步骤503、手势控制设备在终端设备的显示屏幕上设置预览窗口，预览窗口用于显示映射区域内的图像。

具体的，用户预览窗口可以选择是否需要，预览窗口的大小用户可以根据需求进行大小的选择，而且预览窗口的位置也可以根据用户的需求进行移动。在预览窗口中，可以显示与显示屏幕映射对应的摄像头的摄像区域，以便于用户在有效摄像区域内发送手势控制终端。

步骤504、手势控制设备获取预设手势集合。

其中，预设手势集合中包括至少一种手势。

步骤505、手势控制设备设置预设手势集合中的每一手势与鼠标的功能之间的对应关系。

需要说明的是，步骤504～505可以在步骤503之前执行，或者步骤504～505与步骤503同时执行，步骤503与步骤504～505之间没有先后顺序之分，可以根据具体的应用场景来决定。

步骤506、在映射区域内，手势控制设备获取用户的第一手势。

步骤507、手势控制设备判断第一手势是否存在于预设手势集合中。

步骤508、若第一手势存在于预设手势集合中，则手势控制设备根据第一手势和预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到第一手势对应的鼠标的功能。

步骤509、当第一手势的运动数据为第一手势的坐标发生变化，且第一手势的位移速度大于或者等于预设速度时，手势控制设备基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的位移指令。

具体的，当第一手势为用户右手的食指伸出、其他手指握紧或者用户右手的中指伸出、其他手指握紧时，可以是鼠标的光标进行移动；当第一手势为用户右手的食指和中指并拢伸出、其他手指握紧时，有坐标发生变化且食指和中指的位移速度大于或者等于预设速度，则确定为对应的鼠标滚轮滚动的功能，利用用户右手的食指和中指并拢伸出、其他手指握紧实现页面的上下翻动。

步骤510、当第一手势的运动数据为第一手势在深度方向的距离变化值大于或者等于阈值时，手势控制设备基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的点击指令。

具体的，当第一手势为用户右手的食指伸出、其他手指握紧时，靠近摄像头的深度方向距离变化值大于或者等于阈值时，确定手势功能为左击鼠标左键的功能，远离摄像头时深度方向距离变化值大于或者等于阈值时，确定手势功能为松开鼠标左键的功能；当第一手势为用户右手的中指伸出、其他手指握紧时，靠近摄像头的深度方向距离变化值大于或者等于阈值时，确定手势功能为左击鼠标右键的功能，远离摄像头时深度方向距离变化值大于或者等于阈值时，确定手势功能为松开鼠标右键的功能；当用户右手的食指和中指并拢伸出、其他手指握紧，靠近摄像头或者远离摄像头不执行任何操作与鼠标中滚轮的作用一样，无操作。

步骤511、当第一手势的运动数据为第一手势在深度方向的距离变化值大于或者等于阈值，第一手势的坐标发生变化，且第一手势的位移速度大于或者等于预设速度时，手势控制设备基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的选择指令。

其中，第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

具体的，当第一手势为用户右手的食指伸出、其他手指握紧时，不仅该手势在深度方向的距离变化值大于或者等于阈值，而且该手势的坐标发生变化，且第一手势的位移速度大于或者等于预设速度时，确定为单击鼠标左键并选择目标对像的功能。在选择目标对象后，检测到上述三种手势中的任何一种手势有坐标位置移动，使鼠标光标移动在目标对象上，然后检测到用户右手的食指伸出、其他手指握紧时，有深度方向的距离变化值大于或者等于阈值，并用户右手的食指伸出、其他手指握紧的手势有坐标的变化，则时拖动选择目标对象。

需要说明的是，步骤509、步骤510、步骤511之间没有先后顺序之分，步骤509、步骤510、步骤511可以单独执行，也可以根据具体的应用场景组合使用，决定执行顺序。

预设手势集合中每一手势与鼠标的功能之间的对应关系确定过程可以如图6～8所示，如图6所示，用户根据自己平时使用鼠标的习惯，可以通过摄像头向终端发送右手的食指伸出、其他手指紧握的手势，并定义为鼠标的左键；如图7所示，通过摄像头向终端发送右手的中指伸出、其他手指紧握的手势，定义为鼠标的右键；如图8所示，通过摄像头向终端发送右手的食指和中指伸出、其他手指紧握的手势，定义为鼠标的滚轮。

需要说明的是，本实施例中与其它实施例中相同步骤或概念的解释可以参考其它实施例中的描述，此处不再赘述。

本发明的实施例所提供的手势控制方法，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

本发明的实施例提供一种手势控制设备6，该设备可以应用于图3～5对应的实施例提供的一种手势控制方法中，参照图9所示，该设备可以包括：接收单元61、第一获取单元62、第二获取单元63和第一处理单元64，其中：

接收单元61，用于接收用户发送的手势控制指令。

第一获取单元62，用于根据手势控制指令，获取终端设备的摄像头的映射区域。

其中，摄像头的映射区域与终端设备的显示屏幕具有对应关系。

第二获取单元63，用于在映射区域内，获取用户的手势操作指令。

第一处理单元64，用于根据用户的手势操作指令，执行对应的操作。

本发明的实施例所提供的手势控制设备，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

具体的，参照图10所示，该设备还包括：第三获取单元65和第二处理单元66，其中：

第三获取单元65，用于获取预设手势集合。

其中，预设手势集合中包括至少一种手势。

第二处理单元66，用于设置预设手势集合中的每一手势与鼠标之间对应的功能，获得手势集合功能关系表。

具体的，参照图11所示，该第二获取单元63包括：获取模块631、判断模块632、第一处理模块633和第二处理模块634，其中：

获取模块631，用于在映射区域内，获取用户的第一手势。

判断模块632，用于判断第一手势是否存在于预设手势集合中。

第一处理模块633，用于若第一手势存在于预设手势集合中，则根据第一手势和预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到第一手势对应的鼠标的功能。

第二处理模块634，用于获取第一手势的运动数据，并根据第一手势的运动数据和第一手势对应的鼠标的功能，确定用户的手势操作指令。

进一步的，第二处理模块用于：

当第一手势的运动数据为第一手势的坐标发生变化，且第一手势的位移速度大于或者等于预设速度时，基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的位移指令。

当第一手势的运动数据为第一手势在深度方向的距离变化值大于或者等于阈值时，基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的点击指令。

当第一手势的运动数据为第一手势在深度方向的距离变化值大于或者等于阈值，第一手势的坐标发生变化，且第一手势的位移速度大于或者等于预设速度时，基于第一手势对应的鼠标的功能确定用户的手势操作指令为鼠标的选择指令。

其中，第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

具体的，参照图12所示，该设备还包括：设置单元67，其中：

设置单元67，用于在终端设备的显示屏幕上设置预览窗口，预览窗口用于显示映射区域内的图像。

需要说明的是，本实施例中各个单元和模块之间的交互过程，可以参照图3～5对应的实施例提供的一种手势控制方法中交互过程，此处不再赘述。

本发明的实施例所提供的手势控制设备，可以接收用户发送的手势控制指令，并响应该手势控制指令，获取终端设备的摄像头的映射区域，然后在映射区域内，获取用户的手势操作指令，最后根据用户的手势操作指令，执行对应的操作；这样，通过终端设备的摄像头获取用户的手势，根据预先设置的手势对应鼠标的控制功能来确定获取的用户的手势的功能，实现利用手势代替鼠标对终端设备进行控制，解决了现有技术方案中严重依赖鼠标控制终端设备的问题，降低了对鼠标的依赖性，降低了鼠标对用户身心健康的影响，提高了操作的便捷性；同时，提高了用户和终端之间交互的灵活性。

在实际应用中，所述接收单元61、第一获取单元62、第二获取单元63、第一处理单元64、第三获取单元65、第二处理单元66、设置单元67、获取模块631、判断模块632、第一处理模块633和第二处理模块634均可由位于无线数据发送设备中的中央处理器(CentralProcessing Unit，CPU)、微处理器(MicroProcessor Unit，MPU)、数字信号处理器(DigitalSignal Processor，DSP)或现场可编程门阵列(Field Programmable Gate Array，FPGA)等实现。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所描述的方法。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种手势控制设备，其特征在于，所述设备包括：接收单元、第一获取单元、第二获取单元和第一处理单元，其中：

所述接收单元，用于接收用户发送的手势控制指令；

所述第一获取单元，用于根据所述手势控制指令，获取终端设备的摄像头的映射区域；其中，所述摄像头的映射区域与所述终端设备的显示屏幕具有对应关系；

所述第二获取单元，用于在所述映射区域内，获取所述用户的手势操作指令；

所述第一处理单元，用于根据所述用户的手势操作指令，执行对应的操作。

2.根据权利要求1所述的设备，其特征在于，所述设备还包括：第三获取单元和第二处理单元，其中：

所述第三获取单元，用于获取预设手势集合；其中，所述预设手势集合中包括至少一种手势；

所述第二处理单元，用于设置所述预设手势集合中的每一手势与鼠标之间对应的功能，获得手势集合功能关系表。

3.根据权利要求2所述的设备，其特征在于，所述第二获取单元包括：获取模块、判断模块、第一处理模块和第二处理模块，其中：

所述获取模块，用于在所述映射区域内，获取所述用户的第一手势；

所述判断模块，用于判断所述第一手势是否存在于所述预设手势集合中；

所述第一处理模块，用于若所述第一手势存在于所述预设手势集合中，则根据所述第一手势和所述预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到所述第一手势对应的鼠标的功能；

所述第二处理模块，用于获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令。

4.根据权利要求3所述的设备，其特征在于，所述第二处理模块具体用于：

当所述第一手势的运动数据为所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为鼠标的位移指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的点击指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值，所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的选择指令；其中，所述第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

5.根据权利要求1所述的设备，其特征在于，所述设备还包括：设置单元，其中：

所述设置单元，用于在所述终端设备的显示屏幕上设置预览窗口，所述预览窗口用于显示所述映射区域内的图像。

6.一种手势控制方法，其特征在于，所述方法包括：

接收用户发送的手势控制指令；

响应所述手势控制指令，获取终端设备的摄像头的映射区域；其中，所述摄像头的映射区域与所述终端设备的显示屏幕具有对应关系；

在所述映射区域内，获取用户的手势操作指令；

根据所述用户的手势操作指令，执行对应的操作。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

获取预设手势集合；其中，所述预设手势集合中包括至少一种手势；

设置所述预设手势集合中的每一手势与鼠标的功能之间的对应关系。

8.根据权利要求7所述的方法，其特征在于，所述在所述映射区域内，获取用户的手势操作指令，包括：

在所述映射区域内，获取所述用户的第一手势；

判断所述第一手势是否存在于所述预设手势集合中；

若所述第一手势存在于所述预设手势集合中，则根据所述第一手势和所述预设手势集合中的每一手势与鼠标的功能之间的对应关系，得到所述第一手势对应的鼠标的功能；

获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令。

9.根据权利要求8所述的方法，其特征在于，所述获取所述第一手势的运动数据，并根据所述第一手势的运动数据和所述第一手势对应的鼠标的功能，确定所述用户的手势操作指令，包括：

当所述第一手势的运动数据为所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为鼠标的位移指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的点击指令；

当所述第一手势的运动数据为所述第一手势在深度方向的距离变化值大于或者等于阈值，所述第一手势的坐标发生变化，且所述第一手势的位移速度大于或者等于预设速度时，基于所述第一手势对应的鼠标的功能确定所述用户的手势操作指令为所述鼠标的选择指令；其中，所述第一手势的初始坐标至终点坐标之间的对象为选择目标对象。

10.根据权利要求6所述的方法，其特征在于，所述方法还包括：

在所述终端设备的显示屏幕上设置预览窗口，所述预览窗口用于显示所述映射区域内的图像。