CN109814712B - 一种基于虚拟交互装置的手势识别系统 - Google Patents

Abstract

本发明公开一种基于虚拟交互装置的手势识别系统，用于解决如何利用手指指尖的相互接触，从而识别相应的手势，避免受到光照和角度的影响，导致识别率较低，如何去除软件手势数据库内不使用的手势及如何利用手势进行解锁验证，包括数据采集模块、预处理模块、手势识别模块、处理器、显示模块、执行模块、虚拟交互装置、软件识别模块、手势切换模块、手势存储模块和手势编辑模块；通过判断手指尖相互接触，从而形成手势指令，不受光照和角度影响，识别准确率高；通过手势识别模块，识别出交换装置可以识别和对应执行的指令；利用公式

T_ik＞T_gd获取得到删除值Ei；通过对比软件类型Di的删除值Ei，从而去除软件手势数据库内不使用的手势。

Description

一种基于虚拟交互装置的手势识别系统

技术领域

本发明涉及于虚拟交互装置的手势识别技术领域，尤其涉及一种基于虚拟交互装置的手势识别系统。

背景技术

手势识别是计算机科学和语言技术中的一个主题，目的是通过数学算法来识别人类手势。手势可以源自任何身体运动或状态，但通常源自面部或手。本领域中的当前焦点包括来自面部和手势识别的情感识别。用户可以使用简单的手势来控制或与设备交互，而无需接触他们。姿势，步态和人类行为的识别也是手势识别技术的主题。手势识别可以被视为计算机理解人体语言的方式，从而在机器和人之间搭建比原始文本用户界面或甚至GUI(图形用户界面)更丰富的桥梁。手势识别使人们能够与机器(HMI)进行通信，并且无需任何机械设备即可自然交互。

现有的手势识别采用摄像头采集图像，然后进行图像分割和图像特征提取，因受光照和角度的影响，导致识别准确率较低。

发明内容

本发明的目的在于提供一种基于虚拟交互装置的手势识别系统。

本发明所要解决的技术问题为：

(1)如何利用手指指尖的相互接触，从而识别相应的手势，避免受到光照和角度的影响，导致识别率较低；

(2)如何去除软件手势数据库内不使用的手势；

(3)如何利用手势进行解锁验证；

本发明的目的可以通过以下技术方案实现：一种基于虚拟交互装置的手势识别系统，包括数据采集模块、预处理模块、手势识别模块、处理器、显示模块、执行模块、虚拟交互装置、软件识别模块、手势切换模块、手势存储模块和手势编辑模块；

所述数据采集模块用于采集手指指尖标识及手指尖的距离；所述数据采集模块采集模块将采集手指指尖标识及手指尖的距离发送至预处理模块；所述预处理模块接收数据采集模块发送的采集手指指尖标识及手指尖的距离信息并进行预处理，处理步骤如下：

步骤一：设定手指指尖记为F_i；i＝1……10，手指尖的距离记为S_ij；j＝1……10且i≠j，即当i＝1时，j取值为2……10；具体表现为，S₁₂与S₁₂均表示手指指尖F₁与手指指尖F₂之间的距离；

步骤二：设定预设固定距离记为Sg；手指尖的距离S_ij与预设固定距离记为Sg；

步骤三：当S_ij<Sg则输出S_ij对应的手指尖接触集合Z_ij；具体表现为，当S₁₂<Sg，则输出S₁₂对应的手指尖接触集合Z₁₂；其中，Z₁₂表示手指指尖F₁与手指指尖F₂接触；

所述预处理模块将处理的手指尖接触集合信息发送至手势识别模块，所述手势存储模块用于存储交互装置手势指令面模板，所述交互装置手势指令面模板为交互装置所能识别并能运行的全部指令的集合；所述手势识别模块接收预处理模块发送的手指尖接触集合信息并获取手势存储模块内存储的交互装置手势指令模块进行识别，具体识别过程如下：

a：交互装置手势指令面模板包括若干个交互装置手势指令；设定交互装置手势指令记为Y_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；

b：手势识别模块获取手势存储模块内存储的交互装置手势指令Y_ij，然后手指尖接触集合Z_ij与交互装置手势指令Y_ij进行匹配；

c：当Z_ij＝Y_ij时，则手势识别模块输出交互装置手势指令Y_ij；

所述手势识别模块将识别的交互装置手势指令发送至处理器，处理器接收手势识别模块发送的交互装置手势指令并将发送至执行模块和显示模块，所述执行模块用于执行处理器发送的交互装置手势指令；所述显示模块用于显示互装置手势指令；所述软件识别模块用于识别虚拟交互装置的运行软件类型，所述软件识别模块包括软件采集单元、软件类型存储单元和软件类型匹配单元；所述软件采集单元用于采集虚拟交互装置的运行软件类型，软件类型存储单元用于存储虚拟交互装置的运行软件的对比软件类型；软件类型匹配单元用于对软件类型进行匹配，具体匹配步骤如下：

S1：设定软件采集单元采集的运行软件标记为Ci，i＝1……n；软件类型存储单元存储的对比软件类型记为Di；i＝1……n；

S2：Ci与Di进行匹配；

S3：当Ci＝Di，则输出Di；具体表现为，当C1＝D1，则输出D1；

所述软件识别模块将输出的对比软件类型发送至手势切换模块，所述手势切换模块用于切换手势存储模块内的软件对应的手势数据库。

优选的，所述手势存储模块包括基础手势数据库、软件手势数据库和频率采集单元、计算单元、提取单元和删除单元，所述基础手势数据库用于存储手势使用频率较高的手势；所述软件手势数据库用于存储与软件一一对应的数据库，所述频率采集单元用于采集手势使用频率及软件手势数据库切换次数及切换的间隔时间；所述频率采集单元将采集的手势使用频率及软件手势数据库切换次数及切换的间隔时间发送至计算单元，计算单元用于对频率采集单元发送的手势使用频率及软件手势数据库切换次数及切换的间隔时间进行计算，具体计算步骤如下：

步骤一：设定交互装置手势指令Y_ij对应的使用频率为P_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；当手势识别模块输出一次交互装置手势指令Y_ij，则P_ij值增加1；

步骤二：设定基础频率界限值为K1；当P_ij>K1；则判定交互装置手势指令Y_ij为使用频率较高的手势；所述计算单元将输出交互装置手势指令Y_ij至提取单元；所述提取单元将计算单元发送输出交互装置手势指令Y_ij存至基础手势数据库；

步骤三：设定软件手势数据库切换次数PD_i；i＝1……n；其中PD₁表示与对比软件类型D1；设定切换的间隔时间为T_ik，k＝1……n；其中，T_i1表示对比软件类型Di的第一次与第二次切换间隔时间；

步骤四：设定对比软件类型Di的第一次切换时间记为H_i1，对比软件类型Di的第二次切换时间记为H_i2；对比软件类型Di的第n次切换时间记为H_in；

步骤五：利用求和公式

获取得到对比软件类型Di的切换间隔时间T_ik；

步骤六：利用公式

T_ik＞T_gd获取得到删除值Ei；其中，T_gd表示间隔门限值；

步骤七：设定删除门限值E_g；然后删除值Ei与删除门限值E_g比较；当Ei>E_g，则删除与删除值Ei对应的对比软件类型Di；

所述计算单元将删除值大于删除门限值的对比软件类型发送至删除单元，删除单元接收计算单元发送的删除值大于删除门限值的对比软件类型并删除。

优选的，所述数据采集模块为套在手指指尖上用于测量手指指尖距离的测距传感器，所述测距传感器内设有与测距传感器一一对应的标识。

优选的，所述手势编辑模块用于编辑软件类型存储单元内存储虚拟交互装置的运行软件的对比软件类型及对比软件类型对应的交互装置手势指令面模板。

优选的，所述手势编辑模块内安装有验证单元，所述验证单元包括捕捉模块和检验模块；所述捕捉模块用于捕捉解锁手势，捕捉模块将捕捉的解锁手势发送至检验模块；所述检验模块用于验证手势解锁指令；具体验证过程如下：

a：设定捕捉到的解锁手势记为A＝{Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij}，设定密码手势B＝{M_ij,M_ij,M_ij,M_ij,M_ij,M_ij,M_ij}；

b：解锁手势A与密码手势B进行匹配；当A＝B，即解锁手势与密码手势的手势和顺序相同时，则验证成功。

本发明的有益效果：

(1)数据采集模块用于采集手指指尖标识及手指尖的距离；当S_ij<Sg则输出S_ij对应的手指尖接触集合Z_ij；具体表现为，当S₁₂<Sg，则输出S₁₂对应的手指尖接触集合Z₁₂；其中，Z₁₂表示手指指尖F₁与手指指尖F₂接触；通过判断手指尖相互接触，从而形成手势指令，不受光照和角度影响，识别准确率高；手势识别模块获取手势存储模块内存储的交互装置手势指令Y_ij，然后手指尖接触集合Z_ij与交互装置手势指令Y_ij进行匹配；当Z_ij＝Y_ij时，则手势识别模块输出交互装置手势指令Y_ij；通过手势识别模块，识别出交换装置可以识别和对应执行的指令；

(2)利用公式

T_ik＞T_gd获取得到删除值Ei；然后删除值Ei与删除门限值E_g比较；当Ei>E_g，则删除与删除值Ei对应的对比软件类型Di；通过对比软件类型Di的删除值Ei，从而去除软件手势数据库内不使用的手势；

(3)手势编辑模块内安装有验证单元，捕捉模块捕捉的解锁手势发送至检验模块；检验模块验证手势解锁指令；解锁手势A与密码手势B进行匹配；当A＝B，即解锁手势与密码手势的手势和顺序相同时，则验证成功。

附图说明

下面结合附图对本发明作进一步的说明。

图1是本发明一种基于虚拟交互装置的手势识别系统的原理框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

请参阅图1所示，本发明为一种基于虚拟交互装置的手势识别系统，包括数据采集模块、预处理模块、手势识别模块、处理器、显示模块、执行模块、虚拟交互装置、软件识别模块、手势切换模块、手势存储模块和手势编辑模块；

数据采集模块用于采集手指指尖标识及手指尖的距离；数据采集模块采集模块将采集手指指尖标识及手指尖的距离发送至预处理模块；预处理模块接收数据采集模块发送的采集手指指尖标识及手指尖的距离信息并进行预处理，处理步骤如下：

步骤一：设定手指指尖记为F_i；i＝1……10，手指尖的距离记为S_ij；j＝1……10且i≠j，即当i＝1时，j取值为2……10；具体表现为，S₁₂与S₁₂均表示手指指尖F₁与手指指尖F₂之间的距离；

步骤二：设定预设固定距离记为Sg；手指尖的距离S_ij与预设固定距离记为Sg；

步骤三：当S_ij<Sg则输出S_ij对应的手指尖接触集合Z_ij；具体表现为，当S₁₂<Sg，则输出S₁₂对应的手指尖接触集合Z₁₂；其中，Z₁₂表示手指指尖F₁与手指指尖F₂接触；通过判断手指尖相互接触，从而形成手势指令，不受光照和角度影响，识别准确率高；

预处理模块将处理的手指尖接触集合信息发送至手势识别模块，手势存储模块用于存储交互装置手势指令面模板，交互装置手势指令面模板为交互装置所能识别并能运行的全部指令的集合；手势识别模块接收预处理模块发送的手指尖接触集合信息并获取手势存储模块内存储的交互装置手势指令模块进行识别，具体识别过程如下：

a：交互装置手势指令面模板包括若干个交互装置手势指令；设定交互装置手势指令记为Y_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；

b：手势识别模块获取手势存储模块内存储的交互装置手势指令Y_ij，然后手指尖接触集合Z_ij与交互装置手势指令Y_ij进行匹配；

c：当Z_ij＝Y_ij时，则手势识别模块输出交互装置手势指令Y_ij；通过手势识别模块，识别出交换装置可以识别和对应执行的指令；

手势识别模块将识别的交互装置手势指令发送至处理器，处理器接收手势识别模块发送的交互装置手势指令并将发送至执行模块和显示模块，执行模块用于执行处理器发送的交互装置手势指令；显示模块用于显示互装置手势指令；软件识别模块用于识别虚拟交互装置的运行软件类型，软件识别模块包括软件采集单元、软件类型存储单元和软件类型匹配单元；软件采集单元用于采集虚拟交互装置的运行软件类型，软件类型存储单元用于存储虚拟交互装置的运行软件的对比软件类型；软件类型匹配单元用于对软件类型进行匹配，具体匹配步骤如下：

S1：设定软件采集单元采集的运行软件标记为Ci，i＝1……n；软件类型存储单元存储的对比软件类型记为Di；i＝1……n；

S2：Ci与Di进行匹配；

S3：当Ci＝Di，则输出Di；具体表现为，当C1＝D1，则输出D1；通过识别交换装置运行的软件，从而切换运行软件的对应手势，提高了手势应用的精确性；

软件识别模块将输出的对比软件类型发送至手势切换模块，手势切换模块用于切换手势存储模块内的软件对应的手势数据库。

手势存储模块包括基础手势数据库、软件手势数据库和频率采集单元、计算单元、提取单元和删除单元，基础手势数据库用于存储手势使用频率较高的手势；软件手势数据库用于存储与软件一一对应的数据库，频率采集单元用于采集手势使用频率及软件手势数据库切换次数及切换的间隔时间；频率采集单元将采集的手势使用频率及软件手势数据库切换次数及切换的间隔时间发送至计算单元，计算单元用于对频率采集单元发送的手势使用频率及软件手势数据库切换次数及切换的间隔时间进行计算，具体计算步骤如下：

步骤一：设定交互装置手势指令Y_ij对应的使用频率为P_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；当手势识别模块输出一次交互装置手势指令Y_ij，则P_ij值增加1；

步骤二：设定基础频率界限值为K1；当P_ij>K1；则判定交互装置手势指令Y_ij为使用频率较高的手势；计算单元将输出交互装置手势指令Y_ij至提取单元；提取单元将计算单元发送输出交互装置手势指令Y_ij存至基础手势数据库；

步骤三：设定软件手势数据库切换次数PD_i；i＝1……n；其中PD₁表示与对比软件类型D1；设定切换的间隔时间为T_ik，k＝1……n；其中，T_i1表示对比软件类型Di的第一次与第二次切换间隔时间；

步骤四：设定对比软件类型Di的第一次切换时间记为H_i1，对比软件类型Di的第二次切换时间记为H_i2；对比软件类型Di的第n次切换时间记为H_in；

步骤五：利用求和公式

获取得到对比软件类型Di的切换间隔时间T_ik；

步骤六：利用公式

T_ik＞T_gd获取得到删除值Ei；其中，T_gd表示间隔门限值；

步骤七：设定删除门限值E_g；然后删除值Ei与删除门限值E_g比较；当Ei>E_g，则删除与删除值Ei对应的对比软件类型Di；通过对比软件类型Di的删除值Ei，从而去除软件手势数据库内不使用的手势；

计算单元将删除值大于删除门限值的对比软件类型发送至删除单元，删除单元接收计算单元发送的删除值大于删除门限值的对比软件类型并删除。

数据采集模块为套在手指指尖上用于测量手指指尖距离的测距传感器，测距传感器内设有与测距传感器一一对应的标识。

手势编辑模块用于编辑软件类型存储单元内存储虚拟交互装置的运行软件的对比软件类型及对比软件类型对应的交互装置手势指令面模板。

手势编辑模块内安装有验证单元，验证单元包括捕捉模块和检验模块；捕捉模块用于捕捉解锁手势，捕捉模块将捕捉的解锁手势发送至检验模块；检验模块用于验证手势解锁指令；具体验证过程如下：

a：设定捕捉到的解锁手势记为A＝{Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij}，设定密码手势B＝{M_ij,M_ij,M_ij,M_ij,M_ij,M_ij,M_ij}；

b：解锁手势A与密码手势B进行匹配；当A＝B，即解锁手势与密码手势的手势和顺序相同时，则验证成功。

本发明的工作原理：数据采集模块采集手指指尖标识及手指尖的距离，然后传输到预处理模块，预处理模块对手指尖的距离判断，从而识别出手指指令，预处理模块将识别出的手指指令发送至手势识别模块进行识别，输出交互装置手势指令，手势识别模块将交互装置手势指令发送处理器上，处理器将交互装置手势指令发送至执行模块进行执行，达到手势识别的目的；数据采集模块用于采集手指指尖标识及手指尖的距离；当S_ij<Sg则输出S_ij对应的手指尖接触集合Z_ij；具体表现为，当S₁₂<Sg，则输出S₁₂对应的手指尖接触集合Z₁₂；其中，Z₁₂表示手指指尖F₁与手指指尖F₂接触；通过判断手指尖相互接触，从而形成手势指令，不受光照和角度影响，识别准确率高；手势识别模块获取手势存储模块内存储的交互装置手势指令Y_ij，然后手指尖接触集合Z_ij与交互装置手势指令Y_ij进行匹配；当Z_ij＝Y_ij时，则手势识别模块输出交互装置手势指令Y_ij；通过手势识别模块，识别出交换装置可以识别和对应执行的指令；利用公式

T_ik＞T_gd获取得到删除值Ei；然后删除值Ei与删除门限值E_g比较；当Ei>E_g，则删除与删除值Ei对应的对比软件类型Di；通过对比软件类型Di的删除值Ei，从而去除软件手势数据库内不使用的手势；手势编辑模块内安装有验证单元，捕捉模块捕捉的解锁手势发送至检验模块；检验模块验证手势解锁指令；解锁手势A与密码手势B进行匹配；当A＝B，即解锁手势与密码手势的手势和顺序相同时，则验证成功。

以上内容仅仅是对本发明结构所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的结构或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。

Claims (5)

1.一种基于虚拟交互装置的手势识别系统，其特征在于，包括数据采集模块、预处理模块、手势识别模块、处理器、显示模块、执行模块、虚拟交互装置、软件识别模块、手势切换模块、手势存储模块和手势编辑模块；

所述数据采集模块用于采集手指指尖标识及手指尖的距离；所述数据采集模块将采集手指指尖标识及手指尖的距离发送至预处理模块；所述预处理模块接收数据采集模块发送的采集手指指尖标识及手指尖的距离信息并进行预处理，处理步骤如下：

步骤一：设定手指指尖记为F_i；i＝1……10，手指尖的距离记为S_ij；j＝1……10且i≠j，即当i＝1时，j取值为2……10；S₁₂与S₁₂均表示手指指尖F₁与手指指尖F₂之间的距离；

步骤二：设定预设固定距离记为Sg；手指尖的距离S_ij与预设固定距离记为Sg；

步骤三：当S_ij<Sg则输出S_ij对应的手指尖接触集合Z_ij；当S₁₂<Sg，则输出S₁₂对应的手指尖接触集合Z₁₂；其中，Z₁₂表示手指指尖F₁与手指指尖F₂接触；

所述预处理模块将处理的手指尖接触集合信息发送至手势识别模块，所述手势存储模块用于存储交互装置手势指令面模板，所述交互装置手势指令面模板为交互装置所能识别并能运行的全部指令的集合；所述手势识别模块接收预处理模块发送的手指尖接触集合信息并获取手势存储模块内存储的交互装置手势指令模块进行识别，具体识别过程如下：

a：交互装置手势指令面模板包括若干个交互装置手势指令；设定交互装置手势指令记为Y_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；

b：手势识别模块获取手势存储模块内存储的交互装置手势指令Y_ij，然后手指尖接触集合Z_ij与交互装置手势指令Y_ij进行匹配；

c：当Z_ij＝Y_ij时，则手势识别模块输出交互装置手势指令Y_ij；

所述手势识别模块将识别的交互装置手势指令发送至处理器，处理器接收手势识别模块发送的交互装置手势指令并将发送至执行模块和显示模块，所述执行模块用于执行处理器发送的交互装置手势指令；所述显示模块用于显示互装置手势指令；所述软件识别模块用于识别虚拟交互装置的运行软件类型，所述软件识别模块包括软件采集单元、软件类型存储单元和软件类型匹配单元；所述软件采集单元用于采集虚拟交互装置的运行软件类型，软件类型存储单元用于存储虚拟交互装置的运行软件的对比软件类型；软件类型匹配单元用于对软件类型进行匹配，具体匹配步骤如下：

S1：设定软件采集单元采集的运行软件标记为Ci，i＝1……n；软件类型存储单元存储的对比软件类型记为Di；i＝1……n；

S2：Ci与Di进行匹配；

S3：当Ci＝Di，则输出Di；当C1＝D1，则输出D1；

所述软件识别模块将输出的对比软件类型发送至手势切换模块，所述手势切换模块用于切换手势存储模块内的软件对应的手势数据库。

2.根据权利要求1所述的一种基于虚拟交互装置的手势识别系统，其特征在于，所述手势存储模块包括基础手势数据库、软件手势数据库和频率采集单元、计算单元、提取单元和删除单元，所述基础手势数据库用于存储手势使用频率较高的手势；所述软件手势数据库用于存储与软件一一对应的数据库，所述频率采集单元用于采集手势使用频率及软件手势数据库切换次数及切换的间隔时间；所述频率采集单元将采集的手势使用频率及软件手势数据库切换次数及切换的间隔时间发送至计算单元，计算单元用于对频率采集单元发送的手势使用频率及软件手势数据库切换次数及切换的间隔时间进行计算，具体计算步骤如下：

步骤一：设定交互装置手势指令Y_ij对应的使用频率为P_ij；i＝1……10，j＝1……10且i≠j，即当i＝1时，j取值为2……10；当手势识别模块输出一次交互装置手势指令Y_ij，则P_ij值增加1；

步骤二：设定基础频率界限值为K1；当P_ij>K1；则判定交互装置手势指令Y_ij为使用频率较高的手势；所述计算单元将输出交互装置手势指令Y_ij至提取单元；所述提取单元将计算单元发送输出交互装置手势指令Y_ij存至基础手势数据库；

步骤三：设定软件手势数据库切换次数PD_i；i＝1……n；其中PD₁表示与对比软件类型D1；设定切换的间隔时间为T_ik，k＝1……n；其中，T_i1表示对比软件类型Di的第一次与第二次切换间隔时间；

步骤四：设定对比软件类型Di的第一次切换时间记为H_i1，对比软件类型Di的第二次切换时间记为H_i2；对比软件类型Di的第n次切换时间记为H_in；

步骤五：利用求和公式

获取得到对比软件类型Di的切换间隔时间T_ik；

步骤六：利用公式

T_ik＞T_gd获取得到删除值Ei；其中，T_gd表示间隔门限值；

步骤七：设定删除门限值E_g；然后删除值Ei与删除门限值E_g比较；当Ei>E_g，则删除与删除值Ei对应的对比软件类型Di；

所述计算单元将删除值大于删除门限值的对比软件类型发送至删除单元，删除单元接收计算单元发送的删除值大于删除门限值的对比软件类型并删除。

3.根据权利要求1所述的一种基于虚拟交互装置的手势识别系统，其特征在于，所述数据采集模块为套在手指指尖上用于测量手指指尖距离的测距传感器，所述测距传感器内设有与测距传感器一一对应的标识。

4.根据权利要求1所述的一种基于虚拟交互装置的手势识别系统，其特征在于，所述手势编辑模块用于编辑软件类型存储单元内存储虚拟交互装置的运行软件的对比软件类型及对比软件类型对应的交互装置手势指令面模板。

5.根据权利要求4所述的一种基于虚拟交互装置的手势识别系统，其特征在于，所述手势编辑模块内安装有验证单元，所述验证单元包括捕捉模块和检验模块；所述捕捉模块用于捕捉解锁手势，捕捉模块将捕捉的解锁手势发送至检验模块；所述检验模块用于验证手势解锁指令；具体验证过程如下：

a：设定捕捉到的解锁手势记为A＝{Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij,Y_ij}，设定密码手势B＝{M_ij,M_ij,M_ij,M_ij,M_ij,M_ij,M_ij}；

b：解锁手势A与密码手势B进行匹配；当A＝B，即解锁手势与密码手势的手势和顺序相同时，则验证成功。

Images