CN110827454A - 一种人脸识别与意图识别的锁具控制系统 - Google Patents

一种人脸识别与意图识别的锁具控制系统 Download PDF

Info

Publication number
CN110827454A
CN110827454A CN201911131662.1A CN201911131662A CN110827454A CN 110827454 A CN110827454 A CN 110827454A CN 201911131662 A CN201911131662 A CN 201911131662A CN 110827454 A CN110827454 A CN 110827454A
Authority
CN
China
Prior art keywords
user
recognition
lock
action
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911131662.1A
Other languages
English (en)
Inventor
赵旭
李俊杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tuzheng (wuxi) Research Institute Co Ltd
Original Assignee
Tuzheng (wuxi) Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tuzheng (wuxi) Research Institute Co Ltd filed Critical Tuzheng (wuxi) Research Institute Co Ltd
Priority to CN201911131662.1A priority Critical patent/CN110827454A/zh
Publication of CN110827454A publication Critical patent/CN110827454A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys

Abstract

本发明公开了一种人脸识别与意图识别的锁具控制系统，包括人脸识别系统、意图识别系统以及控制系统，上述三部分系统构成了以下控制步骤：T1:用户人脸识别；T2:判断是否为注册用户；T3:采集用户动作；T4:解析动作；T5:锁具完成控制操作；T6:提示非注册用户；用户动作的信息按不同的类别进行分类：I类：按照不同的人体部位分类，可分为头部动作信息、手部动作信息；II类：按照相机采集帧数分类，可分为静态动作信息、动态动作信息。有益效果：本发明结合人脸识别以及意图识别实现对智能锁具的非接触式操作以及用户自主选择的操作方式，做到了用户对智能锁的自主化快捷操作。

Description

一种人脸识别与意图识别的锁具控制系统
技术领域
本发明涉及生物识别技术领域，具体来说，涉及一种人脸识别与意图识别的锁具控制系统。
背景技术
目前随着成像技术以及深度学习技术的不断发展，利用人脸识别的智能锁具逐步走向市场。在现有的人脸识别智能锁具中，系统常采用的方式为：人脸识别后锁具直接进行开门操作，锁具的其他操作通过触摸或按键来实现，不仅不方便，还存在一定的安全隐患。
针对相关技术中的问题，目前尚未提出有效的解决方案。
发明内容
本发明的目的在于提供一种人脸识别与意图识别的锁具控制系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种人脸识别与意图识别的锁具控制系统，包括人脸识别系统、意图识别系统以及控制系统，上述三部分系统构成了以下控制步骤：
T1: 用户人脸识别；
T2: 判断是否为注册用户；
T3: 采集用户动作；
T4: 解析动作；
T5: 锁具完成控制操作；
T6: 提示非注册用户。
进一步的，用户动作的信息按不同的类别进行分类：
I类：按照不同的人体部位分类，可分为头部动作信息、手部动作信息；II类：按照相机采集帧数分类，可分为静态动作信息、动态动作信息。
进一步的，按照上述分类方式，并考虑实际操作的可行性，本发明定义如下动作：点头、摇头、眨眼、张闭嘴、全手动、单指动、双指动、三指动以及数字比划。
进一步的，考虑到脸部动作属于细节动作，在识别过程中会有误识的情况，因此针对上述动作，本发明设计了如下识别流程，包括：
T31: 用户手识别；
T32: 判断画面中是否有手；
T33: 手部动作采集；
T34: 解析手部动作；
T35: 系统延时；
T36: 采集脸部动作；
T37: 解析脸部动作；
T38: 锁具完成控制操作。
进一步的，结合对动作的定义以及对智能锁现有的操作流程，本发明定义一种动作意图与锁具操作的之间的相互关系：挥手——打开门；三指动——进入设置菜单；单指动——确认并返回；二指动——取消并返回；手指比划数字——选择对应序号菜单；眨眼——进入特殊开门方式；摇头——退出系统。
进一步的，在锁具完成控制操作的工作过程中，相机处于实时采集状态。
与现有技术相比，本发明具有以下有益效果：人脸识别作为一种非接触式的生物识别方式，与现有的智能锁具在进行锁端操作时需要触摸、按键的控制方式相违背，同时人脸识别通过后就开锁的控制方式在实际使用过程中与特定使用场景相违背，如用户在被胁迫下且人脸比对通过后，现有智能锁具仅进行开锁动作，而增加用户意图识别后用户可选择进行开锁并在后台报警的动作，除此之外，在意图识别系统中，用户可定义不同的动作进行不同的锁具控制与操作；本发明结合人脸识别以及意图识别实现对智能锁具的非接触式操作以及用户自主选择的操作方式，做到了用户对智能锁的自主化快捷操作。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种人脸识别与意图识别的锁具控制系统的流程示意图；
图2是根据本发明实施例的动作名称以及分类示意图；
图3是根据本发明实施例的用户动作识别流程示意图。
具体实施方式
下面，结合附图以及具体实施方式，对发明做出进一步的描述：
请参阅图1-3，根据本发明实施例的一种人脸识别与意图识别的锁具控制系统，包括人脸识别系统、意图识别系统以及控制系统，上述三部分系统构成了以下控制步骤：
T1: 用户人脸识别；
T2: 判断是否为注册用户；
T3: 采集用户动作；
T4: 解析动作；
T5: 锁具完成控制操作；
T6: 提示非注册用户。
本发面在常用的人脸识别系统中，利用原有识别相机进行意图识别，使得用户对锁具的操作更为多样、快捷。
通过本发明的上述方案，用户动作的信息按不同的类别进行分类：
I类：按照不同的人体部位分类，可分为头部动作信息、手部动作信息；
II类：按照相机采集帧数分类，可分为静态动作信息、动态动作信息。
通过本发明的上述方案，按照上述分类方式，并考虑实际操作的可行性，本发明定义如下动作：点头、摇头、眨眼、张闭嘴、全手动、单指动、双指动、三指动以及数字比划。
通过本发明的上述方案，考虑到脸部动作属于细节动作，在识别过程中会有误识的情况，因此针对上述动作，本发明设计了如下识别流程，包括：
T31: 用户手识别；
T32: 判断画面中是否有手；
T33: 手部动作采集；
T34: 解析手部动作；
T35: 系统延时；
T36: 采集脸部动作；
T37: 解析脸部动作；
T38: 锁具完成控制操作。
本发明在脸部动作识别之前加入系统延时操作，来分隔人脸识别的信息与脸部动作识别的信息，是脸部动作识别更精确。
通过本发明的上述方案，结合对动作的定义以及对智能锁现有的操作流程，本发明定义一种动作意图与锁具操作的之间的相互关系：挥手——打开门；三指动——进入设置菜单；单指动——确认并返回；二指动——取消并返回；手指比划数字——选择对应序号菜单；眨眼——进入特殊开门方式；摇头——退出系统。
通过本发明的上述方案，在锁具完成控制操作的工作过程中，相机处于实时采集状态。
通过这些手部与头部的操作可实现智能锁具的全部基本操作。
在上述实施例中，本发明已有人脸识别系统相关设备的基础上，采用人脸识别相机采集可视范围内用户的动作，并对不同的动作进行识别、解析，通过解析后的指令来完成对锁具的控制操作。同时智能锁控制系统的其他计算、控制设备均与现有人脸识别智能锁相同。
最后应说明的是：以上所述仅为本发明的优选实施例而已，并不用于限定本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种人脸识别与意图识别的锁具控制系统，其特征在于，包括人脸识别系统、意图识别系统以及控制系统，上述三部分系统构成了以下控制步骤：
T1: 用户人脸识别；
T2: 判断是否为注册用户；
T3: 采集用户动作；
T4: 解析动作；
T5: 锁具完成控制操作；
T6: 提示非注册用户。
2.根据权利要求1所述的一种人脸识别与意图识别的锁具控制系统，其特征在于，用户动作的信息按不同的类别进行分类：I类：按照不同的人体部位分类，可分为头部动作信息、手部动作信息；II类：按照相机采集帧数分类，可分为静态动作信息、动态动作信息。
3.根据权利要求2所述的一种人脸识别与意图识别的锁具控制系统，其特征在于，按照上述分类方式，并考虑实际操作的可行性，本发明定义如下动作：点头、摇头、眨眼、张闭嘴、全手动、单指动、双指动、三指动以及数字比划。
4.根据权利要求1所述的一种人脸识别与意图识别的锁具控制系统，其特征在于，考虑到脸部动作属于细节动作，在识别过程中会有误识的情况，因此针对上述动作，本发明设计了如下识别流程，包括：
T31: 用户手识别；
T32: 判断画面中是否有手；
T33: 手部动作采集；
T34: 解析手部动作；
T35: 系统延时；
T36: 采集脸部动作；
T37: 解析脸部动作；
T38: 锁具完成控制操作。
5.根据权利要求1所述的一种人脸识别与意图识别的锁具控制系统，其特征在于，结合对动作的定义以及对智能锁现有的操作流程，本发明定义一种动作意图与锁具操作的之间的相互关系：挥手——打开门；三指动——进入设置菜单；单指动——确认并返回；二指动——取消并返回；手指比划数字——选择对应序号菜单；眨眼——进入特殊开门方式；摇头——退出系统。
6.根据权利要求1所述的一种人脸识别与意图识别的锁具控制系统，其特征在于，在锁具完成控制操作的工作过程中，相机处于实时采集状态。
CN201911131662.1A 2019-11-19 2019-11-19 一种人脸识别与意图识别的锁具控制系统 Pending CN110827454A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911131662.1A CN110827454A (zh) 2019-11-19 2019-11-19 一种人脸识别与意图识别的锁具控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911131662.1A CN110827454A (zh) 2019-11-19 2019-11-19 一种人脸识别与意图识别的锁具控制系统

Publications (1)

Publication Number Publication Date
CN110827454A true CN110827454A (zh) 2020-02-21

Family

ID=69556462

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911131662.1A Pending CN110827454A (zh) 2019-11-19 2019-11-19 一种人脸识别与意图识别的锁具控制系统

Country Status (1)

Country Link
CN (1) CN110827454A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111554007A (zh) * 2020-04-20 2020-08-18 陈元勇 一种智能人员识别控制柜

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1977293A (zh) * 2004-06-29 2007-06-06 皇家飞利浦电子股份有限公司 个人手势签名
CN102393808A (zh) * 2009-06-16 2012-03-28 英特尔公司 手持无线设备中的智能图形界面
CN102999156A (zh) * 2011-09-14 2013-03-27 杭州新锐信息技术有限公司 一种动作遥控装置、产品及方法
US20140267739A1 (en) * 2013-03-18 2014-09-18 Fadi Ibsies Automated Door
CN105139470A (zh) * 2015-09-30 2015-12-09 杭州海康威视数字技术股份有限公司 基于人脸识别的考勤方法、装置及系统
CN105700674A (zh) * 2014-12-10 2016-06-22 现代自动车株式会社 手势识别设备、具有其的车辆以及用于控制车辆的方法
CN107424266A (zh) * 2017-07-25 2017-12-01 上海青橙实业有限公司 人脸识别解锁的方法和装置
CN109086589A (zh) * 2018-08-02 2018-12-25 东北大学 一种结合手势识别的智能终端人脸解锁方法
CN110166726A (zh) * 2017-11-18 2019-08-23 单正建 一种自识别用户的视频会议终端及系统
CN110400398A (zh) * 2018-04-25 2019-11-01 陈聪智 门禁交互设备和门禁交互系统
CN110443913A (zh) * 2018-05-02 2019-11-12 深圳吉祥星科技股份有限公司 一种门禁控制方法、装置及终端设备

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1977293A (zh) * 2004-06-29 2007-06-06 皇家飞利浦电子股份有限公司 个人手势签名
CN102393808A (zh) * 2009-06-16 2012-03-28 英特尔公司 手持无线设备中的智能图形界面
CN102523381A (zh) * 2009-06-16 2012-06-27 英特尔公司 对无线设备的功能的受控访问
CN102999156A (zh) * 2011-09-14 2013-03-27 杭州新锐信息技术有限公司 一种动作遥控装置、产品及方法
US20140267739A1 (en) * 2013-03-18 2014-09-18 Fadi Ibsies Automated Door
CN105700674A (zh) * 2014-12-10 2016-06-22 现代自动车株式会社 手势识别设备、具有其的车辆以及用于控制车辆的方法
CN105139470A (zh) * 2015-09-30 2015-12-09 杭州海康威视数字技术股份有限公司 基于人脸识别的考勤方法、装置及系统
CN107424266A (zh) * 2017-07-25 2017-12-01 上海青橙实业有限公司 人脸识别解锁的方法和装置
CN110166726A (zh) * 2017-11-18 2019-08-23 单正建 一种自识别用户的视频会议终端及系统
CN110400398A (zh) * 2018-04-25 2019-11-01 陈聪智 门禁交互设备和门禁交互系统
CN110443913A (zh) * 2018-05-02 2019-11-12 深圳吉祥星科技股份有限公司 一种门禁控制方法、装置及终端设备
CN109086589A (zh) * 2018-08-02 2018-12-25 东北大学 一种结合手势识别的智能终端人脸解锁方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111554007A (zh) * 2020-04-20 2020-08-18 陈元勇 一种智能人员识别控制柜
CN111554007B (zh) * 2020-04-20 2022-02-01 陈元勇 一种智能人员识别控制柜

Similar Documents

Publication Publication Date Title
CN105700363B (zh) 一种智能家居设备语音控制装置的唤醒方法及系统
WO2017143948A1 (zh) 一种唤醒智能机器人的方法及智能机器人
Liu et al. Hand gesture recognition using depth data
Gupta et al. A continuous hand gestures recognition technique for human-machine interaction using accelerometer and gyroscope sensors
Chen et al. Repetitive assembly action recognition based on object detection and pose estimation
Xia et al. Vision-based hand gesture recognition for human-robot collaboration: A survey
CN101825947A (zh) 智能控制移动终端的方法、装置及移动终端
CN102402289B (zh) 一种基于机器视觉的手势鼠标识别方法
Agrawal et al. A survey on manual and non-manual sign language recognition for isolated and continuous sign
CN108406848A (zh) 一种基于场景分析的智能机器人及其运动控制方法
CN108509049A (zh) 录入手势功能的方法及系统
CN104298354A (zh) 一种人机交互的手势识别方法
CN103135748A (zh) 人机交互操作指令的触发控制方法和系统
Athavale et al. Dynamic hand gesture recognition for human computer interaction; a comparative study
CN110827454A (zh) 一种人脸识别与意图识别的锁具控制系统
Burande et al. Notice of Violation of IEEE Publication Principles: Advanced recognition techniques for human computer interaction
Geetha et al. Dynamic gesture recognition of Indian sign language considering local motion of hand using spatial location of Key Maximum Curvature Points
Zhu et al. Toward real-time human-computer interaction with continuous dynamic hand gestures
CN108991697A (zh) 一种基于步态识别的自动跟随行李箱方法
CN108363390A (zh) 手自一体行李箱跟随系统、方法与把手及行李箱
Dhamanskar et al. Human computer interaction using hand gestures and voice
Zhu et al. Movement tracking in real-time hand gesture recognition
Rokade et al. Paint using hand gesture
Cui et al. Research on gesture recognition method based on computer vision technology
Parashar Representation and interpretation of manual and non-manual information for automated American Sign Language recognition

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200221