CN111768543A - 基于人脸识别的通行管理方法、设备、存储介质及装置 - Google Patents
基于人脸识别的通行管理方法、设备、存储介质及装置 Download PDFInfo
- Publication number
- CN111768543A CN111768543A CN202010606818.3A CN202010606818A CN111768543A CN 111768543 A CN111768543 A CN 111768543A CN 202010606818 A CN202010606818 A CN 202010606818A CN 111768543 A CN111768543 A CN 111768543A
- Authority
- CN
- China
- Prior art keywords
- user
- image
- face
- preset
- local
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 116
- 238000000034 method Methods 0.000 claims abstract description 37
- 230000001815 facial effect Effects 0.000 claims abstract description 20
- 210000003128 head Anatomy 0.000 claims description 95
- 210000004709 eyebrow Anatomy 0.000 claims description 24
- 238000001514 detection method Methods 0.000 claims description 13
- 238000013507 mapping Methods 0.000 claims description 11
- 238000012937 correction Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 8
- 210000001061 forehead Anatomy 0.000 description 36
- 230000004888 barrier function Effects 0.000 description 14
- 206010027145 Melanocytic naevus Diseases 0.000 description 12
- 208000007256 Nevus Diseases 0.000 description 12
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 9
- 208000035473 Communicable disease Diseases 0.000 description 8
- 230000000903 blocking effect Effects 0.000 description 8
- 230000006806 disease prevention Effects 0.000 description 8
- 208000015181 infectious disease Diseases 0.000 description 8
- 230000037303 wrinkles Effects 0.000 description 8
- 210000004209 hair Anatomy 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 206010004950 Birth mark Diseases 0.000 description 4
- 230000007613 environmental effect Effects 0.000 description 4
- 210000000744 eyelid Anatomy 0.000 description 4
- 231100000241 scar Toxicity 0.000 description 4
- 238000010408 sweeping Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 208000035285 Allergic Seasonal Rhinitis Diseases 0.000 description 2
- 208000032544 Cicatrix Diseases 0.000 description 2
- 206010048908 Seasonal allergy Diseases 0.000 description 2
- 230000000172 allergic effect Effects 0.000 description 2
- 208000010668 atopic eczema Diseases 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 239000003973 paint Substances 0.000 description 2
- 230000001681 protective effect Effects 0.000 description 2
- 230000005180 public health Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000037387 scars Effects 0.000 description 2
- 230000004584 weight gain Effects 0.000 description 2
- 235000019786 weight gain Nutrition 0.000 description 2
- 230000004580 weight loss Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Collating Specific Patterns (AREA)
Abstract
本发明公开了一种基于人脸识别的通行管理方法、设备、存储介质及装置，该方法包括：获取用户头部图像，并对所述用户头部图像进行遮挡物检测；在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；将所述预设局部图像与所述局部面部图像进行匹配；根据匹配结果确认所述用户是否具备通行权限。使得用户在特殊时期无法摘除面部遮挡物时，也能通过用户局部面部对用户进行准确识别，使得通行管理更加人性化、更灵活、更准确。
Description
技术领域
本发明涉及数据识别技术领域，尤其涉及一种基于人脸识别的通行管理方法、设备、存储介质及装置。
背景技术
目前，社区、学校宿舍、办公场所、火车站进站口等通行管理通常是通过人脸识别进行管理，人脸识别通常需要识别用户整脸，为保证人脸识别的准确性通常要求用户禁止佩戴遮挡脸部的物品如：墨镜、遮阳帽、口罩等。但特殊时期，用户处于环境原因或者个人原因，不方便摘除遮挡物，此时无法进行正常人脸识别，需要一种识别局部人脸也能准确识别用户身份的通行管理方法。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种基于人脸识别的通行管理方法、设备、存储介质及装置，旨在解决通过用户局部面部准确识别用户身份的技术问题。
为实现上述目的，本发明提供一种基于人脸识别的通行管理方法，所述基于人脸识别的通行管理方法包括：
获取用户头部图像，并对所述用户头部图像进行遮挡物检测；
在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；
获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
将所述预设局部图像与所述局部面部图像进行匹配；
根据匹配结果确认所述用户是否具备通行权限。
优选地，所述将所述预设局部图像与所述局部面部图像进行匹配的步骤，具体包括：
判断所述遮挡物未覆盖区域对应的预设面部区域；
在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，获取所述预设局部图像与所述局部面部图像的下边缘轮廓及口鼻特征，并将所述预设局部图像的所述下边缘轮廓与所述口鼻特征与所述局部面部图像的所述下边缘轮廓及所述口鼻特征进行匹配。
优选地，所述判断所述遮挡物未覆盖区域对应的预设面部区域的步骤之后，还包括：
在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时，获取所述预设局部图像与所述局部面部图像的上边缘轮廓及眉眼特征，并将所述预设局部图像的所述上边缘轮廓及所述眉眼特征与所述局部面部图像的所述上边缘轮廓及所述眉眼特征进行匹配。
优选地，所述获取用户头部图像，并对所述用户头部图像进行遮挡物检测的步骤之后，还包括：
在所述用户头部图像存在遮挡物时，获取遮挡物图像；
所述根据匹配结果确认所述用户是否具备通行权限的步骤之后，还包括：
存储所述遮挡物图像，并将所述遮挡物图像与所述用户的用户信息建立映射关系。
优选地，所述获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像的步骤，具体包括：
获取用户出示的身份证明中的预设用户头像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
和/或，
获取用户管理平台中存储的预设用户图像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
优选地，所述在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像的步骤，具体包括：
在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的待定面部图像；
对所述待定面部图像进行图像增强及边缘修正以获取局部面部图像。
优选地，所述在根据匹配结果确认所述用户是否具备通行权限的步骤，具体包括：
在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，确认所述用户具备通行权限；
在匹配结果为所述预设局部图像与所述局部面部图像的匹配度小于第一匹配度时，确认所述用户不具备通行权限；
在用户出示的身份证明中的预设用户头像与用户管理平台中存储的预设用户图像的匹配度小于第二匹配度时，确认所述用户不具备通行权限。
此外，为实现上述目的，本发明还提出一种基于人脸识别的通行管理设备，所述基于人脸识别的通行管理设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于人脸识别的通行管理程序，所述基于人脸识别的通行管理程序配置为实现如上文所述的基于人脸识别的通行管理方法的步骤。
此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有基于人脸识别的通行管理程序，所述基于人脸识别的通行管理程序被处理器执行时实现如上文所述的基于人脸识别的通行管理方法的步骤。
此外，为实现上述目的，本发明还提出一种基于人脸识别的通行管理装置，所述基于人脸识别的通行管理装置包括：检测模块，用于获取用户头部图像，并对所述用户头部图像进行遮挡物检测；
获取模块，用于在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；
提取模块，用于获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
匹配模块，用于将所述预设局部图像与所述局部面部图像进行匹配；
管理模块，用于根据匹配结果确认所述用户是否具备通行权限。
本发明中，获取用户头部图像，并对所述用户头部图像进行遮挡物检测；在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；将所述预设局部图像与所述局部面部图像进行匹配；根据匹配结果确认所述用户是否具备通行权限。使得用户在特殊时期无法摘除面部遮挡物时，也能通过用户局部面部对用户进行准确识别，使得通行管理更加人性化，对局部面部图像进行了图像增强，降低了外界环境对人脸识别的影响。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的基于人脸识别的通行管理设备的结构示意图；
图2为本发明基于人脸识别的通行管理方法第一实施例的流程示意图；
图3为本发明基于人脸识别的通行管理方法第二实施例的流程示意图；
图4为本发明基于人脸识别的通行管理方法第三实施例的流程示意图；
图5为本发明基于人脸识别的通行管理装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明实施例方案涉及的硬件运行环境的基于人脸识别的通行管理设备结构示意图。
如图1所示，该基于人脸识别的通行管理设备可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)，可选用户接口1003还可以包括标准的有线接口、无线接口，对于用户接口1003的有线接口在本发明中可为USB接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity，WI-FI)接口)。存储器1005可以是高速的随机存取存储器(Random Access Memory，RAM)存储器，也可以是稳定的存储器(Non-volatileMemory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的结构并不构成对基于人脸识别的通行管理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，认定为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及基于人脸识别的通行管理程序。
在图1所示的基于人脸识别的通行管理设备中，网络接口1004主要用于连接后台服务器，与所述后台服务器进行数据通信；用户接口1003主要用于连接用户设备；所述基于人脸识别的通行管理设备通过处理器1001调用存储器1005中存储的基于人脸识别的通行管理程序，并执行本发明实施例提供的基于人脸识别的通行管理方法。
基于上述硬件结构，提出本发明基于人脸识别的通行管理方法的实施例。
参照图2，图2为本发明基于人脸识别的通行管理方法第一实施例的流程示意图，提出本发明基于人脸识别的通行管理方法第一实施例。
在第一实施例中，所述基于人脸识别的通行管理方法包括以下步骤：
步骤S10：获取用户头部图像，并对所述用户头部图像进行遮挡物检测。
需要说明的是，获取用户头部图像的设备设置在社区、学校宿舍、办公场所、火车站等需要进行出入人群管理的场所出入口，在特殊时期(传染病防控时期、春季花粉症流行时期等)，用户出于个人(面部受伤被包扎、眼部手术后不能见光等情况)或公共卫生原因(传染病防控时期出行必须佩戴口罩，甚至佩戴防护镜等)不便于将面部遮挡物摘除，为保证用户的方便或公共卫生的安全，对用户露出的局部面部进行获取，并对所述局部面部的图像进行图像增强处理，突出该局部面部图像的特征信息，获取管理平台中所有面部图像对应所述局部面部图像的局部区域，将局部面部图像与各局部区域匹配，以判断所述用户在管理平台中是否存在通行权限。
应当理解的是，用户头部图像中如果不存在遮挡物，则使用识别用户整体面部进行通行管理的方式进行人脸识别，本方法并不影响常用的识别用户整体面部的通行管理方法的实施，二者可以同时实行。
需要说明的是，所述步骤S10之前还包括对用户对象进行生命特征检测，以判断用户是否是需要进行通行管理的对象，以防止将广告牌、海报中的人像识别为用户头像。若用户面部遮挡物遮挡比例过大，无法识别用户面部的任何露出区域，提醒用户摘除不必要的遮挡物，限制用户通行且不对用户进行识别，直到用户摘除不必要的遮挡物为止。例如：在夏季且为传染病防控时期，用户出行不仅佩戴了必须的口罩，出于遮阳考虑还佩戴了遮阳帽，导致用户只有极少的面部区域外露，提醒用户摘除人脸识别中不必要的遮挡物遮阳帽，且建议用户不要用头发遮挡额头部分，以防露出的面部区域过少，无法进行人脸识别。若用户不接受提醒，则对用户限制通行直到用户接受提醒进行摘除为止。
易于理解的是，本发明实施例为加强通行管理的可靠性，可在管理平台中建立用户的语音库，存储用户语音特征，通过语音识别辅助人脸识别进行通行管理。
步骤S20：在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像。
步骤S20具体包括：在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的待定面部图像；对所述待定面部图像进行图像增强及边缘修正以获取局部面部图像。
需要说明的是，在所述用户头部图像存在遮挡物时，根据管理平台中存储的所有用户头像获取到用户肤色特征信息，包含常见肤色、胎记颜色及形态、伤疤颜色及形态、过敏区域颜色及形态等，选取用户头部图像中符合所述用户肤色特征信息的区域，识别为未被遮挡物覆盖的待定面部区域，同时检测该区域与遮挡物区域的边界，将该区域完整获取，得到待定面部图像。
应当理解的是，在对用户面部图像进行获取的过程中，若检测到当前用户面部存在非肤色区域，但该区域表面平滑且该区域与周围皮肤部分并没有凸起连接，可判断为用户面部存在化妆区域，若该区域影响人脸识别的判断，则提醒用户进行卸妆。例如：用户面部存在使用油彩涂覆的花纹，经检测该花纹对应的区域颜色为非肤色，该区域面积过大影响人脸识别的判断，提醒用户进行卸妆，限制用户通行且不对用户进行识别，直到用户卸妆为止。
进一步地，将待定面部图像进行图像增强及边缘修正，将所述待定面部图像由RGB(Red Green Blue，红绿蓝)模式图像转换为HSV(Hue Saturation Value，色调饱和度明度)模式图像，对所述待定面部图像的饱和度进行线性拉伸，根据高斯运算及卷积运算获取所述待定面部图像的明度的补偿参数，并将所述待定面部图像的明度及所述补偿参数分别进行对数运算并相减，以获取图像增强后的所述待定面部图像的明度。将处理后的所述待定面部图像由HSV模式图像转换为RGB模式图像，进行色彩恢复。
应当理解的是，为保证用户存在生命特征，在头部图像获取时，获取了预设帧数的用户头部图像，将预设帧数的所述待定面部图像之间进行边缘检测并进行差分处理，修正得到待定面部图像的边缘，并对所述待定面部图像中间区域进行补正，以使所述待定面部图像为完整的区域图像。
易于理解的是，在图像增强过程中，对所述待定面部图像进行亮度、饱和度的修正，使得所述待定面部图像能更接近预设局部图像的亮度、饱和度，降低外界环境光线对用户面部图像采集的造成的影响。例如：所述出入口为社区的出入口，为露天环境，受阴雨天气、晚间照明度低等影响，识别到的用户面部图像的清晰度下降。对所述待定面部图像进行图像增强处理，降低了环境因素对该图像的影响。
需要说明的是，对用户面部的个人化特征信息进行图像增强，比如用户的伤疤、痣及胎记等难以复制的个人特征，对所述特征对应的头像进行清晰化处理，增加用户的特征信息量。
步骤S30：获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
步骤S30具体包括：获取用户出示的身份证明中的预设用户头像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
和/或，
获取用户管理平台中存储的预设用户图像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
应当理解的是，在不同的出入口，存在不同的通行管理方式，部分出入口需要用户出示相应的通行证件(通行证件上包含用户头部图像)同时进行“扫脸”；部分出入口所需用户出示的通行证件上仅包含用户信息而没有用户头部图像，需要用户出示证件同时进行“扫脸”；部分出入口无需用户进行证件出示，仅对用户进行“扫脸”。
需要说明的是，在出入口仅对用户进行脸部识别时，获取用户管理平台中存储的所有预设用户图像，所述用户管理平台中录入的预设用户图像与用户信息存在映射关系，且所述预设用户图像对应的用户均为具备通行权限的用户。所述用户管理平台为服务器或上位机。提取所述遮挡物未覆盖区域对应的所有所述预设用户图像中的预设局部图像，在该种情况下，提取了多个所述预设局部图像。在出入口既需要用户出示通行证件(通行证件上没有用户图像)，又需要用户进行面部识别时，获取用户通行证件对应的用户信息，检测所述用户信息在所述用户管理平台中是否存在，在所述用户信息存在于所述用户管理平台中时，提取与所述用户信息存在映射关系的用户图像，该种情况下，只需要提取一个预设用户图像。提取所述预设用户图像中所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
应当理解的是，在出入口既需要用户出示通行证件(通行证件上存在用户图像)，又需要用户进行面部识别时，获取用户通行证件对应的用户信息，检测所述用户信息在所述用户管理平台中是否存在，在所述用户信息存在于所述用户管理平台中时，提取与所述用户信息存在映射关系的用户图像及所述通行证件上的用户图像，检测两者是否为同一用户图像，在两者为同一用户图像时进行下一步的提取。该种情况下，只需要提取一个预设用户图像。提取所述预设用户图像中所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
步骤S40：将所述预设局部图像与所述局部面部图像进行匹配。
易于理解的是，获取所述预设局部图像中用户面部的重点特征，将所述重点特征与所述局部面部图像中提取到的对应的重点特征进行匹配，例如：用户露出的面部为额头及脸部，用户使用口罩遮住了下半面部，用户眼角存在泪痣，则将预设局部图像中提取到的泪痣的位置信息与所述局部面部图像中的泪痣的位置信息进行匹配；将预设局部图像中提取到的用户眼部信息(所述眼部信息包括用户眼间距、眼睛位置信息、眼皮特征、眼角特征等)与所述局部面部图像中的用户眼部信息进行匹配；将预设局部图像中提取到的用户眉部信息(用户眉毛的稀疏程度、长度、位置信息、形状等)与所述局部面部图像中的眉部信息进行匹配；预设局部图像中提取到的用户额头信息(用户发际线形状、用户额头高度、用户额头宽度、用户额头皱纹等)与所述局部面部图像中的用户额头信息进行匹配。
需要说明的是，部分用户存在面部化妆，在用户化妆程度未至影响人脸识别精确度的情况下，对获取到的用户头部图像进行滤镜卸妆，以加强所述预设局部图像与所述局部面部图像的匹配程度。若用户存在面部化妆的程度影响到人脸识别的精确度，提醒用户卸妆。
步骤S50：根据匹配结果确认所述用户是否具备通行权限。
应当理解的是，匹配结果对应的匹配程度达到预设匹配程度时，判断所述用户具备通行权限，对所述用户进行放行，在所述匹配结果对应的匹配程度低于预设匹配程度时，判断所述用户不具备通行权限，必要时可建议用户摘除部分遮挡物，以使用户可用于进行匹配的区域增加，加强匹配程度。
在第一实施例中，获取用户头部图像，并对所述用户头部图像进行遮挡物检测；在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；将所述预设局部图像与所述局部面部图像进行匹配；根据匹配结果确认所述用户是否具备通行权限。使得在用户面部不便于摘除遮挡物时，也能准确对用户进行人脸识别，使得通行管理更加人性化，对局部面部图像进行了图像增强，降低了外界环境对人脸识别的影响，同时辅助语音识别功能，使得通行管理更加可靠。
参照图3，图3为本发明基于人脸识别的通行管理方法第二实施例的流程示意图，基于上述图2所示的第一实施例，提出本发明基于人脸识别的通行管理方法的第二实施例。
在第二实施例中，所述步骤S40，包括：
步骤S41：判断所述遮挡物未覆盖区域对应的预设面部区域。
步骤S42：在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，获取所述预设局部图像与所述局部面部图像的下边缘轮廓及口鼻特征，并将所述预设局部图像的所述下边缘轮廓与所述口鼻特征与所述局部面部图像的所述下边缘轮廓及所述口鼻特征进行匹配。
需要说明的是，所述第一面部区域为除眼部及眼部周围的面部区域，在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，例如：用户眼部进行手术，不便于见光，因而用户佩戴墨镜且墨镜不便于摘除；用户额头受伤，将额头及眼部周围区域进行包扎且包扎不便于摘除。对所述用户的下巴特征(下巴长度、宽度、皱纹及形状)进行提取，对用户颈部特征(颈部皱纹、喉结等)进行提取，对用户口鼻特征(嘴部颜色、形状、鼻部颜色及形状等)进行提取，将所述预设局部图像中获取的各特征信息与所述局部面部图像的各特征信息进行匹配。
步骤S43：在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时，获取所述预设局部图像与所述局部面部图像的上边缘轮廓及眉眼特征，并将所述预设局部图像的所述上边缘轮廓及所述眉眼特征与所述局部面部图像的所述上边缘轮廓及所述眉眼特征进行匹配。
需要说明的是，所述第二面部区域为除鼻部、嘴部及其周围区域以外的面部区域，在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时。例如：当前为传染病防控时期或春季花粉症流行时期，用户佩戴口罩且不便于摘除口罩。对用户眼部及眼部周围区域、额头等区域进行提取，若用户当前使用头发遮挡额头，则建议用户将头发束起，以增加面部露出区域，增加可获取的特征信息。
例如：用户露出的面部为额头及脸部，用户使用口罩遮住了下半面部，用户眼角存在泪痣，则将预设局部图像中提取到的泪痣的位置信息与所述局部面部图像中的泪痣的位置信息进行匹配；将预设局部图像中提取到的用户眼部信息(所述眼部信息包括用户眼间距、眼睛位置信息、眼皮特征、眼角特征等)与所述局部面部图像中的用户眼部信息进行匹配；将预设局部图像中提取到的用户眉部信息(用户眉毛的稀疏程度、长度、位置信息、形状等)与所述局部面部图像中的眉部信息进行匹配；预设局部图像中提取到的用户额头信息(用户发际线形状、用户额头高度、用户额头宽度、用户额头皱纹等)与所述局部面部图像中的用户额头信息进行匹配。
在所述遮挡物未覆盖区域对应的所述预设面部区域为第三面部区域时，所述第三面部区域为除耳部以外的面部区域。
应当理解的是，属于该区域时，用户仅遮挡耳部，露出的局部面部区域较大，可以直接使用普通方式进行人脸识别。
在所述遮挡物未覆盖区域对应的所述预设面部区域为第四面部区域时，所述第四面部区域为除鼻部以外的面部区域。
需要说明的是，例如用户鼻部受伤包扎且不方便摘除包扎，用户嘴部、下半、眼部额头等区域露出，可对这些区域进行局部区域提取，并将上述区域中的用户特征信息与预设用户图像中对应区域的用户特征信息进行比对。所述第四面部区域与上述面部区域具有重叠部分，此处不再一一赘述。本实施例中各个面部区域的划分仅为解释说明，具体实施中可以划分更多的面部区域，以全面覆盖用户的各个特征信息。
在第二实施例中，对用户的面部区域进行了划分，对用户的局部面部图像进行特征获取，基于第一实施例中的图像增强，使得局部面部图像中的特征信息能与预设局部图像中的特征信息进行全面的对比，以进行人脸识别。
参照图4，图4为本发明基于人脸识别的通行管理方法第三实施例的流程示意图，基于上述图2所示的第一实施例，提出本发明基于人脸识别的通行管理方法的第三实施例。
在第三实施例中，
所述步骤S50，具体包括：
步骤S51：在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，确认所述用户具备通行权限。
应当理解的是，由于图像获取的清晰度、环境影响因素及用户自身因素(如用户减肥、增重对外貌的影响等)，当前获得的用户头部图像与预设用户图像存在部分差别，因此匹配度并不能完整地达到百分之百，所述第一匹配度允许用户的局部面部图像与预设局部图像存在较少的差异。例如：在具体实施中，可将所述第一匹配度设置为95％～99.9％，即用户头部图像与预设用户图像的相近程度在95％～99.9％。具体实施中，所述第一匹配度可根据实际管理需求进行调整。在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，判断所述用户具备通行权限，对所述用户进行放行。
步骤S52：在匹配结果为所述预设局部图像与所述局部面部图像的匹配度小于第一匹配度时，确认所述用户不具备通行权限。
易于理解的是，判断所述用户不具备通行权限，必要时可建议用户摘除部分遮挡物，以使用户可用于进行匹配的区域增加，加强匹配程度。
步骤S53：在用户出示的身份证明中的预设用户头像与用户管理平台中存储的预设用户图像的匹配度小于第二匹配度时，确认所述用户不具备通行权限。
需要说明的是，若用户出示的身份证明中包含了用户的头部图像，然而所述头部图像与用户管理平台中的预设用户头像并不相同，则用户存在使用虚假证件的可能性，或存在用户管理平台故障、用户管理平台中的用户信息未及时更新等情况，此时应暂停对用户的人脸识别，暂定用户不具备通行权限，并对管理人员进行报警，以排除故障或阻拦用户进入。
应当理解的是，所述第二匹配度在具体实施中可设置为99％～100％，由于身份证明中的预设用户头像与用户管理平台中存储的预设用户图像通常为一致，因此所述第二匹配度可设置得较大。具体实施中，所述第二匹配度可根据实际管理需求进行调整。
所述步骤S10之后，还包括：在所述用户头部图像存在遮挡物时，获取遮挡物图像；
所述步骤S50的步骤之后，还包括：
存储所述遮挡物图像，并将所述遮挡物图像与所述用户的用户信息建立映射关系。
需要说明的是，确认用户存在通行权限时，将用户对应的用户信息与遮挡物图像建立映射关系，若用户在下一次通行时仍佩戴相同、相近似的遮挡物，可通过所述遮挡物图像增加对所述用户识别过程中的信息量。
具体实施中，例如：在用户佩戴遮挡物进行通行时，对用户进行遮挡物检测，若用户管理平台中所述用户对应的用户信息中存在遮挡物图像的信息，则将所述遮挡物图像也作为用户的特征信息，将遮挡物图像与管理平台中的遮挡物图像进行匹配，以获取匹配程度。对所述遮挡物图像的匹配程度乘以一定的权值与局部面部图像的匹配程度相加，以获取完整的匹配程度。易于理解的是，遮挡物存在非常多的可替代品，因此所述遮挡物图像对应的匹配程度所占比重较小。
在第三实施例中，对匹配结果进行了处理，在用户通行证件图像与用户管理平台中图像不符时，进行报错，并对用户进行通行限制；对遮挡物图像进行存储，增加用户的特征信息量，增强识别的精确度。
此外，本发明实施例还提出一种存储介质，所述存储介质上存储有基于人脸识别的通行管理程序，所述基于人脸识别的通行管理程序被处理器执行时实现如上文所述的基于人脸识别的通行管理方法的步骤。
此外，参照图5，本发明实施例还提出一种基于人脸识别的通行管理装置，所述基于人脸识别的通行管理装置包括：检测模块10、获取模块20、提取模块30、匹配模块40及管理模块50。
所述检测模块10，用于获取用户头部图像，并对所述用户头部图像进行遮挡物检测。
需要说明的是，获取用户头部图像的设备设置在社区、学校宿舍、办公场所、火车站等需要进行出入人群管理的场所出入口，在特殊时期(传染病防控时期、春季花粉症流行时期等)，用户出于个人(面部受伤被包扎、眼部手术后不能见光等情况)或公共卫生原因(传染病防控时期出行必须佩戴口罩，甚至佩戴防护镜等)不便于将面部遮挡物摘除，为保证用户的方便或公共卫生的安全，对用户露出的局部面部进行获取，并对所述局部面部的图像进行图像增强处理，突出该局部面部图像的特征信息，获取管理平台中所有面部图像对应所述局部面部图像的局部区域，将局部面部图像与各局部区域匹配，以判断所述用户在管理平台中是否存在通行权限。
应当理解的是，用户头部图像中如果不存在遮挡物，则使用识别用户整体面部进行通行管理的方式进行人脸识别，本方法并不影响常用的识别用户整体面部的通行管理方法的实施，二者可以同时实行。
需要说明的是，所述检测模块10，还用于对用户对象进行生命特征检测，以判断用户是否是需要进行通行管理的对象，以防止将广告牌、海报中的人像识别为用户头像。若用户面部遮挡物遮挡比例过大，无法识别用户面部的任何露出区域，提醒用户摘除不必要的遮挡物，限制用户通行且不对用户进行识别，直到用户摘除不必要的遮挡物为止。例如：在夏季且为传染病防控时期，用户出行不仅佩戴了必须的口罩，出于遮阳考虑还佩戴了遮阳帽，导致用户只有极少的面部区域外露，提醒用户摘除人脸识别中不必要的遮挡物遮阳帽，且建议用户不要用头发遮挡额头部分，以防露出的面部区域过少，无法进行人脸识别。若用户不接受提醒，则对用户限制通行直到用户接受提醒进行摘除为止。
易于理解的是，本发明实施例为加强通行管理的可靠性，可在管理平台中建立用户的语音库，存储用户语音特征，通过语音识别辅助人脸识别进行通行管理。
所述获取模块20，用于在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像。
所述获取模块20，具体用于在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的待定面部图像；对所述待定面部图像进行图像增强及边缘修正以获取局部面部图像。
需要说明的是，在所述用户头部图像存在遮挡物时，根据管理平台中存储的所有用户头像获取到用户肤色特征信息，包含常见肤色、胎记颜色及形态、伤疤颜色及形态、过敏区域颜色及形态等，选取用户头部图像中符合所述用户肤色特征信息的区域，识别为未被遮挡物覆盖的待定面部区域，同时检测该区域与遮挡物区域的边界，将该区域完整获取，得到待定面部图像。
应当理解的是，在对用户面部图像进行获取的过程中，若检测到当前用户面部存在非肤色区域，但该区域表面平滑且该区域与周围皮肤部分并没有凸起连接，可判断为用户面部存在化妆区域，若该区域影响人脸识别的判断，则提醒用户进行卸妆。例如：用户面部存在使用油彩涂覆的花纹，经检测该花纹对应的区域颜色为非肤色，该区域面积过大影响人脸识别的判断，提醒用户进行卸妆，限制用户通行且不对用户进行识别，直到用户卸妆为止。
进一步地，将待定面部图像进行图像增强及边缘修正，将所述待定面部图像由RGB(Red Green Blue，红绿蓝)模式图像转换为HSV(Hue Saturation Value，色调饱和度明度)模式图像，对所述待定面部图像的饱和度进行线性拉伸，根据高斯运算及卷积运算获取所述待定面部图像的明度的补偿参数，并将所述待定面部图像的明度及所述补偿参数分别进行对数运算并相减，以获取图像增强后的所述待定面部图像的明度。将处理后的所述待定面部图像由HSV模式图像转换为RGB模式图像，进行色彩恢复。
应当理解的是，为保证用户存在生命特征，在头部图像获取时，获取了预设帧数的用户头部图像，将预设帧数的所述待定面部图像之间进行边缘检测并进行差分处理，修正得到待定面部图像的边缘，并对所述待定面部图像中间区域进行补正，以使所述待定面部图像为完整的区域图像。
易于理解的是，在图像增强过程中，对所述待定面部图像进行亮度、饱和度的修正，使得所述待定面部图像能更接近预设局部图像的亮度、饱和度，降低外界环境光线对用户面部图像采集的造成的影响。例如：所述出入口为社区的出入口，为露天环境，受阴雨天气、晚间照明度低等影响，识别到的用户面部图像的清晰度下降。对所述待定面部图像进行图像增强处理，降低了环境因素对该图像的影响。
需要说明的是，对用户面部的个人化特征信息进行图像增强，比如用户的伤疤、痣及胎记等难以复制的个人特征，对所述特征对应的头像进行清晰化处理，增加用户的特征信息量。
所述提取模块30，用于获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
所述提取模块30，具体用于获取用户出示的身份证明中的预设用户头像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
和/或，
获取用户管理平台中存储的预设用户图像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
应当理解的是，在不同的出入口，存在不同的通行管理方式，部分出入口需要用户出示相应的通行证件(通行证件上包含用户头部图像)同时进行“扫脸”；部分出入口所需用户出示的通行证件上仅包含用户信息而没有用户头部图像，需要用户出示证件同时进行“扫脸”；部分出入口无需用户进行证件出示，仅对用户进行“扫脸”。
需要说明的是，在出入口仅对用户进行脸部识别时，获取用户管理平台中存储的所有预设用户图像，所述用户管理平台中录入的预设用户图像与用户信息存在映射关系，且所述预设用户图像对应的用户均为具备通行权限的用户。提取所述遮挡物未覆盖区域对应的所有所述预设用户图像中的预设局部图像，在该种情况下，提取了多个所述预设局部图像。在出入口既需要用户出示通行证件(通行证件上没有用户图像)，又需要用户进行面部识别时，获取用户通行证件对应的用户信息，检测所述用户信息在所述用户管理平台中是否存在，在所述用户信息存在于所述用户管理平台中时，提取与所述用户信息存在映射关系的用户图像，该种情况下，只需要提取一个预设用户图像。提取所述预设用户图像中所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
应当理解的是，在出入口既需要用户出示通行证件(通行证件上存在用户图像)，又需要用户进行面部识别时，获取用户通行证件对应的用户信息，检测所述用户信息在所述用户管理平台中是否存在，在所述用户信息存在于所述用户管理平台中时，提取与所述用户信息存在映射关系的用户图像及所述通行证件上的用户图像，检测两者是否为同一用户图像，在两者为同一用户图像时进行下一步的提取。该种情况下，只需要提取一个预设用户图像。提取所述预设用户图像中所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
所述匹配模块40，用于将所述预设局部图像与所述局部面部图像进行匹配。
易于理解的是，获取所述预设局部图像中用户面部的重点特征，将所述重点特征与所述局部面部图像中提取到的对应的重点特征进行匹配，例如：用户露出的面部为额头及脸部，用户使用口罩遮住了下半面部，用户眼角存在泪痣，则将预设局部图像中提取到的泪痣的位置信息与所述局部面部图像中的泪痣的位置信息进行匹配；将预设局部图像中提取到的用户眼部信息(所述眼部信息包括用户眼间距、眼睛位置信息、眼皮特征、眼角特征等)与所述局部面部图像中的用户眼部信息进行匹配；将预设局部图像中提取到的用户眉部信息(用户眉毛的稀疏程度、长度、位置信息、形状等)与所述局部面部图像中的眉部信息进行匹配；预设局部图像中提取到的用户额头信息(用户发际线形状、用户额头高度、用户额头宽度、用户额头皱纹等)与所述局部面部图像中的用户额头信息进行匹配。
需要说明的是，部分用户存在面部化妆，在用户化妆程度未至影响人脸识别精确度的情况下，对获取到的用户头部图像进行滤镜卸妆，以加强所述预设局部图像与所述局部面部图像的匹配程度。若用户存在面部化妆的程度影响到人脸识别的精确度，提醒用户卸妆。
所述管理模块50，用于根据匹配结果确认所述用户是否具备通行权限。
应当理解的是，匹配结果对应的匹配程度达到预设匹配程度时，判断所述用户具备通行权限，对所述用户进行放行，在所述匹配结果对应的匹配程度低于预设匹配程度时，判断所述用户不具备通行权限，必要时可建议用户摘除部分遮挡物，以使用户可用于进行匹配的区域增加，加强匹配程度。
在本实施例中，获取用户头部图像，并对所述用户头部图像进行遮挡物检测；在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；将所述预设局部图像与所述局部面部图像进行匹配；根据匹配结果确认所述用户是否具备通行权限。使得在用户面部不便于摘除遮挡物时，也能准确对用户进行人脸识别，使得通行管理更加人性化，对局部面部图像进行了图像增强，降低了外界环境对人脸识别的影响，同时辅助语音识别功能，使得通行管理更加可靠。
在一实施例中，所述匹配模块，还用于判断所述遮挡物未覆盖区域对应的预设面部区域；
在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，获取所述预设局部图像与所述局部面部图像的下边缘轮廓及口鼻特征，并将所述预设局部图像的所述下边缘轮廓与所述口鼻特征与所述局部面部图像的所述下边缘轮廓及所述口鼻特征进行匹配。
需要说明的是，所述第一面部区域为除眼部及眼部周围的面部区域，在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，例如：用户眼部进行手术，不便于见光，因而用户佩戴墨镜且墨镜不便于摘除；用户额头受伤，将额头及眼部周围区域进行包扎且包扎不便于摘除。对所述用户的下巴特征(下巴长度、宽度、皱纹及形状)进行提取，对用户颈部特征(颈部皱纹、喉结等)进行提取，对用户口鼻特征(嘴部颜色、形状、鼻部颜色及形状等)进行提取，将所述预设局部图像中获取的各特征信息与所述局部面部图像的各特征信息进行匹配。
在一实施例中，所述匹配模块，还用于在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时，获取所述预设局部图像与所述局部面部图像的上边缘轮廓及眉眼特征，并将所述预设局部图像的所述上边缘轮廓及所述眉眼特征与所述局部面部图像的所述上边缘轮廓及所述眉眼特征进行匹配。
需要说明的是，所述第二面部区域为除鼻部、嘴部及其周围区域以外的面部区域，在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时。例如：当前为传染病防控时期或春季花粉症流行时期，用户佩戴口罩且不便于摘除口罩。对用户眼部及眼部周围区域、额头等区域进行提取，若用户当前使用头发遮挡额头，则建议用户将头发束起，以增加面部露出区域，增加可获取的特征信息。
例如：用户露出的面部为额头及脸部，用户使用口罩遮住了下半面部，用户眼角存在泪痣，则将预设局部图像中提取到的泪痣的位置信息与所述局部面部图像中的泪痣的位置信息进行匹配；将预设局部图像中提取到的用户眼部信息(所述眼部信息包括用户眼间距、眼睛位置信息、眼皮特征、眼角特征等)与所述局部面部图像中的用户眼部信息进行匹配；将预设局部图像中提取到的用户眉部信息(用户眉毛的稀疏程度、长度、位置信息、形状等)与所述局部面部图像中的眉部信息进行匹配；预设局部图像中提取到的用户额头信息(用户发际线形状、用户额头高度、用户额头宽度、用户额头皱纹等)与所述局部面部图像中的用户额头信息进行匹配。
在所述遮挡物未覆盖区域对应的所述预设面部区域为第三面部区域时，所述第三面部区域为除耳部以外的面部区域。
应当理解的是，属于该区域时，用户仅遮挡耳部，露出的局部面部区域较大，可以直接使用普通方式进行人脸识别。
在所述遮挡物未覆盖区域对应的所述预设面部区域为第四面部区域时，所述第四面部区域为除鼻部以外的面部区域。
需要说明的是，例如用户鼻部受伤包扎且不方便摘除包扎，用户嘴部、下半、眼部额头等区域露出，可对这些区域进行局部区域提取，并将上述区域中的用户特征信息与预设用户图像中对应区域的用户特征信息进行比对。所述第四面部区域与上述面部区域具有重叠部分，此处不再一一赘述。本实施例中各个面部区域的划分仅为解释说明，具体实施中可以划分更多的面部区域，以全面覆盖用户的各个特征信息。
在一实施例中，所述管理模块，还用于在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，确认所述用户具备通行权限；在匹配结果为所述预设局部图像与所述局部面部图像的匹配度小于第一匹配度时，确认所述用户不具备通行权限；在用户出示的身份证明中的预设用户头像与用户管理平台中存储的预设用户图像的匹配度小于第二匹配度时，确认所述用户不具备通行权限。
应当理解的是，由于图像获取的清晰度、环境影响因素及用户自身因素(如用户减肥、增重对外貌的影响等)，当前获得的用户头部图像与预设用户图像存在部分差别，因此匹配度并不能完整地达到百分之百，所述第一匹配度为一个较大的匹配程度，允许用户的局部面部图像与预设局部图像存在较少的差异。例如：在具体实施中，可将所述第一匹配度设置为95％～99.9％，即用户头部图像与预设用户图像的相近程度在95％～99.9％。具体实施中，所述第一匹配度可根据实际管理需求进行调整。在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，判断所述用户具备通行权限，对所述用户进行放行。
易于理解的是，判断所述用户不具备通行权限，必要时可建议用户摘除部分遮挡物，以使用户可用于进行匹配的区域增加，加强匹配程度。
需要说明的是，若用户出示的身份证明中包含了用户的头部图像，然而所述头部图像与用户管理平台中的预设用户头像并不相同，则用户存在使用虚假证件的可能性，或存在用户管理平台故障、用户管理平台中的用户信息未及时更新等情况，此时应暂停对用户的人脸识别，暂定用户不具备通行权限，并对管理人员进行报警，以排除故障或阻拦用户进入。
应当理解的是，所述第二匹配度在具体实施中可设置为99％～100％，由于身份证明中的预设用户头像与用户管理平台中存储的预设用户图像通常为一致，因此所述第二匹配度可设置得较大。具体实施中，所述第二匹配度可根据实际管理需求进行调整。
需要说明的是，确认用户存在通行权限时，将用户对应的用户信息与遮挡物图像建立映射关系，若用户在下一次通行时仍佩戴相同、相近似的遮挡物，可通过所述遮挡物图像增加对所述用户识别过程中的信息量。
具体实施中，例如：在用户佩戴遮挡物进行通行时，对用户进行遮挡物检测，若用户管理平台中所述用户对应的用户信息中存在遮挡物图像的信息，则将所述遮挡物图像也作为用户的特征信息，将遮挡物图像与管理平台中的遮挡物图像进行匹配，以获取匹配程度。对所述遮挡物图像的匹配程度乘以一定的权值与局部面部图像的匹配程度相加，以获取完整的匹配程度。易于理解的是，遮挡物存在非常多的可替代品，因此所述遮挡物图像对应的匹配程度所占比重较小。
本发明所述基于人脸识别的通行管理装置的其他实施例或具体实现方式可参照上述各方法实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。词语第一、第二、以及第三等的使用不表示任何顺序，可将这些词语解释为名称。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器镜像(Read Only Memory image，ROM)/随机存取存储器(Random AccessMemory，RAM)、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种基于人脸识别的通行管理方法，其特征在于，所述基于人脸识别的通行管理方法包括：
获取用户头部图像，并对所述用户头部图像进行遮挡物检测；
在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；
获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
将所述预设局部图像与所述局部面部图像进行匹配；
根据匹配结果确认所述用户是否具备通行权限。
2.如权利要求1所述的基于人脸识别的通行管理方法，其特征在于，所述将所述预设局部图像与所述局部面部图像进行匹配的步骤，具体包括：
判断所述遮挡物未覆盖区域对应的预设面部区域；
在所述遮挡物未覆盖区域对应的所述预设面部区域为第一面部区域时，获取所述预设局部图像与所述局部面部图像的下边缘轮廓及口鼻特征，并将所述预设局部图像的所述下边缘轮廓与所述口鼻特征与所述局部面部图像的所述下边缘轮廓及所述口鼻特征进行匹配。
3.如权利要求2所述的基于人脸识别的通行管理方法，其特征在于，所述判断所述遮挡物未覆盖区域对应的预设面部区域的步骤之后，还包括：
在所述遮挡物未覆盖区域对应的所述预设面部区域为第二面部区域时，获取所述预设局部图像与所述局部面部图像的上边缘轮廓及眉眼特征，并将所述预设局部图像的所述上边缘轮廓及所述眉眼特征与所述局部面部图像的所述上边缘轮廓及所述眉眼特征进行匹配。
4.如权利要求3所述的基于人脸识别的通行管理方法，其特征在于，所述获取用户头部图像，并对所述用户头部图像进行遮挡物检测的步骤之后，还包括：
在所述用户头部图像存在遮挡物时，获取遮挡物图像；
所述根据匹配结果确认所述用户是否具备通行权限的步骤之后，还包括：
存储所述遮挡物图像，并将所述遮挡物图像与所述用户的用户信息建立映射关系。
5.如权利要求4所述的基于人脸识别的通行管理方法，其特征在于，所述获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像的步骤，具体包括：
获取用户出示的身份证明中的预设用户头像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
和/或，
获取用户管理平台中存储的预设用户图像，提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像。
6.如权利要求5所述的基于人脸识别的通行管理方法，其特征在于，所述在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像的步骤，具体包括：
在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的待定面部图像；
对所述待定面部图像进行图像增强及边缘修正以获取局部面部图像。
7.如权利要求1-6中任一项所述的基于人脸识别的通行管理方法，其特征在于，所述在根据匹配结果确认所述用户是否具备通行权限的步骤，具体包括：
在匹配结果为所述预设局部图像与所述局部面部图像的匹配度大于第一匹配度时，确认所述用户具备通行权限；
在匹配结果为所述预设局部图像与所述局部面部图像的匹配度小于第一匹配度时，确认所述用户不具备通行权限；
在用户出示的身份证明中的预设用户头像与用户管理平台中存储的预设用户图像的匹配度小于第二匹配度时，确认所述用户不具备通行权限。
8.一种基于人脸识别的通行管理设备，其特征在于，所述基于人脸识别的通行管理设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于人脸识别的通行管理程序，所述基于人脸识别的通行管理程序被所述处理器执行时实现如权利要求1至7中任一项所述的基于人脸识别的通行管理方法的步骤。
9.一种存储介质，其特征在于，所述存储介质上存储有基于人脸识别的通行管理程序，所述基于人脸识别的通行管理程序被处理器执行时实现如权利要求1至7中任一项所述的基于人脸识别的通行管理方法的步骤。
10.一种基于人脸识别的通行管理装置，其特征在于，所述基于人脸识别的通行管理装置包括：
检测模块，用于获取用户头部图像，并对所述用户头部图像进行遮挡物检测；
获取模块，用于在所述用户头部图像存在遮挡物时，获取所述用户头部图像中遮挡物未覆盖区域的局部面部图像；
提取模块，用于获取预设用户图像，并提取所述遮挡物未覆盖区域对应的所述预设用户图像中的预设局部图像；
匹配模块，用于将所述预设局部图像与所述局部面部图像进行匹配；
管理模块，用于根据匹配结果确认所述用户是否具备通行权限。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010606818.3A CN111768543A (zh) | 2020-06-29 | 2020-06-29 | 基于人脸识别的通行管理方法、设备、存储介质及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010606818.3A CN111768543A (zh) | 2020-06-29 | 2020-06-29 | 基于人脸识别的通行管理方法、设备、存储介质及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111768543A true CN111768543A (zh) | 2020-10-13 |
Family
ID=72724417
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010606818.3A Pending CN111768543A (zh) | 2020-06-29 | 2020-06-29 | 基于人脸识别的通行管理方法、设备、存储介质及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111768543A (zh) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112597886A (zh) * | 2020-12-22 | 2021-04-02 | 成都商汤科技有限公司 | 乘车逃票检测方法及装置、电子设备和存储介质 |
| WO2021203718A1 (zh) * | 2020-04-10 | 2021-10-14 | 嘉楠明芯(北京)科技有限公司 | 人脸识别方法及系统 |
| CN114359998A (zh) * | 2021-12-06 | 2022-04-15 | 江苏理工学院 | 一种人脸口罩佩戴状态下的识别方法 |
| CN115471944A (zh) * | 2022-08-08 | 2022-12-13 | 国网河北省电力有限公司建设公司 | 仓库门禁锁控制方法、装置、系统及可读存储介质 |
| CN116092228A (zh) * | 2023-01-05 | 2023-05-09 | 厦门科拓通讯技术股份有限公司 | 针对面部遮挡的门禁处理方法、装置、门禁设备和介质 |
| WO2023159350A1 (en) * | 2022-02-22 | 2023-08-31 | Liu Kin Wing | Recognition system detecting facial features |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104537388A (zh) * | 2014-12-29 | 2015-04-22 | 桂林远望智能通信科技有限公司 | 一种多级人脸比对系统和方法 |
| CN104992148A (zh) * | 2015-06-18 | 2015-10-21 | 江南大学 | 基于随机森林的atm终端部分遮挡人脸关键点检测方法 |
| CN105095829A (zh) * | 2014-04-29 | 2015-11-25 | 华为技术有限公司 | 一种人脸识别方法及系统 |
| CN105205896A (zh) * | 2015-10-16 | 2015-12-30 | 江苏瑞奥风软件科技有限公司 | 学校自动门卫管理系统 |
| CN206224639U (zh) * | 2016-11-14 | 2017-06-06 | 华南理工大学 | 一种具有遮挡检测功能的人脸识别门禁系统 |
| CN108985212A (zh) * | 2018-07-06 | 2018-12-11 | 深圳市科脉技术股份有限公司 | 人脸识别方法及装置 |
| CN110334615A (zh) * | 2019-06-20 | 2019-10-15 | 湖北亮诚光电科技有限公司 | 一种有遮挡的人脸识别的方法 |
| CN110826410A (zh) * | 2019-10-10 | 2020-02-21 | 珠海格力电器股份有限公司 | 一种人脸识别的方法和设备 |
| CN111095268A (zh) * | 2019-10-16 | 2020-05-01 | 中新智擎科技有限公司 | 一种用户身份识别方法、装置及电子设备 |
-
2020
- 2020-06-29 CN CN202010606818.3A patent/CN111768543A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105095829A (zh) * | 2014-04-29 | 2015-11-25 | 华为技术有限公司 | 一种人脸识别方法及系统 |
| CN104537388A (zh) * | 2014-12-29 | 2015-04-22 | 桂林远望智能通信科技有限公司 | 一种多级人脸比对系统和方法 |
| CN104992148A (zh) * | 2015-06-18 | 2015-10-21 | 江南大学 | 基于随机森林的atm终端部分遮挡人脸关键点检测方法 |
| CN105205896A (zh) * | 2015-10-16 | 2015-12-30 | 江苏瑞奥风软件科技有限公司 | 学校自动门卫管理系统 |
| CN206224639U (zh) * | 2016-11-14 | 2017-06-06 | 华南理工大学 | 一种具有遮挡检测功能的人脸识别门禁系统 |
| CN108985212A (zh) * | 2018-07-06 | 2018-12-11 | 深圳市科脉技术股份有限公司 | 人脸识别方法及装置 |
| CN110334615A (zh) * | 2019-06-20 | 2019-10-15 | 湖北亮诚光电科技有限公司 | 一种有遮挡的人脸识别的方法 |
| CN110826410A (zh) * | 2019-10-10 | 2020-02-21 | 珠海格力电器股份有限公司 | 一种人脸识别的方法和设备 |
| CN111095268A (zh) * | 2019-10-16 | 2020-05-01 | 中新智擎科技有限公司 | 一种用户身份识别方法、装置及电子设备 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021203718A1 (zh) * | 2020-04-10 | 2021-10-14 | 嘉楠明芯(北京)科技有限公司 | 人脸识别方法及系统 |
| CN112597886A (zh) * | 2020-12-22 | 2021-04-02 | 成都商汤科技有限公司 | 乘车逃票检测方法及装置、电子设备和存储介质 |
| CN114359998A (zh) * | 2021-12-06 | 2022-04-15 | 江苏理工学院 | 一种人脸口罩佩戴状态下的识别方法 |
| CN114359998B (zh) * | 2021-12-06 | 2024-03-15 | 江苏理工学院 | 一种人脸口罩佩戴状态下的识别方法 |
| WO2023159350A1 (en) * | 2022-02-22 | 2023-08-31 | Liu Kin Wing | Recognition system detecting facial features |
| CN115471944A (zh) * | 2022-08-08 | 2022-12-13 | 国网河北省电力有限公司建设公司 | 仓库门禁锁控制方法、装置、系统及可读存储介质 |
| CN116092228A (zh) * | 2023-01-05 | 2023-05-09 | 厦门科拓通讯技术股份有限公司 | 针对面部遮挡的门禁处理方法、装置、门禁设备和介质 |
| CN116092228B (zh) * | 2023-01-05 | 2024-05-14 | 厦门科拓通讯技术股份有限公司 | 针对面部遮挡的门禁处理方法、装置、门禁设备和介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111768543A (zh) | 基于人脸识别的通行管理方法、设备、存储介质及装置 | |
| KR101998112B1 (ko) | 얼굴 특징점 기반 부분 영역 지정을 통한 부분 가림 얼굴 인식 방법, 이를 수행하기 위한 기록 매체 및 장치 | |
| EP2615577B1 (en) | Image-processing device, image-processing method, and control program | |
| JP4862447B2 (ja) | 顔認識システム | |
| EP2615576B1 (en) | Image-processing device, image-processing method, and control program | |
| US6920236B2 (en) | Dual band biometric identification system | |
| US7127086B2 (en) | Image processing apparatus and method | |
| KR101733512B1 (ko) | 얼굴 특징 기반의 가상 체험 시스템 및 그 방법 | |
| KR102538405B1 (ko) | 생체 인증 시스템, 생체 인증 방법 및 프로그램 | |
| US10964070B2 (en) | Augmented reality display method of applying color of hair to eyebrows | |
| KR102329128B1 (ko) | 홍채 이미지 부호화를 위한 적응적 양자화 방법 | |
| KR101827998B1 (ko) | 얼굴 특징 기반의 가상 체험 시스템 및 그 방법 | |
| KR101647318B1 (ko) | 휴대용 피부상태 분석 장치 및 이를 이용한 피부 관리 서비스 방법 | |
| CN113918912A (zh) | 一种基于脑纹识别的身份认证方法、系统、设备及介质 | |
| US20230089155A1 (en) | Information processing device, monitoring system, information processing method, andnon-transitory computer-readable storage medium | |
| Srinivas et al. | Human identification using automatic and semi‐automatically detected facial Marks | |
| CN113095256A (zh) | 一种人脸识别方法及装置 | |
| KR101706373B1 (ko) | 피부 상태 분석 장치 및 이를 이용한 피부 관리 서비스 방법 | |
| KR100608307B1 (ko) | 얼굴 인식 방법 및 시스템 | |
| KR102530141B1 (ko) | 인공지능 기반 얼굴 매칭률 산출을 이용하여 얼굴 인증을 하기 위한 방법 및 장치 | |
| CN112800819B (zh) | 一种人脸识别方法、装置及电子设备 | |
| CN116758606A (zh) | 基于深度学习的人脸防遮挡检测及识别方法和装置以及计算机可读介质和电子设备 | |
| CN115600173A (zh) | 设备解锁方法、装置、设备及存储介质 | |
| CN112613463A (zh) | 一种人脸识别的方法 | |
| CN113454639A (zh) | 信息处理装置、信息处理方法和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201013 |
|
| RJ01 | Rejection of invention patent application after publication |