CN111191532A - 基于施工区域的人脸识别方法、装置、计算机设备 - Google Patents
基于施工区域的人脸识别方法、装置、计算机设备 Download PDFInfo
- Publication number
- CN111191532A CN111191532A CN201911308667.7A CN201911308667A CN111191532A CN 111191532 A CN111191532 A CN 111191532A CN 201911308667 A CN201911308667 A CN 201911308667A CN 111191532 A CN111191532 A CN 111191532A
- Authority
- CN
- China
- Prior art keywords
- face
- face target
- images
- target
- frame image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本申请涉及一种基于施工区域的人脸识别方法、装置、计算机设备和存储介质。所述方法包括:通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。采用本方法能够有效的对建筑施工区域内的所有人员进行准确的识别。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种基于施工区域的人脸识别方法、装置、计算机设备和存储介质。
背景技术
在日常建筑施工过程中,由于施工现场环境吵杂,流程复杂,工地上人员众多,对每个施工人员进行识别存在一定的难度,需要耗费大量人力资源进行不定期排查,由此导致非施工人员很容易误入施工区域中,带来一定的安全隐患。因此,如何有效的对建筑施工区域内的所有人员进行准确的识别成为急需解决的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高人员识别准确率的基于施工区域的人脸识别方法、装置、计算机设备和存储介质。
一种基于施工区域的人脸识别方法,所述方法包括:
通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
在其中一个实施例中,所述读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像之前,所述方法还包括:
对多帧图像进行灰度变换,得到灰度变换后的多帧图像;
对灰度变换后的多帧图像进行对比度调节,得到对比度调节后的多帧图像;
对对比度调节后的多帧图像进行归一化处理,得到归一化处理后的多帧图像;
对归一化处理后的多帧图像进行几何校正,得到矫正后的多帧图像;
对矫正后的多帧图像进行滤波和锐化处理,得到预处理后的多帧图像。
在其中一个实施例中,所述加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,包括:
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息;
根据所述人脸目标定位框的坐标信息,对所述人脸目标图像进行切割,生成对应的人脸标识矩形框;
利用所述人脸标识矩形框,生成对应的多个待识别人脸目标图像。
在其中一个实施例中,所述加载识别模型对多个所述包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息,包括:
所述人脸目标定位框的坐标信息包括人脸目标定位框的左上角位置的横纵坐标信息和人脸目标定位框的右下角位置的横纵坐标信息。
在其中一个实施例中,所述对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据,包括:
利用识别模型对多个所述待识别人脸目标图像进行训练,得到每帧待识别人脸目标图像对应的特征点;
选取所述特征点相邻的多个像素点,构建所述特征点对应的特征向量;
根据所述特征点对应的特征向量,生成对应的人脸目标识别概率。
在其中一个实施例中,所述根据所述特征点对应的特征向量,生成对应的人脸目标识别概率之后,所述方法还包括:
将所述人脸目标识别概率与预设的阈值进行比较;
当所述人脸目标识别概率大于预设的阈值时,则将所述人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配。
在其中一个实施例中,所述当所述人脸目标识别概率大于预设的阈值时,则将所述人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配,包括:
当所述人脸目标特征数据与所述施工人员人脸特征模版匹配成功时,将匹配成功的结果输出,生成对应的施工人员识别成功消息提示框;
当所述人脸目标特征数据与所述施工人员人脸特征模版匹配失败时,将匹配失败的结果输出,触发自动报警。
一种基于施工区域的人脸识别装置,所述装置包括:
采集模块,用于通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取模块,用于读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载模块,用于加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
提取模块,用于对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
匹配模块,用于利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
上述基于施工区域的人脸识别方法、装置、计算机设备和存储介质,通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据。利用匹配模型将人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。相对于传统的方式,通过加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,由此使得能够对生成的每帧待识别人脸目标图像进行精确的特征定位,从而能够有效的对建筑施工区域内的所有人员进行准确的识别。
附图说明
图1为一个实施例中基于施工区域的人脸识别方法的应用场景图;
图2为一个实施例中基于施工区域的人脸识别方法的流程示意图;
图3为一个实施例中对视频帧图像进行预处理步骤的流程示意图;
图4为一个实施例中加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割步骤的流程示意图;
图5为一个实施例中基于施工区域的人脸识别装置的结构框图;
图6为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的基于施工区域的人脸识别方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104通过网络进行通信。终端102可以通过向服务器104发送请求,从服务器104获取对应的施工人员人脸特征模版数据。终端102通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。终端102读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。终端102加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。终端102对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据。终端102利用匹配模型将人脸目标特征数据与从服务器104获取的施工人员人脸特征模版进行匹配,得到对应的识别结果。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机和平板电脑,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种基于施工区域的人脸识别方法,以该方法应用于图1中的终端为例进行说明,包括以下步骤:
步骤202,通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。
终端中安装有摄像头。摄像头可以对施工区域内的人员进行实时拍摄生成对应的实时视频流数据。终端通过摄像头采集施工区域内的视频流数据,并对视频流数据进行视频解码,得到具有统一图片格式的多帧图像。其中,视频是由多帧具有时间顺序的图像组成的。视频流数据包括按序排列的多帧图像,视频流数据的传输是指将多帧图像按顺序通过视频流进行传输。
步骤204,读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。
终端通过摄像头采集施工区域内的视频流数据,终端读取视频帧图像,终端利用训练好的人脸分类器检测多帧视频帧图像中是否有相应的人脸目标存在。当终端检测到多帧视频帧图像中有相应人脸目标存在时,则终端对多帧视频帧图像的空间重合度进行检测。当空间重合度达到阈值时,确定检测到相应人脸目标,即将上述检测到相应人脸目标的图像筛选出来,得到包含人脸目标的图像。其中,上述包含人脸目标的图像可以为多个不同类别的人脸目标图像,例如可以分为戴眼镜的人脸目标图像和不戴眼镜的人脸目标图像。
步骤206,加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。
步骤208,对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据。
终端加载识别模型对上述得到的多个包含人脸目标的图像进行人脸定位。具体的,终端通过加载识别模型进行多任务级联卷积神经网络的人脸定位识别。终端将多个包含人脸目标的图像输入上述识别模型中,得到对应的多个定位人脸目标图像的候选窗口和边界框回归向量。终端利用得到的边界框回归向量对多个定位人脸目标图像的候选窗口进行校准,得到对应的多个第一级人脸目标定位框的坐标信息和人脸分类的识别概率。进一步的,终端将上述第一级定位后的人脸目标图像发送到下一级识别模型进行人脸定位识别,得到对应的多个第二级人脸目标定位框的坐标信息和人脸分类的识别概率。终端加载识别模型对上述第二级定位后的人脸目标图像进行人脸定位和校准,得到对应的人脸关键点的定位信息、人脸目标定位框的坐标信息以及人脸分类的识别概率。进一步的,终端根据上述得到人脸定位识别信息,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。终端对得到的多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据,包括脸部特征左眼、右眼、鼻子、左嘴角和右嘴角的特征数据。其中,人脸关键点的定位信息可以包括多个人脸特征点的坐标位置信息。
步骤210,利用匹配模型将人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
终端根据上述获取到的人脸目标特征数据,终端利用匹配模型将上述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。具体的,服务器中存储有大量的施工人员人脸特征数据,根据实际施工人员的调配情况可以预先配置每个施工人员对应的人脸特征数据并上传到服务器中进行存储。终端可以通过向服务器发送请求,从服务器获取对应的施工人员人脸特征模版数据。进一步的,终端利用匹配模型将人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
本实施例中,通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据。利用匹配模型将人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。相对于传统的方式,通过加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,由此使得能够对生成的每帧待识别人脸目标图像进行精确的特征定位,从而能够有效的对建筑施工区域内的所有人员进行准确的识别。
在一个实施例中,读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像之前,该方法还包括对视频帧图像进行预处理的步骤,如图3所示,具体包括:
步骤302,对多帧图像进行灰度变换,得到灰度变换后的多帧图像。
步骤304,对灰度变换后的多帧图像进行对比度调节,得到对比度调节后的多帧图像。
步骤306,对对比度调节后的多帧图像进行归一化处理,得到归一化处理后的多帧图像。
步骤308,对归一化处理后的多帧图像进行几何校正,得到矫正后的多帧图像。
步骤310,对矫正后的多帧图像进行滤波和锐化处理,得到预处理后的多帧图像。
终端通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。终端对上述多帧图像进行预处理。终端对多帧图像进行颜色空间转换,得到对应的颜色空间转换后的多帧图像,终端利用图像处理函数对颜色空间转换后的多帧图像进行灰度变换,得到灰度变换后的多帧图像。终端对灰度变换后的多帧图像进行对比度调节,终端对灰度变换后的多帧图像进行亮度和对比度的调节,得到对比度调节后的多帧图像。终端对对比度调节后的多帧图像进行归一化处理,终端调用转换函数将对比度调节后的多帧图像进行线性变换,得到对应的归一化处理后的多帧图像。进一步的,终端调用角点检测函数对归一化处理后的多帧图像进行角点检测,得到对应多帧图像的角点位置坐标,终端利用梯度下降算法迭代拟合函数,得到对应的拟合函数参数。终端根据拟合函数参数,计算多帧图像中每个点畸变后的位置坐标,选取近邻的像素值替代原始像素值,即可得到矫正后的多帧图像。终端调用图像处理函数对矫正后的多帧图像进行滤波和锐化处理,得到预处理后的多帧图像。由此使得不同维度图像之间的数据特征具有统一的标准化格式,可以提高对多帧图像进行分类识别的准确性。
在一个实施例中,加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割的步骤,如图4所示,包括:
步骤402,加载识别模型对多个包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息。
步骤404,根据人脸目标定位框的坐标信息,对人脸目标图像进行切割,生成对应的人脸标识矩形框。
步骤406,利用人脸标识矩形框,生成对应的多个待识别人脸目标图像。
终端读取预处理后的多帧图像,在预处理后的视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。终端加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割。具体的,终端通过加载识别模型进行多任务级联卷积神经网络的人脸定位识别。其中,多任务级联卷积神经网络可以包括三个子网络分别为:Proposal Network(P-Net)即第一级网络、Refine Network(R-Net)即第二级网络以及Output Network(O-Net)即第三级网络。终端将上述得到的多个包含人脸目标的图像输入第一级网络识别模型中,得到对应的多个定位人脸目标图像的候选窗口和边界框回归向量。终端利用得到的边界框回归向量对多个定位人脸目标图像的候选窗口进行校准,同时终端利用非极大值抑制(NMS)算法将高度重叠的候选窗口进行合并,最终输出尺度调整后的多个人脸目标图像,以及得到初步筛选后的多个第一级人脸目标定位框的坐标信息和人脸分类的识别概率。进一步的,终端将上述尺度调整后的多个人脸目标图像发送到第二级识别模型中进行人脸定位识别,终端通过在第二级识别模型中添加全连接层,对上述得到的第一级定位后的人脸目标图像进行滤除,终端利用边框回归向量和面部关键点定位器对人脸目标图像进行人脸区域的边框回归和关键点定位,输出第二级网络滤除调整后的人脸目标图像,以及对应的多个第二级人脸目标定位框的坐标信息和人脸分类的识别概率。终端将上述第二级网络滤除调整后的人脸目标图像发送到第三级识别模型中,对上述第二级网络滤除调整后的人脸目标图像进行人脸定位识别,得到对应的人脸关键点的定位信息、人脸目标定位框的坐标信息以及人脸分类的识别概率。进一步的,终端根据上述人脸目标定位框的坐标信息,对人脸目标图像进行切割,生成对应的人脸标识矩形框。终端利用人脸标识矩形框,生成对应的多个待识别人脸目标图像。其中,人脸关键点的定位信息包括人脸区域的五个特征点定位信息,五个特征点定位信息包括左眼、右眼、鼻子、左嘴角和右嘴角的特征定位信息。由此使得能够对多个包含人脸目标的图像进行精准的人脸定位,避免了因背景环境因素的干扰而不能进行准确识别的问题,有效的提高了人脸识别的可靠性。
在其中一个实施例中,加载识别模型对多个包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息的步骤,包括:
人脸目标定位框的坐标信息包括人脸目标定位框的左上角位置的横纵坐标信息和人脸目标定位框的右下角位置的横纵坐标信息。
终端加载识别模型对多个包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息。具体的,终端通过将上述第二级网络滤除调整后的人脸目标图像发送到第三级识别模型中,通过第三级识别模型中分辨率尺度为256的全连接层进行精确的人脸定位,输出人脸目标定位框的左上角位置的横纵坐标信息和人脸目标定位框的右下角位置的横纵坐标信息即L1=(x1,y1)和L2=(x2,y2)。终端根据上述L1和L2的坐标信息,生成对应的人脸标识矩形框。由此使得利用上述人脸标识矩形框进行人脸相似度匹配,能够有效的确定每个人员身份的功能。
在一个实施例中,对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据的步骤,包括:
利用识别模型对多个待识别人脸目标图像进行训练,得到每帧待识别人脸目标图像对应的特征点。
选取特征点相邻的多个像素点,构建特征点对应的特征向量。
根据特征点对应的特征向量,生成对应的人脸目标识别概率。
终端利用识别模型对上述得到的多个待识别人脸目标图像进行训练,经过多层全连接网络进行提取特征,得到每帧待识别人脸目标图像对应的特征点。终端利用识别模型选取每个特征点相邻的多个像素点,构建每个特征点对应的特征向量。终端根据上述特征点对应的特征向量,生成对应的人脸目标识别概率。通过深度学习网络对每帧待识别人脸目标图像进行特征提取,使得能够保留人脸目标图像的主要特征数据,从而提高了人脸目标检测的精度。
在一个实施例中,根据特征点对应的特征向量,生成对应的人脸目标识别概率之后,方法还包括:
将人脸目标识别概率与预设的阈值进行比较。
当人脸目标识别概率大于预设的阈值时,则将人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配。
终端将上述获取到的人脸目标识别概率与预设的阈值进行比较,例如,阈值可以设为90%。当终端检测到人脸目标识别概率大于预设的阈值90%时,终端则将人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配。
在其中一个实施例中,当人脸目标识别概率大于预设的阈值时,则将人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配的步骤,包括:
当人脸目标特征数据与施工人员人脸特征模版匹配成功时,将匹配成功的结果输出,生成对应的施工人员识别成功消息提示框。
当人脸目标特征数据与施工人员人脸特征模版匹配失败时,将匹配失败的结果输出,触发自动报警。
终端将人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配时,终端利用余弦相似度算法,对人脸目标特征数据和施工人员人脸特征模版的余弦相似度进行求解计算,得到对应的相似度数值。当相似度大于阈值时,即人脸目标特征数据与施工人员人脸特征模版匹配成功,确定该人脸目标识别概率对应的人脸目标特征数据为该施工区域内的施工人员,将上述识别认证成功的结果输出,并生成对应的施工人员识别成功消息提示框。当相似度不大于阈值时,即人脸目标特征数据与施工人员人脸特征模版匹配失败,确定该人脸目标识别概率对应的人脸目标特征数据不是该施工区域内的施工人员,将上述识别认证失败的结果输出,触发自动报警。由此使得能够有效的对建筑施工区域内的所有人员进行准确的识别,实现自动识别施工区域内是否有非施工人员误入,一旦有非施工人员进入,通过串口通信自动触发报警。
应该理解的是,虽然图1-4流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图1-4中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种基于施工区域的人脸识别装置,包括:采集模块502、读取模块504、加载模块506、提取模块508和匹配模块510,其中:
采集模块502,用于通过摄像头采集施工区域内的视频流数据,视频流数据包括多帧图像。
读取模块504,用于读取视频帧图像,在视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像。
加载模块506,用于加载识别模型对多个包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像。
提取模块508,用于对多个待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据。
匹配模块510,用于利用匹配模型将人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
在一个实施例中,该装置还包括:预处理模块。
预处理模块用于对多帧图像进行灰度变换,得到灰度变换后的多帧图像;对灰度变换后的多帧图像进行对比度调节,得到对比度调节后的多帧图像;对对比度调节后的多帧图像进行归一化处理,得到归一化处理后的多帧图像;对归一化处理后的多帧图像进行几何校正,得到矫正后的多帧图像;对矫正后的多帧图像进行滤波和锐化处理,得到预处理后的多帧图像。
在一个实施例中,该装置还包括:生成模块。
加载模块506还用于加载识别模型对多个包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息。生成模块用于根据人脸目标定位框的坐标信息,对人脸目标图像进行切割,生成对应的人脸标识矩形框;利用人脸标识矩形框,生成对应的多个待识别人脸目标图像。
在一个实施例中,加载模块506还用于加载识别模型对多个包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息。人脸目标定位框的坐标信息包括人脸目标定位框的左上角位置的横纵坐标信息和人脸目标定位框的右下角位置的横纵坐标信息。
在一个实施例中,该装置还包括:训练模块和构建模块。
训练模块用于利用识别模型对多个待识别人脸目标图像进行训练,得到每帧待识别人脸目标图像对应的特征点。构建模块用于选取特征点相邻的多个像素点,构建特征点对应的特征向量。生成模块还用于根据特征点对应的特征向量,生成对应的人脸目标识别概率。
在一个实施例中,该装置还包括:匹配模块。
匹配模块用于将人脸目标识别概率与预设的阈值进行相似度匹配;当人脸目标识别概率大于预设的阈值时,则将人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配。
在一个实施例中,该装置还包括:报警模块。
生成模块还用于当人脸目标特征数据与施工人员人脸特征模版匹配成功时,将匹配成功的结果输出,生成对应的施工人员识别成功消息提示框。报警模块用于当人脸目标特征数据与施工人员人脸特征模版匹配失败时,将匹配失败的结果输出,触发自动报警。
关于基于施工区域的人脸识别装置的具体限定可以参见上文中对于基于施工区域的人脸识别方法的限定,在此不再赘述。上述基于施工区域的人脸识别装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种基于施工区域的人脸识别方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述各个方法实施例的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种基于施工区域的人脸识别方法,所述方法包括:
通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
2.根据权利要求1所述的方法,其特征在于,所述读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像之前,所述方法还包括:
对多帧图像进行灰度变换,得到灰度变换后的多帧图像;
对灰度变换后的多帧图像进行对比度调节,得到对比度调节后的多帧图像;
对对比度调节后的多帧图像进行归一化处理,得到归一化处理后的多帧图像;
对归一化处理后的多帧图像进行几何校正,得到矫正后的多帧图像;
对矫正后的多帧图像进行滤波和锐化处理,得到预处理后的多帧图像。
3.根据权利要求2所述的方法,其特征在于,所述加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,包括:
加载识别模型对多个所述包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息;
根据所述人脸目标定位框的坐标信息,对所述人脸目标图像进行切割,生成对应的人脸标识矩形框;
利用所述人脸标识矩形框,生成对应的多个待识别人脸目标图像。
4.根据权利要求3所述的方法,其特征在于,所述加载识别模型对多个所述包含人脸目标的图像进行人脸定位,得到对应的人脸目标定位框的坐标信息,包括:
所述人脸目标定位框的坐标信息包括人脸目标定位框的左上角位置的横纵坐标信息和人脸目标定位框的右下角位置的横纵坐标信息。
5.根据权利要求1所述的方法,其特征在于,所述对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据,包括:
利用识别模型对多个所述待识别人脸目标图像进行训练,得到每帧待识别人脸目标图像对应的特征点;
选取所述特征点相邻的多个像素点,构建所述特征点对应的特征向量;
根据所述特征点对应的特征向量,生成对应的人脸目标识别概率。
6.根据权利要求5所述的方法,其特征在于,所述根据所述特征点对应的特征向量,生成对应的人脸目标识别概率之后,所述方法还包括:
将所述人脸目标识别概率与预设的阈值进行比较;
当所述人脸目标识别概率大于预设的阈值时,则将所述人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配。
7.根据权利要求6所述的方法,其特征在于,所述当所述人脸目标识别概率大于预设的阈值时,则将所述人脸目标识别概率对应的人脸目标特征数据与施工人员人脸特征模版进行匹配,包括:
当所述人脸目标特征数据与所述施工人员人脸特征模版匹配成功时,将匹配成功的结果输出,生成对应的施工人员识别成功消息提示框;
当所述人脸目标特征数据与所述施工人员人脸特征模版匹配失败时,将匹配失败的结果输出,触发自动报警。
8.一种基于施工区域的人脸识别装置,其特征在于,所述装置包括:
采集模块,用于通过摄像头采集施工区域内的视频流数据,所述视频流数据包括多帧图像;
读取模块,用于读取所述视频帧图像,在所述视频帧图像中检测相应的人脸目标,得到包含人脸目标的图像;
加载模块,用于加载识别模型对多个所述包含人脸目标的图像进行人脸定位,对定位后的人脸目标图像进行切割,生成对应的多个待识别人脸目标图像;
提取模块,用于对多个所述待识别人脸目标图像进行特征提取,得到对应的人脸目标特征数据;
匹配模块,用于利用匹配模型将所述人脸目标特征数据与施工人员人脸特征模版进行匹配,得到对应的识别结果。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911308667.7A CN111191532B (zh) | 2019-12-18 | 2019-12-18 | 基于施工区域的人脸识别方法、装置、计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911308667.7A CN111191532B (zh) | 2019-12-18 | 2019-12-18 | 基于施工区域的人脸识别方法、装置、计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111191532A true CN111191532A (zh) | 2020-05-22 |
CN111191532B CN111191532B (zh) | 2023-08-25 |
Family
ID=70707339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911308667.7A Active CN111191532B (zh) | 2019-12-18 | 2019-12-18 | 基于施工区域的人脸识别方法、装置、计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111191532B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111675059A (zh) * | 2020-06-11 | 2020-09-18 | 深圳威富智慧家居科技有限公司 | 基于人脸识别的电梯控制方法、装置和计算机设备 |
CN111932755A (zh) * | 2020-07-02 | 2020-11-13 | 北京市威富安防科技有限公司 | 人员通行验证方法、装置、计算机设备和存储介质 |
CN112861826A (zh) * | 2021-04-08 | 2021-05-28 | 重庆工程职业技术学院 | 基于视频图像的煤矿监管方法、系统、设备及存储介质 |
CN113963307A (zh) * | 2020-07-02 | 2022-01-21 | 上海际链网络科技有限公司 | 目标上内容的识别及视频采集方法、装置、存储介质、计算机设备 |
CN114116182A (zh) * | 2022-01-28 | 2022-03-01 | 南昌协达科技发展有限公司 | 一种消杀任务分配方法、装置、存储介质及设备 |
WO2022198751A1 (zh) * | 2021-03-25 | 2022-09-29 | 南京邮电大学 | 基于多层预处理的快速人脸检测方法 |
CN116030524A (zh) * | 2023-02-09 | 2023-04-28 | 摩尔线程智能科技(北京)有限责任公司 | 一种人脸识别方法及装置、电子设备和存储介质 |
CN117152667A (zh) * | 2023-10-27 | 2023-12-01 | 三峡高科信息技术有限责任公司 | 数据处理方法、装置、电子设备及存储介质 |
CN118015435A (zh) * | 2024-04-10 | 2024-05-10 | 微网优联科技(成都)有限公司 | 基于移动计算平台的实时人脸抓拍方法及系统 |
CN118015435B (zh) * | 2024-04-10 | 2024-06-04 | 微网优联科技(成都)有限公司 | 基于移动计算平台的实时人脸抓拍方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1822025A (zh) * | 2006-03-08 | 2006-08-23 | 北京邮电大学 | 一种基于网格的并行、分布式识别人脸的方法 |
US20130195316A1 (en) * | 2012-01-30 | 2013-08-01 | Accenture Global Services Limited | System and method for face capture and matching |
US20180211104A1 (en) * | 2016-03-10 | 2018-07-26 | Zhejiang Shenghui Lighting Co., Ltd | Method and device for target tracking |
US20190228211A1 (en) * | 2017-08-17 | 2019-07-25 | Ping An Technology (Shenzhen) Co., Ltd. | Au feature recognition method and device, and storage medium |
CN110135384A (zh) * | 2019-04-03 | 2019-08-16 | 南通大学 | 一种基于视频流的人脸追踪与识别的系统及方法 |
CN110210340A (zh) * | 2019-05-20 | 2019-09-06 | 深圳供电局有限公司 | 一种人脸特征值比对方法及其系统、可读存储介质 |
-
2019
- 2019-12-18 CN CN201911308667.7A patent/CN111191532B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1822025A (zh) * | 2006-03-08 | 2006-08-23 | 北京邮电大学 | 一种基于网格的并行、分布式识别人脸的方法 |
US20130195316A1 (en) * | 2012-01-30 | 2013-08-01 | Accenture Global Services Limited | System and method for face capture and matching |
US20180211104A1 (en) * | 2016-03-10 | 2018-07-26 | Zhejiang Shenghui Lighting Co., Ltd | Method and device for target tracking |
US20190228211A1 (en) * | 2017-08-17 | 2019-07-25 | Ping An Technology (Shenzhen) Co., Ltd. | Au feature recognition method and device, and storage medium |
CN110135384A (zh) * | 2019-04-03 | 2019-08-16 | 南通大学 | 一种基于视频流的人脸追踪与识别的系统及方法 |
CN110210340A (zh) * | 2019-05-20 | 2019-09-06 | 深圳供电局有限公司 | 一种人脸特征值比对方法及其系统、可读存储介质 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111675059A (zh) * | 2020-06-11 | 2020-09-18 | 深圳威富智慧家居科技有限公司 | 基于人脸识别的电梯控制方法、装置和计算机设备 |
CN111932755A (zh) * | 2020-07-02 | 2020-11-13 | 北京市威富安防科技有限公司 | 人员通行验证方法、装置、计算机设备和存储介质 |
CN113963307A (zh) * | 2020-07-02 | 2022-01-21 | 上海际链网络科技有限公司 | 目标上内容的识别及视频采集方法、装置、存储介质、计算机设备 |
WO2022198751A1 (zh) * | 2021-03-25 | 2022-09-29 | 南京邮电大学 | 基于多层预处理的快速人脸检测方法 |
CN112861826A (zh) * | 2021-04-08 | 2021-05-28 | 重庆工程职业技术学院 | 基于视频图像的煤矿监管方法、系统、设备及存储介质 |
CN112861826B (zh) * | 2021-04-08 | 2021-12-14 | 重庆工程职业技术学院 | 基于视频图像的煤矿监管方法、系统、设备及存储介质 |
CN114116182B (zh) * | 2022-01-28 | 2022-07-08 | 南昌协达科技发展有限公司 | 一种消杀任务分配方法、装置、存储介质及设备 |
CN114116182A (zh) * | 2022-01-28 | 2022-03-01 | 南昌协达科技发展有限公司 | 一种消杀任务分配方法、装置、存储介质及设备 |
CN116030524A (zh) * | 2023-02-09 | 2023-04-28 | 摩尔线程智能科技(北京)有限责任公司 | 一种人脸识别方法及装置、电子设备和存储介质 |
CN116030524B (zh) * | 2023-02-09 | 2023-06-23 | 摩尔线程智能科技(北京)有限责任公司 | 一种人脸识别方法及装置、电子设备和存储介质 |
CN117152667A (zh) * | 2023-10-27 | 2023-12-01 | 三峡高科信息技术有限责任公司 | 数据处理方法、装置、电子设备及存储介质 |
CN118015435A (zh) * | 2024-04-10 | 2024-05-10 | 微网优联科技(成都)有限公司 | 基于移动计算平台的实时人脸抓拍方法及系统 |
CN118015435B (zh) * | 2024-04-10 | 2024-06-04 | 微网优联科技(成都)有限公司 | 基于移动计算平台的实时人脸抓拍方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111191532B (zh) | 2023-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111191532B (zh) | 基于施工区域的人脸识别方法、装置、计算机设备 | |
CN111222423B (zh) | 基于作业区域的目标识别方法、装置、计算机设备 | |
CN109325964B (zh) | 一种人脸追踪方法、装置及终端 | |
CN111191567A (zh) | 身份数据处理方法、装置、计算机设备和存储介质 | |
US10262190B2 (en) | Method, system, and computer program product for recognizing face | |
CN110569341B (zh) | 配置聊天机器人的方法、装置、计算机设备和存储介质 | |
US10037466B2 (en) | Video processing apparatus, video processing method, and video processing program | |
CN110674712A (zh) | 交互行为识别方法、装置、计算机设备和存储介质 | |
CN111626123A (zh) | 视频数据处理方法、装置、计算机设备及存储介质 | |
CN112381075B (zh) | 一种机房特定场景下进行人脸识别的方法及系统 | |
CN110706261A (zh) | 车辆违章检测方法、装置、计算机设备和存储介质 | |
CN113239874B (zh) | 基于视频图像的行为姿态检测方法、装置、设备及介质 | |
CN111191539A (zh) | 证件真伪验证方法、装置、计算机设备和存储介质 | |
CN112364715B (zh) | 核电作业异常监控方法、装置、计算机设备和存储介质 | |
CN110889355B (zh) | 一种人脸识别校验方法、系统及存储介质 | |
CN111192392B (zh) | 身份验证方法、装置、计算机设备和计算机可读存储介质 | |
CN111339897B (zh) | 活体识别方法、装置、计算机设备和存储介质 | |
CN110795714A (zh) | 一种身份验证方法、装置、计算机设备及存储介质 | |
US11908157B2 (en) | Image processing device, image processing method, and recording medium in which program is stored | |
CN110717449A (zh) | 车辆年检人员的行为检测方法、装置和计算机设备 | |
CN110619689A (zh) | 智慧楼宇的自动签到打卡方法、计算机设备及存储介质 | |
CN111144372A (zh) | 车辆检测方法、装置、计算机设备和存储介质 | |
CN114067431A (zh) | 图像处理方法、装置、计算机设备和存储介质 | |
CN111675059A (zh) | 基于人脸识别的电梯控制方法、装置和计算机设备 | |
CN110991231B (zh) | 活体检测方法、装置、服务器和人脸识别设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |