CN114894337B - 一种用于室外人脸识别测温方法及装置 - Google Patents

一种用于室外人脸识别测温方法及装置 Download PDF

Info

Publication number
CN114894337B
CN114894337B CN202210808704.6A CN202210808704A CN114894337B CN 114894337 B CN114894337 B CN 114894337B CN 202210808704 A CN202210808704 A CN 202210808704A CN 114894337 B CN114894337 B CN 114894337B
Authority
CN
China
Prior art keywords
temperature
image
detection result
preset
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210808704.6A
Other languages
English (en)
Other versions
CN114894337A (zh
Inventor
吴大立
李卓锐
樊卫红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beibu Gulf Port Fangchenggang Terminal Co ltd
Original Assignee
Beibu Gulf Port Fangchenggang Terminal Co ltd
Guangxi Kaishengyi Electronic Technology Co ltd
Shenzhen Dashu Artificial Intelligence Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beibu Gulf Port Fangchenggang Terminal Co ltd, Guangxi Kaishengyi Electronic Technology Co ltd, Shenzhen Dashu Artificial Intelligence Technology Co ltd filed Critical Beibu Gulf Port Fangchenggang Terminal Co ltd
Priority to CN202210808704.6A priority Critical patent/CN114894337B/zh
Publication of CN114894337A publication Critical patent/CN114894337A/zh
Application granted granted Critical
Publication of CN114894337B publication Critical patent/CN114894337B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01KMEASURING TEMPERATURE; MEASURING QUANTITY OF HEAT; THERMALLY-SENSITIVE ELEMENTS NOT OTHERWISE PROVIDED FOR
    • G01K11/00Measuring temperature based upon physical or chemical changes not covered by groups G01K3/00, G01K5/00, G01K7/00 or G01K9/00
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • G06V10/806Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of extracted features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40Spoof detection, e.g. liveness detection
    • G06V40/45Detection of the body part being alive

Abstract

本发明涉及人工智能领域,公开了一种用于室外人脸识别测温方法及装置,用于提高人脸识别测温的效率。所述方法包括:对多个人物图像进行人脸区域占比计算,得到人脸区域占比,并根据人脸区域占比提取正脸图像;对正脸图像进行活体检测,得到活体检测结果,并根据活体检测结果进行核验,得到身份核验结果;若身份核验结果为身份核验通过,则对正脸图像进行测温距离检测,得到距离检测结果,并根据距离检测结果获取温度数据;对温度数据和正脸图像进行数据融合,得到融合图像,并对融合图像进行脸部特征区域校正,得到标准图像;根据标准图像计算人物真实温度,并根据人物真实温度生成温度检测结果。

Description

一种用于室外人脸识别测温方法及装置
技术领域
本发明涉及人工智能领域,尤其涉及一种用于室外人脸识别测温方法及装置。
背景技术
温度是人健康与否的重要标志之一,是人体进行正常的新陈代谢的结果。在不同的环境温度下,人体通过产生热量和散热来保持环境温度的相对稳定,并保持对环境温度的适应能力。人体在健康状态时,保持着37℃左右,且不因外接温度的变化而发生较大的变化。当人体的某些机能发生变化或者某些部位发生病变时,相对恒定的体温将发生变化。人体的温度是重要的生理状态信息,所以对人体体温进行测量不仅可以确诊某些疾病的发生,还可以对某些重大疾病或者隐藏于体内的健康隐患起到积极的预防和示警的作用。
目前,在室外公共场所,对进出人员进行测温来筛查有发热症状的人员时,通常采用点温枪或红外热成像测温仪来进行测温,但是现有方案的检测速度慢。
发明内容
本发明提供了一种用于室外人脸识别测温方法及装置,用于提高人脸识别测温的效率。
本发明第一方面提供了一种用于室外人脸识别测温方法,所述用于室外人脸识别测温方法包括:基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。
可选的,在本发明第一方面的第一种实现方式中,所述对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像,包括:基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对所述人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,所述特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据所述特征点命中率生成所述人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将所述人物图像作为正脸图像并输出。
可选的,在本发明第一方面的第二种实现方式中,所述调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果,包括:对所述正脸图像进行图像分割,得到多个子图像;调用预置的活体检测模型对所述多个子图像进行图像特征提取,得到每个子图像的人脸纹理特征;根据每个子图像的人脸纹理特征判断所述正脸图像是否为活体人脸,得到活体检测结果;若所述活体检测结果为所述正脸图像是活体人脸,则将所述正脸图像和预置的信息数据库中的人脸白名单进行身份核验,得到身份核验结果,其中,所述身份核验结果包括:身份核验通过和身份核验不通过。
可选的,在本发明第一方面的第三种实现方式中,所述用于室外人脸识别测温方法还包括:若所述活体检测结果为所述正脸图像不是活体人脸,则根据所述正脸图像生成告警信息;将所述告警信息发送至预置的云监控平台,通过所述云监控平台启动设备预警任务并下发设备预警策略;根据所述设备预警策略对所述告警信息进行告警处理,并生成处理结果。
可选的,在本发明第一方面的第四种实现方式中,所述若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值,包括:若所述身份核验结果为身份核验通过,则计算所述正脸图像与所述用于室外人脸识别测温一体机之间的距离,得到目标距离;判断所述目标距离是否符合预设测温范围,得到距离检测结果,其中,所述距离检测结果包括:符合和不符合;若所述距离检测结果为符合,则根据多个预设温度采集点位获取所述正脸图像对应的温度值,得到温度数据。
可选的,在本发明第一方面的第五种实现方式中,所述用于室外人脸识别测温方法还包括:若所述距离检测结果为不符合,则根据所述目标距离生成距离调整方案;对所述距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至所述目标距离符合预设测温范围。
可选的,在本发明第一方面的第六种实现方式中,所述根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储,包括:根据所述标准图像生成多个温度连通区域,其中,所述多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算所述主连通区域和所述多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、所述主连通区域的温度平均数和多个次连通区域的温度平均数计算所述标准图像对应的人物真实温度;判断所述人物真实温度是否超过预设温度阈值,得到温度检测结果;对所述温度检测结果和所述身份核验结果进行数据关联存储。
本发明第二方面提供了一种用于室外人脸识别测温装置,所述用于室外人脸识别测温装置包括:采集模块,用于基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;检测模块,用于对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;计算模块,用于对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;核验模块,用于调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;获取模块,用于若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;融合模块,用于对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;存储模块,用于根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。
可选的,在本发明第二方面的第一种实现方式中,所述计算模块具体用于:基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对所述人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,所述特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据所述特征点命中率生成所述人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将所述人物图像作为正脸图像并输出。
可选的,在本发明第二方面的第二种实现方式中,所述核验模块具体用于:对所述正脸图像进行图像分割,得到多个子图像;调用预置的活体检测模型对所述多个子图像进行图像特征提取,得到每个子图像的人脸纹理特征;根据每个子图像的人脸纹理特征判断所述正脸图像是否为活体人脸,得到活体检测结果;若所述活体检测结果为所述正脸图像是活体人脸,则将所述正脸图像和预置的信息数据库中的人脸白名单进行身份核验,得到身份核验结果,其中,所述身份核验结果包括:身份核验通过和身份核验不通过。
可选的,在本发明第二方面的第三种实现方式中,所述用于室外人脸识别测温装置还包括:预警模块,用于若所述活体检测结果为所述正脸图像不是活体人脸,则根据所述正脸图像生成告警信息;将所述告警信息发送至预置的云监控平台,通过所述云监控平台启动设备预警任务并下发设备预警策略;根据所述设备预警策略对所述告警信息进行告警处理,并生成处理结果。
可选的,在本发明第二方面的第四种实现方式中,所述获取模块具体用于:若所述身份核验结果为身份核验通过,则计算所述正脸图像与所述用于室外人脸识别测温一体机之间的距离,得到目标距离;判断所述目标距离是否符合预设测温范围,得到距离检测结果,其中,所述距离检测结果包括:符合和不符合;若所述距离检测结果为符合,则根据多个预设温度采集点位获取所述正脸图像对应的温度值,得到温度数据。
可选的,在本发明第二方面的第五种实现方式中,所述用于室外人脸识别测温装置还包括:识别模块,用于若所述距离检测结果为不符合,则根据所述目标距离生成距离调整方案;对所述距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至所述目标距离符合预设测温范围。
可选的,在本发明第二方面的第六种实现方式中,所述存储模块具体用于:根据所述标准图像生成多个温度连通区域,其中,所述多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算所述主连通区域和所述多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、所述主连通区域的温度平均数和多个次连通区域的温度平均数计算所述标准图像对应的人物真实温度;判断所述人物真实温度是否超过预设温度阈值,得到温度检测结果;对所述温度检测结果和所述身份核验结果进行数据关联存储。
本发明第三方面提供了一种用于室外人脸识别测温设备,包括:存储器和至少一个处理器,所述存储器中存储有指令;所述至少一个处理器调用所述存储器中的所述指令,以使得所述用于室外人脸识别测温设备执行上述的用于室外人脸识别测温方法。
本发明的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述的用于室外人脸识别测温方法。
本发明提供的技术方案中,基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。本发明通过实时采集人物的正脸图像,并对图像进行占比计算和活体检测,能够更加高效的对人员进行检测,检测可以实现实时观测与自动控制,最后对温度检测结果和身份核验结果进行数据关联存储,可以实现人员的数据有效监控,进而提高了人脸识别测温的效率。
附图说明
图1为本发明实施例中用于室外人脸识别测温方法的一个实施例示意图;
图2为本发明实施例中用于室外人脸识别测温方法的另一个实施例示意图;
图3为本发明实施例中用于室外人脸识别测温装置的一个实施例示意图;
图4为本发明实施例中用于室外人脸识别测温装置的另一个实施例示意图;
图5为本发明实施例中用于室外人脸识别测温设备的一个实施例示意图。
具体实施方式
本发明实施例提供了一种用于室外人脸识别测温方法及装置,用于提高人脸识别测温的效率。本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”或“具有”及其任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为便于理解,下面对本发明实施例的具体流程进行描述,请参阅图1,本发明实施例中用于室外人脸识别测温方法的一个实施例包括:
101、基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
可以理解的是,本发明的执行主体可以为用于室外人脸识别测温装置,还可以是终端或者服务器,具体此处不做限定。本发明实施例以服务器为执行主体为例进行说明。
需要说明的是,上述环境感知参数包括至少一个生活工作场景的场景信息,场景信息包括用于控制终端工作的控制属性、以及用于识别当前场景的识别信息,根据环境感知关键信息确定终端当前环境的控制特性具体为比对环境感知关键信息与各场景信息中的识别信息,根据比对结果,确定对应的场景信息,调用对应场景信息的控制属性,作为当前环境的控制特性,也即上述基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化,并通过图像采集终端实时拍摄环境变化时的视频数据,通过上述环境感知参数检测上述监控区域的环境变化可以提升对环境变化检测的准确度,以便于后续对人脸温度识别时降低数据采集误差。
102、对视频数据进行视频图像提取,得到多个视频图像,并对多个视频图像进行人物检测,得到多个人物图像,其中,多个人物图像为携带有人物信息的图像;
具体的,服务器对视频图像序列进行人物检测,获取当前帧视频图像中每一人物的人物检测信息,其中人物检测信息包括:人脸特征信息、嘴唇特征信息及坐标信息,根据人物检测信息维护人物位置序列表;根据所述人物位置序列表中的眼睛特征信息判断是否有正在注视摄像头,根据当前帧视频图像对应的坐标信息从当前帧视频图像中裁剪正在注视摄像头的人物的特写镜头,或者根据当前帧视频图像对应的坐标信息控制摄像头对正在注视摄像头的人物进行特写拍摄,也即上述对多个视频图像进行人物检测,得到多个人物图像。
103、对多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取多个人物图像中的正脸图像;
具体的,服务器根据拍摄到的人物图像确定待检区域,待检区域为矩形;根据待检区域的宽和高之间的比较关系,选择对应的已训练的分类器确定待检区域中是否为人脸;当确定待检区域中为人脸时,根据待检区域确定肤色占比以及占比阈值,当肤色占比不大于占比阈值时,确定人脸为异常人脸。判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值,若是,则将所述人物图像作为正脸图像并输出。
104、调用预置的活体检测模型对正脸图像进行活体检测,得到活体检测结果,并根据活体检测结果和正脸图像对身份信息进行核验,得到身份核验结果;
需要说明的是,在调用预置的活体检测模型进行活体检测之前,服务器通过活体检测模型中的多个上采样层对人脸特征进行上采样处理,通过全连接层对各上采样层对应的上采样特征进行特征变换,根据非活体样本向量和参考活体样本向量对各上采样特征对应的特征向量计算三元损失函数,通过多层感知机确定各特征向量的分类损失函数,根据各特征向量对应的三元损失函数和各特征向量的分类损失函数训练活体检测模型,并通过训练后的活体检测模型对接收到的待识别图像进行人脸活体检测,最终得到活体检测结果,并对该正脸图像进行身份信息匹配,通过预置的数据库进行相似度匹配,得到对应的身份核验结果,通过多层感知机确定各特征向量的分类损失函数,根据各特征向量对应的三元损失函数和各特征向量的分类损失函数训练活体检测模型,可以降低因模型训练时收敛程度较低而导致的活体检测准确度较低的情况。
105、若身份核验结果为身份核验通过,则对正脸图像进行测温距离检测,得到距离检测结果,并根据距离检测结果获取正脸图像对应的温度数据,其中,温度数据包括多个预设温度采集点位对应的温度值;
具体的,服务器获取第一正脸视频帧图像以及各特征点的深度数据;根据正脸视频帧图像中第一特征点的深度数据确定第一位置信息,获取第二正脸视频帧图像至第M帧色彩图像以及每一帧色彩图像中的各特征点的深度数据,根据正脸视频帧图像至第M帧色彩图像、各特征点的深度数据以及第一位姿信息,确定第二位姿信息,根据第一位姿信息、第二位姿信息、第一位置信息,计算正脸图像与用于室外人脸识别测温一体机之间的距离,根据距离检测结果获取正脸图像对应的温度数据,其中,温度数据包括多个预设温度采集点位对应的温度值。
106、对温度数据和正脸图像进行数据融合,得到融合图像,并对融合图像进行脸部特征区域校正,得到标准图像;
具体的,服务器对温度数据和正脸图像进行融合,得到融合图像,其中,融合方法如下:取正脸图像中候选区域矩形框A和候选区域矩形框B,设候选区域矩形框A的起始行iRs1,终止行iRe1,起始列iCs1,终止列iCe1,候选矩形框B的起始行iRs2,终止行iRe2,起始列iCs2,终止列iCe2,其中,候选区域矩形框A和候选区域矩形框B分别为任意两个候选区域矩形框,根据候选区域矩形框A和候选区域矩形框B的起始行、终止行、起始列、终止列判断两者是否满足融合条件,若是,则进行融合,否则,直接将原更新后的候选区域矩形框作为融合后的候选区域矩形框,当服务器得到融合图像后,服务器对融合图像进行脸部特征区域矫正,需要说明的是,服务器在进行脸部特征区域校正是通过预置的脸部特征模板图进行区域校正的,首先服务器判断偏差值,进而服务器根据偏差值进行脸部特征区域校正,得到标准图像。
107、根据标准图像计算人物真实温度,并根据人物真实温度生成温度检测结果,以及对温度检测结果和身份核验结果进行数据关联存储。
具体的,服务器根据所述标准测温间距、与标准测温间距不同的测温间距和所述与标准测温间距不同的测温间距下测得的温度进行最小二乘法拟合,得到温度误差校正函数,并根据上述标准图像进行温度连通区域分析,确定出多种连通区域,进而服务器根据该多种连通区域进行温度均值计算,并根据预置的权重系数及温度均值计算对应的人体真实温度,最终服务器根据上述温度误差校正函数进行温度校正,得到温度检测结果,并对温度检测结果和身份核验结果进行数据关联存储。
本发明实施例中,基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对视频数据进行视频图像提取,得到多个视频图像,并对多个视频图像进行人物检测,得到多个人物图像,其中,多个人物图像为携带有人物信息的图像;对多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取多个人物图像中的正脸图像;调用预置的活体检测模型对正脸图像进行活体检测,得到活体检测结果,并根据活体检测结果和正脸图像对身份信息进行核验,得到身份核验结果;若身份核验结果为身份核验通过,则对正脸图像进行测温距离检测,得到距离检测结果,并根据距离检测结果获取正脸图像对应的温度数据,其中,温度数据包括多个预设温度采集点位对应的温度值;对温度数据和正脸图像进行数据融合,得到融合图像,并对融合图像进行脸部特征区域校正,得到标准图像;根据标准图像计算人物真实温度,并根据人物真实温度生成温度检测结果,以及对温度检测结果和身份核验结果进行数据关联存储。本发明通过实时采集人物的正脸图像,并对图像进行占比计算和活体检测,能够更加高效的对人员进行检测,检测可以实现实时观测与自动控制,最后对温度检测结果和身份核验结果进行数据关联存储,可以实现人员的数据有效监控,进而提高了人脸识别测温的效率。
请参阅图2,本发明实施例中用于室外人脸识别测温方法的另一个实施例包括:
201、基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
202、对视频数据进行视频图像提取,得到多个视频图像,并对多个视频图像进行人物检测,得到多个人物图像,其中,多个人物图像为携带有人物信息的图像;
203、对多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取多个人物图像中的正脸图像;
具体的,基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据特征点命中率生成人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将人物图像作为正脸图像并输出。
其中,服务器通过人物运动确定背景区域,语义分割算法依据背景区域深度图像像素值变化的大小与方向进行更新,通过背景减除得到人物轮廓区域,并依赖其区域再次进行背景更新,需要说明的是,中背景区域确定的方法为,首先通过帧间差找出人物运动区域,再通过填充确定完整人物区域,从而反向确定背景区域。为了得到运动人物所在的完整区,即运动人物图,人物图以外的黑色区域即背景区域,并根据预设的特征点对人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据特征点命中率生成人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比,需要说明得是,在进行特征点命中率计算时,服务器通过点位信息扫描,确定是否重叠,进而根据重叠率计算上述特征点命中率,最终服务器判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值,需要说明的是,在进行人脸占比目标值确认时,服务器预设的占比目标值为百分之80,若是,则将上述人脸图像作为正脸图像并输出,服务器应用二值化图像的特性,有利于往后进行降噪的操作,并有降维的效果。
204、调用预置的活体检测模型对正脸图像进行活体检测,得到活体检测结果,并根据活体检测结果和正脸图像对身份信息进行核验,得到身份核验结果;
具体的,对正脸图像进行图像分割,得到多个子图像;调用预置的活体检测模型对多个子图像进行图像特征提取,得到每个子图像的人脸纹理特征;根据每个子图像的人脸纹理特征判断正脸图像是否为活体人脸,得到活体检测结果;若活体检测结果为正脸图像是活体人脸,则将正脸图像和预置的信息数据库中的人脸白名单进行身份核验,得到身份核验结果,其中,身份核验结果包括:身份核验通过和身份核验不通过。
需要说明的是,在进行图像特征提取时,服务器接收到该人脸图像好后,首先对人脸进行预处理,包括提取人脸图像的2D关键点。根据关键点将图像的人脸矫正对齐到一标准的参考坐标系下,得到归一化的人脸图像,对人脸图像进行语义分割得到至少一个语义分割区域及遮挡物的区域,所述语义分割区域包括眼睛区域、眉毛区域、鼻子区域、嘴巴区域,语义分割区域中任一区域也可能为被遮挡物遮挡的区域,也可能是未被遮挡物遮挡的区域即有效人脸区域,遮挡物包括眼镜、口罩或其他遮挡物遮挡的区域,进而得到每个子图像的人脸纹理特征,最终服务器根据每个子图像的人脸纹理特征判断正脸图像是否为活体人脸,得到活体检测结果,若活体检测结果为正脸图像是活体人脸,通过训练后的活体检测模型对接收到的待识别图像进行人脸活体检测,最终得到活体检测结果,并对该正脸图像进行身份信息匹配,通过预置的数据库进行相似度匹配,得到对应的身份核验结果,对归一化的人脸图像进行进一步的处理,包括但不限于去模糊、超分辨、光照均衡等预处理操作,从而提升图像质量,提高3D人脸模型系数和相对相机坐标系的外参数的获取精度。
可选的,若活体检测结果为正脸图像不是活体人脸,则根据正脸图像生成告警信息;将告警信息发送至预置的云监控平台,通过云监控平台启动设备预警任务并下发设备预警策略;根据设备预警策略对告警信息进行告警处理,并生成处理结果。
其中,若活体检测结果为正脸图像不是活体人脸,则根据正脸图像生成告警信息,需要说明的是,若上述正脸图像为非活体人脸,则进行非活体类型判断,其中,上述非活体类型包括但不限于照片、视频、纸张等类型,进而服务器根据上述非活体类型进行告警信息生成,确定对应的告警信息,最终服务器通过云监控平台启动设备预警任务并下发设备预警策略,需要说明的是,在进行设备预警策略生成时,服务器对上述非活体类型进行判断,并实时采集周围环境图像,以进一步判读当前周围环境参数,并实时报警,最终生成对应的处理结果,通过对上述非活体类型进行判断,并实时采集周围环境图像,以进一步判读当前周围环境参数,并实时报警,可以进一步提升人脸识别测温时的准确度。
205、若身份核验结果为身份核验通过,则对正脸图像进行测温距离检测,得到距离检测结果,并根据距离检测结果获取正脸图像对应的温度数据,其中,温度数据包括多个预设温度采集点位对应的温度值;
具体的,若身份核验结果为身份核验通过,则计算正脸图像与用于室外人脸识别测温一体机之间的距离,得到目标距离;判断目标距离是否符合预设测温范围,得到距离检测结果,其中,距离检测结果包括:符合和不符合;若距离检测结果为符合,则根据多个预设温度采集点位获取正脸图像对应的温度值,得到温度数据。
其中,计算人体到相机的距离包括:根据人脸识别中检测到的人脸,得到人体头部垂直长度,根据人体头部垂直长度计算人体头全高数值S,在本实施例中,获取到的图像帧其中一个图像帧的人体头部垂直所占像元数a为90,根据像元高度和像元数可以得到人体头全高数值S=a*b=1.53mm,具体的,在本实施例中,人体头全高数值是采用GBT 2428-1998成年人头面部尺寸标准,设本实施例中,该图像帧内进行人脸检测的用户为女性,根据GBT 2428-1998成年人头面部尺寸标准可查得女性的头全高为216mm,因此能够计算出该图像帧中人体到相机的距离L为4.9m,在服务器得到目标距离;之后,判断目标距离是否符合预设测温范围,得到距离检测结果,其中,距离检测结果包括:符合和不符合;若距离检测结果为符合,则根据多个预设温度采集点位获取正脸图像对应的温度值,得到温度数据,具体的,根据每一拍摄距离下对应的视频进行人脸识别包括:在标准测温间距和与所述标准测温间距不同的测温间距下进行人脸识别,在本实施例中,标准测温间距取1-4米,在标准测温间距下测得的温度即是人体表面温度,现有技术中使用单目视觉测距的测量精度不高,因此本发明使用人脸识别测距,能够大大提高测距精度,从而对温度进行距离补偿,减少测温误差。
206、若距离检测结果为不符合,则根据目标距离生成距离调整方案;
207、对距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至目标距离符合预设测温范围;
208、对温度数据和正脸图像进行数据融合,得到融合图像,并对融合图像进行脸部特征区域校正,得到标准图像;
具体的,若距离检测结果为不符合,则根据目标距离生成距离调整方案,对用户进行提示,也即提升靠近或远离等信息,并对距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至目标距离符合预设测温范围时,服务器停止语音提示,据候选区域矩形框A和候选区域矩形框B的起始行、终止行、起始列、终止列判断两者是否满足融合条件,若是,则进行融合,否则,直接将原更新后的候选区域矩形框作为融合后的候选区域矩形框,当服务器得到融合图像后,服务器对融合图像进行脸部特征区域矫正,需要说明的是,服务器在进行脸部特征区域校正是通过预置的脸部特征模板图进行区域校正的,首先服务器判断偏差值,进而服务器根据偏差值进行脸部特征区域校正,得到标准图像,服务器则根据目标距离生成距离调整方案,对用户进行提示,也即提升靠近或远离等信息,并对距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,可以有效提升在进行人脸识别及测温数据时的数据采集有效性,降低无用数据的概率,提升人脸识别及测温的效率。
209、根据标准图像计算人物真实温度,并根据人物真实温度生成温度检测结果,以及对温度检测结果和身份核验结果进行数据关联存储。
具体的,根据标准图像生成多个温度连通区域,其中,多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算主连通区域和多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、主连通区域的温度平均数和多个次连通区域的温度平均数计算标准图像对应的人物真实温度;判断人物真实温度是否超过预设温度阈值,得到温度检测结果;对温度检测结果和身份核验结果进行数据关联存储。
其中,上述温度连通区域主要分为主连通区域和次连通区域,需要说明的是,主连通区域主要指的是正脸图像中的额头、鼻子、嘴唇等主要器官特征区域,次连通区域主要指的是耳朵,下巴等次要特征区域,本发明实施例中,服务器分别计算各连通区域的温度平均值,并根据预设的温度权重系数,本发明实施例中,主连通区域的权重系数为0.8,各次连通区域的权重系数的和为0.2,具体的,服务器根据预设的温度权重系数、主连通区域的温度平均数和多个次连通区域的温度平均数计算标准图像对应的人物真实温度;判断人物真实温度是否超过预设温度阈值,得到温度检测结果;对温度检测结果和身份核验结果进行数据关联存储,本发明实例中,服务器分别计算各连通区域的温度平均值,并根据预设的温度权重系数,本发明实施例中,主连通区域的权重系数为0.8,通过设置不同区域的权重系数,可以提升人体温度计算时的准确度。
本发明实施例中,基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对视频数据进行视频图像提取,得到多个视频图像,并对多个视频图像进行人物检测,得到多个人物图像,其中,多个人物图像为携带有人物信息的图像;对多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取多个人物图像中的正脸图像;调用预置的活体检测模型对正脸图像进行活体检测,得到活体检测结果,并根据活体检测结果和正脸图像对身份信息进行核验,得到身份核验结果;若身份核验结果为身份核验通过,则对正脸图像进行测温距离检测,得到距离检测结果,并根据距离检测结果获取正脸图像对应的温度数据,其中,温度数据包括多个预设温度采集点位对应的温度值;对温度数据和正脸图像进行数据融合,得到融合图像,并对融合图像进行脸部特征区域校正,得到标准图像;根据标准图像计算人物真实温度,并根据人物真实温度生成温度检测结果,以及对温度检测结果和身份核验结果进行数据关联存储。本发明通过实时采集人物的正脸图像,并对图像进行占比计算和活体检测,能够更加高效的对人员进行检测,检测可以实现实时观测与自动控制,最后对温度检测结果和身份核验结果进行数据关联存储,可以实现人员的数据有效监控,进而提高了人脸识别测温的效率。
上面对本发明实施例中用于室外人脸识别测温方法进行了描述,下面对本发明实施例中用于室外人脸识别测温装置进行描述,请参阅图3,本发明实施例中用于室外人脸识别测温装置一个实施例包括:
采集模块301,用于基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
检测模块302,用于对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;
计算模块303,用于对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;
核验模块304,用于调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;
获取模块305,用于若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;
融合模块306,用于对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;
存储模块307,用于根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。
本发明实施例中,基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。本发明通过实时采集人物的正脸图像,并对图像进行占比计算和活体检测,能够更加高效的对人员进行检测,检测可以实现实时观测与自动控制,最后对温度检测结果和身份核验结果进行数据关联存储,可以实现人员的数据有效监控,进而提高了人脸识别测温的效率。
请参阅图4,本发明实施例中用于室外人脸识别测温装置另一个实施例包括:
采集模块301,用于基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
检测模块302,用于对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;
计算模块303,用于对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;
核验模块304,用于调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;
获取模块305,用于若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;
融合模块306,用于对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;
存储模块307,用于根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。
可选的,所述计算模块303具体用于:基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对所述人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,所述特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据所述特征点命中率生成所述人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将所述人物图像作为正脸图像并输出。
可选的,所述核验模块304具体用于:对所述正脸图像进行图像分割,得到多个子图像;调用预置的活体检测模型对所述多个子图像进行图像特征提取,得到每个子图像的人脸纹理特征;根据每个子图像的人脸纹理特征判断所述正脸图像是否为活体人脸,得到活体检测结果;若所述活体检测结果为所述正脸图像是活体人脸,则将所述正脸图像和预置的信息数据库中的人脸白名单进行身份核验,得到身份核验结果,其中,所述身份核验结果包括:身份核验通过和身份核验不通过。
可选的,所述用于室外人脸识别测温装置还包括:
预警模块308,用于若所述活体检测结果为所述正脸图像不是活体人脸,则根据所述正脸图像生成告警信息;将所述告警信息发送至预置的云监控平台,通过所述云监控平台启动设备预警任务并下发设备预警策略;根据所述设备预警策略对所述告警信息进行告警处理,并生成处理结果。
可选的,所述获取模块305具体用于:若所述身份核验结果为身份核验通过,则计算所述正脸图像与所述用于室外人脸识别测温一体机之间的距离,得到目标距离;判断所述目标距离是否符合预设测温范围,得到距离检测结果,其中,所述距离检测结果包括:符合和不符合;若所述距离检测结果为符合,则根据多个预设温度采集点位获取所述正脸图像对应的温度值,得到温度数据。
可选的,所述用于室外人脸识别测温装置还包括:
识别模块309,用于若所述距离检测结果为不符合,则根据所述目标距离生成距离调整方案;对所述距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至所述目标距离符合预设测温范围。
可选的,所述存储模块307具体用于:根据所述标准图像生成多个温度连通区域,其中,所述多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算所述主连通区域和所述多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、所述主连通区域的温度平均数和多个次连通区域的温度平均数计算所述标准图像对应的人物真实温度;判断所述人物真实温度是否超过预设温度阈值,得到温度检测结果;对所述温度检测结果和所述身份核验结果进行数据关联存储。
本发明实施例中,基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储。本发明通过实时采集人物的正脸图像,并对图像进行占比计算和活体检测,能够更加高效的对人员进行检测,检测可以实现实时观测与自动控制,最后对温度检测结果和身份核验结果进行数据关联存储,可以实现人员的数据有效监控,进而提高了人脸识别测温的效率。
上面图3和图4从模块化功能实体的角度对本发明实施例中的用于室外人脸识别测温装置进行详细描述,下面从硬件处理的角度对本发明实施例中用于室外人脸识别测温设备进行详细描述。
图5是本发明实施例提供的一种用于室外人脸识别测温设备的结构示意图,该用于室外人脸识别测温设备500可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processing units,CPU)510(例如,一个或一个以上处理器)和存储器520,一个或一个以上存储应用程序533或数据532的存储介质530(例如一个或一个以上海量存储设备)。其中,存储器520和存储介质530可以是短暂存储或持久存储。存储在存储介质530的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对用于室外人脸识别测温设备500中的一系列指令操作。更进一步地,处理器510可以设置为与存储介质530通信,在用于室外人脸识别测温设备500上执行存储介质530中的一系列指令操作。
用于室外人脸识别测温设备500还可以包括一个或一个以上电源540,一个或一个以上有线或无线网络接口550,一个或一个以上输入输出接口560,和/或,一个或一个以上操作系统531,例如Windows Serve,Mac OS X,Unix,Linux,FreeBSD等等。本领域技术人员可以理解,图5示出的用于室外人脸识别测温设备结构并不构成对用于室外人脸识别测温设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
本发明还提供一种用于室外人脸识别测温设备,所述用于室外人脸识别测温设备包括存储器和处理器,存储器中存储有计算机可读指令,计算机可读指令被处理器执行时,使得处理器执行上述各实施例中的所述用于室外人脸识别测温方法的步骤。
本发明还提供一种计算机可读存储介质,该计算机可读存储介质可以为非易失性计算机可读存储介质,该计算机可读存储介质也可以为易失性计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行所述用于室外人脸识别测温方法的步骤。
进一步地,计算机可读存储介质可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据区块链节点的使用所创建的数据等。
本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块,每一个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (8)

1.一种用于室外人脸识别测温方法,其特征在于,所述用于室外人脸识别测温方法包括:
基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;
对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;其中,所述对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像,包括:基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对所述人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,所述特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据所述特征点命中率生成所述人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将所述人物图像作为正脸图像并输出;
调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;
若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;
对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;
根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储;其中,所述根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储,包括:根据所述标准图像生成多个温度连通区域,其中,所述多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算所述主连通区域和所述多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、所述主连通区域的温度平均数和多个次连通区域的温度平均数计算所述标准图像对应的人物真实温度;判断所述人物真实温度是否超过预设温度阈值,得到温度检测结果;对所述温度检测结果和所述身份核验结果进行数据关联存储。
2.根据权利要求1所述的用于室外人脸识别测温方法,其特征在于,所述调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果,包括:
对所述正脸图像进行图像分割,得到多个子图像;
调用预置的活体检测模型对所述多个子图像进行图像特征提取,得到每个子图像的人脸纹理特征;
根据每个子图像的人脸纹理特征判断所述正脸图像是否为活体人脸,得到活体检测结果;
若所述活体检测结果为所述正脸图像是活体人脸,则将所述正脸图像和预置的信息数据库中的人脸白名单进行身份核验,得到身份核验结果,其中,所述身份核验结果包括:身份核验通过和身份核验不通过。
3.根据权利要求2所述的用于室外人脸识别测温方法,其特征在于,所述用于室外人脸识别测温方法还包括:
若所述活体检测结果为所述正脸图像不是活体人脸,则根据所述正脸图像生成告警信息;
将所述告警信息发送至预置的云监控平台,通过所述云监控平台启动设备预警任务并下发设备预警策略;
根据所述设备预警策略对所述告警信息进行告警处理,并生成处理结果。
4.根据权利要求1所述的用于室外人脸识别测温方法,其特征在于,所述若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值,包括:
若所述身份核验结果为身份核验通过,则计算所述正脸图像与所述用于室外人脸识别测温一体机之间的距离,得到目标距离;
判断所述目标距离是否符合预设测温范围,得到距离检测结果,其中,所述距离检测结果包括:符合和不符合;
若所述距离检测结果为符合,则根据多个预设温度采集点位获取所述正脸图像对应的温度值,得到温度数据。
5.根据权利要求4所述的用于室外人脸识别测温方法,其特征在于,所述用于室外人脸识别测温方法还包括:
若所述距离检测结果为不符合,则根据所述目标距离生成距离调整方案;
对所述距离调整方案进行语音播报提示,并调用预置的目标检测模型对人物移动轨迹进行跟踪识别,直至所述目标距离符合预设测温范围。
6.一种用于室外人脸识别测温装置,其特征在于,所述用于室外人脸识别测温装置包括:
采集模块,用于基于预设的环境感知参数,通过预置室外人脸识别测温一体机中的图像采集终端实时监测预设监控区域的环境变化并拍摄环境变化时的视频数据;
检测模块,用于对所述视频数据进行视频图像提取,得到多个视频图像,并对所述多个视频图像进行人物检测,得到多个人物图像,其中,所述多个人物图像为携带有人物信息的图像;
计算模块,用于对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像;其中,所述对所述多个人物图像进行人脸区域占比计算,得到每个人物图像对应的人脸区域占比,并根据每个人物图像对应的人脸区域占比提取所述多个人物图像中的正脸图像,包括:基于预置的语义分割算法分别提取每个人物图像的人物轮廓,得到人物轮廓图像;根据预设的特征点对所述人物轮廓图像进行特征点命中率计算,得到特征点命中率,其中,所述特征点包括:两个肩部特征点、两个眼部特征点、两个耳朵特征点和顶部额头特征点;根据所述特征点命中率生成所述人物图像的人脸区域占比,得到每个人物图像对应的人脸区域占比;判断每个人物图像对应的人脸区域占比是否大于预置的人脸占比目标值;若是,则将所述人物图像作为正脸图像并输出;
核验模块,用于调用预置的活体检测模型对所述正脸图像进行活体检测,得到活体检测结果,并根据所述活体检测结果和所述正脸图像对身份信息进行核验,得到身份核验结果;
获取模块,用于若所述身份核验结果为身份核验通过,则对所述正脸图像进行测温距离检测,得到距离检测结果,并根据所述距离检测结果获取所述正脸图像对应的温度数据,其中,所述温度数据包括多个预设温度采集点位对应的温度值;
融合模块,用于对所述温度数据和所述正脸图像进行数据融合,得到融合图像,并对所述融合图像进行脸部特征区域校正,得到标准图像;
存储模块,用于根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储;其中,所述根据所述标准图像计算人物真实温度,并根据所述人物真实温度生成温度检测结果,以及对所述温度检测结果和所述身份核验结果进行数据关联存储,包括:根据所述标准图像生成多个温度连通区域,其中,所述多个温度连通区域包括:一个主连通区域和多个次连通区域;分别计算所述主连通区域和所述多个次连通区域的温度平均值,得到主连通区域的温度平均数和多个次连通区域的温度平均数;根据预设的温度权重系数、所述主连通区域的温度平均数和多个次连通区域的温度平均数计算所述标准图像对应的人物真实温度;判断所述人物真实温度是否超过预设温度阈值,得到温度检测结果;对所述温度检测结果和所述身份核验结果进行数据关联存储。
7.一种用于室外人脸识别测温设备,其特征在于,所述用于室外人脸识别测温设备包括:存储器和至少一个处理器,所述存储器中存储有指令;
所述至少一个处理器调用所述存储器中的所述指令,以使得所述用于室外人脸识别测温设备执行如权利要求1-5中任一项所述的用于室外人脸识别测温方法。
8.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现如权利要求1-5中任一项所述的用于室外人脸识别测温方法。
CN202210808704.6A 2022-07-11 2022-07-11 一种用于室外人脸识别测温方法及装置 Active CN114894337B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210808704.6A CN114894337B (zh) 2022-07-11 2022-07-11 一种用于室外人脸识别测温方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210808704.6A CN114894337B (zh) 2022-07-11 2022-07-11 一种用于室外人脸识别测温方法及装置

Publications (2)

Publication Number Publication Date
CN114894337A CN114894337A (zh) 2022-08-12
CN114894337B true CN114894337B (zh) 2022-09-27

Family

ID=82730074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210808704.6A Active CN114894337B (zh) 2022-07-11 2022-07-11 一种用于室外人脸识别测温方法及装置

Country Status (1)

Country Link
CN (1) CN114894337B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116259091B (zh) * 2023-01-18 2023-11-10 北京飞腾时光信息科技有限公司 一种静默活体检测的方法和装置
CN117146985A (zh) * 2023-11-01 2023-12-01 本溪钢铁(集团)信息自动化有限责任公司 一种基于多人人脸识别的测温方法及系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4702534B2 (ja) * 2004-09-21 2011-06-15 富士フイルム株式会社 画像処理装置、画像処理方法及び画像処理プログラム
CN102622588B (zh) * 2012-03-08 2013-10-09 无锡中科奥森科技有限公司 双验证人脸防伪方法及装置
CN111414831B (zh) * 2020-03-13 2022-08-12 深圳市商汤科技有限公司 监测方法及系统、电子设备和存储介质
CN113553878A (zh) * 2020-04-03 2021-10-26 天津中科虹星科技有限公司 一种具有活体验证功能的生物特征融合识别装置及方法
CN111579083B (zh) * 2020-05-13 2022-06-07 芋头科技(杭州)有限公司 基于红外图像人脸检测的体温测量的方法和装置
CN111797677B (zh) * 2020-05-13 2024-04-02 南京中科道置智能科技有限公司 一种基于面部虹膜识别和热成像技术的人脸识别活体检测方法
CN112229524A (zh) * 2020-10-27 2021-01-15 深圳英飞拓科技股份有限公司 一种体温筛查方法、装置、终端设备及存储介质
CN112525352A (zh) * 2020-11-24 2021-03-19 深圳市高巨创新科技开发有限公司 一种基于人脸识别的红外测温补偿方法及终端
CN112525355A (zh) * 2020-12-17 2021-03-19 杭州海康威视数字技术股份有限公司 图像处理方法、装置及设备
CN114360697A (zh) * 2021-12-15 2022-04-15 深圳市航通智能技术有限公司 远程防疫作业方法、系统、设备及存储介质
CN114519889A (zh) * 2022-02-23 2022-05-20 广州方硅信息技术有限公司 直播间的封面图像检测方法、装置、计算机设备及介质

Also Published As

Publication number Publication date
CN114894337A (zh) 2022-08-12

Similar Documents

Publication Publication Date Title
CN110110629B (zh) 面向室内环境控制的人员信息检测方法与系统
CN114894337B (zh) 一种用于室外人脸识别测温方法及装置
TWI383325B (zh) 臉部表情辨識
WO2019056988A1 (zh) 人脸识别方法及装置、计算机设备
CN105740778B (zh) 一种改进的三维人脸活体检测方法及其装置
JP4692526B2 (ja) 視線方向の推定装置、視線方向の推定方法およびコンピュータに当該視線方向の推定方法を実行させるためのプログラム
CN107766819B (zh) 一种视频监控系统及其实时步态识别方法
US20090262989A1 (en) Image processing apparatus and method
US11804071B2 (en) Method for selecting images in video of faces in the wild
JP4936491B2 (ja) 視線方向の推定装置、視線方向の推定方法およびコンピュータに当該視線方向の推定方法を実行させるためのプログラム
CN105022999A (zh) 一种人码伴随实时采集系统
US20200058136A1 (en) Line-of-sight estimation device, line-of-sight estimation method, and program recording medium
JP2000251078A (ja) 人物の3次元姿勢推定方法および装置ならびに人物の肘の位置推定方法および装置
CN112200056A (zh) 人脸活体检测方法、装置、电子设备及存储介质
JP4203279B2 (ja) 注目判定装置
JP2014064083A (ja) 監視装置及び方法
JP3970573B2 (ja) 顔画像認識装置および方法
CN112801038B (zh) 一种多视点的人脸活体检测方法及系统
CN112633217A (zh) 基于三维眼球模型计算视线方向的人脸识别活体检测方法
WO2020261403A1 (ja) 身長推定装置、身長推定方法及びプログラムが格納された非一時的なコンピュータ可読媒体
KR100951315B1 (ko) Aam을 이용한 얼굴검출 방법 및 장치
JP2005149145A (ja) 物体検出装置、物体検出方法、およびコンピュータプログラム
WO2021084687A1 (ja) 画像処理装置、画像処理方法及び画像処理プログラムが格納された非一時的なコンピュータ可読媒体
CN112347904A (zh) 基于双目深度和图片结构的活体检测方法、装置及介质
JP7152651B2 (ja) プログラム、情報処理装置、及び情報処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230602

Address after: 538000 No. 22, Youyi Avenue, Gangkou District, Fangchenggang City, Guangxi Zhuang Autonomous Region

Patentee after: BEIBU GULF PORT FANGCHENGGANG TERMINAL Co.,Ltd.

Address before: 518000 room 1a05, 1f, building D, youth entrepreneurship Park, Jianshe East Road, Qinghua community, Longhua street, Longhua District, Shenzhen, Guangdong

Patentee before: Shenzhen Dashu Artificial Intelligence Technology Co.,Ltd.

Patentee before: BEIBU GULF PORT FANGCHENGGANG TERMINAL Co.,Ltd.

Patentee before: Guangxi kaishengyi Electronic Technology Co.,Ltd.