CN111652314A - 温度检测方法、装置、计算机设备和存储介质 - Google Patents
温度检测方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN111652314A CN111652314A CN202010499094.7A CN202010499094A CN111652314A CN 111652314 A CN111652314 A CN 111652314A CN 202010499094 A CN202010499094 A CN 202010499094A CN 111652314 A CN111652314 A CN 111652314A
- Authority
- CN
- China
- Prior art keywords
- face
- color image
- color
- thermal
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
Abstract
本申请涉及一种温度检测方法、装置、计算机设备和存储介质。所述方法包括:获取所述彩色摄像头采集到的彩色图像序列,以及所述热成像摄像头采集到的热图像序列;所述彩色图像序列中包括的多帧彩色图像与所述热图像序列中包括的多帧热图像按照采集时间一一对应;对各所述彩色图像进行检测,得到各所述彩色图像中待测温的第一人脸;根据所述彩色摄像头和所述热成像摄像头之间的位置关系,将各所述第一人脸映射到对应的热图像中,得到各所述热图像中的第二人脸;对各所述热图像中的第二人脸进行温度计算,得到各所述第二人脸对应的目标温度。采用本方法能够避免背景物体对被测对象的干扰,从而提高温度检测的准确度。
Description
技术领域
本申请涉及图像处理技术领域,特别是涉及一种温度检测方法、装置、计算机设备和存储介质。
背景技术
热成像技术,是指利用红外探测器和光学成像物镜接收被测对象的红外辐射能量,进而根据红外辐射能量的分布图形生成热像图。其中,热图像上的不同颜色可以代表被测对象的不同温度。对于车站、机场等人群密集的地方,采用热成像技术进行大规模的温度测量,效率很高。
但是在某些场景下,会出现热图像中无法分辨被测对象的情况。比如,阳光或灯光照射背景物体,使得背景物体与被测对象在热图像中界限不分明。此时检测到的温度可能是背景物体的温度,而不是被测对象的温度,因此检测到的温度不够准确。
发明内容
基于此,有必要针对上述技术问题,提供一种能够避免背景物体干扰,提高检测准确度的温度检测方法、装置、计算机设备和存储介质。
一种温度检测方法,应用于温度检测系统,该温度检测系统包括彩色摄像头和热成像摄像头,该方法包括:
获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
在其中一个实施例中,上述对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸,包括:
将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;
对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;
对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
在其中一个实施例中,上述对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸,包括:
将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,上述对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸,包括:
将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;
将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,在上述得到各第一彩色图像中的第一人脸之后,该方法还包括:
针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;
根据比对结果,对待测温的第一人脸进行更新。
在其中一个实施例中,上述将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果,包括:
针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;
若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;
若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
在其中一个实施例中,上述根据比对结果,对待测温的第一人脸进行更新,包括:
若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;
若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
在其中一个实施例中,上述对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度,包括:
针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;
根据排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,在上述根据排在第一位的像素值,确定第二人脸对应的目标温度之前,该方法还包括:
去除排位靠前的预设个数的像素值;
对应地,上述根据排在第一位的像素值,确定第二人脸对应的目标温度,包括:
根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,上述根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸,包括:
根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;
针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
在其中一个实施例中,在上述得到各第二人脸对应的目标温度之后,该方法还包括:
若目标温度大于预设温度阈值,则生成报警信息。
一种温度检测装置,部署在温度检测系统,该温度检测系统包括彩色摄像头和热成像摄像头,该装置包括:
图像获取模块,用于获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
人脸检测模块,用于对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
人脸映射模块,用于根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
温度检测模块,用于对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
在其中一个实施例中,上述人脸检测模块,具体用于将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
在其中一个实施例中,上述人脸检测模块,具体用于将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,上述人脸检测模块,具体用于将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,该装置还包括:
比对彩色图像确定模块,用于针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
比对模块,用于将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;
更新模块,用于根据比对结果,对待测温的第一人脸进行更新。
在其中一个实施例中,上述比对模块,具体用于针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
在其中一个实施例中,上述更新模块,具体用于若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
在其中一个实施例中,上述温度检测模块,具体用于针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;根据排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,该装置还包括:
像素值去除模块,用于去除排位靠前的预设个数的像素值;
对应地,上述温度检测模块,具体用于根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,上述人脸映射模块,具体用于根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
在其中一个实施例中,该装置还包括:
报警信息生成模块,若目标温度大于预设温度阈值,则生成报警信息。
一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以下步骤:
获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
上述温度检测方法、装置、计算机设备和存储介质,获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。通过本申请实施例,在彩色图像中进行人脸检测,然后将待测温的人脸映射到热图像上进行测温,可以有效地区分被测对象和背景物体,从而避免背景物体的干扰,使得测温更加准确。
附图说明
图1为一个实施例中温度检测方法的应用环境图;
图2为一个实施例中温度检测方法的流程示意图;
图3为一个实施例中对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸步骤的流程示意图;
图4为另一个实施例中温度检测方法的流程示意图;
图5为一个实施例中标定坐标映射关系的结构示意图;
图6为一个实施例中坐标映射的示意图;
图7为一个实施例中温度检测装置的结构框图;
图8为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
热成像技术,是指利用红外探测器和光学成像物镜接收被测对象的红外辐射能量,进而根据红外辐射能量的分布图形生成热像图。在车站、机场等人群密集的地方采用热成像技术进行大规模的温度测量,可以提高测温效率,从而很好地应对疫情。
现有技术中,热成像技术所形成的热图像容易受到干扰而导致测温不准确。而本申请实施例中,获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。通过本申请实施例,在彩色图像中进行人脸检测,然后将待测温的人脸映射到热图像上进行测温,可以有效地区分被测对象和背景物体,从而避免背景物体的干扰,使得测温更加准确。
本申请提供的温度检测方法,可以应用于如图1所示的应用环境中。其中,温度检测系统包括彩色摄像头101和热成像摄像头102,彩色摄像头101和热成像摄像头102均用于视频图像采集,彩色摄像头101采集到的是彩色图像,热成像摄像头102采集到的是热图像。其中,彩色摄像头101和热成像摄像头102的参数,比如方位、高度、镜头焦距、摄像头视角等,均对应设置,以便彩色摄像头101和热成像摄像头102的采集范围相同。温度检测系统还可以包括终端103和服务器104,终端103用于显示彩色图像和热图像以及报警信息,服务器104用于根据彩色图像和热图像进行温度检测。其中,彩色摄像头101、热成像摄像头102和终端103均通过网络与服务器104进行通信,终端103可以但不限于是各种个人计算机、笔记本电脑、智能手机和平板电脑,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种温度检测方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
步骤201,获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应。
本申请实施例中,服务器获取彩色摄像头采集到的第一视频数据,并从第一视频数据中获取多帧彩色图像组成彩色图像序列。同时,服务器获取热成像摄像头采集到的第二视频数据,并从第二视频数据中获取多帧热图像组成热图像序列。其中,彩色图像序列中的多帧彩色图像,与热图像序列中的多帧热图像按照采集时间一一对应。
例如,服务器获取到100帧彩色图像和100帧热图像,其中彩色图像1与热图像1的采集时间相同,彩色图像2与热图像2的采集时间相同。这样,便于后续根据采集时间进行人脸映射。本申请实施例对彩色图像序列中彩色图像的数量,以及热图像序列中热图像的数量不作详细限定,可以根据实际情况进行设置。
在实际应用中,通常是彩色摄像头和热成像摄像头实时采集,服务器实时获取彩色摄像头和热成像摄像头采集到的视频数据。
步骤202,对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸。
本申请实施例中,可以对彩色图像序列中的每帧彩色图像均进行人脸检测,得到各彩色图像中待测温的第一人脸。具体地,将各彩色图像依次输入到预先训练的人脸检测模型中,得到人脸检测模型依次输出的各彩色图像中第一人脸的位置坐标。
可以理解地,应用在人群密集的场景下,各彩色图像中待测温的第一人脸通常为多个。
步骤203,根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸。
本申请实施例中,由于彩色摄像头和热成像摄像头的方位、高度以及摄像头视角等参数是对应设置的,因此可以根据彩色摄像头和热成像摄像头之间的位置关系,得到彩色图像中各坐标点与热图像中各坐标点之间的对应关系。针对各彩色图像,在得到待测温的第一人脸的位置坐标后,根据上述对应关系计算出热图像中第二人脸的位置坐标。可见,通过映射可以准确定位出被测对象,从而有效地将被测对象与背景物体区分开,避免背景物体对测温的干扰。
步骤204,对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
本申请实施例中,在设置热成像摄像头时,热成像摄像头采集到的热图像与被测对象的红外辐射能量具有对应关系,即热图像与被测对象的温度具有对应关系。在确定热图像中第二人脸的位置坐标之后,根据上述对应关系可以计算出各第二人脸对应的目标温度。本申请实施例对上述对应关系不作详细限定,可以根据实际情况进行设置。
上述温度检测方法中,获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。通过本申请实施例,在彩色图像中进行人脸检测,然后将待测温的人脸映射到热图像上进行测温,可以有效地区分被测对象和背景物体,从而避免背景物体的干扰,使得测温更加准确。
在人群密集场所进行温度检测时,通常是一个被测对象进入彩色摄像头和热成像摄像头的采集范围,短暂停留后离开采集范围;之后又有新的被测对象进入彩色摄像头和热成像摄像头的采集范围,同样短暂停留之后离开采集范围。对于这种情况,可以根据彩色图像追踪同一被测对象,通过同一被测对象的多次测温结果提高温度检测的准确度。在一个实施例中,如图3所示,本申请实施例涉及对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸的一种可选过程,在上述实施例的基础上,具体可以包括如下步骤:
步骤301,将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像。
本申请实施例中,可以将彩色图像划分为进行人脸检测的第一彩色图像和进行人脸追踪的第二彩色图像。其中,第一预设帧位包括起始帧位和第一预设数量整数倍的帧位,第二预设帧位包括除第一预设帧位之外的、第二预设数量整数倍的帧位,并且第一预设数量大于第二预设数量。
例如,第一预设数量为10,第二预设数量为2,则第1、10、20……为第一预设帧位,第2、4、6、8、12……为第二预设帧位。又如,第一预设数量为5,第二预设数量为1,则第1、5、10、15……为第一预设帧位,第2、3、4、6……为第二预设帧位。本申请实施例对第一预设数量和第二预设数量不作详细限定,可以根据实际情况进行设置。
步骤302,对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸。
本申请实施例中,在筛选出第一彩色图像后,对各第一彩色图像进行人脸检测。具体地,将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
例如,将第一彩色图像1输入到人脸检测网络中,人脸检测网络输出第一彩色图像1,并且第一彩色图像1中标记有多个人脸检测框,各人脸检测框中的人脸为第一人脸。以此类推,得到其余第一彩色图像中的第一人脸。
在其中一个实施例中,训练人脸检测网络的过程包括:获取第一样本集;基于第一样本集进行神经网络的训练,得到人脸检测网络。其中,第一样本集中包括多个第一样本图像和各第一样本图像的标注;第一样本图像为存在人脸的彩色图像,各第一样本图像的标注为第一样本图像中各人脸的位置信息,位置信息包括人脸检测框的左上角点坐标、宽和高。本申请实施例对位置信息不作详细限定,可以根据实际情况进行设置。
在实际应用中,该人脸检测网络可以采用CenterNet,本申请实施例对此不作详细限定,可以根据实际情况进行设置。
步骤303,对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
本申请实施例中,对于各第二彩色图像,不采用人脸检测方式,而是采用人脸跟踪方式得到第一人脸。具体地,将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
例如,在彩色图像序列中,第1帧为第一彩色图像1,第2帧为第二彩色图像1,第4帧为第二彩色图像2。先对第一彩色图像1进行人脸检测,得到第一彩色图像1中第一人脸的位置。然后,对于第二彩色图像1,在第二彩色图像1之前与第二彩色图像1相邻的是第一彩色图像1,则将第一彩色图像1确定为追踪彩色图像;然后将第一彩色图像1和第二彩色图像1输入到预先训练的人脸跟踪网络中,人脸跟踪网络输出第二彩色图像1,并且第二彩色图像1中标记有多个人脸检测框,各人脸检测框为追踪第一彩色图像1中的各第一人脸得到的。之后,对于第二彩色图像2,在第二彩色图像2之前与第二彩色图像2相邻的是第二彩色图像1,则将第二彩色图像1确定为追踪彩色图像;之后,将第二彩色图像1和第二彩色图像2输入到人脸跟踪网络中,人脸跟踪网络输出第二彩色图像2,并且第二彩色图像2中标记有多个人脸检测框,各人脸检测框为追踪第二彩色图像1中的各第一人脸得到的。以此类推,得到各第二彩色图像中的第一人脸。
可以理解地,第二彩色图像中的第一人脸是进行人脸追踪而得到的,因此可以更好地追踪被测对象,从而追踪到同一被测对象的多次测温结果,进而提高测温的准确度。
在其中的一个实施例中,人脸追踪网络的训练过程包括:获取第二样本集,基于第二样本集进行神经网络的训练,得到人脸追踪网络。其中,第二样本集中包括多个第二样本图像和各第二样本图像的标注;第二样本图像为带有人脸检测框的彩色图像,各第二样本图像的标注包括人脸检测框的宽和高各扩展n倍的彩色图像,其中n为正整数。同时,为了使训练出的人脸追踪网络追踪到的第一人脸更加准确,可以对标注中的人脸检测框的位置增加随机扰动,即人脸的中心点可以不出现在人脸检测框的中心位置。
在实际应用中,上述人脸追踪网络可以采用SiamRPN++,本申请实施例对此不作详细限定,可以根据实际情况进行设置。
上述对各第一彩色图像均重新进行人脸检测,对被测对象的追踪出现了中断的情况。为了解决这个问题,本实施例还可以包括如下步骤:
步骤304,针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像。
本申请实施例中,对于除第一帧第一彩色图像之外的其他第一彩色图像,确定一个比对彩色图像,从而根据比对彩色图像进行人脸追踪。具体地,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像。
例如,在彩色图像序列中,第1帧和第10帧为第一彩色图像,第2、4、6、8帧为第二彩色图像。其中,第10帧为第一彩色图像2,第8帧为第二彩色图像4,第二彩色图像4在第一彩色图像2之前并与第一彩色图像2相邻,则将第二彩色图像4确定为比对彩色图像。
步骤305,将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果。
本申请实施例中,确定比对彩色图像之后,将第一彩色图像与比对彩色图像进行人脸对比,对比对彩色图像中的第一人脸进行追踪,并确定是否出现新的第一人脸。
具体地,针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中的多个第一人脸之间的交并比,得到多个交并比;若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
例如,第一彩色图像中有3个第一人脸,分别为第一人脸1、2、3;比对彩色图像中有2个第一人脸,分别为第一人脸4、5。对于第一人脸1,先计算第一人脸1与第一人脸4和第一人脸5之间的交并比,得到交并比1、2;如果交并比1大于或等于预设交并比,则确定第一人脸1与第一人脸4为同一人脸;如果交并比2大于或等于预设交并比,则确定第一人脸1与第一人脸5为同一人脸;如果2个交并比均小于预设交并比,则确定第一人脸1为新出现的第一人脸。以此类推,确定第一彩色图像中其他第一人脸是追踪到的第一人脸还是新出现的第一人脸。本申请实施例对预设交并比不作详细限定,可以根据实际情况进行设置。
步骤306,根据比对结果,对待测温的第一人脸进行更新。
本申请实施例中,在得到比对结果之后,根据比对结果对待测温的第一人脸进行更新。具体地,若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
例如,第一人脸1与第一人脸4为同一人脸,则用第一人脸1的位置替换掉第一人脸4的位置,可以提高后续测温的准确度。第一人脸3是新出现的第一人脸,则将第一人脸3添加到待测温的第一人脸中。
上述对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸的过程中,将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸;针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;根据比对结果,对待测温的第一人脸进行更新。通过本申请实施例,不仅得到各彩色图像中的第一人脸,而且对第一人脸进行了追踪,这样,就可以追踪到同一被测对象,从而在后续的测温中对同一被测对象进行多次测温,并根据多次测温结果确定该被测对象是否真正超温,因而提高了温度检测的准确度。
在一个实施例中,如图4所示,涉及温度检测方法一种可选过程,在上述实施例的基础上,具体可以包括如下步骤:
步骤401,获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应。
步骤402,将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像。
步骤403,将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
步骤404,将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
步骤405,针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像。
步骤406,对第一彩色图像与比对彩色图像进行人脸对比,得到比对结果。
在其中一个实施例中,对第一彩色图像与比对彩色图像进行人脸对比,得到比对结果,包括:针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中的多个第一人脸之间的交并比,得到多个交并比;若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
步骤407,根据比对结果,对待测温的第一人脸进行更新。
在其中一个实施例中,根据比对结果,对待测温的第一人脸进行更新,包括:若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
步骤408,根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
本申请实施例中,确定坐标映射关系时可以采用实际标定的方式。如图5所示,将一个预设尺寸的平板加热并放置在两个摄像头能完整拍摄的位置,其中预设尺寸可以是边长为一米;之后,彩色摄像头采集彩色图像,热成像摄像头采集热图像;接着,确定上述平板的四个角在彩色图像中的位置坐标,以及上述平板的四个角在热图像中的位置坐标;再根据如下公式计算得到坐标映射关系。
其中,(u,v)为平板在彩色图像中各点的位置坐标,根据公式(1)可以得到如下:
x=a11u+a12v+a13------------(2)
y=a21u+a22v+a23----------(3)
z=a31u+a32v+a33-----------(4)
根据公式(2)(3)(4)可以得到如下:
其中,(x’,y’)为平板在热图像中各点的位置坐标。
如图6所示,彩色图像中第一人脸的一个点的位置坐标为(u1,v1),根据上述公式(5)(6),则可以得到热图像中的一个点的位置坐标为(x’1,y’1)。以此类推,将彩色图像中第一人脸的各点均映射到对应的热图像中,则可以得到热图像中第二人脸的各点的位置坐标。
步骤409,针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;根据排在第一位的像素值,确定第二人脸对应的目标温度。
本申请实施例中,在进行温度计算时,对于每个第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列,得到排在第一位的像素值。其中,排序可以采用桶排序法,本申请实施例对此不作详细限定,可以根据实际情况进行设置。由于像素值与温度具有对应关系,在得到排在第一位的像素值之后,可以根据排在第一位的像素值得到第二人脸对应的目标温度。
在其中一个实施例中,为了增加准确性,先去除排位靠前的预设个数的像素值;然后,根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
例如,去除排位靠前的10个像素值,或者去除排位靠前的1%的像素值;之后,再根据剩余像素值中排在第一位的像素值确定目标温度。本申请实施例对预设个数不作详细限定,可以根据实际情况进行设置。
步骤410,若目标温度大于预设温度阈值,则生成报警信息。
本申请实施例中,在得到第二人脸对应的目标温度之后,判断目标温度是否大于预设温度阈值;如果目标温度大于预设温度阈值,则生成报警信息;如果小于或等于预设温度阈值,则不生成报警信息。例如,预设温度阈值为37.5℃,目标温度为37.9℃,则生成报警信息。
在实际应用中,服务器在生成报警信息之后,将报警信息发送到终端。终端接收到报警信息之后,可以在彩色图像的第一人脸上和热图像的第二人脸上均显示目标温度并标注报警,也可以发出报警声音。本申请实施例对此不作详细限定,可以根据实际情况进行设置。
可以理解地,在彩色图像的第一人脸上显示报警的目标温度,可以使工作人员快速锁定超温的被测对象,从而及时采取相应地措施。
上述温度检测方法中,服务器彩色图像序列和热图像序列;对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;然后,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度,并在目标温度超出预设温度阈值时生成报警信息。通过本申请实施例,可以有效地区分被测对象和背景物体,从而避免背景物体的干扰,使得测温更加准确。进一步地,可以在测温过程中追踪被测对象,从而使工作人员快速锁定超温的被测对象,从而及时采取相应地措施。
应该理解的是,虽然图2-图4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-图4中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种温度检测装置,部署在温度检测系统,该温度检测系统包括彩色摄像头和热成像摄像头,该装置包括:
图像获取模块501,用于获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
人脸检测模块502,用于对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
人脸映射模块503,用于根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
温度检测模块504,用于对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
在其中一个实施例中,上述人脸检测模块,具体用于将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
在其中一个实施例中,上述人脸检测模块502,具体用于将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,上述人脸检测模块502,具体用于将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在其中一个实施例中,该装置还包括:
比对彩色图像确定模块,用于针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
比对模块,用于将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;
更新模块,用于根据比对结果,对待测温的第一人脸进行更新。
在其中一个实施例中,上述比对模块,具体用于针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
在其中一个实施例中,上述更新模块,具体用于若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
在其中一个实施例中,上述温度检测模块504,具体用于针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;根据排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,该装置还包括:
像素值去除模块,用于去除排位靠前的预设个数的像素值;
对应地,上述温度检测模块504,具体用于根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
在其中一个实施例中,上述人脸映射模块503,具体用于根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
在其中一个实施例中,该装置还包括:
报警信息生成模块,若目标温度大于预设温度阈值,则生成报警信息。
关于温度检测装置的具体限定可以参见上文中对于温度检测方法的限定,在此不再赘述。上述温度检测装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储温度检测数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种温度检测方法。
本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;
对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;
对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;
将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;
根据比对结果,对待测温的第一人脸进行更新。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;
若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;
若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;
若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;
根据排在第一位的像素值,确定第二人脸对应的目标温度。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
去除排位靠前的预设个数的像素值;
根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;
针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
若目标温度大于预设温度阈值,则生成报警信息。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取彩色摄像头采集到的彩色图像序列,以及热成像摄像头采集到的热图像序列;彩色图像序列中包括的多帧彩色图像与热图像序列中包括的多帧热图像按照采集时间一一对应;
对各彩色图像进行检测,得到各彩色图像中待测温的第一人脸;
根据彩色摄像头和热成像摄像头之间的位置关系,将各第一人脸映射到对应的热图像中,得到各热图像中的第二人脸;
对各热图像中的第二人脸进行温度计算,得到各第二人脸对应的目标温度。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
将彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;
对各第一彩色图像进行人脸检测,得到各第一彩色图像中的第一人脸;
对各第二彩色图像进行人脸跟踪,得到各第二彩色图像中的第一人脸。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
将第一彩色图像输入到预先训练的人脸检测网络中,得到人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
将第二彩色图像之前与第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;
将追踪彩色图像和第二彩色图像输入到预先训练的人脸跟踪网络中,得到人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,人脸检测框用于指示第一人脸的位置。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
针对除第一帧第一彩色图像之外的各第一彩色图像,将第一彩色图像之前与第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
将第一彩色图像与比对彩色图像进行人脸对比,得到比对结果;
根据比对结果,对待测温的第一人脸进行更新。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
针对每个第一彩色图像中的第一人脸,计算第一人脸和比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;
若其中一个交并比大于或等于预设交并比,则确定第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸;
若多个交并比均小于预设交并比,则确定第一彩色图像中的第一人脸为新出现的第一人脸。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
若第一彩色图像中的第一人脸与比对彩色图像中的第一人脸为同一人脸,则更新第一人脸的位置;
若第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
针对各第二人脸,将第二人脸中的像素值按照从大到小的顺序进行排列;
根据排在第一位的像素值,确定第二人脸对应的目标温度。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
去除排位靠前的预设个数的像素值;
根据去除预设个数的像素值之后排在第一位的像素值,确定第二人脸对应的目标温度。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据彩色摄像头和热成像摄像头之间的位置关系,确定坐标映射关系;
针对各第一人脸,根据坐标映射关系和第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
若目标温度大于预设温度阈值,则生成报警信息。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (14)
1.一种温度检测方法,其特征在于,应用于温度检测系统,所述温度检测系统包括彩色摄像头和热成像摄像头,所述方法包括:
获取所述彩色摄像头采集到的彩色图像序列,以及所述热成像摄像头采集到的热图像序列;所述彩色图像序列中包括的多帧彩色图像与所述热图像序列中包括的多帧热图像按照采集时间一一对应;
对各所述彩色图像进行检测,得到各所述彩色图像中待测温的第一人脸;
根据所述彩色摄像头和所述热成像摄像头之间的位置关系,将各所述第一人脸映射到对应的热图像中,得到各所述热图像中的第二人脸;
对各所述热图像中的第二人脸进行温度计算,得到各所述第二人脸对应的目标温度。
2.根据权利要求1所述的方法,其特征在于,所述对各所述彩色图像进行检测,得到各所述彩色图像中待测温的第一人脸,包括:
将所述彩色图像序列中第一预设帧位的彩色图像确定为第一彩色图像,第二预设帧位的彩色图像确定为第二彩色图像;
对各所述第一彩色图像进行人脸检测,得到各所述第一彩色图像中的第一人脸;
对各所述第二彩色图像进行人脸跟踪,得到各所述第二彩色图像中的第一人脸。
3.根据权利要求2所述的方法,其特征在于,所述对各所述第一彩色图像进行人脸检测,得到各所述第一彩色图像中的第一人脸,包括:
将所述第一彩色图像输入到预先训练的人脸检测网络中,得到所述人脸检测网络输出的标记有人脸检测框的第一彩色图像;其中,所述人脸检测框用于指示所述第一人脸的位置。
4.根据权利要求2所述的方法,其特征在于,所述对各所述第二彩色图像进行人脸跟踪,得到各所述第二彩色图像中的第一人脸,包括:
将所述第二彩色图像之前与所述第二彩色图像相邻的第一彩色图像或第二彩色图像确定为追踪彩色图像;
将所述追踪彩色图像和所述第二彩色图像输入到预先训练的人脸跟踪网络中,得到所述人脸跟踪网络输出的标记有人脸检测框的第二彩色图像;其中,所述人脸检测框用于指示所述第一人脸的位置。
5.根据权利要求2-4任一项所述的方法,其特征在于,在所述得到各所述第一彩色图像中的第一人脸之后,所述方法还包括:
针对除第一帧第一彩色图像之外的各所述第一彩色图像,将所述第一彩色图像之前与所述第一彩色图像相邻的第二彩色图像确定为比对彩色图像;
将所述第一彩色图像与所述比对彩色图像进行人脸对比,得到比对结果;
根据所述比对结果,对待测温的所述第一人脸进行更新。
6.根据权利要求5所述的方法,其特征在于,所述将所述第一彩色图像与所述比对彩色图像进行人脸对比,得到比对结果,包括:
针对每个所述第一彩色图像中的第一人脸,计算所述第一人脸和所述比对彩色图像中多个第一人脸之间的交并比,得到多个交并比;
若其中一个所述交并比大于或等于预设交并比,则确定所述第一彩色图像中的第一人脸与所述比对彩色图像中的第一人脸为同一人脸;
若多个所述交并比均小于所述预设交并比,则确定所述第一彩色图像中的第一人脸为新出现的第一人脸。
7.根据权利要求5所述的方法,其特征在于,所述根据所述比对结果,对待测温的所述第一人脸进行更新,包括:
若所述第一彩色图像中的第一人脸与所述比对彩色图像中的第一人脸为同一人脸,则更新所述第一人脸的位置;
若所述第一彩色图像中的第一人脸为新出现的第一人脸,则更新待测温的第一人脸。
8.根据权利要求1所述的方法,其特征在于,所述对各所述热图像中的第二人脸进行温度计算,得到各所述第二人脸对应的目标温度,包括:
针对各所述第二人脸,将所述第二人脸中的像素值按照从大到小的顺序进行排列;
根据排在第一位的像素值,确定所述第二人脸对应的目标温度。
9.根据权利要求8所述的方法,其特征在于,在所述根据排在第一位的像素值,确定所述第二人脸对应的目标温度之前,所述方法还包括:
去除排位靠前的预设个数的像素值;
对应地,所述根据排在第一位的像素值,确定所述第二人脸对应的目标温度,包括:
根据去除预设个数的像素值之后排在第一位的像素值,确定所述第二人脸对应的目标温度。
10.根据权利要求1所述的方法,其特征在于,所述根据所述彩色摄像头和所述热成像摄像头之间的位置关系,将各所述第一人脸映射到对应的热图像中,得到各所述热图像中的第二人脸,包括:
根据所述彩色摄像头和所述热成像摄像头之间的位置关系,确定坐标映射关系;
针对各所述第一人脸,根据所述坐标映射关系和所述第一人脸的位置坐标,计算出对应的热图像中的第二人脸的位置坐标。
11.根据权利要求1所述的方法,其特征在于,在所述得到各所述第二人脸对应的目标温度之后,所述方法还包括:
若所述目标温度大于预设温度阈值,则生成报警信息。
12.一种温度检测装置,其特征在于,应用于温度检测系统,所述温度检测系统包括彩色摄像头和热成像摄像头,所述装置包括:
图像获取模块,用于获取所述彩色摄像头采集到的彩色图像序列,以及所述热成像摄像头采集到的热图像序列;所述彩色图像序列中包括的多帧彩色图像与所述热图像序列中包括的多帧热图像按照采集时间一一对应;
人脸检测模块,用于对各所述彩色图像进行检测,得到各所述彩色图像中待测温的第一人脸;
人脸映射模块,用于根据所述彩色摄像头和所述热成像摄像头之间的位置关系,将各所述第一人脸映射到对应的热图像中,得到各所述热图像中的第二人脸;
温度检测模块,用于对各所述热图像中的第二人脸进行温度计算,得到各所述第二人脸对应的目标温度。
13.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述的方法的步骤。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010499094.7A CN111652314A (zh) | 2020-06-04 | 2020-06-04 | 温度检测方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010499094.7A CN111652314A (zh) | 2020-06-04 | 2020-06-04 | 温度检测方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111652314A true CN111652314A (zh) | 2020-09-11 |
Family
ID=72351221
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010499094.7A Withdrawn CN111652314A (zh) | 2020-06-04 | 2020-06-04 | 温度检测方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111652314A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113063500A (zh) * | 2021-03-30 | 2021-07-02 | 新疆爱华盈通信息技术有限公司 | 一种人脸测温方法、人脸测温仪及存储介质 |
CN113673401A (zh) * | 2021-08-12 | 2021-11-19 | 深圳市爱深盈通信息技术有限公司 | 烹饪处理方法及装置、存储介质、智能设备 |
WO2022057327A1 (zh) * | 2020-09-18 | 2022-03-24 | 深圳市商汤科技有限公司 | 标定方法、装置、设备、介质、程序及测温人脸识别装置 |
-
2020
- 2020-06-04 CN CN202010499094.7A patent/CN111652314A/zh not_active Withdrawn
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022057327A1 (zh) * | 2020-09-18 | 2022-03-24 | 深圳市商汤科技有限公司 | 标定方法、装置、设备、介质、程序及测温人脸识别装置 |
CN113063500A (zh) * | 2021-03-30 | 2021-07-02 | 新疆爱华盈通信息技术有限公司 | 一种人脸测温方法、人脸测温仪及存储介质 |
CN113673401A (zh) * | 2021-08-12 | 2021-11-19 | 深圳市爱深盈通信息技术有限公司 | 烹饪处理方法及装置、存储介质、智能设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111914635B (zh) | 人体测温方法、装置、系统和电子设备 | |
CN111950329B (zh) | 目标检测及模型训练方法、装置、计算机设备和存储介质 | |
CN108960211B (zh) | 一种多目标人体姿态检测方法以及系统 | |
CN111652314A (zh) | 温度检测方法、装置、计算机设备和存储介质 | |
CN111337142A (zh) | 体温修正方法、装置及电子设备 | |
Tang et al. | Cross-camera knowledge transfer for multiview people counting | |
CN112232279B (zh) | 一种人员间距检测方法和装置 | |
CN111426393B (zh) | 温度修正方法、装置及系统 | |
CN110598559B (zh) | 检测运动方向的方法、装置、计算机设备和存储介质 | |
CN111476827A (zh) | 目标跟踪方法、系统、电子装置及存储介质 | |
CN108197604A (zh) | 基于嵌入式设备的快速人脸定位跟踪方法 | |
CN111666922A (zh) | 视频匹配方法、装置、计算机设备和存储介质 | |
CN111046752A (zh) | 一种室内定位方法、装置、计算机设备和存储介质 | |
CN110969045B (zh) | 一种行为检测方法、装置、电子设备和存储介质 | |
CN112418251B (zh) | 红外体温检测方法及系统 | |
CN111144398A (zh) | 目标检测方法、装置、计算机设备和存储介质 | |
CN112561986A (zh) | 巡检机器人云台的二次对准方法、装置、设备和存储介质 | |
CN113158831A (zh) | 检测摄像设备移动的方法、装置、计算机设备和存储介质 | |
WO2023284358A1 (zh) | 相机标定方法、装置、电子设备及存储介质 | |
CN112541403B (zh) | 一种利用红外摄像头的室内人员跌倒检测方法 | |
CN112629565B (zh) | 像机与惯性测量单元旋转关系校准方法、装置和设备 | |
CN110956131B (zh) | 单目标追踪方法、装置及系统 | |
CN113344994A (zh) | 图像配准方法、装置、电子设备及存储介质 | |
CN110516559B (zh) | 适用于精准监控的目标跟踪方法及装置、计算机设备 | |
CN116597246A (zh) | 模型训练方法、目标检测方法、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200911 |
|
WW01 | Invention patent application withdrawn after publication |