CN111741209A - 一种图像采集方法、系统、可读存储介质及电子设备 - Google Patents
一种图像采集方法、系统、可读存储介质及电子设备 Download PDFInfo
- Publication number
- CN111741209A CN111741209A CN201910227454.5A CN201910227454A CN111741209A CN 111741209 A CN111741209 A CN 111741209A CN 201910227454 A CN201910227454 A CN 201910227454A CN 111741209 A CN111741209 A CN 111741209A
- Authority
- CN
- China
- Prior art keywords
- image
- visible light
- target object
- target
- light image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像采集方法,所述图像采集方法包括获取热成像图像并根据热成像图像判断是否存在目标物体;若存在目标物体,则获取目标物体在热成像图像中的像素信息;根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。本方法能够准确识别目标物体并采集高清晰度的目标物体的可见光图像。本申请还公开了一种图像采集系统、一种计算机可读存储介质及一种电子设备,具有以上有益效果。
Description
技术领域
本发明涉及视频监控技术领域,特别涉及一种图像采集方法、系统、一种计算机可读存储介质及一种电子设备。
背景技术
可见光摄像机和热成像摄像机为两种常用的监控设备,其中可见光摄像机在成像清晰度上有很好的优势,但是可见光摄像机的成像效果受环境因素影响很大,例如复杂环境存在干扰的情况下很难看清被监控物体导致无法提供可供识别的信息;而热成像监控摄像机成像效果受环境因素影响较小,但因热成像原理的特性无法看准确识别被监控物体的详细信息。
由于可见光图像采集和热成像图像采集各有其优势,相关技术提出了将可见光摄像机和热成像摄像机设置在同一云台上同时采集可见光图像和热成像图像的技术方案,例如火焰检测装置、温升预警装置等。但是,上述相关技术中可见光摄像机和热成像摄像机同时采集图像的技术方案,获得的是同一区域的可见光图像和热成像图像,将可见光图像作为分析热成像图像进而确定热源位置的参考信息,无法对特定的被监控物体拍摄高清晰度的可见光图像。
因此,如何准确识别目标物体并采集高清晰度的目标物体的可见光图像是本领域技术人员目前需要解决的技术问题。
发明内容
本申请的目的是提供一种图像采集方法、系统、一种计算机可读存储介质及一种电子设备,能够准确识别目标物体并采集高清晰度的目标物体的可见光图像。
为解决上述技术问题,本申请提供一种图像采集方法,该图像采集方法包括:
获取热成像图像并根据热成像图像判断是否存在目标物体;
若存在目标物体,则获取目标物体在热成像图像中的像素信息;
根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。
可选的,在根据像素信息调整可见光图像采集装置的镜头倍率之前,还包括:
根据像素信息确定目标物体在可见光图像采集装置的采集区域的位置信息;
根据位置信息判断目标物体是否在采集区域中的目标子区域内;
若否,则调整可见光图像采集装置的采集区域以使目标物体处于目标子区域内。
可选的,在根据像素信息调整可见光图像采集装置的镜头倍率的过程中,还包括:
根据可见光图像采集装置的当前可见光图像对目标物体执行图像识别操作,得到第一图像识别结果;
根据第一图像识别结果判断目标物体是否为预设物体;
若否,则停止可见光图像采集装置的镜头倍率调整操作以便退出目标可见光图像采集流程。
可选的,根据热成像图像判断是否存在目标物体包括:
判断热成像图像中是否存在目标热源区域;
若存在目标热源区域,则获取热成像图像中目标热源区域对应的图像信息;
对目标热源区域对应的图像信息执行图像识别操作得到第二图像识别结果;
当根据第二图像识别结果判定目标热源区域对应的图像信息为所述目标物体对应的图像信息时,判定存在目标物体。
可选的,判断热成像图像中是否存在目标热源区域包括:
确定热成像图像中区域温度在预设范围内的图像区域;
判断图像区域内连续的像素点的数量是否大于预设数量;
若是,则判定热成像图像中存在目标热源区域。
可选的,在采集目标物体的目标可见光图像之前,还包括:
确定热成像图像对应的环境温度区间,并根据环境温度区间确定最大环境温度;
判断最大环境温度是否小于预设温度;
若是,则启动补光灯。
可选的,在根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像之前,还包括:
当目标物体的数量大于1时,根据每一目标物体在热成像图像中的像素数量确定采集优先级,以便可见光图像采集装置按照采集优先级依次采集每一目标物体的目标可见光图像。
可选的,在采集目标物体的目标可见光图像之后,还包括:
通过目标图像处理算法对目标可见光图像执行图像优化操作;其中,目标图像处理算法包括透雾算法、锐化算法、动态范围规划算法和降噪算法中的任一算法或任几种算法的组合。
可选的,根据像素信息调整可见光图像采集装置的镜头倍率包括:
根据像素信息确定目标物体在可见光图像采集装置的当前可见光图像中的像素参考值;其中,像素参考值包括像素数量和/或像素数量比例;
判断像素参考值是否小于预设参考值;
若是,调整可见光图像采集装置的镜头倍率直至目标物体在当前可见光图像中的像素参考值大于或等于预设参考值。
可选的,当像素参考值包括像素数量比例时,根据像素信息确定目标物体在可见光图像采集装置的当前可见光图像中的像素参考值包括:
调整可见光图像采集装置的视场角,以使可见光图像采集装置与拍摄热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值;
根据像素信息确定目标物体在热成像图像中的像素数量;
根据视场角差与目标物体在热成像图像中的像素数量计算目标物体在可见光图像采集装置的当前可见光图像中的像素数量比例。
可选的,调整可见光图像采集装置的镜头倍率直至目标物体在当前可见光图像中的像素参考值大于或等于预设参考值包括:
确定像素参考值对应的目标变倍系数,并根据目标变倍系数调整可见光图像采集装置的镜头倍率,以使目标物体在当前可见光图像中的像素参考值大于或等于预设参考值。
本申请还提供了一种图像采集系统,该图像采集系统包括:
物体判断模块,用于获取热成像图像并根据热成像图像判断是否存在目标物体;
像素信息获取模块,用于当存在目标物体时,获取目标物体在热成像图像中的像素信息;
图像采集模块,用于根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序执行时实现上述图像采集方法执行的步骤。
本申请还提供了一种电子设备,包括热成像图像采集装置、可见光图像采集装置、存储器和处理器,热成像图像采集装置用于采集热成像图像;可见光图像采集装置用于采集可见光图像;存储器中存储有计算机程序,处理器调用存储器中的计算机程序时实现上述图像采集方法执行的步骤。
本发明提供了一种图像采集方法,包括获取热成像图像并根据热成像图像判断是否存在目标物体;若存在目标物体,则获取目标物体在热成像图像中的像素信息;根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。
本申请利用热成像图像作为检测是否存在目标物体的参考信息,由于热成像图像是依靠物体自身温度发出的不可见光生成的图像,因此热成像图像能够在不受复杂环境的干扰下对目标物体进行准确的监控。在根据热成像图像检测到目标物体的基础上,可以得到目标物体在对应热成像图像中的像素信息。由于像素信息可以包括像素点的数量,像素点数量可以反映目标物体的成像大小,因此本申请可以基于像素信息调整可见光图像采集装置的镜头倍率,以便对目标物体进行放大显示进而得到高清晰度的可见光图像。本申请通过热成像图像检测目标物体是否存在并以目标物体在热成像图像中的像素信息作为调整镜头倍率的参考,能够准确识别目标物体并采集高清晰度的目标物体的可见光图像。本申请同时还提供了一种图像采集系统、一种计算机可读存储介质和一种电子设备,具有上述有益效果,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例,下面将对实施例中所需要使用的附图做简单的介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例所提供的一种图像采集方法的流程图;
图2为本申请实施例所提供的一种可见光图像采集装置的镜头倍率调整方法的流程图;
图3为本申请实施例所提供的另一种可见光图像采集装置的镜头倍率调整方法的流程图;
图4为本申请实施例所提供的一种可见光图像采集装置的图像采集区域调整方法的流程图;
图5为本申请实施例所提供的一种目标物体识别方法的流程图;
图6为本申请实施例所提供的另一种目标物体的识别方法的流程图;
图7为本申请实施例所提供的一种补光方法的流程图;
图8为本申请实施例所提供的另一种图像采集方法的流程图;
图9为本申请实施例所提供的一种图像采集系统的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
下面请参见图1,图1为本申请实施例所提供的一种图像采集方法的流程图。
具体步骤可以包括:
S101:获取热成像图像并根据热成像图像判断是否存在目标物体;若是,则进入S102;若否,则结束流程。
其中,本实施例的执行主体可以是能够控制可见光图像拍摄装置进行图像拍摄的处理器。上述处理器可以是设置于可见光图像拍摄装置之外的处理器,还可以是设置于可见光拍摄装置内部的处理器,此处不进行限定本实施例的执行主体与可见光图像拍摄装置的位置关系,只要该处理器能够根据相关数据处理结果生成控制可见光图像拍摄装置改变镜头倍率和执行图像采集操作的指令即可。
可以理解的是,温度处于绝对零度以上的物体均能发射热辐射波,热成像图像是根据具有不同温度的物体发射的热辐射波生成的图像。也就是说,热成像图像是拍摄特定波长(如红外线波长或紫外线波长)范围的光得到的图像。热成像图像的成像效果不会受极端天气的影响,可以透过穿雾、雨、烟等障碍检测到发热物体。
在获取热成像图像之前可以存在其他装置采集热成像图像的操作,本实施例不限定热成像图像的采集方式,可以通过红外成像仪、热成像相机或热成像摄像机拍摄得到。
在获取热成像图像之后,可以根据热成像图像来判断热成像图像所对应的拍摄区域是否存在目标物体。由于不同的物体可以具有不同的温度,因此可以根据热成像图像中温度的变化情况来确定拍摄区域所有物体对应的图像子区域。具体的,热成像图像所呈现的画面可以是根据不同温度所呈现的灰度图像,即温度越高的物体在热成像图像对应的图像子区域中的呈现状态越亮;热成像图像所呈现的画面还可以是根据不同温度所呈现的彩色图像,例如红色区域代表高温区域,黑色区域代表低温区域。当然,热成像图像所呈现的画面既可以是灰度图像也可以是彩色图像,此处不进行限定,只要能够根据热成像图像的某一区域的颜色信息确定该区域的温度即可。
需要说明的是,本实施例中提到的目标物体指需要进行可见光图像采集的对象,在本步骤之前可以存在预先确定目标物体的操作。本步骤可以通过多种方式判断是否存在目标物体,通过以下例子进行说明:例1、当目标物体为温度恒定在预设温度范围内的物体(如鸟类及哺乳类动物)时可以判断热成像图像中是否存在预设温度范围对应的图像区域,若存在则判定检测到目标物体;例2、根据温度变化情况将热成像图像划分为多个子区域,根据每一子区域的灰度信息及连续像素点数量和分布状况判断子区域是否为目标物体对应的区域;例3、根据热成像图像确定拍摄区域中所有物体的轮廓信息,判断是否存在与目标物体轮廓信息相匹配的轮廓信息,若存在则判定检测到目标物体。当然除了上述三个例子之外,还可以存在其他的根据热成像图像判断是否存在目标物体的实施方式(如基于人工智能进行识别),可以根据实际应用情况进行选择,此处不进行限定。
在确定存在目标物体的基础上可以执行本实施例S102和S103的操作,若根据热成像图像未检测到目标物体可以结束本次图像采集操作的流程。作为一种可行的实施方式,若未检测到目标物体可以重新获取最新的热成像图像并进入下一次图像采集操作直至检测到目标物体。作为另一种可行的实施方式,热成像图像可以由设置于云台的热成像摄像机采集,在云台的运动(如圆周运动、升降运动等)过程中热成像摄像机可以拍摄多个区域的热成像图像,若第一帧热成像图像对应区域没有目标物体时,可以获取第二帧热成像图像以便判断第二帧热成像图像中是否存在目标物体。
S102:获取目标物体在热成像图像中的像素信息;
其中,目标物体通过多个像素点在热成像图像中呈现,当根据热成像图像判定存在目标物体时,可以确定目标物体在热成像图像中的图像区域,本步骤中提到的像素信息可以为该图像区域所包含的像素点的信息。像素信息可以包括所有像素点的数量以及每一像素点的位置和色彩数值。
可以理解的是,对于固定镜头倍率下拍摄的同一物体来说,物体与镜头之间的距离越大则拍摄的图片中该物体对应的像素点数量越少;反之,物体与镜头之间的距离越小则拍摄的图片中该物体对应的像素点数量越多。对于固定镜头倍率下拍摄的同一距离的不同物体来说,当物体的外形越小则拍摄的图片中该物体对应的像素点数量越少,反之当物体的外形越大则拍摄的图片中该物体对应的像素点数量越多。也就是说,本实施例可以根据目标物体在热成像图像中的像素信息确定目标物体在镜头中呈现的图像与图像采集窗口之间的比例。
需要说明的是,本实施例默认已知拍摄热成像图像的装置与可见光图像采集装置之间的位置关系,根据目标物体在热成像图像中的像素信息计算可见光图像采集装置的图像采集窗口中目标物体所占的比例。作为一种可行的实施方式,可以将热成像图像采集装置和可见光图像采集装置设置于同一云台上,并通过相关参数调节使热成像图像采集装置和可见光图像采集装置始终具有相同的图像采集区域中心点。当热成像图像采集装置和可见光图像采集装置具有统一镜头倍率时,热成像图像采集装置采集的热成像图像和可见光图像采集装置采集的可见光图像为同一特定区域的不同工作光波段的两种图像。
S103:根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。
其中,在得到目标物体在热成像图像中的像素信息的基础上,本步骤的目的在于拍摄满足一定清晰度要求的目标物体的可见光图像。本实施例中的可见光图像采集装置可以进行镜头倍率调整,通过调高镜头倍率能够使可见光图像采集装置拍摄到处于较远位置或外形较小的物体的高清晰度图像。
判断采集的目标物体可见光图像是否符合目标清晰度的评价标准可以为目标物体在可见光图像中对应的区域占整个可见光图像区域的比例。例如,在当前镜头倍率下目标物体在可见光图像中所呈现的区域占整个可见光图像区域的比例为20%,可以通过增加当前镜头倍率将目标物体在可见光图像中所呈现的区域占整个可见光图像区域的比例调整至为50%。
可以理解的是,根据目标物体在热成像图像中的像素信息调整可见光图像采集装置的镜头倍率的方式有很多种,下面通过几个例子进行说明:例1、根据目标物体在热成像图像中的像素点数量,以及拍摄热成像图像的装置与可见光图像采集装置之间的位置关系,可以计算出目标物体在可见光图像采集装置当前拍摄的可见光图像中的像素点数量,不同的像素点数量可以对应不同的镜头倍率调整系数以便调整镜头倍率;例2、根据像素信息计算目标物体在热成像图像中的像素点数量比例,根据可见光图像采集装置与热成像图像采集装置的拍摄参数换算得到目标物体在当前可见光图像中的像素点数量比例,逐渐提高镜头倍率直至目标物体在当前可见光图像中的像素点比例大于或等于预设比例。当然,还可以存在其他的调整镜头倍率的方式,此处不进行限定,只要调整镜头倍率之后能够得到符合预设清晰程度的目标物体的可见光图像即可。本步骤中的目标可见光图像指符合预设清晰程度的目标物体的可见光图像。
本实施例利用热成像图像作为检测是否存在目标物体的参考信息,由于热成像图像是依靠物体自身温度发出的不可见光生成的图像,因此热成像图像能够在不受复杂环境的干扰下对目标物体进行准确的监控。在根据热成像图像检测到目标物体的基础上,可以得到目标物体在对应热成像图像中的像素信息。由于像素信息可以包括像素点的数量,像素点数量可以反映目标物体的成像大小,因此本实施例可以基于像素信息调整可见光图像采集装置的镜头倍率,以便对目标物体进行放大显示进而得到高清晰度的可见光图像。本实施例通过热成像图像检测目标物体是否存在并以目标物体在热成像图像中的像素信息作为调整镜头倍率的参考,能够准确识别目标物体并采集高清晰度的目标物体的可见光图像。
作为对图1对应实施例的进一步补充,S103中根据像素信息调整可见光图像采集装置的镜头倍率的操作可以包括以下步骤:步骤1、根据像素信息确定目标物体在可见光图像采集装置的当前可见光图像中的像素参考值;步骤2、判断像素参考值是否小于预设参考值;若是,调整可见光图像采集装置的镜头倍率直至目标物体在当前可见光图像中的像素参考值大于或等于预设参考值。
需要说明的是,上述提到的像素参考值可以包括像素数量和/或像素数量比例,当像素参考值包括像素数量和像素数量比例时,预设参考值可以包括预设数量和预设数量比例,当像素数量小于预设数量或像素数量比例小于预设数量比例时,则可以调整镜头倍率直至像素数量大于等于预设数量且像素数量比例大于等于预设数量比例。下面通过图2和图3对应的实施例,分别说明当像素参考值具体指像素数量比例和当像素参考值具体指像素数量这两种情况下,调整镜头倍率的方法。
请参见图2,图2为本申请实施例所提供的一种可见光图像采集装置的镜头倍率调整方法的流程图,本实施例是对图1对应的实施例S103中如何调整镜头倍率的具体描述,可以将本实施例与图1对应的实施例相结合得到更为优选的实施方式,本实施例可以包括以下步骤:
S201:根据像素信息确定目标物体在可见光图像采集装置采集的当前可见光图像中的初始像素数量比例;
其中,根据像素信息确定目标物体的初始像素数量比例的方法可以具体为:首先根据像素信息确定目标物体在热成像图像中的像素数量,结合可见光图像采集装置与拍摄热成像图像的装置的参数信息确定目标物体在可见光图像中的像素数量,进而计算初始像素数量比例。
作为一种可行的实施方式,计算初始像素数量比例的过程可以包括以下步骤:步骤1、调整可见光图像采集装置的视场角,以使可见光图像采集装置与拍摄热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值;步骤2、根据像素信息确定目标物体在热成像图像中的像素数量;步骤3、根据视场角差与目标物体在热成像图像中的像素数量计算目标物体在可见光图像采集装置的当前可见光图像中的初始像素数量比例。视场角指被测目标的物像可通过镜头的最大范围的两条边缘构成的夹角,视场角的大小决定了图像采集装置的视野范围,视场角越大,视野就越大,相应的镜头倍率就越小。也就是说,若目标物体超过视场角对应的范围就不会出现在镜头中。具体的,本步骤是通过调整镜头倍率进而改变的视场角,最终使可见光图像采集装置与拍摄热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值,即:可见光图像采集装置与热成像图像采集装置的视场角相近。本实施例默认可见光图像采集装置与热成像图像采集装置设置于同一云台上,且无论当可见光图像采集装置与热成像图像采集装置的视场角差为多少,目标物体在热成像图像中的像素数量比例等于目标物体在当前可见光图像中的像素数量比例。具体的,本步骤考虑到调整镜头倍率的精准度,结合视场角差计算出当前可见光图像中的当前像素数量比例。作为一种可行的实施方式,可以根据目标物体在可见光图像中所占的面积比例作为像素数量比例。
S202:当初始像素数量比例小于预设比例时,调整可见光图像采集装置的镜头倍率直至目标物体在当前可见光图像中的像素数量比例大于或等于预设比例。
本实施例以目标物体在可见光图像采集装置采集的当前可见光图像中的像素数量比例作为调整镜头倍率的参考值,通过调整镜头倍率调整目标物体在可见光图像中的像素数量比例直至该像素比例大于或等于预设比例。可以理解的是,当目标物体为细长形状的物体(如蛇或旗杆)时,该调整镜头倍率的过程中会存在目标物体的部分不在图像采集范围内的情况,因此作为一种可选的实施方式,本实施例S202调整可见光图像采集装置镜头倍率的前提是目标物体的全部特征均处于可见光图像采集装置的图像采集范围内。
请参见图3,图3为本申请实施例所提供的另一种可见光图像采集装置的镜头倍率调整方法的流程图,本实施例是对图1对应的实施例S103中如何调整镜头倍率的具体描述,可以将本实施例与图1对应的实施例相结合得到更为优选的实施方式,本实施例可以包括以下步骤:
S301:调整可见光图像采集装置的视场角,以使可见光图像采集装置与拍摄热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值;
S302:根据像素信息确定目标物体在热成像图像中的像素数量;
需要说明的是,S301与S302之间并不存在逻辑上的依赖关系,可以灵活调整S301与S302之间的执行顺序。
S303:根据视场角差与目标物体在热成像图像中的像素数量计算目标物体在可见光图像采集装置的当前可见光图像中的当前像素数量;
其中,本实施例默认可见光图像采集装置与热成像图像采集装置设置于同一云台上,且无论当可见光图像采集装置与热成像图像采集装置的视场角差为多少,目标物体在热成像图像中的像素数量比例等于目标物体在当前可见光图像中的像素数量比例。具体的,本步骤考虑到调整镜头倍率的精准度,结合视场角差计算出当前可见光图像中的当前像素数量。
举例说明上述论述,当视场角差为0时,说明可见光图像采集装置与热成像图像采集装置的视场角一致,若可见光图像采集装置与热成像图像采集装置的分辨率相等,目标物体在可见光图像采集装置的当前可见光图像中的当前像素数量等于目标物体在热成像图像中的像素数量。当视场角差为大于0的数值时,设可见光图像采集装置与热成像图像采集装置的视场角比例为A/B,可见光图像采集装置与热成像图像采集装置之间的分辨率大小之比也为A/B,由于目标物体在热成像图像中的像素数量比例等于目标物体在当前可见光图像中的像素数量比例,可以计算当前像素数量X=Y*A/B,X为当前像素数量,Y为S302计算得到的目标物体在热成像图像中的像素数量。
S304:根据当前像素数量调整可见光图像采集装置的镜头倍率。
其中,在目标物体完全处于可见光图像采集装置的拍摄区域内的前提下,当前像素数量越多,拍摄得到的目标图像的可见光图像越清晰。作为一种可行的实施方式,可以预先设置当前像素数量与镜头倍率的对应关系或关系表达式,根据当前像素数量确定镜头倍率进行后续的拍摄操作。作为另一种可行的实施方式,还可以首先判断当前像素数量是否小于预设像素数量;若是,则确定当前像素数量对应的目标变倍系数,并根据目标变倍系数调整可见光图像采集装置的镜头倍率;若否,则停止镜头倍率调整操作。具体的,可以预先设置镜头变倍系数表,以便查询当前像素数量与变倍系数的对应关系,例如,可以对当前像素数量划分为四个区段:N0、N1、N2、N3,且存在N0<N1<N2<N3的关系。将可见光大倍率摄像机变倍系数X划分五个不同系数:X0、X1、X2、X3、X4,且存在X0>X1>X2>X3>X4的关系。若当前像素数量小于或等于N0时可见光机芯变倍X0倍;若当前像素数量大于N0且小于等于N1时变倍系数为X1;若当前像素数量大于N1且小于等于N2时变倍系数为X2;若当前像素数量大于N2且小于等于N3时变倍系数为X3;若当前像素数量大于N3时变倍系数为X4;同时判断当前镜头倍率下目标物体像素数量是否满足数量要求,如果满足则停止镜头变倍操作。
本实施例对如何根据像素信息调整可见光图像采集装置的操作进行了具体的描述,通过像素信息确定目标物体在热成像图像中的像素数量(即像素点数量),根据可见光图像采集装置和热成像图像采集装置的视场角差,换算得到目标物体在当前可见光图像中的像素数量。由于目标物体在当前可见光图像中的像素数量与图片清晰度相关,因此本实施例根据像素数量调整镜头倍率,得到符合一定清晰度要求的可见光图像。
请参见图4,图4为本申请实施例所提供的一种可见光图像采集装置的图像采集区域调整方法的流程图,本实施例可以分别应用于图1、图2和图3对应的实施例调整镜头倍率的操作之前,通过将本实施例与图1、图2和图3对应的实施例相结合可以得到更为优选的实施方式,本实施例可以包括以下步骤:
S401:根据像素信息确定目标物体在可见光图像采集装置的采集区域的位置信息;
其中,本步骤的目的在于确定目标物体与可见光图像采集装置的位置关系,根据像素信息可以确定目标物体在热成像图像中对应区域的位置信息,进而可以根据热成像图像采集装置与可见光图像采集装置的位置关系可以确定目标物体在可见光图像采集装置的采集区域的位置信息。例如,若可见光采集装置与热成像图像采集装置在同一视场角的情况下拍摄得到的图像为同一特定区域的图像,那么目标物体在热成像图像的采集区域的位置与在可见光图像的采集区域的位置相同。再例如,若可见光采集装置与热成像图像采集装置在同一视场角的情况下拍摄得到的图像分别为正东方向和正南方向的图像,那么目标物体在热成像图像的采集区域的位置与在可见光图像的采集区域的位置相差90°。
当可见光采集装置与热成像图像采集装置在同一视场角的情况下拍摄得到的图像为不同区域的图像时,可能会出现热成像图像采集装置拍摄到目标物体,而可见光图像采集装置无法拍摄到目标物体的情况,此时可以通过调整可见光图像采集装置的镜头位置使目标物体出现在当前可见光图像中。
S402:根据位置信息判断目标物体是否在采集区域中的目标子区域内;若是,则结束流程;若否,则进入S403;
其中,在增大镜头倍率的过程中,若目标物体处于采集区域边缘,那么将会导致目标物体的部分或全部特征无法始终处于采集区域内。针对于上述状况,本实施例提出了采集区域的目标子区域这个概念,采集区域指当前镜头倍率下可见光采集装置所能够拍摄到的区域,目标子区域指上述采集区域中的部分区域。本实施例不限定目标子区域在采集区域中的具体位置,可以灵活设定,作为一种可行的实施方式,可以将上述采集区域的中心区域作为目标子区域,即:目标子区域包括上述采集区域的中心点。可以理解的是,目标物体在可见光图像中的成像大小应小于或等于目标子区域的大小。本步骤判断目标物体是否在采集区域中的目标子区域内的操作,可以是判断目标物体是否完全处于在采集区域中的目标子区域内,也可以是判断目标物体的全部或一部分是否处于在采集区域中的目标子区域内,此处不进行限定。
本步骤的目的在于判断目标物体是否处于采集区域中合适的位置,以免在调整镜头倍率的过程中出现目标物体特征遗漏的状况。当目标物体处于采集区域的目标子区域内时,说明目标物体已经处于采集区域中合适的位置,无需调整可见光采集装置;当目标物体未处于采集区域的目标子区域内时,可以通过执行S403中的调整操作,以使目标物体处于采集区域中合适的位置。
S403:调整可见光图像采集装置的采集区域以使目标物体处于目标子区域内。
其中,本步骤不限定目标物体是否为始终处于静止状态的物体,可以存在目标物体相对于地面始终处于运动状态的情况,本实施例通过调整可见光图片识别装置使目标物体在当前可见光图像(或当前采集区域)中的目标子区域内,实现对移动中的物体进行可见光图像采集。当可见光图像采集装置(如可见光大倍率摄像机)和热成像图像采集装置设置于同一云台时,若目标物体位置在画面最边缘不是很理想的时候,可以通过转动云台将监控物体调整到画面中最合适的位置,并记录当前云台信息,并传递给可见光图像采集装置。
当将图1、图2和图3对应的实施例相结合时,本实施例所提到的使运动中的目标物体始终处于目标子区域内的操作并不影响改变镜头倍率操作的执行逻辑。只要判定目标物体处于目标子区域内即可执行调整镜头倍率及采集可见光图片的操作,进一步的,当检测到目标物体未处于目标子区域内则可以停止执行调整镜头倍率及采集可见光图片的操作直至目标物体处于目标子区域。
本实施例提供了一种在调整镜头倍率之前,使目标物体始终处于可见光采集装置的特定采集区域内的方式,避免了在调整镜头倍率过程中出现的目标物体特征遗漏问题。
请参见图5,图5为本申请实施例所提供的一种目标物体识别方法的流程图,本实施例是对图1对应的实施例S101中如何判断存在目标物体进行的具体描述,可以将本实施例与图1对应的实施例相结合得到更为优选的实施方式,本实施例可以包括以下步骤:
S501:判断热成像图像中是否存在目标热源区域;若是,则进入S502;若否,则结束流程;
其中,由于根据热成像图像中各区域的色彩信息可以确定相对应的温度信息,因此可以根据热成像图像所呈现的温度状况判断是否存在目标热源。作为一种可行的实施方式,本步骤中判断热成像图像中是否存在目标热源区域的过程可以包括以下步骤:首先确定热成像图像中区域温度在预设范围内的图像区域;其次判断图像区域内连续的像素点的数量是否大于预设数量;若是,则判定热成像图像中存在目标热源区域。
在上述可行的实施方式中,预先设置目标物体的温度处于为预设范围内,当根据热成像图像判定存在检测到与目标物体具有相同温度的物体。进一步的,本实施例利用图像区域内连续的像素点的数量是否大于预设数量作为进一步的判断标准,当连续像素点的数量符合一定要求时才判定检测到目标热源区域。
下面通过实际应用的实施例说明以上论述,若目标物体为人或车辆时,设置采集热成像图像的装置设置适合的环境温度区间[T1,T2]与灰度0-255的映射,使热成像图像中人体或者车辆对应画面中区域呈现过亮的现象。当热成像图像中某一块区域温度T>Ti(Ti为上述的预设范围)或者此时该区域画面亮度L>Li(Li亮度阈值),可以判定该区域存在热源;统计当前热成像图像中该区域连续像素数量P。当该区域的连续像素点数量P>P1(P1为上述预设数量)时,即可判定该区域为目标热源区域。
可以理解的是,当检测到目标热源区域时可以执行S502中的相关操作,当未检测到目标人员区域时可以结束本次目标物体识别流程。作为一种优选的实施方式,可以在未检测到目标热源区域后延时预设时间再次进入本实施例的操作流程以便检测最新的热成像图像是否存在目标热源区域。
S502:获取热成像图像中目标热源区域对应的图像信息;
其中,在确定存在目标热源区域的基础上,本步骤首先获取热成像图像中目标热源区域对应的图像信息以便进行后续的图像识别操作。图像信息可以包括灰度信息、轮廓信息和亮度信息等,本实施例可以利用任一种或任几种图像信息进行S503中的图像识别操作,此处不对图像信息的具体种类进行限定,只要图像信息为可以对目标热源区域的进行图像识别的图像信息参数即可。
S503:对目标热源区域对应的图像信息执行图像识别操作得到第二图像识别结果;
其中,本步骤可以利用基于人工智能的图像识别算法实现对图像信息的识别操作,图像识别算法可以包括HOG(Histogram of oriented gradients)智能算法、k-means聚类算法和蚁群聚类算法等算法或多个算法的组合,此处不对图像识别操作所需要的算法进行限定。
S504:当根据第二图像识别结果判定目标热源区域对应的图像信息为所述目标物体对应的图像信息时,判定存在目标物体。
本实施例通过判断是否存在目标热源区域,进而根据目标热源区域的图像信息进行了图像识别,当第二图像识别结果判断目标热源区域对应的图像信息为所述目标物体对应的图像信息时,则判定在热成像图像中存在目标物体的影像,进而可以确定存在目标物体。
请参见图6,图6为本申请实施例所提供的另一种目标物体的识别方法的流程图,本实施例可以应用于图1对应的实施例S103调整可见光图像采集装置的镜头倍率的过程中,将本实施例与图1对应的实施例相结合可以得到更为优选的实施方式,本实施例可以包括以下步骤:
S601:根据可见光图像采集装置的当前可见光图像对目标物体执行图像识别操作,得到第一图像识别结果;
S602:根据第一图像识别结果判断目标物体是否为预设物体;若是,则继续调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像;若否,则进入S603;
S603:停止可见光图像采集装置的镜头倍率调整操作以便退出目标可见光图像采集流程。
可以理解的是,调整可见光采集装置的镜头倍率的过程是目标物体的可见光图片由模糊变清晰的过程,因此在调整镜头倍率的过程中可以对当前可见光图像中目标物体所呈现的影像进行图像识别操作。具体的,目标物体可以为2类物体的总称,目标物体可以包括预设物体和非预设物体,只有当可见光图像中存在预设物体时才可以继续进行镜头倍率调整操作,若当可见光图像中不存在预设物体时可以停止进行镜头倍率调整操作。
需要说明的是,本实施例可以作为图5对应实施例的补充方案,若将本实施例、图1对应的实施例和图5对应的实施例相结合时,图5对应的实施例能够根据热成像图像的图像信息判断是否存在目标物体,本实施例在判定存在目标物体的基础上根据可见光图像判断该目标物体是否为特定的预设物体,进而实现仅对预设物体进行高清晰度的可见光图像采集。举例说明以上论述,需要拍摄戴红色帽子的人的可见光图像,根据热成像图像仅能判断是否存在戴帽子的人(相当于目标物体)。当判定存在戴帽子的人后,通过调整镜头倍率获取当前可见光图像,在调整镜头倍率的过程中判断当前可见光图像中是否存在戴红色帽子的人(相当于预设物体),若存在则继续执行镜头倍率调整操作及目标可见光图像采集操作,若不存在则停止镜头倍率调整操作及目标可见光图像采集操作。上述解释中目标物体为戴帽子的人,但是帽子的颜色无法根据热成像图像确定,因此需要借助可见光图像识别帽子颜色的确认,以提高物体识别的准确性。
请参见图7,图7为本申请实施例所提供的一种补光方法的流程图,本实施例可以应用于图1对应的实施例采集目标可见光图像的之前,将本实施例与图1对应的实施例相结合可以得到更为优选的实施方式,本实施例可以包括以下步骤:
S701:确定热成像图像对应的环境温度区间,并根据环境温度区间确定最大环境温度;
S702:判断最大环境温度是否小于预设温度;若是,则进入S703;若否,则执行采集目标可见光图像的操作;
S703:启动补光灯。
当环境光照减少的时候,环境温度也会下降,因此可以通过热成像图像确定目标物体所在的环境的环境温度确定环境光强。若最大环境温度小于预设温度时,说明可能存在光照强度不足的情况,为了拍摄较好效果的可见光图片,可以通过启动补光灯进行补光。具体的当环境光照减少的同时环境温度也会相应下降,此时灰度0-255对应温度区间[T1,T2]也在变化;当T2<温度阈值Tn时,可以开启补光灯,当T1>温度阈值Tm时,可以关闭补光灯。作为一种可行的实施方式,可以根据可见光图像采集装置所在云台的云台仰角和可见光图像采集装置的镜头倍率确定补光灯的补光强度,仰角越小倍率越大时补光强度越强。具体的,补光强度计算公式可以为S=cosα·K·X;其中S为补光强度,α为云台仰角,K为补光强度系数,X为镜头倍率。当计算得到的补光强度大于补光灯级别最大强度时,实际补光强度可以为最大强度。
作为对图1对应的实施例的进一步补充,在S103根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像之前,还可以包括以下操作:当目标物体的数量大于1时,根据每一目标物体在热成像图像中的像素数量确定采集优先级,以便可见光图像采集装置按照采集优先级依次采集每一目标物体的目标可见光图像。
上述内容是针对同一时刻热成像图像中出现2个或2个以上目标物体的情况进行的补充,由于可见光采集装置是通过调整镜头倍率实现的,因此当存在间距较远的多个目标物体时无法通过一张可见光图像拍摄全部的目标物体的高清晰度图像。本实施例根据每一目标物体在热成像图像中的像素数量设置优先级,如像素数量越多的目标物体的采集优先级越高或者像素数量越少的目标物体采集优先级越高,使可见光图像采集装置按照采集优先级从高到低的顺序依次采集每一目标物体的目标可见光图像。通过根据像素数量排列采集优先级可以使可见光图像采集装置在采集所有目标物体的目标可见光图像的过程中,使镜头倍率尽量都按照增加或减少变化趋势进行变化,简化了目标可见光图像的采集流程。举例说明上述论述,存在目标物体A、B和C,这三个目标物体在热成像图像中的像素数量分别为20、15和30,采集目标物体A、B和C时需要的镜头倍率依次为3倍、4倍和2倍。若根据像素数量确定采集优先级,从高到低依次为C、A、B,在采集所有目标物体的可见光图像的过程中采集顺序为C、A、B,镜头倍率的调整顺序依次为2倍、3倍和4倍。若不按照采集优先级采集可见光图像而依次拍摄A、B、C,则镜头倍率的调整顺序依次为3倍、4倍和2倍,镜头倍率先调大后调小,操作复杂且效率不高。
作为对图1对应的实施例的进一步补充,在采集目标物体的目标可见光图像之后,还可以通过目标图像处理算法对目标可见光图像执行图像优化操作;其中,目标图像处理算法包括透雾算法、锐化算法、动态范围规划算法和降噪算法中的任一算法或任几种算法的组合。
其中,采集的目标可见光图像能够保证被监控物体的影像有足够多的像素,可以进行局部或者整体图像处理。具体的,可以基于ISP图像算法进行处理,例如通过透雾算法、锐化算法、动态范围规划算法和降噪算法对图片就进行优化。在优化过程中可以通过调整AE(Automatic Exposure)曝光信息,以使在环境照度较高时加快快门,在环境照度较低时减慢快门,保证每一帧画面亮度。还可以根据ISP透雾算法对环境中雾的浓度进行判断,自动根据雾的浓度使用合适的去雾强度,保证整体画面的透通性。锐化算法可以对所监控的物体进行细节提升,保证整体清晰度。动态范围规划算法DRC可以对暗区进行提亮,保证暗区可见性。还可以通过动态降噪算法(如2DNR、3DNR)对噪声进行消除,改善整体画面质量。在经过上述图像优化操作之后,还可以对图像通过数据再处理方式提升目标物体亮度、透通性、清晰度等。
请参见图8,图8为本申请实施例所提供的另一种图像采集方法的流程图,本实施例是将上述多个实施例进行结合得到的实施方式,具体步骤可以包括:
S801:确定热成像图像中区域温度在预设范围内的图像区域。
S802:判断图像区域内连续的像素点的数量是否大于预设数量;若是,则判定热成像图像中存在目标热源区域。
S803:获取热成像图像中目标热源区域对应的图像信息,并对目标热源区域对应的图像信息执行图像识别操作得到第二图像识别结果。
S804:当根据第二图像识别结果判定目标热源区域对应的图像信息为所述目标物体对应的图像信息时,判定存在目标物体。
S805:获取目标物体在热成像图像中的像素信息。
S806:根据像素信息确定目标物体在可见光图像采集装置的采集区域的位置信息。
S807:根据位置信息判断目标物体是否在采集区域中的目标子区域内;若否,则调整可见光图像采集装置的采集区域以使目标物体处于目标子区域内。
S808:根据像素信息确定目标物体在可见光图像采集装置采集的当前可见光图像中的初始像素数量比例。
S809:当初始像素数量比例小于预设比例时,调整可见光图像采集装置的镜头倍率直至目标物体在当前可见光图像中的像素数量比例大于或等于预设比例。
S810:确定热成像图像对应的环境温度区间,并根据环境温度区间确定最大环境温度。
S811:判断最大环境温度是否小于预设温度;若是,则进入S812;如否,则进入S813。
S812:启动补光灯,并进入S813。
S813:采集目标物体的目标可见光图像。
S814:通过目标图像处理算法对目标可见光图像执行图像优化操作。
上述实施例基于热成像图像对热源的判断可以准确对复杂环境中被监控物体监控并输出高清晰图像。本实施例还通过动态调整镜头变倍及摄像机图像处理参数,保证被监控物体的图像效果达到最佳。
请参见图9,图9为本申请实施例所提供的一种图像采集系统的结构示意图;
该系统可以包括:
物体判断模块100,用于获取热成像图像并根据热成像图像判断是否存在目标物体;
像素信息获取模块200,用于当存在目标物体时,获取目标物体在热成像图像中的像素信息;
图像采集模块300,用于根据像素信息调整可见光图像采集装置的镜头倍率以便采集目标物体的目标可见光图像。
本实施例利用热成像图像作为检测是否存在目标物体的参考信息,由于热成像图像是依靠物体自身温度发出的不可见光生成的图像,因此热成像图像能够在不受复杂环境的干扰下对目标物体进行准确的监控。在根据热成像图像检测到目标物体的基础上,可以得到目标物体在对应热成像图像中的像素信息。由于像素信息可以包括像素点的数量,像素点数量可以反映目标物体的成像大小,因此本实施例可以基于像素信息调整可见光图像采集装置的镜头倍率,以便对目标物体进行放大显示进而得到高清晰度的可见光图像。本实施例通过热成像图像检测目标物体是否存在并以目标物体在热成像图像中的像素信息作为调整镜头倍率的参考,能够准确识别目标物体并采集高清晰度的目标物体的可见光图像。
可选的,还包括:
位置确定模块,用于在根据像素信息调整可见光图像采集装置的镜头倍率之前,根据像素信息确定目标物体在可见光图像采集装置的采集区域的位置信息;
位置判断模块,用于根据位置信息判断目标物体是否在采集区域中的目标子区域内;
位置调整模块,用于当目标物体在采集区域中的目标子区域内时,调整可见光图像采集装置的采集区域以使目标物体处于目标子区域内。
可选的,还包括:
第一识别模块,用于根据可见光图像采集装置的当前可见光图像对目标物体执行图像识别操作,得到第一图像识别结果;
物体判断模块,用于根据第一图像识别结果判断目标物体是否为预设物体;
流程终止模块,用于当目标物体为预设物体时,停止可见光图像采集装置的镜头倍率调整操作以便退出目标可见光图像采集流程。
可选的,物体判断模块100包括:
热源判断单元,用于判断热成像图像中是否存在目标热源区域;
灰度信息获取单元,用于当存在目标热源区域时,获取热成像图像中目标热源区域对应的图像信息;
第二识别单元,用于对目标热源区域对应的图像信息执行图像识别操作得到第二图像识别结果;
目标物体判定单元,用于当根据第二图像识别结果判定目标热源区域对应的图像信息为所述目标物体对应的图像信息时,判定存在目标物体。
可选的,热源判断单元包括:
区域确定子单元,用于确定热成像图像中区域温度在预设范围内的图像区域;
连续像素数量判断单元,用于判断图像区域内连续的像素点的数量是否大于预设数量;
结果输出子单元,用于当图像区域内连续的像素点的数量大于预设数量时,判定热成像图像中存在目标热源区域。
可选的,还包括:
环境温度确定模块,用于在采集目标物体的目标可见光图像之前,确定热成像图像对应的环境温度区间,并根据环境温度区间确定最大环境温度;
温度判断模块,用于判断最大环境温度是否小于预设温度;
补光模块,用于当最大环境温度小于预设温度时,启动补光灯。
可选的,还包括:
光强确定模块,用于根据可见光图像采集装置所在云台的云台仰角和可见光图像采集装置的镜头倍率确定补光灯的补光强度。
可选的,还包括:
优先级确定模块,用于当目标物体的数量大于1时,根据每一目标物体在热成像图像中的像素数量确定采集优先级,以便可见光图像采集装置按照采集优先级依次采集每一目标物体的目标可见光图像。
可选的,还包括:
图像优化模块,用于通过目标图像处理算法对目标可见光图像执行图像优化操作;其中,目标图像处理算法包括透雾算法、锐化算法、动态范围规划算法和降噪算法中的任一算法或任几种算法的组合。
可选的,图像采集模块300包括:
参考值确定单元,用于根据所述像素信息确定所述目标物体在所述可见光图像采集装置的当前可见光图像中的像素参考值;其中,所述像素参考值包括像素数量和/或像素数量比例;
判断单元,用于判断所述像素参考值是否小于预设参考值;
调整单元,用于当所述像素参考值小于预设参考值时,调整所述可见光图像采集装置的镜头倍率直至所述目标物体在当前可见光图像中的像素参考值大于或等于所述预设参考值,以便采集目标物体的目标可见光图像。
可选的,当所述像素参考值包括像素数量比例时,参考值确定单元包括:
视场角调整子单元,用于调整所述可见光图像采集装置的视场角,以使所述可见光图像采集装置与拍摄所述热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值;
热成像像素数量确定子单元,用于根据所述像素信息确定所述目标物体在所述热成像图像中的像素数量;
比例计算子单元,用于根据所述视场角差与所述目标物体在所述热成像图像中的像素数量计算所述目标物体在所述可见光图像采集装置的当前可见光图像中的像素数量比例。
可选的,调整单元具体为确定所述像素参考值对应的目标变倍系数并根据所述目标变倍系数调整所述可见光图像采集装置的镜头倍率,以使所述目标物体在当前可见光图像中的像素参考值大于或等于所述预设参考值的单元。
由于系统部分的实施例与方法部分的实施例相互对应,因此系统部分的实施例请参见方法部分的实施例的描述,这里暂不赘述。
本申请还提供了一种计算机可读存储介质,其上存有计算机程序,该计算机程序被执行时可以实现上述实施例所提供的步骤。该存储介质可以包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本申请还提供了一种电子设备,可以包括热成像图像采集装置、可见光图像采集装置、存储器和处理器,热成像图像采集装置用于采集热成像图像;可见光图像采集装置用于采集可见光图像;存储器中存有计算机程序,处理器调用存储器中的计算机程序时,可以实现上述实施例所提供的步骤。当然电子设备还可以包括各种网络接口,电源等组件。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的状况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (14)
1.一种图像采集方法,其特征在于,包括:
获取热成像图像并根据所述热成像图像判断是否存在目标物体;
若存在所述目标物体,则获取所述目标物体在所述热成像图像中的像素信息;
根据所述像素信息调整所述可见光图像采集装置的镜头倍率以便采集所述目标物体的目标可见光图像。
2.根据权利要求1所述图像采集方法,其特征在于,在根据所述像素信息调整所述可见光图像采集装置的镜头倍率之前,还包括:
根据所述像素信息确定所述目标物体在所述可见光图像采集装置的采集区域的位置信息;
根据所述位置信息判断所述目标物体是否在所述采集区域中的目标子区域内;
若否,则调整所述可见光图像采集装置的采集区域以使所述目标物体处于所述目标子区域内。
3.根据权利要求1所述图像采集方法,其特征在于,在根据所述像素信息调整可见光图像采集装置的镜头倍率的过程中,还包括:
根据所述可见光图像采集装置的当前可见光图像对所述目标物体执行图像识别操作,得到第一图像识别结果;
根据所述第一图像识别结果判断所述目标物体是否为预设物体;
若否,则停止所述可见光图像采集装置的镜头倍率调整操作以便退出所述目标可见光图像采集流程。
4.根据权利要求1所述图像采集方法,其特征在于,根据所述热成像图像判断是否存在目标物体包括:
判断所述热成像图像中是否存在目标热源区域;
若存在所述目标热源区域,则获取所述热成像图像中所述目标热源区域对应的图像信息;
对所述目标热源区域对应的图像信息执行图像识别操作得到第二图像识别结果;
当根据所述第二图像识别结果判定所述目标热源区域对应的图像信息为所述目标物体对应的图像信息时,判定存在所述目标物体。
5.根据权利要求4所述图像采集方法,其特征在于,判断所述热成像图像中是否存在目标热源区域包括:
确定所述热成像图像中区域温度在预设范围内的图像区域;
判断所述图像区域内连续的像素点的数量是否大于预设数量;
若是,则判定所述热成像图像中存在所述目标热源区域。
6.根据权利要求1所述图像采集方法,其特征在于,在采集所述目标物体的目标可见光图像之前,还包括:
确定所述热成像图像对应的环境温度区间,并根据所述环境温度区间确定最大环境温度;
判断所述最大环境温度是否小于预设温度;
若是,则启动补光灯。
7.根据权利要求1所述图像采集方法,其特征在于,在根据所述像素信息调整可见光图像采集装置的镜头倍率以便采集所述目标物体的目标可见光图像之前,还包括:
当所述目标物体的数量大于1时,根据每一所述目标物体在所述热成像图像中的像素数量确定采集优先级,以便所述可见光图像采集装置按照所述采集优先级依次采集每一所述目标物体的目标可见光图像。
8.根据权利要求1所述图像采集方法,其特征在于,在采集所述目标物体的目标可见光图像之后,还包括:
通过目标图像处理算法对所述目标可见光图像执行图像优化操作;其中,所述目标图像处理算法包括透雾算法、锐化算法、动态范围规划算法和降噪算法中的任一算法或任几种算法的组合。
9.根据权利要求1至8任一项所述图像采集方法,其特征在于,根据所述像素信息调整所述可见光图像采集装置的镜头倍率包括:
根据所述像素信息确定所述目标物体在所述可见光图像采集装置的当前可见光图像中的像素参考值;其中,所述像素参考值包括像素数量和/或像素数量比例;
判断所述像素参考值是否小于预设参考值;
若是,调整所述可见光图像采集装置的镜头倍率直至所述目标物体在当前可见光图像中的像素参考值大于或等于所述预设参考值。
10.根据权利要求9所述图像采集方法,其特征在于,当所述像素参考值包括像素数量比例时,根据所述像素信息确定所述目标物体在所述可见光图像采集装置的当前可见光图像中的像素参考值包括:
调整所述可见光图像采集装置的视场角,以使所述可见光图像采集装置与拍摄所述热成像图像的热成像图像采集装置之间的视场角差小于或等于预设差值;
根据所述像素信息确定所述目标物体在所述热成像图像中的像素数量;
根据所述视场角差与所述目标物体在所述热成像图像中的像素数量计算所述目标物体在所述可见光图像采集装置的当前可见光图像中的像素数量比例。
11.根据权利要求9所述图像采集方法,其特征在于,调整所述可见光图像采集装置的镜头倍率直至所述目标物体在当前可见光图像中的像素参考值大于或等于所述预设参考值包括:
确定所述像素参考值对应的目标变倍系数,并根据所述目标变倍系数调整所述可见光图像采集装置的镜头倍率,以使所述目标物体在当前可见光图像中的像素参考值大于或等于所述预设参考值。
12.一种图像采集系统,其特征在于,包括:
物体判断模块,用于获取热成像图像并根据所述热成像图像判断是否存在目标物体;
像素信息获取模块,用于当存在所述目标物体时,获取所述目标物体在所述热成像图像中的像素信息;
图像采集模块,用于根据所述像素信息调整所述可见光图像采集装置的镜头倍率以便采集所述目标物体的目标可见光图像。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至11任一项所述图像采集方法的步骤。
14.一种电子设备,其特征在于,包括:
热成像图像采集装置,用于采集热成像图像;
可见光图像采集装置,用于采集可见光图像;
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至11任一项所述图像采集方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910227454.5A CN111741209A (zh) | 2019-03-25 | 2019-03-25 | 一种图像采集方法、系统、可读存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910227454.5A CN111741209A (zh) | 2019-03-25 | 2019-03-25 | 一种图像采集方法、系统、可读存储介质及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111741209A true CN111741209A (zh) | 2020-10-02 |
Family
ID=72646238
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910227454.5A Pending CN111741209A (zh) | 2019-03-25 | 2019-03-25 | 一种图像采集方法、系统、可读存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111741209A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113344785A (zh) * | 2021-06-10 | 2021-09-03 | 浙江大华技术股份有限公司 | 倍率值的确定方法及装置、存储介质、电子装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040145708A1 (en) * | 2003-01-24 | 2004-07-29 | Evans & Sutherland Computer Corporation | Infrared projector |
CN102461156A (zh) * | 2009-06-03 | 2012-05-16 | 弗莱尔系统公司 | 用于双传感器应用的红外相机系统和方法 |
CN105574847A (zh) * | 2014-11-03 | 2016-05-11 | 韩华泰科株式会社 | 相机系统及其图像配准方法 |
CN105844240A (zh) * | 2016-03-23 | 2016-08-10 | 深圳云天励飞技术有限公司 | 一种红外测温系统中的人脸检测方法及装置 |
CN106385530A (zh) * | 2015-07-28 | 2017-02-08 | 杭州海康威视数字技术股份有限公司 | 一种双光谱摄像机 |
JP2017069884A (ja) * | 2015-10-02 | 2017-04-06 | キヤノン株式会社 | 自動追尾装置 |
CN106713740A (zh) * | 2016-10-18 | 2017-05-24 | 广州视源电子科技股份有限公司 | 定位跟踪摄像方法与系统 |
CN207150735U (zh) * | 2017-05-31 | 2018-03-27 | 北京世纪瑞尔软件有限公司 | 一种全天候自动告警跟踪装置 |
CN108184102A (zh) * | 2018-02-09 | 2018-06-19 | 成都新舟锐视科技有限公司 | 一种热成像和可见光枪球联动系统及控制方法 |
US20180227503A1 (en) * | 2017-02-06 | 2018-08-09 | Kamakura Koki Co., Ltd. | Optical observation device |
CN108802742A (zh) * | 2018-04-28 | 2018-11-13 | 北京集光通达科技股份有限公司 | 异常物体监测方法、装置及系统 |
CN109361906A (zh) * | 2018-12-24 | 2019-02-19 | 天津天地伟业机器人技术有限公司 | 热成像超低照人脸识别球型摄像机 |
-
2019
- 2019-03-25 CN CN201910227454.5A patent/CN111741209A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040145708A1 (en) * | 2003-01-24 | 2004-07-29 | Evans & Sutherland Computer Corporation | Infrared projector |
CN102461156A (zh) * | 2009-06-03 | 2012-05-16 | 弗莱尔系统公司 | 用于双传感器应用的红外相机系统和方法 |
CN105574847A (zh) * | 2014-11-03 | 2016-05-11 | 韩华泰科株式会社 | 相机系统及其图像配准方法 |
CN106385530A (zh) * | 2015-07-28 | 2017-02-08 | 杭州海康威视数字技术股份有限公司 | 一种双光谱摄像机 |
JP2017069884A (ja) * | 2015-10-02 | 2017-04-06 | キヤノン株式会社 | 自動追尾装置 |
CN105844240A (zh) * | 2016-03-23 | 2016-08-10 | 深圳云天励飞技术有限公司 | 一种红外测温系统中的人脸检测方法及装置 |
CN106713740A (zh) * | 2016-10-18 | 2017-05-24 | 广州视源电子科技股份有限公司 | 定位跟踪摄像方法与系统 |
US20180227503A1 (en) * | 2017-02-06 | 2018-08-09 | Kamakura Koki Co., Ltd. | Optical observation device |
CN207150735U (zh) * | 2017-05-31 | 2018-03-27 | 北京世纪瑞尔软件有限公司 | 一种全天候自动告警跟踪装置 |
CN108184102A (zh) * | 2018-02-09 | 2018-06-19 | 成都新舟锐视科技有限公司 | 一种热成像和可见光枪球联动系统及控制方法 |
CN108802742A (zh) * | 2018-04-28 | 2018-11-13 | 北京集光通达科技股份有限公司 | 异常物体监测方法、装置及系统 |
CN109361906A (zh) * | 2018-12-24 | 2019-02-19 | 天津天地伟业机器人技术有限公司 | 热成像超低照人脸识别球型摄像机 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113344785A (zh) * | 2021-06-10 | 2021-09-03 | 浙江大华技术股份有限公司 | 倍率值的确定方法及装置、存储介质、电子装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10997696B2 (en) | Image processing method, apparatus and device | |
CN107087107B (zh) | 基于双摄像头的图像处理装置及方法 | |
EP2549738B1 (en) | Method and camera for determining an image adjustment parameter | |
EP1684504B1 (en) | Image capture apparatus and control method therefor | |
US10701281B2 (en) | Image processing apparatus, solid-state imaging device, and electronic apparatus | |
JP4730431B2 (ja) | 目標追尾装置 | |
US10482347B2 (en) | Inspection of the contoured surface of the undercarriage of a motor vehicle | |
JP5887508B2 (ja) | 露光制御装置、撮像装置、画像表示装置及び露光制御方法 | |
CN110248101B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
JP6553624B2 (ja) | 計測機器、及びシステム | |
CN104052905A (zh) | 用于处理图像的方法和设备 | |
CN111107276B (zh) | 信息处理设备及其控制方法、存储介质以及摄像系统 | |
JP5725194B2 (ja) | 夜景画像ボケ検出システム | |
JP6460829B2 (ja) | 撮像装置、電子機器及び光量変化特性の算出方法 | |
CN108802742A (zh) | 异常物体监测方法、装置及系统 | |
GB2559657A (en) | Method and apparatus for detecting a laser | |
JP2009025910A (ja) | 障害物検出装置、障害物検出システム及び障害物検出方法 | |
JP2012185684A (ja) | 対象物検出装置、対象物検出方法 | |
JP6265602B2 (ja) | 監視カメラシステム、撮像装置及び撮像方法 | |
CN111741209A (zh) | 一种图像采集方法、系统、可读存储介质及电子设备 | |
JP6189284B2 (ja) | 画像センシング装置 | |
KR101625471B1 (ko) | 보급형 열화상 카메라의 해상도 향상 방법 및 장치 | |
CN115022553B (zh) | 一种补光灯的动态控制方法和装置 | |
JP6584103B2 (ja) | 撮像装置 | |
JP7278764B2 (ja) | 撮像装置、電子機器、撮像装置の制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201002 |
|
RJ01 | Rejection of invention patent application after publication |