CN103900719A - 热像记录装置和热像记录方法 - Google Patents
热像记录装置和热像记录方法 Download PDFInfo
- Publication number
- CN103900719A CN103900719A CN201310745325.8A CN201310745325A CN103900719A CN 103900719 A CN103900719 A CN 103900719A CN 201310745325 A CN201310745325 A CN 201310745325A CN 103900719 A CN103900719 A CN 103900719A
- Authority
- CN
- China
- Prior art keywords
- thermal
- image data
- thermal imagery
- data frame
- reference picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Radiation Pyrometers (AREA)
- Studio Devices (AREA)
Abstract
本发明的热像记录装置和热像记录方法,涉及热像装置、热像处理装置,以及红外热成像检测的应用领域。现有技术的热像装置,拍摄时需依靠使用者的主观经验来拍摄被摄体热像,易遗漏,并且难以保证记录的热像的质量;热像记录装置,当检测到特定被摄体热像,则代表该热像的质量能符合被摄体识别信息(例如模板)的要求,进行自动记录,保证了被摄体热像的形态正确,避免了遗漏关键拍摄部位或被摄体缺陷,从而使拍摄的操作简单;或还能通知使用者,利于进一步进行分析、存储等处理或操作。
Description
技术领域
本发明的热像记录装置和热像记录方法,涉及手持拍摄或在线拍摄的各种热像装置,接收和处理热像的热像处理设备,以及红外热像检测的应用领域。
背景技术
为保证拍摄的红外热像的质量,存在这样的技术,按照红外热像中的规定位置,将规定尺寸的体现了被摄体预定的形态特征的参照图像与红外热像进行连续合成,使合成图像中能同时呈现被摄体热像和参照图像,以该参照图像作为拍摄被摄体热像的视觉参照,避免了遗漏和部位拍摄错误,同时提示了被摄体热像在红外热像中规范的成像位置、大小、角度,按照此参照图像作为拍摄的参照,易于记录获得规范的被摄体热像。例如专利文献申请号:201210008102.9公开了这样的热像拍摄装置。
然而,上述方式需要使用者通过视觉人工来判断参考图像和被摄体热像的相似程度,使用者容易产生视觉上的疲劳,并且,按下记录按键时,并不一定能保证记录的热像与参考图像的相似度。
因此,所理解需要一种热像装置,其能达到无需过度依赖使用者主观上的意念,能检测所拍摄的红外热像中是否具有与被摄体识别信息相似的特定被摄体热像,当检测到特定被摄体热像时,自动记录热像数据帧,从而使拍摄的操作简单。
发明内容
本发明提供一种热像记录装置和热像记录方法,将参考图像与拍摄获得的红外热像共同显示,使用者以该参考图像作为拍摄被摄体热像的视觉参照,进行被摄体的拍摄,当检测到特定被摄体热像,对使用者进行通知,由此,对使用者的技术要求降低,拍摄质量和速度提高,工作强度减低。
为此,本发明采用以下技术方案,
热像记录装置,具有,
获取部,用于连续获取热像数据帧;
热像存储部,用于存储获取部获取的热像数据帧;
参考图像指定部,用于指定参考图像的构成数据;
位置设置部,用于设置参考图像位于红外热像中的位置参数;
图像处理部,用于基于所指定的参考图像的构成数据及位置设置部所设置的位置参数,对热像存储部中存储的热像数据帧进行规定处理,生成体现了参考图像的红外热像;
显示部,用于显示规定处理后获得的图像;
检测部,用于检测所述热像数据帧中是否具有特定被摄体热像;
记录部,在检测部检测到的特定被摄体热像时,对规定的热像数据帧进行记录。
本发明的热像记录方法,具有,
获取步骤,用于连续获取热像数据帧;
热像存储步骤,用于存储获取步骤获取的热像数据帧;
参考图像指定步骤,用于指定参考图像的构成数据;
位置设置步骤,用于设置参考图像位于红外热像中的位置参数;
图像处理步骤,用于基于所指定的参考图像的构成数据及位置设置步骤所设置的位置参数,对热像存储步骤中存储的热像数据帧进行规定处理,生成体现了参考图像的红外热像;
显示步骤,用于显示规定处理后获得的图像;
检测步骤,用于检测所述热像数据帧中是否具有特定被摄体热像;
记录步骤,在检测步骤检测到的特定被摄体热像时,对规定的热像数据帧进行记录。
本发明的其他方面和优点将通过下面的说明书进行阐述。
附图说明:
图1是表示本发明的实施例1的热像记录装置的示例的热像装置100的概略构成的框图。
图2是实施例1的热像装置100的外型图。
图3是实施例1存储介质中存储的被摄体信息、参考图像、被摄体识别信息等的示意图。
图4是表示实施例1的控制流程图。
图5(A)是实施例1的处理过程的显示界面的显示例。
图5(B)是实施例1的记录的热像文件结构的示例。
图6是表示实施例2的控制流程图。
图7是实施例2的处理过程的显示界面的显示例。
图8是表示实施例3的控制流程图。
图9是实施例3的处理过程的显示界面的显示例。
图10是多个检测窗口检测的示意图。
图11是检测窗口的示意图。
图12是实施例4的处理过程的显示界面的显示例。
图13是表示实施例4的控制流程图。
图14是表示实施例5的控制流程图。
图15是实施例5的显示界面的显示例。
具体实施方式
现在将根据附图详细说明本发明的典型实施例。注意,以下要说明的实施例用于更好地理解本发明,所以不限制本发明的范围,并且可以改变本发明的范围内的各种形式。而且,虽然本发明在以下实施例中用于手持式的热像拍摄设备,但对于本发明来说拍摄功能不是必须的,可以使用要进行特定被摄体检测的任意热像数据源。因此本发明广泛用于读出和播放或显示记录热像、或者从外部接收和处理热像的热像处理设备。所述热像处理设备包括如个人计算机、个人数字助理、与热像拍摄装置连接的其他记录装置等各种装置。
实施例1
实施例1的热像装置100基于由拍摄部1拍摄获得的热像数据帧(拍摄获得的热像数据帧是指热像信号帧),将体现被摄体形态特征的参考图像与热像数据帧获得的红外热像共同显示,基于与参考图像的位置参数相同的检测窗口,检测获得的热像数据与参考图像之间的相关度,并且,热像装置100基于相关度对应的判断值所获得的判断结果(是否检测到特定被摄体热像)来进行记录的控制。
图1是表示本发明的实施例1的热像记录装置的示例的的热像装置100的概略构成的框图。
具体而言,热像装置100具有拍摄部1、临时存储部2、闪存3、通信I/F4、存储卡I/F5、存储卡6、图像处理部7、检测部8、显示控制部9、显示部10,控制部11、操作部12、控制部11通过控制与数据总线13与上述相应部分进行连接,负责热像装置100的总体控制。
拍摄部1由未图示的光学部件、镜头驱动部件、红外探测器、信号预处理电路等构成。光学部件由红外光学透镜组成,用于将接收的红外辐射聚焦到红外探测器。镜头驱动部件根据控制部11的控制信号驱动透镜来执行聚焦或变焦操作。此外,也可为手动调节的光学部件。红外探测器如制冷或非制冷类型的红外焦平面探测器,把通过光学部件的红外辐射转换为电信号。信号预处理电路包括采样电路、AD转换电路、定时触发电路等,将从红外探测器输出的电信号在规定的周期内进行取样等信号处理,经AD转换电路转换为数字的热像信号,该热像信号例如为14位或16位的二进制数据(又称为热像AD值数据)。在实施例1中,拍摄部1作为获取部的实例。
所谓热像数据帧,可以是热像信号(红外探测器输出信号经AD转换后获得的热像AD值数据),或红外热像的图像数据,或温度值的阵列数据,或其他基于热像信号生成的数据等。在下文中所谓的热像数据帧以热像信号为例。
临时存储部2如RAM、DRAM等易失性存储器,作为对拍摄部1输出的热像数据帧进行临时存储的缓冲存储器,例如重复如下处理,即将获取的热像数据帧临时存储规定时间份,并在由所述获取部(拍摄部1)获取新的帧时,删除旧的帧后存储新的热像数据帧;同时,作为图像处理部7、检测部8、控制部11等的工作存储器起作用,暂时存储由图像处理部7和控制部11进行处理的数据。不限于此,图像处理部7、检测部8、控制部11等处理器内部包含的存储器或者寄存器等也可以解释为一种临时存储介质。
闪存3,存储有用于控制的程序,以及各部分控制中使用的各种数据。本实施例中,如图3所示,与参考图像、检测等有关的数据存储在闪存3中,例如存储被摄体识别信息的数据库(表3),将每个被摄体的被摄体信息、参考图像的构成数据、被摄体识别信息、判断值相互对应,存储在该特征数据库中,此外,也可以以特定格式的数据文件等来存储。所谓参考图像的构成数据,例如矢量图形数据,点阵图像数据,也包括由多个坐标点数据构成参考图像的构成数据。被摄体信息为与被摄体有关的信息,例如代表被摄体地点、类型、编号等的信息,此外,还可以例举被摄体有关的归属单位、分类等级(如电压等级、重要等级等)、型号、制造厂商、性能和特性、过去的拍摄或检修的履历、制造日期、使用期限等各种信息。
通信I/F4是例如按照USB、1394、网络等通信规范,将热像装置100与外部装置进行连接并数据交换的接口,作为外部装置,例如可以列举个人计算机、服务器、PDA(个人数字助理装置)、其他的热像装置、可见光拍摄装置、存储装置等。
存储卡I/F5,作为存储卡6的接口,在存储卡I/F5上,连接有作为可改写的非易失性存储器的存储卡6,可自由拆装地安装在热像装置100主体的卡槽内,根据控制部11的记录控制部11C的控制记录热像数据帧等数据,并且,存储卡6记录由图像处理部7的静止热像压缩部(省略图示)规定的压缩形式编码后得到的静止热像数据帧等;另外,存储卡6记录由图像处理部7的动态热像编码部(省略图示)以规定的压缩形式编码后的动态热像数据帧等。
图像处理部7用于对通过拍摄部1获得的热像数据帧进行规定的处理,例如其在显示定时每次到来之际,从临时存储在所述临时存储部2的规定时间份的热像数据帧中,选择并读出每个规定时间间隔的帧;图像处理部7的处理如修正、插值、伪彩、合成、压缩、解压等,进行转换为适合于显示用、记录用等数据的处理。图像处理部7例如可以采用DSP或其他微处理器或可编程的FPGA等来实现,或者,也可与检测部8、控制部11为一体。
图像处理部7用于对获得的热像数据帧实施规定的处理来获得红外热像的图像数据。具体而言,例如,图像处理部7对拍摄部1拍摄获得的热像数据帧进行非均匀性校正、插值等规定处理,对规定处理后的热像数据帧进行伪彩处理,获得红外热像的图像数据;伪彩处理的一 种实施方式,例如根据热像数据帧(AD值)的范围或AD值的设定范围来确定对应的伪彩板范围,将热像数据帧在伪彩板范围中对应的具体颜色值作为其在红外热像中对应像素位置的图像数据。从图像处理部7伪彩处理后获得的图像数据传送到作为缓冲存储器使用的临时存储部2中。
另外,图像处理部7具备合成部7A,所述合成部7A基于参考图像指定部11A所指定的参考图像的构成数据,及位置设置部11B设置的位置参数,来获得参考图像,并与图像处理部7生成的红外热像,进行合成后产生合成图像的图像数据。具体地说,图像合成部7A根据规定的透明率,将参考图像与红外热像进行合成;包括这种情况,参考图像的透明率为1(如参考图像为边缘轮廓的线条图像),即不透明与红外热像合成。
图像处理部7,用于基于所指定的参考图像的构成数据及位置设置部11B所设置的位置参数,对所获取的热像数据帧进行规定处理,生成体现了参考图像的红外热像。
此外,合成也可以是根据这样的处理,例如根据参考图像位于红外热像中的像素位置,来对热像数据帧进行伪彩处理,以生成体现了参考图像和红外热像的显示用图像数据(类似重叠的效果);例如,根据参考图像的位于红外热像中的像素位置,对该像素位置的热像数据不进行伪彩处理,将参考图像的像素位置以外的热像数据进行伪彩处理,而后结合参考图像的图像数据,来生成显示用图像数据。
或者,也可以将参考图像对应热像数据帧中的像素位置的像素,进行与生成红外热像的其他像数位置的热像数据的伪彩处理所不同的处理(如伪彩处理,来生成带有体现该参考图像的图像。这种情况下,在热像装置100中可以去除用来将参考图像与红外热像合成的图像合成部7A。
所谓的参考图像,是指与红外热像共同显示,来帮助使用者拍摄特定被摄体的图像。例如,体现该特定被摄体的形态特征的图像;参考图像也可以是其他的形状,如方形、圆形;例如,体现被摄体热像位于红外热像中的期望成像位置的的标识图像;例如体现红外热像中的检测区域(检测区域可以包含一个或多个检测窗口)的标识图像;例如体现了期望的被摄体热像的分析区域的标识图像等。优选的方式,参考图像按照规定的位置参数(位置、或还包括尺寸,或还包括旋转角度)与红外热像重叠显示;此外,参考图像也可显示于显示部中,红外热像窗口之外的区域;此外,也可以将代表参考图像与红外热像的位置及尺寸比例等关系的缩略图显示在红外热像窗口之外的显示部的区域。
检测部8基于获取的热像数据帧,进行与被摄体识别信息之间的相关度计算;例如,检测部8基于控制部11的控制,可以通过读取临时存储部2中所存储的拍摄部1拍摄获得的热像信号帧,或通过读取临时存储部2中所存储的图像处理部对拍摄部1拍摄获得的热像信号帧进行规定处理获得的数据(例如伪彩处理获得的红外热像的图像数据),来执行与所登记的被摄体识别信息之间的相关度的检测处理。也可以是外部输入的数据通过规定处理获得的,例如通过I/F4从其他热像装置所接收后解码获得的热像信号帧(或红外热像的图像帧)。也可以是从记录介质中获取的,例如从存储卡6中读取热像文件而获得热像信号帧(或红外热像的图像帧)。所谓热像数据帧,可以是热像信号(AD值),或红外热像的图像数据,或温度值的阵列数据,或其他基于热像信号获得的数据等。
检测部8包括被摄体识别信息登记单元、检测窗口设置单元、检测单元、判断单元(未图示)。
特征登记单元,用于登记用来相关度计算有关的被摄体识别信息。例如,可根据存储介 质中预先存储的被摄体识别信息来登记被摄体识别信息;例如,根据使用者的选择的被摄体信息关联的被摄体识别信息,来登记用于相关度计算的被摄体识别信息。此外,也可以由用户来指定被摄体识别信息,例如可以通过从显示图像中指定被摄体区域来获得被摄体识别信息(例如模板数据,或提取的特征量)。所登记的被摄体识别信息例如被存储在临时存储部2的规定位置,或存储时以标记与存储的其他被摄体识别信息区别。
所谓被摄体识别信息可以是用于模板匹配的模板数据;例如,图3所示的表3,对于被摄体1,可以将体现了被摄体形态特征的参考图像T1的构成数据301来获得模板数据;模板数据可以是不同于参考图像的构成数据的模板数据,如被摄体3对应模板数据303。此外,被摄体识别信息也可以是参数描述的特征量,所谓特征量(点、线、面等特征),例如,为根据检测窗口中所包含的像素的状态所决定的值,如为特定检测窗口中的规定部分像素的比例、像素值的平均值、特定被摄体的轮廓的中心点、面积等。例如,对于表3中的被摄体2,被摄体识别信息为特征量302。在具体应用中,可以根据情况选择其中一种或多种方式的结合。
检测窗口设置单元,用于设置检测窗口;其中,本实施例中,根据参考图像位于红外热像中的位置参数,来设置检测窗口。检测窗口不限定于方形,也可以是其它形状,例如可以根据模板的形状来定。
为了等于检测窗口的尺寸,此处模板图像以缩小或扩大的状态被使用,或者,也可以准备及存储尺寸等于窗口尺寸的模板图像以备使用。在模板匹配中,检查模板图像与通过使用检测窗口从热像数据帧中裁剪的窗口热像之间的相关度。
检测单元,将所读取的热像数据帧中基于检测窗口设置单元所设置的检测窗口中的热像数据帧,与被摄体识别信息进行比对,获得用于评价类似程度的相关度的值。
判断单元,将相关度根据规定的判断值(例如与被摄体识别信息一起对应预存的)进行判断;例如,当搜索到与模板图像之间的类似程度的相关度的值超过了判断值时,将该帧判断为具有特定被摄体热像的帧,即检测到特定被摄体热像,来获得检测结果。在此,规定的判断值预先存储在闪存3中的表3中,但也可以为其他方式,如使用者设置的判断值。
具体而言,检测部8的检测处理可以是基于模板匹配的检测实施方式,基于检测窗口中的热像数据与模板图像进行相关度的计算和比较;例如,检测单元计算检测窗口中的红外热像和作为模板的红外热像相互对应的位置的像素之间的差的和,所计算出的差的和越小,相关度越高;当所计算的值小于或等于规定的判断值,判断为具有特征被摄体热像,当大于规定的判断值时,判断为不具有特定被摄体热像。
其中,也可以配置为基于模板提取特征量进行检测的实施方式,利用模板与检测窗口中的热像数据的特征量之间的比较来确定相关度。例如,提取检测窗口中的被摄体图像的特定像素的比例,与模板图像中的特定像素的比例的相关度大于规定的判断值时,判断为具有特定被摄体热像。注意,可以使用计算二个图像之间的相关度的各种方法,在该例举的处理仅是可使用方法的示例。
检测部8的检测处理也可以是基于参数描述的特征量(被摄体识别信息)的检测实施方式,进行规定的运算来获得检测窗口中的热像数据的特征量,并与参数描述的被摄体识别信息(点、线、面等特征)进行比较,根据规定的判断值,来获得判断结果。例如,所述特征量为特定像素值的像素的比例,检测单元计算热像数据中特定像素值的像素的比例,与特征量进行比较,当符合规定的判断值,判断为具有特定被摄体热像。在此,规定的判断值预先存储在闪存3中的表3中,但也可以为其他方式,如使用者设置的判断值。
控制部11控制了热像装置100的整体的动作,在存储介质例如闪存3中存储有用于控制的程序,以及各部分控制中使用的各种数据。控制部11例如由CPU、MPU、SOC、可编程的FPGA等来实现。
控制部11具备参考图像指定部11A,用于指定要与红外热像共同显示的参考图像的构成数据;例如,基于存储介质中存储的被摄体信息关联的参考图像的构成数据(点阵数据或矢量 数据),根据使用者对被摄体信息的选择,来指定与被摄体信息关联的参考图像的构成数据;此外,也可以根据热像装置100的默认配置,来指定参考图像的构成数据,例如检测区域的标识数据。
另外,控制部11具备位置设置部11B,用于设置参考图像位于显示部中的位置参数(位置,或还包括尺寸,或还包括旋转角度)。优选的,位置设置部11B用于设置参考图像位于红外热像中的位置和尺寸;例如,根据红外热像中规定的自适应显示区域,根据所计算的参考图像在该自适应区域中最大化居中显示的位置和尺寸,从而来设置参考图像位于红外热像中的位置和尺寸;例如,也可根据参考图像所附带的参数(例如体现了红外热像中的位置和尺寸的参数),根据该参数来设置参考图像位于红外热像中的位置和尺寸;或者,也可以根据热像装置100的配置(居中,原始尺寸)来设置参考图像位于红外热像中的位置和尺寸;或者,也可以根据使用者输入的位置和尺寸。
并且,控制部11具备记录控制部11C,进行记录的控制;例如基于检测部8的检测结果,从临时存储部2中存储的热像数据帧中选择将要经历所述记录处理的热像数据帧,并且执行对所选择的热像数据帧进行记录处理的控制。
另外,控制部11具备通知单元(未图示),当检测部8检测到具有特定被摄体热像时,执行进行通知的控制。可以使显示部产生显示内容的变化、热像装置100中的振动部件的振动、指示灯的灯光变化、声音部件的声音、分析部件的分析处理(并使显示部显示分析结果),诊断部件进行诊断(并使显示部显示诊断结果)、红外热像的伪彩变化等之一或多项的变化;只要是使用者可以感知的方式都可。
显示控制部9,用于将临时存储部2所存储的显示用的图像数据显示在显示部10。例如,在拍摄待机模式中,连续显示拍摄获得的热像数据帧生成的红外热像;在参照模式,同时显示红外热像(包括动态的红外热像和静止的红外热像的情况)和参考图像,在回放模式,显示从存储卡6读出和扩展的红外热像,此外,还可显示各种设定信息。具体而言,显示控制部9具有VRAM、VRAM控制单元、信号生成单元(未图示)等,并且,信号生成单元在控制部11的控制下,从VRAM中定期读出图像数据(从临时存储部2读出并存储到VRAM的图像数据),产生视频信号输出,显示在显示部10。在热像装置100中,显示部10例如是液晶显示装置。不限于此,显示部10还可以是与热像装置100连接的其他显示装置,而热像装置100自身的电气结构中可以没有显示部,这时显示控制部9也可作为合成图像输出部件的实例。
另外,在实施例中,显示部10基于通知单元的控制,用于在检测到特定被摄体热像时,进行通知;例如以文字和图像进行警告,如将参考图像闪烁显示,变色显示,红外热像显示画面的变化。
操作部12:用于使用者进行各种指示操作,或者输入设定信息等各种操作,控制部11根据操作部12的操作信号,执行相应的程序。参考图2来说明操作部12,提供使用者操作的按键有记录键1、调焦键2、确认键3、回放键4、菜单健5、方向键6等;此外,也可采用触摸屏7或语音识别部件(未图示)等来实现相关的操作。
参见图4来说明热像装置100的参照模式的控制流程,参考图5来说明拍摄过程中的显示界面的变化。本应用场景如使用者手持热像装置100对变电站的被摄体进行拍摄。控制部11基于闪存3中存储的控制程序,以及各部分控制中使用的各种数据,控制了热像装置100的整体的动作及执行多种模式处理的控制。在接通电源后,控制部11进行内部电路的初始化,而后,进入待机拍摄模式,即拍摄部1拍摄获得热像数据帧,图像处理部7将拍摄部1拍摄 获得的热像数据帧进行规定的处理,存储在临时存储部2中,显示部10上以动态图像形式连续显示红外热像,在此状态,控制部11实施其控制,持续监视是否按照预定操作切换到了其他模式的处理或进行了关机操作,如果有,则进入相应的处理控制。参照模式的控制步骤如下:
步骤A01,控制部11持续监视使用者是否选择了参照模式。
在待机拍摄状态,显示部10显示动态的红外热像,这时的拍摄角度和距离获得如图5中显示界面501所示的红外热像IR1,以往使用者会困惑于被摄体热像IR1的形态特征和在其所在的红外热像中的成像位置、大小、角度,为保证拍摄质量规范,通过操作部12的预定操作选择参照模式,当控制部11检测到使用者选择了参照模式(步骤A01:是),则进入参照模式处理。
步骤A02,而后,参考图像指定部11A指定参考图像的构成数据,例如,控制部11基于闪存3中存储的表3,将被摄体信息生成的被摄体指示信息显示在显示部10,如图5中502所示,当使用者根据拍摄现场的被摄体“被摄体1”,通过操作部12来选择显示部10上所显示的“被摄体1”,参考图像指定部11A根据使用者的选择,就确定了构成数据301用来生成参考图像T1,从闪存3中读取构成数据301等数据,传送到临时存储部2。
步骤A03,位置设置部8设置参考图像T1位于红外热像的位置参数(位置和尺寸)。例如,根据构成数据301所附带位置参数,来设置参考图像T1位于红外热像中的位置参数。此外,也可根据规定的自适应显示区,或使用者指定的位置参数,来确定参考图像T1位于红外热像中的位置参数。
步骤A04,接着,获取热像数据帧,将拍摄部1即时拍摄获得的热像数据帧传送到临时存储部2;
步骤A05,显示部10将参考图像T1与红外热像共同显示。
具体而言,图像处理部7对所获取的热像数据帧进行规定处理例如伪彩转换,获得红外热像的图像数据,并且,合成部7A将所确定的构成数据根据设置的规定尺寸获得参考图像T1的图像数据,按照所设置的规定位置,与生成的红外热像的图像数据进行合成(重叠),将合成的图像数据存放在临时存储部2,接着,显示控制部9将合成图像显示在显示部10,如图5中显示界面503所示,被摄体热像IR1与轮廓图像T1之间存在位置、尺寸的差异,使用者可根据参考图像来拍摄被摄体热像IR1。如在后续处理中未检测到特定被摄体热像,将不断与新获取的热像数据帧进行合成,以此,来不断显示动态的合成图像。
在步骤A06,特征登记单元将参考图像T1登记作为匹配的模板图像。
接着,在步骤A07,读取临时存储部2中的热像数据帧,检测窗口设置单元,根据参考图像T1位于红外热像中的位置参数,设置同等位置参数的检测窗口J1(503中所示意的J1,可以显示或不显示)。
步骤A08,进行相关度计算的处理。
检测部8基于检测窗口设置部所设置的检测窗口J1,及特征登记单元所登记的模板(参考图像T1),读取临时存储部2中由拍摄部1即时拍摄获得的热像数据帧,其中,抽取位于该检测窗口J1中的热像数据,进行模板匹配,计算二者之间的相关度。
具体而言,检测部8例如通过以下的处理来计算相关度,首先,检测部8提取位于检测窗口中的热像数据,按照AD值的预定阀值对读取的检测窗口中的热像数据进行二值化;接 着,提取该二值图像的具有预定像素值(1或0)的像素相连通的连通图像;而后判断该连通图像是否具有预定范围的大小;如果判断出该连通图像的大小在预定范围内,则近一步在提取的连通图像与所登记的模板(参考图像T1)之间执行相关度计算处理,例如计算二者之间的重叠面积在各自总面积中的比例之和,由此,获得表示所提取的连通图像与参考图像T1之间相关度。
并且,在步骤A09,如果相关度大于预定判断值,则检测部8确定检测到特定被摄体热像。如否;回到步骤A04,并在步骤A05将参考图像与新获取的热像数据帧生成的红外热像共同显示。在此,使用者根据参考图像T1的参照,通过改变拍摄的位置和调整热像装置100的光学部件和“被摄体1”之间的拍摄距离、成像位置、角度,尽量使得到的如图5显示界面504中被摄体热像IR10与参考图像T1在视觉上处于成像位置、大小、形态的匹配状态。伴随着使用者的调整操作,在步骤A08,对新取得的热像数据帧进行检测处理,当在步骤A09检测到的相关度大于等于规定的判断值,则进入步骤A10。
需要指出的是,检测部8基于获取部连续获取的热像数据帧,检测是否具有特定被摄体热像,并计算特定被摄体热像有关的规定信息;例如,可以是对连续获取的热像数据帧依次全部进行检测处理,也可以只读取规定间隔的热像数据帧进行检测处理;或者对读取的热像数据帧或检测窗口中的热像数据检测前进行了缩小处理;以此,能减轻伴随着检测的处理负担。
步骤A10,记录控制部11C进行记录的控制。
在本实施例中,作为记录部的控制部10,在检测部检测到的特定的被摄体热像时,自动将规定的热像数据帧与规定记录信息进行关联记录。
其中,所述规定的热像数据帧为通过拍摄部拍摄获得的热像数据帧和/或通过拍摄部1拍摄获得的热像数据帧进行规定处理后获得的数据。规定处理例如修正、插值、伪彩、转换为温度数值、降像素、压缩等处理的一种或同时多种。
本实施例中,为临时存储部2规定区域中保持的检测到特定被摄体热像对应的热像数据帧(欲图5(A)中的显示界面504显示的红外热像IR0对应的热像数据帧)压缩后的热像数据。此外,也可以是判断检测到特定被摄体热像的时刻(或之后的规定时刻),由红外探测器读取信号所获得的热像数据(帧);此外,也可以是从临时存储部2中存储的多帧热像数据帧中所选择的相关度最大的热像数据帧;此外,也可以是记录规定数量的多帧热像数据帧;此外,也可以是规定数量的多帧热像数据帧经过规定处理获得的热像数据帧,如对临时存储部2中存储的多帧热像数据帧进行积分运算获得该处理后的一帧热像数据帧。可以是这些情况获得的热像数据帧之一或多种,如同时记录热像数据帧获得的各像素的温度值和红外热像的图像数据。
其中,规定记录信息,可以是以下信息中的一种或一种以上:
1)信息选择部选择的被摄体信息(被摄体信息中规定的部分信息或全部);
2)指定的参考图像的构成数据或与其关联的其他构成数据(与参考图像具有规定位置关系的对象的构成数据)。
3)所选择的参考图像的构成数据或其关联的其他构成数据的身份信息。
4)参考图像或其关联其他构成数据获得的对象位于红外热像中的位置信息。
5)按照规定算法对指定计算对象计算获得的构成数据,和/或,该构成数据获得的对象 位于红外热像中的位置信息。所述计算对象例如,所指定的参考图像的构成数据或其关联的其他构成数据。
6)按照规定加工算法对指定加工对象加工获得的构成数据,和/或,该构成数据获得的对象位于红外热像中的位置信息。所述加工对象例如,所指定的参考图像的构成数据或其关联的其他构成数据。
7)与检测到的特定被摄体热像有关的位置信息,例如检测窗口的位置(或还包括尺寸,或还包括旋转角度),或根据检测窗口及位置参数。
具体而言,一种实施方式,记录控制部11C控制,使规定记录信息和压缩后的热像数据帧相关联,生成热像文件记录到存储卡8,结束该处理。此外,也可在附加了信息后再进行压缩。
一种关联记录的实施方式,将规定记录信息作为规定格式的热像数据帧的信息附加;具体而言,一种实施方式,记录控制部11C控制,基于检测部8的检测结果从临时存储部2中存储的热像数据帧中选择将要经历所述记录处理的热像数据帧(具有检测到特定被摄体热像的热像数据帧),并且执行对所选择的热像数据帧进行记录处理的控制。即使图像处理部2对该热像数据帧实施规定的压缩处理,或者对该热像数据帧实施规定的处理如修正、插值等处理后进行压缩处理,而后判断临时存储部的规定区域是否存储了规定的记录信息,如有,则使临时存储部2的规定区域中存储的规定记录信息和压缩后的热像数据帧相关联,生成热像文件记录到存储卡8,结束该处理。见图5(B)中的热像文件结构的一种实施示意图;其中,规定记录信息5001:被摄体信息“被摄体1”、参考图像T1的构成数据、参考图像T1位于红外热像中的位置参数,其中,“T1的位置信息”表达了如图5(A)中的显示界面504所示的被摄体热像IR1位于红外热像IR0中的位置和尺寸;热像数据帧5002为压缩后的热像数据帧(与图5(A)中的显示界面504显示的红外热像IR0对应的热像数据帧);其他附加信息5003如拍摄的时间等。
此外,记录的存储介质不限于存储卡8、闪存9等,也可以是通过通讯部4通讯的网络目的地。
此外,关联记录处理还指可将规定记录信息记录在与热像文件关联的信息文件或索引文件中等,记录控制部11C可生成该信息文件或索引文件;此外,还可根据被摄体信息来生成热像文件名,所述记录记录部11C具有文件名生成单元(未图示),用于生成热像文件的文件名,所述文件名至少包含与指定的被摄体信息有关的信息;例如生成的热像文件名:被摄体1.jpg;进一步,与时间信息“20120223”结合生成文件名,例如被摄体1-20120223.jpg;关联记录的实质是记录便于后续的批处理分析所需要的信息,而文件名中包含了被摄体信息使使用者便于查看,根据被摄体信息中的分类信息来生成可识别的包含分类信息的文件名,使后续批处理分析便于读取和识别文件名中的分类信息。
如上所述,在本实施例中,由于同时显示规定位置、规定尺寸并对应于被摄体的预定形态特征的参考图像,对拍摄被摄体热像的形态特征和被摄体热像在红外热像中的成像位置、大小、角度提供了视觉参照,当检测到具有特定被摄体热像的热像数据帧时,予以自动记录,能达到减轻拍摄工作量的有益效果。而将规定记录信息与热像数据帧关联记录,使减轻了后续批处理分析时的负担。
并且,虽然为减少计算量,设置与位置设置部所设置的参考图像的位置参数相同的位置参数的检测窗口;但也可以设置多个检测窗口。此外,当模板等被摄体识别信息对应了参考图像中的局部时,根据用于模板与参考图像的相对位置关系(例如预存模板位于参考图像中的基点位置、尺寸、旋转角度的关系)。
并且,在实施例1中的记录处理,是将规定的热像数据帧与规定的记录信息关联记录,但也可仅记录规定的热像数据帧。
实施例2
实施例2与实施例1的不同之处在于,参考图像为代表检测区域(可在检测区域中设置一个或多个检测窗口)的标识。并且,不同于实施例1中的检测处理,实施例2通过将被摄体热像与特征量(被摄体识别信息)之间的比较来检测特定被摄体热像,并且,在检测到特定被摄体热像时,还进行了对使用者的通知。
参见图6来说明实施例2的热像装置100的参照模式的控制流程,参考图7来说明拍摄过程中的显示界面的变化。
步骤B01,控制部11持续监视使用者是否选择了参照检测模式。当控制部11检测到使用者选择了参照模式(步骤B01:是),则进入参照模式处理。
步骤B02-B03,在此,假定拍摄被摄体2,根据使用者的选择,参考图像指定部11A指定参考图像的构成数据2(代表了检测区域的标识数据)。而后,位置设置部11B设置参考图像T2位于红外热像的位置参数。
步骤B04,接着,控制部11控制将拍摄部1拍摄获得的热像数据帧传送到临时存储部2;
步骤B05,显示部10将代表了检测区域的参考图像(矩形框T2)重叠显示在所读取得热像数据帧生成的红外热像中,使用者将根据该矩形框T2,来调整被摄体热像IR2拍摄的成像位置和尺寸。如图7中的显示界面701所示。
而后,在步骤B06,特征登记单元根据在步骤B02中所选择的被摄体信息被摄体2所关联的特征量302,登记作为后续计算相关度的被摄体识别信息,在此,该特征量302表示特定像素值的像素在规定检测窗口(例如矩形框T2)中所有像素中所占的比例。
接着,在步骤B07,检测窗口设置单元,对检测窗口进行设置。在此,根据矩形框T2的位置和尺寸来设置红外热像中的检测窗口。
其后,步骤B08,进行相关度计算的处理。
具体而言,检测部8例如通过以下的处理来检测红外热像中的被摄体热像与特征量之间的相关度,检测部8抽取位于检测窗口中的热像数据,生成在检测窗口中特定像素(例如特定AD值)在所有像素中所占的比例;当步骤B09,所得到的比例值符合特征量的预定比例范围(规定的判断值),判断为检测到被摄体热像。注意,可使用各种特征量提取和匹配的方法,该实施例中的处理仅为示例。
如未检测到特定被摄体热像;回到步骤B04,即,读取拍摄获得的热像数据,并继续后续的处理。在此,使用者根据矩形框T2的参照,通过改变拍摄的位置和调整热像装置100的光学部件和“被摄体1”之间的拍摄距离、成像位置、角度,尽量使得到的如图7显示界面702中被摄体热像IR2与矩形框T2在视觉上处于成像位置、大小匹配状态。伴随着使用者的调整操作,在步骤B05,对新读取的热像数据帧进行检测处理,当检测到的与特征量的相关度符合规定的判断值,代表检测到特定被摄体热像,则进入步骤B10。
步骤B10,控制部11控制显示部10,以以下方式的一种或同时多种来通知使用者。
例如,通过改变参考图像的透明率、颜色、尺寸、闪烁(如图7中的702所示)、参考图像构成数据的变化等方式来进行通知,文字提示、冻结显示图像、在显示部10的其他位置显示规定图像帧(如检测到特定被摄体热像的热像数据帧获得的红外热像)等显示通知的方式。其中,通知的方式可以持续规定的时间例如参考图像连续闪烁1秒并伴随着变色。
此外,通知部件也可以是热像装置100中的振动部件、指示灯(未图示),分析部件(未图示),诊断部件(未图示),基于控制部11的控制,在检测到特定被摄体热像时,也可由指示灯产生灯光变化,由振动装置产生震动,由分析部件进行分析并显示分析结果,由诊断部件进行诊断并显示诊断结果,只要是使用者可以感知的方式都可。
步骤B11,记录处理,自动记录检测出特定被摄体热像的热像数据帧。但不限于此,另一实施方式,也可在使用者按下记录键,再进行记录处理。
步骤B12,判断是否退出参考模式,如退出,则结束,如未退出,则回到步骤B04,重复上述的处理。
如上所述,在本实施例中,由于同时显示代表了检测区域的标识,对拍摄被摄体热像的形态特征和被摄体热像在红外热像中的成像位置、大小的大致范围提供了视觉参照,使用者根据该标识来调整热像装置100,来拍摄被摄体热像,以使被摄体热像的成像位置和尺寸与标识框吻合,并且,当检测到特定被摄体热像予以通知并自动进行记录,能降低用户的对准拍摄的难度和强度,提高检测质量和速度,普通使用者容易掌握这种拍摄技能。
所显示的参考图像不限于表示检测区域(或检测窗口)的矩形框,例如可以是圆形或对应于检测到的被摄体热像的任意形状或对应于大致检测区域的点、线等标识。
实施例3
实施例3与实施例1,2的不同之处在于,用户通过操作部来指定红外热像中的区域,基于用户指定的红外热像中的区域,来指定参考图像及后续作为被摄体识别信息的模板图像的数据。并且,在检测到具有特定被摄体热像的热像数据帧时进行自动记录时,进行了对使用者的通知。
参见图8来说明实施例3的热像装置100的参照模式的控制流程,参考图9来说明拍摄过程中的显示界面的变化。
步骤C01,控制部11持续监视使用者是否选择了参照模式。
在待机拍摄状态,显示部10显示动态的红外热像,这时的拍摄角度和距离获得如图9中显示界面901所示的红外热像IR3,当控制部11检测到使用者选择了参照模式(步骤C01:是),则进入参照模式处理。
步骤C02,控制部11控制使显示一剪切矩形框J3;使用者调整被摄体IR3拍摄的角度、距离,或调整剪切区域J3,使期望生成参考图像的被摄体热像IR3位于矩形框J3中,如图9显示界面902所示。而后,当使用者按下确认键,参考图像指定部11A将该区域中剪切的图像数据存储在临时存储部2的规定区域,将剪切获得的图像数据指定作为生成参考图像TU3的构成数据;
并且,在步骤C03,设置基于所剪切的图像数据获得的参考图像TU3位于红外热像的规定位置和规定尺寸,在此,根据在自适应区域Z1中最大化居中显示的方式来设置参考图像TU3的(位置和尺寸)。
步骤C04,获取热像数据帧,将拍摄部1拍摄获得的热像数据帧传送到临时存储部2;
步骤C05,图像处理部7将所获取的热像数据帧进行规定的伪彩处理,获得红外热像的图像数据存储在临时存储部2的规定区域,合成部7A根据所剪切的图像数据根据所设置的尺寸生成参考图像TU3,并且,合成部7A将参考图像TU3按照所设置的位置与该红外热像进行合成;而后,显示部10显示该图像。如图9中的显示介面显示界面903所示,参考图像TU3重叠显示在红外热像中,使用者可根据该参考图像TU3,来调整被摄体热像拍摄的成像位置和尺寸。
而后,在步骤C06,特征登记单元8将参考图像TU3登记作为后续相似度计算的被摄体识别信息。
接着,在步骤C07,检测窗口设置单元,对检测窗口进行设置。在此,根据参考图像TU3同等的位置和尺寸来设置红外热像中的检测窗口。
步骤C08,进行检测相关度的处理,具体而言,检测部8例如通过以下的处理来检测红外热像中的被摄体热像与参考图像之间的相关度,检测部8读取在步骤C05存储在临时存储部2规定区域中的红外热像,提取位于检测窗口中的红外热像,检测单元计算检测窗口中的红外热像和作为模板的参考图像TU2相互对应的位置的像素之间的差的和,所计算出的差的和越小,类似程度越高;当在步骤C09,判断所得到的值符合规定的判断值,判断为检测到被摄体热像。此外,也可使用各种特征量提取方法来进行模板图像TU3与检测窗口中的红外热像的比较,实施例中的处理仅为示例。
如未检测到检测到特定被摄体热像;回到步骤C04,重复后续的处理。在此,使用者通过改变拍摄的位置和调整热像装置100的光学部件和“被摄体1”之间的拍摄距离、成像位置、角度,尽量使得到的如图9显示界面904中被摄体热像IR3与参考图像TU3在视觉上处于成像位置、大小类似状态。伴随着使用者的调整操作,对新取得的热像数据帧获得的红外热像进行检测处理,当检测到的与特征量的相关度符合规定的判断值,则进入步骤C10。
步骤C10,记录处理,类同A10,省略了描述。
步骤C11,通知部,通知使用者。类同B10,省略了描述。
如上所述,在本实施例中,通过指定参考图像及用于检测处理的被摄体识别信息,便于未事先准备的情况下来获得参考图像的显示,及进行检测处理,和后续的记录和通知,操作简单,方便使用者使用。
此外,当热像装置100中具有或连接有其他类型的成像装置(例如可见光相机,在图1中未图示),也可以使用其他成像装置采集的图像来从中指定作为参考图像的构成数据。
此外,也可从存储介质等中来选择加工对象,例如从存储卡8中读取预先存储的红外热像或可见光图像等来从中指定生成参考图像。
并且,虽然在实施例中示例了将参考图像同时作为模板图像的数据,但也可设置与参考图像不同的模板图像的数据,例如将参考图像中的局部作为模板图像的数据。
实施例4
实施例4与实施例1,2,3的不同之处在于,检测部8通过热像数据帧中的多个检测窗口来检测与被摄体识别信息的相关度,由于热像数据帧中的检测范围的增加,使用户在拍摄中的操作更为方便,检测的精度得以提高。并且,将规定的信息与热像数据关联记录时,并不必须记录参考图像的构成数据和位置信息,也可以根据所检测到的最大相关度的检测窗口, 来获得用于关联记录的被摄体热像的位置和尺寸的信息,也可以根据在最大相关度的检测窗口中提取被摄体热像的边缘轮廓等,来获得并记录相关的规定记录信息。
由于取决于拍摄的距离等因素,被摄体热像的尺寸并不是一个常数,尽管可以按照参考图像来进行成像尺寸的参照,并且将检测窗口设置为与参考图像位置参数一致,同时,还可以对检测到特定被摄体热像与否的判断值予以较宽的范围,降低检测的精度,来更为快捷地获得检测结果的速度。但在拍摄的距离等具有限制的情况下,还是不便使用。
通过增加检测窗口的数量,对所获得的窗口热像数据来检测与被摄体识别信息的相关度,当设置了多个检测窗口时,例如可将其中检测获得的最大相关度的值作为该热像数据帧的相关度的值;使用户在拍摄中的操作更为方便。此外,也可根据检测窗口之间的规定位置,可以检测出多个特定被摄体热像。
检测部8的检测窗口设置单元,用于设置检测窗口。例如根据一定范围的检测区域(如图10中的G4),在该检测区域G4中设置多个检测窗口,可以是多个不同尺寸的检测窗口,也可以是近一步倾斜后的检测窗口;通常可根据拍摄质量的要求来预先设定检测窗口的尺寸、倾斜等;如图11所示,其中图11(a)为标准的检测窗口,图11(b)为根据缩小尺寸的检测窗口,图11(c)为放大尺寸设置的检测窗口,图11(A)为按照规定角度倾斜而设置的检测窗口。为了等于检测窗口的尺寸,此处模板图像等以缩小或放大或还倾斜的状态被使用,或者,也可以准备及存储尺寸等于窗口尺寸的模板图像以备使用。此外,也可将检测窗口中的热像数据以缩小或放大或还倾斜的状态被使用,以对应模板图像。
检测区域也可由使用者根据拍摄习惯来设置;或者也可以是预存的如与被摄体信息关联的;也可以根据上次标识的位置生成的;也可不设置检测区域,即默认热像数据帧的范围为检测区域。也可以是使用者指定的位置和尺寸来设置多个检测窗口。此外,并非必须设置多个检测窗口,也可以只设置一个检测窗口。
需要注意的是,对于红外检测的应用领域,例如变电站中充斥着大量外形类似,但名称不同的设备,为避免误导使用者及误拍摄,优选的是设置检测区域。在红外热像上重叠显示检测区域的标识,使用者易于明白所拍摄的被摄体热像的大致位置、尺寸等,便于拍摄参照。并且能加快检测处理的速度,但检测区域也可不显示。
检测部8的检测单元,从临时存储部2读取热像数据帧,将所读取的热像数据帧中基于检测窗口设置单元所设置的检测窗口中的热像数据,根据被摄体识别信息,获得用于评价相关度的值。
对于多个检测窗口的检测的示例,如图10所示,检测部8从热像数据帧1001的规定检测区域G4的左上角到右下角移动窗口J4以进行检测,剪切窗口中的热像数据,并检测其与模板图像T4的相关度。具体而言,窗口J4从左端向右以规定值的窗口位移(例如一个像素)逐步地移动,并在到达右端后,被设置返回左端并向下移动窗口位移,以及随后再次逐步地向右移动。为高精度地检测被摄体,检测的窗口尺寸、窗口位移、窗口的旋转角度的变换范围被预先定义,例如窗口尺寸的变化范围从150×50像素到120×40像素,窗口位移的变化范围从10个像素到1个像素,窗口的旋转角度的变化范围为基于中心点的0°到10°。检测部8逐次的,每次5个像素地改变窗口尺寸,并每次1个像素地改变窗口位移,并每次2°地改变窗口旋转角度。此时,检测部8进行模板图像T4和热像数据帧1001的相关度计算;在完成所有检测窗口的检测后,从中选择相关度最高的检测窗口所获得的相关度的值,作为 该热像数据帧1001对应的相关度的值。注意,可以基于被摄体识别信息,来计算热像数据帧的相关度的各种方法,上述例举的处理仅是可使用方法的示例。
参考图12来说明拍摄过程中的显示界面的变化;图13来说明实施例4的热像装置100的参照模式的控制流程。
步骤D01-步骤D05,类同与实施例1中的步骤A01-A05,省略了重复描述。
在步骤D06,特征登记单元登记被摄体识别信息;接着,在步骤D07,读取临时存储部2中的热像数据帧,检测窗口设置单元,根据参考图像T4位于红外热像中的尺寸和位置,基于参考图像T4的中心点放大规定比例设置检测区域G4;并且,基于检测区域G4的左上角,设置了与参考图像T4的尺寸相同的检测窗口J4;如图12的1201所示,可将检测区域G4与轮廓图像T4共同重叠在红外热像中显示作为参考图像,使用者易于明白所拍摄的被摄体热像的大致位置、尺寸等,便于拍摄参照。但检测区域G4也可不显示。
其后,步骤D08,进行检测处理,计算检测窗口的热像数据和模板T4的相关度,并在步骤D09,将检测到的相关度的值及所对应的检测窗口的位置参数存储在临时存储部2的规定区域;
在步骤D10中,检测部8判断在热像数据帧中设置检测窗口时,是否已经针对所有检测窗口计算了相关度。如果剩余还没有计算相关度的区域(步骤D10中为否)则回到步骤D07中,检测窗口设置单元在预定方向上讲检测窗口的位置偏移预定像素数,将该位置设置为检测窗口的下一位置,并重复后续的处理。
如果已经针对要在热像数据帧中设置的所有检测窗口计算了相关度(步骤D10中为是),则在步骤D11中选择具有最大相关度的值,在步骤D12中与规定的判断值进行比较,如果检测到特定被摄体热像,则在步骤D13中对所检测到的具有最大相关度的特定被摄体热像的检测窗口的区域进行通知,在图12的1202中示例了通知的一种方式,将最大相关度值所对应的检测窗口J40,显示在红外热像中。
如在D12未检测到特定被摄体热像;回到步骤D04,重复后续的处理。步骤D14,判断是否退出,如未退出,则回到步骤D04。
此外,从热像数据帧中搜索与模板图像T4类似的帧部分时,对于放大及缩小、以及将检测窗口J4旋转规定角度后的检测窗口时,也进行类似上述说明的检测处理。
步骤D14,判断是否使用者是否按下了记录键,如否,则回到步骤D04;如是,则在步骤D15,进行记录处理。此外,也可以配置为自动执行记录处理。
在此,将标识J40及J40位于红外热像1202中的位置和尺寸,所构成的规定记录信息与热像数据帧关联记录。当涉及检测窗口(最大相关度的检测窗口)的旋转时,还可进一步将旋转角度的参数与热像数据关联记录。
此外,也可以根据最大相关度的检测窗口所提取的被摄体热像的边缘轮廓,或由此获得的相关构成数据(例如,根据轮廓所计算获得的分析区域),及位置和尺寸,与热像数据关联记录。
实施例4的变形,在有些应用的情况下,对是否检测到特定的被摄体热像,并不限于相关度的值与相关度的判断值之间的比较,也将检测处理,变更为例如根据检测获得的规定信息和/或评价值及对应的比较值的比较结果,作为检测到特定被摄体热像的依据。
其中,所述规定信息,至少包括特定被摄体热像的位置、尺寸、倾斜角度、分析值、相关度的值中的一种或任意组合的信息。
在红外检测的领域,由于考虑到被摄体热像在红外热像中的位置、尺寸、倾斜角度等的不同,对应了不同的拍摄质量;因此,例如考虑被摄体热像位于热像数据帧中的位置、尺寸、倾斜角度等因素,作为生成相应不同形态的标识的因素,来提示使用者注意拍摄的质量。
并且,检测部8还具有检测分析值的功能单元,所谓的分析值例如对所检测的热像数据帧或检测到的被摄体热像按照规定算法获得的分析值;例如由检测窗口中的热像数据AD值计算获得的温度值,规定算法例如计算规定的分析区域中的最高、最低、平均温度值;也可以是不同的分析区域中温度的比较值,例如温差;当检测到被摄体热像中具有大于规定的比较值(例如缺陷的阀值)的分析值时,代表被摄体具有缺陷,那么,应引起使用者的重视;这时的特定的标识将立即引起使用者的注意,对红外检测的意义重大。其中,分析值并不限定于温度值,例如,也可以是AD值、伪彩热像中的颜色值、特定像数值的比例,或还将这些数值按照规定公式计算获得的值等。
如上所述,在本实施例中,不仅可以获得实施例1的效果,由于设置了多个检测窗口,能减低视觉对准的操作难度,并且,能提高检测精度,并且,在显示的红外热像中重叠了检测到的被摄体热像IR4的位置和尺寸的标识J40,普通使用者容易掌握这种拍摄技能,并且,将标识J40与热像数据帧关联记录,与实施例1相比,其所代表的特定被摄体热像在红外热像中的位置和尺寸更为精确,达到了后续分析时提高精度的有益效果。当然,实施本发明的实施方式的任一产品并不一定需要同时达到以上所述的所有优点。
实施例5
实施例5,与上述实施例1,2,3,4的不同之处在于,所述热像装置100对检测到的具有最高相关度的热像数据帧进行通知,并且,与上述通知的方式不同,将最高相关度的热像帧与动态的红外热像共同显示来进行通知,并且,在通知后,由使用者确认来执行记录。
参考图14来说明实施例5的热像装置100的参照模式的控制流程。图15来说明通知时的显示界面;
步骤E01-步骤E05,显示参考图像与动态的红外热像,类同与实施例1中的步骤A01-A05,省略了重复描述。
步骤E06-E07,检测处理,类同与实施例1中的步骤A06-A08,或实施例4中的步骤D06-D11,省略了重复描述。将计算该热像数据帧获得的相关度的值存储在临时存储部2;
步骤E08,判断是否大于相关度的对比值;如否,则回到步骤E04,重复后续的处理,如是,则在步骤E09,将所检测获得的相关度的值,替换之前的相关度的对比值;
其中,相关度的对比值可以是预先准备的起始的相关度的对比值(例如将判断被摄体热像与被摄体识别信息匹配与否的判断值,作为起始的相关度的对比值),当检测获得的相关度的值大于该判断值,代表所检测的特定被摄体热像的相关度优于所准备的判断值,则将该判断值替换为当前所检测的相关度的值所获得的对比值;作为后续检测相关度的对比值,以便后续是否能获得相关度更高的特定被摄体热像。
此外,相关度的对比值,也可以没有预先准备,这时,例如,当将第一次检测到的热像数据帧的相关度的值,则在临时存储部2中保持该热像数据帧及其相关度的值,作为后续检测获得的相关度的值的对比值,当后续检测到比该帧相关度高的帧时,则替换该热像数据帧及相关度的值,当后续未检测到比该帧相关度高的帧时,则保持该热像数据帧及相关度的值。
在此,以是否大于对比值为评价相关度的依据,但也有小于对比值或接近对比值(预先准备的判断值)作为评价相关度的情况。并且,对比值可以是相关度的值,也可以是相关度的值经过换算获得的值等。
步骤E09,保持最大相关度的值及其对应的热像数据帧;可以保持在临时存储部2中,也可以存储在其他存储介质例如闪存3中的方式予以保持。此外,也可以保持规定数量的热像数据帧和/或相关度的值等数据,例如保持相关度最高的3帧热像数据帧及其相关度的值。
步骤E11,控制部11例如以以下方式来通知使用者。例如,将相关度最高的帧显示在显示部,如图15中,与动态的红外热像共同显示的缩小的红外热像1501,红外热像1501为检测到的具有最大相关度的热像数据帧而获得;此外,也可显示相关度最高的帧的相关度数值,或者显示多个相关度高的热像数据帧的图像等。此外,也可将所显示的动态红外热像,切换为规定时间中检测到的相关度最大的热像数据帧获得的红外热像(冻结显示)。
步骤E12,判断使用者是否按下了记录键,如否,则回到步骤E04;如是,则在步骤E13,进行记录处理。此外,也可以配置为自动执行记录处理。
步骤E13,记录处理,其中,优选的,对相关度最大的热像数据帧进行记录。当需要关联规定记录信息进行记录时,也可采用如实施例1或实施例4所描述的记录实施方式。
如上所述,在本实施例5中,当检测到相关度高的帧,即不断更新并通知相关度最高的热像数据帧,能减低视觉对准的操作难度,并且,能提高检测精度,普通使用者容易掌握这种拍摄技能,确保记录的热像数据帧的高质量。当然,实施本发明的实施方式的任一产品并不一定需要同时达到以上所述的所有优点。此外,也可设置规定的检测时间或规定数量帧的检测,来通知其中相关度最高的帧。
实施例5的变形,在有些应用的情况下,对拍摄是否检测到特定的被摄体热像,并不限于相关度的值与相关度的对比值之间的比较,也可变更为例如根据检测获得的规定信息和/或评价值及对应的比较值的比较结果,作为更新比较值并保持热像数据帧的依据。
将步骤E06的检测处理,变更为检测与特定被摄体有关的规定信息;其中,所述规定信息,至少包括特定被摄体热像的位置、尺寸、倾斜角度、分析值、相关度的值中的一种或任意组合的信息。
在红外检测的领域,由于考虑到被摄体热像在红外热像中的位置、尺寸、倾斜角度等的不同,对应了不同的拍摄质量;因此,例如考虑被摄体热像位于热像数据帧中的位置、尺寸、倾斜角度等因素,作为生成相应不同形态的标识的因素,来提示使用者注意拍摄的质量。
并且,检测部8还具有检测分析值的功能单元,所谓的分析值例如对所检测的热像数据帧或检测到的被摄体热像按照规定算法获得的分析值;例如由检测窗口中的热像数据AD值计算获得的温度值,规定算法例如计算规定的分析区域中的最高、最低、平均温度值;也可以是不同的分析区域中温度的比较值,例如温差;当检测到被摄体热像中具有大于规定的比较值(例如缺陷的阀值)的分析值时,代表被摄体具有缺陷,那么,应引起使用者的重视;这时的特定的标识将立即引起使用者的注意,对红外检测的意义重大。其中,分析值并不限定于温度值,例如,也可以是AD值、伪彩热像中的颜色值、特定像数值的比例,或还将这些数值按照规定公式计算获得的值等。
其中,优选的,先检测相关度的值,并与规定的相关度的判断值进行是否具有特定被摄体的判断,而后,再检测与特定被摄体热像有关的规定信息。
将步骤E07变更为存储所检测到的规定信息;
将步骤E08变更为,根据检测获得的规定信息和/或规定信息所获得的评价值,与对应的 比较值的比较结果,作为更新比较值并保持热像数据帧的依据。其中,评价值,例如,可以采用所检测的规定信息中的特定信息对应了不同的系数,而由所检测的规定信息中的其他的规定信息结合该系数来获得评价值;例如,可以采用不同的规定信息项所占的权重,通过加权来获得评价值。可以通过各种不同的计算方式来获得最终的评价值。
将步骤E09变更为,更新检测获得的规定信息和/或规定信息所获得的评价值,来更新对比值;
将步骤E10变更为,保持最优评价值及其对应的热像数据帧;及步骤E11,通知该热像数据帧。
其他实施例
在上述实施例中各自说明了作为热像记录装置的示例的热像装置100。然而,本发明不仅适用于带有拍摄功能的热像装置,还适用于如之前所述的各种热像处理装置。
并且,也可以采用这样的实施方式,临时存储部,用于循环存储多帧的热像数据帧;检测部,用于响应使用者的预定操作,基于存储部存储的热像数据帧,来检测是否具有特定被摄体热像的热像数据帧;记录部,基于检测部的检测结果从所述热像存储部中存储的热像数据帧中选择将要经历所述记录处理的热像数据帧,并且执行对所选择的热像数据帧进行记录处理的控制。(其中的预定操作,例如按下记录键、或检测指示的按键等)。
并且,可以不仅检测整个被摄体的整体区域,而且检测将被摄体划分为多个部件构成的多个检测窗口,这样,能够更精确检测;其中,对于各部件,与整体相同,准备对应的被摄体识别信息(可以是模板或特征量)。
也可以是这样的实施方式,检测单元,也可根据被摄体识别信息,并根据多个被摄体识别信息所对应的判断值,来获得判断结果,例如,根据多个特征量的加权,来获得最终的判断结果。
也可以是这样的实施方式,检测单元,也可根据多个被摄体识别信息,先计算其中的一个特征量与热像数据帧的比较结果,当大于规定的阀值,并计算下一个被摄体识别信息与热像数据帧的比较结果,根据多次比较,来获得最终的判断结果。
注意,可以使用检测特定被摄体热像的各种方法,在该实施例中的处理仅是可使用方法的示例。
在上述实施例中各自说明了示例的热像装置100,显然可适用于便携拍摄或在线拍摄的各种热像装置;然而,本发明不仅适用于带有拍摄功能的热像装置,还适用于接收和处理热像的热像处理设备,如从外部连续接收和处理热像(如按时序获取热像数据帧)的热像处理装置(如计算机、个人数字助理、与拍摄功能的热像装置配套使用的显示装置等),该热像处理装置例如为计算机,通过通信口(获取部的例子,例如按照USB、1394、网络等通信规范,将热像处理装置与外部设备连接)与热像装置进行有线或无线连接,通过连续接受与其连接的热像装置输出的热像数据帧,来实现一个实施例子,其检测处理、比较处理、选择处理等处理方式与上述实施方式类同,省略了说明。
并且,不限于拍摄或从外部获取热像数据帧,也可作为热像装置或热像处理装置中的一个构成部件或功能模块,例如从其他部件来获取热像数据帧,这时,也构成本发明的实施方式。
虽然,可以通过硬件、软件或其结合来实现附图中的功能块,但通常不需要设置以一对一的对应方式来实现功能块的结构。可以通过一个软件或硬件模块来实现多个功能的块。或 也可通过多个软件或硬件单元来实现一个功能的块。此外,也可以用专用电路或通用处理器或可编程的FPGA实现本发明的实施方式中的部分或全部功能部的处理和控制功能。
此外,例子以电力行业的被摄体应用作为场景例举,也适用在红外检测的各行业广泛运用。
上述所描述的仅为发明的具体例子(实施方式),各种例举说明不对发明的实质内容构成限定,并且,各种实施方式进行相应的替换和组合,可构成更多的实施方式。所属领域的技术人员在阅读了说明书后可对具体实施方式进行其他的修改和变化,而不背离发明的实质和范围。
Claims (9)
1.热像记录装置,具有,
获取部,用于连续获取热像数据帧;
热像存储部,用于存储获取部获取的热像数据帧;
参考图像指定部,用于指定参考图像的构成数据;
位置设置部,用于设置参考图像位于红外热像中的位置参数;
图像处理部,用于基于所指定的参考图像的构成数据及位置设置部所设置的位置参数,对热像存储部中存储的热像数据帧进行规定处理,生成体现了参考图像的红外热像;
显示部,用于显示规定处理后获得的图像;
检测部,用于检测所述热像数据帧中是否具有特定被摄体热像;
记录部,在检测部检测到的特定被摄体热像时,对规定的热像数据帧进行记录。
2.如权利要求1所述的热像装置,其特征在于,
记录部,基于检测部的检测结果从所述热像存储部中存储的热像数据帧中选择将要经历所述记录处理的热像数据帧,并且执行对所选择的热像数据帧进行记录。
3.如权利要求1所述的热像检测装置,其特征在于,所述图像处理部,用于基于所指定的参考图像的构成数据及位置设置部所设置的位置参数获得的参考图像,与所获取的热像数据帧获得的红外热像进行合成,生成体现了参考图像的红外热像。
4.如权利要求1所述的热像检测装置,其特征在于,所述检测部,根据热像数据帧中规定的检测区域来检测所述热像数据帧中是否具有特定被摄体热像。
5.如权利要求1所述的热像检测装置,其特征在于,具有
信息存储部,用于存储被摄体信息及其关联的参考图像的构成数据和/或被摄体识别信息;
信息选择部,用于选择被摄体信息;
参考图像指定部,用于根据选择部所选择的被摄体信息关联的参考图像的构成数据,来指定参考图像的构成数据;
检测部,用于根据选择部所选择的被摄体信息参考图像的构成数据和/或被摄体识别信息,来检测所述热像数据帧中是否具有特定被摄体热像。
6.如权利要求1所述的热像检测装置,其特征在于,所述参考图像体现了被摄体形态特征。
7.如权利要求1所述的热像装置,其特征在于,具有通知部,用于对检测到特定被摄体热像和/或对记录的处理进行通知。
8.如权利要求1-7中任意一项的热像记录装置,其特征在于,所述记录部用于将规定记录信息与所述红外数据建立关联进行记录。
9.如权利要求1所述的热像装置,其特征在于,
存储部,用于循环存储多帧的热像数据帧;
检测部,用于响应使用者的预定操作,基于存储部存储的热像数据帧,来检测红外热像中的所述特定被摄体热像与基准图像的相似度;
记录部,基于检测部的检测结果从所述热像存储部中存储的热像数据帧中选择将要经历所述记录处理的热像数据帧,并且执行对所选择的热像数据帧进行记录处理的控制。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310745325.8A CN103900719A (zh) | 2012-12-27 | 2013-12-27 | 热像记录装置和热像记录方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210584210 | 2012-12-27 | ||
CN201210584210.0 | 2012-12-27 | ||
CN201310745325.8A CN103900719A (zh) | 2012-12-27 | 2013-12-27 | 热像记录装置和热像记录方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103900719A true CN103900719A (zh) | 2014-07-02 |
Family
ID=50992185
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310745325.8A Pending CN103900719A (zh) | 2012-12-27 | 2013-12-27 | 热像记录装置和热像记录方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103900719A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060164682A1 (en) * | 2005-01-25 | 2006-07-27 | Dspv, Ltd. | System and method of improving the legibility and applicability of document pictures using form based image enhancement |
CN101505372A (zh) * | 2008-02-06 | 2009-08-12 | 凹凸电子(武汉)有限公司 | 最优化图片捕获装置设置的系统以及方法 |
CN102538980A (zh) * | 2012-01-12 | 2012-07-04 | 杭州美盛红外光电技术有限公司 | 热像装置和热像拍摄方法 |
CN102564607A (zh) * | 2012-01-12 | 2012-07-11 | 杭州美盛红外光电技术有限公司 | 热像装置和热像规范拍摄方法 |
-
2013
- 2013-12-27 CN CN201310745325.8A patent/CN103900719A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060164682A1 (en) * | 2005-01-25 | 2006-07-27 | Dspv, Ltd. | System and method of improving the legibility and applicability of document pictures using form based image enhancement |
CN101505372A (zh) * | 2008-02-06 | 2009-08-12 | 凹凸电子(武汉)有限公司 | 最优化图片捕获装置设置的系统以及方法 |
CN102538980A (zh) * | 2012-01-12 | 2012-07-04 | 杭州美盛红外光电技术有限公司 | 热像装置和热像拍摄方法 |
CN102564607A (zh) * | 2012-01-12 | 2012-07-11 | 杭州美盛红外光电技术有限公司 | 热像装置和热像规范拍摄方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103900715A (zh) | 红外选择装置和红外选择方法 | |
CN104748862A (zh) | 分析装置和分析方法 | |
CN104215336A (zh) | 热像装置、分析装置及热像拍摄方法和分析方法 | |
CN103900712A (zh) | 热像选择装置和热像选择方法 | |
CN103900714A (zh) | 热像匹配装置和热像匹配方法 | |
CN103900711A (zh) | 红外挑选装置和红外挑选方法 | |
CN114324347B (zh) | 热像分析装置、配置装置和热像分析方法、配置方法 | |
CN103900713A (zh) | 热像检测装置和热像检测方法 | |
CN104748863A (zh) | 红外分析区域设置装置和红外分析区域设置方法 | |
CN105163055A (zh) | 动态记录装置、回放装置及动态记录方法、回放方法 | |
CN103900703A (zh) | 红外匹配更新装置和红外匹配更新方法 | |
CN104751445A (zh) | 热像分析配置装置和热像分析配置方法 | |
CN103900705A (zh) | 热像选择通知装置和热像选择通知方法 | |
CN104796585A (zh) | 影像动态记录装置、回放装置及影像动态记录方法、回放方法 | |
CN103900719A (zh) | 热像记录装置和热像记录方法 | |
CN105208299A (zh) | 热像拍摄装置、热像处理装置和热像拍摄方法、热像处理方法 | |
CN103900706A (zh) | 红外挑选通知装置和红外挑选通知方法 | |
CN103900708A (zh) | 红外选择通知装置和红外选择通知方法 | |
CN103900702A (zh) | 热像匹配更新装置和热像匹配更新方法 | |
CN104655638A (zh) | 分析对比装置和分析对比方法 | |
CN103902967A (zh) | 图像识别控制装置和图像识别控制方法 | |
CN103900709A (zh) | 热像挑选通知装置和热像挑选通知方法 | |
CN103900704A (zh) | 红外检测更新装置和红外检测更新方法 | |
CN103900721A (zh) | 热像记录控制装置和热像记录控制方法 | |
CN103900697A (zh) | 红外记录控制装置和红外记录控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: Yuhang District of Hangzhou city in Zhejiang province 311113 Qixian Village Building 1 Liangzhu Street Bridge Applicant after: Mission Infrared Electro-optics Technology Co., Ltd. Address before: 310030 Zhejiang city of Hangzhou province Xihu District city Hongkong No. 386 thick Renlu 14 Building 3 floor Applicant before: Mission Infrared Electro-optics Technology Co., Ltd. |
|
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140702 |