CN107615021B - 红外线摄像装置及固定模式干扰数据的更新方法 - Google Patents
红外线摄像装置及固定模式干扰数据的更新方法 Download PDFInfo
- Publication number
- CN107615021B CN107615021B CN201680028637.9A CN201680028637A CN107615021B CN 107615021 B CN107615021 B CN 107615021B CN 201680028637 A CN201680028637 A CN 201680028637A CN 107615021 B CN107615021 B CN 107615021B
- Authority
- CN
- China
- Prior art keywords
- infrared
- fixed mode
- data
- mode interference
- amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000001514 detection method Methods 0.000 claims abstract description 153
- 238000004364 calculation method Methods 0.000 claims abstract description 47
- 239000006185 dispersion Substances 0.000 claims abstract description 29
- 230000008569 process Effects 0.000 claims abstract description 12
- 238000012545 processing Methods 0.000 claims description 90
- 230000003287 optical effect Effects 0.000 claims description 75
- 238000012937 correction Methods 0.000 claims description 21
- 238000003384 imaging method Methods 0.000 claims description 18
- 238000005259 measurement Methods 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 abstract description 8
- 239000004615 ingredient Substances 0.000 description 32
- 230000015654 memory Effects 0.000 description 16
- 230000008859 change Effects 0.000 description 14
- 230000007246 mechanism Effects 0.000 description 13
- 230000009471 action Effects 0.000 description 12
- 101000637813 Homo sapiens Solute carrier family 40 member 1 Proteins 0.000 description 5
- 102100032008 Solute carrier family 40 member 1 Human genes 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 239000012212 insulator Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000004297 night vision Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/02—Details
- G01J1/04—Optical or mechanical part supplementary adjustable parts
- G01J1/0407—Optical elements not provided otherwise, e.g. manifolds, windows, holograms, gratings
- G01J1/0411—Optical elements not provided otherwise, e.g. manifolds, windows, holograms, gratings using focussing or collimating elements, i.e. lenses or mirrors; Aberration correction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/10—Photometry, e.g. photographic exposure meter by comparison with reference light or electric value provisionally void
- G01J1/12—Photometry, e.g. photographic exposure meter by comparison with reference light or electric value provisionally void using wholly visual means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
- G01J1/4228—Photometry, e.g. photographic exposure meter using electric radiation detectors arrangements with two or more detectors, e.g. for sensitivity compensation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
- G01J1/44—Electric circuits
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/02—Constructional details
- G01J5/06—Arrangements for eliminating effects of disturbing radiation; Arrangements for compensating changes in sensitivity
- G01J5/064—Ambient temperature sensor; Housing temperature sensor; Constructional details thereof
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/80—Calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
- H04N25/673—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction by using reference sources
- H04N25/674—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction by using reference sources based on the scene itself, e.g. defocusing
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
- G01J1/44—Electric circuits
- G01J2001/444—Compensating; Calibrating, e.g. dark current, temperature drift, noise reduction or baseline correction; Adjusting
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J2005/0077—Imaging
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Photometry And Measurement Of Optical Pulse Characteristics (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本发明在红外线摄像装置及固定模式干扰数据的更新方法中,不需要快门机构,且即使在观测视场内的来自所有方向的光不均匀地入射到红外线检测器的检测面的情况下,也可以获得固定模式干扰数据。因此,关于处理对象的各检测器元件,信号成分量计算部(52)算出由各检测器元件检测到的多次的红外线的检测信号的分散或标准偏差,并根据所算出的分散或标准偏差而算出包括在红外线的检测信号中的取决于入射到红外线检测器的红外线的信号成分的量。固定模式干扰算出部(53)根据红外线的检测信号和所算出的信号成分的量而算出固定模式干扰成分的量。数据更新部(54)以所算出的固定模式干扰成分的量而更新固定模式干扰数据。
Description
技术领域
本发明涉及一种红外线摄像装置,更详细而言,涉及一种包括检测入射红外线并转换成电信号的红外线检测器的红外线摄像装置。并且,本发明涉及一种如所述的红外线摄像装置中的固定模式干扰数据的更新方法。
背景技术
已知有检测入射红外光(红外线)并生成红外线图像的红外线摄像装置。通常,红外线摄像装置包括检测从被摄体发射的红外线并转换成电信号的红外线检测器。红外线摄像装置在监控摄像机、夜视装置、热像仪,或者搭载于车辆和航空器等的前方监控装置等范围广泛的领域中被利用。
在红外线摄像装置中产生红外线检测器所具有的灵敏度的偏差、电路的增益及偏移的偏差等装置固有的固定模式干扰。尤其,在作为红外线的检测器元件而使用了以二维的方式排列的焦平面阵列的红外线摄像装置中,由于阵列内的各检测器元件具有特性的变动,因此,最终产生在较长时间内发生变化的固定模式干扰。
若产生固定模式干扰,则即使由红外线摄像装置来拍摄均匀温度的表面,也因像素值发生变动而无法获得均匀的图像。为了减小固定模式干扰的影响,只要获得固定模式干扰的数据(固定模式干扰数据),并从通过拍摄被摄体而得到的图像信号减去固定模式干扰数据即可。固定模式干扰数据例如在将均匀光量的光源设置于红外线检测器的前面,且阻断从外部入射到红外线检测器的红外线的状态下可获得。
固定模式干扰根据温度等环境的变化而变动,因此期望在进行拍摄的中途重复进行固定模式干扰数据的获取。为了响应该期望而提出有:在红外线摄像装置内设置快门机构,并阻断从外部入射到红外线检测器的红外线,从而获得固定模式干扰数据(例如参考专利文献1)。然而,在专利文献1中,在光学系统及红外线检测器的周边,需要配置在实际拍摄中不需要的快门机构,造成成本上升和装置的大型化。并且,也存在故障产生部位增加的缺陷。
专利文献2中记载有不需要快门机构且可获得固定模式干扰数据的红外线摄像装置。专利文献2中所记载的红外线摄像装置包括:光学系统,使得从目标物体(被摄体)发射出来的光聚光,并入射到红外线检测器;及减法器,输出从红外线检测器输出的图像信号(图像数据)减去固定模式干扰数据的图像数据。光学系统在正常摄像时通过焦点调整机构被定位于对焦位置。
在专利文献2中,当获得固定模式干扰数据时,光学系统被控制成非对焦状态。由于光学系统成为非对焦状态,因此光学系统的观测视场内的来自所有方向的光均等地入射到红外线检测器。即,相对于光学系统从各个方向入射的光束不会成像于红外线检测器的特定的点上,而是均等地入射到红外线检测器的检测面。该状态下,求出减法器的输出图像数据与固定模式干扰的预期值数据的误差。进行将基于该误差的反馈数据作为固定模式干扰数据而赋予减法器的负反馈,将减法器的输出图像数据和预期值数据成为大致相同时的反馈数据作为固定模式干扰数据进行保持。
在专利文献2中,将在均匀光量的光源设置于红外线检测器的前面,且阻断从外部入射到红外线检测器的红外线的状态下所得到的图像数据,作为固定模式干扰的预期值数据而使用。将光学系统设为非对焦状态,并使观测视场内的来自所有方向的光入射于红外线检测器的检测面,由此能够使均匀量的红外线入射于各检测器元件,不使用快门机构便能够得到固定模式干扰数据。
以往技术文献
专利文献
专利文献1:日本特开平10-142065号公报
专利文献2:日本特开2001-336983号公报
发明内容
发明要解决的技术课题
在专利文献2中所记载的红外线摄像装置中,为了适当地获得固定模式干扰数据,光学系统的观测视场内的来自所有方向的光需要均匀地入射到红外线检测器的检测面。然而,在实际的使用环境中,观测视场内的来自所有方向的光未必总是能够入射到红外线检测器的检测面。即使将光学系统设为非对焦状态,在红外线图像中也会产生纹路。换言之,在图像内分布有入射红外线多的部分和入射红外线少的部分。在专利文献2中所记载的红外线摄像装置中,若入射到红外线检测器的检测面的某一区域的红外线的量与入射到其它区域的红外线的量之间存在差异,则无法得到合适的固定模式干扰数据。
本发明鉴于上述情况而提供一种红外线摄像装置,其不需要快门机构,且即使在观测视场内的来自所有方向的光无法均匀地入射到红外线检测器的检测面的情况下,也可以获得固定模式干扰数据。
并且,本发明提供一种如所述红外线摄像装置中的固定模式干扰数据的更新方法。
用于解决技术课题的手段
本发明为了达到上述目的而提供一种红外线摄像装置,其特征在于,具备:红外线检测器,包括对所入射的红外线进行检测的多个检测器元件;干扰校正处理部,从由多个检测器元件检测到的红外线的检测信号减去固定模式干扰数据,由此从红外线的检测信号去除固定模式干扰;及干扰数据更新处理部,其包括:信号成分量计算部,根据由红外线检测器检测到的多次的红外线的检测信号,算出包括在红外线的检测信号中的取决于入射到红外线检测器的红外线的信号成分的量;固定模式干扰算出部,根据红外线的检测信号和由信号成分量计算部算出的信号成分的量,算出固定模式干扰成分的量;及数据更新部,以由固定模式干扰算出部算出的固定模式干扰成分的量而更新固定模式干扰数据,关于处理对象的各检测器元件,信号成分量计算部算出由各检测器元件检测到的多次的红外线的检测信号的分散或标准偏差,并根据所算出的分散或标准偏差而算出取决于所入射的红外线的信号成分的量。
在本发明的红外线摄像装置中,固定模式干扰算出部可以将红外线的检测信号与由信号成分量计算部算出的信号成分的量的差值作为固定模式干扰成分的量而算出。
在本发明的红外线摄像装置中,干扰数据更新处理部还可以包括判定部,关于各检测器元件,所述判定部计算由固定模式干扰算出部算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值,并判定该差值是否为第1阈值以下。该情况下,关于被判定为上述差值为第1阈值以下的检测器元件,数据更新部可以以由固定模式干扰算出部算出的固定模式干扰成分的量而更新固定模式干扰数据。
在上述中,关于被判定为上述差值大于第1阈值的检测器元件,数据更新部可以不进行固定模式干扰数据的更新。
关于某一区域,在该区域中的上述差值超过第1阈值的检测器元件的数量的比例高于第2阈值的情况下,关于包括在该区域中的检测器元件,数据更新部可以不进行固定模式干扰数据的更新。
本发明的红外线摄像装置还可以具备测量温度的温度测量部。该情况下,在温度测量部测量的温度与上一次固定模式干扰数据的更新时的温度之差为温度阈值以上的情况下,数据更新部可以进行固定模式干扰数据的更新。
数据更新部可以周期性地重复进行固定模式干扰数据的更新。
本发明的红外线摄像装置还可以具备:光学系统,可进行成像位置的控制;及焦点位置控制部,控制光学系统的成像位置,并且可以构成为在红外线检测器的多个检测器元件中经由光学系统而被入射红外线。该情况下,在焦点位置控制部控制光学系统的成像位置,从而光学系统被控制成非对焦状态的状态下,信号成分量计算部可以算出由检测器元件检测到的多次的红外线的检测信号的分散或标准偏差。
本发明还提供一种固定模式干扰数据的更新方法,其为包括多个检测器元件的红外线检测器中的表示固定模式干扰的固定模式干扰数据的更新方法,所述固定模式干扰数据的更新方法的特征在于,具有:由红外线检测器来检测红外线的步骤;算出通过实施多次检测红外线的步骤而得到的多次的红外线的检测信号的分散或标准偏差的步骤;根据所算出的分散或标准偏差算出包括在红外线的检测信号中的取决于入射到检测器元件的红外线的信号成分的量的步骤;根据红外线的检测信号与在算出信号成分的量的步骤中算出的信号成分的量算出固定模式干扰成分的量的步骤;及以在算出固定模式干扰成分的量的步骤中所算出的固定模式干扰成分的量而更新固定模式干扰数据的步骤。
本发明的固定模式干扰数据的更新方法在更新固定模式干扰数据的步骤之前,还可以具有计算所算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值的步骤。该情况下,在更新固定模式干扰数据的步骤中,关于所算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值为阈值以下的检测器元件,可以以所算出的固定模式干扰成分的量而更新固定模式干扰数据。
发明效果
在本发明的红外线摄像装置及固定模式干扰数据的更新方法中,实施多次基于红外线检测器的红外线的检测,算出多次的红外线的检测信号的分散或标准偏差。检测多次红外线的情况下的所述检测信号的变动主要是由散粒干扰主导的,基于散粒干扰的检测信号的变动的大小取决于入射到检测器元件的红外线的信号成分的量。若利用该关系,则根据红外线的检测信号的分散或标准偏差,能够算出包括在红外线的检测信号中的取决于入射到检测器元件的红外线的信号成分的量。根据红外线的检测信号和所算出的信号成分的量算出固定模式干扰成分的量,并以所算出的固定模式干扰成分的量而更新固定模式干扰数据。由此,在不需要快门机构,且观测视场内的来自所有方向的光不会均匀地入射到红外线检测器的检测面的情况下,也能够获得固定模式干扰的数据。
附图说明
图1是表示本发明的第1实施方式所涉及的红外线摄像装置的框图。
图2是表示数字信号处理部的结构的框图。
图3是表示干扰数据更新处理部的结构的框图。
图4是表示取决于入射红外线的信号成分、固定模式干扰成分及红外线检测信号的图。
图5是表示多次的红外线检测信号的图。
图6是表示本发明的第1实施方式所涉及的固定模式干扰数据的更新方法的顺序的流程图。
图7是表示本发明的第2实施方式所涉及的红外线摄像装置中的干扰数据更新处理部的结构的框图。
图8是表示本发明的第2实施方式所涉及的固定模式干扰数据的更新方法的顺序的流程图。
图9是表示图像区域的分割例的图。
图10是表示本发明的第3实施方式所涉及的红外线摄像装置的框图。
具体实施方式
以下,参考附图对本发明的实施方式详细地进行说明。图1表示本发明的第1实施方式所涉及的红外线摄像装置。红外线摄像装置100具有光学系统10、红外线检测器11、模拟信号处理部12、AD转换器(AnalogtoDigital Convertor:模拟数字转换器)13、数字信号处理部14、输出部15、温度传感器18及控制部19。红外线摄像装置100可以是一个成品,也可以是组装到其它产品而使用的模块。
光学系统10是包括1个以上的透镜的成像光学系统。红外线检测器11是红外线成像元件(红外线传感器),将由光学系统10形成的光学图像进行拍摄,并转换成电信号。红外线检测器11包括检测入射红外光(红外线)的多个检测器元件。在红外线检测器11中,多个检测器元件例如排列成二维状。在红外线检测器11的红外线检测面(以下,也简称为检测面)上,经由光学系统10而被入射红外线。红外线检测器11的检测面的位置优选与光学系统10的成像面的位置一致。根据红外线检测器11的各检测器元件的检测信号而构成红外线图像。
红外线检测器11检测例如从波长0.83μm到1000μm的范围的红外线。红外线检测器11尤其优选检测从波长6μm到1000μm的范围的远红外线。红外线检测器11中能够使用辐射热测量计或者SOI(Silicon on Insulator:绝缘体上硅)二极管型等热型红外线传感器。
模拟信号处理部12对红外线检测器11所输出的红外线检测信号实施模拟电处理。模拟信号处理部12典型地包括放大红外线检测信号的放大器。AD转换器13对红外线检测信号进行采样,并将所采样的红外线检测信号转换成数字数据(数字信号值)。数字信号处理部14对由AD转换器13转换成数字数据的红外线检测信号进行信号处理。数字信号处理部14中的信号处理包括红外线检测信号的固定模式干扰(以下,也称作FPN(Fixed PatternNoise:固定模式干扰))校正处理和在该校正处理中使用的FPN数据的更新处理。
控制部19进行装置整体的控制。控制部19中能够使用例如FPGA(Field-Programmable Gate Array:现场可编程门阵列)等的PLD(Programmable Logi c Device:可编程逻辑器件)。控制部19将红外线摄像装置100的动作模式在正常摄像模式与FPN数据的更新模式之间进行切换。控制部19通过控制信号,并根据动作模式来控制数字信号处理部14中的信号处理。具体而言,在正常摄像模式时,使数字信号处理部14实施FPN校正处理,在FPN数据的更新模式时,实施FPN数据更新处理。
温度传感器(温度测量部)18测量红外线检测器11及其周边的温度。控制部19根据温度传感器18所测量的温度的变化,可以将动作模式切换成FPN数据的更新模式。例如若温度传感器18测量的温度与上一次FPN数据的更新时的温度之差成为阈值(温度阈值)以上,则可以将动作模式切换成FPN的更新模式而实施FPN数据的更新。并且,控制部19在正常摄像模式期间,可以周期性地重复切换成FPN数据的更新模式。该情况下,从上一次FPN数据的更新时刻起,经过一定时间之后,也可以切换为FPN数据的更新模式。FPN数据的更新周期无需为恒定。通过周期性地切换FPN数据的更新模式而能够周期性地更新FPN数据。
输出部15输出通过数字信号处理部14被进行信号处理的红外线检测信号(图像数据)。输出部15例如将红外线检测信号输出到显示器装置(图1中未图示)等,使红外线图像显示于显示画面上。或者,将红外线检测信号输出到硬盘装置或存储卡等外部存储装置(图1中未图示),也可以存储于外部存储装置。而且,也可以经由网络或通信电缆等将红外线检测信号发送到外部的服务器或处理装置。输出部15例如包括将数字信号转换成模拟信号的DA转换器(Digital Analog Convertor:数字模拟转换器),将红外线检测信号作为模拟信号而输出。输出部15也可以将红外线检测信号作为数字信号而输出。
图2表示数字信号处理部14的结构。数字信号处理部14具有开关41、干扰校正处理部42、FPN数据存储部43及干扰数据更新处理部44。数字信号处理部14典型地作为DSP(Digital Signal Processor:数字信号处理器)等的LSI(Large Scale Integration:大规模集成电路)而构成。DSP典型地包括处理器、存储对处理器的命令的ROM(Read OnlyMemory:只读存储器)、存储数据的RAM(Random Access Memory:随机存取存储器),所述部分经由总线而被连接。处理器按照存储于ROM中的命令进行动作,由此可实现干扰校正处理部42及干扰数据更新处理部44等的功能。DSP也可以具有与外部的存储装置等连接的接口。
开关41中被输入有AD转换器13(参考图1)输出的红外线检测信号的数字数据(以下,将转换成数字数据的红外线检测信号不进行特别区分,有时称作红外线检测信号)。开关41将红外线检测信号选择性地输出到干扰校正处理部42和干扰数据更新处理部44。开关41的切换例如根据控制部19所输出的控制信号而实施。在正常摄像模式时,控制部19使红外线检测信号从开关41输出到干扰校正处理部42。在FPN数据的更新模式时,控制部19使红外线检测信号从开关41输出到干扰数据更新处理部44。并且,对干扰数据更新处理部44指示FPN数据的更新。
FPN数据存储部43存储FPN数据。在此,FPN是指在红外线检测器11(参考图1)的各检测器元件(各像素)中所固有的、包括在各检测器元件的检测信号中的干扰成分。FPN数据是表示各检测器元件的FPN的数据,是各检测器元件的FPN的集合。在初始状态下,FPN数据存储部43在将均匀的光量的光源设置在红外线检测器11的前面,且阻断从外部入射到红外线检测器11的红外线的状态下,可以将由红外线检测器11检测到的红外线检测信号作为FPN数据而存储。FPN数据存储部43例如可以在数字信号处理部14所具有的RAM的内部构成,也可以由EEPROM(Electrically Erasable and Programmable Read Only Me mory:电可擦可编程只读存储器)等可改写的非易失性存储器构成。
干扰校正处理部42参考FPN数据存储部43进行包括在红外线检测信号中的FPN成分的校正(去除)。更详细而言,通过从红外线检测信号减去FPN数据而从红外线检测信号去除FPN。干扰校正处理部42从包括在红外线检测器11中的各检测器元件所输出的红外线检测信号减去该检测器元件的FPN数据,从而去除各检测器元件中所固有的干扰成分,输出取决于入射红外线的量的信号成分。
在干扰数据更新处理部44中,经由开关41而被输入由红外线检测器11检测到的红外线检测信号。干扰数据更新处理部44中被输入多次的红外线检测信号。干扰数据更新处理部44根据多次的该红外线检测信号算出FPN成分的量(其推定值)。更详细而言,干扰数据更新处理部44根据多次的红外线检测信号算出包括在红外线检测信号中的取决于入射到红外线检测器的红外线的信号成分的量。干扰数据更新处理部44通过从红外线检测信号减去所算出的信号成分的量而算出FPN成分的量。干扰数据更新处理部44以所算出的FPN成分的量而更新被存储在FPN数据存储部43中的FPN数据。
在此,更新FPN数据是指用新的数据来改写被存储在FPN数据存储部43中的FPN数据。FPN数据的更新不仅包括一次更新包括在红外线检测器11中的所有的检测器元件,而且也包括将所有检测器元件中的一部分作为对象进行的局部更新。例如在红外线检测器11包括100个检测器元件时,可以一次更新这些100个检测器元件的FPN数据,当进行1次更新时,也可以在100个中更新40个到70个检测器元件的FPN数据。
图3表示干扰数据更新处理部44的结构。干扰数据更新处理部44包括帧存储器51、信号成分量计算部52、固定模式干扰算出部(减法器)53及数据更新部54。帧存储器51存储由红外线检测器11拍摄的红外线图像。帧存储器51存储例如从帧1到帧N(N为2以上的整数)的多个帧的红外线图像。帧存储器51可以是干扰数据更新处理部44的一部分,也可以设置在干扰数据更新处理部44的外部。
在此,对由红外线检测器11的检测器元件检测到的红外线检测信号、包括在该红外线检测信号中的取决于入射红外线的信号成分及固定模式干扰成分的关系进行说明。图4是表示取决于入射红外线的信号成分、固定模式干扰成分及红外线检测信号的图。在图4中,关于检测器元件1~5的5个检测器元件,示出取决于入射红外线的信号成分、固定模式干扰成分及红外线检测信号。
通常,在各检测器元件中,在取决于被摄体图像的每一个检测器元件上入射不同量的红外线。从而,如图4所示,取决于入射红外线的信号成分S1~S5多数情况下彼此不相等。另一方面,各检测器元件的固定模式干扰成分FPN1~FPN5是检测器元件所固有的,并不取决于信号成分的量。各检测器元件的红外线检测信号DS1~DS5是分别在信号成分S1~S5上加上固定模式干扰成分FPN1~FPN5的信号。信号成分S1~S5与固定模式干扰成分FPN1~FPN5一同被检测到,因此在红外线检测信号DS1~DS5中,无法判断哪些部分是信号成分S1~S5,哪些部分是固定模式干扰成分FPN1~FPN5。
图5表示用1个检测器元件检测的多次的红外线信号。例如关于某一检测器元件,从帧1到帧N,对红外线检测信号连续检测了N次。将k设为从1到N之间的整数,用DS(k)来表示第k帧的红外线检测信号。各帧的红外线检测信号DS(k)中所包括的固定模式干扰成分的量恒定。从帧1到帧N,假定在入射到检测器元件的红外线的量上没有变化的情况下,各帧的红外线检测信号DS(k)中所包括的取决于入射红外线的信号成分的量应该是相等的。然而,实际上,由于散粒干扰等的影响,红外线检测信号DS(k)在帧之间发生变动。
各检测器元件中的红外线检测信号的变动主要是由散粒干扰来主导的。基于散粒干扰的红外线检测信号的变动程度由红外线检测信号的标准偏差来表示。并且,基于散粒干扰的红外线检测信号的变动取决于信号成分的量(入射红外线的量)。更详细而言,基于散粒干扰的红外线检测信号的变动程度等于信号成分的量的1/2。若利用该关系,则能够由各检测器元件中的红外线检测信号的变动来算出各检测器元件中的取决于入射红外线的信号成分的量(其推定值)。即,能够由各检测器元件中的红外线检测信号的分散或标准偏差来算出各检测器元件中的信号成分的量。通过从红外线检测信号减去信号成分的量能够算出固定模式干扰成分的量。
返回到图3,关于处理对象的各检测器元件,信号成分量计算部52参考帧存储器51,算出由各检测器元件检测到的多次的红外线检测信号的分散或标准偏差。信号成分量计算部52根据所算出的分散或标准偏差,算出包括在红外线检测信号中的取决于入射红外线的信号成分的量。更详细而言,信号成分量计算部52将所算出的分散的值设为信号成分的量。或者,将所算出的标准偏差的平方值设为信号成分的量。
在信号成分量计算部52中,在分散或标准偏差的算出中所使用的红外线检测信号的数量(帧数)优选为10帧以上,进一步优选为20帧以上。帧数越多,在信号成分量计算部52中算出的、包括在红外线检测信号中的取决于入射红外线的信号成分的量的精度变得越高。另一方面,帧数越多,被摄体的偏移增大的可能性越高。信号成分量计算部52可以根据被摄体的偏移来改变在分散或标准偏差的算出中所使用的红外线检测信号的数量。例如关于20帧分量的红外线检测信号,计算前半部分的10帧分量的红外线检测信号的平均值和后半部分的10帧分量的红外线检测信号的平均值,求出前半部分的平均值与后半部分的平均值的差值。在前半部分的平均值与后半部分的平均值之差小的情况下,使用20帧分量的红外线检测信号来算出分散或标准偏差。在前半部分的平均值与后半部分的平均值之差大的情况下,可以使用前半或后半部分的10帧分的红外线检测信号来算出分散或标准偏差。
固定模式干扰算出部53中被输入红外线检测信号和信号成分量计算部52所算出的信号成分的量。输入到固定模式干扰算出部53的红外线检测信号例如是被存储在帧存储器51中的多次的红外线检测信号的平均值。取而代之,在固定模式干扰算出部53中也可以输入被存储在帧存储器51中的多次的红外线检测信号中的1个。而且,在固定模式干扰算出部53中也可以输入被存储在帧存储器51中的多次的红外线检测信号的中央值(中值)或最频值(模式)。固定模式干扰算出部53从红外线检测信号减去信号成分量计算部52算出的信号成分的量并输出。固定模式干扰算出部53的输出相当于FPN成分的量。数据更新部54以固定模式干扰算出部53输出的所关注检测器元件的FPN成分的量,更新被存储在FPN数据存储部43中的所关注检测器元件的FPN数据。
另外,红外线检测器11(参考图1)的输出信号在模拟信号处理部12中被放大。并且,有时红外线检测器11的输出信号在模拟信号处理部12中也被转换成电流值或电压值。该情况下,有时在信号成分量计算部52中算出的分散的值或标准偏差的平方值与包括在红外线检测器11的各检测器元件的输出信号中的信号成分的量将会不一致。在信号成分的量及FPN成分的量的算出中,考虑模拟信号处理部12中的信号的放大率、向电流值或电压值的转换效率等,只要进行对所算出的值乘以转换系数等的处理即可。
以下,关于动作顺序进行说明。图6表示本发明的第1实施方式所涉及的固定模式干扰数据的更新方法的顺序。首先,红外线摄像装置100以正常摄像模式进行动作。由红外线检测器11检测到的红外线检测信号经由模拟信号处理部12(参考图1)及AD转换器13而被输入到数字信号处理部14。数字信号处理部14进行从红外线检测信号去除FPN的FPN校正处理。被去除FPN的红外线检测信号从输出部15输出。
控制部19将动作模式从正常摄像模式切换成FPN数据的更新模式(步骤A1)。例如在温度传感器18测量的温度与上一次FPN数据的更新时的温度之差成为温度阈值以上之后,控制部19将动作模式切换为FPN数据的更新模式。或者,从上一次FPN数据的更新时刻起,在经过了基准时间以上的时间的情况下,控制部19将动作模式切换为FPN数据的更新模式。由于动作模式被切换为FPN数据的更新模式,因此数字信号处理部14中的信号处理从FPN校正处理被切换为FPN数据的更新处理。
红外线检测器11检测多次红外线(步骤A2)。在每一次的检测中,红外线检测器11所输出的红外线检测信号经由模拟信号处理部12及AD转换器13而输入到数字信号处理部14。数字信号处理部14的干扰数据更新处理部44(参考图2)经由开关41而输入每一次的红外线检测信号。由红外线检测器11的各检测器元件检测到的每一次的红外线检测信号被存储于帧存储器51(参考图3)。
信号成分量计算部52在红外线检测器11所具有的检测器元件中选择所关注检测器元件(关注像素)(步骤A3)。信号成分量计算部52参考帧存储器51,算出所关注检测器元件的多次的红外线检测信号的分散或标准偏差(步骤A4)。信号成分量计算部52算出例如被存储在帧存储器51中的从帧1到帧N的红外线检测信号的分散。如上所述,红外线检测信号的分散的值对应于包括在红外线检测信号中的取决于入射红外线的红外线信号成分的量。
固定模式干扰算出部53从帧存储器51输入所关注检测器元件的红外线检测信号,通过从该红外线检测信号减去在步骤A4中算出的分散的值、或者标准偏差的平方值(信号成分的量)而算出所关注检测器元件的FPN成分的量(步骤A5)。数据更新部54以固定模式干扰算出部53输出的所关注检测器元件的FPN成分的量来改写被存储在FPN数据存储部43中的所关注检测器元件的FPN数据(步骤A6)。
干扰数据更新处理部44判断是否存在作为所关注检测器元件而未选择的检测器元件(步骤A7)。在存在未选择的检测器元件的情况下,返回到步骤A3,选择下一个检测器元件。干扰数据更新处理部44例如一边对所关注检测器元件的位置进行光栅扫描,一边重复实施步骤A3到步骤A7的处理,直至不存在未选择的检测器元件。由此,红外线检测器11所具有的各检测器元件的FPN数据得到更新。
若在步骤A7中判断不存在未选择的检测器元件,则控制部19将动作模式从FPN数据的更新模式切换为正常摄像模式(步骤A8)。由于动作模式被切换为正常摄像模式,因此数字信号处理部14中的信号处理从FPN数据的更新处理被切换为FPN校正处理。数字信号处理部14使用通过步骤A6而被更新的FPN数据来实施FPN校正处理。
在本实施方式中,算出多次的红外线检测信号的分散或标准偏差,并根据该分散或标准偏差而算出包括在红外线检测信号中的取决于入射红外线的信号成分的量(其推定值)。在假定被摄体不移动的情况下,入射到各检测器的红外线的量在帧之间为恒定。可认为在帧之间红外线检测信号发生变动是受到散粒干扰的影响。在本实施方式中,利用基于散粒干扰的红外线检测信号的变动取决于信号成分的量,由红外线检测信号的变动程度来算出信号成分的量。通过从红外线检测信号减去由此算出的信号成分的量而能够算出FPN成分的量,并能够以所算出的FPN成分的量而更新FPN数据。在本实施方式中,不需要为了获得FPN数据而另外设置快门机构。
在本实施方式中,根据多次的红外线检测信号的变动而进行FPN数据的更新。因此,与专利文献2不同,不需要使观测视场内的来自所有方向的光均匀地入射到红外线检测器的检测面,从而,当进行FPN数据的更新时,不需要将光学系统10控制成非对焦状态。在本实施方式中,正常摄像模式和FPN数据的更新模式不需要分离,可以一边进行正常摄像,一边进行FPN数据的更新。具体而言,在图2中,可以一边由干扰校正处理部42进行包括在红外线检测信号中的FPN成分的校正(去除),一边由干扰数据更新处理部44进行FPN数据的更新。该情况下,在继续进行拍摄的状态下,能够进行FPN数据的更新。
接着,对本发明的第2实施方式进行说明。图7表示本发明的第2实施方式所涉及的红外线摄像装置中的干扰数据更新处理部的结构。红外线摄像装置的结构与图1所示的第1实施方式所涉及的红外线摄像装置100相同,并且,数字信号处理部的结构与图2所示的第1实施方式中所使用的数字信号处理部14的结构相同。在本实施方式中,包括在数字信号处理部中的干扰数据更新处理部44a除了具有图3所示的第1实施方式中所使用的干扰数据更新处理部44的结构以外,还具有判定部55。除此以外,与第1实施方式相同。
关于各检测器元件,判定部55将固定模式干扰算出部53所输出的FPN成分的量与被存储在FPN数据存储部43中的FPN数据进行比较。判定部55算出固定模式干扰算出部53所输出的FPN成分的量与被存储在FPN数据存储部43中的FPN数据的差值,并判定差值(其绝对值)是否为阈值(第1阈值)以下。第1阈值例如设定为被存储在FPN数据存储部43中的FPN数据的值的20%。第1阈值可以不是固定值,而可以使第1阈值根据从上一次FPN数据的更新到此次FPN数据的更新的温度变化而发生变化。例如可以使第1阈值随着温度变化的变大而增大。判定部55在判定差值为阈值以下的情况下,通过数据更新部54以固定模式干扰算出部53所输出的FPN成分的量而更新被存储在FPN数据存储部43中的FPN数据。在判定为差值大于阈值的情况下,关于该检测器元件不更新FPN数据。该情况下,可以连续使用被存储在FPN数据存储部43中的FPN数据。
以下,对第2实施方式中的动作顺序进行说明。图8表示本发明的第2实施方式所涉及的固定模式干扰数据的更新方法的顺序。另外,步骤B1~B5因与图6中的步骤A1~A5相同而省略说明。
判定部55算出通过步骤B5而算出的所关注检测器元件的FPN成分的量与被存储在FPN数据存储部43中的所述检测器元件的FPN数据的差值(步骤B6)。判定部55判定通过步骤B6而算出的差是否在阈值以内(步骤B7)。在步骤B7中判定为差值在阈值以内的情况下,数据更新部54以固定模式干扰算出部53所输出的所关注检测器元件的FPN成分的量来改写被存储在FPN数据存储部43中的所关注检测器元件的FPN数据(步骤B8)。在步骤B7中,当判定为差值大于阈值时,跳过步骤B8,不进行当前所关注检测器元件的FPN数据的更新。
干扰数据更新处理部44判断是否存在作为所关注检测器元件而未选择的检测器元件(步骤B9)。该步骤与图6的步骤A7相同。在存在未选择的测器元件的情况下,返回到步骤B3,选择下一个检测器元件。若在步骤B9中判断不存在未选择的检测器元件,则控制部19将动作模式从FPN数据的更新模式切换为正常摄像模式(步骤B10)。该步骤与图6的步骤A8相同。由于动作模式被切换为正常摄像模式,因此数字信号处理部14中的信号处理从FPN数据的更新处理被切换为FPN校正处理。数字信号处理部14使用至少局部被更新的FPN数据来实施FPN校正处理。
在此,在红外线检测器11中多次检测入射红外线的期间,若入射到红外线检测器11的检测器元件的红外线为恒定,则红外线检测信号的变动是由散粒干扰来主导的,并能够根据红外线检测信号的变动程度来算出取决于入射红外线的信号成分的量。然而,在进行多次检测期间,若被摄体移动,则入射到检测器元件的红外线发生变化,由此,在红外线检测信号中产生大幅变动。该情况下,根据红外线检测信号的变动程度算出的取决于入射红外线的信号成分的量与取决于实际的入射红外线的信号成分的量之间的误差变大。若在所算出的信号成分的量中包括误差,则在干扰数据更新处理部44a中算出的FPN成分的量中也会生成大的误差。
在本实施方式中,在FPN成分的量在更新前后不会大幅变动的假设下,在干扰数据更新处理部44a中算出的FPN成分的量与被存储在FPN数据存储部43中的更新前的FPN数据之间的差值大的情况下,设为所算出的FPN成分的量的可靠性低,不更新FPN数据。由此,关于被摄体移动的部分等部分,不使用误差大的FPN成分的量,而能够继续使用被存储在FPN数据存储部43中的FPN数据。
上述中对每一个检测器元件进行判断有无更新FPN数据,但也可以对每一个区域进行判断。更详细而言,关于包括多个上述所算出的FPN成分的量与被存储在FPN数据存储部43中的FPN数据的差值大于阈值的检测器元件的区域,干扰数据更新处理部44a也可以在该区域不进行FPN数据的更新。
例如,关于某一区域,干扰数据更新处理部44a的判定部55将该区域中的所算出的FPN成分的量与被存储在FPN数据存储部43中的FPN数据的差值大于阈值的检测器元件的数量进行计数,通过该数量除以包括在区域中的检测器元件的总数而算出该区域中的差大于阈值的检测器元件的比例。判定部55对所算出的比例进行阈值处理,当比例高于阈值(第2阈值)时,关于包括在该区域中的检测器元件,也可以确定不进行FPN数据的更新。第2阈值例如被设定为整个区域的50%。
图9表示图像区域的分割例。该例中整个红外线图像(有效像素区域)在纵向及横向上分别被分割成4个,图像内设定有区域R1~R16共计16个区域。判定部55在区域R1~R16的各区域中算出上述差值大于阈值的检测器元件的比例,并判定所算出的比例是否高于阈值。例如在区域R11、R12、R15及R16中比例大于阈值的情况下,关于包括在区域R11、R12、R15及R16中的检测器元件,数据更新部54不进行FPN数据的更新,关于其它区域即包括在区域R1~R10、R13及R14中的检测器元件,以所算出的FPN成分的量而更新FPN数据。由此,在包括多个所算出的FPN成分的量的误差大的检测器元件的区域中,能够统一抑制FPN数据的更新。
另外,不需要预先设定区域,例如当存在差值大于阈值的检测器元件时,以动态的方式设定包括该检测器元件的区域,在该所设定的区域内,可以判定差值大于阈值的检测器元件的比例是否高。并且,在某一区域中,当差值大于阈值的检测器元件的比例低时,关于包括在该区域中的、差值大于阈值的检测器元件,至于是否进行FPN数据的更新是任意的。关于这种检测器元件,可以不进行FPN数据的更新,也可以根据所算出的FPN成分的量而更新FPN数据。
接着,对本发明的第3实施方式进行说明。图10表示本发明的第3实施方式所涉及的红外线摄像装置。本实施方式所涉及的红外线摄像装置100b除了具有图1所示的第1实施方式所涉及的红外线摄像装置100的结构以外,还具有焦点调整机构16和位置传感器17。其它方面可以与第1实施方式或第2实施方式相同。
在本实施方式中,光学系统10可以进行成像面的位置(成像位置)的控制。焦点调整机构16调整光学系统10与红外线检测器11的相对位置关系。以下,对通过改变光学系统10的位置而调整光学系统10与红外线检测器11的相对位置关系进行说明。焦点调整机构16例如包括改变包括在光学系统10中的透镜的位置的马达和驱动马达的驱动电路。位置传感器17检测包括在光学系统10中的透镜的位置。由于包括在光学系统10中的透镜的位置发生变化,因此光学系统10的成像位置发生变化。
控制部19作为控制光学系统10的成像位置的焦点控制部也发挥作用。控制部19对焦点调整机构16发送用于控制光学系统10的位置的位置信号。焦点调整机构16使光学系统10移动到所接收到的位置信号表示的位置。在正常摄像模式时,控制部19经由焦点调整机构16而将光学系统10的位置控制成光学系统10的成像面与红外线检测器11的检测面一致的位置。在正常摄像模式时,光学系统10的位置可以跟随被摄体的移动而发生变化,也可以固定于某一位置。
控制部19在FPN数据的更新模式时,经由焦点调整机构16而将光学系统10的位置控制成光学系统10的成像面与红外线检测器11的检测面不一致的位置。控制部19例如将光学系统10的位置控制成在被摄体最接近于光学系统10时光学系统10成为对焦状态的位置,或者在被摄体存在于无限远处时光学系统10成为对焦状态的位置。
在此,将光学系统10的成像面与红外线检测器11的检测面不一致的状态称作非对焦状态。即,将基于光学系统10的图像不成像于红外线检测器11的检测器元件的状态称作非对焦状态。并不需要是在所有检测器元件的区域中图像不成像的状态,而是即使在一部分区域中图像成像,也设成整体为非对焦状态。并且,将光学系统10的成像面与红外线检测器11的检测面一致的状态称作对焦状态。即,将基于光学系统10的图像成像于红外线检测器11的检测器元件的状态称作对焦状态。光学系统10的成像面与红外线检测器11的检测面不需要完全一致,而包括在红外线检测器11的检测面以能够识别被摄体的程度可分辨的状态。
在FPN数据的更新模式时,控制部19根据发送到焦点调整机构16的位置信号,将光学系统10的位置控制成光学系统10的成像面与红外线检测器11的检测面不一致的位置。控制部19例如在被摄体最接近于光学系统10时将表示光学系统10成为对焦状态的位置的位置信号发送到焦点调整机构16。或者,在被摄体存在于无限远处时表示光学系统10成为对焦状态的位置的位置信号发送到焦点调整机构16。
在切换为FPN数据的更新模式时,控制部19根据位置传感器17所检测的光学系统10的位置、被摄体最接近于光学系统10时光学系统10成为对焦状态的位置及被摄体存在于无限远处时光学系统10成为对焦状态的位置的位置关系来决定发送到焦点调整机构16的位置信号。控制部19例如将位置传感器17所检测的光学系统10的位置设为Px,将被摄体最接近于光学系统10的情况下成为对焦状态的光学系统10的位置设为P1,将被摄体存在于无限远处的情况下成为对焦状态的光学系统10的位置设为P2,并分别计算|Px-P1|和|Px-P2|。若|Px-P1|>|Px-P2|,则控制部19将表示把光学系统10的位置设为P1的位置信号输出到焦点调整机构16。若|Px-P1|<|Px-P2|,则控制部19将表示把光学系统10的位置设为P2的位置信号输出到焦点调整机构16。由此,能够进一步增大光学系统10的成像位置与红外线检测器11的检测面的位置的偏差,并能够使红外线图像的模糊度增大。
若光学系统10被设为非对焦状态,则被摄体的图像成像于从红外线检测器11的检测面偏离的位置上,被摄体无法进行分辨。因此,入射到红外线检测器11的各检测元件的红外线至少局部大致变得均匀,由红外线检测器11拍摄到的红外线图像成为模糊的图像。在FPN数据的更新模式时,干扰数据更新处理部44(参考图2)中被输入在光学系统被控制成非对焦状态的状态下由红外线检测器11检测到的红外线检测信号。干扰数据更新处理部44的信号成分量计算部52(参考图3等)根据在光学系统10被控制成非对焦状态的状态下由红外线检测器11的检测器元件检测到的多次的红外线检测信号而算出信号成分的量。
在本实施方式中,在FPN数据的更新模式中将光学系统10控制成非对焦状态。通过将光学系统控制成非对焦状态,至少能够局部地使入射到红外线检测器11的各检测元件的红外线大致均匀。从而,在受检体稍微移动时,也能够期待入射到检测器元件的红外线的量几乎不发生变化。通过将光学系统10设为非对焦状态,在受检体稍微移动时,也能够使在信号成分量计算部52中算出的取决于入射红外线的信号成分的量的误差比将光学系统10设为对焦状态的情况减少。并以能够减少所算出的信号成分的量的误差的量,能够减少所算出的FPN成分的量的误差。
以上,根据优选实施方式,对本发明进行了说明,但本发明的红外线摄像装置及固定模式干扰数据的更新方法并不仅限于上述实施方式,由上述实施方式的结构实施了各种修正及变更的内容也包括在本发明的范围内。
符号说明
10-光学系统,11-红外线检测器,12-模拟信号处理部,13-AD转换器,14-数字信号处理部,15-输出部,16-焦点调整机构,17-位置传感器,18-温度传感器,19-控制部,41-开关,42-干扰校正处理部,43-FPN数据存储部,44-干扰数据更新处理部,51-帧存储器,52-信号成分量计算部,53-固定模式干扰算出部,54-数据更新部,55-判定部,100-红外线摄像装置,S1~S5-信号成分,FPN1~FPN5-固定模式干扰成分,DS1~DS5-红外线检测信号。
Claims (9)
1.一种红外线摄像装置,其特征在于,具备:
红外线检测器,包括对所入射的红外线进行检测的多个检测器元件;
干扰校正处理部,从由所述多个检测器元件检测到的红外线的检测信号减去固定模式干扰数据,由此从所述红外线的检测信号去除固定模式干扰;及
干扰数据更新处理部,其包括:信号成分量计算部,根据由所述红外线检测器检测到的多次的红外线的检测信号,算出包括在所述红外线的检测信号中的取决于入射到所述红外线检测器的红外线的信号成分的量;固定模式干扰算出部,根据所述红外线的检测信号和所述算出的信号成分的量,算出固定模式干扰成分的量;及数据更新部,以由所述算出的固定模式干扰成分的量而更新所述固定模式干扰数据,
关于处理对象的各检测器元件,所述信号成分量计算部算出由该检测器元件检测到的多次的所述红外线的检测信号的分散或标准偏差,并根据该算出的分散或标准偏差而算出所述信号成分的量,
所述固定模式干扰算出部将所述红外线的检测信号与所述算出的信号成分的量之差作为所述固定模式干扰成分的量而算出。
2.根据权利要求1所述的红外线摄像装置,其中,
所述干扰数据更新处理部还包括判定部,关于各检测器元件,所述判定部计算所述算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值,并判定该差值是否为第1阈值以下,
关于被判定为所述差值为第1阈值以下的检测器元件,所述数据更新部以由所述算出的固定模式干扰成分的量而更新所述固定模式干扰数据。
3.根据权利要求2所述的红外线摄像装置,其中,
关于被判定为所述差值大于第1阈值的检测器元件,所述数据更新部不进行所述固定模式干扰数据的更新。
4.根据权利要求2所述的红外线摄像装置,其中,
关于某一区域,在该区域中的所述差值超过第1阈值的检测器元件的数量的比例高于第2阈值的情况下,关于包括在该区域中的检测器元件,所述数据更新部不进行所述固定模式干扰数据的更新。
5.根据权利要求1所述的红外线摄像装置,其中,
所述红外线摄像装置还具备测量温度的温度测量部,在所述温度测量部测量的温度与上一次固定模式干扰数据的更新时的温度之差为温度阈值以上的情况下,所述数据更新部进行所述固定模式干扰数据的更新。
6.根据权利要求1所述的红外线摄像装置,其中,
所述数据更新部周期性地重复进行所述固定模式干扰数据的更新。
7.根据权利要求1所述的红外线摄像装置,其中,
所述红外线摄像装置还具备:
光学系统,可进行成像位置的控制;及
焦点位置控制部,控制所述光学系统的成像位置,
在所述红外线检测器的多个检测器元件中,经由所述光学系统而被入射红外线,
在所述焦点位置控制部控制所述光学系统的成像位置,从而所述光学系统被控制成非对焦状态的状态下,所述信号成分量计算部算出由所述检测器元件检测到的多次的红外线的检测信号的分散或标准偏差。
8.一种固定模式干扰数据的更新方法,其为包括多个检测器元件的红外线检测器中的表示固定模式干扰的固定模式干扰数据的更新方法,所述固定模式干扰数据的更新方法的特征在于,具有:
由所述红外线检测器来检测红外线的步骤;
算出通过实施多次检测所述红外线的步骤而得到的多次的红外线的检测信号的分散或标准偏差的步骤;
根据所述算出的分散或标准偏差算出包括在所述红外线的检测信号中的取决于入射到所述检测器元件的红外线的信号成分的量的步骤;
根据所述红外线的检测信号与所述算出的信号成分的量算出固定模式干扰成分的量的步骤;及
以所述算出的固定模式干扰成分的量而更新所述固定模式干扰数据的步骤,
在更新所述固定模式干扰数据的步骤之前,还具有计算所述算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值的步骤。
9.根据权利要求8所述的固定模式干扰数据的更新方法,其中,
在更新所述固定模式干扰数据的步骤中,关于所述算出的固定模式干扰成分的量与更新前的固定模式干扰数据的差值为阈值以下的检测器元件,以所述算出的固定模式干扰成分的量而更新所述固定模式干扰数据。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015-103567 | 2015-05-21 | ||
JP2015103567 | 2015-05-21 | ||
PCT/JP2016/002355 WO2016185701A1 (ja) | 2015-05-21 | 2016-05-13 | 赤外線撮像装置及び固定パターンノイズデータの更新方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107615021A CN107615021A (zh) | 2018-01-19 |
CN107615021B true CN107615021B (zh) | 2019-11-26 |
Family
ID=57319704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680028637.9A Active CN107615021B (zh) | 2015-05-21 | 2016-05-13 | 红外线摄像装置及固定模式干扰数据的更新方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10432881B2 (zh) |
JP (1) | JP6275334B2 (zh) |
CN (1) | CN107615021B (zh) |
WO (1) | WO2016185701A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7006153B2 (ja) * | 2017-11-10 | 2022-01-24 | 富士通株式会社 | デバイス評価方法、デバイス評価装置、及びデバイス評価プログラム |
EP3817352B1 (en) | 2018-06-29 | 2022-05-11 | Mitsubishi Electric Corporation | Imaging device and line-variation-noise-reducing device |
WO2020024575A1 (zh) | 2018-08-01 | 2020-02-06 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN113785561B (zh) | 2019-08-01 | 2023-12-19 | 松下知识产权经营株式会社 | 摄像装置 |
CN112212983A (zh) * | 2020-09-29 | 2021-01-12 | 中国科学院长春光学精密机械与物理研究所 | 一种小型化且模块化的红外探测器电子学系统 |
WO2022264390A1 (ja) * | 2021-06-18 | 2022-12-22 | 三菱電機株式会社 | 赤外線撮像装置及び固定パターンノイズデータの生成方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3675066B2 (ja) | 1996-11-06 | 2005-07-27 | 三菱電機株式会社 | 赤外線撮像装置および画像補正方法 |
JP3376991B2 (ja) | 2000-05-30 | 2003-02-17 | 日本電気株式会社 | 赤外線撮像方法及び赤外線撮像装置 |
JP3565338B2 (ja) * | 2001-04-11 | 2004-09-15 | 日本電気株式会社 | 赤外線撮像装置及びドリフト補正方法 |
JP4207588B2 (ja) * | 2003-02-03 | 2009-01-14 | 日本電気株式会社 | 赤外線撮像装置の固定パターンノイズ補正方法および固定パターンノイズ補正装置 |
US7391925B2 (en) * | 2003-12-04 | 2008-06-24 | Lockheed Martin Missiles & Fire Control | System and method for estimating noise using measurement based parametric fitting non-uniformity correction |
US7045756B2 (en) * | 2004-08-05 | 2006-05-16 | Applera Corporation | Methods and systems for in situ calibration of imaging in biological analysis |
JP5483832B2 (ja) * | 2008-06-10 | 2014-05-07 | キヤノン株式会社 | 放射線撮影制御装置および方法 |
US9235876B2 (en) * | 2009-03-02 | 2016-01-12 | Flir Systems, Inc. | Row and column noise reduction in thermal images |
US8355064B2 (en) | 2010-09-27 | 2013-01-15 | Sharp Laboratories Of America, Inc. | Noise reduction for machine vision systems |
US8203116B2 (en) * | 2010-10-19 | 2012-06-19 | Raytheon Company | Scene based non-uniformity correction for infrared detector arrays |
JP2012235443A (ja) * | 2011-05-03 | 2012-11-29 | Sharp Corp | マシンビジョンシステムのためのノイズ低減技術 |
JP2013207788A (ja) * | 2012-03-29 | 2013-10-07 | Fujitsu Ten Ltd | 映像処理装置 |
-
2016
- 2016-05-13 WO PCT/JP2016/002355 patent/WO2016185701A1/ja active Application Filing
- 2016-05-13 CN CN201680028637.9A patent/CN107615021B/zh active Active
- 2016-05-13 JP JP2017518758A patent/JP6275334B2/ja active Active
-
2017
- 2017-11-16 US US15/814,895 patent/US10432881B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10432881B2 (en) | 2019-10-01 |
US20180098009A1 (en) | 2018-04-05 |
CN107615021A (zh) | 2018-01-19 |
WO2016185701A1 (ja) | 2016-11-24 |
JPWO2016185701A1 (ja) | 2018-03-29 |
JP6275334B2 (ja) | 2018-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107615021B (zh) | 红外线摄像装置及固定模式干扰数据的更新方法 | |
JP6540519B2 (ja) | 赤外線撮像装置 | |
CN107615017B (zh) | 红外线摄像装置及固定模式干扰数据的更新方法 | |
US8203116B2 (en) | Scene based non-uniformity correction for infrared detector arrays | |
CN102833472B (zh) | 摄像设备及其控制方法 | |
US20120211648A1 (en) | On-board non-uniformity correction calibration methods for microbolometer focal plane arrays | |
CN104935806B (zh) | 焦点检测设备及其控制方法 | |
CN107421643A (zh) | 红外图像的校正方法及装置 | |
CN105635564A (zh) | 用于同步自动聚焦的多相机装置和方法 | |
KR20200121907A (ko) | 시뮬레이션과 광학 현미경 검사를 결합하여 검사 모드 결정 | |
US20200296301A1 (en) | Image processing arrangement | |
JP6114289B2 (ja) | 電気光学センサ用のぼけキャリブレーションシステム及び移動マルチ焦点マルチターゲットコンステレーションを用いる方法 | |
KR102081647B1 (ko) | 검사 장치 및 검사 방법 | |
CN106716990A (zh) | 红外线摄像装置、固定图案噪声计算方法及固定图案噪声计算程序 | |
JP6759088B2 (ja) | 撮像装置とその制御方法及びプログラム | |
US10891716B2 (en) | Process allowing the removal through digital refocusing of fixed-pattern noise in effective images formed by electromagnetic sensor arrays in a light field | |
JP2010216817A (ja) | 赤外線撮像装置 | |
US20180007295A1 (en) | Focus adjustment device and focus adjustment method | |
CN106716991B (zh) | 红外线摄像装置、图像处理方法及记录介质 | |
JP2005260453A (ja) | 赤外線画像補正装置 | |
CN108830904B (zh) | 一种参数优化的相机响应曲线定标方法 | |
JP5444928B2 (ja) | 測光装置および撮像装置 | |
JP6999531B2 (ja) | 検査方法および検査装置 | |
JP2010028203A (ja) | 赤外線カメラ | |
JPH07270177A (ja) | 星像データ補正装置及びそれを用いた恒星センサ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |