CN107864375B - 带对准分析的成像设备 - Google Patents

带对准分析的成像设备 Download PDF

Info

Publication number
CN107864375B
CN107864375B CN201710867756.XA CN201710867756A CN107864375B CN 107864375 B CN107864375 B CN 107864375B CN 201710867756 A CN201710867756 A CN 201710867756A CN 107864375 B CN107864375 B CN 107864375B
Authority
CN
China
Prior art keywords
imaging device
visible images
measurement zone
target
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710867756.XA
Other languages
English (en)
Other versions
CN107864375A (zh
Inventor
J.M.克雷施
S.路德维希
R.加特纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fluke Corp
Original Assignee
Fluke Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fluke Corp filed Critical Fluke Corp
Publication of CN107864375A publication Critical patent/CN107864375A/zh
Application granted granted Critical
Publication of CN107864375B publication Critical patent/CN107864375B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/10—Radiation pyrometry, e.g. infrared or optical thermometry using electric radiation detectors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/66—Analysis of geometric attributes of image moments or centre of gravity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85—Stereo camera calibration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J2005/0077—Imaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Geometry (AREA)
  • Radiation Pyrometers (AREA)
  • Photometry And Measurement Of Optical Pulse Characteristics (AREA)
  • Studio Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及带对准分析的成像设备，更具体地涉及一种利用指向目标的测量区的成像设备，其中该成像设备可以结合未对准分析特征而使用。该成像设备可以在不同的时间采集第一图像和第二图像。可对第一图像与第二图像进行比较，例如通过对成像设备在第一图像中的测量区的位置与成像设备在第二图像中的测量区的位置进行比较。基于该比较，可以提供成像设备相对于目标的未对准指示。

Description

带对准分析的成像设备
技术领域
本公开总体上涉及成像设备，更具体地涉及成像设备的未对准的检测。
背景技术
成像设备可以用于采集目标物体的特征（例如，物理外观）。一种类型的成像设备可以采集目标物体的热特性，并因此起非接触式温度测量仪器的作用。非接触式温度测量仪器允许用户在不接触物体的情况下测量物体或一部分物体的表面温度。一种常见类型的非接触式温度测量设备是红外温度计。红外温度计通过测量由物体所发出的红外辐射来确定物体的温度。在特定波长处发射的红外辐射的量与物体的温度相关。如果由物体所发射红外能量的量及其发射率是已知的，那么可以在不接触物体的情况下确定物体的温度。红外温度计的光学系统收集来自测量点的红外能量并使其集中到检测器上。然后，检测器将该能量转换成可以用温度单位显示的电信号。许多红外温度计允许用户通过使温度计对准物体而确定在该物体上的点的温度。
工业监测系统经常采用非接触式温度温度计来采集目标的一个或多个温度。在一些实例中，目标可以包括一件的制造装备（例如，该件制造装备的特定部分）和/或在制造过程中间（例如，在装配线上）的产品。在许多工业监测系统中，非接触式温度温度计可以适合于与远程监测站进行通信联系，并且在一些情况下可以与制造过程控制程序包相结合。
可以将非接触式温度温度计安装在适于采集期望目标的图像数据的固定位置。然而，在许多实例中目标可以存在于某一环境中，这种环境使得将非接触式温度温度计安装在该环境内的大体上远程位置成为必要。例如，可能需要将非接触式温度温度计安装在使对设备造成损害的危险性最小化并且/或者使由在该环境内的物质（例如，水蒸气、烟气、尘埃等）所造成的干扰最小化的位置。此外，对非接触式温度温度计在许多这种环境中的正确操作的一个威胁是该设备相对于目标的未对准。未对准可以由例如可以在许多目标环境中出现的振动或其它方式的机械碰撞所造成。目前，非接触式温度温度计的常规操作包括频繁的手动对准检视，用以确定非接触式温度温度计是否与期望目标正确地对准。在许多情况下，由于非接触式温度温度计的远程的、难以到达的位置，因而这种手动对准检视会是复杂的。
发明内容
本文中所公开的实施例可以用于检测成像设备的未对准。在一些实施例中，利用未对准分析特征生成成像设备相对于目标的未对准的指示，并且在某些其它实施例中对成像设备的定位进行调整以纠正这种未对准。在一些情况下，在不必手动地接近成像设备的情况下，自动地调整成像设备的定位。因此，本文中所公开的实施例可以允许未对准成像设备的检测，由此排除对用于判定成像设备是否与目标正确地对准的定期手动检视的需要。此外，本文中所公开的具体实施例还可以根据所检测的未对准的程度将自动化调整应用于成像设备的定位，由此排除了对成像设备的手动重新定位的需要。因此，关于由成像设备所采集图像的错误表示可以基本上立即得到纠正，因此降低了与对由未对准成像设备所提供表示的依赖相关的危险性。
一些实施例包括判定成像设备的未对准的方法。一个这种方法包括在第一时间利用成像设备采集第一图像（例如，可见光或热图像）、和在第二时间利用成像设备采集第二图像（例如，可见光或热图像）的步骤。第二时间是在第一时间之后。该方法还包括对在成像设备测量区在第一图像中的位置与成像设备测量区在第二图像中的位置进行比较的步骤。该比较得出了一个结果，该结果可以用于表明成像设备已变得相对于期望目标未对准并且/或者调整成像设备的定位（例如，自动地）。
某些实施例包括非暂时性计算机可读介质，该介质包含导致可编程处理器对图像进行比较并且在一些情况下判定成像设备是否已变得相对于期望目标未对准的指令。一个实施例包括非暂时性计算机可读介质，该介质包含用于导致可编程处理器接收与由成像设备所采集第一图像相对应的第一图像数据（例如，可见光、红外图像数据）并且在采集第一图像后的某一时间接收与由成像设备所采集第二图像相对应的第二图像数据（例如，可见光、红外图像数据）的指令。这些指令还导致可编程处理器对成像设备测量区在第一图像数据中的位置与成像设备测量区在第二图像数据中的位置进行比较。该比较得出一个结果，该结果可用于表明成像设备已变得相对于期望目标未对准并且/或者调整成像设备的定位（例如，自动地）。
其它实施例包括其中对图像进行比较的系统，并且在一些情况下在该系统内部用于判定成像设备是否已变得相对于期望目标未对准。用于判定成像设备的未对准的系统的一个实施例包括成像设备、远程监测站、和计算设备。成像设备具有一个或多个传感器（例如，可见光和/或红外传感器）并且构造成将从目标中所发出的能量（例如，可见光和/或红外能量）集中到各自的一个或多个传感器上。远程监测站与成像设备相连通。计算设备与成像设备和/或远程监测站相连通。计算设备具有至少一个处理器，并且构造成接收由一个或多个传感器所生成的第一图像数据（例如，可见光和/或红外图像数据）以及由一个或多个传感器所生成的第二图像数据。第二图像数据是在成像设备已采集第一图像数据之后的某一时间由成像设备所采集。计算设备还构造成对第一图像数据与第二图像数据进行比较，以判定是否已发生成像设备的位置变化。计算设备也构造成在已发生成像设备的位置变化的情况下根据该比较而生成未对准指示。
本发明还公开了以下方案。
方案1. 一种用于确定成像设备的未对准的方法，所述方法包括：
在第一时间利用所述成像设备采集第一可见光图像；
在第二时间利用所述成像设备采集第二可见光图像，所述第二时间是在所述第一时间之后；和
对在所述第一可见光图像中所述成像设备的测量区的位置与在所述第二可见光图像中所述成像设备的所述测量区的位置进行比较。
方案2. 如方案1所述的方法，还包括：
当在所述第一可见光图像中所述成像设备的所述测量区的所述位置不同于在所述第二可见光图像中所述成像设备的所述测量区的所述位置时，生成未对准指示。
方案3. 如方案2所述的方法，其中，
当在所述第一可见光图像中所述成像设备的所述测量区的所述位置不同于在所述第二可见光图像中所述成像设备的所述测量区的所述位置达到超过预定阈值的程度时，生成所述未对准指示。
方案4. 如方案1所述的方法，还包括以下步骤：
生成代表所述测量区的视觉指示物到所述第一可见光图像上；和
将具有叠加的视觉指示物的所述第一可见光图像保存到存储器中。
方案5. 如方案1所述的方法，还包括：
在采集所述第二可见光图像之后的某一时间利用所述成像设备采集第三可见光图像；和
对在所述第一可见光图像中所述成像设备的所述测量区的位置与在所述第三可见光图像中所述成像设备的所述测量区的位置进行比较。
方案6. 如方案1所述的方法，还包括：
利用在所述第一可见光图像中所述成像设备的所述测量区的所述位置与在所述第二可见光图像中所述成像设备的所述测量区的所述位置的比较的结果，改变所述成像设备的位置。
方案7. 如方案6所述的方法，其中，所述比较的结果是所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的数值测量。
方案8. 如方案7所述的方法，还包括：
生成代表所述测量区的视觉指示物到所述第一可见光图像上；和
生成代表所述测量区的所述视觉指示物到所述第二可见光图像上，其中所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量是相对于所述视觉指示物。
方案9. 如方案7所述的方法，其中，利用在远离所述成像设备的位置的用户输入而改变所述成像设备的所述位置，并且其中所述用户输入是基于所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量。
方案10. 如方案7所述的方法，其中，在所述改变的时候在没有用户输入的情况下自动地改变所述成像设备的所述位置，并且其中在所述成像设备的所述位置中自动变化是基于所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量。
方案11. 如方案7所述的方法，其中，使所述成像设备指向运动中的目标，所述目标被采集在所述第一和第二可见光图像中，并且还包括：
确定在所述第一时间与第二时间之间的经过时间；
对在所述第一可见光图像中所述目标的位置与在所述第二可见光图像中所述目标的位置进行比较；
基于所述比较而确定所述目标位置变化的数值测量；
利用所述目标位置变化的数值表示和所述经过的时间来确定所述目标的移动速率，其中所述成像设备在所述第一和第二可见光图像之间的所述测量区的位置变化的所述数值测量补偿所述目标的移动速率；和
当所述测量区的位置变化的所述数值测量超过预定的阈值时，生成未对准指示。
方案12. 一种包括指令的非暂时性计算机可读介质，所述命令是用于导致可编程处理器以：
接收与由成像设备所采集的第一可见光图像相应的第一可见光图像数据；
在采集所述第一可见光图像之后的某一时间，接收与由所述成像设备采集的第二可见光图像相对应的第二可见光图像数据；
对所述成像设备在所述第一可见光图像数据中的测量区的位置与所述成像设备在所述第二可见光图像数据中的所述测量区的位置进行比较。
方案13. 如方案12所述的介质，其中，所述指令还导致所述可编程处理器以：
生成在代表所述测量区的所述第一可见光图像数据中的视觉指示物，其中通过导致所述处理器记录与所述第一可见光图像数据相对应的若干特定像素而生成所述视觉指示物；
将具有所生成视觉指示物的所述第一可见光图像数据保存到存储器中；
生成在代表所述测量区的所述第二可见光图像数据中的所述视觉指示物，其中通过导致所述处理器记录与所述第二可见光图像数据相对应的若干特定像素而生成所述视觉指示物，并且其中与所述第一和第二可见光图像数据相对应的所述特定像素是相同的；和
将具有所生成视觉指示物的所述第二可见光图像数据保存到存储器中。
方案14. 如方案13所述的介质，其中，所述指令还导致所述可编程处理器以：
当在所述第一可见光图像中所述视觉指示物的所述位置不同于在所述第二可见光图像中所述视觉指示物的所述位置达到超过预定阈值的程度时，生成未对准指示。
方案15. 如方案14所述的介质，其中，所述指令还导致所述可编程处理器以：
输出与所述第一可见光图像与第二可见光图像之间的所述视觉指示物的位置变化的数值指示相对应的位置变化信号。
方案16. 一种用于确定成像设备的未对准的系统，所述系统包括：
具有可见光传感器和红外传感器的所述成像设备，所述成像设备构造成将从目标中所发出的可见光能量集中到所述可见光传感器上并且将从所述目标中所发出的红外能量集中到所述红外传感器上；
与所述成像设备连通的远程监测站；和
与所述成像设备和所述远程监测站连通的计算设备，所述计算设备包括至少一个处理器，并且所述计算设备构造成：
接收由所述可见光图像传感器所生成的第一可见光图像数据；
接收由所述可见光图像传感器所生成的第二可见光图像数据，所述第二可见光图像数据是在采集所述第一可见光图像数据之后的某一时间由所述成像设备所采集；
对所述第一可见光图像数据与所述第二可见光图像数据进行比较，从而判定是否已发生所述成像设备的位置变化；和
在所述成像设备的位置变化已发生的情况下，根据所述比较而生成未对准指示。
方案17. 如方案16所述的系统，其中，对所述第一可见光图像数据与所述第二可见光图像数据的比较包括对所述成像设备在所述第一可见光图像中的测量区的位置与所述成像设备在所述第二可见光图像中的所述测量区的位置进行比较。
方案18. 如方案17所述的系统，其中，对所述成像设备在所述第一可见光图像中的所述测量区的所述位置与所述成像设备在所述第二可见光图像中的所述测量区的所述位置进行比较包括对生成到所述第一可见光图像上的代表所述测量区的视觉指示物与生成到所述第二可见光图像上的代表所述测量区的视觉指示物进行比较。
方案19. 如方案16所述的系统，其中，所述计算设备还构造成：
计算所述成像设备在所述第一可见光图像与第二可见光图像之间的位置变化的数值测量；和
将命令传送至所述成像设备，所述命令包含引导所述成像设备根据所计算的数值测量来调整所述成像设备的定位的指令。
方案20. 如方案19所述的系统，其中，在没有用户输入的情况下自动地对所述成像设备的定位进行调整，并且其中在所述成像设备的定位的所述自动调整是基于所述成像设备在所述第一可见光图像与第二可见光图像之间的位置变化的所述数值测量。
在附图和下面的描述中陈述了一个或多个实例的细节。基于描述和附图并基于权利要求，其它特征、物体、和优点将是显而易见的。
附图说明
图1A是示例性非接触式温度测量设备的透视前视图。
图1B是图1A的示例性非接触式温度测量设备的透视后视图。
图1C是图1A和图1B的示例性非接触式温度测量设备的剖视图。
图1D是图1A和图1B的非接触式温度测量设备的另一个实例的剖视图。
图2是图示说明未对准分析的一个实例的示意图。
图3是图示说明用于对非接触式温度测量设备的对准进行纠正的一个示例性方法的流程图。
具体实施方式
以下的详细描述在本质上是示例性，而并非意图以任何方式限制本发明的范围、应用、或形态。相反，以下的描述提供用于实施本发明的各种实施例的实际说明。为所选择元件和对于本发明领域的技术人员为已知的所有其它所采用元件提供了结构、材料、尺寸、和制造工艺的例子。本领域技术人员将认识到许多的所述实例具有多种合适的替代。
图1A-图1C示出了成像设备100的一个实施例。该成像设备100可以用于多种功能，包括在一个实例中起非接触式温度测量设备的作用。图1A是透视前视图，而图1B是设备100的透视后视图。图1C是设备100的剖视图。如上所述，设备100可以用于一种应用，例如用于在不必使目标与设备100物理地接触的情况下提供与期望目标的热状态有关的信息。
设备100限定容纳设备100的各种部件（在图1C中示出了其部分部件）的壳体102。该壳体102具有前部104和后部106。设备100的前部104可以包括透镜组件108，而设备100的背部106可以包括控制面板110。联接到壳体102的可以是安装部件112。可以利用安装部件112将设备100安装在期望的位置，其中前部104在间隔一定距离处指向目标。在安装后，安装部件112可以用于促成设备100相对于安装设备100所处位置的移动（例如，设备100的枢转和/或倾斜，例如以便促成与期望目标重新对准）。
在操作中，使设备100的前部104指向目标。在前部104的透镜组件108可以接收从目标中发出的可见光和/或在电磁波谱的红外范围中的辐射。依赖于设备100的应用，透镜组件108可以包括各种部件。例如，在图1C中所示出的实例中，透镜组件108包括可以接收从目标中所发出可见光和/或红外辐射的一个透镜114。在其它实例中，透镜组件108可以包括不同的透镜，例如用于接收来自目标的可见光的第一透镜、和用于接收来自目标的红外辐射的第二透镜。一个或多个透镜（例如，透镜114）可以发挥使所接收可见光和/或红外辐射集中的作用。此外，集中机构可以联接到透镜组件108，该透镜组件108构造成使透镜组件108的一个或多个透镜（例如，透镜114）移动从而调整由设备100所采集一个或多个图像的焦点。
透镜组件108限定经过一个或多个透镜（例如，透镜114）的曲率中心的光轴116。从目标所接收的可见光能量投射经过透镜114的前部并集中于透镜114的相对侧。该集中的可见光能量可以被引导至可见光传感器118上。可见光传感器118可以通过生成电信号而对该集中的能量作出响应，该电信号可以存储于存储器中并且/或者被转换且以可见光图像形式所显示。可见光传感器118可包括多个可见光传感器元件，例如CMOS检测器、CCD检测器、PIN二极管、雪崩光电二极管，等等。
在设备100的图示说明的实例中，包括用于将来自透镜114的集中的可见光能量引导至可见光传感器118上的分束器120。在将需要来自透镜组件108的集中能量的传感器定位在偏离光轴116的情况下，分束器会是有用的，例如在图1C中所示的示例性构造中的情况，其中光传感器118位于相对于光轴116为大约90°的位置。在此实施例中，分束器120定位在光轴116上并且相对于光轴116而倾斜（例如，45°），使得进入设备100且经过透镜114而集中的一部分可见光能量被反射到可见光传感器118上。在其它实例中，依赖于可见光传感器118的定位而无需包括分束器（例如，其中可见光传感器118是沿光轴116而定位）。
在其中包括分束器120的实例中，可见光的未被反射部分可穿过分束器120，沿光轴116最终到达在后部106的瞄准装置（sighting arrangement）122。如图中所示，瞄准装置122可以大体上同轴地定位在光轴116的周围。图示的示例性设备100包括作为瞄准装置122的一部分的目镜124，以便允许用户在视觉上看见由经过分束器120的未被反射可见光所形成的可见光图像。在包括的情况下，集中机构可以用于调整可见光图像的焦点，如经由一个或多个透镜（例如，透镜114）经过目镜124所看见。瞄准装置122可以用于例如设备100的最初安装，从而使设备100的测量区正确地对准在期望目标或者一部分的目标上。例如，瞄准装置122可以允许用户确定设备100的测量区目前相对于期望目标定位在何处并且对设备100的对准作出必要的调整，以便将设备100的测量区定位到目标上。一旦设备100的测量区已与期望目标准确地对准，便可以将设备100固定就位，例如通过安装部件112的使用。在一些情况下，例如在设备100与远程监测站相连通的情况下，无需包括瞄准装置122（和因此目镜124）。在不包括瞄准装置的情况下，本文中所描述瞄准装置的任何或全部功能可以通过使用由在远程监测站的设备100所采集的图像数据而实现。
瞄准装置122可以包括用于在环境中指示设备100的测量区的尺寸的任何工具（means），以便用户可以正确地瞄准设备100，从而使测量区与期望目标对准。瞄准工具的例子包括：将指示物投射到目标上的工具、在设备与目标之间提供中间视觉指示物的工具、和叠加工具。然而，在其中不包括瞄准装置的情况下，仍然可存在类似的瞄准工具，从而允许例如远程监测站实现瞄准装置的所述功能。
投射指示物工具可以例如包括激光瞄准（laser sighting），如在本领域中为共知且通常所使用的。在这种实施例中，可以通过将可见激光能量投射到目标自身上而指示测量区。例如，可以投射用于近距离对焦的十字线激光图案，并且可以投射用于标准对焦的边界图案。中间视觉指示物工具可以包括例如在该设备上的标线或其它瞄准镜（scope）。这种例子可以被认为类似于步枪瞄准镜，其中用户可以经过中间视觉指示物工具或在中间视觉指示物工具附近看，并且在前景确认测量区中利用该指示物观看目标。叠加瞄准工具可以包括，例如在本领域中为已知的视频叠加系统。在视频叠加系统的一个实例中，该设备包括连同视频监视器而使用的可见光摄像头，其用于显示目标的视觉表示。软件指令可以用于将图案叠加定位在与测量区相对应的目标的视频图像上。在这种实施例中，会需要提供处理器和指令集以便计算在目标图像上的叠加的适当尺寸和定位。另外，这种方法会需要激光、或者用于确定从透镜114到目标的距离的其它距离测量技术。
本文中所描述的示例性设备100可以包括处在各种位置的一个或多个标线（例如，包括十字线结构的透明盘），例如在目镜124的前面。可包括标线，用以协助对设备100的测量区与目标的对准的判定。用户可以经过目镜124观看，并且利用标线来确定设备100的测量区的当前位置。然后，可以利用标线手动地完成对设备100的对准的必要的调整，以便将设备100的测量区适当地定位在目标上。在其中不包括瞄准装置122和因此目镜124的实例中，标线可以位于例如在可见光传感器118前面的位置。这种配置可以允许标线被加在由传感器118所采集的可见光图像数据上，因此允许远程监测站利用标线的存在来协助对设备100的测量区与目标的对准的判定。
另外，在一些实例中，设备100可以接收从目标中发出的红外能量。可以在透镜组件108处接收红外能量，例如通过投射经过一个或多个透镜（例如，透镜114）的前面并且集中于一个或多个透镜的相对侧上。可以将该集中的红外能量引导到红外传感器128上，并且红外传感器128可以将所接收的红外能量转换成电信号。红外传感器128可以具有能够将在红外传感器128处所接收原红外辐射转换成温度和/或数字图像数据的相关电子和/或处理单元装置129。例如，随后可以利用这种处理单元装置129对由红外传感器128所生成的信号进行电子放大、滤波并且转换成数字信号电平。处理单元装置129也可以包括将能量数据转换成温度的微控制器。在一个实施例中，微控制器利用查找表将能量数据转换成温度。在其它的实例中，微控制器可以执行对从红外传感器128所接收数据的其它适当分析。设备100的控制面板110可以包括显示屏130，用于指示在目标上的测量区的温度。
在一些实施例中，红外传感器128可以单个传感器，但在其它实施例中红外传感器128可以是微测热辐射计或热电堆检测器元件的红外焦平面阵列，或者可以由光子检测器（例如光电二极管或光电晶体管）、或者其它热或光子检测设备所组成。红外传感器的一个非限制性例是由德国耶拿的光子技术研究所（IPHT）制造的微型化热辐射传感器TS-80。TS-80传感器是利用微系统技术制作在硅晶片上的微型化多结热电堆。
依赖于红外传感器128在壳体102内部的位置（例如，其中传感器128位于偏离光轴116的位置，例如在图1C中所示），在一些实例中可以利用红外分束器120将集中的红外能量反射到红外传感器128上。在另一个实例中，红外传感器128可构造成允许可见光通过，例如当红外传感器128位于光轴116上、在瞄准装置122的前面、和/或在可见光传感器118的前面。另外，依赖于红外传感器128相对于可见光分束器120的位置，可见光分束器120可属于对于电磁波谱的红外范围的辐射大体上为透明的类型。
当被包括时，设备100的红外传感器128可以具有测量区，该测量区如前所述在一些实例中可以通过目镜124和标线的使用而确定。测量区（设备100在其上方可以检测红外能量）的面积作为设备100与目标之间距离的函数而增加。该测量区可至少部分地对应于所使用的具体红外传感器128。测量区通常将不具有边界清楚的边缘或边界（例如，边界清楚的矩形），相反通常将具有难以辨别的边缘。实际上，一般来说只有大约90%的由设备100所检测能量是来自制造商通常规定为主测量区的区域内。剩余的大约10%的能量是从位于超过主测量区边界的较大区域所收集，这是由于设备中的收集光学器件（例如，透镜组件108）的散射和性质。因此，在操作中，设备100可以实际地接收来自大于由测量区所指示目标的区域的红外能量（例如，利用标线）。因此，在一些应用中设备100可构造成适应所接收红外能量的此性质。
在一些实例中，设备100大体上同时地（例如，在相同时间）收集来自目标的红外能量和可见光能量。在这种实例中，由设备所生成的可见光数据和红外数据对应于相同的测量区，例如由标线所指示的测量区，因此在大致相同的时间属于相同的目标或目标的部分。在这些实例中，由设备100所生成的红外数据在特定时间在目标处的局部温度的指示，而由设备100所生成的可见光数据是在相同时间相同目标的指示。在其它实例中，设备100可在不同的时间收集来自目标的红外能量和可见光能量。
为了便于设备100的操作，设备100还可以包括：电子器件、一个或多个处理器（例如，处理单元129）、一个或多个存储单元、输入/输出部件、和电源。在设备100内部包括存储器的情况下，这种存储器可以包括但不限于：RAM、ROM、和易失性与非易失性存储器的任意组合。电源可以包括但不限于，电池和相关的电源产生电路。该电源可以将电力提供给在设备100中的可见光传感器118和红外传感器128、电子器件、处理器、存储器、和/或在输入/输出设备。控制面板110上可以包括一个或多个输入/输出部件。示例性的输入/输出部件可以包括用于最初地设置设备100和设备100的相关设置的输入、输出显示器130、扬声器、通过有线或无线通信而操作的通信设备、用于调整红外和/或可见光光学器件的焦点的控制功能、采集红外和/或可见光图像，等等。
在设备100的使用期间，设备100的处理器（例如，处理单元129）可以控制可见光传感器118和/或红外传感器128（当存在时）基于采集的目标而生成可见光和红外数据，以便生成可见光图像和/或测量温度。可见光数据可包括与所采集目标的不同部分相关的颜色亮度数据指示、和/或与所采集目标的不同部分相关的光强度。处理器可以通过测量在单个时间设备100的各可见光传感器元件的响应而生成可见光图像数据的“帧”。通过生成可见光数据的帧，处理器在一个给定的时间点采集目标的可见光图像。处理器也可重复地对设备100的各可见光传感器元件的响应进行测量，以便生成目标的动态图像（例如，视频表示）。在一些实例中，可见光传感器118可包括其自身的专用处理器、或者能够操控可见光传感器118的其它电路（例如，专用集成电路（ASIC））。在一些的这种实施例中，该专用处理器可以将可见光图像数据（例如，红绿蓝（RGB）图像数据）提供至所述处理器。在替代的实施例中，可将用于可见光传感器118的专用处理器合并入单个处理器（例如，处理单元129）中。
在可见光传感器118的各传感器元件充当传感器像素的情况下，处理器可以通过将各传感器元件的电响应转换成时分复用电信号而生成来自目标的可见光的二维图像或图像显示，可以对该时分复用电信号进行处理，以便于例如在显示器上的可视化和/或在存储器中的存储。
在各种实施例中，设备100的处理器（例如，处理单元129）可以执行另外的操作。例如，该处理器可以用于运行各种应用程序，包括但不限于：判定期望目标是否充分地充满测量区、计算输出信号（例如，来自红外传感器128）的平均值达一定时间段用以降低噪声测量对在测量区的测量状态的精度的影响，并且/或者执行将在下面所论述的未对准检测。
如上所述，在一些实例中，可以在设备100中对由设备100所收集的红外和可见光能量进行处理。在设备100的一些实施例中，可以在设备100中利用显示器局部性地显示经处理的可见光和/或红外数据。在这种实施例中，设备100的显示器可构造成显示可见光图像、非接触式温度、或两者。
此外或可替代地，设备100可以与远程监测设施（在一些情况下具体地与远程监测设施处的计算设备）进行双向通信。利用无线通信或者经过有线（例如，以太网）连接可以促成设备100与远程监测设施（例如，在远程监测设施处的计算设备）之间的通信。在一个实例中，与可见光传感器118和/或红外传感器128相关的电子器件（例如，处理单元129）联接到电馈入组件的连接器（例如，经由柔性电路）。该连接器可联接到从设备100向外延伸至远程监测站的电缆导体。因此，远程监测设施可以根据需要接收来自设备100的任何数据以便用于特定的应用，以及将任何信息传送至设备100。从远程监测设施被发送至设备100的命令可以利用用于将数据（例如，可见光数据、红外数据）从设备100传送至远程监测设施的相同的连接而进行发送。
例如，远程监测设施可以显示各自与设备100的一个测量区相对应的可见光图像和/或非接触式温度。这可以包括利用来自设备100的数据流来显示一个或多个静态图像和/或连续视频显示。这样，可以由在远离设备100位置的用户来监视目标的状态，例如实时地。此外，设备100与远程监测设施之间的双向通信可以允许在远程监测设施处的用户发送命令至设备100。可以从远程监测设施被发送至设备100的命令可以包括：与设备100的初始设置（包括传感器和设备100的部件的设置）、可见光和/或红外数据收集的开始/停止、和设备100的定位（例如，在设置期间的初始定位或随后的设置后定位）有关的命令。在一些情况下，代替利用控制面板110来设置设备100，可以将命令从远程监测设施发送至设备100，以便完成在设备100处利用控制面板110将以其他方式局部完成的相同的设置。
图1D示出了设备100的示例性替代构造的剖视图。在图1D中所使用的类似附图标记是用来表示前述的类似特征。如图中所示，图1D中的设备100的实施例不包括控制面板110、瞄准装置122、和目镜124。因此，这里所示出的设备100的实施例可最适当地用于远程监测和控制应用，例如连同如别处所述的远程监测站。
在图1D中所示设备100的实施例还包括在相对于图1C中所示位置为不同位置处的可见光传感器118。具体地，可见光传感器118沿光轴116被定位在设备100的后部106。因此，可见光分束器120不再存在。在一些实例中，如这里所示出的设备100的实施例无需包括红外传感器128，并且在这种实例中也可以将红外分束器120拆除。然而，在图示位置包括红外传感器128的情况下，红外分束器120对于从透镜组件108沿光轴116所引导的可见光能量可以是透明的，从而不影响以如图中所示方式而定位的可见光传感器118的功能。在一些情况下，可包括沿至少在可见光传感器118前面沿光轴的物理标线，以便将标线加在由传感器118所采集的可见光上。应当指出的是，在包括红外传感器128的情况下，如图1D中所示的传感器118和128的定位可以是可互换的，以便红外传感器128沿光轴116而定位（例如，在后部106）并且可见光传感器118从光轴116偏移。
在设备100的环境内部的状态（例如振动）可以导致设备100周期性地变得未对准，例如其中设备100的测量区不再位于期望目标上的情况。在设备100位于难以达到的位置的情况下，使用瞄准装置122对设备100的定期手动检视以确保与目标的正确对准会是低效率且不现实的。此外，在许多的这种情况下，一旦进行下一次定期手动检视设备100的未对准可以导致错误的读数被设备100输出，从而导致安全危害是唯一可知的，因此是可纠正的。由于这种原因，这里所描述的设备100可以利用未对准分析特征来检测何时设备100的测量区已变得相对于期望目标为未对准。
图2中示出了图示说明未对准分析的一个实例的示意图。图像200示出了正确对准的检测器，而图像202示出了未对准检测器。正如从图像200的正确对准的检测器中可以看出，检测器的由视觉指示物206（例如，标线）所表示的测量区204对准在期望目标208（例如，期望目标的部分）上。然而，在未对准的检测器图像202中，检测器的再次由视觉指示物206（例如，标线）所表示的测量区204不再对准在期望目标208上。这种未对准可以在安装检测器之后同时检测器正在任何多种环境中操作时发生。
未对准分析特征可以发挥检测何时检测器的测量区204不再对准在期望目标208或期望目标的特定部分上的作用。在未对准分析的一个实例中，当设备被首先安装在现场并且正确地对准在期望目标上（例如，利用该设备的标线或其它视觉指示物，在安装位置手动地控制或者经过监测站远程地控制）时，可以由该设备采集可见光图像（例如图像200）。利用局部地位于检测器处的目镜或者利用从检测器被传送至在远程监测设施处的计算设备的可见光图像数据可以验证安装时的正确对准，其中这种被传送的图像数据与当存在时经过目镜以其它方式可看见的图像相对应。可以将这个初始可见光图像保存到例如设备的存储器中并且/或者传送至在远程监测站处的计算设备并保存到该计算设备中的存储器。可以将初始可见光图像加以保存，从而具有被包括在图像上的视觉指示物206，例如标线。例如，被保存的初始可见光图像可以具有标线、或者由于存在于如前所述的设备100中的物理标线或其它视觉指示物206而存在的其它合适指示物。在另一种情况下，被保存的初始可见光图像可以具有标线或者通过计算机生成而叠加在上面的其它视觉指示物206（例如，通过记录（register）与可见光图像相对应的适当数量的像素从而重新生成在保存图像中的视觉指示物，例如标线）。在这种情况下，标线或其它视觉指示物206然后无需物理地存在于设备100中，但相反可被模拟在保存的图像中。在各种实例中，视觉指示物206是并不是期望目标自身的一部分的参照物，反而是可生成用于未对准分析特征的目的的物理结构（例如，由设备100、由在远程位置运行的软件等生成）。
包含视觉指示物（例如，图像200）的保存的初始可见光图像可以用于未对准分析，作为用于在其它时间测量区204相对于目标208（或者一部分的目标）的测量位移的参照物。为了确定测量区204相对于目标208的任何位移的程度，在采集初始可见光图像（例如图像200）之后所述设备可以采集可见光图像（例如图像202）。可以将后继的可见光图像（例如，图像202）保存到例如设备的存储器中/或传送至在远程监测站处的计算设备并保存到该计算设备中的存储器。也可以将这个后继的可见光图像加以保存从而具有在图像中所包含的视觉指示物206（例如标线）。然后，未对准分析可以对在初始可见光图像（例如，图像200）与后继可见光图像（例如，图像202）之间视觉指示物206的位置变化进行比较从而确定该设备的测量区204在该时间段内相对于目标208已变为未对准的程度。
在一个实例中，未对准分析可以通过计算在各图像之间视觉指示物206的水平和/或竖直位置的变化而对在初始可见光图像与后继可见光图像之间视觉指示物206的位置变化进行比较。例如，初始可见光图像可以具有视觉指示物206的相关的水平（例如，x-坐标）位置和/或竖直（例如，y-坐标）位置。视觉指示物的这种水平或竖直位置可以属于该视觉指示物的特定点，例如视觉指示物的中心点。如前所述，在一些应用中，所述设备的测量区可不具有明确划定的边界，但相反可以是难以辨别或模糊的。为了更准确地确定所述设备的测量区的移动，使用测量区的中心点会是有利的，从而避免包含由难以辨别测量区边界所造成的任何不一致性。类似地，后继的可见光图像可以具有视觉指示物的相关的水平位置和/或竖直位置，例如与使用于初始可见光图像相同的视觉指示物的中心点。可以测量初始图像和后继图像的测量区相对于任何物体（例如，目标）的水平和/或竖直位置，在大多数情况下相对于该物体测量位置的该物体对于初始图像和后继图像两者将是相同的。然后，可以确定所述设备的测量区已变得未对准的程度，例如通过确定在初始图像与后继图像中测量区的水平位置之间的差异和/或在初始图像与后继图像中测量区的竖直位置之间的差异。
在一些实施例中，未对准分析是由设备100的处理器而执行。在其它实施例中，未对准分析是由在所述设备外部的计算机而执行，例如在远程监测设施处的计算机或者在所述设备与远程监测设施（例如，远程计算机、基于云的计算机等）之间网络化的计算机。未对准分析可以包含用于特征提取、特征描述、和摄像头定位的算法或程序。用于特征提取的程序在第一可见光图像中发现在相同区域的其它图像中有可能容易地辨别的点。在本发明各实施例中可用于特征提取程序的已知算法的例子包括例如：CenSurE（中心环绕极值）、代数模型、和Harris角点检测器。用于特征描述的程序信息获取在特征提取过程中所发现的点并且给它们提供在该相同点的所有图像中有可能是相似的描述。在本发明各实施例中可用于特征描述程序的已知算法的例子包括例如：CHoG（压缩的梯度直方图）、全球语境描述符（Global Context Descriptors）、和基于FFT/DCT的描述符。在与期望摄像头位置的比较中，摄像头定位或姿态估计程序信息利用在多个图像中所确认的一组特征来确定当前摄像头位置。可用于在本发明各实施例中的摄像头定位或姿态估计程序的已知算法的例子包括例如：取景器对准（Viewfinder Alignment）、5-点算法、区间分析（Interval Analysis）、和基本矩阵匹配（Fundamental Matrix Matching）。
在一些实施例中，未对准分析可以在所述设备正在操作时连续地执行。在其它实施例中，当在所述设备处接收输入命令（例如，来自远程监测设施）时可以执行未对准分析以验证所述设备的对准。在其它实施例中，未对准分析可以被编程以所设定的时间间隔（例如，每30秒等）自动地执行。在这种实施例中，所述设备可采集新的可见光图像并且保存具有所包含视觉指示物的该新图像，以便以各时间间隔表示测量区的当前位置。然后，未对准分析可以对在初始可见光图像（例如，当在安装期间使设备对准时获得）与以该间隔所获得的后继可见光图像之间视觉指示物206的位置变化进行比较，以便确定所述设备的测量区204已相对于目标208变得未对准的程度。然后，对于在初始图像之后所采集的任意数量的可见光图像，可以以期望的间隔重复这种过程。
尽管到目前为止所提供的示例性描述是针对视觉指示物206在未对准分析中的使用，但其它实施例在未对准分析中无需使用视觉指示物206。相反，未对准分析可仅利用目标208来检测测量区204的未对准（即，不参照视觉指示物206）。在一个这种实例中，将在目标208上的特定位置用作未对准分析中的参照物（例如，代替所生成的视觉指示物）。在一个实例中，用作参照物的在目标上的特定位置可以是存在于所采集第一可见光图像200中的目标的物理结构的特征集。然后，可以在第二后继可见光图像202中采集目标的这个相同的特征集。在此实例中，类似于使用视觉指示物的前述实例，目标208上的特定位置（例如，特征集）可用在未对准分析中，以对在初始可见光图像200与后继可见光图像202之间的目标208上的那个特定位置的位置变化进行比较。这可以例如通过计算在各图像之间在目标208上的特定位置的水平和/或竖直位置（例如，特征集）的变化而完成。
除本文中所提供的实例外或者作为其替代，在未对准分析中可使用各种其它工具来确定所述设备的测量区204已变得相对于目标208未对准的程度。一个实例包括仅将热图像（例如，由红外传感器128采集的）用作第一图像和后继图像两者，并且对这种热图像执行所描述的未对准分析。另一个实例包括采用其中将红外图像与可见光图像相结合地使用的重摄概念，在一些情况下连同多个成像设备而使用。在以下的公开中描述了这种重摄的实施例，各公开的全部内容以参考的方式并入本文中：名称为“Infrared and Visible-LightImage Registration”的美国专利申请第12/196,433号、名称为“Thermal Imaging Camerafor Infrared Rephotography”的美国专利申请第13/331,633号、名称为“ThermalImaging Camera for Infrared Rephotography”的美国专利申请第13/331,644号、和名称为“Thermal Imaging Camera for Infrared Rephotography”的美国专利申请第13/336,607号。
一旦所述设备的测量区已变得相对于目标未对准的程度被确定，那么未对准分析可以提供所述设备的测量区已相对于目标变得未对准的指示。在一些情况下，当所述设备的测量区位置已在任何一个方向上发生任何变化时，未对准指示可以是输出，例如在远程监测站和/或设备100处（例如，在其控制面板处）的输出。在其它情况下，未对准指示可以是当所述设备的测量区位置变化超过预定阈值量时的输出。这种预定的阈值量可以基于设备100的应用而变化。例如，在正在被成像的目标是相对较危险物体的情况下，与更无害的物体相比预定的阈值可以是相对较低。
在一些实施例中，未对准分析可确定没有相对于目标发生测量区的未对准、或者未对准低于预定的阈值。在这种实施例中，未对准分析可以输出确认所述设备的测量区与期望目标的正确对准和/或反映没有现在无需将所述设备重新定位的操作的指示。
当已确定所述设备的未对准时，可以将所述设备重新定位从而与期望的目标或该目标的部分正确地对准。图3是说明用于纠正所述设备的对准的示例性方法300的流程图。以如前所述的方式确定未对准（302）从而确定所述设备的测量区已变得相对于目标未对准的程度。具体地，未对准的程度可以是测量区位置变化的特定的数值测量以及其中已发生未对准的方向。
当检测器的测量区相对于目标的未对准已发生时，可以纠正这种未对准（304）从而使测量区与期望目标重新对准。如上所述，在一些实例中只有当所确定的未对准程度超过预定的阈值时可以纠正未对准，但在其它实例中当任何程度的未对准已发生时可以纠正未对准。
可以以若干方式来纠正所述设备的测量区相对于目标的未对准。在一个实例中，可以手动地使所述设备重新对准（306）。当接收到由未对准分析所产生的未对准指示时，可以在所述设备处局部地完成所述设备的手动重新对准。例如，可以使用所述设备的目镜和标线来完成手动重新对准，从而将所述设备的测量区重新定位到期望目标上。一旦所述设备已被正确地重新对准到目标上，可以将所述设备在这种位置固定就位，以便使测量区指向期望的位置。
在另一个实例中，可以远程对设备重新对准（308）。例如，可以将移动命令从远程监测站发送至所述设备，以便将所述设备重新定位从而使其与目标正确地对准。当接收到未对准的指示时，可以由用户发送这种移动命令。例如，在远程监测站的用户可以利用从所述设备所接收的显示测量区相对于目标的实时位置的实况视频流而将特定的移动命令提供给所述设备。一旦测量区的未对准的具体程度和方向已被确定，也可将移动命令自动地（例如，没有用户输入）发送至所述设备。例如，可以利用由对准分析所获得的测量区的位置变化的数值测量连同其中未对准已发生的方向，应用算法来确定发送至所述设备的具体移动命令。被传送至所述设备的移动命令可以包括特定的平移和/或倾斜命令，例如被传送至联接到该设备的电动附件（例如，联接到该设备的安装部件）。
在另一个实例中，可以使所述设备重新对准以便跟踪目标（310）。例如，检测器可以采集并存储如上所述的多个可见光图像并且确定所述设备的未对准程度。然而，在一些情况下，期望的目标可以是移动的目标。因此，这些可见光图像也可以用于跟踪目标的位置。例如，可以对第一可见光图像和第二可见光图像进行比较，以确定在这两个图像之间期望目标的位置变化。然后，可以根据目标和测量区的位置变化，利用目标的位置变化程度连同在相同图像中测量区的位置变化来重新定位所述设备。在一些情况下，这还可以包括利用在其中采集两个图像的各个时间之间的经过时间连同所确定的目标位置变化从而确定使目标移动的速率。在一个实例中，目标的位置变化可以说明何时确定测量区的未对准的程度，从而提供对由于除移动目标以外的原因所造成未对准的更准确指示。可以重复此过程以便跟踪目标的移动（例如，在装配线上）并且当目标移动时连续地使所述设备与目标重新对准。这样，可以以不仅补偿目标的移动而且补偿由设备自身的变化位置所造成的任何未对准（例如，独立于目标的移动）的方式，使移动目标与所述设备的测量区对准。
因此，结合方法300所使用未对准分析可以确保所述设备，具体地所述设备的测量区大体上始终集中在期望的目标上。因此，在目标附近存在或者与目标相互作用的那些可以确定所述设备提供对于目标自身为特异性并且由于未对准对于一些其它位置并非特异性的信息。
已描述了示例性的非接触式温度计及相关技术。在本公开中所描述的技术也可具体化为或者编码于计算机可读介质，例如含有指令的非暂时性计算机可读存储介质。嵌入或编码于计算机可读存储介质中的指令可导致可编程处理器、或其它处理器执行所述方法，例如当执行指令时。计算机可读存储介质可包括随机存取存储器（RAM）、只读存储器（ROM）、硬磁盘、光学介质、或其它计算机可读介质。
例如，包括这种计算机可读介质的外部计算机可以接收来自设备或来自存储器的相应的可见光和/或非接触式温度，并且利用如本文中所描述的图像来执行未对准分析和/或未对准纠正过程。在一些实施例中，所述技术的各种部分可以具体化为多个部件。例如，该设备可以局部地处理图像数据并且将经处理图像数据传送至外部计算设备，以便判定测量区的未对准并且/或者纠正任何的这种未对准。
在其它实例中，本发明的各实施例可以具体化为显示系统。该显示系统可以构造成接收可见光和温度数据并且执行例如本文中所描述的过程。示例性的显示系统可以包括用于执行这种处理的一个或多个处理器、显示器和用户界面。可以将显示系统并入能够接收并处理图像数据的任何适当设备或系统。
上面已描述了各种实施例。这种例子是非限制性的并且不以任何方式限定或限制本发明的范围。相反，这些和其它实例是在以上示例性实施例的范围内。

Claims (15)

1.一种用于确定成像设备的未对准的方法，所述方法包括：
在第一时间利用所述成像设备采集第一可见光图像；
生成代表测量区的视觉指示物到所述第一可见光图像上；
在第二时间利用所述成像设备采集第二可见光图像，所述第二时间是在所述第一时间之后；
生成代表所述测量区的所述视觉指示物到所述第二可见光图像上；
对在所述第一可见光图像中所述成像设备的测量区的位置与在所述第二可见光图像中所述成像设备的所述测量区的位置进行比较；以及
利用在所述第一可见光图像中所述成像设备的所述测量区的所述位置与在所述第二可见光图像中所述成像设备的所述测量区的所述位置的比较的结果，改变所述成像设备的位置，其中，所述比较的结果是所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的数值测量，并且其中，所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量是相对于所述视觉指示物。
2.如权利要求1所述的方法，还包括：
当在所述第一可见光图像中所述成像设备的所述测量区的所述位置不同于在所述第二可见光图像中所述成像设备的所述测量区的所述位置时，生成未对准指示。
3.如权利要求2所述的方法，其中，
当在所述第一可见光图像中所述成像设备的所述测量区的所述位置不同于在所述第二可见光图像中所述成像设备的所述测量区的所述位置达到超过预定阈值的程度时，生成所述未对准指示。
4.如权利要求1所述的方法，其中，通过记录代表叠加的视觉指示物的像素来生成代表所述测量区的所述视觉指示物到所述第一可见光图像和所述第二可见光图像上。
5.如权利要求1所述的方法，还包括：
在采集所述第二可见光图像之后的某一时间利用所述成像设备采集第三可见光图像；和
对在所述第一可见光图像中所述成像设备的所述测量区的位置与在所述第三可见光图像中所述成像设备的所述测量区的位置进行比较。
6.如权利要求1所述的方法，其中，利用在远离所述成像设备的位置的用户输入而改变所述成像设备的所述位置，并且其中所述用户输入是基于所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量。
7.如权利要求1所述的方法，其中，在所述改变的时候在没有用户输入的情况下自动地改变所述成像设备的所述位置，并且其中在所述成像设备的所述位置中自动变化是基于所述成像设备的所述测量区在所述第一与第二可见光图像之间的位置变化的所述数值测量。
8.如权利要求1所述的方法，其中，使所述成像设备指向运动中的目标，所述目标被采集在所述第一和第二可见光图像中，并且还包括：
确定在所述第一时间与第二时间之间的经过时间；
对在所述第一可见光图像中所述目标的位置与在所述第二可见光图像中所述目标的位置进行比较；
基于所述比较而确定所述目标位置变化的数值测量；
利用所述目标位置变化的数值表示和所述经过的时间来确定所述目标的移动速率，其中所述成像设备在所述第一和第二可见光图像之间的所述测量区的位置变化的所述数值测量补偿所述目标的移动速率；和
当所述测量区的位置变化的所述数值测量超过预定的阈值时，生成未对准指示。
9.一种包括指令的非暂时性计算机可读介质，所述指令是用于导致可编程处理器以：
接收与由成像设备所采集的第一可见光图像相应的第一可见光图像数据；
生成在代表测量区的所述第一可见光图像数据中的视觉指示物，其中通过导致所述处理器记录与所述第一可见光图像数据相对应的若干特定像素而生成所述视觉指示物；
将具有所生成视觉指示物的所述第一可见光图像数据保存到存储器中；
在采集所述第一可见光图像之后的某一时间，接收与由所述成像设备采集的第二可见光图像相对应的第二可见光图像数据；
生成在代表所述测量区的所述第二可见光图像数据中的所述视觉指示物，其中通过导致所述处理器记录与所述第二可见光图像数据相对应的若干特定像素而生成所述视觉指示物，并且其中，与所述第一和第二可见光图像数据相对应的所述特定像素是相同的；
将具有所生成视觉指示物的所述第二可见光图像数据保存到存储器中；以及
对所述成像设备在所述第一可见光图像数据中的测量区的位置与所述成像设备在所述第二可见光图像数据中的所述测量区的位置进行比较。
10.如权利要求9所述的介质，其中，所述指令还导致所述可编程处理器以：
当在所述第一可见光图像中所述视觉指示物的所述位置不同于在所述第二可见光图像中所述视觉指示物的所述位置达到超过预定阈值的程度时，生成未对准指示。
11.如权利要求10所述的介质，其中，所述指令还导致所述可编程处理器以：
输出与所述第一可见光图像与第二可见光图像之间的所述视觉指示物的位置变化的数值指示相对应的位置变化信号。
12.一种用于确定成像设备的未对准的系统，所述系统包括：
具有可见光传感器和红外传感器的所述成像设备，所述成像设备构造成将从目标中所发出的可见光能量集中到所述可见光传感器上并且将从所述目标中所发出的红外能量集中到所述红外传感器上；
与所述成像设备连通的远程监测站；和
与所述成像设备和所述远程监测站连通的计算设备，所述计算设备包括至少一个处理器，并且所述计算设备构造成：
接收由所述可见光图像传感器所生成的第一可见光图像数据；
接收由所述可见光图像传感器所生成的第二可见光图像数据，所述第二可见光图像数据是在采集所述第一可见光图像数据之后的某一时间由所述成像设备所采集；
对所述第一可见光图像数据与所述第二可见光图像数据进行比较，从而判定是否已发生所述成像设备的位置变化，其中，对所述第一可见光图像数据与所述第二可见光图像数据的比较包括对所述成像设备在所述第一可见光图像中的测量区的位置与所述成像设备在所述第二可见光图像中的所述测量区的位置进行比较；和
在所述成像设备的位置变化已发生的情况下，根据所述比较而生成未对准指示。
13.如权利要求12所述的系统，其中，对所述成像设备在所述第一可见光图像中的所述测量区的所述位置与所述成像设备在所述第二可见光图像中的所述测量区的所述位置进行比较包括对生成到所述第一可见光图像上的代表所述测量区的视觉指示物与生成到所述第二可见光图像上的代表所述测量区的视觉指示物进行比较。
14.如权利要求12所述的系统，其中，所述计算设备还构造成：
计算所述成像设备在所述第一可见光图像与第二可见光图像之间的位置变化的数值测量；和
将命令传送至所述成像设备，所述命令包含引导所述成像设备根据所计算的数值测量来调整所述成像设备的定位的指令。
15.如权利要求14所述的系统，其中，在没有用户输入的情况下自动地对所述成像设备的定位进行调整，并且其中在所述成像设备的定位的所述自动调整是基于所述成像设备在所述第一可见光图像与第二可见光图像之间的位置变化的所述数值测量。
CN201710867756.XA 2016-09-22 2017-09-22 带对准分析的成像设备 Active CN107864375B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/272906 2016-09-22
US15/272,906 US9924160B1 (en) 2016-09-22 2016-09-22 Imaging device with alignment analysis

Publications (2)

Publication Number Publication Date
CN107864375A CN107864375A (zh) 2018-03-30
CN107864375B true CN107864375B (zh) 2019-11-26

Family

ID=60021884

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710867756.XA Active CN107864375B (zh) 2016-09-22 2017-09-22 带对准分析的成像设备

Country Status (4)

Country Link
US (2) US9924160B1 (zh)
EP (1) EP3300351B1 (zh)
JP (2) JP6618965B2 (zh)
CN (1) CN107864375B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE543250C2 (en) 2017-09-20 2020-11-03 Firefly Ab Flame detecting arrangement and method for assuring correct field of view
AU2019248023B2 (en) * 2018-04-05 2023-03-16 Efficiency Matrix Pty Ltd Computer implemented structural thermal audit systems and methods
US11641441B2 (en) * 2018-05-25 2023-05-02 Fluke Corporation Optical gas imaging systems and method compatible with uncooled thermal imaging cameras
SE545008C2 (en) * 2019-03-20 2023-02-28 Firefly Ab Flame detecting arrangement with abnormal movement detection
CN112019796A (zh) * 2019-05-30 2020-12-01 海南核电有限公司 一种顶盖导向柱位置识别的电子分划板及分划方法
CN112468714B (zh) * 2019-09-09 2022-06-28 北京外号信息技术有限公司 用于确定光通信装置的成像区域的方法和电子设备
KR102369504B1 (ko) * 2020-06-23 2022-03-04 인천대학교 산학협력단 골키퍼용 순발력 훈련 및 측정 장치
CN113628255B (zh) * 2021-07-28 2024-03-12 武汉三江中电科技有限责任公司 一种三光融合无损检测图像配准算法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07243916A (ja) * 1994-03-04 1995-09-19 Minolta Co Ltd 放射温度計
JP2000258584A (ja) * 1999-03-12 2000-09-22 Toshiba Corp 現場点検装置
US6667761B1 (en) * 2000-04-14 2003-12-23 Imaging & Sensing Technology Corporation Instrument visualization system
ATE521276T1 (de) * 2002-02-11 2011-09-15 Amo Mfg Usa Llc Bestimmung von relativen positions- und drehversätzen
JP2004094050A (ja) * 2002-09-02 2004-03-25 Usk:Kk 光学部を兼用化した監視カメラ装置
JP3929384B2 (ja) * 2002-10-23 2007-06-13 オリンパス株式会社 ファインダ、撮影装置、マーカ提示部材、及び、キャリブレーションのための撮影方法
JP2008300795A (ja) * 2007-06-04 2008-12-11 Toyota Motor Corp 熱電材料の温度測定装置
US7924312B2 (en) 2008-08-22 2011-04-12 Fluke Corporation Infrared and visible-light image registration
JP2011191170A (ja) * 2010-03-15 2011-09-29 Omron Corp 画像処理装置
US8643069B2 (en) * 2011-07-12 2014-02-04 United Microelectronics Corp. Semiconductor device having metal gate and manufacturing method thereof
US20130155249A1 (en) 2011-12-20 2013-06-20 Fluke Corporation Thermal imaging camera for infrared rephotography
US20130155248A1 (en) 2011-12-20 2013-06-20 Fluke Corporation Thermal imaging camera for infrared rephotography
US20130162835A1 (en) 2011-12-23 2013-06-27 Fluke Corporation Thermal imaging camera for infrared rephotography
US20130335579A1 (en) 2012-06-15 2013-12-19 Palo Alto Research Center Incorporated Detection of camera misalignment
US9060164B2 (en) 2012-09-12 2015-06-16 Xerox Corporation Intelligent use of scene and test pattern analyses for traffic camera diagnostics
KR102287751B1 (ko) * 2014-09-25 2021-08-09 삼성전자 주식회사 전자 장치의 홍채 인식 방법 및 장치
JP6519805B2 (ja) * 2016-05-13 2019-05-29 パナソニックＩｐマネジメント株式会社 カメラシステム及びカメラ装置

Also Published As

Publication number Publication date
JP6618965B2 (ja) 2019-12-11
JP2020053976A (ja) 2020-04-02
US10397565B2 (en) 2019-08-27
US9924160B1 (en) 2018-03-20
CN107864375A (zh) 2018-03-30
JP2018050298A (ja) 2018-03-29
JP6992035B2 (ja) 2022-01-13
EP3300351A1 (en) 2018-03-28
EP3300351B1 (en) 2023-08-02
US20180084246A1 (en) 2018-03-22
US20180213221A1 (en) 2018-07-26

Similar Documents

Publication Publication Date Title
CN107864375B (zh) 带对准分析的成像设备
JP7157054B2 (ja) 整合画像及びｌｉｄａｒ情報に基づいた車両ナビゲーション
US8374438B1 (en) Visual template-based thermal inspection system
CN104272717B (zh) 用于执行投影图像到检测到的红外线(ir)辐射信息的对准的方法和系统
CN101111748B (zh) 具有激光指示器的可见光和ir组合的图像照相机
US8896701B2 (en) Infrared concealed object detection enhanced with closed-loop control of illumination by.mmw energy
EP2608531A2 (en) Thermal imaging camera for infrared rephotography
US20120307046A1 (en) Methods and apparatus for thermographic measurements
EP2741491A2 (en) Camera and method for thermal image noise reduction using post processing techniques
CN103179354A (zh) 用于红外重摄的热成像相机
JP5749319B2 (ja) センサの位置合わせ用携帯端末機
US20190154818A1 (en) Method for Operating a Laser Distance Measuring Device
US10298858B2 (en) Methods to combine radiation-based temperature sensor and inertial sensor and/or camera output in a handheld/mobile device
CN112581545A (zh) 多模态热源识别及三维空间定位系统、方法及存储介质
KR20170100892A (ko) 위치 추적 장치
KR102347226B1 (ko) 융합 센서 데이터 시각화 장치 및 방법
CN207475756U (zh) 机器人红外立体视觉系统
EP2154499A1 (en) Video thermometry
CA2712202A1 (en) Video scanner system and method
CN205384519U (zh) 一种红外热成像搜索跟踪瞄准的装置
Müller Close range 3D thermography: real-time reconstruction of high fidelity 3D thermograms
US11539889B2 (en) Method for the noise optimization of a camera, in particular a handheld thermal imaging camera
Piszczek et al. Measurement stand for Teraeye inspection
Abbeloos et al. Exploring the potential of combining time of flight and thermal infrared cameras for person detection
KR20180092089A (ko) 적외선 모델러 검증 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant