CN108449547B - 控制夜视系统的方法、夜视系统、存储介质及处理器 - Google Patents

控制夜视系统的方法、夜视系统、存储介质及处理器 Download PDF

Info

Publication number
CN108449547B
CN108449547B CN201810103622.5A CN201810103622A CN108449547B CN 108449547 B CN108449547 B CN 108449547B CN 201810103622 A CN201810103622 A CN 201810103622A CN 108449547 B CN108449547 B CN 108449547B
Authority
CN
China
Prior art keywords
acquisition device
image acquisition
laser
image
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810103622.5A
Other languages
English (en)
Other versions
CN108449547A (zh
Inventor
蒋涛
左昉
王新韬
李泽一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING JIGUANG TONGDA TECHNOLOGY Co.,Ltd.
Original Assignee
蒋涛
左昉
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 蒋涛, 左昉 filed Critical 蒋涛
Priority to CN201810103622.5A priority Critical patent/CN108449547B/zh
Publication of CN108449547A publication Critical patent/CN108449547A/zh
Application granted granted Critical
Publication of CN108449547B publication Critical patent/CN108449547B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/09—Beam shaping, e.g. changing the cross-sectional area, not otherwise provided for
    • G02B27/0938—Using specific optical elements
    • G02B27/095—Refractive optical elements
    • G02B27/0955—Lenses
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Laser Beam Processing (AREA)

Abstract

本发明公开了一种控制夜视系统的方法、夜视系统、存储介质及处理器。其中，该方法包括：确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。本发明解决了现有技术中的夜视系统无法即时调节激光镜头角度，导致激光照明的效率低的技术问题。

Description

控制夜视系统的方法、夜视系统、存储介质及处理器
技术领域
本发明涉及夜视技术领域，具体而言，涉及一种控制夜视系统的方法、夜视系统、存储介质及处理器。
背景技术
夜视技术是指借助于光电成象器件实现夜间观察的一种光电技术。主要分为主动式红外夜视技术和被动式红外夜视技术。其中，主动式红外，是指对需要观察的区域进行补红外光的处理，通过被观察物体反射的红外光来成像。而被动式红外主要指长波红外通过感知观察物体发出的红外线来成像。红外夜视技术在森林防火、铁路监控、警用取证等方面发挥重要作用。
但是，在传统的激光夜视设备中，由于两个光轴之间的有距离，仍然无法将激光的光斑照射到低照度摄像机视场的正中心处从而达到满意的补光效果，并且，现有的光轴距离对激光照明效果的影响随着夜视距离的变远、视场角变小而越发明显，激光发射设备的照射角度如果无法做出即时且精确的调整，很难达到低照度摄像机对于光源的要求，导致成像不清晰。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种控制夜视系统的方法、夜视系统、存储介质及处理器，以至少解决现有技术中的夜视系统无法即时调节激光镜头角度，导致激光照明的效率低的技术问题。
根据本发明实施例的一个方面，提供了一种控制夜视系统的方法，包括：确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
进一步地，若上述判断结果为是，则控制上述激光设备调整激光光斑至预设大小。
进一步地，在判断激光镜头的当前出光角度是否为目标出光角度之前，上述方法还包括：获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和上述激光镜头的光轴之间的第二距离；根据上述第一距离和上述第二距离确定上述目标出光角度，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光。
进一步地，在获取上述第一距离以及上述第二距离之前，上述方法还包括：检测上述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行；若检测结果为否，则调整上述第一图像采集装置的光轴与第二图像采集装置的光轴平行；若上述检测结果为是，则获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据。
进一步地，在获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据之后，上述方法还包括：判断上述第一图像特征数据与上述第二图像特征数据是否匹配；若上述第一图像特征数据与上述第二图像特征数据匹配，则执行获取上述第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
进一步地，在控制上述激光镜头调整至上述目标出光角度对应的位置之后，上述方法还包括：获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据；采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；输出上述第三图像数据。
进一步地，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
根据本发明实施例的另一方面，还提供了一种夜视系统，包括：激光设备，上述激光设备包括激光镜头；控制器，与上述激光设备连接，用于确定激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为是，则控制上述激光设备调整激光光斑至预设大小；若上述判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
进一步地，上述激光设备还包括：第一调节装置，与上述控制器连接，上述激光设备的激光镜头固定设置在上述第一调节装置上，上述第一调节装置用于在上述控制器的控制下，调整上述激光镜头至与上述目标出光角度对应的位置。
进一步地，上述激光设备还包括：激光器，用于通过转接光纤引出激光；激光驱动器，与上述控制器和上述激光器连接，用于在上述控制器的控制下，调整上述激光器发射激光的功率。
进一步地，上述夜视系统还包括：第一图像采集装置，与上述控制器连接，用于拍摄目标物体得到第一图像数据，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光；第二图像采集装置，与上述控制器连接，用于拍摄上述目标物体得到第二图像数据；其中，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
进一步地，上述第二图像采集装置包括：第二调节装置，与上述控制器连接，用于依据上述控制器的控制，调整上述第二图像采集装置中镜头的位置。
进一步地，上述夜视系统还包括：光敏控制器，用于获取上述目标物体所在目标环境的光线强度值，并根据上述光线强度值控制上述激光设备开启或关闭。
进一步地，上述夜视系统还包括：信号处理电路，分别与上述第一图像采集装置、上述第二图像采集装置、上述控制器连接，用于在上述控制器的控制下，获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据，并采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；显示设备，与上述信号处理电路连接，用于显示上述第三图像数据。
根据本发明实施例的另一方面，还提供了一种存储介质，上述存储介质包括存储的程序，其中，上述程序执行任意一项上述的控制夜视系统的方法。
根据本发明实施例的另一方面，还提供了一种处理器，上述处理器用于运行程序，其中，上述程序运行时执行任意一项上述的控制夜视系统的方法。
在本发明实施例中，通过确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置，达到了通过控制激光镜头转动，以将激光光斑照射到低照度摄像机视场的正中心的目的，从而实现了提高激光照明的效率和补光率的技术效果，进而解决了现有技术中的夜视系统无法即时调节激光镜头角度，导致激光照明的效率低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的一种控制夜视系统的方法的步骤流程图；
图2是根据本发明实施例的一种可选的控制夜视系统的方法的测距原理示意图；
图3是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图；
图4是根据本发明实施例的一种可选的调整激光镜头角度的原理示意图；
图5是根据本发明实施例的一种可选的调整激光光斑的原理示意图；
图6是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图；
图7是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图；
图8是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图；
图9是根据本发明实施例的一种可选的塔式分解算法的原理示意图；
图10是根据本发明实施例的一种可选的图像融合算法的原理示意图；
图11是根据本发明实施例的一种可选的奇偶分割融合算法的原理示意图；
图12是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图；
图13是根据本发明实施例的一种夜视系统的结构示意图；
图14是根据本发明实施例的一种可选的夜视系统的结构示意图；以及
图15是根据本发明实施例的一种控制夜视系统的装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先，为方便理解本发明实施例，下面将对本发明中所涉及的部分术语或名词进行解释说明：
数字信号处理(Digital Signal Processing，DSP)：是指将信号以数字方式表示并处理的理论和技术。
实施例1
根据本发明实施例，提供了一种控制夜视系统的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种控制夜视系统的方法的步骤流程图，如图1所示，该方法包括如下步骤：
步骤S102，确定激光设备中激光镜头的当前出光角度；
步骤S104，判断上述激光镜头的当前出光角度是否为目标出光角度；
步骤S106，若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
在本发明实施例中，通过确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置，达到了通过控制激光镜头转动，以将激光光斑照射到低照度摄像机视场的正中心的目的，从而实现了提高激光照明的效率和补光率的技术效果，进而解决了现有技术中的夜视系统无法即时调节激光镜头角度，导致激光照明的效率低的技术问题。
需要明确的是，可选的，上述当前出光角度和目标出光角度可以为0-45°之间的任意角度。
在一种可选的实施例中，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，本申请中的第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
可选的，在本申请提供的夜视系统中，上述激光设备的激光镜头固定设置在激光角度微调装置上，上述激光角度微调装置可以与控制器连接，用于在上述控制器的控制下，调整上述激光镜头至与上述目标出光角度对应的位置，其中，上述激光角度微调装置可以调整激光镜头的水平角度和垂直角度。
作为一种可选的实施例，上述第一图像采集装置可以为低照度摄像机，上述第一图像采集装置可以但不限于包括：可见光长焦镜头；上述低照度摄像机可以用于感知环境的可见光的低照度信息，并可以在控制器的控制下给DSP高速融合电路提供可见光波段的图像，上述低照度摄像机上的可见光长焦镜头的变倍聚焦位置受控制器的控制。
作为另一种可选的实施例，上述第二图像采集装置可以为红外摄像机。上述红外摄像机可以用于感知环境的温度场，在不可见光波段(例如：远红外波段)成像，进而上述红外摄像机在控制器的控制下可以给DSP高速融合电路提供远红外波段的图像。上述第二图像采集装置还包括红外变焦镜头，其中，红外变焦镜头的变倍和聚焦位置受控制器的控制。
作为一种可选的实施例，当需要根据融合模式进行夜视时，夜视系统中的控制器可以检测预先设置的可见光摄像机的光轴和红外摄像机的光轴是否平行，并在可见光摄像机的光轴和红外摄像机的光轴平行时，控制器对当前时刻的红外角度微调装置水平角度以及俯仰角度进行采样测量。根据对比采样值和期望值，控制器控制红外角度微调装置中的步进电机转动，使红外摄像机到达指定位置。
在上述红外摄像机到达指定位置后，获取上述红外摄像机采集的第一图像特征数据和上述低照度摄像机采集的第二图像特征数据，并选择在第一图像特征数据和第二图像特征数据中均存在的目标物体，并在第一图像特征数据中将该目标物体标出。此时在激光成像图像中通过边缘检测以及特征点匹配找到对应的目标物体。如图2所示，通过能量重心法分别计算出该目标物体在图像中的能量重心分别为Pr和Pl，其坐标为xr和x1。
在一种可选的实施例中，如图3所示，在判断激光镜头的当前出光角度是否为目标出光角度之前，上述方法还包括方法步骤：
步骤S202，获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和上述激光镜头的光轴之间的第二距离；
步骤S204，根据上述第一距离和上述第二距离确定上述目标出光角度，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光。
在一种可选的实施例中，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
仍如图2所示，其中，d为第一距离；f1为第一图像采集装置(低照度摄像机)的镜头的焦距数，f2为第二图像采集装置(红外摄像机)的镜头的焦距数；k为第一图像采集装置的成像平面与第二图像采集装置的成像平面之间的间距；b为第一图像采集装置的光轴和激光镜头的光轴之间的第二距离；xr为目标物体的能量重心在第一图像采集装置的成像平面的成像与光轴的距离，xr1为目标物体的能量重心在第一图像采集装置的成像平面的成像与第一预定平行线的距离；xl为目标物体的能量重心在第二图像采集装置的成像平面的成像与光轴的距离，xl1为目标物体的能量重心在第二图像采集装置的成像平面的成像与第二预定平行线的距离，O1第一图像采集装置的光轴(也即，可见光光轴)，O2为第二采集装置的光轴(热成像光轴)。。
在一种可选的实施方式中，根据如下公式可以确定第一图像采集装置的光轴和激光镜头的光轴之间的第二距离b：
Figure GDA0002815779700000071
基于上述第二距离b，可以获取第一图像采集装置的成像平面与目标物体之间的第一距离d：
Figure GDA0002815779700000072
需要说明的是，在本申请所提供的上述可选的实施方式中，只需第一图像采集装置的镜头的焦距数f1，第二图像采集装置的镜头的焦距数f2，第一图像采集装置的光轴和激光镜头的光轴之间的第二距离b，第一图像采集装置的成像平面与第二图像采集装置的成像平面之间的间距k以及目标物体的能量重心在第一图像采集装置的成像平面的成像与光轴的距离xr和目标物体的能量重心在第二图像采集装置的成像平面的成像与光轴的距离xl。
在一种可选的实施例中，本申请中的图像采集装置即可以使用定焦镜头也可以使用变焦镜头，其中，若使用定焦镜头此时低照度摄像机的可见光镜头的焦距f1以及红外摄像机的热成像镜头的焦距f2是固定的。若使用变焦镜头则需要在读取此时可见光镜头和热成像镜头的焦距参数。上述可见光镜头和热成像镜头的两个焦距平面之间的因机械结构产生的水平装配距离，则可以但不限于通过测量求得。此时，本申请可以得出所要观测的目标物体距可见光摄像机的成像平面之间的第一距离d。
如图4所示，根据上述第一距离d和上述第二距离b进而可以确定上述目标出光角度θ：
Figure GDA0002815779700000081
此外，需要说明的是，图4中包括目标物体1和目标物体2，由于第一图像采集装置的成像平面与目标物体之间的第一距离d不同，则目标出光角度随着第一距离d变化。其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光；上述目标出光角度也即上述激光镜头所发射激光的角度，可以通过如图4所示的激光角度微调装置控制上述激光镜头调整至与上述目标出光角度对应的位置。
在一种可选的实施例中，若上述判断结果为是，也即在激光镜头的当前出光角度为目标出光角度的情况下，则控制上述激光设备调整激光光斑至预设大小。
如图5所示，由于激光光斑的大小以及形状在画面中都不是完整的圆形，极有可能出现画面中只出现部分圆的情况。由于此时本申请已经完成了对激光光斑的水平方向校准，因此只需要调整激光光斑的大小以及竖直方向的角度即可。通过边缘检测算法提取出激光光斑的边缘，然后对图像数据进行二值化处理，通过圆形拟合算法拟合出与此光斑最接近的圆的半径以及圆心。
作为一种可选的实施例，根据圆心半径和视场大小的关系，本申请可以计算出最佳的激光光斑的大小，此时控制器通过将拟合出来的圆心、半径和最佳激光光斑大小进行比对，得出此时的控制策略。此时，设备根据这个控制策略对激光镜头上的步进电机进行控制。通过控制步进电机，带动激光镜头中的镜头组在激光镜头上的螺旋槽上移动。将激光镜头中的光具组调整到适当位置，使激光光斑到最佳位置，进而可以实现激光光斑大小与视野内目标相匹配。
在一种可选的实施例中，本申请中的夜视系统可以根据当前时刻视场的大小计算出此时与可见光摄像机匹配的红外变焦镜头的变倍值以及聚焦值。并且，夜视系统还可以根据上述视场的大小和第一距离d，计算得出红外变焦镜头的光轴(主光轴)和可见光变焦镜头的光轴(主光轴)之间的夹角。也即，基于上述可选的实施例，本申请中的夜视系统可以确定具体的红外变焦镜头最匹配的聚焦值以及变倍值以及红外角度微调装置的最佳角度值。在运算完成之后，DSP高速融合电路会将上述夹角的角度值通过数据线以RS485电平协议传输给控制器。
在一种可选的实施例中，控制器接收到DSP高速融合电路计算出来的角度值，并对红外变焦镜头的聚焦值以及变倍值进行采样，确定激光设备中激光镜头的当前出光角度。通过将采样结果中的当前出光角度和目标出光角度进行比对，判断激光镜头的当前出光角度是否为目标出光角度，并在当前出光角度不是上述目标出光角度的情况下，控制步进电机向缩小当前出光角度和目标出光角度之差的方向转动，直到当前出光角度和目标出光角度之差处于设定范围内。
在一种可选的实施例中，如图6所示，在获取上述第一距离以及上述第二距离之前，上述方法还包括如下方法步骤：
步骤S302，检测上述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行；
步骤S304，若检测结果为否，则调整上述第一图像采集装置的光轴与第二图像采集装置的光轴平行；
步骤S306，若上述检测结果为是，则获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据。
需要说明的是，检测上述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行，也即检测第一图像采集装置与第二图像采集装置是否同轴。
基于上述步骤S302至步骤S306所提供的可选实施例，由于控制上述激光镜头调整至与上述目标出光角度对应的位置的前提条件即为第一图像采集装置的光轴与第二图像采集装置的光轴平行。因此，在检测到上述第一图像采集装置的光轴与第二图像采集装置的光轴不平行的情况下，调整上述第一图像采集装置的光轴与第二图像采集装置的光轴平行。
在一种可选的实施例中，如图7所示，在获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据之后，上述方法还包括：
步骤402，判断上述第一图像特征数据与上述第二图像特征数据是否匹配；
步骤404，若上述第一图像特征数据与上述第二图像特征数据匹配，则执行获取上述第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
作为一种可选的实施例，在检测到上述第一图像采集装置的光轴与第二图像采集装置的光轴平行的情况下，可以获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据，并在判断得出上述第一图像特征数据与上述第二图像特征数据匹配的情况下，获取上述第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
在一种可选的实施例中，如图8所示，在控制上述激光镜头调整至上述目标出光角度对应的位置之后，上述方法还包括如下方法步骤：
步骤502，获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据；
步骤504，采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；输出上述第三图像数据。
在一种可选的实施方式中，若激光角度微调装置已控制上述激光镜头调整至与上述目标出光角度对应的位置，或者，控制器检测到激光设备中激光镜头的当前出光角度与目标出光角度之差已处于设定范围内，则控制器可以给DSP高速融合电路发送一个触发信号，DSP高速融合电路通过视频解码器读取可见光摄像机和红外热成像摄像机拍摄的每一帧图像，得到第一图像数据和第二图像数据。
可选的，上述图像融合算法可以为金字塔式分解融合算法，也称为塔式分解融合算法，还可以为奇偶分割融合算法；其中，上述图像融合算法的原理图可以如图10和11所示。
作为一种可选的实施例，可以通过塔式分解融合算法对上述第一图像数据和上述第二图像数据进行融合处理，例如，如图9所示，可以进行金字塔式分解，其中，金字塔中的每一层图像均是前一层图像经过低通滤波后并隔行隔列降采样后的结果，可以通过如下公式进行表示：
Figure GDA0002815779700000101
其中，l＝0,1,...,N，G0为原始图像，即金字塔的最底层，依次上述公式进行操作得到金字塔G0,G1,G2,…,GN，GN为顶层。ω(m,n)是滤波模板中对应坐标的滤波系数。由公式易知金字塔中每层的分辨率大小都是前一层的1/4，可以但不限于将此过程称为分解(reduce)操作，故图像金字塔的分解过程可以通过如下公式进行表示：
Figure GDA0002815779700000111
下一步是将图像金字塔除了最底层图像外所有图像都进行内插放大操作，使得此层图像金字塔经处理后和上一层图像金字塔的分辨率相同：
Figure GDA0002815779700000112
其中，可以但不限于将上述过程称为放大(expend)过程，其插值放大过程可以通过如下公式进行表示：
Figure GDA0002815779700000113
其中，图像经过放大(expend)过程放大处理之后，其第l层图像和经过分解(reduce)过程之后，第l-1层图像所得结果分辨率相等。也即，若此时二个处理结果相减，最高层不变，仍为分解(reduce)操作之后的最高层，仍如图9所示，最高层为图像金字塔第4层，其余为前两个金字塔相减得到。此时，设备得到了塔式分解金字塔。此时，将待融合的两幅图像的塔式分解金字塔从顶层开始，利用公式：
Figure GDA0002815779700000114
从上到下逐层进行递推，就可以恢复成与第三图像数据(融合图像)对应的图像金字塔，最终可以得到第三图像数据(融合图像)G0。
需要说明的是，DSP高速融合电路的解码输出芯片输出的是bt.656数据是对图像隔行扫描的，而本申请中的塔式分解金字塔的构建过程中需要用到5行数据进行低通滤波操作。在一种可选的实施例中，若采取奇偶合并后再处理，则需增加存储外设和控制逻辑，且至少需一帧的延时，最终传输给视频解码芯片的数据也是bt.656数据流，又需要进行奇偶分割，无形中加大了计算量。
如图11所示，本申请通过将视频解码芯片输出的第一图像数据和第二图像数据进行奇偶分割，相当于将一帧图像的偶数行和奇数行各自提取出来得到两幅图像，得到奇数行第一图像数据、偶数行第一图像数据、奇数行第二图像数据以及偶数行第二图像数据，然后奇数行数据和偶数行数据分别进行塔式分解融合处理后，再经过编码芯片还原输出第三图像数据。
基于上述实施例，本申请通过将上述图像融合算法进行改进，进而可以节省大量的解码运算时间，减少硬件资源的占用，并且不会影响图像数据的融合效果。
为理解本申请文件上述各实施例，以下通过一个具体实施方式对本申请进行说明，图12是根据本发明实施例的一种可选的控制夜视系统的方法的步骤流程图，如图12所示，本申请提供的控制夜视系统的方法可以但不限于包括如下方法步骤：
步骤S1201，开启夜视系统；
步骤S1202，检测第一图像采集装置的光轴与第二图像采集装置的光轴是否平行。
在上述步骤S1202中，若检测结果为第一图像采集装置的光轴与第二图像采集装置的光轴平行，则执行步骤S1204；若检测结果为第一图像采集装置的光轴与第二图像采集装置的光轴不平行，则调整第一图像采集装置的光轴与第二图像采集装置的光轴平行，直至第一图像采集装置的光轴与第二图像采集装置的光轴平行时，转而执行步骤S1204。
步骤S1203，调整第一图像采集装置的光轴与第二图像采集装置的光轴平行；
步骤S1204，获取第一图像采集装置采集的第一图像特征数据和第二图像采集装置采集的第二图像特征数据；
步骤S1205，判断上述第一图像特征数据与上述第二图像特征数据是否匹配；
步骤S1206，获取第一距离以及第二距离；
在上述步骤S1206中，上述第一距离为获取第一图像采集装置的成像平面与目标物体之间的距离，上述第二距离为上述第一图像采集装置的光轴和上述激光镜头的光轴之间的距离。
步骤S1207，根据上述第一距离和上述第二距离确定上述目标出光角度；
步骤S1208，判断上述激光镜头的当前出光角度是否为目标出光角度。
在上述步骤S1208中，若判断上述激光镜头的当前出光角度为目标出光角度，则执行步骤S1210，判断上述激光镜头的当前出光角度不为目标出光角度，则执行步骤S1209，直至激光镜头的当前出光角度为目标出光角度时，执行步骤S1210。
步骤S1209，控制上述激光镜头调整至与上述目标出光角度对应的位置；
步骤S1210，控制上述激光设备调整激光光斑至预设大小；
步骤S1211，计算第二采集装置的最佳融合视场合角度；
步骤S1212，控制上述第二采集装置的镜头至最佳聚焦变倍位置；
步骤S1213，判断上述第二采集装置是否为最佳融合角度。
在上述步骤S1213中，若上述第二采集装置的当前融合角度为最佳融合角度，则执行步骤S1215，若上述第二采集装置的当前融合角度不为最佳融合角度，则执行步骤S1214，直至控制红外角度微调装置调整镜头的位置为上述最佳融合角度，转而执行步骤S1215。
步骤S1214，控制红外角度微调装置调整镜头的位置；
步骤S1215，采用图像融合算法对第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；
步骤S1216，输出上述第三图像数据。
实施例2
根据本发明实施例的另一方面，还提供了一种夜视系统，图13是根据本发明实施例的一种夜视系统的结构示意图，如图13所示，上述夜视系统包括：
激光设备130，上述激光设备包括激光镜头；控制器132，与上述激光设备连接，用于确定激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为是，则控制上述激光设备调整激光光斑至预设大小；若上述判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
在本发明实施例中，通过激光设备130，上述激光设备包括激光镜头；控制器132，与上述激光设备连接，用于确定激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为是，则控制上述激光设备调整激光光斑至预设大小；若上述判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置，达到了通过控制激光镜头转动，以将激光光斑照射到低照度摄像机视场的正中心的目的，从而实现了提高激光照明的效率和补光率的技术效果，进而解决了现有技术中的夜视系统无法即时调节激光镜头角度，导致激光照明的效率低的技术问题。
在一种可选的实施例中，图14是根据本发明实施例的一种可选的夜视系统的结构示意图，如图14所示，上述激光设备130包括激光镜头1301，还包括：第一调节装置1303，与上述控制器132连接，上述激光设备的激光镜头固定设置在上述第一调节装置上，上述第一调节装置用于在上述控制器的控制下，调整上述激光镜头至与上述目标出光角度对应的位置。
可选的，上述第一调节装置1303可以为激光角度微调装置，上述激光设备的激光镜头固定设置在上述第一调节装置1303上，上述第一调节装置1303与控制器132连接，用于在上述控制器132的控制下，调整上述激光镜头至与上述目标出光角度对应的位置。
在一种可选的实施例中，仍如图14所示，上述激光设备130还包括：激光器1305，用于通过转接光纤引出激光；激光驱动器1307，与上述控制器和上述激光器连接，用于在上述控制器的控制下，调整上述激光器发射激光的功率。
在上述可选实施例中，上述激光设备130，用于产生近红外激光，给低照度摄像机进行补光。上述激光驱动器1307受控制器132的控制调整驱动电流从而调整激光器发射的激光功率。上述激光镜头受控制器的控制调整激光的出光角度，其中，上述第一调节装置也受控制器132的控制，负责调整激光镜头的水平角度和垂直角度。
在一种可选的实施例中，如图14所示，上述夜视系统还包括：第一图像采集装置134，与上述控制器连接，用于拍摄目标物体得到第一图像数据，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光；第二图像采集装置136，与上述控制器连接，用于拍摄上述目标物体得到第二图像数据；其中，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
作为一种可选的实施例，上述第一图像采集装置134可以为低照度摄像机，如图14所示，上述第一图像采集装置134可以但不限于包括：可见光长焦镜头1341；上述低照度摄像机可以用于感知环境的可见光的低照度信息，并可以在控制器的控制下给DSP高速融合电路提供可见光波段的图像，上述低照度摄像机上的可见光长焦镜头的变倍聚焦位置受控制器的控制。
作为一种可选的实施例，上述第二图像采集装置136可以为红外摄像机。上述红外摄像机可以用于感知环境的温度场，在不可见光波段(例如：远红外波段)成像，进而上述红外摄像机在控制器的控制下可以给DSP高速融合电路提供远红外波段的图像。如图14所示，上述第二图像采集装置136还包括红外变焦镜头1363，其中，红外变焦镜头1363的变倍和聚焦位置受控制器的控制。
在一种可选的实施例中，如图14所示，上述第二图像采集装置136包括：第二调节装置1361，与上述控制器连接，用于依据上述控制器的控制，调整上述第二图像采集装置中镜头的位置。
需要说明的是，上述第二调节装置1361可以为红外角度微调装置，上述第二调节装置1361也受控制器的控制，可以用于调整红外摄像机和红外变焦镜头的垂直角度和水平角度。
在一种可选的实施例中，如图14所示，上述夜视系统还包括：光敏控制器138，用于获取上述目标物体所在目标环境的光线强度值，并根据上述光线强度值控制上述激光设备开启或关闭。
可选的，上述光敏控制器138通过信号线和控制器连接，可以包括光敏电阻以及光敏采样电路，光敏控制器138可以用于感应环境的亮度信息，获取上述目标物体所在目标环境的光线强度值，并根据上述光线强度值控制上述激光设备开启或关闭，例如，当光线强度低到一定程度时，光敏电阻阻值变化，引起电路电压变化，因而上述光敏控制器138可以在光线强度值低于设定阈值时，通过控制芯片采集电压信息变化并控制激光开启；当光线强度值等于或大于设定阈值时，通过控制芯片自动控制激光关闭。
在一种可选的实施例中，如图14所示，上述夜视系统还包括：信号处理电路140，分别与上述第一图像采集装置、上述第二图像采集装置、上述控制器连接，用于在上述控制器的控制下，获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据，并采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；显示设备142，与上述信号处理电路连接，用于显示上述第三图像数据。
作为一种可选的实施例，上述信号处理电路140可以为但不限于为DSP高速融合电路，可以用于处理第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据。可选的，DSP高速融合电路和控制器通过信号线相连，上述DSP高速融合电路受控制器的控制，可以用于接收低照度可见光摄像机拍摄的第一视频图像和红外摄像机拍摄的第二视频图像，并将上述第一视频图像和第二视频图像进行图像融合。其中，上述控制器通过控制线分别控制第一采集装置、第二采集装置、激光设备、光敏控制器。
作为另一种可选的实施例，如图14所示，上述显示设备142与上述信号处理电路140连接，例如，显示设备142可以通过信号线(例如，视频信号线)和DSP高速融合电路相连，可以用于显示DSP高速融合电路融合后的视频图像，其中，上述显示设备142可以为显示屏、显示器。
作为一种可选的实施例，本申请中还提供的一种可选基于图像的光轴智能调节夜视融合系统，可以包括但不限于:红外摄像机、红外变焦镜头、红外角度微调装置、低照度摄像机、可见光变焦镜头、激光驱动器、激光器、激光镜头、激光角度微调装置、控制器、光敏控制器、DSP高速融合电路以及显示器等。
在一种可选的实施例中，红外变焦镜头和红外摄像机通过接线圈连接，通过镜头支架固定在红外角度微调装置上。其中，红外变焦镜头通过位置反馈电位器和控制电路通信。红外摄像机通过信号线和DSP高速融合电路相连，通过信号线和控制电路通讯。红外角度微调装置通过信号线和控制器相连。红外角度微调装置中的通过捕捉红外成像系统的光轴位置回传给控制器，控制器根据回传角度控制红外角度微调装置。
在一种可选的实施例中，低照度摄像机和可见光变焦镜头通过接线圈连接，通过抱箍固定在底板上。其中，可见光变焦镜头通过位置反馈电位器和控制器通信；低照度摄像机通过信号线和DSP高速融合电路相连，通过信号线和控制器通信。
在一种可选的实施例中，激光器驱动器通过供电线和激光器连接，激光器通过转接光纤引出激光，转接光纤再通过法兰盘接到激光镜头上，通过激光镜头里的光学系统来调节激光光斑大小，以及使激光能量均匀分布在光斑上对激光进行匀化处理。激光镜头通过镜头支架固定在激光角度微调装置上。其中，激光驱动器通过信号线和控制器相连。激光角度微调装置通过信号线和控制器相连。激光镜头通过位置反馈电位器和控制器通信。
在一种可选的实施例中，上述DSP高速融合电路通过信号线和控制器通信，还可以通过信号线将融合好的图像数据传输给显示器进行显示。
需要说明的是，本申请中的图13至图14中所示夜视系统的具体结构仅是示意，在具体应用时，本申请中的夜视系统可以具有比图13至图14所示的夜视系统多或少的结构。上述实施例1中的任意一种可选的或优选的控制夜视系统的方法，均可以在本实施例所提供的夜视系统中执行或实现。
此外，仍需要说明的是，本实施例的可选或优选实施方式可以参见实施例1中的相关描述，此处不再赘述。
实施例3
本发明实施例还提供了一种用于实施上述控制夜视系统的方法的装置，图15是根据本发明实施例的一种控制夜视系统的装置的结构示意图，如图15所示，上述控制夜视系统的装置，包括：确定模块150、判断模块152以及控制模块154，其中，
确定模块150，用于确定激光设备中激光镜头的当前出光角度；判断模块152，用于判断激光镜头的当前出光角度是否为目标出光角度；控制模块154，用于若判断结果为否，则控制激光镜头调整至与目标出光角度对应的位置。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，例如，对于后者，可以通过以下方式实现：上述各个模块可以位于同一处理器中；或者，上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是，上述确定模块150、判断模块152以及控制模块154对应于实施例1中的步骤S102至步骤S106，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在计算机终端中。
需要说明的是，本实施例的可选或优选实施方式可以参见实施例1和2中的相关描述，此处不再赘述。
上述的控制夜视系统的装置还可以包括处理器和存储器，上述确定模块150、判断模块152以及控制模块154等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元，上述内核可以设置一个或以上。存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
本申请实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质包括存储的程序，其中，在上述程序运行时控制上述存储介质所在设备执行上述任意一种控制夜视系统的方法。
可选地，在本实施例中，上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中，或者位于移动终端群中的任意一个移动终端中。
本申请实施例还提供了一种处理器。可选地，在本实施例中，上述处理器用于运行程序，其中，上述程序运行时执行上述任意一种控制夜视系统的方法。
本申请实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
可选地，上述处理器执行程序时，若上述判断结果为是，则控制上述激光设备调整激光光斑至预设大小。
可选地，上述处理器执行程序时，还可以获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和上述激光镜头的光轴之间的第二距离；根据上述第一距离和上述第二距离确定上述目标出光角度，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光。
可选地，上述处理器执行程序时，还可以检测上述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行；若检测结果为否，则调整上述第一图像采集装置的光轴与第二图像采集装置的光轴平行；若上述检测结果为是，则获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据。
可选地，上述处理器执行程序时，还可以判断上述第一图像特征数据与上述第二图像特征数据是否匹配；若上述第一图像特征数据与上述第二图像特征数据匹配，则执行获取上述第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
可选地，上述处理器执行程序时，还可以获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据；采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；输出上述第三图像数据。
可选地，上述处理器执行程序时，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：确定激光设备中激光镜头的当前出光角度；判断上述激光镜头的当前出光角度是否为目标出光角度；若判断结果为否，则控制上述激光镜头调整至与上述目标出光角度对应的位置。
可选地，上述计算机程序产品执行程序时，若上述判断结果为是，则控制上述激光设备调整激光光斑至预设大小。
可选地，上述计算机程序产品执行程序时，还可以获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和上述激光镜头的光轴之间的第二距离；根据上述第一距离和上述第二距离确定上述目标出光角度，其中，上述激光镜头用于在上述第一图像采集装置拍摄上述目标物体时，发射用于为上述第一图像采集装置补光的激光。
可选地，上述计算机程序产品执行程序时，还可以检测上述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行；若检测结果为否，则调整上述第一图像采集装置的光轴与第二图像采集装置的光轴平行；若上述检测结果为是，则获取上述第一图像采集装置采集的第一图像特征数据和上述第二图像采集装置采集的第二图像特征数据。
可选地，上述计算机程序产品执行程序时，还可以判断上述第一图像特征数据与上述第二图像特征数据是否匹配；若上述第一图像特征数据与上述第二图像特征数据匹配，则执行获取上述第一图像采集装置的成像平面与目标物体之间的第一距离，以及上述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
可选地，上述计算机程序产品执行程序时，还可以获取上述第一图像采集装置采集的第一图像数据和上述第二图像采集装置采集的第二图像数据；采用图像融合算法对上述第一图像数据和上述第二图像数据进行融合处理，得到第三图像数据；输出上述第三图像数据。
可选地，上述计算机程序产品执行程序时，上述第一图像采集装置用于采集上述目标物体在近红外波段的图像数据，上述第二图像采集装置用于采集上述目标物体在远红外波段的图像数据。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (14)

1.一种控制夜视系统的方法，其特征在于，包括：
确定激光设备中激光镜头的当前出光角度；
判断所述激光镜头的当前出光角度是否为目标出光角度；
若判断结果为否，则控制所述激光镜头调整至与所述目标出光角度对应的位置；
在判断激光镜头的当前出光角度是否为目标出光角度之前，所述方法还包括：
获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及所述第一图像采集装置的光轴和所述激光镜头的光轴之间的第二距离，其中，在所述第一图像采集装置的光轴与第二图像采集装置的光轴平行的情况下，获取所述第一距离和所述第二距离；
根据所述第一距离和所述第二距离确定所述目标出光角度，其中，所述激光镜头用于在所述第一图像采集装置拍摄所述目标物体时，发射用于为所述第一图像采集装置补光的激光；
其中，通过如下计算公式获取所述第一距离d：
Figure FDA0002815779690000011
其中，所述第一图像采集装置的镜头的焦距数f1，第二图像采集装置的镜头的焦距数f2，所述第二距离b，所述第一图像采集装置的成像平面与所述第二图像采集装置的成像平面之间的间距k以及所述目标物体的能量重心在所述第一图像采集装置的成像平面的成像与所述第一图像采集装置的光轴的距离xr和所述目标物体的能量重心在所述第二图像采集装置的成像平面的成像与所述第二图像采集装置的光轴的距离xl；
其中，所述第一图像采集装置用于采集所述目标物体在近红外波段的图像数据，所述第二图像采集装置用于采集所述目标物体在远红外波段的图像数据，所述第二图像采集装置包括所述激光镜头，所述激光镜头用于在所述第一图像采集装置拍摄所述目标物体时，发射用于为所述第一图像采集装置补光的激光。
2.根据权利要求1所述的方法，其特征在于，若所述判断结果为是，则控制所述激光设备调整激光光斑至预设大小。
3.根据权利要求1所述的方法，其特征在于，在获取所述第一距离以及所述第二距离之前，所述方法还包括：
检测所述第一图像采集装置的光轴与第二图像采集装置的光轴是否平行；
若检测结果为否，则调整所述第一图像采集装置的光轴与第二图像采集装置的光轴平行；
若所述检测结果为是，则获取所述第一图像采集装置采集的第一图像特征数据和所述第二图像采集装置采集的第二图像特征数据。
4.根据权利要求3所述的方法，其特征在于，在获取所述第一图像采集装置采集的第一图像特征数据和所述第二图像采集装置采集的第二图像特征数据之后，所述方法还包括：
判断所述第一图像特征数据与所述第二图像特征数据是否匹配；
若所述第一图像特征数据与所述第二图像特征数据匹配，则执行获取所述第一图像采集装置的成像平面与目标物体之间的第一距离，以及所述第一图像采集装置的光轴和激光镜头的光轴之间的第二距离。
5.根据权利要求3所述的方法，其特征在于，在控制所述激光镜头调整至所述目标出光角度对应的位置之后，所述方法还包括：
获取所述第一图像采集装置采集的第一图像数据和所述第二图像采集装置采集的第二图像数据；
采用图像融合算法对所述第一图像数据和所述第二图像数据进行融合处理，得到第三图像数据；
输出所述第三图像数据。
6.一种夜视系统，其特征在于，包括：
激光设备，所述激光设备包括激光镜头；
控制器，与所述激光设备连接，用于确定所述激光镜头的当前出光角度；判断所述激光镜头的当前出光角度是否为目标出光角度；若判断结果为是，则控制所述激光设备调整激光光斑至预设大小；若所述判断结果为否，则控制所述激光镜头调整至与所述目标出光角度对应的位置；
其中，所述控制器在判断激光镜头的当前出光角度是否为目标出光角度之前，还用于获取第一图像采集装置的成像平面与目标物体之间的第一距离，以及所述第一图像采集装置的光轴和所述激光镜头的光轴之间的第二距离，其中，在所述第一图像采集装置的光轴与第二图像采集装置的光轴平行的情况下，获取所述第一距离和所述第二距离；根据所述第一距离和所述第二距离确定所述目标出光角度，其中，所述激光镜头用于在所述第一图像采集装置拍摄所述目标物体时，发射用于为所述第一图像采集装置补光的激光；
其中，所述控制器还用于通过如下计算公式获取所述第一距离d：
Figure FDA0002815779690000031
其中，所述第一图像采集装置的镜头的焦距数f1，第二图像采集装置的镜头的焦距数f2，所述第二距离b，所述第一图像采集装置的成像平面与所述第二图像采集装置的成像平面之间的间距k以及所述目标物体的能量重心在所述第一图像采集装置的成像平面的成像与所述第一图像采集装置的光轴的距离xr和所述目标物体的能量重心在所述第二图像采集装置的成像平面的成像与所述第二图像采集装置的光轴的距离xl；
其中，所述第一图像采集装置用于采集所述目标物体在近红外波段的图像数据，所述第二图像采集装置用于采集所述目标物体在远红外波段的图像数据，所述第二图像采集装置包括所述激光镜头，所述激光镜头用于在所述第一图像采集装置拍摄所述目标物体时，发射用于为所述第一图像采集装置补光的激光。
7.根据权利要求6所述的夜视系统，其特征在于，所述激光设备还包括：
第一调节装置，与所述控制器连接，所述激光设备的激光镜头固定设置在所述第一调节装置上，所述第一调节装置用于在所述控制器的控制下，调整所述激光镜头至与所述目标出光角度对应的位置。
8.根据权利要求7所述的夜视系统，其特征在于，所述激光设备还包括：
激光器，用于通过转接光纤引出激光；
激光驱动器，与所述控制器和所述激光器连接，用于在所述控制器的控制下，调整所述激光器发射激光的功率。
9.根据权利要求6所述的夜视系统，其特征在于，所述夜视系统还包括：
第一图像采集装置，与所述控制器连接，用于拍摄目标物体得到第一图像数据，其中，所述激光镜头用于在所述第一图像采集装置拍摄所述目标物体时，发射用于为所述第一图像采集装置补光的激光；
第二图像采集装置，与所述控制器连接，用于拍摄所述目标物体得到第二图像数据；其中，所述第一图像采集装置用于采集所述目标物体在近红外波段的图像数据，所述第二图像采集装置用于采集所述目标物体在远红外波段的图像数据。
10.根据权利要求9所述的夜视系统，其特征在于，所述第二图像采集装置包括：
第二调节装置，与所述控制器连接，用于依据所述控制器的控制，调整所述第二图像采集装置中镜头的位置。
11.根据权利要求9所述的夜视系统，其特征在于，所述夜视系统还包括：
光敏控制器，用于获取所述目标物体所在目标环境的光线强度值，并根据所述光线强度值控制所述激光设备开启或关闭。
12.根据权利要求9所述的夜视系统，其特征在于，所述夜视系统还包括：
信号处理电路，分别与所述第一图像采集装置、所述第二图像采集装置、所述控制器连接，用于在所述控制器的控制下，获取所述第一图像采集装置采集的第一图像数据和所述第二图像采集装置采集的第二图像数据，并采用图像融合算法对所述第一图像数据和所述第二图像数据进行融合处理，得到第三图像数据；
显示设备，与所述信号处理电路连接，用于显示所述第三图像数据。
13.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序由计算机处理器执行以实现如权利要求1至5中任意一项所述的控制夜视系统的方法。
14.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序运行时执行权利要求1至5中任意一项所述的控制夜视系统的方法。
CN201810103622.5A 2018-02-01 2018-02-01 控制夜视系统的方法、夜视系统、存储介质及处理器 Active CN108449547B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810103622.5A CN108449547B (zh) 2018-02-01 2018-02-01 控制夜视系统的方法、夜视系统、存储介质及处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810103622.5A CN108449547B (zh) 2018-02-01 2018-02-01 控制夜视系统的方法、夜视系统、存储介质及处理器

Publications (2)

Publication Number Publication Date
CN108449547A CN108449547A (zh) 2018-08-24
CN108449547B true CN108449547B (zh) 2021-02-09

Family

ID=63191301

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810103622.5A Active CN108449547B (zh) 2018-02-01 2018-02-01 控制夜视系统的方法、夜视系统、存储介质及处理器

Country Status (1)

Country Link
CN (1) CN108449547B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110874921A (zh) 2018-08-31 2020-03-10 百度在线网络技术（北京）有限公司 智能路侧单元及其信息处理方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN200944175Y (zh) * 2006-09-15 2007-09-05 潘国平 一种具有自动调节亮度功能的激光摄像机装置
CN101303733A (zh) * 2008-05-26 2008-11-12 东华大学 采用模式数据库的具有空间感的自然彩色夜视实现方法
CN101867685A (zh) * 2010-06-25 2010-10-20 北京理工大学 基于颜色查找表的双波段视频快速自然感彩色融合方法
CN101876754A (zh) * 2009-11-17 2010-11-03 北京佳讯飞鸿电气股份有限公司 用于铁路安全运行的激光夜视设备
CN103268485A (zh) * 2013-06-09 2013-08-28 上海交通大学 基于稀疏正则化的实现多波段人脸图像信息融合的人脸识别方法
CN104079883A (zh) * 2014-07-07 2014-10-01 山东神戎电子股份有限公司 一种基于步进电机的激光夜视仪照明器预置位实现方法
CN204020695U (zh) * 2014-08-28 2014-12-17 南京国业科技有限公司 车载彩色夜视系统
CN104780306A (zh) * 2015-04-22 2015-07-15 山东神戎电子股份有限公司 可调节不同距离上光斑与视场中心对准的激光夜视仪及方法
CN105301749A (zh) * 2014-08-01 2016-02-03 山东华光光电子有限公司 一种光轴微调的激光变焦照明模组及其应用

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7937667B2 (en) * 2006-09-27 2011-05-03 Donnelly Corporation Multimedia mirror assembly for vehicle
JP2017055296A (ja) * 2015-09-10 2017-03-16 株式会社東芝 装着型撮像装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN200944175Y (zh) * 2006-09-15 2007-09-05 潘国平 一种具有自动调节亮度功能的激光摄像机装置
CN101303733A (zh) * 2008-05-26 2008-11-12 东华大学 采用模式数据库的具有空间感的自然彩色夜视实现方法
CN101876754A (zh) * 2009-11-17 2010-11-03 北京佳讯飞鸿电气股份有限公司 用于铁路安全运行的激光夜视设备
CN101867685A (zh) * 2010-06-25 2010-10-20 北京理工大学 基于颜色查找表的双波段视频快速自然感彩色融合方法
CN103268485A (zh) * 2013-06-09 2013-08-28 上海交通大学 基于稀疏正则化的实现多波段人脸图像信息融合的人脸识别方法
CN104079883A (zh) * 2014-07-07 2014-10-01 山东神戎电子股份有限公司 一种基于步进电机的激光夜视仪照明器预置位实现方法
CN105301749A (zh) * 2014-08-01 2016-02-03 山东华光光电子有限公司 一种光轴微调的激光变焦照明模组及其应用
CN204020695U (zh) * 2014-08-28 2014-12-17 南京国业科技有限公司 车载彩色夜视系统
CN104780306A (zh) * 2015-04-22 2015-07-15 山东神戎电子股份有限公司 可调节不同距离上光斑与视场中心对准的激光夜视仪及方法

Also Published As

Publication number Publication date
CN108449547A (zh) 2018-08-24

Similar Documents

Publication Publication Date Title
CN108234897B (zh) 控制夜视系统的方法及装置、存储介质、处理器
CN107948519B (zh) 图像处理方法、装置及设备
JP5212927B2 (ja) 顔撮影システム
CN102036005B (zh) 处理捕获图像的成像器
CN107181918B (zh) 一种光学动捕摄像机的拍摄控制方法及系统
EP3017339A1 (en) Method and system for selective imaging of objects in a scene to yield enhanced
WO2013056001A1 (en) System and method for the long range acquisition of iris images for stationary and mobile subjects
US9667853B2 (en) Image-capturing apparatus
US10484612B2 (en) Image pickup apparatus, image pickup method, and Storage medium for picking up a plurality of images different in in-focus positions
JP2012124555A (ja) 撮像装置
CN107872631B (zh) 基于双摄像头的图像拍摄方法、装置及移动终端
WO2017100696A1 (en) Dynamic frame rate controlled thermal imaging systems and methods
JP2021071732A (ja) 制御装置、制御方法、コンピュータプログラム及び電子機器
CN102314043A (zh) 人脸区块辅助对焦的方法
KR20220058593A (ko) 스마트한 파노라마 이미지를 획득하기 위한 시스템 및 방법
CN108449547B (zh) 控制夜视系统的方法、夜视系统、存储介质及处理器
JP6336337B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP5397078B2 (ja) 撮像装置
JP5945444B2 (ja) 撮影機器
JP2006267220A (ja) オートフォーカスシステム
CN115022553B (zh) 一种补光灯的动态控制方法和装置
JP6780543B2 (ja) 画像撮像システム及び画像撮像装置
CN114762313B (zh) 图像处理方法、装置、存储介质及电子设备
US20190025543A1 (en) Method for producing a photo- or video-image of at least one object to be recorded
JP6994119B2 (ja) 撮像装置および焦点制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Jiang Tao

Inventor after: Zuo Fang

Inventor after: Wang Xintao

Inventor after: Li Zeyi

Inventor before: Zuo Fang

Inventor before: Jiang Tao

Inventor before: Wang Xintao

Inventor before: Li Zeyi

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200731

Address after: 100083 Haidian District, Xueyuan Road, No. 30,

Applicant after: Jiang Tao

Applicant after: Zuo Fang

Address before: 100096 Beijing Haidian District Xisanqi street, Teng Jianhua business building 6 floor 606

Applicant before: BEIJING JIGUANG TONGDA TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210802

Address after: 102208 Room 501, building 5, No. 97, Changping Road, science and Technology Park, Changping District, Beijing

Patentee after: BEIJING JIGUANG TONGDA TECHNOLOGY Co.,Ltd.

Address before: 100083 No. 30, Haidian District, Beijing, Xueyuan Road

Patentee before: Jiang Tao

Patentee before: Zuo Fang