CN110493533B - 图像采集装置及图像采集方法 - Google Patents

Abstract

本申请公开了一种图像采集装置及图像采集方法，属于计算机视觉领域。图像采集设备包括：图像传感器、补光器和滤光组件，补光器包括第一补光装置，滤光组件包括第一滤光片。第一补光装置至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光。第一滤光片使可见光和部分近红外光通过。图像传感器采用全局曝光方式，在第一预设曝光的曝光时间段内产生并输出第一图像信号，在第二预设曝光的曝光时间段内产生并输出第二图像信号。由于第一图像信号和第二图像信号均通过同一图像传感器产生并输出，无需复杂的配准处理，而且也可以简化图像采集的结构，进而降低成本。

Description

图像采集装置及图像采集方法

技术领域

本申请实施例涉及计算机视觉技术领域，尤其涉及一种图像采集装置及图像采集方法。

背景技术

随着监控技术的发展，监控领域对于图像采集装置采集的图像的要求也越来越高。对于一些特殊场景，例如：低照度的场景，如何保证图像的质量是监控领域重点关注的问题。

目前，为了保证低照度环境采集的图像质量，通常采用图像融合技术。具体的，在图像采集装置中设置两个图像传感器，通过其中一个图像传感器采集可见光信号对应的可见光图像，并通过另外一个图像传感器采集红外光信号对应的红外光图像。

然而，上述现有的图像采集装置，需要通过两个图像传感器进行图像采集，对图像采集装置的工艺结构以及两个图像传感器之间的同步要求极高，导致图像采集装置的成本较高。

发明内容

本申请实施例提供一种图像采集装置及图像采集方法，以降低图像采集装置的成本。

第一方面，本申请实施例提供一种图像采集装置，包括：图像传感器、补光器和滤光组件，所述图像传感器位于所述滤光组件的出光侧；

所述图像传感器，用于采用全局曝光方式进行多次曝光，通过所述多次曝光产生并输出第一图像信号和第二图像信号，其中，所述第一图像信号是根据第一预设曝光产生的图像信号，所述第二图像信号是根据第二预设曝光产生的图像信号，所述第一预设曝光和所述第二预设曝光为所述多次曝光中的其中两次曝光，所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同；

所述补光器包括第一补光装置，所述第一补光装置用于进行近红外补光，其中，至少在所述第一预设曝光的部分曝光时间段内进行近红外补光，在所述第二预设曝光的曝光时间段内不进行近红外补光；

所述滤光组件包括第一滤光片，所述第一滤光片使可见光和部分近红外光通过。

第二方面，本申请实施例提供一种图像采集的方法，应用于图像采集装置，所述图像采集装置包括图像传感器、补光器和滤光组件，所述图像传感器位于所述滤光组件的出光侧，所述补光器包括第一补光装置，所述滤光组件包括第一滤光片，所述方法包括：

通过所述第一补光装置进行近红外补光，其中，至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光，所述第一预设曝光和所述第二预设曝光为图像传感器的多次曝光中的其中两次曝光；

通过所述第一滤光片使可见光和部分近红外光通过；

通过所述图像传感器采用全局曝光方式进行多次曝光，以产生并输出第一图像信号和第二图像信号，所述第一图像信号是根据所述第一预设曝光产生的图像信号，所述第二图像信号是根据所述第二预设曝光产生的图像信号；所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同。

本申请实施例提供的图像采集装置及图像采集方法，利用图像传感器的曝光时序来控制补光装置的近红外补光时序，以便在第一预设曝光的过程中进行近红外补光并产生第一图像信号，在第二预设曝光的过程中不进行近红外补光并产生第二图像信号，这样的数据采集方式，可以在结构简单、降低成本的同时直接采集到亮度信息不同的第一图像信号和第二图像信号，也即通过一个图像传感器就可以获取两种不同的图像信号，使得该图像采集装置更加简便，进而使得获取第一图像信号和第二图像信号也更加高效。并且，第一图像信号和第二图像信号均由同一个图像传感器产生并输出，无需对第一图像信号和第二图像信号进行高精度的配准处理。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1A为本申请实施例提供的一种图像采集装置的结构示意图；

图1B为本申请实施例提供的图像采集装置的图像采集原理示意图；

图2为本申请实施例提供的另一种图像采集装置的结构示意图；

图3为本申请实施例提供的曝光时间与补光时间的示意图之一；

图4为本申请实施例提供的曝光时间与补光时间的示意图之二；

图5为本申请实施例提供的曝光时间与补光时间的示意图之三；

图6为本申请实施例提供的曝光时间与补光时间的示意图之四；

图7为本申请实施例提供的曝光时间与补光时间的示意图之五；

图8为本申请实施例提供的第一补光装置进行近红外补光的波长和相对强度之间的关系示意图；

图9为本申请实施例提供的第一滤光片通过的光的波长和通过率之间的关系示意图；

图10是本申请实施例提供的一种RGB传感器的示意图；

图11是本申请实施例提供的一种RGBW传感器的示意图；

图12是本申请实施例提供的一种RCCB传感器的示意图；

图13是本申请实施例提供的一种RYYB传感器的示意图；

图14是本申请实施例提供的一种图像传感器的感应曲线示意图；

图15为本申请实施例提供的一种图像采集方法的流程示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

通过两个图像传感器进行图像采集，对图像采集装置的工艺结构以及两个图像传感器之间的同步要求极高，导致图像采集装置的成本较高。并且，由于近红外光图像和可见光图像是分别由两个图像传感器产生的，需要对近红外光图像和可见光图像进行高精度的配准处理，若配准未达到要求，可能会导致融合图像的质量低于单独的可见光图像或者近红外光图像。

为了解决上述问题中的至少一个，本申请实施例提供一种图像采集装置及图像采集方法，在图像采集设备中仅需要设置一个图像传感器，利用图像传感器的曝光时序来控制补光器的近红外光补光时序，使得图像传感器通过第一预设曝光和第二预设曝光分别产生近红外光图像和可见光图像。

下面以具体地实施例对本申请的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。

图1A为本申请实施例提供的一种图像采集装置的结构示意图。如图1A所示，本实施例提供的图像采集装置，包括：图像传感器01、补光器02和滤光组件03，图像传感器01位于滤光组件03的出光侧。图像传感器01用于采用全局曝光方式进行多次曝光，通过所述多次曝光产生并输出第一图像信号和第二图像信号。其中，第一图像信号是根据第一预设曝光产生的图像信号，第二图像信号是根据第二预设曝光产生的图像信号，第一预设曝光和第二预设曝光为该多次曝光中的其中两次曝光，所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同。补光器02包括第一补光装置021，第一补光装置021用于进行近红外补光，其中，至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光。滤光组件03包括第一滤光片031，第一滤光片031使可见光和部分近红外光通过。

首先结合图1A描述图像采集装置可能的结构。参见图1A，图像采集装置还可以包括镜头04，此时，滤光组件03可以位于镜头04和图像传感器01之间，且图像传感器01位于滤光组件03的出光侧。或者，镜头04位于滤光组件03与图像传感器01之间，且图像传感器01位于镜头04的出光侧。作为一种示例，第一滤光片031可以是滤光薄膜，这样，当滤光组件03位于镜头04和图像传感器01之间时，第一滤光片031可以贴在镜头04的出光侧的表面，或者，当镜头04位于滤光组件03与图像传感器01之间时，第一滤光片031可以贴在镜头04的入光侧的表面。

图1B为本申请实施例提供的图像采集装置的图像采集原理示意图。如图1B所示，环境中的环境光被目标物体反射，同时，补光器02产生的补光也被目标物体反射。环境光和补光对应的反射光入射到镜头04。镜头04对反射光进行聚集后，经过滤光组件03进行滤光，使得只有特定波段的反射光到达图像传感器01。图像传感器01通过曝光产生图像信号。

作为一种示例，图像采集装置可以是摄像机、抓拍机、人脸识别相机、读码相机、车载相机、全景细节相机等。

作为另一种示例，补光器02可以位于图像采集装置内，也可以位于图像采集装置的外部。补光器02可以为图像采集装置的一部分，也可以为独立于图像采集装置的一个器件。当补光器02位于图像采集的外部时，补光器02可以与图像采集装置进行通信连接，可以保证图像采集设备中的图像传感器01的曝光时序与补光器02包括的第一补光装置021的近红外补光时序存在一定的关系，如至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光。

另外，第一补光装置021为可以发出近红外光的装置，例如近红外补光灯等，第一补光装置021可以以频闪方式进行近红外补光，也可以以类似频闪的其他方式进行近红外补光，本申请实施例对此不做限定。在一些示例中，当第一补光装置021以频闪方式进行近红外补光时，可以通过手动方式来控制第一补光装置021以频闪方式进行近红外补光，也可以通过软件程序或特定设备来控制第一补光装置021以频闪方式进行近红外补光，本申请实施例对此不做限定。其中，第一补光装置021进行近红外补光的时间段可以与第一预设曝光的曝光时间段重合，也可以大于第一预设曝光的曝光时间段或者小于第一预设曝光的曝光时间段，只要在第一预设曝光的整个曝光时间段或者部分曝光时间段内进行近红外补光，而在第二预设曝光的曝光时间段内不进行近红外补光即可。

本申请实施例中，图像传感器01采用全局曝光方式。全局曝光方式是指每一行有效图像的曝光开始时刻均相同，且每一行有效图像的曝光结束时刻均相同。换句话说，全局曝光方式是所有行有效图像同时进行曝光并且同时结束曝光的一种曝光方式。所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同。其中，第一预设曝光对应的曝光时间段与第二预设曝光对应的曝光时间段没有交集。第一预设曝光对应的曝光时间段与第二预设曝光对应的曝光时间段的时长可以相同，也可以不同，本申请实施例对此不作限定。

需要说明的是，本申请实施例中，第二预设曝光的曝光时间段内不进行近红外补光，对于全局曝光方式来说，第二预设曝光的曝光时间段可以是开始曝光时刻和结束曝光时刻之间的时间段。

以图像采集装置中，滤光组件03可以位于镜头04和图像传感器01之间，且图像传感器01位于滤光组件03的出光侧的结构特征为例，图像采集装置采集第一图像信号和第二图像信号的过程为：在图像传感器01进行第一预设曝光时，第一补光装置021进行近红外补光，此时拍摄场景中的环境光和第一补光装置进行近红外补光时被场景中物体反射的近红外光经由镜头04、第一滤光片031之后，由图像传感器01通过第一预设曝光产生第一图像信号。在图像传感器01进行第二预设曝光时，第一补光装置021不进行近红外补光，此时拍摄场景中的环境光经由镜头04、第一滤光片031之后，由图像传感器01通过第二预设曝光产生第二图像信号。在图像采集的一个帧周期内可以有M个第一预设曝光和N个第二预设曝光，第一预设曝光和第二预设曝光之间可以有多种组合的排序。在图像采集的一个帧周期中，M和N的取值以及M和N的大小关系可以根据实际需求设置。例如，M和N的取值可相等，也可不相同。

在一些实施例中，上述多次曝光是指一个帧周期内的多次曝光，也即是，图像传感器01在一个帧周期内进行多次曝光，从而产生并输出至少一帧第一图像信号和至少一帧第二图像信号。例如，1秒内包括25个帧周期，图像传感器01在每个帧周期内进行多次曝光，从而产生至少一帧第一图像信号和至少一帧第二图像信号，将一个帧周期内产生的第一图像信号和第二图像信号称为一组图像信号，这样，25个帧周期内就会产生25组图像信号。其中，第一预设曝光和第二预设曝光可以是一个帧周期内多次曝光中相邻的两次曝光，也可以是一个帧周期内多次曝光中不相邻的两次曝光，本申请实施例对此不做限定。

第一图像信号是第一预设曝光产生并输出的，第二图像信号是第二预设曝光产生并输出的，在产生并输出第一图像信号和第二图像信号之后，可以对第一图像信号和第二图像信号进行处理。示例性的，对第一图像和第二图像进行图像融合，以提高图像的质量。

本申请实施例中，第一图像信号是通过图像传感器进行第一预设曝光产生的，而至少在所述第一预设曝光的部分曝光时间段内存在近红外光，因此，第一预设曝光产生的第一图像信号为近红外光图像信号。第二图像信号是通过图像传感器进行第二预设曝光产生的，而在第二预设曝光的曝光时间段内不进行近红外补光，因此，第二预设曝光生成的第二图像信号为可见光图像信号。因此，在图像融合场景下，将近红外光图像和可见光图像进行融合，融合后的图像中体现出的图像信息更多，保证了采集图像的质量。

由此可见，本实施例的图像采集装置通过一个图像传感器就产生了近红外光图像和可见光图像两种不同光谱的图像，使得图像采集装置更加简便，降低了图像采集装置的结构复杂度，并降低了图像采集装置的硬件成本。并且，第一图像信号和第二图像信号均由同一个图像传感器产生并输出，无需对第一图像信号和第二图像信号进行高精度的配准处理。

由于第一补光装置021至少在第一预设曝光的部分曝光时间段内提供近红外补光，在第二预设曝光的整个曝光时间段内不提供近红外补光，而第一预设曝光和第二预设曝光为图像传感器01的多次曝光中的其中两次曝光，也即是，第一补光装置021在图像传感器01的部分曝光的曝光时间段内提供近红外补光，在图像传感器01的另外一部分曝光的曝光时间段内不提供近红外补光。所以，第一补光装置021在单位时间长度内的补光次数可以低于图像传感器01在该单位时间长度内的曝光次数，其中，每相邻两次补光的间隔时间段内，间隔一次或多次曝光。

可选地，由于人眼容易将第一补光装置021进行近红外光补光的颜色与交通灯中的红灯的颜色混淆，所以，参见图2，补光器02还可以包括第二补光装置022，第二补光装置022用于进行可见光补光。这样，如果第二补光装置022至少在第一预设曝光的部分曝光时间提供可见光补光，也即是，至少在第一预设曝光的部分曝光时间段内进行近红外补光和可见光补光，这两种光的混合颜色可以区别于交通灯中的红灯的颜色，从而避免了人眼将补光器02进行近红外补光的颜色与交通灯中的红灯的颜色混淆。另外，如果第二补光装置022在第二预设曝光的曝光时间段内提供可见光补光，由于第二预设曝光的曝光时间段内可见光的强度不是特别高，因此，在第二预设曝光的曝光时间段内进行可见光补光时，还可以提高第二图像信号中的可见光的亮度，进而保证图像采集的质量。

在一些实施例中，第二补光装置022可以用于以常亮方式进行可见光补光；或者，第二补光装置022可以用于以频闪方式进行可见光补光，其中，至少在第一预设曝光的部分曝光时间段内存在可见光补光，在第二预设曝光的整个曝光时间段内不存在可见光补光；或者，第二补光装置022可以用于以频闪方式进行可见光补光，其中，至少在第一预设曝光的整个曝光时间段内不存在可见光补光，在第二预设曝光的部分曝光时间段内存在可见光补光。当第二补光装置022常亮方式进行可见光补光时，不仅可以避免人眼将第一补光装置021进行近红外补光的颜色与交通灯中的红灯的颜色混淆，还可以提高第二图像信号中的可见光的亮度，进而保证图像采集的质量。当第二补光装置022以频闪方式进行可见光补光时，可以避免人眼将第一补光装置021进行近红外补光的颜色与交通灯中的红灯的颜色混淆，或者，可以提高第二图像信号中的可见光的亮度，进而保证图像采集的质量，而且还可以减少第二补光装置022的补光次数，从而延长第二补光装置022的使用寿命。

一些实施例中，所述滤光组件(03)还包括第二滤光片和切换部件，所述第一滤光片(031)和所述第二滤光片均与所述切换部件连接；所述切换部件，用于将所述第二滤光片切换到所述图像传感器(01)的入光侧，或者将第一滤光片031切换到该图像传感器01的入光侧。例如，在白天时候，将该第二滤光片032切换到该图像传感器01的入光侧，在夜晚时候，将第一滤光片031切换到该图像传感器01的入光侧。在所述第二滤光片切换到所述图像传感器(01)的入光侧之后，所述第二滤光片使可见光通过，阻挡近红外光，所述图像传感器(01)，用于通过曝光产生并输出第三图像信号。

需要说明的是，切换部件用于将第二滤光片切换到图像传感器01的入光侧，也可以理解为第二滤光片替换第一滤光片031在图像传感器01的入光侧的位置。在第二滤光片切换到图像传感器01的入光侧之后，第一补光装置021可以处于关闭状态也可以处于开启状态。

一些实施例中，在所述图像传感器(01)进行所述第一预设曝光时，所述补光器(02)的补光状态为第一补光状态，在所述图像传感器(01)进行所述第二预设曝光时，所述补光器(02)的补光状态为第二补光状态。这样，本实施例中的第一补光状态和第二补光状态可以为下述实施方式中的任一种：

第一种可能的实施方式中，第一补光状态为：第一补光装置(021)进行红外光补光，第二补光装置(022)不进行可见光补光；第二补光状态为：第一补光装置(021)不进行红外光补光，第二补光装置(022)不进行可见光补光。

第二种可能的实施方式中，第一补光状态为：第一补光装置(021)进行红外光补光，第二补光装置(022)以常亮方式进行可见光补光；第二补光状态为：第一补光装置(021)不进行红外光补光，第二补光装置(022)以常亮方式进行可见光补光。

第三种可能的实施方式中，第一补光状态为：第一补光装置(021)进行红外光补光，第二补光装置(022)在第一预设曝光的整个曝光时间段内不存在可见光补光；第二补光状态为：第一补光装置(021)不进行红外光补光，第二补光装置(022)至少在第二预设曝光的部分曝光时间段内存在可见光补光。

第四种可能的实施方式中，第一补光状态为：第一补光装置(021)进行红外光补光，第二补光装置(022)至少在第一预设曝光的部分曝光时间段内存在可见光补光；第二补光状态为：第一补光装置(021)不进行红外光补光，第二补光装置(022)在第二预设曝光的整个曝光时间段内不存在可见光补光。

上述各种实施方式中，当第一补光状态中存在近红外光补光时，所述第一补光状态对应的补光时间段与所述第二预设曝光对应的曝光时间段无交集，使得第二预设曝光产生的第二图像信号为可见光图像，第一预设曝光产生的第一图像信号为近红外光图像，从而实现第一预设曝光和第二预设曝光产生的为不同光谱的图像。

下面结合图3至图7所示的几种可能的实施方式，描述第一补光状态对应的补光时间段和第二预设曝光对应的曝光时间段之间的关系。后续的图3至图7中，图像信号左侧的虚线表示图像传感器曝光的开始时刻，图像信号右侧的实线表示图像传感器曝光的结束时刻。相邻的两次曝光之间有一定的时间间隔。

图3为本申请实施例提供的曝光时间与补光时间的示意图之一。如图3所示，所述第一补光状态的补光开始时刻晚于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻早于或等于所述第一预设曝光的曝光结束时刻。这样，即可实现第一预设曝光和第二预设曝光对应的补光状态不同，即在第一预设曝光时存在近红外光补光，在第二预设曝光时不存在近红外光补光，从而通过第一预设曝光和第二预设曝光能够产生光谱不同的图像。

图4为本申请实施例提供的曝光时间与补光时间的示意图之二。如图4所示，所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光、后一次所述第二预设曝光对应的曝光时间段都无交集。这样，即可实现第一预设曝光和第二预设曝光对应的补光状态不同，即在第一预设曝光时存在近红外光补光，在第二预设曝光时不存在近红外光补光，从而通过第一预设曝光和第二预设曝光能够产生光谱不同的图像。

图5为本申请实施例提供的曝光时间与补光时间的示意图之三。如图5所示，所述第一补光状态的补光开始时刻与所述第一预设曝光的曝光开始时刻相同，所述第一补光状态的补光结束时刻与所述第一预设曝光的曝光结束时刻相同。这样，即可实现第一预设曝光和第二预设曝光对应的补光状态不同，即在第一预设曝光时存在近红外光补光，在第二预设曝光时不存在近红外光补光，从而通过第一预设曝光和第二预设曝光能够产生光谱不同的图像。

图6为本申请实施例提供的曝光时间与补光时间的示意图之四。所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻早于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光对应的曝光时间段无交集。这样，即可实现第一预设曝光和第二预设曝光对应的补光状态不同，即在第一预设曝光时存在近红外光补光，在第二预设曝光时不存在近红外光补光，从而通过第一预设曝光和第二预设曝光能够产生光谱不同的图像。

图7为本申请实施例提供的曝光时间与补光时间的示意图之五。如图7所示，所述第一补光状态的补光开始时刻晚于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的后一次所述第二预设曝光对应的曝光时间段无交集。这样，即可实现第一预设曝光和第二预设曝光对应的补光状态不同，即在第一预设曝光时存在近红外光补光，在第二预设曝光时不存在近红外光补光，从而通过第一预设曝光和第二预设曝光能够产生光谱不同的图像。

需要说明的是，图3至图7所示的仅为几种可能的示例，第一预设曝光和第二预设曝光的排序也可以不限于这些示例。

本申请实施例中，第一补光装021进行近红外光补光时通过第一滤光片031的近红外光的强度高于第一补光装置021未进行近红外补光时通过第一滤光片031的近红外光的强度。

由于第一补光装置021在对外部场景进行近红外补光时，入射到物体表面的近红外光可能会被物体反射，从而进入到第一滤光片031中。并且由于通常情况下，环境光可以包括可见光和近红外光，且环境光中的近红外光入射到物体表面时也会被物体反射，从而进入到第一滤光片031中。因此，在进行近红外补光时通过第一滤光片031的近红外光可以包括第一补光装置021进行近红外补光时经物体反射进入第一滤光片031的近红外光，在不进行近红外补光时通过第一滤光片031的近红外光可以包括第一补光装置021未进行近红外补光时经物体反射进入第一滤光片031的近红外光。也即是，在进行近红外补光时通过第一滤光片031的近红外光包括第一补光装置021发出的且经物体反射后的近红外光，以及环境光中经物体反射后的近红外光，在不进行近红外补光时通过第一滤光片031的近红外光包括环境光中经物体反射后的近红外光。

另外，由于环境光中的近红外光的强度低于第一补光装置021发出的近红外光的强度，因此，第一补光装置021进行近红外补光时通过第一滤光片031的近红外光的强度高于第一补光装置021未进行近红外补光时通过第一滤光片031的近红外光的强度。

由于在进行近红外补光时，通过第一滤光片031的近红外光可以包括第一补光装置021进行近红外光补光时经物体反射进入第一滤光片031的近红外光，以及环境光中的经物体反射后的近红外光。所以此时进入滤光组件03的近红外光的强度较强。但是，在不进行近红外补光时，通过第一滤光片031的近红外光包括环境光中经物体反射进入滤光组件03的近红外光。由于没有第一补光装置021进行补光的近红外光，所以此时通过第一滤光片031的近红外光的强度较弱。因此，根据第一预设曝光产生并输出的第一图像信号包括的近红外光的强度，要高于根据第二预设曝光产生并输出的第二图像信号包括的近红外光的强度。

第一补光装置021进行近红外补光的中心波长和/或波段范围可以有多种选择，本申请实施例中，为了使第一补光装置021和第一滤光片031有更好的配合，可以对第一补光装置021进行近红外补光的中心波长进行设计，以及对第一滤光片031的特性进行选择，从而使得在第一补光装置021进行近红外补光的中心波长为设定特征波长或者落在设定特征波长范围时，通过第一滤光片031的近红外光的中心波长和/或波段宽度可以达到约束条件。该约束条件主要是用来约束通过第一滤光片031的近红外光的中心波长尽可能准确，以及通过第一滤光片031的近红外光的波段宽度尽可能窄，从而避免出现因近红外光波段宽度过宽而引入波长干扰。

其中，第一补光装置021进行近红外补光的中心波长可以为第一补光装置021发出的近红外光的光谱中能量最大的波长范围内的平均值，也可以理解为第一补光装置021发出的近红外光的光谱中能量超过一定阈值的波长范围内的中间位置处的波长。

其中，设定特征波长或者设定特征波长范围可以预先设置。作为一种示例，第一补光装置021进行近红外补光的中心波长可以为750±10纳米的波长范围内的任一波长；或者，第一补光装置021进行近红外补光的中心波长为780±10纳米的波长范围内的任一波长；或者，第一补光装置021进行近红外补光的中心波长为940±10纳米的波长范围内的任一波长。也即是，设定特征波长范围可以为750±10纳米的波长范围、或者780±10纳米的波长范围、或者940±10纳米的波长范围。示例性地，第一补光装置021进行近红外补光的中心波长为940纳米，第一补光装置021进行近红外补光的波长和相对强度之间的关系如图8所示。从图8可以看出，第一补光装置021进行近红外补光的波段范围为900纳米～1000纳米，其中，在940纳米处，近红外光的相对强度最高。

由于在进行近红外补光时，通过第一滤光片031的近红外光大部分为第一补光装置021进行近红外补光时经物体反射进入第一滤光片031的近红外光，因此，在一些实施例中，上述约束条件可以包括：通过第一滤光片031的近红外光的中心波长与第一补光装置021进行近红外补光的中心波长之间的差值位于波长波动范围内，作为一种示例，波长波动范围可以为0～20纳米。

其中，通过第一滤光片031的近红外补光的中心波长可以为第一滤光片031的近红外光通过率曲线中的近红外波段范围内波峰位置处的波长，也可以理解为第一滤光片031的近红外光通过率曲线中通过率超过一定阈值的近红外波段范围内的中间位置处的波长。

为了避免通过第一滤光片031的近红外光的波段宽度过宽而引入波长干扰，在一些实施例中，上述约束条件可以包括：第一波段宽度可以小于第二波段宽度。其中，第一波段宽度是指通过第一滤光片031的近红外光的波段宽度，第二波段宽度是指被第一滤光片031阻挡的近红外光的波段宽度。应当理解的是，波段宽度是指光线的波长所处的波长范围的宽度。例如，通过第一滤光片031的近红外光的波长所处的波长范围为700纳米～800纳米，那么第一波段宽度为800纳米减去700纳米，即100纳米。换句话说，通过第一滤光片031的近红外光的波段宽度小于第一滤光片031阻挡的近红外光的波段宽度。

例如，参见图9，图9为第一滤光片031可以通过的光的波长与通过率之间的关系的一种示意图。入射到第一滤光片031的近红外光的波段为650纳米～1100纳米，第一滤光片031可以使波长位于380纳米～650纳米的可见光通过，以及波长位于900纳米～1100纳米的近红外光通过，阻挡波长位于650纳米～900纳米的近红外光。也即是，第一波段宽度为1000纳米减去900纳米，即100纳米。第二波段宽度为900纳米减去650纳米，加上1100纳米减去1000纳米，即350纳米。100纳米小于350纳米，即通过第一滤光片031的近红外光的波段宽度小于第一滤光片031阻挡的近红外光的波段宽度。以上关系曲线仅是一种示例，对于不同的滤光片，能够通过滤光片的近红光波段的波段范围可以有所不同，被滤光片阻挡的近红外光的波段范围也可以有所不同。

为了避免在非近红外补光的时间段内，通过第一滤光片031的近红外光的波段宽度过宽而引入波长干扰，在一些实施例中，上述约束条件可以包括：通过第一滤光片031的近红外光的半带宽小于或等于50纳米。其中，半带宽是指通过率大于50％的近红外光的波段宽度。

为了避免通过第一滤光片031的近红外光的波段宽度过宽而引入波长干扰，在一些实施例中，上述约束条件可以包括：第三波段宽度可以小于参考波段宽度。其中，第三波段宽度是指通过率大于设定比例的近红外光的波段宽度，作为一种示例，参考波段宽度可以为50纳米～100纳米的波段范围内的任一波段宽度。设定比例可以为30％～50％中的任一比例，当然设定比例还可以根据使用需求设置为其他比例，本申请实施例对此不做限定。换句话说，通过率大于设定比例的近红外光的波段宽度可以小于参考波段宽度。

例如，参见图9，入射到第一滤光片031的近红外光的波段为650纳米～1100纳米，设定比例为30％，参考波段宽度为100纳米。从图9可以看出，在650纳米～1100纳米的近红外光的波段中，通过率大于30％的近红外光的波段宽度明显小于100纳米。

由于第一补光装置021至少在第一预设曝光的部分曝光时间段内提供近红外补光，在第二预设曝光的整个曝光时间段内不提供近红外补光，而第一预设曝光和第二预设曝光为图像传感器01的多次曝光中的其中两次曝光，也即是，第一补光装置021在图像传感器01的部分曝光的曝光时间段内提供近红外补光，在图像传感器01的另外一部分曝光的曝光时间段内不提供近红外补光。所以，第一补光装置021在单位时间长度内的补光次数可以低于图像传感器01在该单位时间长度内的曝光次数，其中，每相邻两次补光的间隔时间段内，间隔一次或多次曝光。

第一图像信号是第一预设曝光产生并输出的，第二图像信号是第二预设曝光产生并输出的，在产生并输出第一图像信号和第二图像信号之后，可以对第一图像信号和第二图像信号进行处理。在某些情况下，第一图像信号和第二图像信号的用途可能不同，所以在一些实施例中，第一预设曝光与第二预设曝光的至少一个曝光参数可以不同。作为一种示例，该至少一个曝光参数可以包括但不限于曝光时间、模拟增益、数字增益、光圈大小中的一种或多种。其中，曝光增益包括模拟增益和/或数字增益。

在一些实施例中。可以理解的是，与第二预设曝光相比，在进行近红外补光时，图像传感器01感应到的近红外光的强度较强，相应地产生并输出的第一图像信号包括的近红外光的亮度也会较高。但是较高亮度的近红外光不利于外部场景信息的获取。而且在一些实施例中，曝光增益越大，图像传感器01输出的图像信号的亮度越高，曝光增益越小，图像传感器01输出的图像信号的亮度越低，因此，为了保证第一图像信号包含的近红外光的亮度在合适的范围内，在第一预设曝光和第二预设曝光的至少一个曝光参数不同的情况下，作为一种示例，第一预设曝光的曝光增益可以小于第二预设曝光的曝光增益。这样，在第一补光装置021进行近红外补光时，图像传感器01产生并输出的第一图像信号包含的近红外光的亮度，不会因第一补光装置021进行近红外补光而过高。

在另一些实施例中，曝光时间越长，图像传感器01得到的图像信号包括的亮度越高，并且外部场景中的运动的对象在图像信号中的运动拖尾越长；曝光时间越短，图像传感器01得到的图像信号包括的亮度越低，并且外部场景中的运动的对象在图像信号中的运动拖尾越短。因此，为了保证第一图像信号包含的近红外光的亮度在合适的范围内，且外部场景中的运动的对象在第一图像信号中的运动拖尾较短。在第一预设曝光和第二预设曝光的至少一个曝光参数不同的情况下，作为一种示例，第一预设曝光的曝光时间可以小于第二预设曝光的曝光时间。这样，在第一补光装置021进行近红外补光时，图像传感器01产生并输出的第一图像信号包含的近红外光的亮度，不会因第一补光装置021进行近红外补光而过高。并且较短的曝光时间使外部场景中的运动的对象在第一图像信号中出现的运动拖尾较短，从而有利于对运动对象的识别。示例性地，第一预设曝光的曝光时间为40毫秒，第二预设曝光的曝光时间为60毫秒等。

值得注意的是，在一些实施例中，当第一预设曝光的曝光增益小于第二预设曝光的曝光增益时，第一预设曝光的曝光时间不仅可以小于第二预设曝光的曝光时间，还可以等于第二预设曝光的曝光时间。同理，当第一预设曝光的曝光时间小于第二预设曝光的曝光时间时，第一预设曝光的曝光增益可以小于第二预设曝光的曝光增益，也可以等于第二预设曝光的曝光增益。

在另一些实施例中，第一图像信号和第二图像信号的用途可以相同，例如第一图像信号和第二图像信号都用于智能分析时，为了能使进行智能分析的人脸或目标在运动时能够有同样的清晰度，第一预设曝光与第二预设曝光的至少一个曝光参数可以相同。作为一种示例，第一预设曝光的曝光时间可以等于第二预设曝光的曝光时间，如果第一预设曝光的曝光时间和第二预设曝光的曝光时间不同，会出现曝光时间较长的一路图像信号存在运动拖尾，导致两路图像信号的清晰度不同。同理，作为另一种示例，第一预设曝光的曝光增益可以等于第二预设曝光的曝光增益。

值得注意的是，在一些实施例中，当第一预设曝光的曝光时间等于第二预设曝光的曝光时间时，第一预设曝光的曝光增益可以小于第二预设曝光的曝光增益，也可以等于第二预设曝光的曝光增益。同理，当第一预设曝光的曝光增益等于第二预设曝光的曝光增益时，第一预设曝光的曝光时间可以小于第二预设曝光的曝光时间，也可以等于第二预设曝光的曝光时间。

其中，图像传感器01可以为单个CMOS传感器，包括多个感光通道，每个感光通道可以用于感应至少一种可见光波段的光，以及感应近红外波段的光。也即是，每个感光通道既能感应至少一种可见光波段的光，又能感应近红外波段的光。可选地，该多个感光通道可以用于感应至少两种不同的可见光波段的光。

在一些实施例中，该多个感光通道可以包括R感光通道、G感光通道、B感光通道、Y感光通道、W感光通道和C感光通道中的至少两种。其中，R感光通道用于感应红光波段和近红外波段的光，G感光通道用于感应绿光波段和近红外波段的光，B感光通道用于感应蓝光波段和近红外波段的光，Y感光通道用于感应黄光波段和近红外波段的光。由于在一些实施例中，可以用W来表示用于感应全波段的光的感光通道，在另一些实施例中，可以用C来表示用于感应全波段的光的感光通道，所以当该多个感光通道包括用于感应全波段的光的感光通道时，这个感光通道可以是W感光通道，也可以是C感光通道。也即是，在实际应用中，可以根据使用需求来选择用于感应全波段的光的感光通道。示例性地，图像传感器01可以为RGB传感器、RGBW传感器，或RCCB传感器，或RYYB传感器。其中，RGB传感器中的R感光通道、G感光通道和B感光通道的分布方式可以参见图10，RGBW传感器中的R感光通道、G感光通道、B感光通道和W感光通道的分布方式可以参见图11，RCCB传感器中的R感光通道、C感光通道和B感光通道分布方式可以参见图12，RYYB传感器中的R感光通道、Y感光通道和B感光通道分布方式可以参见图13。

在另一些实施例中，有些感光通道也可以仅感应近红外波段的光，而不感应可见光波段的光。作为一种示例，该多个感光通道可以包括R感光通道、G感光通道、B感光通道、IR感光通道中的至少两种。其中，R感光通道用于感应红光波段和近红外波段的光，G感光通道用于感应绿光波段和近红外波段的光，B感光通道用于感应蓝光波段和近红外波段的光，IR感光通道用于感应近红外波段的光。

示例地，图像传感器01可以为RGBIR传感器，其中，RGBIR传感器中的每个IR感光通道都可以感应近红外波段的光，而不感应可见光波段的光。

其中，当图像传感器01为RGB传感器时，相比于其他图像传感器，如RGBIR传感器等，，RGB传感器采集的RGB信息更完整，RGBIR传感器有一部分的感光通道采集不到可见光，所以RGB传感器采集的图像的色彩细节更准确。

值得注意的是，图像传感器01包括的多个感光通道可以对应多条感应曲线。示例性地，参见图14，图14中的R曲线代表图像传感器01对红光波段的光的感应曲线，G曲线代表图像传感器01对绿光波段的光的感应曲线，B曲线代表图像传感器01对蓝光波段的光的感应曲线，W(或者C)曲线代表图像传感器01感应全波段的光的感应曲线，NIR(Nearinfrared，近红外光)曲线代表图像传感器01感应近红外波段的光的感应曲线。

其中，多次曝光可以包括奇数次曝光和偶数次曝光，这样，第一预设曝光和第二预设曝光可以包括但不限于如下几种方式：

第一种可能的实现方式，第一预设曝光为奇数次曝光中的一次曝光，第二预设曝光为偶数次曝光中的一次曝光。这样，多次曝光可以包括按照奇偶次序排列的第一预设曝光和第二预设曝光。例如，多次曝光中的第1次曝光、第3个曝光、第5次曝光等奇数次曝光均为第一预设曝光，第2次曝光、第4次曝光、第6次曝光等偶数次曝光均为第二预设曝光。

第二种可能的实现方式，第一预设曝光为偶数次曝光中的一次曝光，第二预设曝光为奇数次曝光中的一次曝光，这样，多次曝光可以包括按照奇偶次序排列的第一预设曝光和第二预设曝光。例如，多次曝光中的第1次曝光、第3个曝光、第5次曝光等奇数次曝光均为第二预设曝光，第2次曝光、第4次曝光、第6次曝光等偶数次曝光均为第一预设曝光。

第三种可能的实现方式，第一预设曝光为指定的奇数次曝光中的一次曝光，第二预设曝光为除指定的奇数次曝光之外的其他曝光中的一次曝光，也即是，第二预设曝光可以为多次曝光中的奇数次曝光，也可以为多次曝光中的偶数次曝光。

第四种可能的实现方式，第一预设曝光为指定的偶数次曝光中的一次曝光，第二预设曝光为除指定的偶数次曝光之外的其他曝光中的一次曝光，也即是，第二预设曝光可以为多次曝光中的奇数次曝光，也可以为多次曝光中的偶数次曝光。

第五种可能的实现方式，第一预设曝光为第一曝光序列中的一次曝光，第二预设曝光为第二曝光序列中的一次曝光。

第六种可能的实现方式，第一预设曝光为第二曝光序列中的一次曝光，第二预设曝光为第一曝光序列中的一次曝光。

其中，上述多次曝光包括多个曝光序列，第一曝光序列和第二曝光序列为该多个曝光序列中的同一个曝光序列或者两个不同的曝光序列，每个曝光序列包括N次曝光，该N次曝光包括1次第一预设曝光和N-1次第二预设曝光，或者，该N次曝光包括1次第二预设曝光和N-1次第二预设曝光，N为大于2的正整数。

例如，每个曝光序列包括3次曝光，这3次曝光可以包括1次第一预设曝光和2次第二预设曝光，这样，每个曝光序列的第1次曝光可以为第一预设曝光，第2次和第3次曝光为第二预设曝光。也即是，每个曝光序列可以表示为：第一预设曝光、第二预设曝光、第二预设曝光。或者，这3次曝光可以包括1次第二预设曝光和2次第一预设曝光，这样，每个曝光序列的第1次曝光可以为第二预设曝光，第2次和第3次曝光为第一预设曝光。也即是，每个曝光序列可以表示为：第二预设曝光、第一预设曝光、第一预设曝光。

上述仅提供了六种第一预设曝光和第二预设曝光的可能的实现方式，实际应用中，不限于上述六种可能的实现方式，本申请实施例对此不做限定。

综上，当环境光中的可见光强度较弱时，例如夜晚，可以通过第一补光装置021频闪式的补光，使图像传感器01产生并输出包含近红外亮度信息的第一图像信号，以及包含可见光亮度信息的第二图像信号，且由于第一图像信号和第二图像信号均由同一个图像传感器01获取，所以第一图像信号的视点与第二图像信号的视点相同，从而通过第一图像信号和第二图像信号可以获取完整的外部场景的信息。在可见光强度较强时，例如白天，白天近红外光的占比比较强，采集的图像的色彩还原度不佳，可以通过图像传感器01产生并输出的包含可见光亮度信息的第三图像信号，这样即使白天，也可以采集到色彩还原度比较好的图像，也可达到不论可见光强度的强弱，或者说不论白天还是夜晚，均能高效、简便地获取外部场景的真实色彩信息。

本申请利用图像传感器的曝光时序来控制补光装置的近红外补光时序，以便在第一预设曝光的过程中进行近红外补光并产生第一图像信号，在第二预设曝光的过程中不进行近红外补光并产生第二图像信号，这样的数据采集方式，可以在结构简单、降低成本的同时直接采集到亮度信息不同的第一图像信号和第二图像信号，也即通过一个图像传感器就可以获取两种不同的图像信号，使得该图像采集装置更加简便，进而使得获取第一图像信号和第二图像信号也更加高效。并且，第一图像信号和第二图像信号均由同一个图像传感器产生并输出，无需对第一图像信号和第二图像信号进行高精度的配准处理。

基于上述对图像采集装置的描述，该图像采集装置可以通过多次曝光产生并输出第一图像信号和第二图像信号。接下来，以基于上述图1-14所示的实施例提供的图像采集装置来对图像采集方法进行说明。图15为本申请实施例提供的一种图像采集方法的流程示意图。如图15所示，本实施例的方法包括：

S1501：通过所述第一补光装置进行近红外补光，其中，至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光，所述第一预设曝光和所述第二预设曝光为图像传感器的多次曝光中的其中两次曝光。

S1502：通过所述第一滤光片使可见光和部分近红外光通过。

S1503：通过所述图像传感器采用全局曝光方式进行多次曝光，以产生并输出第一图像信号和第二图像信号，所述第一图像信号是根据所述第一预设曝光产生的图像信号，所述第二图像信号是根据所述第二预设曝光产生的图像信号；所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同。

在一种可能的实现中，所述补光器还包括第二补光装置，所述方法还包括：

通过所述第二补光装置进行可见光补光。

在一种可能的实现中，所述滤光组件还包括第二滤光片和切换部件，所述方法还包括：

通过所述切换部件将所述第二滤光片切换到所述图像传感器的入光侧；

通过所述第二滤光片使可见光通过，阻挡近红外光；

通过所述图像传感器进行曝光，以产生并输出第三图像信号。

在一种可能的实现中，所述第二补光装置用于以常亮方式进行可见光补光；

或者，

所述第二补光装置用于以频闪方式进行可见光补光，其中，至少在所述第一预设曝光的部分曝光时间段内存在可见光补光，在所述第二预设曝光的整个曝光时间段内不存在可见光补光；或者

所述第二补光装置用于以频闪方式进行可见光补光，其中，至少在所述第一预设曝光的整个曝光时间段内不存在可见光补光，在所述第二预设曝光的部分曝光时间段内存在可见光补光。

在一种可能的实现中，在所述图像传感器进行所述第一预设曝光时，所述补光器的补光状态为第一补光状态，在所述图像传感器进行所述第二预设曝光时，所述补光器的补光状态为第二补光状态；

所述第一补光状态对应的补光时间段与所述第二预设曝光对应的曝光时间段无交集。

在一种可能的实现中，所述第一补光状态的补光开始时刻晚于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻早于或等于所述第一预设曝光的曝光结束时刻。

在一种可能的实现中，所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光、后一次所述第二预设曝光对应的曝光时间段都无交集。

在一种可能的实现中，所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻早于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光对应的曝光时间段无交集。

在一种可能的实现中，所述第一补光状态的补光开始时刻晚于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的后一次所述第二预设曝光对应的曝光时间段无交集。

在一种可能的实现中，所述第一补光装置进行近红外光补光时通过所述第一滤光片的近红外光的强度高于所述第一补光装置未进行近红外补光时通过所述第一滤光片的近红外光的强度。

在一种可能的实现中，入射到所述第一滤光片的近红外光的波段范围为第一参考波段范围，所述第一参考波段范围为650纳米～1100纳米。

在一种可能的实现中，所述第一补光装置进行近红外补光的中心波长为设定特征波长或者落在设定特征波长范围时，通过所述第一滤光片的近红外光的中心波长和/或波段宽度达到约束条件。

在一种可能的实现中，所述第一补光装置进行近红外补光的中心波长为750±10纳米的波长范围内的任一波长；或者

所述第一补光装置进行近红外补光的中心波长为780±10纳米的波长范围内的任一波长；或者

所述第一补光装置进行近红外补光的中心波长为940±10纳米的波长范围内的任一波长。

在一种可能的实现中，所述约束条件包括：

通过所述第一滤光片的近红外光的中心波长与所述第一补光装置进行近红外补光的中心波长之间的差值位于波长波动范围内，所述波长波动范围为0～20纳米。

在一种可能的实现中，所述约束条件包括：

通过所述第一滤光片的近红外光的半带宽小于或等于50纳米。

在一种可能的实现中，所述约束条件包括：

第一波段宽度小于第二波段宽度；其中，所述第一波段宽度是指通过所述第一滤光片的近红外光的波段宽度，所述第二波段宽度是指被所述第一滤光片阻挡的近红外光的波段宽度。

在一种可能的实现中，所述约束条件为：

第三波段宽度小于参考波段宽度，所述第三波段宽度是指通过率大于设定比例的近红外光的波段宽度，所述参考波段宽度为50纳米～150纳米的波段范围内的任一波段宽度。

在一种可能的实现中，所述设定比例为30％～50％的比例范围内的任一比例。

在一种可能的实现中，所述图像传感器包括多个感光通道，每个感光通道用于感应至少一种可见光波段的光，以及感应近红外波段的光。

在一种可能的实现中，所述多个感光通道用于感应至少两种不同的可见光波段的光。

在一种可能的实现中，所述多个感光通道包括R感光通道、G感光通道、B感光通道、Y感光通道、W感光通道和C感光通道中的至少两种；

其中，R感光通道用于感应红光波段和近红外波段的光，G感光通道用于感应绿光波段和近红外波段的光，B感光通道用于感应蓝光波段和近红外波段的光，Y感光通道用于感应黄光波段和近红外波段的光，W感光通道用于感应全波段的光，C感光通道用于感应全波段的光。

在一种可能的实现中，所述图像传感器为红绿蓝RGB传感器、红绿蓝白RGBW传感器，或红白白蓝RCCB传感器，或红黄黄蓝RYYB传感器。

在一种可能的实现中，所述第一补光装置在单位时间长度内的补光次数低于所述图像传感器在所述单位时间长度内的曝光次数，其中，每相邻两次补光的间隔时间段内，间隔一次或多次曝光。

在一种可能的实现中，所述第一预设曝光与所述第二预设曝光的至少一个曝光参数不同，所述至少一个曝光参数为曝光时间、曝光增益、光圈大小中的一种或多种，所述曝光增益包括模拟增益，和/或，数字增益。

在一种可能的实现中，所述第一预设曝光的曝光增益小于所述第二预设曝光的曝光增益。

在一种可能的实现中，所述第一预设曝光和所述第二预设曝光的至少一个曝光参数相同，所述至少一个曝光参数包括曝光时间、曝光增益、光圈大小中的一种或多种，所述曝光增益包括模拟增益，和/或，数字增益。

在一种可能的实现中，所述第一预设曝光的曝光时间等于所述第二预设曝光的曝光时间。

在一种可能的实现中，所述多次曝光包括奇数次曝光和偶数次曝光；

所述第一预设曝光为奇数次曝光中的一次曝光，所述第二预设曝光为偶数次曝光中的一次曝光；或者

所述第一预设曝光为偶数次曝光中的一次曝光，所述第二预设曝光为奇数次曝光中的一次曝光；或者

所述第一预设曝光为指定的奇数次曝光中的一次曝光，所述第二预设曝光为除指定的奇数次曝光之外的其他曝光中的一次曝光；或者

所述第一预设曝光为指定的偶数次曝光中的一次曝光，所述第二预设曝光为除指定的偶数次曝光之外的其他曝光中的一次曝光；或者，

所述第一预设曝光为第一曝光序列中的一次曝光，所述第二预设曝光为第二曝光序列中的一次曝光；或者

所述第一预设曝光为所述第二曝光序列中的一次曝光，所述第二预设曝光为所述第一曝光序列中的一次曝光；

其中，所述多次曝光包括多个曝光序列，所述第一曝光序列和所述第二曝光序列为所述多个曝光序列中的一个曝光序列或者两个曝光序列，每个曝光序列包括N次曝光，所述N次曝光包括1次第一预设曝光和N-1次第二预设曝光，或者，所述N次曝光包括1次第二预设曝光和N-1次第二预设曝光，所述N为大于2的正整数

需要说明的是，由于本实施例与上述图1-14所示的实施例可以采用同样的发明构思，因此，关于本实施例内容的解释可以参考上述图1-14所示实施例中相关内容的解释，此处不再赘述述。

在本申请实施例中，可以通过图像传感器的多次曝光获取第一图像信号和第二图像信号。这样通过一个图像传感器就可以获取两种不同的图像信号，使得该图像采集装置更加简便，进而使得获取第一图像信号和第二图像信号也更加高效。并且，第一图像信号和第二图像信号均由同一个图像传感器产生并输出，无需对第一图像信号和第二图像信号进行高精度的配准处理。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (13)

1.一种图像采集装置，其特征在于，所述图像采集装置包括：图像传感器(01)、补光器(02)和滤光组件(03)，所述图像传感器(01)位于所述滤光组件(03)的出光侧；

所述图像传感器(01)，用于采用全局曝光方式进行多次曝光，通过所述多次曝光产生并输出第一图像信号和第二图像信号，其中，所述第一图像信号是根据第一预设曝光产生的图像信号，所述第二图像信号是根据第二预设曝光产生的图像信号，所述第一预设曝光和所述第二预设曝光为所述多次曝光中的其中两次曝光，所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同；

所述补光器(02)包括第一补光装置(021)，所述第一补光装置(021)用于进行近红外补光，其中，至少在所述第一预设曝光的部分曝光时间段内进行近红外补光，在所述第二预设曝光的曝光时间段内不进行近红外补光；

所述滤光组件(03)包括第一滤光片(031)，所述第一滤光片(031)使可见光和部分近红外光通过；在所述图像传感器(01)进行所述第一预设曝光时，所述补光器(02)的补光状态为第一补光状态，在所述图像传感器(01)进行所述第二预设曝光时，所述补光器(02)的补光状态为第二补光状态；所述第一补光状态对应的补光时间段与所述第二预设曝光对应的曝光时间段无交集；

所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光、后一次所述第二预设曝光对应的曝光时间段都无交集。

2.根据权利要求1所述的图像采集装置，其特征在于，所述补光器(02)还包括第二补光装置(022)，所述第二补光装置(022)用于以常亮方式进行可见光补光；

或者，

所述第二补光装置(022)用于以频闪方式进行可见光补光，其中，至少在所述第一预设曝光的部分曝光时间段内存在可见光补光，在所述第二预设曝光的整个曝光时间段内不存在可见光补光；或者

所述第二补光装置(022)用于以频闪方式进行可见光补光，其中，至少在所述第一预设曝光的整个曝光时间段内不存在可见光补光，在所述第二预设曝光的部分曝光时间段内存在可见光补光。

3.根据权利要求1所述的图像采集装置，其特征在于，

所述滤光组件(03)还包括第二滤光片(032)和切换部件(033)，所述第一滤光片(031)和所述第二滤光片(032)均与所述切换部件(033)连接；

所述切换部件(033)，用于将所述第二滤光片(032)切换到所述图像传感器(01)的入光侧；

在所述第二滤光片(032)切换到所述图像传感器(01)的入光侧之后，所述第二滤光片(032)使可见光通过，阻挡近红外光，所述图像传感器(01)，用于通过曝光产生并输出第三图像信号。

4.根据权利要求1所述的图像采集装置，其特征在于，

所述第一补光装置(021)进行近红外补光的中心波长为设定特征波长或者落在设定特征波长范围时，通过所述第一滤光片(031)的近红外光的中心波长和/或波段宽度达到约束条件。

5.根据权利要求4所述的图像采集装置，其特征在于，

所述第一补光装置(021)进行近红外补光的中心波长为750±10纳米的波长范围内的任一波长；或者

所述第一补光装置(021)进行近红外补光的中心波长为780±10纳米的波长范围内的任一波长；或者

所述第一补光装置(021)进行近红外补光的中心波长为940±10纳米的波长范围内的任一波长。

6.根据权利要求4所述的图像采集装置，其特征在于，所述约束条件包括下述中的至少一个：

通过所述第一滤光片(031)的近红外光的中心波长与所述第一补光装置(021)进行近红外补光的中心波长之间的差值位于波长波动范围内，所述波长波动范围为0～20纳米；或者

通过所述第一滤光片(031)的近红外光的半带宽小于或等于50纳米；或者

第一波段宽度小于第二波段宽度；其中，所述第一波段宽度是指通过所述第一滤光片(031)的近红外光的波段宽度，所述第二波段宽度是指被所述第一滤光片(031)阻挡的近红外光的波段宽度；或者

第三波段宽度小于参考波段宽度，所述第三波段宽度是指通过率大于设定比例的近红外光的波段宽度，所述参考波段宽度为50纳米～150纳米的波段范围内的任一波段宽度；其中，所述设定比例为30％～50％的比例范围内的任一比例。

7.根据权利要求1所述的图像采集装置，其特征在于，所述图像传感器(01)包括多个感光通道，每个感光通道用于感应至少一种可见光波段的光，以及感应近红外波段的光。

8.根据权利要求7所述的图像采集装置，其特征在于，所述多个感光通道用于感应至少两种不同的可见光波段的光。

9.根据权利要求1所述的图像采集装置，其特征在于，

所述第一预设曝光与所述第二预设曝光的至少一个曝光参数不同，所述至少一个曝光参数为曝光时间、曝光增益、光圈大小中的一种或多种，所述曝光增益包括模拟增益，和/或，数字增益。

10.根据权利要求9所述的图像采集装置，其特征在于，所述第一预设曝光的曝光增益小于所述第二预设曝光的曝光增益。

11.根据权利要求1所述的图像采集装置，其特征在于，所述第一预设曝光和所述第二预设曝光的至少一个曝光参数相同，所述至少一个曝光参数包括曝光时间、曝光增益、光圈大小中的一种或多种，所述曝光增益包括模拟增益，和/或，数字增益。

12.根据权利要求11所述的图像采集装置，其特征在于，所述第一预设曝光的曝光时间等于所述第二预设曝光的曝光时间。

13.一种图像采集的方法，应用于图像采集装置，所述图像采集装置包括图像传感器、补光器和滤光组件，所述图像传感器位于所述滤光组件的出光侧，所述补光器包括第一补光装置，所述滤光组件包括第一滤光片，其特征在于，所述方法包括：

通过所述第一补光装置进行近红外补光，其中，至少在第一预设曝光的部分曝光时间段内进行近红外补光，在第二预设曝光的曝光时间段内不进行近红外补光，所述第一预设曝光和所述第二预设曝光为图像传感器的多次曝光中的其中两次曝光；在所述图像传感器进行所述第一预设曝光时，所述补光器的补光状态为第一补光状态，在所述图像传感器进行所述第二预设曝光时，所述补光器的补光状态为第二补光状态；所述第一补光状态对应的补光时间段与所述第二预设曝光对应的曝光时间段无交集；

所述第一补光状态的补光开始时刻早于或等于所述第一预设曝光的曝光开始时刻，所述第一补光状态的补光结束时刻晚于或等于所述第一预设曝光的曝光结束时刻，且所述第一补光状态对应的补光时间段与当前曝光的前一次所述第二预设曝光、后一次所述第二预设曝光对应的曝光时间段都无交集；

通过所述第一滤光片使可见光和部分近红外光通过；

通过所述图像传感器采用全局曝光方式进行多次曝光，以产生并输出第一图像信号和第二图像信号，所述第一图像信号是根据所述第一预设曝光产生的图像信号，所述第二图像信号是根据所述第二预设曝光产生的图像信号；所述第一预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同，所述第二预设曝光所有行对应的曝光开始时刻相同且所有行对应的曝光结束时刻相同。

Images