CN109218691A - 摄像机和产生彩色图像的方法 - Google Patents

摄像机和产生彩色图像的方法 Download PDF

Info

Publication number
CN109218691A
CN109218691A CN201810597300.0A CN201810597300A CN109218691A CN 109218691 A CN109218691 A CN 109218691A CN 201810597300 A CN201810597300 A CN 201810597300A CN 109218691 A CN109218691 A CN 109218691A
Authority
CN
China
Prior art keywords
pixel
radiation
optical filter
video camera
aperture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810597300.0A
Other languages
English (en)
Inventor
斯蒂芬·伦德贝里
约纳斯·耶尔姆斯特伦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Axis AB
Original Assignee
Axis AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP17209246.2A external-priority patent/EP3343897B1/en
Application filed by Axis AB filed Critical Axis AB
Publication of CN109218691A publication Critical patent/CN109218691A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/75—Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H04N25/571—Control of the dynamic range involving a non-linear response
    • H04N25/575—Control of the dynamic range involving a non-linear response with a response composed of multiple slopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Nonlinear Science (AREA)
  • Blocking Light For Cameras (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Diaphragms For Cameras (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

提出了摄像机和产生彩色图像的方法。提出了一种摄像机，包括：光圈；包括多个像素对的图像传感器，在任一像素对中：第一像素被配置使其检测已经穿过光圈进入摄像机并且已经从光圈经由第一辐射路径前进到图像传感器的辐射，以及第二像素被配置使其检测已经穿过光圈进入摄像机并且从光圈经由第二辐射路径前进到图像传感器的辐射，第二辐射路径不同于第一辐射路径；以及设置在光圈中或其附近的滤光器，其中滤光器包括被配置为阻挡IR辐射或可见光的第一部分和被配置为对于由第一部分所阻挡的波长是透光的第二部分，其中滤光器被设置使得通过第一部分的辐射前进到多个像素对的第一像素，并且使得通过第二部分的辐射前进到多个像素对的第二像素。

Description

摄像机和产生彩色图像的方法
技术领域
本发明涉及产生彩色图像，并且尤其涉及允许在低光照条件下产生彩色图像的摄像机设计。
背景技术
数字摄像机中使用的图像传感器具有波谱响应，该波谱响应具有不可忽略的红外IR分量。这带来机遇和挑战。
机遇在于，在夜晚期间或在低光照条件下，IR分量可以提供关于所成像场景的有用信息。典型地，低光照条件出现在黄昏或黎明期间。其他低光照条件场景是光线不好的房间。低光照条件也可以定义为其中可见光和IR辐射的量是相当的条件，因此，低光照条件也可以称作混合光照条件。
在夜晚期间或在低光照条件下，可以利用来自波谱的IR部分的入射辐射。IR辐射不会包含任何彩色信息，并且代替执行彩色分离，唯一的参数是入射辐射的强度，这可以表现为黑白强度图像(或具有任何所需的色标(color scale))。
挑战发现于白天成像期间，在此期间IR分量的添加可能使在使用数字摄像机捕获到的图像中的彩色平衡失真。在一些情形中，图像传感器的一些或全部像素甚至可能由红外分量完全饱和。
一种保持有益效果同时抑制不太有益的效果的方式是在图像传感器前面的射束路径中添加可移动的IR截止滤光器。以这种方式，IR截止滤光器可以在日光条件期间使用，使得能获取彩色图像。图像传感器的像素然后将以第一方式操作，在该第一方式中，入射光被划分成彩色并被检测作为单个光电检测器上的电荷，由此实现彩色分离。IR截止滤光器在夜晚期间或者在允许IR辐射到达图像传感器的低光照条件下会被移除。图像传感器的像素然后将以第二方式操作，在该第二方式中，由像素测得的唯一参数是入射辐射的强度。因此，基于强度的图像可以被捕捉，并且以黑色和白色来表示。
然而，可能存在这样的情形：将希望甚至在低光照条件下能够捕获彩色分离的图像。
发明内容
鉴于以上，本发明的目的在于提供甚至在低光照条件下捕获彩色分离的图像的装置。
根据第一方面，提供了一种摄像机。该摄像机包括：光圈；包括多个像素对得图像传感器，在任一像素对中：第一像素被配置为使该第一像素检测已经穿过光圈进入摄像机并从光圈经由第一辐射路径前进到图像传感器的辐射，以及第二像素被配置为使该第二像素检测已经穿过光圈进入摄像机并从光圈经由第二辐射路径前进到图像传感器的辐射，第二辐射路径不同于第一辐射路径；以及设置在光圈中或其附近的滤光器，其中滤光器包括被配置为阻挡IR辐射或可见光的第一部分和被配置为对于由第一部分所阻挡的波长是透光的第二部分，其中滤光器被设置使得通过第一部分的辐射前进到多个像素对的第一像素，并且使得通过第二部分的辐射前进到多个像素对的第二像素。
因此，实现了改进的成像。这归因于IR辐射的分量可以通过将由每对第一像素和第二像素中的第一像素和第二像素检测到的辐射比较并对该IR部分补偿来确定。例如，可以通过确定辐射的由图像传感器检测到的IR部分来产生彩色图像。以这种方式，可以获得真彩色表示，即使所成像的场景包含由图像传感器捕获到的IR辐射。
术语“辐射”将被构造为包括在红外波谱范围和可见光谱范围二者中的波谱分量的辐射。
滤光器的第一部分可以被配置为阻挡IR辐射。
滤光器的第一部分可以被配置为阻挡可见光。
滤光器的第二部分可以被配置为对于IR辐射和可见光二者是透光的。
滤光器的第一部分可以被配置为阻挡IR辐射并且滤光器的第二部分可以被配置为阻挡可见光。
滤光器可以固定地定位在光圈中或者光圈附近。因此可以提供具有非常少可移动部件的简单摄像机。滤光器不是必须(通常无法)恰好在光圈平面中，但只要滤光器足够靠近光圈，则滤光器靠近光圈的哪一侧无关紧要。
滤光器必须靠近光圈。滤光器不是必须(通常无法)恰好在光圈平面中，但只要滤光器足够靠近光圈，则滤光器靠近光圈的哪一侧无关紧要。
滤光器可以是可移动的，使得该滤光器可以定位在第一辐射路径和第二辐射路径中并且从该第一辐射路径和第二辐射路径收回。因此，将可能的是使摄像机处于不同模式，例如其中具有第一部分和第二部分的滤光器被用于基于由多个像素对的每个第一像素和每个第二像素检测到的辐射量来计算场景中的IR辐射的比例的白天模式，以及其中滤光器被移除并且图像传感器的全波谱响应被用于产生黑白图像的夜晚模式。
滤光器在场景包括可见光和IR辐射二者的情况下是有用的。在这些情形中，可能的是补偿IR辐射并获得良好的彩色保真度。这在混合光照(低光照，例如黄昏和黎明)中是特别有用的，其中在当今的实施方式中，使用开关以仅记录移除了IR截止滤光器的辐射量。这在可见光水平变得太低时是需要的。在白天光照或良好光照下，不需要IR辐射，因为存在很多可见光。然而，根据本发明设置的摄像机使补偿IR辐射成为可能。在传统的监视摄像机中，这是在插入IR截止滤光器时。
在夜晚或者在其他相当低光照中，基本上不存在可见光以及至少存在比可见光更多的IR辐射，因此将非常难以产生彩色图像。因此，可以在夜晚移除滤光器。这(通过不阻挡任何IR辐射)使得尽可能多的辐射到达图像传感器。使用本发明，可以将切换至夜晚模式放置在较低的光照水平之后的次要位置。
滤波器的划分可以与第一像素和第二像素对准使得：IR辐射将不到达像素对中的第一像素，并且IR辐射将到达像素对中的第二像素。
图像传感器的每个像素可以属于各自的像素对。
在摄像机被暴露于包括可见光和IR辐射二者的辐射时，图像传感器可以被配置为记录指示到达多个像素对的每个像素对的辐射量的数值。摄像机可以进一步包括处理单元，该处理单元被配置为：对于多个像素对的第一像素中的每个第一像素，确定指示由各自的第一像素检测到的第一辐射量的数值，对于多个像素对的第二像素中的每个第二像素，确定指示由各自的第二像素检测到的第二辐射量的数值，基于对于多个像素对的第一像素和第二像素中的每个第一像素和每个第二像素所确定的第一辐射量和第二辐射量，计算场景中的IR辐射的比例，以及基于计算得到的IR辐射的比例，通过补偿由摄像机捕获到的图像中的IR贡献来产生场景的彩色图像。
根据第二方面，提供了一种产生场景的彩色图像的方法，该场景由暴露于包括可见光和IR辐射二者的辐射的摄像机捕获。该方法包括：检测指示多个像素对的每个像素对中的辐射量的数值，其中每个像素对包括第一像素和第二像素，对于多个像素对的第一像素中的每个第一像素，确定指示由各自的第一像素检测到的第一辐射量的数值，对于多个像素对的第二像素中的每个第二像素，确定指示由各自的第二像素检测到的第二辐射量的数值，基于对于多个像素对的第一像素和第二像素中的每个第一像素和每个第二像素所确定的第一辐射量和第二辐射量，计算场景中的IR辐射的比例，以及基于计算得到的IR辐射的比例，通过补偿由摄像机捕获到的图像中的IR贡献来产生场景的彩色图像。
该方法可以进一步包括阻挡IR辐射或可见光到达多个像素对的第一像素，以及允许被阻挡到达多个像素对的第一像素的波长到达多个像素对的第二像素。
摄像机的上述特征在可应用时也适用于该第二方面。为了避免不适当的重复，参照上述内容。
根据第三方面，提供了一种非暂时性计算机可读存储介质。该非暂时性计算机可读存储介质具有存储在其上的计算机可读程序代码，该计算机可读程序代码在具有处理能力的设备上执行时被配置为执行根据第二方面的方法。
根据以下给出的详细描述，本发明的进一步适用范围将变得显而易见。然而，应当理解的是，尽管指出了本发明的优选实施例，但是详细描述和具体示例仅仅是以阐释的方式给出的，因为根据这些详细描述，在本发明的范围内的各种改变和修改对于本领域技术人员而言将变得显而易见。
因此，应当理解的是，本发明不限于所描述的设备的特定组成部分或所描述的方法的步骤，因为这样的设备和方法可以变化。还应当理解的是，在此所使用的术语仅用于描述特定实施例的目的，并不旨在是限制性的。必须注意的是，如在说明书和所附权利要求中所使用的，冠词“一”、“一个”、“该”和“所述”旨在表示存在一个或多个元件，除非上下文以其他方式明确指出。因此，例如，对“一个单元”或“该单元”的引用可以包括若干设备，等等。此外，词语“包括”、“包含”、“含有”和类似措词不排除其他元件或步骤。
附图说明
现在将参照示出了本发明的实施例的附图来更详细地描述本发明的以上和其他方面。这些附图不应被认为将本发明限制于特定实施例；相反，它们被用于解释和理解本发明。
如附图所示，为了说明的目的，层和区域的大小可以被放大，并且因此被提供以说明本发明的实施例的一般结构。相同的附图标记始终指代相同的元件。
图1示出了摄像机。
图2a、图2b和图2c示出了包括像素对的图像传感器的不同实施例。
图3a、图3b和图3c示出了滤光器的不同实施例。
图4a、图4b和图4c示出了滤光器的不同配置以及它们如何阻挡IR辐射和/或可见光。
图5示出了对于图像传感器的红色、绿色和蓝色像素的响应曲线。
图6是产生彩色图像的方法的流程图。
具体实施方式
现在将参照其中示出了本发明的当前优选实施例的附图在下文中更全面描述本发明。然而，本发明可以以许多不同形式具体化并且不应被解释为限于在此阐述的实施例；相反，提供这些实施例是为了彻底性和完整性，并且将本发明的范围完全传达给本领域技术人员。
图1示出了具有图像传感器102和摄像机镜头外壳104的摄像机100。摄像机可以是录像机。摄像机100可以是监视摄像机。
摄像机镜头外壳104和图像传感器102被设置使得经由摄像机镜头外壳104进入摄像机100的辐射与图像传感器102相互作用。因此，摄像机被配置为捕获由摄像机镜头外壳104的镜头系统108观察到的场景的图像。进入摄像机100的辐射典型地包括可见光和IR辐射二者。
为了捕获场景的图像，图像传感器102包括分布在图像传感器102的平面上方的多个像素。图像传感器的像素典型地对于可见光和IR辐射二者或者更具体地对于近红外辐射(NIR)是敏感的。如果透射的辐射被完全波谱分解，则将可能容易地监视并估算不同颜色的可见光和IR辐射的比例，但是应当注意的是，通常图像传感器102(和相关联的组件，包括例如图像处理器120)将至多将入射辐射分类成红色、绿色和蓝色分量，每个颜色分量包括IR分量(这在图5中示出)，以便能够再生彩色图像。在图5中，例示了对于图像传感器的红色、绿色和蓝色像素的响应曲线。通常不可能完全隔离IR分量。对于一些实施方式，IR截止滤光器被用于在辐射到达图像传感器之前阻挡辐射的IR分量。原因在于，向图像传感器引入IR辐射会使得由摄像机控制器执行的颜色校正失真，因为参照图5，IR辐射会影响所有的像素，并且需要IR截止滤光器以能够提供真实的颜色表示。
摄像机镜头外壳104包括镜头系统108和光圈110。
光圈110也可以称作光阑(diaphragm)。光圈110的角色是阻止光通过，除了穿过光圈110的光之外。光圈110可以是具有固定大小开口的固定光圈。通过具有带有固定大小开口的固定光圈，提供了具有较少可移动部件的摄像机。替代地，光圈110可以是其中光圈开口的大小可以变化的可变光圈。通过控制光圈110的开口的大小，可以控制到达图像传感器102的辐射量，这从在摄像机中使用的常规可变光圈当然是众所周知的。
光圈110被放置在镜头系统108的所谓光圈挡平面中，或者更确切地说物理上尽可能靠近光圈挡平面。在本公开的其余部分中，光圈挡平面将简称为光圈挡(aperturestop)。在常规配置中，光圈挡的平面表示其中不存在与图像传感器102的平面的空间相关性的位置。对于理想的单镜头系统，光圈挡将与光轴正交而被定位在镜头的中部。光圈挡限制来自对象的每个点的多少光到达共轭像点(在我们的情形中图像传感器)。光圈挡因此限定了在射束路径中的平面，并且有时术语“光圈平面”用于相同特征。该平面的特征是其中光圈大小的改变将至少在理想情形中均等地影响整个图像平面的位置。进一步对于已经讨论过的内容，光圈挡的特征暗示光圈的大小将仅影响到达图像传感器102的光的量，而不是影响真实图像。更具体地，不会在图像平面(即在图像传感器102的平面)中产生任何阴影或类似效果或伪像。出于这样的原因，标准操作规程是将光圈110(光阑)定位在光圈挡中。在本描述的上下文内，“光圈”与设置在光圈挡中的或其附近的可变光圈或固定大小光圈相对应。滤光器应当优选地足够靠近光圈以使得通过滤光器的所有光均等地影响图像传感器。
返回至图像传感器102，图像传感器102的至少一些像素属于多个像素对。因此，图像传感器102包括多个像素对。在文献中多个像素对通常称作相位像素、相位检测像素或双像素。如用于本发明的、具有多个像素对的图像传感器当今已经被用于执行相位检测自动对焦。一些这种已知的传感器具有分布在传感器上方的相对较少数目的相位像素，然而在其他传感器中，所有像素是相位像素。
图像传感器102的所有像素可以是相位像素。因此，如图2a中所示，图像传感器102的每个像素可以属于各自的像素对。每个像素对包括第一像素200和第二像素202。可选地，图像传感器102可以具有分布在传感器区域上方的较少数目的相位像素。因此，如图2b和图2c中所示，图像传感器102的像素的子集可以属于各自的像素对。
在每个像素对中，第一像素200被配置使其检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第一辐射路径前进到图像传感器102的辐射，并且第二像素202被配置使其检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第二辐射路径前进到图像传感器102的辐射。第二辐射路径不同于第一辐射路径。第二辐射路径可以与第一辐射路径分离。因此，第一辐射路径和第二辐射路径可以是不重叠的。
在每个像素对中，可以遮蔽第一半的第一像素200使得第一像素200检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第一辐射路径前进到图像传感器102的辐射，并且可以遮蔽第二半的第二像素202使得第二像素202检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第二辐射路径前进到图像传感器102的辐射。第二半可以与第一半互补。
在每个像素对中，可以成形第一像素200使得第一像素200检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第一辐射路径前进到图像传感器102的辐射，并且可以成形第二像素202使得第二像素202检测已经穿过光圈110进入摄像机100并且已经从光圈110经由第二辐射路径前进到图像传感器102的辐射。第二像素202相对于第一像素200可以互补地成形。
摄像机镜头外壳104进一步包括滤光器112。滤光器112被设置在光圈110中或者光圈110附近。滤光器112优选地足够靠近光圈平面使得仅影响光的量而不是空间图像。滤光器112在光圈110中或者光圈110附近并因此靠近光圈挡的平面具有额外的益处。这因为在常规配置中光圈挡的平面表示其中不存在与图像传感器102的平面的空间相关性的位置。
在滤光器112被设置在光圈110附近的情形中，滤光器112可以被设置在光圈110和图像传感器102之间，或者被设置在光圈的外部。
如图3a、图3b和图3c中所示，滤光器112包括配置为阻挡IR辐射或可见光的第一部分300，以及配置为对于由第一部分所阻挡的波长是透光的第二部分302。
滤光器112可以由对于可见光和IR辐射是透光的材料制成。这种材料的示例是玻璃和塑料。滤光器可以包括实心薄片。薄片可以部分地由一个或多个涂层覆盖。滤光器112的具有一个或多个涂层的部分可以是滤光器112的第一部分300。同样滤光器112的第二部分302可以由一个或多个涂层覆盖。然而，滤光器的第二部分302也可以不由任何波长阻挡涂层覆盖。一个或多个涂层的具体成分可以阻挡具有特定波长范围内的波长的辐射，并且可以允许具有另一特定波长范围内的波长的辐射通过。将结合图4a、图4b和图4c进一步讨论这点。
正如图3a中所示，可以进行滤光器112的划分，使得第一部分300表示滤光器112的第一半，以及第二部分302表示滤光器112的第二半，第二半与第一半互补。然而，可以不同地进行划分，现在将结合图3b和图3c进一步讨论。
图3b和图3c示出了具有比第二部分302大的第一部分300的滤光器112的两个不同的例示实施例。根据这些例示实施例，第一部分300被配置为阻挡IR辐射。图3b和图3c中例示的滤光器设计仅是其中第一部分300大于第二部分302的许多可能设计之中的两个示例。通过使滤光器112的IR阻挡部分大于滤光器112的非IR阻挡部分，减小了IR辐射泄漏到像素对之外的并不期望检测IR辐射的像素的风险。但是，这可以以场景中的IR辐射估算可以不太精确为代价来实现，因为第二路径中的像素将获得已滤光辐射和未滤光辐射的混合物。根据图3c中所示的滤光器设计，滤光器112可以具有双重功能。除了部分阻挡IR辐射之外，如在本公开的上下文内所讨论的对于低光照条件是有用的，滤光器112也可以在日光条件期间被用作IR截止滤光器。这是因为在日光条件期间，可变光圈形式的光圈110在大小方面典型地被减小使得该光圈110在位于滤光器112的第一部分300内的区域306内操作。采用滤光器的这种设计，如果像素对中的像素被形成为具有不同大小，则可以缓解第二路径中混合已滤光辐射和未滤光辐射的上述问题，使得像素接收不同量的光。
滤光器112可以是可移动的，使得该滤光器112可以定位在第一辐射路径和第二辐射路径中并且从第一辐射路径和第二辐射路径收回。可选地，滤光器112可以固定地定位在光圈110中或其附近。
滤光器112和图像传感器102被设置使得滤光器112的划分与多个像素对的第一像素200和第二像素202的定向对准或平行。对准将导致第一像素200将接收已经通过滤光器112的第一部分300的辐射，并且第二像素202将接收已经通过滤光器112的第二部分302的辐射。滤光器112和图像传感器102因此相对于彼此设置使得通过滤光器112的第一部分300的辐射前进到多个像素对的第一像素200，并且使得通过滤波器112的第二部分302的辐射前进到多个像素对的第二像素202。可以进行滤光器112与图像传感器102的对准使得滤光器112的划分被设置为与图像传感器102的第一像素200和第二像素202的定向平行。
在所示的实施例中，像素对以及滤光器被划分成左侧部分和右侧部分。应当注意的是，其他划分也是可能的，例如上侧部分和下侧部分，或者任何其他定向。
具有滤光器112和包括如上所限定的多个像素对的图像传感器102的本设置使能够估算进入摄像机100的辐射中所包括的IR辐射的量，该滤光器112具有配置为阻挡IR辐射或可见光的第一部分300和配置为对于由第一部分所阻挡的波长是透光的第二部分302。这使用自身无法区分可见光和IR辐射的图像传感器。例如，IR辐射量的估算可以甚至在低光照条件期间被用于产生彩色图像。下面将在本描述中进一步更详细讨论这点。
存在可以结合本发明使用的滤光器11的许多可能配置。
根据第一配置，第一部分300被配置为阻挡IR辐射并且第二部分302被配置为对于IR辐射是透光的。对于该第一配置，滤光器112的第一部分300和第二部分302二者被配置为允许可见光通过。因此，滤光器112的第一部分300被配置为阻挡IR辐射并允许可见光通过，并且滤光器112的第二部分302被配置为允许可见光和IR辐射二者通过。这被示出在图4a中。具有可见光谱范围内的强度Ivis和IR波谱范围内的强度IIR二者的辐射正进入滤光器112。滤光器112的第一部分300将阻挡IR辐射并允许可见光通过，因此，通过滤光器112的第一部分300的辐射将仅具有可见光谱范围内的强度Ivis。滤光器112的第二部分302将允许IR辐射和可见光二者通过，因此，通过滤光器112的第二部分302的辐射将具有IR波谱范围内的强度IIR和可见光谱范围的强度Ivis二者。多个像素的第一像素200将随后产生与Ivis成比例的信号S1，以及该多个像素的第二像素202将随后产生与Ivis+IIR成比例的信号S2。由此，IR辐射的量可以被估算为S2-S1。进一步，可见光在来自检测了IR辐射和可见光二者的图像传感器102的像素的信号Stot中的贡献可以随后被估算为Stot-(S2-S1)。
根据第二配置，第一部分300被配置为阻挡可见光并且第二部分302被配置为对于可见光是透光的。对于该第二配置，滤光器112的第一部分300和第二部分302二者被配置为允许IR辐射通过。因此，滤光器112的第一部分300被配置为阻挡可见光并允许IR辐射通过，以及滤光器112的第二部分302被配置为允许可见光和IR辐射二者通过。这被示出在图4b中。具有可见光谱范围内的强度Ivis和IR波谱范围内的强度IIR二者的辐射正进入滤光器112。滤光器112的第一部分300将阻挡可见光并允许IR辐射通过，因此，通过滤光器112的第一部分300的辐射将仅具有IR波谱范围内的强度IIR。滤光器112的第二部分302将允许IR辐射和可见光二者通过，因此，通过滤光器112的第二部分302的辐射将具有IR波谱范围内的强度IIR和可见光谱范围内的强度Ivis二者。多个像素的第一像素200将随后产生与IIR成比例的信号S1，以及该多个像素的第二像素202将随后产生与Ivis+IIR成比例的信号S2。由此，IR辐射的量可以被估算为S1。进一步，可见光在来自检测了IR辐射和可见光二者的图像传感器102的像素的信号Stot中的贡献可以随后被估算为Stot-S1。
根据第三配置，第一部分300被配置为阻挡IR辐射并且第二部分302被配置为对于IR辐射是透光的。进一步，第一部分300被配置为对于可见光是透光的并且第二部分302被配置为阻挡可见光。因此，滤光器112的第一部分300被配置为阻挡IR辐射并允许可见光通过，以及滤光器112的第二部分302被配置为允许IR辐射通过并阻挡可见光。这被示出在图4c中。具有可见光谱范围内的强度Ivis和IR波谱范围内的强度IIR二者的辐射正进入滤光器112。滤光器112的第一部分300将阻挡IR辐射并允许可见光通过，因此，通过滤光器112的第一部分300的辐射将仅具有可见光谱范围内的强度Ivis。滤光器112的第二部分302将允许IR辐射通过但是将阻挡可见光，因此，通过滤光器112的第二部分302的辐射将具有IR波谱范围内的强度IIR。多个像素的第一像素200将随后产生与Ivis成比例的信号S1，以及该多个像素的第二像素202将随后产生与IIR成比例的信号S2。由此，IR辐射的量可以被估算为S2。进一步，可见光在来自检测了IR辐射和可见光二者的图像传感器102的像素的信号Stot中的贡献可以随后被估算为Stot-S2。
因此，可以不管滤光器112的配置来计算场景中IR辐射的比例。
摄像机100可以包括处理器124。处理器124可以是单核处理器或多核处理器。处理器124可以是用于执行数字数据处理的任何合适的处理器。处理器124可以被配置为处理来自多个像素对的第一像素200的信号以及来自多个像素对的第二像素202的信号。可选地，图像处理器120可以被配置为处理来自多个像素对的第一像素200的信号以及来自多个像素对的第二像素202的信号。还可选地，来自第一像素200和第二像素202的信号可以部分地由处理器124处理并且部分地由图像处理器120处理。
摄像机100可以进一步包括存储器122。存储器122可以是任何类型的易失性或非易失性存储器。进一步，存储器122可以包括多个存储器单元。存储器122可以被用作缓冲存储器，用于在通过处理器124和/或图像处理器120执行处理时缓存数据。例如，存储器可以被配置为缓存与用于图像传感器102像素的像素值信号有关的信息。
图像处理器120、存储器122和处理器124可以通过数据总线126通信。
摄像机100的处理单元(处理器124、图像处理器120或者他们的组合)可以被配置为对于多个像素对的第一像素200中的每个第一像素200来确定指示由各自的第一像素200检测到的第一辐射量的数值。摄像机100的处理单元可以进一步被配置为对于多个像素对的第二像素202中的每个第二像素202来确定指示由各自的第二像素202检测到的第二辐射量的数值。基于指示对于多个像素对的第一像素200和第二像素202中的每个第一像素200和每个第二像素202所确定的第一辐射量和第二辐射量的数值，处理单元可以被配置为计算场景中IR辐射的比例。IR辐射的比例对于场景的不同区域可以是不同的。由于图像传感器102包括多个像素对，可以确定场景的不同区域中的IR辐射的比例。这在像素对均匀地分布在图像传感器102的区域的上方的情况下尤其如此。
通过确定IR辐射的比例，将可能的是估算可见光的贡献。估算可以在图像的任何分辨率水平(范围从单独的像素或像素群组到更大部分的图像帧，或者整个图像帧)上执行。此外，估算可以是基于单个帧，但是为了更好的统计可以在执行估算之前组合许多图像帧以形成平均值。
在估算之后，将可能的是隔离来自可见波长的贡献和来自红外波长的贡献，并且由此补偿得到的图像。因此，基于计算得到的场景中IR辐射的比例，处理单元可以被配置为通过补偿由摄像机100捕获到的图像中的IR贡献来产生场景的彩色图像。
总之，为了甚至在低光照条件下产生彩色图像，认识到以下内容将带来好的结果：
●让尽可能多的辐射(即可见光和IR辐射二者)到达图像传感器102。这是为了减小图像传感器上所需的增益并因此减小来自图像传感器的信号中的噪声的水平。
●确定到达检测了可见光和IR辐射二者的图像传感器102的像素的辐射中的IR辐射的比例。这是通过对到达像素对的第一像素200和第二像素202的辐射不同地滤光。
●通过补偿由摄像机捕获到的图像中的IR贡献来产生彩色图像。
将结合图6讨论产生场景的彩色图像的方法，该场景由暴露于包括可见光和IR辐射二者的辐射的摄像机捕获到。方法包括：检测S602指示多个像素对的每个像素对中的辐射量的数值，其中每个像素对包括第一像素和第二像素。因此，摄像机包括图像传感器，该图像传感器包括如上所讨论的多个像素对。对于多个像素对的第一像素中的每个第一像素，确定S604指示由各自的第一像素检测到的第一辐射量的数值。对于多个像素对的第二像素中的每个第二像素，确定S606指示由各自的第二像素检测到的第二辐射量的数值。基于对于多个像素对的第一像素和第二像素中的每个第一像素和每个第二像素所确定的第一辐射量和第二辐射量，计算S608场景中的IR辐射的比例。基于计算得到的IR辐射的比例，通过补偿由摄像机捕获到的图像中的IR贡献来产生S610场景的彩色图像。
方法可以进一步包括阻挡IR辐射或可见光到达多个像素对的第一像素，以及允许被阻挡到达多个像素对的第一像素的波长到达多个像素对的第二像素。
本领域技术人员认识到，本发明绝非限于上述优选实施例。相反地，许多修改和变型在所附权利要求的范围内是可能的。
例如，进一步对于其正常操作，光圈110可以在控制和设计方面具有一些附加特征。设计特征可以涉及并入滤光器112。
进一步，滤光器112可以被配置在第一辐射路径和第二辐射路径中对IR辐射不同地滤光。例如，滤光器112的第一部分300可以被配置为阻挡所有IR辐射，并且滤光器112的第二部分302可以被配置为阻挡IR波谱中除了预定子部分的波长之外的所有IR辐射。例如，这在IR照明器被用于照明由摄像机100观察到的场景时可能是有用的，IR照明器被配置为采用IR波谱中预定子部分的波长内的波长来照明场景。然后滤光器的第二部分被配置为允许IR波谱中预定子部分的波长中的IR辐射到达图像传感器。然后可以补偿IR波谱中预定子部分的波长中的IR辐射。IR照明器可以被设置在摄像机中或者摄像机上，或者场景中的其他地方。
其他类型的滤光器也可以被用于对到达像素对的第一像素和第二像素的辐射不同地滤光。例如，可以对可见光谱的不同部分不同地滤光。仅提及一个可能实施方式，可以对绿光不同地滤光以便于研究植物。获知关于环境中的一个或多个干扰光源的光谱信息，这样的光源的贡献可以通过使用具有阻挡该一个或多个干扰光源的波长的第一部分和允许同样的波长通过的第二部分的滤光器、以及包括多个像素对的图像传感器来补偿。采用对于辐射波谱的其他部分敏感的传感器，相同的原理例如可以被用于通过选择性阻挡或透射UV辐射来研究入射辐射中的紫外辐射含量。
此外，可以在与摄像机100分离的设备中进行以下中的一个或多个：检测指示多个像素对的每个像素对中的辐射量的数值，对于多个像素对的第一像素中的每个第一像素，确定指示由各自的第一像素检测到的第一辐射量的数值，对于多个像素对的第二像素中的每个第二像素，确定指示由各自的第二像素检测到的第二辐射量的数值，基于对于多个像素对的第一像素和第二像素中的每个第一像素和每个第二像素所确定的第一辐射量和第二辐射量来计算场景中的IR辐射的比例，以及基于计算得到的IR辐射的比例，通过补偿由摄像机捕获到的图像中的IR贡献来产生场景的彩色图像。因此，摄像机100可以被配置为与和摄像机分离的设备通信。例如，这样的设备可以是服务器。例如，服务器可以被配置为服务具有彩色图像产生的多个摄像机。服务器可以被配置为控制如上面所讨论的摄像机100的一个或多个摄像机以将一个或多个摄像机设置在白天模式或在黑夜模式中。在白天模式中，优选地不使用滤光器112而是替代地使用阻挡所有IR辐射到达图像传感器的IR截止滤光器。因此，可以从各自的摄像机100的射束路径收回滤光器112并且可以将IR截止滤光器插入到各自的摄像机100的射束路径中。在黑夜模式中，将滤光器112插入到各自的摄像机100的射束路径中并且从各自的摄像机100的射束路径收回IR截止滤光器。
如上所讨论的，滤光器112的第一部分300可以被配置为阻挡所有IR辐射并且滤光器112的第二部分302可以被配置为阻挡IR波谱中与由设置在摄像机中或场景中其他地方的IR照明器发出的波长相对应的预定子部分的波长之外的所有IR辐射。在该配置的变形中，滤光器的第一部分对于可见光和IR辐射的IR照明器子部分可以是透光的，而滤光器的第二部分阻挡所有IR辐射并仅允许可见光通过。在混合光照场景(即具有IR辐射和低水平的可见光的场景)中，这样的配置在IR照明器提供场景中的所有或几乎所有IR辐射并且照明器子波谱之外存在很少或不存在IR辐射的情况下可能是有用的。通过照明器添加的IR辐射增大了场景中的总辐射量，并且因此减小了对于图像传感器增益的需求。像素对和分束滤光器使能够确定IR分量并对其补偿，使得也可以在低光照(例如，黄昏和黎明)下产生具有良好彩色保真度的彩色图像。然而，在白天，太阳可以贡献在IR照明器的波谱范围之外的相当大的IR辐射量，并且因此将不可能确定入射辐射中总的IR辐射量。因此，滤光器设置可以提供有附加的、可移动的滤光器，该滤光器阻挡了所有或至少IR照明器的波谱范围内的IR辐射，但是该滤光器对于可见光是透光的。使用固定滤光器和可移动滤光器的组合的滤光器设置被描述在申请人的序列号为16207126.0的欧洲专利申请中。在场景中存在高光照水平时，可以插入附加的滤光器。在这样的光照条件下，为了保持噪声充分低，IR分量不是必须的。在混合光照下，在可见光照水平太低而无法给出可接受的信噪比时，可以移除可移动的IR截止滤光器，并且开启IR照明器，由此允许IR辐射从照明器到达每个像素对的一个像素。在黑暗(例如夜晚)中，可移动的IR截止滤光器应当保持被移除，并且可以基于来自照明器和其他光源的IR辐射来产生黑白图像，然而可见光贡献是无关紧要的。
在图2a至图2c所示的实施例中，第一像素和第二像素是像素对的每个部分。然而，应当注意的是第一像素和第二像素可以是更大像素群组(例如像素的三元组或四元组)的部分。在像素的三元组中，可以例如存在一个第一像素和两个第二像素，或者反之亦然。在像素的四元组中，可以存在两个第一像素和两个第二像素，但是也可以存在一个第一像素和三个第二像素，或者反之亦然。
此外，通过研究附图、公开内容和所附权利要求，本领域技术人员在实践所要求保护的本发明时可以理解和实现所公开实施例的变型。

Claims (15)

1.一种摄像机，包括：
光圈；
图像传感器，包括多个像素对，在任一像素对中：
第一像素被配置使得所述第一像素检测已经穿过所述光圈进入所述摄像机并且已经从所述光圈经由第一辐射路径前进到所述图像传感器的辐射，以及
第二像素被配置使得所述第二像素检测已经穿过所述光圈进入所述摄像机并且已经从所述光圈经由第二辐射路径前进到所述图像传感器的辐射，所述第二辐射路径不同于所述第一辐射路径；以及
滤光器，设置在所述光圈中或者所述光圈附近，其中所述滤光器包括被配置为阻挡IR辐射或可见光的第一部分和被配置为对于由所述第一部分所阻挡的波长是透光的第二部分，其中所述滤光器被设置使得通过所述第一部分的辐射前进到所述多个像素对的所述第一像素，并且使得通过所述第二部分的辐射前进到所述多个像素对的所述第二像素。
2.根据权利要求1所述的摄像机，其中所述滤光器的所述第一部分被配置为阻挡IR辐射，并且其中所述滤光器的所述第二部分被配置为对于IR辐射和可见光二者是透光的。
3.根据权利要求1所述的摄像机，其中所述滤光器的所述第一部分被配置为阻挡可见光，并且其中所述滤光器的所述第二部分被配置为对于IR辐射和可见光二者是透光的。
4.根据权利要求1所述的摄像机，其中所述滤光器的所述第一部分被配置为阻挡IR辐射，并且其中所述滤光器的所述第二部分被配置为阻挡可见光。
5.根据权利要求1所述的摄像机，其中所述滤光器固定地定位在所述光圈中或者所述光圈附近。
6.根据权利要求1所述的摄像机，其中所述滤光器是能移动的，使得所述滤光器能定位在所述第一辐射路径和所述第二辐射路径中并且能从所述第一辐射路径和所述第二辐射路径收回。
7.根据权利要求2所述的摄像机，其中所述滤光器的划分与所述第一像素和所述第二像素对准使得：
IR辐射将不到达所述像素对中的所述第一像素，并且
IR辐射将到达所述像素对中的所述第二像素。
8.根据权利要求4所述的摄像机，其中所述滤光器的划分与所述第一像素和所述第二像素对准使得：
IR辐射将不到达所述像素对中的所述第一像素，并且
IR辐射将到达所述像素对中的所述第二像素。
9.根据权利要求5所述的摄像机，其中所述滤光器的划分与所述第一像素和所述第二像素对准使得：
IR辐射将不到达所述像素对中的所述第一像素，并且
IR辐射将到达所述像素对中的所述第二像素。
10.根据权利要求6所述的摄像机，其中所述滤光器的划分与所述第一像素和所述第二像素对准使得：
IR辐射将不到达所述像素对中的所述第一像素，并且
IR辐射将到达所述像素对中的所述第二像素。
11.根据权利要求1所述的摄像机，其中所述图像传感器的每个像素属于各自的像素对。
12.根据权利要求1所述的摄像机，其中所述图像传感器被配置为在所述摄像机被暴露于包括可见光和IR辐射二者的辐射时记录指示到达所述多个像素对中的每个像素对的辐射量的数值，其中所述摄像机进一步包括处理单元，所述处理单元被配置为：
对于所述多个像素对的所述第一像素中的每个第一像素，确定指示由各自的第一像素检测到的第一辐射量的数值，
对于所述多个像素对的所述第二像素中的每个第二像素，确定指示由各自的第二像素检测到的第二辐射量的数值，
基于对于所述多个像素对的所述第一像素和所述第二像素中的所述每个第一像素和所述每个第二像素所确定的所述第一辐射量和所述第二辐射量，计算场景中的IR辐射的比例，以及
基于计算得到的所述IR辐射的比例，通过补偿由所述摄像机捕获到的图像中的IR贡献来产生所述场景的彩色图像。
13.一种产生场景的彩色图像的方法，所述场景由暴露于包括可见光和IR辐射二者的辐射的摄像机捕获，所述方法包括：
检测指示多个像素对的每个像素对中的辐射量的数值，其中每个像素对包括第一像素和第二像素，
对于所述多个像素对的所述第一像素中的每个第一像素，确定指示由各自的第一像素检测到的第一辐射量的数值，
对于所述多个像素对的所述第二像素中的每个第二像素，确定指示由各自的第二像素检测到的第二辐射量的数值，
基于对于所述多个像素对的所述第一像素和所述第二像素中的所述每个第一像素和所述每个第二像素所确定的所述第一辐射量和所述第二辐射量，计算所述场景中的IR辐射的比例，以及
基于计算得到的所述IR辐射的比例，通过补偿由所述摄像机捕获到的图像中的IR贡献来产生所述场景的彩色图像。
14.根据权利要求13所述的方法，进一步包括：
阻挡IR辐射或可见光到达所述多个像素对的所述第一像素，以及
允许被阻挡到达所述多个像素对的所述第一像素的波长到达所述多个像素对的所述第二像素。
15.一种具有计算机可读程序代码的非暂时性计算机可读存储介质，所述计算机可读程序代码存储在所述非暂时性计算机可读存储介质上，所述计算机可读程序代码在具有处理能力的设备上执行时被配置为执行权利要求13所述的方法。
CN201810597300.0A 2017-06-29 2018-06-11 摄像机和产生彩色图像的方法 Pending CN109218691A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP17178716.1 2017-06-29
EP17178716.1A EP3422700B1 (en) 2017-06-29 2017-06-29 A method for enhancing color images, and an assembly performing such method
EP17209246.2 2017-12-21
EP17209246.2A EP3343897B1 (en) 2016-12-28 2017-12-21 Camera and method of producing color images

Publications (1)

Publication Number Publication Date
CN109218691A true CN109218691A (zh) 2019-01-15

Family

ID=59298216

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810597300.0A Pending CN109218691A (zh) 2017-06-29 2018-06-11 摄像机和产生彩色图像的方法
CN201810685595.7A Active CN109218696B (zh) 2017-06-29 2018-06-28 增强彩色图像的方法，以及执行这种方法的组件

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810685595.7A Active CN109218696B (zh) 2017-06-29 2018-06-28 增强彩色图像的方法，以及执行这种方法的组件

Country Status (6)

Country Link
US (1) US10531058B2 (zh)
EP (1) EP3422700B1 (zh)
JP (2) JP6606231B2 (zh)
KR (2) KR102100031B1 (zh)
CN (2) CN109218691A (zh)
TW (2) TWI708510B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113938600A (zh) * 2020-06-25 2022-01-14 安讯士有限公司 用于增强视频摄像机的性能的方法
TWI806226B (zh) * 2021-11-08 2023-06-21 宏碁股份有限公司 影像感測方法與影像感測裝置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3840362B1 (en) * 2019-12-19 2022-05-04 Axis AB A video camera system with a light sensor and a method for operating said video camera
US11595625B2 (en) * 2020-01-02 2023-02-28 Qualcomm Incorporated Mechanical infrared light filter
CN113365034B (zh) * 2020-03-04 2022-09-06 合肥君正科技有限公司 一种基于rgb-ir图像传感器的色彩校准方法
US12015835B2 (en) * 2022-01-25 2024-06-18 Qualcomm Incorporated Multi-sensor imaging color correction

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003264842A (ja) * 2002-03-08 2003-09-19 Hitachi Kokusai Electric Inc フィルタ及び調光板及び固体撮像素子
CN101078856A (zh) * 2006-05-26 2007-11-28 三星电子株式会社 图像捕获设备和方法
US20100102366A1 (en) * 2008-10-24 2010-04-29 Jong-Jan Lee Integrated Infrared and Color CMOS Imager Sensor
CN102246079A (zh) * 2008-12-10 2011-11-16 佳能株式会社 焦点检测设备及其控制方法
CN202159217U (zh) * 2010-07-29 2012-03-07 罗技欧洲公司 图像捕获设备
CN102447826A (zh) * 2010-10-12 2012-05-09 全视科技有限公司 可见及红外双重模式成像系统
CN104702924A (zh) * 2013-12-05 2015-06-10 全视技术有限公司 捕获可见光和红外光图像的图像传感器及关联系统和方法
CN105430363A (zh) * 2015-12-18 2016-03-23 广东欧珀移动通信有限公司 成像方法、成像装置及电子装置
CN105704463A (zh) * 2014-12-09 2016-06-22 意法半导体(R&D)有限公司 使用具有组合的rgb和ir感测的像素的图像传感器
WO2016171090A1 (ja) * 2015-04-23 2016-10-27 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
CN106412389A (zh) * 2015-07-31 2017-02-15 双光圈国际株式会社 具有选择性红外滤光片阵列的传感器组件
CN106612420A (zh) * 2015-10-22 2017-05-03 豪威科技股份有限公司 彩色滤光器阵列及图像传感器

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0386673U (zh) * 1989-12-20 1991-09-02
JP2001036807A (ja) * 1999-07-19 2001-02-09 Hitachi Ltd 撮像装置
JP3861241B2 (ja) * 2002-03-15 2006-12-20 三菱電機株式会社 フィルタ移動型カメラ装置
JP2004361590A (ja) 2003-06-03 2004-12-24 Sony Corp 光学装置及び撮像装置
TWI257486B (en) * 2004-05-13 2006-07-01 Prodisc Technology Inc Camera lens
JP2006078666A (ja) 2004-09-08 2006-03-23 Fujinon Corp レンズ装置
US7435962B2 (en) * 2005-05-18 2008-10-14 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Imaging device and method for producing an infrared filtered digital image
TWI362562B (en) * 2005-12-09 2012-04-21 Hon Hai Prec Ind Co Ltd Aperture and method
JP5098908B2 (ja) * 2008-09-08 2012-12-12 コニカミノルタアドバンストレイヤー株式会社 画像入力装置
CN101482686B (zh) * 2009-02-09 2013-05-15 Tcl数码科技（深圳）有限责任公司 一种可用于数码摄影机的红外滤光片自动切换装置
JP2011029810A (ja) * 2009-07-23 2011-02-10 Sony Ericsson Mobile Communications Ab 撮像装置、撮像方法、撮像制御プログラム、及び携帯端末装置
JP5670481B2 (ja) * 2010-02-19 2015-02-18 デュアル・アパーチャー・インコーポレーテッド 多開口画像データの処理
TWI475246B (zh) * 2011-04-15 2015-03-01 Largan Precision Co 具濾光元件之光學取像鏡頭
JP2013152369A (ja) 2012-01-25 2013-08-08 Nippon Seimitsu Sokki Kk 絞り装置およびカメラ
JP6230265B2 (ja) 2013-05-17 2017-11-15 キヤノン株式会社 撮像装置
US9509893B2 (en) * 2014-03-31 2016-11-29 Panasonic Intellectual Property Management Co., Ltd. Imaging device and analyzing apparatus using the imaging device
CN104536074A (zh) * 2014-12-24 2015-04-22 电子科技大学 一种可调近红外滤波片
US10574910B2 (en) * 2015-02-26 2020-02-25 Sony Semiconductor Solutions Corporation Method and apparatus for controlling a luminance composition unit
JP6530215B2 (ja) 2015-03-26 2019-06-12 マクセル株式会社 レンズユニットおよびカメラモジュール
JP2017092898A (ja) * 2015-11-17 2017-05-25 ソニー株式会社 撮像装置、撮像方法、およびプログラム
KR101672669B1 (ko) * 2015-11-23 2016-11-03 재단법인 다차원 스마트 아이티 융합시스템 연구단 시차를 이용하는 멀티 애퍼처 카메라 시스템
US9848118B2 (en) 2016-03-11 2017-12-19 Intel Corporation Phase detection autofocus using opposing filter masks
US10574872B2 (en) 2016-12-01 2020-02-25 Semiconductor Components Industries, Llc Methods and apparatus for single-chip multispectral object detection
EP3343287B1 (en) * 2016-12-28 2018-11-21 Axis AB A method for sequential control of ir-filter, and an assembly performing such method

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003264842A (ja) * 2002-03-08 2003-09-19 Hitachi Kokusai Electric Inc フィルタ及び調光板及び固体撮像素子
CN101078856A (zh) * 2006-05-26 2007-11-28 三星电子株式会社 图像捕获设备和方法
US20100102366A1 (en) * 2008-10-24 2010-04-29 Jong-Jan Lee Integrated Infrared and Color CMOS Imager Sensor
CN102246079A (zh) * 2008-12-10 2011-11-16 佳能株式会社 焦点检测设备及其控制方法
CN202159217U (zh) * 2010-07-29 2012-03-07 罗技欧洲公司 图像捕获设备
CN102447826A (zh) * 2010-10-12 2012-05-09 全视科技有限公司 可见及红外双重模式成像系统
CN104702924A (zh) * 2013-12-05 2015-06-10 全视技术有限公司 捕获可见光和红外光图像的图像传感器及关联系统和方法
CN105704463A (zh) * 2014-12-09 2016-06-22 意法半导体(R&D)有限公司 使用具有组合的rgb和ir感测的像素的图像传感器
WO2016171090A1 (ja) * 2015-04-23 2016-10-27 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
CN106412389A (zh) * 2015-07-31 2017-02-15 双光圈国际株式会社 具有选择性红外滤光片阵列的传感器组件
CN106612420A (zh) * 2015-10-22 2017-05-03 豪威科技股份有限公司 彩色滤光器阵列及图像传感器
CN105430363A (zh) * 2015-12-18 2016-03-23 广东欧珀移动通信有限公司 成像方法、成像装置及电子装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113938600A (zh) * 2020-06-25 2022-01-14 安讯士有限公司 用于增强视频摄像机的性能的方法
CN113938600B (zh) * 2020-06-25 2023-04-28 安讯士有限公司 用于增强视频摄像机的性能的方法
TWI806226B (zh) * 2021-11-08 2023-06-21 宏碁股份有限公司 影像感測方法與影像感測裝置

Also Published As

Publication number Publication date
JP2019036947A (ja) 2019-03-07
JP6803355B2 (ja) 2020-12-23
TWI708510B (zh) 2020-10-21
KR20190002289A (ko) 2019-01-08
KR102100031B1 (ko) 2020-04-10
US10531058B2 (en) 2020-01-07
KR20190002348A (ko) 2019-01-08
KR102113488B1 (ko) 2020-05-22
JP2019012267A (ja) 2019-01-24
TWI684365B (zh) 2020-02-01
CN109218696A (zh) 2019-01-15
EP3422700B1 (en) 2021-03-10
CN109218696B (zh) 2021-01-22
TW201911860A (zh) 2019-03-16
EP3422700A1 (en) 2019-01-02
TW201906400A (zh) 2019-02-01
US20190007665A1 (en) 2019-01-03
JP6606231B2 (ja) 2019-11-13

Similar Documents

Publication Publication Date Title
CN109218691A (zh) 摄像机和产生彩色图像的方法
CN106488073B (zh) 用于热可见组合的图像和相机的边缘增强
CN105009290B (zh) 图像传感器和电子装置
CN102687502B (zh) 减少彩色图像中的噪声
CN100463497C (zh) 产生红外图像和正常图像的方法和成像设备
KR101655742B1 (ko) 다중 조리개 촬영용 플래시 시스템
CN107302667B (zh) 一种相机可互换动态分光成像系统及其应用于高动态成像的方法
US20170330053A1 (en) Color night vision system and operation method thereof
CN104639921B (zh) 双像素大小彩色影像传感器及其制造方法
GB2496241A (en) Multiple image high dynamic range (HDR) imaging from a single sensor array
CN111527744B (zh) 用于低光和高光水平成像的单光学系统
CN107995396B (zh) 一种双摄像头模组以及终端
CN108886571A (zh) 具有改善的自动对焦性能的成像设备
CN102857681A (zh) 一种通过半反射镜采集图像和提高图像质量的方法
KR101504564B1 (ko) 디지털 이미지 상의 상대 조도 현상의 처리 방법 및 그에 관련된 처리 시스템
CN107835351B (zh) 一种双摄像头模组以及终端
CN106878607A (zh) 一种基于电子设备的图像生成的方法和电子设备
AU2017218753A1 (en) Imaging device with white balance compensation and related systems and methods
WO2014057335A1 (en) System for capturing scene and nir relighting effects in movie postproduction transmission
CN116471466A (zh) 一种双晶片内窥镜成像方法及成像装置
US10969523B1 (en) Apparatus and method to obtain intrinsic still and video images without the use of filters or dichroic mirrors
US11568526B2 (en) Dual sensor imaging system and imaging method thereof
CN105590941B (zh) 一种提高光电传感器及感光材料弱光检测能力的方法
GB2513236A (en) Motion picture camera and method for taking a sequence of moving images
JP6504892B2 (ja) 撮像装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190115

RJ01 Rejection of invention patent application after publication