CN115209058A - 摄像机中的曝光时间控制 - Google Patents

摄像机中的曝光时间控制 Download PDF

Info

Publication number
CN115209058A
CN115209058A CN202210328576.5A CN202210328576A CN115209058A CN 115209058 A CN115209058 A CN 115209058A CN 202210328576 A CN202210328576 A CN 202210328576A CN 115209058 A CN115209058 A CN 115209058A
Authority
CN
China
Prior art keywords
exposure
values
mismatch
camera
variable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210328576.5A
Other languages
English (en)
Other versions
CN115209058B (zh
Inventor
维克托·埃德帕尔姆
安德里亚·艾瑞思拓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Axis AB
Original Assignee
Axis AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Axis AB filed Critical Axis AB
Publication of CN115209058A publication Critical patent/CN115209058A/zh
Application granted granted Critical
Publication of CN115209058B publication Critical patent/CN115209058B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/091—Digital circuits
    • G03B7/093—Digital circuits for control of exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

摄像机中的曝光时间控制。一种用于控制摄像机(150)的曝光时间变量(ET)的曝光时间控制器，摄像机与自动曝光算法(110)相关联，自动曝光算法(110)被配置成通过递增和递减ET变量来减少曝光失配(ΔE)，曝光时间控制器包括：存储器(120)，用于对在摄像机对场景进行成像并且算法有效时所应用的ET值进行记录；以及处理电路(130)，被配置成：当摄像机对场景进行成像时，确定曝光失配超过阈值；对所记录的ET值的分布进行估计；基于所估计的分布，识别多个相对最频繁的ET值；并且响应于确定曝光失配超过阈值，将所识别的ET值中的一个分配到ET变量。

Description

摄像机中的曝光时间控制
技术领域
本发明涉及摄影成像领域，并且具体地，涉及用于控制与自动曝光算法相关联的摄像机的曝光时间变量的方法和装置。
背景技术
消费型和专业型市场上的大部分摄像机都包含自动曝光(AE)功能。该功能可以包括被配置成检测曝光失配的AE控制环路，其试图通过递增或者递减摄像机的曝光时间变量来减少或者消除曝光失配。AE控制环路应当被如此地设计(并且其控制增益和其他控制器设置应被如此地调整)：能够快速响应照明条件的变化，同时表现稳定，而没有振荡或者类似伪像。尽管如此，缓慢的AE收敛经常被用户报告(例如，当场景变亮或者变暗时，该用户感觉他们的摄像机花费过长时间来查找新的曝光时间设置)，并且已经做出了解决这一问题的技术努力。举一个示例，US20110298886A1公开了一种用于在可变照明条件下使用的手持装置的摄像机，该摄像机声称具有更高的AE收敛速度。
如果摄像机被用于监视目的，无论是否具有记录，缓慢的AE收敛的问题还有一个附加的方面，就是在严重曝光不足或者过度曝光的帧中不能以所需的精度识别被测对象。这个问题在将其输出馈送到速率控制视频编码器的摄像机中变得更加严重，该视频编码器可能会应用大量的数据压缩来应对由曝光伪像引起的输入比特率的增加。这可能会导致图像质量下降，还可能会大大延长收敛时间。意识到这些缺陷的入侵者可能会利用这些缺陷来隐藏自己。用(可见光或红外)强光手电筒进行一连串的照射，可能就能使监视摄像机在相当长的时间内无法工作。
发明内容
本公开的一个目的是提供用于摄像机的曝光时间控制器，利用该曝光时间控制器，摄像机变得更加适合于可变照明条件。另一个目的是提供这样一种曝光时间控制器，其在光照条件突然变化后快速稳定地收敛到新的曝光时间设置。本公开的具体目的是提供这样一种曝光时间控制器，其适合于具有AE算法(AE控制环路)和/或速率控制视频编码器的摄像机。另一个目的是提供一种曝光时间控制方法。
由独立权利要求限定的本发明实现了这些目的中的至少一些。从属权利要求涉及有利的实施例。
在本发明的第一方面，提供了一种控制曝光时间(ET)变量的方法，曝光时间(ET)变量是与摄像机的当前曝光时间相对应的控制变量。应当理解的是，摄像机与自动曝光(AE)算法相关联(即，包括或者耦合到自动曝光(AE)算法)，自动曝光(AE)算法可以被实现为电路或者软件，该电路或者软件被配置成根据需要，通过递增和递减ET变量来减少曝光失配。方法包括以下步骤。对于由摄像机所成像的场景，对在AE算法有效时所应用的ET值进行记录。当摄像机对场景进行成像时，确定曝光失配超过阈值。阈值可以是预定义值，并且超过阈值的曝光失配在本文可以被称为大的失配。接下来，对所记录的ET值的分布进行估计。基于所估计的分布，识别多个相对最频繁的ET值。方法还包括，响应于确定曝光失配超过阈值，将所识别的ET值中的一个分配到摄像机的ET变量。
因为所确定的大的曝光失配是通过将所识别的ET值中的一个分配到摄像机的ET变量来处理的，所以绕过了设定点恢复AE算法。这暂时消除了当面临大的曝光失配时可能表现出的潜在的过慢或者振荡行为的影响。换句话说，通过对ET变量的不连续修改来处理大的曝光失配，而不是完全依赖于AE算法可以指示的连续或者准连续的递增和递减。发明人已经认识到，在代表性的视频监控环境(特别是包括室内环境)中，照明条件倾向于呈现离散值。特别注意的是，如果环境配备有具有开启或关闭、打开或关上或者类似的二进制状态的、数量有限的光源和孔径(电灯、门等)，则会出现这种情况。有限性表示组合也是有限的，因此最先分配的ET值很可能是合适的值。如果不是(而是仍然存在大的曝光失配)，则根据一些实施例，所识别的ET值中的不同的ET值将被分配到ET变量。相应地，在曝光失配降到阈值以下之前，ET变量仅经过不连续的修改。
在一些实施例中，当已经确定了大的曝光失配时，AE算法可以被暂时停用。与单独分配所识别的ET值相比，这更加彻底地绕过了AE算法。AE算法的停用也可以帮助抑制与积分(I)和微分(D)控制项有有关的伪像(如果有)。I项和D项可以被说成是捕获失配历史。可替代地，可以通过重置AE算法的I项和D项来抑制有关的伪像。
不同的实施例定义了不同的规则，以用于选择所识别的ET值中的哪个将被分配，或者根据情况所识别的ET值中的哪些将被分配为第一、第二、第三等。降低相对频率是一种选择。降低相对频率并结合当前曝光失配的符号(过度曝光、曝光不足)是另一种选择。进一步的选择是使用递减的相对频率，同时排除已经在大的曝光失配的当前事件中分配过的ET值。更进一步的选择是使用与当前曝光失配的符号相结合的递减相对频率，并排除已经在大的曝光失配的当前事件中分配过的ET值；这可以避免乒乓行为和无限执行循环。该组中的实施例旨在加速找到正确的ET设置；它们的性能可能在很大程度上取决于手头的用例，包括所成像的场景。
一些实施例规定(主要针对于具有相关速率控制视频编码器的摄像机)，当检测到大的曝光失配时，视频编码器的速率控制将被暂时禁用。这通常会导致视频编码器暂时超过期望的比特率，直到找到合适的ET值。由于初始曝光失配和所识别的ET值的后续分配通常会导致突然的亮度变化(这与局部增加的信息熵的事件相对应)，所以临时比特率增加是合理的；如果要在合理保持图像质量的情况下捕获这种事件，则每单位时间将生成更多的数据。
更进一步的实施例提供了针对导致识别最频繁ET值的过程的具体教导，该过程包括记录步骤和估计步骤。例如，估计步骤可限于晚于预定义时期的ET值。可替代地或者附加地，估计步骤可以限于AE算法已经收敛到的ET值。可替代地或者附加地，记录步骤可以针对多个场景执行，并且输出被分别处理成各自的最频繁的ET值的集合。
在本发明的第二方面，提供了一种用于控制摄像机的ET变量的曝光时间控制器，摄像机与AE算法相关联，AE算法被配置成通过递增和递减ET变量来减少曝光失配。根据第二方面的曝光时间控制器包括：存储器，用于对在摄像机对场景进行成像并且算法有效时所应用的ET值进行记录，以及处理电路，被配置成：当摄像机对场景进行成像时，确定曝光失配超过阈值；对所记录的ET值的分布进行估计；基于所估计的分布，识别多个相对最频繁的ET值；以及响应于确定曝光失配超过阈值，将所识别的ET值中的一个分配到ET变量。
本发明的第二方面共享第一方面的所有或者大部分技术效果，并且可以用相应程度的技术变型来实现。
本发明进一步涉及一种包含指令的计算机程序，该指令用于使计算机或者特别是曝光时间控制器执行上述方法。计算机程序可以存储或者分布在数据载体上。如本文所使用的，“数据载体”可以是诸如调制电磁波或者光波的暂时性数据载体，或者是非暂时性数据载体。非暂时性数据载体包括易失性和非易失性存储器，诸如磁性、光学或固态类型的永久和非永久性存储介质。仍然在“数据载体”的范围内，这种存储器可以是固定安装的或者便携式的。
通常，权利要求中使用的所有术语将根据它们在技术领域中的普通含义来解释，除非本文中另有明确定义。所有对“一/该元件、设备、部件、装置、步骤等”的引用应当被公开解释为指元件、设备、部件、装置、步骤等的至少一个实例，除非另有明确说明。本文公开的任何方法的步骤并非一定按照所公开的确切顺序来执行，除非明确说明。
附图说明
现在参照附图，通过示例的方式描述各个方面和实施例，在附图中：
图1是根据本发明实施例的摄像机和曝光时间控制器的框图；
图2是根据本发明实施例的方法的流程图；以及
图3是相对频率对曝光时间的图，其中两个ET修改事件(分配)由箭头表示。
具体实施方式
现在将在下文中参考附图更全面地描述本公开的各个方面，在附图中示出了本发明的特定实施例。但是，这些方面可以采用多种不同的形式实施，并且不应当被解释为是限制性的；相反，这些实施例是以示例的方式提供的，使得本公开将是彻底和完整的，并且将本发明的所有方面的范围完全传达给本领域技术人员。在整个描述中，相同的附图标记指示相同的元件。
图1示出了曝光时间控制器，其包括处理电路130、存储器120和可选的进一步的部件。以所示出的方式展开，曝光时间控制器控制摄像机150的曝光时间变量ET。具体地，曝光时间控制器被授权读取ET变量的当前值，并且将新值分配到ET变量。它还接收下文将要描述的曝光失配ΔE变量的当前值。
本文的实施例适用于任何类型、性能、预期用户群等的摄像机150，只要其曝光时间是可控的。在图1中，摄像机150被连接到视频编码器160，视频编码器160被配置成采用适用于存储和/或与相关接收者共享的数字格式来对输出视频流进行编码。视频编码器160在一些实施例中可以是摄像机150的组成部分，可以执行各种信号处理、图像处理或者其他后成像操作。视频编码器160可以被配置用于具有恒定或者可变比特率的数字格式。具体地，视频编码器160可以具有可选的功能，以将比特率限制在指定的最大值或者维持比特率恒定；这是通过在编码过程的某些阶段应用数据压缩(特别是有损数据压缩)来实现的。本发明也适用于摄像机，无论它们是否包括具有这些特征的视频编码器160。
摄像机150与AE算法110相关联，AE算法110被配置成通过递增和递减ET变量来减少曝光失配ΔE。一般而言，如果由摄像机捕获的视频帧不与期望的(或者目标)曝光等级相对应，则该视频帧具有曝光失配；曝光失配可以包括反映不一致的严重性的定量成分。ET变量的典型范围是1至30毫秒。更准确地，曝光失配估计器112接收摄像机150的输出流或者输出流的一部分，并计算曝光失配指示符ΔE，指示符ΔE是到AE算法110的输入。AE算法的输出可以包括递增或者递减摄像机150的ET变量的指令。在简单的实施方式中，指令可以具有值00(保持)、01(增加)或者10(减少)，其中，后两个值指的是预定义步长δ>0或者预定义因子γ>1。对摄像机150的ET变量的影响可以由以下关系式中的一个来表示：
ET←ET±δ (1a)
ET←γ±1ET (1b)
在其他实施方式中，ET变量可以以可变步长或者可变因子递增和递减，这允许AE算法110调整其对曝光失配的量级的响应。AE算法110不需要访问ET变量的当前值。
AE算法110可以包括例如被操作为比例(P)控制器的闭环控制环路。P控制器可以是有状态的(自适应的)或者无状态的。控制环路可以进一步包括积分(I)或者微分(D)项，或者两者。I项和D项参考曝光失配指示符的历史114。例如，曝光失配历史114可以由对在滑动时间窗口中的曝光失配指示符ΔE的过去值进行存储的存储器来提供。
从AE算法110已经收敛到的这种ET值中辨别出瞬时的ET值是可能的。收敛的特征为曝光失配ΔE随时间的逐渐减小，这可以通过由AE算法110应用的递增和递减所伴随的减小来实现，在此基础上，只要场景的亮度维持基本不变，AE算法110就能维持摄像机150的稳定ET值。就AE算法110包括I项或者D项而言，可以预期每个这样的项在收敛时连续地(或者在离散时间内准连续地)趋近于零。AE算法110所收敛到的ET值通常表示正在被成像的场景的正确ET设置。
在图1中，值得注意的是，曝光时间控制器的AE算法110和处理电路130被授予了对ET变量的不同访问权限：控制器被授权为ET变量分配任意值，而AE算法110被限制为递增和递减ET变量。本发明不限于仅使用支持这种分离的成像系统。相反，这相当于如此地配置摄像机150：允许AE算法110读取ET变量的当前值，并配置AE算法110使得它始终根据关系式(1a，1b)中适用的一个来修改ET变量。然后，AE算法110和曝光时间控制器可以被授予对ET变量的相同的写入访问权限。
曝光失配估计器112可以被配置成对视频帧中的过度曝光(或饱和)和曝光不足的像素的数量进行计数。可替代地或者附加地，曝光失配估计器112可以被配置成从由其生成的视频帧的直方图、分布或者其他统计中得出性能指示符。忽略色彩属性并使用亮度直方图、灰度分布等可能是有利的。例如，性能指示符可以是分布的偏斜度(或通过关于参考亮度的三阶中心矩或者三阶矩所测量的不对称性)，或者峰均比，或者这些的组合。可以进一步根据诸如“向右曝光”的经验法则来估计直方图，这保证了：一方面充分利用了摄像机的动态范围，并且另一方面排除了过度曝光。无论选择这些选项中的哪一个，曝光失配估计器112仅考虑由摄像机150产生的视频帧的稀疏子集就足够了，诸如均匀间隔或者随机选择的、构成总帧数的特定百分比的帧。可替代地或者附加地，曝光失配估计器112可以根据每个所考虑的帧中的代表性像素子集进行估计。
应当理解的是，曝光失配估计器112被配置成输出曝光失配变量ΔE，曝光失配变量ΔE不仅允许确定摄像机150是否具有曝光失配(曝光不足、过度曝光)，还允许确定失配的量级。为此，曝光失配ΔE可表示为三位变量，如下所示：
Figure BDA0003572340450000061
在这个示例中，没有使用码字100。如本文的实施例所教导的，区分多种程度的过度曝光和曝光不足的能力使得采用特殊方式来处理大的曝光失配的情况是可能的。在曝光失配变量ΔE不指示失配的量级的系统中，持续相对长时间的恒定符号的失配可以被解释为大的失配；在这种情况下，阈值可能具有时间维度并且指的是持续时间。
曝光时间控制器(特别是处理电路130)的功能将参照图2中采用流程图形式描述的方法200来描述。应当理解的是，方法200也可以由除本文描述的曝光时间控制器之外的其他硬件来执行。
在方法200的第一步骤210中，曝光时间控制器对在摄像机对场景进行成像并且AE算法110有效时所应用的ET值进行记录。可以通过将ET值存储在存储器120中来进行记录。ET值可以以原始形式进行记录，而不需要施加任何处理。可选地，可以限制用于对ET值进行记录的存储器120的容量，并且实施旋转覆盖方案，使得仅保留晚于预定义时期的ET值。
在方法200的一些实施例中，对多个场景的ET值进行记录。这些可以被存储在存储器120的独立区域中，可以遵从独立的保留策略等。如在本公开中使用的，两个“场景”可以涉及相同的摄像机姿态，但是其在一天中的时间上是不同的。作为变化的太阳角度的结果，自然照明环境中的照明条件通常在早晨、中午、下午等不同时段有所不同，场景中或旁边的阴影物体可能会进一步凸显这一点。另一种可能性是将两种不同的平移-倾斜-变焦(PTZ)(特别是对于固定安装的摄像机)设置作为不同的“场景”。
在第二步骤212中，当摄像机150对场景进行成像时，曝光时间控制器对曝光失配ΔE是否超过阈值进行估计。在估计中，曝光时间控制器可以例如对不等式是否成立进行估计：
|ΔE|>Eth (2)
其中Eth表示阈值。如果不等式没有被验证(N分支)，则方法200的执行在预定义间隔之后或者响应于某个触发而对估计212进行重复。如果曝光失配ΔE超过阈值(由此曝光失配ΔE可以被认为是大的失配)，则执行进行(Y分支)到步骤214。此时，在方法200的一些实施例中，AE算法110可以被停用。
优选地，步骤212包括被动或者主动验证当前成像的场景是在步骤210中针对其记录了ET值的场景。如果已经针对多个场景记录210了ET值，则将验证当前成像的场景是这些场景中的一个，并且基于相应的所记录的ET数据集执行步骤214、216。如果对于当前成像的场景没有可用的ET值，那么执行方法200的后续步骤可能是没有意义的。一个或者多个场景的识别以及场景当中的区分可以基于时钟时间、摄像机150的设置(例如，姿态PTZ)或者从其输出数据流可得出的视觉特征。
在步骤214中，对所记录的ET值的分布进行估计。所估计的分布可以是诸如近似概率密度、直方图等的统计分布，其允许从所记录的ET值当中识别具有最高相对频率的那些ET值。具有最高相对频率的ET值可以与AE算法110已经应用了最长总时间的ET值相对应。
如上所述，在一些实施例中，记录步骤210被实施为仅保留晚于预定义时期的ET值。这也间接地限制了步骤214，结果是晚于预定义时期的所述ET值形成了用于对分布进行估计的唯一基础。预定义时期可以具有被认为适合于所考虑的用例并且提供期望的时间分辨率的任何持续时间。例如，如果旨在捕获在自然光照中的季节变化，则预定义时期可以在一个月与一年之间进行选择。为了捕获每天的阳光变化，预定义时期可以是一小时或者几分之一小时的量级；它也可以被设置得更大，但是优选地小于24小时，这是因为日变化的不同阶段可能会相互抵消，并且使得所估计的分布不太有用。
在其他实施例中，估计步骤214仅考虑AE算法110已经收敛到的这种ET值。上文已经概述了收敛的可能特征。有利地，在曝光失配ΔE的可靠值变得可用之前，这些实施例可能抑制伪像(包括AE算法110在初始化时所应用的经配置的初始ET值)。
在第四步骤216中，基于所估计的分布来识别至少两个相对最频繁的ET值。为了说明，图3是在示例情况下的相对频率对曝光时间ET的图。相对频率f可以被表示为AE算法110已经应用了ET值的秒数。相对频率f可以可选地通过已经记录的ET值的总持续时间来归一化，由此总量为1。如图3所示，ET值T1、T2、T3、T4、T5、T6与独特的频率峰值相对应，而中间ET值所应用的时间很短(例如，仅在瞬时阶段)，可以看到中间ET值的相对频率f接近零。因此，在步骤216中，所识别的ET值可以是完整的集合T1、T2、T3、T4、T5、T6。可替代地，如果强制执行了最低相对频率的附加要求，这可能会导致排除T2。
在第五步骤218中，在步骤216中所识别的ET值中的一个被分配到摄像机150的ET变量。这样做是希望找到适合于场景的连续成像的一ET值，或者找到至少非常接近该值的值，使得曝光失配ΔE的量级低于阈值Eth，并且微调可以被委托给AE算法110。在步骤220中，为了对是否是这种情况进行估计，不等式(2)被重新估计。
如果从步骤220得出曝光失配ΔE不再是大的失配(N分支)，则可以恢复正常操作。如果AE算法110先前已经被停用，则恢复(作为步骤222)可以包括重新激活AE算法110。此外，在正常操作中，按照步骤210来记录ET值。
相反，如果不等式(2)仍然成立，则从步骤218继续执行，由此考虑进一步的ET分配。对于所述第一个ET分配和进一步的ET分配(如果有)，方法200可以包括不同的策略。降低相对频率是一种选择。降低相对频率并结合当前曝光失配的符号(过度曝光、曝光不足)是另一种选择。进一步的选择是使用降低的相对频率，同时排除已经在大的曝光失配的当前事件中分配过的ET值。更进一步的选择是使用与当前曝光失配的符号相结合的降低的相对频率，同时排除已经在大的曝光失配的当前事件中分配过的ET值。
图3图示了最后一个选项的应用。当图示的过程开始时，ET变量具有值t0，并且曝光失配ΔE指示了严重的曝光不足。ET值T4、T5、T6(在步骤216中所识别的五个或六个值的子集)比t0更长，并且因此可以有效地解决曝光不足的情况。出于同样的原因，低于t0的ET值T1、T2、T3被排除在外，因为它们可能会加剧曝光不足。因为ET值T5是T4、T5、T6中相对较频繁的值，所以它被用于ET变量的第一次分配t1。在这一点之后，步骤220的应用显示曝光失配仍然很大，但是已经改变了符号：摄像机150的当前条件是严重的过度曝光。这使得ET值T4成为第二次分配t2的唯一可用选项，并且然后已识别的ET值已经用尽。如果假设场景中的照明条件只能假设一组稳定的离散值，t2＝T4将是正确的设置。如果其成立，当重新执行步骤220时，曝光失配ΔE仍然超过阈值Eth，则可以推测所成像的场景处于在所记录的ET值中缺少对应部分的照明条件下。分配策略可以通过将控制交还给AE算法110来解决这个结果。在曝光失配ΔE的引导下，AE算法110将收敛到适合于当前照明条件的ET值。
第五步骤218可以包括一个或者多个可选的子步骤。一方面，如果AE算法110被配置成基于曝光失配历史114来递增和递减ET变量，则在上文讨论的方式中，可选的子步骤218.1可以是重置曝光失配历史114。这可以包括对存储曝光失配ΔE的过去值的存储器进行刷新，或者将零值分配到AE算法110的I控制项或者D控制项。子步骤218.1可以结合第一ET值的分配来执行；可替代地，一旦确定了大的曝光失配ΔE，则执行该子步骤。
另一方面，如果摄像机150与具有速率控制功能的视频编码器160相关联，则步骤218可以包括另一可选子步骤218.2，其中速率控制功能被暂时禁用。禁用可以与第一ET值的分配相结合而发生；可替代地，一旦确定了大的曝光失配ΔE，则执行禁用。当发现曝光失配ΔE的量级再次降到阈值以下时，可以重新启用速率控制功能。如上所述，禁用速率控制功能可能会导致在找到ET变量的正确值之前，视频编码器160暂时超过设定点比特率，这在这种情况下是合理的。
根据不同的实施例，步骤218可以包括可选的子步骤218.1、218.2中的任一个、这两者或者都不包括。
步骤214和216的条件可以变化。根据图2中的流程图，响应于步骤212中曝光失配ΔE超过预定义阈值的肯定确定，执行这些步骤。在其他想到的实施例中，分布估计214和具有最高相对频率的ET值的识别216随ET值的记录210一同执行，例如周期性地执行。相应地，只有分配步骤218以步骤212中的估计为条件。在图2的流程图中，该可替代的条件结构相当于将步骤214和216定位在步骤212之前，其N分支在步骤212之前立即结束。步骤214和216的无条件执行可能增加总的计算工作量，但同时可能减少在步骤212中的肯定确定与所识别的ET值中的一个的第一次分配218之间所经过的反应时间。这可能有利于快速收敛。
上文已经参考几个实施例主要描述了本公开的各个方面。但是，如本领域技术人员容易理解的，在由所附专利权利要求限定的本发明的范围内，除了上文公开的实施例的其他实施例也是可能的。

Claims (16)

1.一种控制摄像机的曝光时间ET变量的方法，所述摄像机与自动曝光AE算法相关联，所述自动曝光AE算法被配置成通过递增和递减所述ET变量来减少曝光失配ΔE，其中，所述曝光失配表示过度曝光或者曝光不足，所述方法包括：
对于由所述摄像机所成像的场景，对在所述AE算法有效时所应用的ET值进行记录；
当所述摄像机对所述场景进行成像时，确定所述曝光失配超过阈值；
对所记录的ET值的分布进行估计；
基于所估计的分布，识别多个相对最频繁的ET值；以及
响应于确定所述曝光失配超过所述阈值，将所识别的ET值中的一个分配到所述ET变量。
2.根据权利要求1所述的方法，进一步包括：
确定所述曝光失配低于所述阈值，并且作为响应，激活所述AE算法。
3.根据权利要求1所述的方法，进一步包括：
确定所述曝光失配仍然超过所述阈值，并且作为响应，将所识别的ET值中的不同的ET值分配到所述ET变量。
4.根据权利要求1所述的方法，其中，基于最大相对频率来选择所分配的一个所识别的ET值中的多个。
5.如权利要求1所述的方法，其中，
如果所述曝光失配与曝光不足相对应，则所分配的一个或所识别的ET值中的多个被选择为比当前ET长的所识别的ET值；以及
如果所述曝光失配与过度曝光相对应，则所分配的一个或所识别的ET值中的多个被选择为比当前ET短的所识别的ET值。
6.根据权利要求5所述的方法，其中，所识别的ET值中的已分配的多个被排除。
7.根据权利要求1所述的方法，其中，所述AE算法被配置成基于曝光失配历史来递增和递减所述ET变量，所述方法进一步包括：
与将所识别的ET值中的所述一个分配到所述ET变量相结合，重置所述AE算法的所述曝光失配历史。
8.根据权利要求1所述的方法，其中，所述摄像机与具有可选速率控制的视频编码器相关联，所述方法进一步包括：
与将所识别的ET值中的所述一个分配到所述ET变量相结合，暂时禁止所述视频编码器的所述速率控制。
9.根据权利要求1所述的方法，其中，所述估计步骤限于晚于预定义时期的ET值。
10.根据权利要求9所述的方法，其中，所述预定义时期在一个月与一年之间。
11.根据权利要求9所述的方法，其中，所述预定义时期在一小时与一天之间。
12.根据权利要求1所述的方法，其中，所述识别步骤限于所述AE算法已经收敛到的ET值。
13.根据权利要求1所述的方法，进一步包括对至少一个其他场景的ET值进行记录，其中，所述场景在下列中的一个或多个方面不同：
一天中的时间；
平移、倾斜和/或缩放设置。
14.根据权利要求1所述的方法，其中，所述摄像机是固定安装的。
15.一种非暂时性计算机可读存储介质，其上存储有包括指令的计算机程序，当所述程序由计算机执行时，所述指令使得所述计算机执行权利要求1所述的方法。
16.一种用于控制摄像机的曝光时间ET变量的曝光时间控制器，所述摄像机与自动曝光AE算法相关联，所述自动曝光AE算法被配置成通过递增和递减所述ET变量来减少曝光失配ΔE，其中，所述曝光失配表示过度曝光或者曝光不足，所述曝光时间控制器包括：
存储器，用于对在所述摄像机对场景进行成像并且所述算法有效时所应用的ET值进行记录；以及
处理电路，被配置成：
当所述摄像机对所述场景进行成像时，确定所述曝光失配超过阈值；
对所记录的ET值的分布进行估计；
基于所估计的分布，识别多个相对最频繁的ET值；以及，
响应于确定述曝光失配超过所述阈值，将所识别的ET值中的一个分配到所述ET变量。
CN202210328576.5A 2021-04-13 2022-03-30 控制摄像机的曝光时间变量的方法、控制器和介质 Active CN115209058B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP21167954.3A EP4075790B1 (en) 2021-04-13 2021-04-13 Exposure time control in a video camera
EP21167954.3 2021-04-13

Publications (2)

Publication Number Publication Date
CN115209058A true CN115209058A (zh) 2022-10-18
CN115209058B CN115209058B (zh) 2024-04-09

Family

ID=75497801

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210328576.5A Active CN115209058B (zh) 2021-04-13 2022-03-30 控制摄像机的曝光时间变量的方法、控制器和介质

Country Status (3)

Country Link
US (1) US11653100B2 (zh)
EP (1) EP4075790B1 (zh)
CN (1) CN115209058B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110298886A1 (en) * 2010-06-06 2011-12-08 Apple, Inc. Auto Exposure Techniques for Variable Lighting Conditions
US9426357B1 (en) * 2013-08-28 2016-08-23 Ambarella, Inc. System and/or method to reduce a time to a target image capture in a camera
US20180278823A1 (en) * 2017-03-23 2018-09-27 Intel Corporation Auto-exposure technologies using odometry
CN109167929A (zh) * 2018-09-30 2019-01-08 深圳市商汤科技有限公司 车载相机参数的调节方法、装置与电子设备
US20190191106A1 (en) * 2017-12-20 2019-06-20 Texas Instruments Incorporated Multi camera image processing
WO2020082745A1 (zh) * 2018-10-26 2020-04-30 华为技术有限公司 摄像装置调整方法及相关设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030184673A1 (en) * 2002-04-02 2003-10-02 Michael Skow Automatic exposure control for digital imaging
US7911518B2 (en) * 2005-02-01 2011-03-22 Samsung Electronics Co., Ltd. Variable exposure for color image sensor
US7612813B2 (en) * 2006-02-03 2009-11-03 Aptina Imaging Corporation Auto exposure for digital imagers
JP4438847B2 (ja) * 2007-09-28 2010-03-24 ソニー株式会社 撮像装置、撮像制御方法及び撮像制御プログラム
JP2012150372A (ja) * 2011-01-21 2012-08-09 Kyocera Corp カメラ装置および携帯端末
GB201312892D0 (en) * 2013-07-18 2013-09-04 Omg Plc Still image capture with exposure control
CN104539852B (zh) 2014-12-26 2018-05-29 中国科学院西安光学精密机械研究所 一种适合瞬间高亮场景的瞬置式自动曝光方法
US10375317B2 (en) * 2016-07-07 2019-08-06 Qualcomm Incorporated Low complexity auto-exposure control for computer vision and imaging systems
CN106454145B (zh) 2016-09-28 2019-05-31 湖南优象科技有限公司 一种具有场景自适应的自动曝光方法
JP6739066B2 (ja) * 2016-09-30 2020-08-12 パナソニックＩｐマネジメント株式会社 撮像制御装置、撮像制御方法、プログラムおよびそれを記録した記録媒体
WO2019205887A1 (zh) * 2018-04-28 2019-10-31 Oppo广东移动通信有限公司 控制拍摄的方法、装置、电子设备及计算机可读存储介质
CN108777768B (zh) 2018-05-31 2020-01-31 中国科学院西安光学精密机械研究所 一种基于标定的快速自动曝光调节方法
CN110661983B (zh) * 2019-11-12 2021-03-19 腾讯科技（深圳）有限公司 图像采集方法、装置、设备及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110298886A1 (en) * 2010-06-06 2011-12-08 Apple, Inc. Auto Exposure Techniques for Variable Lighting Conditions
US9426357B1 (en) * 2013-08-28 2016-08-23 Ambarella, Inc. System and/or method to reduce a time to a target image capture in a camera
US20180278823A1 (en) * 2017-03-23 2018-09-27 Intel Corporation Auto-exposure technologies using odometry
US20190191106A1 (en) * 2017-12-20 2019-06-20 Texas Instruments Incorporated Multi camera image processing
CN109167929A (zh) * 2018-09-30 2019-01-08 深圳市商汤科技有限公司 车载相机参数的调节方法、装置与电子设备
WO2020082745A1 (zh) * 2018-10-26 2020-04-30 华为技术有限公司 摄像装置调整方法及相关设备

Also Published As

Publication number Publication date
CN115209058B (zh) 2024-04-09
EP4075790B1 (en) 2023-04-05
EP4075790A1 (en) 2022-10-19
US20220329717A1 (en) 2022-10-13
US11653100B2 (en) 2023-05-16

Similar Documents

Publication Publication Date Title
CN109005366B (zh) 摄像模组夜景摄像处理方法、装置、电子设备及存储介质
CN111418201B (zh) 一种拍摄方法及设备
KR101883037B1 (ko) 장면 적응적 자동 노출 보상을 이용하는 이미징 장치
CN109194882B (zh) 图像处理方法、装置、电子设备及存储介质
US7725022B2 (en) Dynamic automatic exposure compensation for image capture devices
EP3413545A1 (en) Screen brightness adjusting method and system for terminal, and terminal
US8248482B2 (en) Digital camera personalization
CN110798626B (zh) 一种自动曝光调节方法、系统及设备
TW201704836A (zh) 曝光控制系統及其方法
CN110933294A (zh) 一种图像处理方法、终端及计算机存储介质
US7965321B2 (en) Imaging device, imaging control method, and imaging control program
US20190394379A1 (en) Auto exposure control predictive convergence
US11178401B2 (en) Method and bitrate controller for controlling output bitrate of a video encoder
CN112637476A (zh) 一种视频录制方法、装置、终端以及计算机可读存储介质
CN113163127A (zh) 图像处理方法、装置、电子设备及存储介质
CN115209058B (zh) 控制摄像机的曝光时间变量的方法、控制器和介质
CN115665556B (zh) 一种自动曝光方法、装置、设备及存储介质
CN117528228A (zh) 相机功耗控制方法、装置、电子设备及计算机存储介质
US6831696B1 (en) Exposure control of an imaging apparatus using a plurality of photometry frames
KR20050071726A (ko) 영상 처리 장치 및 그 방법
US20190037146A1 (en) Image processing apparatus, control method thereof, and storage medium
JPH09186930A (ja) 撮像装置
CN112788364B (zh) 码流动态调整装置、方法及计算机可读存储介质
US11818465B2 (en) Systems, apparatus, and methods for stabilization and blending of exposures
US20230108667A1 (en) Video monitoring with robust privacy masking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant