CN114071023A - 图像传感器曝光时序切换方法及装置 - Google Patents

图像传感器曝光时序切换方法及装置 Download PDF

Info

Publication number
CN114071023A
CN114071023A CN202111371686.1A CN202111371686A CN114071023A CN 114071023 A CN114071023 A CN 114071023A CN 202111371686 A CN202111371686 A CN 202111371686A CN 114071023 A CN114071023 A CN 114071023A
Authority
CN
China
Prior art keywords
exposure
frame
register
image
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111371686.1A
Other languages
English (en)
Other versions
CN114071023B (zh
Inventor
张建国
何云
王俊杰
喻义淞
卓康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Image Design Technology Co Ltd
Original Assignee
Chengdu Image Design Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Image Design Technology Co Ltd filed Critical Chengdu Image Design Technology Co Ltd
Priority to CN202111371686.1A priority Critical patent/CN114071023B/zh
Publication of CN114071023A publication Critical patent/CN114071023A/zh
Application granted granted Critical
Publication of CN114071023B publication Critical patent/CN114071023B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本发明提供了一种图像传感器曝光时序切换方法及装置，该方法包括：图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，寄存器信息包括寄存器的时间参数和时间参数在第N+2帧生效的信息；图像传感器工作在第N+1帧图像的曝光过程中，根据时间参数计算第N+2帧图像的曝光起始点，在到达曝光起始点时，图像传感器开始第N+2帧图像的曝光；当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。该方法基于在第N帧配置寄存器信息，在N+1帧完成曝光起始点和读时序起始地址的计算，并在N+2帧进行曝光时序的切换，用以改善现有技术中切换曝光时序需要断电的问题。

Description

图像传感器曝光时序切换方法及装置
技术领域
本发明涉及半导体集成电路技术领域，尤其涉及一种图像传感器曝光时序切换方法及装置。
背景技术
目前，拍摄设备被应用到各个领域，随着影像技术的快速发展，对不同场景的拍照要求越来越高，对拍照所得图像最终呈现效果的要求也越来越高。然而，对于运动的物体而言，由于在拍摄图像时物体不断地运动，拍摄得到图像中会产生明显的拖影，而拖影又会严重影响图像质量，从而导致拍摄设备无法捕获清晰的图像。
为了解决拍摄运动物体时产生的拖影，故结合大小像素和DCG(双转换增益，DualConversion Gain)技术来完美解决，即DCG曝光技术；为了能够呈现更大范围的色彩和亮度等级，故运用DOL(数字重叠，Digital Overlap)多帧技术“准同时”输出多帧不同曝光时间的图像，即DOL曝光技术，然后做图像融合得到HDR(高动态范围，High Dynamic Range)图像。
现有的在光照强度剧烈变化的场景中得到高动态范围图像的方式通常为在一个像素区域内嵌入两个发光二极管，两个发光二极管同时获取不同曝光条件的图像，通过合成处理，得到分辨率较高的HDR图像，该模式也称之为双PD模式，例如双PD模式可以为：DOL2+SPD曝光模式、DCG+SPD曝光模式、DCG+SPD2R曝光模式，双PD模式也可以为其他曝光模式。但是，当遇到由拍摄运动物体到高动态范围的复杂应用环境时，上面的曝光时序便突显适用性不够，为了呈现HDR图像，往往需要在不同的曝光时序之间进行切换。而以往正常切换两种不同的曝光时序时需先对图像传感器断电操作，然后重新配置需要的曝光时序，这个过程会浪费较多的时间。
因此需要设计一种无需断电的曝光时序切换方法。
发明内容
本发明的目的在于提供一种图像传感器曝光时序切换方法及装置，该方法基于在第N帧配置寄存器信息，在N+1帧完成曝光起始点和读时序起始地址的计算，并在N+2帧进行曝光时序的切换，用以改善现有技术中切换曝光时序需要断电的问题。
第一方面，本申请实施例提供一种图像传感器曝光时序切换方法，包括：图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；在到达所述曝光起始点时，图像传感器开始第N+2帧图像的曝光；当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。
本发明的图像传感器曝光时序切换方法的有益效果在于：通过图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；在到达所述曝光起始点时，图像传感器开始第N+2帧图像的曝光；当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址，由于在第N帧配置寄存器信息，使所述图像传感器准备切换曝光时序，且由于读时序需要等到前一帧有效地址全部输出完成才可以切换曝光时序中的读时序，因此在第N+1帧计算N+2帧处的曝光起始点和读时序起始地址，并根据计算出的起始点和时序地址在第N+2帧处相应地址处分别完成曝光时序和读时序的切换，进而完成时序的切换过程，该过程无需断电。
在一种可行的实施例中，所述方法还包括：针对第N+3帧图像，以及第N+3帧图像之后的任意一帧图像均执行如下处理：根据切换后的曝光时序计算图像的曝光起始点和读时序起始地址。其有益效果在于：通过在第N+1帧处进行曝光时序的切换，并根据切换后的曝光时序进行第N+3帧和第N+3帧之后的任意一帧图像的曝光起始点和读时序起始地址的计算，使得第N+3帧和第N+3帧之后的任意一帧图像按照切换后的曝光时序进行曝光。
在一种可行的实施例中，所述方法还包括：通过同步信号将寄存器信息同步至图像传感器。其有益效果在于：进行计算之前通过所述同步信号将所述寄存器信息同步至图像传感器，提升计算的准确度。
在一种可行的实施例中，所述寄存器信息包括控制时序切换的时序模式寄存器、长曝光寄存器、中曝光寄存器和短曝光寄存器，所述时序模式寄存器用于控制在第N+2帧切换至所述待切换曝光时序，长曝光寄存器、中曝光寄存器和短曝光寄存器均用于控制曝光时长。其有益效果在于：通过时序模式寄存器进行曝光时序的切换，并通过所述长曝光寄存器、中曝光寄存器和短曝光寄存器控制曝光时序中各种曝光时长。
在一种可行的实施例中，所述图像传感器切换至待切换曝光时序之前工作在DCG+SPD的曝光时序；所述图像传感器切换至待切换曝光时序之前工作在DOL2+SPD的曝光时序。其有益效果在于：所述图像传感器存在至少两种曝光时序：DCG+SPD的曝光时序、DOL2+SPD的曝光时序，正常工作时所述图像传感器工作在所述DCG+SPD的曝光时序或所述DOL2+SPD的曝光时序，当需要切换曝光时序时，在第N帧处通过配置寄存器信息进行切换准备，并在第N+1帧处计算第N+2帧的读时序起始地址和曝光起始点，在第N+2帧处进行时序的切换，完成所述DCG+SPD的曝光时序向所述DOL2+SPD的曝光时序、或所述DOL2+SPD的曝光时序向所述DCG+SPD的曝光时序的切换。
第二方面，本申请实施例还提供一种图像传感器曝光时序切换装置，该装置包括执行上述第一方面的任意一种可能的设计的方法的模块/单元。这些模块/单元可以通过硬件实现，也可以通过硬件执行相应的软件实现。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1中图(a)为现有技术中断电切换时DCG+SPD曝光时序的时序示意图；
图1中图(b)为现有技术中断电切换时DOL2+SPD曝光时序的时序示意图；
图2为本发明的图像传感器曝光时序切换方法流程图；
图3为本发明的图像传感器DCG+SPD曝光时序切换至DOL2+SPD曝光时序的时序示意图；
图4为本发明的图像传感器DOL2+SPD曝光时序切换至DCG+SPD曝光时序的时序示意图；
图5为图3中DCG+SPD曝光时序切换至DOL2+SPD曝光时序叠加二维时序显示示意图；
图6为图5中二维时序与寄存器、计数器关系示意图；
图7为本发明的图像传感器曝光时序切换装置示意图。
具体实施方式
图1中图(a)为现有技术中断电切换时DCG+SPD曝光时序的时序示意图，图1中图(b)为现有技术中断电切换时DOL2+SPD曝光时序的时序示意图。
如图1所示，以本申请的寄存器、计数器对现有技术中通过断电处理方式进行曝光时序切换时的曝光起始点和读时序起始地址进行计算，以三重曝光模式为例，其计算公式和数值如下：
当时序为DCG+SPD曝光时序时，所述DCG+SPD曝光时序包括DCG曝光和SPD曝光，所述DCG曝光和所述SPD曝光的曝光起始点分别为EXP_LEF_STRAT_ROW和EXP_SPD_STRAT_ROW，其计算公式如下：
ROW_CNT＝0且COL_CNT＝CREG_FRAME_W–1时：
EXP_LEF_START_ROW＝3*CREG_FRAME_H–EXP_LEF；
ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_SPD_START_ROW＝3*CREG_FRAME_H–EXP_SPD；
所述DCG曝光和所述SPD曝光的读时序起始地址分别为READ_LEF_START_ROW和READ_SPD_START_ROW，其值如下：
READ_LEF_START_ROW＝0；
READ_SPD_START_ROW＝2；
当时序为DOL2+SPD曝光时序时，所述DOL2+SPD曝光时序包括HCG曝光、LCG曝光和SPD曝光，所述HCG曝光、LCG曝光和SPD曝光的曝光起始点分别为EXP_LEF_STRAT_ROW、EXP_MEF_STRAT_ROW和EXP_SPD_STRAT_ROW，其计算公式如下：
ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_LEF_START_ROW＝3*CREG_FRAME_H–EXP_LEF；
ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_MEF_START_ROW＝READ_START_PNT_MEF–EXP_MEF
ROW_CNT＝READ_START_PNT_MEF+1且COL_CNT＝CREG_FRAME_W-1时：
当EXP_SPD<＝READ_STRAT_PNT_MEF时：
EXP_SPD_START_ROW＝READ_START_PNT_MEF–EXP_SPD；
当EXP_SPD>READ_STRAT_PNT_MEF时：
EXP_SPD_START_ROW＝3*CREG_FRAME_H–EXP_SPD；
所述HCG曝光、LCG曝光和SPD曝光的读时序起始地址分别为READ_LEF_START_ROW、READ_MEF_START_ROW和READ_SPD_START_ROW，其值如下：
READ_LEF_START_ROW＝0；
READ_MEF_START_ROW＝READ_STRAT_PNT_MEF；
READ_SPD_START_ROW＝READ_STRAT_PNT_MEF+1。
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。除非另外定义，此处使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本文中使用的“包括”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。
下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述。其中，在本发明实施例的描述中，以下实施例中所使用的术语只是为了描述特定实施例的目的，而并非旨在作为对本发明的限制。如在本发明的说明书和所附权利要求书中所使用的那样，单数表达形式“一种”、“所述”、“上述”、“该”和“这一”旨在也包括例如“一个或多个”这种表达形式，除非其上下文中明确地有相反指示。还应当理解，在本发明以下各实施例中，“至少一个”、“一个或多个”是指一个或两个以上(包含两个)。术语“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系；例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B的情况，其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本发明的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。术语“连接”包括直接连接和间接连接，除非另外说明。“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
在本发明实施例中，“示例性地”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性地”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性地”或者“例如”等词旨在以具体方式呈现相关概念。
针对现有技术存在的问题，本发明的实施例提供了一种图像传感器曝光时序切换方法及装置。
图2为本发明的图像传感器曝光时序切换方法流程图。
本发明的一些实施例中，如图2所示，该图像传感器曝光时序切换方法可以由图像传感器执行，该方法包括：
S201，图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；
S202，图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；
S203，在到达所述曝光起始点时，图像传感器开始第N+2帧图像的曝光；
S204，当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。
本发明的一些具体实施例中，通过在所述图像传感器工作的第N帧图像曝光过程中，配置寄存器信息，进行曝光时序切换的准备工作，所述第N帧可以为所述图像传感器工作时的任意一帧，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息，所述时间参数为包括所述曝光时序中第一重曝光的读时序起始地址的时间信息，由于在同一种曝光时序中，每一帧的时间长度相等，即图像一帧一帧进行曝光，每一帧的时间跨度相等，根据该曝光时序中第一重曝光的读时序起始地址、并根据配置的寄存器能够计算出各重曝光的读时序起始地址以及各重曝光的曝光起始点，并能够计算之后各帧的各重曝光的读时序起始地址以及各重曝光的曝光起始点。
图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点，由于在第N帧配置寄存器信息，此时所述图像传感器正在运行，故在第N+1处继续执行原有的曝光时序，并通过第N+1帧内的曝光时序过程中计算第N+2帧处的待切换后的曝光时序的各重曝光的起始地址、起始点，避免显示的图像信息出现错误。
在到达所述曝光起始点时，图像传感器开始第N+2帧图像的曝光，当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址，一方面第N+1帧图像的有效地址全部读取完成后才能进行切换，另一方面根据计算的起始地址和起始点在到达第N+2帧处进行待切换的曝光时序的曝光，直接完成了曝光时序的切换，无需断电操作，相比于现有技术中断电切换节省时间，且能够便捷的切换曝光时序、可以灵活使用。
在一些实施例中，所述时间参数为包括所述曝光时序中任意一重曝光的读时序起始地址或曝光时序起始点的时间信息，
在一些实施例中，所述图像传感器的曝光时序可以为三重曝光、四重曝光、五重曝光或更多重的曝光模式。
在一些实施例中，也可以在第N帧配置寄存器信息，直接计算第N+X帧处的时间参数，在第N+X帧处进行曝光时序的切换，X为大于等于3的正整数。
在一些实施例中，也可以在第N帧配置寄存器信息，直接计算第N+1帧处的时间参数，在第N+1帧处进行曝光时序的切换。
本发明的一些实施例中，所述方法还包括：针对第N+3帧图像，以及第N+3帧图像之后的任意一帧图像均执行如下处理：根据切换后的曝光时序计算图像的曝光起始点和读时序起始地址。
本发明的一些具体实施例中，由于在第N+2帧处完成了曝光时序的切换，故在第N+3帧图像、以及第N+3帧图像之后的任意一帧图像均按照切换后的曝光时序计算的曝光起始点和读时序起始地址进行曝光。
在一些实施例中，当在第N+X帧处进行曝光时序的切换或在第N+1帧处进行曝光时序的切换时，则直接在第N+2帧图像、以及第N+2帧图像之后的任意一帧图像均按照切换后的曝光时序计算的曝光起始点和读时序起始地址进行曝光。
在一些实施例中，也可以将切换后的曝光时序执行一定的帧数后切换回原有的曝光时序或另一种曝光时序。
本发明的一些实施例中，所述方法还包括：通过同步信号将寄存器信息同步至图像传感器。
本发明的一些具体实施例中，在配置寄存器信息时，通过同步信号将寄存器信息同步至图像传感器，使得各个寄存器的时间线统一，能够提升计算的准确度。
本发明的一些实施例中，所述寄存器信息包括控制时序切换的时序模式寄存器、长曝光寄存器、中曝光寄存器和短曝光寄存器，所述时序模式寄存器用于控制在第N+2帧切换所述待切换曝光时序，长曝光寄存器、中曝光寄存器和短曝光寄存器均用于控制曝光时长。
本发明的一些具体实施例中，需要配置所述时序模式寄存器对曝光时序的切换进行控制，由于所述图像传感器的曝光时序为三重曝光，故需要配置所述长曝光寄存器、中曝光寄存器和短曝光寄存器控制各重曝光的长度。
本发明的一些实施例中，当所述图像传感器的曝光时序为四重曝光，需要配置另外一个寄存器进行曝光时长的控制。
此外，为了控制各重曝光之间的时间跨度，也可以设置寄存器进行控制。
本发明的一些实施例中，所述图像传感器切换至待切换曝光时序之前工作在DCG+SPD的曝光时序；所述图像传感器切换至待切换曝光时序之前工作在DOL2+SPD的曝光时序。
本发明的一些具体实施例中，所述DCG+SPD的曝光时序和所述DOL2+SPD的曝光时序均为对应两个发光二极管的三重曝光的曝光时序，所述DCG+SPD的曝光时序包括DCG曝光和SPD曝光，所述DCG曝光和SPD曝光分别对应一个发光二极管，且该种时序下所述长曝光寄存器、中曝光寄存器或短曝光寄存器中的中曝光寄存器不进行工作，所述DOL2+SPD的曝光时序包括HCG曝光、LCG曝光和SPD曝光，所述HCG曝光和LCG曝光对应同一个发光二极管进行曝光，所述SPD曝光对应另外一个发光二极管进行曝光。使用时，所述图像传感器可以由所述DCG+SPD曝光时序向所述DOL2+SPD曝光时序切换，也可以由所述DOL2+SPD曝光时序向所述DCG+SPD曝光时序切换。
亦可以称之为，在所述DCG+SPD曝光时序下，所述DCG曝光即当前曝光时序下的所述第一重曝光和所述第二重曝光，所述SPD曝光即所述第三重曝光；在所述DOL2+SPD曝光时序下，所述HCG曝光即所述第一重曝光，所述LCG曝光即所述第二重曝光，所述SPD曝光即所述第三重曝光。
本发明的一些实施例中，在所述图像传感器内部定义行计数器(ROW_CNT)、列计数器(COL_CNT)，其中所述COL_CNT以寄存器CREG_FRAME_W作为计数上限在0～CREG_FRAME_W-1范围内循环计数，所述ROW_CNT以寄存器CREG_FRAME_H作为计数上限在0～3*CREG_FRAME_H-1范围内循环计数，同时每当COL_CNT＝CREG_FRAME_W-1时所述ROW_CNT便执行加一操作。所述ROW_CNT记数的时间为一帧三重曝光模式画幅的时间长度。
在一些实施例中，所述行计数器和所述列计数器也可以以其他的形式存在。
以三重曝光模式为例，所述配置寄存器信息包括配置EXP_LEF、EXP_MEF、EXP_SPD、READ_START_PNT_MEF和TIMING_MODE等寄存器，所述三重曝光包括第一重曝光、第二重曝光和第三重曝光，所述EXP_LEF控制所述第一重曝光的曝光时长，所述EXP_MEF控制所述第二重曝光的曝光时长，所述EXP_SPD控制所述第三重曝光的曝光时长，所述READ_START_PNT_MEF控制在所述DOL2+SPD曝光时序中所述第一重曝光的读时序起始地址与所述第二重曝光的读时序起始地址之间的间隔行数，所述TIMING_MODE控制曝光时序的切换。
在一些实施例中，配置所述EXP_LEF、所述EXP_MEF、所述EXP_SPD、所述READ_START_PNT_MEF和所述TIMING_MODE等寄存器也可以以其他形式存在。
图3为本发明的图像传感器DCG+SPD曝光时序切换至DOL2+SPD曝光时序的时序示意图，图4为本发明的图像传感器DOL2+SPD曝光时序切换至DCG+SPD曝光时序的时序示意图，图5为图3中DCG+SPD曝光时序切换至DOL2+SPD曝光时序叠加二维时序显示示意图，图6为图5中二维时序与寄存器、计数器关系示意图。
如图3至图6所示，本申请中将所述曝光时序进行切换时的曝光起始点和读时序起始地址的计算公式和数值如下：
场景一
当DCG+SPD曝光时序切换至DOL2+SPD曝光时序时，在N帧配置DOL2+SPD时序所需的EXP_LEF、EXP_MEF、EXP_SPD、READ_START_PNT_MEF和TIMING_MODE等寄存器，所述HCG曝光、LCG曝光和SPD曝光的曝光起始点分别为EXP_LEF_START_ROW、EXP_MEF_START_ROW和EXP_SPD_START_ROW，其计算公式如下：
当N+1帧处ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_LEF_START_ROW＝3*CREG_FRAME_H–EXP_LEF；
当N+2帧处ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_MEF_START_ROW＝READ_START_PNT_MEF–EXP_MEF；
当N+1帧处ROW_CNT＝READ_START_PNT_MEF+1且COL_CNT＝CREG_FRAME_W-1时：
当EXP_SPD<＝READ_STRAT_PNT_MEF时：
EXP_SPD_START_ROW＝READ_START_PNT_MEF–EXP_SPD；
当EXP_SPD>READ_STRAT_PNT_MEF时：
EXP_SPD_START_ROW＝3*CREG_FRAME_H–EXP_SPD；
在N+2帧时，所述HCG曝光、LCG曝光和SPD曝光的读时序起始地址如下：
READ_LEF_START_ROW＝0；
READ_MEF_START_ROW＝READ_STRAT_PNT_MEF；
READ_SPD_START_ROW＝READ_STRAT_PNT_MEF。
场景二
当DOL2+SPD曝光时序切换DCG+SPD曝光时序时，在N帧配置DCG+SPD时序所需的EXP_LEF，EXP_SPD和TIMING_MODE等寄存器，在N+1帧处分别计算所述DCG曝光和所述SPD曝光的曝光起始点，分别为EXP_LEF_STRAT_ROW和EXP_SPD_STRAT_ROW，其计算公式如下：
N+1帧处ROW_CNT＝0且COL_CNT＝CREG_FRAME_W-1时：
EXP_LEF_START_ROW＝3*CREG_FRAME_H–EXP_LEF；
N+1帧处ROW_CNT＝READ_START_PNT_MEF+1且COL_CNT＝
CREG_FRAME_W-1时：
EXP_SPD_START_ROW＝3*CREG_FRAME_H–EXP_SPD；
在N+2帧时，DCG+SPD的曝光时序的读时序起始地址如下：
READ_LEF_START_ROW＝0；
READ_SPD_START_ROW＝READ_STRAT_PNT_MEF+1；
当由DOL2+SPD曝光时序切换至DCG+SPD曝光时序时，由于DOL2+SPD曝光时序下，第二重曝光的读时序起始地址为READ_MEF_START_ROW READ_STRAT_PNT_MEF，同时DCG+SPD中DCG读时序的切换须等到DOL2+SPD中第三重曝光的读时序全部输出完成以后方可切换，故在N+1帧处ROW_CNT(行计数器)须计数至FRAME_H+TIMING_SW_AREA-1，其中TIMING_SW_AREA＝READ_STRAT_PNT_MEF+2。
值得说明的是，DOL2中数字2即存在两重曝光的曝光模式，在一些情况下也可以称之为2DOL或其他名称。需要说明的是，基于本发明的DOL2+SPD曝光时序切换至DCG+SPD曝光时序或者DCG+SPD曝光时序切换至DOL2+SPD曝光时序的切换方式，可以演变类似的其它曝光时序的切换，例如DCG+SPD2R曝光时序切换至DCG+LCG+SPD曝光时序亦应在本发明的保护范围内。
图7为本发明的图像传感器曝光时序切换装置示意图。
基于上述图像传感器图像输出时序的控制方法，本申请实施例还公开一种图像传感器曝光时序切换装置，如图7所示，该装置700用于实现以上各个方法实施例中记载的方法，其包括：配置单元701、计算单元702和控制单元703。
配置单元，用于图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；
计算单元，用于图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；
控制单元，用于在到达所述曝光起始点时，控制图像传感器开始第N+2帧图像的曝光；当第N+1帧图像的有效地址全部读取完成后，控制图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。
一种可能的实施例中，所述读写控制单元703，还用于：
针对第N+3帧图像，以及第N+3帧图像之后的任意一帧图像：根据切换后的曝光时序计算图像的曝光起始点和读时序起始地址。
一种可能的实施例中，所述装置还包括同步单元，所述同步单元用于：
通过同步信号将寄存器信息同步至图像传感器。
一种可能的实施例中，所述寄存器信息包括控制时序切换的时序模式寄存器、长曝光寄存器、中曝光寄存器和短曝光寄存器，所述寄存器用于控制在第N+2帧切换至所述待切换曝光时序，长曝光寄存器、中曝光寄存器和短曝光寄存器均用于控制曝光时长。
一种可能的实施例中，所述图像传感器切换至待切换曝光时序之前工作在DCG+SPD的曝光时序；所述图像传感器切换至待切换曝光时序之前工作在DOL2+SPD的曝光时序。
总之，以上所述仅为本发明技术方案的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种图像传感器曝光时序切换方法，其特征在于，包括：
图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；
图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；
在到达所述曝光起始点时，图像传感器开始第N+2帧图像的曝光；
当第N+1帧图像的有效地址全部读取完成后，图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
针对第N+3帧图像，以及第N+3帧图像之后的任意一帧图像均执行如下处理：根据切换后的曝光时序计算图像的曝光起始点和读时序起始地址。
3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：
通过同步信号将寄存器信息同步至图像传感器。
4.根据权利要求1或2所述的方法，其特征在于，所述寄存器信息包括控制时序切换的时序模式寄存器、长曝光寄存器、中曝光寄存器和短曝光寄存器，所述时序模式寄存器用于控制在第N+2帧切换所述待切换曝光时序，长曝光寄存器、中曝光寄存器和短曝光寄存器均用于控制曝光时长。
5.根据权利要求1或2所述的方法，其特征在于，所述图像传感器切换至待切换曝光时序之前工作在DCG+SPD的曝光时序；所述图像传感器切换至待切换曝光时序之前工作在DOL2+SPD的曝光时序。
6.一种图像传感器曝光时序切换装置，其特征在于，包括：
配置单元，用于图像传感器工作在第N帧图像的曝光过程中，配置寄存器信息，所述寄存器信息包括寄存器的时间参数和所述时间参数在第N+2帧生效的信息；
计算单元，用于图像传感器工作在第N+1帧图像的曝光过程中，根据所述时间参数计算第N+2帧图像的曝光起始点；
控制单元，用于在到达所述曝光起始点时，控制图像传感器开始第N+2帧图像的曝光；当第N+1帧图像的有效地址全部读取完成后，控制图像传感器切换至待切换曝光时序的读时序起始地址开始读取第N+2帧图像的有效地址。
7.根据权利要求6所述的装置，其特征在于，所述控制单元还用于：
针对第N+3帧图像，以及第N+3帧图像之后的任意一帧图像：根据切换后的曝光时序计算图像的曝光起始点和读时序起始地址。
8.根据权利要求6或7所述的装置，其特征在于，所述装置还包括同步单元，所述同步单元用于：
通过同步信号将寄存器信息同步至图像传感器。
9.根据权利要求6或7所述的装置，其特征在于，所述寄存器信息包括控制时序切换的时序模式寄存器、长曝光寄存器、中曝光寄存器和短曝光寄存器，所述寄存器用于控制在第N+2帧切换至所述待切换曝光时序，长曝光寄存器、中曝光寄存器和短曝光寄存器均用于控制曝光时长。
10.根据权利要求6或7所述的装置，其特征在于，所述图像传感器切换至待切换曝光时序之前工作在DCG+SPD的曝光时序；所述图像传感器切换至待切换曝光时序之前工作在DOL2+SPD的曝光时序。
CN202111371686.1A 2021-11-18 2021-11-18 图像传感器曝光时序切换方法及装置 Active CN114071023B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111371686.1A CN114071023B (zh) 2021-11-18 2021-11-18 图像传感器曝光时序切换方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111371686.1A CN114071023B (zh) 2021-11-18 2021-11-18 图像传感器曝光时序切换方法及装置

Publications (2)

Publication Number Publication Date
CN114071023A true CN114071023A (zh) 2022-02-18
CN114071023B CN114071023B (zh) 2023-06-02

Family

ID=80278162

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111371686.1A Active CN114071023B (zh) 2021-11-18 2021-11-18 图像传感器曝光时序切换方法及装置

Country Status (1)

Country Link
CN (1) CN114071023B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003008980A (ja) * 2001-06-26 2003-01-10 Mitsubishi Electric Corp 撮像機能内蔵携帯端末装置及びその輝度制御方法
CN102523456A (zh) * 2010-08-18 2012-06-27 苹果公司 双图像传感器图像处理系统和方法
CN102693403A (zh) * 2010-12-30 2012-09-26 手持产品公司 具有照明和曝光控制的终端
CN103065114A (zh) * 2011-09-30 2013-04-24 手持产品公司 采用双目标自动曝光的装置和方法
CN103297686A (zh) * 2012-03-02 2013-09-11 卡西欧计算机株式会社 摄像装置及摄像方法
CN104159043A (zh) * 2014-08-07 2014-11-19 西北核技术研究所 一种超高速双帧图像获取方法
CN105718837A (zh) * 2009-08-12 2016-06-29 手持产品公司 具有多个曝光周期的标记读取终端及方法
CN105763758A (zh) * 2014-10-21 2016-07-13 虹光精密工业股份有限公司 图像感测装置
CN109040623A (zh) * 2018-08-22 2018-12-18 中国电子科技集团公司第四十四研究所 Cmos图像传感器曝光时序控制装置
TW201915581A (zh) * 2017-09-20 2019-04-16 日商倉敷紡績股份有限公司 攝像系統、攝像方法及攝像元件
CN110619593A (zh) * 2019-07-30 2019-12-27 西安电子科技大学 一种基于动态场景的双曝光视频成像系统
CN110809122A (zh) * 2019-11-11 2020-02-18 中国电子科技集团公司第四十四研究所 应用于cmos图像传感器的动态扩展方法
US20200284575A1 (en) * 2014-11-04 2020-09-10 Pixart Imaging Inc. Camera having two exposure modes and imaging system using the same
CN112730875A (zh) * 2021-03-31 2021-04-30 中国空气动力研究与发展中心高速空气动力研究所 快门集成装置、控制系统及时序控制方法

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003008980A (ja) * 2001-06-26 2003-01-10 Mitsubishi Electric Corp 撮像機能内蔵携帯端末装置及びその輝度制御方法
CN105718837A (zh) * 2009-08-12 2016-06-29 手持产品公司 具有多个曝光周期的标记读取终端及方法
CN102523456A (zh) * 2010-08-18 2012-06-27 苹果公司 双图像传感器图像处理系统和方法
CN102693403A (zh) * 2010-12-30 2012-09-26 手持产品公司 具有照明和曝光控制的终端
CN103065114A (zh) * 2011-09-30 2013-04-24 手持产品公司 采用双目标自动曝光的装置和方法
CN103297686A (zh) * 2012-03-02 2013-09-11 卡西欧计算机株式会社 摄像装置及摄像方法
CN104159043A (zh) * 2014-08-07 2014-11-19 西北核技术研究所 一种超高速双帧图像获取方法
CN105763758A (zh) * 2014-10-21 2016-07-13 虹光精密工业股份有限公司 图像感测装置
US20200284575A1 (en) * 2014-11-04 2020-09-10 Pixart Imaging Inc. Camera having two exposure modes and imaging system using the same
TW201915581A (zh) * 2017-09-20 2019-04-16 日商倉敷紡績股份有限公司 攝像系統、攝像方法及攝像元件
CN109040623A (zh) * 2018-08-22 2018-12-18 中国电子科技集团公司第四十四研究所 Cmos图像传感器曝光时序控制装置
CN110619593A (zh) * 2019-07-30 2019-12-27 西安电子科技大学 一种基于动态场景的双曝光视频成像系统
CN110809122A (zh) * 2019-11-11 2020-02-18 中国电子科技集团公司第四十四研究所 应用于cmos图像传感器的动态扩展方法
CN112730875A (zh) * 2021-03-31 2021-04-30 中国空气动力研究与发展中心高速空气动力研究所 快门集成装置、控制系统及时序控制方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
NAN CUI ET AL.: ""A 110 × 64 150 mW 28 frames/s Integrated Visible/Near-Infrared CMOS Image Sensor with Dual Exposure Times for Image Guided Surgery"", 《2016 IEEE INTERNATIONAL SYMPOSIUM ON CIRCUITS AND SYSTEMS (ISCAS)》 *
SHANG-FU YEH ET AL.: ""A Dual-Exposure Single-Capture Wide Dynamic Range CMOS Image Sensor With Columnwise Highly/Lowly Illuminated Pixel Detection"", 《IEEE TRANSACTIONS ON ELECTRON DEVICES 》 *
杨少华;李斌康;罗通顶;郭明安;刘璐;严明;高帅;: "基于普通CCD的每秒百万帧高帧频成像方法", 光子学报 *

Also Published As

Publication number Publication date
CN114071023B (zh) 2023-06-02

Similar Documents

Publication Publication Date Title
US10187576B2 (en) Image-displaying device and image data generation device
US9137442B2 (en) Image-displaying device for displaying index indicating delay in timing between image capture and display
JP5523124B2 (ja) 撮像装置
JP2015115922A (ja) 撮像装置および撮像方法
US20150181139A1 (en) Method and apparatus for acquiring a set of images illuminated by a flash
CN112640426B (zh) 用于缓解led闪烁的图像处理系统
JP7278750B2 (ja) 撮像装置
EP3734964A1 (en) Imaging device, imaging system, and method for driving imaging device
CN108293098A (zh) 固态成像器件、成像装置和电子设备
US20230230212A1 (en) Image processing method and apparatus implementing the same
JP5797072B2 (ja) 撮像装置及びその制御方法、並びにプログラム
JP2005303731A (ja) 信号処理装置、信号処理方法及びデジタルカメラ
CN114071023A (zh) 图像传感器曝光时序切换方法及装置
JP5440245B2 (ja) 撮像装置
JP2006060496A (ja) 画像表示装置
JP2011151454A (ja) 画像処理装置、撮像機器及び画像処理方法
CN111601054B (zh) 图像传感器新型滚筒式曝光的时序控制方法
JP2009027512A (ja) 撮像装置
JPH11313252A (ja) デジタルカメラ装置、画像処理方法、記憶媒体
JP2004153710A (ja) 撮像装置の制御方法および撮像装置
JP2011259269A (ja) 撮影装置
JPH1048708A (ja) Ｌｅｄ照明装置
JPS6262670A (ja) 画像効果装置
US20220284593A1 (en) Image processing apparatus, imaging apparatus, system, image processing method, and program
JP2003274221A (ja) 撮像装置及び撮像装置における表示の制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant