WO2024140873A1 - 图像传感器、传感器架构、摄像模组及电子设备 - Google Patents

图像传感器、传感器架构、摄像模组及电子设备 Download PDF

Info

Publication number
WO2024140873A1
WO2024140873A1 PCT/CN2023/142587 CN2023142587W WO2024140873A1 WO 2024140873 A1 WO2024140873 A1 WO 2024140873A1 CN 2023142587 W CN2023142587 W CN 2023142587W WO 2024140873 A1 WO2024140873 A1 WO 2024140873A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
pixel
comparator
conversion gain
output signal
Prior art date
Application number
PCT/CN2023/142587
Other languages
English (en)
French (fr)
Inventor
罗轶
Original Assignee
维沃移动通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 维沃移动通信有限公司 filed Critical 维沃移动通信有限公司
Publication of WO2024140873A1 publication Critical patent/WO2024140873A1/zh

Links

Definitions

  • CMOS complementary Metal-Oxide Semiconductor
  • TCG-HDR Triple Conversion Gain
  • All pixels are exposed together, and the output signal is amplified with different gains.
  • All pixel units often need to be exposed in high gain mode, medium gain mode and low gain mode respectively, and then read three frames of images at a time, and then synthesize the three frames of images.
  • the synthesized HDR image often has color stratification and signal-to-noise ratio (SNR) drop due to processing defects. For example, in some scenes, some pixels in the output image are locally overexposed or some pixels are underexposed.
  • SNR signal-to-noise ratio
  • an embodiment of the present application provides an image sensor method, including: a pixel array, a conversion gain selection module, and a conversion gain signal buffering and driving module;
  • the conversion gain signal buffer and driving module is used to read the gain mode selection signal corresponding to each pixel unit row by row from the conversion gain selection table, and send the gain mode selection signal to the corresponding pixel unit.
  • the second preset threshold signal preset by the user can also be input into the second comparator for comparison.
  • a comparison result can be obtained, and then the corresponding second comparator output signal of each pixel unit can be obtained.
  • the gain mode selection signal of the pixel unit is obtained as a low-gain mode selection signal
  • the conversion gain selection module includes: an independent image signal processor;
  • the interface module is respectively connected to the conversion gain signal cache and the driving module and the pixel array for communication.
  • the interface module can transmit the pixel signal of each pixel unit in the pixel array to an independent image signal processor, so that the independent image signal processor can analyze the gain mode corresponding to each pixel unit according to the pixel signal to obtain a conversion gain selection table.
  • the interface module can also receive a gain mode selection signal for each column of pixel units sent by an independent image signal processor.
  • NAS Network Attached Storage
  • PC personal computer
  • TV television
  • teller machine a self-service machine
  • the technical solution of the present application can be embodied in the form of a computer software product, which is stored in a storage medium (such as ROM/RAM, a disk, or an optical disk), and includes a number of instructions for a terminal (which can be a mobile phone, a computer, a server, or a network device, etc.) to execute the methods described in each embodiment of the present application.
  • a storage medium such as ROM/RAM, a disk, or an optical disk
  • a terminal which can be a mobile phone, a computer, a server, or a network device, etc.

Abstract

本申请公开了一种图像传感器、传感器架构、摄像模组及电子设备,属于图像处理领域。包括:像素阵列、转换增益选择模块和转换增益信号缓存与驱动模块;像素阵列包括N行像素单元和M列像素单元,同一列中的N个像素单元通过第一连接线与转换增益信号缓存与驱动模块连接,同一列中的N个像素单元通过第二连接线与转换增益选择模块连接,M与N均为正整数;其中,转换增益选择模块用于根据像素阵列输出的像素信号生成转换增益选择表,转换增益选择表中包括各个像素单元对应的转换增益模式选择信号;转换增益信号缓存与驱动模块用于从转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号,并将增益模式选择信号发送到对应的像素单元。

Description

图像传感器、传感器架构、摄像模组及电子设备
相关申请的交叉引用
本申请要求于2022年12月30日提交的申请号为202211724163.5,发明名称为“图像传感器、传感器架构、摄像模组及电子设备”的中国专利申请的优先权,其通过引用方式全部并入本申请。
技术领域
本申请属于图像处理领域,具体涉及一种图像传感器、传感器架构、摄像模组及电子设备。
背景技术
在图像传感器(Complementry Metal-Oxide Semiconductor,CMOS)中,对于图像的动态范围调整,一般都是通过改变所有像素的像素曝光时间以及对像素信号增益进行整体调整来实现的。
相关技术中,三转换增益高动态范围(Triple Conversion Gain,TCG-HDR)技术,所有的像素都是共同进行曝光,其输出的信号进行了不同增益的放大,所有像素单元往往需要分别进行高增益模式下曝光、中增益模式下曝光和低增益模式下曝光后,一次读取三帧图像,再将三帧图像进行合成,而合成得到的HDR图像往往由于处理缺陷,出现色彩分层以及信噪比(Signal to Noise Ratio,SNR)落差。例如,在某些场景输出的图像中有部分像素局域过曝或者部分像素欠曝。
发明内容
本申请实施例的目的是提供一种图像传感器、传感器架构、摄像模组及电子设备,能够解决转换增益高动态范围技术,无法进行逐像素调制,导致的输出图像成像效果较差的问题。
第一方面,本申请实施例提供了一种图像传感器方法,包括:像素阵列、转换增益选择模块和转换增益信号缓存与驱动模块;
所述像素阵列包括N行像素单元和M列像素单元,同一列中的N个所述像素单元通过第一连接线与所述转换增益信号缓存与驱动模块连接,同一列中的N个所述像素单元通过第二连接线与所述转换增益选择模块连接,M与N均为正整数;
其中,所述转换增益选择模块用于根据所述像素阵列输出的像素信号生成转换增益选择表,所述转换增益选择表中包括各个像素单元对应的转换增益模式选择信号;
所述转换增益信号缓存与驱动模块用于从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号,并将所述增益模式选择信号发送到对应的像素单元。
第二方面,本申请实施例提供了一种传感器架构,包括:像素层和电路层;
所述像素层包括:第一键合区域和像素阵列,所述像素阵列与所述第一键合区域通信连接;
所述电路层包括:第二键合区域、转换增益选择模块和转换增益信号缓存与驱动模块,所述第二键合区域分别与转换增益选择模块和转换增益信号缓存与驱动模块通信连接,所述第一键合区域与所述第二键合区域键合连接。
第三方面,本申请实施例提供了一种摄像模组,包括如第一方面所述的图像处理器。
第四方面,本申请实施例提供了一种电子设备,包括如第三方面所述的摄像模组。
在本申请实施例中,通过转换增益模式选择模块,能够有效根据每个像素单元输出的像素信号,自动为每个像素单元确定其对应的转换增益模式选择信号,并且进一步通过转换增益信号缓存与驱动模块从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号后,将增益模式选择信号传输给各个像素单元,每个像素在每一帧时间内根据自适应逻辑自行选择运行于低增益模式或中增益模式或高增益模式,从而实现像素级的增益调整,避免了三次曝光导致的部分像素局域过曝或者部分像素欠曝的问题,本申请的方案无需改变传统像素结构,不改变传统图像处理器读取与信号处理方式,采用列并行控制方法即可以实现对每一个像素的增益模式选择的准确控制。
附图说明
图1为本申请实施例中像素单元的结构示意图;
图2为本申请实施例提供的图像传感器结构示意图之一;
图3为本申请实施例提供的转换增益选择模块结构示意图;
图4为本申请实施例提供的图像传感器结构示意图之二;
图5为本申请实施例提供的传感器架构结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的 对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像传感器、传感器架构、摄像模组及电子设备进行详细地说明。
图1为本申请实施例中像素单元的结构示意图,像素单元的光学模块中的光电二极管(Photodiode,PD)在每一帧时间内负责感光以及光电转换。生成的电荷e-通过TX晶体管开关晶体管后缓存在浮动扩散(Floating Diffusion,FD)电容中。在读取(Readout)阶段,FD内的电荷e-将由源跟随器(Source Follower,SF)晶体管放大后转换成相应的电压,通过SEL晶体管开关后输出像素信号PIX_OUT至像素外。RST晶体管负责将FD重置至电压VDD。TCG功能的实现功能为改变FD的大小,在高转换增益(High Conversion Gain,HCG)模式下,FD需要尽可能的小。而在低转换增益(Low Conversion Gain,LCG)模式下,FD需要尽可能的大。因此,在像素电路中增设了中转换增益(Middle Conversion Gain,MCG),LCG晶体管开关以及电容C1,C2。MCG晶体管开关负责HCG与MCG之间的模式转换,而电容C1负责将FD电容进行扩容。LCG晶体管开关负责LCG的模式转换,而电容C2负责将FD电容进行进一步扩容。当像素需要进行在HCG下时,MCG和LCG晶体管开关断开,FD负责承接由PD转移出的电荷e-。当像素需要进行在MCG模式下时,MCG晶体管闭合将FD与C1连接扩容(RST晶体管开关必须保持断开防止重置)。因此,承接PD转移出的电荷e-为FD+C1。当像素需要进行在LCG模式下时,MCG和LCG晶体管同时闭合将FD与C1和C2连接扩容(RST晶体管开关须保持断开防止重置)。因此,承接PD转移出的电荷e-为FD+C1+C2。总之,TCG功能的实现本质方法为根据所需改变FD电容的大小。
图2为本申请实施例提供的图像传感器结构示意图之一,如图2所示,包括:像素阵列11、转换增益选择模块12和转换增益信号缓存与驱动模块13;
所述像素阵列11包括N行像素单元110和M列像素单元110,同一列中的N个所述像素单元110通过第一连接线与所述转换增益信号缓存与驱动模块13连接,同一列中的N个所述像素单元110通过第二连接线与所述转换增益选择模块12连接,M与N均为正整数;
其中,所述转换增益选择模块12用于根据所述像素阵列11输出的像素信号生成转换增益选择表,所述转换增益选择表中包括各个像素单元对应的转换增益模式选择信号;
所述转换增益信号缓存与驱动模块13用于从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号,并将所述增益模式选择信号发送到对应的像素 单元。
具体地,本申请实施例中所描述的像素阵列包括多个像素单元,其具体可以包括N个处于同一行的像素行,以及M个处于同一列的像素列,对应每个像素阵列中存在有NxM个像素单元。
本申请实施例中为了进一步节省布线空间,同一像素列中的N个像素单元会通过同一个第一连接线与转换增益信号缓存与驱动模块连接,同一像素列中的N个像素单元还会通过同一个第二连接线与转换增益选择模块连接。
在本申请实施例中,每个像素单元在每一帧(Frame)的工作时段分为3个:重置时段(Reset),曝光时段(Exposure),以及读取时段(Readout)。像素阵列的行驱动器控制每一行像素的重置和读取相关信号,并且行与行之间的重置和读取存在一定的时间差。这样可以让每一行的像素与其它行像素的像素信号输出有时间差,让列并行ADC可以每次只同时处理一行像素输出的像素信号。每一行像素在读取完成后直接进入下一帧时间,不需要理会其它行像素的状态。当所有行像素均读取完成,那么一帧画面对应的像素信号输出给转换增益选择模块。
本申请实施例中,所述像素阵列输出的像素信号可以是像素单元在当前帧,经过重置,曝光处理后输出的信号,每个像素单元的输出的像素信号可以是不同的像素信号,在本申请实施例中,转换增益选择模块可以根据当前帧的像素信号,确定下一帧各像素单元对应的增益模式选择信号。
在在一个可选的实施例中,转换增益选择模块用于根据每个像素单元输出的像素信号来确定其对应的增益模式选择信号,然后根据各个像素单元对应的增益模式选择信号,生成转换增益选择表。
本申请实施例中转换增益选择表中记载了每个各个像素单元对应的增益模式选择信号,可选地,转换增益选择表中的增益模式选择信号可以是按照像素阵列的排列来进行排序的。
在一个可选的实施例中,转换增益选择模块可以包括行缓存子模块和行驱动子模块,转换增益选择模块中的行缓存子模块可以根据像素阵列的像素行排列,逐行读取各个像素单元对应的增益模式选择信号,在转换增益信号缓存与驱动模块的行缓存子模块可以每次仅仅缓存一行像素单元的增益模式选择信号。
在卷帘快门曝光的过程中,当像素阵列中的某一行的像素单元进入到读取时段(Readout Period)并需要提供增益模式选择信号进行读取模式选择时,行驱动子模块驱动行缓存子模块,将缓存的增益模式选择信号,发送给对应行的像素单元。
更具体地,各像素单元对应的增益模式选择信号可以是数字信号,也可以是模拟信号,该增益模式选择信号会在下一图像帧的时间内,控制像素单元按照增益模式选择信号指示的增益模式进行像素信号的输出。
在本申请实施例中,通过转换增益模式选择模块,能够有效根据每个像素单元输 出的像素信号,自动为每个像素单元确定其对应的转换增益模式选择信号,并且进一步通过转换增益信号缓存与驱动模块从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号后,将增益模式选择信号传输给各个像素单元,每个像素在每一帧时间内根据自适应逻辑自行选择运行于低增益模式或中增益模式或高增益模式,从而实现像素级的增益调整,避免了三次曝光导致的部分像素局域过曝或者部分像素欠曝的问题,本申请的方案无需改变传统像素结构,不改变传统图像处理器读取与信号处理方式,采用列并行控制方法即可以实现对每一个像素的增益模式选择的准确控制。
可选地,所述转换增益选择模块,包括:第一比较器、第二比较器和转换增益指示器,所述转换增益指示器分别与所述第一比较器和第二比较器通信连接;
所述第一比较器用于将各像素单元对应的像素信号与第一预设阈值信号进行比较,得到各个所述像素单元对应的第一比较器输出信号;
所述第二比较器用于将各像素单元对应的像素信号与第二预设阈值信号进行比较,得到各个所述像素单元对应的第二比较器输出信号;
所述转换增益指示器用于缓存所述第一比较器输出信号和所述第二比较器输出信号,并根据所述第一比较器输出信号和所述第二比较器输出信号生成所述转换增益选择表。
图3为本申请实施例提供的转换增益选择模块结构示意图,如图3所示,包括:第一比较器21、第二比较器22和转换增益指示器23,转换增益指示器23分别与所述第一比较器21和第二比较器22通信连接。
在一个可选的实施例中,第一比较器和第二比较器可以是数字比较器,该第一预设阈值信号和可以是用户预先设定的阈值,其具体可以是一个固定的预设阈值信号。可选地,在比较不同的像素单元的像素信号时,也可以设置不同的第一预设阈值信号和第二预设阈值信号。
在一个可选的实施例中,第一预设阈值信号和第二预设阈值信号可以是相同的阈值信号,也可以是不同的阈值信号。
在一个可选地实施例中,该第一预设阈值信号可以是用于决定MCG模式的选择与否,该第二预设阈值信号可以是用于决定LCG模式的选择与否,在像素信号为二进制数字信号的情况下,该第一预设阈值信号和第二预设阈值信号也可以是二进制的10bit二进制数字。
在一个可选的实施例中,针对于每个像素单元输出的图像数据在转换为数据信号后,可以与用户预先设置好的第一预设阈值信号进入第一比较器(COMP)进行比较,对于每一个像素输出的信号,均可以得到一个比较结果,进而得到每个像素单元的对应的第一比较器输出信号。
相应地,还可以与用户预先设置好的第二预设阈值信号进入第二比较器进行比较, 对于每一个像素输出的信号,均可以得到一个比较结果,进而得到每个像素单元的对应的第二比较器输出信号。
在一个可选地实施例中,由于第一比较器和第二比较器的比较结果输出之间可能存在一定的时间差,因此需要转换增益指示器来缓存所述第一比较器输出信号和所述第二比较器输出信号。
在每个像素的两次比较结果完成后,比较结果会转移至转换增益选择表中进行存储,在完成所有像素单元的比较好,会得到转换增益选择表。
在本申请实施例中,通过第一比较器和第二比较器可以有效的对不同像素单元输出的像素信号进行针对性分析,从而有效得到适合每个像素单元的增益模式,有效保证最终生成图片的质量,并且通过转换增益指示器有效对第一比较器输出信号和第二比较器输出信号进行缓存,并生成转换增益选择表。
可选地,所述第一比较器具体用于:
在所述像素信号大于所述第一预设阈值信号的情况下,输出的所述像素单元对应的第一比较器输出信号为第一高电平输出信号;
在所述像素信号小于或等于所述第一预设阈值信号的情况下,输出的所述像素单元对应的第一比较器输出信号为第一低电平输出信号;
所述第二比较器具体用于:
在所述像素信号大于所述第二预设阈值信号的情况下,输出的所述像素单元对应的第二比较器输出信号为第二高电平输出信号;
在所述像素信号小于或等于所述第二预设阈值信号的情况下,输出的所述像素单元对应的第二比较器输出信号为第二低电平输出信号。
具体地,在本申请实施例中,高电平输出信号在转换增益选择表中可以记在“1”低电平输出信号在转换增益选择表中可以记在“0”,对于每一个像素输出的信号,均可以得到一个比较结果,并根据像素单元在像素阵列中的位置缓存到转换增益选择表中,约定二进制数字信号“1”代表让像素进入高增益模式读取,二进制数字信号“0”代表让像素进入低增益模式读取。在具体实施时也可约定反过来使用,但是必须采用1比特二进制信号。
在一个可选地实施例中,如果用户不需要TCG-HDR功能,可以强制屏蔽转换增益信号缓存与驱动模块,并且可以停止其运作。
所述转换增益指示器具体用于:
在所述第一比较器输出信号为第一高电平输出信号,且所述第二比较器输出信号为第二高电平输出信号的情况下,得到所述像素单元的增益模式选择信号为低增益模式选择信号;
在所述第一比较器输出信号为第一低电平输出信号,且所述第二比较器输出信号为第二高电平输出信号的情况下,得到所述像素单元的增益模式选择信号为中增益模 式选择信号;
在所述第一比较器输出信号为第一高电平输出信号,且所述第二比较器输出信号为第二低电平输出信号的情况下,得到所述像素单元的增益模式选择信号为低增益模式选择信号;
在所述第一比较器输出信号为第一低电平输出信号,且所述第二比较器输出信号为第二低电平输出信号的情况下,得到所述像素单元的增益模式选择信号为高增益模式选择信号。
在一个可选的实施例中,第一比较器输出信号为第一高电平输出信号的情况下,则说明第一次比较选择了低增益模式,第二比较器输出信号为第二高电平输出信号的情况下,则说明第二次比较选择了中增益模式,此时最终像素单元的增益模式选择信号为低增益模式选择信号。
在一个可选的实施例中,第一比较器输出信号为第一低电平输出信号,则说明第一次比较未选择低增益模式,第二比较器输出信号为第二高电平输出信号的情况下,则说明第二次比较选择了中增益模式,最终得到所述像素单元的增益模式选择信号为中增益模式选择信号。
在一个可选的实施例中,第一比较器输出信号为第一高电平输出信号,则说明第一次比较选择了低增益模式,且所述第二比较器输出信号为第二低电平输出信号的情况下,则说明第二次比较未选择中增益模式,得到所述像素单元的增益模式选择信号为低增益模式选择信号;
在一个可选的实施例中,第一比较器输出信号为第一第电平输出信号,则说明第一次比较未选择低增益模式,且所述第二比较器输出信号为第二低电平输出信号的情况下,则说明第二次比较也未选择中增益模式,得到所述像素单元的增益模式选择信号为高增益模式选择信号;
在一个可选的实施例中,在像素阵列的任一列像素阵列在读取时段并需要确定HCG或MCG或LCG读取模式选择时,转换增益信号缓存与驱动模块将推送缓存的2比特转换增益选择信号作为LCG信号和MCG信号,在对应的列驱动器驱动后传递至像素阵列提供给此列像素进行LCG或MCG或HCG模式的读取。此处,约定数字信号“LCG=1和MCG=1”代表让像素进入LCG模式读取,数字信号“LCG=0和MCG=1”代表让像素进入MCG模式读取,数字信号“LCG=0和MCG=0”代表让像素进入HCG模式读取。如果用户不需要自适应TCG-HDR功能,则强制列并行TCG模式信号缓存与驱动模块中的列缓存器存储/缓存二进制数字信号“0”或“1”
在本申请实施例中,通过比较器可以有效的对不同像素单元输出的像素信号进行针对性分析,从而有效得到适合每个像素单元的增益模式,有效保证最终生成图片的质量。
可选地,所述转换增益选择模块包括:独立图像信号处理器;
所述独立图像信号处理器用于根据存储的程序算法对所述像素阵列输出的像素信号进行逐像素分析,得到各个所述像素单元对应的增益模式选择信号;
根据各个所述像素单元对应的增益模式选择信号,生成所述转换增益选择表。
具体地,在本申请实施例中,该程序算法具体可以是针对于每个像素单元的图像数据进行分析,并确定每个像素增益模式的算法,该算法具体可以是输入每个像素单元的像素信号后,可以输出对应的增益模式选择信号的算法。
在一个可选的实施例中,其可以是通过程序算法来模拟比较器,进而得到对像素阵列输出的像素信号进行逐像素分析,得到各个像素单元对应的增益模式选择信号的算法,该算法也可以是其它能够实现相应功能的算法。
在一个可选的实施例中,在得到各个所述像素单元对应的增益模式选择信号之后,可以进一步按照像素阵列的排列,按照像素单元的行列分布,将增益模式选择信号存储在对应的位置,得到最终的转换增益选择表。
在一个可选的实施例中,存储的程序算法具体可以是存储在图像传感器的内部,也可以是集成在图像传感器的外部。
而在该程序算法集成在图像传感器的外部时,其可以是存储在图像传感器之外的独立图像信号处理器中。
在本申请实施例中,通过软件程序模块集成的程序算法,可以通过软件的方式进行像素单元的逐个分析,在有效保证图像质量的前提下,可以有效的图像传感器的晶体管数量并节省成本。
可选地,所述传感器还包括:接口模块,所述接口模块分别与所述转换增益信号缓存与驱动模块和所述像素阵列通信连接;
所述接口模块用于将所述像素阵列输出的像素信号传输给所述独立图像信号处理器,并接收所述独立图像信号处理器传输的各像素单元对应的增益模式选择信号。
在一个可选的实施例中,接口模块具体可以是与独立图像信号处理器进行数据传输的接口。
图4为本申请实施例提供的图像传感器结构示意图之二,如图4所示,包括:像素阵列11,独立图像信号处理器31和转换增益信号缓存与驱动模块13和接口模块32。
本申请实施例中,接口模块分别与所述转换增益信号缓存与驱动模块和所述像素阵列通信连接,接口模块可以将像素阵列中各个像素单元的像素信号传输给独立图像信号处理器,使得独立图像信号处理器可以根据像素信号分析每个像素单元对应的增益模式,得到转换增益选择表。
然后接口模块还可以接收独立图像信号处理器发送的每列像素单元的增益模式选择信号。
在本申请实施例中,接口模块可以有效将图像数据发送给独立图像信号处理器进 行增益模式分析,并接受独立图像信号处理器发回的各像素单元对应的增益模式选择信号,能够在有效减少晶体管数量的情况,有效保证图像的质量。
可选地,所述像素阵列还包括:信号读取模块,同一列中的N个所述像素单元通过所述第二连接线与所述信号读取模块连接;
所述信号读取模块用于将各个所述像素单元输出的像素信号进行模数转换后,传输给所述转换增益选择模块。
在一个可选地实施例中,在每一帧时间内,在各像素单元完成重置和曝光后,会进入读取阶段,此时信号读取模块会读取各像素单元生成的图像数据。
信号读取模块在读取该图像数据后,此时的图像数据往往是模拟信号,并不便于后续直接进行处理,因此可以将其进行模数转换处理,将其转换为数字信号后,在将其传输给高动态范围逻辑模块。
在一个可选的实施例中信号读取模块中可以包括模数转换模块和图像信号处理器,模数转换模块与图像信号处理器连接,同一列中的N个所述像素单元通过第二连接线,经由信号读取模块与转换增益选择模块连接。
在本申请实施例中,通过将各个所述像素单元输出的像素信号进行模数转换,能够有效保证后续能够有效对像素信号进行有效分析。
图5为本申请实施例提供的传感器架构结构示意图,如图5所示,包括:像素层51和电路层52;
所述像素层51包括:第一键合区域510和像素阵列11,所述像素阵列11与所述第一键合区域510通信连接;
所述电路层52包括:第二键合区域520、转换增益选择模块12和转换增益信号缓存与驱动模块13,所述第二键合区域520分别与转换增益选择模块12和转换增益信号缓存与驱动模块13通信连接,所述第一键合区域510与所述第二键合区域520键合连接。
具体地,本申请实施例中,像素层和电路层具体可以是硅片层构成的,像素层具体是像素硅片层,所有的像素单元均设置在像素层上,像素层具体可以采用前照式(Front-Side Illumination,FSI),也可以采用背照式(Back-Side Illumination,BSI)工艺制造。
本申请实施例中的像素层布置有效像素阵列,在像素阵列的四周可以设置有第一键合区域,用于信号走线,从而实现像素层与电路层的连接。
像素层硅片只放置像素阵列(Pixel Array),并且像素所有的输入输出信号由底层的电路层硅片提供。两层间信号的连接采用TSV(Trans-Silicon Via,过硅通孔)或者Cu-Cu Hybrid Bonding(铜-铜混合键合)等方式。
转换增益选择模块、转换增益信号缓存与驱动模块以及接口模块都可以是设置在电路层中。
在一个可选地实施例中,在转换增益选择模块为集成在像素传感器的软件中时,对应电路层中不会设置有高动态范围逻辑模块。
外部HDR逻辑软件可以通过图像传感器的I/O管脚在端口模块的协调下与列并行TCG模式信号缓存与驱动模块进行信号连接。
在本申请实施例中,通过转换增益模式选择模块,能够有效根据每个像素单元输出的像素信号,自动为每个像素单元确定其对应的转换增益模式选择信号,并且进一步通过转换增益信号缓存与驱动模块从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号后,将增益模式选择信号传输给各个像素单元,每个像素在每一帧时间内根据自适应逻辑自行选择运行于低增益模式或中增益模式或高增益模式,从而实现像素级的增益调整,避免了三次曝光导致的部分像素局域过曝或者部分像素欠曝的问题,本申请的方案无需改变传统像素结构,不改变传统图像处理器读取与信号处理方式,采用列并行控制方法即可以实现对每一个像素的增益模式选择的准确控制。
可选地,本申请实施例还提供一种包括上述图像传感器的摄像模组,通过该摄像模组能够在实现TCG-HDR功能的过程中,进行逐像素的调制,有效保证输出图像的成像效果。
可选地,本申请实施例还提供一种电子设备,该电子设备包括上述实施例中的摄像模组,该电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的电子设备可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序 来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

  1. 一种图像传感器,包括:像素阵列、转换增益选择模块和转换增益信号缓存与驱动模块;
    所述像素阵列包括N行像素单元和M列像素单元,同一列中的N个所述像素单元通过第一连接线与所述转换增益信号缓存与驱动模块连接,同一列中的N个所述像素单元通过第二连接线与所述转换增益选择模块连接,M与N均为正整数;
    其中,所述转换增益选择模块用于根据所述像素阵列输出的像素信号生成转换增益选择表,所述转换增益选择表中包括各个像素单元对应的转换增益模式选择信号;
    所述转换增益信号缓存与驱动模块用于从所述转换增益选择表中逐行读取各个像素单元对应的增益模式选择信号,并将所述增益模式选择信号发送到对应的像素单元。
  2. 根据权利要求1所述的图像传感器,其中,所述转换增益选择模块,包括:第一比较器、第二比较器和转换增益指示器,所述转换增益指示器分别与所述第一比较器和第二比较器通信连接;
    所述第一比较器用于将各像素单元对应的像素信号与第一预设阈值信号进行比较,得到各个所述像素单元对应的第一比较器输出信号;
    所述第二比较器用于将各像素单元对应的像素信号与第二预设阈值信号进行比较,得到各个所述像素单元对应的第二比较器输出信号;
    所述转换增益指示器用于缓存所述第一比较器输出信号和所述第二比较器输出信号,并根据所述第一比较器输出信号和所述第二比较器输出信号生成所述转换增益选择表。
  3. 根据权利要求2所述的图像传感器,其中,所述第一比较器具体用于:
    在所述像素信号大于所述第一预设阈值信号的情况下,输出的所述像素单元对应的第一比较器输出信号为第一高电平输出信号;
    在所述像素信号小于或等于所述第一预设阈值信号的情况下,输出的所述像素单元对应的第一比较器输出信号为第一低电平输出信号;
    所述第二比较器具体用于:
    在所述像素信号大于所述第二预设阈值信号的情况下,输出的所述像素单元对应的第二比较器输出信号为第二高电平输出信号;
    在所述像素信号小于或等于所述第二预设阈值信号的情况下,输出的所述像素单元对应的第二比较器输出信号为第二低电平输出信号。
  4. 根据权利要求3所述的图像传感器,其中,所述转换增益指示器具体用于:
    在所述第一比较器输出信号为第一高电平输出信号,且所述第二比较器输出信号为第二高电平输出信号的情况下,得到所述像素单元的增益模式选择信号为低增益模 式选择信号;
    在所述第一比较器输出信号为第一低电平输出信号,且所述第二比较器输出信号为第二高电平输出信号的情况下,得到所述像素单元的增益模式选择信号为中增益模式选择信号;
    在所述第一比较器输出信号为第一高电平输出信号,且所述第二比较器输出信号为第二低电平输出信号的情况下,得到所述像素单元的增益模式选择信号为低增益模式选择信号;
    在所述第一比较器输出信号为第一低电平输出信号,且所述第二比较器输出信号为第二低电平输出信号的情况下,得到所述像素单元的增益模式选择信号为高增益模式选择信号。
  5. 根据权利要求1所述的图像传感器,其中,所述转换增益选择模块包括:独立图像信号处理器;
    所述独立图像信号处理器用于根据存储的程序算法对所述像素阵列输出的像素信号进行逐像素分析,得到各个所述像素单元对应的增益模式选择信号;
    根据各个所述像素单元对应的增益模式选择信号,生成所述转换增益选择表。
  6. 根据权利要求5所述的图像传感器,其中,所述传感器还包括:接口模块,所述接口模块分别与所述转换增益信号缓存与驱动模块和所述像素阵列通信连接;
    所述接口模块用于将所述像素阵列输出的像素信号传输给所述独立图像信号处理器,并接收所述独立图像信号处理器传输的各像素单元对应的增益模式选择信号。
  7. 根据权利要求1所述的图像传感器,其中,所述像素阵列还包括:信号读取模块,同一列中的N个所述像素单元通过所述第二连接线与所述信号读取模块连接;
    所述信号读取模块用于将各个所述像素单元输出的像素信号进行模数转换后,传输给所述转换增益选择模块。
  8. 一种基于上述权利要求1-7任一项所述图像传感器的传感器架构,包括:像素层和电路层;
    所述像素层包括:第一键合区域和像素阵列,所述像素阵列与所述第一键合区域通信连接;
    所述电路层包括:第二键合区域、转换增益选择模块和转换增益信号缓存与驱动模块,所述第二键合区域分别与转换增益选择模块和转换增益信号缓存与驱动模块通信连接,所述第一键合区域与所述第二键合区域键合连接。
  9. 一种摄像模组,包括如权利要求1-7任一所述的图像传感器。
  10. 一种电子设备,包括如权利要求9所述的摄像模组。
PCT/CN2023/142587 2022-12-30 2023-12-28 图像传感器、传感器架构、摄像模组及电子设备 WO2024140873A1 (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211724163.5 2022-12-30

Publications (1)

Publication Number Publication Date
WO2024140873A1 true WO2024140873A1 (zh) 2024-07-04

Family

ID=

Similar Documents

Publication Publication Date Title
US10531027B2 (en) Backside illuminated global shutter pixel with active reset
US9077917B2 (en) Image sensor having HDR capture capability
US10136090B2 (en) Threshold-monitoring, conditional-reset image sensor
US9157988B2 (en) Method and apparatus for array camera pixel readout
US10003715B2 (en) Image pickup device and imaging apparatus
JP6614133B2 (ja) 撮像素子、制御方法、並びに、撮像装置
US11172149B2 (en) Image sensing system using average pixel data and operating method thereof
US10425605B2 (en) Image sensor and image capturing apparatus
JP2006191397A (ja) 固体撮像装置
US10051216B2 (en) Imaging apparatus and imaging method thereof using correlated double sampling
JP6513164B2 (ja) 撮像素子および撮像装置
JP2008109264A5 (zh)
WO2024140873A1 (zh) 图像传感器、传感器架构、摄像模组及电子设备
WO2024140769A1 (zh) 图像传感器、传感器架构、摄像模组及电子设备
JP5274169B2 (ja) 撮像装置
CN116095519A (zh) 图像传感器、传感器架构、摄像模组及电子设备
CN116095520A (zh) 图像传感器、传感器架构、摄像模组及电子设备
WO2024140724A1 (zh) 图像传感器、摄像头模组及电子设备
WO2024140886A1 (zh) 图像处理器、摄像模组及电子设备
WO2020203799A1 (ja) 撮像素子、及び、撮像装置
JP2017022578A (ja) 撮像装置及び撮像素子の制御方法
CN116055905A (zh) 图像传感器、摄像模组及电子设备
CN115118856A (zh) 图像传感器、图像处理方法、摄像头模组及电子设备
JP2015100003A (ja) 固体撮像素子及び撮像装置