CN115118858A - 图像传感器、图像采集方法、装置、电子设备及储存介质 - Google Patents
图像传感器、图像采集方法、装置、电子设备及储存介质 Download PDFInfo
- Publication number
- CN115118858A CN115118858A CN202210730379.6A CN202210730379A CN115118858A CN 115118858 A CN115118858 A CN 115118858A CN 202210730379 A CN202210730379 A CN 202210730379A CN 115118858 A CN115118858 A CN 115118858A
- Authority
- CN
- China
- Prior art keywords
- image
- light
- target
- target brightness
- brightness compensation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000005540 biological transmission Effects 0.000 claims abstract description 95
- 238000001914 filtration Methods 0.000 claims abstract description 46
- 238000002834 transmittance Methods 0.000 claims description 90
- 239000000463 material Substances 0.000 claims description 9
- 238000005286 illumination Methods 0.000 claims 8
- 239000010410 layer Substances 0.000 description 79
- 238000007639 printing Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000005856 abnormality Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 239000007788 liquid Substances 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 239000011229 interlayer Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001953 sensory effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000001069 Raman spectroscopy Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000001444 catalytic combustion detection Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000006479 redox reaction Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请公开了一种图像传感器、图像采集方法、装置、电子设备及储存介质,属于摄像技术领域。该图像传感器包括:滤光层,滤光层包括至少两个滤光单元;微透镜层;透光控制层,透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,每个透光单元与至少一个滤光单元对应设置;其中,在向透光控制层施加电压的情况下,透光控制层中至少一个透光单元的透光率发生变化,从而使对应的至少一个滤光单元的进光量发生变化。
Description
技术领域
本申请属于摄像技术领域,具体涉及一种图像传感器、图像采集方法、装置、电子设备及储存介质。
背景技术
目前,图像传感器采集图像时可能具有暗电流、坏点或坏线等,相关技术中,可以基于遮黑像素的方式来扣除相应的暗电流,或者通过动态补偿的方式消除坏点。
然而,上述方法中,采用遮黑像素虽然对整体暗电流有一定的矫正能力,但无法解决局部暗电流异常;而动态补偿坏点损失图像清晰度,以及对于坏线,目前没有好的解决方式。
如此,电子设备拍摄图像的图像质量较差。
发明内容
本申请实施例的目的是提供一种图像传感器、图像采集方法、装置、电子设备及储存介质,能够扣除图像中的局部暗电流、坏点和坏线,提升电子设备拍摄图像的图像质量。
第一方面,本申请实施例提供了一种图像传感器,该图像传感器包括:滤光层,该滤光层包括至少两个滤光单元;微透镜层;透光控制层,该透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,每个透光单元与至少一个滤光单元对应设置;其中,在向透光控制层施加电压的情况下,透光控制层中至少一个透光单元的透光率发生变化,从而使对应的至少一个滤光单元的进光量发生变化。
第二方面,本申请实施例提供了一种电子设备,该电子设备包括如第一方面所述的图像传感器。
第三方面,本申请实施例提供了一种图像采集方法,该图像采集方法包括:通过电子设备的图像传感器采集第一图像;基于第一图像的像素值,确定目标亮度补偿区域,并确定目标亮度补偿区域的目标亮度补偿参数;根据目标亮度补偿参数,调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
第四方面,本申请实施例提供了一种图像采集装置,包括图像传感器,该图像采集装置还包括:采集模块、确定模块和调整模块。采集模块,用于通过图像传感器采集第一图像。确定模块,基于第一图像的像素值,确定目标亮度补偿区域,并确定目标亮度补偿区域的目标亮度补偿参数。调整模块,用于根据目标亮度补偿参数,调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
第五方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第三方面所述的方法的步骤。
第六方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第三方面所述的方法的步骤。
第七方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第三方面所述的方法。
第八方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第三方面所述的方法。
在本申请实施例中,图像传感器包括滤光层,该滤光层包括至少两个滤光单元、微透镜层和透光控制层,该透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,该至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置。本方案中,由于至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置,电子设备可以向图像传感器中的透光控制层施加电压,以使得该透光控制层中至少一个透光单元的透光率发生变化,以改变与每个透光单元对应设置与至少一个滤光单元的进光量,可以理解,电子设备可以改变任一区域的滤光单元的进光量,从而提升了电子设备拍摄图像的灵活性。
本申请实施例中,由于电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,达到准确地扣除暗电流,以及对坏点、坏线等进行实时补偿,提升图像暗态均匀性和色彩准确度,进而提升电子设备拍摄图像的图像质量。
附图说明
图1是本申请实施例提供的一种图像传感器的结构示意图之一;
图2是本申请实施例提供的一种图像传感器的结构示意图之二;
图3是本申请实施例提供的一种图像传感器的结构示意图之三;
图4是本申请实施例提供的一种电子设备的实例示意图之一;
图5是本申请实施例提供的一种电子设备的实例示意图之二;
图6是本申请实施例提供的一种图像采集方法的流程图;
图7是本申请实施例提供的一种图像采集方法的实例示意图;
图8是本申请实施例提供的一种图像采集装置的结构示意图;
图9是本申请实施例提供的一种电子设备的硬件结构示意图之一;
图10是本申请实施例提供的一种电子设备的硬件结构示意图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
以下将对本申请实施例涉及的术语进行说明。
1、暗电流(dark current)
暗电流,也称无照电流,指在没有光照射的状态下,在图像传感器像素中流动的电流,各像素暗电流的不一致性,会导致相机在暗处拍照时,因扣错暗电流而发生偏色等现象。
2、坏点
坏点指的是全黑或均匀光源下,信号输出较周围的光电二极管差异很大(例如更亮,或更暗)的光电二极管,称为亮点或暗点。坏点在图像上表现为亮点或黑点,影响观感。若坏点较多,会导致算法补偿后的画面清晰度有损失。
3、坏线
坏线指的是全黑或均匀光源下,按行列计算时,信号值较其他行列差异很大,或更亮或更暗,称为亮线或暗线。
4、图像传感器(Sensor)
图像传感器是相机的核心,也是相机里最关键的技术。Sensor可以分为两种,一种是广泛使用的电荷耦合(Charge-coupled Device,CCD)元件;另一种是互补金属氧化物半导体(Complementary Metal Oxide Semiconductor,CMOS)器件。与传统相机相比,传统相机使用“胶卷”作为其记录信息的载体,而数码相机的“胶卷”就是其成像感光元件,感光元件就是数码相机的不用更换的“胶卷”而且是与相机一体。
目前主流使用的是CMOS器件,它和CCD一样同为在数码相机中可记录光线变化的半导体。CMOS的工作流程为,通过大量的感光二极管(pixel),感知光信号,然后转换成电信号,通过放大电路,数/模转换电路,形成数字信号矩阵(即图像),再经过图像信号处理器处理,压缩存储起来。
CMOS摄像模组(CMOS Camera Module)是目前手机上主流使用的相机模组,主要由镜头(Lens)、音圈马达(Voice Coil Motor)、红外滤光片(IR Filter)、图像传感器(CMOS)、数字信号处理器(Digital Signal Processing,DSP)及柔性印刷电路板(FlexiblePrinted Circuit,FPC)组成。
CCD摄像模组(CCD Camera Module)的工作流程为,音圈马达带动镜头达到对焦准确的位置,外部光线穿过镜头,经过红外滤光片的滤光,照射到图像传感器的感光二极管(pixel)上,感光二极管将感知的光信号转换成电信号,通过放大电路,数/模转换电路,形成数字信号矩阵(即图像),再经过DSP处理,压缩存储起来。
5、相机镜头(lens)
相机镜头是相机中最重要的部件,因为它的好坏直接影响到拍摄成像的质量。镜头能分为变焦和定焦两大类。变焦镜头是焦距可变,视角可变,也就是可以推拉的镜头;定焦镜头,就是焦距不能变只有一个焦段,或者说只有一个视角的镜头。
6、其他术语
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”所区别的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像传感器、图像采集方法、装置、电子设备及储存介质进行详细地说明。
随着电子设备的发展,色彩准确度是比较重要的一个攻坚点,颜色不准确一般由软硬件两个方面导致,软件方面主要是白平衡、暗电流扣除、颜色还原等算法计算不准确导致;硬件方面因素比较多,如镜头质量、模组组装精度、色彩滤波阵列(Color FilterArray,CFA)传感器一致性,Sensor各通道感光一致性,暗电流一致性等等。由于暗电流、坏点、环线等缺陷为CMOS传感器本身的特性,相关技术中,可以基于遮黑像素的方式来扣除图像传感器中整面暗电流,或者通过动态补偿的方式消除坏点。然而,上述方法中,采用遮黑像素虽然对整体暗电流有一定的矫正能力,但无法解决局部暗电流异常,而且,动态补偿坏点损失图像清晰度,以及对于坏线,目前没有好的解决方式,如此,电子设备拍摄图像的图像质量较差。
本申请实施例中,图像传感器可以包括多个感光像素和至少两个透光单元,该至少两个透光单元中的每个透光单元分别与多个感光像素中的至少一个感光像素相对,从而,在向至少两个透光单元中的任一透光单元施加电压的情况下,任一透光单元的透光度可以发生变化,以补偿任一透光单元相对的感光像素的亮度参数。本方案中,由于至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置,电子设备可以向图像传感器中的透光控制层施加电压,以使得该透光控制层中至少一个透光单元的透光率发生变化,以改变与每个透光单元对应设置与至少一个滤光单元的进光量,可以理解,电子设备可以改变任一区域的滤光单元的进光量,从而提升了电子设备拍摄图像的灵活性。
本申请实施例提供一种图像传感器,图1示出了本申请实施例提供的图像传感器的结构示意图。如图1所示,本申请实施例提供的图像传感器10包括:滤光层11,该滤光层11包括至少两个滤光单元12;微透镜层13;透光控制层14,该透光控制层14设置于滤光层11和微透镜层13之间,透光控制层13包括至少一个透光单元15,该至少一个透光单元15中的每个透光单元与至少一个滤光单元对应设置。
本申请实施例中,电子设备在向透光控制层施加电压的情况下,透光控制层中至少一个透光单元的透光率发生变化,从而使对应的至少一个滤光单元的进光量发生变化。
具体地,上述滤光层可以为滤光片。
可选地,本申请实施例中,上述滤光片可以为以下任一项:红外滤光片、拉曼滤光片或紫外滤光片。
可选地,本申请实施例中,上述透光控制层的材质为电致变色材料。
示例性地,上述电致变色材料具体可以为氧化还原反应材料或者分散液晶材料。
示例性地,以一个透光单元为分散液晶材料为例,如图2中的(A)所示,当图像传感器10两端未接入电压时,透光单元15的液晶夹层中的小液滴呈无序状态,当光线射入时,其折射率与基体折射率相差较大,光线通过时会发生散射,透光单元15呈现不透明状态(即光线无法射入至滤光层上);如图2中的(B)所示,当图像传感器两端接入电压时,分散液晶材料可以根据电压的大小调整液晶夹层中的小液滴,从而使得基体折射率较为接近,即光线射入时,光可以射入至滤光层上,进而图像传感器可以通过感光像素采集图像。
又示例性地,上述电压具体可以为0V至2.8V。
需要说明的是,为了清楚的知晓本申请实施例中提供的透光单元结构,图2为透光单元的侧面剖面图。
可选地,本申请实施例中,上述至少两个滤光单元中的每一行滤光单元对应设置一个透光单元,或者上述至少两个滤光单元中的每一列滤光单元对应设置一个透光单元。
具体地,本申请实施例中,上述至少一个透光单元中的每个透光单元可以行覆盖一行滤光单元。
示例性地,如图3中的(A)所示,图像传感器10中包括3行2列的滤光单元12,至少一个透光单元15可以以行覆盖的方式将滤光单元12覆盖完整,以使得每一行滤光单元都可以对应一个透光单元,从而使对应的至少一行滤光单元的进光量发生变化。
具体地,本申请实施例中,上述至少一个透光单元中的每个透光单元可以列覆盖一行滤光单元。
示例性地,如图3中的(B)所示,图像传感器10中包括3行2列的滤光单元12,至少一个透光单元15可以以列覆盖的方式将滤光单元12覆盖完整,以使得每一列滤光单元都可以对应一个透光单元,从而使对应的至少一列滤光单元的进光量发生变化。
可选地,本申请实施例中,上述透光控制层的数目为至少两个,至少两个透光控制层层叠设置。
示例性地,如图3中的(C)所示,图像传感器中包括3行2列的滤光单元12,至少一个透光单元15以列覆盖的方式将滤光单元12覆盖完整和行覆盖的方式将滤光单元12覆盖完整,以使得每个滤光单元都可以对应两个透光单元,从而使对应的至少一个滤光单元的进光量发生变化。
可选地,本申请实施例中,上述至少一个透光单元中的每个透光单元可以覆盖L块滤光单元。
示例性地,如图3中的(D)所示,图像传感器中包括3行2列的滤光单元12,至少一个透光单元15可以以块覆盖的方式将滤光单元12覆盖完整,以使得每一块滤光单元都可以对应一个透光单元,从而使对应的至少一块滤光单元的进光量发生变化。
本申请实施例提供一种图像传感器,该图像传感器包括滤光层,该滤光层包括至少两个滤光单元、微透镜层和透光控制层,该透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,该至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置。本方案中,由于至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置,电子设备可以向图像传感器中的透光控制层施加电压,以使得该透光控制层中至少一个透光单元的透光率发生变化,以改变与每个透光单元对应设置与至少一个滤光单元的进光量,可以理解,电子设备可以改变任一区域的滤光单元的进光量,从而提升了电子设备拍摄图像的灵活性。
本申请实施提供一种电子设备,图4示出了本申请实施例提供的一种电子设备的结构示意图。如图4所示,本申请实施例提供的电子设备17包括上述图像传感器10。
可选地,本申请实施例中,如图5所示,上述电子设备还包括:镜头18、支架19、壳体20和图像传感器10,其中,支架19设置于镜头18两侧,支架19用于支撑镜头18,支架19与壳体20连接,图像传感器10设置于壳体20上。
具体地,图像传感器可以通过柔性印刷电路板与壳体连接。
可选地,本申请实施例中,上述镜头可以为以下任一项:长焦镜头、短焦镜头、定焦镜头、超广角镜头、微距镜头等。
可选地,本申请实施例中,上述支架可以为塑料支架或者金属支架。
本申请实施例中,图像传感器包括滤光层,该滤光层包括至少两个滤光单元、微透镜层和透光控制层,该透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,该至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置。本方案中,由于至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置,电子设备可以向图像传感器中的透光控制层施加电压,以使得该透光控制层中至少一个透光单元的透光率发生变化,以改变与每个透光单元对应设置与至少一个滤光单元的进光量,可以理解,电子设备可以改变任一区域的滤光单元的进光量,从而提升了电子设备拍摄图像的灵活性。
本申请实施例提供一种图像采集方法,图6示出了本申请实施例提供的一种图像采集方法的流程图。如图6所示,本申请实施例提供的图像采集方法可以包括下述的步骤201至步骤203。
步骤201、电子设备通过电子设备的图像传感器采集第一图像。
本申请实施例中,电子设备可以控制图像传感器中的至少一个透光单元的透光度为0(即至少一个透光单元未施加电压),并拍摄得到第一图像,该第一图像为图像传感器捕捉到的光信号转化为数字信号的原始数据图像(即RAW图),从而电子设备可以根据第一图像获取第一图像中存在问题的区域,并对该存在问题的区域进行补偿,以提高电子设备拍摄的图像质量。
可选地,本申请实施例中,用户可以在拍摄预览界面上可以对拍摄控件进行第一输入,从而使得电子设备通过图像传感器采集得到第一图像。
可选地,本申请实施例中,上述第一输入可以为以下任一项:点击输入、长按输入、滑动输入、预设轨迹输入;或者为物理按键组合(例如电源键和音量键)输入。具体地可以根据实际使用需求确定,本申请实施例不做限制。
步骤202、电子设备基于第一图像的像素值,确定目标亮度补偿区域,并确定目标亮度补偿区域的目标亮度补偿参数。
本申请实施例中,电子设备在获得第一图像之后,电子设备可以计算第一图像的像素值,将第一图像中的像素值大于第一阈值对应的区域,确定为目标亮度补偿区域,并通过该目标亮度补偿区域的像素值与第一阈值,确定目标亮度补偿区域的目标亮度补偿参数。
可以理解,上述第一图像的像素值为第一图像中所有像素单元的像素值。
可选地,本申请实施例中,上述第一图像的像素值可以包括以下至少一项:像素亮度值、像素色彩值、像素饱和度值和像素色温值。
可选地,本申请实施例中,上述步骤202中的“所述确定所述目标亮度补偿区域的目标亮度补偿参数”,具体可以通过下述的步骤202a实现。
步骤202a、电子设备根据第一阈值和第一目标亮度参数,确定目标亮度补偿参数。
本申请实施例中,电子设备可以根据第一阈值和第一目标亮度参数之间的比值,确定目标亮度补偿参数。
具体地,电子设备可以将第一阈值和第一目标亮度参数进行除法运算,以得到第一阈值和第一目标亮度参数的商,该商即为目标亮度补偿参数。
可选地,本申请实施例中,上述第一阈值可以为电子设备预设的或用户设定的。
可选地,本申请实施例中,上述目标亮度补偿参数可以为一个或者多个。
示例性地,假设目标亮度补偿区域包括两个像素区域,该两个像素区域的像素值分别为87和165,第一阈值为64,则该两个像素区域的补偿参数分别为64除以87和64除以165,即该两个像素区域对应的目标亮度补偿参数为0.734和0.390,也即若电子设备在检测到第一图像中的像素值大于第一阈值的情况下,则电子设备可以将第一图像中的像素值大于第一阈值对应的区域的像素值调整为与第一阈值一致的像素值。
本申请实施例中,电子设备可以根据第一阈值与第一目标亮度参数获取第一图像中存在问题(例如暗电流异常或存在坏线或坏点)的区域(即目标亮度补偿区域),然后根据第一阈值与第一目标亮度参数的比值,确定目标亮度补偿参数,以对目标亮度补偿区域进行补偿,即电子设备可以对存在问题的区域单独进行补偿,避免了相关技术中无法解决局部暗电流异常以及动态补偿坏点损失图像清晰度的问题,提高了电子设备拍摄图像的图像质量。
可选地,本申请实施例中,上述第一图像包括至少两个第一图像区域;上述步骤202具体可以通过下述的步骤202b和步骤202c实现。
步骤202b、电子设备基于第一图像的像素值,计算至少两个第一图像区域中的每个第一图像区域对应的R通道数据、G通道数据和B通道数据。
本申请实施例中,电子设备可以通过拍摄均匀灰卡获取第一图像的像素值,然后根据该像素值分别获取每个第一图像区域对应的R通道数据、G通道数据和B通道数据。
具体地,上述R通道数据、G通道数据和B通道数据可以为R通道对应的像素的亮度值、G通道对应的像素的亮度值和B通道对应的像素的亮度值。
步骤202c、电子设备基于R通道数据、G通道数据和B通道数据,确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使第二图像中,每个第二图像区域的R通道数据、G通道数据和B通道数据的数值相等。
本申请实施例中,上述第二图像区域为与第一图像区域对应的区域。
本申请实施例中,电子设备在获取R通道数据、G通道数据和B通道数据之后,可以将R通道数据、G通道数据和B通道数据大于或小于第三阈值对应的区域确定为目标亮度补偿区域,并根据R通道数据、G通道数据和B通道数据与第三阈值之间的比值,确定为目标亮度补偿区域的目标亮度补偿参数,从而可以根据该目标亮度补偿参数,使第二图像中每个第二图像区域的R通道数据、G通道数和B通道数据的数值相等。
可选地,本申请实施例中,上述第三阈值可以为G通道数据对应的值;或者,上述第三阈值可以为R通道数据、G通道数据和B通道数据三者的平均值。
示例性地,电子设备拍摄均匀灰卡,得到灰色的RAW图(即第一图像),并计算RAW图中各区域的R/G/B数据,然后通过强制控制信号时序控制各区域R和B像素的曝光值,从而让R和B都与G数据相等(假设某区域R、G、B分别为100、80和100,则通过强制控制信号将该区域R和区域B对应的进光量调整为0.88倍(即88/100),即该区域的R和B亮度值调整为88),从而电子设备可以得到矫正后的图像。
本申请实施例中,电子设备可以独立控制每个像素的曝光量,然后通过校准的方式对图像传感器中的各区域的颜色不均匀数据进行标定,进而准确的校准各区域的颜色不均匀现象。
可选地,本申请实施例中,上述步骤202具体可以通过下述的步骤202d和步骤202e实现。
步骤202d、电子设备基于第一图像的像素值确定光源频率。
本申请实施例中,电子设备可以通过高频率采样器,确定第一图像中的光源频率。
具体地,电子设备可以通过在图像传感器中设置实感像素,从而通过第一图像获取实感像素的亮度变化信息,并基于该亮度变化信息确定光源频率。
步骤202e、电子设备基于光源频率确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使采集第二图像时,图像传感器中每行感光单元的曝光量相等。
本申请实施例中,电子设备可以根据光源频率动态计算每行感光单元的所需要的曝光量。
具体地,电子设备可以根据高频率采样器获取灯源能量变化的频率和幅度信息,从而根据该频率和幅度信息计算出每行像素曝光量相等所需要的曝光时间,即消除Flicker(闪烁)时,RGB像素每行所需要的曝光时间。
示例性地,如图7所示,图像传感器中每行的曝光时间均相等,导致X1(第一行)的曝光量(曝光时间内交流电能量的积分)和X2(第4行)的曝光量不相等,进而导致图像传感器产生Flicker现象,本申请中,通过其他高频率的采样器获取灯源能量变化的频率和幅度信息,可以计算出每行像素曝光量相等所需要的曝光时间,进而通过改变该行的光透过率实现消除Flicker,例如Y2(第4行)的曝光时间较长,所以曝光量和Y1(第一行)的曝光量相等,所有图像传感器中不会出现Flicker现象。
本申请实施例中,电子设备可以根据灯源的频率和幅度信息,独立控制每个像素曝光时间,从而消除电子设备拍摄的图像中存在的Flicker现象,如此,提升了电子设备拍摄图像的质量。
可选地,本申请实施例中,电子设备采集第一图像时,透光控制层的光透过率为0,上述步骤202中的“基于第一图像的像素值,确定目标亮度补偿区域”具体可以通过下述的步骤202f实现。
步骤202f、电子设备将第一图像中,像素值大于或等于第二阈值的区域确定为目标亮度补偿区域。
本申请实施例中,电子设备可以获取第一图像中所有像素点的像素值,从而将第一图像中的像素值大于第二阈值对应的区域,确定为目标亮度补偿区域。
可选地,本申请实施例中,上述第二阈值可以为电子设备预设的;或者,用户确定的。
下面通过具体的实施例,对上述步骤202f进行解释说明。
在一种示例中,电子设备可以控制透光单元的透光度为0,从而得到一张全黑的RAW图,假设该RAW图为8*8的像素矩阵,然后获取RAW图所有像素所对应的暗电流数据,然后将RAW图中的暗电流数据大于第二阈值(例如64)的暗电流数据所对应的区域确定为目标亮度补偿区域。
可选地,本申请实施例中,在获取RAW图所有像素所对应的暗电流数据之后,电子设备可以将RAW图分割为至少一个4*4的像素矩阵,以计算该至少一个4*4的像素矩阵的暗电流均值,从而电子设备可以根据每个像素矩阵的暗电流均值确定目标亮度补偿区域,即电子设备可以根据RAW图的大小将RAW图分割为至少两个区域,然后得到至少两个区域中的每个区域的暗电流均值,然后可以根据每个区域的暗电流均值确定目标亮度补偿区域,提升了电子设备的处理效率。
在另一种示例中,电子设备可以控制透光单元的透光度为0,从而得到一张全黑的RAW图,并计算出每个像素的值,判断哪些像素是坏点(例如在全黑环境下,正常像素的值一般在64左右,像素值超过120以上,认为是坏点),然后电子设备将这些坏点所对应的区域,确定为目标亮度补偿区域。
在另一种示例中,本申请实施例提供的图像采集方法,电子设备可以在每次拍摄前,立即控制透光单元的透光度为0,从而得到一张全黑的RAW图,并计算出每个像素的值,判断哪些像素行是坏线(例如在全黑环境下,正常像素的值一般在64左右,每行中的每个像素值超过120以上,认为是坏线),然后电子设备将这些坏点所对应的区域,确定为目标亮度补偿区域。
本申请实施例中,电子设备可以通过第一图像中的像素值大于或等于第二阈值的区域确定为目标亮度补偿区域,从而调整该目标亮度补偿区域对应的透光控制层的光透过率,进而电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,可以达到准确的扣除暗电流,对坏点进行实时补偿,以及对坏线进行补偿,提升图像暗态均匀性和色彩准确度,进而提升电子设备拍摄图像的图像质量。
步骤203、电子设备根据目标亮度补偿参数,调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
本申请实施例中,电子设备可以通过目标亮度补偿参数对应的电压,通过该电压调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
可选地,本申请实施例中,在采集第二图像之后,电子设备可以将该第二图像存储至目标应用程序中(例如相册应用程序)。
可选地,本申请实施例中,上述步骤203具体可以通过下述的步骤203a和步骤203b实现。
步骤203a、电子设备根据目标亮度补偿参数,确定目标透光单元对应的目标电压。
本申请实施例中,电子设备可以从至少一个关联关系中,确定与目标亮度补偿参数对应的目标电压,该至少一个关联关系中的每个关联关系分别为一个亮度补偿参数与一个电压间的关联关系。
本申请实施例中,电子设备可以预先设置亮度补偿参数与电压(即调整透光单元透光度的电压)的对应关系,从而电子设备在获取到目标亮度补偿参数的情况下,电子设备可以根据对应关系,获取到对应的电压,从而调整透光单元的光透过率为目标亮度补偿参数对应的光透过率。
步骤203b、电子设备向目标透光单元施加目标电压,以将目标透光单元的光透过率调整为目标光透过率,并采集第二图像。
本申请实施例中,在确定目标电压之后,电子设备可以向目标透光单元施加目标电压,以使得目标透光单元的光透过率达到与目标电压对应的光透过率,并通过调整后的透光单元拍摄第二图像。
本申请实施例提供一种图像采集方法,电子设备通过采集第一图像,并根据该第一图像中的像素值,确定目标亮度补偿区域,以及与该目标亮度补偿区域对应的目标亮度补偿参数,从而电子设备可以根据该目标亮度补偿参数,调整与目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。本方案中,由于电子设备可以通过目标亮度补偿参数调整与目标亮度补偿区域对应的透光控制层的光透过率,即电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,可以达到准确的扣除采集的图像中的部分区域的暗电流,对坏点进行实时补偿,以及对坏线进行补偿,提升图像暗态均匀性和色彩准确度,进而提升电子设备拍摄图像的图像质量。
可选地,本申请实施例中,上述第一图像包括至少两个第一图像区域,该至少两个第一图像区域中的每个第一图像区域对应图像传感器中的至少一个透光单元;在上述步骤202之前,本申请实施例提供的图像采集方法还包括下述的步骤301至步骤303,并且上述步骤204具体可以通过下述的步骤204a实现。
步骤301、电子设备获取至少两个第一图像区域一一对应的至少两个第一亮度参数。
本申请实施例中,电子设备可以根据第一图像区域中的至少两个第一图像区域一一对应的至少两个第一亮度参数,确定第一图像中的目标亮度补偿区域。
可选地,本申请实施例中,上述亮度参数可以包括一项至少一项:像素亮度值、像素曝光值、像素饱和度值或像素色温值。
步骤302、在至少两个第一亮度参数中的第一目标亮度参数的值大于或等于第一阈值的情况下,电子设备将第一目标亮度参数对应的区域确定为第一目标亮度补偿区域。
本申请实施例中,电子设备可以通过第一目标亮度补偿区域,得到与第一目标亮度补偿区域对应的第一目标透光单元。
步骤303、基于第一目标亮度补偿区域确定第一目标透光单元。
可以理解,电子设备在确定第一目标亮度补偿区域之后,可以根据该第一目标亮度补偿区域确定与该第一目标亮度补偿区域对应的第一目标透光单元。
步骤204a、电子设备根据目标亮度补偿参数,调整第一目标透光单元对应的光透过率,并采集第二图像。
需要说明的是,具体实现方式可以参见上述实施例,为避免重复,此处不在赘述。
本申请实施例中,电子设备可以获取第一图像中的至少两个第一图像区域对应的至少两个第一亮度参数,从而将至少两个第一亮度参数中大于第一阈值的第一亮度参数对应的区域确定为第一目标透光单元,以根据目标亮度补偿参数,调整第一目标透光单元对应的光透过率,并采集第二图像,即电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,获取第二图像,避免了采集的图像中存在过曝的现象,如此,提升电子设备拍摄图像的图像质量。
可选地,本申请实施例中,上述第一目标透光单元包括:第一透光单元和第二透光单元,该第二透光单元覆盖第一透光单元;上述步骤204a中的“调整第一目标透光单元的光透过率”,具体包括下述的步骤204a1或步骤204a2或步骤204a3。
步骤204a1、电子设备调低第一透光单元的光透过率。
本申请实施例中,电子设备可以通过目标亮度补偿参数,调低第一目标透光单元对应的光透过率,并采集第二图像。
步骤204a2、电子设备调低第二透光单元的光透过率。
本申请实施例中,在电子设备根据目标亮度补偿参数,调低第一目标透光单元对应的光透过率,采集第二图像之后,电子设备可以对第二图像再次进行检测,在第二图像中的至少两个第一亮度参数中的第一目标亮度参数的值大于或等于第一阈值的情况下,电子设备可以通过目标亮度补偿参数,从而调低第二透光单元的光透过率,并采集第二图像。
步骤204a3、电子设备调低第一透光单元和第二透光单元的光透过率。
本申请实施例中,在电子设备根据目标亮度补偿参数,调低第一目标透光单元对应的光透过率或第二目标透光单元对应的光透过率,采集第二图像之后,电子设备可以对第二图像再次进行检测,在第二图像中的至少两个第二亮度参数中的第二目标亮度参数的值大于或等于第二阈值的情况下,电子设备可以通过目标亮度补偿参数,进一步调低第一透光单元和第二透光单元的光透过率,并采集第三图像。
示例性地,对于常规感光二极管,高光或者高亮的场景下,部分像素会饱和,只能输出1024,失去对高光信息的感知能力,此时,可以通过高动态范围图像(High-DynamicRange,HDR)功能来提升动态范围,然而即使通过多帧HDR功能,在高强光(例如太阳直射)的环境下,即使短帧的曝光时间拉到最短,也无法获取高光部分的信息。本申请实施例提供的图像采集方法,可以对第二图像的图像亮度参数进行检测,当发现第二图像存在即使曝光时间用到最短也有过曝现象的话,电子设备可以降低一半第二透光单元的透光度,当再次检测发现还有过曝现象时,电子设备可以降低一半第一透光单元的透光度,以此类推,直至检测到合理的曝光条件,可以理解,当N层透光单元均降低一半透光度后,动态范围相比原像素提升了6N db(若N为5,则图像传感器的动态范围可扩展至6*5=30db),从而电子设备最终可以找到太阳不过爆的透光度组合,达到高动态拍摄效果。
本申请实施例中,电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,获取第二图像,避免了采集的图像中存在过曝的现象,如此,提升电子设备拍摄图像的图像质量。
可选地,本申请实施例中,上述第二图像包括至少两个第二图像区域,该至少两个第二图像区域中的每个第二图像区域对应图像传感器中的至少一个透光单元;本申请实施例提供的图像采集方法还包括下述的步骤401至步骤404。
步骤401、电子设备获取至少两个第二图像区域一一对应的至少两个第二亮度参数。
本申请实施例中,电子设备可以根据第一图像区域中的至少两个第一图像区域一一对应的至少两个第二亮度参数,确定第一图像中的目标亮度补偿区域。
步骤402、在至少两个第二亮度参数中的第二目标亮度参数的值大于或等于第一阈值的情况下,电子设备将第二目标亮度参数对应的区域确定为第二目标亮度补偿区域。
本申请实施例中,电子设备可以通过第二目标亮度补偿区域,得到与第二目标亮度补偿区域对应的第二目标透光单元。
步骤403、电子设备基于第二目标亮度补偿区域确定第二目标透光单元。
可以理解,电子设备在确定第二目标亮度补偿区域之后,可以根据该第二目标亮度补偿区域确定与该第二目标亮度补偿区域对应的第二目标透光单元。
步骤404、电子设备降低第二目标透光单元对应的光透过率,采集第三图像。
本申请实施例中,电子设备可以根据调整后的光透过率,采集第三图像。
可选地,本申请实施例中,电子设备在采集第三图像之后,可以将该第三图像储存至目标应用程序(例如相册应用程序)中。
需要说明的是,上述实施例同样适用于调整电子设备采集的图像中存在的自动白平衡问题,为避免重复,此处不在赘述。
本申请实施例中,电子设备可以改变任一区域的滤光单元的光透过率,从而可以根据改变后的光透过率,获取第三图像,避免了采集的图像中即使经过处理仍然存在过曝的现象,如此,提升电子设备拍摄图像的图像质量。
需要说明的是,本申请实施例提供的图像采集方法,执行主体可以为图像采集装置。本申请实施例中以图像采集装置执行图像采集方法为例,说明本申请实施例提供的图像采集装置。
图8示出了本申请实施例中涉及的图像采集装置的一种可能的结构示意图。如图8所示,该图像采集装置70包括图像传感器,图像采集装置70还可以包括:采集模块71、确定模块72和调整模块73。
其中,采集模块71,用于通过图像传感器采集第一图像。确定模块72,用于基于第一图像的像素值,确定目标亮度补偿区域,并确定目标亮度补偿区域的目标亮度补偿参数。调整模块73,用于根据目标亮度补偿参数,调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
在一种可能的实现方式中,上述第一图像包括至少两个第一图像区域,该至少两个第一图像区域中的每个第一图像区域对应图像传感器中的至少一个透光单元;本申请实施例提供的图像采集模块还包括:获取模块。获取模块,用于在上述确定模块72确定目标亮度补偿区域的目标亮度补偿参数之前,获取至少两个第一图像区域一一对应的至少两个第一亮度参数。上述确定模块72,还用于在至少两个第一亮度参数中的第一目标亮度参数的值大于或等于第一阈值的情况下,将第一目标亮度参数对应的区域确定为第一目标亮度补偿区域;并基于第一目标亮度补偿区域确定第一目标透光单元。上述调整模块73,具体用于调整第一目标透光单元对应的光透过率。
在一种可能的实现方式中,上述确定模块72,具体用于根据第一阈值和第一目标亮度参数,确定目标亮度补偿参数。
在一种可能的实现方式中,上述调整模块73,具体用于根据目标亮度补偿参数,确定目标透光单元对应的目标电压;并向目标透光单元施加目标电压,以将目标透光单元的光透过率调整为目标光透过率。
在一种可能的实现方式中,上述第一图像包括至少两个第一图像区域;上述确定模块72,具体用于基于第一图像的像素值,计算每个第一图像区域对应的R通道数据、G通道数据和B通道数据;并基于R通道数据、G通道数据和B通道数据,确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使第二图像中,每个第二图像区域的R通道数据、G通道数据和B通道数据的数值相等;其中,第二图像区域为与第一图像区域对应的区域。
在一种可能的实现方式中,上述第二图像包括至少两个第二图像区域,每个第二图像区域对应所述图像传感器中的至少一个透光单元,本申请实施例提供的图像采集方法还包括:获取模块。获取模块,用于获取至少两个第二图像区域一一对应的至少两个第二亮度参数。上述确定模块72,还用于在至少两个第二亮度参数中的第二目标亮度参数的值大于或等于第一阈值的情况下,将第二目标亮度参数对应的区域确定为第二目标亮度补偿区域;并基于第二目标亮度补偿区域确定第二目标透光单元。上述调整模块73,还用于降低第二目标透光单元对应的光透过率,然后采集第三图像。
在一种可能的实现方式中,上述第一目标透光单元包括:第一透光单元和第二透光单元,该第二透光单元覆盖第一透光单元;上述调整模块73,具体用于调低第一透光单元的光透过率;或者,调低第二透光单元的光透过率;或者,调低第一透光单元和第二透光单元的光透过率。
在一种可能的实现方式中,上述确定模块72,具体用于基于第一图像的像素值确定光源频率;并基于光源频率确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使采集第二图像时,图像传感器中每行感光单元的曝光量相等。
在一种可能的实现方式中,采集第一图像时,透光控制层的光透过率为0,上述确定模块72,具体用于将第一图像中,像素值大于或等于第二阈值的区域确定为目标亮度补偿区域。
本申请实施例提供一种图像采集装置,由于图像采集装置可以根据第一图像,获取存在缺陷的目标亮度补偿区域,从而通过改变透光单元的透光度的方式来对目标亮度补偿区域进行补偿,即图像采集装置可以通过硬件补偿的方式,提高了图像的图像质量,以及减少了图像采集装置的算力需求,提升图像采集装置的处理速度,同时避免了无法解决局部暗电流异常以及动态补偿坏点损失图像清晰度的问题,提高了图像采集装置拍摄图像的图像质量。
本申请实施例中的图像采集装置可以是装置,也可以是电子设备中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(MobileInternet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的图像采集装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像装置能够实现图6至图7的方法实施例实现的各个过程,实现相同的技术效果,为避免重复,这里不再赘述。
可选地,如图9所示,本申请实施例还提供一种电子设备90,包括处理器91和存储器92,存储器92上存储有可在所述处理器91上运行的程序或指令,该程序或指令被处理器91执行时实现上述图像采集方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图10为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图10中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
本申请实施例的一种电子设备还包括:图像传感器,该图像传感器包括:滤光层,该滤光层包括至少两个滤光单元;微透镜层;透光控制层,透光控制层设置于滤光层和微透镜层之间,透光控制层包括至少一个透光单元,该至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置;其中,在向透光控制层施加电压的情况下,该透光控制层中至少一个透光单元的透光率发生变化,从而使对应的至少一个滤光单元的进光量发生变化。
可选地,本申请实施例中,上述至少一个滤光单元中的每一行滤光单元对应设置一个透光单元,或者上述至少一个滤光单元中的每一列滤光单元对应设置一个透光单元。
可选地,本申请实施例中,上述透光控制层的数目为至少两个,该两个透光控制层层叠设置。
本申请提供一种图像传感器,由于至少一个透光单元中的每个透光单元与至少一个滤光单元对应设置,电子设备可以向图像传感器中的透光控制层施加电压,以使得该透光控制层中至少一个透光单元的透光率发生变化,以改变与每个透光单元对应设置与至少一个滤光单元的进光量,可以理解,电子设备可以改变任一区域的滤光单元的进光量,从而提升了电子设备拍摄图像的灵活性。
其中,处理器110,用于通过电子设备的图像传感器采集第一图像;并基于第一图像的像素值,确定目标亮度补偿区域,并确定目标亮度补偿区域的目标亮度补偿参数;以及根据目标亮度补偿参数,调整目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
本申请实施例提供一种电子设备,由于电子设备可以根据第一图像,获取存在缺陷的目标亮度补偿区域,从而通过改变透光单元的光透过率的方式来对目标亮度补偿区域进行补偿,即电子设备可以通过硬件补偿的方式,提高了图像的图像质量,以及减少了电子设备的算力需求,提升电子设备的处理速度,同时避免了遮黑像素暗电流无法解决局部暗电流异常以及动态补偿坏点损失图像清晰度的问题,提高了电子设备拍摄图像的图像质量。
可选地,本申请实施例中,上述第一图像包括至少两个第一图像区域,该至少两个第一图像区域中的每个第一图像区域对应图像传感器中的至少一个透光单元;处理器110,还用于在确定目标亮度补偿区域的目标亮度补偿参数之前,获取至少两个第一图像区域一一对应的至少两个第一亮度参数;并在至少两个第一亮度参数中的第一目标亮度参数的值大于或等于第一阈值的情况下,将第一目标亮度参数对应的区域确定为第一目标亮度补偿区域;以及基于第一目标亮度补偿区域确定第一目标透光单元;处理器110,具体用于调整第一目标透光单元对应的光透过率。
可选地,本申请实施例中,处理器110,具体用于根据第一阈值和第一目标亮度参数,确定目标亮度补偿参数。
可选地,本申请实施例中,处理器110,具体用于根据目标亮度补偿参数,确定目标透光单元对应的目标电压;并向目标透光单元施加目标电压,以将目标透光单元的光透过率调整为目标光透过率。
可选地,本申请实施例中,上述第一图像包括至少两个第一图像区域;处理器110,具体用于基于第一图像的像素值,计算每个第一图像区域对应的R通道数据、G通道数据和B通道数据;并基于R通道数据、G通道数据和B通道数据,确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使第二图像中,每个第二图像区域的R通道数据、G通道数和B通道数据的数值相等;其中,第二图像区域为与第一图像区域对应的区域。
可选地,本申请实施例中,上述第二图像包括至少两个第二图像区域,该至少两个第二图像区域中的每个第二图像区域对应所述图像传感器中的至少一个透光单元,处理器110,还用于获取至少两个第二图像区域一一对应的至少两个第二亮度参数;并在至少两个第二亮度参数中的第二目标亮度参数的值大于或等于第一阈值的情况下,将第二目标亮度参数对应的区域确定为第二目标亮度补偿区域;以及基于第二目标亮度补偿区域确定第二目标透光单元;以及降低第二目标透光单元对应的光透过率,然后采集第三图像。
可选地,本申请实施例中,上述第一目标透光单元包括:第一透光单元和第二透光单元,该第二透光单元覆盖第一透光单元;处理器110,具体用于调低第一透光单元的光透过率;或者,调低第二透光单元的光透过率;或者,调低第一透光单元和第二透光单元的光透过率。
可选地,本申请实施例中,处理器110,具体用于基于第一图像的像素值确定光源频率;基于光源频率确定目标亮度补偿区域以及目标亮度补偿区域的目标亮度补偿参数,使采集第二图像时,图像传感器中每行感光单元的曝光量相等。
可选地,本申请实施例中,采集第一图像时,透光控制层的光透过率为0;处理器110,具体用于将第一图像中,像素值大于或等于第二阈值的区域确定为目标亮度补偿区域。
本申请实施例提供的电子设备能够实现上述方法实施例实现的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本实施例中各种实现方式具有的有益效果具体可以参见上述方法实施例中相应实现方式所具有的有益效果,为避免重复,此处不再赘述。
应理解的是,本申请实施例中,输入单元104可以包括图形处理器(GraphicsProcessing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072中的至少一种。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器109可以包括易失性存储器或非易失性存储器,或者,存储器109可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器109包括但不限于这些和任意其它适合类型的存储器。
处理器110可包括一个或多个处理单元;可选地,处理器110集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述图像采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (17)
1.一种图像传感器,其特征在于,所述图像传感器包括:
滤光层,所述滤光层包括至少两个滤光单元;
微透镜层;
透光控制层,所述透光控制层设置于所述滤光层和所述微透镜层之间,所述透光控制层包括至少一个透光单元,每个所述透光单元与至少一个滤光单元对应设置;
其中,在向所述透光控制层施加电压的情况下,所述透光控制层中至少一个透光单元的透光率发生变化,从而使对应的至少一个所述滤光单元的进光量发生变化。
2.根据权利要求1所述的图像传感器,其特征在于,每一行所述滤光单元对应设置一个所述透光单元,或者每一列所述滤光单元对应设置一个所述透光单元。
3.根据权利要求1所述的图像传感器,其特征在于,所述透光控制层的数目为至少两个,至少两个所述透光控制层层叠设置。
4.根据权利要求1所述的图像传感器,其特征在于,所述透光控制层的材质为电致变色材料。
5.一种电子设备,其特征在于,所述电子设备包括如权利要求1至4中任一项所述的图像传感器。
6.一种图像采集方法,其特征在于,应用于如权利要求5所述的电子设备,所述图像采集方法包括:
通过所述电子设备的图像传感器采集第一图像;
基于所述第一图像的像素值,确定目标亮度补偿区域,并确定所述目标亮度补偿区域的目标亮度补偿参数;
根据所述目标亮度补偿参数,调整所述目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
7.根据权利要求6所述的方法,其特征在于,所述第一图像包括至少两个第一图像区域,每个所述第一图像区域对应所述图像传感器中的至少一个透光单元;在所述确定所述目标亮度补偿区域的目标亮度补偿参数之前,所述方法还包括:
获取所述至少两个第一图像区域一一对应的至少两个第一亮度参数;
在所述至少两个第一亮度参数中的第一目标亮度参数的值大于或等于第一阈值的情况下,将所述第一目标亮度参数对应的区域确定为第一目标亮度补偿区域;
基于所述第一目标亮度补偿区域确定第一目标透光单元;
所述调整所述目标亮度补偿区域对应的透光控制层的光透过率,包括:
调整所述第一目标透光单元对应的光透过率。
8.根据权利要求7所述的方法,其特征在于,所述确定所述目标亮度补偿区域的目标亮度补偿参数,包括:
根据所述第一阈值和所述第一目标亮度参数,确定所述目标亮度补偿参数。
9.根据权利要求7所述的方法,其特征在于,所述根据所述目标亮度补偿参数,调整所述目标亮度补偿区域对应的透光控制层的光透过率,包括:
根据所述目标亮度补偿参数,确定所述目标透光单元对应的目标电压;
向所述目标透光单元施加所述目标电压,以将所述目标透光单元的光透过率调整为目标光透过率。
10.根据权利要求6所述的方法,其特征在于,所述第一图像包括至少两个第一图像区域,所述基于所述第一图像的像素值,确定目标亮度补偿区域,并确定所述目标亮度补偿区域的目标亮度补偿参数,包括:
基于所述第一图像的像素值,计算每个所述第一图像区域对应的R通道数据、G通道数据和B通道数据;
基于所述R通道数据、所述G通道数据和所述B通道数据,确定目标亮度补偿区域以及所述目标亮度补偿区域的目标亮度补偿参数,使所述第二图像中,每个第二图像区域的R通道数据、G通道数据和B通道数据的数值相等;
其中,所述第二图像区域为与所述第一图像区域对应的区域。
11.根据权利要求6所述的方法,其特征在于,所述第二图像包括至少两个第二图像区域,每个所述第二图像区域对应所述图像传感器中的至少一个透光单元,所述方法还包括:
获取所述至少两个第二图像区域一一对应的至少两个第二亮度参数;
在所述至少两个第二亮度参数中的第二目标亮度参数的值大于或等于第一阈值的情况下,将所述第二目标亮度参数对应的区域确定为第二目标亮度补偿区域;
基于所述第二目标亮度补偿区域确定第二目标透光单元;
降低所述第二目标透光单元对应的光透过率,然后采集第三图像。
12.根据权利要求7所述的方法,其特征在于,所述第一目标透光单元包括:第一透光单元和第二透光单元,所述第二透光单元覆盖所述第一透光单元;
所述调整第一目标透光单元的光透过率,包括以下至少一项:
调低所述第一透光单元的光透过率;
调低所述第二透光单元的光透过率;
调低所述第一透光单元和所述第二透光单元的光透过率。
13.根据权利要求6所述的方法,其特征在于,所述基于所述第一图像的像素值,确定目标亮度补偿区域,并确定所述目标亮度补偿区域的目标亮度补偿参数,包括:
基于所述第一图像的像素值确定光源频率;
基于所述光源频率确定目标亮度补偿区域以及所述目标亮度补偿区域的目标亮度补偿参数,使采集第二图像时,所述图像传感器中每行感光单元的曝光量相等。
14.根据权利要求6所述的方法,其特征在于,采集所述第一图像时,所述透光控制层的光透过率为0,所述基于所述第一图像的像素值,确定目标亮度补偿区域,包括:
将所述第一图像中,像素值大于或等于第二阈值的区域确定为目标亮度补偿区域。
15.一种图像采集装置,包括图像传感器,其特征在于,所述图像采集装置还包括:采集模块、确定模块和调整模块;
所述采集模块,用于通过所述图像传感器采集第一图像;
所述确定模块,基于所述第一图像的像素值,确定目标亮度补偿区域,并确定所述目标亮度补偿区域的目标亮度补偿参数;
上述调整模块,用于根据所述目标亮度补偿参数,调整所述目标亮度补偿区域对应的透光控制层的光透过率,并采集第二图像。
16.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求6至14中任一项所述的图像采集方法的步骤。
17.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求6至14中任一项所述的图像采集方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210730379.6A CN115118858B (zh) | 2022-06-24 | 2022-06-24 | 图像传感器、图像采集方法、装置、电子设备及储存介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210730379.6A CN115118858B (zh) | 2022-06-24 | 2022-06-24 | 图像传感器、图像采集方法、装置、电子设备及储存介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115118858A true CN115118858A (zh) | 2022-09-27 |
CN115118858B CN115118858B (zh) | 2024-07-16 |
Family
ID=83330352
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210730379.6A Active CN115118858B (zh) | 2022-06-24 | 2022-06-24 | 图像传感器、图像采集方法、装置、电子设备及储存介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115118858B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008074176A1 (de) * | 2006-12-19 | 2008-06-26 | Riken Optech Corporation | Aktives lichtschutzfilter |
CN108008567A (zh) * | 2017-12-14 | 2018-05-08 | 深圳市华星光电技术有限公司 | 彩色滤光片基板及其制作方法 |
CN108111731A (zh) * | 2017-12-27 | 2018-06-01 | 信利光电股份有限公司 | 一种摄像头模组 |
US20180167563A1 (en) * | 2016-12-08 | 2018-06-14 | Panasonic Intellectual Property Management Co., Ltd. | Imaging apparatus including image sensor, optical system, control circuit, and signal processing circuit |
CN109065563A (zh) * | 2018-09-28 | 2018-12-21 | 德淮半导体有限公司 | 图像传感器及其制造方法 |
US20190130155A1 (en) * | 2017-11-02 | 2019-05-02 | Samsung Display Co., Ltd. | Display device and method of driving the display device |
CN113167949A (zh) * | 2018-11-29 | 2021-07-23 | 研制知有限公司 | 透光率可变元件及包括该元件的显示装置用滤色器及智能窗 |
-
2022
- 2022-06-24 CN CN202210730379.6A patent/CN115118858B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008074176A1 (de) * | 2006-12-19 | 2008-06-26 | Riken Optech Corporation | Aktives lichtschutzfilter |
US20180167563A1 (en) * | 2016-12-08 | 2018-06-14 | Panasonic Intellectual Property Management Co., Ltd. | Imaging apparatus including image sensor, optical system, control circuit, and signal processing circuit |
US20190130155A1 (en) * | 2017-11-02 | 2019-05-02 | Samsung Display Co., Ltd. | Display device and method of driving the display device |
CN108008567A (zh) * | 2017-12-14 | 2018-05-08 | 深圳市华星光电技术有限公司 | 彩色滤光片基板及其制作方法 |
CN108111731A (zh) * | 2017-12-27 | 2018-06-01 | 信利光电股份有限公司 | 一种摄像头模组 |
CN109065563A (zh) * | 2018-09-28 | 2018-12-21 | 德淮半导体有限公司 | 图像传感器及其制造方法 |
CN113167949A (zh) * | 2018-11-29 | 2021-07-23 | 研制知有限公司 | 透光率可变元件及包括该元件的显示装置用滤色器及智能窗 |
Also Published As
Publication number | Publication date |
---|---|
CN115118858B (zh) | 2024-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102347341B (zh) | 固态摄像器件、其驱动方法和电子装置 | |
CN108712608B (zh) | 终端设备拍摄方法和装置 | |
US20140168463A1 (en) | Image-processing device and imaging apparatus | |
US20040041919A1 (en) | Digital camera | |
CN104010128A (zh) | 摄像设备及其控制方法 | |
US20170134634A1 (en) | Photographing apparatus, method of controlling the same, and computer-readable recording medium | |
CN103108120A (zh) | 变焦控制方法和设备 | |
JP2008205905A (ja) | 固体撮像装置および撮像装置 | |
US20140071318A1 (en) | Imaging apparatus | |
CN110213502A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN112672054B (zh) | 对焦方法、装置及电子设备 | |
CN109587378A (zh) | 摄像装置及照相机系统 | |
CN110166706A (zh) | 图像处理方法、装置、电子设备以及存储介质 | |
CN108965729A (zh) | 控制方法、装置、电子设备和计算机可读存储介质 | |
EP3836532A1 (en) | Control method and apparatus, electronic device, and computer readable storage medium | |
EP2161938B1 (en) | Imaging apparatus, imaging method and computer readable recording medium storing programs for executing the imaging method | |
CN115278058B (zh) | 图像采集方法、装置、电子设备及存储介质 | |
US10523869B2 (en) | Imaging apparatus and control method thereof | |
KR101592409B1 (ko) | 화질 개선 장치, 이를 가지는 디지털 촬영 장치 및 화질 개선 방법 | |
JP2010288093A (ja) | 画像処理装置、固体撮像装置および電子情報機器 | |
WO2009067121A1 (en) | Camera sensor system self-calibration | |
JP5146015B2 (ja) | 撮像装置及び撮像方法 | |
CN114125240A (zh) | 图像传感器、摄像模组、电子设备及拍摄方法 | |
CN115278057B (zh) | 图像采集方法、装置、电子设备及存储介质 | |
CN115118858B (zh) | 图像传感器、图像采集方法、装置、电子设备及储存介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |