CN115361532B - 图像传感器、图像采集方法及装置 - Google Patents
图像传感器、图像采集方法及装置 Download PDFInfo
- Publication number
- CN115361532B CN115361532B CN202210984283.2A CN202210984283A CN115361532B CN 115361532 B CN115361532 B CN 115361532B CN 202210984283 A CN202210984283 A CN 202210984283A CN 115361532 B CN115361532 B CN 115361532B
- Authority
- CN
- China
- Prior art keywords
- color filter
- filter array
- array layer
- unit
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000001914 filtration Methods 0.000 claims abstract description 40
- 230000007246 mechanism Effects 0.000 claims abstract description 39
- 230000003287 optical effect Effects 0.000 claims abstract description 28
- 230000008859 change Effects 0.000 claims abstract description 11
- 239000003086 colorant Substances 0.000 claims description 29
- 230000000903 blocking effect Effects 0.000 claims description 28
- 229910052751 metal Inorganic materials 0.000 claims description 8
- 239000002184 metal Substances 0.000 claims description 8
- 239000000463 material Substances 0.000 claims description 7
- 239000010410 layer Substances 0.000 description 191
- 238000010586 diagram Methods 0.000 description 17
- 230000000694 effects Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 9
- 230000009467 reduction Effects 0.000 description 9
- 238000005192 partition Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000003595 spectral effect Effects 0.000 description 5
- 230000035945 sensitivity Effects 0.000 description 4
- 101100248200 Arabidopsis thaliana RGGB gene Proteins 0.000 description 3
- 238000002955 isolation Methods 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- PJJNGKSNTQJPBR-KFFAWSGCSA-N Cys-Met-Thr-Tyr Chemical compound SC[C@H](N)C(=O)N[C@@H](CCSC)C(=O)N[C@@H]([C@@H](C)O)C(=O)N[C@H](C(O)=O)CC1=CC=C(O)C=C1 PJJNGKSNTQJPBR-KFFAWSGCSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- 230000004456 color vision Effects 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- -1 for example Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000007769 metal material Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- WFKWXMTUELFFGS-UHFFFAOYSA-N tungsten Chemical compound [W] WFKWXMTUELFFGS-UHFFFAOYSA-N 0.000 description 1
- 229910052721 tungsten Inorganic materials 0.000 description 1
- 239000010937 tungsten Substances 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
Abstract
本申请公开了一种图像传感器、图像采集方法及装置,属于图像处理技术领域。该图像传感器包括:第一色彩滤波阵列层,包括至少两个第一滤光单元;第二色彩滤波阵列层,包括至少两个第二滤光单元;感光层,包括至少两个感光单元,每一个感光单元与一个第一滤光单元和一个第二滤光单元对应设置;驱动机构,与第一色彩滤波阵列层对应设置,用于驱动第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系。
Description
技术领域
本申请属于图像处理技术领域,具体涉及一种图像传感器、图像采集方法及装置。
背景技术
随着越来越多的电子设备都具有拍摄功能,图像传感器作为拍摄时必须具备的硬件模块,被广泛应用于各种电子设备中。
目前,图像传感器在感应外界光线后,由于不同感光单元对应的颜色通道的信号之间会受到信号串扰的影响,导致图像传感器输出的图像数据中的颜色信号数据并不纯净,例如绿色通道对应的感光单元输出的绿色信号数据中可能包含有部分红色信号数据和蓝色信号数据,从而使得后期进行色彩还原处理时,影响色彩还原效果。
发明内容
本申请实施例的目的是提供一种图像传感器、图像采集方法及装置,能够解决图像传感器输出的图像数据中的颜色信号数据不纯净,使得后期进行色彩还原处理时,影响色彩还原效果的问题。
第一方面,本申请实施例提供了一种图像传感器,包括:
第一色彩滤波阵列层,包括至少两个第一滤光单元;
第二色彩滤波阵列层,包括至少两个第二滤光单元;
感光层,所述感光层包括至少两个感光单元,每一个所述感光单元与一个所述第一滤光单元和一个所述第二滤光单元对应设置;
驱动机构,与所述第一色彩滤波阵列层对应设置,用于驱动所述第一色彩滤波阵列层相对于所述第二色彩滤波阵列层移动,以改变所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系;
在所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,每一个所述感光单元对应的所述第一滤光单元和所述第二滤光单元的颜色相同;
在所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系的情况下,至少一个所述感光单元对应的所述第一滤光单元和所述第二滤光单元的颜色不同。
第二方面,本申请实施例提供了一种电子设备,包括如第一方面所述的图像传感器。
第三方面,本申请实施例提供了一种图像采集方法,应用于如第二方面所述的电子设备,该方法包括:
在图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
控制所述图像传感器采集得到第二图像数据;
基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
第四方面,本申请实施例提供了一种图像采集装置,包括如第一方面所述的图像传感器,该装置还包括:
第一获取单元,用于在所述图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
驱动控制单元,用于控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
第二获取单元,用于控制所述图像传感器采集得到第二图像数据;
数据确定单元,用于基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
第五方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第三方面所述的方法的步骤。
第六方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第三方面所述的方法的步骤。
第七方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第三方面所述的方法的步骤。
第八方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第三方面所述的方法的步骤。
在本申请实施例中,通过在图像传感器中设置两层色彩滤波阵列层,其中第一色彩滤波阵列层对应设置有驱动机构,利用驱动机构驱动该第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,使得第一色彩滤波阵列层与第二色彩滤波阵列层在满足第一位置关系的情况下,每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同,而在满足第二位置关系的情况下,至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同。这样,可以通过改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,采集到不同颜色的串扰光线在各个感光单元中的串扰信号数据,为实现串扰信号数据的去除提供了硬件基础,以得到颜色纯净的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果,避免出现因光线串扰引起的图像色彩失真的问题。
另外,本申请实施例在上述图像传感器结构的基础上,在第一色彩滤波阵列层与第二色彩滤波阵列层满足第一位置关系的情况下,控制图像传感器采集得到第一图像数据,然后驱动第一色彩滤波阵列层移动,在满足第二位置关系的情况下,控制图像传感器采集得到第二图像数据,进而基于该第一图像数据和第二图像数据可以去除因串扰光线在感光单元中产生的串扰信号数据,得到颜色纯净的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果,避免出现因光线串扰引起的图像色彩失真的问题。
附图说明
图1是本申请提供的摄像模组的结构示意图;
图2是本申请提供的传统图像传感器的结构示意图;
图3是本申请实施例提供的图像传感器的结构示意图之一;
图4是本申请实施例提供的图像传感器的结构示意图之二;
图5是本申请实施例提供的图像传感器的结构示意图之三;
图6是本申请实施例提供的形变组件的结构示意图;
图7a是本申请实施例提供的色彩滤波阵列层移动场景的示意图之一;
图7b是本申请实施例提供的色彩滤波阵列层移动场景的示意图之二;
图7c是本申请实施例提供的色彩滤波阵列层移动场景的示意图之三;
图8a是本申请实施例提供的色彩滤波阵列层移动场景的示意图之四;
图8b是本申请实施例提供的色彩滤波阵列层移动场景的示意图之五;
图8c是本申请实施例提供的量子效率曲线图;
图9是本申请实施例提供的图像传感器的结构示意图之四;
图10是本申请实施例提供的图像采集方法的流程图;
图11是本申请实施例提供的图像采集装置的结构框图;
图12是本申请实施例提供的电子设备的结构框图;
图13为实现本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像传感器、图像采集方法及装置进行详细地说明。
目前移动终端产品的市场竞争越来越激烈,尤其是在智能手机相机方面,各个终端竞争异常激烈。为了提高图像传感器的感光度(Sensitivity)以达到较好的夜景细节与色彩效果,采用的技术包括:使用较大的像素尺寸以增加图像传感器本身的感光度,使用较大的镜头光圈以增加进光量,采用HDR(High Dynamic Range,高动态范围)芯片读取技术以多帧合成扩展动态范围,采用双镜头的方式来增强物体细节与兼顾物体色彩,以及各种新型态彩色滤光片排列方式,如RGBW、RYYB、RCCB、CMY等,来同时提升色彩还原精准度与低光环境下的感光度。
不论RGGB、CMMY还是RYYB,这些颜色阵列所能感知到的亮度、色彩等均与人眼感知存在差异,所以这些图像传感器都需要使用后期算法进行色彩处理,以尽量接近人眼视觉感知或主观审美。
在使用后期算法进行颜色校准的过程中,若图像传感器输出的各个颜色通道的颜色信号不纯净,则需要引入较多的修正色彩值,这样导致经色彩还原后的颜色与人眼感知到的颜色差异较大,色彩还原效果差。
针对如图1所示的摄像模组中的图像传感器10,现有的图像传感器中主要采用单层CFA(Color Filter Array,色彩滤波阵列层)进行滤波,由于一般的光电传感器只能感应光的强度,不能区分光的波长(色彩),因此图像传感器中需要通过色彩滤波(ColorFilter)以获取像素点的色彩信息。CFA根据波长对光线进行滤波,CFA中特定颜色的滤光片只允许特定波长的光通过。
通常,图像传感器中可包括多个像素单元,以RGGB像素排列方式为例,现有的图像传感器中每个像素单元可以包括如图2所示的结构。示例性地,以两个像素单元为例,具体为第一像素单元21和第二像素单元22,第一像素单元21可包括第一感光单元211,以及CFA中与该第一感光单元211对应设置的R(红色)滤光单元212,以采集红色光信号,第二像素单元22可包括第二感光单元221,以及CFA中与该第二感光单元221对应设置的G(绿色)滤光单元222,以采集绿色光信号。
如此,现有的像素结构中不同像素单元之间会存在各种信号串扰(cross-talk)现象,串扰一般可分为三类,包括光谱串扰(Spectral cross-talk)、电子串扰(Electroniccross-talk)和空间串扰(Spatial cross-talk)。
具体地,如图2所示,光谱串扰主要是由于RGB频谱的串扰造成,例如对于第一像素单元21,光线经过R滤光单元212后,除了R光之外,还会有部分G光和B(蓝色)光通过。电子串扰主要是由于当感光单元将光信号转变为电信号后,需要在该感光单元的电荷井中存储容纳相应的电子,若电荷井存储了过多的电子,就可能会溢出到相邻的感光单元的电荷井中,从而产生电子串扰。空间串扰主要是由于入射光线角度问题引起,例如本该照射到第一像素单元21中的R光由第一感光单元211接收,但是由于像素单元之间间距较小或光线入射角度太大,从而可能导致其被第二感光单元221接收,从而产生空间串扰。
以上串扰现象产生的串扰信号,会进一步恶化图像传感器对色彩的感知能力,使得输出的图像数据中各个颜色通道的颜色信号不纯净,从而导致非常难以被后期算法处理或优化。
为了解决上述技术问题,尽可能地消除串扰,本申请实施例对图像传感器进行了改进,下面进行详细说明。
图3是本申请实施例提供的图像传感器的结构示意图之一。如图3所示,本申请实施例提供的图像传感器包括:
第一色彩滤波阵列层311,包括至少两个第一滤光单元;
第二色彩滤波阵列层312,包括至少两个第二滤光单元;
感光层33,感光层33包括至少两个感光单元,每一个感光单元与一个第一滤光单元和一个第二滤光单元对应设置;
驱动机构32,与第一色彩滤波阵列层311对应设置,用于驱动第一色彩滤波阵列层311相对于第二色彩滤波阵列层312移动,以改变第一色彩滤波阵列层311与第二色彩滤波阵列层312的位置关系;
在第一色彩滤波阵列层311与第二色彩滤波阵列层312的位置关系满足第一位置关系的情况下,每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同;
在第一色彩滤波阵列层311与第二色彩滤波阵列层312的位置关系满足第二位置关系的情况下,至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同。
由此,通过在图像传感器中设置两层色彩滤波阵列层,其中第一色彩滤波阵列层对应设置有驱动机构,利用驱动机构驱动该第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,使得第一色彩滤波阵列层与第二色彩滤波阵列层在满足第一位置关系的情况下,每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同,而在满足第二位置关系的情况下,至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同。这样,可以通过改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,采集到不同颜色的串扰光线在各个感光单元中的串扰信号数据,为实现串扰信号数据的去除提供了硬件基础,以得到颜色纯净的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果,避免出现因光线串扰引起的图像色彩失真的问题。
下面对上述每个部分进行详细说明。
在本申请实施例中,图像传感器中可包括感光层33,以及与该感光层33对应设置的第一色彩滤波阵列层311和第二色彩滤波阵列层312。其中,第一色彩滤波阵列层311和第二色彩滤波阵列层312可重叠设置,且与感光层33之间留有间隙。需要说明的是,第一彩色滤波阵列层311可位于第二色彩滤波阵列层312之上,也可位于第二色彩滤波阵列层312之下,本申请实施例对第一彩色滤波阵列层311与第二色彩滤波阵列层312之间的叠放顺序并不限定。
感光层33中所包括的至少两个感光单元邻接且呈阵列排布,第一色彩滤波阵列层311中所包括的至少两个第一滤波单元邻接且呈阵列排布,第二色彩滤波阵列层312中所包括的至少两个第二滤波单元邻接且呈阵列排布。其中,一个感光单元及其对应设置的一个第一滤光单元和一个第二滤光单元,可组成一个像素单元,也即图像传感器中可包括多个像素单元,该多个像素单元邻接且呈阵列排布。
另外,一个像素单元可对应采集一个颜色通道的颜色信号数据,每个像素单元中可包括一个感光单元及其对应设置的两个滤光单元,其中,不同的滤光单元分别位于不同的色彩滤波阵列层中。
以一个像素单元为例进行说明,如图4所示,该像素单元40可包括感光单元44以及重叠设置的第一滤光单元41和第二滤光单元42,该两个滤光单元分别位于不同的色彩滤波阵列层中。
其中,第一滤光单元41和第二滤光单元42可分别用于从接收的光信号中滤除相应波长的光信号,例如R滤光单元可用于从接收的光信号中滤除R光对应的波长范围之外的其他波长的光信号。
感光单元44可用于接收光信号,并将光信号转换为电信号,感光组件44例如可以是光电二极管(photo diode,PD),将入射的光子转换成电子并存储起来,这样,通过后端电路处理后转换成数字信号,最终形成图像数据。
另外,像素单元40中还可包括微透镜43。其中,微透镜43可以为半圆形微透镜,例如high-n微透镜,曲率半径更大,聚光能力更强,一般为像素边长的2~4倍,如像素边长为1μm,那么high-n微透镜的感光主面曲率半径可以为2~4μm。
在本申请实施例中,如图3所示,图像传感器还可以包括驱动机构32,该驱动机构32可以是能够产生微米级驱动力的机构,例如MEMS(Micro Electro Mechanical Systems,微机电系统),MEMS是微米大小的机械系统,它的操作范围在微米尺度内,通过把驱动器和传感器等集成在微芯片上来执行动作,实现特定功能。
这里,驱动机构32与第一色彩滤波阵列层311对应设置。也就是说,驱动机构32可驱动第一色彩滤波阵列层311相对于第二色彩滤波阵列层312进行移动。当然,驱动机构32也可与第二色彩滤波阵列层312对应设置,以驱动第二色彩滤波阵列层312相对于第一色彩滤波阵列层311进行移动,在此不作限定。
另外,需要说明的是,上述移动可以是平行移动,以通过改变第一色彩滤波阵列层311与第二色彩滤波阵列层312的位置关系,来改变每个像素单元中感光单元与第一滤光单元311之间的对应关系,进而达到改变由滤光单元过滤得到的特定波长的光信号,并以此为依据达到消除光谱串扰的目的。
示例性地,当第一色彩滤波阵列层311与第二色彩滤波阵列层312之间的位置关系满足第一位置关系时,感光层33中的每个感光单元对应的第一滤光单元和第二滤光单元的颜色是相同的,例如,两个色彩滤波阵列层处于第一位置关系时,某个感光单元对应的第一滤光单元和第二滤光单元均为R滤光单元,另一个感光单元对应的第一滤光单元和第二滤光单元均为G滤光单元,以此类推。
当第一色彩滤波阵列层311与第二色彩滤波阵列层312之间的位置关系满足第二位置关系时,感光层33中的至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色是不相同的,例如,两个色彩滤波阵列层处于第二位置关系时,某个感光单元对应的第一滤光单元为G滤光单元,对应的第二滤光单元为B滤光单元,当然,也可能存在某些感光单元对应的第一滤光单元和第二滤光单元均为R滤光单元。
在一些实施方式中,驱动机构32具体可以包括形变组件和控制模块。其中,形变组件与第一色彩滤波阵列层连接,控制模块与形变组件连接,用于向形变组件施加电压,以使形变组件产生形变,带动第一色彩滤波阵列层移动。
这里,形变组件可以是通过施加电压产生形变的组件,其材质例如可以是压电材料,压电材料大致可分为单晶、陶瓷、薄膜等。
例如,如图5中所示,形变组件51可与第一色彩滤波阵列层52连接,以在形变组件51产生形变(例如变宽或变窄)时,带动第一色彩滤波阵列层52平行移动。另外,控制模块(图中未示出)可与形变组件51连接,以向形变组件51施加电压,以使形变组件51产生形变,例如变宽或变窄。
另外,在一些实施方式中,形变组件51的数量可以为多个,分别设置于第一色彩滤波阵列层52的外围。
例如,如图6所示的像素结构的切面俯视图,形变组件的数量可以为四个,分别设置于第一色彩滤波阵列层的上侧、下侧、左侧和右侧。
如此,当左侧形变组件511被施加的电压较小,右侧形变组件512被施加的电压较大时,则左侧窄,右侧宽;当上侧形变组件513被施加的电压较小,下侧形变组件514被施加的电压较大时,则上侧窄,下侧宽,从而可以驱动第一色彩滤波阵列层进行上下左右任意方向的平行移动。
当然,形变组件51的数量还可以为两个,分别设置于第一色彩滤波阵列层的上侧和下侧中的一侧,以及左侧和右侧中的一侧,在此不作限定。
另外,本申请实施例中还可包括处理模块,该处理模块可用于向驱动机构32发送控制指令,以控制驱动机构32驱动第一色彩滤波阵列层进行移动。其中,不同的控制指令可对应不同的移动方向。
在一个示例中,在像素排布方式采用RGGB排布方式的情况下,以一个单位的四个像素单元及两层色彩滤波阵列层为例,若形变组件与下层色彩滤波阵列层连接,则默认情况下,也即形变组件未被施加电压的情况下,各滤光单元的排列方式可如图7a所示。此时,上下两层色彩滤波阵列层之间处于第一位置关系,也即上下两层色彩滤波阵列层中上下两个滤光单元的颜色相同,例如两个B滤光单元对应一个感光单元,两个R滤光单元对应一个感光单元,两个G滤光单元对应一个感光单元。若处理模块向控制模块发送第一控制指令,以使控制模块响应于该第一控制指令,向左侧形变组件511施加较大的电压,向右侧形变组件512施加较小的电压,则左侧形变组件511变宽,右侧形变组件512变窄,且两者改变的宽度相同,都是一个像素单元的宽度,以使下层色彩滤波阵列层整体向右移动一格,移动结果如图7b所示。此时,上下两层色彩滤波阵列层之间处于第二位置关系,也即上下两层色彩滤波阵列层中不同颜色的滤光单元对应一个感光单元,例如上层的R滤光单元和下层的G滤光单元对应一个感光单元(通道以不动层对应的滤光单元为准),上层的G滤光单元和下层的R滤光单元(或B滤光单元)对应一个感光单元,上层的B滤光单元与下层的G滤光单元对应一个感光单元。
在另一个示例中,在默认情况下,也即形变组件未被施加电压的情况下,各滤光片的排列方式可如图8a所示。此时,若处理模块向控制模块发送第一控制指令,以使控制模块响应于该第一控制指令,向上侧形变组件513施加较大的电压,向下侧形变组件514施加较小的电压,则上侧形变组件513变宽,下侧形变组件514变窄,且两者改变的宽度相同,都是一个像素单元的宽度,以使下层色彩滤波阵列层整体向下移动一格,移动结果如图8b所示。
如此,处理模块在两层色彩滤波阵列层之间处于第一位置关系的情况下,可得到各个感光单元对应的相应颜色的信号数据,也即第一目标数据;在两层色彩滤波阵列层之间处于第二位置关系的情况下,可得到各个感光单元对应的其他颜色光谱串扰信号数据,也即第二目标数据。其原理在于,对于双层色彩滤波阵列层,若一个像素单元中上下两层的滤光单元颜色不相同,则只能透过两个滤光单元对应光谱的交集部分的光信号。例如如图8c所示,以蓝光为例,假设只统计10%以上的信息,因为太低的量子效率产生不了光电信号,因此一般只看10%以上的部分。那么可以分别得到,区域1+区域3+区域2对应的信号数据、区域1对应的信号数据和区域2对应的信号数据。其中,区域3对应的信号数据为蓝色感光单元接收到的蓝光的纯净信号数据,区域1对应的信号数据为蓝色感光单元接收到的来自红光的串扰信号数据,区域2对应的信号数据为蓝色感光单元接收到的来自绿光的串扰信号数据。示例性地,蓝光曲线与10%横线围起来的封闭区域,即区域1+区域3+区域2的总面积,是通过蓝色感光单元获取的包含串扰信号数据和蓝光纯净信号数据的总信号数据。区域1对应的串扰信号数据是:在蓝色滤光单元和红色滤光单元重叠时,通过蓝色感光单元获取的信号数据,即B(R);区域2对应的串扰信号数据是:在蓝色滤光单元和绿色滤光单元重叠时,通过蓝色感光单元获取的信号数据,即B(G);区域1+区域3+区域2对应的信号数据则是:在两个蓝色滤光单元重叠时,通过蓝色感光单元获取的信号数据。基于此,区域3对应的信号数据可以由上述区域1+区域3+区域2对应的信号数据,减去B(R)以及B(G)得到,即得到B通道的纯信号数据。
基于上述原理,在本申请实施例中,在上层的R滤光单元和下层的G滤光单元对应一个R感光单元情况下,得到的图像数据是R感光单元中G光对应的信号数据,即R(G)。同理,通过再次控制第一色彩滤波阵列层进行移动,即可得到R(B)。如此,对于R感光单元,只需将获取到的R感光单元对应输出的R信号数据减去其他两种颜色在该通道中的串扰数据R(G)和R(B),即可获得R感光单元对应的纯R信号数据,也即R通道的纯信号值。同理,可以得到G感光单元对应的纯G信号数据,也即G通道的纯信号值。
另外,在一些实施方式中,为了进一步提高图像传感器输出的各个颜色通道的颜色信号数据的纯净度,本申请实施例提供的图像传感器中,如图5所示,相邻两个像素单元之间还设置有信号隔断组件53。
这里,信号隔断组件53可用于隔断相邻两个像素单元的信号,例如图5中信号隔断组件53可隔断第三像素单元54和第四像素单元55的信号,使得第三像素单元54和第四像素单元55的信号不会互相串扰。其中,信号包括光信号和电信号中的至少一种。
如此,通过设置信号隔断组件,可以降低由于电子串扰或空间串扰带来的影响,从而进一步提高图像传感器输出的各个颜色通道的颜色信号的纯净度。
基于此,在一些实施方式中,如图9所示,信号隔断组件具体可以包括:第一隔断组件531和第二隔断组件532。
具体地,在一些实施方式中,相邻两个感光单元之间设置有第一隔断组件531,第一隔断组件531用于隔断相邻两个感光单元的电信号,第一隔断组件的材质可以为金属。
这里,以图9中的第三像素单元54和第四像素单元55为例,第一隔断组件531可设置于第三感光单元541和第四感光单元551之间,用于隔断第三感光单元541和第四感光单元551的电信号。其中,第一隔断组件531可以是FDTI(Fully Deep Trench Isolation,深槽介质隔离),具体可以使用金属材料填充,其中,金属可以为铝。该第一隔断组件531可用于隔开不同的感光单元的电荷井,例如图9中的第三像素单元54对应的第三感光单元541的电荷井,与第四像素单元55对应的第四感光单元551的电荷井,以防止感光单元内的光电子发生溢出,降低电子串扰带来的影响。
另外,在一些实施方式中,感光单元与目标滤光单元之间设有间隙,相邻两个感光单元对应的间隙之间设置有第二隔断组件532,第二隔断组件532用于隔断相邻两个感光单元接收的光信号,第二隔断组件的材质可以为金属;其中,目标滤光单元为与感光单元对应的第一滤光单元和第二滤光单元中,靠近感光单元的滤光单元。
这里,一个感光单元及其对应的第一滤光单元和第二滤光单元组成一个像素单元,感光单元与目标滤光单元之间设有间隙,相邻两个像素单元对应的间隙之间设置有第二隔断组件532,其中,第二隔断组件532可分别与感光单元和目标滤光单元相接,当然也可以不相接,在此不作限定。
示例性地,以图9中的第三像素单元54和第四像素单元55为例,第三像素单元54中,第三感光单元541与第三目标滤光单元542之间设有间隙,且第四像素单元55中,第四感光单元551与第四目标滤光单元552之间设有间隙。基于此,第二隔断组件532可设置于第三像素单元54和第四像素单元55对应的间隙之间,以隔断第三像素单元54和第四像素单元55接收的光信号。第二隔断组件532的材质可以是金属等遮光材料,例如金属钨,具体材料可以不限制,可以起到阻隔或反射光线的作用即可。
如此,通过设置第二隔断组件532,可以防止不同像素单元接收的光信号之间互相串扰,从而降低空间串扰带来的影响。
另外,在本申请提供的上述图像传感器的基础上,本申请实施例还提供了一种图像采集方法,下面进行具体说明。
本申请所提供的图像采集方法,可以应用于提取各个颜色通道中的颜色信号的场景中。需要说明的是,本申请实施例提供的图像采集方法,执行主体可以为图像采集装置,该图像采集装置可集成于包含上述图像传感器的电子设备中。本申请实施例中以图像采集装置执行图像采集方法为例,说明本申请实施例提供的图像采集方法。
图10是本申请实施例提供的图像采集方法的流程图。
如图10所示,该图像采集方法可以包括:
S1010,在图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制图像传感器采集得到第一图像数据;
S1020,控制驱动机构驱动第一色彩滤波阵列层移动,使第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系满足第二位置关系;
S1030,控制图像传感器采集得到第二图像数据;
S1040,基于第一图像数据和第二图像数据,得到目标图像数据。
由此,通过在第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制图像传感器采集得到第一图像数据,并在第一色彩滤波阵列层移动后,即两个色彩滤波阵列层之间满足第二位置关系的情况下,控制图像传感器采集得到第二图像数据,进而由第一图像数据和第二图像数据可以得到具有纯净的颜色信号数据的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果。
下面对上述各个步骤进行详细说明。
本申请实施例中针对现有图像传感器采集颜色信号时存在光谱串扰的问题,例如如图8c所示,以B通道为例,在B滤光单元透过率高于10%的波段区域里,除了可以透过B光,R光和G光中的部分波段也是可以透过来的,也就是说两个B滤光单元叠加后,对应设置的B感光单元获取的颜色信号数据并不是纯粹的B信号数据,而是B信号数据加上因光谱串扰现象导致的部分R信号数据和G信号数据,也即区域3+区域1+区域2对应的总信号数据。
基于此,在本申请实施例中,可利用设置有本申请实施例提供的图像传感器的电子设备在原始状态下拍照,得到RGB的raw图。其中,原始状态可以是图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层之间处于第一位置关系的状态,如此,图像传感器中每个颜色通道对应的感光单元分别可输出对应的包含串扰信号数据的颜色信号数据,进而得到第一图像数据,也即原始状态下的raw图。
为了便于理解,以图像传感器中包括两层色彩滤波阵列层为例,进行举例说明。如图7a所示,在得到原始状态下的raw图之后,也即第一图像数据之后,此时可通过控制驱动机构驱动位于下层的第一色彩滤波阵列层向左移动一个像素单元的宽度,得到如图7b所示的第二位置关系,此时,以B通道对应的感光单元为例,该感光单元上对应有一个B滤光单元和一个G滤光单元,如图8c所示,B滤光单元和G滤光单元在量子效率高于10%的波段区域里,透过B滤光单元和G滤光单元的光信号是区域2对应波段的光信号,也即B光中存在的G光串扰信号数据,此时该感光单元输出的信号数据为区域2的信号数据,也即B(G)串扰信号数据,以此类推,图像传感器可输出两层色彩滤波阵列层处于第二位置关系时的raw图,也即第二图像数据。
如此,参考第二图像数据对第一图像数据进行处理,即可得到目标图像数据。也就是说,在得到总信号数据以及串扰信号数据之后,可从总信号数据中减去串扰信号数据,即可消除部分或全部串扰。
另外,在一些实施方式中,上述S1020具体可以包括:
控制驱动机构驱动第一色彩滤波阵列层移动至少两次,使第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系满足至少两种第二位置关系。
基于此,上述S1030具体可以包括:
在至少两种第二位置关系下,分别控制图像传感器采集图像数据,得到至少两组第二图像数据。
这里,为了获取到每个通道分别对应的所有其他颜色的串扰信号数据,需要控制第一色彩滤波阵列层移动至少两次,满足至少两种第二位置关系,其中,不同的第二位置关系下可采集到不同颜色的串扰信号数据,以得到每种其他颜色的串扰信号数据。
例如,接着前述例子,在得到如图7b所示的位置关系的基础上,还可继续通过控制驱动机构驱动位于下层的第一色彩滤波阵列层向下移动一个像素单元的宽度,得到如图7c所示的位置关系,此时,B通道对应的感光单元可对应输出B(R)信号数据,以此类推,图像传感器可输出两层色彩滤波阵列层处于第二种第二位置关系时的raw图,也即第二组第二图像数据。
如此,根据第一位置关系下B通道对应的感光单元输出的初始B信号数据,以及移动第一色彩滤波阵列层后得到的B(G)信号数据和B(R)信号数据,即可得到B通道下消除G信号串扰后的B信号值,还可得到B通道下消除R信号串扰后的B信号值,当然,还可得到B通道下消除G信号和R信号串扰后的更加纯净的B信号值。
与上述过程类似地,还可得到R通道以及G通道下的纯信号值,在此不再赘述。
由此,通过多次控制,可分别得到各个颜色通道对应的纯净的颜色信号数据,也即目标图像数据,这些纯净的颜色信号数据能够让图像传感器在颜色呈现能力上更有优势。将最终的纯净的颜色信号raw图数据送给图像处理器进行处理,最终得到正常的彩色图像,以此呈现预览画面或者进行图像保存。
在一些实施方式中,上述S1040具体可以包括:
将第一图像数据中目标感光单元对应的第一目标数据,减去第二图像数据中目标感光单元对应的第二目标数据,得到目标图像数据。
这里,目标感光单元可以是图像传感器中感光层内至少两个感光单元中的任一感光单元。以目标感光单元为B通道对应的感光单元为例,可将B通道对应的感光单元输出的初始B信号数据,也即第一目标数据,减去B(R)信号数据和B(G)信号数据,也即第二目标数据,即可得到B通道对应的纯净的B信号数据。以此类推,即可得到每个通道分别对应的纯净的颜色信号数据,也即目标图像数据。
需要说明的是,上述本公开实施例描述的应用场景是为了更加清楚的说明本公开实施例的技术方案,并不构成对于本公开实施例提供的技术方案的限定,本领域普通技术人员可知,随着新应用场景的出现,本公开实施例提供的技术方案对于类似的技术问题,同样适用。
基于相同的发明构思,本申请还提供了一种图像采集装置。该装置可应用于包含上述图像传感器的电子设备,下面结合图11对本申请实施例提供的图像采集装置进行详细说明。
图11是根据一示例性实施例示出的一种图像采集装置的结构框图。
如图11所示,图像采集装置1100可以包括:
第一获取单元1101,用于在图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
驱动控制单元1102,用于控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
第二获取单元1103,用于控制所述图像传感器采集得到第二图像数据;
数据确定单元1104,用于基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
下面对上述图像采集装置1100进行详细说明,具体如下所示:
在其中一个实施例中,所述驱动控制单元1102包括:
移动子单元,用于控制所述驱动机构驱动所述第一色彩滤波阵列移动至少两次,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足至少两种第二位置关系;
所述第二获取单元1103包括:
采集子单元,用于在所述至少两种第二位置关系下,分别控制所述图像传感器采集图像数据,得到至少两组第二图像数据。
在其中一个实施例中,所述数据确定单元1104包括:
运算子单元,用于将所述第一图像数据中目标感光单元对应的第一目标数据,减去所述第二图像数据中所述目标感光单元对应的第二目标数据,得到所述目标图像数据。
由此,通过在图像传感器中设置两层色彩滤波阵列层,其中第一色彩滤波阵列层对应设置有驱动机构,利用驱动机构驱动该第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,在满足第一位置关系,也即每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同的情况下,可控制图像传感器采集得到第一图像数据,在满足第二位置关系,也即至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同的情况下,可控制图像传感器采集得到第二图像数据,进而基于该第一图像数据和第二图像数据可以得到颜色纯净的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果。
本申请实施例中的图像采集装置可以是电子设备,也可以是电子设备中的部件,例如集成电路或芯片。该电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtualreality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的图像采集装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像采集装置能够实现图10的方法实施例实现的各个过程,达到相同的技术效果,为避免重复,这里不再赘述。
可选地,如图12所示,本申请实施例还提供一种电子设备1200,包括处理器1201和存储器1202,存储在存储器1202上存储有可在处理器1201上运行的程序或指令,该程序或指令被处理器1201执行时实现上述图像采集方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。
图13为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备1300包括但不限于:射频单元1301、网络模块1302、音频输出单元1303、输入单元1304、传感器1305、显示单元1306、用户输入单元1307、接口单元1308、存储器1309、以及处理器1310等部件。
另外,电子设备1300还可以包括图像传感器,所述图像传感器包括:
第一色彩滤波阵列层,包括至少两个第一滤光单元;
第二色彩滤波阵列层,包括至少两个第二滤光单元;
感光层,感光层包括至少两个感光单元,每一个感光单元与一个第一滤光单元和一个第二滤光单元对应设置;
驱动机构,与第一色彩滤波阵列层对应设置,用于驱动第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系;
在第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同;
在第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系满足第二位置关系的情况下,至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同。
在一些可选的实施方式中,上述驱动机构可以包括:
形变组件,与第一色彩滤波阵列层连接;
控制模块,与形变组件连接,用于向形变组件施加电压,以使形变组件产生形变,带动第一色彩滤波阵列层移动。
在一些可选的实施方式中,上述形变组件的材质可以为压电材料。
在一些可选的实施方式中,相邻两个感光单元之间设置有第一隔断组件,第一隔断组件用于隔断相邻两个感光单元的电信号,第一隔断组件的材质为金属。
在一些可选的实施方式中,感光单元与目标滤光单元之间设有间隙,相邻两个感光单元对应的间隙之间设置有第二隔断组件,第二隔断组件用于隔断相邻两个感光单元接收的光信号,第二隔断组件的材质为金属;其中,目标滤光单元为与感光单元对应的第一滤光单元和第二滤光单元中,靠近感光单元的滤光单元。
本领域技术人员可以理解,电子设备1300还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1310逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图13中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器1310,用于在图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
处理器1310,还用于控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
处理器1310,还用于控制所述图像传感器采集得到第二图像数据;
处理器1310,还用于基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
由此,通过在图像传感器中设置两层色彩滤波阵列层,其中第一色彩滤波阵列层对应设置有驱动机构,利用驱动机构驱动该第一色彩滤波阵列层相对于第二色彩滤波阵列层移动,以改变第一色彩滤波阵列层与第二色彩滤波阵列层的位置关系,在满足第一位置关系,也即每一个感光单元对应的第一滤光单元和第二滤光单元的颜色相同的情况下,可控制图像传感器采集得到第一图像数据,在满足第二位置关系,也即至少一个感光单元对应的第一滤光单元和第二滤光单元的颜色不同的情况下,可控制图像传感器采集得到第二图像数据,进而基于该第一图像数据和第二图像数据可以得到颜色纯净的目标图像数据,从而使得后期基于目标图像数据进行色彩还原处理后,能够达到更精确以及更接近人眼感知的色彩还原效果。
可选地,处理器1310,还用于控制所述驱动机构驱动所述第一色彩滤波阵列层移动至少两次,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足至少两种第二位置关系;
处理器1310,还用于在所述至少两种第二位置关系下,分别控制所述图像传感器采集图像数据,得到至少两组第二图像数据。
可选地,处理器1310,还用于将所述第一图像数据中目标感光单元对应的第一目标数据,减去所述第二图像数据中所述目标感光单元对应的第二目标数据,得到所述目标图像数据。
应理解的是,本申请实施例中,输入单元1304可以包括图形处理器(GraphicsProcessing Unit,GPU)13041和麦克风13042,图形处理器13041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1306可包括显示面板13061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板13061。用户输入单元1307包括触控面板13071以及其他输入设备13072中的至少一种。触控面板13071,也称为触摸屏。触控面板13071可包括触摸检测装置和触摸控制器两个部分。其他输入设备13072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器1309可用于存储软件程序以及各种数据。存储器1309可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器1309可以包括易失性存储器或非易失性存储器,或者,存储器1309可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器1309包括但不限于这些和任意其它适合类型的存储器。
处理器1310可可包括一个或多个处理单元;可选地,处理器1310集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器1310中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述图像采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述图像采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述图像采集方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (14)
1.一种图像传感器,其特征在于,包括:
第一色彩滤波阵列层,包括至少两个第一滤光单元;
第二色彩滤波阵列层,包括至少两个第二滤光单元;
感光层,所述感光层包括至少两个感光单元,每一个所述感光单元与一个所述第一滤光单元和一个所述第二滤光单元对应设置;
驱动机构,与所述第一色彩滤波阵列层对应设置,用于驱动所述第一色彩滤波阵列层相对于所述第二色彩滤波阵列层移动,以改变所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系;
在所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,每一个所述感光单元对应的所述第一滤光单元和所述第二滤光单元的颜色相同;
在所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系的情况下,至少一个所述感光单元对应的所述第一滤光单元和所述第二滤光单元的颜色不同。
2.根据权利要求1所述的图像传感器,其特征在于,所述驱动机构包括:
形变组件,与所述第一色彩滤波阵列层连接;
控制模块,与所述形变组件连接,用于向所述形变组件施加电压,以使所述形变组件产生形变,带动所述第一色彩滤波阵列层移动。
3.根据权利要求2所述的图像传感器,其特征在于,所述形变组件的材质为压电材料。
4.根据权利要求1所述的图像传感器,其特征在于,相邻两个所述感光单元之间设置有第一隔断组件,所述第一隔断组件用于隔断相邻两个所述感光单元的电信号,所述第一隔断组件的材质为金属。
5.根据权利要求1所述的图像传感器,其特征在于,所述感光单元与目标滤光单元之间设有间隙,相邻两个所述感光单元对应的间隙之间设置有第二隔断组件,所述第二隔断组件用于隔断相邻两个所述感光单元接收的光信号,所述第二隔断组件的材质为金属;
其中,所述目标滤光单元为与所述感光单元对应的所述第一滤光单元和所述第二滤光单元中,靠近所述感光单元的滤光单元。
6.一种电子设备,其特征在于,包括如权利要求1-5中任一项所述的图像传感器。
7.一种图像采集方法,其特征在于,应用于如权利要求6所述的电子设备,所述方法包括:
在图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
控制所述图像传感器采集得到第二图像数据;
基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
8.根据权利要求7所述的方法,其特征在于,所述控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系,包括:
控制所述驱动机构驱动所述第一色彩滤波阵列层移动至少两次,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足至少两种第二位置关系;
所述控制所述图像传感器采集得到第二图像数据,包括:
在所述至少两种第二位置关系下,分别控制所述图像传感器采集图像数据,得到至少两组第二图像数据。
9.根据权利要求7所述的方法,其特征在于,所述基于所述第一图像数据和所述第二图像数据,得到目标图像数据,包括:
将所述第一图像数据中目标感光单元对应的第一目标数据,减去所述第二图像数据中所述目标感光单元对应的第二目标数据,得到所述目标图像数据,所述目标感光单元是所述图像传感器中感光层内至少两个感光单元中的任一感光单元。
10.一种图像采集装置,其特征在于,包括权利要求1-5任意一项所述的图像传感器,所述装置还包括:
第一获取单元,用于在所述图像传感器中的第一色彩滤波阵列层和第二色彩滤波阵列层的位置关系满足第一位置关系的情况下,控制所述图像传感器采集得到第一图像数据;
驱动控制单元,用于控制驱动机构驱动所述第一色彩滤波阵列层移动,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足第二位置关系;
第二获取单元,用于控制所述图像传感器采集得到第二图像数据;
数据确定单元,用于基于所述第一图像数据和所述第二图像数据,得到目标图像数据。
11.根据权利要求10所述的装置,其特征在于,所述驱动控制单元包括:
移动子单元,用于控制所述驱动机构驱动所述第一色彩滤波阵列层移动至少两次,使所述第一色彩滤波阵列层与所述第二色彩滤波阵列层的位置关系满足至少两种第二位置关系;
所述第二获取单元包括:
采集子单元,用于在所述至少两种第二位置关系下,分别控制所述图像传感器采集图像数据,得到至少两组第二图像数据。
12.根据权利要求10所述的装置,其特征在于,所述数据确定单元包括:
运算子单元,用于将所述第一图像数据中目标感光单元对应的第一目标数据,减去所述第二图像数据中所述目标感光单元对应的第二目标数据,得到所述目标图像数据,所述目标感光单元是所述图像传感器中感光层内至少两个感光单元中的任一感光单元。
13.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求7-9任一项所述的图像采集方法的步骤。
14.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求7-9任一项所述的图像采集方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210984283.2A CN115361532B (zh) | 2022-08-17 | 2022-08-17 | 图像传感器、图像采集方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210984283.2A CN115361532B (zh) | 2022-08-17 | 2022-08-17 | 图像传感器、图像采集方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115361532A CN115361532A (zh) | 2022-11-18 |
CN115361532B true CN115361532B (zh) | 2023-11-21 |
Family
ID=84003376
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210984283.2A Active CN115361532B (zh) | 2022-08-17 | 2022-08-17 | 图像传感器、图像采集方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115361532B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104159049A (zh) * | 2014-08-15 | 2014-11-19 | 北京思比科微电子技术股份有限公司 | 一种图像传感器及其工作方法 |
CN107147886A (zh) * | 2017-05-31 | 2017-09-08 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置及成像方法 |
CN107395940A (zh) * | 2017-08-30 | 2017-11-24 | 广东欧珀移动通信有限公司 | 滤光组件、成像装置、电子设备和电子设备的成像方法 |
CN111567027A (zh) * | 2017-09-29 | 2020-08-21 | 交互数字Ce专利控股有限公司 | 减少光学串扰的全光成像设备、对应的方法、计算机程序产品、计算机可读载体介质和装置 |
CN112839215A (zh) * | 2019-11-22 | 2021-05-25 | 华为技术有限公司 | 一种摄像模组、摄像头、终端设备及图像信息的确定方法 |
CN113178457A (zh) * | 2021-04-12 | 2021-07-27 | 维沃移动通信有限公司 | 像素结构和图像传感器 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20180024604A (ko) * | 2016-08-30 | 2018-03-08 | 삼성전자주식회사 | 이미지 센서 및 그 구동 방법 |
-
2022
- 2022-08-17 CN CN202210984283.2A patent/CN115361532B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104159049A (zh) * | 2014-08-15 | 2014-11-19 | 北京思比科微电子技术股份有限公司 | 一种图像传感器及其工作方法 |
CN107147886A (zh) * | 2017-05-31 | 2017-09-08 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置及成像方法 |
CN107395940A (zh) * | 2017-08-30 | 2017-11-24 | 广东欧珀移动通信有限公司 | 滤光组件、成像装置、电子设备和电子设备的成像方法 |
CN111567027A (zh) * | 2017-09-29 | 2020-08-21 | 交互数字Ce专利控股有限公司 | 减少光学串扰的全光成像设备、对应的方法、计算机程序产品、计算机可读载体介质和装置 |
CN112839215A (zh) * | 2019-11-22 | 2021-05-25 | 华为技术有限公司 | 一种摄像模组、摄像头、终端设备及图像信息的确定方法 |
CN113178457A (zh) * | 2021-04-12 | 2021-07-27 | 维沃移动通信有限公司 | 像素结构和图像传感器 |
Also Published As
Publication number | Publication date |
---|---|
CN115361532A (zh) | 2022-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220264048A1 (en) | Electronic apparatus, method for controlling electronic apparatus, and control program | |
EP3588940B1 (en) | Electronic apparatus, method for controlling electronic apparatus, and control program | |
EP3605606B1 (en) | Imaging system comprising an infrared light source and an image sensor | |
US9674461B2 (en) | Imaging device and imaging method | |
US9654696B2 (en) | Spatially differentiated luminance in a multi-lens camera | |
EP2380345B1 (en) | Improving the depth of field in an imaging system | |
JP2011216701A (ja) | 固体撮像装置及び電子機器 | |
US20140232912A1 (en) | Image pickup unit and electronic apparatus | |
CN108600712B (zh) | 一种图像传感器、移动终端及图像拍摄方法 | |
GB2488519A (en) | Multi-channel image sensor incorporating lenslet array and overlapping fields of view. | |
CN112672054B (zh) | 对焦方法、装置及电子设备 | |
CN114125237A (zh) | 图像传感器、摄像模组、电子设备、图像获取方法及介质 | |
CN114650377A (zh) | 摄像模组、摄像模组的控制方法以及电子设备 | |
CN115278058A (zh) | 图像采集方法、装置、电子设备及存储介质 | |
US20110141561A1 (en) | Color filter array using dichroic filter | |
CN115361532B (zh) | 图像传感器、图像采集方法及装置 | |
WO2023098552A1 (zh) | 图像传感器、信号处理方法、装置、摄像模组及电子设备 | |
CN112672021B (zh) | 语言识别方法、装置及电子设备 | |
CN115278057A (zh) | 图像采集方法、装置、电子设备及存储介质 | |
EP3820146B1 (en) | Image sensing module, method and device, electronic apparatus and medium | |
EP3780594B1 (en) | Imaging device and method, image processing device and method, and imaging element | |
CN115278085B (zh) | 图像传感器、拍摄方法及装置 | |
CN117631212A (zh) | 镜头模组、电子设备、图像采集方法及装置 | |
CN117979181A (zh) | 摄像模组、图像采集方法、电子设备、装置及存储介质 | |
CN117596493A (zh) | 拍摄方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |