CN111756972A - 图像传感器和电子设备 - Google Patents
图像传感器和电子设备 Download PDFInfo
- Publication number
- CN111756972A CN111756972A CN202010635332.2A CN202010635332A CN111756972A CN 111756972 A CN111756972 A CN 111756972A CN 202010635332 A CN202010635332 A CN 202010635332A CN 111756972 A CN111756972 A CN 111756972A
- Authority
- CN
- China
- Prior art keywords
- column
- row
- color filter
- units
- filter units
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Solid State Image Pick-Up Elements (AREA)
Abstract
提供了一种图像传感器和电子设备,能够提高图像传感器的性能。该图像传感器,包括:滤光单元阵列,包括多个滤光单元组,该多个滤光单元组中每个滤光单元组包括4×4个滤光单元;在该4×4个滤光单元中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,至少一条对角线上包括4个白色滤光单元或者同一颜色的4个彩色滤光单元;像素单元阵列,包括多个像素单元,该像素单元阵列位于该滤光单元阵列下方,且该像素单元阵列中多个像素单元与该滤光单元阵列中多个滤光单元一一对应。通过本申请实施例的方案,不仅便于后续图像算法进行图像处理,还有利于图像颜色恢复,降低图像纹路/图像细节信息的损失,且避免产生彩色莫尔条纹。
Description
本申请要求2020年5月15日提交中国专利局、申请号为202010410639.2、发明名称为“图像传感器和电子设备”的中国发明申请的优先权,其全部内容通过应用结合在本申请中。
技术领域
本申请涉及传感器领域,并且更具体地,涉及一种图像传感器和电子设备。
背景技术
图像传感器是一种将光学图像转换为数字信号的电子装置,其通常包括由多个像素单元组成的像素单元阵列,像素单元阵列中的每个像素单元用于形成图像中的一个像素值。为了使得图像传感器能够采集彩色图像,可以在像素单元上方设置彩色滤光片(colorfilter,CF),使得像素单元可以接收特定颜色的光信号,形成对应于该特定颜色光信号的像素值。
但在设置彩色滤光片的同时,每个像素单元接收的光量变少,造成图像信噪比(signal-to-noise ratio,SNR)变小,影响图像质量。且若图像传感器应用于移动设备中,该图像传感器尺寸受限,对应的像素单元阵列的感光面积也受限,所以在低光照环境中,图像质量将会进一步受限。
发明内容
本申请实施例提供了一种图像传感器和电子设备,旨在解决低光照环境中,图像质量下降的问题。
第一方面,提供了一种图像传感器,包括:滤光单元阵列,包括多个滤光单元组,该多个滤光单元组中每个滤光单元组包括4×4个滤光单元;其中,在该4×4个滤光单元中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,至少一条对角线上包括4个白色滤光单元或者同一颜色的4个彩色滤光单元;像素单元阵列,包括多个像素单元,该像素单元阵列位于该滤光单元阵列下方,且该像素单元阵列中多个像素单元与该滤光单元阵列中多个滤光单元一一对应。
通过本申请实施例的方案,由于每个滤光单元组中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,且至少一条对角线上包括4个白色滤光单元或者同一颜色的4个彩色滤光单元,不仅便于后续图像算法进行图像处理,还有利于图像颜色恢复,降低图像纹路/图像细节信息的损失,且避免产生彩色莫尔条纹。
在一些可能的实施方式中,该滤光单元组包括不同颜色的第一彩色滤光单元、第二彩色滤光单元和第三彩色滤光单元,该第一彩色滤光单元的数量等于该第二彩色滤光单元与该第三彩色滤光单元的数量之和。
在一些可能的实施方式中,在该滤光单元组中,该第二彩色滤光单元的数量等于该第三彩色滤光单元的数量。
在一些可能的实施方式中,在该滤光单元组中,彩色滤光单元均设置于对角线位置,白色滤光单元设置于非对角线位置。
在一些可能的实施方式中,在该滤光单元组中,一条对角线上的4个滤光单元均为该第一彩色滤光单元,另一条对角线上的4个滤光单元包括2个该第二彩色滤光单元以及2个该第三彩色滤光单元。
在一些可能的实施方式中,在该另一条对角线上,2个该第二彩色滤光单元共顶角相邻设置,且2个该第三彩色滤光单元共顶角相邻设置。
在一些可能的实施方式中,在该滤光单元组中,该白色滤光单元分别位于第一行第二列、第一行第三列、第二行第一列、第二行第四列、第三上第一列、第三行第四列、第四行第二列、第四行第三列;该第二彩色滤光单元分别位于第一行第四列和第二行第三列;该第一彩色滤光单元分别位于第一行第一列、第二行第二列、第三行第三列、第四行第四列;该第三彩色滤光单元分别位于第三行第二列和第四行第一列。
在一些可能的实施方式中,在该另一条对角线上,2个该第二彩色滤光单元与2个该第三彩色滤光单元间隔设置。
在一些可能的实施方式中,在该滤光单元组中,该白色滤光单元分别位于第一行第二列、第一行第三列、第二行第一列、第二行第四列、第三上第一列、第三行第四列、第四行第二列、第四行第三列;该第二彩色滤光单元分别位于第一行第四列和第三行第二列;该第一彩色滤光单元分别位于第一行第一列、第二行第二列、第三行第三列、第四行第四列;该第三彩色滤光单元分别位于第二行第三列和第四行第一列。
在一些可能的实施方式中,在该滤光单元组中,白色滤光单元均设置于对角线位置,彩色滤光单元设置于非对角线位置。
在一些可能的实施方式中,在该滤光单元组中,每一行以及每一列上的彩色滤光单元颜色不同。
在一些可能的实施方式中,在该滤光单元组中,同一颜色的彩色滤光单元共顶角相邻设置。
在一些可能的实施方式中,在该滤光单元组中,该白色滤光单元分别位于第一行第一列、第一行第四列、第二行第二列、第二行第三列、第三上第二列、第三行第三列、第四行第一列、第四行第四列;该第二彩色滤光单元分别位于第一行第三列和第二行第四列;该第一彩色滤光单元分别位于第一行第二列、第二行第一列、第三行第四列、第四行第三列;该第三彩色滤光单元分别位于第三行第一列和第四行第二列。
在一些可能的实施方式中,在该滤光单元组中,包括2个2×2的白色滤光单元集合以及2个2×2的彩色滤光单元集合,该2个2×2的白色滤光集合设置于该滤光单元组的一条对角线上,该2个2×2的彩色滤光单元集合设置于该滤光单元组的另一条对角线上。
在一些可能的实施方式中,在该2个2×2的彩色滤光单元集合中,每个彩色滤光单元包括2个共顶角设置的该第一彩色滤光单元,以及共顶角设置的1个该第二彩色滤光单元和1个该第三彩色滤光单元。
在一些可能的实施方式中,在该2个2×2的彩色滤光单元集合中,该第一彩色滤光单元的相对位置关系相同。
在一些可能的实施方式中,在该2个2×2的彩色滤光单元集合中,该第一彩色滤光单元的相对位置关系不同,且该第三彩色滤光单元的相对位置关系相同。
在一些可能的实施方式中,在该滤光单元组中,该白色滤光单元分别位于第一行第三列、第一行第四列、第二行第三列、第二行第四列、第三上第一列、第三行第二列、第四行第一列、第四行第二列;该第二彩色滤光单元分别位于第一行第二列和第四行第三列;该第一彩色滤光单元分别位于第一行第一列、第二行第一列、第三行第三列、第四行第四列;该第三彩色滤光单元分别位于第二行第一列和第三行第四列。
在一些可能的实施方式中,该第一彩色滤光单元、该第二彩色滤光单元以及该第三彩色滤光单元用于分别通过三种颜色的光信号,该三种颜色的光信号波段覆盖可见光波段。
在一些可能的实施方式中,该第一彩色滤光单元、该第二彩色滤光单元以及该第三彩色滤光单元的颜色分别为红、绿、蓝、青、品红、黄中的三种颜色。
在一些可能的实施方式中,该第一彩色滤光单元为绿色滤光单元、该第二彩色滤光单元和该第三彩色滤光单元分别为红色滤光单元和蓝色滤光单元。
在一些可能的实施方式中,该图像传感器还包括:微透镜阵列,包括多个微透镜,该微透镜阵列位于该滤光单元阵列上方,用于将拍摄对象返回的光信号汇聚至该滤光单元阵列。
在一些可能的实施方式中,该微透镜阵列中的多个微透镜与该滤光单元阵列中的多个滤光单元一一对应。
在一些可能的实施方式中,该微透镜阵列中包括至少一个第一微透镜和至少一个第二微透镜,该第一微透镜与该滤光单元阵列中的一个白色滤光单元对应,该第二微透镜与该滤光单元阵列中的四个彩色滤光单元对应。
在一些可能的实施方式中,该像素单元阵列中的白色像素单元的像素值用于生成拍摄对象的第一图像数据,该像素单元阵列中的彩色像素单元的像素值用于生成该拍摄对象的第二图像数据,该第一图像数据和该第二图像数据用于合成该拍摄对象的目标图像;其中,该白色像素单元为对应于该白色滤光单元的像素单元,该彩色像素单元为对应于该彩色滤光单元的像素单元。
在一些可能的实施方式中,该像素单元阵列中的彩色像素单元的像素值用于通过插值处理生成中间图像,该中间图像用于通过重排马赛克处理生成拜耳Bayer格式的该第二图像数据。
在一些可能的实施方式中,在该中间图像的2×2个像素值中,2个像素值为该彩色像素单元的原始像素值,另2个像素值为经过插值处理得到的像素值。
在一些可能的实施方式中,该第一图像数据和该第二图像数据的分辨率相同。
在一些可能的实施方式中,该图像传感器为互补金属氧化物半导体CMOS图像传感器,或者为电荷耦合器件CCD图像传感器。
第二方面,提供一种电子设备,包括:上述第一方面或者第一方面中任一种可能的实施方式中的图像传感器。
附图说明
图1是本申请实施例提供的一种图像传感器的结构示意图。
图2是本申请实施例提供的另一图像传感器的俯视示意图。
图3是图2中的图像传感器沿A-A’方向的一种截面示意图。
图4和图5是图2中的图像传感器沿A-A’方向的另两种截面示意图。
图6是本申请实施例提供的一种滤光单元阵列中滤光单元的示意性排列图。
图7至图14是本申请实施例提供的几种滤光单元组中滤光单元的示意性排列图。
图15是本申请实施例提供的一种图像处理方法的示意性流程图。
图16是图15中图像处理方法的图像示意图。
具体实施方式
下面将结合附图,对本申请实施例中的技术方案进行描述。
应理解,本文中的具体的例子只是为了帮助本领域技术人员更好地理解本申请实施例,而非限制本申请实施例的范围。
还应理解,本说明书中描述的各种实施方式,既可以单独实施,也可以组合实施,本申请实施例对此并不限定。
本申请实施例的技术方案可以应用于各种图像传感器,例如互补金属氧化物半导体(complementary metal oxide semiconductor,CMOS)图像传感器(CMOS image sensor,CIS),或者电荷耦合器件(charge coupled device,CCD)图像传感器,但本申请实施例对此并不限定。
作为一种常见的应用场景,本申请实施例提供的图像传感器可以应用在智能手机、相机、摄像头、平板电脑以及其他具有成像功能的移动终端或者其他终端设备。
图1示出了一种图像传感器的结构示意图。如图1所示,该图像传感器100包括:像素单元阵列(pixel array)110,行选择电路120,列选择电路130,控制电路140,以及模数转换(analog to digital converter,ADC)电路150、前端信号处理电路160和后端信号处理电路170。
具体地,如图1所示,像素单元阵列110中的多个方形的像素单元排列成M行×N列,其中,M、N为正整数。一般来讲,在像素单元阵列110所在的平面上,该M行的行方向与N列的列方向相互垂直。在一些情况下,为了方便描述,在一个平面中,可以将相互垂直的两个方向,例如本申请中的行方向和列方向,称之为水平方向和垂直方向。
在图1所示的像素单元阵列110中,每个方形的像素单元的任意一边平行或者垂直于行方向或者列方向。
可选地,该像素单元中可以包括光电二极管和场效应开关管等器件,用于接收光信号并将该光信号转换为对应的电信号。
可选地,若图像传感器需要采集彩色图像,则可以在像素单元阵列110上方可以设置彩色滤光片阵列(color filter array,CFA),其中,每个像素单元上方可以对应设置一个彩色滤光单元,为了方面描述,下文中,将上方设置有彩色滤光单元的像素单元也称为颜色像素单元,例如,上方设置有红色滤光单元的像素单元称为红色像素单元(图1中用R表示),上方设置有绿色滤光单元的像素单元称为绿色像素单元(图1中用G表示),上方设置有蓝色滤光单元的像素单元称为蓝色像素单元(图1中用B表示)。
目前,大部分图像传感器的CFA采用基于RGB三原色的拜耳(Bayer)格式,例如,如图1所示,像素单元阵列110上方设置有Bayer格式的CFA,则像素单元阵列110以2×2个像素单元为基本单元,每个基本单元中,包括1个R像素单元,1个B像素单元,2个G像素单元,其中,2个G像素单元共顶角相邻设置。
行选择电路120通过M条行控制线连接至像素单元阵列110中的每一行像素单元,可以用于开启和关闭每一行像素单元中的每个像素单元。例如,行选择电路120通过一条行控制线连接至像素单元阵列110中第一行每个像素单元的场效应开关管的栅极,通过开启或关闭场效应开关管控制光电二极管的工作状态。其中,M条行控制线均平行于水平方向。
列选择电路130连接通过N条列控制线至像素单元阵列110中的每一列像素单元,可以用于选择每一列中每个像素单元的信号值输出。例如,列选择电路130通过一条列控制线连接至像素单元阵列110中的第一列每个像素单元的场效应开关管的源极,控制输出光电二极管转换得到的电信号。其中,N条列控制线均平行于垂直方向。
控制电路140连接于该行选择电路120和列选择电路130,用于给该行选择电路120和列选择电路130提供时序,控制该行选择电路120和列选择电路130选择像素单元阵列110中的像素单元,并输出该像素单元的像素值。
可选地,上述行选择电路120、列选择电路130以及控制电路140配合输出像素单元阵列110产生的像素值之后,将该像素单元阵列110的像素值传输给ADC电路150进行模数转换,将模拟像素值转换为数字像素值形成数字图像,方便后续的信号处理电路160进行图像处理,以输出优化后的彩色图像。
可选地,该信号处理电路160可以包括但不限于是图像信号处理器(image signalprocessor,ISP),用于对数字图像进行线性化处理、去除坏点、去除噪声、色彩校正、去马赛克(demosaic)、自动曝光控制(automatic exposure control,AEC)、自动增益控制(automatic gain control,AGC)、自动白平衡(auto white balance,AWB)等处理。
对于上述采用Bayer格式CFA的图像传感器100,红色像素单元仅能接收红色光信号,绿色像素单元仅能接收绿色光信号,蓝色像素单元仅能接收蓝色光信号,每个像素单元接收的光信号强度较小,造成图像的SNR较大,从而影响了图像质量。
且对于Bayer格式CFA的图像传感器,其图像中亮度的高频信息与色度信息容易发生交叠,就会发生颜色混叠(color aliasing),容易产生彩色莫尔条纹(color moire)。
基于上述问题,本申请提出一种图像传感器,在CFA中增加白色滤光单元,像素单元阵列中部分像素单元接收彩色光信号,部分像素单元接收白色光信号,从而增加部分像素单元接收的光信号强度,在此基础上对像素单元阵列中多个像素单元的像素值进行处理,在保证图像色彩信息的基础上,提高图像的SNR、分辨率等图像质量参数,得到优化的彩色图像。
图2是本申请实施例提供的一种图像传感器200的示意性俯视示意图,图3为该图像传感器200沿A-A’方向的示意性截面图。
如图2和图3所示,该图像传感器200包括:
滤光单元阵列210,包括多个滤光单元组211,该多个滤光单元组211中每个滤光单元组包括4×4个滤光单元,
在该4×4个滤光单元中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,至少一条对角线上包括4个白色滤光单元或者颜色相同的彩色滤光单元。
像素单元阵列220,位于滤光单元阵列210下方,包括多个像素单元,该像素单元阵列220中的多个像素单元与上述滤光单元阵列210中的多个滤光单元一一对应。
在一种可能的实施方式中,如图3所示,滤光单元阵列210中多个滤光单元可以设置于像素单元阵列220的多个像素单元的上表面;在另一种可能的实施方式中,滤光单元阵列210中多个滤光单元还可以悬空设置于像素单元阵列220的多个像素单元的上方。
此外,如图3所示,作为示例,滤光单元阵列210中每个滤光单元对应设置于像素单元阵列220中每个像素单元的正上方,换言之,每个滤光单元的中心与其对应的像素单元的中心在垂直方向上重合。除该方式之外,滤光单元阵列210中每个滤光单元对应设置于像素单元阵列220中每个像素单元的斜上方,此时,像素单元阵列220中的每个像素单元可以接收倾斜方向的光信号,本申请实施例对滤光单元阵列210的具体位置不做限定。
该像素单元阵列220中与彩色滤光单元对应的像素单元用于接收经过该彩色滤光单元的彩色光信号,对应输出彩色像素值;该像素单元阵列220中与白色滤光单元对应的像素单元用于接收经过该白色滤光单元的白光信号,对应输出白色像素值;该彩色光信号和白光信号共同用于生成拍摄对象的目标图像。例如,与红色滤光单元对应的像素单元接收红色光信号,对应输出的像素值可以称为红色像素值;与白色滤光单元对应的像素单元接收白光信号,对应输出的像素可以称为白色像素值。
进一步地,图4和图5示出了另两种图像传感器200沿A-A’方向的截面示意图。
如图4和图5所示,除了上述滤光单元阵列210和像素单元阵列220以外,该图像传感器200还包括:
微透镜阵列230,包括多个微透镜,设置于滤光单元阵列210上方,用于将拍摄对象返回的光信号汇聚至滤光单元阵列210,并减少相邻像素单元之间光信号串扰。
如图4所示,该微透镜阵列230中的多个微透镜与上述滤光单元阵列210中的多个滤光单元和上述像素单元阵列220中的多个像素单元一一对应。
在一些实施方式中,该图像传感器中的像素结构可以称之为芯片上微透镜(onchip lens,OCL)像素结构。
如图5所示,该微透镜阵列230中部分的第一微透镜对应于上述滤光单元阵列210中的四个白色滤光单元和上述像素单元阵列220中的四个白色像素单元,另一部分的第二微透镜对应于上述滤光单元阵列210中的一个彩色滤光单元和上述像素单元阵列220中的一个彩色像素单元。
可选地,该第一微透镜的曲面半径可以为该第二微透镜的曲面半径的2倍。
在一些实施方式中,该图像传感器中的像素结构可以称之为2×2OCL像素结构。
进一步地,如图4和图5所示,在该图像传感器200中,在滤光单元阵列210和像素单元阵列220之间还可以包括电介质层240,用于连接该像素单元阵列220和该滤光单元阵列210。
此外,滤光单元阵列210还可以包括位于周围的电介质215和反射栅格216;该反射栅格用于反射大角度入射的光信号,防止光信号损失。
像素单元阵列220可以包括半导体基板221和光敏元件222,其中,光敏元件222位于半导体基板221中,光敏元件222包括但不限于是光电二极管(photodiode,PD)。可选地,像素单元阵列220还可以包括两个光敏元件222之间的隔离区223,防止相邻的两个光敏元件之间的电信号干扰。
可以理解的是,除了图4和图5中所示的基本结构以外,该图像传感器200还可以包括其它叠层结构,例如至少一层金属互联层,以电连接像素单元阵列中的多个像素单元等等,本申请实施例对图像传感器的结构并不限于此。
可选地,图2所示的俯视图,实际也是本申请实施例提供的一种滤光单元阵列210的排列示意图。
如图2所示,在本申请实施例中,一个滤光单元组211中每个滤光单元均为四边形的滤光单元,例如可以均为方形的滤光单元,16个方形的滤光单元形成方形的滤光单元组。在该滤光单元组211中,彩色滤光单元(如图中阴影块所示)和白色滤光单元(如图中空白块所示)的数量相等,即包括8个彩色滤光单元与8个白色滤光单元。在图像传感器的所在平面中,一个滤光单元组在水平方向(行方向)、垂直方向(列方向)均包括白色滤光单元以及彩色滤光单元两种形式的滤光单元,且在+45°方向(第一对角线方向)包括4个相同颜色的彩色滤光单元,在-45°方向(第二对角线方向)包括其它颜色的彩色滤光单元。
需要说明的是,在本申请中,白色滤光单元是指用于透过白光的滤光片或者滤光材料,在一些实施方式中,该白色滤光单元也可以为透明材料或者为空气间隙,用于透过环境中包括白光的全部光信号。具体地,该白光可以是多种有色光混合光。例如,可以将光谱中三原色的光:蓝色、红色和绿色,按一定比例混合得到白光,或者,光谱中所有可见光的混合也是白光。
对应的,彩色滤光单元是指用于透过彩色光的滤光片或者滤光材料。具体地,该彩色光可以为可见光光谱中的任一波段范围的光信号,例如,红色滤光单元可以用于透过红光,该红光可以为可见光光谱中波长范围在620nm至750nm之间的光信号。类似地,其它颜色的彩色滤光单元同样用于透过对应颜色的光信号。
通过本申请实施例的方案,由于每个滤光单元组中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,且至少一条对角线上包括4个白色滤光单元或者同一颜色的4个彩色滤光单元,不仅便于后续图像算法进行图像处理,还有利于图像颜色恢复,降低图像纹路/图像细节信息的损失,且避免产生彩色莫尔条纹。
可选地,在一些实施方式中,彩色滤光单元中可以包括三种颜色的彩色滤光单元(第一彩色滤光单元、第二彩色滤光单元以及第三彩色滤光单元),例如,可以是三原色滤光单元,即红、绿、蓝(red green blue,RGB)三种颜色的滤光单元,或者,也可以是三补色滤光单元,即青、品红、黄(cyan magenta yellow,CMY)三种颜色的滤光单元,或者,还可以为一种原色两种补色,或者一种补色两种原色的滤光单元。
在滤光单元组中包括三种颜色的彩色滤光单元的情况下,透过该三种颜色的彩色滤光单元的三种颜色的彩色光信号可以覆盖可见光波段,本申请实施例对彩色滤光单元的具体颜色不做限定。
为了方便描述,下文中,以滤光单元组211中的彩色滤光单元包括红、绿、蓝三种颜色的彩色滤光单元为例进行说明,在滤光单元组中包括其它三种颜色的彩色滤光单元时,可以参见下文的技术方案。
图6示出了一种滤光单元组211中滤光单元的示意性排列图。
如图6所示,滤光单元组211中的包括白色滤光单元201,红色滤光单元202,绿色滤光单元203以及蓝色滤光单元204,可选地,白色滤光单元201的数量、绿色滤光单元203的数量、红色滤光单元202的数量以及蓝色滤光单元204的数量之比为4:2:1:1。
在该滤光单元组211中,彩色滤光单元均设置于对角线上,白色滤光单元设置于非对角线位置。
如图6所示,8个白色滤光单元201分别位于第1行第2列、第1行第3列、第2行第1列、第2行第4列、第3行第1列、第3行第4列、第4行第2列、第4行第3列。该8个白色滤光单元201可以表示为W12、W13、W21、W24、W31、W34、W42和W43。
可选地,在该滤光单元组211中,一条对角线上的4个滤光单元均为绿色滤光单元,另一条对角线上的4个滤光单元包括2个红色滤光单元以及2个蓝色滤光单元,且2个红色滤光单元共顶角相邻,2个蓝色滤光单元共顶角相邻。
作为示例,如图6所示,2个红色滤光单元202分别位于第1行第4列和第2行第3列,该2个红色滤光单元202可以表示为R14和R23;
4个绿色滤光单元203分别位于第1行第1列、第2行第3列、第3行第3列、第4行第4列,该4个绿色滤光单元203可以表示为G11,G23,G33以及G44;
2个蓝色滤光单元204分别位于第3行第2列,第4行第1列,该2个蓝色滤光单元204可以表示为B32和B41。
可选地,基于图6中白色滤光单元201的位置不变,根据对角线上彩色滤光单元的颜色的要求,可以对图6中不同颜色的彩色滤光单元的位置进行变换。
例如,基于图6中的滤光单元组,保持白色滤光单元与绿色滤光单元的位置不变,改变其中红色滤光单元和蓝色滤光单元的位置。
又例如,基于图6中的滤光单元组,仅保持白色滤光单元位置不变,改变其中绿色滤光单元、红色滤光单元和蓝色滤光单元的位置。
可选地,在一些实施方式中,滤光单元组的中心包括一个Bayer格式的目标滤光单元集合。
在满足上述条件的情况下,图7示出了基于图6中的滤光单元组,保持白色滤光单元与绿色滤光单元的位置不变的情况下,几种变换后的滤光单元组中滤光单元的示意性排列图。图8示出了基于图6中的滤光单元组,仅保持白色滤光单元位置不变的情况下,几种变换后的滤光单元组中滤光单元的示意性排列图。
采用本申请实施例的方法,一个滤光单元组中可以直接形成一个Bayer格式的目标滤光单元集合,能够大大提高颜色恢复的准确度。
进一步地,如图6、图7中的(a)图以及图8中的(a)图和(b)图所示,由于其中相同颜色的滤光单元均共顶角设置,能够降低后续图像算法中颜色估计部分的难度,提高图像传感器的图像处理效率。
可以理解的是,对于上述申请实施例中每一种滤光单元组,将经过几何变换,例如旋转后的滤光单元组同样在本申请的保护范围内。
例如,对于图6所示的滤光单元组,将其逆时针旋转90°或者顺时针旋转90°后,可以形成图8中的(a)图或者(b)图所示的滤光单元组。
除了图6以外,上述图7至图8中任意一种滤光单元组经过旋转后形成的滤光单元组同样属于本申请的保护范围,此处不再一一列举示出。
上文中各实施例的滤光单元组均是基于图6为基础进行变换得到的,除了上文列举出来的结构以外,本申请的滤光单元组还可以为图9至图11中几个虚线框所示的滤光单元组211。
可以理解的是,图9至图11中的滤光单元组211与图2中的滤光单元组211可以形成中心区域相同的滤光单元阵列,差别仅在于滤光单元阵列210最外围一圈或两圈的滤光单元的排列形式不同,因此,可以将图2、图9至图11中的滤光单元组211形成的滤光单元阵列等价为相同的滤光单元阵列。
因此,在本申请中,可以将图2中的滤光单元阵列210中的任意4×4的滤光单元划分为一个滤光单元组,任意一种划分情况下的滤光单元组均在本申请的保护范围之内。
类似地,本申请中任意一种滤光单元组形成的滤光单元阵列也同样在本申请的保护范围之内。
参见图9中所示的滤光单元组,在图9所示的滤光单元组211中,两条对角线上均为白色滤光单元,非对角线上设置的为彩色滤光单元,且相同颜色的彩色滤光单元共顶角设置。
可选地,在本申请实施例的滤光单元组中,每一行以及每一列上的彩色滤光单元颜色不同。
如图9所示,8个白色滤光单元201分别位于第1行第1列、第1行第4列、第2行第2列、第2行第3列、第3行第2列、第3行第3列、第4行第1列、第4行第4列。该8个白色滤光单元201可以表示为W11、W14、W22、W23、W32、W33、W41和W44。
可选地,在本申请实施例的滤光单元组中,同一颜色的彩色滤光单元共顶角相邻设置。
作为示例,如图9所示,2个红色滤光单元202分别位于第3行第4列和第4行第3列,该2个红色滤光单元202可以表示为R34和R43;
4个绿色滤光单元203分别位于第1行第3列、第2行第4列、第3行第1列、第4行第2列,该4个绿色滤光单元203可以表示为G13,G24,G31以及G42;
2个蓝色滤光单元204分别位于第3行第4列,第4行第3列,该2个蓝色滤光单元204可以表示为B34和B43。
与上述实施方式近似,基于图9中白色滤光单元的位置不变,可以对图9中不同颜色的彩色滤光单元的位置进行变换,可以得到多种滤光单元组。
例如,如图12中的(a)至(c)图所示,该几种滤光单元组中,相同颜色的滤光单元共顶角设置。
如图12中的(d)至(g)图所示,该几种滤光单元组中,仅绿色滤光单元共顶角设置。
此处需要说明的是,若其中相同颜色的彩色滤光单元共顶角设置,即在图9与图12中的(a)至(c)图中示出的多种滤光单元组中,共顶角的两个相同颜色的彩色滤光单元对应的彩色像素值可以直接用于进行插值计算得到共顶角白色滤光单元对应位置的彩色像素值,从而降低后续图像处理算法的复杂度,具体的图像处理过程将在下文中进行详细说明。
参见图10中所示的滤光单元组,在图10所示的滤光单元组211中,包括2个2×2的白色滤光单元集合以及2个2×2的彩色滤光单元集合,该2个2×2的白色滤光集合设置于该滤光单元组的一条对角线上,该2个2×2的彩色滤光单元集合设置于该滤光单元组的另一条对角线上。
可选地,在本申请实施例中,在2个2×2的彩色滤光单元集合中,每个彩色滤光单元包括2个共顶角设置的绿色滤光单元,另2个共顶角设置的为一个红色滤光单元以及一个蓝色滤光单元。
与上述实施方式近似,基于图10中白色滤光单元的位置不变,可以对图9中不同颜色的彩色滤光单元的位置进行变换,可以得到多种滤光单元组。
例如,如图13中的(a)至(g)图所示,该几种滤光单元组中2个2×2的彩色滤光单元集合中,绿色滤光单元的相对位置关系相同,红色滤光单元和蓝色滤光单元的相对位置关系不同。
需要说明的是,若2个2×2的彩色滤光单元集合中,绿色滤光单元的相对位置关系相同,红色滤光单元和蓝色滤光单元的相对位置关系不同,即在图10与图13中的(a)至(g)图中示出的多种滤光单元组中,共顶角的两个相同颜色的彩色滤光单元对应的彩色像素值可以直接用于进行插值计算得到共顶角白色滤光单元对应位置的彩色像素值,从而降低后续图像处理算法的复杂度。
参见图11所示,其滤光单元组211为采用另一种划分方式对滤光单元阵列210划分得到的滤光单元组形式,类似地,也可以采用上述方式,基于白色滤光单元的位置不变,对其中彩色滤光单元的位置进行变换,得到多种变换后的滤光单元组。
例如,如图14中的(a)至(h)图所示,在该几种滤光单元组中,三个绿色滤光单元共顶角设置,另一个绿色滤光单元位于滤光单元组的一角,且在该几种滤光单元组中,一对红色滤光单元或者一对蓝色滤光单元共顶角设置。
可以理解的是,对图10至图14中各种滤光单元组进行旋转或者对称等几何变换得到的滤光单元组结构同样在本申请的保护范围之内。
上文结合图2至图14介绍了本申请中图像传感器200的基本结构以及其中多种滤光单元组211的排列示意图,下文结合图15和图16介绍针对本申请的图像传感器200的图像处理方法。
图15示出了一种图像处理方法的示意性流程图。图16示出了经过图14中图像处理方法的图像示意图。
如图15所示,该图像处理方法10包括:
S110:对像素单元阵列形成的图像进行子采样,获取包括彩色像素值的第一采样图与包括白色像素值的第二采样图。
作为示例,图16中的1#图为像素单元阵列中4×4个像素单元产生的图像,该4×4个像素单元为对应于上述申请实施例中一个滤光单元组的像素单元。
在图16中的1#图中,白色像素值101为白色像素单元接收白光信号后产生的像素值,其上方对应设置的是白色滤光单元201,红色像素值102为红色像素单元接收红光信号后产生的像素值,其上方对应设置的是红色滤光单元202;类似地,绿色像素值103为绿色像素单元接收绿光信号后产生的像素值,其上方对应设置的是绿色滤光单元203,蓝色像素值104为蓝色像素单元接收蓝光信号后产生的像素值,其上方对应设置的是蓝色滤光单元204。
图16中的2#图为对1#图中的红色像素值、绿色像素值以及蓝色像素值进行子采样后的第一采样图,图16中的3#图为对1#图中的白色像素值进行子采样后的第二采样图。在第一采样图和第二采样图中,像素值的相对位置关系与原始图像1#图中的像素值的相对位置关系一致。
S120:对第一采样图和第二采样图进行插值处理,获取第一图像和第二图像。
作为示例,图16中的4#图为第一采样图(2#图)经过插值处理后的第一图像,具体地,4#图中第i行第j列的像素值可以表示为Xij,其中,X表示像素值的颜色信息,例如,左上角第1行第1列的绿色像素值可以表示为G11,可以根据G11和G22,插值得到G12和G21,类似地,可以根据R14和R23,插值得到R13和R24,根据B32和B41,插值得到B31和B42;根根据G33和G44,插值得到G34和G43,从而根据第一采样图中的像素值插值得到第一图像。
可以看出,在该第一图像中,图中虚线框中的8个像素值,即G11,R14,G22,R24,B32,G34,B41和G44为原始图像中的像素值,保留了原始图像中的颜色信息,更有利于后续图像处理过程中颜色还原,且该插值处理过程较为简单,能够简化图像处理过程中的算法,提高图像处理的效率。
另外,在本申请实施例中,第一采样图的一条对角线上均为绿色像素值,或者,在另一些采样图中,其对角线上均为白色像素值,在高分辨率图像的恢复以及颜色恢复上,可以减少图像纹路/图像细节信息的损失。
图16中的5#图为第二采样图(3#图)经过插值处理后的第二图像,该插值过程可以采用现有技术中的任意一种插值算法,本申请实施例对此不作限定。可以理解的是,由于该第二采样图和第二图像不用于表征图像中的颜色信息,而用于提高图像的亮度。在本申请实施例中,白色像素值均匀的分布于图像中,具有较高的空间采样率,有利于提高图像的分辨率以及图像质量。
S130:对第一图像进行重排马赛克处理,得到第三图像。
作为示例,图16中的4#图经过重排马赛克(remosaic)处理后,得到6#图所示的第三图像,可以看出,该第三图像为拜耳(Bayer)格式的数据图像。在本申请实施例中,该重排马赛克的过程可以采用任意一种现有技术中的重排方法,本申请实施例对此不做具体限定。
由于经过重排马赛克处理后的第三图像为目前图像处理领域较为常用的Bayer格式,因此该第三图像能够适用于更多类型的图像信号处理器(ISP),从而使得本申请中图像传感器可以与更多的ISP适配,适用于更多的应用场景。
S140:将第三图像与第二图像进行融合,得到优化后的彩色图像。
可选地,该第三图像的分辨率与第二图像的分辨率相同。
作为示例,将图16中的5#图与6#图进行图像融合得到优化的彩色图像7#,进行图像融合后的彩色图像在保证图像颜色信息的同时能更好地保持亮度信息,从而可以有效地提升低光照条件下的图像质量。与此同时,该彩色图像在频域上,亮度与色度信息不易交叠,因此不易产生莫尔条纹。
可以理解的是,上述图像处理方法10可以通过处理器或者处理电路进行实现,换言之,可选地,在上述图像传感器中,还可以包括处理单元,该处理单元用于实现上述图像处理方法10。
除了上述申请实施例提供的图像传感器200以外,本申请还提供一种电子设备,该电子设备可以包括上述任一种实施例中的图像传感器200。
该电子设备可以为任意具有图像采集功能的电子设备,例如,其具体可以为手机、电脑等移动终端,也可以为相机、摄像机等拍摄设备,还可以为自动取款机(AutomatedTeller Machine,ATM)等等,本申请对电子设备的应用场景不做限定。
可选地,上述用于执行图像处理方法10的处理单元可以不位于图像传感器200中,而位于图像传感器200所在的电子设备中的处理单元中,例如,若电子设备为手机,则该处理单元可以为手机中处理器中的图像信号处理单元,或者该处理单元也可以为手机中单独的图像信号处理芯片,本申请实施例对处理单元的具体硬件形态不做限定。
应理解,本申请实施例的处理器可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
可以理解,本申请实施例的图像传感器还可以包括存储器,存储器可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。应注意,本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应所述理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者所述技术方案的部分可以以软件产品的形式体现出来,所述计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。
Claims (30)
1.一种图像传感器,其特征在于,包括:
滤光单元阵列,包括多个滤光单元组,所述多个滤光单元组中每个滤光单元组包括4×4个滤光单元;其中,在所述4×4个滤光单元中,每一行以及每一列上均包括2个白色滤光单元以及2个彩色滤光单元,至少一条对角线上包括4个白色滤光单元或者同一颜色的4个彩色滤光单元;
像素单元阵列,包括多个像素单元,所述像素单元阵列位于所述滤光单元阵列下方,且所述像素单元阵列中多个像素单元与所述滤光单元阵列中多个滤光单元一一对应。
2.根据权利要求1所述的图像传感器,其特征在于,所述滤光单元组包括不同颜色的第一彩色滤光单元、第二彩色滤光单元和第三彩色滤光单元,所述第一彩色滤光单元的数量等于所述第二彩色滤光单元与所述第三彩色滤光单元的数量之和。
3.根据权利要求2所述的图像传感器,其特征在于,在所述滤光单元组中,所述第二彩色滤光单元的数量等于所述第三彩色滤光单元的数量。
4.根据权利要求3所述的图像传感器,其特征在于,在所述滤光单元组中,彩色滤光单元均设置于对角线位置,白色滤光单元设置于非对角线位置。
5.根据权利要求4所述的图像传感器,其特征在于,在所述滤光单元组中,一条对角线上的4个滤光单元均为所述第一彩色滤光单元,另一条对角线上的4个滤光单元包括2个所述第二彩色滤光单元以及2个所述第三彩色滤光单元。
6.根据权利要求5所述的图像传感器,其特征在于,在所述另一条对角线上,2个所述第二彩色滤光单元共顶角相邻设置,且2个所述第三彩色滤光单元共顶角相邻设置。
7.根据权利要求6所述的图像传感器,其特征在于,在所述滤光单元组中,所述白色滤光单元分别位于第一行第二列、第一行第三列、第二行第一列、第二行第四列、第三上第一列、第三行第四列、第四行第二列、第四行第三列;
所述第二彩色滤光单元分别位于第一行第四列和第二行第三列;
所述第一彩色滤光单元分别位于第一行第一列、第二行第二列、第三行第三列、第四行第四列;
所述第三彩色滤光单元分别位于第三行第二列和第四行第一列。
8.根据权利要求5所述的图像传感器,其特征在于,在所述另一条对角线上,2个所述第二彩色滤光单元与2个所述第三彩色滤光单元间隔设置。
9.根据权利要求8所述的图像传感器,其特征在于,在所述滤光单元组中,所述白色滤光单元分别位于第一行第二列、第一行第三列、第二行第一列、第二行第四列、第三上第一列、第三行第四列、第四行第二列、第四行第三列;
所述第二彩色滤光单元分别位于第一行第四列和第三行第二列;
所述第一彩色滤光单元分别位于第一行第一列、第二行第二列、第三行第三列、第四行第四列;
所述第三彩色滤光单元分别位于第二行第三列和第四行第一列。
10.根据权利要求3所述的图像传感器,其特征在于,在所述滤光单元组中,白色滤光单元均设置于对角线位置,彩色滤光单元设置于非对角线位置。
11.根据权利要求10所述的图像传感器,其特征在于,在所述滤光单元组中,每一行以及每一列上的彩色滤光单元颜色不同。
12.根据权利要求11所述的图像传感器,其特征在于,在所述滤光单元组中,同一颜色的彩色滤光单元共顶角相邻设置。
13.根据权利要求12所述的图像传感器,其特征在于,在所述滤光单元组中,所述白色滤光单元分别位于第一行第一列、第一行第四列、第二行第二列、第二行第三列、第三上第二列、第三行第三列、第四行第一列、第四行第四列;
所述第二彩色滤光单元分别位于第一行第三列和第二行第四列;
所述第一彩色滤光单元分别位于第一行第二列、第二行第一列、第三行第四列、第四行第三列;
所述第三彩色滤光单元分别位于第三行第一列和第四行第二列。
14.根据权利要求3所述的图像传感器,其特征在于,在所述滤光单元组中,包括2个2×2的白色滤光单元集合以及2个2×2的彩色滤光单元集合,所述2个2×2的白色滤光集合设置于所述滤光单元组的一条对角线上,所述2个2×2的彩色滤光单元集合设置于所述滤光单元组的另一条对角线上。
15.根据权利要求14所述的图像传感器,其特征在于,在所述2个2×2的彩色滤光单元集合中,每个彩色滤光单元包括2个共顶角设置的所述第一彩色滤光单元,以及共顶角设置的1个所述第二彩色滤光单元和1个所述第三彩色滤光单元。
16.根据权利要求15所述的图像传感器,其特征在于,在所述2个2×2的彩色滤光单元集合中,所述第一彩色滤光单元的相对位置关系相同。
17.根据权利要求16所述的图像传感器,其特征在于,在所述2个2×2的彩色滤光单元集合中,所述第二彩色滤光单元的相对位置关系不同,且所述第三彩色滤光单元的相对位置关系不同。
18.根据权利要求17所述的图像传感器,其特征在于,在所述滤光单元组中,所述白色滤光单元分别位于第一行第三列、第一行第四列、第二行第三列、第二行第四列、第三上第一列、第三行第二列、第四行第一列、第四行第二列;
所述第二彩色滤光单元分别位于第一行第二列和第四行第三列;
所述第一彩色滤光单元分别位于第一行第一列、第二行第一列、第三行第三列、第四行第四列;
所述第三彩色滤光单元分别位于第二行第一列和第三行第四列。
19.根据权利要求2至18中任一项所述的图像传感器,其特征在于,所述第一彩色滤光单元、所述第二彩色滤光单元以及所述第三彩色滤光单元用于分别通过三种颜色的光信号,所述三种颜色的光信号波段覆盖可见光波段。
20.根据权利要求19所述的图像传感器,其特征在于,所述第一彩色滤光单元、所述第二彩色滤光单元以及所述第三彩色滤光单元的颜色分别为红、绿、蓝、青、品红、黄中的三种颜色。
21.根据权利要求20所述的图像传感器,其特征在于,所述第一彩色滤光单元为绿色滤光单元、所述第二彩色滤光单元和所述第三彩色滤光单元分别为红色滤光单元和蓝色滤光单元。
22.根据权利要求1至18中任一项所述的图像传感器,其特征在于,所述图像传感器还包括:
微透镜阵列,包括多个微透镜,所述微透镜阵列位于所述滤光单元阵列上方,用于将拍摄对象返回的光信号汇聚至所述滤光单元阵列。
23.根据权利要求22所述的图像传感器,其特征在于,所述微透镜阵列中的多个微透镜与所述滤光单元阵列中的多个滤光单元一一对应。
24.根据权利要求22所述的图像传感器,其特征在于,所述微透镜阵列中包括至少一个第一微透镜和至少一个第二微透镜,
所述第一微透镜与所述滤光单元阵列中的一个白色滤光单元对应,
所述第二微透镜与所述滤光单元阵列中的四个彩色滤光单元对应。
25.根据权利要求1至18中任一项所述的图像传感器,其特征在于,所述像素单元阵列中的彩色像素单元的像素值用于生成所述拍摄对象的第一图像数据,所述像素单元阵列中的白色像素单元的像素值用于生成拍摄对象的第二图像数据,所述第一图像数据和所述第二图像数据用于合成所述拍摄对象的目标图像;
其中,所述白色像素单元为对应于所述白色滤光单元的像素单元,所述彩色像素单元为对应于所述彩色滤光单元的像素单元。
26.根据权利要求25所述的图像传感器,其特征在于,所述像素单元阵列中的彩色像素单元的像素值用于通过插值处理生成中间图像,所述中间图像用于通过重排马赛克处理生成拜耳格式的所述第一图像数据。
27.根据权利要求26所述的图像传感器,其特征在于,在所述中间图像的2×2个像素值中,2个像素值为所述彩色像素单元的原始像素值,另2个像素值为经过插值处理得到的像素值。
28.根据权利要求25所述的图像传感器,其特征在于,所述第一图像数据和所述第二图像数据的分辨率相同。
29.根据权利要求1至18中任一项所述的图像传感器,其特征在于,所述图像传感器为互补金属氧化物半导体CMOS图像传感器,或者为电荷耦合器件CCD图像传感器。
30.一种电子设备,其特征在于,包括:
如权利要求1至29中任意一项所述的图像传感器。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010410639 | 2020-05-15 | ||
CN2020104106392 | 2020-05-15 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111756972A true CN111756972A (zh) | 2020-10-09 |
Family
ID=72202804
Family Applications (11)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010635332.2A Pending CN111756972A (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202010636571.XA Pending CN111756973A (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021297709.XU Active CN212435794U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202010637147.7A Pending CN111756974A (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021297708.5U Active CN212435793U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021303789.5U Active CN212752379U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202010708333.5A Active CN111614886B (zh) | 2020-05-15 | 2020-07-22 | 图像传感器和电子设备 |
CN202010724146.6A Pending CN111654615A (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202021508422.7U Active CN212785522U (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202010724148.5A Pending CN111629140A (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202021510460.6U Active CN212752389U (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
Family Applications After (10)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010636571.XA Pending CN111756973A (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021297709.XU Active CN212435794U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202010637147.7A Pending CN111756974A (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021297708.5U Active CN212435793U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202021303789.5U Active CN212752379U (zh) | 2020-05-15 | 2020-07-03 | 图像传感器和电子设备 |
CN202010708333.5A Active CN111614886B (zh) | 2020-05-15 | 2020-07-22 | 图像传感器和电子设备 |
CN202010724146.6A Pending CN111654615A (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202021508422.7U Active CN212785522U (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202010724148.5A Pending CN111629140A (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
CN202021510460.6U Active CN212752389U (zh) | 2020-05-15 | 2020-07-24 | 图像传感器和电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (11) | CN111756972A (zh) |
WO (1) | WO2021227250A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113852797A (zh) * | 2021-09-24 | 2021-12-28 | 昆山丘钛微电子科技股份有限公司 | 色彩滤镜阵列、图像传感器以及摄像模组 |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114845015A (zh) * | 2020-10-15 | 2022-08-02 | Oppo广东移动通信有限公司 | 图像传感器、控制方法、成像装置、终端及可读存储介质 |
CN112312097B (zh) * | 2020-10-29 | 2023-01-24 | 维沃移动通信有限公司 | 一种传感器 |
CN112822466A (zh) * | 2020-12-28 | 2021-05-18 | 维沃移动通信有限公司 | 图像传感器、摄像模组和电子设备 |
CN113037980A (zh) * | 2021-03-23 | 2021-06-25 | 北京灵汐科技有限公司 | 像素传感阵列和视觉传感器 |
CN115225832A (zh) * | 2021-04-21 | 2022-10-21 | 海信集团控股股份有限公司 | 一种图像采集设备及图像加密处理方法、设备和介质 |
CN113540138B (zh) * | 2021-06-03 | 2024-03-12 | 奥比中光科技集团股份有限公司 | 一种多光谱图像传感器及其成像模块 |
CN113676651B (zh) * | 2021-08-25 | 2023-05-26 | 维沃移动通信有限公司 | 图像传感器、控制方法、控制装置、电子设备和存储介质 |
CN113676652B (zh) * | 2021-08-25 | 2023-05-26 | 维沃移动通信有限公司 | 图像传感器、控制方法、控制装置、电子设备和存储介质 |
CN114125318A (zh) * | 2021-11-12 | 2022-03-01 | Oppo广东移动通信有限公司 | 图像传感器、摄像模组、电子设备、图像生成方法和装置 |
CN114125240A (zh) * | 2021-11-30 | 2022-03-01 | 维沃移动通信有限公司 | 图像传感器、摄像模组、电子设备及拍摄方法 |
CN114363486A (zh) * | 2021-12-14 | 2022-04-15 | Oppo广东移动通信有限公司 | 图像传感器、摄像模组、电子设备、图像生成方法和装置 |
CN114157795A (zh) * | 2021-12-14 | 2022-03-08 | Oppo广东移动通信有限公司 | 图像传感器、摄像模组、电子设备、图像生成方法和装置 |
CN114823985B (zh) * | 2022-05-31 | 2024-04-09 | 深圳市聚飞光电股份有限公司 | 一种光电传感器及其封装方法 |
CN115696078B (zh) * | 2022-08-01 | 2023-09-01 | 荣耀终端有限公司 | 色彩滤波阵列、图像传感器、摄像头模组和电子设备 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9479745B2 (en) * | 2014-09-19 | 2016-10-25 | Omnivision Technologies, Inc. | Color filter array with reference pixel to reduce spectral crosstalk |
TWI552594B (zh) * | 2014-10-27 | 2016-10-01 | 聯詠科技股份有限公司 | 用於影像感測裝置的色彩濾波陣列及其製造方法 |
CN105282529B (zh) * | 2015-10-22 | 2018-01-16 | 浙江宇视科技有限公司 | 一种基于raw空间的数字宽动态方法及装置 |
CN105516697B (zh) * | 2015-12-18 | 2018-04-17 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置、移动终端及成像方法 |
CN105578078B (zh) * | 2015-12-18 | 2018-01-19 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置、移动终端及成像方法 |
CN105516700B (zh) * | 2015-12-18 | 2018-01-19 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
SG11201800816VA (en) * | 2015-12-18 | 2018-02-27 | Guangdong Oppo Mobile Telecommunications Corp Ltd | Image sensor, control method, and electronic device |
CN105430359B (zh) * | 2015-12-18 | 2018-07-10 | 广东欧珀移动通信有限公司 | 成像方法、图像传感器、成像装置及电子装置 |
CN105578071B (zh) * | 2015-12-18 | 2018-03-20 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
CN107105140B (zh) * | 2017-04-28 | 2020-01-24 | Oppo广东移动通信有限公司 | 双核对焦图像传感器及其对焦控制方法和成像装置 |
-
2020
- 2020-07-03 CN CN202010635332.2A patent/CN111756972A/zh active Pending
- 2020-07-03 CN CN202010636571.XA patent/CN111756973A/zh active Pending
- 2020-07-03 CN CN202021297709.XU patent/CN212435794U/zh active Active
- 2020-07-03 CN CN202010637147.7A patent/CN111756974A/zh active Pending
- 2020-07-03 CN CN202021297708.5U patent/CN212435793U/zh active Active
- 2020-07-03 CN CN202021303789.5U patent/CN212752379U/zh active Active
- 2020-07-21 WO PCT/CN2020/103268 patent/WO2021227250A1/zh active Application Filing
- 2020-07-22 CN CN202010708333.5A patent/CN111614886B/zh active Active
- 2020-07-24 CN CN202010724146.6A patent/CN111654615A/zh active Pending
- 2020-07-24 CN CN202021508422.7U patent/CN212785522U/zh active Active
- 2020-07-24 CN CN202010724148.5A patent/CN111629140A/zh active Pending
- 2020-07-24 CN CN202021510460.6U patent/CN212752389U/zh active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113852797A (zh) * | 2021-09-24 | 2021-12-28 | 昆山丘钛微电子科技股份有限公司 | 色彩滤镜阵列、图像传感器以及摄像模组 |
Also Published As
Publication number | Publication date |
---|---|
CN212752379U (zh) | 2021-03-19 |
CN111614886B (zh) | 2021-10-19 |
WO2021227250A1 (zh) | 2021-11-18 |
CN212435794U (zh) | 2021-01-29 |
CN212785522U (zh) | 2021-03-23 |
CN111629140A (zh) | 2020-09-04 |
CN111654615A (zh) | 2020-09-11 |
CN111756974A (zh) | 2020-10-09 |
CN111614886A (zh) | 2020-09-01 |
CN212752389U (zh) | 2021-03-19 |
CN212435793U (zh) | 2021-01-29 |
CN111756973A (zh) | 2020-10-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN212435794U (zh) | 图像传感器和电子设备 | |
US10032810B2 (en) | Image sensor with dual layer photodiode structure | |
EP2022258B1 (en) | Image sensor with improved light sensitivity | |
US8456553B2 (en) | Color imaging element | |
EP1908302B1 (en) | Image sensor with improved lightsensitivity | |
CN111314592B (zh) | 图像处理方法、摄像头组件及移动终端 | |
CN111246064B (zh) | 图像处理方法、摄像头组件及移动终端 | |
CN110649057B (zh) | 图像传感器、摄像头组件及移动终端 | |
CN111757006A (zh) | 图像获取方法、摄像头组件及移动终端 | |
JP2008005488A (ja) | カメラモジュール | |
CN210143059U (zh) | 图像传感器集成电路、图像传感器以及成像系统 | |
JP2008011532A (ja) | イメージ復元方法及び装置 | |
US20200267291A1 (en) | Reduced optical crosstalk plenoptic imaging device, corresponding method, computer program product, computer-readable carrier medium and apparatus | |
EP2800376B1 (en) | Imaging device, method for controlling imaging device, and control program | |
US20160219235A1 (en) | Solid-state image pickup device | |
US8711257B2 (en) | Color imaging device | |
EP4246959A1 (en) | Image sensor and imaging apparatus | |
CN114666469B (zh) | 图像处理装置、方法及具有该图像处理装置的镜头模组 | |
JP2016034055A (ja) | 画像処理装置、画像処理方法、及び、撮像装置 | |
US20140320710A1 (en) | Imaging device, method for controlling imaging device, and storage medium storing a control program | |
CN114080795A (zh) | 图像传感器和电子设备 | |
CN114008781A (zh) | 图像传感器、摄像头组件及移动终端 | |
US20220279108A1 (en) | Image sensor and mobile terminal | |
JP2009009971A (ja) | 固体撮像装置 | |
US20140307136A1 (en) | Imaging device, method for controlling imaging device, and storage medium storing a control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |