CN104025579A - 固体摄像装置 - Google Patents

固体摄像装置 Download PDF

Info

Publication number
CN104025579A
CN104025579A CN201280065009.XA CN201280065009A CN104025579A CN 104025579 A CN104025579 A CN 104025579A CN 201280065009 A CN201280065009 A CN 201280065009A CN 104025579 A CN104025579 A CN 104025579A
Authority
CN
China
Prior art keywords
filter
pixel
pareto diagram
sub
adjacent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280065009.XA
Other languages
English (en)
Other versions
CN104025579B (zh
Inventor
冲川满
林健吉
田中诚二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN104025579A publication Critical patent/CN104025579A/zh
Application granted granted Critical
Publication of CN104025579B publication Critical patent/CN104025579B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14621Colour filter arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/257Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00Details of colour television systems
    • H04N2209/04Picture signal generators
    • H04N2209/041Picture signal generators using solid-state devices
    • H04N2209/042Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

在得到立体视用的图像的固体摄像装置中,实现高分辨率化,并减少伪色。滤色器阵列(20)具有G滤光片、R滤光片、B。这些滤光片中的任一种滤光片与成对的相位差像素对应,包括G、R、B各滤光片的基本排列图案(BP1)在水平和垂直方向上重复配置。最有助于取得亮度信息的G滤光片配置在像素排列的水平方向(X方向)、垂直方向(Y方向)和倾斜方向(DL方向、DR方向)的各行上。R滤光片和B滤光片分别配置于倾斜方向的各行上。G滤光片的数量比R滤光片、B滤光片各自的数量多。

Description

固体摄像装置
技术领域
本发明涉及拍摄立体视用的图像的单板式固体摄像装置。
背景技术
单板式固体摄像装置在呈二维状地形成有光电转换元件(光电二极管)的基板上配置有滤色器阵列。该滤色器阵列以特定的滤色器(滤光片段)与各光电转换元件面对的方式将多个滤色器排列成马赛克状。各像素具有光电转换元件和特定的滤色器,并输出与滤色器对应的特定的颜色信号,因此其他颜色信号丢失。因此,为了得到显示用的多通道图像,需要进行根据周围的像素进行插值而取得所丢失的颜色信号的处理(去马赛克算法处理)。
在该情况下成为问题的是相对于被摄体光中包含的高频信号的亮度、颜色的再现性。具体来说,根据滤色器阵列的颜色排列,产生由超过了各颜色的再现频带的高频信号引起的折回(混淆),从而使亮度、颜色的重现性降低。
在单板式固体摄像装置中广泛使用的滤色器阵列的颜色排列为原色系拜耳排列。原色系拜耳排列是指,将绿(G)滤光片配置成相间方格状,在余下的部分均等地配置红(R)滤光片和蓝(B)滤光片。在原色系拜耳排列中,G滤光片对亮度信号的贡献率大,因此在倾斜方向上,亮度的再现性低,为低分辨率。而且,在垂直和水平方向的各行上,除了G滤光片之外,仅配置有R滤光片和B滤光片中的任一方,因此颜色的再现性差,可能产生伪色。
因此,在单板式固体摄像装置中,将光学低通滤波器配置在固体摄像装置的入射侧,进行从被摄体光除去高频信号的处理。然而,当使用光学低通滤波器时,存在着分辨率低这样的缺点,因此尝试了滤色器阵列的颜色排列的改良。
例如,提出了下述颜色排列:将沿水平方向以预定顺序排列R、G、B各滤光片而成的排列设为1组,将该组在垂直方向上呈锯齿形地错开并配置,从而在滤色器阵列中的所有方向(水平、垂直、倾斜方向上的直线)的各行上存在所有颜色(专利文献1)。
而且,还提出了下述颜色排列:将R、G、B这3种滤光片中的R滤光片和B滤光片沿水平方向和垂直方向分别隔开三个像素而配置,并且在它们之间配置G滤光片(专利文献2)。
然而,在专利文献1记载的颜色排列中,在所有方向的各行上存在所有颜色,从而抑制伪色的产生,但是R、G、B各滤光片的数量相同,G滤光片的数量比原色系拜耳排列的情况少,对于高分辨率化不是有效的。
相对于此,在专利文献2记载的颜色排列中,G滤光片的数量相对于R、B各滤光片的数量的比率与原色系拜耳排列的情况相比大,对于高分辨率化是有效的。然而,由于存在水平或垂直方向上仅配置有G滤光片的行,因此对于伪色的抑制不是有效的。
因此,本申请人在日本特愿2011-162415号中提出了具有以下颜色排列的滤色器阵列的固体摄像装置:G滤光片存在于所有方向的各行上且R、B各滤光片存在于水平和垂直方向的各行上。而且,该颜色排列为,G滤光片的数量比R、B各滤光片的数量多,例如将与6×6像素对应的基本排列图案在水平方向和垂直方向上重复配置。
而且,已知下述固体摄像装置:将在左右(或者上下)方向上对光的入射角具有选择性的像素(以下,称为相位差像素)的对设于对光的入射角没有选择性的通常的像素排列中,基于相位差像素的像素值得到与相位差(视差)相关的信息。从相位差像素得到的与相位差相关的信息例如被用于称为相位差方式的AF处理中。
并且,近些年,还提出了通过将所有像素设为相位差像素而利用一个固体摄像装置得到立体视用的图像的数码相机。
专利文献1:日本特开平11-285012号公报
专利文献2:日本特开平8-23543号公报
发明内容
发明要解决的课题
在利用将所有像素设为相位差像素的一个固体摄像装置得到立体视用的图像的情况下,右眼用的图像由选择性地接收从右侧入射的光的右相位差像素取得,左眼用的图像由选择性地接收从左侧入射的光的左相位差像素取得,因此需要将所有像素中的一半设为右相位差像素,将余下一半设为左相位差像素。因此,当与固体摄像装置的所有像素为通常的像素的情况下得到的图像相比时,右眼用和左眼用的各图像的像素数减半,因此存在着分辨率低这样的问题。例如,当将右相位差像素的列与左相位差像素的列交替地排列时,左右方向的分辨率减半。
而且,虽然也可以利用插值来补充右眼用和左眼用的各图像的像素数,但是在该情况下,原本像素数就少,因此容易产生伪色。
本发明的目的在于提供一种能够防止伪色并可拍摄高分辨率的立体视用图像的单板固体摄像装置。
用于解决课题的方法
本发明的固体摄像装置具备:排列有像素对的半导体基板和与像素对对应地排列的滤色器阵列。像素对由从在水平方向上相邻的两个像素的各像素得到与视差对应的像素值的两个像素构成。而且,在受光区域内,像素对在水平方向和垂直方向上呈二维地排列并且在比较沿水平方向的每行时错开一个像素的量而配置。滤色器阵列中,分光透过特性不同的N种(N为3以上的整数)的各滤光片与上述像素对对应地排列。而且,滤色器阵列形成为将基本排列图案在水平方向和垂直方向上重复排列的形态。基本排列图案为沿着相对于水平方向和垂直方向彼此正交的两个倾斜方向将N种滤光片以预定图案正方排列而成的图案。并且,滤色器阵列中,对亮度信号的贡献率最高的第一滤光片配置于水平方向、垂直方向和排列三个以上像素对的倾斜方向的各行上,并且将余下的第二滤光片~第N滤光片配置于倾斜方向的各行上。而且,第一滤光片的个数比第二滤光片~第N滤光片的各个数多。
优选的是,滤色器阵列具有第一滤光片在倾斜方向上不相邻而孤立的状态和第一滤光片在倾斜方向上相邻的状态。优选的是,在该情况下,相邻的状态为与2×2个像素对对应地沿着倾斜方向进行正方排列的状态。
优选的是,基本排列图案为将四个子排列图案在上述倾斜方向上相邻地配置的形态。子排列图案为沿着倾斜方向的正方排列图案,与3×3个像素对对应,在中心和四角配置有第一滤光片。
优选的是,在N种滤光片由第一滤光片~第三滤光片这3种滤光片构成的情况下,基本排列图案为第一子排列图案和第二子排列图案交替地相邻而成的排列。第一子排列图案在中心配置第一滤光片,相对于该中心的第一滤光片,在一方的倾斜方向上相邻地配置第二滤光片,在另一方的倾斜方向上相邻地配置第三滤光片。第二子排列图案在中心配置第一滤光片,相对于该中心的第一滤光片,在一方的倾斜方向上相邻地配置第三滤光片,在另一方的倾斜方向上相邻地配置第二滤光片。
优选的是,第一滤光片透过绿色,第二滤光片透过红色,第三滤光片透过蓝色。
优选的是,对像素对和各滤光片各设置1个微透镜。
优选的是,第一子排列图案和上述第二子排列图案分别在水平方向和垂直方向上平行地相邻。也可以是,第一子排列图案和第二子排列图案分别在水平方向和垂直方向上错开一个像素的量而相邻。
发明效果
本发明的固体摄像装置以左右的相位差像素为一个像素对而将该像素对排列于受光区域,并采用对各像素对分配一个滤色器的滤色器阵列。并且,该滤色器阵列为将基本排列图案在水平方向和垂直方向上重复排列的形态,上述基本排列图案为沿着相对于水平方向和垂直方向彼此正交的两个倾斜方向将N种滤光片以预定图案正方排列而成的图案,并且,形成为下述颜色排列:对亮度信号贡献率最高的第一滤光片配置于水平方向、垂直方向和排列三个以上像素对的倾斜方向的各行上,并且余下的第二滤光片~第N滤光片配置于倾斜方向的各行上,第一滤光片的个数比第二滤光片~第N滤光片的各个数多,因此即使为了得到立体视用的图像而将所有像素设为相位差像素,也能够抑制伪色的发生,提高分辨率。
附图说明
图1是示出固体摄像装置的结构的说明图。
图2是示出像素的结构的电路图。
图3是固体摄像装置的水平方向上的剖视图。
图4是示出像素对的排列的俯视图。
图5是示出滤色器阵列的结构的俯视图。
图6是基本排列图案的说明图。
图7是示出采样点的说明图。
图8是示出其他基本排列图案的俯视图。
图9是示出其他基本排列图案的俯视图。
具体实施方式
如图1所示,固体摄像装置10为CMOS型图像传感器,具备多个像素11、垂直信号线12、读出用垂直扫描电路13a和复位用垂直扫描电路13b、水平扫描电路14、对各垂直扫描电路13a、13b和水平扫描电路14进行驱动的驱动电路(未图示)、输出电路15等。
像素11在半导体基板上沿着水平方向(X方向)和垂直方向(Y方向)而呈二维。像素11具有生成与受光光量对应的电荷的光电二极管(光电转换元件)和多个晶体管(参照图2)。而且,所有的像素11是通过内置的遮光膜的开口位置等而在水平方向上具有入射角的选择性的相位差像素,入射角的选择性对称的两个像素11以成对的方式相邻配置。各像素11的像素值为与伴随于入射角的选择性的视差对应的值。在配置有像素11的受光区域16上设有滤色器阵列(参照图5)。
垂直信号线12是使与由各像素11生成的电荷的量对应的信号电压传递至水平扫描电路14的配线,沿着在垂直方向上排列的像素11的各列设置。读出用垂直扫描电路13a和复位用垂直扫描电路13b是对在水平方向上排列的像素11的各行进行选择的电路,沿着垂直方向依次选择。
水平扫描电路14是对设于像素11的每一列的多个垂直信号线12进行选择的电路。水平扫描电路14与由读出用垂直扫描电路13a和复位用垂直扫描电路13b进行的选择动作同步地沿着水平方向依次选择垂直信号线12。在读出时,各像素11的信号电压经由水平扫描电路14而依次被传送到输出电路15。在复位时,各像素11的电荷不作为信号电压读取到垂直信号线12,而是被废弃。输出电路15对从水平扫描电路14传送来的信号电压实施各种各样的信号处理并输出。
如图2所示,各像素11具有光电二极管PD、复位晶体管RTr、放大晶体管ATr、选择晶体管STr。这些各晶体管例如是n型MOS晶体管。
复位线RST和选择线SEL这两条驱动线通过像素11的每一行,并且连接有属于同一行的多个像素11。选择线SEL的端部与读出用垂直扫描电路13a连接。复位线RST的端部与复位用垂直扫描电路13b连接。通过读出用和复位用垂直扫描电路13a、13b,依次驱动选择线SEL和复位线RST,以行为单位依次进行信号电压的读出和复位。
光电二极管PD对接收到的光进行光电转换,生成与其光量对应的量的电荷。光电二极管PD的阳极与地线连接,阴极与放大晶体管ATr的栅极连接。光电二极管PD的阴极与放大晶体管ATr的栅极的连接部分成为积蓄由光电二极管PD生成的电荷的浮动扩散部FD。
复位晶体管RTr的源极与浮动扩散部FD分别连接,对复位晶体管RTr的漏极施加有电源电压VDD,复位脉冲经由复位线RST施加于复位晶体管RTr的栅极,从而成为导通状态。当复位晶体管RTr成为导通状态时,对浮动扩散部FD施加电源电压VDD,积蓄电荷被废弃。
放大晶体管ATr的栅极与浮动扩散部FD连接,对放大晶体管ATr的漏极施加有电源电压VDD。放大晶体管ATr从源极输出与浮动扩散部FD的积蓄电荷对应的信号电压。
选择晶体管STr的漏极与放大晶体管ATr的源极连接,选择晶体管STr的源极与垂直信号线12连接,选择脉冲经由选择线SEL施加于选择晶体管STr的栅极,从而成为导通状态。当选择晶体管STr成为导通状态时,从放大晶体管ATr的源极输出的信号电压施加于垂直信号线12。
另外,像素11也可以是在光电二极管PD与浮动扩散部FD之间还设有传送晶体管的四晶体管结构等。
如图3所示,光电二极管PD形成于p型半导体基板30的表层作为n型半导体区域。光电二极管PD通过p型半导体基板30与n型半导体基板而利用PN结来进行光电转换,产生与入射光量对应的信号电荷。在p型半导体基板30的表面上形成有配线层31。在配线层31设有由非晶硅等形成的电极32、由铝等形成的配线33、34,它们构成上述的各晶体管的电极、配线。
在配线层31上设有由二氧化硅(SiO2)等形成的平坦化膜35。在平坦膜35上设有上述的滤色器阵列20。
在滤色器阵列20上形成有微透镜36。微透镜36由SiO2、透明树脂材料等构成,对滤色器阵列20的各滤色器逐个地设置。即,微透镜36横跨水平方向上相邻的两个像素11而设置,使入射光朝向两个像素11的各光电二极管PD聚光。在此,为了区别两个像素,标以附图标记11a、11b。从微透镜36出射的光通过设于正下方的滤色器阵列20的各滤光片而成为预定颜色并入射到各像素11a、11b的光电二极管PD。
在电极32上隔着未图示的绝缘膜设有对光电二极管PD的开口的位置进行限制的遮光膜37。基于遮光膜37的开口38的位置在相邻的两个像素11a和像素11b上沿着水平方向反向错开。通过使该开口38的位置、微透镜36横跨这两个像素11a、11b而设置,像素11a、11b分别左右地具有对于光的入射角的反向的选择性。因此,沿着水平方向相邻的像素11a和像素11b的对为用于得到与视差相关的信息的相位差像素的对。以下,将像素11a和像素11b统称为像素对41。而且,将构成像素对41的两个像素中的左侧的像素11a称为左像素11a,将右侧的像素11b称为右像素11b。
如图4所示,左像素11a(空白)和右像素11b(斜线)在水平方向和垂直方向上分别交替地配置。因此,如以虚线包围示出的那样,由在水平方向上相邻的左像素11a和右像素11b的对形成的像素对41沿着水平方向和垂直方向排列,但是当对每行进行比较时成为错开像素对41的半间距的量(一个像素的量)的配置。
如图5所示,滤色器阵列20的平面形状为具有沿着水平方向和垂直方向的边的长方形形状,具备分光透过特性彼此不同的多种滤色器(滤光片段),例如G滤光片、R滤光片、B滤光片。该图的“G”、“R”、“B”分别表示G滤光片、R滤光片、B滤光片。各滤色器具有使对应的颜色透过的分光透过特性。G滤光片、R滤光片、B滤光片中的任一个都覆盖一个像素对41。附图标记D1、D2表示相对于水平方向和垂直方向倾斜45度的倾斜方向。
如图6所示,滤色器阵列20的颜色排列为,将与沿着倾斜方向D1和倾斜方向D2的6×6的像素对41对应的基本排列图案BP1沿着倾斜方向D1、D2排列。
而且,基本排列图案BP1为,与沿着倾斜方向D1、D2排列的3×3的像素对41对应的第一子排列图案BP1a和第二子排列图案BP1b以在倾斜方向D1、D2上相邻的方式排列。
在第一子排列图案BP1a和第二子排列图案BP1b中,G滤光片配置于中央和四角,排列于沿着水平方向和垂直方向的两条对角线上。在第一子排列图案BP1a中,在倾斜方向D1上夹着中央的G滤光片而配置有两个R滤光片,在倾斜方向D2上夹着中央的G滤光片而配置有两个B滤光片。与此相反地,在第二子排列图案BPb中,在倾斜方向D1上夹着中央的G滤光片而配置有两个B滤光片,在倾斜方向D2上夹着中央的G滤光片配置有两个R滤光片。即,在第一子排列图案BP1a和第二子排列图案BP1b中,G滤光片为相同排列,但是R滤光片和B滤光片的位置关系是相反的。
第一子排列图案BPa和第二子排列图案BPb中的G滤光片、R滤光片、B滤光片的数量的比率均为5:2:2。因此,基本排列图案BP中的G滤光片、R滤光片、B滤光片的数量的比率为5:2:2,G滤光片的数量比R滤光片的数量、B滤光片的数量多。
第一子排列图案BPa和第二子排列图案BPb的中央的G滤光片46在水平和垂直方向上不与G滤光片相邻而孤立。相对于此,第一子排列图案BP1a和第二子排列图案BP1b的四角的G滤光片形成与沿着倾斜方向D1、D2的2×2的像素对41对应的G滤光片组47。G滤光片组47是沿着倾斜方向D1、D2的正方排列。孤立的G滤光片46与正方排列的G滤光片组47在水平方向和垂直方向上交替地排列。
通过上述颜色排列,在滤色器阵列20中,在水平方向(X方向)、垂直方向(Y方向)和倾斜方向D1、D2的各行上配置有G滤光片。而且,在水平方向或垂直方向上至少两个G滤光片相邻。而且,在中央,四个G滤光片正方排列。另一方面,R滤光片和B滤光片分别配置于倾斜方向D1、D2各行上。
在如上所述地构成的固体摄像装置10中,光从微透镜36侧向受光区域16入射。入射到受光区域16后的光由微透镜42聚光,并透过滤色器阵列20,被分光成各个颜色,入射到各像素11的光电二极管PD。
在光电二极管PD中,通过光电转换而生成电荷,所生成的电荷被积蓄在浮动扩散部FD中。与该积蓄电荷对应的信号电压由放大晶体管ATr生成。
并且,读出用垂直扫描电路13a对设于像素11的每一行的选择线SEL依次施加电压,从而使每行选择晶体管STr成为导通状态。由此,在像素11的每行上向垂直信号线12输出信号电压。而且,水平扫描电路14依次选择垂直信号线12,从而将输入到各垂直信号线12的信号电压传送到输出电路15。各信号电压由输出电路15进行信号处理,并输出到外部。另外,复位当一行的量的信号电压的输出结束时,复位用垂直扫描电路13b对该行的复位线RST施加电压,从而使复位晶体管RTr成为导通状态。由此,积蓄在该行的浮动扩散部FD中的电荷被废弃。
以上动作以行为单位反复进行,将一个画面的量的信号电压作为输出数据输出。在该输出数据中,一同包含有左像素11a和右像素11b的信息,因此通过未图示的信号处理电路,将左像素11a的数据和右像素11b的数据分离,并且分别生成立体视用的左右存在视差的两种显示图像。
输出数据为丢失了由滤色器阵列20的各滤光片分配后的颜色以外的颜色信息的图像(所谓RAW图像)。因此,将输出数据分离而得到的由左像素11a构成的数据(以下,称为左像素数据)和由右像素11b构成的数据(以下,称为右像素数据)也丢失颜色信息。因此,为了根据左像素数据和右像素数据得到多通道图像作为左右各自的显示图像,利用未图示的信号处理电路进行根据周围的像素进行插值而取得所丢失的颜色信息的去马赛克算法处理。
而且,如图7所示,左像素数据和右像素数据中的被摄体的采样点为所谓蜂窝状。因此,在生成显示图像时,以得到正方排列的点的数据的方式利用插值来生成各采样点之间的数据。在图7中,以粗线包围示出了与基本排列图案BP1的对应关系。
另外,通过去马赛克算法处理,对各采样点获得G、R、B各颜色信号。亮度信号(Y)例如根据Y=0.299·r+0.587·g+0.114·b而获得。在此,r、g、b分别表示R信号、G信号、B信号。这样一来,G信号的权重比其他信号大,最有助于取得亮度信号Y。
而且,滤色器阵列20中,基本排列图案BP1沿倾斜方向D1、D2重复排列,最有助于取得亮度信息的G滤光片在任意的行(水平、垂直、倾斜方向上的直线)上都存在,且G滤光片的数量比R滤光片、B滤光片的数量多,因此抑制由去马赛克算法处理引起的混淆,亮度信息的再现性高,能够得到高分辨率的亮度信息。
而且,滤色器阵列20的G滤光片以外的R滤光片和B滤光片分别存在于倾斜方向D1、D2的各行上,因此在去马赛克算法处理中能够抑制伪色。因此,即使不使用用于从入射光除去高频成分的光学低通滤波器也能够高分辨率化。
而且,滤色器阵列20存在与2×2像素对应的正方排列的G滤光片组47,因此从左像素数据和右像素数据提取与G滤光片组47对应的四个像素值,分别算出倾斜方向D1上的像素值的差的绝对值、倾斜方向D2上的像素值的差的绝对值、水平方向和垂直方向上的像素值的差的绝对值,求算差的绝对值小的方向,从而能够判断相关性高的方向。该相关方向用于去马赛克算法处理。
而且,当从左像素数据和右像素数据以第一子排列图案或第二子排列图案为中心提取5×5的采样点的数据时,与G滤光片组47对应的2×2像素位于四角。因此,能够使用最小像素间隔的G滤光片的像素值而高精度地进行四个方向的相关方向的判别。
另外,作为滤色器阵列20的排列图案,形成为将基本排列图案BP1沿倾斜方向D1、D2排列而成的排列,上述基本排列图案BP1是第一子排列图案BP1a和第二子排列图案BP1b分别在水平方向和垂直方向上无错位地排列而成的图案,但是也可以如图8所示,采用将第一子排列图案BP1a和第二子排列图案BP1b在水平方向和垂直方向上错开一个像素的量地组合而成的基本排列图案BP2。即使是在采用将基本排列图案BP2沿倾斜方向D1、D2排列而成的滤色器阵列的情况下,也能够得到与上述的实施方式同样的效果。
另外,在上述的实施方式中,像素11沿水平方向和垂直方向正方排列,但是例如也可以是使像素11的排列旋转45度而成的蜂窝排列。在该情况下,使滤色器阵列20的颜色排列也旋转45度即可。
另外,滤色器阵列20的颜色排列例如也可以是将图9所示的5×5像素的基本排列图案BP3沿水平和垂直方向排列而成的颜色排列。滤色器阵列的颜色排列只要是如下即可:基本排列图案在水平和垂直方向上重复排列,最有助于取得亮度信息的G滤光片在任意的行(水平、垂直、倾斜方向上的直线)上都存在,且G滤光片的数量比R滤光片、B滤光片的数量多,G滤光片以外的R滤光片和B滤光片分别存在于倾斜方向D1、D2的各行上。
滤色器阵列的颜色排列不限于G、R、B这3色,也可以是4色以上。例如,可以是在G、R、B加上翠绿(E)的4色。而且,滤色器阵列的颜色排列也可以是青色(C)、品红(M)、黄色(Y)的补色系。在该情况下,还可以是进一步加上G的4色的补色系。
另外,在上述的实施方式中,固体摄像装置为CMOS型,但是本发明也适于CCD型的固体摄像装置。而且,本发明既能够适用于从设有用于控制光电二极管的配线层的表面侧向光电二极管照射光的表面照射型图像传感器,也能够适用于不经由配线层而从背面侧向光电二极管照射光的背面照射型图像传感器。
附图标记说明
10:固体摄像装置
11:像素
16:受光区域
20:滤色器阵列
41:像素对

Claims (9)

1.一种固体摄像装置,其特征在于,具备:
半导体基板,具有以下的受光区域:像素对在水平方向和垂直方向上二维地排列并且在比较沿着所述水平方向的每行时错开一个像素的量而配置,所述像素对从水平方向上相邻的两个像素的各像素得到与视差对应的像素值;及
滤色器阵列,所述滤色器将分光透过特性不同的N种的各滤光片与所述像素对对应地排列,所述滤色器阵列构成为将基本排列图案在所述水平方向和所述垂直方向上重复排列的形态,沿着相对于所述水平方向和所述垂直方向彼此正交的两个倾斜方向将所述N种滤光片以预定图案进行正方排列而得到所述基本排列图案,对亮度信号的贡献率最高的第一滤光片配置于所述水平方向、所述垂直方向和排列三个以上所述像素对的倾斜方向的各行上,并且余下的第二滤光片~第N滤光片配置于所述倾斜方向的各行上,所述第一滤光片的个数比所述第二滤光片~第N滤光片的各个数多,其中,N为3以上的整数。
2.根据权利要求1所述的固体摄像装置,其特征在于,
所述滤色器阵列具有所述第一滤光片在所述倾斜方向上不相邻而孤立的状态和所述第一滤光片在倾斜方向上相邻的状态。
3.根据权利要求2所述的固体摄像装置,其特征在于,
所述相邻的状态为与2×2个所述像素对对应地沿着所述倾斜方向进行正方排列的状态。
4.根据权利要求3所述的固体摄像装置,其特征在于,
所述基本排列图案为将四个子排列图案在所述倾斜方向上相邻地配置的形态,
所述子排列图案为沿着所述倾斜方向的正方排列图案,与3×3个所述像素对对应,在中心和四角配置有所述第一滤光片。
5.根据权利要求4所述的固体摄像装置,其特征在于,
所述N种滤光片由第一滤光片~第三滤光片这3种滤光片构成,
所述子排列图案由第一子排列图案和第二子排列图案构成,所述第一子排列图案在中心配置所述第一滤光片,相对于该中心的所述第一滤光片,在一方的所述倾斜方向上相邻地配置所述第二滤光片,在另一方的所述倾斜方向上相邻地配置所述第三滤光片,所述第二子排列图案在中心配置所述第一滤光片,相对于该中心的所述第一滤光片,在一方的所述倾斜方向上相邻地配置所述第三滤光片,在另一方的所述倾斜方向上相邻地配置所述第二滤光片,
所述基本排列图案为所述第一子排列图案和所述第二子排列图案交替地相邻的排列。
6.根据权利要求5所述的固体摄像装置,其特征在于,
所述第一滤光片透过绿色,所述第二滤光片透过红色,所述第三滤光片透过蓝色。
7.根据权利要求1所述的固体摄像装置,其特征在于,
对所述像素对和各所述滤光片各设置1个微透镜。
8.根据权利要求5所述的固体摄像装置,其特征在于,
所述第一子排列图案和所述第二子排列图案分别在所述水平方向和所述垂直方向上平行地相邻。
9.根据权利要求6所述的固体摄像装置,其特征在于,
所述第一子排列图案和所述第二子排列图案分别在所述水平方向和所述垂直方向上错开一个像素的量而相邻。
CN201280065009.XA 2011-12-27 2012-12-26 固体摄像装置 Expired - Fee Related CN104025579B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011285902 2011-12-27
JP2011-285902 2011-12-27
PCT/JP2012/083582 WO2013099910A1 (ja) 2011-12-27 2012-12-26 固体撮像装置

Publications (2)

Publication Number Publication Date
CN104025579A true CN104025579A (zh) 2014-09-03
CN104025579B CN104025579B (zh) 2016-05-04

Family

ID=48697394

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280065009.XA Expired - Fee Related CN104025579B (zh) 2011-12-27 2012-12-26 固体摄像装置

Country Status (4)

Country Link
US (1) US9143760B2 (zh)
JP (1) JP5661201B2 (zh)
CN (1) CN104025579B (zh)
WO (1) WO2013099910A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107017269A (zh) * 2015-10-06 2017-08-04 三星电子株式会社 包括分色元件的图像传感器
CN108076263A (zh) * 2016-11-11 2018-05-25 株式会社东芝 摄像装置及自动控制系统
CN113192993A (zh) * 2019-03-26 2021-07-30 福州鑫图光电有限公司 一种图像传感器的成像方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6120523B2 (ja) * 2012-10-24 2017-04-26 オリンパス株式会社 撮像素子及び撮像装置
JPWO2014112002A1 (ja) * 2013-01-15 2017-01-19 オリンパス株式会社 撮像素子、及び撮像装置
CN103441134A (zh) * 2013-09-02 2013-12-11 上海集成电路研发中心有限公司 一种cis的像素阵列
CN103442185B (zh) * 2013-09-02 2018-06-22 上海集成电路研发中心有限公司 一种cmos图像像素阵列
KR101373132B1 (ko) * 2013-09-03 2014-03-14 (주)실리콘화일 마이크로 렌즈를 이용한 위상차 검출 픽셀
JP2015060121A (ja) * 2013-09-19 2015-03-30 株式会社東芝 カラーフィルタアレイおよび固体撮像素子
CN103545334B (zh) * 2013-10-30 2018-10-16 上海集成电路研发中心有限公司 3d cmos图像传感器的像素单元
US10366674B1 (en) * 2016-12-27 2019-07-30 Facebook Technologies, Llc Display calibration in electronic displays
EP3700181A4 (en) * 2017-10-19 2020-12-02 Sony Corporation ELECTRONIC DEVICE
KR102513680B1 (ko) * 2018-06-08 2023-03-24 엘지이노텍 주식회사 카메라 모듈 및 그의 깊이 정보 추출 방법
WO2023153107A1 (ja) * 2022-02-14 2023-08-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置
WO2023153108A1 (ja) * 2022-02-14 2023-08-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007127746A (ja) * 2005-11-02 2007-05-24 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置
CN101222642A (zh) * 2007-01-05 2008-07-16 株式会社东芝 包括cmos型图像传感器的固体摄像装置
CN102098456A (zh) * 2009-12-15 2011-06-15 株式会社东芝 可扩大动态范围的固体摄像装置
WO2011132619A1 (ja) * 2010-04-20 2011-10-27 富士フイルム株式会社 固体撮像素子及び撮像装置
JP2011250325A (ja) * 2010-05-28 2011-12-08 Fujifilm Corp 撮像装置及び位相差検出画素を持つ固体撮像素子並びに撮像装置の駆動制御方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2739586B2 (ja) 1989-02-10 1998-04-15 富士写真フイルム株式会社 カラー固体撮像デバイス
JPH0823543A (ja) 1994-07-07 1996-01-23 Canon Inc 撮像装置
DE19616440A1 (de) 1996-04-25 1997-10-30 Eastman Kodak Co Verfahren und Vorrichtung zur Gewinnung eines vollen Farbbildes oder Multispektralbildes aus Bilddaten eines CCD-Bildsensors mit Mosaik-Farbfilter
JP3724882B2 (ja) * 1996-08-14 2005-12-07 シャープ株式会社 カラー固体撮像装置
US6882364B1 (en) * 1997-12-02 2005-04-19 Fuji Photo Film Co., Ltd Solid-state imaging apparatus and signal processing method for transforming image signals output from a honeycomb arrangement to high quality video signals
DE69924308T2 (de) 1998-01-20 2006-03-09 Hewlett-Packard Development Co., L.P., Houston Farbbildaufnahmegerät
US7218348B2 (en) * 2000-06-02 2007-05-15 Fujifilm Corporation Solid-state electronic imaging device and method of controlling opertion thereof
EP1337115B1 (en) 2000-09-07 2010-03-10 Nikon Corporation Image processor and colorimetric system converting method
JP4423452B2 (ja) * 2000-12-27 2010-03-03 富士フイルム株式会社 固体撮像装置
JP4421793B2 (ja) * 2001-07-13 2010-02-24 富士フイルム株式会社 ディジタルカメラ
JP2003204488A (ja) * 2001-10-30 2003-07-18 Mitsubishi Electric Corp 撮像装置および撮像装置を具備する携帯端末
JP2003163937A (ja) * 2001-11-26 2003-06-06 Fuji Photo Film Co Ltd 固体撮像素子および撮像装置
JP4207736B2 (ja) * 2003-10-01 2009-01-14 ソニー株式会社 固体撮像装置
JP5151075B2 (ja) 2005-06-21 2013-02-27 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
JP5040458B2 (ja) * 2007-06-16 2012-10-03 株式会社ニコン 固体撮像素子及びこれを用いた撮像装置
US7745779B2 (en) 2008-02-08 2010-06-29 Aptina Imaging Corporation Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers
JP5472584B2 (ja) * 2008-11-21 2014-04-16 ソニー株式会社 撮像装置
JP5359465B2 (ja) * 2009-03-31 2013-12-04 ソニー株式会社 固体撮像装置、固体撮像装置の信号処理方法および撮像装置
JP5471117B2 (ja) 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
CN102483510B (zh) * 2009-11-20 2015-04-15 富士胶片株式会社 固态成像装置
KR101590146B1 (ko) * 2010-08-24 2016-02-01 후지필름 가부시키가이샤 고체 촬상 장치
CN103444192B (zh) * 2011-03-31 2014-11-26 富士胶片株式会社 立体成像装置和立体成像方法
WO2012165255A1 (ja) * 2011-06-02 2012-12-06 富士フイルム株式会社 固体撮像装置及びその製造方法
JP5774501B2 (ja) * 2012-01-12 2015-09-09 株式会社東芝 固体撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007127746A (ja) * 2005-11-02 2007-05-24 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置
CN101222642A (zh) * 2007-01-05 2008-07-16 株式会社东芝 包括cmos型图像传感器的固体摄像装置
CN102098456A (zh) * 2009-12-15 2011-06-15 株式会社东芝 可扩大动态范围的固体摄像装置
WO2011132619A1 (ja) * 2010-04-20 2011-10-27 富士フイルム株式会社 固体撮像素子及び撮像装置
JP2011250325A (ja) * 2010-05-28 2011-12-08 Fujifilm Corp 撮像装置及び位相差検出画素を持つ固体撮像素子並びに撮像装置の駆動制御方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107017269A (zh) * 2015-10-06 2017-08-04 三星电子株式会社 包括分色元件的图像传感器
CN107017269B (zh) * 2015-10-06 2022-01-18 三星电子株式会社 包括分色元件的图像传感器
CN108076263A (zh) * 2016-11-11 2018-05-25 株式会社东芝 摄像装置及自动控制系统
CN108076263B (zh) * 2016-11-11 2020-07-14 株式会社东芝 摄像装置及自动控制系统
CN113192993A (zh) * 2019-03-26 2021-07-30 福州鑫图光电有限公司 一种图像传感器的成像方法
CN113192993B (zh) * 2019-03-26 2023-04-11 福州鑫图光电有限公司 一种图像传感器的成像方法

Also Published As

Publication number Publication date
WO2013099910A1 (ja) 2013-07-04
CN104025579B (zh) 2016-05-04
US20140285629A1 (en) 2014-09-25
US9143760B2 (en) 2015-09-22
JPWO2013099910A1 (ja) 2015-05-07
JP5661201B2 (ja) 2015-01-28

Similar Documents

Publication Publication Date Title
CN104025579B (zh) 固体摄像装置
CN102884796B (zh) 彩色成像元件
US20110317048A1 (en) Image sensor with dual layer photodiode structure
CN103517045B (zh) 固体摄像器件及其控制方法以及电子装置
CN104012082A (zh) 固态图像拾取装置和相机系统
CN104185983B (zh) 摄像元件、摄像装置以及摄像系统
CN106206628A (zh) 图像传感器和包括其的电子设备
US9188480B2 (en) Color filter array and image sensor
CN104412579A (zh) 彩色摄像元件以及摄像装置
EP2680592B1 (en) Color imaging device
US8743246B2 (en) Color imaging device
CN105556958A (zh) 固态成像装置、成像装置和电子装置
US8982253B2 (en) Color imaging element
CN104012085A (zh) 彩色摄像元件
WO2014007280A1 (ja) カラー撮像素子および撮像装置
JP2006165362A (ja) 固体撮像素子
JP6473350B2 (ja) カラー撮像素子
WO2014007279A1 (ja) カラー撮像素子および撮像装置
JP2014003116A (ja) 撮像素子
TW201721232A (zh) 使用整合在3d封裝中的單色cmos影像感測器的高解析度彩色視頻
CN104079903A (zh) 高动态范围的彩色及灰度图像传感器
WO2012114994A1 (ja) カラー撮像素子
CN103237181B (zh) 增大了感光面积的像素阵列
WO2023053530A1 (ja) 光検出装置及び電子機器
CN216873256U (zh) 共用微透镜部分遮挡相位对焦的图像传感器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160504

Termination date: 20191226