JPWO2013099910A1 - 固体撮像装置 - Google Patents

固体撮像装置 Download PDF

Info

Publication number
JPWO2013099910A1
JPWO2013099910A1 JP2013551720A JP2013551720A JPWO2013099910A1 JP WO2013099910 A1 JPWO2013099910 A1 JP WO2013099910A1 JP 2013551720 A JP2013551720 A JP 2013551720A JP 2013551720 A JP2013551720 A JP 2013551720A JP WO2013099910 A1 JPWO2013099910 A1 JP WO2013099910A1
Authority
JP
Japan
Prior art keywords
filter
filters
sub
array
array pattern
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013551720A
Other languages
English (en)
Other versions
JP5661201B2 (ja
Inventor
沖川 満
満 沖川
林 健吉
健吉 林
田中 誠二
誠二 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013551720A priority Critical patent/JP5661201B2/ja
Application granted granted Critical
Publication of JP5661201B2 publication Critical patent/JP5661201B2/ja
Publication of JPWO2013099910A1 publication Critical patent/JPWO2013099910A1/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14621Colour filter arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/257Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00Details of colour television systems
    • H04N2209/04Picture signal generators
    • H04N2209/041Picture signal generators using solid-state devices
    • H04N2209/042Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter

Abstract

立体視用の画像を得る固体撮像装置において、高解像度化し、偽色を低減する。カラーフィルタアレイ(20)は、Gフィルタ、Rフィルタ、Bを有する。これらのフィルタのうちいずれかがペアになる位相差画素に対応し、G,R,Bの各フィルタを含む基本配列パターン(BP1)が水平及び垂直方向に繰り返し配置されている。輝度情報の取得に最も寄与するGフィルタが、画素配列の水平方向(X方向)、垂直方向(Y方向)、及び斜め方向(DL方向,DR方向)の各ラインに配置されている。Rフィルタ、Bフィルタは、それぞれ斜め方向の各ラインに配置されている。Gフィルタの数は、Rフィルタ、Bフィルタのそれぞれの数よりも多い。

Description

本発明は、立体視用の画像を撮像する単板式の固体撮像装置に関する。
単板式の固体撮像装置は、光電変換素子(フォトダイオード)を2次元状に形成した基板上に、カラーフィルタアレイが配置されている。このカラーフィルタアレイは、各光電変換素子に特定の色フィルタ(フィルタセグメント)が対面するように、複数の色フィルタがモザイク状に配列されている。各画素は、光電変換素子と特定の色フィルタを有し、色フィルタに対応した特定の色信号を出力するから、その他の色信号が欠落している。そこで、表示用の多チャネル画像を得るには、欠落している色信号を周囲の画素から補間して取得する処理(デモザイク処理)を行う必要がある。
この場合に問題となるのが、被写体光に含まれる高周波信号に対する輝度や色の再現性である。具体的には、カラーフィルタアレイの色配列に応じて、各色の再現帯域を超えた高周波信号による折り返し(エイリアシング)が生じることにより、輝度や色の再現性が低下する。
単板式の固体撮像装置で広く用いられているカラーフィルタアレイの色配列は、原色系ベイヤー配列である。原色系ベイヤー配列とは、緑(G)フィルタを市松状に配置し、残りの部分に、赤(R)フィルタと青(B)フィルタとを均等に配置したものである。原色系ベイヤー配列では、Gフィルタが輝度信号への寄与率が大きいため、斜め方向に関しては、輝度の再現性が低く低解像度である。また、垂直及び水平方向の各ラインには、Gフィルタの他に、Rフィルタ及びBフィルタのうちいずれか一方のみが配置されているため、色の再現性が悪く偽色が生じ得る。
このため、単板式の固体撮像装置では、光学ローパスフィルタを固体撮像装置の入射側に配置し、被写体光から高周波信号をカットすることが行われている。しかし、光学ローパスフィルタを用いると、解像度が低下するという弊害があることから、カラーフィルタアレイの色配列の改良が試みられている。
例えば、R,G,Bの各フィルタを水平方向に所定の順に並べたものを1セットとし、このセットを垂直方向にジグザグにずらしながら配置することによって、カラーフィルタアレイにおける全方向(水平、垂直、斜め方向の直線)の各ライン上に全ての色が存在するようにした色配列が提案されている(特許文献1)。
また、R,G,Bの3つのフィルタのうち、Rフィルタ及びBフィルタを水平及び垂直方向にそれぞれ3画素おきに配置し、これらの間にGフィルタを配置する色配列も提案されている(特許文献2)。
しかし、特許文献1に記載の色配列では、全方向の各ライン上に全ての色が存在することにより偽色の発生が抑えられるが、R,G,Bの各フィルタの数が同一であり、Gフィルタの数が原色系ベイヤー配列の場合よりも少ないため、高解像度化に対しては有効でない。
これに対して、特許文献2に記載の色配列では、R,Bの各フィルタの数に対するGフィルタの数の比率が原色系ベイヤー配列の場合よりも多いため、高解像度化に対しては有効である。しかし、水平または垂直方向にGフィルタのみが配置されたラインが存在するため、偽色の抑制に対しては有効でない。
そこで、本出願人は、特願2011−162415号において、Gフィルタが全方向の各ライン上に存在し、かつ、R,Bの各フィルタが水平及び垂直方向の各ラインに存在する色配列のカラーフィルタアレイを有する固体撮像装置を提案している。また、この色配列は、Gフィルタの数が、R,Bの各フィルタの数よりも多い、例えば6×6画素に対応する基本配列パターンを、水平方向及び垂直方向に繰り返して配置したものである。
また、左右(あるいは上下)方向に光の入射角に選択性を持つ画素(以下、位相差画素という)のペアを、光の入射角に選択性がない通常の画素配列の中に設けておき、位相差画素の画素値に基づいて位相差(視差)に関する情報を得る固体撮像装置が知られている。位相差画素から得られる位相差に関する情報は、例えば、位相差方式と称されるAF処理に利用される。
さらに、近年では、全画素を位相差画素にすることによって、1つの固体撮像装置で立体視用の画像を得るデジタルカメラも提案されている。
特開平11−285012号公報 特開平8−23543号公報
全画素を位相差画素にした1つの固体撮像装置で立体視用の画像を得る場合、右目用の画像は、右側から入射する光を選択的に受光する右位相差画素によって取得され、左目用の画像は左側から入射する光を選択的に受光する左位相差画素から取得されるので、全画素数のうち半数を右位相差画素にし、残りの半数を左位相差画素にしておく必要がある。このため、固体撮像装置の全画素を通常の画素の場合に得られる画像と比較すると、右目用及び左目用の各画像は画素数が半減しているので、解像度が低いという問題がある。例えば、右位相差画素の列と左位相差画素の列を交互に配列すると、左右方向の解像度が半減してしまう。
また、右目用及び左目用の各画像の画素数を補間によって補うこともできるが、この場合は、もともとの画素数が少ないために偽色が発生しやすい。
本発明は、偽色を防止して、高解像度の立体視用画像を撮像可能な単板式の固体撮像装置を提供することを目的とする。
本発明の固体撮像装置は、ペア画素が配列された半導体基板と、ペア画素に対応して配列されたカラーフィルタアレイとを備える。ペア画素は、水平方向に隣接する2つの画素の各々から視差に応じた画素値を得る2つの画素からなる。また、ペア画素は、受光領域内において、水平方向及び垂直方向に二次元に配列されるとともに、水平方向に沿った行毎に比較したときに、1画素分ずらして配置されている。カラーフィルタアレイは、分光透過特性が異なったN種(Nは3以上の整数)の各フィルタが前記ペア画素に対応して配列される。また、カラーフィルタアレイは、基本配列パターンを水平方向及び垂直方向に繰り返して配列した形態をしている。基本配列パターンは、水平方向及び垂直方向に対して互いに直交する2つの斜め方向に沿って、N種のフィルタを所定のパターンで正方配列したものである。さらに、カラーフィルタアレイは、輝度信号への寄与率が最も高い第1フィルタが、水平方向、垂直方向、及びペア画素が3個以上並ぶ斜め方向の各ラインに配置されるとともに、残りの第2〜第Nフィルタは斜め方向の各ラインに配置されている。また、第1フィルタの個数が第2〜第Nフィルタの各個数よりも多い。
カラーフィルタアレイは、第1フィルタが斜め方向で隣接せず孤立した状態と、隣接した状態とを有することが好ましい。この場合、隣接した状態は、2×2個のペア画素に対応して、斜め方向に沿って正方配列されたものであることが好ましい。
基本配列パターンは、4つのサブ配列パターンを前記斜め方向に隣接して配置した形態であることが好ましい。サブ配列パターンは、斜め方向に沿った正方配列パターンであって、3×3個のペア画素に対応し、中心と四隅に第1フィルタが配置されたものである。
N種のフィルタが第1〜第3フィルタの3種類のフィルタからなる場合、基本配列パターンは、第1サブ配列パターンと第2サブ配列パターンが交互に隣接した配列であることが好ましい。第1サブ配列パターンは、中心に第1フィルタが配置され、この中心の第1フィルタに対して、一方の斜め方向に隣接して第2フィルタが配置され、他方の斜め方向に隣接して第3フィルタが配置されたものである。第2サブ配列パターンは、中心に第1フィルタが配置され、この中心の第1フィルタに対して、一方の斜め方向に隣接して第3フィルタが配置され、他方の斜め方向に隣接して第2フィルタが配置されたものである。
第1フィルタは緑色を透過し、第2フィルタは赤色を透過し、第3フィルタは青色を透過することが好ましい。
ペア画素及び各フィルタに対して1つずつマイクロレンズが設けられていることが好ましい。
第1サブ配列パターン及び前記第2サブ配列パターンは、それぞれ水平方向及び垂直方向に平行に隣接していることが好ましい。第1サブ配列パターン及び第2サブ配列パターンは、それぞれ水平方向及び垂直方向に1画素分ずらして隣接されていても良い。
本発明の固体撮像装置は、左右の位相差画素を1つのペア画素として、このペア画素を受光領域に配列したものであって、各ペア画素に対して1つの色フィルタを割り当てたカラーフィルタアレイを用いる。そして、このカラーフィルタアレイが、水平方向及び垂直方向に対して互いに直交する2つの斜め方向に沿ってN種のフィルタを所定のパターンで正方配列した基本配列パターンを、前記水平方向及び前記垂直方向に繰り返して配列した形態をしており、さらに、輝度信号への寄与率が最も高い第1フィルタが、水平方向、垂直方向、及びペア画素が3個以上並ぶ斜め方向の各ラインに配置されるとともに、残りの第2〜第Nフィルタは斜め方向の各ラインに配置され、第1フィルタの個数が第2〜第Nフィルタの各個数よりも多い色配列になっているので、立体視用の画像を得るために全画素を位相差画素にしても、偽色の発生を抑えつつ、解像度を向上させることができる。
固体撮像装置の構成を示す説明図である。 画素の構成を示す回路図である。 固体撮像装置の水平方向の断面図である。 ペア画素の配列を示す平面図である。 カラーフィルタアレイの構成を示す平面図である。 基本配列パターンの説明図である。 サンプリング点を示す説明図である。 他の基本配列パターンを示す平面図である。 他の基本配列パターンを示す平面図である。
図1に示すように、固体撮像装置10は、CMOS型イメージセンサであり、複数の画素11、垂直信号線12、読み出し用垂直走査回路13a及びリセット用垂直走査回路13b、水平走査回路14、各垂直走査回路13a,13b及び水平走査回路14を駆動する駆動回路(図示しない)、出力回路15等を備えている。
画素11は、半導体基板上に、水平方向(X方向)及び垂直方向(Y方向)に沿って二次元にされている。画素11は、受光光量に応じた電荷を生成するフォトダイオード(光電変換素子)と複数のトランジスタ(図2参照)を有している。また、全ての画素11は、内蔵する遮光膜の開口位置等によって水平方向に入射角の選択性を有する位相差画素であり、入射角の選択性が対称な2つの画素11がペアになるように隣接して配置されている。各画素11の画素値は、入射角の選択性にともなう視差に応じた値になる。画素11が配置された受光領域16上には、カラーフィルタアレイ(図5参照)が設けられている。
垂直信号線12は、各画素11で生成された電荷の量に応じた信号電圧を水平走査回路14に伝達させる配線であり、垂直方向に並ぶ画素11の各列に沿って設けられている。読み出し用垂直走査回路13a及びリセット用垂直走査回路13bは、は、水平方向に並ぶ画素11の各行を選択する回路であり、垂直方向に沿って順次に選択する。
水平走査回路14は、画素11の列毎に設けられた複数の垂直信号線12を選択する回路である。水平走査回路14は、読み出し用垂直走査回路13a及びリセット用垂直走査回路13bによる選択動作に同期して、水平方向に沿って垂直信号線12を順次に選択する。読み出し時には、各画素11の信号電圧は、水平走査回路14を介して出力回路15に順次に送られる。リセット時には、各画素11の電荷は、信号電圧として垂直信号線12に取り出されることなく、破棄される。出力回路15は、水平走査回路14から送られてきた信号電圧に対して種々の信号処理を施して出力する。
図2に示すように、各画素11は、フォトダイオードPD、リセットトランジスタRTr、アンプトランジスタATr、選択トランジスタSTrを有する。これらの各トランジスタは、例えば、n型MOSトランジスタである。
画素11の行毎に、リセット線RSTと選択線SELの2本の駆動線が通っており、同じ行に属する複数の画素11が接続されている。選択線SELの端部は、読み出し用垂直走査回路13aに接続されている。リセット線RSTの端部は、リセット用垂直走査回路13bに接続されている。読み出し用及びリセット用垂直走査回路13a,13bにより、選択線SELとリセット線RSTとが順次駆動されて、行単位で信号電圧の読み出しとリセットとが順次行われる。
フォトダイオードPDは、受光した光を光電変換して、その光量に応じた量の電荷を生成する。フォトダイオードPDは、アノードがグランドに接続されており、カソードがアンプトランジスタATrのゲート電極に接続されている。フォトダイオードPDのカソードとアンプトランジスタATrのゲート電極との接続部分が、フォトダイオードPDで生成された電荷を蓄積するフローティングディフュージョンFDとなっている。
リセットトランジスタRTrは、ソース電極がフローティングディフュージョンFDにそれぞれ接続され、ドレイン電極に電源電圧VDDが印加されており、リセットパルスがリセット線RSTを介してゲート電極に与えられることによりオン状態となる。リセットトランジスタRTrがオン状態となると、フローティングディフュージョンFDに電源電圧VDDが印加され、蓄積電荷が破棄される。
アンプトランジスタATrは、ゲート電極がフローティングディフュージョンFDに接続され、ドレイン電極に電源電位VDDが印加されている。アンプトランジスタATrはフローティングディフュージョンFDの蓄積電荷に応じた信号電圧をソース電極から出力する。
選択トランジスタSTrは、ドレイン電極がアンプトランジスタATrのソース電極に、ソース電極が垂直信号線12にそれぞれ接続されており、選択パルスが選択線SELを介してゲートに与えられることによりオン状態となる。選択トランジスタSTrがオン状態となると、アンプトランジスタATrのソース電極からから出力された信号電圧が垂直信号線12に与えられる。
なお、画素11は、フォトダイオードPDとフローティングディフュージョンFDとの間に転送トランジスタをさらに設けた4トランジスタ構成等であってもよい。
図3に示すように、フォトダイオードPDは、p型半導体基板30の表層にn型半導体領域として形成される。フォトダイオードPDは、p型半導体基板30とn型半導体領域によりPN接合によって光電変換を行い、入射光量に応じた信号電荷を発生する。p型半導体基板30の表面上には、配線層31が形成されている。配線層31には、アモルファスシリコン等で形成された電極32や、アルミニウム等で形成された配線33,34が設けられており、これらが前述の各トランジスタの電極や配線を構成している。
配線層31の上には、二酸化シリコン(SiO)等により形成された平坦化膜35が設けられている。平坦膜35上には、前述のカラーフィルタアレイ20が設けられている。
カラーフィルタアレイ20の上にはマイクロレンズ36が形成されている。マイクロレンズ36は、SiOや透明樹脂材等からなり、カラーフィルタアレイ20の各色のフィルタに対して1つずつ設けられている。すなわち、マイクロレンズ36は、水平方向に隣接する2つの画素11にまたがって設けられており、入射光を2つの画素11の各フォトダイオードPDに向けて集光する。ここで、2つの画素を区別するために、符号11a,11bを付している。マイクロレンズ36を出射した光は、直下に設けられているカラーフィルタアレイ20の各色フィルタによって所定の色になって各画素11a,11bのフォトダイオードPDに入射する。
電極32上には図示しない絶縁膜を介して、フォトダイオードPDの開口の位置を制限する遮光膜37が設けられている。遮光膜37による開口38の位置は、隣接する2つの画素11aと画素11bとで水平方向にそって逆向きにずれている。この開口38の位置やマイクロレンズ36がこれら2つの画素11a,11bにまたがって設けられていることによって、画素11a,11bはそれぞれ左右に、光の入射角に対する逆向きの選択性を有する。したがって、水平方向に隣接する画素11aと画素11bのペアは、視差に関する情報を得るための位相差画素のペアである。以下、画素11aと画素11bをペア画素41と総称する。また、ペア画素41を構成する2画素のうち、左側の画素11aを左画素11a、右側の画素11bを右画素11bという。
図4に示すように、左画素11a(空白)と右画素11b(斜線)は、水平方向及び垂直方向にそれぞれ交互に配置されている。このため、破線で囲んで示すように、水平方向に隣接する左画素11aと右画素11bの対で形成されるペア画素41は、水平方向及び垂直方向に沿って配列されているが、行毎に比較するとペア画素41の半ピッチ分(1画素分)ズレた配置となっている。
図5に示すように、カラーフィルタアレイ20は、平面形状が水平方向及び垂直方向に沿った辺を有する長方形状であり、互いに分光透過特性が異なる複数種類の色フィルタ(フィルタセグメント)、例えば、Gフィルタ、Rフィルタ、Bフィルタを備える。同図の「G」,「R」,「B」がそれぞれ、Gフィルタ、Rフィルタ、Bフィルタを示している。各色フィルタは、対応する色を透過する分光透過特性を有する。Gフィルタ、Rフィルタ、Bフィルタのうちいずれか1つが1つのペア画素41を覆っている。符号D1,D2は、水平方向及び垂直方向に対して45度に傾斜した斜め方向を示す。
図6に示すように、カラーフィルタアレイ20の色配列は、斜め方向D1及び斜め方向D2に沿った6×6のペア画素41に対応する基本配列パターンBP1を、斜め方向D1,D2に沿って配列したものである。
また、基本配列パターンBP1は、斜め方向D1,D2に沿って配列された3×3のペア画素41に対応する第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bが、斜め方向D1,D2に隣り合うように配列されたものである。
第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bでは、Gフィルタが、中央と四隅に配置され、水平方向及び垂直方向に沿った両対角線上に並んでいる。第1サブ配列パターンBP1aでは、中央のGフィルタを斜め方向D1に挟んで2つのRフィルタが配置され、中央のGフィルタを斜め方向D2に挟んで2つのBフィルタが配置されている。これとは逆に、第2サブ配列パターンBPbでは、中央のGフィルタを斜め方向D1に挟んで2つのBフィルタが配置され、中央のGフィルタを斜め方向D2に挟んで2つのRフィルタが配置されている。すなわち、第1サブ配列パターンBP1aと第2サブ配列パターンBP1bとは、Gフィルタが同一配列であるが、RフィルタとBフィルタの位置関係が逆である。
第1サブ配列パターンBPa及び第2サブ配列パターンBPbにおけるGフィルタ、Rフィルタ、Bフィルタの数の比率は、いずれも5:2:2である。したがって、基本配列パターンBPにおけるGフィルタ、Rフィルタ、Bフィルタの数の比率は、5:2:2であり、Gフィルタの数はRフィルタの数やBフィルタの数よりも多い。
第1サブ配列パターンBPa及び第2サブ配列パターンBPbの中央のGフィルタ46は、水平及び垂直方向にGフィルタが隣接せず孤立している。これに対して、第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bの四隅のGフィルタは、斜め方向D1,D2に沿った2×2のペア画素41に対応したGフィルタ群47を形成している。Gフィルタ群47は、斜め方向D1,D2に沿った正方配列である。孤立したGフィルタ46と正方配列のGフィルタ群47とは、水平方向及び垂直方向に交互に並んでいる。
上記色配列により、カラーフィルタアレイ20では、水平方向(X方向)、垂直方向(Y方向)、及び斜め方向D1,D2の各ラインにGフィルタが配置されている。また、水平方向または垂直方向において少なくとも2個のGフィルタが隣接している。また、中央では、4個のGフィルタが正方配列している。他方、Rフィルタ及びBフィルタは、それぞれ斜め方向D1,D2各ライン上に配置されている。
上述のように構成される固体撮像装置10には、マイクロレンズ36側から受光領域16に光が入射する。受光領域16に入射した光は、マイクロレンズ42によって集光されつつ、カラーフィルタアレイ20を透過し、各色に分光されて、各画素11のフォトダイオードPDに入射する。
フォトダイオードPDでは、光電変換により電荷が生成され、生成された電荷がフローティングディフュージョンFDに蓄積される。この蓄積電荷に応じた信号電圧がアンプトランジスタATrにより生成される。
そして、読み出し用垂直走査回路13aは、画素11の行毎に設けられた選択線SELに順次に電圧を印加することにより、選択トランジスタSTrを行毎にオン状態とする。これにより、画素11の行毎に信号電圧が垂直信号線12に出力される。また、水平走査回路14は、垂直信号線12を順次に選択することにより、各垂直信号線12に出力された信号電圧を出力回路15に送る。各信号電圧は、出力回路15により信号処理が行われ、外部に出力される。なお、リセット用垂直走査回路13bは、1行分の信号電圧の出力が終了すると、該行のリセット線RSTに電圧を印加することにより、リセットトランジスタRTrをオン状態とする。これにより、該行のフローティングディフュージョンFDに蓄積された電荷が破棄される。
以上の動作が行単位で繰り返し行われ、1画面分の信号電圧が出力データとして出力される。この出力データには、左画素11aと右画素11bの情報がともに入っているので、図示しない信号処理回路によって、左画素11aのデータと右画素11bのデータを分離し、それぞれから、立体視用の左右に視差のある二種類の表示画像を生成する。
出力データは、カラーフィルタアレイ20の各フィルタにより割り当てられた色以外の色情報が欠落した画像(いわゆるRAW画像)である。このため、出力データを分離してできる左画素11aからなるデータ(以下、左画素データという)及び右画素11bからなるデータ(以下、右画素データという)もまた色情報が欠落している。このため、左画素データ及び右画素データから左右それぞれの表示画像として、多チャネル画像を得るために、不図示の信号処理回路により、欠落した色情報を周囲の画素から補間して取得するデモザイク処理が行われる。
また、図7に示すように、左画素データ及び右画素データにおける被写体のサンプリング点は、いわゆるハニカム状である。このため、表示画像の生成時には、正方配列の点のデータが得られるように、各サンプリング点間のデータが補間により生成される。図7では、太線で囲んで基本配列パターンBP1との対応関係を示している。
なお、デモザイク処理により、各サンプリング点について、G,R,Bの各色信号が得られる。輝度信号(Y)は、例えば、Y=0.299・r+0.587・g+0.114・bにより得られる。ここで、r,g,bは、それぞれR信号、G信号、B信号を表す。このように、G信号は、重み付けが他の信号より大きく、輝度信号Yの取得に最も寄与する。
また、カラーフィルタアレイ20は、基本配列パターンBP1が斜め方向D1,D2に繰り返し配列され、輝度情報の取得に最も寄与するGフィルタが、任意のライン(水平、垂直、斜め方向の直線)上に全て存在し、かつ、Gフィルタの数がRフィルタやBフィルタの数より多いため、デモザイク処理によるエイリアシングが抑制され、輝度情報の再現性が高く、高解像度の輝度情報が得られる。
また、カラーフィルタアレイ20は、Gフィルタ以外のRフィルタとBフィルタとが、それぞれ斜め方向D1,D2の各ライン上に存在するため、デモザイク処理において偽色を抑制することができる。このため、入射光から高周波成分をカットするための光学ローパスフィルタを用いなくても高解像度化可能である。
また、カラーフィルタアレイ20は、2×2画素に対応した正方配列のGフィルタ群47が存在するため、左画素データ及び右画素データからGフィルタ群47に対応する4つの画素値を抽出し、斜め方向D1の画素値の差分絶対値、斜め方向D2の画素値の差分絶対値、水平方向及び垂直方向の画素値の差分絶対値をそれぞれ算出し、差分絶対値が小さい方向を求めることにより、相関が高い方向を判断することができる。この相関方向は、デモザイク処理に用いられる。
また、左画素データ及び右画素データから、第1サブ配列パターンまたは第2サブ配列パターンを中心として5×5のサンプリング点のデータを抽出すると、Gフィルタ群47に対応する2×2画素が四隅に位置する。このため、4方向の相関方向の判別を最小画素間隔のGフィルタの画素値を用いて精度よく行うことができる。
なお、カラーフィルタアレイ20の配列パターンとして、第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bがそれぞれ水平方向及び垂直方向にズレなく並べられた基本配列パターンBP1を斜め方向D1,D2に並べた配列にしているが、図8に示すように、第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bを水平方向及び垂直方向に1画素分ずらして組み合わせた基本配列パターンBP2を用いても良い。基本配列パターンBP2を斜め方向D1,D2に並べたカラーフィルタアレイを用いる場合も、上述の実施形態と同様の効果を得ることができる。
なお、上述の実施形態では、画素11が水平方向及び垂直方向に正方配列しているが、例えば、画素11の配列を45度回転したハニカム配列にしても良い。この場合、カラーフィルタアレイ20の色配列も45度回転させれば良い。
なお、カラーフィルタアレイ20の色配列は、例えば、図9に示す5×5画素の基本配列パターンBP3を水平及び垂直方向に配列したものであってもよい。カラーフィルタアレイの色配列は、基本配列パターンが水平及び垂直方向に繰り返し配列され、輝度情報の取得に最も寄与するGフィルタが、任意のライン(水平、垂直、斜め方向の直線)上に全て存在するとともに、Gフィルタの数がRフィルタやBフィルタの数より多く、Gフィルタ以外のRフィルタとBフィルタとが、それぞれ斜め方向D1,D2の各ライン上に存在するものであればよい。
カラーフィルタアレイの色配列は、G,R,Bの3色に限られず、4色以上としてもよい。例えば、G,R,Bにエメラルド(E)を加えた4色とすることが可能である。また、カラーフィルタアレイの色配列は、シアン(C)、マゼンタ(M)、イエロー(Y)の補色系としてもよい。この場合には、さらにGを加えた4色の補色系とすることも可能である。
なお、上述の実施形態では、固体撮像装置がCMOS型であるが、CCD型の固体撮像装置にも本発明は好適である。また、フォトダイオードを制御するための配線層が設けられた表面側からフォトダイオードに光が照射される表面照射型イメージセンサに対しても、配線層を介さずに裏面側からフォトダイオードに光が照射されるようにした裏面照射型イメージセンサに対しても本発明を適用することができる。
10 固体撮像装置
11 画素
16 受光領域
20 カラーフィルタアレイ
41 ペア画素
垂直信号線12は、各画素11で生成された電荷の量に応じた信号電圧を水平走査回路14に伝達させる配線であり、垂直方向に並ぶ画素11の各列に沿って設けられている。
読み出し用垂直走査回路13a及びリセット用垂直走査回路13bは、水平方向に並ぶ画素11の各行を選択する回路であり、垂直方向に沿って順次に選択する。
第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bでは、 Gフィルタが、中央と四隅に配置され、水平方向及び垂直方向に沿った両対角線上に並んでいる。 第1サブ配列パターンBP1aでは、中央のGフィルタを斜め方向D1に挟んで2つのRフィルタが配置され、中央のGフィルタを斜め方向D2に挟んで2つのBフィルタが配置されている。これとは逆に、第2サブ配列パターンBPbでは、中央のGフィルタを斜め方向D1に挟んで2つのBフィルタが配置され、中央のGフィルタを斜め方向D2に挟んで2つのRフィルタが配置されている。すなわち、第1サブ配列パターンBP1aと第2サブ配列パターンBP1bとは、Gフィルタが同一配列であるが、RフィルタとBフィルタの位置関係が逆である。
第1サブ配列パターンBPa及び第2サブ配列パターンBPbにおけるGフィルタ、Rフィルタ、Bフィルタの数の比率は、いずれも5:2:2である。したがって、基本配列パターンBPにおけるGフィルタ、Rフィルタ、Bフィルタの数の比率は、5:2:2であり、Gフィルタの数はRフィルタの数やBフィルタの数よりも多い。
第1サブ配列パターンBPa及び第2サブ配列パターンBPbの中央のGフィルタ46は、斜め方向にGフィルタが隣接せず孤立している。これに対して、第1サブ配列パターンBP1a及び第2サブ配列パターンBP1bの四隅のGフィルタは、斜め方向D1, D2に沿った2×2のペア画素41に対応したGフィルタ群47を形成している。Gフィルタ群47は、 斜め方向D1, D2に沿った正方配列である。孤立したGフィルタ46と正方配列のGフィルタ群47とは、水平方向及び垂直方向に交互に並んでいる。
上述のように構成される固体撮像装置10には、マイクロレンズ36側から受光領域16に光が入射する。受光領域16に入射した光は、マイクロレンズ36によって集光されつつ、カラーフィルタアレイ20を透過し、各色に分光されて、各画素11のフォトダイオードPDに入射する。

Claims (9)

  1. 水平方向に隣接する2つの画素の各々から視差に応じた画素値を得るペア画素が、水平方向及び垂直方向に二次元に配列されるとともに、前記水平方向に沿った行毎に比較した場合に、1画素分ずらして配置された受光領域を有する半導体基板と、
    分光透過特性が異なったN種(Nは3以上の整数)の各フィルタが前記ペア画素に対応して配列されるカラーフィルタであって、前記水平方向及び前記垂直方向に対して互いに直交する2つの斜め方向に沿って前記N種のフィルタを所定のパターンで正方配列した基本配列パターンを、前記水平方向及び前記垂直方向に繰り返して配列した形態をしており、輝度信号への寄与率が最も高い第1フィルタが、前記水平方向、前記垂直方向、及び前記ペア画素が3個以上並ぶ斜め方向の各ラインに配置されるとともに、残りの第2〜第Nフィルタは前記斜め方向の各ラインに配置され、前記第1フィルタの個数が前記第2〜第Nフィルタの各個数よりも多いカラーフィルタアレイと、
    を備えることを特徴とする固体撮像装置。
  2. 前記カラーフィルタアレイは、前記第1フィルタが前記斜め方向で隣接せず孤立した状態と、隣接した状態とを有することを特徴とする請求の範囲第1項に記載の固体撮像装置。
  3. 前記隣接した状態は、2×2個の前記ペア画素に対応して、前記斜め方向に沿って正方配列されたものであることを特徴とする請求の範囲第2項に記載の固体撮像装置。
  4. 前記基本配列パターンは、4つのサブ配列パターンを前記斜め方向に隣接して配置した形態であり、
    前記サブ配列パターンは、前記斜め方向に沿った正方配列パターンであって、3×3個の前記ペア画素に対応し、中心と四隅に前記第1フィルタが配置されていることを特徴とする請求の範囲第3項に記載の固体撮像装置。
  5. 前記N種のフィルタは、第1〜第3フィルタの3種のフィルタからなり、
    前記サブ配列パターンは、中心に前記第1フィルタが配置され、該中心の前記第1フィルタに対して、一方の前記斜め方向に隣接して前記第2フィルタが配置され、他方の前記斜め方向に隣接して前記第3フィルタが配置された第1サブ配列パターンと、前記第2サブ配列パターンは、中心に前記第1フィルタが配置され、該中心の前記第1フィルタに対して、一方の前記斜め方向に隣接して前記第3フィルタが配置され、他方の前記斜め方向に隣接して前記第2フィルタが配置された第2サブ配列パターンとからなり、
    前記基本配列パターンは、前記第1サブ配列パターンと前記第2サブ配列パターンが交互に隣接した配列であることを特徴とする請求の範囲第4項に記載の固体撮像装置。
  6. 前記第1フィルタは緑色を透過し、前記第2フィルタは赤色を透過し、前記第3フィルタは青色を透過することを特徴とする請求の範囲第5項に記載の固体撮像装置。
  7. 前記ペア画素及び各前記フィルタに対して1つずつマイクロレンズが設けられていることを特徴とする請求の範囲第1項に記載の固体撮像装置。
  8. 前記第1サブ配列パターン及び前記第2サブ配列パターンは、それぞれ前記水平方向及び前記垂直方向に平行に隣接していることを特徴とする請求の範囲第5項に記載の固体撮像装置。
  9. 前記第1サブ配列パターン及び前記第2サブ配列パターンは、それぞれ前記水平方向及び前記垂直方向に1画素分ずらして隣接されていることを特徴とする請求の範囲第6項に記載の固体撮像装置。
JP2013551720A 2011-12-27 2012-12-26 固体撮像装置 Expired - Fee Related JP5661201B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013551720A JP5661201B2 (ja) 2011-12-27 2012-12-26 固体撮像装置

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011285902 2011-12-27
JP2011285902 2011-12-27
PCT/JP2012/083582 WO2013099910A1 (ja) 2011-12-27 2012-12-26 固体撮像装置
JP2013551720A JP5661201B2 (ja) 2011-12-27 2012-12-26 固体撮像装置

Publications (2)

Publication Number Publication Date
JP5661201B2 JP5661201B2 (ja) 2015-01-28
JPWO2013099910A1 true JPWO2013099910A1 (ja) 2015-05-07

Family

ID=48697394

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013551720A Expired - Fee Related JP5661201B2 (ja) 2011-12-27 2012-12-26 固体撮像装置

Country Status (4)

Country Link
US (1) US9143760B2 (ja)
JP (1) JP5661201B2 (ja)
CN (1) CN104025579B (ja)
WO (1) WO2013099910A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6120523B2 (ja) * 2012-10-24 2017-04-26 オリンパス株式会社 撮像素子及び撮像装置
WO2014112002A1 (ja) * 2013-01-15 2014-07-24 オリンパス株式会社 撮像素子、及び撮像装置
CN103441134A (zh) * 2013-09-02 2013-12-11 上海集成电路研发中心有限公司 一种cis的像素阵列
CN103442185B (zh) * 2013-09-02 2018-06-22 上海集成电路研发中心有限公司 一种cmos图像像素阵列
KR101373132B1 (ko) * 2013-09-03 2014-03-14 (주)실리콘화일 마이크로 렌즈를 이용한 위상차 검출 픽셀
JP2015060121A (ja) * 2013-09-19 2015-03-30 株式会社東芝 カラーフィルタアレイおよび固体撮像素子
CN103545334B (zh) * 2013-10-30 2018-10-16 上海集成电路研发中心有限公司 3d cmos图像传感器的像素单元
KR102409389B1 (ko) * 2015-10-06 2022-06-15 삼성전자주식회사 색분리 소자를 포함하는 이미지 센서
JP6699897B2 (ja) * 2016-11-11 2020-05-27 株式会社東芝 撮像装置、自動制御システム及びシステム
US10366674B1 (en) 2016-12-27 2019-07-30 Facebook Technologies, Llc Display calibration in electronic displays
WO2019078338A1 (ja) * 2017-10-19 2019-04-25 ソニー株式会社 電子機器
KR102513680B1 (ko) * 2018-06-08 2023-03-24 엘지이노텍 주식회사 카메라 모듈 및 그의 깊이 정보 추출 방법
CN113130526B (zh) * 2019-03-26 2023-04-28 福州鑫图光电有限公司 一种高灵敏度的图像传感器
WO2023153108A1 (ja) * 2022-02-14 2023-08-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置
WO2023153107A1 (ja) * 2022-02-14 2023-08-17 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007127746A (ja) * 2005-11-02 2007-05-24 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置
JP2008312073A (ja) * 2007-06-16 2008-12-25 Nikon Corp 固体撮像素子及びこれを用いた撮像装置
WO2011132619A1 (ja) * 2010-04-20 2011-10-27 富士フイルム株式会社 固体撮像素子及び撮像装置
JP2011250325A (ja) * 2010-05-28 2011-12-08 Fujifilm Corp 撮像装置及び位相差検出画素を持つ固体撮像素子並びに撮像装置の駆動制御方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2739586B2 (ja) 1989-02-10 1998-04-15 富士写真フイルム株式会社 カラー固体撮像デバイス
JPH0823543A (ja) 1994-07-07 1996-01-23 Canon Inc 撮像装置
DE19616440A1 (de) 1996-04-25 1997-10-30 Eastman Kodak Co Verfahren und Vorrichtung zur Gewinnung eines vollen Farbbildes oder Multispektralbildes aus Bilddaten eines CCD-Bildsensors mit Mosaik-Farbfilter
JP3724882B2 (ja) * 1996-08-14 2005-12-07 シャープ株式会社 カラー固体撮像装置
US6882364B1 (en) * 1997-12-02 2005-04-19 Fuji Photo Film Co., Ltd Solid-state imaging apparatus and signal processing method for transforming image signals output from a honeycomb arrangement to high quality video signals
EP0930789B1 (en) 1998-01-20 2005-03-23 Hewlett-Packard Company, A Delaware Corporation Colour image pickup device
US7218348B2 (en) * 2000-06-02 2007-05-15 Fujifilm Corporation Solid-state electronic imaging device and method of controlling opertion thereof
WO2002021849A1 (fr) 2000-09-07 2002-03-14 Nikon Corporation Processeur d'image et procede de conversion de systeme colorimetrique
JP4423452B2 (ja) * 2000-12-27 2010-03-03 富士フイルム株式会社 固体撮像装置
JP4421793B2 (ja) * 2001-07-13 2010-02-24 富士フイルム株式会社 ディジタルカメラ
JP2003204488A (ja) * 2001-10-30 2003-07-18 Mitsubishi Electric Corp 撮像装置および撮像装置を具備する携帯端末
JP2003163937A (ja) * 2001-11-26 2003-06-06 Fuji Photo Film Co Ltd 固体撮像素子および撮像装置
JP4207736B2 (ja) * 2003-10-01 2009-01-14 ソニー株式会社 固体撮像装置
JP5151075B2 (ja) 2005-06-21 2013-02-27 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
JP5085140B2 (ja) * 2007-01-05 2012-11-28 株式会社東芝 固体撮像装置
US7745779B2 (en) 2008-02-08 2010-06-29 Aptina Imaging Corporation Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers
JP5472584B2 (ja) * 2008-11-21 2014-04-16 ソニー株式会社 撮像装置
JP5359465B2 (ja) * 2009-03-31 2013-12-04 ソニー株式会社 固体撮像装置、固体撮像装置の信号処理方法および撮像装置
JP5471117B2 (ja) 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
US8102460B2 (en) * 2009-11-20 2012-01-24 Fujifilm Corporation Solid-state imaging device
JP5422362B2 (ja) * 2009-12-15 2014-02-19 株式会社東芝 固体撮像装置
WO2012026292A1 (ja) * 2010-08-24 2012-03-01 富士フイルム株式会社 固体撮像装置
JP5433109B2 (ja) * 2011-03-31 2014-03-05 富士フイルム株式会社 立体撮像装置および立体撮像方法
JP5579931B2 (ja) * 2011-06-02 2014-08-27 富士フイルム株式会社 固体撮像装置
JP5774501B2 (ja) * 2012-01-12 2015-09-09 株式会社東芝 固体撮像装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007127746A (ja) * 2005-11-02 2007-05-24 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置
JP2008312073A (ja) * 2007-06-16 2008-12-25 Nikon Corp 固体撮像素子及びこれを用いた撮像装置
WO2011132619A1 (ja) * 2010-04-20 2011-10-27 富士フイルム株式会社 固体撮像素子及び撮像装置
JP2011250325A (ja) * 2010-05-28 2011-12-08 Fujifilm Corp 撮像装置及び位相差検出画素を持つ固体撮像素子並びに撮像装置の駆動制御方法

Also Published As

Publication number Publication date
WO2013099910A1 (ja) 2013-07-04
US9143760B2 (en) 2015-09-22
US20140285629A1 (en) 2014-09-25
CN104025579B (zh) 2016-05-04
JP5661201B2 (ja) 2015-01-28
CN104025579A (zh) 2014-09-03

Similar Documents

Publication Publication Date Title
JP5661201B2 (ja) 固体撮像装置
US10032810B2 (en) Image sensor with dual layer photodiode structure
JP5262823B2 (ja) 固体撮像装置および電子機器
KR102614792B1 (ko) 반도체 장치 및 전자 기기
US8208054B2 (en) Solid-state imaging device
JP4978614B2 (ja) 固体撮像装置
WO2013108656A1 (ja) 固体撮像素子およびカメラシステム
US20070064129A1 (en) Solid-state imaging device
US20130341750A1 (en) Solid-state imaging device, method for controlling the same, and electronic apparatus
JP4404561B2 (ja) Mos型カラー固体撮像装置
JP2006165362A (ja) 固体撮像素子
JP2014003116A (ja) 撮像素子
WO2014007279A1 (ja) カラー撮像素子および撮像装置
JP2007288294A (ja) 固体撮像装置およびカメラ
JPWO2010100896A1 (ja) 撮像装置および両面照射型固体撮像素子
KR100837454B1 (ko) 고체 촬상 장치
JP2010021450A (ja) 固体撮像素子
JP2005110104A (ja) 固体撮像装置
KR102219784B1 (ko) 컬러 필터 어레이 및 이를 구비한 이미지 센서
TW201630174A (zh) 固體攝像裝置
EP2784820A1 (en) Solid state imaging device
JP2017050467A (ja) 固体撮像装置および固体撮像装置の製造方法
WO2023053530A1 (ja) 光検出装置及び電子機器
JP2005210359A (ja) 2板式カラー固体撮像装置及びデジタルカメラ
JP2023005460A (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141202

R150 Certificate of patent or registration of utility model

Ref document number: 5661201

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees