JP4423452B2 - 固体撮像装置 - Google Patents
固体撮像装置 Download PDFInfo
- Publication number
- JP4423452B2 JP4423452B2 JP2000398244A JP2000398244A JP4423452B2 JP 4423452 B2 JP4423452 B2 JP 4423452B2 JP 2000398244 A JP2000398244 A JP 2000398244A JP 2000398244 A JP2000398244 A JP 2000398244A JP 4423452 B2 JP4423452 B2 JP 4423452B2
- Authority
- JP
- Japan
- Prior art keywords
- color
- pixel
- solid
- state imaging
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 132
- 238000012545 processing Methods 0.000 claims description 128
- 238000012546 transfer Methods 0.000 claims description 84
- 238000006243 chemical reaction Methods 0.000 claims description 52
- 230000000295 complement effect Effects 0.000 claims description 22
- 238000000034 method Methods 0.000 claims description 10
- 239000010408 film Substances 0.000 description 26
- 230000000875 corresponding effect Effects 0.000 description 20
- 230000005540 biological transmission Effects 0.000 description 17
- 239000012535 impurity Substances 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 239000011159 matrix material Substances 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 8
- 238000011144 upstream manufacturing Methods 0.000 description 8
- 239000011347 resin Substances 0.000 description 6
- 229920005989 resin Polymers 0.000 description 6
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 5
- 229910052751 metal Inorganic materials 0.000 description 5
- 239000002184 metal Substances 0.000 description 5
- 229910021420 polycrystalline silicon Inorganic materials 0.000 description 5
- 229920005591 polysilicon Polymers 0.000 description 5
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 4
- 239000003086 colorant Substances 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000002156 mixing Methods 0.000 description 4
- 238000002161 passivation Methods 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 229910052814 silicon oxide Inorganic materials 0.000 description 4
- 239000000758 substrate Substances 0.000 description 4
- 239000000654 additive Substances 0.000 description 3
- 230000000996 additive effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 229920002120 photoresistant polymer Polymers 0.000 description 3
- 239000010409 thin film Substances 0.000 description 3
- 229910045601 alloy Inorganic materials 0.000 description 2
- 239000000956 alloy Substances 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 150000002739 metals Chemical class 0.000 description 2
- 230000010355 oscillation Effects 0.000 description 2
- 238000000206 photolithography Methods 0.000 description 2
- 238000004528 spin coating Methods 0.000 description 2
- ZOXJGFHDIHLPTG-UHFFFAOYSA-N Boron Chemical compound [B] ZOXJGFHDIHLPTG-UHFFFAOYSA-N 0.000 description 1
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 1
- ZOKXTWBITQBERF-UHFFFAOYSA-N Molybdenum Chemical compound [Mo] ZOKXTWBITQBERF-UHFFFAOYSA-N 0.000 description 1
- 239000004642 Polyimide Substances 0.000 description 1
- 229910052581 Si3N4 Inorganic materials 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 229910052796 boron Inorganic materials 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 229910052804 chromium Inorganic materials 0.000 description 1
- 239000011651 chromium Substances 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 229910052750 molybdenum Inorganic materials 0.000 description 1
- 239000011733 molybdenum Substances 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 229920001721 polyimide Polymers 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- HQVNEWCFYHHQES-UHFFFAOYSA-N silicon nitride Chemical compound N12[Si]34N5[Si]62N3[Si]51N64 HQVNEWCFYHHQES-UHFFFAOYSA-N 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 239000010936 titanium Substances 0.000 description 1
- WFKWXMTUELFFGS-UHFFFAOYSA-N tungsten Chemical compound [W] WFKWXMTUELFFGS-UHFFFAOYSA-N 0.000 description 1
- 229910052721 tungsten Inorganic materials 0.000 description 1
- 239000010937 tungsten Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
- H04N25/136—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements using complementary colours
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Solid State Image Pick-Up Elements (AREA)
Description
【発明の属する技術分野】
本発明は、CCD(電荷結合素子)型やMOS型等の固体撮像素子をエリア・イメージセンサとして利用したカラー撮像用の固体撮像装置に係り、特に、同時式の単板式カラー固体撮像素子を利用した固体撮像装置に関する。
【0002】
【従来の技術】
今日では、固体撮像素子をエリア・イメージセンサとして利用したカラー撮像用の固体撮像装置、例えばデジタルカメラが、単独で、あるいは、パーソナルコンピュータや携帯型移動端末等の機器に組み込まれて、広く普及している。
【0003】
カラー撮像用の固体撮像装置は、その撮像方式に基づいて、単板式と3板式とに大別することができる。単板式は、さらに、面順次式と同時式とに分けることができる。汎用の固体撮像装置では、一般に、同時式の単板式固体撮像素子(以下、単に「固体撮像素子」という。)が利用される。
【0004】
固体撮像素子は、概ね数10万〜数100万個のカラー画素を有している。個々のカラー画素は、例えばフォトダイオードによって構成された1個の光電変換素子と、この光電変換素子の上方(光の入射経路での前方)に配置された1つの色フィルタとを含む。
【0005】
1つの固体撮像素子は、検出する色情報が互いに異なる少なくとも3種類のカラー画素を、それぞれ所定個ずつ有している。個々のカラー画素が検出する色情報は、このカラー画素が有している色フィルタの色に応じて異なる。例えば原色系の色フィルタを利用した固体撮像素子では、カラー画素を赤色画素、緑色画素および青色画素の3種類に分類することができる。補色系の色フィルタを利用した固体撮像素子では、カラー画素を3〜4種類に分類することができる。補色系の色フィルタは、多くの場合、緑色の色フィルタと併用されて、1つの色フィルタアレイを構成する。
【0006】
これらのカラー画素は、正方行列状に配置されるか、または画素ずらし配置される。ここで、本明細書でいう「正方行列状」とは、行数と列数とが異なる行列形態を含むものとする。
【0007】
また、本発明でいう「画素ずらし配置」とは、奇数番目に当たるカラー画素列中の各カラー画素に対し、偶数番目に当たるカラー画素列中のカラー画素の各々が、カラー画素列内でのカラー画素のピッチの約1/2、列方向にずれ、奇数番目に当たるカラー画素行中の各カラー画素に対し、偶数番目に当たるカラー画素行中のカラー画素の各々が、カラー画素行内でのカラー画素のピッチの約1/2、行方向にずれ、カラー画素列の各々が奇数行または偶数行のカラー画素のみを含むような、多数個のカラー画素の配置を意味する。「画素ずらし配置」は、複数行、複数列に亘って行列状に配置された多数個のカラー画素の一形態である。
【0008】
上記の「カラー画素列内でのカラー画素のピッチの約1/2」とは、1/2を含む他に、製造誤差、設計上もしくはマスク製作上起こる画素位置の丸め誤差等の要因によって1/2からはずれてはいるものの、得られる固体撮像素子の性能およびその画像の画質からみて実質的に1/2と同等とみなすことができる値をも含むものとする。上記の「カラー画素行内でのカラー画素のピッチの約1/2」についても同様である。
【0009】
カラー画素に光が入射すると、入射光量に応じた電荷が光電変換素子に蓄積される。固体撮像素子は、個々のカラー画素が蓄積した電荷量に応じた信号を順次出力することができる。本明細書では、この信号を「画素信号」という。画素信号の各々は、実質的に1色の色情報のみを含む。
【0010】
固体撮像装置は、固体撮像素子から順次出力される画素信号を利用して、映像を再生するための多数の画素信号を生成する。本明細書においては、この画素信号を「出力画素信号」という。
【0011】
固体撮像装置からの出力画素信号に基づいてモニタやプリンタによって再生される映像は、多数の画素の集まりである。本明細書においては、この画素を「再生画素」という。
【0012】
プリンタでのフルカラー印刷は勿論、モニタでのフルカラー表示も一般には空間混合に基づく。空間混合は、加法混色または減法混色によって行うことができるが、多くの場合、赤、緑および青の加法混色によって行われる。加法混色によるフルカラー映像での1つの画素は、赤、緑、青によって構成される。したがって、個々の再生画素も、一般には赤、緑、青によって構成される。
【0013】
このため、カラー撮像用の固体撮像装置では、1つの再生画素あたり3つの出力画素信号、すなわち、赤色の色情報を含む出力画素信号、緑色の色情報を含む出力画素信号、および青色の色情報を含む出力画素信号を生成する。本明細書では、1つの再生画素に対応する、赤、緑および青の3つの出力画素信号を「1組の出力画素信号」という。
【0014】
固体撮像素子が補色系の色フィルタを利用したものである場合には、後述する補間処理に先立って、補色系の色情報が原色系の色情報に変換される。
【0015】
上述したように、固体撮像素子中の個々のカラー画素からの画素信号は実質的に1色の色情報のみを含む。このため、1組の出力画素信号に含ませるべき色情報のうち、1個のカラー画素からの画素信号によっては得ることができない色情報は、他のカラー画素からの画素信号を利用して補間される。
【0016】
例えば、固体撮像素子中の特定の1個の緑色画素に対応する再生画素用の1組の出力画素信号に含ませるべき色情報のうち、緑色の色情報は前記1個の緑色画素からの画素信号を利用して生成され、赤色の色情報は前記1個の緑色画素の近傍に配置されている複数個の赤色画素からの画素信号を利用して補間される。青色の色情報も、前記1個の緑色画素の近傍に配置されている複数個の青色画素からの画素信号を利用して補間される。
【0017】
ところで、固体撮像装置の多くは、相対的に高解像度の下に出力画素信号を生成する機能と、相対的に低解像度の下に出力画素信号を生成する機能とを有している。
【0018】
相対的に高解像度の下に生成された出力画素信号は、例えば記録媒体に記録され、プリンタ等の機器によって精細な静止画に再生される。このときの出力画素数は、例えば固体撮像装置が備えている有効画素数と同数であり、例えば数10万〜数100万である。
【0019】
固体撮像素子において多数個のカラー画素が画素ずらし配置されている場合には、各カラー画素列内または各カラー画素行内において相隣る2個のカラー画素の間にも恰もカラー画素があるかのように、補間によって出力画素信号を生成することが可能である。このため、カラー画素(有効画素)の総数の約2倍の数の画素に対応する出力画素信号を得ることが可能である。
【0020】
相対的に低解像度の下に生成された出力画素信号は、例えば固体撮像装置または他の機器が備えているモニタに出力され、ここで静止画または動画に再生される。このときの出力画素数は、モニタの画素数に応じて異なる。
【0021】
モニタの画素数は規格によって定められており、例えばQCIF(Quarter Common Intermediate Format)では176×144(約2万5千)、CIF(Common Intermediate Format)では352×288(約10万)、VGA(Video Graphics Array)では640×480(約30万)、SXVGA(Super Extended Video Graphics Array)では1280×960(約123万)である。これらの規格以外にも、種々の規格がある。
【0022】
【発明が解決しようとする課題】
動きの滑らかな動画をモニタに再生するためには、高いフレーム周波数の下に多数の出力画素信号を所定の順番で出力することが必要である。このため、出力画素信号を生成するための信号処理回路には高い処理能力が求められ、それに伴って生産性は低下し、製造コストは上昇する。
【0023】
本発明の目的は、比較的簡単な信号処理によって出力画素信号を得ることが可能な固体撮像装置を提供することである。
【0024】
【課題を解決するための手段】
本発明の一観点によれば、検出する色情報に基づいて少なくとも3種類に分類される補色系のカラー画素を含む多数個のカラー画素が複数行、複数列に亘って画素ずらし配置され、該多数個のカラー画素のうち少なくとも1種類のカラー画素が行方向および列方向に関して正方格子状に分布する固体撮像素子と、前記固体撮像素子から出力される前記補色系のカラー画素からの画素信号に基づく色情報を原色系の色情報に変換する補色/原色変換処理回路と、前記補色/原色変換処理回路で変換された画素信号のうち、前記正方格子状に分布する1種類のカラー画素それぞれからの画素信号は補間処理せず、他の種類のカラー画素それぞれからの画素信号は補間処理して出力画素信号を生成する第1の信号処理部とを有する固体撮像装置が提供される。
【0025】
この固体撮像装置では、上述のように、固体撮像素子が有している多数個のカラー画素のうちで正方格子状に分布する1種類のカラー画素からの画素信号については、出力画素信号を生成する際に補間処理しない。1組の出力画素信号に含めるべき赤色、緑色および青色の各色情報のうち、2色の色情報のみが補間によって生成される。
【0026】
1組の出力画素信号に含めるべき3色の色情報のうち、1色の色情報については補間処理することなく得ることができるので、比較的簡単な信号処理によって出力画素信号を得ることが可能である。
【0027】
プリンタやモニタによって再生される映像では、再生画素が正方行列状に分布しているので、固体撮像装置から出力する出力画素信号は、正方行列状に分布する再生画素に対応したものであることが望まれる。
【0028】
上記の固体撮像装置では、固体撮像素子においてカラー画素が画素ずらし配置されてはいるももの、正方格子状に分布しているカラー画素に対応させて出力画素信号を生成することができる。画素が正方行列状に分布する映像の再生に適した出力画素信号を比較的簡単な信号処理によって得ることが可能である。
【0029】
固体撮像装置からの出力画素数は、固体撮像素子が有しているカラー画素(有効画素)の総数よりも少なくなるが、例えば静止画と動画の両方を撮像することができる固体撮像装置では、従来から、動画の出力画素数の方が静止画の出力画素数よりも一般に少ない。出力画素数の減少自体は問題にならない。
【0030】
例えば、モニタ表示しようとする映像のように相対的に解像度が低くても構わない映像用の出力画素信号を上述した第1の信号処理部によって生成し、高精細の静止画のように相対的に高解像度の下に撮像したい映像用の出力画素信号は他の信号処理部によって生成するように、固体撮像装置を構成することができる。
【0031】
なお、本明細書でいう「正方格子状に分布するカラー画素」は、1列中の個数と1行中の個数とが異なっていてもよく、かつ、列方向でのカラー画素のピッチと行方向でのカラー画素のピッチとが異なっていてもよいものとする。
【0032】
【発明の実施の形態】
図1は、第1の実施例による固体撮像装置を示す。同図に示すように、この固体撮像装置100は、撮像光学系1、固体撮像素子10、駆動回路60、映像信号処理部65、制御部80、第1モードセレクタ82、第2モードセレクタ84、パルス信号発生回路86、表示部90、記録部92、伝送部94、およびテレビジョン出力端子96(以下、「TV出力端子96」と略記する。)を備えている。
【0033】
撮像光学系1は、固体撮像素子10上に光学像を結像させる。この撮像光学系1は、例えば光学レンズ、絞り、オプティカルローパスフィルタ等を含んで構成される。図中の矢印Lは光を示す。
【0034】
固体撮像素子10は、撮像光学系1が結像した光学像を電気信号に変換する。この固体撮像素子10は、カラー撮像に必要な多数個のカラー画素と、個々のカラー画素によって検出された色情報を電気信号(画素信号)として出力する出力アンプとを有する。固体撮像素子10の具体的構造については、後に図8〜図11を参照しつつ詳述する。
【0035】
駆動回路60は、固体撮像素子10の撮像動作に必要な駆動信号を固体撮像素子10に供給する。この駆動回路60は、例えば垂直ドライバ、水平ドライバ、DC電源等を含んで構成される。
【0036】
映像信号処理部65は、固体撮像素子10で生成された画素信号を受け取り、これに種々の処理を施して出力画素信号を生成する。また、生成した出力画素信号を表示部90、記録部92、伝送部94またはTV出力端子96に供給する。
【0037】
この映像信号処理部65は、相対的に低解像度の下に出力画素信号を生成する第1の信号処理部と、相対的に高解像度の下に出力画素信号を生成する第2の信号処理部とを含んで構成される。映像信号処理部65の構成については、後に図7を参照しつつ説明する。
【0038】
制御部80は、駆動回路60および映像信号処理部65の動作を制御する。この制御部80は、例えば中央演算処理装置(CPU)によって構成される。
【0039】
第1モードセレクタ82は、固体撮像装置100の撮像モードを選択するための選択スイッチである。固体撮像装置100は、例えば、相対的に低解像度の下に出力画素信号を生成する第1の撮像モードと、相対的に高解像度の下に出力画素信号を生成する第2の撮像モードとを有している。第1の撮像モードは、例えば動画の撮像に適している。第2の撮像モードは、例えば高精細な静止画の撮像に適している。第1モードセレクタ82は、固体撮像装置100の使用者によって操作される。
【0040】
第2モードセレクタ84は、固体撮像装置100の撮像データの出力先を指定するための選択スイッチである。固体撮像装置100は、表示部90、記録部92、伝送部94、またはTV出力端子96に撮像データを出力することができる。一度に複数の出力先を選択することも可能である。第2モードセレクタ84も、固体撮像装置100の使用者によって操作される。
【0041】
パルス信号発生回路86は、各回路の動作タイミングの統一をとるためのパルス信号を生成し、駆動回路60、映像信号処理部65および制御部80に供給する。このパルス信号発生回路86は、例えば、一定の周期でパルスを発生する原発振、タイミングジェネレータ等を含んで構成される。
【0042】
表示部90は、映像信号処理部65から供給される出力画素信号に基づいて、静止画または動画を表示する。この表示部90は、例えば液晶ディスプレイ等の表示装置を含んで構成される。
【0043】
記録部92は、映像信号処理部65から供給される出力画素信号を、例えばメモリカード等の記録媒体に記録する。
【0044】
伝送部94は、映像信号処理部65から供給される出力画素信号を例えば所定のフォーマット(例えばMPEG)に変換し、かつ通信回線上に伝送するためのフォーマット変換を行う。例えば、伝送部94が有線伝送を行う場合、この伝送部94は、モデム(modem (modulator-demodulator);変復調装置)に接続するためのフォーマット変換部を有する。また伝送部94が無線伝送を行う場合、この伝送部94は、伝送波にデータをのせるためのフォーマット変換部、無線伝送波の発振回路部、アンテナ等から構成される。
【0045】
TV出力端子96は、固体撮像装置100とテレビジョン(図示せず。)とをケーブル(コード)等を用いて電気的に接続するための端子である。
【0046】
これらの構成要素を含む固体撮像装置100では、固体撮像素子10におけるカラー画素の配列が特定の配列となっている。
【0047】
図2は、固体撮像素子10として利用することができる固体撮像素子を概略的に示す。同図に示す固体撮像素子10aでは、赤色画素20R、緑色画素20Gおよび青色画素20Bの3種類のカラー画素が、画素ずらし配置されるとともに特定のパターンで配列されている。
【0048】
すなわち、緑色画素20Gの各々は、行方向(画素行方向)および列方向(画素列方向)のいずれに関しても1つおきに配列され、全体として正方格子状に分布する。1行の緑色画素行の両側(列方向の両側)に、赤色画素20Rと青色画素20Bとが1列おきに交互に配列された画素行(以下、この画素行を「赤色・青色画素行」という。)が1行ずつ配置されている。1行の緑色画素行を挟んで並存する2列の赤色・青色画素行それぞれにおいては、赤色画素20Rと青色画素20Bとの配置が逆になっている。
【0049】
この固体撮像素子10aでは、例えば、1行の緑色画素行を構成する緑色画素20Gそれぞれからの画素信号と、その下流側において1行の赤色・青色画素行を構成する赤色画素20Rおよび青色画素20Bそれぞれからの画素信号とが、1つずつ交互に出力される。
【0050】
なお、本明細書においては、カラー画素から映像信号処理部へ向かう信号の移動を1つの流れとみなして、個々の部材等の相対的な位置を、必要に応じて「何々の上流」、「何々の下流」等と称して特定するものとする。
【0051】
図1に示した映像信号処理部65は、前述したように、固体撮像素子10aから供給される画素信号に基づいて出力画素信号を生成する。第1モードセレクタ82によって第1の撮像モードが選択されているとき、映像信号処理部65へ供給された画素信号の各々は、相対的に低解像度の下に出力画素信号を生成する第1の信号処理部を経て出力画素信号となる。
【0052】
第1の信号処理部は、緑色画素20Gからの画素信号は補間処理せず、青色画素20Bからの画素信号および赤色画素20Rからの画素信号はそれぞれ補間処理して、再生映像において緑色画素20Gそれぞれの位置に対応すべき再生画素用の出力画素信号を生成する。
【0053】
第1の信号処理部での補間処理の概念を、図3(A)、図3(B)および図3(C)を用いて説明する。
【0054】
図3(A)は、固体撮像素子10aにおけるカラー画素の配列を模式的に示す。図中の記号Gが緑色画素、記号Rが赤色画素、記号Bが青色画素を表す。各画素の位置の特定を簡便化するために、画素行および画素列に番号を付してある。
【0055】
以下の説明においては、記号R、GおよびBのいずれか1つと、1つの行番号と、1つの列番号とを用いて、1個のカラー画素を特定するものとする。例えば、「赤色画素R57」は、第5行第7列に位置する赤色画素Rを意味する。
【0056】
図3(B)は、第1の信号処理部で赤色画素からの画素信号に対して行われる補間処理を概念的に示す。同図において丸で囲まれた記号Rは、補完された赤色の色情報を意味する。
【0057】
同図に示すように、1個の緑色画素G(図3(A)参照)の左斜め上流側と右斜め下流側、または右斜め上流側と左斜め下流側に位置する計2個の赤色画素Rからの画素信号を用いて、前記1個の緑色画素Gの位置に対応する再生画素用の1組の出力画素信号が含むべき赤色の色情報が補間される。例えば、緑色画素G44の位置に対応する再生画素用の1組の出力画素信号が含むべき赤色の色情報は、赤色画素R53からの画素信号と赤色画素R35から画素信号とを用いて補間される。緑色画素G64の位置に対応する再生画素用の1組の出力画素信号が含むべき赤色の色情報は、赤色画素R75からの画素信号と赤色画素R53から画素信号とを用いて補間される。
【0058】
図3(C)は、第1の信号処理部で青色画素からの画素信号に対して行われる補間処理を概念的に示す。同図において丸で囲まれた記号Bは、補完された青色の色情報を意味する。
【0059】
同図に示すように、1個の緑色画素G(図3(A)参照)の右斜め上流側と左斜め下流側、または左斜め上流側と右斜め下流側に位置する計2個の青色画素Bからの画素信号を用いて、前記1個の緑色画素Gの位置に対応する再生画素用の1組の出力画素信号が含むべき青色の色情報が補間される。例えば、緑色画素G44の位置に対応する再生画素用の1組の出力画素信号が含むべき青色の色情報は、青色画素B55からの画素信号と青色画素B33から画素信号とを用いて補間される。緑色画素G64の位置に対応する再生画素用の1組の出力画素信号が含むべき青色の色情報は、青色画素B73からの画素信号と青色画素B55から画素信号とを用いて補間される。
【0060】
1つの再生画素に対応する1組の出力画素信号は、1個の緑色画素Gからの画素信号から得られる緑色の色情報と、上述した補間によって得た青色および赤色の各色情報とを含む。
【0061】
図4は、第1の信号処理部で生成された出力画素信号に基づいてモニタやプリンタによって再生される映像での再生画素の分布を概念的に示す。同図に示すように、出力画素信号に基づいて再生される映像では、固体撮像素子10aにおける緑色画素G(図3(A)参照)それぞれの位置に1つずつ対応して、再生画素Pが正方行列状に分布する。
【0062】
このように、第1の信号処理部では、個々の再生画素が含むべき赤色、緑色および青色の各色情報のうち、青色と赤色との2色の色情報のみを補間によって生成する。緑色の色情報を補間する必要がない。
【0063】
また、固体撮像素子10aにおいては多数個のカラー画素が画素ずらし配置されているにも拘わらず、特別の変換処理を行うことなく、正方行列状の再生画素配置に対応した出力画素信号を得ることができる。
【0064】
したがって、所望の出力画素信号を比較的簡単な信号処理によって得ることが可能である。
【0065】
なお、緑色の色情報を補間しない分、1組の出力画素信号が含むべき緑色の色情報を取得するのに要する時間と、1組の出力画素信号が含むべき青色および赤色の各色情報を取得するのに要する時間との間に差が生じる。必要に応じて、1組の出力画素信号が含むべき緑色、青色および赤色の各色情報がほぼ同じタイミングで固体撮像装置100から出力されるように調整することができる。この調整は、例えば、緑色画素からの画素信号の伝送経路内または緑色の色情報の伝搬経路内の適当な位置に遅延回路を設けることによって、あるいは、第1の信号処理部内または第1の信号処理部外の適当な場所にフレームメモリ等の記憶素子を設けることにより、行うことができる。
【0066】
第1の撮像モードの際に得られる出力画素数は、固体撮像素子10aにおける有効画素(カラー画素)数のほぼ1/2である。
【0067】
しかしながら、図1に示した第1モードセレクタ82によって第2の撮像モードが選択されているときには、映像信号処理部65は固体撮像素子10aが有している有効画素(カラー画素)の総数の約2倍の再生画素用の出力画素信号を生成することができる。
【0068】
この際にも、図3(B)または図3(C)を用いて説明した概念と同様の概念に基づいて、補間処理が行われる。さらには、各カラー画素列内または各カラー画素行内において相隣る2個のカラー画素の間にも恰もカラー画素があるかのように、これら仮想的なカラー画素に対応する再生画素用の出力画素信号が補間によって生成される。
【0069】
図5は、第2の信号処理部で生成された出力画素信号に基づいてモニタやプリンタによって再生される映像での再生画素の分布を概念的に示す。補間によって仮想的なカラー画素に対応する再生画素用の出力画素信号が生成されたことから、第2の信号処理部で生成された出力画素信号に基づいて再生される映像は、固体撮像素子10a(図2参照)が有するカラー画素(有効画素)の総数の約2倍の数の再生画素Pを有する。
【0070】
図1に示した固体撮像素子10は、原色系の色フィルタを利用したものに限定されるものではなく、補色系の色フィルタを利用したものであってもよい。
【0071】
図6は、固体撮像素子10として利用することができる他の固体撮像素子を概略的に示す。同図に示す固体撮像素子10bは、補色系の色フィルタを利用したものであり、シアン画素20Cy、イエロー画素20Yeおよび緑色画素20Gの3種類のカラー画素を有している。これらのカラー画素は、画素ずらし配置されるとともに特定のパターンで配列されている。
【0072】
すなわち、緑色画素20Bの各々は、行方向(画素行方向)および列方向(画素列方向)のいずれに関しても1つおきに配列され、全体として正方格子状に分布する。1行の緑色画素行の両側(列方向の両側)に、シアン画素20Cyとイエロー画素20Yeとが1列おきに交互に配列された画素行(以下、この画素行を「シアン・イエロー画素行」という。)が1行ずつ配置されている。1行の緑色画素行を挟んで並存する2列のシアン・イエロー画素行それぞれにおいては、シアン画素20Cyとイエロー画素20Yeとの配置が逆になっている。
【0073】
この固体撮像素子10bでは、1行の緑色画素行を構成する緑色画素20Gそれぞれからの画素信号と、その下流側において1行のシアン・イエロー画素行を構成するシアン画素20Cyおよびイエロー画素20Yeそれぞれからの画素信号とが、1つずつ交互に出力される。
【0074】
固体撮像素子10bを利用する場合には、図3(A)、図3(B)、図3(C)、図4および図5を用いて既に説明した補間処理を行う前に、補色系の色情報を原色系の色情報に変換する。これにより、第1の信号処理部および第2の信号処理部の構成を変更することなく、図2に示した固体撮像素子10aを利用した場合と同様の出力画素信号を得ることができる。
【0075】
以上説明した第1の信号処理部および第2の信号処理部を有する映像信号処理部65は、例えば図7に示すように構成することができる。
【0076】
図7は、映像信号処理部65の構成例を概念的に示すブロック図である。同図に示す映像信号処理部65は、相関二重サンプリング(CDS)回路66、自動利得制御(AGC)回路67、第1スイッチング回路68、第1の信号処理部70、第2の信号処理部77、および、例えばダイナミックランダムアクセスメモリ(DRAM)によって構成されるメモリ部Mを含む。
【0077】
固体撮像素子10から順次出力される画素信号は、CDS回路66でノイズが除去された後、AGC回路67を通り、その後に第1スイッチング回路68へ供給される。
【0078】
固体撮像素子10が原色系の色フィルタを利用したものであるときには、赤色、緑色および青色の各色情報が第1スイッチング回路68へ順次供給される。これらの色情報の全部または一部はメモリ部Mへも供給され、ここに記憶、保管される。
【0079】
固体撮像素子10が補色系の色フィルタを利用したものであるときには、例えばAGC回路67と第1スイッチング回路68との間に、補色/原色変換処理回路69が設けられる。補色/原色変換処理回路69は、少なくとも3行のカラー画素行からの画素信号に基づく色情報を、メモリ部Mに一旦記憶させる。そして、このメモリ部Mから必要な色情報を読み出して色分離を行い、補色系の色情報から赤色、緑色および青色の各色情報を生成する。補色/原色変換処理回路69の動作は、例えば図1に示した制御部80によって制御される。
【0080】
補色/原色変換処理回路69で生成された赤色、緑色および青色の各色情報は、第1スイッチング回路68へ順次供給される。これらの色情報の全部または一部はメモリ部Mへも供給され、ここに記憶、保管される。
【0081】
図1に示した第1モードセレクタ82によって第1の撮像モードが選択されているとき、第1のスイッチング回路68へ順次供給された赤色、緑色および青色の各色情報は、第1の信号処理部70へ振り分けられる。第1のスイッチング回路68の動作は、例えば図1に示した制御部80によって制御される。
【0082】
第1の信号処理部70に振り分けられた赤色の色情報は第1補間処理回路71aへ供給され、青色の色情報は第2補間処理回路71bへ供給され、緑色の色情報は直接または遅延回路75を介して第2スイッチング回路72へ供給される。遅延回路75は、1組の出力画素信号が含むべき赤色、緑色および青色の各色情報が実質的に同じタイミングで第2スイッチング回路72へ供給されるように、緑色の色情報の第2スイッチング回路72への到達時刻を調整する。
【0083】
図8に示すように、第1補間処理回路71aは、アドレス信号発生回路AGと、補間演算処理回路IPとを含む。アドレス信号発生回路AGは、制御部80によって制御されて、所定のアドレス信号を生成する。このアドレス信号によって、メモリ部Mに記憶されている色情報の中から補間処理に必要な赤色の色情報が読み出され、補間演算処理回路IPへ供給される。
【0084】
補間演算処理回路IPは、第1スイッチング回路68から新たに入力された赤色の色情報と、既に発生し、メモリ部Mに記憶してあった赤色の色情報とを利用して、例えば図3(B)に示したようにして補間処理を行い、出力画素信号が含むべき赤色の色情報を生成する。
【0085】
第2補間処理回路71bは、図8に示した第1補間処理回路71aと同様に構成される。この第2補間処理回路71bは、アドレス信号発生回路が生成した所定のアドレス信号によって、メモリ部Mに記憶されている色情報の中から補間処理に必要な青色の色情報を読み出す。メモリ部Mから読み出された青色の色情報は、補間処理回路へ供給される。補間処理回路は、第1スイッチング回路68から新たに入力された青色の色情報と、メモリ部Mから読み出した青色の色情報とを利用して、例えば図3(C)に示したようにして補間処理を行い、出力画素信号が含むべき青色の色情報を生成する。
【0086】
これら第1および第2補間処理回路71a、71bの各々は、上述のように、補間処理に必要な2つの色情報のうちの一方のみ、すなわち、時系列でみたときに先に生成される画素信号に基づく色情報のみをメモリ部Mから読み出し、他方は第1スイッチング回路68から供給されるように構成される。
【0087】
第1および第2補間処理回路71a、71bの各々を、補間処理に必要な2つの色情報の両方をメモリ部Mから読み出すように構成することもできる。この場合、第1スイッチング回路68と第1〜第2補間処理回路71a〜71bの各々とは、結線されていなくてもよい。
【0088】
第1補間処理回路71aで生成された赤色の色情報、および、第2補間処理回路71bで生成された青色の色情報は、それぞれ第2スイッチング回路72へ供給される。
【0089】
第2スイッチング回路72は、供給された色情報の各々を、図1に示した第2モードセレクタ84によって選択されている出力先に応じて、振り分ける。
【0090】
各色情報の出力先が表示部90(図1参照)であるときには、各色情報は直接表示部90へ供給される。出力先が記録部92または伝送部94であるとき、各色情報は第1圧縮処理回路73aへ供給され、ここでデータ圧縮された後に記録部92または伝送部94へ供給される。出力先がTV出力端子96であるとき、各色情報はY/C変換処理回路74へ供給され、ここで輝度信号Yと色差信号Cとに変換された後にTV出力端子96へ供給される。
【0091】
一方、図1に示した第1モードセレクタ82によって第2の撮像モードが選択されているとき、第1のスイッチング回路68へ順次供給された赤色、緑色および青色の各色情報は、第2の信号処理部77へ振り分けられる。
【0092】
第2の信号処理部77に振り分けられた赤色の色情報は第3補間処理回路71cへ供給され、青色の色情報は第4補間処理回路71dへ供給され、緑色の色情報は第5補間処理回路71eへ供給される。
【0093】
これら第3〜第5補間処理回路71c〜71eの各々は、上述した第1補間処理回路71aと同様に構成することができ、その動作も第1補間処理回路71aの動作と同様である。以下、第3〜第5補間処理回路71c〜71eそれぞれの動作を簡単に説明する。
【0094】
第3補間処理回路71cは、1個の再生画素あたり2〜4つの赤色の色情報を利用して補間処理を行い、出力画素信号が含むべき赤色の色情報を生成する。再生画素は、図5に示したように、正方行列状に分布する。
【0095】
同様にして、第4補間処理回路71dは出力画素信号が含むべき青色の色情報を補間により生成し、第5補間処理回路71eは出力画素信号が含むべき緑色の色情報を補間により生成する。
【0096】
第3〜第5補間処理回路71c〜71eで生成された各色情報は第2圧縮処理回路73bへ供給され、ここでデータ圧縮された後に、第2モードセレクタ84によって選択されている出力先に応じて、表示部90、記録部92または伝送部94へ供給される。第2圧縮処理回路73bからの出力がTV出力端子96へ供給されるように、固体撮像装置100を構成することも可能である。
【0097】
映像信号処理部65へ供給される画素信号を生成する固体撮像素子10は、例えばCCD型またはMOS型の固体撮像素子である。
【0098】
図9および図10は、図2に示した固体撮像素子10aとして利用することができるCCD型の固体撮像素子10cにおけるカラー画素の構造を概略的に示す。図9は、図2に示したIX−IX線に沿った断面を概略的に示し、図10は、図2に示したX−X線に沿った断面を概略的に示す。
【0099】
これらの図に示すように、個々のカラー画素20R、20G、20Bは、半導体基板15の一表面に形成された光電変換素子(フォトダイオード)22と、その上方(光の入射経路での前方)に配置された色フィルタ34R、34Gまたは34Bとを有する。個々の光電変換素子22の上方にマイクロレンズ38を1個ずつ設けることにより、各光電変換素子22での光利用効率を高めることができる。
【0100】
図示の例では、半導体基板15はn型半導体基板15aと、その一表面に形成されたp型不純物添加領域15bとによって構成されている。
【0101】
光電変換素子22の各々は、p型不純物添加領域15bに形成されたn型不純物添加領域22aとその表面に形成されたp+ 型不純物添加領域22bとを含む。p+ 型不純物添加領域22bにおけるp型不純物の濃度は、p型不純物添加領域15bにおけるp型不純物の濃度よりも高い。
【0102】
個々の光電変換素子22の平面視上の周囲には、図10に示す読出しゲート領域48aの形成箇所を除き、チャネルストップ領域24が形成されている。チャネルストップ領域24は、例えばp+ 型不純物添加領域によって構成される。
【0103】
なお、読出しゲート領域48aは、後述するように、1つの光電変換素子22に1つずつ、この光電変換素子22の図2での右斜め下に隣接する。
【0104】
各光電変換素子22の表面上にシリコン酸化物等によって構成された電気的絶縁膜26が形成され、その上にパッシベーション膜28が形成されている。パッシベーション膜28は、例えば、シリコン窒化物、シリコン酸化物、PSG(ホスファシリケートガラス)、BPSG(ボロンホスファシリケートガラス)、ポリイミド等によって形成される。このパッシベーション膜28は、後述する垂直電荷転送素子40の各々も覆う。
【0105】
光遮蔽膜30が、後述する垂直電荷転送素子40の各々を覆うと共に、これらの垂直電荷転送素子40に近接する光電変換素子22の平面視上の内縁部を覆っている。光遮蔽膜30は、個々の光電変換素子22の上方に開口部30aを1つずつ有する。個々の光電変換素子22において、平面視上、開口部30a内に位置する領域が、この光電変換素子22における光入射面となる。
【0106】
光遮蔽膜30は、例えばアルミニウム、クロム、タングステン、チタン、モリブデン等の金属からなる薄膜や、これらの金属の2種以上からなる合金薄膜、あるいは、前記の金属同士または前記の金属と前記の合金とを含む群から選択された2種以上を組み合わせた多層金属薄膜等によって形成される。
【0107】
第1の平坦化膜32が、光遮蔽膜30および開口部30aから露出しているパッシベーション膜28を覆っている。第1の平坦化膜32はマイクロレンズ38用の焦点調節層としても利用される。必要に応じて、第1の平坦化膜32中にインナーレンズが形成される。
【0108】
第1の平坦化膜32は、例えばフォトレジスト等の透明樹脂を例えばスピンコート法によって所望の厚さに塗布することによって形成される。
【0109】
色フィルタ34R、34G、34Bの各々は、第1の平坦化膜32上に形成されている。各色フィルタ34R、34G、34Bは、例えば、所望色の顔料もしくは染料を含有させた樹脂(カラーレジン)の層を、フォトリソグラフィ法等の方法によって所定箇所に形成することによって作製することができる。
【0110】
第2の平坦化膜36が、各色フィルタ34R、34G、34Bを覆っている。第2の平坦化膜46は、例えばフォトレジスト等の透明樹脂を例えばスピンコート法によって所望の厚さに塗布することによって形成される。
【0111】
各マイクロレンズ38は、第2の平坦化膜36上に形成されている。これらのマイクロレンズ38は、例えば、屈折率が概ね1.3〜2.0の透明樹脂(フォトレジストを含む。)からなる層をフォトリソグラフィ法等によって所定形状に区画した後、熱処理によって各区画の透明樹脂層を溶融させ、表面張力によって角部を丸め込ませた後に冷却すること等によって得られる。
【0112】
カラー画素20R、20Gまたは20Bに光が入射すると、その入射光量に応じて、n型不純物添加領域22aに電荷が蓄積される。この電荷をカラー画素20R、20Gまたは20Bから読み出し、水平電荷転送素子へ転送するために、画素ずらし配置されたカラー画素の1列に1つずつ、CCDによって構成された垂直電荷転送素子40が設けられている。
【0113】
個々の垂直電荷転送素子40は、p+ 型不純物添加領域15bに形成された電荷転送チャネル41と、この電荷転送チャネル41を平面視上横切る多数本の垂直転送電極45、46を含む。
【0114】
電荷転送チャネル41は、例えばn型不純物添加領域によって構成され、対応するカラー画素列に沿って蛇行している。2本の電荷転送チャネル41が光電変換素子22を介することなく相隣る領域においては、これらの2本の電荷転送チャネル41の間にチャネルストップ領域43が設けられている。チャネルストップ領域43は、例えば、p型不純物添加領域15bに形成されたp+ 型不純物添加領域によって構成される。
【0115】
各垂直転送電極45は、例えば電気的絶縁膜26上に形成された第1ポリシリコン層によって構成され、1行のカラー画素行1本ずつ、このカラー画素行に沿ってその下流側を蛇行する。個々の垂直転送電極45は、全体としてはカラー画素行方向に延在する。これらの垂直転送電極45は、対応するカラー画素行を構成している光電変換素子22の各々に隣接している各読出しゲート領域も、平面視上覆う。1つの読出しゲート領域48aと、これを平面視上覆っている垂直転送電極45中の一領域とによって、1つの読出しゲート48が構成される。
【0116】
各垂直転送電極46は、例えば電気的絶縁膜26上に形成された第2ポリシリコン層によって構成され、1行のカラー画素行1本ずつ、このカラー画素行に沿ってその上流側を蛇行する。個々の垂直転送電極46は、全体としてはカラー画素行方向に延在する。垂直転送電極46とこれに近接する垂直転送電極45とは、重合せ構造をなす。垂直転送電極46の縁部が垂直転送電極45の縁部に重なっている。
【0117】
各垂直転送電極45の表面および各垂直転送電極46の表面には、例えばシリコン酸化膜(熱酸化膜)によって構成された電気的絶縁膜IFが形成され、垂直転送電極45の各々とこれに近接する垂直転送電極46の各々とを電気的に分離している。
【0118】
図11は、図9および図10に示した固体撮像素子10cにおける光電変換素子22の各々と、垂直電荷転送素子40の各々と、読出しゲート48の各々と、図9〜図10では図示を省略した水平電荷転送素子と、出力アンプの平面配置を概略的に示す。
【0119】
図11においては、各光電変換素子22が何色のカラー画素を構成しているか判りやすくするために、個々の光電変換素子22にR、GまたはBの記号を付してある。同図に示した光電変換素子22Rは赤色のカラー画素20R(図2参照)を構成し、光電変換素子22Gは緑色のカラー画素20G(図2参照)を構成し、光電変換素子22Bは青色のカラー画素20B(図2参照)を構成する。
【0120】
また、読出しゲート48それぞれの平面視上の位置を判りやすくするために、これらの読出しゲート48にハッチングを付してある。
【0121】
さらに、図11には、垂直電荷転送素子40の各々を4相の垂直駆動信号φV1〜φV4によって駆動させ、水平電荷転送素子50を2相の水平駆動信号φH1、φH2によって駆動させる際の配線例を付記してある。
【0122】
図11から明らかなように、固体撮像素子10cは、1行の光電変換素子行(1行のカラー画素行)当たり垂直転送電極45、46を1本ずつ有している。また、最も下流の垂直転送電極45の下流側に、さらに3本の補助転送電極47a、47bおよび47cが設けられている。
【0123】
各垂直転送電極45、46および3本の補助転送電極47a〜47cが4のグループに分けられ、グループ毎に異なる垂直駆動信号φV1〜φV4が供給される。1つのグループは、3本おきに選択された転送電極45、46、47a、47bまたは47cによって構成される。垂直電荷転送素子40の各々は、4相駆動型のCCDによって構成される。
【0124】
個々の垂直電荷転送素子40が、1個の光電変換素子22(1個のカラー画素)当たり4本の転送電極を有することから、固体撮像素子10cは全画素読出しが可能な固体撮像素子である。読出しパルスは、垂直駆動信号φV1とφV3とに重畳される。
【0125】
個々の光電変換素子22R、22G、22Bから対応する垂直電荷転送素子40へ読み出された電荷は、この垂直電荷転送素子40によって水平電荷転送素子50へ転送される。このとき、下流側から数えて奇数番目に当たる光電変換素子行(カラー画素行)から読み出された電荷と、その直ぐ上流側の光電変換素子行(カラー画素行)から読み出された電荷とが、同じタイミングで水平電荷転送素子50へ転送される。
【0126】
水平電荷転送素子50は、水平駆動信号φH1、φH2によって駆動される2相駆動型のCCDによって構成される。この水平電荷転送素子50は、水平電荷転送チャネル52と、この水平電荷転送チャネル52を平面視上横切る多数本の水平転送電極(図示せず。)を含む。
【0127】
水平電荷転送チャネル52は、半導体基板15におけるp型不純物添加領域15b(図9または図10参照)に形成されたn型不純物添加領域によって構成され、光電変換素子行(カラー画素行)方向に延在する。
【0128】
水平転送電極の各々は、例えば電気的絶縁膜26(図9または図10参照)上に形成された第1または第2ポリシリコン層によって構成される。例えば、1個の垂直電荷転送素子40当たり4本の水平転送電極が設けられ、第1ポリシリコン層によって構成された水平転送電極と第2ポリシリコン層によって構成された水平転送電極とが交互に配置されている。各水平転送電極の表面には、例えばシリコン酸化膜(熱酸化膜)によって構成された電気的絶縁膜が形成されている。
【0129】
水平電荷転送素子50は、垂直電荷転送素子40の各々から受け取った電荷を、出力アンプ55へ順次転送する。
【0130】
出力アンプ55は、水平電荷転送素子50から電荷を順次受け取り、受け取った電荷を例えばフローティング容量(図示せず。)によって信号電圧に変換し、この信号電圧をソースホロワ回路(図示せず。)等を利用して増幅して画素信号を生成する。検出(変換)された後のフローティング容量の電荷は、図示を省略したリセットトランジスタを介して電源(図示せず。)に吸収される。
【0131】
出力アンプ55で生成された画素信号が、図1または図7に示した映像信号処理部65へ供給される。
【0132】
図12は、図2に示した固体撮像素子10aとして利用することができる他のCCD型の固体撮像素子10dにおける光電変換素子22の各々と、垂直電荷転送素子40の各々と、読出しゲート48の各々と、水平電荷転送素子50と、出力アンプ55の平面配置を概略的に示す。
【0133】
同図に示した固体撮像素子10dは、n行の光電変換素子行(n行のカラー画素行)当たり計(n+1)本の垂直転送電極145、146を有し、垂直転送電極146と垂直転送電極145とが下流側からこの順番で交互に形成されている。また、最も下流の垂直転送電極146の下流側に、さらに3本の補助転送電極147a、147bおよび147cを備えている。したがって、個々の垂直電荷転送素子40は、1個の光電変換素子22(1個のカラー画素)当たり2本の転送電極を有する。この点を除けば、固体撮像素子10dは図11に示した固体撮像素子10cと同様の構成を有する。
【0134】
図12に示した構成部材のうち、図11に示した構成部材と機能上共通するもについては、垂直転送電極および補助転送電極をそれぞれ除き、図11で用いた参照符号と同じ参照符号を付してその説明を省略する。
【0135】
上記の構成を有する固体撮像素子10dは、例えば、1/2間引き駆動される。1/2間引き駆動の下では、1フレームが光電変換素子行(カラー画素行)単位で2つのフィールドに分けられ、フィールド毎に光電変換素子(カラー画素)の各々から対応する垂直電荷転送素子40へ電荷が読み出される。1つのフィールドは、例えば、3行おきに選択された光電変換素子行(カラー画素行)と、これらの光電変換素子行(カラー画素行)それぞれの直ぐ上流側に配置されている光電変換素子行(カラー画素行)の各々とによって構成される。
【0136】
固体撮像素子10dを利用する場合、映像信号処理回路65中のメモリ部Mは、1フレーム分の画素信号に対応する色情報を記憶できるだけの容量を有していることが好ましい。この場合の補間処理は、メモリ部Mに記憶された色情報を利用して行われる。
【0137】
以上、実施例による固体撮像装置について説明したが、本発明は上述した実施例に限定されるものではない。種々の変更、改良、組み合わせ等が可能である。
【0138】
特に、相対的に低解像度の下に出力画素信号を生成する際の補間処理以外の構成は、種々変更可能である。
【0139】
また、映像信号処理部は、図7に示した構成要素以外に、クランプ回路、ガンマ補正回路、ホワイトクリップ回路、輪郭補正回路、垂直偽信号抑圧回路、トラッキング補正回路、高輝度着色防止回路、低彩度圧縮回路等、種々の回路を用いて構成することができる。
【0140】
【発明の効果】
以上説明したように、本発明によれば、比較的簡単な信号処理によって出力画素信号を得ることが可能になる。固体撮像装置をより安価に提供することが可能になる。
【図面の簡単な説明】
【図1】第1の実施例による固体撮像装置を概略的に示すブロック図である。
【図2】図1に示した固体撮像装置に利用することができる固体撮像素子を概略的に示す平面図である。
【図3】図3(A)は、図2に示した固体撮像素子におけるカラー画素の配列を示す模式図であり、図3(B)は、図1に示した映像信号処理部内の第1の信号処理部で赤色画素からの画素信号に対して行われる補間処理の態様を示す概念図であり、図3(C)は、図1に示した映像信号処理部内の第1の信号処理部で青色画素からの画素信号に対して行われる補間処理の態様を示す概念図である。
【図4】第1の信号処理部で生成された出力画素信号に基づいてモニタやプリンタによってモニタやプリンタによって再生される映像での再生画素の分布を示す概念図である。
【図5】第2の信号処理部で生成された出力画素信号に基づいてモニタやプリンタによってモニタやプリンタによって再生される映像での再生画素の分布を示す概念図である。
【図6】図1に示した固体撮像装置に利用することができる他の固体撮像素子を概略的に示す平面図である。
【図7】図1に示した映像信号処理部の構成例を概念的に示すブロック図である。
【図8】図7に示した第1補間処理回路を概略的に示すブロック図である。
【図9】図2に示した固体撮像素子として利用することができるCCD型の固体撮像素子におけるカラー画素の断面構造を所定の方向から見たときの概略図である。
【図10】図2に示した固体撮像素子として利用することができるCCD型の固体撮像素子におけるカラー画素の断面構造を他の方向から見たときの概略図である。
【図11】図9および図10に示した固体撮像素子における光電変換素子の各々と、垂直電荷転送素子の各々と、読出しゲートの各々と、水平電荷転送素子と、出力アンプの配置を概略的に示す平面図である。
【図12】図2に示した固体撮像素子として利用することができる他のCCD型の固体撮像素子における光電変換素子の各々と、垂直電荷転送素子の各々と、読出しゲートの各々と、水平電荷転送素子と、出力アンプの配置を概略的に示す平面図である。
【符号の説明】
10、10a、10b、10c、10d…固体撮像素子、 20R、20G、20B…カラー画素、 22…光電変換素子、 40…垂直電荷転送素子、 50…水平電荷転送素子、 55…出力アンプ、 65…映像信号処理部、 70…第1の信号処理部、 71a〜71e…第1〜第5補間処理回路、 77…第2の信号処理部。
Claims (9)
- 検出する色情報に基づいて少なくとも3種類に分類される補色系のカラー画素を含む多数個のカラー画素が複数行、複数列に亘って画素ずらし配置され、該多数個のカラー画素のうち少なくとも1種類のカラー画素が行方向および列方向に関して正方格子状に分布する固体撮像素子と、
前記固体撮像素子から出力される前記補色系のカラー画素からの画素信号に基づく色情報を原色系の色情報に変換する補色/原色変換処理回路と、
前記補色/原色変換処理回路で変換された画素信号のうち、前記正方格子状に分布する1種類のカラー画素それぞれからの画素信号は補間処理せず、他の種類のカラー画素それぞれからの画素信号は補間処理して出力画素信号を生成する第1の信号処理部と
を有する固体撮像装置。 - 前記少なくとも1種のカラー画素が緑色画素である請求項1記載の固体撮像装置。
- 前記第1の信号処理部が、1行のカラー画素行を挟んで並存する2行のカラー画素行からの画素信号を利用して補間処理を行って、再生映像において前記1行のカラー画素行に対応する再生画素行用の出力画素信号を生成する請求項1又は2記載の固体撮像装置。
- 前記正方格子状に分布する1種類のカラー画素それぞれに近接して前記他の種類のカラー画素が各々2個づつ分布し、前記第1の信号処理部が、前記正方格子状に分布する1種類のカラー画素の1個からの画素信号と、該カラー画素に近接する前記他の種類のカラー画素各々2個ずつからの画素信号に補間処理を施して得た信号とを利用して、1組の出力画素信号を生成する請求項1〜請求項3のいずれか1項に記載の固体撮像装置。
- 前記正方格子状に分布するカラー画素の1個に2個ずつ近接する前記他の種類のカラー画素が、同種のもの同士で、前記正方格子状に分布するカラー画素を介して相隣る請求項4に記載の固体撮像装置。
- さらに、前記多数個のカラー画素それぞれからの画素信号を利用して補間処理を行って出力画素信号を生成する第2の信号処理部を有する請求項1〜請求項5のいずれか1項に記載の固体撮像装置。
- 前記第2の信号処理部が、前記カラー画素の総数よりも再生画素数が多い再生映像に対応した出力画素信号を生成する請求項6に記載の固体撮像装置。
- 前記固体撮像素子が、さらに、前記カラー画素の1列毎または2列毎に1つずつ配置された垂直電荷転送素子であって、各々が、対応するカラー画素列中のカラー画素それぞれと電気的に接続される垂直電荷転送素子を含む請求項1〜請求項7のいずれか1項に記載の固体撮像装置。
- 前記固体撮像素子が、さらに、前記垂直電荷転送素子の各々と電気的に接続される水平電荷転送素子と、該水平電荷転送素子に電気的に接続される出力アンプとを有する請求項8に記載の固体撮像装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000398244A JP4423452B2 (ja) | 2000-12-27 | 2000-12-27 | 固体撮像装置 |
US10/022,377 US7110031B2 (en) | 2000-12-27 | 2001-12-20 | State image pickup apparatus having pixel shift layout |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000398244A JP4423452B2 (ja) | 2000-12-27 | 2000-12-27 | 固体撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002199411A JP2002199411A (ja) | 2002-07-12 |
JP4423452B2 true JP4423452B2 (ja) | 2010-03-03 |
Family
ID=18863251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000398244A Expired - Fee Related JP4423452B2 (ja) | 2000-12-27 | 2000-12-27 | 固体撮像装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7110031B2 (ja) |
JP (1) | JP4423452B2 (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4195169B2 (ja) * | 2000-03-14 | 2008-12-10 | 富士フイルム株式会社 | 固体撮像装置および信号処理方法 |
US8120690B2 (en) * | 2001-04-12 | 2012-02-21 | Nikon Corporation | Imaging device |
JP4298964B2 (ja) * | 2002-05-16 | 2009-07-22 | 富士フイルム株式会社 | 固体撮像素子及びその製造方法 |
EP1389876A1 (en) * | 2002-08-12 | 2004-02-18 | STMicroelectronics Limited | Colour image sensor with hexagonal shaped pixels |
JP4497872B2 (ja) * | 2003-09-10 | 2010-07-07 | キヤノン株式会社 | 撮像装置 |
JP4322166B2 (ja) * | 2003-09-19 | 2009-08-26 | 富士フイルム株式会社 | 固体撮像素子 |
KR100562293B1 (ko) * | 2003-10-01 | 2006-03-22 | 동부아남반도체 주식회사 | 씨모스 이미지 센서 및 이의 제조 방법 |
JP4207736B2 (ja) * | 2003-10-01 | 2009-01-14 | ソニー株式会社 | 固体撮像装置 |
US7212214B2 (en) * | 2004-09-03 | 2007-05-01 | Seiko Epson Corporation | Apparatuses and methods for interpolating missing colors |
JP4548390B2 (ja) * | 2006-06-16 | 2010-09-22 | ソニー株式会社 | 撮像装置及び信号処理方法 |
KR100784391B1 (ko) * | 2006-09-06 | 2007-12-11 | 삼성전자주식회사 | 칼라 필터 어레이 그리고 그것을 포함하는 씨모스 이미지 센서 |
DE102007034608A1 (de) * | 2007-07-25 | 2009-01-29 | Robert Bosch Gmbh | Kamera |
JP2009246745A (ja) * | 2008-03-31 | 2009-10-22 | Panasonic Corp | 撮像装置、撮像モジュール、電子スチルカメラ、及び電子ムービーカメラ |
KR101315299B1 (ko) * | 2008-11-07 | 2013-10-14 | 삼성테크윈 주식회사 | 디지털 영상 처리장치 |
JP5470928B2 (ja) | 2009-03-11 | 2014-04-16 | ソニー株式会社 | 固体撮像装置の製造方法 |
WO2013099910A1 (ja) * | 2011-12-27 | 2013-07-04 | 富士フイルム株式会社 | 固体撮像装置 |
US10832616B2 (en) | 2012-03-06 | 2020-11-10 | Samsung Display Co., Ltd. | Pixel arrangement structure for organic light emitting diode display |
KR101615332B1 (ko) | 2012-03-06 | 2016-04-26 | 삼성디스플레이 주식회사 | 유기 발광 표시 장치의 화소 배열 구조 |
KR101427593B1 (ko) | 2013-04-26 | 2014-08-07 | 삼성디스플레이 주식회사 | 유기 발광 표시 장치 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5970091A (ja) * | 1982-10-13 | 1984-04-20 | Nippon Kogaku Kk <Nikon> | 電子スチルカメラ |
US5218430A (en) * | 1986-04-26 | 1993-06-08 | Erno Gmbh | Color video transmission |
US5319451A (en) * | 1988-05-31 | 1994-06-07 | Canon Kabushiki Kaisha | Color signal processing apparatus using a common low pass filter for the luminance signal and the color signals |
US5280347A (en) * | 1990-10-30 | 1994-01-18 | Canon Kabushiki Kaisha | Color image sensing device |
US5251019A (en) * | 1991-01-25 | 1993-10-05 | Eastman Kodak Company | Solid state color image sensor using a field-staggered color filter pattern |
JPH0622339A (ja) * | 1992-06-30 | 1994-01-28 | Canon Inc | 映像信号記録装置 |
DE19525531A1 (de) * | 1995-07-13 | 1997-01-16 | Philips Patentverwaltung | Verfahren zur Zwischenbild-Interpolation von Farbdifferenzsignalen sowie Schaltungsanordnung zur Durchführung dieses Verfahrens |
JPH09205615A (ja) * | 1996-01-25 | 1997-08-05 | Canon Inc | 記録装置 |
US5663759A (en) * | 1996-06-10 | 1997-09-02 | Industrial Technology Research Institute | Feature processor for a digital camera |
US5805217A (en) * | 1996-06-14 | 1998-09-08 | Iterated Systems, Inc. | Method and system for interpolating missing picture elements in a single color component array obtained from a single color sensor |
JP3724882B2 (ja) * | 1996-08-14 | 2005-12-07 | シャープ株式会社 | カラー固体撮像装置 |
JP3459738B2 (ja) * | 1996-12-20 | 2003-10-27 | キヤノン株式会社 | 撮像装置 |
US6882364B1 (en) * | 1997-12-02 | 2005-04-19 | Fuji Photo Film Co., Ltd | Solid-state imaging apparatus and signal processing method for transforming image signals output from a honeycomb arrangement to high quality video signals |
JP4607265B2 (ja) * | 1998-01-08 | 2011-01-05 | 富士フイルム株式会社 | 固体撮像装置および信号処理方法 |
JP4020488B2 (ja) * | 1998-05-18 | 2007-12-12 | 富士フイルム株式会社 | 固体撮像装置 |
US6252218B1 (en) * | 1999-02-02 | 2001-06-26 | Agilent Technologies, Inc | Amorphous silicon active pixel sensor with rectangular readout layer in a hexagonal grid layout |
US6657755B1 (en) * | 1999-02-19 | 2003-12-02 | Micron Technology, Inc. | Diagonalized image sensor pixels |
JP4162111B2 (ja) * | 1999-07-27 | 2008-10-08 | 富士フイルム株式会社 | 画像処理方法および装置並びに記録媒体 |
JP4092409B2 (ja) * | 1999-08-18 | 2008-05-28 | 富士フイルム株式会社 | 固体撮像素子 |
KR100316717B1 (ko) * | 1999-10-05 | 2001-12-20 | 윤종용 | 영상처리 시스템의 다이나믹 레인지 확대 장치 및 방법 |
US6900838B1 (en) * | 1999-10-14 | 2005-05-31 | Hitachi Denshi Kabushiki Kaisha | Method of processing image signal from solid-state imaging device, image signal processing apparatus, image signal generating apparatus and computer program product for image signal processing method |
JP3991543B2 (ja) * | 2000-01-11 | 2007-10-17 | 株式会社日立製作所 | 撮像装置 |
US6754402B2 (en) * | 2000-02-09 | 2004-06-22 | Fuji Photo Film Co., Ltd. | Interpolation arithmetic method and image reader |
EP1148735A1 (en) * | 2000-04-20 | 2001-10-24 | Koninklijke Philips Electronics N.V. | Camera with color filter |
US6876771B2 (en) * | 2000-12-20 | 2005-04-05 | Pts Corporation | Efficiently adaptive double pyramidal coding |
JP4503823B2 (ja) * | 2000-12-22 | 2010-07-14 | 富士フイルム株式会社 | 画像信号処理方法 |
US7440016B2 (en) * | 2003-12-22 | 2008-10-21 | Hewlett-Packard Development Company, L.P. | Method of processing a digital image |
-
2000
- 2000-12-27 JP JP2000398244A patent/JP4423452B2/ja not_active Expired - Fee Related
-
2001
- 2001-12-20 US US10/022,377 patent/US7110031B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20020085103A1 (en) | 2002-07-04 |
US7110031B2 (en) | 2006-09-19 |
JP2002199411A (ja) | 2002-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4423452B2 (ja) | 固体撮像装置 | |
US6992714B1 (en) | Image pickup apparatus having plural pixels arranged two-dimensionally, and selective addition of different pixel color signals to control spatial color arrangement | |
US8754967B2 (en) | Solid-state imaging device, signal processing method thereof, and image capturing apparatus | |
JP4338298B2 (ja) | 電荷転送装置およびその駆動方法 | |
US8023018B2 (en) | Drive method for solid-state imaging device, solid-state imaging device, and imaging apparatus | |
JP4500574B2 (ja) | 広ダイナミックレンジカラー固体撮像装置及びこの固体撮像装置を搭載したデジタルカメラ | |
US7768569B2 (en) | High sensitivity color filter array | |
JPH07264489A (ja) | モーション/スチル電子イメージ検出装置 | |
JP4050906B2 (ja) | 固体撮像装置 | |
JP2005260318A (ja) | 2板式カラー固体撮像装置及びデジタルカメラ | |
JP3950655B2 (ja) | 撮像装置 | |
JP4183635B2 (ja) | 固体撮像装置 | |
JP4078741B2 (ja) | 固体撮像装置およびその駆動方法並びにカメラシステム | |
JP3928840B2 (ja) | 固体撮像装置 | |
JP4497261B2 (ja) | 電荷転送装置、ccdイメージセンサおよびccd撮像システム | |
US7061655B2 (en) | Provision of bright and high quality image from CCD image pick-up device | |
JP2002185870A (ja) | 固体撮像素子 | |
JP4251313B2 (ja) | 固体撮像装置 | |
JP2005175893A (ja) | 2板式カラー固体撮像装置及びデジタルカメラ | |
JP4004833B2 (ja) | 固体撮像素子の駆動方法および撮像装置 | |
JP4010446B2 (ja) | 電荷転送装置および固体撮像素子 | |
JP2005210359A (ja) | 2板式カラー固体撮像装置及びデジタルカメラ | |
JP2006042146A (ja) | 固体撮像装置及び固体撮像装置の動作方法 | |
JP2003060185A (ja) | 固体撮像装置及びその制御方法 | |
JP2000197066A (ja) | 固体撮像素子、その信号処理方法およびカメラシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20060621 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070216 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090317 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090514 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091117 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091118 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121218 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |