JP2004112768A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2004112768A JP2004112768A JP2003271584A JP2003271584A JP2004112768A JP 2004112768 A JP2004112768 A JP 2004112768A JP 2003271584 A JP2003271584 A JP 2003271584A JP 2003271584 A JP2003271584 A JP 2003271584A JP 2004112768 A JP2004112768 A JP 2004112768A
- Authority
- JP
- Japan
- Prior art keywords
- combined
- output
- color component
- color
- charge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
【課題】モザイク型のカラーフィルタを用いたカラー撮像装置において、コストの増大を防止しつつ、感度の向上を図る。
【解決手段】蓄積部11vのライン転送を2回連続して行い、水平転送部11h上に2ラインが合成された合成行を生成する。合成行には、R成分及びG成分の和〈R+G〉とG成分及びB成分の和〈G+B〉とが交互に並ぶ。出力部11dの分周リセットクロックφr’を水平転送クロックφhの2周期に1回とする。また、φr’は合成行の奇数行と偶数行とでφhの1周期分、位相がずらされる。これにより、奇数行では、〈R+G〉に対応したデータD(R+G)と〈R+G〉及び〈G+B〉の和に対応したデータD(R+2G+B)とが交互に得られ、偶数行では、〈G+B〉に対応したデータD(G+B)とD(R+2G+B)とが交互に得られる。4画素が合成されたD(R+2G+B)を輝度信号として感度が向上される。またD(R+G)、D(G+B)から色信号が得られる。
【選択図】図1
【解決手段】蓄積部11vのライン転送を2回連続して行い、水平転送部11h上に2ラインが合成された合成行を生成する。合成行には、R成分及びG成分の和〈R+G〉とG成分及びB成分の和〈G+B〉とが交互に並ぶ。出力部11dの分周リセットクロックφr’を水平転送クロックφhの2周期に1回とする。また、φr’は合成行の奇数行と偶数行とでφhの1周期分、位相がずらされる。これにより、奇数行では、〈R+G〉に対応したデータD(R+G)と〈R+G〉及び〈G+B〉の和に対応したデータD(R+2G+B)とが交互に得られ、偶数行では、〈G+B〉に対応したデータD(G+B)とD(R+2G+B)とが交互に得られる。4画素が合成されたD(R+2G+B)を輝度信号として感度が向上される。またD(R+G)、D(G+B)から色信号が得られる。
【選択図】図1
Description
本発明は、カラーフィルタが装着された固体撮像素子を用いてカラー撮像を行う撮像装置に関する。
従来より、撮像デバイスにCCD(Charge Coupled Device:電荷結合素子)イメージセンサを用いた撮像装置としてデジタルカメラが知られている。このようなデジタルカメラには、一般にモニタモードと称される撮像モードが設定される。このモニタモードとは、表示画面上に表示される画像を見ながら被写体を定めるためのモードで、被写体写真としてメモリに記録する静止画像を撮像する場合と比べて、さほど高い解像度が望まれるわけではない。また、近年においては、デジタルカメラを、例えば、携帯電話機に搭載し、携行先で簡易なデジタルカメラとして扱うことができるものが普及している。このようなデジタルカメラでは、通常のデジタルカメラよりも表示画面が比較的小さいことに起因し、通常のデジタルカメラのモニタモードよりも解像度が重視されない。このようなデジタルカメラでは、むしろ、小型であって、且つ、安価であることへの要望が強い。
図8は、従来の撮像装置の概略構成を示すブロック構成図である。ここに示す撮像装置は、CCDイメージセンサ(固体撮像素子)1、CCDドライバ回路2、タイミング制御回路6、アナログ信号処理回路3、A/D変換回路4及びデジタル信号処理回路5から構成される。
固体撮像素子1は、行列配置される複数の受光画素を有する受光領域を備えており、この受光面に入射される光を各受光画素で受けて光電変換によって情報電荷を発生する。固体撮像素子1では、この情報電荷を蓄積期間で各受光画素に蓄積し、その後、複数のシフトレジスタを介して順次転送する。そして、転送経路の最終段に設けられる出力部によって電圧値に変換し、画像信号Y0(t)として出力する。このように、蓄積した情報電荷を順次転送して画像信号を出力する固体撮像素子には、転送方式の異なる幾つかのタイプがある。これらのタイプとして、撮像部で蓄積した情報電荷を蓄積部へ一括的に転送するフレームトランスファ型、受光画素の各列の間に配置される垂直転送部へ情報電荷を転送するインターライン型、フレームトランスファ型及びインターライン型の両者の特徴を合わせ持つフレームインターライン型がある。
CCDドライバ回路2は、後述するタイミング制御回路6から供給される垂直同期信号VT及び水平同期信号HTに同期する複数のクロックパルスを生成する。そして、生成した複数のクロックパルスを固体撮像素子1に供給し、固体撮像素子1を駆動して複数の受光画素に蓄積された情報電荷を順次転送させる。
アナログ信号処理回路3は、固体撮像素子1から出力される画像信号Y0(t)に対してCDS(Correlated Double Sampling:相関二重サンプリング)やAGC(Automatic Gain Control:自動利得制御)等のアナログ信号処理を施して画像信号Y1(t)を生成する。A/D変換回路4は、固体撮像素子1の動作タイミングに同期して画像信号Y1(t)を規格化し、デジタル信号に変換して画像データY0(n)として出力する。
デジタル信号処理回路5は、A/D変換回路4から出力される画像データY0(n)に対して色分離及びマトリクス演算等のデジタル信号処理を施し、輝度データ及び色差データを含む画像データY1(n)を生成する。
タイミング制御回路6は、基準クロックCKをカウントして垂直同期信号VT及び水平同期信号HTを生成し、固体撮像素子1の垂直走査及び水平走査の期間を決定する。例えば、NTSC方式に従う場合、信号処理の過程で用いられる色副搬送波の周波数3.58MHzの4倍の周波数の基準クロックCKを1/910に分周して水平同期信号HTを生成する。更に、この水平同期信号HTを2/525に分周して垂直同期信号VTを生成する。
このように固体撮像素子から出力される画像信号に対して各種の信号処理を施して画像データを得る撮像装置においては、被写体の照度に応じて情報電荷の蓄積期間を調整する所謂露光制御が行われる。この露光制御の手段としては、測光センサで測定された照度に応じて蓄積期間の伸縮制御を行うもの、或いは、以前からの画像情報の積分値を参照して蓄積期間の伸縮制御を行うものがある。例えば、後者の場合にあっては、画像データの積分値が適正範囲を超えると固体撮像素子1の蓄積時間を短くし、逆に、積分値が適正範囲を下回ると蓄積時間を長くするようにフィードバック制御を行う。これにより、固体撮像素子1の照度範囲が拡大され、被写体の照度に応じた適切な画像情報を得ることができる。そして、上述の露光制御手段を用いても露光不足が解消できない場合に更に照度範囲を拡大する手段として、各受光画素で得られた情報電荷を合成するものがある。これは、被写体の照度が低くて十分な情報電荷が得られなかった場合、近傍の情報電荷同士を混合して複数画素分の合成信号を取り出し、これによって画像情報の不足分を補うものである。このような手段によれば、暗い被写体に対しても露光不足となることなく十分なレベルの画像情報を得ることが出来る。
上述のような撮像装置においては、カラー撮像を行う場合、固体撮像素子の受光面にカラーフィルタが装着される。このカラーフィルタは、三原色或いはその補色のそれぞれが所定の順序で規則的に配置され、その各セグメントが固体撮像素子の各受光画素に割り当てられる。例えば、モザイク型のカラーフィルタの場合、図9に示すように、奇数行のセグメントに緑(G)及び赤(R)が交互に配置され、偶数行のセグメントにG及び青(B)が配置される。このようなカラーフィルタは、隣接する2つのセグメントが互いに異なる色に対応するため、情報電荷を合成すると色再現性において不都合が生じ得る。この問題を解決するものとしての撮像装置が、本出願人によって特開平8−154253に提案されている。これは、垂直転送部の奇数列と偶数列とでビット数に差を設けて受光画素の奇数列で得られた情報電荷と偶数列で得られた情報電荷を交互に出力し、水平転送部で同じ色成分に対応する情報電荷が連続するようにしたものである。しかしながら、このような撮像装置においては、固体撮像素子のデバイス構造の変更が必要であり、これに伴う製造コストの増大を避けることができず、低価格帯での提供を目的とするものには全くの不向きであった。
そこで、本発明は、コストの増大を防止しつつモザイク型のカラーフィルタを用いたカラー撮像であっても感度の向上を図ることのできる撮像装置の提供を目的とする。
本発明にかかる撮像装置は、奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷をk行(kは自然数)ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3の色成分が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部にmビット分(mは自然数、ただしk又はmの一方は2以上)、累積的に蓄積させ、前記第1〜第3の色成分が第1の比率で合成された第1の出力と、前記第1〜第3の色成分が第2の比率で合成された第2の出力と、前記第1〜第3の色成分が第3の比率で合成された第3の出力とを得る駆動回路と、前記固体撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号と前記第3の出力に応じた第3の画像信号とを取り出すサンプルホールド回路と、前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路とを備え、前記信号処理回路は、前記第1〜3の画像信号から前記第1〜3の色成分を表す色成分信号を生成する。
さらに本発明にかかる撮像装置は、奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷をk行(kは自然数)ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部にmビット分(mは自然数、ただしk又はmの一方は2以上)、累積的に蓄積させ、前記第1〜第3の色成分が第1の比率で合成された第1の出力と、前記第1〜第3の色成分が第2の比率で合成された第2の出力と、前記第1〜第3の色成分が第3の比率で合成された第3の出力とを得る駆動回路と、前記固定撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号と前記第3の出力に応じた第3の画像信号とを取り出すサンプルホールド回路と、前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路とを備え、前記信号処理回路は、前記第1〜3の画像信号から前記第1〜3の色成分のうち少なくとも1の色成分を近似的に表す色成分信号を生成する。
さらに本発明にかかる撮像装置は、奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷を2行ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3の色成分が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部に2ビット分、累積的に蓄積させ、前記第1の合成電荷又は第2の合成電荷の電荷量に応じた第1の出力と、前記第1の合成電荷及び第2の合成電荷を合成した電荷量に応じた第2の出力とを得る駆動回路と、前記固体撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号とを取り出すサンプルホールド回路と、前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路とを備え、前記信号処理回路は、前記第1の画像信号から前記第1,又は第3の色成分を近似的に表す第1の色成分信号を生成すると共に、前記第2の画像信号から前記第2の色成分を近似的に表す第2の色成分信号を生成する。
さらに本発明にかかる撮像装置は、奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷を2行ずつ合成し、前記第1及び第2の色成分を示す第1の合成電荷と前記第2及び第3の色成分を示す第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積させ、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部に2ビット分、累積的に蓄積させ、前記第1の合成電荷又は第2の合成電荷の電荷量に応じた第1の出力と、前記第1の合成電荷及び第2の合成電荷を合成した電荷量に応じた第2の出力とを得る駆動回路と、前記固体撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号とを取り出すサンプルホールド回路と、前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路とを備え、前記信号処理回路は、前記第1の画像信号から前記第1又は第3の色成分を近似的に表す第1の色成分信号を生成すると共に、前記第2の画像信号から前記第2の色成分を近似的に表す第2の色成分信号を生成する。
本発明によれば、水平シフトレジスタの水平転送動作の起動を垂直シフトレジスタの垂直転送駆動の2回毎に1回とすることにより、垂直方向に連続する2画素の情報電荷が合成された合成電荷が水平シフトレジスタ上に蓄積される。ここで、水平シフトレジスタに保持された合成電荷の水平な並びを合成行と称する。上述の垂直方向の合成により、受光画素の2行毎に1行の合成行が生成される。第i行の合成行を構成する合成電荷のうち、受光画素アレイの第j列に対応する水平シフトレジスタのビットに蓄積されるものをQ(i,j)と表す。合成行には、第1の色成分と第2の色成分とを合成した第1の合成電荷と、第2の色成分と第3の色成分とを合成した第2の合成電荷とが交互に並ぶ。合成行が生成された後、水平シフトレジスタの水平転送を起動し、かつ出力部からの情報電荷の排出動作を水平シフトレジスタから出力部へ2個の合成電荷パケットが転送される度に1回とすることにより、出力部には、2個の合成電荷パケットが段階的に合成され、その電荷量に応じて段階的に変化する電圧信号が出力部から出力される。この出力信号の各段はそれぞれ、異なる色混合比(色感度特性の異なる画素数の比率)に対応する。出力部に1個の合成電荷が蓄積された状態が第1の出力を与え、これをサンプリングして第1の画像信号が取り出される。出力部に2個の合成電荷が蓄積された状態が第2の出力を与え、これをサンプリングして第2の画像信号が取り出される。出力部からの情報電荷の排出動作の位相に応じて、第1の画像信号は第1の合成電荷の電荷量に応じた値である場合と、第2の合成電荷の電荷量に応じた値である場合とがある。第1の出力を第1の合成電荷に基づいて得るか、第2の合成電荷に基づいて得るかは、例えば合成行に応じて交互に切り替えることができる。第2の画像信号は第1の合成電荷と第2の合成信号とを合成した電荷量に応じた値となる。信号処理回路は、第1の画像信号が第1の合成電荷に基づく場合、第2の合成電荷に基づく場合それぞれに対応して、第1の色成分を近似的に表す第1の色成分信号、第3の色成分を近似的に表す第3の色成分信号を生成する。第2の画像信号は4画素の情報電荷を合成して得られるが、このうちの2画素は第2の色成分に対応付けられる。信号処理回路は、この第2の画像信号から第2の色成分を近似的に表す第2の色成分信号を生成する。これら複数の画像信号に基づいて、輝度信号、色信号を生成することができる。すなわち、垂直方向の合成で得られた合成電荷パケットをさらに水平方向に関して複数個、合成することで、輝度信号としては一層の感度向上が図られ、さらに色信号が得られるので、カラー表示が可能である。
本発明の好適な態様においては、前記第1乃至第3の色成分が、赤色、緑色、青色からなる光の三原色であり、前記第2の色成分が緑色である。
本発明によれば、モザイク型のカラーフィルタを用いた固体撮像素子を用いた撮像装置において、コストの増大を防止しながら、感度の向上及び色情報の取得が可能である。
次に、本発明の第1の実施形態について図面を参照して説明する。
図1は、本発明の撮像装置の概略構成を示すブロック構成図である。ここに示す撮像装置は、固体撮像素子11、CCDドライバ回路12、分周回路13、タイミング制御回路14、アナログ信号処理回路15、A/D変換回路16及びデジタル信号処理回路17で構成される。本装置は、低照度の撮影条件下において複数画素の情報電荷を合成して感度を向上させ、忠実な色成分を取得する動作モードを有する。以下、これを増感動作モードと称する。この増感動作モードにおいては、後述するように固体撮像素子11の行列配置された画素の列方向(すなわち垂直方向)及び行方向(すなわち水平方向)それぞれについて複数画素の合成が行われる。
固体撮像素子11は、例えば、フレームトランスファ型であり、撮像部11i、蓄積部11v、水平転送部11h及び出力部11dからなる。撮像部11iは、複数の垂直シフトレジスタから構成され、これら垂直シフトレジスタの各ビットが各受光画素を形成しており、複数の受光画素が行列配置された状態となっている。この撮像部11iの表面には、カラー撮像のためのカラーフィルタが装着され、このカラーフィルタの各セグメントが複数の受光画素のそれぞれに対応付けられる。例えば、このカラーフィルタが図7に示すようなモザイク型のカラーフィルタであった場合、行列配置される受光画素の奇数行で青(B)、緑(G)が交互に対応付けられ、偶数行で緑(G)、赤(R)が交互に対応付けられる。また、撮像部11iには、複数の垂直シフトレジスタの一部の列が遮光されて所謂OPB(Optical Black)領域と称される領域に設定され、この領域で得られた情報電荷に基づいて画像情報の黒レベルが決定される。
蓄積部11vは、撮像部11iを構成する複数の垂直シフトレジスタに連続する複数の垂直シフトレジスタから構成され、撮像部11iを構成する複数の垂直シフトレジスタのビット数と同一のビット数に設定される。水平転送部11hは、蓄積部11vの出力側に配置される単一の水平シフトレジスタからなり、蓄積部11vを構成する複数の垂直シフトレジスタの各出力が各ビットに対応付けられるように接続される。出力部11dは、水平転送部11hの出力側に配置され、水平転送部11hから出力される情報電荷を取り込む容量を備えて構成される。この出力部11dは、容量に取り込んだ情報電荷をその電荷量に応じて逐次電圧値に変換し、画像信号Y0(t)として出力する。
これらの構成を有するフレームトランスファ型の固体撮像素子11には、横型オーバーフロードレイン(LOD:Lateral Overflow Drain)構造や縦型オーバーフロードレイン(VOD:Vertical Overflow Drain)構造のものがある。これらは、何れのタイプであっても、撮像部11iに蓄積した情報電荷の排出が可能となっており、この情報電荷の排出によって、撮像部11iにおける情報電荷の蓄積状態がリセットされる。
CCDドライバ回路12は、B−クロック発生部12b、F−クロック発生部12f、V−クロック発生部12v、H−クロック発生部12h、R−クロック発生部12r及びS−クロック発生部12sから構成され、各クロック発生部で発生するクロックパルスを固体撮像素子11に供給する。
B−クロック発生部12bは、タイミング制御回路14から供給される排出タイミング信号BTに応答して排出クロックφbを生成する。このB−クロック発生部12bで生成される排出クロックφbは、固体撮像素子11が横型オーバーフロードレイン構造を有する場合、オーバーフロードレイン領域へ印加され、一方、縦型オーバーフロードレイン構造を有する場合、固体撮像素子11の基板側へ印加される。
F−クロック発生部12fは、タイミング制御回路14から供給されるフレームシフトタイミング信号FTに応答して、例えば、4相のフレーム転送クロックφfを生成し、撮像部11iへ印加する。V−クロック発生部12vは、タイミング制御回路14から供給される垂直同期信号VT及び水平同期信号HTに応答して、例えば、4相のライン転送クロックφvを生成し、蓄積部11vへ印加する。H−クロック発生部12hは、タイミング制御回路14から供給される水平同期信号HTに応答して、例えば、2相の水平転送クロックφhを生成し、水平転送部11hへ印加する。R−クロック発生部12rは、H−クロック発生部12hに同期するリセットクロックφrを生成し、分周回路13を介して出力部11dへ印加する。S−クロック発生部12sは、水平転送クロックφhに基づいてサンプリングクロックφsを生成し、サンプリングホールド回路15aへ印加する。
分周回路13は、R−クロック発生部12rから出力されるリセットクロックφrを取り込み、このリセットクロックφrを必要に応じて分周して分周リセットクロックφr’を生成する。分周回路13は増感動作モードにおいて、分周されたリセットクロックφr’を生成して、出力部11dのリセット動作を間欠的とする。これにより、出力部11dの容量に水平転送部11hの複数ビット分の情報電荷が蓄積され、増感動作モードにおける水平方向の画素合成が実現される。例えば、リセットクロックφrを1/2に分周して出力部11dのリセット動作の周期を2倍に設定した場合、出力部11dには、水平転送部11hの2ビット分の情報電荷が順次、蓄積される。このため、出力部11dの出力側からは、水平転送部の1ビット分の情報電荷量に応じた電圧値と2ビット分の情報電荷量に応じた電圧値とが交互に出力される。尚、分周回路13における分周動作の切り換えは、増感動作モードか通常の撮像モードかに応じて選択的に行われる。即ち、撮像部11iにおいて、十分な露光が得られる場合には、通常の撮像モードとされ、分周回路13での分周動作は行われず、R−クロック発生部12rから出力されたリセットクロックφrがそのまま出力部11dへ印加される。逆に、露光不足となると、増感動作モードとされ、分周回路13での分周動作が行われ、上述したような情報電荷の合成処理が行われる。
タイミング制御回路14は、基準クロックCKをカウントする複数のカウンタから構成され、垂直同期信号VT及び水平同期信号HTを生成すると共に、フレームシフトタイミング信号FTを生成する。更に、タイミング制御回路14は、測光センサで測定された照度、或いは、デジタル信号処理回路17で得られる画像データの積分値から算出された値を基に排出タイミング信号BTを生成する。これら垂直同期信号VT、水平同期信号HT、フレームシフトタイミング信号FT及び排出クロックφbは、駆動回路12に供給される。また、タイミング制御回路14では、駆動回路12以外のアナログ信号処理回路15、A/D変換回路16及びデジタル信号処理回路17へ制御信号を供給しており、これらの回路で動作タイミングの整合が図られるようにしている。ここで、タイミング制御回路14は、モード信号MODEを受けて動作し、増感動作モードでは、蓄積部11vから水平転送部11hへの情報電荷の読み出しを複数回行った後に水平転送部11hを駆動して、水平転送部11hに蓄積された情報電荷を出力部11dへ水平転送するようにV−クロック発生部12v及びH−クロック発生部12hを制御する。
アナログ信号処理回路15は、サンプルホールド回路15aを含んで構成され、固体撮像素子11から出力される画像信号Y0(t)に対してCDSやAGC等のアナログ信号処理を施す。サンプルホールド回路15aは、S−クロック発生部12sから印加されるサンプリングクロックφsに従う周期で画像信号Y0(t)をサンプリングし、リセットレベルと信号レベルを繰り返す画像信号Y0(t)から信号レベルのみを示す画像信号Y1(t)を取り出す。このサンプルホールド回路15aに印加される。サンプリングクロックφsは、水平転送クロックφhと同じ周期に設定される。水平転送部11hから出力部11dへ1ビット分の情報電荷が読み出される毎に画像信号Y1(t)が取り出される。よって、増感動作モードでは、画像信号Y1(t)として、水平転送部の1ビット分の情報電荷に対応する信号レベルと、2ビット分の情報電荷が合成された信号レベルとが交互に出力される。
A/D変換回路16は、アナログ信号処理回路15から出力される画像信号Y1(t)を取り込み、デジタル信号に変換して画像データY0(n)として出力する。このとき、A/D変換回路16では、タイミング制御回路14から供給されるA/D変換用のサンプリングクロックDCKに従って画像信号Y1(t)を規格化する。このA/D変換回路16に印加されるサンプリングクロックDCKにおいては、サンプリングクロックφsと同様に、水平転送クロックφhと同一の周期に設定される。このため、増感動作モードにおいてA/D変換回路16からは、水平転送部11hの1ビット分の情報電荷量に対応するデータと複数ビット分の情報電荷量に対応するデータとが交互に出力される。
デジタル信号処理回路17は、輝度データ生成回路18、色分離回路19、色データ生成回路20及びセレクタ21を含んで構成される。輝度データ生成回路18はA/D変換回路16から出力される画像データY0(n)を取り込んでラインメモリに複数ライン分のデータを格納し、これらのデータに対して所定の演算処理を施して輝度データYを生成する。色分離回路19は、A/D変換回路16から出力される画像データY0(n)を取り込んで、この画像データY0(n)からRGB各色の色成分データR'(n)、G'(n)、B'(n)を分離して出力する。色データ生成回路20は、色分離回路19から出力される各色成分データR'(n)、G'(n)、B'(n)を取り込むと共に、輝度データ生成回路18から輝度データYを取り込み、色差信号U,Vを生成する。色データ生成回路20は色成分データR'(n)から輝度データYを差し引くことによって色差信号Uを生成すると共に、色成分データB'(n)から輝度データYを差し引くことによって色差信号Vを生成する。また、色データ生成回路20は、生成した色差信号U,Vだけでなく、色分離回路19から出力される色成分データR'(n)、G'(n)、B'(n)も色差信号U,Vと同時に出力する。セレクタ21は、輝度データ生成回路18及び色データ生成回路20から出力される各データを取り込み、データの受け手側の要望に応じて選択的に出力する。
また、デジタル信号処理回路17には、上述の回路に加え、露光制御回路やホワイトバランス制御回路(図示せず)が設けられる。例えば、露光制御回路においては、固体撮像素子11の露光状態に応じて情報電荷の蓄積時間の伸縮制御を行うと共に、通常の動作モードと増感動作モードとの切換も行う。一方、ホワイトバランス制御回路においては、各色成分データに対してそれぞれ固有のゲイン係数を乗算して互いのバランスを調整し、再生画像の色再現性を向上させている。通常、ホワイトバランス制御においては、1画面乃至複数画面単位で各色成分データを積分し、これら各色成分データの積分値がそれぞれ等しくなるようにフィードバック制御がかけられる。
続いて、図2乃至図5を参照して、増感動作モードでの図1の撮像装置の動作を説明する。図2は、固体撮像素子11の動作を示すタイミング図である。尚、この図において、フレーム転送クロックφf、ライン送りクロックφv及び水平転送クロックφhは、それぞれ多相のクロックパルスであるが、ここでは、多相のうちの1つを代表クロックパルスとして示す。
排出クロックφbは、例えば、固体撮像素子11が縦型オーバーフロードレイン構造を有する場合、基板側の電位を一時的に高電位側へ立ち上げ、撮像部11iに蓄積される情報電荷を基板側に排出する。フレーム転送クロックφfは、垂直走査期間1Vのブランキング期間でクロッキングするように生成され、撮像部11iに蓄積される1画面分の情報電荷を蓄積部11vへ高速で出力する。固体撮像素子11では、前述の排出クロックφbが立ち上げられてから、このフレーム転送クロックφfのクロッキングが開始されるまでの期間Lが、撮像部11iにおける情報電荷の蓄積期間となる。
ライン転送クロックφvは、フレーム転送クロックφfに対応する期間でフレーム転送クロックφfと同じ周期でクロッキングされ、撮像部11iから高速で出力された1画面分の情報電荷を同じ速度で蓄積部11vに順次取り込む。また、ライン転送クロックφvは、撮像部11iから情報電荷を取り込む期間を除いた期間でクロッキングされ、1回のクロッキングによって、蓄積部11vに蓄積された情報電荷が順次1水平ラインずつ、水平転送部11hへ出力される。ここで、通常の動作では、ライン転送クロックφvは、水平同期信号HTに従う周期毎に1回ずつクロッキングされ、1水平走査期間毎に1水平ラインだけ、蓄積部11vから水平転送部11hへ出力される。これに対して、増感動作モードでは、ライン転送クロックφvは、図2に示すように水平同期信号HTに従う周期毎に2回ずつ連続してクロッキングされ、1水平走査期間毎に2水平ライン、蓄積部11vから水平転送部11hへ出力される。この2水平ラインの転送の間、水平転送クロックφhはクロッキングされないので、蓄積部11vの各列から読み出された2画素の情報電荷が水平転送部11hの各ビットにて合成される。すなわち、水平転送部11h上に2つの水平ラインを合成した合成ラインが生成される。しかる後、水平転送クロックφhは、1水平走査期間内でクロッキングするように生成され、1水平期間内で、水平転送部11hに生成された1本分の合成ラインを構成する情報電荷(合成情報電荷)が順次、出力部11dへ出力される。
図3、図4はそれぞれ増感動作モードでの、出力部11dにおけるリセット動作、サンプルホールド回路15aにおけるサンプリング動作及びA/D変換回路16における動作を示すタイミング図である。
図3(a)、図4(a)はそれぞれ水平転送部11hから出力部11dへ出力される合成情報電荷を示す。上述のように蓄積部11vから水平転送部11hへの読み出し動作において水平ラインは2本ずつ合成されて、順次、1つの合成ラインとされる。図3は、(n+1)番目の水平ラインと(n+2)番目の水平ラインとから生成された奇数番目の合成ラインを水平転送部11hにて水平転送する場合を示しており、一方、図4は(n+3)番目の水平ラインと(n+4)番目の水平ラインとから生成された偶数番目の合成ラインを水平転送部11hにて水平転送する場合を示している。
図3(b)、図4(b)はそれぞれ水平転送クロックφhである。また、図3(c)、図4(c)はそれぞれリセットクロックφrである。リセットクロックφrは、水平転送部11hから出力される情報電荷に応じて充放電を繰り返す出力部11dの出力をリセットする。このリセットクロックφrは、通常、水平転送クロックφhと一致する周期に設定される。このため、出力部11dにおいては、通常の動作モードでは、水平転送部11hの1ビット分の情報電荷を容量に蓄積する毎にリセット動作が行われる。
これに対して図3(d)、図4(d)に示す分周リセットクロックφr’は、出力部11dのリセット動作を間欠的にし、出力部11dに複数画素分の情報電荷を蓄積させる。例えば、本装置では分周リセットクロックφr’の周期は水平転送クロックφhの2周期に設定される。また、その位相は、図3に示す奇数番目の合成ラインと図4に示す偶数番目の合成ラインとで水平転送クロックφhの1周期分ずらされる。この動作において、出力部11dでの電位変化として取り出される画像信号Y0(t)が図3(e)、図4(e)に示されている。
例えば、奇数番目及び偶数番目のいずれの合成ラインにおいても、水平転送部11hには2水平ラインを合成した合成情報電荷、即ち、〈R+G〉、〈G+B〉が交互に蓄積される(図3(a)、図4(a)参照)。図3に示す奇数番目の合成ラインでの動作においては、出力部11dには、リセット後、先ず、水平転送クロックφhに応答して合成情報電荷〈R+G〉が容量に蓄積される。これに応答して、出力部11dの出力側からは、合成情報電荷〈R+G〉の電荷量に応じた電圧値が画像信号Y0(t)として出力される。続いて、次の合成情報電荷〈G+B〉が水平転送部11hから出力部11dへ転送され、出力部11dの容量には、水平転送部11hの2ビット分の合成情報電荷が蓄積されることになる。これにより、出力部11dの出力側からは、〈R+G〉及び〈G+B〉の合計に応じた電圧値がY0(t)として出力される。そして、2ビット分に対応する電圧値が出力された後に分周リセットクロックφr’によってリセット動作が行われ、出力部11dの出力側の電位がリセットレベルにリセットされる。
一方、図4に示す偶数番目の合成ラインでの動作においては、出力部11dには、リセット後、先ず、水平転送クロックφhに応答して合成情報電荷〈G+B〉が容量に蓄積される。これに応答して、出力部11dの出力側からは、合成情報電荷〈G+B〉の電荷量に応じた電圧値が画像信号Y0(t)として出力される。続いて、次の合成情報電荷〈R+G〉が水平転送部11hから出力部11dへ転送され、出力部11dの容量には、水平転送部11hの2ビット分の合成情報電荷が蓄積されることになる。これにより、出力部11dの出力側からは、〈R+G〉及び〈G+B〉の合計に応じた電圧値がY0(t)として出力される。そして、2ビット分に対応する電圧値が出力された後に分周リセットクロックφr’によってリセット動作が行われ、出力部11dの出力側の電位がリセットレベルにリセットされる。
図5は、第1の実施形態における、情報電荷が2行合成される画素の組み合わせ及び近似的に示す色データを示す模式図である。
この図では、撮像部11iの第(n+1)〜(n+4)行を構成する各画素の色感度がR,G,Bで示されている。蓄積部11vから水平転送部11hへの転送動作において第(n+1)行及び第(n+2)行を合成することにより、図3に対応する奇数行の合成行が水平転送部11hに生成される。一方、第(n+3)行及び第(n+4)行を合成することにより、図4に対応する偶数行の合成行が水平転送部11hに生成される。
すなわち、奇数行の合成行では、画素ブロック50から得られる合成情報電荷〈R+G〉と、画素ブロック51から得られる合成情報電荷〈G+B〉とが水平転送部11hの各ビットに交互に蓄積される。そして、図3に示す動作によって、出力部11dには、画素ブロック50から得られる合成情報電荷〈G+B〉と、画素ブロック52から得られる合成情報電荷 R+2G+B(〈R+G〉+〈G+B〉)とが分周リセットクロックφr’に同期して交互に蓄積される。一方、偶数行の合成行では、画素ブロック53から得られる合成情報電荷〈G+B〉と、画素ブロック54から得られる合成情報電荷〈R+G〉とが水平転送部11hの各ビットに交互に蓄積される。そして、図4に示す動作によって、出力部11dには、画素ブロック53から得られる合成情報電荷〈G+B〉と、画素ブロック55から得られる合成情報電荷 R+2G+B(〈R+G〉+〈G+B〉)とが分周リセットクロックφr’に同期して交互に蓄積される。
図3(f)、図4(f)はそれぞれサンプリングクロックφsを示す。上述のようにサンプリングクロックφsは、水平転送クロックφhと同じ周期で生成され、サンプルホールド回路15aは、このクロックφsに同期して画像信号Y0(t)をサンプリングする。その結果、画像信号Y0(t)に現れる合成情報電荷1パケット分の情報電荷量に応じた電圧値と2パケット分の情報電荷量に応じた電圧値とが交互にサンプリングされ、画像信号Y1(t)が生成される。また、上述のようにA/D変換回路16に供給されるA/D変換用のサンプリングクロックDCKは、サンプリングクロックφsと同様に、水平転送クロックφhと同一の周期に設定され、このクロックDCKに基づいて、A/D変換回路16はアナログ信号Y1(t)をデジタル信号Y0(n)に変換する。図3(g)、図4(g)はそれぞれA/D変換回路16から出力される画像信号Y0(n)を表す。
その結果、図3に示す奇数番目の合成ラインにおいては、A/D変換回路16から、合成情報電荷量〈R+G〉に応じたデータD(R+G)(画素ブロック50に対応する画像情報)と合成情報電荷量(〈R+G〉+〈G+B〉)(すなわち電荷量〈R+2G+B〉)に応じたデータD(R+2G+B)(画素ブロック52に対応する画像情報)とが交互に画像信号Y0(n)として出力される。一方、図4に示す偶数番目の合成ラインにおいては、A/D変換回路16から、合成情報電荷量〈G+B〉に応じたデータD(G+B)(画素ブロック53に対応する画像情報)と合成情報電荷量(〈R+G〉+〈G+B〉)に応じたデータD(R+2G+B)(画素ブロック55に対応する画像情報)とが交互に画像信号Y0(n)として出力される。
増感動作モードにおいて、輝度データ生成回路18は、A/D変換回路16から出力される画像データY0(n)を取り込み、輝度データYを生成する。この輝度データ生成回路18では、例えば、D(R+G)、D(R+2G+B)、D(G+B)、D(R+2G+B)を加算し、この加算データの平均値を算出して輝度データYとする。この輝度データYは、情報電荷を合成して得られたものであり、低照度の撮像条件下において大きな信号レベルを得ることができる。よって、これを輝度信号として用いることで、撮像装置の感度を向上することができる。
一方、色分離回路19では、赤色成分を近似的に示すデータとして、図5に示すように画像データY0(n)のうちのデータD(R+G)を色成分データR'(n)とする共に、青色成分を近似的に示すデータとして、画像信号Y0(n)のうちのデータD(G+B)を色成分データB'(n)とする。また、色分離回路19では、奇数番目の合成ラインに含まれるD(R+2G+B)と偶数番目の合成ライン含まれるD(R+2G+B)とを加算して、例えば1/4倍し、こうして生成されるデータD(1/2・R+G+1/2・B)を緑色成分を近似的に表す緑色成分データG'(n)とする。なお、この色分離回路19は、輝度データ生成回路18と同様に、ラインメモリを内蔵しており、例えば、R+G及びR+2G+Bの画像情報を含むラインが取り込まれるとき、ラインメモリに格納される別のラインの画像情報に基づき、取り込まれたラインには存在しないG+Bの画像情報を補間するようにしている。
本実施形態においては、垂直シフトレジスタから水平レジスタへの転送課程で情報電荷を2行づつ合成しているが、これに限らず何行合成しても良い。また、分周リセットクロックφr’の分周は1/2にかぎらず、リセット動作の周期を何倍にしても良い。もちろん、行合成をせずに分周リセットクロックφr’のみ複数倍周期にしても良いし、また行合成のみにして分周リセットクロックφr’は1倍周期でも良い。
図6は、第2の実施形態における情報電荷が3行合成される画素の組み合わせ及び近似的に示す色データを示す模式図を示す。これらは3行合成としてリセット3倍周期とした実施形態である。
この図では、撮像部11iの第(n+1)〜(n+6)行を構成する各画素の色感度がR,G,Bで示されている。蓄積部11vから水平転送部11hへの転送動作において第(n+1)行から第(n+3)行を合成することにより、3行毎の合成行が水平転送部11hに生成される。一方、第(n+4)行及び第(n+6)行を合成することにより、3行毎の合成行が水平転送部11hに生成される。
すなわち、第(n+1)行から第(n+3)行では、画素ブロック60から得られる合成情報電荷〈R+2G〉と、画素ブロック61から得られる合成情報電荷〈G+2B〉と、画素ブロック62から得られる合成情報電荷〈R+2G〉が水平転送部11hの各ビットに蓄積される。そして、分周リセットクロックφr’でリセット後、出力部11dには画素ブロック60から得られる合成情報電荷〈R+2G〉と、画素ブロック61から得られる累積された合成情報電荷 R+3G+2B と、画素ブロック62から得られる累積された合成情報電荷 2R+5G+2B とが蓄積される。続いて、分周リセットクロックφr’でリセット後、同様に合成情報電荷<G+2B>,<R+3G+2B>,<2R+4G+4B>が順次蓄積される。
一方、第(n+4)行及び第(n+6)行では、画素ブロック64から得られる合成情報電荷〈2R+G〉と、画素ブロック65から得られる合成情報電荷〈2G+B〉と、画素ブロック66から得られる合成情報電荷〈2R+G〉とが水平転送部11hの各ビットに交互に蓄積される。そして、分周リセットクロックφr’でリセット後、出力部11dには画素ブロック64から得られる合成情報電荷〈2R+G〉と、画素ブロック65から得られる累積された合成情報電荷 2R+3G+B と、画素ブロック66から得られる累積された合成情報電荷 4R+4G+B とが蓄積される。続いて、分周リセットクロックφr’でリセット後、同様に合成情報電荷<2G+B>,<2R+3G+B>,<2R+5G+2B>が順次蓄積される。
サンプリングホールド回路15、A/D変換回路16を通過し、色分離回路19では、赤色成分を近似的に示すデータとして、図6に示すように画像データY0(n)のうちのデータD(2R+G)を色成分データR'(n)とする共に、青色成分を近似的に示すデータとして、画像信号Y0(n)のうちのデータD(G+2B)を色成分データB'(n)とする。また、色分離回路19では、第(n+1)行から第(n+3)の合成ラインに含まれるD(2R+5G+2B)と第(n+4)行及び第(n+6)行の合成ライン含まれるD(2R+5G+2B)とを加算して、例えば1/3倍し、こうして生成されるデータD(2/3・R+5/3G+2/3・B)を緑色成分を近似的に表す緑色成分データG'(n)とする。
図7は、第3の実施形態における情報電荷が4行合成される画素の組み合わせ及び近似的に示す色データを示す模式図である。これらは4行合成としてリセット4倍周期とした実施形態である。
この図では、撮像部11iの第(n+1)〜(n+8)行を構成する各画素の色感度がR,G,Bで示されている。蓄積部11vから水平転送部11hへの転送動作において第(n+1)行から第(n+4)行を合成することにより、4行毎の合成行が水平転送部11hに生成される。一方、第(n+5)行及び第(n+8)行を合成することにより、4行毎の合成行が水平転送部11hに生成される。
すなわち、第(n+1)行から第(n+4)行では、画素ブロック70から得られる合成情報電荷〈2R+2G〉と、画素ブロック71から得られる合成情報電荷〈2G+2B〉と、画素ブロック72から得られる合成情報電荷〈2R+2G〉と、画素ブロック73から得られる合成情報電荷〈2G+2B〉が水平転送部11hの各ビットに蓄積される。そして、出力部11dには、画素ブロック70から得られる合成情報電荷〈2R+2G〉と、画素ブロック71から得られる累積された合成情報電荷 2R+4G+2B と、画素ブロック72から得られる累積された合成情報電荷 4R+6G+2B と、画素ブロック73から得られる累積された合成情報電荷 4R+8G+4B とが分周リセットクロックφr’に同期して蓄積される。
一方、第(n+5)行及び第(n+8)行では、画素ブロック75から得られる合成情報電荷〈2G+2B〉と、画素ブロック76から得られる合成情報電荷〈2R+2G〉と、画素ブロック77から得られる合成情報電荷〈2G+2B〉と、画素ブロック78から得られる合成情報電荷〈2R+2G〉とが水平転送部11hの各ビットに交互に蓄積される。そして、出力部11dには、画素ブロック75から得られる合成情報電荷〈2G+2B〉と、画素ブロック76から得られる累積された合成情報電荷 2R+4G+2B と、画素ブロック77から得られる累積された合成情報電荷 2R+6G+4B と、画素ブロック78から得られる累積された合成情報電荷 4R+8G+4B とが分周リセットクロックφr’に同期して蓄積される。
サンプリングホールド回路15、A/D変換回路16を通過し、色分離回路19では、赤色成分を近似的に示すデータとして、図7に示すように画像データY0(n)のうちのデータD(4R+6G+2B)を1/6倍してデータD(2/3・R+G+1/3・B)を色成分データR'(n)とする共に、青色成分を近似的に示すデータとして、画像信号Y0(n)のうちのデータD(2R+6G+4B)を1/6倍してデータD(1/3・R+G+2/3・B)を色成分データB'(n)とする。また、色分離回路19では、第(n+1)行から第(n+4)の合成ラインに含まれるD(4R+8G+4B)と第(n+5)行及び第(n+8)行の合成ライン含まれるD(4R+8G+4B)とを加算して、例えば1/16倍し、こうして生成されるデータD(1/2・R+G+1/2・B)を緑色成分を近似的に表す緑色成分データG'(n)とする。基本的に緑色成分の画素面積が多くなるので、近似色を表す時に赤色成分や青色成分を優先する処理を行ってる。以上の実施形態では、赤、緑、青の各色成分を示す電荷量の比率が異なる合成情報電荷から近似的に各色成分信号を生成する例を示した。しかし、これに限らず、各色成分を示す電荷量の比率が異なる合成情報電荷から演算により忠実な色成分信号を生成することもできる。
ちなみに、撮像装置は正規の撮影においてはストロボを点灯することにより、通常の動作モードで十分な感度を得ることができ、明るくかつ高解像度の画像を得ることができる。これに対して、増感動作モードは、特にフラッシュ等を用いないで撮影する場合、例えば、正規の撮影の前に被写体を定めるためにビューファインダに表示する画像を得る場合に用いられるものである。つまり、増感動作モードは、もっぱら被写体が見えにくい低照度下で、仮に被写体の画像を捉えるために用いられるものであるので、画素合成による解像度の低下及び色バランスの不正確さは許容され得る。このように、増感動作モードで得られた色成分データR'(n)、G'(n)、B'(n)をそのまま輝度信号、色差信号の生成に用いることで、固体撮像素子のデバイス構造の変更を伴うことなく感度が向上された画像情報を得ることができる。これによりコストの増大が抑制され、特に携帯電話等の小型装置への搭載が容易となる。
一方、色成分データR'(n)、G'(n)、B'(n)に対する色バランスを補正する回路を設けて、より自然な色に近いカラー表示を行うように構成することもできる。
尚、本実施形態においては、フレームトランスファ型の固体撮像素子を用いる撮像装置を例示したが、本発明は、これに限られるものではない。例えば、インターライン型やフレームインターライン型の固体撮像素子を用いた撮像装置であっても十分に適用することが可能である。
11 固体撮像素子、12 CCDドライバ、13 分周回路、14 タイミング制御回路、15 アナログ信号処理回路、15a サンプルホールド回路、17 デジタル信号処理回路、18 輝度データ生成回路、19 色分離回路。
Claims (4)
- 奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、
前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷をk行(kは自然数)ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3の色成分が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部にmビット分(mは自然数、ただしk又はmの一方は2以上)、累積的に蓄積させ、前記第1〜第3の色成分が第1の比率で合成された第1の出力と、前記第1〜第3の色成分が第2の比率で合成された第2の出力と、前記第1〜第3の色成分が第3の比率で合成された第3の出力とを得る駆動回路と、
前記固体撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号と前記第3の出力に応じた第3の画像信号とを取り出すサンプルホールド回路と、
前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路と、を備え、
前記信号処理回路は、前記第1〜3の画像信号から前記第1〜3の色成分を表す色成分信号を生成することを特徴とする撮像装置。 - 奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、
前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷をk行(kは自然数)ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部にmビット分(mは自然数、ただしk又はmの一方は2以上)、累積的に蓄積させ、前記第1〜第3の色成分が第1の比率で合成された第1の出力と、前記第1〜第3の色成分が第2の比率で合成された第2の出力と、前記第1〜第3の色成分が第3の比率で合成された第3の出力とを得る駆動回路と、
前記固定撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号と前記第3の出力に応じた第3の画像信号とを取り出すサンプルホールド回路と、
前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路と、を備え、
前記信号処理回路は、前記第1〜3の画像信号から前記第1〜3の色成分のうち少なくとも1の色成分を近似的に表す色成分信号を生成することを特徴とする撮像装置。 - 奇数行で第1の色成分及び第2の色成分が交互に対応付けられ、偶数行で前記第2の色成分及び第3の色成分が交互に対応付けられる複数の受光画素に複数の垂直シフトレジスタが接続され、これら複数の垂直シフトレジスタの各出力が水平シフトレジスタの各ビットに接続されると共に、前記水平シフトレジスタの出力が出力部に接続される固体撮像素子と、
前記複数の受光画素に蓄積された情報電荷を前記複数の垂直シフトレジスタから前記水平シフトレジスタに転送すると共に、この転送過程で前記情報電荷を2行ずつ合成して、前記第1及び第2の色成分が合成された第1の合成電荷と前記第2及び第3の色成分が合成された第2の合成電荷とを前記水平シフトレジスタの各ビットに交互に蓄積し、前記水平シフトレジスタから1ビット単位で転送される前記第1及び第2の合成電荷を前記出力部に2ビット分、累積的に蓄積させ、前記第1の合成電荷又は第2の合成電荷の電荷量に応じた第1の出力と、前記第1の合成電荷及び第2の合成電荷を合成した電荷量に応じた第2の出力とを得る駆動回路と、
前記固体撮像素子の出力をサンプリングし、前記第1の出力に応じた第1の画像信号と前記第2の出力に応じた第2の画像信号とを取り出すサンプルホールド回路と、
前記サンプルホールド回路で取り出された画像信号に対して所定の信号処理を施す信号処理回路と、を備え、
前記信号処理回路は、前記第1の画像信号から前記第1,又は第3の色成分を近似的に表す第1の色成分信号を生成すると共に、前記第2の画像信号から前記第2の色成分を近似的に表す第2の色成分信号を生成することを特徴とする撮像装置。 - 請求項1〜3に記載の撮像装置において、
前記第1乃至第3の色成分は、赤色、緑色、青色からなる光の三原色であり、前記第2の色成分が緑色であることを特徴とする撮像装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003271584A JP2004112768A (ja) | 2002-08-29 | 2003-07-07 | 撮像装置 |
CNA031278981A CN1484440A (zh) | 2002-08-29 | 2003-08-14 | 摄像装置 |
TW092122705A TWI236288B (en) | 2002-08-29 | 2003-08-19 | Image device |
US10/648,044 US20040090535A1 (en) | 2002-08-29 | 2003-08-26 | Digital camera using a solid image capturing element having a mosaic color filter |
KR10-2003-0059814A KR100525690B1 (ko) | 2002-08-29 | 2003-08-28 | 촬상 장치 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002251628 | 2002-08-29 | ||
JP2003271584A JP2004112768A (ja) | 2002-08-29 | 2003-07-07 | 撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004112768A true JP2004112768A (ja) | 2004-04-08 |
Family
ID=32095383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003271584A Withdrawn JP2004112768A (ja) | 2002-08-29 | 2003-07-07 | 撮像装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20040090535A1 (ja) |
JP (1) | JP2004112768A (ja) |
KR (1) | KR100525690B1 (ja) |
CN (1) | CN1484440A (ja) |
TW (1) | TWI236288B (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007004387A1 (ja) * | 2005-07-05 | 2007-01-11 | Tokyo Institute Of Technology | 固体撮像素子の信号読み出し方法及び画像信号処理方法 |
WO2007004386A1 (ja) * | 2005-07-05 | 2007-01-11 | Tokyo Institute Of Technology | 画素混合方法 |
US9250743B2 (en) | 2009-11-27 | 2016-02-02 | Japan Display Inc. | Sensor device, method of driving sensor element, display device with input function, electronic unit and radiation image pickup device |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050195289A1 (en) * | 2003-09-12 | 2005-09-08 | Jacobs William S. | Solid-state area image sensor readout methods for illuminat discrimination and automatic white balance in digital cameras |
US7385638B2 (en) * | 2004-04-28 | 2008-06-10 | Eastman Kodak Company | Image sensor for still or video photography |
JP4759293B2 (ja) * | 2005-03-15 | 2011-08-31 | キヤノン株式会社 | 撮像素子 |
CN101400002A (zh) * | 2007-09-24 | 2009-04-01 | 鸿富锦精密工业(深圳)有限公司 | 立体影像装置 |
US8081235B2 (en) * | 2007-11-12 | 2011-12-20 | Canon Kabushiki Kaisha | Image pickup apparatus and flicker detection method therefor |
JP5150796B2 (ja) * | 2011-03-30 | 2013-02-27 | 富士フイルム株式会社 | 固体撮像素子の駆動方法並びに固体撮像素子及び撮像装置 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5018135A (ja) * | 1973-06-20 | 1975-02-26 | ||
US5392070A (en) * | 1991-11-26 | 1995-02-21 | Kabushiki Kaisha Toshiba | Apparatus for correcting faulty pixel signals by replacing the faulty pixel signals with normal pixel signals |
US6493025B1 (en) * | 1995-10-05 | 2002-12-10 | Sanyo Electronic Co., Ltd. | Image sensing system equipped with interface between image sensing apparatus and computer machinery |
EP0774865A3 (en) * | 1995-11-17 | 2000-06-07 | SANYO ELECTRIC Co., Ltd. | Video camera with high speed mode |
JPH09247689A (ja) * | 1996-03-11 | 1997-09-19 | Olympus Optical Co Ltd | カラー撮像装置 |
JP3384673B2 (ja) * | 1996-03-12 | 2003-03-10 | 三洋電機株式会社 | ディジタルビデオカメラ |
US5926215A (en) * | 1996-10-17 | 1999-07-20 | Eastman Kodak Company | Fast readout of a color image sensor |
US6677998B1 (en) * | 1999-01-25 | 2004-01-13 | Fuji Photo Film Co., Ltd. | Solid-state electronic image sensing device and method of controlling operation of same |
US6992714B1 (en) * | 1999-05-31 | 2006-01-31 | Canon Kabushiki Kaisha | Image pickup apparatus having plural pixels arranged two-dimensionally, and selective addition of different pixel color signals to control spatial color arrangement |
US6952228B2 (en) * | 2000-10-13 | 2005-10-04 | Canon Kabushiki Kaisha | Image pickup apparatus |
US7139028B2 (en) * | 2000-10-17 | 2006-11-21 | Canon Kabushiki Kaisha | Image pickup apparatus |
JP2002344982A (ja) * | 2001-05-18 | 2002-11-29 | Sanyo Electric Co Ltd | 固体撮像素子及びその駆動方法 |
JP3877565B2 (ja) * | 2001-10-04 | 2007-02-07 | 松下電器産業株式会社 | 撮像装置 |
-
2003
- 2003-07-07 JP JP2003271584A patent/JP2004112768A/ja not_active Withdrawn
- 2003-08-14 CN CNA031278981A patent/CN1484440A/zh active Pending
- 2003-08-19 TW TW092122705A patent/TWI236288B/zh not_active IP Right Cessation
- 2003-08-26 US US10/648,044 patent/US20040090535A1/en not_active Abandoned
- 2003-08-28 KR KR10-2003-0059814A patent/KR100525690B1/ko not_active IP Right Cessation
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007004387A1 (ja) * | 2005-07-05 | 2007-01-11 | Tokyo Institute Of Technology | 固体撮像素子の信号読み出し方法及び画像信号処理方法 |
WO2007004386A1 (ja) * | 2005-07-05 | 2007-01-11 | Tokyo Institute Of Technology | 画素混合方法 |
JP2007019641A (ja) * | 2005-07-05 | 2007-01-25 | Tokyo Institute Of Technology | 固体撮像素子の信号読み出し方法及び画像信号処理方法 |
JP2007019605A (ja) * | 2005-07-05 | 2007-01-25 | Tokyo Institute Of Technology | 画素混合方法 |
US7932944B2 (en) | 2005-07-05 | 2011-04-26 | Tokyo Institute Of Technology | Pixel mixture method |
US7944486B2 (en) | 2005-07-05 | 2011-05-17 | Tokyo Institute Of Technology | Signal readout method of solid-state imaging device and image signal processing method |
US9250743B2 (en) | 2009-11-27 | 2016-02-02 | Japan Display Inc. | Sensor device, method of driving sensor element, display device with input function, electronic unit and radiation image pickup device |
Also Published As
Publication number | Publication date |
---|---|
KR100525690B1 (ko) | 2005-11-03 |
CN1484440A (zh) | 2004-03-24 |
TWI236288B (en) | 2005-07-11 |
TW200405725A (en) | 2004-04-01 |
KR20040019987A (ko) | 2004-03-06 |
US20040090535A1 (en) | 2004-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US4831453A (en) | Solid-state imaging device having high-speed shutter function and method of realizing high-speed function in solid-state imaging device | |
JP2004336469A (ja) | 固体撮像素子、撮像装置、及び画像処理方法 | |
KR100525690B1 (ko) | 촬상 장치 | |
US6118481A (en) | Solid state image pick-up device and image pick-up apparatus | |
JP4078741B2 (ja) | 固体撮像装置およびその駆動方法並びにカメラシステム | |
JP4311776B2 (ja) | 撮像装置 | |
KR100347494B1 (ko) | 고체 촬상 장치 | |
JPH10200908A (ja) | 固体撮像装置 | |
JP2005286565A (ja) | 固体撮像素子及び固体撮像素子の駆動方法 | |
US7616354B2 (en) | Image capture apparatus configured to divisionally read out accumulated charges with a plurality of fields using interlaced scanning | |
JP3627711B2 (ja) | カラー撮像装置 | |
JP4118068B2 (ja) | 撮像装置 | |
JP3970069B2 (ja) | 撮像装置 | |
JP3244444B2 (ja) | 固体撮像装置 | |
JP3970068B2 (ja) | 撮像装置 | |
JP3485745B2 (ja) | 固体撮像装置 | |
JP2966740B2 (ja) | 固体撮像素子及びその駆動方法 | |
JP3485746B2 (ja) | 固体撮像装置 | |
JP2001145025A (ja) | 固体撮像装置およびその駆動方法 | |
JP3392607B2 (ja) | 固体撮像素子の駆動方法 | |
JP2931531B2 (ja) | 固体撮像装置 | |
JP2000013686A (ja) | 撮像装置 | |
JPH0918888A (ja) | リニアセンサカメラを用いた撮像装置 | |
JP3849230B2 (ja) | 信号処理装置 | |
JP3515191B2 (ja) | 固体撮像素子の駆動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060614 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20070112 |