JP2011091507A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2011091507A JP2011091507A JP2009241815A JP2009241815A JP2011091507A JP 2011091507 A JP2011091507 A JP 2011091507A JP 2009241815 A JP2009241815 A JP 2009241815A JP 2009241815 A JP2009241815 A JP 2009241815A JP 2011091507 A JP2011091507 A JP 2011091507A
- Authority
- JP
- Japan
- Prior art keywords
- correction
- correction data
- pixel signal
- imaging
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 144
- 238000001514 detection method Methods 0.000 claims abstract description 31
- 238000013500 data storage Methods 0.000 claims description 10
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 3
- 230000003287 optical effect Effects 0.000 abstract description 11
- 238000006243 chemical reaction Methods 0.000 abstract description 10
- 239000000758 substrate Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000000034 method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000002349 favourable effect Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 1
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Abstract
【課題】適正なFPN補正を行うことができ、良好な画像を得ることができる撮像装置を提供すること。
【解決手段】撮像装置1は、撮像光学系2と、CCDイメージセンサ3と、アナログ信号処理回路4と、A/D変換回路5と、演算回路6と、デジタル信号処理回路7と、記憶部8と、制御部9と、垂直CCDタイミングジェネレータ11と、水平CCDタイミングジェネレータ12と、第1メモリ13と、第2メモリ14とを備えている。この撮像装置1では、CCDイメージセンサ3の検出領域のフォトダイオードで受光して得られた各画素信号の総和を求め、この総和を比較対象値とし、比較対象値と所定のしきい値とを比較し、比較対象値がしきい値以下の場合は、同一フレームの補正データを用いてFPN補正を行い、比較対象値がしきい値を超える場合は、同一フレームの補正データを用いてFPN補正を行わない。
【選択図】図1
【解決手段】撮像装置1は、撮像光学系2と、CCDイメージセンサ3と、アナログ信号処理回路4と、A/D変換回路5と、演算回路6と、デジタル信号処理回路7と、記憶部8と、制御部9と、垂直CCDタイミングジェネレータ11と、水平CCDタイミングジェネレータ12と、第1メモリ13と、第2メモリ14とを備えている。この撮像装置1では、CCDイメージセンサ3の検出領域のフォトダイオードで受光して得られた各画素信号の総和を求め、この総和を比較対象値とし、比較対象値と所定のしきい値とを比較し、比較対象値がしきい値以下の場合は、同一フレームの補正データを用いてFPN補正を行い、比較対象値がしきい値を超える場合は、同一フレームの補正データを用いてFPN補正を行わない。
【選択図】図1
Description
本発明は、撮像装置に関するものである。
撮像装置の撮像部には、一般的に、CCDイメージセンサ(固体撮像素子)が用いられている。
このCCDイメージセンサの撮像領域は、被写体を撮像する上で有効な領域である有効撮像領域と、その有効撮像領域の外周側に設けられ、遮光膜で遮光された遮光領域とで構成されている。撮像領域の形状は、通常、矩形(長方形、正方形を含む)をなしている。すなわち、有効撮像領域は、長方形をなし、遮光領域は、例えば、長方形の枠状をなし、有効撮像領域の外周をその全周に亘って囲んでいる。なお、遮光領域は、通常、「オプティカルブラック(OPB)」、「オプティカルブラック部」、「オプティカルブラック領域」等と呼ばれ、例えば、光学的に黒色の基準レベルの検出や、後述するFPN補正等に利用される。
また、インターライン型のCCDイメージセンサは、撮像面上の画素を構成し、行列状に配置された複数のフォトダイオード(光電変換素子)と、複数の垂直転送CCDレジスタと、水平転送CCDレジスタとを有している。垂直転送CCDレジスタおよび水平転送CCDレジスタは、それぞれ、複数のCCDで構成されている。
このような撮像装置においては、CCDイメージセンサのフォトダイオードにより、被写体からの入射光を受光し、光電変換して画素信号(信号電荷)を生成し、その画素信号は、垂直転送CCDレジスタおよび水平転送CCDレジスタの作動により、CCDイメージセンサから出力される。そして、その画素信号に基づいて、電子画像を表示するための映像データ(画像データ)が作成される。
ところで、フォトダイオードでは、その受光面に光が照射されていない状態でも、暗電流等により電荷を生じ、この電荷が、本来の画素信号に、ノイズとして含まれてしまう。さらに、画素信号には、CCDイメージセンサに駆動信号を与えるタイミングジェネレータ、信号処理回路、配線等から生じる基板ノイズが含まれる。このようなノイズは、固定パターンノイズ(FPN)と呼ばれる。
そこで、従来の撮像装置では、CCDイメージセンサの遮光領域で受光して得られた補正用画素信号に基づいて、補正データを作成し、有効撮像領域で受光して得られた画素信号にその補正データを加味して映像データを作成する。すなわち、補正データを、有効撮像領域で受光して得られた画素信号から減算することにより画素信号を補正するFPN補正を行う(例えば、特許文献1参照)。
しかしながら、このような従来の撮像装置では、遮光領域を用いてFPN補正を行う場合、大光量(高輝度)の光がCCDイメージセンサに照射されると、遮光領域までその光の一部が漏れ込み、これにより、不適正な補正データが作成され、その不適正な補正データを用いてFPN補正が行われ、却って画像の品質が劣化してしまうという問題がある。
本発明の目的は、適正なFPN補正を行うことができ、良好な画像を得ることができる撮像装置を提供することにある。
このような目的は、下記(1)〜(9)の本発明により達成される。
(1) 有効撮像領域と、該有効撮像領域の外周側に設けられた遮光領域とで構成される撮像領域を有する固体撮像素子と、
前記有効撮像領域で受光して得られる画素信号と、前記遮光領域で受光して得られる補正用画素信号とを前記固体撮像素子から出力させる画素信号生成手段と、
前記有効撮像領域のうちの所定の検出領域での受光量を検出する検出手段と、
前記補正用画素信号に基づいて、補正データを作成する補正データ作成手段と、
前記検出手段により検出された前記受光量と、所定のしきい値とを比較し、前記受光量が前記しきい値以下の場合は、前記補正データを用いて補正を行うと判別し、前記受光量が前記しきい値を超える場合は、前記補正データを用いて補正を行わないと判別する判別手段と、
前記画素信号に基づいて、電子画像を表示するための画像データを作成する画像データ作成手段とを備え、
前記判別手段により前記補正データを用いて補正を行うと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データを加味して前記画像データを作成するよう構成されていることを特徴とする撮像装置。
(1) 有効撮像領域と、該有効撮像領域の外周側に設けられた遮光領域とで構成される撮像領域を有する固体撮像素子と、
前記有効撮像領域で受光して得られる画素信号と、前記遮光領域で受光して得られる補正用画素信号とを前記固体撮像素子から出力させる画素信号生成手段と、
前記有効撮像領域のうちの所定の検出領域での受光量を検出する検出手段と、
前記補正用画素信号に基づいて、補正データを作成する補正データ作成手段と、
前記検出手段により検出された前記受光量と、所定のしきい値とを比較し、前記受光量が前記しきい値以下の場合は、前記補正データを用いて補正を行うと判別し、前記受光量が前記しきい値を超える場合は、前記補正データを用いて補正を行わないと判別する判別手段と、
前記画素信号に基づいて、電子画像を表示するための画像データを作成する画像データ作成手段とを備え、
前記判別手段により前記補正データを用いて補正を行うと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データを加味して前記画像データを作成するよう構成されていることを特徴とする撮像装置。
これにより、大光量の光が固体撮像素子の撮像面に照射された場合等に、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを防止することができ、また、補正データが適正な場合に、その適正な補正データを用いてFPN補正を行うことにより、画素信号から暗電流によるノイズや基板ノイズ等の固定パターンノイズ(FPN)を除去することができ、良好な画像を得ることができる。
また、メカニカルシャッタ等の遮光機構を用いることなくFPN補正を行うことができるので、構造や制御を簡素化することができる。
(2) 前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記補正データを加味せずに、前記画素信号に基づいて前記画像データを作成するよう構成されている上記(1)に記載の撮像装置。
これにより、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを確実に防止することができる。
(3) 前記補正データの予備となる予備補正データを記憶する予備補正データ記憶手段を有し、
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記予備補正データ記憶手段に記憶されている前記予備補正データを加味して前記画像データを作成するよう構成されている上記(1)に記載の撮像装置。
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記予備補正データ記憶手段に記憶されている前記予備補正データを加味して前記画像データを作成するよう構成されている上記(1)に記載の撮像装置。
これにより、大光量の光が固体撮像素子の撮像面に照射された場合でも良好な画像を得ることができる。
(4) 前記判別手段により前記補正データを用いて補正を行うと判別された場合に、該補正データを記憶する補正データ記憶手段を有し、
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データ記憶手段に記憶されている直前の前記補正データを加味して前記画像データを作成するよう構成されている上記(1)に記載の撮像装置。
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データ記憶手段に記憶されている直前の前記補正データを加味して前記画像データを作成するよう構成されている上記(1)に記載の撮像装置。
これにより、大光量の光が固体撮像素子の撮像面に照射された場合でも良好な画像を得ることができる。
(5) 前記検出領域は、前記有効撮像領域のうちの前記遮光領域に隣接する隣接部位である上記(1)ないし(4)のいずれかに記載の撮像装置。
これにより、補正データが適正なものであるか否かをより確実に判別することができ、良好な画像を得ることができる。
(6) 前記検出領域は、前記有効撮像領域全体であり、
前記検出手段は、前記有効撮像領域のうちの前記遮光領域に隣接する隣接部位での受光量と、他の部位での受光量とに重み付けを行って、前記有効撮像領域全体での受光量を検出するよう構成されている上記(1)ないし(4)のいずれかに記載の撮像装置。
前記検出手段は、前記有効撮像領域のうちの前記遮光領域に隣接する隣接部位での受光量と、他の部位での受光量とに重み付けを行って、前記有効撮像領域全体での受光量を検出するよう構成されている上記(1)ないし(4)のいずれかに記載の撮像装置。
これにより、補正データが適正なものであるか否かをより確実に判別することができ、良好な画像を得ることができる。
(7) 前記検出手段は、前記隣接部位での受光量を前記他の部位での受光量よりも大きく評価するよう構成されている上記(6)に記載の撮像装置。
これにより、補正データが適正なものであるか否かをより確実に判別することができ、良好な画像を得ることができる。
(8) 前記固体撮像素子は、CCDイメージセンサである上記(1)ないし(7)のいずれかに記載の撮像装置。
これにより、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを防止することができ、適正な補正データを用いてFPN補正を行うことにより、良好な画像を得ることができるCCDイメージセンサを有する撮像装置を提供することができる。
(9) 当該撮像装置は、電子内視鏡用のものである上記(1)ないし(8)のいずれかに記載の撮像装置。
これにより、電子内視鏡において、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを防止することができ、適正な補正データを用いてFPN補正を行うことにより、良好な画像を得ることができる撮像装置を提供することができる。
本発明によれば、補正データが適正なものであるか否かを判別(推定)することができるので、大光量の光が固体撮像素子の撮像面に照射された場合等に、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを防止することができ、また、補正データが適正な場合に、その適正な補正データを用いてFPN補正を行うことにより、画素信号から暗電流によるノイズや基板ノイズ等の固定パターンノイズ(FPN)を除去することができ、良好な画像を得ることができる。
また、メカニカルシャッタ等の遮光機構を用いることなくFPN補正を行うことができるので、構造や制御を簡素化することができる。
以下、本発明の撮像装置を添付図面に示す好適な実施形態に基づいて詳細に説明する。
<第1実施形態>
図1は、本発明の撮像装置の第1実施形態における主要部を示すブロック図、図2は、図1に示す撮像装置のCCDイメージセンサを模式的に示す図、図3は、図1に示す撮像装置のCCDイメージセンサの撮像領域を模式的に示す図、図4は、図1に示す撮像装置の制御動作を示すフローチャートである。
<第1実施形態>
図1は、本発明の撮像装置の第1実施形態における主要部を示すブロック図、図2は、図1に示す撮像装置のCCDイメージセンサを模式的に示す図、図3は、図1に示す撮像装置のCCDイメージセンサの撮像領域を模式的に示す図、図4は、図1に示す撮像装置の制御動作を示すフローチャートである。
なお、以下では、図2およひ図3中の上下方向を「垂直方向(上下方向)」、左右方向を「水平方向(左右方向)」、上側を「上」、下側を「下」、左側を「左」、右側を「右」として説明を行う(図7も同様)。
図1に示すように、撮像装置1は、撮像光学系2と、CCDイメージセンサ(固体撮像素子)3と、アナログ信号処理回路4と、A/D変換回路5と、演算回路6と、デジタル信号処理回路7と、記憶部(記憶手段)8と、制御部(制御手段)9と、垂直CCDタイミングジェネレータ11と、水平CCDタイミングジェネレータ12と、第1メモリ13と、第2メモリ14とを備えている。制御部9は、例えば、演算回路6、記憶部8、垂直CCDタイミングジェネレータ11、水平CCDタイミングジェネレータ12等の各部、すなわち、撮像装置1の全体の作動(駆動)を制御する。なお、演算回路6により、補正データ作成手段および補正手段の主要部が構成される。
図2に示すように、CCDイメージセンサ3は、図示の構成では、インターライン型のものであり、撮像面(受光面)上の画素を構成し、行列状に配置された複数のフォトダイオード(光電変換素子)31と、複数の垂直転送CCDレジスタ(垂直転送レジスタ)32と、水平転送CCDレジスタ(水平転送レジスタ)33と、電荷/電圧変換部(出力アンプ)34とを有している。
各垂直転送CCDレジスタ32は、それぞれ、垂直方向(列方向)に沿って並設された複数の垂直転送用のCCD(Charge Coupled Device)(電荷結合素子)で構成されている。また、各垂直転送CCDレジスタ32は、水平方向(行方向)に沿って並設されており、各垂直転送レジスタ32の各CCDは、それぞれ、対応するフォトダイオード31の隣に配置されている。
また、水平転送CCDレジスタ33は、水平方向に沿って並設された複数の水平転送用のCCDで構成されている。また、水平転送CCDレジスタ33は、各垂直転送CCDレジスタ32の下方に配置されている。
また、図3に示すように、CCDイメージセンサ3の撮像領域35は、被写体を撮像する上で有効な領域である有効撮像領域36と、その有効撮像領域36の外周側に設けられ、遮光がなされた遮光領域37(図3中の斜線で示す部分)とで構成されている。遮光領域37は、例えば、遮光膜で遮光することにより形成することができる。
また、本実施形態では、撮像領域35の形状は、長方形(正方形を含む)をなしている。すなわち、有効撮像領域36は、長方形をなし、また、図示の構成では、遮光領域37は、長方形の枠状をなし、有効撮像領域36の外周をその全周に亘って囲んでいる。なお、遮光領域37は、通常、「オプティカルブラック(OPB)」、「オプティカルブラック部」、「オプティカルブラック領域」等と呼ばれ、例えば、光学的に黒色の基準レベルの検出や、後述するFPN補正等に利用される。
このCCDイメージセンサ3は、電子シャッター(フォトダイオード31とそれに対応する垂直転送CCDレジスタ32のCCDとの間のスイッチ等)の作動と、垂直CCDタイミングジェネレータ11および水平CCDタイミングジェネレータ12から出力される駆動信号とにより作動する。この場合、各垂直転送CCDレジスタ32は、それぞれ、垂直CCDタイミングジェネレータ11から出力される所定の駆動信号により作動し、水平転送CCDレジスタ33は、水平CCDタイミングジェネレータ11から出力される所定の駆動信号により作動する。
撮像の際は、電子シャッターの作動により、被写体からの入射光が、撮像光学系2を介して、所定時間、CCDイメージセンサ3の各フォトダイオード31でそれぞれ受光され、光電変換され、これにより、有効撮像領域36では画素信号(信号電荷)が生成され、遮光領域37では補正用画素信号(信号電荷)が生成され、その画素信号および補正用画素信号が、対応する垂直転送CCDレジスタ32に転送される。そして、画素信号および補正用画素信号は、各垂直転送CCDレジスタ32の作動により、各垂直転送CCDレジスタ32から水平転送CCDレジスタ33に転送され、水平転送CCDレジスタ33の作動により、電荷/電圧変換部34を介してCCDイメージセンサ3から出力される。電荷/電圧変換部34では、画素信号および補正用画素信号は、電荷(電流)から電圧、すなわち、電荷(電流)信号から電圧信号に変換される。本実施形態では、この撮像は、動画を得るための撮像とし、電子シャッターの作動は、所定の周期で連続的に行われる。
ここで、前記CCDイメージセンサ3の動作をさらに説明すると、被写体からの入射光が、所定時間、各フォトダイオード31でそれぞれ受光された直後、前記電子シャッターが作動すると、まず、有効撮像領域36のフォトダイオード31で受光して得られた画素信号および遮光領域37のフォトダイオード31で受光して得られた補正用画素信号は、フォトダイオード31から垂直転送CCDレジスタ32にいっせいに転送され、垂直転送CCDレジスタ32の対応するCCDに保持される。
次いで、垂直転送CCDレジスタ32に保持されている画素信号および補正用画素信号は、その垂直転送CCDレジスタ32の作動により、いっせいに1つ下方に転送される。これにより、垂直転送CCDレジスタ32の最下部のCCDに保持されていた1ライン(行)分の信号、図示の構成では補正用画素信号が、いっせいに水平転送CCDレジスタ33の対応するCCDに転送される。そして、その1ライン分の補正用画素信号は、水平転送CCDレジスタ33の作動により、CCDイメージセンサ3から出力される。
以降、同様にして、垂直転送CCDレジスタ32に保持されている画素信号および補正用画素信号は、垂直転送CCDレジスタ32の作動により、いっせいに1つ下方に転送され、垂直転送CCDレジスタ32の最下部のCCDに保持されていた1ライン分の信号(画素信号や、補正用画素信号)は、いっせいに水平転送CCDレジスタ33に転送され、その1ライン分の画素信号は、水平転送CCDレジスタ33の作動により、CCDイメージセンサ3から出力される。この動作は、各フォトダイオード31で生成されたすべての画素信号および補正用画素信号がCCDイメージセンサ3から出力されるまで繰り返し行われる。なお、垂直CCDタイミングジェネレータ11、水平CCDタイミングジェネレータ12および制御部9により、画素信号生成手段の主要部が構成される。
図1に示すように、CCDイメージセンサ3から出力された画素信号および補正用画素信号は、アナログ信号処理回路4で、所定の信号処理がなされ、A/D変換回路5で、アナログ信号(アナログの信号形態)からデジタル信号(デジタルの信号形態)に変換される。そして、画素信号は、第1メモリ(第1の記憶手段)13に記憶(格納)され、補正用画素信号は、第2メモリ14(第2の記憶手段)に記憶される。なお、画素信号は、映像データ(画像データ)の作成等に使用され、補正用画素信号は、補正データの作成等に使用される。
ここで、本実施形態では、画素信号に対し、補正を行う場合と、補正を行わない場合とがあり、その判断を画素信号に基づいて行うようになっているが、これについては、後で詳述する。
前記補正を行う場合は、演算回路6では、第2メモリ14から読み出された画素信号に基づいて、補正データが作成され、第1メモリ14から読み出された画素信号が、その補正データで補正される。この補正は、FPN(固定パターンノイズ)補正であり、そのFPN補正では、各画素信号が担持するデータ値から、それぞれ、補正データを減算する。これにより、画素信号から暗電流によるノイズや基板ノイズ等の固定パターンノイズを除去することができる。
なお、補正データの作成方法は、特に限定されないが、例えば、すべての補正用画素信号またはその一部の補正用画素信号が担持するデータ値(フォトダイオード31での受光量(輝度)に対応する値)を加算し、その総和(加算値)から平均値を求め、この平均値を補正データとする。
次に、画素信号は、デジタル信号処理回路7で、所定の信号処理がなされ、電子画像を表示するための映像データ(画像データ)が作成される。このようにして、画素信号に補正データを加味して映像データが作成される。この映像データは、図示しないD/A変換回路で、デジタル信号からアナログ信号に変換され、例えば、図示しないモニタに送出される。これにより、モニタには、CCDイメージセンサ3で撮像された電子画像、すなわち、動画や静止画が表示される。また、映像データは、図示しない記憶手段において、記憶媒体(記録媒体)に記憶することもできる。前記記憶媒体としては、着脱自在のものと、撮像装置1に内蔵されたものとのいずれでも適用することができる。なお、演算回路6およびデジタル信号処理回路7により、画像データ作成手段の主要部が構成される。
さて、この撮像装置1では、制御部9において、前記第2メモリ14に記憶された補正用画素信号(第1メモリ13に記憶された画素信号と同じフレームの補正用画素信号)から作成される補正データを用いてFPN補正を行うか否かの判別を、前記第1メモリ14に記憶された画素信号のうち、有効撮像領域36のうちの所定の検出領域38のフォトダイオード31で受光して得られた画素信号に基づいて行われる。なお、その画素信号が担持するデータ値は、検出領域38のフォトダイオード31での受光量(輝度)に対応する値であり、検出領域38は、図3中の二点鎖線とその外側の実線とで囲まれる領域である。また、以下では、前記第1メモリ13に記憶された画素信号と同じフレームの補正用画素信号から作成される補正データを、「同一フレームの補正データ」とも言う。
ここで、大光量(高輝度)の光がCCDイメージセンサ3に照射されて、遮光領域37までその光の一部が漏れ込んでいる場合は、検出領域38のフォトダイオード31での受光量が多くなるので、その検出領域38のフォトダイオード31で受光して得られた画素信号の大小(大きさ)により、前記遮光領域37まで光が漏れているか否かを判別(推定)することができる。そして、遮光領域37まで光が漏れている場合は、同一フレームの補正データを用いるFPN補正を行わず、光が漏れていない場合は、同一フレームの補正データを用いるFPN補正を行う。
すなわち、制御部9は、まずは、第1メモリ13から検出領域38のフォトダイオード31で受光して得られた各画素信号を読み出し、その各画素信号が担持するデータ値を加算し、その総和(加算値)を求め、この総和を比較対象値(検出手段により検出された受光量)とする。なお、前記総和から平均値を求め、その平均値を比較対象値としてもよいことは言うまでもない。
次に、制御部9は、比較対象値と所定のしきい値とを比較し、比較対象値がしきい値以下の場合は、遮光領域37まで光が漏れていないものと推定し、同一フレームの補正データを用いてFPN補正を行うと判別する。これにより、前述したように、同一フレームの補正データを用いてFPN補正が行われる。すなわち、画素信号に同一フレームの補正データを加味して映像データが作成される。
一方、制御部9は、比較対象値がしきい値を超える場合は、遮光領域37に光が漏れているものと推定し、同一フレームの補正データを用いてFPN補正を行わないと判別する。前記しきい値は、実験的に求めることができる。
前記同一フレームの補正データを用いてFPN補正を行わない場合は、FPN補正自体を行わない場合と、他の補正データを用いてFPN補正を行う場合とがあるが、本実施形態では、FPN補正自体を行わない。すなわち、何ら補正データを加味せずに、画素信号に基づいて映像データが作成される。これにより、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを確実に防止することができる。
なお、制御部9により、検出領域38での受光量を検出する検出手段および判別手段の主要部が構成される。
前記検出領域38は、有効撮像領域36内であれば如何なるように設定してもよいが、有効撮像領域36のうちの遮光領域37に隣接する隣接部位であることが好ましい。本実施形態では、検出領域38は、図3に示すように、長方形の枠状をなし、遮光領域37の内周に、その全周に亘って隣接している。これにより、遮光領域37まで光が漏れているか否かの判別、すなわち、同一フレームの補正データが適正なものであるか否かの判別を確実に行うことができる。これは、光が遮光領域37に漏れる場合、その光は、遮光領域37と有効撮像領域36との境界から遮光領域37に漏れるためである。すなわち、大光量の光がCCDイメージセンサ3に照射され、その光の一部が遮光領域37まで漏れている場合は、前記隣接部位のフォトダイオード31での受光量が多くなるが、有効撮像領域36の中央部等、遮光領域37から離間した部位のフォトダイオード31での受光量は、少ない場合もあるからである。
また、有効撮像領域36に対する検出領域38(隣接部位)の面積比は、例えば、1〜20%程度とすることができ、また、1〜5%程度としてもよい。
前記面積比を前記範囲内の値に設定することにより、遮光領域37まで光が漏れているか否かの判別をより確実に行うことができる。
なお、検出領域35の形状は、図示の形状には限定されず、また、有効撮像領域36の全体を検出領域38としてもよい。
次に、撮像装置1の作用について、図4に基づき、その制御動作を説明する。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS101)。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS101)。
次いで、比較対象値としきい値とを比較し(ステップS102)、比較対象値がしきい値以下の場合は、同一フレームの補正データを作成するため、補正用画素信号が担持するデータ値を1ライン分加算する(ステップS103)。
次いで、補正用画素信号が担持するデータ値が、目標ライン数分加算されたか否かを判断し(ステップS104)、目標ライン数に達していない場合は、ステップS103に戻り、再度、ステップS103以降を実行する。
また、目標ライン数に達した場合は、前記目標ライン数分の補正用画素信号が担持するデータ値の総和から平均値を求め、その平均値を補正データとする(ステップS105)。
次いで、画素信号から前記補正データを減算することにより、FPN補正を行ない(ステップS106)、さらに、画素信号に対し、所定の画像処理等を行い、映像データを作成する。
一方、前記ステップS102において、比較対象値がしきい値を超える場合は、画素信号に対し、FPN補正を行うことなく、所定の画像処理等を行ない、映像データを作成する。
以上説明したように、この撮像装置1によれば、作成される同一フレームの補正データが適正なものであるか否かを判別することができるので、大光量の光がCCDイメージセンサ3の撮像面に照射された場合等に、不適正な補正データを用いてFPN補正を行うことにより画像の品質を劣化させてしまうことを防止することができる。また、同一フレームの補正データが適正な場合に、その適正な補正データを用いてFPN補正を行うことにより、画素信号から暗電流によるノイズや基板ノイズ等の固定パターンノイズを除去することができ、良好な画像を得ることができる。
また、メカニカルシャッタ等の遮光機構を用いることなくFPN補正を行うことができるので、構造や制御を簡素化することができる。
<第2実施形態>
図5は、本発明の撮像装置の第2実施形態における制御動作を示すフローチャートである。
図5は、本発明の撮像装置の第2実施形態における制御動作を示すフローチャートである。
以下、第2実施形態について、前述した第1実施形態との相違点を中心に説明し、同様の事項については、その説明を省略する。
第2実施形態の撮像装置1では、予め、補正データの予備となる予備補正データを作成し、記憶部8に記憶しておく。この予備補正データの作成、記憶は、例えば、撮像装置1の工場出荷時等に行うことができる。なお、記憶部8により、予備補正データ記憶手段が構成される。
そして、制御部9が同一フレームの補正データを用いてFPN補正を行わないと判別した場合は、記憶部8に記憶されている予備補正データを用いてFPN補正を行なう。すなわち、画素信号に前記予備補正データを加味して画像データを作成する。
これにより、大光量の光がCCDイメージセンサ3の撮像面に照射された場合でも、FPN補正を行ない場合に比べ、良好な画像を得ることができる。
次に、撮像装置1の作用について、図5に基づき、その制御動作を説明する。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS201)。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS201)。
次いで、比較対象値としきい値とを比較し(ステップS202)、比較対象値がしきい値以下の場合は、同一フレームの補正データを作成するため、補正用画素信号が担持するデータ値を1ライン分加算する(ステップS203)。
次いで、補正用画素信号が担持するデータ値が、目標ライン数分加算されたか否かを判断し(ステップS204)、目標ライン数に達していない場合は、ステップS203に戻り、再度、ステップS203以降を実行する。
また、目標ライン数に達した場合は、前記目標ライン数分の補正用画素信号が担持するデータ値の総和から平均値を求め、その平均値を補正データとする(ステップS205)。
次いで、画素信号から前記補正データを減算することにより、FPN補正を行ない(ステップS206)、さらに、画素信号に対し、所定の画像処理等を行い、映像データを作成する。
一方、前記ステップS202において、比較対象値がしきい値を超える場合は、画素信号から記憶部8に記憶されている予備補正データを減算することにより、FPN補正を行ない(ステップS207)、さらに、画素信号に対し、所定の画像処理等を行ない、映像データを作成する。
この撮像装置1によれば、前述した第1実施形態と同様の効果が得られる。
この撮像装置1によれば、前述した第1実施形態と同様の効果が得られる。
<第3実施形態>
図6は、本発明の撮像装置の第3実施形態における制御動作を示すフローチャートである。
図6は、本発明の撮像装置の第3実施形態における制御動作を示すフローチャートである。
以下、第3実施形態について、前述した第1実施形態との相違点を中心に説明し、同様の事項については、その説明を省略する。
第3実施形態の撮像装置1では、制御部9が同一フレームの補正データを用いてFPN補正を行うと判別した場合に、その補正データを記憶部8に記憶する。また、次回以降のフレームにおいて、制御部9が同一フレームの補正データを用いてFPN補正を行うと判別した場合、その都度、記憶部8に記憶されている補正データを更新する。なお、記憶部8により、補正データ記憶手段が構成される。
一方、制御部9が同一フレームの補正データを用いてFPN補正を行わないと判別した場合は、前記記憶部8に記憶されている補正データ(直前の補正データ)を用いてFPN補正を行なう。すなわち、画素信号に記憶部8に記憶されている補正データを加味して画像データを作成する。
これにより、大光量の光がCCDイメージセンサ3の撮像面に照射された場合でも、FPN補正を行ない場合に比べ、良好な画像を得ることができる。
次に、撮像装置1の作用について、図6に基づき、その制御動作を説明する。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS301)。
まず、電子シャッターが作動すると、CCDイメージセンサ3からは、画素信号および補正用画素信号が出力され、その画素信号および補正用画素信号は、所定の信号処理がなされた後、アナログ信号からデジタル信号に変換され、画素信号は、第1メモリ13に記憶され、補正用画素信号は、第2メモリ14に記憶される。そして、検出領域38のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算し、その総和を求め、この総和を比較対象値とする(ステップS301)。
次いで、比較対象値としきい値とを比較し(ステップS302)、比較対象値がしきい値以下の場合は、同一フレームの補正データを作成するため、補正用画素信号が担持するデータ値を1ライン分加算する(ステップS303)。
次いで、補正用画素信号が担持するデータ値が、目標ライン数分加算されたか否かを判断し(ステップS304)、目標ライン数に達していない場合は、ステップS303に戻り、再度、ステップS303以降を実行する。
また、目標ライン数に達した場合は、前記目標ライン数分の補正用画素信号が担持するデータ値の総和から平均値を求め、その平均値を補正データし(ステップS305)、得られた補正データを記憶部8に記憶する(ステップS306)。
次いで、画素信号から前記補正データを減算することにより、FPN補正を行ない(ステップS307)、さらに、画素信号に対し、所定の画像処理等を行い、映像データを作成する。
一方、前記ステップS302において、比較対象値がしきい値を超える場合は、画素信号から記憶部8に記憶されている補正データ(前回以前のフレームで作成された補正データのうちの最新のもの)を減算することにより、FPN補正を行ない(ステップS308)、さらに、画素信号に対し、所定の画像処理等を行ない、映像データを作成する。
この撮像装置1によれば、前述した第1実施形態と同様の効果が得られる。
この撮像装置1によれば、前述した第1実施形態と同様の効果が得られる。
<第4実施形態>
図7は、本発明の撮像装置の第4実施形態におけるCCDイメージセンサの撮像領域を模式的に示す図である。
図7は、本発明の撮像装置の第4実施形態におけるCCDイメージセンサの撮像領域を模式的に示す図である。
以下、第4実施形態について、前述した第1実施形態との相違点を中心に説明し、同様の事項については、その説明を省略する。
図7に示す第4実施形態の撮像装置1では、CCDイメージセンサ3の有効撮像領域36の全体が検出領域として設定されている。
また、比較対象値を求める際は、有効撮像領域36のうちの遮光領域37に隣接する隣接部位39(図7中の一点鎖線とその外側の実線とで囲まれる部位)のフォトダイオード31で受光して得られた画素信号(受光量)と、その他の部位30(図7中の一点鎖線で囲まれる部位)のフォトダイオード31で受光して得られた画素信号(受光量)とに重み付けを行って、比較対象値を求める。この場合、隣接部位39における画素信号を他の部位30における画素信号よりも大きく評価する。これは、光が遮光領域37に漏れる場合、その光は、遮光領域37と有効撮像領域36との境界から遮光領域37に漏れるためである。
また、前記重み付けにおける比率は、特に限定されないが、「隣接部位39における画素信号」:「他の部位30における画素信号」を、100:0〜60:40の範囲内の値に設定することが好ましく、99:1〜60:40の範囲内の値に設定することがより好ましく、90:10〜70:30の範囲内の値に設定することがさらに好ましい。
ここで、例えば、前記重み付けにおける比率、すなわち、「隣接部位39における画素信号」:「他の部位30における画素信号」を、80:20に設定した場合は、比較対象値は、下記のようにして求められる。
隣接部位39のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算したときの総和(加算値)をa、他の部位30のフォトダイオード31で受光して得られた各画素信号が担持するデータ値を加算したときの総和をbとしたとき、比較対象値は、(a×80/100)+(b×20/100)とされる。
なお、本実施形態における隣接部位39は、第1実施形態と同様であり、長方形の枠状をなし、遮光領域37の内周に、その全周に亘って隣接している。また、有効撮像領域36に対する隣接部位39の面積比の好適値(好適範囲)も第1実施形態と同様である。
この撮像装置1によれば、前述した第1実施形態と同様の効果が得られる。
なお、この第4実施形態は、前記第2実施形態および第3実施形態にも適用することができる。
なお、この第4実施形態は、前記第2実施形態および第3実施形態にも適用することができる。
以上、本発明の撮像装置を、図示の実施形態に基づいて説明したが、本発明はこれに限定されるものではなく、各部の構成は、同様の機能を有する任意の構成のものに置換することができる。また、本発明に、他の任意の構成物が付加されていてもよい。
また、本発明は、前記各実施形態のうちの、任意の2以上の構成(特徴)を組み合わせたものであってもよい。
なお、前記実施形態では、遮光領域は、長方形の枠状をなしているが、本発明では、遮光領域の形状は、これに限らず、例えば、帯状をなしていてもよい。この帯状の遮光領域は、例えば、有効撮像領域の上側、下側、左側および右側の4箇所のうち、1または2以上の任意の位置に設けることができる。
また、本発明の撮像装置の用途は、特に限定されず、本発明は、例えば、電子内視鏡、ビデオカメラ(電子ビデオカメラ)やデジタルカメラ(電子スチルカメラ)等の電子カメラ、携帯電話等、固体撮像素子を備える各種の機器に適用することができる。
また、本発明では、固体撮像素子は、CCDイメージセンサに限定されるものではない。
1 撮像装置
2 撮像光学系
3 CCDイメージセンサ
30 他の部位
31 フォトダイオード
32 垂直転送CCDレジスタ
33 水平転送CCDレジスタ
34 電荷/電圧変換部
35 撮像領域
36 有効撮像領域
37 遮光領域
38 検出領域
39 隣接部位
4 アナログ信号処理回路
5 A/D変換回路
6 演算回路
7 デジタル信号処理回路
8 記憶部
9 制御部
11 垂直CCDタイミングジェネレータ
12 水平CCDタイミングジェネレータ
13 第1メモリ
14 第2メモリ
S101〜S106 ステップ
S201〜S207 ステップ
S301〜S308 ステップ
2 撮像光学系
3 CCDイメージセンサ
30 他の部位
31 フォトダイオード
32 垂直転送CCDレジスタ
33 水平転送CCDレジスタ
34 電荷/電圧変換部
35 撮像領域
36 有効撮像領域
37 遮光領域
38 検出領域
39 隣接部位
4 アナログ信号処理回路
5 A/D変換回路
6 演算回路
7 デジタル信号処理回路
8 記憶部
9 制御部
11 垂直CCDタイミングジェネレータ
12 水平CCDタイミングジェネレータ
13 第1メモリ
14 第2メモリ
S101〜S106 ステップ
S201〜S207 ステップ
S301〜S308 ステップ
Claims (9)
- 有効撮像領域と、該有効撮像領域の外周側に設けられた遮光領域とで構成される撮像領域を有する固体撮像素子と、
前記有効撮像領域で受光して得られる画素信号と、前記遮光領域で受光して得られる補正用画素信号とを前記固体撮像素子から出力させる画素信号生成手段と、
前記有効撮像領域のうちの所定の検出領域での受光量を検出する検出手段と、
前記補正用画素信号に基づいて、補正データを作成する補正データ作成手段と、
前記検出手段により検出された前記受光量と、所定のしきい値とを比較し、前記受光量が前記しきい値以下の場合は、前記補正データを用いて補正を行うと判別し、前記受光量が前記しきい値を超える場合は、前記補正データを用いて補正を行わないと判別する判別手段と、
前記画素信号に基づいて、電子画像を表示するための画像データを作成する画像データ作成手段とを備え、
前記判別手段により前記補正データを用いて補正を行うと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データを加味して前記画像データを作成するよう構成されていることを特徴とする撮像装置。 - 前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記補正データを加味せずに、前記画素信号に基づいて前記画像データを作成するよう構成されている請求項1に記載の撮像装置。
- 前記補正データの予備となる予備補正データを記憶する予備補正データ記憶手段を有し、
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記予備補正データ記憶手段に記憶されている前記予備補正データを加味して前記画像データを作成するよう構成されている請求項1に記載の撮像装置。 - 前記判別手段により前記補正データを用いて補正を行うと判別された場合に、該補正データを記憶する補正データ記憶手段を有し、
前記判別手段により前記補正データを用いて補正を行わないと判別された場合は、前記画像データ作成手段は、前記画素信号に前記補正データ記憶手段に記憶されている直前の前記補正データを加味して前記画像データを作成するよう構成されている請求項1に記載の撮像装置。 - 前記検出領域は、前記有効撮像領域のうちの前記遮光領域に隣接する隣接部位である請求項1ないし4のいずれかに記載の撮像装置。
- 前記検出領域は、前記有効撮像領域全体であり、
前記検出手段は、前記有効撮像領域のうちの前記遮光領域に隣接する隣接部位での受光量と、他の部位での受光量とに重み付けを行って、前記有効撮像領域全体での受光量を検出するよう構成されている請求項1ないし4のいずれかに記載の撮像装置。 - 前記検出手段は、前記隣接部位での受光量を前記他の部位での受光量よりも大きく評価するよう構成されている請求項6に記載の撮像装置。
- 前記固体撮像素子は、CCDイメージセンサである請求項1ないし7のいずれかに記載の撮像装置。
- 当該撮像装置は、電子内視鏡用のものである請求項1ないし8のいずれかに記載の撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009241815A JP2011091507A (ja) | 2009-10-20 | 2009-10-20 | 撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009241815A JP2011091507A (ja) | 2009-10-20 | 2009-10-20 | 撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011091507A true JP2011091507A (ja) | 2011-05-06 |
Family
ID=44109380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009241815A Pending JP2011091507A (ja) | 2009-10-20 | 2009-10-20 | 撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011091507A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103685987A (zh) * | 2012-09-24 | 2014-03-26 | 株式会社东芝 | 固体拍摄装置、相机模块以及数字相机 |
-
2009
- 2009-10-20 JP JP2009241815A patent/JP2011091507A/ja active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103685987A (zh) * | 2012-09-24 | 2014-03-26 | 株式会社东芝 | 固体拍摄装置、相机模块以及数字相机 |
KR101465885B1 (ko) * | 2012-09-24 | 2014-11-26 | 가부시끼가이샤 도시바 | 고체 촬상 장치, 카메라 모듈 및 디지털 카메라 |
US9106785B2 (en) | 2012-09-24 | 2015-08-11 | Kabushiki Kaisha Toshiba | Solid state image pickup device having received light correction unit, camera module, and digital camera |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8610802B2 (en) | Solid-state imaging device with noise extracing pixels in the effective pixel region and solid-state imaging system using the same | |
US8767104B2 (en) | Image sensor, electronic apparatus, and driving method of electronic apparatus | |
JP5526014B2 (ja) | 撮像装置 | |
US8451350B2 (en) | Solid-state imaging device, camera module, and imaging method | |
JP5541718B2 (ja) | 撮像装置及びその欠陥画素検出方法 | |
KR102129627B1 (ko) | 고체 촬상 장치, 그 신호 처리 방법 및 전자 기기 | |
JP2011029835A (ja) | 固体撮像装置とその駆動方法、及び電子機器 | |
KR20080103454A (ko) | 고체 촬상 장치, 고체 촬상 장치의 신호 처리 장치 및 신호처리 방법과 촬상 장치 | |
JP2008288816A (ja) | 固体撮像装置および電子情報機器 | |
JP2011097542A (ja) | 画素欠陥検出補正装置、撮像装置、画像欠陥検出補正方法、およびプログラム | |
JP2007019820A (ja) | 固体撮像素子 | |
JP5013812B2 (ja) | 撮像装置及び補正方法 | |
US20110037882A1 (en) | Solid-state imaging device, method of driving solid-state imaging device, and electronic apparatus | |
JP5106055B2 (ja) | 撮像装置及びそのフリッカ検出方法 | |
JP2008099040A (ja) | 固体撮像装置および電子情報機器 | |
JP2010093759A (ja) | 撮像センサ及び撮像装置 | |
JP2011091507A (ja) | 撮像装置 | |
JP5289268B2 (ja) | 撮像装置 | |
JP2011041039A (ja) | 撮像装置およびプログラム | |
JP5271201B2 (ja) | 画像信号処理装置及び撮像装置 | |
JP4840991B2 (ja) | 光電変換装置及びその制御方法並びに撮像装置 | |
JP2005278217A (ja) | 画素欠陥補正方法 | |
JP2010166479A (ja) | 撮像装置及び撮像画像の補正方法 | |
JP2010178384A (ja) | 画像信号処理回路、カメラ、及び画像信号処理方法 | |
JP2006157341A (ja) | 固体撮像素子のスミア補正方法、固体撮像素子の信号処理装置および撮像装置 |