JP6300529B2 - 撮像装置及びその制御方法、プログラム、記憶媒体 - Google Patents

Description

本発明は、撮像装置及びその制御方法、プログラム、記憶媒体に関するものである。

現在のテレビ放送では、１９２０（Ｈ）×１０８０（Ｖ）の画像サイズのフルハイビジョン（フルＨＤ）に対応した映像が用いられている。さらに、最近では、フルＨＤサイズよりも、更なる高精細画像であるＳＨＶ（スーパーハイビジョン、８Ｋ×４Ｋ）の放送も計画されている。そして、上記の更なる高精細画像に対応した撮像装置を実現するためには、撮像素子として、水平８Ｋ（７６８０画素）×垂直４Ｋ（４３２０ライン）に対応した画素数を有するＣＭＯＳセンサーを採用する必要がある。

ところで、このようなＣＭＯＳセンサーでは、列毎に、増幅器（列アンプ）や、Ａ／Ｄ変換器（列Ａ／Ｄ）が設けられている。そのため、列アンプのオフセットばらつきや、列Ａ／Ｄのオフセットばらつきによる固定パターンノイズ（ＦＰＮ）の１つである縦線が撮影画像に現れる場合がある。また、上記のＣＭＯＳセンサーは、８Ｋ×４Ｋの画素数を有するため、チップ面積が大型化することにより、水平方向にオフセットレベルが異なる現象が発生し、ダーク（暗時）シェーディングが発生する場合もある。

そこで、上記の問題を解決するため、列毎に発生する縦線を補正する補正回路を撮像装置の内部に備えることが考えられている。

ＣＭＯＳセンサーに備えられた遮光画素領域であるＶＯＢ（Ｖｅｒｔｉｃａｌ Ｏｐｔｉｃａｌ Ｂｌａｃｋ）領域から出力される信号値を垂直方向に平均処理して、縦１列分のＶＯＢ値を算出する。その算出した平均ＶＯＢ値は、列毎の値を備えており、その値を有効画像の各列から減算することで、列毎のオフセットばらつきを補正する。

しかし、上記の補正装置は、列毎のＶＯＢ値を算出し、有効画素から列毎に減算するため、ＣＭＯＳセンサーの水平画素が多い程、補正回路が増加する。すなわち、ＳＨＶを実現する水平７６８０画素を補正するためには、７６８０列分の補正回路が必要となる。そして、補正回路の増加に伴い、消費電力が増加する。

そこで、撮像装置の内部では上記したような縦線補正処理を行わずに画像データを出力し、撮像装置の外部で補正を行うことが考えられる。

撮像装置の内部で補正を行わずにＲＡＷ画像データを出力する場合、ＶＯＢ画素データもＲＡＷ画像データの一部として出力する必要がある。ＶＯＢ画像データを全画素分ＲＡＷ画像データに付加した状態で出力すると情報量が増大化するため、ＲＡＷ画像データを圧縮処理して出力する手法が提案されている（特許文献１）。

特開平１１−１１２８８５号公報

しかしながら、特許文献１では、ＯＢ部の画像データと有効画素部の画像データを圧縮処理して記録した後、再生時に伸長して映像出力を得る。その場合、有効画素部がＯＢ部にかかるため、ＯＢ部の画像データがＯＢ部と有効画素部の境界付近の映像に影響を与える。そのため、ＯＢ部と有効画素部の間に余剰画素を設けている。これにより、ＯＢ部の画像データと有効画素部の画像データを圧縮処理して信号を伝送し、再生時に伸長した場合にも、ＯＢ部の画像データがＯＢ部と有効画素部の境界付近の映像に影響を与えない。

この手法は、有効画素部の画像データとＯＢ部の画像データを圧縮して伝送し、再生時に伸長する場合の本画像に対する影響を低減するためには有効である。しかし、ＣＭＯＳセンサー固有の縦線ノイズやＶＯＢに欠陥画素があった場合などに関する問題は解決されない。

本発明は上述した課題に鑑みてなされたものであり、その目的は、撮像素子のＯＢ画素領域に欠陥画素があった場合でも、撮像装置の外部でＯＢ画素部の出力を用いた補正処理を精度良く行うことができるようにすることである。

本発明に係わる撮像装置は、光を電気信号に変換するとともに、有効画素部および基準画素部を有する撮像素子と、前記基準画素部において、所定の基準値と比較して欠陥画素が存在するか否かを判定し、該判定の結果に応じて、前記基準画素部から出力される信号の圧縮処理を変更する制御手段と、を備え、前記制御手段は、前記基準画素部の欠陥画素が前記所定の基準値と比較して存在すると判定した場合には、前記基準画素部の圧縮しないデータと、前記欠陥画素のアドレス情報とを前記有効画素部のＲＡＷ画像データに付加して記録媒体に記録するように制御することを特徴とする。

本発明によれば、撮像素子のＯＢ画素領域に欠陥画素があった場合でも、撮像装置の外部でＯＢ画素部の出力を用いた補正処理を精度良く行うことが可能となる。

本発明の第１の実施形態に係わる撮像装置の構成を示すブロック図である。 第１の実施形態の撮像装置におけるＣＭＯＳセンサーの画素構造を示す概略図である。 第１の実施形態の撮像装置におけるＶＯＢを圧縮処理したＲＡＷ画像データの画素構造を示す概略図である。 第１の実施形態の撮像装置におけるＣＭＯＳセンサーの画素構造においてＶＯＢに欠陥画素があることを説明する概略図である。 第１の実施形態におけるＶＯＢ処理の動作を示すフローチャートである。 本発明の第２の実施形態に係わる撮像装置の構成を示すブロック図である。 第２の実施形態におけるＶＯＢ処理の動作を示すフローチャートである。

以下、本発明の実施形態について添付図面を参照して詳細に説明する。

本実施形態の撮像装置は、被写体を撮像する撮像部を構成するレンズと、レンズから入射された光量を制御するための絞りと、レンズからの入射光を、電気信号に変換する撮像素子であるＣＭＯＳセンサーを備える。ＣＭＯＳセンサーは、有効画素部の外側に配置されたＶＯＢ画素領域（垂直オプティカルブラック部）を有する。また、撮像装置には、被写体画像の記録開始と、記録終了を指示するＲＥＣボタンを備える。また、撮影中の画像表示のために画像圧縮を行う圧縮処理部と、露出制御用の評価値算出部と、露出制御部と、ゲイン制御部と、電子シャッター制御部と、絞り制御部を備える。

また、ＲＥＣボタンにより、画像記録が指示された場合に、ＣＭＯＳセンサーから出力されるＶＯＢ領域の欠陥画素検出を行うＶＯＢキズ検出部を備える。また、その検出結果に応じて、ＲＡＷ画像データに付加するＶＯＢを圧縮処理するＶＯＢライン処理部を備える。また、ＶＯＢキズ検出部で検出された欠陥画素のアドレス情報を、ＶＯＢライン処理部からの出力ＲＡＷ画像データに付加するための画像メタデータ付加部と、出力ＲＡＷ画像データを記録する記録媒体を備える。

これにより、ＲＥＣボタンにより、画像記録が指示された場合に、ＣＭＯＳセンサーから出力されるＶＯＢ領域の欠陥画素の検出結果に応じて、記録するＲＡＷ画像データに付加するＶＯＢ画像データの処理を変更する。さらに、欠陥画素のアドレス情報をＲＡＷ画像データに付加した後、記録する。

（第１の実施形態）
図１は、本発明の第１の実施形態に係わる撮像装置の構成を示すブロック図である。図１において、レンズ１を通った被写体光は、入射光量を制御する絞り２を介してＣＭＯＳセンサー３に入射される。撮像素子であるＣＭＯＳセンサー３は、入射した被写体光を光電変換することで得られるアナログ電気信号をＡ／Ｄ変換した後、ＲＡＷ画像データとしてセレクタ部４に出力する。ここで、ＣＭＯＳセンサー３が有する画素数は、例えばＳＨＶ（スーパーハイビジョン）を実現する水平８Ｋ（７６８０画素）×垂直４Ｋ（４３２０画素）である。

セレクタ部４は、記録状態か記録待機状態かにより、入力されたＲＡＷ画像データの出力切替を行う。なお、記録開始もしくは記録終了は、ＲＥＣボタン１４から記録制御部１５を介して入力される制御信号により制御される。

次に、記録待機中の動作について説明する。記録待機中では、セレクタ部４は圧縮処理部５にＲＡＷ画像データを出力する。圧縮処理部５は、例えば水平垂直共に１／４の画素数になるように圧縮処理を行う（出力ＲＡＷ画像データは、水平１９２０画素×垂直１０８０画素）。ここで、圧縮処理の方法としては、水平・垂直ともに１／４画素間引きを行う画素間引き処理、水平・垂直ともに４画素加算（１６画素加算）を行う画素加算処理、バイキュービックなどのフィルタを用いた縮小処理などがある。

圧縮処理部５で圧縮されたＲＡＷ画像データ（圧縮ＲＡＷ画像データ）は、センサー補正部６に出力され、センサー補正部６は、ＣＭＯＳセンサー内部の列毎に備えた列アンプのオフセットばらつきや列Ａ／Ｄのオフセットばらつきにより発生する縦線ノイズを補正する。

縦線ノイズを補正するために、まず、ＣＭＯＳセンサーに備えた遮光画素で構成されるＶＯＢ画素領域からの出力信号を、垂直方向に平均化する。例えば、ＣＭＯＳセンサーのＶＯＢ画素領域に遮光画素が１６ライン設けられている場合には、１６ライン分平均化処理し、１ラインのＶＯＢデータを生成する。その生成した１ライン分のＶＯＢデータを各列の有効画素データから差し引くことで、縦線ノイズの主要因である各列のオフセットばらつきを補正する。

縦線ノイズを補正された圧縮ＲＡＷ画像データは、現像処理部７で同時化補間（ディベイヤー）処理や、色補正、ガンマ補正、ＹＣｂＣｒ変換等の映像信号処理が施された後、画像を表示するＬＣＤパネル８に映像信号として出力される。

同時に、センサー補正部６から評価値算出部９に信号を出力し、評価値算出部９は露出制御用の評価値を生成する。この評価値は露出制御部１０に入力され、現在の露出状態が適正か否かの判定を行い、適正ではないと判定した場合には適正な露出状態にするために、ゲイン制御部１１や電子シャッター制御部１２、絞り制御部１３に制御信号を出力し、露出制御を行う。

次に、記録中の動作について説明する。ＲＥＣボタン１４が操作されて記録開始が指示されると、ＲＥＣボタン１４から記録制御部１５を介して、セレクタ部４に制御信号が出力される。そして、ＶＯＢキズ検出部１８に対して、セレクタ部４に入力されたＣＭＯＳセンサーから出力されたＲＡＷ画像データが出力される。

ＶＯＢキズ検出部１８は、入力されたＲＡＷ画像データに含まれるＶＯＢ領域の画像データにおいて、予め設定される基準値と比較して欠陥画素が存在するか否かの判定を行う。その判定結果において、欠陥画素がないと判定された場合には、ＶＯＢ画像データを含むＲＡＷ画像データとその判定結果をＶＯＢライン処理部１９に出力する。

ＶＯＢライン処理部１９は、ＲＡＷ画像データにあるＶＯＢ領域の画像データを、それぞれの色プレーン（Ｒ，Ｇｒ，Ｇｂ，Ｂ）に対応したライン（行）毎に加算平均して各色プレーンで１ライン化した後、入力されたＲＡＷ画像データに付加して画像メタデータ付加部１６に出力する。画像メタデータ付加部１６には、ＲＡＷ画像データが入力されるとともに露出制御部１０から現在の露出制御値であるゲイン制御値、電子シャッター制御値と、絞り制御値が入力される。そして、その情報を、カメラメタデータとしてＲＡＷ画像データに付加した後、記録媒体１７に出力する。記録媒体１７は、入力されたＲＡＷ画像データを記録する。

一方、ＶＯＢキズ検出部１８での欠陥画素判定結果において、ＶＯＢ画素領域に欠陥画素があると判定された場合には、ＶＯＢキズ検出部１８は、ＶＯＢ領域の画像データを含むＲＡＷ画像データとその判定結果を、ＶＯＢライン処理部１９に出力する。さらに、ＶＯＢキズ検出部１８は、欠陥画素のアドレス情報（Ｘ，Ｙ）を、画像メタデータ付加部１６に出力して格納する。

ＶＯＢライン処理部１９は、入力されたＲＡＷ画像データと、欠陥画素判定結果から、ＲＡＷ画像データを未処理のまま画像メタデータ付加部１６に出力する。画像メタデータ付加部１６には、ＶＯＢライン処理部１９からのＲＡＷ画像データ、露出制御部１０からのゲイン制御値、電子シャッター制御値、絞り制御値と、ＶＯＢキズ検出部１８からの欠陥画素のアドレス情報（Ｘ，Ｙ）が入力される。

画像メタデータ付加部１６は、入力されたゲイン制御値、電子シャッター制御値、絞り制御値と、欠陥画素のアドレス情報（Ｘ，Ｙ）を、カメラメタデータとしてＲＡＷ画像データに付加した後、記録媒体１７に出力する。記録媒体１７は、入力されたＲＡＷ画像データを記録する。

次に、ＲＡＷ画像データにおけるＶＯＢ画素領域の欠陥画素判定に基づくＶＯＢ領域の画像データに対する圧縮処理の１つである垂直加算平均処理について、図２Ａ、図２Ｂ、図２Ｃに基づいて説明する。

図２Ａは、ＣＭＯＳセンサーから出力されるＲＡＷ画像データであり、例えば、８行×８列（＝６４画素）のＶＯＢ画素領域を有する。ＶＯＢ画素領域の６４画素の出力信号について、予め設定された基準値と比較し、欠陥画素が存在するか否かの判定を行う。

ここで、上記の基準値には、ＶＯＢよりも低い値の欠陥画素（黒キズ）を検出するための基準値１、またＶＯＢよりも高い値の欠陥画素（白キズ）を検出するための基準値２が設定され、以下の条件で欠陥画素の判定を行う。

条件１ ＶＯＢ画素値＜基準値１ →黒キズと判定
条件２ ＶＯＢ画素値＞基準値２ →白キズと判定
条件３ 基準値１≦ＶＯＢ画素値≦基準値２ →正常画素と判定
次に、上記の判定結果において、ＶＯＢ画素領域に欠陥画素がないと判定された場合のＲＡＷ画像データ内のＶＯＢ画像データの圧縮処理について、図２Ｂを用いて説明する。

上記の判定結果において、ＶＯＢ画素領域の６４画素すべてが条件３に該当し、欠陥画素がないと判定された場合には、図２Ｂに示す画素構造のＲＡＷ画像データが記録媒体に記録される。

ここで、ＶＯＢ画像データの圧縮処理は、各色プレーンに対応するＶＯＢ画素を垂直加算平均することで生成する。例えば、式（１）〜（４）のように加算処理を行うことにより、図２Ｂに示すＲ＿ＡＶＥＶＯＢ１１、Ｇｂ＿ＡＶＥＶＯＢ２１、Ｇｒ＿ＡＶＥＶＯＢ１２、Ｂ＿ＡＶＥＶＯＢ２２の各画素データが求められる。

Ｒ＿ＡＶＥＶＯＢ１１＝（ＶＯＢ１１＋ＶＯＢ３１＋ＶＯＢ５１＋ＶＯＢ７１）／４
…（１）
Ｇｂ＿ＡＶＥＶＯＢ２１＝（ＶＯＢ２１＋ＶＯＢ４１＋ＶＯＢ６１＋ＶＯＢ８１）／４
…（２）
Ｇｒ＿ＡＶＥＶＯＢ１２＝（ＶＯＢ１２＋ＶＯＢ３２＋ＶＯＢ５２＋ＶＯＢ７２）／４
…（３）
Ｂ＿ＡＶＥＶＯＢ２２＝（ＶＯＢ２２＋ＶＯＢ４２＋ＶＯＢ６２＋ＶＯＢ８２）／４
…（４）
また、ＶＯＢ画素領域の３列目以降についても１列目、２列目と同様な加算処理を行えば良い。以上のようにＶＯＢ画素領域に欠陥画素がないと判定された場合には、ＣＭＯＳセンサーから出力されるＲＡＷ画像データが有するＶＯＢ画素領域の出力画像データ（８行×８列）は、２行×８列に圧縮処理される。

次に、上記の判定結果において、ＶＯＢ画素領域に欠陥画素があると判定された場合のＲＡＷ画像データ内のＶＯＢ画像データの圧縮処理について、図２Ｃを用いて説明する。

上記の判定結果において、ＶＯＢ画素領域のいずれかの画素が条件１または条件３に該当し、欠陥画素があると判定された場合には、図２Ｃに示す画素構造のＲＡＷ画像データが記録媒体に記録される。

すなわち、欠陥画素があると判定された場合には、図２ＢのようなＶＯＢ画像データの圧縮処理は行わず、入力されたＲＡＷ画像データを未処理のまま出力するとともに、欠陥画素のアドレス情報（Ｘ，Ｙ）を出力する。例えば図２Ｃの場合、次のようになる。

ＶＯＢ３１：（Ｘ，Ｙ）＝（１，３） 白キズ
ＶＯＢ５５：（Ｘ，Ｙ）＝（５，５） 黒キズ
Ｘ：水平方向アドレス、Ｙ：垂直方向アドレス
以上のように、ＲＡＷ画像データ内のＶＯＢ画素領域の欠陥画素判定の結果に応じて、異なるＶＯＢ画像データの処理が行われる。

次に、ＲＡＷ画像データ内のＶＯＢ画素領域の欠陥画素判定結果に応じたＶＯＢ画像データの圧縮処理と、ＲＡＷ記録に関する動作について、図３のフローチャートを用いて説明する。

撮像装置の電源が投入されると（Ｓ１００）、ＣＭＯＳセンサーが動作を開始し（Ｓ１０１）、露出制御が開始される（Ｓ１０２）。

次に、撮像装置が備えるＲＥＣボタン１４により記録開始が指示されたか否かの判定を行う（Ｓ１０３）。Ｓ１０３の判定結果において、記録待機状態のままであった場合には、ＣＭＯＳセンサーから出力されるＲＡＷ画像データ内のＶＯＢ画像データの圧縮処理は行われない（Ｓ１０４）。一方、Ｓ１０３の判定結果において、記録開始が指示されたと判定された場合には、ＲＡＷ画像データ内のＶＯＢ画素領域を構成する画素に欠陥画素が存在するか否かの検出を行う（Ｓ１０５）。

このＶＯＢ画素領域の画素出力値と、撮像装置に予め設定された基準値（基準値１、基準値２）の比較を行い（Ｓ１０６）、画素出力値が基準値１以上であり、かつ基準値２以下であるか否かの判定を行う（Ｓ１０７）。

この判定結果において、画素出力値が基準値１以上であり、かつ基準値２以下であると判定された場合には、ＲＡＷ画像データ内のＶＯＢ画素領域の各色プレーンに対応した画素において、垂直加算平均処理を施す（Ｓ１０８）。その後、ＲＡＷ画像データに加算平均処理後のＶＯＢ画像データを付加し（Ｓ１０９）、処理後のＲＡＷ画像データを記録媒体に記録する（Ｓ１１２）。

一方、Ｓ１０７の判定結果において、画素出力値が基準値１未満、または基準値２よりも大きいと判定された場合には、判定されたＶＯＢ画素領域の欠陥画素のアドレス情報を生成する（Ｓ１１０）。

次に、ＣＭＯＳセンサーからのＲＡＷ画像データに、生成したＶＯＢ画素領域の欠陥画素のアドレス情報を付加し（Ｓ１１１）、ＲＡＷ画像データを記録媒体に記録する（Ｓ１１２）。

記録中は、上記の動作（Ｓ１０３からＳ１１２）を繰り返す。

以上のように、ＣＭＯＳセンサーから出力されるＲＡＷ画像データの記録が開始された場合に、ＲＡＷ画像データ内のＶＯＢ画素領域に欠陥画素が存在するか否かの判定結果に応じてＶＯＢ画像データの処理を変更する。すなわち、ＶＯＢ画素領域に欠陥画素がない場合にはＶＯＢ画像データの圧縮処理を行い、ＶＯＢ画素領域に欠陥画素があった場合には圧縮処理は行わず、欠陥画素のアドレス情報をＲＡＷ画像データに付加する処理が行われる。

これにより、ＶＯＢ画素領域の欠陥画素の影響を受けずに外部装置で行う縦線補正の誤動作を防止し、さらに欠陥画素が発生しないような撮影状態では、撮像装置の内部でＶＯＢ画像データを圧縮処理することで、データ量の削減が可能となる。

なお、上記の第１の実施形態では、ＣＭＯＳセンサーから出力されたＲＡＷ画像データについて、ＣＭＯＳセンサーの外部に備えた処理回路でＶＯＢ画像データを圧縮処理したが、ＣＭＯＳセンサーの内部の処理回路で圧縮処理を行ってもよい。

さらに、ＶＯＢ画像データの圧縮処理として、垂直加算平均する場合について説明したが、ＶＯＢ画素領域に欠陥画素があると判定した場合には、欠陥画素がある行（ライン）をスキップした後、ＲＡＷ画像データを記録してもよい。

（第２の実施形態）
上記の第１の実施形態では、記録中にＲＡＷ画像データ内のＶＯＢ画素領域の欠陥画素を判定し、その判定結果によりＶＯＢ画像データの処理を変更する方法、及び欠陥画素アドレス情報をＲＡＷ画像データに付加する手法について説明した。第２の実施形態では、ＲＡＷ画像データ内のＶＯＢ画像データの処理について、撮像装置が備えるＩＳＯ感度設定値に応じて行う手法について、図４、図５、図６を用いて説明する。

図４は、図１に示すブロック図から、ＶＯＢキズ検出部１８が削除され、ＩＳＯ感度設定部２０が追加されている。記録中、ＩＳＯ感度設定部２０で設定されたＩＳＯ感度情報が、記録制御部１５を介してＶＯＢライン処理部１９に出力される。ＶＯＢライン処理部１９は、記録制御部１５から入力されたＩＳＯ感度情報と予め設定された基準値とを比較し、設定されたＩＳＯ感度が基準値未満、つまり低ＩＳＯ感度設定であると判定した場合には、ＲＡＷ画像データ内のＶＯＢ画像データを圧縮処理する。ここで、圧縮処理の方法は、第１の実施形態で説明した方法と同じであるため、省略する。

一方、上記比較の結果、設定されたＩＳＯ感度が基準値以上、つまり高ＩＳＯ感度設定であると判定した場合には、入力されたＲＡＷ画像データ内のＶＯＢ画像データを圧縮処理せず、そのまま出力する。

ＶＯＢライン処理部１９から出力されたＲＡＷ画像データは、画像メタデータ付加部１６に入力され、画像メタデータ付加部１６は、ＩＳＯ感度設定部２０と記録制御部１５を介して入力された現在のＩＳＯ感度設定値を、ＲＡＷ画像データに付加し、記録媒体１７に記録する。

次に、上記のＩＳＯ感度設定値によるＲＡＷ画像データ内のＶＯＢ画像データの処理方法について、図２Ａ、図２Ｂに基づいて説明する。

図２Ａに示す８行×８列（＝６４画素）のＶＯＢ画素領域を有するＣＭＯＳセンサーから出力されるＲＡＷ画像データは、次のように処理される。すなわち、現在のＩＳＯ感度設定値を予め設定された基準値（例えば、ＩＳＯ８００）と比較し、低ＩＳＯ設定である（ＩＳＯ８００未満である）と判定された場合には、図２Ｂに示すように、ＶＯＢ画像データを圧縮処理して記録する。

一方、上記の比較結果において、高ＩＳＯ設定である（ＩＳＯ８００以上である）と判定された場合には、ＶＯＢ画像データの圧縮処理は行わず、図２Ａの画素データのまま記録する。以上のように、撮影中のＩＳＯ感度設定値に応じて、ＲＡＷ画像データ内のＶＯＢ画像データの処理が変更される。

次に、記録中のＩＳＯ感度設定値におけるＲＡＷ画像データ内のＶＯＢ画像データの圧縮処理と、ＲＡＷ記録に関する動作について、図５のフローチャートを用いて説明する。

図５に示す撮像装置の電源ＯＮから記録開始指示の判定まで（Ｓ１００からＳ１０３）と、記録待機状態の動作は、第１の実施形態と同様の動作であるため、説明を省略する。

次に、記録開始が指示されたか否かの判定（Ｓ１０３）において、記録開始が指示されたと判定された場合には、現在のＩＳＯ感度設定値を検出する（Ｓ１１３）。

次に、検出されたＩＳＯ感度設定値と、撮像装置に予め設定された基準となるＩＳＯ感度値を表す基準値を比較し（Ｓ１１４）、ＩＳＯ感度設定値が基準値以上であるか否かの判定を行う（Ｓ１１５）。

その判定結果において、ＩＳＯ感度設置値が基準値未満であると判定された場合には、ＲＡＷ画像データ内のＶＯＢ画素領域の各色プレーンに対応した画素において、垂直加算平均処理を施す（Ｓ１０８）。その後、ＲＡＷ画像データに加算平均処理後のＶＯＢ画像データを付加し（Ｓ１０９）、処理後のＲＡＷ画像データを記録媒体に記録する（Ｓ１１２）。

一方、ＩＳＯ感度設定値が基準値以上であると判定された場合には、入力されたＲＡＷ画像データ内のＶＯＢ画像データの圧縮処理は行われず、そのまま記録媒体に記録される（Ｓ１１２）。記録中は、上記の動作（Ｓ１０３からＳ１１２）を繰り返す。

以上のように、記録中のＩＳＯ感度設定値に応じて、ＲＡＷ画像データ内のＶＯＢ画像データの処理を変更する動作が行われる。これにより、高ＩＳＯ設定時に発生するノイズや欠陥画素の影響を受けることがなくなり、外部装置で行う縦線補正の誤動作を防止できる。さらに、ノイズや欠陥画素が発生しないような撮影状態では、撮像装置の内部でＶＯＢ画像データを圧縮処理することで、データ量の削減を図ることが可能となる。

なお、第２の実施形態では、撮影中のＩＳＯ感度設定値に応じてＶＯＢ画像データの圧縮方法を変更したが、ＣＭＯＳセンサーの蓄積時間に応じて、ＶＯＢ画像データの圧縮方法を変更してもよい。

（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (14)

1. 光を電気信号に変換するとともに、有効画素部および基準画素部を有する撮像素子と、
   前記基準画素部において、所定の基準値と比較して欠陥画素が存在するか否かを判定し、該判定の結果に応じて、前記基準画素部から出力される信号の圧縮処理を変更する制御手段と、を備え、
   前記制御手段は、前記基準画素部の欠陥画素が前記所定の基準値と比較して存在すると判定した場合には、前記基準画素部の圧縮しないデータと、前記欠陥画素のアドレス情報とを前記有効画素部のＲＡＷ画像データに付加して記録媒体に記録するように制御することを特徴とする撮像装置。
2. 前記制御手段は、前記基準画素部の欠陥画素が前記所定の基準値と比較して存在しないと判定した場合には、前記基準画素部の信号を圧縮したデータを前記有効画素部のＲＡＷ画像データに付加して前記記録媒体に記録するように制御することを特徴とする請求項１に記載の撮像装置。
3. 前記制御手段は、前記基準画素部の欠陥画素のアドレス情報を、前記ＲＡＷ画像データに付加するメタデータに格納することを特徴とする請求項１に記載の撮像装置。
4. 前記基準画素部の信号を圧縮するための処理回路を、前記撮像素子の外部あるいは前記撮像素子の内部に備えることを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記制御手段は、前記基準画素部の信号を加算平均することにより圧縮することを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
6. 前記基準画素部は、オプティカルブラック画素部を含むことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
7. 光を電気信号に変換するとともに、有効画素部および基準画素部を有する撮像素子を備える撮像装置の制御方法であって、
   前記基準画素部において、所定の基準値と比較して欠陥画素が存在するか否かを判定し、該判定の結果に応じて、前記基準画素部から出力される信号の圧縮処理を変更する制御工程を有し、
   前記制御工程では、前記基準画素部の欠陥画素が前記所定の基準値と比較して存在すると判定した場合には、前記基準画素部の圧縮しないデータと、前記欠陥画素のアドレス情報とを前記有効画素部のＲＡＷ画像データに付加して記録媒体に記録するように制御することを特徴とする撮像装置の制御方法。
8. 前記制御工程では、前記基準画素部の欠陥画素が前記所定の基準値と比較して存在しないと判定した場合には、前記基準画素部の信号を圧縮したデータを前記有効画素部のＲＡＷ画像データに付加して前記記録媒体に記録するように制御することを特徴とする請求項７に記載の撮像装置の制御方法。
9. 前記制御工程では、前記基準画素部の欠陥画素のアドレス情報を、前記ＲＡＷ画像データに付加するメタデータに格納することを特徴とする請求項７に記載の撮像装置の制御方法。
10. 前記基準画素部の信号の圧縮を、前記撮像素子の外部あるいは前記撮像素子の内部に設けられた処理回路により行うことを特徴とする請求項７乃至９のいずれか１項に記載の撮像装置の制御方法。
11. 前記制御工程では、前記基準画素部の信号を加算平均することにより圧縮することを特徴とする請求項７乃至１０のいずれか１項に記載の撮像装置の制御方法。
12. 前記基準画素部は、オプティカルブラック画素部を含むことを特徴とする請求項７乃至１１のいずれか１項に記載の撮像装置の制御方法。
13. 請求項７乃至１２のいずれか１項に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
14. 請求項７乃至１２のいずれか１項に記載の制御方法の各工程をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。

Images