JP2006180252A - 撮像装置及び画像処理装置 - Google Patents

Abstract

【課題】 再生時に、撮像記録時に行われているアパーチャー補正と同等なアパーチャー補正を行えるようにすること。
【解決手段】 撮像手段（１，２）から出力される被写体の画像データを処理する画像処理装置であって、前記撮像手段から出力された画像データから輝度信号成分を抽出する色キャリア除去回路（３）と、前記色キャリア除去回路により抽出された輝度信号成分に基づいて、アパーチャー補正データを生成すると共に、前記輝度信号成分に対してアパーチャー補正を行うアパーチャー補正回路（１７）と、前記アパーチャー補正回路により生成されたアパーチャー補正データと、アパーチャー補正された輝度信号成分とを出力する出力手段（１０）とを有する。
【選択図】 図１

Description

本発明は撮像装置及び画像処理装置に関し、特に、記録媒体に画像データと共にアパーチャー補正データを記録し、画像再生装置によって画像再生時にアパーチャー補正を調整できる撮像装置及び画像処理装置に関する。

従来、アパーチャー補正について信号処理による画像の劣化及び画像の変化を少なくするために、様々な方法が提案されている（特許文献１参照）。

図１４は、従来の撮像装置の構成を示す図である。図１４に示す構成において、撮像素子１０１から得られる画像信号はＡ／Ｄ変換回路１０２によってアナログ信号からデジタル信号に変換される。このデジタル画像データから、色補間回路１０６によって、各画素について原色信号であるレッド（Ｒ）、グリーン（Ｇ）、ブルー（Ｂ）が補間生成され、ＲＧＢ信号が出力される。次にＲＧＢ信号は、ガンマ補正回路１０７において、撮影した画像を表示するディスプレイ装置のγ特性に合うように補正され、ガンマ補正後のＲＧＢ信号は色差マトリクス回路１０８によって、色差信号（Ｒ−Ｙ，Ｂ−Ｙ）に変換される。一方、前記Ａ／Ｄ変換回路１０２の出力であるデジタル信号は、色キャリア除去回路１０３によって色キャリア成分が除去され、アパーチャー補正回路１０４において高域周波数帯の周波数特性が持ち上げられる。さらに、ガンマ補正回路１０５においてガンマ補正されて、輝度信号（Ｙ）が出力される。

以上のように、従来のシステムでは撮像装置内で撮像記録時にアパーチャー補正を行い、画像データを出力または記録することが一般的であった。

特開平８−９１９９号公報

アパーチャー補正は画質を向上させるための重要なパラメータであり、従来より各カメラ機種に依存した、撮像素子やＡ／Ｄ変換時の特性を充分に考慮してその設定値を決定し、撮像記録時に補正を行っていた。そのため記録された画像データは、ユーザーの好みに応じてアパーチャーの強弱を変えたりすることはできなかった。また、画像再生時にアパーチャー補正を行えるようにした場合でも、記録された画像データからアパーチャー補正データを生成しなければならないため、撮像記録時に行われているアパーチャー補正と同等な画質のチューニングを行う手段をユーザーに提供することができなかった。

本発明は上記問題点を鑑みてなされたものであり、再生時にも撮像記録時に行われているアパーチャー補正と同等なアパーチャー補正を行えるようにすることを目的とする。

上記目的を達成するために、撮像手段から出力される被写体の画像データを処理する本発明の画像処理装置は、前記撮像手段から出力された画像データから輝度信号成分を抽出する輝度信号抽出手段と、前記輝度信号抽出手段により抽出された輝度信号成分に基づいて、アパーチャー補正データを生成すると共に、前記輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段と、前記アパーチャー補正手段により生成されたアパーチャー補正データと、アパーチャー補正された輝度信号成分とを出力する出力手段とを有する。

また、別の構成によれば、撮像手段から出力される被写体の画像データを処理する本発明の画像処理装置は、前記撮像手段から出力された画像データから輝度信号成分を抽出する輝度信号抽出手段と、前記輝度信号抽出手段により抽出された輝度信号成分に基づいて、アパーチャー補正データを生成するアパーチャー補正データ生成手段と、前記アパーチャー補正データ生成手段により生成されたアパーチャー補正データと、前記輝度信号成分とを出力する出力手段とを有する。

更に、本発明の撮像装置は、上記いずれかに記載の画像処理装置と、被写体を撮像し、電気的な画像データを出力する撮像手段とを有する。

また、別の構成によれば、本発明の画像処理装置は、外部から画像データ及びアパーチャー補正データを入力する入力手段と、前記入力手段から入力した画像データから輝度信号成分を抽出する輝度信号抽出手段と、前記入力手段から入力したアパーチャー補正データを変更する変更手段と、前記変更手段により変更されたアパーチャー補正データを用いて、前記輝度信号抽出手段からの輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段とを有する。

本発明によれば、再生時にも撮像記録時に行われているアパーチャー補正と同等なアパーチャー補正を行うことが可能となる。

以下、添付図面を参照して本発明を実施するための最良の形態を詳細に説明する。

＜第１の実施形態＞
図１は、本発明の第１の実施形態に係る撮像装置の概略構成を示すブロック図である。

図１において、１は撮像素子であり、被写体像を画像信号に変換し出力する。２はＡ／Ｄ変換回路であり、撮像素子１の出力である画像信号をアナログ信号から任意ビットのデジタル信号に変換し、信号処理回路１８に出力する。信号処理回路１８は、Ａ／Ｄ変換回路２の出力から色差信号と輝度信号とを生成する回路であって、輝度信号処理のための色キャリア除去回路３、アパーチャー補正回路１７及びガンマ補正回路４と、色信号処理のための色補間回路５、ガンマ補正回路及び色差マトリクス回路１８を含む。

色キャリア除去回路３は、Ａ／Ｄ変換回路２から出力されるデジタル信号をローパスフィルタに通して色キャリア成分を除去し、輝度信号を出力する。アパーチャー補正回路１７では、色キャリア除去回路３の出力信号から高周波成分を抽出してアパーチャー補正データを生成し、元のデジタル信号に対してアパーチャー補正を施して出力する。また同時に、生成したアパーチャー補正データを別途出力する。詳細は後述するが、出力されたアパーチャー補正データは記録媒体１０に記録される。また、アパーチャー補正回路１７については図２を参照して詳細に後述する。ガンマ補正回路４は、アパーチャー補正回路１７から出力されるアパーチャー補正後の輝度信号を、画像表示するディスプレイ装置のγ特性に適するように補正して出力する。

一方、色補間回路５では、Ａ／Ｄ変換回路２から出力されるデジタル信号を用いて、各画素が原色信号（Ｒ，Ｇ，Ｂ）をそれぞれ有するように補間生成し、ＲＧＢ信号を出力する。次にガンマ補正回路６において、出力されたＲＧＢ信号についてガンマ補正を行う。そして色差マトリクス回路７において、ＲＧＢ信号を色差信号（Ｒ−Ｙ）および色差信号（Ｂ−Ｙ）に変換する。

９はＪＰＥＧ圧縮回路であり、信号処理回路１８から出力される色差信号（Ｂ−Ｙ、Ｒ−Ｙ）および輝度信号（Ｙ）を画像データとして圧縮し（以降、「圧縮画像データ」と呼ぶ。）、出力する。ここでは、圧縮方法としてＪＰＥＧ方式を採用するものとするが、これ以外の公知の圧縮方法を用いても良いことは言うまでない。

１０は記録媒体であり、ＪＰＥＧ圧縮回路９から出力される圧縮画像データと、アパーチャー補正回路１７から出力されるアパーチャー補正データとを記録する。記録媒体１０への記録には、ここではＥｘｉｆファイル形式を使用し、アパーチャー補正データは画像データのヘッダの付属情報として記録媒体に書き込む。なお、ファイル形式はＥｘｉｆファイル形式に限られるものではない。１１はＪＰＥＧ伸張回路であり、記録媒体１０に記録された圧縮画像データをＪＰＥＧ伸張し、色差信号（Ｂ−Ｙ、Ｒ−Ｙ）および輝度信号（Ｙ）を出力する。

１２はアパーチャー補正回路であり、本発明の第１の実施形態では、記録媒体１０に記録されているアパーチャー補正データを用いて、ＪＰＥＧ伸張回路１１から出力される輝度信号（Ｙ）についてアパーチャー補正による画質のチューニングを行い、新たな輝度信号（Ｙ）を生成し、出力する。アパーチャー補正回路１２については図３を参照して詳細に後述する。１３は画像表示制御部であり、モニタ１４に画像を表示するために、アパーチャー補正回路１２の出力である輝度信号（Ｙ）と、ＪＰＥＧ伸張回路１１の出力である色差信号（Ｂ−Ｙ、Ｒ−Ｙ）とをエンコードし、モニタ信号を出力する。

次に、本発明の第１の実施形態に係るアパーチャー補正回路１７の構成について、図２を参照して説明する。アパーチャー補正回路１７は、垂直方向ハイパスフィルタ（Vertical-HPF）２２、水平方向ハイパスフィルタ（Horizontal-HPF）２７、混合器２３、コアリング部２４、ゲイン調整部２５、ルックアップテーブル（Look-up Table）２８、乗算部２９、リミッタ部２６、加算器３１から構成されている。

垂直方向ハイパスフィルタ２２及び水平方向ハイパスフィルタ２７は、色キャリア除去回路３から入力される輝度信号の垂直方向の高周波成分および水平方向の高周波成分をそれぞれ抽出し、混合器２３に出力する。混合器２３では、入力される垂直方向と水平方向の高周波成分のそれぞれの絶対値を比較し、その値が等しければ垂直方向と水平方向の高周波成分の平均値を出力する。また、混合器２３は入力される垂直方向の高周波成分と水平方向の高周波成分のそれぞれの絶対値が等しくなければ、どちらか大きい方の高周波成分を選択し、出力する。コアリング部２４では、混合器２３から入力される高周波成分の値の小さい部分が主にノイズによるものであることから、それを零に置き換え、出力する。ゲイン調整部２５では、コアリング部２４から入力される高周波成分を出力する。

ルックアップテーブル２８は、輝度信号のレベルと高周波成分の符号とをアドレスとして、補正係数を読み出し、出力する。そして乗算器２９において、ゲイン調整部２５から入力される高周波成分とルックアップテーブル２８から読み出された補正係数とを乗算し、結果を出力する。その後、リミッタ部２６において、乗算器２９から入力される高周波成分をリミッタ処理し、アパーチャー補正データを生成する。３１は加算器であり、生成されたアパーチャー補正データを輝度信号に加算し、輝度信号にアパーチャー補正処理を施し出力する。本発明の第１の形態におけるアパーチャー補正回路１７は、輝度信号に対してアパーチャー補正処理を施してから出力すると共に、更にリミッタ部２６の出力信号であるアパーチャー補正データを出力するという特徴をもつ。

次に、本発明の第１の実施形態に係るアパーチャー補正回路１２について図３を参照して説明する。アパーチャー補正回路１２は、アパーチャー補正データチューニング部６２、スイッチ（ＳＷ）６４、加算器６６、ガンマ補正部６７から構成されている。

アパーチャー補正データチューニング部６２では、記録媒体１０から得たアパーチャー補正データの値のゲイン調整が可能で、ユーザーが任意にアパーチャー補正データをカスタマイズできる。ガンマ補正部６７では、アパーチャー補正データチューニング部６２によりカスタマイズされたアパーチャー補正データにガンマ補正を施し、加算機６６に出力する。加算器６６では、ガンマ補正部６７においてガンマ補正されたアパーチャー補正データと記録媒体１０から読み出された輝度信号とを加算し、輝度信号にアパーチャー補正処理を施して出力する。ＳＷ６４は、アパーチャー補正処理を行うか行わないかを切り替えるスイッチであって、具体的には、端子１が選択されているときにはガンマ補正回路６６によってアパーチャー補正処理された輝度信号を画像表示制御部１３に出力し、端子０が選択されているときには記録媒体１０から読み込んできた輝度信号をそのまま出力する。

次に、本発明の第１の実施形態に係る、アパーチャー補正回路１２による画像再生時のアパーチャー補正動作について、図４を参照して説明する。なお、図４の処理は、モニタ１４に表示されるユーザーインターフェイス（不図示）を用いて行われる。

先ず、図４のステップＳ１１において、輝度信号（Ｙ）にアパーチャ補正を行うか行わないかを設定する。アパーチャー補正を行わない場合、ステップＳ１２に進み、記録媒体１０から読み出したままの輝度信号（Ｙ）および色差信号（Ｂ−Ｙ、Ｒ−Ｙ）をもとにモニタ１４に画像を表示する。画像表示後、ステップＳ１３においてアパーチャーの修正を行うかどうかを判断し、修正を行わない場合にはこのまま処理を終了し、修正を行う場合にはステップＳ１１に戻る。一方、ステップＳ１１においてアパーチャー補正を行うことを選んだ場合にはステップＳ１４に進む。

ステップＳ１４で、アパーチャー補正データチューニング部６２においてアパーチャー補正データのカスタマイズを行う。具体的には、ここでは上述したように記録媒体１０から読み出したアパーチャー補正データのゲイン調整を行う。その後、ステップＳ１５において、カスタマイズしたアパーチャ補正データを輝度信号（Ｙ）に加算し、ステップＳ１２で画像をモニタ１４に表示する。画像表示後、更に画像の修正を行う場合には（ステップＳ１３でＹＥＳ）、ステップＳ１１に戻るようにして、アパーチャー補正による画質のチューニングが繰り返し行えるようにする。

上述の通り、本発明の第１の実施形態によれば、信号処理回路１８においてガンマ補正処理前にアパーチャー補正された画像データと、ガンマ補正処理前にアパーチャー補正回路１７によって生成されるアパーチャー補正データとを記録媒体１０に記録することで、各々のデータを画像再生時に読み出すことが可能となる。これにより、従来の装置ではユーザーが得ることのできなかったアパーチャ補正データを、画像再生時に画質チューニング用パラメータとして提供することができる。またアパーチャー補正回路１２によって、従来、画質を向上させるために撮像記録時に行われていたアパーチャー補正と同等の画質チューニングを画像再生時に行うことができる。

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。図５は、本第２の実施形態に係る撮像装置の概略構成を示すブロック図である。

本第２の実施形態では、信号処理回路１１８においてアパーチャー補正回路１７によるアパーチャー補正をガンマ補正回路４によるガンマ補正処理後に行うところが上記第１の実施形態と異なる。これにより、輝度信号に対してガンマ補正を行った後にアパーチャー補正処理を施すと共に、ガンマ補正後のアパーチャー補正データが出力される。

また、このように処理順を変更することで本第２の実施形態におけるアパーチャー補正回路１９は第１の実施形態のアパーチャー補正回路１２とは異なる構成を有する。なお、これら以外の構成は、第１の実施形態において図１を参照して説明したものと同様であるので、同じ参照番号を付し、説明を省略する。

次に、本発明の第２の実施形態に係るアパーチャー補正回路１９の構成について、図６を参照して説明する。アパーチャー補正回路１９はアパーチャー補正データチューニング部６２、ＳＷ６４、加算器６６から構成されている。各構成は、上記第１の実施形態のアパーチャー補正回路１２における構成と同じである。しかしながら、本第２の実施形態では信号処理回路１１８の中の輝度信号生成過程においてガンマ補正後の信号を用いてアパーチャー補正データを生成するため、アパーチャー補正回路１９ではガンマ補正部６７を持たない。

上述の通り本発明の第２の実施形態によれば、ガンマ補正処理後にアパーチャー補正された画像データと、ガンマ補正処理後にアパーチャー補正回路１７によって生成されるアパーチャー補正データとを記録媒体１０に記録することで、各々のデータを画像再生時に読み出すことが可能となる。これにより、上記第１の実施形態と同様の効果を得ることができる。

＜第３の実施形態＞
次に、本発明の第３の実施形態について説明する。図７は、本第３の実施形態に係る撮像装置の概略構成を示すブロック図である。

本第３の実施形態では、信号処理回路２１８において輝度信号に対してアパーチャー補正処理を行わず、輝度信号生成過程における色キャリア除去処理後の信号を入力として、アパーチャー補正データ生成回路８によりアパーチャー補正データを生成し、記録媒体１０に記録すると共に、色キャリア除去回路３から出力された輝度信号に対してガンマ補正を施した信号が記録媒体１０に記録される。そして、アパーチャー補正回路３２において、アパーチャー補正されていない輝度信号に対してアパーチャー補正を行う点が上記第１及び第２の実施形態とは異なる。なお、上記以外の構成は、第１の実施形態において図１を参照して説明したものと同様であるので、同じ参照番号を付し、説明を省略する。

次に、アパーチャー補正データ生成回路８の構成について図８を用いて説明する。本第３の実施形態におけるアパーチャー補正データ生成回路８は、輝度信号に対するアパーチャー補正処理を行わず、アパーチャー補正データを生成することだけを目的としているため、図８に示すように、第１の実施形態で図２を参照して説明したアパーチャー補正回路１７の構成から加算器３１を除いた構成を有する。その他の構成は、図２に示すものと同様であるため、説明を省略する。

これにより、信号処理回路２１８の色キャリア除去回路３から出力される輝度信号に対して、アパーチャー補正を行うことなくアパーチャー補正データが生成され、記録媒体１０に記録される。

次に、本第３の実施形態におけるアパーチャー補正回路３２の構成について、図９を参照して説明する。図９に示す構成は、第１の実施形態において図３を参照して説明した構成にスイッチ（ＳＷ）６３が追加されたものであり、また、アパーチャー補正データチューニング６２’は、本第３の実施形態ではアパーチャー補正されていない輝度信号（Ｙ）に適するように、記録媒体１０から得たアパーチャー補正データの値のゲイン調整を行う。

ＳＷ６３は、アパーチャー補正データの値をカスタマイズするか、カスタマイズしないか、を切り替えるスイッチである。具体的には、端子１が選択されているときにはアパーチャー補正データチューニング部６２’でカスタマイズされたアパーチャー補正データがガンマ補正回路６７に出力され、端子０が選択されているときには記録媒体１０から読み出されたアパーチャー補正データ（即ち、アパーチャー補正回路１７が生成したアパーチャー補正データ）がガンマ補正回路６７に出力される。従って、本第３の実施形態におけるガンマ補正部６７では、ＳＷ１（６３）によって選択されたアパーチャー補正データにガンマ補正を施すことになる。

次に、本発明の第３の実施形態に係る、アパーチャー補正回路３２による画像再生時のアパーチャー補正動作について、図１０を参照して説明する。なお、図１０の処理は、モニタ１４に表示されるユーザーインターフェイス（不図示）を用いて行われる。

先ず、ステップＳ２１において、輝度信号（Ｙ）にアパーチャ補正を行うか行わないかを設定する。アパーチャー補正を行わない場合、ステップＳ２２に進み、記録媒体１０から読み出したままのアパーチャー補正をしていない輝度信号（Ｙ）および色差信号（Ｂ−Ｙ、Ｒ−Ｙ）をもとにモニタ１４に画像を表示する。画像表示後、ステップＳ２３においてアパーチャーの修正を行うかどうかを判断し、修正を行わない場合にはこのまま処理を終了し、修正を行う場合にはステップＳ２１に戻る。この時、図９のＳＷ６４が端子０を選択する。一方、ステップＳ２１においてアパーチャー補正を行うことを選んだ場合には（ＳＷ６４が端子１を選択）ステップＳ２４に進む。

ステップＳ２４で、アパーチャー補正データをカスタマイズするかどうかを設定する。アパーチャー補正データのカスタマイズを行わない場合には（ＳＷ６３が端子０を選択）、ステップＳ２６において、記録媒体１０から読み出したアパーチャー補正データをそのまま輝度信号（Ｙ）に加算し、ステップＳ２２で画像をモニタ１４に表示する。画像表示後、ステップＳ２３において画像の修正を行わない場合にはこのまま処理を終了し、処理を行う場合にはステップＳ２１に戻る。

一方、ステップＳ２４において、アパーチャー補正データのカスタマイズを行うと判断すると（ＳＷ６３が端子１を選択）、ステップＳ２５で、アパーチャー補正データチューニング部６２’においてアパーチャー補正データのカスタマイズを行う。具体的には、ここでは上述したように記録媒体１０から読み出したアパーチャー補正データのゲイン調整を行う。その後、ステップＳ２６において、カスタマイズしたアパーチャ補正データを輝度信号（Ｙ）に加算し、ステップＳ２２で画像をモニタ１４に表示する。画像表示後、更に画像の修正を行う場合には（ステップＳ２３でＹＥＳ）、ステップＳ２１に戻るようにして、アパーチャー補正による画質のチューニングが繰り返し行えるようにする。

上記の通り、本第３の実施形態によれば、アパーチャー補正処理の施されていない画像データと共に、輝度信号生成過程におけるガンマ補正処理前の信号から生成したアパーチャー補正データを記録媒体１０に記録することで、各々のデータを画像再生時に読み出すことが可能となる。これにより、上記第１の実施形態と同様の効果を得ることができる。

＜第４の実施形態＞
次に、本発明の第４の実施形態について説明する。図１１は、本第４の実施形態に係る撮像装置の概略構成を示すブロック図である。

本第４の実施形態では、信号処理回路３１８の中で輝度信号に対してアパーチャー補正処理は行わず、輝度信号生成過程におけるガンマ補正処理後の信号を入力として、アパーチャー補正データ生成回路８によりアパーチャー補正データを生成するところが上記第３の実施形態とは異なる。また、ガンマ補正処理後の信号に基づいてアパーチャー補正データを生成するため、図１２に示す構成を有するアパーチャー補正回路３９が用いられる。なお、上記以外の構成は、第１の実施形態において図１を参照して説明したものと同様であるので、同じ参照番号を付し、説明を省略する。

次に、本第４の実施形態におけるアパーチャー補正回路３９の構成について、図１２を参照して説明する。アパーチャー補正回路３９はアパーチャー補正データチューニング部６２’、ＳＷ６３、ＳＷ６４、加算器６６から構成されている。各構成は、上記第３の実施形態のアパーチャー補正回路３２における構成と同じである。しかしながら、本第４の実施形態では信号処理回路３１８の中の輝度信号生成過程においてガンマ補正後の信号を用いてアパーチャー補正データを生成するため、アパーチャー補正回路３９ではガンマ補正部６７を持たない。

上記の通り、本第４の実施形態によれば、アパーチャー補正処理の施されていない画像データと共に、輝度信号生成過程におけるガンマ補正処理後の信号から生成したアパーチャー補正データを記録媒体１０に記録することで、各々のデータを画像再生時に読み出すことが可能となる。これにより、上記第１の実施形態と同様の効果を得ることができる。

＜第５の実施形態＞
次に、本発明の第５の実施形態について説明する。図１３は、本第５の実施形態に係る撮像装置の概略構成を示すブロック図である。

本第５の実施形態は、基本的に上述した第３の実施形態と同じであるが、アパーチャー補正データ生成回路８により生成されたアパーチャー補正データについても画像データと同様に圧縮処理を行った後に記録媒体に記録し、再生時には記録媒体１０から読み出した圧縮されたアパーチャー補正データを伸長してからアパーチャー補正回路１２に出力するところが異なる。そのために、図７の構成に加えて圧縮回路１５及び伸長回路１６とを更に有するが、それ以外の構成は図７に示すものと同様であるので説明を省略する。

図１３において、圧縮回路１５はアパーチャー補正データを圧縮し、圧縮アパーチャー補正データを出力する。ここで用いられる圧縮方法は特に限られるものではないが、ここではＬＺＷ圧縮のように可逆圧縮フォーマットを例に挙げて説明する。圧縮回路１５においてＬＺＷ圧縮フォーマットに変換された圧縮アパーチャー補正データは、Ｅｘｉｆファイル形式における付属情報として、ＪＰＥＧ圧縮回路９から出力される圧縮画像データと共に記録媒体１０に書き込まれる。

伸張回路１６では、記録媒体１０から読み出したＬＺＷ圧縮フォーマットに変換された圧縮アパーチャー補正データを伸張し、アパーチャー補正データを生成する。アパーチャー補正回路１２では、伸長回路１６から出力されるアパーチャー補正データとＪＰＥＧ伸張回路１１から出力される輝度信号（Ｙ）を基にアパーチャー補正による画質のチューニングを行い、新たな輝度信号（Ｙ）を生成し、さらにガンマ補正処理を行って出力する。

上述の通り本発明の第５の実施形態によれば、アパーチャー補正データを圧縮し記録媒体に記録することで、記録媒体に記録できる情報量を増やすことができる。また圧縮画像データ同様に画像再生時に圧縮アパーチャー補正データを伸張することで、上記第１の実施形態と同様の効果を得ることができる。

＜他の実施形態＞
上述した実施の形態で示したように、アパーチャ補正処理を撮像装置上での再生時に行うようにしても良いし、撮像時に撮像装置において画像データとともにアパーチャ補正データを記録媒体に記録しているので、この記録媒体を読み込むことのできる外部装置（例えばＰＣ）に、撮像した画像データを記録媒体等を介して取り込み、モニタ等で再生する際に用いるようにしても良い。また、外部装置と撮像装置を物理的、あるいは電気的に接続した状態で外部装置で再生する際に用いても構わない。更には、赤外線などの無線通信手段を用いて画像データ及びアパーチャ補正データを外部装置に供給するようにしてもよい。

また、上記実施の形態では、アパーチャ補正データを画像データのヘッダ付属情報に記録しておく場合について説明したが、画像データとは別のデータファイルとして互いに関連付けて保存しておき、再生時に画像データを読み込む時に自動的にアパーチャ補正データを利用できるようにしてもよい。

また、連写撮影した画像データやブラケット撮影された複数の画像データ等は、例えば最初の画像データ等、１枚の画像から得られた１つのアパーチャ補正データを参照してまとめて補正するようにしても構わない。

また、圧縮データとしてここではＪＰＥＧ圧縮画像を例に説明をしたが、ＲＡＷ画像データと呼ばれる、デジタルカメラの撮像センサ（例えば、ＣＣＤ）にて光電変換されたデータをＡ／Ｄ変換した、あるいは色補間まで行った撮像センサ出力がほぼ損失がない状態の生データを記録する記録モード時でも、同時に生成されるＪＰＥＧ画像とともにアパーチャ補正データを記録し、このアパーチャ補正データをＲＡＷ画像データを再生（現像）する際に用いるようにしても構わない。

更に、上記第１〜第４の実施形態では、記録媒体１０にアパーチャー補正済みの輝度信号（Ｙ）か、アパーチャー補正を行っていない輝度信号（Ｙ）のいずれか一方が固定的に記録される場合について説明したが、両方の輝度信号を記録するようにして、再生時に選択可能に構成したり、また、記録時にいずれかの輝度信号を選択して記録できるように構成することも勿論可能である。

また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体（または記録媒体）を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。ここでプログラムコードを記憶する記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、ＲＯＭ、ＲＡＭ、磁気テープ、不揮発性のメモリカード、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ、光ディスク、光磁気ディスク、ＭＯなどが考えられる。また、ＬＡＮ（ローカル・エリア・ネットワーク）やＷＡＮ（ワイド・エリア・ネットワーク）などのコンピュータネットワークを、プログラムコードを供給するために用いることができる。

さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

本発明の第１の実施形態における撮像装置の概略構成を示すブロック図である。 本発明の第１及び第２の実施形態に係るアパーチャー補正回路の概略構成を示すブロック図である。 本発明の第１の実施形態に係るアパーチャー補正回路の概略構成を示すブロック図である。 本発明の第１の実施形態における画像再生時のアパーチャー補正動作を示すフローチャートである。 本発明の第２の実施形態における撮像装置の概略構成を示すブロック図である。 本発明の第２の実施形態に係るアパーチャー補正回路の概略構成を示すブロック図である。 本発明の第３の実施形態における撮像装置の概略構成を示すブロック図である。 本発明の第３及び本発明の第４の実施形態に係るアパーチャー補正データ生成回路の概略構成を示すブロック図である。 本発明の第３及び第５の実施形態に係るアパーチャー補正回路の概略構成を示すブロック図である。 本発明の第３の実施形態における画像再生時のアパーチャー補正動作を示すフローチャートである。 本発明の第４の実施形態における撮像装置の概略構成を示すブロック図である。 本発明の第４の実施形態に係るアパーチャー補正回路の概略構成を示すブロック図である。 本発明の第５の実施形態における撮像装置の概略構成を示すブロック図である。 従来の撮像装置の概略構成を示すブロック図である。

符号の説明

１ 撮像素子
２ Ａ／Ｄ変換回路
３ 色キャリア除去回路
４、６ ガンマ補正回路
５ 色補間回路
７ 色差マトリクス回路
８ アパーチャー補正データ生成回路
９ ＪＰＥＧ圧縮回路
１０ 記録媒体
１１ ＪＰＥＧ伸張回路
１２、１９、３２、３９ アパーチャー補正回路
１３ 画像表示制御部
１４ モニタ
１５ 圧縮回路
１６ 伸張回路
１７ アパーチャー補正回路
１８、１１８、２１８、３１８ 信号処理回路
６２、６２’ アパーチャー補正データチューニング部
６３、６４ スイッチ
６６ 加算器
６７ ガンマ補正回路

Claims (24)

1. 撮像手段から出力される被写体の画像データを処理する画像処理装置であって、
   前記撮像手段から出力された画像データから輝度信号成分を抽出する輝度信号抽出手段と、
   前記輝度信号抽出手段により抽出された輝度信号成分に基づいて、アパーチャー補正データを生成すると共に、前記輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段と、
   前記アパーチャー補正手段により生成されたアパーチャー補正データと、アパーチャー補正された輝度信号成分とを出力する出力手段と
   を有することを特徴とする画像処理装置。
2. 前記アパーチャー補正手段によりアパーチャー補正された輝度信号成分に対してガンマ補正を行うガンマ補正手段を更に有し、
   前記出力手段は、前記ガンマ補正手段によりガンマ補正された輝度信号成分を出力することを特徴とする請求項１に記載の画像処理装置。
3. 前記輝度信号抽出手段により抽出された輝度信号成分に対してガンマ補正を行い、ガンマ補正後の輝度信号成分を前記アパーチャー補正手段に出力するガンマ補正手段を更に有し、
   前記アパーチャー補正手段は、ガンマ補正された輝度信号成分に基づいてアパーチャー補正データを生成することを特徴とする請求項１に記載の画像処理装置。
4. 撮像手段から出力される被写体の画像データを処理する画像処理装置であって、
   前記撮像手段から出力された画像データから輝度信号成分を抽出する輝度信号抽出手段と、
   前記輝度信号抽出手段により抽出された輝度信号成分に基づいて、アパーチャー補正データを生成するアパーチャー補正データ生成手段と、
   前記アパーチャー補正データ生成手段により生成されたアパーチャー補正データと、前記輝度信号成分とを出力する出力手段と
   を有することを特徴とする画像処理装置。
5. 輝度信号成分に対してガンマ補正を行うガンマ補正手段を更に有し、
   前記出力手段は、前記ガンマ補正手段によりガンマ補正された輝度信号成分を出力することを特徴とする請求項４に記載の画像処理装置。
6. 輝度信号成分に対してガンマ補正を行い、ガンマ補正した輝度信号成分を前記アパーチャー補正データ生成手段及び前記出力手段に出力するガンマ補正手段を更に有し、
   前記出力手段はガンマ補正された輝度信号成分を出力し、前記アパーチャー補正データ生成手段はガンマ補正された輝度信号成分に基づいてアパーチャー補正データを生成することを特徴とする請求項４に記載の画像処理装置。
7. 前記出力手段は、記録媒体に記録する記録手段であることを特徴とする請求項１乃至６のいずれかに記載の画像処理装置。
8. アパーチャー補正データ生成手段生成されたアパーチャー補正データに基づいて、前記輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段を更に有し、
   前記出力手段は、前記アパーチャー補正手段によりアパーチャー補正された輝度信号成分を更に出力することを特徴とする請求項４乃至７のいずれかに記載の画像処理装置。
9. アパーチャー補正データ生成手段生成されたアパーチャー補正データに基づいて、前記輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段と、
   前記アパーチャー補正手段によりアパーチャー補正される前の輝度信号成分と、前記アパーチャー補正手段によりアパーチャー補正された後の輝度信号成分とのいずれかを選択する選択手段とを更に有し、
   前記出力手段は、前記選択手段により選択された輝度信号成分を出力することを特徴とする請求項４乃至７のいずれかに記載の画像処理装置。
10. 前記出力手段から出力されたアパーチャー補正データを変更する変更手段と、
    前記変更手段により変更されたアパーチャー補正データを用いて、前記出力手段から出力された輝度信号成分に対してアパーチャー補正を行うアパーチャー再補正手段と
    を更に有することを特徴とする請求項１乃至３及び８及び９のいずれかに記載の画像処理装置。
11. 前記変更手段による変更を行うか否かを選択する第１の選択手段と、
    アパーチャー補正を行うか否かを選択する第２の選択手段とを更に有し、
    前記アパーチャー再補正手段は、前記第１の選択手段により前記変更手段による変更を行うことが選択され、且つ、前記第２の選択手段によりアパーチャー補正を行うことが選択された場合に、前記変更手段により変更されたアパーチャー補正データを用いてアパーチャー補正を行うことを特徴とする請求項１０に記載の画像処理装置。
12. 前記出力手段から出力されたアパーチャー補正データを変更する変更手段と、
    前記変更手段により変更されたアパーチャー補正データを用いて、前記出力手段から出力された輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段と
    を更に有することを特徴とする請求項４乃至７のいずれかに記載の画像処理装置。
13. 前記変更手段による変更を行うか否かを選択する第１の選択手段と、
    アパーチャー補正を行うか否かを選択する第２の選択手段とを更に有し、
    前記アパーチャー補正手段は、前記第１の選択手段により前記変更手段による変更を行うことが選択され、且つ、前記第２の選択手段によりアパーチャー補正を行うことが選択された場合に、前記変更手段により変更されたアパーチャー補正データを用いてアパーチャー補正を行うことを特徴とする請求項１２に記載の画像処理装置。
14. 前記出力手段に出力する輝度信号成分を圧縮する第１の圧縮手段を更に有することを特徴とする請求項１乃至１３のいずれかに記載の画像処理装置。
15. 前記出力手段に出力するアパーチャー補正データを圧縮する第２の圧縮手段を更に有することを特徴とする請求項１乃至１４のいずれかに記載の画像処理装置。
16. 前記出力手段から出力された輝度信号成分を伸長する第１の伸長手段を更に有することを特徴とする請求項１４に記載の画像処理装置。
17. 前記出力手段から出力されたアパーチャー補正データを伸長する第２の伸長手段を更に有することを特徴とする請求項１５に記載の画像処理装置。
18. 請求項１乃至１６のいずれかに記載の画像処理装置と、
    被写体を撮像し、電気的な画像データを出力する撮像手段と
    を有することを特徴とする撮像装置。
19. 外部から画像データ及びアパーチャー補正データを入力する入力手段と、
    前記入力手段から入力した画像データから輝度信号成分を抽出する輝度信号抽出手段と、
    前記入力手段から入力したアパーチャー補正データを変更する変更手段と、
    前記変更手段により変更されたアパーチャー補正データを用いて、前記輝度信号抽出手段からの輝度信号成分に対してアパーチャー補正を行うアパーチャー補正手段と
    を有することを特徴とする画像処理装置。
20. 前記変更手段による変更を行うか否かを選択する第１の選択手段と、
    アパーチャー補正を行うか否かを選択する第２の選択手段とを更に有し、
    前記アパーチャー補正手段は、前記第１の選択手段により前記変更手段による変更を行うことが選択され、且つ、前記第２の選択手段によりアパーチャー補正を行うことが選択された場合に、前記変更手段により変更されたアパーチャー補正データを用いてアパーチャー補正を行うことを特徴とする請求項１９に記載の画像処理装置。
21. 前記入力手段から入力した画像データが圧縮されている場合に、当該画像データを伸長する第１の伸長手段を更に有することを特徴とする請求項１９または２０に記載の画像処理装置。
22. 前記入力手段から入力したアパーチャー補正データが圧縮されている場合に、当該アパーチャー補正データを伸長する第２の伸長手段を更に有することを特徴とする請求項１９乃至２１のいずれかに記載の画像処理装置。
23. 情報処理装置が実行可能なプログラムであって、前記プログラムを実行した情報処理装置を、請求項１乃至１７及び１９乃至２２のいずれかに記載の画像処理装置として機能させることを特徴とするプログラム。
24. 請求項２３に記載のプログラムを記憶したことを特徴とする情報処理装置が読み取り可能な記憶媒体。

Images