JP4432479B2

JP4432479B2 - 画像処理装置

Info

Publication number: JP4432479B2
Application number: JP2003407514A
Authority: JP
Inventors: 秀雄宝珠山
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2002-12-18
Filing date: 2003-12-05
Publication date: 2010-03-17
Anticipated expiration: 2023-12-05
Also published as: JP2004215236A

Description

本発明は、デジタルカメラやデジタルビデオカメラ等の画像処理装置に関する。

従来、画像処理装置では、Ｒ，Ｇ，Ｂの３原色の光を受光し、光電変換し色補正することで所望の色再現特性を得ることが行われている。
そして、このような画像処理装置では、良好な色再現特性を得るために、色補正する際にマトリックス変換を行ったり、あるいは、ルックアップテーブル（以下、ＬＵＴという。）変換を行なったりしている（特開２００１−２０３９０３号公報、特開２００２−１００９５号公報参照）。
特開２００１−２０３９０３号公報特開２００２−１００９５号公報

しかしながら、上述した画像処理装置では、撮像素子と人間の目との分光感度特性の相違により、例えば、人間の目では識別できる色であっても撮像素子には識別できない色が発生するという問題があった。
本発明は、かかる従来の問題を解決するためになされたもので、良好な色再現特性を得ることができる画像処理装置を提供することを目的とする。

請求項１に記載の画像処理装置は、被写体からの光を受光し複数の色成分を出力する第１撮像素子と、この第１撮像素子と同一の像を受光し複数の色成分を出力可能であり且つ複数の色成分の分光感度特性が前記第１撮像素子と異なる第２撮像素子と、前記第１撮像素子と前記第２撮像素子とで光電変換された出力値に基づき、前記被写体からの受光状態に応じた色補正係数を算出する色補正係数算出手段と、前記色補正係数算出手段により算出された前記色補正係数を用いて、前記第１撮像素子の出力値に対して色補正を行う色補正手段とを有することを特徴とする。

請求項２の画像処理装置は、被写体からの光を受光し複数の色成分を出力する第１撮像素子と、この第１撮像素子と同一の像を受光し複数の色成分を出力可能であり且つ複数の色成分の分光感度特性が前記第１撮像素子と異なる第２撮像素子と、前記第１撮像素子と前記第２撮像素子とで光電変換された出力値に基づき、前記被写体からの受光状態に応じた色補正係数を算出する色補正係数算出手段と、前記色補正係数算出手段により算出された前記色補正係数を用いて、前記第１撮像素子と前記第２撮像素子との合成出力値に対して色補正を行う色補正手段とを有することを特徴とする。

請求項３の画像処理装置は、請求項１または請求項２に記載の画像処理装置において、前記第１撮像素子を複数の小領域に分け、前記第１撮像素子の複数の小領域に対応させて前記第２撮像素子を複数の小領域に分け、前記第１撮像素子および前記第２撮像素子の各画素の出力値を前記小領域毎に積分し、この積分値を利用して前記色補正係数を算出することを特徴とする。

請求項４の画像処理装置は、請求項３に記載の画像処理装置において、前記第１撮像素子と前記第２撮像素子とは、同一の前記被写体からの光を受光するのに使用する画素数が、相違することを特徴とする。
請求項５の画像処理装置は、請求項１ないし請求項４のいずれか１項に記載の画像処理装置において、前記第２撮像素子は、前記被写体の色バランスを測光する測色センサとして使用されることを特徴とする。

請求項６の画像処理装置は、請求項１ないし請求項４のいずれか１項に記載の画像処理装置において、前記第２撮像素子は、前記被写体の輝度を測光する測光センサとして使用されることを特徴とする。

本発明の画像処理装置では、相互に異なる分光感度特性を有する第１および第２撮像素子を設け、被写界からの光を受光し認識する際のパラメータが増加するようにしたので、良好な色再現特性を得ることができる。
また、従来より存在する第１および第２撮像素子を備えた電子カメラに適用する場合には、その信号処理方法を変えるだけで良いので、容易に既存の電子カメラに適用することができる。

以下、本発明を図面を用いて詳細に説明する。
（第１実施形態）
図１は、本発明の画像処理装置の第１実施形態を内蔵する電子カメラを示す説明図である。
この電子カメラ２は、被写体に光を照射するための外付け閃光装置１と、この外付け閃光装置１を制御可能なカメラ本体部３とを有している。

外付け閃光装置１は、電流エネルギーを発光エネルギに変換するキセノン管５と、このキセノン管５の光電流を制御してフラット発光を行わせるための発光制御部７とを有している。また、外付け閃光装置１は、キセノン管５から射出した光束を効率よく被写体に照射するために反射板９とフレネルレンズ１１とを有している。さらに、外付け閃光装置１は、モニター用のセンサ１３と、このセンサ１３と反射板９とを接続しキセノン管５で発光した光束をセンサ１３に導くためのグラスファイバー１５とを有している。

カメラ本体部３は、撮影レンズ部１７と、この撮影レンズ部１７が取り付けられる本体部１９とを有している。
撮影レンズ部１７は、被写体からの光束を集光する撮影レンズ２１と、絞り２２とを有している。
本体部１９は、撮影レンズ２１を透過した光束を受光可能な位置（以下、閉状態という）と受光不可能な位置（以下開状態という）とに回動されるハーフミラー２３を有している。また、本体部１９には、外付け閃光装置１により照射されて被写体で反射された反射光のうち、撮影レンズ２１を透過した光束を受光可能な銀塩製のフィルム２５が装着されており、本体部１９は、このフィルム２５の前面において選択的に遮光するシャッター２７を有している。

また、本体部１９は、撮影レンズ２１を透過した光束のうち、シャッター２７またはフィルム２５で反射された光束を受光可能に配置された第１撮像素子であるＣＣＤ２９と、このＣＣＤ２９の測光結果に基づいて外付け閃光装置１を制御する電気回路３１とを有している。
さらに、本体部１９は、ハーフミラー２３が閉状態にあるときに、ハーフミラー２３を介し撮影レンズ２１の結像位置に配置されるピントグラス３３を有している。また、本体部１９は、ピントグラス３３を透過した光束の光路を変更し、かつ変位可能なペンタプリズム３５と、このペンタプリズム３５からの光束を観察するファインダー３７とを有している。さらに、本体部１９は、ペンタプリズム３５がペンタプリズム３５からの反射光がファインダー３７に照射される位置とは異なる位置にある場合に、ペンタプリズム３５の透過光を集光する集光レンズ３９と、この集光レンズ３９を透過した光を受光する第２撮像素子であり測色センサとして使用されるＣＣＤ４１とを有している。

なお、外付け閃光装置１とカメラ本体部３とのインターフェースとして、接点４３が設けられている。
次に、かかる構成からなる電子カメラ２の光学的システムについて説明する。
ファインダー３７で被写体を観察する時には、撮影レンズ２１を透過した光束は、その一部が破線で示す閉状態のハーフミラ−２３で反射され、ピントグラス３３、ペンタプリズム３５を透過して、ファインダー３７に導かれる。

また、撮影時に不図示のレリーズ釦が押されると、ハーフミラー２３が実線で示す開状態に移動され、絞り２２が絞り込まれ、シャッター２７が開かれる。そして、ほぼ同時に、キセノン管５が本発光して被写体を照明し、被写体からの反射光は撮影レンズ２１を介してフィルム２５に至り、このフィルム２５で反射された光束はＣＣＤ２９に取り込まれる。

次に、図２に本発明の画像処理装置の第１実施形態のブロック図を示す。
この画像処理装置４５は、被写体からの光を受光するＣＣＤ２９と、ＣＣＤ２９と同一の像を受光可能且つ異なる分光感度特性を有するＣＣＤ４１とを有している。ここで、ＣＣＤ２９とＣＣＤ４１とは、図３に示すように異なる分光感度特性を有しており、パラメータを増加させることで人間の目の分光感度特性に近づけている。また、ＣＣＤ２９およびＣＣＤ４１には、同一の光透過率を有するＲＧＢのカラーフィルターが設けられている。

ＣＣＤ２９の出力は、信号処理部４７において、Ａ／Ｄ変換や温度変化による電源電圧の変動の補正等が行われる。次いで、信号処理部４７の出力は、ホワイトバランス部４９および評価値生成部５９に入力される。
ホワイトバランス部４９では、被写体を照明する光源の色特性の相違による出力画像の変化を抑止するためにホワイトバランスゲインＫｒ，Ｋｂを乗ずる。

具体的には、
Ｒ’＝Ｋｒ × Ｒ
Ｇ’＝Ｇ
Ｂ’＝Ｋｂ × Ｂ
Ｒ，Ｇ，Ｂ：ホワイトバランス補正前の画像信号
Ｒ’，Ｇ’，Ｂ’ ：ホワイトバランス補正後の画像信号
という処理を行う。

ホワイトバランス部４９の出力は、補間部５１に入力される。補間部５１では、画素局所演算による色補間処理が行われ、全画素について補正が行われる。より具体的には、任意の画素の周囲の画素から任意の画素の色を推定する。
一方、評価値生成部５９では、画像を例えば８行１２列の小領域に分割し、各小領域毎に輝度値或いは色度値等の評価値を算出する。輝度は、オブジェクトの色の絶対的な明るさに比例するものであり、色度は、輝度情報を取り除いたオブジェクトの色を客観的に測定したものである。

そして、この第１実施形態では、色補正係数算出手段である色補正係数生成部６１において、ＣＣＤ４１と評価値生成部５９との出力に基づいて色補正係数が算出される。
以下、色補正係数の算出方法を図４の流れ図を用いて具体的に説明する。
ステップＳ１１では、無次元化のための座標変換が行われる。
具体的には、ＣＣＤ２９の画像の各小領域毎の出力値の各原色毎の積分値をＲｓ，Ｇｓ，Ｂｓとし、同様に、ＣＣＤ４１も例えば８行１２列の小領域に分割し、各小領域毎の積分値をＲｍ，Ｇｍ，Ｂｍとすると、
ＲＧｓ＝Ｒｓ／Ｇｓ
ＢＧｓ＝Ｂｓ／Ｇｓ
ＲＧｍ＝Ｒｍ／Ｇｍ
ＢＧｍ＝Ｂｍ／Ｇｍ
ＲＧｓ，ＢＧｓ，ＲＧｍ，ＢＧｍ：第１擬似色補正係数
という演算が行われる。

ステップＳ１２では、第１擬似色補正係数ＲＧｓ，ＢＧｓ，ＲＧｍ，ＢＧｍと、係数テーブル部６３の係数とを用いて、正規化が行われる。すなわち、
ＲＧｓ’＝ＲＧｓ × ｋ１＋ｋ２
ＢＧｓ’＝ＢＧｓ × ｋ１＋ｋ２
ＲＧｍ’＝ＲＧｍ × ｋ３＋ｋ４
ＢＧｍ’＝ＢＧｍ × ｋ３＋ｋ４
ｋ１，ｋ２，ｋ３，ｋ４：係数
ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’：第２擬似色補正係数
という演算が行われる。

ステップＳ１３では、第２擬似色補正係数ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’に基づき、ＬＵＴを参照して色補正係数が算出される。
具体的には、第２擬似色補正係数ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’に基づき、図５のＬＵＴを用いて係数番号が取得される。次いで、図６に示す表を用いて、図５で選択された係数番号に合った色補正係数ＣＣ０〜ＣＣ８が選択される。

このようにして、色補正係数の算出が終了する。
なお、図５の表の縦方向には係数番号がとられ、横方向には第２擬似色補正係数ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’がとられている。
また、図６の表の縦方向には係数番号がとられ、横方向には色補正係数ＣＣ０〜ＣＣ８がとられている。

係数補間部６５では、各小領域の境界における、色補正係数生成部６１で算出された色補正係数ＣＣ０〜ＣＣ８の相違による段差を緩和するために係数補間を行う。この係数補間は、近傍の小領域の係数を用いて直線補間を実施することにより行う。なお、係数補間後の色補正係数を以下ＣＣ'０〜ＣＣ'８と表す。
色補正手段である色補正部５３では、補間部５１より出力された画像信号Ｒ''，Ｇ''，Ｂ''と、係数補間部６５で算出された色補正係数ＣＣ'０〜ＣＣ'８とにより、以下に示すような色補正演算が行われる。

Ｒ'''＝Ｒ''×ＣＣ'０＋Ｇ''×ＣＣ'１＋Ｂ''×ＣＣ'２
Ｇ'''＝Ｒ''×ＣＣ'３＋Ｇ''×ＣＣ'４＋Ｂ''×ＣＣ'５
Ｂ'''＝Ｒ''×ＣＣ'６＋Ｇ''×ＣＣ'７＋Ｂ''×ＣＣ'８
γ補正部５５では、γ特性が補正される。γ特性は、被写体のコントラストに応じて適切に選択される。より具体的には、評価値生成部５９で算出された輝度値に基づいて算出される。

輪郭強調部５７では、画像の輪郭が強調されるような処理が行われる。
この第１実施形態では、相互に異なる分光感度特性を有するＣＣＤ２９，４１を設け、被写界からの光を受光し認識する際のパラメータが増加するようにしたので、分光感度特性をより人間の目に近づけ、良好な色再現特性を得ることができる。さらに、従来より存在するＣＣＤ２９，４１を備えた電子カメラに適用する場合には、その信号処理方法を変えるだけで良いので、容易に既存の電子カメラに適用することができる。

また、この第１実施形態では、ＣＣＤ２９とＣＣＤ４１とは、同一の被写体からの光を受光するのに使用する画素数が相違するようにしたが、ＣＣＤ２９およびＣＣＤ４１で観測するため、どちらか一方の画素数を少なくしても画像が粗くなることを抑止できる。そのため、画像処理にかかる時間を短くすることができる。
さらに、この第１実施形態では、ＣＣＤ２９を複数の小領域に分け、ＣＣＤ２９の複数の小領域に対応させてＣＣＤ４１を複数の小領域に分け、ＣＣＤ２９およびＣＣＤ４１の各画素の出力値を小領域毎に積分し、この積分値を利用して色補正係数を算出するようにしたので、各画素毎に色補正係数を求める場合に比べ画像処理にかかる時間を的確に短くすることができる。
（第２実施形態）
図７は、本発明の画像処理装置の第２実施形態のブロック図を示す。この第２実施形態では、信号処理の方法のみ第１実施形態と異なる。

なお、この実施形態において、第１実施形態と同一構成要素には同一の符号を付し、その詳細な説明を省略する。
この画像処理装置６７は、被写体からの光を受光するＲＧＢのカラーフィルターを有するＣＣＤ２９，４１を有している。
ＣＣＤ２９，４１の出力は、信号処理部４７，４７Ａにおいて、Ａ／Ｄ変換や温度変化による電源電圧の変動の補正等が行われる。次いで、信号処理部４７，４７Ａの出力は、信号合成部６９および評価値生成部５９，５９Ａに入力される。

信号合成部６９では、２つの信号が合成され、より人間の目に近い画像の信号にされる。次いで、信号合成部６９の出力は、ホワイトバランス部４９、補間部５１を経て色補正部５３に入力される。
一方、評価値生成部５９，５９Ａでは、画像を例えば８行１２列の小領域に分割し、各小領域毎に輝度値或いは色度値等の評価値を算出する。

色補正係数生成部６１では、評価値生成部５９，５９Ａおよび係数テーブル部６３の出力に基づいて色補正係数が算出される。
係数補間部６５では、各小領域の境界における、色補正係数生成部６１で算出された色変換係数ＣＣ０〜ＣＣ８の相違による段差を緩和するために係数補間を行う。そして、色補正係数ＣＣ'０〜ＣＣ'８を算出する。

色補正部５３では、補間部５１より出力された画像信号と、係数補間部６５で算出された色補正係数ＣＣ'０〜ＣＣ'８とにより、色補正演算が行われる。そして、色補正部５３の出力は、γ補正部５５、輪郭強調部５７に順次伝達される。
この画像処理装置６７でも第１実施形態と同様の効果を奏することができる。
そして、この第２実施形態の画像処理装置では、分光感度特性が相互に異なるＣＣＤ２９とＣＣＤ４１との合成出力値に対して色補正部５３にて色変換を行うようにしたので、第１実施形態のような片方のＣＣＤ２９の出力信号に対して色補正係数を乗じる場合に比べて、より人間の目に近い画像の信号に対して色補正係数を乗じることが可能である。
（第３実施形態）
図８は、本発明の画像処理装置の第３実施形態を内蔵する電子カメラを示す説明図である。

なお、この実施形態において、第１実施形態と同一構成要素には同一の符号を付し、その詳細な説明を省略する。
この電子カメラ２Ａは、撮影レンズ部１７と、この撮影レンズ部１７が取り付けられる本体部１９とを有している。
撮影レンズ部１７は、被写体からの光束を集光する撮影レンズ２１と、絞り２２とを有している。

本体部１９は、撮影レンズ２１を透過した光束を受光可能な位置（以下、閉状態という）と受光不可能な位置（以下開状態という）とに回動されるミラー２３Ａを有している。
また、本体部１９には、撮影レンズ２１を透過した光束を受光可能な第１撮像素子であるＣＣＤ２９Ａが配置されている。このＣＣＤ２９Ａにより、被写体が撮像される。ＣＣＤ２９Ａの前面には、シャッター２７が配置されている。

さらに、本体部１９は、ミラー２３Ａが閉状態にあるときに、ミラー２３Ａを介し撮影レンズ２１の結像位置に配置されるピントグラス３３を有している。また、本体部１９は、ピントグラス３３を透過した光束の光路を変更するペンタプリズム３５と、このペンタプリズム３５からの光束を観察するためのファインダー３７とを有している。
さらに、本体部１９は、ペンタプリズム３５の透過光を集光する集光レンズ３９と、この集光レンズ３９を透過した光を受光する第２撮像素子であり測色センサとして使用されるＣＣＤ４１とを有している。このＣＣＤ４１からの測色信号により露出制御が行われる。

次に、かかる構成からなる電子カメラ２Ａの光学的システムについて説明する。
ファインダー３７で被写体を観察する時には、撮影レンズ２１を透過した光束は、その一部が破線で示す閉状態のミラー２３Ａで反射され、ピントグラス３３、ペンタプリズム３５を透過して、ファインダー３７に導かれる。
また、撮影時に不図示のレリーズ釦が押されると、ミラー２３Ａが実線で示す開状態に移動され、絞り２２が絞り込まれ、シャッター２７が開かれる。そして、撮影レンズ２１を透過した被写体からの光がＣＣＤ２９Ａに結像され、撮像が行われる。

次に、図９に本発明の画像処理装置の第３実施形態のブロック図を示す。
この画像処理装置４５Ａは、被写体からの光を受光するＣＣＤ２９Ａと、ＣＣＤ２９Ａと同一の像を受光可能且つ異なる分光感度特性を有するＣＣＤ４１とを有している。ここで、ＣＣＤ２９ＡとＣＣＤ４１とは、図１０に示すように異なる分光感度特性を有している。また、ＣＣＤ２９ＡおよびＣＣＤ４１には、同一の光透過率を有するＲＧＢのカラーフィルターが設けられている。

ＣＣＤ２９Ａの出力は、信号処理部４７に出力され、信号処理部４７おいて、Ａ／Ｄ変換，クランプ，感度補正等が行われる。次いで、信号処理部４７の出力は、ホワイトバランス部４９および評価値生成部５９に入力される。
ホワイトバランス部４９では、被写体を照明する光源の色特性の相違による出力画像の変化を抑止するためにホワイトバランスゲインＫｒ，Ｋｂを乗ずる。

そして、この第３実施形態では、色補正係数算出手段である色補正係数生成部６１において、ＣＣＤ４１と評価値生成部５９との出力に基づいて色補正係数が算出される。なお、ＣＣＤ４１の出力は、信号処理部４７Ａにおいて、Ａ／Ｄ変換，クランプ，感度補正等が行われた後、色補正係数生成部６１に出力される。
以下、色補正係数の算出方法を図１１の流れ図を用いて具体的に説明する。

ステップＳ１１では、無次元化のための座標変換が行われる。
具体的には、ＣＣＤ２９Ａの画像の各小領域毎の出力値の各原色毎の積分値をＲｓ，Ｇｓ，Ｂｓとし、同様に、ＣＣＤ４１も例えば８行１２列の小領域に分割し、各小領域毎の積分値をＲｍ，Ｇｍ，Ｂｍとすると、
ＲＧｓ＝Ｒｓ／Ｇｓ
ＢＧｓ＝Ｂｓ／Ｇｓ
ＲＧｍ＝Ｒｍ／Ｇｍ
ＢＧｍ＝Ｂｍ／Ｇｍ
ＲＧｓ，ＢＧｓ，ＲＧｍ，ＢＧｍ：第１擬似色補正係数
という演算が行われる。

ステップＳ１３では、第２擬似色補正係数ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’に基づき、ＬＵＴを参照して色補正係数が算出される。
具体的には、第２擬似色補正係数ＲＧｓ’，ＢＧｓ’，ＲＧｍ’，ＢＧｍ’に基づき、図５に示したＬＵＴを用いて係数番号が取得される。次いで、図６に示した表を用いて、図５で選択された係数番号に合った色補正係数ＣＣ０〜ＣＣ８が選択される。

このようにして、色補正係数の算出が終了する。
係数補間部６５では、各小領域の境界における、色補正係数生成部６１で算出された色補正係数ＣＣ０〜ＣＣ８の相違による段差を緩和するために係数補間を行う。この係数補間は、近傍の小領域の係数を用いて直線補間を実施することにより行う。なお、係数補間後の色補正係数を以下ＣＣ'０〜ＣＣ'８と表す。

色補正手段である色補正部５３では、補間部５１より出力された画像信号Ｒ''，Ｇ''，Ｂ''と、係数補間部６５で算出された色補正係数ＣＣ'０〜ＣＣ'８とにより、以下に示すような色補正演算が行われる。
Ｒ'''＝Ｒ''×ＣＣ'０＋Ｇ''×ＣＣ'１＋Ｂ''×ＣＣ'２
Ｇ'''＝Ｒ''×ＣＣ'３＋Ｇ''×ＣＣ'４＋Ｂ''×ＣＣ'５
Ｂ'''＝Ｒ''×ＣＣ'６＋Ｇ''×ＣＣ'７＋Ｂ''×ＣＣ'８
そして、色補正部５３で色補正を実施された画像信号Ｒ'''，Ｇ'''，Ｂ'''は、γ補正部５５、色空間変換部５６および輪郭強調部５７の各処理を順次経由して記録媒体に記録される。

この第３実施形態では、相互に異なる分光感度特性を有するＣＣＤ２９Ａ，４１を設け、被写界からの光を受光し認識する際のパラメータが増加するようにしたので、分光感度特性をより人間の目に近づけ、良好な色再現特性を得ることができる。また、従来より存在するＣＣＤ２９Ａ，４１を備えた電子カメラに適用する場合には、その信号処理方法を変えるだけで良いので、容易に既存の電子カメラに適用することができる。

そして、この実施形態では、ＣＣＤ２９Ａを複数の小領域に分け、ＣＣＤ２９Ａの複数の小領域に対応させてＣＣＤ４１を複数の小領域に分け、ＣＣＤ２９ＡおよびＣＣＤ４１の各画素の出力値を小領域毎に積分し、この積分値を利用して色補正係数を算出するようにしたので、ＣＣＤ２９ＡとＣＣＤ４１との画素数が相違している場合にも、容易，確実に良好な色再現特性を得ることができる。

なお、上述した実施形態では、ＣＣＤ４１を測色センサとして使用した例について説明したが、被写体の輝度を測光する測光センサとして使用しても良い。
また、上述した実施形態では、色補正係数生成部６１での正規化に係数ｋ１〜ｋ４を使用した関数演算を行ったが、１次元ＬＵＴ或いは多次元ＬＵＴを用いても良い。
そして、上述した実施形態では、３×３のマトリック演算を行うための色補正係数ＣＣ０〜ＣＣ８を選択するようにしたが、さらに高精度な色補正を行うために例えば、多次元ＬＵＴを選択し、演算処理するようにしても良い。

本発明の画像処理装置の第１実施形態が内蔵された電子カメラを示す説明図である。本発明の画像処理装置の第１実施形態の処理を示すブロック図である。本発明の画像処理装置の実施形態のＣＣＤの分光感度特性を示す説明図である。図２の色補正係数生成部での処理を示す流れ図である。本発明の画像処理装置の実施形態のＬＵＴを示す説明図である。本発明の画像処理装置の実施形態の色補正係数選択テーブルを示す説明図である。本発明の画像処理装置の第２実施形態の処理を示すブロック図である。本発明の画像処理装置の第３実施形態が内蔵された電子カメラを示す説明図である。本発明の画像処理装置の第３実施形態の処理を示すブロック図である。本発明の画像処理装置の第３実施形態のＣＣＤの分光感度特性を示す説明図である。図９の色補正係数生成部での処理を示す流れ図である。

符号の説明

２９，２９Ａ，４１ＣＣＤ
５３色補正部
６１色補正係数生成部

Claims

被写体からの光を受光し複数の色成分を出力する第１撮像素子と、
この第１撮像素子と同一の像を受光し複数の色成分を出力可能であり且つ複数の色成分の分光感度特性が前記第１撮像素子と異なる第２撮像素子と、
前記第１撮像素子と前記第２撮像素子とで光電変換された出力値に基づき、前記被写体からの受光状態に応じた色補正係数を算出する色補正係数算出手段と、
前記色補正係数算出手段により算出された前記色補正係数を用いて、前記第１撮像素子の出力値に対して色補正を行う色補正手段と、
を有することを特徴とする画像処理装置。
被写体からの光を受光し複数の色成分を出力する第１撮像素子と、
この第１撮像素子と同一の像を受光し複数の色成分を出力可能であり且つ複数の色成分の分光感度特性が前記第１撮像素子と異なる第２撮像素子と、
前記第１撮像素子と前記第２撮像素子とで光電変換された出力値に基づき、前記被写体からの受光状態に応じた色補正係数を算出する色補正係数算出手段と、
前記色補正係数算出手段により算出された前記色補正係数を用いて、前記第１撮像素子と前記第２撮像素子との合成出力値に対して色補正を行う色補正手段と、
を有することを特徴とする画像処理装置。
請求項１または請求項２に記載の画像処理装置において、
前記第１撮像素子を複数の小領域に分け、前記第１撮像素子の複数の小領域に対応させて前記第２撮像素子を複数の小領域に分け、前記第１撮像素子および前記第２撮像素子の各画素の出力値を前記小領域毎に積分し、この積分値を利用して前記色補正係数を算出することを特徴とする画像処理装置。
請求項３に記載の画像処理装置において、
前記第１撮像素子と前記第２撮像素子とは、同一の前記被写体からの光を受光するのに使用する画素数が、相違することを特徴とする画像処理装置。
請求項１ないし請求項４のいずれか１項に記載の画像処理装置において、
前記第２撮像素子は、前記被写体の色バランスを測光する測色センサとして使用されることを特徴とする画像処理装置。
請求項１ないし請求項４のいずれか１項に記載の画像処理装置において、
前記第２撮像素子は、前記被写体の輝度を測光する測光センサとして使用されることを特徴とする画像処理装置。