JP2007228155A - 電子撮像装置及び電子撮像方法 - Google Patents

Abstract

【課題】メモリに記憶するデータ量を少なくしてかつ簡便な演算で静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる電子撮像装置及びそのような電子撮像方法を提供すること。
【解決手段】Ｆｌａｓｈメモリ２０１ｃに静止画撮影時に対応する撮像素子の分光感度特性Ｅｓ（λ）を記憶しておく。ライブビュー表示における画像処理の際には、分光感度特性Ｅｓ（λ）に基づいて算出された静止画用のホワイトバランスゲインＷＢｓによってホワイトバランス補正を行った後、静止画用のカラーマトリクスＣＭＸｓに補正マトリクスＣＭＸｌ２ｓを乗じて得られたライブビュー表示用のカラーマトリクスＣＭＸｌによって色変換を行う。
【選択図】図１

Description

本発明は、カラー撮像素子を利用した電子撮像装置及び電子撮像方法に関し、特にカラー撮像素子を利用して静止画撮影とライブビュー表示とが可能な電子撮像装置及びそのような電子撮像方法に関する。

従来の電子撮像装置、例えばデジタルスチルカメラ（以下、適宜カメラと称する）においては、複数の異なる駆動モードを有するカラー撮像素子を備えているものがある。例えば、デジタルスチルカメラにおいては、静止画撮影用の駆動モードとライブビュー表示用の駆動モードとを有し、静止画撮影の際の駆動モードにおいては、記録される静止画の画質を優先するために、撮像素子の有効画素からの出力を全て読み出すようにしている。一方、撮像素子で得られた画像をリアルタイムでＬＣＤ等の表示部に表示させる、所謂ライブビュー表示の際の駆動モードにおいては、撮像素子出力の読み出し時間やその後の画像処理の時間等を短縮してリアルタイム表示を可能とするために、撮像素子の出力の一部を間引いて読み出すようにしている。

ところで撮像素子は、同一の撮像素子であってもその駆動モードにより分光感度特性が変わることが知られている。例えば、ＮＭＯＳ型の撮像素子では、静止画撮影用の駆動モードとライブビュー表示用の駆動モードでは、ライブビュー表示用の駆動モードのほうが、混色傾向が強くなることが知られている。

このような事情に対し、ライブビュー表示の際にも静止画撮影時と同じ色再現が求められている。このような要求を実現するために、例えば特許文献１においては、カメラに着脱自在なユニット（例えばレンズユニットや撮像ユニット）内のメモリに記憶されている分光特性と、カメラ本体内のメモリに記憶されているカメラ本体の撮影条件に対応した分光特性とから撮影時の分光特性（総合分光特性）を算出している。そして、この算出した総合分光特性に基づいてホワイトバランス補正値と色変換値とを算出するようにしている。

このような特許文献１の手法を利用して静止画撮影時とライブビュー表示時とで同じ色再現を得るためには、静止画撮影時に対応する撮像素子の分光感度特性とライブビュー表示時に対応する撮像素子の分光感度特性とを記憶しておき、これらそれぞれの分光感度特性と、撮影時の光源の分光放射輝度特性、カメラに用いられている光学レンズの分光透過率特性、目標とする色の分光反射率特性、及び目標とする色のＲＧＢ値から、静止画用のホワイトバランス補正値及び色変換値とライブビュー表示用のホワイトバランス補正値及び色変換値とを算出する。そして、ライブビュー表示時においては、ライブビュー表示用のホワイトバランス補正値及び色変換値に基づいてホワイトバランス補正及び色変換を行い、静止画撮影時においては、静止画撮影用のホワイトバランス補正値及び色変換値に基づいてホワイトバランス補正及び色変換を行うようにする。これにより、ライブビュー表示時と静止画撮影時とで同じ色再現の画像を得ることが可能であり、ライブビュー表示で見た画像の色と静止画記録した画像を再生したときに見る画像の色とが一致する。
特開２００１−３３９７３４号公報

ここで、上記したような特許文献１の手法の場合には、静止画撮影用の駆動モードに対応する撮像素子の分光感度特性とライブビュー表示用の駆動モードに対応する撮像素子の分光感度特性とを共にメモリに記憶させておく必要がある。したがって、メモリの記憶容量を圧迫してしまうおそれがある。

本発明は、上記の事情に鑑みてなされたもので、メモリに記憶するデータ量を少なくしてかつ簡便な演算で静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる電子撮像装置及びそのような電子撮像方法を提供することを目的とする。

上記の目的を達成するために、本発明の第１の態様による電子撮像装置は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを記憶する色変換パラメータ記憶手段と、上記第１の色変換パラメータから、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する色変換パラメータ算出手段と、上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく算出パラメータ記憶手段と、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段とを具備することを特徴とする。

また、上記の目的を達成するために、本発明の第２の態様による電子撮像装置は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、上記カラー撮像素子に被写体像を集光する光学レンズと、上記カラー撮像素子の上記第１の駆動モードに対応する分光感度特性を記憶する分光感度特性記憶手段と、上記分光感度特性に基づき、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出する第１の色変換パラメータ算出手段と、上記第１の色変換パラメータから、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する第２の色変換パラメータ算出手段と、上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく算出パラメータ記憶手段と、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段とを具備することを特徴とする。

これら第１及び第２の態様によれば、算出パラメータ記憶手段に記憶されている算出パラメータと第１の色変換パラメータとから、第２の色変換パラメータを算出することができる。これにより、第２の駆動モードに対応する分光感度特性を記憶させておく必要がなく、記憶させるデータ量を少なくしてかつ簡便な演算で静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる。

また、上記の目的を達成するために、本発明の第３の態様による電子撮像装置は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、上記カラー撮像素子に被写体像を集光する光学レンズと、上記カラー撮像素子の上記第１の駆動モードに対応する第１の分光感度特性を記憶する分光感度特性記憶手段と、上記第１の分光感度特性に基づき、上記カラー撮像素子の上記第２の駆動モードに対応する第２の分光感度特性を算出する分光感度特性算出手段と、上記第２の分光感度特性を算出するために用いられる算出パラメータを予め記憶しておく分光感度特性算出パラメータ記憶手段と、上記第１の分光感度特性に基づき上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出すると共に、上記第２の分光感度特性に基づき上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する色変換パラメータ算出手段と、上記第１及び上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく色変換算出パラメータ記憶手段と、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段とを具備することを特徴とする。

この第３の態様によれば、分光感度特性記憶手段に記憶されている第１の分光感度特性から、第２の駆動モード時に対応するカラー撮像素子の第２の分光感度特性を算出することができる。これにより、第２の駆動モードに対応する分光感度特性を記憶させておく必要がなく、記憶させるデータ量を少なくしてかつ簡便な演算で静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる。

また、上記の目的を達成するために、本発明の第４の態様による電子撮像方法は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを記憶しておき、上記第１の色変換パラメータに対して線形変換を行って、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて線形変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて線形変換することを特徴とする。

また、上記の目的を達成するために、本発明の第５の態様による電子撮像方法は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、上記カラー撮像素子の上記第１の駆動モードに対応する分光感度特性を記憶しておき、上記分光感度特性に基づき、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出し、上記第１の色変換パラメータに対して線形変換を行うことで、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて線形変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて線形変換することを特徴とする。

また、上記の目的を達成するために、本発明の第６の態様による電子撮像方法は、少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、上記カラー撮像素子の上記第１の駆動モードに対応する第１の分光感度特性を記憶しておき、上記第１の分光感度特性に対して線形変換を行うことで、上記カラー撮像素子の上記第２の駆動モードに対応する第２の分光感度特性を算出し、上記第１の分光感度特性に基づき上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出し、上記第２の分光感度特性に基づき上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換することを特徴とする。

本発明によれば、メモリに記憶するデータ量を少なくしてかつ簡便な演算で静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる電子撮像装置及びそのような電子撮像方法を提供することができる。

以下、図面を参照して本発明の実施形態を説明する。
［第１の実施形態］
図１は、本発明の第１の実施形態に係る電子撮像装置の一例としての構成を示すブロック図である。図１に示す例は、互いに着脱自在に接続されるレンズユニット１００とカメラ本体２００とから構成される一眼レフレックス方式のデジタルスチルカメラである。

光学レンズとしてのレンズユニット１００には、焦点レンズ、絞り、変倍レンズ等からなる光学系１０１が設けられており、図示しない被写体からの像（被写体像）をカメラ本体内の撮像素子２０１ａに集光する。ここで、図１においては図示を省略しているが、光学系１０１を構成する各レンズは図示しないレンズ駆動機構によって駆動され、絞りは図示しない絞り駆動機構によって駆動されるものである。

また、レンズユニット１００には、マイクロコンピュータ（以下、マイコンと称する）１０２と、Ｆｌａｓｈメモリ１０３とが設けられている。マイコン１０２は、カメラ本体２００からの指示に応じてレンズユニット１００内の各部の制御を行う。例えば、マイコン１０２は、カメラ本体２００からの指示に応じて図示しないレンズ駆動機構を駆動して光学系１０１の焦点調整を行ったり、図示しない絞り駆動機構を駆動して撮像素子２０１ａの露光調整を行ったりする。分光透過率記憶手段としてのＦｌａｓｈメモリ１０３は、マイコン１０２によって実行される各種プログラムや光学系１０１に関するデータを記憶している。第１の実施形態では、光学系１０１に関するデータとして、少なくとも光学系１０１の分光透過率特性（レンズ透過率特性Ｔ（λ））が記憶されている。この他に光学系１０１の焦点距離情報等のオートフォーカスに必要な情報等も記憶させておくようにしても良い。

ここで、レンズユニット１００とカメラ本体２００とは装着時に通信自在に構成されている。つまり、カメラ本体２００にレンズユニット１００が装着されたときに、カメラ本体２００からの指示に応じて、Ｆｌａｓｈメモリ１０３に記憶されている光学系１０１に関するデータをカメラ本体２００に送信可能である。

カメラ本体２００は、撮像モジュール２０１と、バス２０２と、ＤＲＡＭ２０３と、画像信号処理回路２０４と、ＬＣＤドライバ２０５と、ＬＣＤ２０６と、圧縮/伸長回路２０７と、メモリインターフェイス（Ｉ/Ｆ）２０８と、記録媒体２０９と、マイクロコンピュータ（マイコン）２１０と、操作部２１１と、Ｆｌａｓｈメモリ２１２とから構成されている。

撮像モジュール２０１は、光学系１０１を介して入射した被写体像を撮像して画像データ（ＲＡＷデータ）を得るためのモジュールである。この撮像モジュール２０１は、撮像素子２０１ａと、インターフェイス（Ｉ/Ｆ）回路２０１ｂと、Ｆｌａｓｈメモリ２０１ｃとから構成されている。

撮像素子２０１ａは、図２に示すようなベイヤ配列のカラーフィルタが前面に配されたカラー撮像素子である。図２に示すベイヤ配列は、Ｒ画素とＧ（Ｇｒ）画素からなるラインと、Ｇ（Ｇｂ）画素とＢ画素からなるラインとが交互に配置されて構成されている。なお、撮像素子２０１ａはＭＯＳ方式の撮像素子でもＣＣＤ方式の撮像素子でも良い。

このような撮像素子２０１ａは、光学系１０１を介して入射した被写体像を各画素で受光して光電変換し、光電変換して得られた電荷を画像信号として出力する。ここで、第１の実施形態において、撮像素子２０１ａは、少なくとも静止画撮影用の駆動モード（第１の駆動モード）と、ライブビュー表示用の駆動モード（第２の駆動モード）の少なくとも２つの駆動モードで駆動可能なものを想定している。第１の駆動モードとしての静止画撮影用の駆動モードは、記録される静止画の画質を優先するために、撮像素子の有効画素からの出力を全て読み出す駆動モードである。一方、ライブビュー表示用の駆動モードは、リアルタイムの表示を可能とするために、撮像素子の出力の一部を間引いて読み出す駆動モードである。

図２を参照して撮像素子２０１ａの駆動モードについて更に説明する。静止画撮影用の駆動モードにおいては、図２に示す撮像素子２０１ａの全ての画素を駆動して電荷を読み出す。これにより、静止画像の記録画素数を多くして画質を高めることが可能である。一方、ライブビュー表示用の駆動モードにおいては、撮像素子２０１ａの一部の画素のみ（例えば図２の例では「Ｒｅａｄ」で示されるラインの画素のみ）を駆動して電荷を読み出す。これにより、撮像素子出力の読み出し時間やその後の画像処理の時間を短縮することが可能である。

Ｉ/Ｆ回路２０１ｂは、撮像素子２０１ａから読み出された画像信号に対し、ノイズの除去、波形整形、増幅等のアナログ処理を行い、更にこれらアナログ処理した画像信号をデジタル信号に変換して画像データ（ＲＡＷデータ）を得る。分光感度特性記憶手段としてのＦｌａｓｈメモリ２０１ｃは、製造時などにおいて、撮像素子２０１ａを静止画撮影用のモードで駆動して得られた画像データに基づいて算出された分光感度特性（静止画撮影用駆動分光感度特性Ｅｓ（λ））を記憶している。

バス２０２は、撮像モジュール２０１と、ＤＲＡＭ２０３と、画像信号処理回路２０４と、ＬＣＤドライバ２０５と、圧縮/伸長回路２０７と、メモリＩ/Ｆ２０８と、マイコン２１０とに接続されており、カメラ内で発生した各種のデータをカメラ内の各部に転送するための転送路である。撮像モジュール２０１で取得された画像データ（ＲＡＷデータ）は、バス２０２を介してＤＲＡＭ２０３に転送されて記憶される。ＤＲＡＭ２０３は、撮像モジュール２０１のＩ/Ｆ回路２０１ｂで得られた画像データや画像信号処理回路２０４、圧縮/伸長回路２０７において処理された画像データ等の各種データが一時的に記憶される記憶部である。

画像信号処理回路２０４は、ＤＲＡＭ２０３に記憶された画像データ（ＲＡＷデータ）を読み出して画像処理を施す。この画像信号処理回路２０４は、同時化回路２０４ａと、ホワイトバランス（ＷＢ）補正回路２０４ｂと、色変換回路２０４ｃと、ガンマ変換回路２０４ｄとから構成されている。

同時化回路２０４ａはベイヤ配列のＲＡＷデータから、補間によってＲ、Ｇ、Ｂの３色を１画素成分とする画像データを生成する。ＷＢ補正回路２０４ｂは、同時化回路２０４ａの出力のうちのＲデータ及びＢデータにマイコン２１０から指示されたホワイトバランスゲインを乗じることによりホワイトバランス補正を行う。色変換回路２０４ｃは、ＷＢ補正回路２０４ｂからの出力に、マイコン２１０から指示されたカラーマトリクスを乗じる線形変換を行って画像データの色を補正する。なお、ＷＢ補正回路２０４ｂと色変換回路２０４ｃとで色変換手段を構成している。

ここで、ライブビュー表示用の駆動モード等の、撮像素子２０１ａの一部の画素のみを駆動して出力を読み出す駆動モードにおいては、駆動中でない画素の電荷が、駆動中の画素に漏れ出すことがある。この場合、出力を読み出すべき画素に他の色成分が混入して混色が起こる。なお、漏れ出す電荷量は撮像素子の構成やその駆動方式によって異なり、特にＭＯＳ方式の撮像素子の場合には電荷の漏れ出しが多く、混色が起こりやすい。

このような混色の影響を排除してライブビュー表示時と静止画撮影時とで同じ色再現を得るためには、ライブビュー表示時と静止画撮影時とでそれぞれ適切なホワイトバランス補正及び色変換を行う必要がある。このための手法については後述する。

ガンマ変換回路２０４ｄは、色変換回路２０４ｃの出力に対してガンマ変換（階調変換）処理を行って、画像データの階調を表示や印刷に適するように補正する。ガンマ変換回路２０４ｄにおいて処理された画像データはバス２０２を介してＤＲＡＭ２０３に転送されて記憶される。

ＬＣＤドライバ２０５は、ＬＣＤ２０６への画像の表示を行う。例えばライブビュー表示時には、撮像モジュール２０１で取得され、画像信号処理回路２０４においてライブビュー表示用の画像処理がなされた画像データをＤＲＡＭ２０３から読み出して映像信号に変換し、この映像信号に基づいてＬＣＤ２０６にライブビュー表示を行う。

圧縮/伸長回路２０７は、静止画の撮影時には、撮像モジュール２０１で取得され、画像信号処理回路２０４において静止画撮影用の画像処理がなされた画像データをＤＲＡＭ２０３から読み出してＪＰＥＧ方式などに従って圧縮する。この圧縮された画像データはＤＲＡＭ２０３に記憶された後、メモリＩ/Ｆ２０８を介して記録媒体２０９に記録される。ここで、記録媒体２０９は、特に限定されるものではなく、例えばメモリカードが利用される。また、静止画の再生時には、圧縮/伸長回路２０７は、記録媒体２０９に記録されている静止画像を読み出して伸長する。この伸長された画像データはＤＲＡＭ２０３に一時記憶された後、ＬＣＤドライバ２０５によりＬＣＤ２０６に表示される。

マイコン２１０は、カメラ本体２００の各種シーケンスを統括的に制御する。マイコン２１０には操作部２１１と、Ｆｌａｓｈメモリ２１２とが接続されている。操作部２１１は、当該カメラの電源をオンするための電源ボタン、静止画撮影を実行するためのレリーズボタンなどの各種操作部材である。ユーザによって操作部２１１が操作されることにより、マイコン２１０は、静止画撮影等のユーザ操作に応じた各種シーケンスを実行する。色変換算出パラメータ記憶手段としてのＦｌａｓｈメモリ２１２は、第１の色変換パラメータ算出手段及び第２の色変換パラメータ算出手段としてのマイコン２１０においてホワイトバランスゲイン及びカラーマトリクスを算出するためのパラメータとして、ホワイトバランス及び色変換の目標とする光源（例えば、太陽光、Ａ光源、白色蛍光灯等）の分光放射輝度特性（目標光源分光放射輝度特性Ｉ（λ））、目標とする色の分光反射率特性（目標分光反射率特性Ｒ（λ））、目標とする色のＲＧＢ値（目標色ＲＧＢ値Ｄ（Ｒ,Ｇ,Ｂ））、及び詳細は後述する算出パラメータとしての補正マトリクスＣＭＸｌ２ｓを記憶している。

次に、第１の実施形態における電子撮像方法の要部としてのホワイトバランス補正及び色変換について説明する。図３は第１の実施形態における静止画撮影用のホワイトバランスゲイン及びカラーマトリクスを算出する際の概念について示した図であり、図４は第１の実施形態において実際にホワイトバランス補正及び色変換を行う際の概念について示した図である。

上述したように、Ｆｌａｓｈメモリ２０１ｃには、図３に示すような静止画撮影用駆動分光感度特性Ｅｓ（λ）が記憶されている。まず、ホワイトバランスゲインの算出時には、静止画撮影用駆動分光感度特性Ｅｓ（λ）の各色成分と、レンズ透過率特性Ｔ（λ）、目標光源分光放射輝度特性Ｉ（λ）とを可視波長域で積算し、レンズユニット１００が装着された状態でのＲ、Ｇ、Ｂのそれぞれに対する分光感度を算出する。こうして得られたＲ、Ｇ、Ｂそれぞれの分光感度から、静止画撮影用ホワイトバランスゲインＷＢｓを算出する。具体的には、Ｒ分光/Ｇ分光によりホワイトバランスＲゲインを、Ｂ分光/Ｇ分光によりホワイトバランスＢゲインを算出する。
次に、カラーマトリクスの算出時には、静止画撮影用駆動分光感度特性Ｅｓ（λ）の各色成分と、レンズ透過率特性Ｔ（λ）、目標光源分光放射輝度特性Ｉ（λ）、目標分光反射率特性Ｒ（λ）とを可視波長域で積算してレンズユニット１００が装着された状態での目標とする色の分光感度を算出する。この目標とする色の分光感度を目標色ＲＧＢ値Ｄ（Ｒ,Ｇ,Ｂ）で示される値とするようなマトリクスが静止画撮影用カラーマトリクスＣＭＸｓとなる。なお、静止画撮影用カラーマトリクスＣＭＸｓは３×３のマトリクスであり、このマトリクスを求めるためには、目標となる色を３色（例えば、シアン、人の肌色、緑の３色）設定しておく必要がある。
以上説明した静止画撮影用ホワイトバランスゲインＷＢｓ及び静止画撮影用カラーマトリクスＣＭＸｓが第１の色変換パラメータに対応する。

次に、静止画撮影用の駆動モード時とライブビュー表示用の駆動モード時のそれぞれにおけるホワイトバランス補正及び色変換について説明する。
まず、静止画撮影用の駆動モード時においては、撮像モジュール２０１から取得され、同時化回路２０４ａで同時化された画像データＲｓ、Ｇｓ、ＢｓをＷＢ補正回路２０４ｂに入力する。ＷＢ補正回路２０４ｂは、入力された画像データのうちのＲｓデータに、静止画撮影用ホワイトバランスゲインＷＢｓのＲゲインを乗じ、Ｂｓデータに静止画撮影用ホワイトバランスゲインＷＢｓのＢゲインを乗じてホワイトバランス補正を行う。その後、色変換回路２０４ｃは、ホワイトバランス補正がなされたＲｓ、Ｇｓ、Ｂｓデータに、静止画撮影用カラーマトリクスＣＭＸｓを乗じて色変換を行う。

一方、ライブビュー表示用の駆動モード時においては、撮像モジュール２０１から混色が起きた状態で取得され、同時化回路２０４ａで同時化された画像データＲｌ、Ｇｌ、ＢｌをＷＢ補正回路２０４ｂに入力する。ＷＢ補正回路２０４ｂは、入力された画像データのうちのＲｌデータに、静止画撮影用ホワイトバランスゲインＷＢｓのＲゲインを乗じ、Ｂｌデータに静止画撮影用ホワイトバランスゲインＷＢｓのＢゲインを乗じてホワイトバランス補正を行う。その後、色変換回路２０４ｃは、ホワイトバランス補正がなされたＲｌ、Ｇｌ、Ｂｌデータに、第２の色変換パラメータとしてのライブビュー表示用カラーマトリクスＣＭＸｌを乗じて色変換を行う。

ここで、ライブビュー表示用カラーマトリクスＣＭＸｌは、静止画撮影用カラーマトリクスＣＭＸｓに、Ｆｌａｓｈメモリ２１２に記憶されている補正マトリクスＣＭＸｌ２ｓを左から乗じることによって算出されるマトリクスである。このようなライブビュー表示用カラーマトリクスＣＭＸｌによって色変換を行うことで、静止画撮影時とライブビュー表示時とで同じ色再現を得ることができる。

以下にこの理由を説明する。撮像素子２０１ａにおいて起こる混色は、電荷の漏れ出し方向が同一であることが多く、また漏れ出しの量は撮像素子の構造や駆動方式によってほぼ決定される。そこで、まず、混色のモデルとして、駆動中の画素の１画素下の画素のみから電荷が漏れ出し、その漏れ出しの割合は色毎に一定であるような混色を考える（図２参照）。このような混色モデルにおいて、Ｒ画素へ漏れ出すＧｂ画素の電荷の割合をｋ１、Ｇｒ画素へ漏れ出すＢ画素の電荷の割合をｋ２、Ｇｂ画素へ漏れ出すＲ画素の電荷の割合をｋ３、Ｂ画素に漏れ出すＧｒ画素の電荷の割合をｋ４とすると、混色が起こった際に各色成分から出力される画像信号Ｒｌ、Ｇｒｌ、Ｇｂｌ、Ｂｌは、

となる。この（式１）に示すように、上述した混色のモデルでは、混色が起こった後の画像信号Ｒｌ、Ｇｒｌ、Ｇｂｌ、Ｂｌは、混色が起こる前の画像信号Ｒｓ、Ｇｒｓ、Ｇｂｓ、Ｂｓを所定の変換マトリクスによって線形変換することによって求めることができることが分かる。なお、混色が起こった状態の画像信号を同時化回路２０４ａにおいて同時化した場合まで含めると、同時化後の信号Ｒ、Ｇ、Ｂは、
Ｒ＝Ｒ'
Ｇ＝（Ｇｒ'＋Ｇｂ'）/２ （式２）
Ｂ＝Ｂ'
であるから、混色後に同時化した場合のモデルは、

となる。

ここで、補正マトリクスＣＭＸｌ２ｓは、上記（式３）と等価な、同時化後に混色が起こるモデルを利用して求めている。まず、補正マトリクスＣＭＸｌ２ｓの逆マトリクス（即ち（式３）と等価な変換マトリクスに対応する）をＣＭＸｓ２ｌとすると、このＣＭＸｓ２ｌは、

と定義することができる。したがって、ＣＭＸｓ２ｌは、

となり、この逆マトリクスが補正マトリクスＣＭＸｌ２ｓである。

以上説明したように、ライブビュー表示時に得られた画像データＲｌ、Ｇｌ、Ｂｌに補正マトリクスＣＭＸｌ２ｓを乗じることは、ライブビュー表示時に対応する撮像素子の分光感度特性（混色後）を、静止画撮影時に対応する撮像素子の分光感度特性（混色前）に変換することと実質的に同一である（図５参照）。この考え方に基づいて、図４に示した処理においては、色変換回路２０４ｃにおける変換が線形変換であることを利用して、ライブビュー表示時に得られる混色が起こった状態の画像データＲｌ、Ｇｌ、Ｂｌを線形変換によって混色が起こる前の画像データＲｓ、Ｇｓ、Ｂｓに戻し、その後に静止画撮影時と同じ色変換を行っている。このため、静止画撮影時とライブビュー表示時とで同じ色再現を得ることが可能である。

なお、図５は、補正マトリクスＣＭＸｌ２ｓの逆マトリクスＣＭＸｓ２ｌを静止画撮影時に対応する撮像素子の分光感度特性に乗じることで、ライブビュー表示時に対応する撮像素子の分光感度特性を算出することができることも示している。

以下、実際の演算の流れについて説明する。図６は、第１の実施形態において、撮影前にマイコン２１０により実行される演算について示したフローチャートである。なお、ここでは特にホワイトバランス補正及び色変換に係る処理についての演算のみ説明する。
まず、マイコン２１０は、Ｆｌａｓｈメモリ２０１ｃから、静止画撮影時に対応する撮像素子の分光感度特性Ｅｓ（λ）を読み出す（ステップＳ１）。次に、目標光源分光放射輝度特性Ｉ（λ）をＦｌａｓｈメモリ２１２から（ステップＳ２）、レンズ透過率特性Ｔ（λ）をレンズユニット１００のＦｌａｓｈメモリ１０３から（ステップＳ３）、目標分光反射率特性Ｒ（λ）をＦｌａｓｈメモリ２１２から（ステップＳ４）、目標色ＲＧＢ値Ｄ（Ｒ,Ｇ,Ｂ）をＦｌａｓｈメモリ２１２からそれぞれ読み出す（ステップＳ５）。なお、ステップＳ１〜ステップＳ５のデータ読み出しの順序は図６に示したものに限るものではなく、適宜入れ替えが可能である。

その後、これら読み出したデータから、マイコン２１０は、静止画撮影用のホワイトバランスゲインＷＢｓ及びカラーマトリクスＣＭＸｓを上述したようにして算出する（ステップＳ６）。更に、マイコン２１０は、マトリクス演算、
ＣＭＸｌ＝ＣＭＸｌ２ｓ×ＣＭＸｓ
を行ってライブビュー表示用のカラーマトリクスＣＭＸｌを算出する（ステップＳ７）。その後に、以上にようにして得られた、静止画撮影用のホワイトバランスゲインＷＢｓ、静止画撮影用のカラーマトリクスＣＭＸｓ、ライブビュー表示用のカラーマトリクスＣＭＸｌをＤＲＡＭ２０３に書き込む（ステップＳ８）。そして、図６のフローチャートに示す処理を終了する。

図７は、第１の実施形態において、静止画撮影時にマイコン２１０によって実行される演算について示したフローチャートである。まず、マイコン２１０は、撮像モジュール２０１から画像データ（ＲＡＷデータ）を取得する（ステップＳ１１）。次に、マイコン２１０は、取得した画像データが静止画撮影用の画像データであるか、或いはライブビュー表示用の画像データであるかを判定する（ステップＳ１２）。なお、この判定は、例えばユーザによって操作部２１１のレリーズボタンが押されたか否かによって判定すれば良い。つまり、レリーズボタンが押される前に取得された画像データはライブビュー表示用の画像データであるとし、押された時点で取得された画像データは静止画撮影用の画像データとあるとする。

ステップＳ１２の判定において、ライブビュー表示用の画像データであると判定した場合、ステップＳ１２をステップＳ１３に分岐して、図示しないＯＢ減算回路によりＯＢ減算処理を行う（ステップＳ１３）。このＯＢ減算処理においては、画像データからＯＢ（Optical black）分を減算することにより、取得した画像データの黒レベルを０に合わせる。次に、画像データを同時化回路２０４ａに出力し、同時化回路２０４ａにおいて同時化処理を行う（ステップＳ１４）。続いて、マイコン２１０は、図６のステップＳ８においてＤＲＡＭ２０３に記憶させておいた静止画撮影用のホワイトバランスゲインＷＢｓを読み出して、ＷＢ補正回路２０４ｂに出力する。ＷＢ補正回路２０４ｂは、マイコン２１０から通知された静止画撮影用のホワイトバランスゲインＷＢｓを画像データに乗じることによってホワイトバランス補正を行う（ステップＳ１５）。続いてマイコン２１０は、図６のステップＳ８においてＤＲＡＭ２０３に記憶させておいたライブビュー表示用のカラーマトリクスＣＭＸｌを読み出して、色変換回路２０４ｃに出力する。色変換回路２０４ｃは、マイコン２１０から通知されたライブビュー表示用のカラーマトリクスＣＭＸｌを画像データに乗じることによって色変換を行う（ステップＳ１６）。ガンマ変換回路２０４ｄは、色変換回路２０４ｃの出力に対してガンマ変換を施し（ステップＳ１７）、演算後の画像データ（Ｒｌ',Ｇｌ',Ｂｌ'）をＤＲＡＭ２０３に記憶させる。

以上のような画像処理がなされた後、ＬＣＤドライバ２０５は、ＤＲＡＭ２０３から画像データ（Ｒｌ',Ｇｌ',Ｂｌ'）を読み出し、ライブビュー画像としてＬＣＤに表示させる（ステップＳ１８）。このような処理により、ライブビュー表示時の画像の色再現は静止画撮影時の画像の色再現と一致する。

一方、ステップＳ１２の判定において、静止画撮影用の画像データであると判定した場合、ステップＳ１２をステップＳ１９に分岐して、図示しないＯＢ減算回路により、画像データからＯＢ分を減算することにより、取得した画像データの黒レベルを０に合わせる（ステップＳ１９）。次に、画像データを同時化回路２０４ａに出力し、同時化回路２０４ａにおいて同時化処理を行う（ステップＳ２０）。続いて、マイコン２１０は、図６のステップＳ８においてＤＲＡＭ２０３に記憶させておいた静止画撮影用のホワイトバランスゲインＷＢｓを読み出して、ＷＢ補正回路２０４ｂに出力する。ＷＢ補正回路２０４ｂは、マイコン２１０から通知された静止画撮影用のホワイトバランスゲインＷＢｓを画像データに乗じることによってホワイトバランス補正を行う（ステップＳ２１）。続いてマイコン２１０は、図６のステップＳ８においてＤＲＡＭ２０３に記憶させておいた静止画撮影用のカラーマトリクスＣＭＸｓを読み出して、色変換回路２０４ｃに出力する。色変換回路２０４ｃは、マイコン２１０から通知された静止画撮影用のカラーマトリクスＣＭＸｓを画像データに乗じることによって色変換を行う（ステップＳ２２）。ガンマ変換回路２０４ｄは、色変換回路２０４ｃの出力に対してガンマ変換を施し（ステップＳ２３）、演算後の画像データ（Ｒｓ',Ｇｓ'Ｂｓ'）をＤＲＡＭ２０３に記憶させる。

以上のような画像処理がなされた後、圧縮/伸長回路２０７は、ＤＲＡＭ２０３から画像データ（Ｒｓ',Ｇｓ'Ｂｓ'）を読み出して圧縮処理を行い、この圧縮画像データを記録媒体２０９に記録する（ステップＳ２４）。

以上説明したように、第１の実施形態によれば、Ｆｌａｓｈメモリにライブビュー表示に対応する撮像素子の分光感度特性を記憶しなくとも、ライブビュー表示時と静止画撮影時とで同じ色再現を得ることが可能である。

また、カメラの総合的な分光感度特性は、撮像素子の分光感度特性の他に、カメラ本体に装着される光学レンズの分光透過率特性、撮影時の光源の分光放射輝度特性等によっても変化する。したがって、光源が変わった場合や、一眼レフレックスカメラのような光学レンズが着脱自在に構成されているカメラの場合には、撮影前にカメラの総合的な分光感度特性を測定してから、ホワイトバランスゲイン及びカラーマトリクスを算出する必要がある。この場合、従来の手法ではライブビュー表示時と静止画撮影時とで個別に分光感度特性を測定する必要があるが、第１の実施形態の手法によれば、静止画撮影用の分光感度特性のみを測定してホワイトバランスゲインＷＢｓ及びカラーマトリクスＣＭＸｓを算出すれば良い。

つまり、ライブビュー表示用のホワイトバランスゲインは静止画撮影用のホワイトバランスゲインＷＢｓをそのまま用いることができ、ライブビュー用のカラーマトリクスＣＭＸｌは静止画用のカラーマトリクスＣＭＸｓを補正マトリクスＣＭＸｌ２ｓによって線形変換することによって求めることができるので、ホワイトバランス補正及び色変換の際の演算量を低減させることが可能である。

［第２の実施形態］
次に、本発明の第２の実施形態について説明する。第１の実施形態では、色変換回路２０４ｃが、ＷＢ補正回路２０４ｂの出力を所定のカラーマトリクスによって線形変換する回路である場合を例としている。しかしながら、色変換回路は、必ずしも線形変換を行う回路だけでなく、非線形の変換を行う回路も存在する。第２の実施形態は、色変換回路２０４ｃが非線形の変換を行う回路であっても対応可能な例である。つまり、第２の実施形態は、基本的な電子撮像装置の構成は図１と同様である。ただし、色変換回路２０４ｃが、ＷＢ補正回路２０４ｂの出力を所定のルックアップテーブルに従って非線形変換する回路である点が異なる。

以下、第２の実施形態における電子撮像方法の要部としてのホワイトバランス補正及び色変換について説明する。図８は、第２の実施形態においてホワイトバランス補正及び色変換を行う際の流れについて示した図であり、図９は第２の実施形態において実際にホワイトバランス補正及び色変換を行う際の概念について示した図である。

ここで、Ｆｌａｓｈメモリ２０１ｃには、第１の実施形態と同様に静止画撮影用駆動分光感度特性Ｅｓ（λ）のみを記憶しておく。まず、静止画撮影用のホワイトバランスゲインＷＢｓの算出手法については第１の実施形態と同様であるので説明を省略する。次に、静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓを求める際には、まず静止画撮影用駆動分光感度特性Ｅｓ（λ）の各色成分と、レンズ透過率特性Ｔ（λ）、目標光源分光放射輝度特性Ｉ（λ）、目標分光反射率特性Ｒ（λ）とを可視波長域で積算してレンズユニット１００が装着された状態での目標とする色の分光感度を算出する。この目標とする色の分光感度を目標色ＲＧＢ値Ｄ（Ｒ,Ｇ,Ｂ）で示される値とするような変換係数を波長毎に算出することにより、静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓが算出される。

次に、ライブビュー表示用のホワイトバランスゲインＷＢｌ及びＲＧＢルックアップテーブルＬＵＴｌを算出するのであるが、静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓとライブビュー表示用のＲＧＢルックアップテーブルＬＵＴｌとは、互いに線形変換で求めることができない。そこで、静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓの場合と同様に、ライブビュー表示用駆動分光感度特性Ｅｌ（λ）から、ライブビュー表示用のホワイトバランスゲインＷＢｌ及びライブビュー表示用のルックアップテーブルＬＵＴｌを算出する。

ここで、図５で説明したように、ライブビュー表示時に対応する撮像素子の分光感度特性Ｅｌ（λ）は、静止画撮影時に対応する撮像素子の分光感度特性Ｅｓ（λ）に補正マトリクスＣＭＸｓ２ｌを乗じることによって求めることができる。したがって、ライブビュー表示時に対応する撮像素子の分光感度特性Ｅｌ（λ）をＦｌａｓｈメモリ２０１ｃに記憶させておく必要はなく、補正マトリクスＣＭＸｓ２ｌをＦｌａｓｈメモリ２１２に記憶させておけば良い。なお、以上説明したようなライブビュー表示時に対応する撮像素子の分光感度特性Ｅｌ（λ）の算出は、分光感度特性算出手段としての機能を有するマイコン２１０によって行われる。

次に、静止画撮影用の駆動モード時とライブビュー表示用の駆動モード時のそれぞれにおけるホワイトバランス補正及び色変換について説明する。
まず、静止画撮影用の駆動モード時においては、撮像モジュール２０１から取得され、同時化回路２０４ａで同時化された画像データＲｓ、Ｇｓ、ＢｓをＷＢ補正回路２０４ｂに入力する。ＷＢ補正回路２０４ｂは、入力された画像データのうちのＲｓデータに、静止画撮影用ホワイトバランスゲインＷＢｓのＲゲインを乗じ、Ｂｓデータに静止画撮影用ホワイトバランスゲインＷＢｓのＢゲインを乗じてホワイトバランス補正を行う。その後、色変換回路２０４ｃは、ホワイトバランス補正がなされたＲｓ、Ｇｓ、Ｂｓデータを静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓによって色変換する。

一方、ライブビュー表示用の駆動モード時においては、撮像モジュール２０１から混色が起きた状態で取得され、同時化回路２０４ａで同時化された画像データＲｌ、Ｇｌ、ＢｌをＷＢ補正回路２０４ｂに入力する。ＷＢ補正回路２０４ｂは、入力された画像データのうちのＲｌデータに、ライブビュー表示用ホワイトバランスゲインＷＢｌのＲゲインを乗じ、Ｂｌデータにライブビュー表示用ホワイトバランスゲインＷＢｌのＢゲインを乗じてホワイトバランス補正を行う。その後、色変換回路２０４ｃは、ホワイトバランス補正がなされたＲｌ、Ｇｌ、Ｂｌデータをライブビュー表示用ＲＧＢルックアップテーブルＬＵＴｌによって色変換する。

以下、実際の演算の流れについて説明する。図１０は、第２の実施形態において、撮影前にマイコン２１０によって実行される演算について示したフローチャートである。なお、ここでもホワイトバランス補正及び色変換に係る処理についての演算のみ説明する。
まず、マイコン２１０は、Ｆｌａｓｈメモリ２０１ｃから、静止画撮影時に対応する撮像素子の分光感度特性Ｅｓ（λ）を読み出す（ステップＳ３１）。次に、Ｆｌａｓｈメモリ２１２から補正マトリクスＣＭＸｓ２ｌを読み出す（ステップＳ３２）。そして、静止画撮影時に対応する撮像素子の分光感度特性Ｅｓ（λ）に、補正マトリクスＣＭＸｓ２ｌを乗じる（分光感度特性Ｅｓ（λ）の波長毎のＲ、Ｇ、Ｂデータに補正マトリクスＣＭＸｓ２ｌを左から乗じる）ことによって、ライブビュー表示時に対応する撮像素子の分光感度特性Ｅｌ（λ）を算出する（ステップＳ３３）。

次に、マイコン２１０は、目標光源分光放射輝度特性Ｉ（λ）をＦｌａｓｈメモリ２１２から（ステップＳ３４）、レンズ透過率特性Ｔ（λ）をレンズユニット１００のＦｌａｓｈメモリ１０３から（ステップＳ３５）、目標分光反射率特性Ｒ（λ）をＦｌａｓｈメモリ２１２から（ステップＳ３６）、目標色ＲＧＢ値Ｄ（Ｒ,Ｇ,Ｂ）をＦｌａｓｈメモリ２１２からそれぞれ読み出す（ステップＳ３７）。

その後、ステップＳ３３で得られた分光感度特性Ｅｌ（λ）と、ステップＳ３４〜ステップＳ３７において読み出したデータとから、マイコン２１０は、ライブビュー表示用ホワイトバランスゲインＷＢｌ及びライブビュー表示用ＲＧＢルックアップテーブルＬＵＴｌを算出する（ステップＳ３８）。そして、これらライブビュー表示用ホワイトバランスゲインＷＢｌ及びライブビュー表示用ＲＧＢルックアップテーブルＬＵＴｌをＤＲＡＭ２０３に書き込む（ステップＳ３９）。次に、ステップＳ３１において読み出した分光感度特性Ｅｓ（λ）と、ステップＳ３４〜ステップＳ３７において読み出したデータとから、マイコン２１０は、静止画撮影用ホワイトバランスゲインＷＢｓ及び静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓを算出する（ステップＳ４０）。そして、これら静止画撮影用ホワイトバランスゲインＷＢｓ及び静止画撮影用ＲＧＢルックアップテーブルＬＵＴｓをＤＲＡＭ２０３に書き込み（ステップＳ４１）、図１０のフローチャートに示す処理を終了する。

図１１は、第２の実施形態において、静止画撮影時にマイコン２１０によって実行される演算について示したフローチャートである。まず、マイコン２１０は、撮像モジュール２０１から画像データ（ＲＡＷデータ）を取得する（ステップＳ５１）。次に、マイコン２１０は、取得した画像データが静止画撮影用の画像データであるか、或いはライブビュー表示用の画像データであるかを判定する（ステップＳ５２）。

ステップＳ５２の判定において、ライブビュー表示用の画像データであると判定した場合、ステップＳ５２をステップＳ５３に分岐して、図示しないＯＢ減算回路において、画像データからＯＢ分を減算することにより、取得した画像データの黒レベルを０に合わせる（ステップＳ５３）。次に、画像データを同時化回路２０４ａに出力し、同時化回路２０４ａにおいて同時化処理を行う（ステップＳ５４）。続いて、マイコン２１０は、図１０のステップＳ３９においてＤＲＡＭ２０３に記憶させておいたライブビュー表示用のホワイトバランスゲインＷＢｌを読み出して、ＷＢ補正回路２０４ｂに出力する。ＷＢ補正回路２０４ｂは、マイコン２１０から通知されたライブビュー表示用のホワイトバランスゲインＷＢｌを画像データに乗じることによってホワイトバランス補正を行う（ステップＳ５５）。続いてマイコン２１０は、図１０のステップＳ３９においてＤＲＡＭ２０３に記憶させておいたライブビュー表示用のルックアップテーブルＬＵＴｌを読み出して、色変換回路２０４ｃに出力する。色変換回路２０４ｃは、マイコン２１０から通知されたライブビュー表示用のルックアップテーブルＬＵＴｌによって色変換を行う（ステップＳ５６）。ガンマ変換回路２０４ｄは、色変換回路２０４ｃの出力に対してガンマ変換を施し（ステップＳ５７）、演算後の画像データ（Ｒｌ',Ｇｌ',Ｂｌ'）をＤＲＡＭ２０３に記憶させる。

以上のような画像処理がなされた後、ＬＣＤドライバ２０５は、ＤＲＡＭ２０３から画像データ（Ｒｌ',Ｇｌ',Ｂｌ'）を読み出し、ライブビュー画像としてＬＣＤに表示させる（ステップ５８）。このような処理により、ライブビュー表示時の画像の色再現は静止画撮影時の画像の色再現と一致する。

一方、ステップＳ５２の判定において、静止画撮影用の画像データであると判定した場合、ステップＳ５２をステップＳ５９に分岐して、図示しないＯＢ減算回路によりＯＢ減算処理を行い、画像データの黒レベルを０に合わせる（ステップＳ５９）。次に、画像データを同時化回路２０４ａに出力し、同時化回路２０４ａにおいて同時化処理を行う（ステップＳ６０）。続いて、マイコン２１０は、図１０のステップＳ４１においてＤＲＡＭ２０３に記憶させておいた静止画撮影用のホワイトバランスゲインＷＢｓを読み出して、ＷＢ補正回路２０４ｂに出力する。ＷＢ補正回路２０４ｂは、マイコン２１０から通知された静止画撮影用のホワイトバランスゲインＷＢｓを画像データに乗じることによってホワイトバランス補正を行う（ステップＳ６１）。続いてマイコン２１０は、図１０のステップＳ４１においてＤＲＡＭ２０３に記憶させておいた静止画撮影用のルックアップテーブルＬＵＴｓを読み出して、色変換回路２０４ｃに出力する。色変換回路２０４ｃは、マイコン２１０から通知された静止画撮影用のルックアップテーブルＬＵＴｓによって色変換を行う（ステップＳ６２）。ガンマ変換回路２０４ｄは、色変換回路２０４ｃの出力に対してガンマ変換を施し（ステップＳ６３）、演算後の画像データ（Ｒｓ',Ｇｓ'Ｂｓ'）をＤＲＡＭ２０３に記憶させる。

以上のような画像処理がなされた後、圧縮/伸長回路２０７は、ＤＲＡＭ２０３から画像データ（Ｒｓ',Ｇｓ'Ｂｓ'）を読み出して圧縮処理を行い、この圧縮画像データを記録媒体２０９に記録する（ステップＳ６４）。

以上説明したように、第２の実施形態によれば、色変換回路における変換が線形変換でなくとも、静止画撮影に対応する撮像素子の分光感度特性を補正マトリクスによって線形変換するという簡便な手法によってライブビュー表示に対応する撮像素子の分光感度特性を求めることができるので、簡便な構成でライブビュー表示時と静止画撮影時とで同じ色再現を得ることが可能である。

ここで、第２の実施形態の手法は、色変換回路における変換が線形変換であっても適用することが可能である。

以上実施形態に基づいて本発明を説明したが、本発明は上記した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。例えば、上述した実施形態における電子撮像装置は、一眼レフレックス方式のカメラを例としているが、上述した実施形態の手法をコンパクトカメラに適用することも可能である。コンパクトカメラの場合は、レンズ透過率特性Ｔ（λ）が変化せず、カメラの総合的な分光感度が目標光源分光放射輝度特性Ｉ（λ）によって決まる。したがって、光源毎に、静止画撮影用のホワイトバランスゲインＷＢｓ及びカラーマトリクスＣＭＸｓ等の色変換パラメータを予め算出しておくようにしても良い。

また、上述した各実施形態において撮像素子２０１ａは、第２の駆動モードとしてライブビュー表示用の駆動モードで駆動可能としているが、第２の駆動モードは撮像素子出力の一部を間引いて読み出す駆動モードであればライブビュー表示用の駆動モードに制限されない。例えば、ライブビュー表示用の駆動モードの他に、動画撮影用の駆動モードや、静止画であっても一部の領域のみを記録するような駆動モードの等が考えられる。

更に、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

本発明の第１の実施形態に係る電子撮像装置の一例としての構成を示すブロック図である。 撮像素子における混色について説明するための図である。 第１の実施形態における静止画撮影用のホワイトバランスゲイン及びカラーマトリクスを算出する際の概念について示した図である。 第１の実施形態において実際にホワイトバランス補正及び色変換を行う際の概念について示した図である。 分光感度特性Ｅｌ（λ）と分光感度特性Ｅｓ（λ）との関係について示した図である。 第１の実施形態において、撮影前にマイコン２１０により実行される演算について示したフローチャートである。 第１の実施形態において、静止画撮影時にマイコン２１０によって実行される演算について示したフローチャートである。 第２の実施形態における静止画撮影用のホワイトバランスゲイン及びカラーマトリクスを算出する際の概念について示した図である。 第２の実施形態において実際にホワイトバランス補正及び色変換を行う際の概念について示した図である。 第２の実施形態において、撮影前にマイコン２１０により実行される演算について示したフローチャートである。 第２の実施形態において、静止画撮影時にマイコン２１０によって実行される演算について示したフローチャートである。

符号の説明

１００…レンズユニット、１０１…光学系、１０２，２１０…マイクロコンピュータ（マイコン）、１０３，２０１ｃ，２１２…Ｆｌａｓｈメモリ、２００…カメラ本体、２０１…撮像モジュール、２０１ａ…撮像素子、２０１ｂ…インターフェイス（Ｉ/Ｆ）回路、２０２…バス、２０３…ＤＲＡＭ、２０４…画像信号処理回路、２０４ａ…同時化回路、２０４ｂ…ホワイトバランス（ＷＢ）補正回路、２０４ｃ…色変換回路、２０４ｄ…ガンマ変換回路、２０５…ＬＣＤドライバ、２０６…ＬＣＤ、２０７…圧縮/伸長回路、２０８…メモリインターフェイス（Ｉ/Ｆ）、２０９…記録媒体、２１１…操作部

Claims (17)

1. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、
   上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを記憶する色変換パラメータ記憶手段と、
   上記第１の色変換パラメータから、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する色変換パラメータ算出手段と、
   上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく算出パラメータ記憶手段と、
   上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段と、
   を具備することを特徴とする電子撮像装置。
2. 上記第１の駆動モードは、静止画撮影用の駆動モードであることを特徴とする請求項１に記載の電子撮像装置。
3. 上記第２の駆動モードは、ライブビュー表示用の駆動モードを含むことを特徴とする請求項１に記載の電子撮像装置。
4. 上記色変換パラメータ算出手段は線形変換によって上記第２の色変換パラメータを算出すると共に、上記色変換手段は線形変換によって上記色データを変換することを特徴とする請求項１に記載の電子撮像装置。
5. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、
   上記カラー撮像素子に被写体像を集光する光学レンズと、
   上記カラー撮像素子の上記第１の駆動モードに対応する分光感度特性を記憶する分光感度特性記憶手段と、
   上記分光感度特性に基づき、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出する第１の色変換パラメータ算出手段と、
   上記第１の色変換パラメータから、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する第２の色変換パラメータ算出手段と、
   上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく算出パラメータ記憶手段と、
   上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段と、
   を具備することを特徴とする電子撮像装置。
6. 上記第１の駆動モードは、静止画撮影用の駆動モードであることを特徴とする請求項５に記載の電子撮像装置。
7. 上記第２の駆動モードは、ライブビュー表示用の駆動モードを含むことを特徴とする請求項５に記載の電子撮像装置。
8. 上記第２の色変換パラメータ算出手段は線形変換によって上記第２の色変換パラメータを算出すると共に、上記色変換手段は線形変換によって上記色データを変換することを特徴とする請求項５に記載の電子撮像装置。
9. 上記光学レンズは、上記電子撮像装置に着脱自在に構成されると共に、上記光学レンズを構成する光学系の分光透過率を記憶する分光透過率記憶手段を含み、
   上記第１の色変換パラメータ算出手段は、上記分光透過率と、上記分光感度特性とから、上記第１の色変換パラメータを算出することを特徴とする請求項５に記載の電子撮像装置。
10. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子と、
    上記カラー撮像素子に被写体像を集光する光学レンズと、
    上記カラー撮像素子の上記第１の駆動モードに対応する第１の分光感度特性を記憶する分光感度特性記憶手段と、
    上記第１の分光感度特性に基づき、上記カラー撮像素子の上記第２の駆動モードに対応する第２の分光感度特性を算出する分光感度特性算出手段と、
    上記第２の分光感度特性を算出するために用いられる算出パラメータを予め記憶しておく分光感度特性算出パラメータ記憶手段と、
    上記第１の分光感度特性に基づき上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出すると共に、上記第２の分光感度特性に基づき上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出する色変換パラメータ算出手段と、
    上記第１及び上記第２の色変換パラメータを算出するために用いられる算出パラメータを予め記憶しておく色変換算出パラメータ記憶手段と、
    上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する色変換手段と、
    を具備することを特徴とする電子撮像装置。
11. 上記第１の駆動モードは、静止画撮影用の駆動モードであることを特徴とする請求項１０に記載の電子撮像装置。
12. 上記第２の駆動モードは、ライブビュー表示用の駆動モードを含むことを特徴とする請求項１０に記載の電子撮像装置。
13. 上記分光感度特性算出手段は線形変換によって上記第２の分光感度特性を算出すると共に、上記分光感度特性算出パラメータ記憶手段に記憶されている算出パラメータは線形変換係数であることを特徴とする請求項１０に記載の電子撮像装置。
14. 上記光学レンズは、上記電子撮像装置に着脱自在に構成されると共に、上記光学レンズを構成する光学系の分光透過率を記憶する分光透過率記憶手段を含み、
    上記分光感度特性算出手段は、上記分光透過率と、上記第１の分光感度特性と、上記分光感度特性算出パラメータ記憶手段に記憶されている算出パラメータとから、上記第２の分光感度特性を算出することを特徴とする請求項１０に記載の電子撮像装置。
15. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、
    上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを記憶しておき、
    上記第１の色変換パラメータに対して線形変換を行って、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、
    上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて線形変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて線形変換する、
    ことを特徴とする電子撮像方法。
16. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、
    上記カラー撮像素子の上記第１の駆動モードに対応する分光感度特性を記憶しておき、
    上記分光感度特性に基づき、上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出し、
    上記第１の色変換パラメータに対して線形変換を行うことで、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、
    上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて線形変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて線形変換する、
    ことを特徴とする電子撮像方法。
17. 少なくとも第１の駆動モードと第２の駆動モードからなる複数の駆動モードを有するカラー撮像素子による電子撮像方法において、
    上記カラー撮像素子の上記第１の駆動モードに対応する第１の分光感度特性を記憶しておき、
    上記第１の分光感度特性に対して線形変換を行うことで、上記カラー撮像素子の上記第２の駆動モードに対応する第２の分光感度特性を算出し、
    上記第１の分光感度特性に基づき上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第１の色変換パラメータを算出し、
    上記第２の分光感度特性に基づき上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを変換するための第２の色変換パラメータを算出し、
    上記第１の駆動モード時に上記カラー撮像素子にて得られた色データを上記第１の色変換パラメータに基づいて変換し、上記第２の駆動モード時に上記カラー撮像素子にて得られた色データを上記第２の色変換パラメータに基づいて変換する、
    ことを特徴とする電子撮像方法。

Images