JP2004032067A

JP2004032067A - Image processing apparatus and electronic camera

Info

Publication number: JP2004032067A
Application number: JP2002181416A
Authority: JP
Inventors: Masahisa Suzuki; 鈴木　政央
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2002-06-21
Filing date: 2002-06-21
Publication date: 2004-01-29
Anticipated expiration: 2022-06-21
Also published as: JP4069690B2

Abstract

PROBLEM TO BE SOLVED: To provide an image processing apparatus and an electronic camera capable of performing accurate white balance adjustment without performing frequent preset acquisition corresponding to the variation of irradiation light surrounding an object. SOLUTION: The apparatus has a recording means for recording a white balance control value preset in advance by a user, a calculation means calculating the white balance control value based on a color temperature, a correction means correcting the white balance control value recorded in the recording means based on a deviation amount between the white balance control value recorded in the recording means and the white balance control value calculated by the calculation means, and a white balance adjustment means performing the white balance adjustment onto an image to be processed using the white balance control value corrected in the correction means. COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は、処理対象の画像にホワイトバランス調整を施す画像処理装置および撮像した画像にホワイトバランス調整を施す電子カメラに関するものである。
【０００２】
【従来の技術】
人間の眼には、被写体周辺の照射光の色温度が変化しても白い被写体は白く見えるという順応性がある。しかし、ビデオカメラや電子カメラにはこのような順応性がないため、ビデオカメラや電子カメラによる撮影においては、被写体周辺の照射光の色温度に合わせて、各色のゲインを調整するいわゆるホワイトバランス調整が行われている。
【０００３】
ホワイトバランス調整には、ビデオカメラや電子カメラが照射光の色温度を自動的に検出してホワイトバランス調整を行う「オートホワイトバランス」や、予めユーザにより無彩色の被写体の撮影（いわゆるプリセット取得）を行わせてホワイトバランス調整を行う「プリセットホワイトバランス」などの方法が知られている。
【０００４】
【発明が解決しようとする課題】
しかし、前述したオートホワイトバランスは、撮影する被写体の色などに影響されるため、被写体によっては、正確なホワイトバランス調整を行うことができないという問題があった。
また、前述したプリセットホワイトバランスは、プリセット取得直後には正確なホワイトバランス調整を行うことができるが、時間経過とともに照射光が変化すると、その変化に対応できないという問題があった。そのため、被写体周辺の照射光の変化に対応するためには、頻繁にプリセット取得を行わなければならなかった。
【０００５】
本発明は、頻繁にプリセット取得を行わなくても、被写体周辺の照射光の変化に対応した正確なホワイトバランス調整を行うことができる画像処理装置および電子カメラを提供することを目的とする。
【０００６】
【課題を解決するための手段】
請求項１に記載の画像処理装置は、予めユーザにより設定されたホワイトバランス制御値を記録する記録手段と、色温度に基づいてホワイトバランス制御値を算出する算出手段と、前記記録手段に記録されたホワイトバランス制御値と、前記算出手段により算出されたホワイトバランス制御値とのずれ量を算出し、該ずれ量に基づいて、前記記録手段に記録されたホワイトバランス制御値を補正する補正手段と、前記補正手段により補正されたホワイトバランス制御値を用いて、処理対象の画像にホワイトバランス調整を施すホワイトバランス調整手段とを備えたことを特徴とする。
【０００７】
請求項２に記載の画像処理装置は、請求項１に記載の画像処理装置において、前記補正手段は、前記記録手段に記録されたホワイトバランス制御値の補正範囲を所定の範囲に制限することを特徴とする。
請求項３に記載の画像処理装置は、請求項２に記載の画像処理装置において、前記補正手段は、前記所定の範囲を、前記記録手段に記録されたホワイトバランス制御値が大きくなる側と小さくなる側とで独立に決めることを特徴とする。
【０００８】
請求項４に記載の画像処理装置は、請求項２に記載の画像処理装置において、前記補正手段は、前記所定の範囲を、ミレッド単位で表わされた色温度を用いて決めることを特徴とする。
請求項５に記載の画像処理装置は、請求項１に記載の画像処理装置において、色再現処理を行う色再現処理手段と、前記補正手段により算出された前記ずれ量に基づいて、前記色再現処理手段による色再現処理の際に用いる色再現マトリックスを決定する決定手段とを備えたことを特徴とする。
【０００９】
請求項６に記載の画像処理装置は、請求項１に記載の画像処理装置において、色再現処理を行う色再現処理手段と、前記色再現処理手段による色再現処理の際に用いる色再現マトリックスを決定する決定手段とを備え、前記決定手段は、前記補正手段により算出された前記ずれ量を用いて前記色再現マトリックスを決定するか否かを切り換えることを特徴とする。
【００１０】
請求項７に記載の電子カメラは、予めユーザにより設定されたホワイトバランス制御値を記録する記録手段と、被写体を撮像して画像を生成する撮像手段と、前記撮像手段により生成された画像に基づいて、色温度を算出し、該色温度に基づいてホワイトバランス制御値を算出する算出手段と、前記記録手段に記録されたホワイトバランス制御値と、前記算出手段により算出されたホワイトバランス制御値とのずれ量を算出し、該ずれ量に基づいて、前記記録手段に記録されたホワイトバランス制御値を補正する補正手段と、前記補正手段により補正されたホワイトバランス制御値を用いて、前記撮像手段により生成された画像にホワイトバランス調整を施すホワイトバランス調整手段とを備えたことを特徴とする。
【００１１】
請求項８に記載の電子カメラは、請求項７に記載の電子カメラにおいて、前記記録手段は、予めユーザにより設定されたホワイトバランス制御値を複数記録し、前記補正手段は、前記記録手段に記録された複数のホワイトバランス制御値のうち、ユーザにより選択されたホワイトバランス制御値と、前記算出手段により算出されたホワイトバランス制御値とのずれ量を算出し、該ずれ量に基づいて、前記ユーザにより選択されたホワイトバランス制御値を補正することを特徴とする。
【００１２】
請求項９に記載の電子カメラは、請求項７に記載の電子カメラにおいて、前記記録手段に記録されたホワイトバランス制御値が、前記補正手段により補正されることを、ユーザに通知する通知手段を備えたことを特徴とする。
【００１３】
【発明の実施の形態】
以下、図面に基づいて、本発明の実施形態について詳細に説明する。
【００１４】
なお、以下の各実施形態では、本発明の画像処理装置が行う画像処理の機能を有する電子カメラを用いて説明を行う。
《第１実施形態》
以下、図面を用いて本発明の第１実施形態について説明する。
図１は、本発明の実施形態における電子カメラの構成を示すブロック図である。
【００１５】
電子カメラ１は、図１に示すように、撮像部２、制御部３、画像処理部４、表示部５および記録部６を備えており、これらはバスを介して相互に接続されている。
なお、画像処理部４には、ホワイトバランス調整部、色再現処理部など（不図示）が設けられている。また、撮像部２は、不図示の光学系、被写体の明るさや撮影距離などを測定する各種センサ、撮像素子、Ａ／Ｄ変換器などを備えており、制御部３内の不図示のメモリには、各部の動作を実現するためのプログラムが予め記録されている。
【００１６】
さらに、電子カメラ１は、操作部７を備えており、図１において、操作部７の出力は制御部３に接続される。なお、操作部７は、不図示の電源ボタン、レリーズボタン、決定ボタンなどを含み、後述するホワイトバランスモードの選択などにも用いられる。また、操作部７には、後述するプリセット取得処理を開始するプリセットボタンも含まれる。
【００１７】
以上説明したような構成の電子カメラ１における撮影の流れについて図２を用いて説明する。
不図示の電源ボタンが「ＯＮ」されると、ステップＳ１において、制御部３は、各部にスルー画像の撮像および表示を開始するよう指示する。また、制御部３は、撮像されたスルー画像に基づいて、後述するオートホワイトバランスモードで用いるホワイトバランス制御値（以下、「オートＷＢ制御値」と称する）を算出し始める。なお、オートＷＢ制御値は、制御部３内の不図示のメモリに記録され、算出される度に更新される。
【００１８】
ステップＳ２において、制御部３は、ホワイトバランスモードがユーザにより選択されたか否かを判定する。そして、制御部３は、ホワイトバランスモードが選択されるまでステップＳ２を繰り返す。
なお、ホワイトバランスモードには、従来の電子カメラで実現されていたオートホワイトバランスモード、プリセットホワイトバランスモード、マニュアルホワイトバランスモードの他に、本発明の特徴であるセミオートホワイトバランスモードの各モードが含まれ、ユーザは、操作部７を介して、何れか１つのホワイトバランスモードを選択する。
【００１９】
ここで、オートホワイトバランスモードとは、撮像された画像に基づいて自動的にオートＷＢ制御値を算出してホワイトバランス調整を行うモードであり、プリセットホワイトバランスモードとは、予めユーザによりプリセット取得（詳細は後述する）を行わせてホワイトバランス調整を行うモードである。また、マニュアルホワイトバランスモードとは、被写体周辺の照射光の種類（蛍光灯、電球、太陽光など）や照射光の色温度をユーザが指定し、指定された照射光の種類や色温度に対応付けて予め定められたホワイトバランス制御値を用いてホワイトバランス調整を行うモードである。マニュアルモードにおいて用いられるホワイトバランス制御値を、以下では、「マニュアルＷＢ制御値」と称する。以上説明した３つのホワイトバランスモードは公知技術であるため、以下では詳細な説明を省略する。
【００２０】
ステップＳ３において、制御部３は、選択されたホワイトバランスモードの設定処理を行う。ただし、ホワイトバランスモードの設定処理には、レリーズボタンが押圧されたか否かの判定も含まれる。
なお、オートホワイトバランスモード、プリセットホワイトバランスモード、マニュアルホワイトバランスモードが選択された場合の設定処理については、公知技術と同様に行うことができるため説明を省略し、セミオートホワイトバランスモードが選択された場合の設定処理については後述する。
【００２１】
ホワイトバランスモードの設定処理に際してレリーズボタンが押圧されると、ステップＳ４において、制御部３は、各部を介して撮影を行う。
ステップＳ５において、制御部３は、画像処理部４内の不図示のホワイトバランス調整部を介して、ステップＳ３で設定した内容に応じたホワイトバランス調整を、撮影により得られた画像に施す。
【００２２】
ステップＳ６において、制御部３は、画像処理部４内の不図示の色再現処理部を介して、ステップＳ３で設定した内容に応じた色再現処理を、ホワイトバランス調整後の画像に施す。
ステップＳ７において、制御部３は、色再現処理後の画像を、記録部６に記録して一連の処理を終了する。
【００２３】
ここで、図２のステップＳ３の部分で説明したホワイトバランスモードの設定処理のうち、本発明の特徴であるセミオートホワイトバランスモードの設定処理について図３を用いて詳細に説明する。
ユーザ操作によりセミオートホワイトバランスモードが選択されると、ステップＳ１０において、制御部３は、プリセット取得処理を行う。
【００２４】
ここで、プリセット取得処理について図４を用いて簡単に説明する。
プリセット取得処理とは、撮影の前に、無彩色の被写体をユーザにより予備撮影させ、予備撮影の結果に基づいてホワイトバランス制御値（以下、「プリセットＷＢ制御値」と称する）を算出するための処理である。また、プリセット取得処理は、ユーザにより不図示のプリセットボタンが押圧されることにより開始される。
【００２５】
プリセット取得が開始されると、ステップＳ２５において、制御部３は、撮影が行われたか否かを判定する。そして、制御部３は、撮影が行われるまでステップＳ２５を繰り返す。
ステップＳ２６において、制御部３は、撮影により得られた画像に基づき、プリセットＷＢ制御値を算出する。
【００２６】
ステップＳ２７において、制御部３は、算出したプリセットＷＢ制御値を制御部３内の不図示のメモリに記録し、プリセット取得処理を終了する。
以上説明したようにしてプリセット取得処理が終了すると、ステップＳ１１において、制御部３は、プリセットＷＢ制御値と、予め記憶されている補正範囲とを読み出す。
【００２７】
補正範囲とは、プリセットＷＢ制御値を補正可能な範囲であり、本実施形態では、「ミレッド単位」の色温度で表わされる。ミレッド単位は色温度を表わす単位のひとつであり、ケルビン単位との関係は以下の式の通りである。
ミレッド（ｍｉｒｄ）＝（１÷ケルビン（Ｋ））×１０^６・・・（式１）
ホワイトバランス制御値と色温度との間には相関関係があるため、色温度を用いてホワイトバランス制御値を表わすことができる。
【００２８】
図５は、ホワイトバランス制御値と色温度との関係を示すグラフである。
色温度をケルビン単位で表わす場合には、図５（ａ）に示すように、ホワイトバランス制御値は、低温度側では大きく変動し、高温度側ではあまり変動しない。一方、色温度をミレッド単位で表わす場合には、図５（ｂ）に示すように、変動は略等間隔になる。
【００２９】
そのため、ミレッド単位の色温度を用いてホワイトバランス制御値の補正範囲を表わすことにより、被写体周辺の照射光の色温度に拘らず、同じ尺度で補正範囲を定めることができる。
制御部３内の不図示のメモリには、プリセットＷＢ制御値の補正範囲として上限値および下限値（例えば、±５０ミレッド）が予め記録されている。
【００３０】
ステップＳ１２において、制御部３は、補正範囲を変更するか否かを判定する。操作部７を介して、補正範囲の変更が指示された場合には、制御部３は、ステップＳ１３に進み、補正範囲の変更が指示されない場合には、制御部３は、ステップＳ１４に進む。
ステップＳ１３において、制御部３は、ユーザにより入力された補正範囲を制御部３内の不図示のメモリに記録する。なお、操作部７を介してユーザにより入力される補正範囲は、前述したミレッド単位の色温度を用いて表わされる上限値および下限値であるとする。
【００３１】
ステップＳ１４において、制御部３は、色再現マトリックスの決定方法が指定されたか否かを判定する。ここで、色再現マトリックスは、画像処理部４内の不図示の色再現処理部を介して行われる色再現処理に用いられる係数である。
制御部３は、色再現処理において、後述するプリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて色再現マトリックスを決定する方法と、予め定められた色再現マトリックスを用いる方法とのうち、どちらを実行するかをユーザに指定させ、指定が行われると指定された方法を制御部３内の不図示のメモリに記録してステップＳ１５に進む。
【００３２】
ステップＳ１５において、制御部３は、制御部３内の不図示のメモリから最新のオートＷＢ制御値を読み出し、ステップＳ１６において、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量を算出する。
ここで、プリセットＷＢ制御値は、ステップＳ１１で読み出されたものであり、オートＷＢ制御値は、ステップＳ１５で読み出されたものである。
【００３３】
なお、ずれ量は以下の式を用いて算出される。
ずれ量＝（プリセットＷＢ制御値）−（オートＷＢ制御値）・・・（式２）
ステップＳ１７において、制御部３は、ステップＳ１６で算出したずれ量が補正範囲内であるか否かを判定する。
【００３４】
すなわち、制御部３は、ステップＳ１６で算出したずれ量をミレッド単位の色温度に換算し、補正範囲内であるか否かを判定する。そして、ずれ量が補正範囲内である場合には、制御部３はステップＳ１８に進み、ずれ量が補正範囲内でない（補正範囲外である）場合には、制御部３はステップＳ１９に進む。
ステップＳ１８において、制御部３は、プリセットＷＢ制御値をオートＷＢ制御値に置き換える。
【００３５】
すなわち、制御部３は、ステップＳ１５で読み出したオートＷＢ制御値を、新たなプリセットＷＢ制御値として制御部３内の不図示のメモリに記録する。
ステップＳ１９において、制御部３は、プリセットＷＢ制御値を、補正範囲の上限値または下限値に応じたホワイトバランス制御値に置き換える。
すなわち、制御部３は、補正範囲の上限値または下限値に応じたホワイトバランス制御値を、新たなプリセットＷＢ制御値として制御部３内の不図示のメモリに記録する。
【００３６】
ステップＳ２０において、制御部３は、プリセットＷＢ制御値の補正内容を表示部５に表示する。
ここで、表示部５に表示されるのは、ステップＳ１８またはステップＳ１９で行われた補正の内容であり、例えば、「プリセットＷＢ制御値をオートＷＢ制御値に置き換えました。」などのメッセージである。
【００３７】
ステップＳ２１において、制御部３は、色再現マトリックスをプリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて決定するか否かを判定する。
すなわち、制御部３は、ステップＳ１４において指定された色再現マトリックスの決定方法を参照し、色再現マトリックスをプリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて決定する方法が指定された場合には、ステップＳ２２に進み、予め定められた色再現マトリックスを用いる方法が指定された場合には、ステップＳ２３に進む。
【００３８】
ステップＳ２２において、制御部３は、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて、色再現マトリックスを決定する。
すなわち、制御部３は、ステップＳ１６で算出したずれ量を参照し、プリセットＷＢ制御値の補正前と補正後との間の色温度の変化を求める。そして、色温度の変化に基づいて照射光の分光特性の変化を推定し、同じ色合いが再現できるような色再現マトリックスを決定する。
【００３９】
ステップＳ２３において、制御部３は、不図示のレリーズボタンが押圧されたか否かを判定し、レリーズボタンが押圧された場合には一連の設定処理を終了し、レリーズボタンが押圧されない場合には、ステップＳ１５に戻り、ステップＳ１５〜ステップＳ２３の処理を繰り返す。
すなわち、制御部３は、レリーズボタンが押圧されるまで、プリセットＷＢ制御値の補正と色再現マトリックスの決定とを繰り返す。
【００４０】
以上説明したように、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、予め取得されたプリセットＷＢ制御値と、継続的に算出されるオートＷＢ制御値とのずれ量が算出され、そのずれ量に基づいて、プリセットＷＢ制御値が補正される。そのため、プリセット取得から時間が経過しても、被写体周辺の照射光の変化に対応した正確なホワイトバランス調整を行うことができる。
【００４１】
また、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、プリセットＷＢ制御値の補正が、所定の補正範囲内に制限されて行われる。したがって、オートＷＢ制御値が不正確な値であったとしても、プリセットＷＢ制御値を適切な範囲内で補正することができる。
また、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、プリセットＷＢ制御値の補正範囲を、ミレッド単位の色温度を用いて変更可能である。したがって、被写体周辺の照射光の色温度に拘らず、同じ尺度で補正範囲を決めることができる。
【００４２】
また、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて、色再現マトリックスが決定される。したがって、被写体周辺の照射光の変化に対応した正確な色再現処理を行うことができる。
また、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて、色再現マトリックスを決定するか否かを、切り換えることができる。したがって、ユーザの要求に応じた色再現処理を行うことができる。
【００４３】
例えば、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて色再現マトリックスを決定する場合、被写体周辺の照射光の色温度の変化に対応した色再現処理を簡単に行うことができる。
一方、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて色再現マトリックスを決定しない場合、色再現処理後の画像は、ＲＡＷデータに近いので、パーソナルコンピュータなどを用いた後処理に好適である。また、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて色再現マトリックスを決定しない場合、安定性の高い色再現処理を行うことができる。
【００４４】
さらに、第１実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、プリセットＷＢ制御値の補正内容が表示部５を用いて表示されることにより、ユーザに対して通知される。そのため、ユーザは、通知された補正内容を検討し、新たな設定動作などを行うことができる。
なお、第１実施形態では、セミオートホワイトバランスモードの設定処理時の補正範囲入力の際に、補正範囲の上限値および下限値がユーザにより入力される例を示したが、入力される補正範囲は、上限値のみまたは下限値のみでも良い。
【００４５】
このように、補正範囲選択の自由度を上げることにより、ユーザの要求に応じたホワイトバランス調整を行うことができる。
また、予めいくつかの補正範囲を設定しておき、設定されたいくつかの補正範囲から、ユーザが１つの補正範囲を選択するようにしても良い。
また、第１実施形態では、セミオートホワイトバランスモードの設定処理の際に、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいてプリセットＷＢ制御値を自動的に補正する例を示したが、補正を行う前に、表示部５などを用いてユーザに補正内容を通知し、ユーザによる補正実行の指示を得てから補正を行うようにしても良い。
【００４６】
また、第１実施形態では、セミオートホワイトバランスモードの設定処理の際に、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量が補正範囲外であった場合、プリセットＷＢ制御値を補正範囲の上限値または下限値に応じたホワイトバランス制御値に置き換える例を示したが、このような置き換えをせずに、プリセットＷＢ制御値をそのまま使うようにしても良いし、補正範囲内に収まるような所定の係数を乗じるようにしても良い。
【００４７】
また、第１実施形態では、セミオートホワイトバランスモードの設定処理の際に、表示部５を用いてプリセットＷＢ制御値の補正内容を表示部５に表示する例を示したが、音声などを用いて通知するようにしても良い。さらに、補正範囲外であった場合に警告音を発するようにしても良い。
《第２実施形態》
以下、図面を用いて本発明の第２実施形態について説明する。
【００４８】
第２実施形態の電子カメラの構成は、第１実施形態の電子カメラ１の構成と同様であるため説明を省略し、以下では、第１実施形態の電子カメラ１と同じ符号を用いて説明を行う。
また、第２実施形態の電子カメラ１における撮影の流れは、第１実施形態とほとんど同様であるため、説明を省略する。そして、以下では、第１実施形態とは異なるセミオートホワイトバランスモードの設定処理について、図６を用いて詳しく説明する。
【００４９】
ユーザ操作によりセミオートホワイトバランスモードが選択されると、ステップＳ３０において、制御部３は、第１実施形態と同様に、プリセット取得処理を行う。
ステップＳ３１において、制御部３は、プリセットＷＢ制御値を読み出し、ステップＳ３２において、制御部３は、制御部３内の不図示のメモリから最新のオートＷＢ制御値を読み出す。
【００５０】
ステップＳ３３において、制御部３は、第１実施形態と同様に、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量を算出する。
ステップＳ３４において、制御部３は、算出したずれ量に基づいて、プリセットＷＢ制御値の補正範囲を決定する。
図７は、プリセットＷＢ制御値の補正範囲を決定する際に用いるＬＵＴの例を示す。このようなＬＵＴは、制御部３内の不図示のメモリに予め記録されているものとする。
【００５１】
図７のＬＵＴ中の数字は、Ｒ（赤）、Ｂ（青）各色のホワイトバランス制御値のずれ量と、ずれ量に対応付けられた補正範囲とを表わしている。
例えば、ＲのプリセットＷＢ制御値が１．３、オートＷＢ制御値が１．５の場合には、ずれ量は１．３−１．５＝−０．２となる。したがって、図７のＬＵＴを参照すると、プリセットＷＢ制御値の補正範囲は、−１０ミレッドである。
【００５２】
ステップＳ３５〜ステップＳ３８において、制御部３は、第１実施形態のステップＳ１７〜ステップＳ２０と同様の処理を行い、プリセットＷＢ制御値を補正し、補正内容を表示部５に表示する。
ステップＳ３９において、制御部３は、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量に基づいて、色再現マトリックスを決定する。
【００５３】
制御部３は、プリセットＷＢ制御値とオートＷＢ制御値とのずれ量と図７のＬＵＴとに基づいて色再現マトリックスの決定を行う。
例えば、ずれ量の絶対値が０．３未満の場合（図７（ａ））には、制御部３は、Ｓ３９でずれ量を算出した際に用いたプリセットＷＢ制御値およびオートＷＢ制御値を参照し、補正前の照射光の色温度と補正後の照射光の色温度とを求める。そして、色温度の変化に基づいて照射光の分光特性の変化を考慮し、同じ色合いが再現できるような色再現マトリックスを決定する。
【００５４】
一方、ずれ量の絶対値が０．３以下の場合（図７（ｂ））には、制御部３は、予め定められた色再現マトリックスを用いる。
ステップＳ４０において、制御部３は、不図示のレリーズボタンが押圧されたか否かを判定する。
制御部３は、レリーズボタンが押圧された場合には一連の設定処理を終了し、レリーズボタンが押圧されない場合には、ステップＳ３２に戻り、ステップＳ３２〜ステップＳ４０の処理を繰り返す。
【００５５】
すなわち、制御部３は、レリーズボタンが押圧されるまで、プリセットＷＢ制御値の補正と色再現マトリックスの決定とを繰り返す。
以上説明したように、第２実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、予め取得されたプリセットＷＢ制御値と、継続的に算出されるオートＷＢ制御値とのずれ量が算出され、そのずれ量に基づいて、プリセットＷＢ制御値の補正範囲が決定される。そして、決定された補正範囲を参照してプリセットＷＢ制御値が補正される。そのため、プリセット取得から時間が経過しても、被写体周辺の照射光の変化量に対応した正確なホワイトバランス調整を行うことができる。
【００５６】
また、第２実施形態によれば、ユーザによりセミオートホワイトバランスモードが選択されると、予め取得されたプリセットＷＢ制御値と、継続的に算出されるオートＷＢ制御値とのずれ量が算出され、そのずれ量に基づいて色再現マトリックスが決定される。したがって、被写体周辺の照射光の変化に自動的に対応した正確な色再現処理を行うことができる。
【００５７】
なお、第２実施形態では、プリセットＷＢ制御値の補正および色再現マトリックスの決定を、ＬＵＴを参照して行う例を示したが、プリセットＷＢ制御値の補正または色再現マトリックスの決定の何れか一方を、第１実施形態と同様に行うようにしても良い。すなわち、プリセットＷＢ制御値の補正を予め定められた補正範囲を用いて行うようにしたり、色再現マトリックスの決定方法をユーザ操作により選択可能にしても良い。
【００５８】
また、第２実施形態において、色再現マトリックスの決定内容を、表示部５を用いて表示するようにしても良い。
なお、上記各実施形態では、予め１つのプリセットＷＢ制御値を取得できる電子カメラを用いて説明を行ったが、本発明は、複数のプリセットＷＢ制御値を取得できる電子カメラにも適用することができる。その場合には、セミオートホワイトバランスモードの設定の初めに、予め取得されている複数のプリセットＷＢ制御値のうち、何れのプリセットＷＢ制御値を使ってセミオートホワイトバランスモードを実行するかをユーザに選択させる処理を追加すれば良い。
【００５９】
この場合、撮影頻度が高いと思われる照射光を想定して、複数のプリセットＷＢ制御値をユーザが予め取得しておくことにより、プリセット取得の回数を減らすことができる。
また、上記各実施形態では、セミオートホワイトバランスモードの設定処理の初めに、プリセット取得処理を行う例を示したが、プリセット取得処理は、ホワイトバランスモードの選択が行われる前に実行されていても良いし、電子カメラ１の電源が「ＯＮ」される前（前回電子カメラ１が使用された際）に実行されていても良い。
【００６０】
また、上記各実施形態では、プリセットＷＢ制御値を補正するセミオートホワイトバランスモードの例を示したが、マニュアルＷＢ制御値を補正するようにしても良い。すなわち、ユーザにより指定された照射光の種類や色温度に対応付けられたマニュアルＷＢ制御値と、オートＷＢ制御値とのずれ量を算出し、算出したずれ量に基づいてマニュアルＷＢ制御値を補正するようにしても良い。
【００６１】
【発明の効果】
以上説明したように、本発明によれば、頻繁にプリセット取得を行わなくても、被写体周辺の照射光の変化に対応した正確なホワイトバランス調整を行うことができる画像処理装置および電子カメラを提供することができる。
【図面の簡単な説明】
【図１】第１実施形態における電子カメラの構成を示すブロック図である。
【図２】第１実施形態の電子カメラにおける撮影の流れ示すフローチャートである。
【図３】セミオートホワイトバランスモード設定処理時の電子カメラの制御手順を示すフローチャートである。
【図４】プリセット取得処理時の電子カメラの制御手順を示すフローチャートである。
【図５】ホワイトバランス制御値と色温度との関係を示すグラフである。
【図６】セミオートホワイトバランスモード設定処理時の電子カメラの制御手順を示すフローチャートである。
【図７】プリセットＷＢ制御値の補正範囲を決定する際に用いるＬＵＴの一例である。
【符号の説明】
１　電子カメラ
２　撮像部
３　制御部
４　画像処理部
５　表示部
６　記録部
７　操作部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image processing apparatus that performs white balance adjustment on an image to be processed and an electronic camera that performs white balance adjustment on a captured image.
[0002]
[Prior art]
The human eye has the adaptability that a white subject appears white even when the color temperature of the irradiation light around the subject changes. However, since video cameras and electronic cameras do not have such adaptability, so-called white balance adjustment that adjusts the gain of each color according to the color temperature of the irradiation light around the subject when shooting with video cameras or electronic cameras. Has been done.
[0003]
For white balance adjustment, the video camera or electronic camera automatically detects the color temperature of the illuminating light and adjusts the white balance for automatic white balance. There are known methods such as “preset white balance” in which white balance adjustment is performed.
[0004]
[Problems to be solved by the invention]
However, since the above-described auto white balance is affected by the color of the subject to be photographed, there is a problem that accurate white balance adjustment cannot be performed depending on the subject.
In addition, the preset white balance described above can perform accurate white balance adjustment immediately after the preset is acquired, but there is a problem that if the irradiation light changes with time, the change cannot be handled. Therefore, in order to cope with the change in the irradiation light around the subject, it has been necessary to frequently acquire presets.
[0005]
An object of the present invention is to provide an image processing apparatus and an electronic camera that can perform accurate white balance adjustment corresponding to a change in irradiation light around a subject without frequently performing preset acquisition.
[0006]
[Means for Solving the Problems]
The image processing apparatus according to claim 1 is recorded in a recording unit that records a white balance control value preset by a user, a calculation unit that calculates a white balance control value based on a color temperature, and the recording unit. A correction unit that calculates a deviation amount between the white balance control value calculated by the calculation unit and the white balance control value calculated by the calculation unit, and corrects the white balance control value recorded in the recording unit based on the deviation amount; And white balance adjusting means for performing white balance adjustment on the image to be processed using the white balance control value corrected by the correcting means.
[0007]
According to a second aspect of the present invention, in the image processing apparatus according to the first aspect, the correction unit limits the correction range of the white balance control value recorded in the recording unit to a predetermined range. Features.
According to a third aspect of the present invention, in the image processing apparatus according to the second aspect, the correction unit reduces the predetermined range to a side where the white balance control value recorded in the recording unit becomes larger. It is characterized by being decided independently by the side to be.
[0008]
The image processing apparatus according to claim 4 is the image processing apparatus according to claim 2, wherein the correction unit determines the predetermined range using a color temperature expressed in units of mired. To do.
The image processing device according to claim 5 is the image processing device according to claim 1, wherein the color reproduction is performed based on a color reproduction processing unit that performs color reproduction processing and the shift amount calculated by the correction unit. And determining means for determining a color reproduction matrix used in the color reproduction processing by the processing means.
[0009]
According to a sixth aspect of the present invention, there is provided the image processing device according to the first aspect, wherein a color reproduction processing unit that performs color reproduction processing and a color reproduction matrix that is used in the color reproduction processing by the color reproduction processing unit. Determining means for determining, wherein the determining means switches whether to determine the color reproduction matrix using the shift amount calculated by the correcting means.
[0010]
The electronic camera according to claim 7 is based on a recording unit that records a white balance control value preset by a user, an imaging unit that images a subject to generate an image, and an image generated by the imaging unit. Calculating a color temperature and calculating a white balance control value based on the color temperature; a white balance control value recorded in the recording means; and a white balance control value calculated by the calculating means; A correction unit that corrects a white balance control value recorded in the recording unit based on the shift amount, and a white balance control value corrected by the correction unit. And white balance adjusting means for performing white balance adjustment on the image generated by the above.
[0011]
According to an eighth aspect of the present invention, in the electronic camera according to the seventh aspect, the recording unit records a plurality of white balance control values set in advance by a user, and the correction unit records the recording unit on the recording unit. The amount of deviation between the white balance control value selected by the user and the white balance control value calculated by the calculation unit among the plurality of white balance control values thus calculated is calculated. Based on the amount of deviation, the user The white balance control value selected by (1) is corrected.
[0012]
According to a ninth aspect of the present invention, there is provided the electronic camera according to the seventh aspect, wherein the electronic camera according to the seventh aspect includes a notification unit that notifies the user that the white balance control value recorded in the recording unit is corrected by the correction unit. It is characterized by having.
[0013]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0014]
In the following embodiments, description will be made using an electronic camera having a function of image processing performed by the image processing apparatus of the present invention.
<< First Embodiment >>
Hereinafter, a first embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram illustrating a configuration of an electronic camera according to an embodiment of the present invention.
[0015]
As shown in FIG. 1, the electronic camera 1 includes an imaging unit 2, a control unit 3, an image processing unit 4, a display unit 5, and a recording unit 6, which are connected to each other via a bus.
The image processing unit 4 includes a white balance adjustment unit, a color reproduction processing unit, and the like (not shown). The imaging unit 2 includes an optical system (not shown), various sensors that measure the brightness and shooting distance of the subject, an imaging device, an A / D converter, and the like. The program for realizing the operation of each unit is recorded in advance.
[0016]
Further, the electronic camera 1 includes an operation unit 7, and the output of the operation unit 7 is connected to the control unit 3 in FIG. 1. The operation unit 7 includes a power button, a release button, a determination button, and the like (not shown), and is also used for selecting a white balance mode, which will be described later. The operation unit 7 also includes a preset button for starting a preset acquisition process described later.
[0017]
A flow of shooting in the electronic camera 1 having the above-described configuration will be described with reference to FIG.
When a power button (not shown) is turned “ON”, in step S1, the control unit 3 instructs each unit to start capturing and displaying a through image. Further, the control unit 3 starts to calculate a white balance control value (hereinafter referred to as “auto WB control value”) used in an auto white balance mode, which will be described later, based on the captured through image. The auto WB control value is recorded in a memory (not shown) in the control unit 3 and updated each time it is calculated.
[0018]
In step S2, the control unit 3 determines whether or not the white balance mode has been selected by the user. Then, the control unit 3 repeats step S2 until the white balance mode is selected.
In addition to the auto white balance mode, preset white balance mode, and manual white balance mode that have been realized with conventional electronic cameras, the white balance mode includes each mode of the semi-auto white balance mode that is a feature of the present invention. Then, the user selects any one of the white balance modes via the operation unit 7.
[0019]
Here, the auto white balance mode is a mode in which an auto WB control value is automatically calculated based on a captured image and white balance adjustment is performed. The preset white balance mode is a preset acquisition by a user in advance ( This is a mode in which white balance adjustment is performed by performing (details will be described later). In manual white balance mode, the user specifies the type of irradiation light around the subject (fluorescent light, bulb, sunlight, etc.) and the color temperature of the irradiation light, and supports the specified type of irradiation light and color temperature. In this mode, white balance adjustment is performed using a predetermined white balance control value. The white balance control value used in the manual mode is hereinafter referred to as “manual WB control value”. Since the three white balance modes described above are known techniques, detailed description thereof will be omitted below.
[0020]
In step S3, the control unit 3 performs setting processing for the selected white balance mode. However, the white balance mode setting process includes determining whether or not the release button has been pressed.
The setting process when the auto white balance mode, the preset white balance mode, and the manual white balance mode are selected can be performed in the same manner as in the known technique, and thus the description thereof is omitted, and the semi-auto white balance mode is selected. The setting process in this case will be described later.
[0021]
When the release button is pressed during the white balance mode setting process, in step S4, the control unit 3 performs shooting through each unit.
In step S 5, the control unit 3 performs white balance adjustment according to the content set in step S 3 on the image obtained by photographing through the unillustrated white balance adjustment unit in the image processing unit 4.
[0022]
In step S6, the control unit 3 performs color reproduction processing according to the content set in step S3 on the image after white balance adjustment via a color reproduction processing unit (not shown) in the image processing unit 4.
In step S7, the control unit 3 records the image after the color reproduction process in the recording unit 6 and ends the series of processes.
[0023]
Here, of the white balance mode setting process described in step S3 of FIG. 2, the semi-auto white balance mode setting process, which is a feature of the present invention, will be described in detail with reference to FIG.
When the semi-auto white balance mode is selected by a user operation, the control unit 3 performs a preset acquisition process in step S10.
[0024]
Here, the preset acquisition process will be briefly described with reference to FIG.
The preset acquisition process is for pre-shooting an achromatic object by a user before shooting and calculating a white balance control value (hereinafter referred to as “preset WB control value”) based on the result of the preliminary shooting. It is processing. The preset acquisition process is started when a user presses a preset button (not shown).
[0025]
When the preset acquisition is started, in step S25, the control unit 3 determines whether or not shooting has been performed. And the control part 3 repeats step S25 until imaging | photography is performed.
In step S26, the control unit 3 calculates a preset WB control value based on an image obtained by photographing.
[0026]
In step S27, the control unit 3 records the calculated preset WB control value in a memory (not shown) in the control unit 3, and ends the preset acquisition process.
When the preset acquisition process is completed as described above, in step S11, the control unit 3 reads the preset WB control value and the correction range stored in advance.
[0027]
The correction range is a range in which the preset WB control value can be corrected, and is represented by a color temperature of “in units of mired” in the present embodiment. The mired unit is one of the units representing the color temperature, and the relationship with the kelvin unit is as follows.
Mired = (1 ÷ Kelvin (K)) × 10 ⁶ ... (Formula 1)
Since there is a correlation between the white balance control value and the color temperature, the white balance control value can be expressed using the color temperature.
[0028]
FIG. 5 is a graph showing the relationship between the white balance control value and the color temperature.
When the color temperature is expressed in Kelvin units, as shown in FIG. 5A, the white balance control value varies greatly on the low temperature side and does not vary much on the high temperature side. On the other hand, when the color temperature is expressed in miled units, the fluctuations are substantially equally spaced as shown in FIG.
[0029]
Therefore, by expressing the correction range of the white balance control value using the color temperature in units of mired, the correction range can be determined on the same scale regardless of the color temperature of the irradiation light around the subject.
In a memory (not shown) in the control unit 3, an upper limit value and a lower limit value (for example, ± 50 mired) are recorded in advance as the correction range of the preset WB control value.
[0030]
In step S12, the control unit 3 determines whether or not to change the correction range. When the change of the correction range is instructed via the operation unit 7, the control unit 3 proceeds to step S13, and when the change of the correction range is not instructed, the control unit 3 proceeds to step S14.
In step S 13, the control unit 3 records the correction range input by the user in a memory (not shown) in the control unit 3. It is assumed that the correction range input by the user via the operation unit 7 is the upper limit value and the lower limit value expressed using the color temperature in units of mired described above.
[0031]
In step S14, the control unit 3 determines whether or not a method for determining the color reproduction matrix is designated. Here, the color reproduction matrix is a coefficient used for color reproduction processing performed through a color reproduction processing unit (not shown) in the image processing unit 4.
In the color reproduction process, the control unit 3 determines a color reproduction matrix based on a shift amount between a preset WB control value and an auto WB control value, which will be described later, and a method using a predetermined color reproduction matrix. The user designates which one to execute, and when the designation is performed, the designated method is recorded in a memory (not shown) in the control unit 3 and the process proceeds to step S15.
[0032]
In step S15, the control unit 3 reads the latest auto WB control value from a memory (not shown) in the control unit 3, and calculates a deviation amount between the preset WB control value and the auto WB control value in step S16.
Here, the preset WB control value is read in step S11, and the auto WB control value is read in step S15.
[0033]
The deviation amount is calculated using the following equation.
Deviation amount = (preset WB control value) − (auto WB control value) (Expression 2)
In step S17, the control unit 3 determines whether or not the deviation amount calculated in step S16 is within the correction range.
[0034]
That is, the control unit 3 converts the deviation amount calculated in step S16 into a color temperature in units of mired, and determines whether or not it is within the correction range. If the deviation amount is within the correction range, the control unit 3 proceeds to step S18. If the deviation amount is not within the correction range (out of the correction range), the control unit 3 proceeds to step S19.
In step S18, the control unit 3 replaces the preset WB control value with the auto WB control value.
[0035]
That is, the control unit 3 records the auto WB control value read in step S15 in a memory (not shown) in the control unit 3 as a new preset WB control value.
In step S19, the control unit 3 replaces the preset WB control value with a white balance control value corresponding to the upper limit value or the lower limit value of the correction range.
That is, the control unit 3 records the white balance control value corresponding to the upper limit value or lower limit value of the correction range in a memory (not shown) in the control unit 3 as a new preset WB control value.
[0036]
In step S 20, the control unit 3 displays the correction content of the preset WB control value on the display unit 5.
Here, what is displayed on the display unit 5 is the content of the correction performed in step S18 or step S19. For example, a message such as “Replaced preset WB control value with auto WB control value” is displayed. is there.
[0037]
In step S21, the control unit 3 determines whether or not to determine the color reproduction matrix based on the amount of deviation between the preset WB control value and the auto WB control value.
That is, the control unit 3 refers to the method for determining the color reproduction matrix specified in step S14, and the method for determining the color reproduction matrix based on the shift amount between the preset WB control value and the auto WB control value is specified. In this case, the process proceeds to step S22, and if a method using a predetermined color reproduction matrix is designated, the process proceeds to step S23.
[0038]
In step S22, the control unit 3 determines a color reproduction matrix based on the shift amount between the preset WB control value and the auto WB control value.
That is, the control unit 3 refers to the deviation amount calculated in step S16 and obtains the change in the color temperature between before and after the preset WB control value is corrected. Then, the change in the spectral characteristics of the irradiation light is estimated based on the change in the color temperature, and a color reproduction matrix that can reproduce the same hue is determined.
[0039]
In step S23, the control unit 3 determines whether or not a release button (not shown) has been pressed. When the release button is pressed, the series of setting processes is terminated, and when the release button is not pressed, Returning to step S15, the processing of step S15 to step S23 is repeated.
That is, the control unit 3 repeats the correction of the preset WB control value and the determination of the color reproduction matrix until the release button is pressed.
[0040]
As described above, according to the first embodiment, when the semi-auto white balance mode is selected by the user, the deviation amount between the preset WB control value acquired in advance and the auto WB control value calculated continuously. Is calculated, and the preset WB control value is corrected based on the deviation amount. For this reason, even when time elapses from the acquisition of the preset, it is possible to perform an accurate white balance adjustment corresponding to a change in irradiation light around the subject.
[0041]
Further, according to the first embodiment, when the semi-auto white balance mode is selected by the user, the correction of the preset WB control value is performed within a predetermined correction range. Therefore, even if the auto WB control value is an inaccurate value, the preset WB control value can be corrected within an appropriate range.
Further, according to the first embodiment, when the semi-auto white balance mode is selected by the user, the correction range of the preset WB control value can be changed using the color temperature in units of mired. Therefore, the correction range can be determined on the same scale regardless of the color temperature of the irradiation light around the subject.
[0042]
Further, according to the first embodiment, when the semi-auto white balance mode is selected by the user, the color reproduction matrix is determined based on the shift amount between the preset WB control value and the auto WB control value. Therefore, it is possible to perform accurate color reproduction processing corresponding to the change in irradiation light around the subject.
Further, according to the first embodiment, when the semi-auto white balance mode is selected by the user, whether or not to determine the color reproduction matrix based on the deviation amount between the preset WB control value and the auto WB control value is determined. Can be switched. Therefore, it is possible to perform color reproduction processing according to the user's request.
[0043]
For example, when the color reproduction matrix is determined based on the deviation amount between the preset WB control value and the auto WB control value, the color reproduction process corresponding to the change in the color temperature of the irradiation light around the subject can be easily performed.
On the other hand, when the color reproduction matrix is not determined based on the amount of deviation between the preset WB control value and the auto WB control value, the image after the color reproduction process is close to the RAW data, and therefore suitable for post-processing using a personal computer or the like. It is. Further, when the color reproduction matrix is not determined based on the deviation amount between the preset WB control value and the auto WB control value, highly stable color reproduction processing can be performed.
[0044]
Further, according to the first embodiment, when the semi-auto white balance mode is selected by the user, the correction content of the preset WB control value is displayed using the display unit 5 to notify the user. Therefore, the user can review the notified correction content and perform a new setting operation.
In the first embodiment, an example in which the upper limit value and the lower limit value of the correction range are input by the user when inputting the correction range during the setting process of the semi-auto white balance mode is shown. Only the upper limit value or only the lower limit value may be used.
[0045]
Thus, white balance adjustment according to the user's request can be performed by increasing the degree of freedom in selecting the correction range.
Alternatively, some correction ranges may be set in advance, and the user may select one correction range from the set correction ranges.
In the first embodiment, an example is shown in which the preset WB control value is automatically corrected based on the amount of deviation between the preset WB control value and the auto WB control value during the semi-auto white balance mode setting process. Before the correction is performed, the correction content may be notified to the user using the display unit 5 or the like, and the correction may be performed after obtaining an instruction to execute the correction by the user.
[0046]
In the first embodiment, when the amount of deviation between the preset WB control value and the auto WB control value is outside the correction range during the semi-auto white balance mode setting process, the preset WB control value is set to the upper limit of the correction range. Although an example of replacement with a white balance control value corresponding to a value or a lower limit value has been shown, the preset WB control value may be used as it is without such replacement, or a predetermined value that falls within the correction range. You may make it multiply by the coefficient of.
[0047]
In the first embodiment, an example in which the correction content of the preset WB control value is displayed on the display unit 5 using the display unit 5 in the setting process of the semi-auto white balance mode has been described. You may make it notify. Further, a warning sound may be emitted when the correction is outside the correction range.
<< Second Embodiment >>
The second embodiment of the present invention will be described below with reference to the drawings.
[0048]
Since the configuration of the electronic camera of the second embodiment is the same as the configuration of the electronic camera 1 of the first embodiment, the description thereof will be omitted. In the following description, the same reference numerals as those of the electronic camera 1 of the first embodiment are used. Do.
In addition, since the flow of shooting in the electronic camera 1 of the second embodiment is almost the same as that of the first embodiment, description thereof is omitted. In the following, the semi-auto white balance mode setting process different from that of the first embodiment will be described in detail with reference to FIG.
[0049]
When the semi-auto white balance mode is selected by a user operation, in step S30, the control unit 3 performs a preset acquisition process as in the first embodiment.
In step S31, the control unit 3 reads the preset WB control value, and in step S32, the control unit 3 reads the latest auto WB control value from a memory (not shown) in the control unit 3.
[0050]
In step S33, the control unit 3 calculates the amount of deviation between the preset WB control value and the auto WB control value, as in the first embodiment.
In step S34, the control unit 3 determines a correction range of the preset WB control value based on the calculated deviation amount.
FIG. 7 shows an example of the LUT used when determining the correction range of the preset WB control value. It is assumed that such an LUT is recorded in advance in a memory (not shown) in the control unit 3.
[0051]
The numbers in the LUT of FIG. 7 represent the amount of deviation of the white balance control values for each color of R (red) and B (blue) and the correction range associated with the amount of deviation.
For example, when the R preset WB control value is 1.3 and the auto WB control value is 1.5, the deviation amount is 1.3−1.5 = −0.2. Therefore, referring to the LUT in FIG. 7, the correction range of the preset WB control value is −10 mired.
[0052]
In step S35 to step S38, the control unit 3 performs the same processing as in step S17 to step S20 of the first embodiment, corrects the preset WB control value, and displays the correction content on the display unit 5.
In step S39, the control unit 3 determines a color reproduction matrix based on the amount of deviation between the preset WB control value and the auto WB control value.
[0053]
The control unit 3 determines the color reproduction matrix based on the deviation amount between the preset WB control value and the auto WB control value and the LUT in FIG.
For example, when the absolute value of the deviation amount is less than 0.3 (FIG. 7A), the control unit 3 uses the preset WB control value and the auto WB control value used when calculating the deviation amount in S39. With reference, the color temperature of the irradiation light before correction and the color temperature of the irradiation light after correction are obtained. Then, a color reproduction matrix that can reproduce the same hue is determined in consideration of the change in the spectral characteristics of the irradiation light based on the change in the color temperature.
[0054]
On the other hand, when the absolute value of the deviation amount is 0.3 or less (FIG. 7B), the control unit 3 uses a predetermined color reproduction matrix.
In step S40, the control unit 3 determines whether or not a release button (not shown) has been pressed.
When the release button is pressed, the control unit 3 ends the series of setting processes. When the release button is not pressed, the control unit 3 returns to step S32 and repeats the processes of steps S32 to S40.
[0055]
That is, the control unit 3 repeats the correction of the preset WB control value and the determination of the color reproduction matrix until the release button is pressed.
As described above, according to the second embodiment, when the semi-auto white balance mode is selected by the user, a deviation amount between the preset WB control value acquired in advance and the auto WB control value calculated continuously. Is calculated, and the correction range of the preset WB control value is determined based on the deviation amount. Then, the preset WB control value is corrected with reference to the determined correction range. Therefore, even when time elapses after the preset is acquired, accurate white balance adjustment corresponding to the amount of change in irradiation light around the subject can be performed.
[0056]
According to the second embodiment, when the semi-auto white balance mode is selected by the user, a deviation amount between the preset WB control value acquired in advance and the continuously calculated auto WB control value is calculated. A color reproduction matrix is determined based on the shift amount. Accordingly, it is possible to perform accurate color reproduction processing that automatically responds to changes in the irradiation light around the subject.
[0057]
In the second embodiment, the example in which the correction of the preset WB control value and the determination of the color reproduction matrix are performed with reference to the LUT has been described. However, either the correction of the preset WB control value or the determination of the color reproduction matrix is performed. May be performed in the same manner as in the first embodiment. That is, the preset WB control value may be corrected using a predetermined correction range, or the color reproduction matrix determination method may be selectable by a user operation.
[0058]
In the second embodiment, the determination content of the color reproduction matrix may be displayed using the display unit 5.
In each of the above embodiments, description has been made using an electronic camera that can acquire one preset WB control value in advance. However, the present invention can also be applied to an electronic camera that can acquire a plurality of preset WB control values. it can. In that case, at the beginning of the setting of the semi-auto white balance mode, the user selects which preset WB control value to use to execute the semi-auto white balance mode among a plurality of preset WB control values acquired in advance. What is necessary is just to add the process to make.
[0059]
In this case, the number of preset acquisitions can be reduced by the user acquiring a plurality of preset WB control values in advance assuming irradiation light that is considered to have a high imaging frequency.
In each of the above embodiments, an example in which the preset acquisition process is performed at the beginning of the setting process of the semi-auto white balance mode has been described. However, the preset acquisition process may be performed before the white balance mode is selected. It may be executed before the electronic camera 1 is turned on (when the electronic camera 1 is used last time).
[0060]
In each of the above embodiments, an example of the semi-auto white balance mode for correcting the preset WB control value has been described. However, the manual WB control value may be corrected. That is, the amount of deviation between the manual WB control value associated with the type of illumination light and the color temperature specified by the user and the auto WB control value is calculated, and the manual WB control value is corrected based on the calculated amount of deviation. You may make it do.
[0061]
【The invention's effect】
As described above, according to the present invention, it is possible to provide an image processing apparatus and an electronic camera that can perform an accurate white balance adjustment corresponding to a change in irradiation light around a subject without frequently performing preset acquisition. can do.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration of an electronic camera according to a first embodiment.
FIG. 2 is a flowchart showing a flow of photographing in the electronic camera of the first embodiment.
FIG. 3 is a flowchart showing a control procedure of the electronic camera at the time of semi-auto white balance mode setting processing.
FIG. 4 is a flowchart showing a control procedure of the electronic camera during preset acquisition processing.
FIG. 5 is a graph showing a relationship between a white balance control value and a color temperature.
FIG. 6 is a flowchart showing a control procedure of the electronic camera during the semi-auto white balance mode setting process.
FIG. 7 is an example of an LUT used when determining a correction range of a preset WB control value.
[Explanation of symbols]
1 Electronic camera
2 Imaging unit
3 Control unit
4 Image processing section
5 display section
6 Recording section
7 Operation part

Claims

Recording means for recording a white balance control value set in advance by a user;
Calculating means for calculating a white balance control value based on the color temperature;
A deviation amount between the white balance control value recorded in the recording means and the white balance control value calculated by the calculation means is calculated, and based on the deviation amount, a white balance control value recorded in the recording means is calculated. Correction means for correcting
An image processing apparatus comprising: white balance adjustment means for performing white balance adjustment on an image to be processed using the white balance control value corrected by the correction means.

The image processing apparatus according to claim 1.
The image processing apparatus, wherein the correction unit limits a correction range of the white balance control value recorded in the recording unit to a predetermined range.

The image processing apparatus according to claim 2,
The image processing apparatus according to claim 1, wherein the correction unit determines the predetermined range independently on a side where the white balance control value recorded in the recording unit becomes larger and smaller.

The image processing apparatus according to claim 2,
The image processing apparatus according to claim 1, wherein the correction unit determines the predetermined range using a color temperature expressed in units of mired.

The image processing apparatus according to claim 1.
Color reproduction processing means for performing color reproduction processing;
An image processing apparatus comprising: a determination unit that determines a color reproduction matrix used in color reproduction processing by the color reproduction processing unit based on the deviation amount calculated by the correction unit.

The image processing apparatus according to claim 1.
Color reproduction processing means for performing color reproduction processing;
Determining means for determining a color reproduction matrix used in the color reproduction processing by the color reproduction processing means,
The image processing apparatus according to claim 1, wherein the determination unit switches whether to determine the color reproduction matrix using the shift amount calculated by the correction unit.

Recording means for recording a white balance control value set in advance by a user;
Imaging means for imaging a subject and generating an image;
Calculating means for calculating a color temperature based on the image generated by the imaging means, and calculating a white balance control value based on the color temperature;
A deviation amount between the white balance control value recorded in the recording means and the white balance control value calculated by the calculation means is calculated, and based on the deviation amount, a white balance control value recorded in the recording means is calculated. Correction means for correcting
An electronic camera comprising: white balance adjustment means for performing white balance adjustment on an image generated by the imaging means using the white balance control value corrected by the correction means.

The electronic camera according to claim 7,
The recording means records a plurality of white balance control values set in advance by the user,
The correction unit calculates a deviation amount between a white balance control value selected by a user and a white balance control value calculated by the calculation unit among a plurality of white balance control values recorded in the recording unit. An electronic camera that corrects a white balance control value selected by the user based on the shift amount.

The electronic camera according to claim 7,
An electronic camera comprising notification means for notifying a user that the white balance control value recorded in the recording means is corrected by the correction means.