JP2010192968A - 画像データ処理装置 - Google Patents

Abstract

【課題】画像の全領域に対応する画像データを用いてホワイトバランス調整用のパラメータを算出する場合、パラメータとして誤った値を算出するという問題を解決する。
【解決手段】画像データ処理装置は、画像データを入力する入力手段と、画像データにおいて、ホワイトバランス調整値の算出に用いない不使用データの有無を判定する判定手段と、不使用データがあると判定された場合に、画像データに対応する画像において不使用データに対応する不使用領域が占有する位置を第１位置情報として確定する位置確定手段と、第１位置情報と画像データとを関連付けて記憶媒体に記録する記録制御手段とを備える。
【選択図】図１

Description

本発明は、画像データ処理装置に関する。

従来から、画像データに付加された付加情報に含まれるパラメータ等を用いて、画像データに対して画像処理を施すカメラが知られている（たとえば特許文献１）。

特開２００３−３２４７４５号公報

しかしながら、画像の全領域に対応する画像データを用いてホワイトバランス調整用のパラメータを算出する場合、パラメータとして誤った値を算出することがある。

請求項１に記載の発明による画像データ処理装置は、画像データを入力する入力手段と、画像データにおいて、ホワイトバランス調整値の算出に用いない不使用データの有無を判定する判定手段と、不使用データがあると判定された場合に、画像データに対応する画像において不使用データに対応する不使用領域が占有する位置を第１位置情報として確定する位置確定手段と、第１位置情報と画像データとを関連付けて記憶媒体に記録する記録制御手段とを備えることを特徴とする。

本発明によれば、画像データにおいて、ホワイトバランス調整値の算出に用いない不使用データがある場合、不使用データに対応する不使用領域が占有する位置と画像データとを関連付けて記録できる。

本発明の実施の形態による電子カメラの要部構成を説明するブロック図 不使用領域を説明する図 ＲＡＷデータファイル生成処理を説明するフローチャート 不使用領域の位置変更を説明する図 不使用領域の位置変更処理を説明するフローチャート 画像処理装置の要部構成を説明するブロック図 画像処理装置におけるＲＡＷデータファイル生成処理を説明するフローチャート

図面を参照して、本発明による画像データ処理装置の実施の形態として電子カメラを用いて説明する。図１は、電子カメラ１００のブロック図である。電子カメラ１００は、図１に示すように、入力スイッチ１０１、レンズ１０２、撮像素子１０３、システム制御部１０４、ＲＡＭ１０５、ＬＣＤ駆動回路１０７、ＬＣＤ１０８、メモリカードスロット１０９および外部インタフェース１１１を有する。

入力スイッチ１０１は使用者によって操作される種々の操作部材に対応して設けられた種々のスイッチを含み、操作部材の操作に応じた操作信号をシステム制御部１０４へ出力する。操作部材は、たとえばレリーズボタンや、各種の設定等を選択操作する時に操作される十字キーや、十字キーにより選択された設定等を決定するための決定ボタン、撮影モードと再生モードとの間で電子カメラ１００の動作を切替えるモード切替ボタン、および再生画像の拡大率を変更する拡大ボタンや縮小ボタン等を含む。

レンズ１０２は、複数の光学レンズ群から構成される。なお、図１ではレンズ１０２を１枚のレンズで代表して表している。撮像素子１０３は、例えばＣＣＤやＣＭＯＳ等により構成される。撮像素子１０３は、後述するシステム制御部１０４の制御に応じて駆動してレンズ１０２を通して入力される被写体像を撮像し、撮像して得た画像信号をシステム制御部１０４へ出力する。撮像素子１０３の撮像面には、それぞれＲ（赤）、Ｇ（緑）およびＢ（青）のカラーフィルタが画素位置に対応するように設けられている。撮像素子１０３がカラーフィルタを通して被写体像を撮像するため、撮像素子１０３から出力される画像信号はＲＧＢ表色系の色情報を有する。

メモリカードスロット１０９は、メモリカード１０９ａが着脱可能なインタフェースである。メモリカードスロット１０９は、システム制御部１０４の制御に基づいて、画像ファイルをメモリカード１０９ａに書き込んだり、メモリカード１０９ａに記録されている画像ファイルを読み出すインタフェース回路である。メモリカード１０９ａはコンパクトフラッシュ（登録商標）やＳＤカードなどの半導体メモリカードである。

ＬＣＤ駆動回路１０７は、システム制御部１０４の命令に基づいてＬＣＤ１０８を駆動する回路である。ＬＣＤ１０８はアスペクト比が、たとえば縦３：横４の液晶表示パネルである。ＬＣＤ１０８は、液晶ビューファインダとして用いられるとともに、メモリカード１０９ａに記録されている画像データに基づいてシステム制御部１０４で作成された表示画像データに対応する画像の表示を行う。また、ＬＣＤ１０８は、画像ファイルに関連する各種情報（シャッタ速度、絞り値、ＩＳＯ感度、ファイル名など）の表示を行う。また、ＬＣＤ１０８は、入力スイッチ１０１の操作に基づき、電子カメラ１００の各種設定メニュー画面の表示を行う。

設定メニューの内容としては、撮影モードの設定、ホワイトバランスの設定、画質（ファイン、ノーマル等）の設定等がある。画質がファインに設定された場合、後述するように画像データに対して圧縮処理が施されていないＲＡＷデータファイルが記録される。また、ホワイトバランスの設定として、マニュアルモード（MWB）、自動調整モード（AWB）等を含む。マニュアルモードにおいては、システム制御部１０４は、選択された光源条件（屋外、日陰、照明の種類）に応じた固定のゲインデータを使用して、画像データに対してホワイトバランス調整処理を施す。自動調整モード（AWB）においては、システム制御部１０４は、撮像素子１０３から出力された画像信号に基づいて光源の色温度を推定し、推定した色温度に応じたゲインデータを算出して、画像データに対してホワイトバランス調整処理を施す。なお、自動調整モード（AWB）における処理については詳細を後述する。

ＲＡＭ１０５は、画像処理、画像圧縮処理の途中や処理後のデータを一時的に格納するバッファメモリとして使用される揮発性記憶媒体である。外部インタフェース１１１は、システム制御部１０４の指令により、たとえばＵＳＢインタフェースケーブル（不図示）等の所定のケーブルや無線伝送路を介して接続される他の外部機器（たとえば、パーソナルコンピュータ）との間で、双方向通信によるデータの送受を行う。

システム制御部１０４は、ＣＰＵやメモリその他の周辺回路によって構成され、電子カメラ１００を構成する各部に対して制御信号を出力して、電子カメラ１００の動作を制御する。また、システム制御部１０４は、画像取得部１０４ａ、領域判定部１０４ｂ、領域確定部１０４ｃ、算出部１０４ｄ、画像処理部１０４ｅ、ファイル生成部１０４ｆおよび再生部１０４ｇを機能的に備えている。

画像取得部１０４ａは、入力スイッチ１０１からの操作信号に基づいて、使用者によってレリーズボタンが全押しされたことを検出すると、撮像素子１０３を制御して被写体像を撮像した画像信号を出力させる。画像取得部１０４ａは、取得した画像信号に対してＡ／Ｄ変換等を施してデジタル画像信号を生成する。そして、画像取得部１０４ａは、生成したデジタル画像信号をＲＡＭ１０５に格納する。

画像処理部１０４ｅは、画像取得部１０４ａにより生成されたデジタル画像信号に対して、色補間処理、間引き処理などの公知の画像処理を施して原画像データを生成する。そして、画像処理部１０４ｅは、生成した原画像データに対して圧縮処理を行い、所定の画像形式、例えばＪｐｅｇ形式に圧縮して画像データを生成する。画像データは、画像処理部１０４ｅによりＲＡＭ１０５に格納される。なお、上述した画質がファインに設定されている場合や後述する自動調整モード（AWB）が設定されている場合は、画像処理部１０４ｅは、本撮影で画像取得部１０４ａにより取得されたデジタル画像信号を用いて、圧縮処理の施されていないＲＡＷデータ（本画像データ）を生成する。

領域判定部１０４ｂは、自動調整モード（AWB）において取得されたＲＡＷデータを用いてホワイトバランス調整値の算出に用いない不使用データの有無を判定する。領域確定部１０４ｃは、領域判定部１０４ｂにより判定された不使用データに対応する不使用領域が画像上で占有する位置を示す位置情報を確定する。算出部１０４ｄは、ＲＡＷデータから不使用データを除外したＲＡＷデータ（調整値用画像データ）を用いてホワイトバランス調整値を算出する。なお、領域判定部１０４ｂ、領域確定部１０４ｃおよび算出部１０４ｄについては後に詳細に説明する。

ファイル生成部１０４ｆは、画像データに種々の付加情報を付加して撮像画像ファイルを生成する。例えば、ファイル生成部１０４ｆは、ＲＡＭ１０５に格納された画像データを用いて、付加情報を付加情報部に格納したＥｘｉｆ形式の撮像画像ファイルを生成する。また、画質がファインに設定されている場合や自動調整モード（AWB）が設定されている場合は、ファイル生成部１０４ｆは、ＲＡＷデータについても同様に、付加情報を付加してＲＡＷデータファイルを生成する。ここで、付加情報部に付加される付加情報には、一般的には、画像撮影日時に関する情報や画像の撮影条件に関する情報、ホワイトバランス調整値（ゲイン）が含まれる。

ファイル生成部１０４ｆは、自動調整モード（AWB）において取得されたＲＡＷデータファイルと、後述する領域確定部１０４ｃにより確定された位置情報との関連付けを行う。すなわち、ファイル生成部１０４ｆは、ＲＡＷデータファイルの付加情報部に不使用データに対応する不使用領域が画像上で占有する位置を示す位置情報を記録する。ファイル生成部１０４ｆは、上述のようにして生成した撮像画像ファイルやＲＡＷデータファイルを、メモリカードスロット１０９に挿入されているメモリカード１０９ａ内に記録する。

再生部１０４ｇは、ＬＣＤ駆動回路１０７に対して各種画像データを出力して、ＬＣＤ１０８に再生画像を表示させる。使用者によるモード切替ボタンの操作により再生モードが設定されると、再生部１０４ｇは、メモリカード１０９ａに記録された画像データを読み出す。再生部１０４ｇは、読み出した画像データを原画像データに伸張し、必要に応じてＬＣＤ１０８の表示解像度にリサイズしてＬＣＤ駆動回路１０７に出力する。

以下、自動調整モード（AWB）が設定された場合の電子カメラ１００の動作について説明する。自動調整モード（AWB）においては、本撮影によりＲＡＷデータファイルが取得されるとともに、ＲＡＷデータファイルに含まれるＲＡＷデータに基づいてホワイトバランス調整値が算出される。さらに、電子カメラ１００は、ＲＡＷデータのうちホワイトバランス調整値の算出に用いられない不使用データがある場合は、ＲＡＷデータにおいて不使用データが占有する位置（座標）を、位置情報としてＲＡＷデータファイルと関連付けする。

自動調整モード（AWB）の設定時に、画像取得部１０４ａは、入力スイッチ１０１からの操作信号に基づいてレリーズボタンの全押し操作を検出すると、上述のようにして、撮像素子１０３を制御してデジタル画像信号を取得する。デジタル画像信号がＲＡＭ１０５に格納されると、画像処理部１０４ｅは、デジタル画像信号に対して、色補間処理および間引き処理を施してＲＡＷデータを生成する。

領域判定部１０４ｂは、生成されたＲＡＷデータの色情報、すなわちＲデータ、ＧデータおよびＢデータに基づいて、公知の技術を用いてＲゲイン（＝Ｇ平均値／Ｒ平均値）およびＢゲイン（＝Ｇ平均値／Ｂ平均値）を算出する。そして、領域判定部１０４ｂは、算出されたＲゲインおよびＢゲインに基づいて、ＲＡＷデータのうち、無彩色（たとえば肌色）らしい色情報を有する画素（無彩色画素）を検出する。この場合、領域判定部１０４ｂは、公知の技術を用いて、所定の注目画素におけるＲゲインおよびＢゲインがそれぞれ所定の下限閾値と上限閾値との間に含まれているときに、注目画素が無彩色らしい色情報を有すると判定する。なお、この下限閾値および上限閾値は予めシステム制御部１０４内の所定のメモリ（不図示）に記憶されているものとする。

領域判定部１０４ｂは、全ての注目画素について無彩色画素であるか否か判定した後、無彩色画素が含まれる領域を、ホワイトバランス調整値の算出に用いない不使用領域として判定する。すなわち、領域判定部１０４ｂは、不使用領域に含まれる画素から出力される画像信号に対応するＲＡＷデータを、ホワイトバランス調整値の算出に用いない不使用データとして判定する。図２に、無彩色画素の分布の一例を示す。図２（ａ）に示すように、人物の顔を撮影した画像Ｐ１に対して、領域判定部１０４ｂは、図２（ｂ）の符号ｐで示す複数の画素のそれぞれを無彩色画素として判定する。そして、領域判定部１０４ｂは、無彩色画素を包含する領域（たとえば矩形領域）を不使用領域Ｒとして判定する。

領域確定部１０４ｃは、領域判定部１０４ｂにより判定された不使用領域ＲがＲＡＷデータに対応する画像上で占有する位置を示す座標値を位置情報として確定する。すなわち、領域確定部１０４ｃは、図２（ｂ）における不使用領域Ｒの左上端部の位置ＲＬ１の座標値（ｘ１、ｙ１）および右下端部の位置ＲＲ１の座標値（ｘ２、ｙ２）を位置情報としてＲＡＭ１０５に格納する。

算出部１０４ｄは、ＲＡＷデータのうち、上記の座標（ｘ１，ｙ１）および（ｘ２，ｙ２）により規定される領域に含まれる不使用データを除外したＲＡＷデータ、すなわち調整値用画像データを用いて、ホワイトバランス調整値、すなわちゲインを算出する。算出部１０４ｄは、算出したホワイトバランス調整値をＲＡＭ１０５に格納する。そして、ファイル生成部１０４ｆは、上述したように、ＲＡＭ１０５に格納された位置情報およびホワイトバランス調整値を記録した付加情報部をＲＡＷデータに付加してＲＡＷデータファイルを生成する。そして、ファイル生成部１０４ｆは、生成したＲＡＷデータファイルを、メモリカードスロット１０９に挿入されているメモリカード１０９ａ内に記録する。

図３のフローチャートを用いて、ＲＡＷデータファイルの生成処理について説明する。図３の処理を行うプログラムはシステム制御部１０４内の図示しないメモリに格納されている。このプログラムは、使用者により自動調整モード（AWB）が設定された状態で、レリーズボタンの操作に応じて入力スイッチ１０１からの操作信号がシステム制御部１０４に入力されると起動される。

ステップＳ１０１においては、システム制御部１０４は撮影処理を行い、ステップＳ１０２へ進む。すなわち、画像取得部１０４ａは、撮像素子１０３を制御して被写体像を撮像したデジタル画像信号を取得する。そして、画像処理部１０４ｅは、本撮影で画像取得部１０４ａにより取得されたデジタル画像信号を用いて、圧縮処理の施されていないＲＡＷデータ（本画像データ）を生成する。ステップＳ１０２においては、領域判定部１０４ｂは、不使用データの有無を判定する。不使用データがある場合は領域判定部１０４ｂによりステップＳ１０２が肯定判定されてステップＳ１０３へ進む。ステップＳ１０３においては、領域確定部１０４ｃは、不使用データに対応する不使用領域Ｒの位置情報を確定して、ＲＡＭ１０５へ格納してステップＳ１０４へ進む。

不使用データが存在しない場合は、領域判定部１０４ｂによりステップＳ１０２が否定判定されてステップＳ１０４へ進む。ステップＳ１０４においては、算出部１０４ｄはホワイトバランス調整値、すなわちゲインを算出し、算出したホワイトバランス調整値をＲＡＭ１０５に格納してステップＳ１０５へ進む。このとき、ステップＳ１０２が肯定判定されている場合は、算出部１０４ｄは、調整値用画像データを用いてホワイトバランス調整値を算出する。ステップＳ１０２が否定判定されている場合は、算出部１０４ｄは、全てのＲＡＷデータを用いてホワイトバランス調整値を算出する。

ステップＳ１０５においては、ファイル生成部１０４ｆは、ＲＡＷデータファイルを生成してメモリカード１０９ａに記録して処理を終了する。このとき、ステップＳ１０２が肯定判定されている場合は、ファイル生成部１０４ｆは、領域確定部１０４ｃにより確定された不使用領域Ｒの位置情報と、算出部１０４ｄにより調整値用画像データを用いて算出されたホワイトバランス調整値とをＲＡＷデータファイルの付加情報部に記録する。ステップＳ１０２が否定判定されている場合は、ファイル生成部１０４ｆは、算出部１０４ｄにより全てのＲＡＷデータを用いて算出されたホワイトバランス調整値をＲＡＷデータファイルの付加情報部に記録する。

次に、電子カメラ１００によるＲＡＷデータファイルに対応する画像の表示処理について説明する。使用者によるモード切替ボタンの操作に応じて再生モードが設定されると、システム制御部１０４の再生部１０４ｇは、メモリカードインタフェース１０９を介してメモリカード１０９ａに記録されたＲＡＷデータファイルをＲＡＭ１０５に読み出す。

再生部１０４ｇは、読み出したＲＡＷデータファイルのＲＡＷデータに対して、公知の色補間処理を施す。再生部１０４ｇは、色補間処理を施したＲＡＷデータの複製を生成し、ＲＡＷデータファイルに含まれていたＲＡＷデータとは別に複製ＲＡＷデータとしてＲＡＭ１０５に格納する。そして、再生部１０４ｇは、ＲＡＷデータファイルの付加情報部に記録されたホワイトバランス調整値、すなわちゲインを読み出す。再生部１０４ｇは、読み出したホワイトバランス調整値を用いて、色補間処理の施されたＲＡＷデータに対してホワイトバランス調整処理を施して画像データを生成する。すなわち、再生部１０４ｇは、赤色光、青色光および緑色光に対応するＲＡＷデータのうち、赤色光および青色光に対応するＲＡＷデータのそれぞれに対して、ホワイトバランス調整用のＲゲイン（＝Ｇ平均値／Ｒ平均値）およびＢゲイン（＝Ｇ平均値／Ｂ平均値）をかけ合わせる。さらに、再生部１０４ｇは、ホワイトバランス調整の施された画像データに対して、たとえばコントラストの調整等の色補正処理を施して表示用画像データを生成し、ＬＣＤ駆動回路１０７に出力してＬＣＤ１０８に表示用画像データに対応する画像を表示させる。

本実施の形態の電子カメラ１００においては、上記のようにして表示された画像に対応するＲＡＷデータファイルと関連付けられた位置情報に対応する不使用データの領域（不使用領域Ｒ）を、使用者の所望する位置に設定できる。不使用領域Ｒに含まれない領域に無彩色らしい被写体（無彩色被写体）が存在する場合、この無彩色被写体に関する色情報がホワイトバランス調整値に加味されているので、適正なホワイトバランス調整値が算出されていないことがある。このような場合、使用者は、不使用領域Ｒに含まれていない無彩色被写体が不使用領域Ｒに含まれるように、不使用領域Ｒの位置を変更して、新たな不使用領域Ｒを設定することができる。そして、電子カメラ１００は、新たに設定された不使用領域Ｒに対応する不使用データを除外したＲＡＷデータ（調整値用画像データ）を用いて新たにホワイトバランス調整値を算出することができる。以下、詳細に説明する。なお、以下の説明においては、符号Ｒ１を位置変更操作前の不使用領域に、符号Ｒ２を位置変更操作後の不使用領域に付与し、不使用領域を総称する場合に符号Ｒを用いる。

再生部１０４ｇは、入力スイッチ１０１から不使用領域Ｒの位置変更を指示する信号（位置変更指示信号）を入力すると、ＲＡＷデータファイルの付加情報部に記録された位置情報を読み出す。そして、再生部１０４ｇは、ＬＣＤ駆動回路１０７を介して、読み出した位置情報に対応する不使用領域Ｒ１を示す指標をＬＣＤ１０８に表示中の画像に重畳して表示させる。図４（ａ）にＬＣＤ１０８の表示の一例として、ＲＡＷデータに対応する画像Ｐ２と不使用領域Ｒ１を示す指標として、たとえば矩形枠Ｗ１が表示された場合を示す。なお、位置変更指示信号は、たとえばＬＣＤ１０８に表示された画像に重畳して表示されたコマンドボタンを、使用者が十字キーを用いて選択操作を行い、決定ボタンによる決定操作等を行うことにより、入力スイッチ１０１から出力される。

図４（ａ）に示すように表示された画像においては、不使用領域Ｒ１以外に無彩色被写体Ｓ１（たとえば人物の顔）が存在するものとして説明する。このような場合に、使用者は、無彩色被写体Ｓ１を含むように、不使用領域Ｒの位置を変更操作し、確定したものとする。なお、不使用領域Ｒの位置変更操作は、使用者がたとえば十字キーを操作することにより行うものとする。さらに、不使用領域Ｒの大きさを変更する場合は、使用者がたとえば拡大ボタンもしくは縮小ボタンを操作することにより行うものとする。そして、使用者が不使用領域Ｒ１の位置を変更した後、たとえば決定ボタンを操作すると矩形枠Ｗ２の領域が位置変更後の新たな不使用領域Ｒ２として確定される。この場合の表示の一例を、図４（ｂ）に示す。

入力スイッチ１０１から新たな不使用領域Ｒ２が確定されたことを示す信号（領域確定信号）を入力すると、領域確定部１０４ｃは、新たな不使用領域Ｒ２に対応する不使用データの位置を確定する。すなわち、領域確定部１０４ｃは、ＬＣＤ１０８における矩形枠Ｗ２の左上端ＲＬ２の座標（ｘ３，ｙ３）および矩形枠Ｗ２の右下端ＲＲ２の座標（ｘ４，ｙ４）のそれぞれを、位置情報としてＲＡＭ１０５に格納する。

算出部１０４ｄは、ＲＡＷデータのうち、上記の座標（ｘ３，ｙ３）および（ｘ４，ｙ４）により規定される不使用領域Ｒ２に対応する不使用データを除外したＲＡＷデータ（調整値用画像データ）を用いてホワイトバランス調整値、すなわちゲインを算出する。算出部１０４ｄは、新たに算出したホワイトバランス調整値をＲＡＭ１０５に格納する。そして、再生部１０４ｇは、新たに算出したホワイトバランス調整値を用いて、複製ＲＡＷデータに対して、ホワイトバランス調整処理を施して画像データを生成する。そして、再生部１０４ｇは、生成した画像データに基づいて表示用画像データを生成し、ＬＣＤ駆動制御回路１０７に出力してＬＣＤ１０８に表示用画像データに対応する画像を表示させる。このとき、再生部１０４ｇは、ＬＣＤ１０８に、図４（ｃ）に示すようにホワイトバランス確定指示のためのコマンドボタンＣ１を画像に重畳して表示させる。

使用者が、たとえば十字キーを操作して図４（ｃ）に示すコマンドボタンＣ１、すなわち「ＹＥＳ」を選択し、決定ボタンを操作すると、入力スイッチ１０１はシステム制御部１０４へホワイトバランス確定指示を示す確定信号を出力する。確定信号を入力すると、ファイル生成部１０４ｆは、ＲＡＷデータファイルの付加情報部に記録されているホワイトバランス調整値を、算出部１０４ｄにより新たに算出されたホワイトバランス調整値に更新して記録する。さらに、ファイル生成部１０４ｆは、ＲＡＷデータファイルの付加情報部に記録されている位置変更操作前の不使用領域Ｒ１の座標を、位置変更操作後の不使用領域Ｒ２の座標（ｘ３，ｙ３）、（ｘ４，ｙ４）に更新して、新たな位置情報として記録する。

図５のフローチャートを用いて、不使用領域Ｒの位置変更処理について説明する。図５の処理を行うプログラムはシステム制御部１０４内の図示しないメモリに格納されている。このプログラムは、入力スイッチ１０１から位置変更指示信号を入力すると起動され、システム制御部１０４により実行される。

ステップＳ２０１においては、再生部１０４ｇは、メモリカード１０９ａに記録されたＲＡＷデータファイルをＲＡＭ１０５に読み出してステップＳ２０２へ進む。ステップＳ２０２においては、再生部１０４ｇは、ＲＡＷデータファイルのＲＡＷデータに対して色補間処理を施してステップＳ２０３へ進む。このとき、再生部１０４ｇは、複製ＲＡＷデータを生成してＲＡＭ１０５に格納する。ステップＳ２０３においては、再生部１０４ｇは、ＲＡＷデータファイルの付加情報部に記録されたホワイトバランス調整値を読み出す。そして、再生部１０４ｇは、このホワイトバランス調整値を用いて、色補間処理の施されたＲＡＷデータに対してホワイトバランス調整処理を施して画像データを生成し、ステップＳ２０４へ進む。

ステップＳ２０４においては、再生部１０４ｇは、画像データに対してたとえばコントラスト調整等の色補正処理を施して、ステップＳ２０５へ進む。ステップＳ２０５においては、再生部１０４ｇは、色補正処理の施された表示用画像データを生成してＬＣＤ駆動回路１０７へ出力し、ＬＣＤ１０８に表示用画像データに対応する画像を表示させてステップＳ２０６へ進む。ステップＳ２０６においては、再生部１０４ｇは、使用者による不使用領域Ｒの位置変更操作の有無を判定する。不使用領域Ｒの位置変更操作の指示があった場合、すなわち入力スイッチ１０１から位置変更指示信号を入力した場合は、再生部１０４ｇによりステップＳ２０６が肯定判定されてステップＳ２０７へ進む。位置変更指示信号を入力しない場合は、再生部１０４ｇによりステップＳ２０６が否定判定されて、位置変更指示信号を入力するまで待機する。

ステップＳ２０７においては、再生部１０４ｇは、ＲＡＷデータファイルの付加情報部に不使用領域Ｒ１の位置情報が記録されているか否かを判定する。位置情報が記録されている場合は、再生部１０４ｇによりステップＳ２０７が肯定判定されてステップＳ２０８へ進む。ステップＳ２０８においては、再生部１０４ｇは、位置情報をＬＣＤ駆動回路１０７へ出力し、不使用領域Ｒ１に対応する指標を示す矩形枠Ｗ１を、ＬＣＤ１０８に表示中の画像に重畳して表示させてステップＳ２０９へ進む。ＲＡＷデータファイルの付加情報部に位置情報が記録されていない場合は、再生部１０４ｇによりステップＳ２０７が否定判定されてステップＳ２０９へ進む。

ステップＳ２０９においては、領域確定部１０４ｃは、不使用領域Ｒ２の確定操作が行われたか否かを判定する。使用者により不使用領域Ｒ２が選択され確定操作が行われた場合、すなわち入力スイッチ１０１から領域確定信号を入力した場合は、領域確定部１０４ｃによりステップＳ２０９が肯定判定されてステップＳ２１０へ進む。このとき、領域確定部１０４ｃは、新たな不使用領域Ｒ２の座標値、すなわち位置情報をＲＡＭ１０５に格納する。入力スイッチ１０１から領域確定信号を入力しない場合は、領域確定部１０４ｃによりステップＳ２０９が否定判定されて、領域確定信号を入力するまで待機する。

ステップＳ２１０においては、算出部１０４ｄは、新たに確定された不使用データを除外したＲＡＷデータ、すなわち調整用画像データを用いて、新たにホワイトバランス調整値を算出する。そして、算出部１０４ｄは、新たに算出されたホワイトバランス調整値をＲＡＭ１０５に格納してステップＳ２１１へ進む。

ステップＳ２１１においては、再生部１０４ｇは、ステップＳ２１０において算出部１０４ｄにより算出されたホワイトバランス調整値を用いて、複製ＲＡＷデータに対してホワイトバランス調整処理を施してステップＳ２１２へ進む。ステップＳ２１２（色補正処理）およびステップＳ２１３（画像表示）の各処理は、ステップＳ２０４（色補正処理）およびステップＳ２０５（画像表示）の各処理と同様である。

ステップＳ２１４においては、ファイル生成部１０４ｆは、ホワイトバランス確定指示の有無を判定する。ホワイトバランス確定指示があった場合、すなわち入力スイッチ１０１から確定信号を入力した場合、ファイル生成部１０４ｆによりステップＳ２１４が肯定判定されてステップＳ２１５へ進む。入力スイッチ１０１から確定信号を入力しない場合は、ファイル生成部１０４ｆによりステップＳ２１４が否定判定されてステップＳ２０６へ戻る。ステップＳ２１５においては、ファイル生成部１０４ｆは、ステップＳ２１０で算出部１０４ｄにより算出されたホワイトバランス調整値をＲＡＷデータファイルの付加情報部に更新して記録する。さらに、ファイル生成部１０４ｆは、新たな不使用領域Ｒ２の位置情報、すなわち座標値をＲＡＷデータファイルの付加情報部に記録して、処理を終了する。

以上で説明した実施の形態によれば、以下の作用効果が得られる。
（１）領域判定部１０４ｂは、入力したＲＡＷデータにおいて、ホワイトバランス調整値の算出に用いない不使用データの有無を判定し、領域確定部１０４ｃは、ＲＡＷデータに対応する画像において不使用データに対応する不使用領域Ｒが占有する位置を位置情報として確定するようにした。そして、ファイル生成部１０４ｆは、位置情報とＲＡＷデータとを関連付けてＲＡＷデータファイルを生成して、メモリカード１０９ａに記録するようにした。したがって、ＲＡＷデータに対して適正なホワイトバランス処理が施されていない場合に、不使用領域Ｒが画像上で占有する位置、すなわち位置情報に基づいて、使用者は適正なホワイトバランス調整値が算出されていない原因を確認できるので利便性が高まる。

（２）算出部１０４ｄは、不使用領域Ｒを除外した領域に対応する調整値用画像データに基づいて、ホワイトバランス調整値を算出するようにした。無彩色の領域を含む画像において全ての画像領域に対応するＲＡＷデータを用いてホワイトバランス調整値を算出すると、適正なホワイトバランス調整値が算出されていないことがある。したがって、無彩色の領域、すなわち不使用領域Ｒに対応する不使用データを用いずにホワイトバランス調整値を算出できるので、高画質の画像が得られる。

（３）再生部１０４ｇは、算出部１０４ｄにより算出されたホワイトバランス調整値に基づいて、ＲＡＷデータに対してホワイトバランス調整処理を施して、表示用画像データを生成し、表示用画像データに対応する画像と不使用領域Ｒ１に基づく指標を示す矩形枠Ｗ１をＬＣＤ１０８に表示するようにした。したがって、使用者は、現在のホワイトバランス調整値の算出に用いられていない不使用領域Ｒ１を画面上で確認できるので、不使用領域Ｒを変更する際の利便性が向上する。

（４）使用者による操作部材の操作に応じて、入力スイッチ１０１は、ＲＡＷデータに対応する画像上における不使用領域Ｒの位置を変更するための位置変更操作を受け付けるようにした。そして、算出部１０４ｄは、位置変更操作により変更された不使用領域Ｒ２を除外した領域に対応する調整値用画像データに基づいて新たにホワイトバランス調整値を算出するようにした。さらに、再生部１０４ｇは、新たに算出したホワイトバランス調整値に基づいてＲＡＷデータに対してホワイトバランス調整処理を施して新たに表示用画像データを生成し、新たに生成した表示用画像データに対応する画像をＬＣＤ１０８に表示させるようにした。使用者は、ＲＡＷデータに対応する画像のうち無彩色の領域を不使用領域Ｒとして設定することができる。その結果、適正なホワイトバランス調整値が得られていない場合には、新たに適正なホワイトバランス調整値を算出し、ホワイトバランス調整処理を施すことができるので、画質を向上させることができる。

（５）ファイル生成部１０４ｆは、算出部１０４ｄにより新たに算出されたホワイトバランス調整値をＲＡＷデータファイルの付加情報部に記録するようにした。したがって、したがって、次回以降に画像を表示する際に、修正済のホワイトバランス調整値を用いてホワイトバランス調整処理が施されるので、高画質の画像を得ることができる。

（６）領域確定部１０４ｃは、位置変更操作により変更された不使用領域Ｒ２が占有する位置を示す位置情報を確定し、ファイル生成部１０４ｆは、位置情報とＲＡＷデータファイルとを関連付けてメモリカード１０９ａに記録するようにした。したがって、新たなホワイトバランス調整値の算出に用いられていない不使用領域Ｒ２の位置を確認できるので、使用者が再び不使用領域Ｒを変更する際の利便性が向上する。

以上の実施の形態の説明においては、画像データ処理装置として電子カメラ１００を用いたが、たとえばパーソナルコンピュータ等により構成される画像処理装置であってもよい。図６は画像処理装置２００（たとえばパーソナルコンピュータ）の一例を示す概略制御ブロック図である。画像処理装置２００は、電子カメラ１００で撮像した被写体像の画像データの表示や編集、画像データの保存を行う。画像処理装置２００は、制御回路２０１、ＨＤＤ２０２、モニタ制御回路２０３、モニタ２０４、メモリ２０５、入力装置２０６、メモリカードインタフェース２０７、および外部インタフェース２１２を備える。外部インタフェース２１２は、所定のケーブルや無線伝送路を介して電子カメラ１００等の外部装置とデータ通信を行う。

入力装置２０６は、使用者によって操作され、たとえばキーボードやマウスなどで構成される。ＨＤＤ２０２には、たとえば電子カメラ１００で撮影した動画や静止画に対応する画像ファイルなどが記録されている。外部インタフェース２１２は、たとえば画像処理装置２００に電子カメラ１００などの外部機器を接続するＵＳＢインタフェースである。画像処理装置２００は、メモリカードインタフェース２０７や外部インタフェース２１２を介してメモリカード１０９ａや外部機器から画像ファイルなどを入力する。入力された画像ファイルは、制御回路２０１によりＨＤＤ２０２に記録される。上述した電子カメラ１００で生成されたＲＡＷデータファイルも、同様にＨＤＤ２０２に記録される。

制御回路２０１は、画像処理装置２００の制御を行うマイクロコンピュータであり、ＣＰＵやＲＯＭその他周辺回路により構成される。制御回路２０１は、領域判定部２０１ａ、領域確定部２０１ｂ、算出部２０１ｃ、ファイル生成部２０１ｄおよび再生部２０１ｅを機能的に備える。メモリ２０５は制御回路２０１のワーキングメモリであり、たとえばＳＤＲＡＭにより構成される。モニタ２０４は、たとえば液晶モニタやＣＲＴモニタである。モニタ２０４には、モニタ制御回路２０３に制御されて、表示用の画像データに対応する画像および各種設定を行うためのメニュー画面などが表示される。

次に、画像処理装置２００によるＲＡＷデータファイル生成処理について説明する。画像処理装置２００によりＲＡＷデータファイルを生成する場合、使用者によりファイル生成ソフトを起動して実行する。このファイル生成ソフトは、画像処理装置２００の制御回路２０１内の不図示メモリに記録されている。使用者による入力装置２０６の操作に応じてファイル生成ソフトの起動が指示されると、制御回路２０１はファイル生成ソフトを起動する。ファイル生成ソフトが起動されると、制御回路２０１のファイル生成部２０１ｄは、ＨＤＤ２０２に記録されたＲＡＷデータファイルをメモリ２０５に読み出す。

領域判定部２０１ａは、電子カメラ１００の領域判定部１０４ｂと同様にして、無彩色画素を包含する領域（たとえば矩形領域）を不使用領域Ｒとして判定する。そして、領域確定部２０１ｂは、電子カメラ１００の領域確定部１０４ｃと同様にして、領域判定部２０１ａにより判定された不使用領域ＲがＲＡＷデータにおいて占有する位置を示す座標値を位置情報として確定し、位置情報をメモリ２０５に格納する。算出部２０１ｃは、電子カメラ１００の算出部１０４ｄと同様にして、ＲＡＷデータのうち、不使用領域Ｒに対応する不使用データを除外したＲＡＷデータ（調整値用画像データ）を用いて、ホワイトバランス調整値、すなわちゲインを算出し、メモリ２０５に格納する。ファイル生成部２０１ｄは、電子カメラ１００のファイル生成部１０４ｆと同様にして、ＲＡＷデータにメモリ２０５に格納された位置情報およびホワイトバランス調整値を記録した付加情報部を付加してＲＡＷデータファイルを生成する。そして、ファイル生成部２０１ｄは、生成したＲＡＷデータファイルを、ＨＤＤ２０２に記録する。

図７のフローチャートを用いて、画像のファイル生成処理について説明する。図７の処理を行うプログラムは制御回路２０１内の図示しないメモリに格納されている。このプログラムは、使用者による入力装置２０６の操作に応じて画像表示ソフトの起動が指示されると起動され、制御回路２０１により実行される。
ステップＳ３０１においては、ファイル生成部２０１ｄは、ＨＤＤ２０１に記録された付加画像ファイルをメモリ２０５に読み出してステップＳ３０２へ進む。ステップＳ３０２（不使用データの有無判定）からステップＳ３０５（ＲＡＷデータファイル生成、記録）までの各処理は、図３のステップＳ１０２（不使用データの有無判定）からステップＳ１０５（ＲＡＷデータファイル生成、記録）までの各処理と同様である。

次に、画像処理装置２００によるＲＡＷデータファイルに対応する画像の表示処理について説明する。画像処理装置２００により画像を表示する場合、使用者により画像表示ソフトを起動して実行する。この画像表示ソフトは、画像処理装置２００の制御回路２０１内の不図示メモリに記録されている。使用者による入力装置２０６の操作に応じて画像表示ソフトの起動が指示されると、制御回路２０１は画像表示ソフトを起動する。画像表示ソフトが起動されると、制御回路２０１の再生部２０１ｅは、ＨＤＤ２０２に記録されたＲＡＷデータファイルをメモリ２０５に読み出す。

再生部２０１ｅは、電子カメラ１００の再生部１０４ｇと同様の処理を行う。すなわち、再生部２０１ｅは、読み出したＲＡＷデータファイルのＲＡＷデータに対して公知の色補間処理を施し、複製ＲＡＷデータを生成してメモリ２０５に格納する。再生部２０１ｅは、ＲＡＷデータファイルの付加情報部に記録されたホワイトバランス調整値を読み出して、ＲＡＷデータに対してホワイトバランス調整処理を施して画像データを生成する。さらに、再生部２０１ｅは、画像データに対して色補正処理を施して表示用画像データを生成し、モニタ制御回路２０３に出力してモニタ２０４に表示用画像データに対応する画像を表示させる。

画像処理装置２００においては、電子カメラ１００と同様に、不使用領域Ｒの位置変更が可能となるように構成されている。再生部２０１ｅは、入力装置２０６から不使用領域Ｒの位置変更を指示する信号（位置変更指示信号）を入力すると、ＲＡＷデータファイルの付加情報部に記録された位置情報を読み出す。そして、再生部２０１ｅは、モニタ制御回路２０３を介して、読み出した位置情報に対応する不使用領域Ｒを示す指標をモニタ２０４に表示中の画像に重畳して表示させる。なお、位置変更指示信号は、たとえばモニタ２０４に表示された画像に重畳して表示されたコマンドボタンを、入力装置２０６のマウス等を用いて使用者がクリック等の操作をすることで行われる。

電子カメラ１００において図４（ａ）を用いて説明した場合と同様に、使用者は、無彩色被写体Ｓ１を含むように、不使用領域Ｒの位置を変更操作し、確定する。なお、不使用領域Ｒの位置変更は、使用者が入力装置２０６のマウスをクリックアンドドラッグ操作することにより行うものとする。そして、使用者が不使用領域Ｒの位置を変更操作してからマウスをクリック操作すると不使用領域Ｒ２が確定される。

入力装置２０６から新たな不使用領域Ｒ２が確定されたことを示す信号（領域確定信号）を入力すると、領域確定部２０１ｂは、電子カメラ１００の領域確定部１０４ｃと同様にして、新たな不使用領域Ｒ２に対応する不使用データの位置を確定する。そして、領域確定部２０１ｂは、不使用領域Ｒ２の位置情報をメモリ２０５に格納する。

算出部２０１ｃは、電子カメラ１００の算出部１０４ｄと同様に、ＲＡＷデータのうち、不使用領域Ｒ２に対応する不使用データを除外した調整値用画像データを用いてホワイトバランス調整値、すなわちゲインを算出する。そして、算出部２０１ｃは、新たに算出したホワイトバランス調整値をメモリ２０５に格納する。再生部２０１ｅは、新たに算出したホワイトバランス調整値を用いて、複製ＲＡＷデータに対して、ホワイトバランス調整処理を施して画像データを生成する。そして、電子カメラ１００において図４（ｂ）を用いて説明した場合と同様に、再生部２０１ｅは、生成した画像データに基づいて表示用画像データを生成し、モニタ制御回路２０３に出力してモニタ２０４に表示用画像データに対応する画像を表示させる。

ファイル生成部２０１ｄは、電子カメラ１００のファイル生成部１０４ｆと同様の処理を行う。すなわち、ファイル生成部２０１ｄは、入力装置２０６から確定信号を入力すると、ＲＡＷデータファイルの付加情報部に記録されているホワイトバランス調整値を、算出部２０１ｃにより新たに算出されたホワイトバランス調整値に更新して記録する。さらに、ファイル生成部２０１ｄは、ＲＡＷデータファイルの付加情報部に記録されている位置変更操作前の不使用領域Ｒ１の座標を、位置変更操作後の不使用領域Ｒ２の座標に更新して、新たな位置情報として記録する。なお、使用者が、マウス等を用いて、図４（ｃ）のコマンドボタンＣ１、すなわち「ＹＥＳ」をクリックすると、入力装置２０６は制御回路２０１へ確定信号を出力する。

制御回路２０１による画像表示処理は、電子カメラ１００において説明した図５のフローチャートに示す処理と同様である。すなわち、再生部２０１ｅは、図５のステップＳ２０１（ＲＡＷデータファイルの読み出し）からステップＳ２０８（不使用領域を示す矩形枠を画像に重畳表示）までの処理およびステップＳ２１１（ホワイトバランス調整値算出）からステップＳ２１３（画像表示）までの処理を行う。領域確定部２０１ｂは、図５のステップＳ２０９（不使用領域の位置確定操作判定）の処理を行う。算出部２０１ｃは、図５のステップＳ２１０（新たなホワイトバランス調整値算出）の処理を行う。ファイル生成部２０１ｄは、図５のステップＳ２１４（ホワイトバランス確定操作判定）およびステップＳ２１５（ＲＡＷデータファイルのホワイトバランス調整値更新、不使用領域の位置情報更新）を行う。

以上で説明した実施の形態を以下のように変形できる。
（１）ファイル生成部１０４ｆ、２０１ｄは、予めＲＡＷデータファイルの付加情報部に記録されていたホワイトバランス調整値を更新し上書き保存するごとに、それ以前に記録されていたホワイトバランス調整値の更新履歴を記録してもよい。この場合、ファイル生成部１０４ｆ、２０１ｄは、更新履歴と新たに算出したホワイトバランス調整値をＲＡＷデータファイルの付加情報部に記録する。

（２）ファイル生成部１０４ｆ、２０１ｄは、不使用領域Ｒの位置情報をＲＡＷデータファイルの付加情報部に記録するものに限定されない。たとえば、ファイル生成部１０４ｆ、２０１ｄは、メモリカード１０９ａもしくはＨＤＤ２０２に位置情報を記録するためのフォルダを作成し、このフォルダ内に所定のファイル名を付与して位置情報を記録する。そして、ファイル生成部１０４ｆ、２０１ｄは、位置情報と関連付けされたＲＡＷデータファイルに、関連付けがされていることを示す情報（関連付け情報）を付加するようにしてもよい。この場合、ファイル生成部１０４ｆ、２０１ｄは、ＲＡＷデータファイルの付加情報部に、関連付けされている位置情報のパス、ファイル名等を関連付け情報として書き込めばよい。

（３）ファイル生成部１０４ｆ、２０１ｄは、ＲＡＷデータファイルと位置情報に対応するファイルのそれぞれに対して、関連付けがされていることを示すファイル名を付与してもよい。この場合、ファイル生成部１０４ｆ、２０１ｄは、それぞれのファイル名に共通する名称として、たとえば「・・・_r1」等を付与すればよい。

（４）ファイル生成部１０４ｆ、２０１ｄは、ＲＡＷデータファイルと位置情報に対応するファイルとが関連付けされていることを示す関連付け情報を作成し、この関連付け情報をメモリカード１０９ａもしくはＨＤＤ２０２に記録してもよい。この場合、ファイル生成部１０４ｆ、２０１ｄは、関連付け情報として、関連付けされたＲＡＷデータファイルと位置情報に対応するファイルとを対応付けたデータベース等を作成すればよい。

また、本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。説明に用いた実施の形態および変形例は、それぞれを適宜組合わせて構成しても構わない。

１００ 電子カメラ、 １０１ 入力スイッチ、 １０３ 撮像素子、
１０４ システム制御部、 １０４ａ 画像取得部、 １０４ｂ 領域判定部、
１０４ｃ 領域確定部、 １０４ｄ 算出部、 １０４ｅ 画像処理部、
１０４ｆ ファイル生成部、 １０４ｇ 再生部、 １０７ ＬＣＤ駆動回路、
２００ 画像処理装置、 ２０１ 制御回路、 ２０１ａ 領域判定部、
２０１ｂ 領域確定部、 ２０１ｃ 算出部、 ２０１ｄ ファイル生成部、
２０１ｅ 再生部、 ２０３ モニタ制御回路、 ２１２ 外部インタフェース

Claims (7)

1. 画像データを入力する入力手段と、
   前記画像データにおいて、ホワイトバランス調整値の算出に用いない不使用データの有無を判定する判定手段と、
   前記不使用データがあると判定された場合に、前記画像データに対応する画像において前記不使用データに対応する不使用領域が占有する位置を第１位置情報として確定する位置確定手段と、
   前記第１位置情報と前記画像データとを関連付けて記憶媒体に記録する記録制御手段とを備えることを特徴とする画像データ処理装置。
2. 請求項１に記載の画像データ処理装置において、
   前記画像のうち前記不使用領域を除外した領域に対応する第１調整値用画像データに基づいて、第１のホワイトバランス調整値を算出する算出手段をさらに備えることを特徴とする画像データ処理装置。
3. 請求項２に記載の画像データ処理装置において、
   前記算出手段により算出された前記第１のホワイトバランス調整値に基づいて、前記画像データに対してホワイトバランス調整処理を施して、第１処理済画像データを生成する画像生成手段と、
   前記第１処理済画像データに対応する第１表示画像と、前記第１位置情報に基づく指標とを表示器に表示する表示制御手段とをさらに備えることを特徴とする画像データ処理装置。
4. 請求項３に記載の画像データ処理装置において、
   前記第１表示画像上における前記不使用領域の位置を変更するための位置変更操作を受け付ける位置変更操作受付手段をさらに備え、
   前記算出手段は、前記位置変更操作により変更された前記不使用領域を除外した領域に対応する第２調整値用画像データに基づいて第２のホワイトバランス調整値を算出し、
   前記画像生成手段は、前記第２のホワイトバランス調整値に基づいて前記画像データに対してホワイトバランス調整処理を施して第２処理済画像データを生成し、
   前記表示制御手段は、前記第２処理済画像データに対応する第２表示画像を前記表示器に表示することを特徴とする画像データ処理装置。
5. 請求項４に記載の画像データ処理装置において、
   前記記録制御手段は、前記第２のホワイトバランス調整値を前記記憶媒体に記録することを特徴とする画像データ処理装置。
6. 請求項４に記載の画像データ処理装置において、
   前記位置確定手段は、前記位置変更操作により変更された前記不使用領域が前記画像において占有する位置を第２位置情報として確定し、
   前記記録制御手段は、前記第２位置情報と前記画像データとを関連付けて前記記憶媒体に記録することを特徴とする画像データ処理装置。
7. 請求項６に記載の画像データ処理装置において、
   前記位置変更操作により変更された前記位置情報の変更履歴を保存する履歴保存手段をさらに備えることを特徴とする画像データ処理装置。
   

Images