JP2021136555A5 - - Google Patents

Description

上述の目的は、画像データから白色領域を検出する白検出手段と、白色領域のデータに基づいて第１のホワイトバランス補正値を算出する第１の補正値算出手段と、機械学習を用いて、画像データから予め定められた特定の色を有する被写体の領域を検出する被写体検出手段と、被写体検出手段により検出された被写体の領域の色に基づいて、第２のホワイトバランス補正値を算出する第２の補正値算出手段と、第１のホワイトバランス補正値と、第２のホワイトバランス補正値とに基づいて、画像データに適用する最終的なホワイトバランス補正値である第３のホワイトバランス補正値を算出する第３の補正値算出手段と、を有することを特徴とする画像処理装置によって達成される。

Claims (15)

1. 画像データから白色領域を検出する白検出手段と、
   前記白色領域のデータに基づいて第１のホワイトバランス補正値を算出する第１の補正値算出手段と、
   機械学習を用いて、前記画像データから予め定められた特定の色を有する被写体の領域を検出する被写体検出手段と、
   前記被写体検出手段により検出された被写体の領域の色に基づいて、第２のホワイトバランス補正値を算出する第２の補正値算出手段と、
   前記第１のホワイトバランス補正値と、前記第２のホワイトバランス補正値とに基づいて、前記画像データに適用する最終的なホワイトバランス補正値である第３のホワイトバランス補正値を算出する第３の補正値算出手段と、
   を有することを特徴とする画像処理装置。
2. 前記被写体検出手段は、機械学習を用いて出力された情報に基づいて、前記被写体の領域の検出結果を示す検出マップを生成し、
   前記第２の補正値算出手段は、前記検出マップに基づいて特定された領域の色に基づいて前記第２のホワイトバランス補正値を算出し、
   前記検出マップは、前記画像データを分割した部分領域ごとに前記検出結果に基づく信頼度を示す、
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記機械学習を用いて出力された情報は、前記画像データの画素またはブロックが前記予め定められた特定の色を有する被写体の領域である確率を示すことを特徴とする請求項２に記載の画像処理装置。
4. 前記機械学習は、前記画像データから草木の緑を有する画素またはブロックを出力するのに用いられることを特徴とする請求項２または３に記載の画像処理装置。
5. 前記第１のホワイトバランス補正値の信頼度が高いと判定される場合には前記第１のホワイトバランス補正値を前記画像データに適用する最終的なホワイトバランス補正値とし、
   前記第１のホワイトバランス補正値の信頼度が高いと判定されない場合には前記第３のホワイトバランス補正値を前記画像データに適用する最終的なホワイトバランス補正値とする、ことを特徴とする請求項１から４のいずれか１項に記載の画像処理装置。
6. 前記予め定められた色が、緑色または肌色であることを特徴とする請求項１から５のいずれか１項に記載の画像処理装置。
7. 前記第３の補正値算出手段は、前記第１のホワイトバランス補正値と、前記第２のホワイトバランス補正値とを加重加算して前記第３のホワイトバランス補正値を算出することを特徴とする請求項１から６のいずれか１項に記載の画像処理装置。
8. 前記加重加算に用いる重みが、前記第１のホワイトバランス補正値と第２のホワイトバランス補正値との少なくとも一方の信頼度に基づくことを特徴とする請求項７に記載の画像処理装置。
9. 前記加重加算に用いる重みが、撮影シーンが特定シーンである信頼度にさらに基づくことを特徴とする請求項８に記載の画像処理装置。
10. 前記特定シーンが屋外シーンであることを特徴とする請求項９に記載の画像処理装置。
11. 前記第２の補正値算出手段は、前記特定の色と、光源の色温度とに基づいて前記第２のホワイトバランス補正値を算出することを特徴とする請求項１から８のいずれか１項に記載の画像処理装置。
12. 前記第２の補正値算出手段は、前記画像データのうち予め定められた範囲に含まれる色を有するデータに基づいて前記光源の色温度を推定することを特徴とする請求項１１に記載の画像処理装置。
13. 撮像素子と、
    前記撮像素子によって得られた画像データからホワイトバランス補正値を算出する請求項１から１２のいずれか１項に記載の画像処理装置と、
    前記画像処理装置が算出したホワイトバランス補正値を用いて前記画像データに対する現像処理を適用する現像手段と、
    を有することを特徴とする撮像装置。
14. 画像処理装置が実行する画像処理方法であって、
    画像データから白色領域を検出する白検出工程と、
    前記白色領域のデータに基づいて第１のホワイトバランス補正値を算出する第１の補正値算出工程と、
    機械学習を用いて、前記画像データから予め定められた特定の色を有する被写体の領域を検出する被写体検出工程と、
    前記被写体検出工程により検出された被写体の領域の色に基づいて、第２のホワイトバランス補正値を算出する第２の補正値算出工程と、
    前記第１のホワイトバランス補正値と、前記第２のホワイトバランス補正値とに基づいて、前記画像データに適用する最終的なホワイトバランス補正値である第３のホワイトバランス補正値を算出する第３の補正値算出工程と、
    を有することを特徴とする画像処理方法。
15. コンピュータを、請求項１から１２のいずれか１項に記載の画像処理装置が有する各手段として機能させるためのプログラム。