JP2022051097A - 画像処理装置、画像処理方法及び画像処理プログラム - Google Patents

Abstract

【課題】階調補正とノイズリダクション処理を良好に実現することができる画像処理装置、画像処理方法及び画像処理プログラムを提供する。【解決手段】画像処理装置は、階調補正部と、ノイズリダクション強度データ生成部と、ノイズリダクション処理部とを有する。階調補正部は、画像に対して階調補正を行う。ノイズリダクション強度データ生成部は、階調補正後に、画像に応じて生成される複数のデータの任意の組み合わせデータに基づいて、ノイズリダクション強度データを生成する。ノイズリダクション処理部は、ノイズリダクション強度データに基づいて、階調補正された階調補正画像に対してノイズリダクション処理を行う。【選択図】図１

Description

本明細書の開示は、画像処理装置、画像処理方法及び画像処理プログラムに関する。

例えば、特許文献１には、画像に対して階調補正及びノイズリダクション処理を行う画像処理装置が記載されている。

特開２０１６－１２７３８８号公報

しかしながら、特許文献１を含む従来の画像処理装置は、階調補正とノイズリダクション処理を両立させることが難しく、所望のノイズリダクション処理を施せない場合に画像品質の劣化を招いてしまう。

以上のような実情を踏まえ、本発明の一側面に係る目的は、階調補正とノイズリダクション処理を良好に実現することができる画像処理装置、画像処理方法及び画像処理プログラムを提供することである。

本発明の一態様に係る画像処理装置は、画像に対して階調補正を行う階調補正部と、前記階調補正後に、前記画像に応じて生成される複数のデータの任意の組み合わせデータに基づいて、ノイズリダクション強度データを生成するノイズリダクション強度データ生成部と、前記ノイズリダクション強度データに基づいて、前記階調補正された階調補正画像に対してノイズリダクション処理を行うノイズリダクション処理部と、を有することを特徴とする。

上記の態様によれば、階調補正とノイズリダクション処理を良好に実現することができる画像処理装置、画像処理方法及び画像処理プログラムを提供することができる。

デジタルカメラ１Ｘの一例を示す外観図である。 画像処理装置１の構成を示す第１のブロック図である。 画像処理装置１の構成を示す第２のブロック図である。 ノイズリダクション強度データＤ９の一例を示す概念図である。 ノイズリダクション強度データ生成部５０の詳細構成を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第１の例を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第２の例を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第３の例を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第４の例を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第５の例を示す図である。 ノイズリダクション強度データＤ９の生成パターンの第６の例を示す図である。

図１～図１１を参照して、本実施形態の画像処理装置１について詳細に説明する。なお、本実施形態の画像処理方法及び画像処理プログラムは、画像処理装置１のコンピュータ（回路構成要素）に各種処理ステップを実行させることで実現される。また、画像処理装置１は、例えば、Ｃｏｌｏｒ Ｐｒｏｃｅｓｓ ＰｉｐｅＬｉｎｅと呼ばれてもよい。また、画像処理装置１は、大規模集積回路（ＬＳＩ：Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）又はその一部として実装されてもよい。

画像処理装置１は、例えば、セキュリティカメラや監視カメラなどの固定式の撮影装置に搭載されてもよいし、デジタルカメラや各種端末などの可搬式の撮影装置に搭載されてもよい。また、画像処理装置１は、撮影装置やその他の装置から有線、無線で伝送された画像、各種記憶媒体に記憶された画像に対して画像処理を施すことに特化されたものでもよい。すなわち、画像処理装置１の態様には自由度があり、各種の設計変更が可能である。

図１は、デジタルカメラ（撮影装置）１Ｘの一例を示す外観図である。デジタルカメラ１Ｘでは、被写体からの光が、レンズ１０Ｘを介してカメラ本体１１Ｘ内に導かれ、ミラー１２Ｘで反射されて、ピントグラス１３Ｘ上に被写体の実像を結像する。この実像としての被写体像は、ペンタプリズム１４Ｘによりファインダ１５Ｘに導かれ、観察できるようになっている。ピントグラス１３Ｘとペンタプリズム１４Ｘとの間に、表示装置１６Ｘが配置され、ピントグラス１３Ｘに映った被写体像に各種情報を重ねて表示する。図１中の破線は、ファインダ１５Ｘに導かれる被写体からの光の光路を示している。デジタルカメラ１Ｘでは、ミラー１２Ｘをアップしてシャッタ１７Ｘを開けて撮像素子１８Ｘに被写体光を導いて撮影を行なうため、ミラーアップ状態では表示装置１６Ｘには被写体像が届かない構造になっている。

デジタルカメラ１Ｘは、撮像素子１８Ｘによる撮影画像に画像処理を施す、本発明の一態様の画像処理装置１を内蔵していてもよいし、撮像素子１８Ｘによる撮影画像を有線又は無線で、本発明の一態様の外部の画像処理装置１に送信する通信部（接続端子やアンテナ等）を有していてもよい。すなわち本発明は、撮影機能を有するデジタルカメラ１Ｘに限らず、外部装置で撮影された画像を取得してノイズリダクション処理を適用可能な任意の機器にも適用可能である。換言すれば本発明は、複数の機器で構成されるシステムにも適用可能である。

図２、図３は、画像処理装置１の構成を示す第１、第２のブロック図である。画像処理装置１は、デモザイク処理部１０と、階調補正部２０と、ＹＵＶ変換部３０と、色解析部４０と、ノイズリダクション強度データ生成部（ＮＲ強度データ生成部）５０と、ノイズリダクション処理部（ＮＲ処理部）６０と、後処理部７０とを有する。

デモザイク処理部１０は、階調補正前画像である入力画像（ＲＡＷ画像、Ｂａｙｅｒ画像）Ｄ１に対してデモザイク処理を施してＲＧＢ画像Ｄ２に変換する。なお、ここでは図示を省略しているが、デモザイク処理部１０の前段には、入力画像Ｄ１に対して孤立点除去処理や色収差補正を行うブロックが設けられていてもよい。

階調補正部２０は、デモザイク処理部１０からの階調補正前のＲＧＢ画像Ｄ２に対して階調補正を行う。階調補正は、例えば、逆光などの明暗差の大きい被写体の撮影、あるいは、顔などの特定領域を明るく写したい場合などにおいて、画像解析結果により画素単位で適応的に行うものである。また、逆光補正や多重露光合成（ＨＤＲ：Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）などの処理では、各画素あるいは画素ブロック毎に適応的なゲインアップ量が算出され、画像全体の階調補正を行う場合がある。さらに、ガンマ補正などでも各画素あるいは画素ブロック毎に異なるゲインアップ量が適用される場合がある。このゲインアップ量は、ＲＧＢで均一としてもよい。階調補正部２０による階調補正の態様には自由度があり、種々の設計変更が可能である。

階調補正部２０は、階調補正を行うことにより、階調補正画像（階調補正後のＲＧＢ画像）Ｄ３と、ゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４と、を出力する。ゲインマップデータＤ４は、階調補正画像Ｄ３の階調補正量に基づくデータであり、階調補正画像Ｄ３の階調補正量（ゲイン）を対数化したものに相当する。また、ゲインマップデータＤ４は、階調補正画像Ｄ３を各画素あるいは画素ブロック毎の領域に分割して、その分割領域毎の特徴値を有している。階調補正画像Ｄ３はＹＵＶ変換部３０及び色解析部４０に入力し、ゲインマップデータＤ４はノイズリダクション強度データ生成部５０に入力する。

ＹＵＶ変換部３０は、階調補正部２０からの階調補正画像（階調補正後のＲＧＢ画像）Ｄ３をＹＵＶ変換することで、輝度データ（階調補正画像の輝度データ）Ｄ５を得る。輝度データＤ５は、階調補正画像Ｄ３を各画素あるいは画素ブロック毎の領域に分割して、その分割領域毎の特徴値を有している。輝度データＤ５は、ノイズリダクション強度データ生成部５０に入力する。また、ＹＵＶ変換部３０は、ＹＵＶ変換した階調補正画像Ｄ６をノイズリダクション処理部６０に出力する。

色解析部４０は、階調補正部２０からの階調補正画像（階調補正後のＲＧＢ画像）Ｄ３を色解析（ＲＧＢ解析）することで、色尤度データ（階調補正画像の色尤度データ）Ｄ７を得る。色尤度データＤ７は、例えば、人間の肌や皮膚の色などの特定色の尤度を示すものである。色尤度データＤ７は、階調補正画像Ｄ３を各画素あるいは画素ブロック毎の領域に分割して、その分割領域毎の特徴値を有している。色尤度データＤ７は、ノイズリダクション強度データ生成部５０に入力する。

ノイズリダクション強度データ生成部５０には、階調補正部２０からのゲインマップデータＤ４と、ＹＵＶ変換部３０からの輝度データＤ５と、色解析部４０からの色尤度データＤ７とが入力される。

加えて、ノイズリダクション強度データ生成部５０には、外部マップデータＤ８としてのＡｄｄｉｔｉｏｎａｌ Ｍａｐ及び／又はＥｘｔｒａ Ｍａｐが入力される。Ａｄｄｉｔｉｏｎａｌ Ｍａｐは、生成済みのノイズリダクション強度データ（ＮＲ強度データ）にフィルタ処理を施したもの、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）から入力されるＭａｐデータ（ＮＲレベル出力）に外部でローパスフィルタ処理を施した（ＬＰＦを掛けた）ものとすることができる。Ｅｘｔｒａ Ｍａｐは、階調補正を行う前の画像に対するＨＤＲ処理のゲイン量、例えば、ＨＤＲ処理時のゲイン量を対数化したものとすることができる。なお、図２では、外部マップデータＤ８としてのＡｄｄｉｔｉｏｎａｌ Ｍａｐ及びＥｘｔｒａ Ｍａｐを単一のＥｘｔｒａ Ｍａｐとして纏めて描いており、図３では、外部マップデータＤ８としてのＡｄｄｉｔｉｏｎａｌ Ｍａｐ及びＥｘｔｒａ Ｍａｐを別々に描いている。図３において、Ａｄｄｉｔｉｏｎａｌ ＭａｐとＥｘｔｒａ Ｍａｐのいずれか一方だけがノイズリダクション強度データ生成部５０に入力してもよい。

ノイズリダクション強度データ生成部５０は、階調補正後に、画像に応じて生成される複数のデータの任意の組み合わせデータに基づいて、ノイズリダクション強度データ（ＮＲ強度データ）Ｄ９を生成する。より具体的に、ノイズリダクション強度データ生成部５０は、ＹＵＶ変換部３０からの輝度データＤ５と、色解析部４０からの色尤度データＤ７と、階調補正部２０からのゲインマップデータＤ４と、外部マップデータＤ８とを任意に組み合わせたデータに基づいて、ノイズリダクション強度データＤ９を生成する。これにより様々な条件で撮像された撮像画像に対して、良好にノイズリダクション処理がなされた良質の画像を提供することができる。このノイズリダクション強度データ生成部５０が生成したノイズリダクション強度データＤ９は、ノイズリダクションレベル出力（ＮＲレベル出力）Ｄ１０として、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）８０に記憶されてもよい。ＤＲＡＭ８０は、ノイズリダクション強度データ生成部５０、ひいては画像処理装置１とは別の構成要素である。

ノイズリダクション強度データＤ９は、階調補正画像Ｄ３のどの部位にどの程度の階調補正が行われたか（階調補正ゲインのレベル分布）を考慮して最適化されたノイズリダクション処理を階調補正画像Ｄ６に施すためのものである。つまり、ノイズリダクション強度データＤ９は、階調補正画像Ｄ３を各画素あるいは画素ブロック毎の領域に分割して、その分割領域毎に、その分割領域にどのレベルのノイズリダクション処理を施せば良いのかが対応付けられたマップ形式とすることができる。

図４Ａ、図４Ｂは、ノイズリダクション強度データＤ９の一例を示す概念図である。図４Ａ、図４Ｂでは、説明の便宜上の理由により、階調補正画像を縦５マス×横５マスの合計２５マスの分割領域に簡素化して描いている。図４Ａでは、各分割領域のノイズリダクション強度データをＨ（Ｈｉｇｈ）、Ｍ（Ｍｉｄｄｌｅ）、Ｌ（Ｌｏｗ）の三段階で描いている。図４Ｂでは、各分割領域のノイズリダクション強度データを１、２、３、４、５の五段階で描いている（数字が大きいほど強度が大きく、数字が小さいほど強度が小さいものとする）。図４Ａ、図４Ｂにおいて、階調補正の度合い（階調補正ゲインのレベル）が大きい分割領域であるほど、ノイズリダクション強度データの強度が大きく設定されており、階調補正の度合い（階調補正ゲインのレベル）が小さい分割領域であるほど、ノイズリダクション強度データの強度が小さく設定されている。なお、階調補正画像の各分割領域をどのように設定するか、ノイズリダクション強度データの強度を何段階で分割するかについては自由度があり、種々の設計変更が可能である。

上記のようなノイズリダクション強度データＤ９をどのように生成するかについては、後に詳細に説明する。

ノイズリダクション処理部６０は、ノイズリダクション強度データ生成部５０が生成したノイズリダクション強度データＤ９（例えば図４Ａ、図４Ｂ参照）に基づいて、階調補正部２０で階調補正され、ＹＵＶ変換部３０でＹＵＶ変換された階調補正画像Ｄ６に対してノイズリダクション処理（ＮＲ処理）を行う。階調補正画像Ｄ３のどの部位にどの程度の階調補正が行われたか（階調補正ゲインのレベル分布）を考慮して最適化されたノイズリダクション強度データＤ９を使用してノイズリダクション処理を行うことにより、階調補正とノイズリダクション処理をバランス良く両立させるとともに、柔軟で適切なノイズリダクション処理に基づいた優れた画像品質を実現することができる。

後処理部７０は、ノイズリダクション処理後のＹＵＶ画像（ＮＲ ＹＵＶ）Ｄ１１に対して、例えば、ガンマ補正、エッジ強調処理、超解像処理などの後処理を行って出力画像（ＹＵＶ）Ｄ１２とする。なお、後処理部７０が行う後処理には自由度があり、種々の設計変更が可能である。

図５は、ノイズリダクション強度データ生成部５０の詳細構成を示す図である。上述したように、ノイズリダクション強度データ生成部５０には、輝度データＤ５と、色尤度データＤ７と、ゲインマップデータＤ４と、外部マップデータＤ８とが入力される。

ノイズリダクション強度データ生成部５０は、輝度データＤ５と色尤度データＤ７とゲインマップデータＤ４と外部マップデータＤ８の一部又は全部を選択的に通過させる選択入力部５１を有している。以下の説明では、輝度データＤ５と色尤度データＤ７とゲインマップデータＤ４と外部マップデータＤ８の全てが選択入力部５１を通過したものとして説明する。

なお、ノイズリダクション強度データ生成部５０から選択入力部５１を省略することも可能である。この場合、輝度データＤ５と色尤度データＤ７とゲインマップデータＤ４と外部マップデータＤ８のうち、使用するデータだけをノイズリダクション強度データ生成部５０に入力させるようにして、使用しないデータをノイズリダクション強度データ生成部５０に入力させないようにしてもよい。

ノイズリダクション強度データ生成部５０は、選択入力部５１を通過したゲインマップデータＤ４と外部マップデータＤ８を乗算する乗算部５２を有している。ノイズリダクション強度データ生成部５０は、ゲインマップデータＤ４と、乗算部５２によるゲインマップデータＤ４と外部マップデータＤ８の乗算結果とのいずれかを選択的に通過させる選択入力部５３を有している。以下の説明では、ゲインマップデータＤ４、あるいは、乗算部５２によるゲインマップデータＤ４と外部マップデータＤ８の乗算結果を一括りにして「ゲインマップデータＤ４」と総称する（選択入力部５３の出力が「ゲインマップデータＤ４」である。）。

なお、本実施形態において、ある２つのデータを乗算する場合に、一方のデータの入力が存在しないとき（例えば選択入力部５１を通過できなかったとき）、一方のデータが１であるとして、他方のデータをそのまま乗算結果として出力してもよい。

ノイズリダクション強度データ生成部５０は、輝度データＤ５と、色尤度データＤ７と、ゲインマップデータＤ４と、外部マップデータＤ８とのそれぞれ（少なくともいずれか）に適用するための前段ルックアップテーブル５４を有している。より具体的に、前段ルックアップテーブル５４は、輝度データＤ５に適用される輝度データ用ルックアップテーブル（ＬＵＴ（Ｙ））５４Ａと、色尤度データＤ７に適用される色尤度データ用ルックアップテーブル（ＬＵＴ（色））５４Ｂと、ゲインマップデータＤ４に適用されるゲインマップデータ用ルックアップテーブル（ＬＵＴ（Ｇａｉｎ））５４Ｃと、外部マップデータＤ８に適用される外部マップデータ用ルックアップテーブル（ＬＵＴ（ＥＸＴ））５４Ｄと、を有している。

ノイズリダクション強度データ生成部５０は、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７を乗算する乗算部５５Ａと、乗算部５５Ａによる乗算結果にゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータＤ４を乗算する乗算部５５Ｂと、乗算部５５Ｂによる乗算結果に外部マップデータ用ルックアップテーブル５４Ｄを通過した外部マップデータＤ８を乗算する乗算部５５Ｃとを有している。乗算部５５Ｃによる乗算結果は、選択入力部（Ｓｅｌ）５７に出力される。

ノイズリダクション強度データ生成部５０は、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータＤ４と、外部マップデータ用ルックアップテーブル５４Ｄを通過した外部マップデータＤ８との加算値を演算する加算値演算部（Ｓｕｍ）５６Ａを有している。加算値演算部５６Ａによる加算演算結果は、選択入力部（Ｓｅｌ）５７に出力される。

ノイズリダクション強度データ生成部５０は、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータＤ４と、外部マップデータ用ルックアップテーブル５４Ｄを通過した外部マップデータＤ８との最大値を選択的に通過させる最大値選択演算部（Ｍａｘ）５６Ｂを有している。最大値選択演算部５６Ｂによる最大値選択演算結果は、選択入力部（Ｓｅｌ）５７に出力される。

ノイズリダクション強度データ生成部５０は、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータＤ４と、外部マップデータ用ルックアップテーブル５４Ｄを通過した外部マップデータＤ８との最小値を選択的に通過させる最小値選択演算部（Ｍｉｎ）５６Ｃを有している。最小値選択演算部５６Ｃによる最小値選択演算結果は、選択入力部（Ｓｅｌ）５７に出力される。

ノイズリダクション強度データ生成部５０は、選択入力部（Ｓｅｌ）５７を有している。選択入力部５７は、乗算部５５Ｃによる乗算結果と、加算値演算部５６Ａによる加算演算結果と、最大値選択演算部５６Ｂによる最大値選択演算結果と、最小値選択演算部５６Ｃによる最小値選択演算結果とのいずれか１つを選択的に通過させる。選択入力部５７が、乗算部５５Ｃによる乗算結果と、加算値演算部５６Ａによる加算演算結果と、最大値選択演算部５６Ｂによる最大値選択演算結果と、最小値選択演算部５６Ｃによる最小値選択演算結果とのいずれを選択するかについては、例えば、ランダムに決定してもよいし、使用する演算器を予め設定しておいてもよい。あるいは、選択入力部５７は、より適切なノイズリダクション強度データを生成するための何らかの基準に基づいて、乗算部５５Ｃによる乗算結果と、加算値演算部５６Ａによる加算演算結果と、最大値選択演算部５６Ｂによる最大値選択演算結果と、最小値選択演算部５６Ｃによる最小値選択演算結果とのいずれを選択するかを決定してもよい。

ここで、乗算部５５Ａ、乗算部５５Ｂ、乗算部５５Ｃ、加算値演算部５６Ａ、最大値選択演算部５６Ｂ、最小値選択演算部５６Ｃ及び選択入力部５７は、前段ルックアップテーブル５４（５４Ａ、５４Ｂ、５４Ｃ、５４Ｄ）の各出力に加算処理と、乗算処理と、最大値選択処理と、最小値選択処理と、ランダム選択処理との少なくとも１つを適用して単一出力を演算する「演算部」として機能する。なお、図５を参照して説明した「演算部」の構成は一例にすぎず、前段ルックアップテーブル５４（５４Ａ、５４Ｂ、５４Ｃ、５４Ｄ）の各出力から単一出力を演算することができればよい。

ノイズリダクション強度データ生成部５０は、上記の「演算部」によって演算された単一出力に適用するための後段ルックアップテーブル５８を有している。後段ルックアップテーブル５８は、上記の「演算部」によって演算された単一出力に対応する単一ルックアップテーブル（ＬＵＴ）５８Ａから構成されている。後段ルックアップテーブル５８（単一ルックアップテーブル５８Ａ）を通過した出力が、階調補正画像のどの部位にどの程度の階調補正が行われたか（階調補正ゲインのレベル分布）を考慮して最適化されたノイズリダクション強度データとなる（例えば図４Ａ、図４Ｂ）。

このように、「演算部」を挟んだ前段と後段に、輝度データＤ５と色尤度データＤ７とゲインマップデータＤ４と外部マップデータＤ８とのそれぞれ（少なくともいずれか）に適用するための前段ルックアップテーブル５４（５４Ａ、５４Ｂ、５４Ｃ、５４Ｄ）と、前段ルックアップテーブル５４（５４Ａ、５４Ｂ、５４Ｃ、５４Ｄ）の各出力から演算した単一出力に適用するための後段ルックアップテーブル５８（５８Ａ）とを配置している。これにより、柔軟で適切な特性変換が可能になる。例えば、前段ルックアップテーブルにおいて、対数による処理を適用して広いレンジを扱うとともに、前段ルックアップテーブルの各出力から演算した単一出力に適用する後段ルックアップテーブルにおいて、対数を真数に戻すような特性変換が可能になる。あるいは、これとは逆に、前段ルックアップテーブルで真数を演算して、後段ルックアップテーブルで対数を演算してもよい。

このように、本実施形態の画像処理装置、画像処理方法及び画像処理プログラムでは、入力画像に対して、階調補正、ノイズリダクション強度データ生成、ノイズリダクション処理の順番に行う。階調補正ブロックは、階調補正画像とともに、階調補正ゲイン(ゲインマップ)を出力する。ノイズリダクション強度データ生成ブロックは、階調補正後の画像から輝度とゲインマップを受け取り、更に色解析を行って色尤度を生成する。更に、外部から画素毎のＭａｐを入力し、ゲイン量、輝度、色尤度、外部Ｍａｐのそれぞれに前段のルックアップテーブル（ＬＵＴ）を適用し、それぞれの加算、乗算、最大値、最小値などを選択し、更に後段のルックアップテーブル（ＬＵＴ）を適用した結果をノイズリダクション強度データとする。また、外部Ｍａｐは、階調補正入力前にＨＤＲ処理などでゲインを掛けた際のゲイン量を入力することもでき、その場合はゲインマップに直接加算することもできる。ＨＤＲゲインと階調補正ゲインは対数で扱うことにより、単純な加算が可能となる。ノイズリダクション強度データは、自画素と周辺画素の相関に対して係数として寄与させることで実現される。例えば、ＢｉＬａｔｅｒａｌフィルタであれば、自画素と周辺画素の差分に対する係数として、ＮｏｎＬｏｃａｌＭｅａｎｓフィルタであれば、パッチ相関に対する係数として寄与させることで、ノイズリダクション強度に応じてノイズリダクション効果の強弱を制御することができる。

逆光補正や多重露光合成（ＨＤＲ）などの処理では、画素又は画素ブロック毎に適応的なゲインアップ量が算出され、画像全体の階調補正が行われる場合がある。また、ガンマ補正などでも画素又は画素ブロック毎に異なるゲインアップ量が適用される。これらそれぞれの状態に応じて、ノイズリダクションの強度を変えることができれば、階調補正と、ノイズリダクションをバランスよく両立させることができる。そこで、ゲイン量、輝度のみでなく、色尤度、外部マップも加味した処理を可能とすることで、肌色部分の滑らかさを制御したり、自由に設定した特定領域の滑らかさを制御したりすることができる。また、外部から自由なマップ入力を可能とすることで、ゲイン、輝度、色尤度以外の要素によっても、ノイズリダクションの強度を変更でき、背景、顔、車両番号などの特定領域ボカシなどの用途にも適用できる。

図６は、ノイズリダクション強度データＤ９の生成パターンの第１の例を示す図である。図６の第１の例は、肌色ノイズリダクション強化（肌色ＮＲ強化）に特化したものである。

階調補正画像（ＲＧＢ画像）Ｄ３に色尤度解析（肌マップ化）を行うことで色尤度データＤ７が得られる。色尤度データＤ７は、肌色らしさの特徴を際立たせるためのＭａｐデータであり、例えば、肌色らしいと判断されたピクセルを階調補正画像（ＲＧＢ画像）より明るくするためのものである。色尤度データＤ７に、肌マップ乗算テーブルとしての色尤度データ用ルックアップテーブル５４Ｂが適用される。色尤度データ用ルックアップテーブル５４Ｂは、肌色部のノイズリダクション強度を上げるため、肌尤度が高いほどノイズリダクション強度が上がるような特性を有している。色尤度データ用ルックアップテーブル５４Ｂは、尤度０で１．０倍、尤度２５５で４．０倍となる特性を有しており、この時点ではその１／４の出力となる。色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７は、肌尤度をノイズリダクション強度の寄与率に変換した結果、色尤度データ用ルックアップテーブル５４Ｂの通過前よりも肌色部のピクセルが明るくなっている。

一方、階調補正画像の階調補正ゲインを対数表現したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４には、対数ｔｏ真数テーブルとしてのゲインマップデータ用ルックアップテーブル５４Ｃが適用される。ゲインマップデータ用ルックアップテーブル５４Ｃは、後段の乗算器において真数どうしの乗算を行うために、ゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４を対数から真数に変換する。このため、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４は、対数表現から真数表現に変換されている。

色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４とが乗算される。この乗算結果は、肌色らしさとゲイン量を掛けたものであるため、肌色らしさが高くてもゲインの低いところは暗くなり、ゲインが高くても肌色らしさが低いところは暗くなる。色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４との乗算結果には、レベル調整テーブルとしての単一ルックアップテーブル５８Ａが適用される。単一ルックアップテーブル５８Ａは、色尤度の乗算で１／４スケールになっているデータを４倍することにより元のスケールに戻す。このようにして、肌色とゲイン量の両方を加味した結果に基づいて最適化されたノイズリダクション強度データＤ９が出力される。

図７は、ノイズリダクション強度データＤ９の生成パターンの第２の例を示す図である。図７の第２の例は、ガンマ事前付与に特化したものである。

階調補正前のＲＧＢ画像Ｄ２に階調補正を行うことで、階調補正画像（ＲＧＢ画像）Ｄ３と、階調補正画像の階調補正ゲインを対数表現したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４と、が得られる。

階調補正画像（ＲＧＢ画像）Ｄ３に輝度解析（輝度変換）を行うことで輝度データＤ５が得られる。輝度データＤ５に、γゲイン乗算テーブルとしての輝度データ用ルックアップテーブル５４Ａが適用される。輝度データ用ルックアップテーブル５４Ａは、ノイズリダクション処理後に適用するガンマ補正量をテーブル化して規定したものである。輝度データ用ルックアップテーブル５４Ａは、低輝度で４．０倍、飽和部で１．０倍となる特性を有しており、この時点ではその１／４の出力となる。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５は、ノイズリダクション処理後に適用するガンマ補正量に合わせて最適化されたものとなっている。

一方、階調補正画像の階調補正ゲインを対数表現したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４には、対数ｔｏ真数テーブルとしてのゲインマップデータ用ルックアップテーブル５４Ｃが適用される。ゲインマップデータ用ルックアップテーブル５４Ｃは、後段の乗算器において真数どうしの乗算を行うために、ゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４を対数から真数に変換する。このため、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４は、対数表現から真数表現に変換されている。

輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４とが乗算される。この乗算結果は、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）を反映したものとなっている。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５と、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータ（Ｇａｉｎ Ｍａｐ）Ｄ４との乗算結果には、レベル補正テーブルとしての単一ルックアップテーブル５８Ａが適用される。単一ルックアップテーブル５８Ａは、ガンマゲインの乗算で１／４スケールになっているデータを４倍することにより元のスケールに戻す。このようにして、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）を加味した結果に基づいて最適化されたノイズリダクション強度データが出力される。

図８は、ノイズリダクション強度データＤ９の生成パターンの第３の例を示す図である。図８の第３の例は、ＨＤＲ階調補正に特化したものである。

図１、図２におけるデモザイク処理部１０への入力前の段階で、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像のＨＤＲ補正処理が行われる。その結果、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像を合成したＨＤＲ ＲＡＷ画像と、ＨＤＲ補正ゲインを対数表現したＨＤＲゲインとが出力される。ＨＤＲゲインは、例えば、動き保証型のＨＤＲ合成を行うために、動きのある部分を高いゲインとすることができる。ＨＤＲ ＲＡＷ画像は、ＲＧＢ変換及び階調補正されてＨＤＲ ＲＧＢ画像が出力されるとともに、ＨＤＲ ＲＧＢ画像の階調補正ゲイン（対数表現）が出力される。

ＨＤＲ補正ゲインを対数表現したＨＤＲゲインと、ＨＤＲ ＲＧＢ画像の階調補正ゲイン（対数表現）とが、対数空間で加算される。この加算結果に、対数ｔｏ真数テーブルとしてのゲインマップデータ用ルックアップテーブル５４Ｃが適用される。ゲインマップデータ用ルックアップテーブル５４Ｃは、ＨＤＲゲインと階調補正ゲインの加算結果を対数から真数に変換する。ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲゲインと階調補正ゲインの加算結果は、ＨＤＲ対応ゲインマップとなる。このＨＤＲ対応ゲインマップには、Ｌｉｎｅａｒテーブルとしての単一ルックアップテーブル５８Ａが適用される。最終段で変換しない場合にリニアテーブルを通すことで、ＨＤＲ階調補正を加味した結果に基づいて最適化されたノイズリダクション強度データが出力される。

図９は、ノイズリダクション強度データＤ９の生成パターンの第４の例を示す図である。図９の第４の例は、図６～図８の第１～第３の例をまとめたものである。

図１、図２におけるデモザイク処理部１０への入力前の段階で、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像のＨＤＲ補正処理が行われる。その結果、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像を合成したＨＤＲ ＲＡＷ画像と、ＨＤＲ補正ゲインを対数表現したＨＤＲゲインとが出力される。ＨＤＲゲインは、例えば、動き保証型のＨＤＲ合成を行うために、動きのある部分を高いゲインとすることができる。ＨＤＲ ＲＡＷ画像は、ＲＧＢ変換及び階調補正されてＨＤＲ ＲＧＢ画像が出力されるとともに、ＨＤＲ ＲＧＢ画像の階調補正ゲイン（対数表現）が出力される。

ＨＤＲ補正ゲインを対数表現したＨＤＲゲインと、ＨＤＲ ＲＧＢ画像の階調補正ゲイン（対数表現）とが、対数空間で加算される。この加算結果に、対数ｔｏ真数テーブルとしてのゲインマップデータ用ルックアップテーブル５４Ｃが適用される。ゲインマップデータ用ルックアップテーブル５４Ｃは、ＨＤＲゲインと階調補正ゲインの加算結果を対数から真数に変換する。ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲゲインと階調補正ゲインの加算結果は、ＨＤＲ対応ゲインマップとなる。

階調補正画像（ＨＤＲ ＲＧＢ画像）に色尤度解析（肌マップ化）を行うことで色尤度データＤ７が得られる。色尤度データＤ７に、肌マップ乗算テーブルとしての色尤度データ用ルックアップテーブル５４Ｂが適用される。色尤度データ用ルックアップテーブル５４Ｂは、尤度０で１．０倍、尤度２５５で４．０倍となる特性を有しており、この時点ではその１／４の出力となる。色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７は、肌尤度をノイズリダクション強度の寄与率に変換した結果、色尤度データ用ルックアップテーブル５４Ｂの通過前よりも肌色部のピクセルが明るくなっている。

階調補正画像（ＨＤＲ ＲＧＢ画像）に輝度解析（輝度変換）を行うことで輝度データＤ５が得られる。輝度データＤ５に、γゲイン乗算テーブルとしての輝度データ用ルックアップテーブル５４Ａが適用される。輝度データ用ルックアップテーブル５４Ａは、低輝度で４．０倍、飽和部で１．０倍となる特性を有しており、この時点ではその１／４の出力となる。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５は、ノイズリダクション処理後に適用するガンマ補正量に合わせて最適化されたものとなっている。

このように、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７、及び、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲ対応ゲインマップは、真数空間に変換されており、これらが乗算器で乗算される。この乗算結果は、肌色ノイズリダクション強化（肌色ＮＲ強化）、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）、及び、ＨＤＲ階調補正を考慮して最適化したものとなっている。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７、及び、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲ対応ゲインマップの乗算結果には、レベル調整テーブルとしての単一ルックアップテーブル５８Ａが適用される。単一ルックアップテーブル５８Ａは、色尤度とガンマの乗算で１／１６スケールになっているデータを１６倍することにより元のスケールに戻す。このようにして、肌色ノイズリダクション強化（肌色ＮＲ強化）、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）、及び、ＨＤＲ階調補正を考慮して最適化されたノイズリダクション強度データが出力される。

図１０は、ノイズリダクション強度データＤ９（ＮＲレベル出力Ｄ１０）の生成パターンの第５の例を示す図である。図１０の第５の例は、被写体距離マップを利用した背景ぼかしに特化したものである。

例えば、ＴＯＦ（Ｔｉｍｅ Ｏｆ Ｆｌｉｇｈｔ）センサや画像解析などによりカメラ（撮影装置）と被写体の間の距離を測定して、これを被写体距離マップとして生成する。生成した被写体距離マップには、ノイズリダクションレベル化（ＮＲ Ｌｅｖｅｌ化）テーブルとしての外部マップデータ用ルックアップテーブル５４Ｄが適用される。外部マップデータ用ルックアップテーブル５４Ｄは、入力された被写体距離が大きいほど出力を大きくするものであり、例えば、被写体距離０（近接状態）で等倍出力とし、被写体距離が大きくなるに連れて最大で４．０倍出力とすることができる。

外部マップデータ用ルックアップテーブル５４Ｄを通過した被写体距離マップは、被写体距離をぼかし量に変換したぼかし量マップとなる。このぼかし量マップには、Ｌｉｎｅａｒテーブルとしての単一ルックアップテーブル５８Ａが適用される。最終段で変換しない場合にリニアテーブルを通すことで、被写体距離に起因するぼかし量を加味した結果に基づいて最適化されたノイズリダクション強度データが出力される（ＮＲレベル出力）。

図１０には、背景ぼかしを行っていない通常のＲＧＢ出力に基づく画像と、被写体距離マップを利用した背景ぼかしを行ったＲＧＢ出力に基づく画像を例示して描いている。被写体距離が遠いほど、ノイズリダクション強度が強く、背景がぼけたＲＧＢ画像が作られる。

図１１は、ノイズリダクション強度データＤ９の生成パターンの第６の例を示す図である。図１１の第６の例は、図６～図８、図１０の第１～第３、第５の例をまとめたものである。

図１、図２におけるデモザイク処理部１０への入力前の段階で、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像のＨＤＲ補正処理が行われる結果、Ｕｎｄｅｒ ＲＡＷ画像及びＯｖｅｒ ＲＡＷ画像を合成したＨＤＲ ＲＡＷ画像が出力される。ＨＤＲ ＲＡＷ画像は、ＲＧＢ変換及び階調補正されてＨＤＲ ＲＧＢ画像が出力されるとともに、ＨＤＲ ＲＧＢ画像の階調補正ゲイン（対数表現）が出力される。階調補正ゲインは、ＨＤＲ補正ゲインを対数表現したＨＤＲゲインと加算されてゲインマップデータＤ４となる。ゲインマップデータＤ４には、対数ｔｏ真数テーブルとしてのゲインマップデータ用ルックアップテーブル５４Ｃが適用される。ゲインマップデータ用ルックアップテーブル５４Ｃは、ゲインマップデータＤ４を対数から真数に変換する。ゲインマップデータ用ルックアップテーブル５４Ｃを通過したゲインマップデータＤ４は、ＨＤＲ対応ゲインマップとなる。

階調補正画像（ＨＤＲ ＲＧＢ画像）に色尤度解析（肌マップ化）を行うことで色尤度データＤ７が得られる。色尤度データＤ７に、肌マップ乗算テーブルとしての色尤度データ用ルックアップテーブル５４Ｂが適用される。色尤度データ用ルックアップテーブル５４Ｂは、尤度０で１．０倍、尤度２５５で４．０倍となる特性を有しており、この時点ではその１／４の出力となる。色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７は、肌尤度をノイズリダクション強度の寄与率に変換した結果、色尤度データ用ルックアップテーブル５４Ｂの通過前よりも肌色部のピクセルが明るくなっている。

階調補正画像（ＨＤＲ ＲＧＢ画像）に輝度解析（輝度変換）を行うことで輝度データＤ５が得られる。輝度データＤ５に、γゲイン乗算テーブルとしての輝度データ用ルックアップテーブル５４Ａが適用される。輝度データ用ルックアップテーブル５４Ａは、低輝度で４．０倍、飽和部で１．０倍となる特性を有しており、この時点ではその１／４の出力となる。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５は、ノイズリダクション処理後に適用するガンマ補正量に合わせて最適化されたものとなっている。

例えば、ＴＯＦセンサや画像解析などによりカメラ（撮影装置）と被写体の間の距離を測定して、これを被写体距離マップとして生成する。生成した被写体距離マップには、ノイズリダクションレベル化（ＮＲ Ｌｅｖｅｌ化）テーブルとしての外部マップデータ用ルックアップテーブル５４Ｄが適用される。外部マップデータ用ルックアップテーブル５４Ｄは、入力された被写体距離が大きいほど出力を大きくするものであり、例えば、被写体距離０（近接状態）で等倍出力とし、被写体距離が大きくなるに連れて最大で４．０倍出力とすることができる。外部マップデータ用ルックアップテーブル５４Ｄを通過した被写体距離マップは、被写体距離をぼかし量に変換したぼかし量マップとなる。

このように、輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲ対応のゲインマップデータＤ４、及び、外部マップデータ用ルックアップテーブル５４Ｄを通過したぼかし量マップ（外部マップデータＤ８）は、真数空間に変換されており、これらが乗算器で乗算される。この乗算結果は、肌色ノイズリダクション強化（肌色ＮＲ強化）、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）、ＨＤＲ階調補正、及び、被写体距離を考慮して最適化したものとなっている。輝度データ用ルックアップテーブル５４Ａを通過した輝度データＤ５、色尤度データ用ルックアップテーブル５４Ｂを通過した色尤度データＤ７、ゲインマップデータ用ルックアップテーブル５４Ｃを通過したＨＤＲ対応のゲインマップデータＤ４、及び、外部マップデータ用ルックアップテーブル５４Ｄを通過したぼかし量マップ（外部マップデータＤ８）の乗算結果には、レベル調整テーブルとしての単一ルックアップテーブル５８Ａが適用される。単一ルックアップテーブル５８Ａは、色尤度とガンマの乗算で１／１６スケールになっているデータを１６倍することにより元のスケールに戻す。このようにして、肌色ノイズリダクション強化（肌色ＮＲ強化）、ガンマ補正と階調補正の両成分（ガンマ補正ゲインと階調補正ゲイン）、ＨＤＲ階調補正、及び、被写体距離を考慮して最適化されたノイズリダクション強度データが出力される。

本実施形態の画像処理装置、画像処理方法及び画像処理プログラムの優位性としては、複数の要素（輝度、色尤度、ゲインマップ（階調補正ゲイン）、外部マップ（外部要素）など）を自由に関連付ける（前後段の二段階ルックアップテーブルや関係式選択（加算、乗算、最大値、最小値）など）ことで、優れた階調補正に加えて、次のような機能を実現できることが挙げられる。
（１）肌色や青空などの領域のノイズリダクション強度を自由に変化させることができる（例えば肌色部はより滑らかにするなどの柔軟で適切な制御が可能になる）。
（２）ノイズリダクション処理後に行われる各処理（例えばガンマ補正など）の成分を事前に寄与させることができる。
（３）ＨＤＲ処理を行った際のＨＤＲゲインと階調補正ゲインとを掛け合わせることができる。ＨＤＲゲインと階調補正ゲインは特別に一段目（前段）のルックアップテーブルで加算できるようになっている。ゲインどうしなので掛け合わせることになるが、対数値のゲインの場合は加算になる。
（４）外部マップ（Ｅｘｔｒａ Ｍａｐ）に被写体距離を入れることで、背景のぼけ具合を制御することができる。
（５）その他、外部マップ（Ｅｘｔｒａ Ｍａｐ）には何を入力してもよく、外部マップの入力に応じた柔軟で適切なノイズリダクション強度制御が可能となる。

その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。

以下、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
画像に対して階調補正を行う階調補正部と、
前記階調補正後に、前記画像に応じて生成される複数のデータの任意の組み合わせデータに基づいて、ノイズリダクション強度データを生成するノイズリダクション強度データ生成部と、
前記ノイズリダクション強度データに基づいて、前記階調補正された階調補正画像に対してノイズリダクション処理を行うノイズリダクション処理部と、
を有することを特徴とする画像処理装置。
［付記２］
前記ノイズリダクション強度データ生成部は、前記階調補正画像の輝度データと、前記階調補正画像の色尤度データと、前記階調補正画像の階調補正量に基づくゲインマップデータと、外部マップデータとを任意に組み合わせたデータに基づいて、前記ノイズリダクション強度データを生成する、
ことを特徴とする付記１の画像処理装置。
［付記３］
前記ノイズリダクション強度データ生成部は、前記輝度データと、前記色尤度データと、前記ゲインマップデータと、前記外部マップデータの少なくともいずれかに適用するための前段ルックアップテーブルを有する、
ことを特徴とする付記２の画像処理装置。
［付記４］
前記ノイズリダクション強度データ生成部は、前記前段ルックアップテーブルの各出力に加算処理と、乗算処理と、最大値選択処理と、最小値選択処理と、ランダム選択処理との少なくとも１つを適用して単一出力を演算する演算部を有する、
ことを特徴とする付記３の画像処理装置。
［付記５］
前記ノイズリダクション強度データ生成部は、前記演算部によって演算された前記単一出力に適用するための後段ルックアップテーブルを有する、
ことを特徴とする付記４の画像処理装置。
［付記６］
前記外部マップデータは、階調補正を行う前の画像に対するＨＤＲ処理のゲイン量と、生成済みのノイズリダクション強度データにフィルタ処理を施したものとの少なくとも一方を含む、
ことを特徴とする付記２から付記５のいずれかの画像処理装置。
［付記７］
コンピュータが付記１から付記６のいずれかの画像処理装置の各処理を実行する方法。
［付記８］
コンピュータに付記１から付記６のいずれかの画像処理装置の各処理を実行させるプログラム。

１・・・画像処理装置
１Ｘ・・・デジタルカメラ（撮影装置）
１０・・・デモザイク処理部
２０・・・階調補正部
３０・・・ＹＵＶ変換部
４０・・・色解析部
５０・・・ノイズリダクション強度データ生成部（ＮＲ強度データ生成部）
５１・・・選択入力部
５２・・・乗算部
５３・・・選択入力部
５４・・・前段ルックアップテーブル
５４Ａ・・・輝度データ用ルックアップテーブル（ＬＵＴ（Ｙ））
５４Ｂ・・・色尤度データ用ルックアップテーブル（ＬＵＴ（色））
５４Ｃ・・・ゲインマップデータ用ルックアップテーブル（ＬＵＴ（Ｇａｉｎ））
５４Ｄ・・・外部マップデータ用ルックアップテーブル（ＬＵＴ（ＥＸＴ））
５５Ａ・・・乗算部（演算部）
５５Ｂ・・・乗算部（演算部）
５５Ｃ・・・乗算部（演算部）
５６Ａ・・・加算値演算部（Ｓｕｍ）（演算部）
５６Ｂ・・・最大値選択演算部（Ｍａｘ）（演算部）
５６Ｃ・・・最小値選択演算部（Ｍｉｎ）（演算部）
５７・・・選択入力部（Ｓｅｌ）（演算部）
５８・・・後段ルックアップテーブル
５８Ａ・・・単一ルックアップテーブル（ＬＵＴ）
６０・・・ノイズリダクション処理部（ＮＲ処理部）
７０・・・後処理部
８０・・・ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）

Claims (8)

1. 画像に対して階調補正を行う階調補正部と、
   前記階調補正後に、前記画像に応じて生成される複数のデータの任意の組み合わせデータに基づいて、ノイズリダクション強度データを生成するノイズリダクション強度データ生成部と、
   前記ノイズリダクション強度データに基づいて、前記階調補正された階調補正画像に対してノイズリダクション処理を行うノイズリダクション処理部と、
   を有することを特徴とする画像処理装置。
2. 前記ノイズリダクション強度データ生成部は、前記階調補正画像の輝度データと、前記階調補正画像の色尤度データと、前記階調補正画像の階調補正量に基づくゲインマップデータと、外部マップデータとを任意に組み合わせたデータに基づいて、前記ノイズリダクション強度データを生成する、
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記ノイズリダクション強度データ生成部は、前記輝度データと、前記色尤度データと、前記ゲインマップデータと、前記外部マップデータの少なくともいずれかに適用するための前段ルックアップテーブルを有する、
   ことを特徴とする請求項２に記載の画像処理装置。
4. 前記ノイズリダクション強度データ生成部は、前記前段ルックアップテーブルの各出力に加算処理と、乗算処理と、最大値選択処理と、最小値選択処理と、ランダム選択処理との少なくとも１つを適用して単一出力を演算する演算部を有する、
   ことを特徴とする請求項３に記載の画像処理装置。
5. 前記ノイズリダクション強度データ生成部は、前記演算部によって演算された前記単一出力に適用するための後段ルックアップテーブルを有する、
   ことを特徴とする請求項４に記載の画像処理装置。
6. 前記外部マップデータは、階調補正を行う前の画像に対するＨＤＲ処理のゲイン量と、生成済みのノイズリダクション強度データにフィルタ処理を施したものとの少なくとも一方を含む、
   ことを特徴とする請求項２から請求項５のいずれか１項に記載の画像処理装置。
7. コンピュータが請求項１から請求項６のいずれか１項に記載の画像処理装置の各処理を実行する方法。
8. コンピュータに請求項１から請求項６のいずれか１項に記載の画像処理装置の各処理を実行させるプログラム。

Images