JP2009049482A - 画像処理装置、撮像装置、画像処理プログラム、画像処理方法 - Google Patents

Abstract

【課題】解像感の劣化を抑制しながら色エッジについても効果的にノイズを抑圧することができる画像処理装置等を提供する。
【解決手段】ＲＧＢベイヤ配列画像データを、ＲＧＢ各チャネル毎にノイズ抑圧量Ｈでノイズ抑圧してＲHＧHＢHベイヤ配列画像データを算出するとともに、少なくともＧチャネルに対してノイズ抑圧量Ｌ（Ｌ＜Ｈ）でノイズ抑圧して画像データＧLを算出するノイズ抑圧部２と、ＲHＧHＢHベイヤ配列画像データに基づきＲHの位置における色差データ（ＲH−ＧH）とＢHの位置における色差データ（ＢH−ＧH）とを算出する色差算出部４３と、色差データ（ＲH−ＧH），（ＢH−ＧH）と、画像データＧLとに基づいて各画素位置におけるＲ，Ｇ，Ｂ画像データを算出する帯域制限補間部４４およびＲＧＢ算出部４５と、を備えた画像処理装置。
【選択図】図２

Description

本発明は、ＲＧＢベイヤ配列画像データを処理するための画像処理装置、撮像装置、画像処理プログラム、画像処理方法に関する。

デジタルカメラでは単板の撮像素子を用いることがほとんどであり、デジタルビデオカメラでは２板もしくは３板の撮像素子を用いることと、単板の撮像素子を用いることとの両方がある。

このような単板の撮像素子は、カラー撮像素子である場合には撮像面上にモザイク状のカラーフィルタを備えているが、代表的なカラーフィルタ配列として、例えばＲＧＢベイヤ配列が挙げられる。

こうしたＲＧＢベイヤ配列の撮像素子から得られるＲＧＢベイヤ配列画像データにおいて、撮像系によっては、ＲＧＢ各チャネルでノイズ量が異なることがある。このときには、あるチャネルのノイズが他のチャネルのノイズよりも目立つために、色ノイズとして観察されることになり、画質上好ましいとはいえない。

このような課題を解決するための手段としては、ノイズ量が多いチャネルのノイズ抑圧量を多くする処理を行うことが考えられる。しかし、このような手段を用いると、ノイズ抑圧量を多くしたチャネルの波形がなまってしまい、他のチャネルの波形と異なってしまうという別の課題が生じてしまう。

一般に、１フレーム内において処理が行われるノイズ抑圧処理では、ノイズ抑圧量を大きくする程画像の解像感、先鋭感が劣化することになる。この結果、画像のエッジ部分で偽色が発生することが分かっている。

このような偽色の発生を抑制するために、特定のチャネルだけでなく全てのチャネルのノイズ抑圧量を同じように大きくすることが考えられるが、この場合には、全体としてノイズ抑圧効果が大きくなる反面、上述した理由により、画像の解像感、先鋭感が大きく劣化してしまうことになる。

そこで、特開２００３−１２３０６３号公報には、エッジにおいて偽色が発生することのない色ノイズ抑圧の技術が提案されている。この公報に記載された技術では、色差信号を用いて色エッジを検出し、色エッジについては偽色を発生させないようにするためにノイズ抑圧をせず、その他の部分では色ノイズを抑圧する、という処理を行うようになっている。
特開２００３−１２３０６３号公報

しかしながら、上記特開２００３−１２３０６３号公報に記載されたような技術では、色エッジ部分でノイズ抑圧が行われないために、色エッジ部分にノイズが残ってしまうことになる。

本発明は上記事情に鑑みてなされたものであり、解像感の劣化を抑制しながら色エッジについても効果的にノイズを抑圧することができる画像処理装置、撮像装置、画像処理プログラム、画像処理方法を提供することを目的としている。

上記の目的を達成するために、第１の発明による画像処理装置は、ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するための画像処理装置であって、上記ＲＧＢベイヤ配列画像データをＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧手段と、上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づきＲの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）とＢの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）とを算出する色差算出手段と、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データとに基づいて各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出手段と、を具備したものである。

また、第２の発明による画像処理装置は、上記第１の発明による画像処理装置において、上記ＲＧＢ算出手段が、同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数であってかつ上記第二ノイズ抑圧Ｇチャネル画像データの画素数よりも少ない画素数の補間画素を上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データとに基づいて生成する帯域制限補間手段を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものである。

さらに、第３の発明による画像処理装置は、上記第１の発明による画像処理装置において、上記ＲＧＢ算出手段が、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ）および（Ｂ−Ｇ）と第一ノイズ抑圧ＲＧＢベイヤ配列画像データにおけるＲおよびＢとに基づき（Ｒ−Ｇ）および（Ｂ−Ｇ）の位置にＧを算出するＧ画素作成手段と、同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数である補間画素を上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データと上記Ｇ画素作成手段により算出されたＧとに基づいて生成する補間手段と、を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものである。

第４の発明による画像処理装置は、上記第１の発明による画像処理装置において、上記ノイズ抑圧手段が、上記第二のノイズ抑圧量でＲチャネルおよびＢチャネルに対してノイズ抑圧することにより第二ノイズ抑圧Ｒチャネル画像データおよび第二ノイズ抑圧Ｂチャネル画像データをさらに算出するものであり、上記ＲＧＢ算出手段は、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ）および（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｒチャネル画像データおよび第二ノイズ抑圧Ｂチャネル画像データとに基づき（Ｒ−Ｇ）および（Ｂ−Ｇ）の位置にＧを算出するＧ画素作成手段と、同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数である補間画素を上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データと上記Ｇ画素作成手段により算出されたＧとに基づいて生成する補間手段と、を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものである。

第５の発明による画像処理装置は、上記第１の発明による画像処理装置において、上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定する抑圧量設定手段をさらに具備したものである。

第６の発明による画像処理装置は、上記第５の発明による画像処理装置において、上記抑圧量設定手段が、上記ＲＧＢベイヤ配列画像データが撮影されたときの撮影条件に応じて、上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定するものである。

第７の発明による画像処理装置は、上記第５の発明による画像処理装置において、上記抑圧量設定手段が、上記ＲＧＢベイヤ配列画像データの画素数と、上記ＲＧＢ算出手段により算出しようとするＧ画素データの画素数と、に応じて、上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定するものである。

第８の発明による撮像装置は、レンズと、上記レンズの結像位置に配設されたＲＧＢベイヤ配列の撮像素子と、請求項１に記載の画像処理装置と、を具備し、上記画像処理装置は、上記ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するものである。

第９の発明による画像処理プログラムは、コンピュータに、ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理させるための画像処理プログラムであって、コンピュータに、上記ＲＧＢベイヤ配列画像データをＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧ステップと、上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づきＲの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）とＢの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）とを算出する色差算出ステップと、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データとに基づいて各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出ステップと、を実行させるためのプログラムである。

第１０の発明による画像処理方法は、ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するための画像処理方法であって、上記ＲＧＢベイヤ配列画像データをＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧ステップと、上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づきＲの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）とＢの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）とを算出する色差算出ステップと、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データとに基づいて各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出ステップと、を有する方法である。

本発明の画像処理装置、撮像装置、画像処理プログラム、画像処理方法によれば、解像感の劣化を抑制しながら色エッジについても効果的にノイズを抑圧することが可能となる。

以下、図面を参照して本発明の実施の形態を説明する。

［実施形態１］
図１から図６は本発明の実施形態１を示したものであり、図１は画像処理装置の構成を示すブロック図である。

この画像処理装置は、図１に示すように、画像信号入力部１と、ノイズ抑圧手段たるノイズ抑圧部２と、ＷＢ（ホワイトバランス）補正部３と、ベイヤ補間部４と、カラーマトリクス処理部５と、画像信号出力部６と、ＷＢ算出部７と、抑圧量設定手段たるノイズ抑圧量決定部８と、撮像パラメータ設定部９と、を備えて構成されている。

撮像パラメータ設定部９は、撮像パラメータ（撮影条件）としてのＩＳＯ感度を画像信号入力部１とノイズ抑圧量決定部８とへ出力するようになっている。また、撮像パラメータ設定部９は、撮像パラメータ（撮影条件）としての光源条件をＷＢ算出部７とノイズ抑圧量決定部８とカラーマトリクス処理部５とへ出力するようになっている。さらに、撮像パラメータ設定部９は、撮像パラメータ（撮影条件）としての画像リサイズ率をノイズ抑圧量決定部８とベイヤ補間部４とへ出力するようになっている。

画像信号入力部１は、ノイズ抑圧部２とＷＢ算出部７とへ接続されている。ＷＢ算出部７はＷＢ補正部３とノイズ抑圧量決定部８とへ接続されている。ノイズ抑圧量決定部８はノイズ抑圧部２へ接続されている。ノイズ抑圧部２は、ＷＢ補正部３とベイヤ補間部４とカラーマトリクス処理部５とを介して画像信号出力部６へ接続されている。

画像信号入力部１は、例えば、レンズと、ＲＧＢベイヤ配列の撮像素子と、等を含むものであり、この場合にはこの画像処理装置は撮像装置として構成されたものとなる。ただし、これに代えて、画像信号入力部１が、記録媒体や通信装置を介してＲＧＢベイヤ配列画像データや撮像パラメータを入力するような手段であっても構わない。

次に、この図１に示したような画像処理装置の作用について説明する。

画像信号入力部１は、撮像パラメータ設定部９からの撮像パラメータ情報（例えばＩＳＯ感度など）に基づいて、ＲＧＢベイヤ信号を取得する。そして、画像信号入力部１は、取得したＲＧＢベイヤ信号を、順次、ノイズ抑圧部２へ出力する。

ノイズ抑圧部２は、ノイズ抑圧量決定部８によって決定されたノイズ抑圧量情報に基づいてＲＧＢベイヤ信号に対してノイズ抑圧処理（ＮＲ処理）を行う。そして、ノイズ抑圧部２は、ノイズ抑圧処理を行ったＲＧＢベイヤ信号をＷＢ補正部３へ出力する。

ここで、ノイズ抑圧量決定部８は、撮像パラメータ設定部９からの撮像パラメータ情報（例えばＩＳＯ感度、光源条件、画像リサイズ率など）およびＷＢ算出部７からのＷＢ係数情報に基づいて、ノイズ抑圧量情報を算出するようになっている。

ここでさらに、ＷＢ算出部７は、撮像パラメータ設定部９からの撮像パラメータ情報（例えば光源条件など）および画像信号入力部１からのＲＧＢベイヤ信号に基づいて、ＷＢ係数情報を算出するようになっている。

ＷＢ補正部３は、ＷＢ算出部７からのＷＢ係数情報に基づいてＲＧＢベイヤ信号に対してＷＢ処理を行う。そして、ＷＢ補正部３は、ＷＢ処理を行ったＲＧＢベイヤ信号をベイヤ補間部４へ出力する。このＷＢ処理においては、一般的な光源による撮像条件の下では、Ｒ（赤）またはＢ（青）のゲイン量をＧ（緑）のゲイン量に対して上げる必要がある。これは、撮像素子のＲ，Ｇ，Ｂ画素の感度特性の違いに起因するものである。そして、このＷＢ処理に伴って、ＲまたはＢのノイズ量がＧに対して増加することになり、これが結果的に色ノイズとなって現れる原因となるのである。

ベイヤ補間部４は、ＲＧＢベイヤ信号に対してベイヤ補間処理を行うことにより、ＲＧＢベイヤ信号をＲＧＢカラー信号に変換する。そして、ベイヤ補間部４は、ＲＧＢカラー信号をカラーマトリクス処理部５へ出力する。

カラーマトリクス処理部５は、撮像パラメータ設定部９からの撮像パラメータ情報（例えば光源条件など）に基づいてＲＧＢカラー信号に対してカラーマトリクス処理を行う。そして、カラーマトリクス処理部５は、カラーマトリクス処理後のＲＧＢカラー信号を画像信号出力部６へ入力する。

画像信号出力部６は、カラーマトリクス処理部５からのＲＧＢカラー信号を表示したり記録したり送信したりするために出力する。

本実施形態においては、ベイヤ補間部４によるベイヤ補間処理が、例えば８００万（８Ｍ）画素のベイヤ画像を２００万（２Ｍ。なお、以下では同様にして、「Ｍ」を１００万を表す記号として適宜用いる。）画素のＲＧＢ画像に縮小する処理であることを前提としている。そして、このような処理の下で、色ノイズを抑圧することができるようにしたものとなっている。この点について、図２を参照して説明する。

ここに、図２は、ノイズ抑圧部２およびベイヤ補間部４の構成をより詳細に示すブロック図である。

ノイズ抑圧部２は、ＲＧＢチャネル分離部２１と、ＧチャネルＮＲ処理部２２と、ＲチャネルＮＲ処理部２３と、ＢチャネルＮＲ処理部２４と、を有して構成されている。

画像信号入力部１は、ＲＧＢチャネル分離部２１を介して、ＧチャネルＮＲ処理部２２とＲチャネルＮＲ処理部２３とＢチャネルＮＲ処理部２４とにそれぞれ接続されている。また、ノイズ抑圧量決定部８も、ＧチャネルＮＲ処理部２２とＲチャネルＮＲ処理部２３とＢチャネルＮＲ処理部２４とにそれぞれ接続されている。ＧチャネルＮＲ処理部２２とＲチャネルＮＲ処理部２３とＢチャネルＮＲ処理部２４とは、ＷＢ補正部３に接続されている。

ベイヤ補間部４は、第一の画像保持部４１と、第二の画像保持部４２と、色差算出手段たる色差算出部４３と、ＲＧＢ算出手段であり帯域制限補間手段たる帯域制限補間部４４と、ＲＧＢ算出手段たるＲＧＢ算出部４５と、を有して構成されている。

ＷＢ補正部３は、第一の画像保持部４１および第二の画像保持部４２に接続されている。第一の画像保持部４１は色差算出部４３を介して、第二の画像保持部４２はそのまま、帯域制限補間部４４へ接続されている。帯域制限補間部４４は、ＲＧＢ算出部４５へ接続されている。

次に、この図２に示したような構成の作用について説明する。

画像信号入力部１からのＲＧＢベイヤ信号がノイズ抑圧部２に順次入力されると、ノイズ抑圧部２は、入力されたＲＧＢベイヤ信号をＲＧＢチャネル分離部２１によりＲチャネル、Ｇチャネル、Ｂチャネルに分離して、Ｒチャネルの信号をＲチャネルＮＲ処理部２３へ、Ｇチャネルの信号をＧチャネルＮＲ処理部２２へ、Ｂチャネルの信号をＢチャネルＮＲ処理部２４へ、それぞれ入力する。

Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４は、ノイズ抑圧量決定部８により決定されたノイズ抑圧量を用いてＮＲ（ノイズリダクション（ノイズ抑圧））処理を行う。ここに、本実施形態においては、ノイズ抑圧量決定部８は、Ｒ，Ｇ，Ｂチャネルに各応じた第一のノイズ抑圧量ＲＨ，ＧＨ，ＢＨと、Ｇチャネルのみに応じた第二のノイズ抑圧量ＧＬ（ここに、ＧＬ＜ＧＨを満たすように決定される）と、を決定するようになっている。従って、Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４は、第一のノイズ抑圧量ＲＨ，ＧＨ，ＢＨを用いてＮＲ処理されたＲHＧHＢHベイヤ信号（第一ノイズ抑圧ＲＧＢベイヤ配列画像データ）をＷＢ補正部３へ出力するとともに、ＧチャネルＮＲ処理部２２は、第二のノイズ抑圧量ＧＬを用いてＮＲ処理されたＧL信号（第二ノイズ抑圧Ｇチャネル画像データ）をＷＢ補正部３へ出力するようになっている。

Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４から出力されＷＢ補正部３によって上述したようにＷＢ処理された上記ＲHＧHＢHベイヤ信号は、第一の画像保持部４１に入力され保持される。

また、ＧチャネルＮＲ処理部２２から出力されＷＢ補正部３によって上述したようにＷＢ処理された上記ＧL信号は、第二の画像保持部４２に入力され保持される。

色差算出部４３は、第一の画像保持部４１から入力されたＲHＧHＢHベイヤ信号を用いて、（ＲH−ＧH）ＧH（ＢH−ＧH）色差ベイヤ信号を算出する。そして、色差算出部４３は、算出した色差ベイヤ信号の内の（ＲH−ＧH）信号（第一ノイズ抑圧色差データ）および（ＢH−ＧH）信号（第一ノイズ抑圧色差データ）を帯域制限補間部４４へ出力する。

帯域制限補間部４４は、色差算出部４３から入力された（ＲH−ＧH）信号および（ＢH−ＧH）信号と、第二の画像保持部４２から入力されたＧL信号と、を用いて（例えば、補間後の画素数がＧL信号の画素数よりも少なくなるように）帯域制限しながら信号の補間を行い、補間後の信号をＲＧＢ算出部４５へ出力する。

ＲＧＢ算出部４５は、補間された信号に基づきＲＧＢ信号を算出し、出力する。

次に、図３および図４を参照して、画像処理装置の具体的な処理の流れの一例について説明する。図３は画像処理装置における図２に示したような構成部分の処理の流れを示すフローチャート、図４は画像処理装置における図２に示したような構成部分の処理の詳細を模式的に示すフローチャートである。

この処理を開始すると、ノイズ抑圧量決定部８により、ノイズ抑圧量ＲＨ，ＧＨ，ＢＨとノイズ抑圧量ＧＬとが決定される（ステップＳ１）。そして、ノイズ抑圧量ＧＨ，ＧＬはＧチャネルＮＲ処理部２２へ、ノイズ抑圧量ＲＨはＲチャネルＮＲ処理部２３へ、ノイズ抑圧量ＢＨはＢチャネルＮＲ処理部２４へ、それぞれ出力される。

一方、ＲＧＢチャネル分離部２１は、画像信号入力部１から入力されたＲＧＢベイヤ画像信号から、指定されたチャネルを分離する（ステップＳ２）。

そして、分離されたチャネルがＧチャネルであるか否かを判定する（ステップＳ３）。

ここで、Ｇチャネルであると判定された場合には、ＧチャネルＮＲ処理部２２が、Ｇチャネルの信号を、ノイズ抑圧量ＧＨを用いてＮＲ処理し信号ＧHを作成すると共に、ノイズ抑圧量ＧＬを用いてＮＲ処理し信号ＧLを作成する（ステップＳ４）。そして、ＧチャネルＮＲ処理部２２は、作成した信号ＧH，ＧLをＷＢ補正部３へ出力する。

また、ステップＳ２において、Ｇチャネルでないと判定された場合には、分離されたチャネルがＲチャネルであるか否かを判定する（ステップＳ５）。

ここで、Ｒチャネルであると判定された場合には、ＲチャネルＮＲ処理部２３が、Ｒチャネルの信号を、ノイズ抑圧量ＲＨを用いてＮＲ処理し信号ＲHを作成する（ステップＳ６）。そして、ＲチャネルＮＲ処理部２３は、作成した信号ＲHをＷＢ補正部３へ出力する。

ステップＳ５において、Ｒチャネルでないと判定された場合には、分離されたチャネルがＢチャネルであることになるために、ＢチャネルＮＲ処理部２４が、Ｂチャネルの信号を、ノイズ抑圧量ＢＨを用いてＮＲ処理し信号ＢHを作成する（ステップＳ７）。そして、ＢチャネルＮＲ処理部２４は、作成した信号ＢHをＷＢ補正部３へ出力する。

なお、ステップＳ４、ステップＳ６、およびステップＳ７における具体的なＮＲ処理については、後で図４のステップＳＡ１を参照して説明する。

ステップＳ４、ステップＳ６、またはステップＳ７の処理を行ったら、全てのチャネルについての処理が終了したか否かを判定し（ステップＳ８）、まだ未処理のチャネルがある場合にはステップＳ２へ戻って、未処理のチャネルを指定チャネルとして上述したような処理を行う。

こうして、ステップＳ８において、全てのチャネルについての処理が終了したと判定された場合には、ＷＢ補正部３が、ＮＲ処理後の各信号に対してＷＢ処理を行う（ステップＳ９）。

次に、ノイズ抑圧量ＧＨを用いてＮＲ処理されたＧH信号と、ノイズ抑圧量ＲＨ，ＢＨを用いてＮＲ処理されたＲH，ＢH信号と、からそれぞれ複数の色差信号（ＲH−ＧH），（ＢH−ＧH）を作成して、作成した複数の色差信号の中から最適な色差信号（ＲH−ＧH），（ＢH−ＧH）を１つずつ決定する（ステップＳ１０）。なお、このステップＳ１０における具体的な色差算出処理および選択処理については、後で図４のステップＳＡ２を参照して説明する。

続いて、ノイズ抑圧量ＧＬを用いてＮＲ処理されたＧL信号と、最適な色差信号（ＲH−ＧH），（ＢH−ＧH）と、のそれぞれに対して帯域制限補間処理を行う（ステップＳ１１）。

その後、帯域制限補間されたＧ信号と帯域制限補間された（Ｒ−Ｇ），（Ｂ−Ｇ）とを加算することにより、帯域制限補間されたＲ，Ｂ信号を算出する（ステップＳ１２）。

なお、ステップＳ１１およびステップＳ１２における具体的な補間処理については、後で図４のステップＳＡ３およびステップＳＡ４を参照して説明する。

次に、図４を参照して、図３に示した各処理の要部をより具体的に説明する。

まず、ステップＳＡ１において、以下のような処理を行う。

８ＭのＲＧＢベイヤ画像を、ＲＧＢチャネル毎にノイズ抑圧処理（ＮＲ処理）する。このＮＲ処理は、ノイズの抑圧量を変更することができるＮＲ処理となっている。このようなＮＲ処理の具体例を以下に示す。

先ず、撮像装置に起因するノイズ量をコアリング量とする。撮像装置においては、一般に、信号レベルが増加するとノイズ量も増加することが知られている。従って、ある信号レベルに対して１つのノイズ量が決定され、決定されたノイズ量をコアリング量とする。

次に、あるノイズを含んだ原信号に対して空間的な平滑化フィルタリング処理を行った信号をリファレンス信号とする。

続いて、リファレンス信号と原信号とを比較して例えば差分をとり、その差分が上記コアリング量以下であった場合には、原信号をリファレンス信号に置き換えてノイズ抑圧信号として出力する。一方、差分が上記コアリング量より大きい場合には、さらに、原信号とリファレンス信号との大小を比較する。そして、原信号がリファレンス信号よりも大きい場合には原信号からコアリング量を減算したものをノイズ抑圧信号として出力し、原信号がリファレンス信号よりも小さい場合には原信号にコアリング量を加算したものをノイズ抑圧信号として出力する。

このようなノイズ抑圧処理においては、ある係数を乗算してコアリング量を変えることによりノイズ抑圧量を変化させることができる。具体的には、コアリング量に０．５を掛けたものをノイズ抑圧量Ｌ、コアリング量に２を掛けたものをノイズ抑圧量Ｈとする例が挙げられる。そして、上述したようなＮＲ処理においては、コアリング量を大きくすればより多くの原信号が平滑化されている上記リファレンス信号に置き換わることになるために、よりノイズが抑圧されることになる。

ノイズ抑圧量決定部８は、図１に示したように、撮像パラメータ（例えば、撮影時の光源特性やカメラのＩＳＯ感度設定やＷＢ係数に含まれるＲＧＢ係数など）に基づいて、ノイズ抑圧量を決定するようになっている。

具体的な例として、ＷＢ補正処理およびカラーマトリクス処理によってＲがＧに比べて２倍の値の係数が乗算されている場合には、ノイズ抑圧量決定部８は、Ｒのノイズ抑圧量の値をＧのノイズ抑圧量の値の２倍の値に設定する、といった処理を行うことになる。そして、ＷＢ補正処理やカラーマトリクス処理によるＲＧＢのバランスの崩れは、撮影時の光源特性などの撮像パラメータに基づき算出することができる。

また、デジタルカメラのＩＳＯ感度設定などにより画像全体に一律のゲインがかかる処理が行われた場合には、ノイズ抑圧量Ｈとノイズ抑圧量Ｌとの比率を保ったまま両方のノイズ抑圧量Ｈ，Ｌを一律に変化させることもできるし、ノイズ抑圧量Ｈとノイズ抑圧量Ｌとの比率を変えることも可能である。

例えば、画像処理装置が適用されたデジタルカメラであって、このデジタルカメラにおいてＩＳＯ感度設定がＩＳＯ１００からＩＳＯ２００に変更された場合には、一般に、ＩＳＯ２００の画像はＩＳＯ１００の画像に対して画面全体に２倍のゲインをかけたことになる。このとき、ノイズ抑圧量Ｈとノイズ抑圧量Ｌとの比率を保ったまま両方のノイズ抑圧量Ｈ，Ｌを一律に変化させる処理を行う場合には、ＩＳＯ１００のときのノイズ抑圧量をＨ，Ｌとすると、ＩＳＯ感度設定をＩＳＯ２００に変化させたときのノイズ抑圧量も連動して２Ｈ，２Ｌ（Ｈ，Ｌを各２倍した値）となることになる。これにより、例えばＩＳＯ感度設定等の、画面に一律のゲインがかかる処理が行われた場合には、その度にノイズ抑圧量を算出する必要はなく、既に算出されているノイズ抑圧量に決まった数値を乗算するという簡単な処理を行うだけで済む利点がある。これに対して、上述したように、ＩＳＯ感度設定毎にノイズ抑圧量Ｈとノイズ抑圧量Ｌとの比率を変えるようにすることも可能であるために、より適切なノイズ抑圧量を高精度に決定することも可能となる。

上述したようなノイズ抑圧処理を行う場合において、ノイズ抑圧量Ｈをノイズ抑圧量Ｌに対してより大きな値になるように設定すると、ベイヤ補間時に生成される色差（ＲH−ＧH），（ＢH−ＧH）に含まれるノイズがさらに低減されることになるために、結果として、色ノイズをより強く低減する効果が生じる。つまり、ノイズ抑圧量Ｈは、色ノイズ量を規定する量となる。

これに対して、ノイズ抑圧量Ｌを用いてノイズ低減されたＧL信号により帯域制限補間されて算出されたＧ信号は、上記色差（ＲH−ＧH），（ＢH−ＧH）の帯域制限補間された（Ｒ−Ｇ），（Ｂ−Ｇ）と加算されてＲＧＢ信号を算出する信号であるために、このＧ信号に含まれるノイズは、出力結果であるＲＧＢ信号に同程度混入することになる。つまり、ノイズ抑圧量Ｌは、輝度ノイズ量を規定する量となる。

従って、色ノイズ低減を輝度ノイズ低減より優先する場合には、ノイズ抑圧量Ｈの値がノイズ抑圧量Ｌの値よりも大きくなるように設定し、逆に色ノイズ低減よりも輝度ノイズ低減を優先する場合には、ノイズ抑圧量Ｈの値をノイズ抑圧量Ｌの値により近づけるように設定する、という制御を行うようにしても良い。

図５は、ＩＳＯ感度の増減に応じてノイズ抑圧量ＧＨ，ＧＬを制御する一例を示す線図である。

色ノイズは、ＩＳＯ感度の増加につれて顕在化し、逆にＩＳＯ感度を低下させると顕在化しなくなる傾向にある。そこで、このような色ノイズをより効果的に低減するために、この図５に示す例においては、ＩＳＯ感度が低い領域ではノイズ抑圧量Ｈ（図５中のノイズ抑圧量ＧＨ）とノイズ抑圧量Ｌ（図５中のノイズ抑圧量ＧＬ）とを同一の値とするが、ＩＳＯ感度が高くなるにつれてノイズ抑圧量Ｈがノイズ抑圧量Ｌよりも大きな値となるように（比率も大きくなるように）している。これにより、ＩＳＯ感度が高い場合には、輝度解像度を保ったまま色ノイズを低減したＲＧＢ信号を生成することができる。また、ＩＳＯ感度が低い場合には、ノイズ抑圧量Ｈが小さく上記色差（Ｒ−Ｇ），（Ｂ−Ｇ）の空間周波数を落とさなくても良くなるために、輝度解像度だけでなく色解像度も高く保ったＲＧＢ信号を生成することができる。

ＩＳＯ感度に応じて変化させるノイズ抑圧量は、処理毎に、ＩＳＯ感度に基づき計算により求めるようにしても良いし、ＩＳＯ感度に対応したノイズ抑圧量Ｈ，Ｌをルックアップテーブルに予め保持しておいて、このルックアップテーブルから読み出すようにしても構わない。そして、このルックアップテーブルは、複数用意しておき、撮像条件に応じてこれら複数のルックアップテーブルを切り替えるようにしても良い。

ここで、ＲＧＢ各チャネルのノイズ抑圧量に乗算する係数を決定する要因として、ＷＢ補正処理、カラーマトリクス処理、ＩＳＯ感度を例に挙げているが、その他にも要因が存在する場合には、もちろん該要因にも依存するようにノイズ抑圧量に乗算する係数を決定すると良い。

なお、本実施形態においては上述したようにコアリング処理に基づくＮＲ処理を適用したが、適用可能なＮＲ処理はこれに限るものではなく、ノイズ抑圧量を変化させることができるＮＲ処理であれば広く適用可能である。例えば、最も単純な処理の例としては、平滑化フィルタの周波数特性（つまりフィルタ係数）をノイズ抑圧量に応じて変更するタイプのＮＲ処理を適用する技術が挙げられる。

このようなノイズ抑圧量を変化させることができる何れかのタイプのＮＲ処理を用いて、あるノイズ抑圧量ＲＨ，ＧＨ，ＢＨに基づきＮＲ処理を行った８ＭのＲＧＢベイヤ画像を８ＭのＲHＧHＢHベイヤ画像（第一ノイズ抑圧ＲＧＢベイヤ配列画像データ）とする。また、同じ８ＭのＲＧＢベイヤ画像のＧチャネルに対してあるノイズ抑圧量ＧＬ（ＧＬ＜ＧＨ）を用いてＮＲ処理を行った画像を４ＭのＧLブロック（第二ノイズ抑圧Ｇチャネル画像データ）とする。

次に、ステップＳＡ２において、以下のような処理を行う。

上述したようなステップＳＡ１の処理により算出した８ＭのＲHＧHＢHベイヤ画像におけるＲHの位置のＧHを複数の補間方法により算出して、さらに、補間して得られた複数のＧHを用いてＲHの位置における複数の色差候補（ＲH−ＧH）を算出する。ここに、本実施形態においては、ＧHの補間方法として、次に説明するような３つの補間方法を用いるものとする。

まず、第一の補間方法は、ＲHを水平方向に挟むＧHに基づき、線形補間によりＲHの位置におけるＧHを算出する方法である。次に、第二の補間方法は、ＲHを垂直方向に挟むＧHに基づき、線形補間によりＲHの位置におけるＧHを算出する方法である。さらに、第三の補間方法は、ＲHの水平および垂直方向に隣接する４つのＧH画素に基づき、ＲHの位置におけるＧHを補間する方法である。

これら３つの補間方法により各算出された３つのＧHに基づき、３つの色差候補（ＲH−ＧH）を算出する。

続いて、３つの色差候補（ＲH−ＧH）に対して、３×３色差（着目するＲHの位置を中心とした５×５画素の領域をとれば、この領域内に３×３の色差候補（ＲH−ＧH）が存在する。）内の類似度を（例えば、差分絶対値の総和をとる等の手段により）算出する。そして、３つの色差候補（ＲH−ＧH）の中で類似度が最大となるものを１つ選択して、選択した最大類似度の色差候補を色差（ＲH−ＧH）として決定する。

さらに、これと同様の処理をＢHに対しても行い、色差（ＢH−ＧH）を決定する。

このような処理を画像全体に対して行うことにより、８Ｍの（ＲH−ＧH）ＧH（ＢH−ＧH）ベイヤ画像を算出する。

そして、このステップＳＡ２の処理を行うことにより、折り返し歪みによるＲとＢとの偽色の発生を低減することができる。

なお、上述では、欠落Ｇ信号を補間する際に、水平方向に隣接する２画素、垂直方向に隣接する２画素、水平および垂直方向に隣接する４画素、を用いたが、これらに限らず、その他の補間方法を適用することも可能である。例えば、欠落Ｇ信号の補間を、その周辺Ｇ信号の勾配を基に、水平隣接Ｇ画素の線形補間と、垂直隣接Ｇ画素の線形補間と、これら２つの補間値の重み付き平均と、により求める方法を適用することも可能であるし、それ以外の補間方法を適用するようにしても構わない。何れの補間方法を用いて算出したＧ信号に基づき色差（Ｒ−Ｇ），（Ｂ−Ｇ）を算出したとしても、偽色低減のレベルが異なるだけである。

続いて、ステップＳＡ３において、以下のような処理を行う。

ステップＳＡ２により算出した８Ｍの（ＲH−ＧH）ＧH（ＢH−ＧH）ベイヤ画像におけるＧH信号と、ステップＳＡ１により算出したＧL信号と、を置き換えることにより、８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像を算出する。

このステップＳＡ３の処理により、ノイズ抑圧量が小さく解像感が保持された信号ＧLが処理に用いられることになるために、最終的に解像感が保持された画像を生成することができる。

そして、ステップＳＡ４において、以下のような処理を行う。

ステップＳＡ３により算出した８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像に対して、次に示すような帯域制限補間処理、
（ＲH−ＧH）＋ＧL→Ｒ
ＧL→Ｇ
（ＢH−ＧH）＋ＧL→Ｂ
を行うことにより、２ＭＲＧＢ画像を算出する。なお、この実施形態においては、帯域制限補間処理としてＬａｎｃｚｏｓフィルタによる縮小補間を用いているが、帯域制限補間処理はこれに限るものではない。

上述したようなステップＳＡ３により信号ＧHを信号ＧLに置き換えているために、Ｇ信号についてはノイズ抑圧量が小さくなっている。しかし、このステップＳＡ４により行う帯域制限補間処理では、Ｇ信号を縦横半分に縮小する上で折り返し歪みを発生させないように帯域制限しているために、Ｇ信号の高周波域のノイズをカットすることができる。このために、帯域制限補間を行った後は、Ｇ信号のノイズ抑圧量がＧLよりも大きくなり、最終的にはノイズ量を少なくすることができる。

なお、本実施形態においては、縦横各半分の（つまり、４分の１の画素数の）縮小画像を作成する場合を例に挙げて説明したが、これに限らず縮小率を任意に変更するようにしても良い。このときには、縮小率に対応して決定される帯域制限補間処理のローパスフィルタ特性と上記ノイズ抑圧量ＧＬとに応じて、最終的なＧ信号のノイズ量が決定されることになる。

これはつまり、画像縮小率とＧ信号の目標ノイズ量（輝度ノイズ量に対応）とに応じてノイズ抑圧量ＧＬを決定可能であることを意味している。例えば縮小率を小さくする（つまり、より縮小する）場合には、帯域制限補間処理のフィルタ特性がより高周波をカットするフィルタ特性になるために、高周波に多く含まれるノイズをカットすることができることになる。従って、このときには、Ｇ信号のノイズ抑圧量ＧＬをさらに小さくして、最終的なＧ信号のノイズ量を目標値に合わせるようにすると良い。そして、これとは逆に、縮小率が１／２よりも大きい（例えば縮小率２／３などの）画像を作成する場合には、帯域制限補間処理のフィルタ特性がより高周波を通すフィルタ特性になるために、高周波ノイズがカットされる程度が小さくなることになる。従って、このときには、Ｇ信号のノイズ抑圧量ＧＬを大きめに設定（ただし、ＧＬ＜ＧＨを満たす範囲内で設定）して、最終的なＧ信号のノイズ量を目標値に合わせるようにすると良い。ここに、ノイズ抑圧量決定部８が備える図示しないルックアップテーブルには、撮像パラメータと上記目標値との対応関係が予め記録されていて、このルックアップテーブルを参照することにより、撮像パラメータに応じた目標値を決定するようになっている。

図６は、所定ＩＳＯ感度におけるＧ信号のノイズ量を目標値とする場合の、画像リサイズ率とノイズ抑圧量ＧＨ，ＧＬとの関係を示すグラフである。

この図６に示す例においては、リサイズ率が１００％よりも小さくなると、ノイズ抑圧量ＧＬは単調に減少するようになっている。これに対して、ノイズ抑圧量ＧＨは、リサイズ率が５０％以上のときには一定値を保ち、この５０％未満となったときに始めて単調に減少するようになっている。

このような実施形態１によれば、一般にＧよりもノイズ量が多いＲＢに関してノイズ抑圧量を大きく設定し、より多くのノイズを抑圧するようにしたために、色ノイズを抑圧することができる。また、ベイヤ補間を行う際に、解像感が保持されたＧLを用いるようにしたために、補間後の画像の解像感を保持することも可能となる。さらに、色差を算出する際に、同程度のノイズ抑圧量の（つまり、波形が揃っていて、同程度の解像感、先鋭感を保持した）ＲＧまたはＢＧを用いるようにしたために、エッジ部分における偽色の発生を抑圧することができる。

そして、上述した背景技術とは異なり、エッジ部分においてもノイズ抑圧を行っているために、エッジ部分のノイズを抑圧することもできる。

［実施形態２］
図７から図９は本発明の実施形態２を示したものであり、図７はノイズ抑圧部およびベイヤ補間部の構成をより詳細に示すブロック図である。この実施形態２において、上述の実施形態１と同様である部分については同一の符号を付して説明を省略し、主として異なる点についてのみ説明する。

まず、この実施形態２における画像処理装置全体の構成は、上述した実施形態１の図１に示したものと同様である。

そして、この実施形態２においては、ベイヤ補間部４によるベイヤ補間処理が、例えば８００万（８Ｍ）画素のベイヤ画像を８００万（８Ｍ）画素のＲＧＢ画像にする処理であることを前提としている。そして、このような処理の下で、色ノイズを抑圧することができるようにしたものとなっている。この点について、図７を参照して説明する。

図７に示す構成は、上述した実施形態１の図２に示した構成とほぼ同様であるが、ベイヤ補間部４の内部構成がやや異なるものとなっている。

すなわち、この実施形態２のベイヤ補間部４は、図２に示した帯域制限補間部４４に代えて、ＲＧＢ算出手段でありＧ画素作成手段たるＧ画素作成部４６と、ＲＧＢ算出手段であり補間手段たる補間部４７と、を配設したものとなっている。ここに、第一の画像保持部４１および色差算出部４３は、Ｇ画素作成部４６へ接続されている。また、第二の画像保持部４２、色差算出部４３、およびＧ画素作成部４６は、補間部４７へ接続されている。さらに、補間部４７は、ＲＧＢ算出部４５へ接続されている。

次に、この図７に示したような構成の作用について説明する。

この図７に示した構成の作用の内、画像信号入力部１、ノイズ抑圧部２、ノイズ抑圧量決定部８、ＷＢ補正部３の各処理は、上述した実施形態１において図２を参照して説明した処理と同様である。

また、ベイヤ補間部４において、第一の画像保持部４１に入力される信号、第二の画像保持部４２に入力される信号、および色差算出部４３による色差ベイヤ信号の算出処理も、上述した実施形態１と同様である。

Ｇ画素作成部４６には、第一の画像保持部４１からの信号ＲH，ＢHと、色差算出部４３からの信号（ＲH−ＧH），（ＢH−ＧH）と、が入力される。Ｇ画素作成部４６は、これら入力された信号に基づいて、信号（ＲH−ＧH），（ＢH−ＧH）の位置における信号ＧHを作成する。

補間部４７には、Ｇ画素作成部４６からの信号ＧHと、色差算出部４３からの信号（ＲH−ＧH），（ＢH−ＧH）と、第二の画像保持部４２からの信号ＧLと、が入力される。そして、補間部４７は、信号ＧHおよび信号ＧLに対して補間を行うことにより補間されたＧ信号を作成すると共に、信号（ＲH−ＧH），（ＢH−ＧH）に対して補間を行うことにより、補間された信号（ＲH−ＧH）と、補間された信号（ＢH−ＧH）と、を作成する。

ＲＧＢ算出部４５には、補間部４７により補間された信号が入力される。ＲＧＢ算出部４５は、入力された補間後のＧ信号をＧ信号とするとともに、補間後の色差信号（ＲH−ＧH）と補間後のＧ信号とを加算することによりＲ信号を算出し、補間後の色差信号（ＢH−ＧH）と補間後のＧ信号とを加算することによりＢ信号を算出する。これにより、ＲＧＢ信号が算出される。

次に、図８および図９を参照して、画像処理装置の具体的な処理の流れの一例について説明する。図８は画像処理装置における図７に示したような構成部分の処理の流れを示すフローチャート、図９は画像処理装置における図７に示したような構成部分の処理の詳細を模式的に示すフローチャートである。

図８の処理を開始すると、図３のステップＳ１〜Ｓ１０に示したのと同様の処理を行う。

次に、ノイズ抑圧量ＲＨ，ＢＨを各用いてＮＲ処理されたＲH，ＢH信号と、最適な色差信号（ＲH−ＧH），（ＢH−ＧH）と、に基づき、
ＲH−（ＲH−ＧH）
ＢH−（ＢH−ＧH）
の演算を行うことにより、信号（ＲH−ＧH），（ＢH−ＧH）の位置におけるＧH信号を作成する（ステップＳ２１）。

続いて、このＧH信号およびノイズ抑圧量ＧＬを用いてＮＲ処理されたＧL信号と、最適な色差信号（ＲH−ＧH），（ＢH−ＧH）と、のそれぞれに補間処理を行う（ステップＳ２２）。

その後は、ステップＳ１２において、補間されたＧ信号と、補間された（Ｒ−Ｇ），（Ｂ−Ｇ）信号と、を加算することにより、補間されたＲ，Ｂ信号を算出する。

次に、図９を参照して、図８に示した各処理の要部をより具体的に説明する。

ステップＳＢ１〜ＳＢ３の処理は、上述した実施形態１のステップＳＡ１〜ＳＡ３に示した処理と同様である。

続いて、ステップＳＢ４において、以下のような処理を行う。

ステップＳＢ３により算出した８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像の（ＲH−ＧH）と、ステップＳＢ１により算出したＲHと、を用いて、ＲH−（ＲH−ＧH）の演算を行うことにより、色差信号（ＲH−ＧH）の位置におけるＧH信号を算出する。

同様に、ステップＳＢ３により算出した８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像の（ＢH−ＧH）と、ステップＳＢ１により算出したＢHと、を用いて、ＢH−（ＢH−ＧH）の演算を行うことにより、色差信号（ＢH−ＧH）の位置におけるＧH信号を算出する。

このようにして、８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像からＧブロックおよび（ＲH−ＧH）（ＢH−ＧH）ブロックを算出する。

続いて、Ｇブロックに補間処理を行うことにより８ＭのＧ信号を作成すると共に、（ＲH−ＧH）（ＢH−ＧH）ブロックに補間処理を行うことにより８Ｍの色差信号（ＲH−ＧH）と８Ｍの色差信号（ＢH−ＧH）とを作成する。そして、この補間処理の結果を用いて、各画素位置において、
（ＲH−ＧH）＋Ｇ→Ｒ
Ｇ→Ｇ
（ＢH−ＧH）＋Ｇ→Ｂ
のような加算を行うことにより、８ＭのＲＧＢ画像を算出する。

なお、上述においては、ＲＧＢベイヤ画像の画素数と同じ画素数のＲＧＢ画像を作成する例を示したが、補間処理をやや異ならせることによりＲＧＢベイヤ画像の画素数よりも多い画素数のＲＧＢ画像を作成することも可能であるし、あるいは上述した実施形態１と同様に、ＲＧＢベイヤ画像の画素数よりも少ない画素数の縮小されたＲＧＢ画像を作成することもできる。例えば後者の場合には、上記補間処理を実施形態１の帯域制限補間処理に置き換えることにより可能となる。

このような実施形態２によれば、一般にＧよりもノイズ量が多いＲＢに関してノイズ抑圧量を大きく設定し、より多くのノイズを抑圧するようにしたために、色ノイズを抑圧することができる。また、ベイヤ補間を行う際に、解像感が保持されたＧLを用いるようにしたために、補間後の画像の解像感を保持することも可能となる。さらに、色差を算出する際に、同程度のノイズ抑圧量の（つまり、波形が揃っていて、同程度の解像感、先鋭感を保持した）ＲＧまたはＢＧを用いるようにしたために、エッジ部分における偽色の発生を抑圧することができる。

そして、上述した背景技術とは異なり、エッジ部分においてもノイズ抑圧を行っているために、エッジ部分のノイズを抑圧することもできる。

［実施形態３］
図１０から図１２は本発明の実施形態３を示したものであり、図１０はノイズ抑圧部およびベイヤ補間部の構成をより詳細に示すブロック図である。この実施形態３において、上述の実施形態１，２と同様である部分については同一の符号を付して説明を省略し、主として異なる点についてのみ説明する。

まず、この実施形態３における画像処理装置全体の構成は、上述した実施形態１の図１に示したものと同様である。

そして、この実施形態３においては、上述した実施形態２と同様に、ベイヤ補間部４によるベイヤ補間処理が、例えば８００万（８Ｍ）画素のベイヤ画像を８００万（８Ｍ）画素のＲＧＢ画像にする処理であることを前提としている。そして、このような処理の下で、色ノイズを抑圧することができるようにしたものとなっている。この点について、図１０を参照して説明する。

図１０に示す構成は、上述した実施形態２の図７に示した構成とほぼ同様であるが、ベイヤ補間部４の内部における信号の流れが実施形態２とは異なるものとなっている。すなわち、この実施形態３のベイヤ補間部４においては、第二の画像保持部４２はＧ画素作成部４６へも接続されている一方で、第一の画像保持部４１は直接はＧ画素作成部４６へ接続されていない。

さらに、この実施形態３においては、ノイズ抑圧部２により行われる処理の内容、およびＧ画素作成部４６により行われる処理の内容も、上述した実施形態２とは異なるものとなっている。

次に、この図１０に示したような構成の作用について説明する。

この図１０に示した構成の作用の内、画像信号入力部１の処理およびノイズ抑圧部２におけるＲＧＢチャネル分離部２１の処理は、上述した実施形態１において図２を参照して説明した処理と同様である。

ただし、本実施形態においては、ノイズ抑圧量決定部８は、第一のノイズ抑圧量ＲＨ，ＧＨ，ＢＨおよび第二のノイズ抑圧量ＧＬを決定すると共に、さらに第二のノイズ抑圧量ＲＬ，ＢＬ（ここに、ＲＬ＜ＲＨ、ＢＬ＜ＢＨをそれぞれ満たすように決定される。なお、ＧＬ＜ＧＨを満たすように決定されるのは、上述と同様である。）を決定するようになっている。

そして、Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４は、ノイズ抑圧量ＲＨ，ＧＨ，ＢＨを用いてＮＲ処理しＲHＧHＢHベイヤ信号を算出するとともに、ノイズ抑圧量ＲＬ，ＧＬ，ＢＬを用いてＮＲ処理しＲLＧLＢLベイヤ信号（第二ノイズ抑圧Ｒチャネル画像データ、第二ノイズ抑圧Ｇチャネル画像データ、および第二ノイズ抑圧Ｂチャネル画像データ）を算出する。その後、Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４は、算出したＲHＧHＢHベイヤ信号およびＲLＧLＢLベイヤ信号をＷＢ補正部３へ出力する。

次に、ＷＢ補正部３は、ノイズ抑圧部２からのＲHＧHＢHベイヤ信号およびＲLＧLＢLベイヤ信号に、上述したようにＷＢ処理を行う。

続いて、Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４から出力されＷＢ補正部３によってＷＢ処理された上記ＲHＧHＢHベイヤ信号は、ベイヤ補間部４の第一の画像保持部４１に入力され保持される。

また、Ｒ，Ｇ，ＢチャネルＮＲ処理部２３，２２，２４から出力されＷＢ補正部３によってＷＢ処理された上記ＲLＧLＢLベイヤ信号は、ベイヤ補間部４の第二の画像保持部４２に入力され保持される。

その後のベイヤ補間部４の色差算出部４３による（ＲH−ＧH）ＧH（ＢH−ＧH）色差ベイヤ信号の算出処理は、上述した実施形態１と同様である。

Ｇ画素作成部４６には、第二の画像保持部４２からの信号ＲL，ＢLと、色差算出部４３からの信号（ＲH−ＧH），（ＢH−ＧH）と、が入力される。Ｇ画素作成部４６は、これら入力された信号に基づいて、信号（ＲH−ＧH），（ＢH−ＧH）の位置における信号ＧH’を後述するように作成する。

補間部４７には、Ｇ画素作成部４６からの信号ＧH’と、色差算出部４３からの信号（ＲH−ＧH），（ＢH−ＧH）と、第二の画像保持部４２からの信号ＧLと、が入力される。補間部４７は、入力された信号に基づいて上述したように補間を行う。

その後のＲＧＢ算出部４５の処理は、上述と同様である。

次に、図１１および図１２を参照して、画像処理装置の具体的な処理の流れの一例について説明する。図１１は画像処理装置における図１０に示したような構成部分の処理の流れを示すフローチャート、図１２は画像処理装置における図１０に示したような構成部分の処理の詳細を模式的に示すフローチャートである。

この処理を開始すると、ノイズ抑圧量決定部８により、ノイズ抑圧量ＲＨ，ＧＨ，ＢＨとノイズ抑圧量ＲＬ，ＧＬ，ＢＬとが決定される（ステップＳ３１）。そして、ノイズ抑圧量ＧＨ，ＧＬはＧチャネルＮＲ処理部２２へ、ノイズ抑圧量ＲＨ，ＲＬはＲチャネルＮＲ処理部２３へ、ノイズ抑圧量ＢＨ，ＢＬはＢチャネルＮＲ処理部２４へ、それぞれ出力される。

その後のステップＳ２〜Ｓ５の処理は、上述した実施形態１と同様である。

また、ステップＳ５において、Ｒチャネルであると判定された場合には、ＲチャネルＮＲ処理部２３が、Ｒチャネルの信号を、ノイズ抑圧量ＲＨを用いてＮＲ処理し信号ＲHを作成すると共に、ノイズ抑圧量ＲＬを用いてＮＲ処理し信号ＲLを作成する（ステップＳ３２）。そして、ＲチャネルＮＲ処理部２３は、作成した信号ＲH，ＲLをＷＢ補正部３へ出力する。

ステップＳ５において、Ｒチャネルでないと判定された場合には、分離されたチャネルがＢチャネルであることになるために、ＢチャネルＮＲ処理部２４が、Ｂチャネルの信号を、ノイズ抑圧量ＢＨを用いてＮＲ処理し信号ＢHを作成すると共に、ノイズ抑圧量ＢＬを用いてＮＲ処理し信号ＢLを作成する（ステップＳ３３）。そして、ＢチャネルＮＲ処理部２４は、作成した信号ＢH，ＢLをＷＢ補正部３へ出力する。

なお、ステップＳ４、ステップＳ３２、およびステップＳ３３における具体的なＮＲ処理については、後で図１２のステップＳＣ１を参照して説明する。

その後、ステップＳ８〜Ｓ１０の処理を行う。

次に、ノイズ抑圧量ＲＬ，ＢＬを各用いてＮＲ処理されたＲL，ＢL信号と、最適な色差信号（ＲH−ＧH），（ＢH−ＧH）と、に基づき、
ＲL−（ＲH−ＧH）
ＢL−（ＢH−ＧH）
の演算を行うことにより、ＧH’信号を作成する（ステップＳ３４）。

続いて、このＧH’信号およびノイズ抑圧量ＧＬを用いてＮＲ処理されたＧL信号と、最適な色差信号（ＲH−ＧH），（ＢH−ＧH）と、のそれぞれに補間処理を行う（ステップＳ３５）。

その後は、ステップＳ１２において、補間されたＧ信号と、補間された（Ｒ−Ｇ），（Ｂ−Ｇ）信号と、を加算することにより、補間されたＲ，Ｂ信号を算出する。

なお、ステップＳ３４およびステップＳ３５における具体的な補間処理については、後で図１２のステップＳＣ４を参照して説明する。

次に、図１２を参照して、図１１に示した各処理の要部をより具体的に説明する。

まず、ステップＳＣ１において、以下のような処理を行う。

８ＭのＲＧＢベイヤ画像を、ＲＧＢチャネル毎にノイズ抑圧処理（ＮＲ処理）する。このＮＲ処理は、ノイズの抑圧量を変更することができるＮＲ処理となっている。なお、本実施形態に適用可能なＮＲ処理が、コアリング処理に基づくＮＲ処理に限るものではなく、ノイズ抑圧量を変化させることができる処理であれば広く適用可能であることは、上述と同様である。

このようなノイズ抑圧量を変化させることができる何れかのタイプのＮＲ処理を用いて、あるノイズ抑圧量ＲＨ，ＧＨ，ＢＨに基づきＮＲ処理を行った８ＭのＲＧＢベイヤ画像を８ＭのＲHＧHＢHベイヤ画像とする。また、ノイズ抑圧量ＲＨ，ＧＨ，ＢＨとは異なるあるノイズ抑圧量ＲＬ，ＧＬ，ＢＬ（ＲＬ＜ＲＨ、ＧＬ＜ＧＨ、ＢＬ＜ＢＨ）に基づきＮＲ処理を行った同じ８ＭのＲＧＢベイヤ画像を８ＭのＲLＧLＢLベイヤ画像とする。

続くステップＳＣ２，ＳＣ３の処理は、上述した実施形態１のステップＳＡ２，ＳＡ３に示した処理と同様である。

その後、ステップＳＣ４において、以下のような処理を行う。

ステップＳＣ３により算出した８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像の（ＲH−ＧH）と、ステップＳＣ１により算出したＲLと、を用いて、ＲL−（ＲH−ＧH）の演算を行うことにより、色差信号（ＲH−ＧH）の位置におけるＧH’信号を算出する。

同様に、ステップＳＣ３により算出した８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像の（ＢH−ＧH）と、ステップＳＣ１により算出したＢLと、を用いて、ＢL−（ＢH−ＧH）の演算を行うことにより、色差信号（ＢH−ＧH）の位置におけるＧH’信号を算出する。

このようにして、８Ｍの（ＲH−ＧH）ＧL（ＢH−ＧH）ベイヤ画像からＧブロックおよび（ＲH−ＧH）（ＢH−ＧH）ブロックを算出する。

続いて、Ｇブロックに補間処理を行うことにより８ＭのＧ信号を作成すると共に、（ＲH−ＧH）（ＢH−ＧH）ブロックに補間処理を行うことにより８Ｍの色差信号（ＲH−ＧH）と８Ｍの色差信号（ＢH−ＧH）とを作成する。そして、この補間処理の結果を用いて、各画素位置において、
（ＲH−ＧH）＋Ｇ→Ｒ
Ｇ→Ｇ
（ＢH−ＧH）＋Ｇ→Ｂ
のような加算を行うことにより、８ＭのＲＧＢ画像を算出する。

なお、上述においては、ＲＧＢベイヤ画像の画素数と同じ画素数のＲＧＢ画像を作成する例を示したが、補間処理をやや異ならせることによりＲＧＢベイヤ画像の画素数よりも多い画素数のＲＧＢ画像を作成することも可能であるし、あるいは上述した実施形態１と同様に、ＲＧＢベイヤ画像の画素数よりも少ない画素数の縮小されたＲＧＢ画像を作成することもできる。例えば後者の場合には、上記補間処理を実施形態１の帯域制限補間処理に置き換えることにより可能となる。

このような実施形態３によれば、一般にＧよりもノイズ量が多いＲＢに関してノイズ抑圧量を大きく設定し、より多くのノイズを抑圧するようにしたために、色ノイズを抑圧することができる。また、ベイヤ補間を行う際に、解像感が保持されたＧLを用いるようにしたために、補間後の画像の解像感を保持することも可能となる。さらに、ＧH’を算出する際に、ＲL−（ＲH−ＧH）＝ＧH＋（ＲL−ＲH）の計算を行っていて、つまりＧHにＲの高周波成分（ＲL−ＲH）を加算することを行っているために、解像感の高いＧHを作成することができる。そして、この解像感の高いＧHを用いて補間を行うようにしているために、最終的に、より解像感が保持された画像を作成することができる。加えて、色差を算出する際に、同程度のノイズ抑圧量の（つまり、波形が揃っていて、同程度の解像感、先鋭感を保持した）ＲＧまたはＢＧを用いるようにしたために、エッジ部分における偽色の発生を抑圧することができる。

そして、上述した背景技術とは異なり、エッジ部分においてもノイズ抑圧を行っているために、エッジ部分のノイズを抑圧することもできる。

なお、上述した各実施形態の画像処理装置は、放送用据え置き型カメラ、ＥＮＧ（Electric News Gathering）カメラ、民生用ハンディカメラ、デジタルカメラ等の製品に広く適用することが可能である。さらに、こうした撮像装置に限らず、デジタル変換された画像を表示する装置や、デジタル変換された画像を入出力する装置（例えば、画像編集装置やノイズ低減装置、デモザイキング処理装置）にも適用することが可能である。

そして、上述では画像処理装置についてを主として述べたが、同様の処理を行うための画像処理プログラムや、この画像処理プログラムを記録する記録媒体、あるいは上述したような処理を行うための画像処理方法に対しても本発明を同様に適用することが可能である。従って、例えば、動画や静止画を扱う画像信号補正プログラム（ＣＧプログラム）や画像編集プログラム、ノイズ低減処理プログラム、デモザイキング処理プログラムなどにも適用することが可能である。

なお、本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除しても良い。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能であることは勿論である。

本発明は、ＲＧＢベイヤ配列画像データを処理するための画像処理装置、撮像装置、画像処理プログラム、画像処理方法に好適に利用することができる。

本発明の実施形態１における画像処理装置の構成を示すブロック図。 上記実施形態１におけるノイズ抑圧部およびベイヤ補間部の構成をより詳細に示すブロック図。 上記実施形態１の画像処理装置における図２に示したような構成部分の処理の流れを示すフローチャート。 上記実施形態１の画像処理装置における図２に示したような構成部分の処理の詳細を模式的に示すフローチャート。 上記実施形態１において、ＩＳＯ感度の増減に応じてノイズ抑圧量ＧＨ，ＧＬを制御する一例を示す線図。 上記実施形態１において、所定ＩＳＯ感度におけるＧ信号のノイズ量を目標値とする場合の、画像リサイズ率とノイズ抑圧量ＧＨ，ＧＬとの関係を示すグラフ。 本発明の実施形態２におけるノイズ抑圧部およびベイヤ補間部の構成をより詳細に示すブロック図。 上記実施形態２の画像処理装置における図７に示したような構成部分の処理の流れを示すフローチャート。 上記実施形態２の画像処理装置における図７に示したような構成部分の処理の詳細を模式的に示すフローチャート。 本発明の実施形態３におけるノイズ抑圧部およびベイヤ補間部の構成をより詳細に示すブロック図。 上記実施形態３の画像処理装置における図１０に示したような構成部分の処理の流れを示すフローチャート。 上記実施形態３の画像処理装置における図１０に示したような構成部分の処理の詳細を模式的に示すフローチャート。

符号の説明

１…画像信号入力部
２…ノイズ抑圧部（ノイズ抑圧手段）
３…ＷＢ補正部
４…ベイヤ補間部
５…カラーマトリクス処理部
６…画像信号出力部
７…ＷＢ算出部
８…ノイズ抑圧量決定部（抑圧量設定手段）
９…撮像パラメータ設定部
２１…ＲＧＢチャネル分離部
２２…ＧチャネルＮＲ処理部
２３…ＲチャネルＮＲ処理部
２４…ＢチャネルＮＲ処理部
４１…第一の画像保持部
４２…第二の画像保持部
４３…色差算出部（色差算出手段）
４４…帯域制限補間部（ＲＧＢ算出手段、帯域制限補間手段）
４５…ＲＧＢ算出部（ＲＧＢ算出手段）
４６…Ｇ画素作成部（ＲＧＢ算出手段、Ｇ画素作成手段）
４７…補間部（ＲＧＢ算出手段、補間手段）

Claims (10)

1. ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するための画像処理装置であって、
   上記ＲＧＢベイヤ配列画像データを、ＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに、少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧手段と、
   上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づき、Ｒの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）と、Ｂの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）と、を算出する色差算出手段と、
   上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と、上記第二ノイズ抑圧Ｇチャネル画像データと、に基づいて、各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出手段と、
   を具備したことを特徴とする画像処理装置。
2. 上記ＲＧＢ算出手段は、同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し、（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数であって、かつ、上記第二ノイズ抑圧Ｇチャネル画像データの画素数よりも少ない画素数の補間画素を、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と、上記第二ノイズ抑圧Ｇチャネル画像データと、に基づいて生成する帯域制限補間手段を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものであることを特徴とする請求項１に記載の画像処理装置。
3. 上記ＲＧＢ算出手段は、
   上記第一ノイズ抑圧色差データ（Ｒ−Ｇ）および（Ｂ−Ｇ）と、第一ノイズ抑圧ＲＧＢベイヤ配列画像データにおけるＲおよびＢと、に基づき、（Ｒ−Ｇ）および（Ｂ−Ｇ）の位置にＧを算出するＧ画素作成手段と、
   同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し、（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数である補間画素を、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データと上記Ｇ画素作成手段により算出されたＧとに基づいて生成する補間手段と、
   を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものであることを特徴とする請求項１に記載の画像処理装置。
4. 上記ノイズ抑圧手段は、上記第二のノイズ抑圧量でＲチャネルおよびＢチャネルに対してノイズ抑圧することにより第二ノイズ抑圧Ｒチャネル画像データおよび第二ノイズ抑圧Ｂチャネル画像データをさらに算出するものであり、
   上記ＲＧＢ算出手段は、
   上記第一ノイズ抑圧色差データ（Ｒ−Ｇ）および（Ｂ−Ｇ）と、上記第二ノイズ抑圧Ｒチャネル画像データおよび第二ノイズ抑圧Ｂチャネル画像データと、に基づき、（Ｒ−Ｇ）および（Ｂ−Ｇ）の位置にＧを算出するＧ画素作成手段と、
   同一の画素位置において（Ｒ−Ｇ）とＧと（Ｂ−Ｇ）とがそれぞれ１つずつ存在し、（Ｒ−Ｇ）の画素数とＧの画素数と（Ｂ−Ｇ）の画素数とが同数である補間画素を、上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と上記第二ノイズ抑圧Ｇチャネル画像データと上記Ｇ画素作成手段により算出されたＧとに基づいて生成する補間手段と、
   を有して構成され、該補間画素に基づいてＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するものであることを特徴とする請求項１に記載の画像処理装置。
5. 上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定する抑圧量設定手段をさらに具備したことを特徴とする請求項１に記載の画像処理装置。
6. 上記抑圧量設定手段は、上記ＲＧＢベイヤ配列画像データが撮影されたときの撮影条件に応じて、上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定するものであることを特徴とする請求項５に記載の画像処理装置。
7. 上記抑圧量設定手段は、上記ＲＧＢベイヤ配列画像データの画素数と、上記ＲＧＢ算出手段により算出しようとするＧ画素データの画素数と、に応じて、上記第一のノイズ抑圧量および上記第二のノイズ抑圧量を設定するものであることを特徴とする請求項５に記載の画像処理装置。
8. レンズと、
   上記レンズの結像位置に配設されたＲＧＢベイヤ配列の撮像素子と、
   請求項１に記載の画像処理装置と、
   を具備し、
   上記画像処理装置は、上記ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するものであることを特徴とする撮像装置。
9. コンピュータに、ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理させるための画像処理プログラムであって、
   コンピュータに、
   上記ＲＧＢベイヤ配列画像データを、ＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに、少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧ステップと、
   上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づき、Ｒの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）と、Ｂの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）と、を算出する色差算出ステップと、
   上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と、上記第二ノイズ抑圧Ｇチャネル画像データと、に基づいて、各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出ステップと、
   を実行させるための画像処理プログラム。
10. ＲＧＢベイヤ配列の撮像素子から得られたＲＧＢベイヤ配列画像データを処理するための画像処理方法であって、
    上記ＲＧＢベイヤ配列画像データを、ＲＧＢ各チャネル毎に第一のノイズ抑圧量でノイズ抑圧して第一ノイズ抑圧ＲＧＢベイヤ配列画像データを算出するとともに、少なくともＧチャネルに対して上記第一のノイズ抑圧量よりも小さい第二のノイズ抑圧量でノイズ抑圧して第二ノイズ抑圧Ｇチャネル画像データを算出するノイズ抑圧ステップと、
    上記第一ノイズ抑圧ＲＧＢベイヤ配列画像データに基づき、Ｒの位置における第一ノイズ抑圧色差データ（Ｒ−Ｇ）と、Ｂの位置における第一ノイズ抑圧色差データ（Ｂ−Ｇ）と、を算出する色差算出ステップと、
    上記第一ノイズ抑圧色差データ（Ｒ−Ｇ），（Ｂ−Ｇ）と、上記第二ノイズ抑圧Ｇチャネル画像データと、に基づいて、各画素位置におけるＲ画像データ、Ｇ画像データ、およびＢ画像データを算出するＲＧＢ算出ステップと、
    を有することを特徴とする画像処理方法。

Images