JP2008015946A

JP2008015946A - 画像処理装置及び画像処理方法

Info

Publication number: JP2008015946A
Application number: JP2006188690A
Authority: JP
Inventors: Takayuki Hara; 貴幸原
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2006-07-07
Filing date: 2006-07-07
Publication date: 2008-01-24
Anticipated expiration: 2026-07-07
Also published as: US8189075B2; US20100091143A1; US7656444B2; JP4709084B2; US20080007630A1

Abstract

【課題】少なくとも画素補間処理及び倍率色収差補正処理を含む画像処理において、画像処理の結果として得られる画像データの品質を向上させる技術を提供する。
【解決手段】デジタルカメラ１５０は、まず、画像データに対してＲ成分及びＢ成分の補間処理を行う。そして、Ｒ成分及びＢ成分の補間処理がなされた画像データに対して、倍率色収差補正処理を行う。そして、倍率色収差補正処理がなされた画像データに対して、Ｇ成分の補間処理を行う。Ｇ成分の補間処理に際しては、倍率色収差補正処理がなされた画像データのＲ成分又はＢ成分に基づいて、どの画素のＧ成分を用いて補間処理を行うかが決定される。
【選択図】図１

Description

本発明は、画像データの各画素に対して色成分を補間する技術に関する。

現在普及しているデジタルカメラは、一般的に、Ｒ（赤色）成分の画素信号、Ｇ（緑色）成分の画素信号、及び、Ｂ（青色）成分の画素信号がベイヤー配列に並んだ第１の画像データを光電変換により取得する。そして、この第１の画像データに、例えば、各画素に対して色成分を補間する画素補間処理、倍率色収差を補正する倍率色収差補正処理、歪曲収差を補正する歪曲収差補正処理などを施して、第２の画像データを得る。この第２の画像データは、ＰＣ（パーソナルコンピュータ）での表示などに用いられる。

ここで、上述の画素補間処理や各補正処理がどのように行われるかにより、第２の画像データの画質が変化することが知られている。そこで、第２の画像データの画質を向上させるために、高周波成分の再現性を考慮した画素補間処理が提案されている（特許文献１参照）。また、画素補間処理を倍率色収差補正処理よりも先に行うことも知られている（特許文献２参照）。

図２を参照して、画素補間処理におけるＧ成分を補間する方法について説明する。撮像素子により取得された画像データでは、図２に示すように、Ｒ成分の画素信号、Ｇ成分の画素信号、及び、Ｂ成分の画素信号がベイヤー配列に並んでいる。ここで、図２においては、中心の画素２０９にはＢ成分しか存在しないため、画素２０９の位置でのＧ成分を得るために、周辺のＧ成分に基づいて、画素２０９のＧ成分が補間される。

このとき、画素２０９（補間対象の画素）から２画素上と２画素下の画素（画素２０２及び画素２０４）におけるＢ成分の相関と、画素２０９から２画素右と２画素左の画素（画素２０６及び画素２０８）におけるＢ成分の相関が比較される。そして、画素２０９から相関がより高い方向に１画素上と１画素下又は１画素右と１画素左（画素２０１及び画素２０３、又は、画素２０５及び画素２０７）のＧ成分に基づいて、画素２０９のＧ成分が補間される。このように、色成分の相関を比較した結果に基づいて画素補間処理に用いるＧ成分の画素を決定することにより、Ｇ成分について高周波成分の再現性を向上させ、画質を向上させることが可能となる。
特開２００２−１９１０５３号公報特開２００２−１９０９７９号公報

ここで、上述したように、画素補間処理や各補正処理がどのように行われるかにより、第２の画像データの画質が変化するが、従来は、倍率色収差補正処理よりも先に、画像データのＲＧＢ各成分についての画素補間処理が行われていた。

しかしながら、倍率色収差補正処理が行われる前の画像データにおいては、倍率色収差のために、異なる色成分間の位置関係が、被写体の各色成分の位置関係と正しく対応していない場合がある。そのため、そのままの状態で画素補間処理を行うと、適切でない画素に基づいて画素補間処理が行われることになり、得られる画像データの画質が低下するという問題があった。

例えば、図２の例では、画素２０５と画素２０６は左右に隣接しているが、それぞれ色成分が異なるため、倍率色収差により位置がずれている可能性があり、必ずしも被写体において左右に隣接した画素を表現しているとは限らない。そのため、画素２０２と画素２０４の間のＢ成分の相関と画素２０６と画素２０８の間のＢ成分の相関とを比較した結果に基づいて画素２０９のＧ成分の補間処理に用いる画素を決定しても、必ずしも画質の向上に結びつかない場合がある。

本発明はこのような状況に鑑みてなされたものであり、少なくとも画素補間処理及び倍率色収差補正処理を含む画像処理において、画像処理の結果として得られる画像データの品質を向上させる技術を提供することを目的とする。

上記課題を解決するために、本発明の画像処理装置は、光電変換により取得された、赤色成分の画素信号、緑色成分の画素信号、及び、青色成分の画素信号がベイヤー配列に並んだ第１の画像データにおいて、各画素に色成分を補間することにより、第２の画像データを生成する画像処理装置であって、前記第１の画像データにおける緑色成分及び青色成分の画素において赤色成分を補間する赤色補間手段と、前記第１の画像データにおける赤色成分及び緑色成分の画素において青色成分を補間する青色補間手段と、前記赤色補間手段による赤色成分の補間及び前記青色補間手段による青色成分の補間がなされた前記第１の画像データに対して倍率色収差の補正を行う倍率色収差補正手段と、前記倍率色収差補正手段での倍率色収差の補正がなされた前記第１の画像データにおける、緑色成分を含まない画素に対して、緑色成分を補間する緑色補間手段と、を備えることを特徴とする。

また、本発明の画像処理方法は、光電変換により取得された、赤色成分の画素信号、緑色成分の画素信号、及び、青色成分の画素信号がベイヤー配列に並んだ第１の画像データにおいて、各画素に色成分を補間することにより、第２の画像データを生成する画像処理方法であって、前記第１の画像データにおける緑色成分及び青色成分の画素において赤色成分を補間する赤色補間工程と、前記第１の画像データにおける赤色成分及び緑色成分の画素において青色成分を補間する青色補間工程と、前記赤色補間工程における赤色成分の補間及び前記青色補間工程における青色成分の補間がなされた前記第１の画像データに対して倍率色収差の補正を行う倍率色収差補正工程と、前記倍率色収差補正工程での倍率色収差の補正がなされた前記第１の画像データにおける、緑色成分を含まない画素に対して、緑色成分を補間する緑色補間工程と、を備えることを特徴とする。

なお、その他の本発明の特徴は、添付図面及び以下の発明を実施するための最良の形態における記載によって更に明らかになるものである。

以上の構成により、本発明によれば、少なくとも画素補間処理及び倍率色収差補正処理を含む画像処理において、画像処理の結果として得られる画像データの品質を向上させることが可能となる。

以下、添付図面を参照して、本発明の実施形態について説明する。以下で説明される個別の実施形態は、本発明の上位概念、中位概念および下位概念など種々の概念を理解するために役立つであろう。

なお、本発明の技術的範囲は、特許請求の範囲によって確定されるのであって、以下の個別の実施形態によって限定されるわけではない。また、実施形態の中で説明されている特徴の組み合わせすべてが、本発明に必須とは限らない。

［第１の実施形態］
本発明の画像処理装置をデジタルカメラに適用した実施形態について説明する。図１は、本実施形態に係るデジタルカメラ１５０の構成を示す図である。以下、デジタルカメラ１５０を用いて本実施形態に係る画像処理を行う例について説明するが、本発明は、撮像機能を備えない画像処理装置にも適用可能である。また、ＰＣ（パーソナルコンピュータ）上でアプリケーションソフトウェアを動作させることにより画像処理装置が実現される形態でもかまわない。

また、デジタルカメラ１５０は、図１に示す機能部以外にも、デジタルカメラ１５０全体を制御するＣＰＵや、デジタルカメラ１５０の制御プログラムを格納するＲＯＭ、ＣＰＵがワークエリアとして使用するＲＡＭなども備え得る。

光学レンズ１００は、被写体からの光線を撮像素子１０１上に結像させる。撮像素子１０１は、ベイヤー配列のカラーフィルタを備え、入射した光線を光電変換し、Ｒ成分の画素信号、Ｇ成分の画素信号、及び、Ｂ成分の画素信号がベイヤー配列に並んだアナログ画像信号を生成する。Ａ／Ｄ変換器１０２は、撮像素子１０１が生成したアナログ画像信号をＡ／Ｄ変換し、デジタル画像データ（以下、単に「画像データ」と呼ぶ）を生成する。

ここで、画素の各色成分は、輝度を表す値（例えば、Ｒの画素の輝度値であれば「Ｒ成分の値」と呼ぶ）を持つ。各色成分の輝度値は、例えば０〜２５５の整数で表現され、０が最も暗く、２５５が最も明るい。すなわち、Ｒ成分の値が０であれば、撮像素子１０１はＲ成分の光を全く検知しなかったということを意味し、Ｒ成分の値が２５５であれば、撮像素子１０１は検知可能な範囲で最も明るいＲ成分の光を検知したということを意味する。

プリプロセッサ１０３は、Ａ／Ｄ変換器１０２が生成した画像データに対して、シェーディング補正や傷補正を施す。

シェーディング補正とは、光学レンズ１００の特に周縁部で発生する減光に起因する、各色成分の輝度の低下を補正する補正処理であり、光学レンズ１００に固有の情報を用いて行われる。光学レンズ１００に固有の情報は、光学レンズ自体が備えるメモリ（不図示）や、デジタルカメラ１５０が備えるメモリ（不図示）などに格納され得る。

図７は、シェーディング補正の概要を示す図である。任意の画素７０１から光学中心７０２までの距離である像高７０３に応じて、画素の色成分の値に所定のゲインをかけることにより、シェーディング補正がなされる。

傷補正とは、撮像素子１０１に不良箇所（故障等の理由により光電変換の行えない部分）が存在するために発生する画素信号の欠陥を補正する処理である。

図８は、傷補正の概要を示す図である。図８に示すように、撮像素子１０１の画素８０１が不良であった場合、本来画素８０１で得られるべきＧ成分のデータが得られない。そこで、画素８０１の近傍に存在するＧ成分の画素に基づいて（例えば、画素８０２，８０３，８０４，８０５のＧ成分の値を平均することにより）、画素８０１のＧ成分を補間する。

色分離回路１０４は、画像データのベイヤー配列を認識してＲ成分・Ｇ成分・Ｂ成分を分離して抽出する。

図９は、色分離処理の概要を示す図である。なお、ここでは、撮像素子１０１に配列されている多数の画素のうちの一部の画素列を抜き出して示している。

色分離回路１０４は、ベイヤー配列の画素列９０１から出力される画像データを、符号９０２，９０３，９０４で示されるように、Ｇ成分・Ｒ成分・Ｂ成分ごとに分離して抽出する。

Ｒ成分補間回路１０５は、画像データにおいてＲ成分を持たない画素にＲ成分を補間する。Ｒ成分補間回路１０５は、他の色成分（即ち、Ｇ成分及びＢ成分）を参照せずにＲ成分を補間する。図３は、Ｒ成分の補間処理の概要を示す図である。図３において、Ｒ成分を持つ画素を有効画素と呼び、Ｒ成分を持たない画素を無効画素と呼ぶ。無効画素３０２に対してＲ成分を補間する場合、Ｒ成分補間回路１０５は、隣接する有効画素３０１及び３０３におけるＲ成分の値の平均値を求め、無効画素３０２のＲ成分の値とする。無効画素３０４，３０６，３０８のＲ成分も同様に補間される。無効画素３０５のＲ成分は、有効画素３０１，３０３，３０７，３０９におけるＲ成分の値の平均値により補間される。

Ｂ成分補間回路１０６は、画像データにおいてＢ成分を持たない画素にＢ成分を補間する。Ｂ成分補間回路１０６は、他の色成分（即ち、Ｒ成分及びＧ成分）を参照せずにＢ成分を補間する。具体的な補間方法は、図３を参照して説明したＲ成分の補間方法と同様である。

倍率色収差補正回路１０７は、画像データの倍率色収差を補正する。本実施形態では特に、画像データのＧ成分を基準に、Ｒ成分及びＢ成分を補正する。従って、倍率色収差補正回路１０７は、画像データにおけるＲ成分及びＢ成分の値を変化させるが、Ｇ成分の値は変化させない。図５、図６、及び、図１０を参照して、倍率色収差補正処理の概要を説明する。

例えば、白地に黒い縦線が入っている被写体を撮像する場合を考える。図１０において、画素群１００１Ｂは、Ｂ補間回路１０６により得られるＢ成分のデータである。画素群１００１Ｒは、Ｒ補間回路１０５により得られるＲ成分のデータである。画素群１００１Ｇは、色分離回路１０４により得られるＧ成分のデータである。本来、ＲＧＢ各成分について、黒い縦線は同じ位置に存在しなければならないが、光学レンズ１００は波長によって屈折率が異なるため、ＲＧＢ各成分について、黒い縦線の位置が異なる。

そこで、図５に示すように、倍率色収差補正回路１０７は、光学レンズ１００に固有の情報と画像上の光学中心５０３の位置情報とに基づき、所定の画素５０２の位置と画素５０２が本来あるべき位置５０１の対応関係を示す情報とを取得する。そして、画素５０２の色成分の値を５０１で示される位置の色成分の値で置き換える。このとき、５０１の位置は、一般的に、撮像素子１０１の実際の画素の位置からずれている。即ち、図６に示すように、４つの画素６０１が撮像素子１０１の実際の画素であって、位置５０１はその間に存在する。そこで、倍率色収差補正回路１０７は、４つの画素６０１の色成分を線形補間することにより、５０１の位置の色成分の値を求める。

倍率色収差補正処理に用いられる光学レンズ１００に固有の情報は、Ｒ成分とＢ成分とで異なる。そして、シェーディング補正処理の場合と同様、光学レンズ自体が備えるメモリ（不図示）や、デジタルカメラ１５０が備えるメモリ（不図示）などに格納されている。

倍率色収差補正処理の結果、図１０の画素群１００３Ｂ、１００３Ｒ、及び、１００３Ｇに示されるように、黒の縦線の位置が一致する。

Ｇ補間回路１０８は、倍率色収差補正回路１０７の出力であるＲ成分・Ｂ成分を参照して画素のＧ成分を補間する。図４は、Ｇ成分の補間処理の概要を示す図である。補間対象の画素４１３は、画素４１３から１画素上と１画素下の画素（画素４０９及び画素４１０）又は１画素右と１画素左の画素（画素４１１及び画素４１２）に基づいて補間される。画素４０９及び画素４１０、又は、画素４１１及び画素４１２のどちらを使用するかを決定するために、Ｇ補間回路１０８は、近傍のＢ成分又はＲ成分の相関を利用する。例えば、Ｇ補間回路１０８は、画素４０１及び画素４０２のＢ成分（又はＲ成分）の値の差の絶対値と、画素４０３及び４０４のＢ成分（又はＲ成分）の値の差の絶対値を比較する。そして、差の絶対値が小さい方と同一方向の画素のＧ成分の値を平均して、画素４１３のＧ成分の値とする。

本実施形態のＧ補間処理において重要なことは、倍率色収差補正がなされたＲ成分又はＢ成分に基づいて、Ｇ補間処理に用いるＧ成分を決定することである。即ち、図１０に示すように、例えば画素１００２Ｇを補間する際に、倍率色収差を補正する前の画素１００５Ｂと画素１００６ＢにおけるＢ成分の値の差の絶対値を求めても、あまり意味が無い。なぜなら、倍率色収差の補正前では、画素１００５Ｂと画素１００６Ｂは、倍率色収差による色ずれのために、被写体において画素１００７Ｇと画素１００８Ｇに隣接する画素ではない可能性が高いからである。一方、倍率色収差補正処理の後であれば、画素１００９Ｂと画素１０１０Ｂに基づいて、画素１０１１Ｇと画素１０１２ＧをＧ補間処理に使用するか否かを判断することは、画質の向上に寄与する。

信号処理回路１０９は、画像データに対して、ガンマ補正やアパーチャ補正等の画質調整処理を行う。

歪曲収差補正回路１１０は、画像データの歪曲収差を補正する。歪曲収差補正処理は、図５及び図６を参照して説明した倍率色収差補正処理と同様に行われる。ただし、歪曲収差補正処理に用いられる光学レンズ１００に固有の情報は、全ての色成分に対して同一である。

図１１は、本実施形態に係る画像処理の流れを示すフローチャートである。図１１に示す各ステップは、デジタルカメラ１５０の不図示のＣＰＵや、Ｒ補間回路１０５などの各構成要素などによって実現される。また、図１１は、画像処理の一部を示したものに過ぎず、ステップＳ１１０１の前にシェーディング補正処理などの種々の画像処理が行われてもよいし、ステップＳ１１０３の後に歪曲収差補正処理などの種々の画像処理が行われてもよい。

ステップＳ１１０１で、画像データに対してＲ成分及びＢ成分の補間処理がなされる。

ステップＳ１１０２で、画像データに対して倍率色収差補正処理がなされる。

ステップＳ１１０３で、画像データに対して、Ｇ成分の補間処理がなされる。

以上説明したように、本実施形態によれば、デジタルカメラ１５０は、まず、画像データに対してＲ成分及びＢ成分の補間処理を行う。そして、Ｒ成分及びＢ成分の補間処理がなされた画像データに対して、倍率色収差補正処理を行う。そして、倍率色収差補正処理がなされた画像データに対して、Ｇ成分の補間処理を行う。Ｇ成分の補間処理に際しては、倍率色収差補正処理がなされた画像データのＲ成分又はＢ成分に基づいて、どの画素のＧ成分を用いて補間処理を行うかが決定される。

これにより、少なくとも画素補間処理及び倍率色収差補正処理を含む画像処理において、画像処理の結果として得られる画像データの品質を向上させることが可能となる。

［その他の実施形態］
上述した実施の形態の処理は、各機能を具現化したソフトウェアのプログラムコードを記録した記憶媒体をシステム或は装置に提供してもよい。そして、そのシステム或は装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによって、前述した実施形態の機能を実現することができる。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フロッピィ（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスクなどを用いることができる。或いは、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどを用いることもできる。

また、コンピュータが読み出したプログラムコードを実行することにより、前述した各実施の形態の機能が実現されるだけではない。そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含まれている。

更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書きこまれてもよい。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行い、その処理によって前述した各実施の形態の機能が実現される場合も含むものである。

第１の実施形態に係るデジタルカメラ１５０の構成を示す図である。画素補間処理においてＧ成分を補間する方法を説明する図である。Ｒ成分の補間処理の概要を示す図である。Ｇ成分の補間処理の概要を示す図である。倍率色収差補正処理及び歪曲収差補正処理の概要を示す図である。倍率色収差補正処理及び歪曲収差補正処理の概要を示す図である。シェーディング補正の概要を示す図である。傷補正の概要を示す図である。色分離処理の概要を示す図である。倍率色収差補正処理の概要を示す図である。第１の実施形態に係る画像処理の流れを示すフローチャートである。

Claims

光電変換により取得された、赤色成分の画素信号、緑色成分の画素信号、及び、青色成分の画素信号がベイヤー配列に並んだ第１の画像データにおいて、各画素に色成分を補間することにより、第２の画像データを生成する画像処理装置であって、
前記第１の画像データにおける緑色成分及び青色成分の画素において赤色成分を補間する赤色補間手段と、
前記第１の画像データにおける赤色成分及び緑色成分の画素において青色成分を補間する青色補間手段と、
前記赤色補間手段による赤色成分の補間及び前記青色補間手段による青色成分の補間がなされた前記第１の画像データに対して倍率色収差の補正を行う倍率色収差補正手段と、
前記倍率色収差補正手段での倍率色収差の補正がなされた前記第１の画像データにおける、緑色成分を含まない画素に対して、緑色成分を補間する緑色補間手段と、
を備えることを特徴とする画像処理装置。
前記倍率色収差補正手段での倍率色収差の補正がなされた前記第１の画像データにおいて、補間対象の画素から２画素上と２画素下の画素における赤色成分同士又は青色成分同士の相関である第１の相関と、該補間対象の画素から２画素左と２画素右の画素におけるＲ成分同士又はＢ成分同士のうち第１の相関に関する色成分と同じ色成分の相関である第２の相関とを比較する比較手段を更に備え、
前記緑色補間手段は、前記第１の相関が前記第２の相関よりも大きい場合は前記補間対象の画素から１画素上と１画素下の画素の緑色成分に基づいて緑色成分を補間し、前記第２の相関が前記第１の相関よりも大きい場合は前記補間対象の画素から１画素左と１画素右の画素の緑色成分に基づいて緑色成分を補間することを特徴とする請求項１に記載の画像処理装置。
前記赤色補間手段は、赤色成分が補間される前の前記第１の画像データにおいて、補間対象の画素から１画素上と１画素下の画素が赤色成分の画素である場合は該補間対象の画素から１画素上と１画素下の画素の赤色成分に基づいて赤色成分を補間し、前記補間対象の画素から１画素左と１画素右の画素が赤色成分の画素である場合は該補間対象の画素から１画素左と１画素右の画素の赤色成分に基づいて赤色成分を補間し、前記補間対象の画素から１画素右上、１画素左上、１画素右下、及び、１画素左下の画素が赤色成分の画素である場合は該補間対象の画素から１画素右上、１画素左上、１画素右下、及び、１画素左下の画素の赤色成分に基づいて赤色成分を補間することを特徴とする請求項１又は２に記載の画像処理装置。
前記青色補間手段は、青色成分が補間される前の前記第１の画像データにおいて、補間対象の画素から１画素上と１画素下の画素が青色成分の画素である場合は該補間対象の画素から１画素上と１画素下の画素の青色成分に基づいて青色成分を補間し、前記補間対象の画素から１画素左と１画素右の画素が青色成分の画素である場合は該補間対象の画素から１画素左と１画素右の画素の青色成分に基づいて青色成分を補間し、前記補間対象の画素から１画素右上、１画素左上、１画素右下、及び、１画素左下の画素が青色成分の画素である場合は該補間対象の画素から１画素右上、１画素左上、１画素右下、及び、１画素左下の画素の青色成分に基づいて青色成分を補間することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
前記赤色補間手段での赤色成分の補間及び前記青色補間手段での青色成分の補間に先立って前記第１の画像データに対してシェーディング補正を行うシェーディング補正手段を更に備えることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
前記赤色補間手段での赤色成分の補間及び前記青色補間手段での青色成分の補間に先立って前記第１の画像データに対して傷補正を行う傷補正手段を更に備えることを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
前記緑色補間手段での緑色成分の補間がなされた前記第１の画像データに対して歪曲収差補正を行う歪曲収差補正手段を更に備えることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
光電変換により取得された、赤色成分の画素信号、緑色成分の画素信号、及び、青色成分の画素信号がベイヤー配列に並んだ第１の画像データにおいて、各画素に色成分を補間することにより、第２の画像データを生成する画像処理方法であって、
前記第１の画像データにおける緑色成分及び青色成分の画素において赤色成分を補間する赤色補間工程と、
前記第１の画像データにおける赤色成分及び緑色成分の画素において青色成分を補間する青色補間工程と、
前記赤色補間工程における赤色成分の補間及び前記青色補間工程における青色成分の補間がなされた前記第１の画像データに対して倍率色収差の補正を行う倍率色収差補正工程と、
前記倍率色収差補正工程での倍率色収差の補正がなされた前記第１の画像データにおける、緑色成分を含まない画素に対して、緑色成分を補間する緑色補間工程と、
を備えることを特徴とする画像処理方法。