JP4528857B2 - 画像処理装置及び画像処理方法 - Google Patents

Description

本発明は、画像を鮮鋭化する鮮鋭化処理を実行する画像処理装置及び画像処理方法に関する。

近年、ＳＤ（Standard Definition）規格を超える解像度を持つパーソナルコンピュータ用ディスプレイで、映像コンテンツを視聴する機会が増加している。また、ハイビジョン放送の本格化に伴い、ＨＤ（High Definition）規格対応のテレビジョン受信機も一般家庭に普及してきている。

このような高い解像度をもつ映像表示装置に比べて、ビデオカメラ等の撮影機器により取得された映像データやＳＤ規格対応のテレビジョン放送、ＤＶＤ等は、解像度が低い。このため、何らかの手段によって、映像データの高解像度化を図る必要がある。また、映像の一部を拡大表示する場合や、ビデオカメラ使用時に、光学ズームを超えてデジタルズームによる撮影を行う場合にも、高解像度化の必要がある。

従来、高解像度化には、線形内挿や３次元畳み込み法（Cubic Convolution）による内挿が用いられていたが、十分な鮮鋭さが得られないという問題があった。そこで、画素と画素との間に新しい画素値データを生成し、高い周波数成分を創造し、鮮鋭化することで、画像の元の解像度を超える画像を生成する超解像化技術の研究が進められている（特許文献１、特許文献２参照）。また、上述したような映像入出力機器に対して、超解像機能を組み込むための開発も進められている。
特開２００８−０６７１１０号公報 特開２００８−１４６１９０号公報

しかしながら、このような鮮鋭化を含む処理（例えば、上記超解像化技術）を実際のデジタルテレビに実装した場合、映像の種類によっては、当該画像処理により悪影響が生じる可能性があることがわかった。

本発明の目的は、画像の種類に応じた鮮鋭化処理を適用することが可能な画像処理装置及び画像処理方法を提供することにある。

この発明の一実施形態に係る画像処理装置は、画像データに含まれた特定色領域を検出する検出手段と、前記画像データに対する鮮鋭化処理を含む画像処理のうちの、前記特定色領域に対するこの画像処理を制御するための画像処理制御信号を生成する画像処理制御手段と、前記画像処理制御信号に基づき前記画像データに対して前記画像処理を実行する画像処理手段と、を備えている。

この発明の一実施形態に係る画像処理装置は、画像データに含まれた特定色領域を検出し、前記画像データに対する鮮鋭化処理を含む画像処理のうちの、前記特定色領域に対するこの画像処理を制御するための画像処理制御信号を生成し、前記画像処理制御信号に基づき前記画像データに対して前記画像処理を実行する。

本発明によれば、画像の種類に応じた鮮鋭化処理を適用することが可能な画像処理装置及び画像処理方法を提供できる。

以下、図面を参照し、本発明の実施形態について説明する。

まず、図１を参照して、本発明の一実施形態に係る映像処理装置１（画像処理装置）の構成を説明する。この映像処理装置１は、例えば、ＤＶＤプレーヤ等の映像再生装置、セットトップボックス又はデジタルテレビジョン受信機等の映像表示装置である。映像処理装置１と他の映像処理機器とは所定の通信規格、例えば、ＨＤＭＩ（High Definition Multimedia Interface）規格に準拠したインタフェース（以下、ＨＤＭＩインタフェースという）により接続することができる。映像処理装置１と他の映像処理機器のＨＤＭＩインタフェースとを介して、映像信号を送受信することができる。また、ＨＤＭＩ規格は、さらにその中でＣＥＣ（Consumer Electronics Control）規格を規定している。したがって、映像処理装置１と他の映像処理機器のＨＤＭＩインタフェースとを介して、ＣＥＣに準拠した制御情報等を送受信することもできる。

また、映像処理装置１は、映像信号（画像データ）に対して鮮鋭化処理を含む画像処理を実行することができ、しかも、映像信号に含まれた特定色領域（顔画像領域）に対しては鮮鋭化処理を低減又はオフにすることができる。例えば、画像全体に対して均一に鮮鋭化処理を適用した場合、風景等の画像はより鮮鋭になり、ユーザは画質の向上を感じることができる。ところが、人物の顔等の画像が鮮鋭になり過ぎると、ユーザはその画像を見て不自然に感じてしまうことがある。このような不自然な画像を出力しないために、画像全体に対する鮮鋭化処理のレベルを下げる方法が考えられる。しかし、これでは、より鮮鋭に表示できるはずの風景等の画像の鮮鋭度を下げることになってしまう。そこで、この映像処理装置１は、映像信号に含まれた特定色領域（顔画像領域）に対する鮮鋭化処理を低減することにより、風景等の画像についてはより鮮鋭に出力し、人物の顔等の画像についてはより自然に出力することができる。この映像処理装置１による鮮鋭化処理の制御については、この後、詳しく説明する。

図１に示すように、映像処理装置１は、制御モジュール１１、メモリ１２、ＨＤＭＩ Ｉ／Ｆ１３、映像処理モジュール１４、及び表示部１５を備える。また、図２に示すように、映像処理モジュール１４は、超解像画像生成モジュール１４１１、特定色検出モジュール１４１２ａ、超解像画像生成制御モジュール１４１３を備えている。

制御モジュール１１１は、デジタルテレビジョン受信機１１内の各部の動作を制御する。メモリ１１２は、各種の設定情報及び制御情報を格納する。例えば、メモリ１１２は、超解像画像生成のための各種パラメータを格納する。

ＨＤＭＩ Ｉ／Ｆ１１３は、他の映像処理機器に設けられたＨＤＭＩ Ｉ／Ｆと接続し、ＨＤＭＩに準拠した映像信号及び制御信号を送受信する。映像処理モジュール１４は、ＨＤＭＩ Ｉ／Ｆ１１３を介して他の映像処理機器からの入力映像信号に対して、各種映像処理を施し、表示部１１５へ出力する。例えば、図２に示すように、映像処理モジュール１４の超解像画像生成モジュール１４１１が、入力映像信号に対して超解像処理を実行し、超解像処理された映像信号を表示部１５へ出力する。表示部１５は、超解像処理された映像信号に基づく映像を画面に表示する。

超解像画像生成モジュール１４１１は、第１解像度である低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、第２解像度である高解像度の画像信号を復元する鮮鋭化処理を行う。ここで、「本来の画素値」とは、例えば、低解像度（第１解像度）の画像信号を得たときと同じ被写体を、高解像度（第２解像度）のカメラで撮像したときに得られる画像信号の各画素が示す値をいう。また、「推定して画素を増やす」とは、対象とする画像の特徴を捉えて、同一フレーム内、またはフレーム間において相関の高い画像から、本来の画素値を推定して、新たな画素に対応付ける画素値とすることを意味する。つまり、画像の相関性を利用する。

さらに、詳しく説明すると、まず、オリジナルの入力映像から、アップコンバート処理によって、仮のフルＨＤ高解像度映像を作る。つまり、隣り合う画素の情報をもとに間の画素を補間し、仮のフルＨＤ高解像度映像を作る。補間された画素は必ずしもオリジナル映像にあったものとは言えない。つまり、計算誤差によるノイズやエッジの乱れなどが発生し得る。

次に、撮像モデル関数に基づき、仮のフルＨＤ高解像度映像から、オリジナル映像と同じ解像度にダウンコンバートした映像を作る。撮像モデル関数とは、一般的なカメラが撮像素子の情報を映像信号に変換するのと同じ処理を計算で再現するものである。

ダウンコンバートした映像はオリジナルの入力映像と同じものになるはずであるが、アップコンバート処理における計算誤差などのため、ダウンコンバートした映像とオリジナルの入力映像との間には相違部分が発生する。この相違部分を検出し、また、周辺の画素の情報などを参考に計算誤差が出ないように補正して、オリジナルの入力映像に近い超解像処理された出力映像が生成される。

つまり、超解像処理とは、ダウンコンバートした映像とオリジナルの入力映像とを比較し、オリジナルの入力映像が本来持っているはずの信号を復元する技術である。なお、比較と復元の処理を繰り返すほどに、超解像処理の精度は向上する。従って、比較と復元の処理を１回だけ行う処理も超解像処理であるし、比較と復元の処理を複数回繰り返す処理も超解像処理である。時間に余裕がある場合、例えば録画した映像を後で視聴する場合には、比較と復元の処理を複数回繰り返す超解像処理を利用することができる。

なお、超解像画像生成モジュール１４１１は、例えば、特開２００７−３１０８３７号公報、特開２００８−９８８０３号公報及び特開２０００−１８８６８０号公報等に開示された公知・公用の技術を用いることも可能である。本実施形態の超解像画像生成モジュール１４１１の技術としては、例えば、入力画像の標本化周期で決まるナイキスト周波数より高い周波数成分を有する画像を復元する技術を用いることができる。

例えば、特開２００７−３１０８３７号公報に開示された超解像処理を用いる場合には、複数の中解像度フレームのそれぞれに対してフレーム中の注目画素を含む注目画像領域中の画素値の変化パターンに最も近い複数の注目画像領域に対応する複数の対応点を基準フレームの中から選択し、対応点での輝度の標本値を対応点に対応している注目画素の画素値に設定し、複数の標本値の大きさと、複数の対応点の配置とに基づいて、基準フレームの画素数よりも多い画素数の高解像度フレームであって基準フレームに対応する高解像度フレームの画素値を算出することにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。

また、特開２００８−９８８０３号公報に開示された同一フレーム画像内の自己合同位置探索を利用した超解像処理を用いる場合には、中解像度フレームの探索領域の各画素の誤差を比較して最小となる第１の画素位置を算出し、第１の画素位置、及びこの第１の誤差、並びに第１の画素の周辺の第２の画素位置、及びこの第２の誤差に基づいて、探索領域のなかで誤差が最小となる位置を小数精度で算出する。そして、この位置を終点、及び注目画素を始点とする小数精度ベクトルを算出し、この小数精度ベクトルを用いて、探索領域に含まれない画面上の画素を終点とする小数精度ベクトルの外挿ベクトルを算出する。そして、小数精度ベクトル、外挿ベクトル、及び画像信号から取得された画素値に基づいて、画像信号に含まれる画素数よりも多い画素数の高解像度画像の画素値を算出する。超解像画像生成モジュール１４１１は、このような処理を行うことにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。

また、特開２０００−１８８６８０号公報に開示された複数フレーム画像間でのマッピングを利用した超解像処理を用いることもできる。

また、本実施形態の超解像画像生成モジュール１４１１における超解像処理では、引き伸ばした映像に独自のアルゴリズムを加えることで一度低解像度映像に変換、さらにその映像をオリジナルの入力映像と比較して差分を検出して更に補正処理を施すことで、高画質処理がされてもよい。

ただし、超解像画像生成モジュール１４１１における超解像処理の手法は、上記に限定されるものではなく、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する処理であったり、あらゆる手法を適用することができる。

次に、図２に示すブロック図及び図６に示すフローチャートを参照し、超解像処理制御の一例について説明する。図２に示すように、映像処理モジュール１４は、外部（他の映像処理機器）からの入力映像信号が超解像画像生成モジュール１４１１及び特定色検出モジュール１４１２ａへ入力されるように構成されている。

入力映像信号が超解像画像生成モジュール１４１１及び特定色検出モジュール１４１２ａへ入力されると（ＳＴ１、ＹＥＳ）、特定色検出モジュール１４１２ａは、入力映像信号に含まれた特定色を検出し、例えばこの特定色を所定の割合以上で含む所定サイズ以上の領域を特定色領域として検出する（ＳＴ２）。より具体的な例を挙げると、特定色検出モジュール１４１２ａは、入力映像信号に含まれた肌色を検出し、この肌色を所定の割合以上で含む所定サイズ以上の領域を特定色領域として検出する。言い換えると、特定色検出モジュール１４１２ａは、人物の顔画像領域を検出する。

特定色領域が検出されると（ＳＴ２、ＹＥＳ）、特定色領域の検出結果（例えば特定色領域の位置情報）は、特定色検出モジュール１４１２ａから超解像画像生成制御モジュール１４１３へ通知され、超解像画像生成制御モジュール１４１３は、特定色領域の検出結果に基づき、特定色領域に対する超解像処理の超解像制御信号を生成する（ＳＴ３）。例えば、超解像画像生成制御モジュール１４１３は、特定色領域の検出結果に基づき、特定色領域に対する超解像処理を低減又はオフするための超解像制御信号を生成する。

超解像制御信号は、超解像画像生成制御モジュール１４１３から超解像画像生成モジュール１４１１へ通知され、超解像画像生成モジュール１４１１は、超解像制御信号に基づき入力映像信号に対して超解像処理を実行する（ＳＴ４）。つまり、超解像画像生成モジュール１４１１は、超解像制御信号に基づき、特定色領域に対する超解像処理を低減したり、特定色領域に対する超解像処理をオフにしたりし、特定色領域以外の領域に対しては超解像処理を低減することなく適用する（ＳＴ４）。

例えば、映像処理装置１は、ユーザからの超解像処理のレベル設定を受け付けることができる。この場合、超解像画像生成モジュール１４１１は、特定色領域に対する超解像処理のレベルを設定されたレベルより低く設定したり、特定色領域に対する超解像処理をオフにしたりし、特定色領域以外の領域に対しては予め設定されたレベルの超解像処理を適用する。特定色領域に対する超解像処理のレベルを設定されたレベルより低く設定するとは、映像信号に悪影響が出ない程度に超解像処理のパラメータを設定することである。

なお、特定色領域に対する超解像処理をオフにするとは、特定色領域の映像信号が超解像画像生成モジュール１４１１を通過しないようにする処理であってもよいし（ハードウェアスルー処理）、特定色領域の映像信号が超解像画像生成モジュール１４１１を通過するが特定色領域の映像信号に対する超解像処理のパラメータを超解像処理効果が得られない値に設定する処理であってもよい（ソフトウェアスルー処理）。ハードウェアスルー処理の場合、特定色領域の映像信号は超解像画像生成モジュール１４１１を通過させず、特定色領域以外の映像信号は超解像画像生成モジュール１４１１を通過させることになり、映像処理モジュール１４は、超解像画像生成モジュール１４１１を通過していない特定色領域の映像信号と、超解像画像生成モジュール１４１１を通過した特定色領域以外の映像信号とを合成して出力する。

即ち、特定色領域に対する超解像処理のオフは、超解像画像生成モジュール１４１１に特定色領域に対する映像信号を入力しないこと、又は超解像画像生成モジュール１４１１に映像信号を入力するが特定色領域に対する映像信号に対する超解像処理のパラメータを超解像処理効果が得られない値または得られ難い値に設定にする（例えば、鮮鋭化ゲインを持ち上げずゼロに設定したり、復元処理を行わない）ことのいずれかにより実現される。

特定色領域が検出されなければ（ＳＴ２、ＮＯ）、超解像画像生成モジュール１４１１は、入力映像信号（画像全体）に対して超解像処理を実行する（ＳＴ５）。入力映像信号が超解像画像生成モジュール１４１１及び特定色検出モジュール１４１２ａへ入力されなくなると（ＳＴ６、ＹＥＳ）、処理が終了する。

近年、画素数1920×1080のフルＨＤパネル化された映像表示装置の普及が進み、フルＨＤ解像度のフルＨＤコンテンツの映像を忠実に表示する事が可能になっている。また、フルＨＤ解像度に満たない、地上デジタル放送又はＤＶＤソフト等のＳＤコンテンツでもより綺麗に表示させたいと言う要求が高まっている。この要求に対応して、映像表示装置は、超解像処理によりＳＤコンテンツをフルＨＤコンテンツ並みの鮮鋭感のある画像に加工し表示することができる。しかし、超解像処理は、人の顔等の必ずしも鮮鋭感を必要としない画像までも鮮鋭感のある画像に加工され得る。そのため、人の顔等の画像上の凹凸又は皺が強調され得る。

上記説明した映像処理装置１は、このような不具合を解消することができる。つまり、映像処理装置１は、任意色の部分に対しての超解像画像生成処理を制御（抑制）することで、人の顔等の画像上の凹凸又は皺を強調することなく人の顔等の画像を自然に表示することができ、また人の顔以外の画像には鮮鋭感を持たせて表示することができる。

次に、図３を参照して、超解像処理制御の別例について説明する。図３に示すように、映像処理モジュール１４を構成するようにしてもよい。つまり、映像処理モジュール１４は、超解像画像生成モジュール１４１１、顔画像検出モジュール１４１２ｂ、超解像画像生成制御モジュール１４１３を備えている。映像処理モジュール１４は、外部（他の映像処理機器）からの入力映像信号が超解像画像生成モジュール１４１１及び顔画像検出モジュール１４１２ｂへ入力されるように構成されている。

入力映像信号が超解像画像生成モジュール１４１１及び顔画像検出モジュール１４１２ｂへ入力されると、顔画像検出モジュール１４１２ｂは、入力映像信号に含まれた顔画像領域を検出する。顔画像領域の検出は、デジタルカメラ等で既に採用されている顔検出技術を利用することができる。顔画像領域が検出されると、顔画像領域の検出結果（例えば顔画像領域の位置情報）は、顔画像検出モジュール１４１２ｂから超解像画像生成制御モジュール１４１３へ通知され、超解像画像生成制御モジュール１４１３は、顔画像領域の検出結果に基づき、顔画像領域に対する超解像処理を低減又はオフするための超解像制御信号を生成する。

超解像制御信号は、超解像画像生成制御モジュール１４１３から超解像画像生成モジュール１４１１へ通知され、超解像画像生成モジュール１４１１は、超解像制御信号に基づき、顔画像領域に対する超解像処理を低減したり、顔画像領域に対する超解像処理をオフにしたりし、顔画像領域以外の領域に対しては超解像処理を低減することなく適用する。

上記説明では、特定色領域（顔画像領域）に対する超解像処理の制御について説明したが、超解像処理以外の他の画像処理の制御であってもよい。例えば、特定色領域（顔画像領域）に対するシャープネス処理の制御であってもよい。シャープネス処理とは、画像データに含まれた画像のエッジを強調する処理である。なお、既に説明した内容と同内容は省略するか簡略する。

図４を参照して、シャープネス処理制御の一例について説明する。図４に示すように、映像処理モジュール１４を構成するようにしてもよい。つまり、映像処理モジュール１４は、シャープネス処理モジュール１４２１、特定色検出モジュール１４２２ａ、シャープネス処理制御モジュール１４２３を備えている。映像処理モジュール１４は、外部（他の映像処理機器）からの入力映像信号がシャープネス処理モジュール１４２１及び特定色検出モジュール１４２２ａへ入力されるように構成されている。

入力映像信号がシャープネス処理モジュール１４２１及び特定色検出モジュール１４２２ａへ入力されると、特定色検出モジュール１４２２ａは、入力映像信号に含まれた特定色領域を検出する。特定色領域が検出されると、特定色領域の検出結果（例えば特定色領域の位置情報）は、特定色検出モジュール１４２２ａからシャープネス処理制御モジュール１４２３へ通知され、シャープネス処理制御モジュール１４２３は、特定色領域の検出結果に基づき、特定色領域に対するシャープネス処理を低減又はオフするためのシャープネス処理制御信号を生成する。

シャープネス処理制御信号は、シャープネス処理制御モジュール１４２３からシャープネス処理モジュール１４２１へ通知され、シャープネス処理モジュール１４２１は、シャープネス処理制御信号に基づき、特定色領域に対するシャープネス処理を低減したり、特定色領域に対するシャープネス処理をオフにしたりし、特定色領域以外の領域に対してはシャープネス処理を低減することなく適用する。

例えば、映像処理装置１は、ユーザからのシャープネス処理のレベル設定を受け付けることができる。この場合、シャープネス処理モジュール１４２１は、特定色領域に対するシャープネス処理のレベルを設定されたレベルより低く設定したり、特定色領域に対するシャープネス処理をオフにしたりし、特定色領域以外の領域に対しては予め設定されたレベルのシャープネス処理を適用する。特定色領域に対するシャープネス処理のレベルを設定されたレベルより低く設定するとは、映像信号に悪影響が出ない程度にシャープネス処理のパラメータを設定することである。

これにより、映像処理装置１は、任意色の部分に対してのシャープネス処理を制御（抑制）することで、人の顔等の画像のエッジを必要以上に強調することなく人の顔等の画像を自然に表示することができ、また人の顔等の画像以外の画像のエッジを強調して表示することができる。

次に、図５を参照して、シャープネス処理制御の別例について説明する。図５に示すように、映像処理モジュール１４を構成するようにしてもよい。つまり、映像処理モジュール１４は、シャープネス処理モジュール１４２１、顔画像検出モジュール１４２２ｂ、シャープネス処理制御モジュール１４２３を備えている。映像処理モジュール１４は、外部（他の映像処理機器）からの入力映像信号がシャープネス処理モジュール１４２１及び顔画像検出モジュール１４２２ｂへ入力されるように構成されている。

入力映像信号がシャープネス処理モジュール１４２１及び顔画像検出モジュール１４２２ｂへ入力されると、顔画像検出モジュール１４２２ｂは、入力映像信号に含まれた顔画像領域を検出する。顔画像領域が検出されると、顔画像領域の検出結果（例えば顔画像領域の位置情報）は、顔画像検出モジュール１４２２ｂからシャープネス処理制御モジュール１４２３へ通知され、シャープネス処理制御モジュール１４２３は、顔画像領域の検出結果に基づき、顔画像領域に対するシャープネス処理を低減又はオフするためのシャープネス処理制御信号を生成する。

シャープネス処理制御信号は、シャープネス処理制御モジュール１４２３からシャープネス処理モジュール１４２１へ通知され、シャープネス処理モジュール１４２１は、シャープネス処理制御信号に基づき、顔画像領域に対するシャープネス処理を低減したり、顔画像領域に対するシャープネス処理をオフにしたりし、顔画像領域以外の領域に対してはシャープネス処理を低減することなく適用する。

これにより、映像処理装置１は、顔画像の部分に対してのシャープネス処理を制御（抑制）することで、人の顔等の画像のエッジを必要以上に強調することなく人の顔等の画像を自然に表示することができ、また人の顔等の画像以外の画像のエッジを強調して表示することができる。

また、上記説明では、図２、図３を参照して超解像処理の制御について説明し、図４、図５を参照し、シャープネス処理の制御について説明したが、超解像処理とシャープネス処理の両方を制御するようにしてもよい。つまり、映像処理モジュール１４が、入力映像信号に対して超解像処理とシャープネス処理とを実行することを前提として、特定色領域に対する超解像処理とシャープネス処理を低減又はオフにし、特定色領域以外の領域に対しては超解像処理とシャープネス処理とを低減することなく適用する。或いは、映像処理モジュール１４が、顔画像領域に対する超解像処理とシャープネス処理を低減又はオフにし、顔画像領域以外の領域に対しては超解像処理とシャープネス処理とを低減することなく適用する。

なお、上記したモジュールとは、ハードウェアで実現するものであっても良いし、ＣＰＵ等を使ってソフトウェアで実現するものであってもよい。

なお、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。

本発明の一実施形態に係る映像処理装置の構成を示すブロック図である。 特定色検出及び超解像処理制御を実現するためのブロック図である。 顔画像検出及び超解像処理制御を実現するためのブロック図である。 特定色検出及びシャープネス処理制御を実現するためのブロック図である。 顔画像検出及びシャープネス処理制御を実現するためのブロック図である。 特定色領域に対する超解像処理の制御の一例を説明するためのフローチャートである。

符号の説明

１…映像処理装置、１１…制御モジュール、１２…メモリ、１３…ＨＤＭＩ Ｉ／Ｆ、１１４…映像処理モジュール、１５…表示部、１４１１…超解像画像生成モジュール、１４１２ａ…特定色検出モジュール、１４１３…超解像画像生成制御モジュール

Claims (7)

1. 第１の画像データに含まれた肌色領域を検出する検出手段と、
   前記第１の画像データに対する鮮鋭化処理を含む画像処理のうちの、前記肌色領域に対するこの画像処理を制御するための画像処理制御信号を生成する画像処理制御手段と、
   前記画像処理制御信号に基づき前記第１の画像データに対して前記画像処理を実行する画像処理手段と、
   を備え、
   前記鮮鋭化処理は、第１の解像度の前記第１の画像データから前記第１の解像度より高い第２の解像度の第２の画像データを生成する超解像処理と、前記第２の画像データに含まれた画像のエッジを強調するシャープネス処理とを含み、
   前記画像処理制御手段は、前記肌色領域に対する前記超解像処理と前記シャープネス処理のレベルと、前記肌色領域以外に対する前記超解像処理と前記シャープネス処理のレベルとを異なるレベルに設定するための前記画像処理制御信号を生成することを特徴とする画像処理装置。
2. 前記画像処理制御手段は、前記肌色領域に対する前記超解像処理を含む前記鮮鋭化処理のゲインを、前記肌色領域以外に対する前記超解像処理を含む前記鮮鋭化処理のゲインより低く設定することを特徴とする請求項１に記載の画像処理装置。
3. 前記画像処理制御手段は、前記肌色領域に対する前記超解像処理のレベルを第１のレベルより低い第２のレベルに設定し、前記肌色領域以外に対する前記超解像処理のレベルを前記第１のレベルに設定するための前記画像処理制御信号を生成することを特徴とする請求項１に記載の画像処理装置。
4. 前記画像処理制御手段は、前記肌色領域に対する前記超解像処理を含む前記鮮鋭化処理のゲインを、前記肌色領域以外に対する前記超解像処理を含む前記鮮鋭化処理のゲインより低く設定することを特徴とする請求項３に記載の画像処理装置。
5. 前記画像処理制御手段は、前記肌色領域に対する前記シャープネス処理のレベルを第１のレベルより低い第２のレベルに設定し、前記肌色領域以外に対する前記シャープネス処理のレベルを前記第１のレベルに設定するための前記画像処理制御信号を生成することを特徴とする請求項１に記載の画像処理装置。
6. 第１の画像データに含まれた肌色領域を検出し、前記第１の画像データに対する鮮鋭化処理を含む画像処理のうちの、前記肌色領域に対するこの画像処理を制御するための画像処理制御信号を生成し、前記画像処理制御信号に基づき前記第１の画像データに対して前記画像処理を実行する画像処理方法であって、
   前記鮮鋭化処理は、第１の解像度の前記第１の画像データから前記第１の解像度より高い第２の解像度の第２の画像データを生成する超解像処理と、前記第２の画像データに含まれた画像のエッジを強調するシャープネス処理とを含み、
   前記肌色領域に対する前記超解像処理と前記シャープネス処理のレベルと、前記肌色領域以外に対する前記超解像処理と前記シャープネス処理のレベルとを異なるレベルに設定するための前記画像処理制御信号を生成することを特徴とする画像処理方法。
7. 前記肌色領域に対する前記超解像処理を含む前記鮮鋭化処理のゲインを、前記肌色領域以外に対する前記超解像処理を含む前記鮮鋭化処理のゲインより低く設定することを特徴とする請求項６に記載の画像処理方法。

Images