JP3997833B2 - Signal processing apparatus and method, recording medium, and program - Google Patents

Signal processing apparatus and method, recording medium, and program Download PDF

Info

Publication number
JP3997833B2
JP3997833B2 JP2002150058A JP2002150058A JP3997833B2 JP 3997833 B2 JP3997833 B2 JP 3997833B2 JP 2002150058 A JP2002150058 A JP 2002150058A JP 2002150058 A JP2002150058 A JP 2002150058A JP 3997833 B2 JP3997833 B2 JP 3997833B2
Authority
JP
Japan
Prior art keywords
signal
signal level
component
edge component
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002150058A
Other languages
Japanese (ja)
Other versions
JP2003348615A5 (en
JP2003348615A (en
Inventor
光康 浅野
和彦 上田
猛 窪園
一樹 横山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002150058A priority Critical patent/JP3997833B2/en
Publication of JP2003348615A publication Critical patent/JP2003348615A/en
Publication of JP2003348615A5 publication Critical patent/JP2003348615A5/ja
Application granted granted Critical
Publication of JP3997833B2 publication Critical patent/JP3997833B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Picture Signal Circuits (AREA)
  • Processing Of Color Television Signals (AREA)

Description

【０００１】
【発明の属する技術分野】
本発明は画像処理装置および方法、記録媒体、並びにプログラムに関し、特に、画像データの輝度信号の信号レベルに応じて、画像データに施す補正量を最適な量に調整することにより、より効果的な画像処理を行うことができるようにする画像処理装置および方法、記録媒体、並びにプログラムに関する。
【０００２】
【従来の技術】
従来、例えば、テレビジョン受像機等において、画像データ等のコントラスト（画像の明暗の差）や、鮮鋭度（境界の明確さ）等を向上させる方法として、画像データの輝度信号を、信号レベルの変化が急峻で大きなエッジを含む成分（エッジ成分）とそれ以外の成分（非エッジ成分）に分離し、非エッジ成分のみを強調させる補正処理を行う方法がある。
【０００３】
図１は、従来の画像処理装置の構成例を示す図である。
【０００４】
図１において、画像処理装置１０は、入力された輝度信号をエッジ成分と非エッジ成分に分離する分離回路１１、入力された輝度信号の非エッジ成分に含まれる振幅を強調する強調処理部１２、振幅が強調された非エッジ成分に含まれるノイズを除去する雑音除去フィルタ１３、分離回路１１により分離されたエッジ成分、および雑音除去フィルタ１３によりノイズを除去された非エッジ成分とを加算する加算器１４、加算器１４によりエッジ成分と非エッジ成分とが加算された輝度信号の階調を補正する階調変換処理部１５、並びに、輝度信号の補正量に対応して色信号の信号レベルを調整する色信号レベル調整部１６により構成されており、入力輝度信号２１および入力色信号３１を補正し、出力輝度信号２７および出力色信号３２を出力する。
【０００５】
画像処理装置１０に入力された入力輝度信号２１は、分離回路１１によりエッジ成分である信号２２および非エッジ成分である信号２３に分離される。そして、分離回路１１より出力された信号２３は、強調処理部１２において、信号２３に含まれる振幅を強調された後、雑音除去フィルタ１３において、信号レベル付近の雑音成分を除去され、加算器１４に供給される。
【０００６】
また、分離回路１１より出力された信号２２は、直接、加算器１４に供給される。加算器１４に入力された信号２２および信号２５は、加算され、階調変換処理部１５において、階調が補正される。また、信号２２および信号２５が加算された信号２６は、色信号レベル調整部１６に供給され、入力輝度信号２１との比率を算出される。色信号レベル調整部１６は、算出した比率に基づいて、入力色信号３１の信号レベルを調整する。
【０００７】
画像処理装置１０は、階調変換処理２７により階調が補正された出力輝度信号２７、および色信号レベル調整部１６により信号レベルを調整された出力色信号３２を出力する。
【０００８】
【発明が解決しようとする課題】
しかしながら、以上のような方法を用いた場合、強調処理部１２は、全ての振幅に対して一様に強調するため、振幅が信号レベルの上限値、または下限値に達してしまい、信号の波形が歪み、出力信号に対応する画像の画質が劣化するという課題があった。
【０００９】
図２は、図１の強調処理部１２に入力される信号２３および雑音除去フィルタ１３より出力される信号２５の関係の例を示す図である。
【００１０】
図２において、横軸は、強調処理部１２に入力される信号２３の信号レベルを示し、縦軸は、雑音除去フィルタ１３より出力される信号２５の信号レベルを示す。すなわち、曲線４１は、図１の強調処理部１２および雑音除去フィルタ１３により構成される部分の入出力特性を示す。
【００１１】
図２の曲線４１に示されるように、強調処理部１２は、入力された信号２３に所定の係数を乗算し、信号２３に含まれる振幅成分を強調する。そして、雑音除去フィルタ１３は、強調処理部１２により振幅成分を強調された信号２３である信号２４に含まれるノイズ成分を除去するために、信号２４の、所定の閾値Ｘ１以上であり、かつ、所定の閾値Ｘ２より小さい信号レベルの部分を「０」に平滑化する。
【００１２】
図３Ａに示されるような信号５１が入力されると、強調処理部１２は、信号５１に所定の係数を乗算し、信号５１の振幅成分（５１Ｂ，５１Ｃ、および５１Ｄ）を強調する。このとき、強調処理部１２により乗算された係数が小さい場合、信号５１は、図３Ｂに示される信号５２のように、全ての振幅成分（５２Ｂ，５２Ｃ、および５２Ｄ）は、波形を保ったまま強調される。
【００１３】
しかしながら、強調処理部１２により乗算された係数が大きい場合、図３Ａの信号５１の波形は、図３Ｃに示される信号５３のようになり、信号５１の大きな振幅５１Ｄに対応する、信号５３の振幅５３Ｄは、適正レベルの上限値Ｈ１や下限値Ｌ１を超えてしまい、波形が歪んでしまう。
【００１４】
すなわち、強調処理部１２は、入力された信号２３の振幅が大きくても小さくても、同様に所定の係数を乗算して強調するため、振幅の大きい信号が入寮された場合、出力信号の波形が歪んでしまう恐れがある。
【００１５】
また、画像データの場合、同じ信号レベルの輝度信号であっても、対応する画像の内容や色等によって、コントラストや先鋭度の最適な調整量が異なる。例えば、人物の顔等の画像は、最適なコントラストの強調量が、その他の画像と比較して少なく、その他の画像に対する強調量と同程度の量でコントラストを強調すると、不自然な画像になってしまう。しかしながら、強調処理部１２は、輝度信号の非エッジ成分に含まれる全ての振幅に対して一様に強調するため、画像の内容や色によって、強調量が多すぎてしまったり、少なすぎてしまったりと、好ましい強調量によりコントラストを強調することができない場合があるという課題があった。
【００１６】
さらに、図１に示される画像処理装置１０を用いた場合、雑音除去フィルタ１３は、図２に示されるように、信号レベルが「０」付近の小振幅成分を平滑化するため、例えば、振幅部分に含まれるノイズ成分のように、信号レベルが「０」付近以外に含まれるノイズ成分を除去することができず、出力信号に対応する画像の画質が劣化するという課題があった。
【００１７】
また、図１に示される画像処理装置１０を用いた場合、輝度信号は、エッジ成分と、強調された非エッジ成分を加算した結果について、階調変換処理部１５により、黒近傍および白近傍を圧縮する階調変換が施されるため、輝度信号のエッジ成分と非エッジ成分が加算されたときに、すなわち、階調変換処理部１５に入力される前に、黒近傍および白近傍において、波形が歪んでしまい、出力信号に対応する画像の画質が劣化する場合があるという課題があった。
【００１８】
加算器１４は、雑音除去フィルタ１５より出力された信号２５、および分離回路１１より出力された信号２２を加算した信号２６を階調変換部１５に供給する。階調変換部１５は、図４に示されるような入出力特性を有しており、入力された信号２６に対して、信号レベルの大きい白近傍、および信号レベルの小さい黒近傍において、信号２６の階調を圧縮するように、補正処理を行う。
【００１９】
しかしながら、図５Ａに示される信号７１が画像処理装置１０に入力された場合、加算器１４が、信号７１のエッジ成分からなる信号２２、および、振幅（７１Ａ，７１Ｂ、および７１Ｃ）を強調された信号７１の非エッジ成分からなる信号２５を加算すると、図５Ｂに示されるように、振幅７１Ｃが強調された振幅７２Ｃの信号レベルが上限値Ｈ２を超えてしまい、波形が崩れてしまう。また、振幅７１Ａが強調された振幅７２Ａの信号レベルも下限値「０」を超えてしまい、波形が崩れてしまう。階調変換処理部１５が、このような信号７２の階調を変換しても、振幅７２Ａおよび振幅７２Ｃの波形は歪んだままとなる。
【００２０】
ところで、輝度信号は、例えば、テレビジョン受像機等において、その信号レベルが「０」より大きい値（黒レベル）において、すなわち、真の黒レベルより明るいレベルにおいて、黒色となるように設定される。
【００２１】
図１に示される画像処理装置１０は、輝度信号の補正処理により色の濃さが変化しないように、色信号レベル調整部１６において、輝度信号の補正量に基づいて、色信号の出力レベルを調整する。従って、この画像処理装置１０を用いた場合、補正処理によって輝度信号の信号レベルが「０」より大きくても、黒レベルを下回った場合、色信号レベル調整部１６により、対応する色信号の信号レベルは「０」に調整され、対応する画像は、色が無くなり、不自然な画像となってしまうという課題があった。
【００２２】
色信号レベル調整部１６は、例えば、図６のように、非エッジ成分を強調された輝度信号からなる信号２６を、入力輝度信号２１で割った値（信号８３）を算出する除算器８１、および、算出された信号８３を色信号３１と乗算する乗算器８２により構成されている。
【００２３】
すなわち、色信号レベル調整部１６は、図７Ａに示すような、振幅９１Ａを含む輝度信号９１を用いて、輝度信号９１の非エッジ成分が強調された信号９２（図７Ｂ）を割り算し、算出された輝度信号９１および輝度信号９２の比率からなる信号８３を入力色信号３１に乗算する。
【００２４】
このとき、図７Ｂに示されるように、非エッジ成分が強調された信号９２の、信号レベルがＬ２より小さい部分に対応する色信号の信号レベルは「０」に調整され、その部分に対応する画像は色が無くなってしまう。
【００２５】
本発明はこのような状況に鑑みてなされたものであり、より効果的な画像処理を行うことができるようにするものである。
【００２６】
【課題を解決するための手段】
本発明の信号処理装置は、入力された輝度信号である入力輝度信号を、エッジ成分、および、非エッジ成分に分離する入力輝度信号分離手段と、入力輝度信号分離手段により分離された非エッジ成分に基づいて、非エッジ成分の増幅量を設定し、非エッジ成分を増幅する非エッジ成分増幅手段と、入力色信号に基づいて、第１のゲインを設定し、非エッジ成分増幅手段により増幅された非エッジ成分に第１のゲインを乗算し、非エッジ成分の信号レベルを調整する第１の信号レベル調整手段と、入力輝度信号分離手段により分離されたエッジ成分に基づいて、第２のゲインを設定し、第１の信号レベル調整手段により信号レベルが調整された非エッジ成分に第２のゲインを乗算し、非エッジ成分の信号レベルを調整する第２の信号レベル調整手段と、第２の信号レベル調整手段により信号レベルが調整された非エッジ成分と、入力輝度信号分離手段により分離されたエッジ成分を加算する輝度信号加算手段と、入力輝度信号、輝度信号加算手段による加算結果からなる出力輝度信号、および入力色信号に基づいて、入力色信号の信号レベルを調整する第３の信号レベル調整手段とを備えることを特徴とする。
【００２７】
前記非エッジ成分増幅手段は、入力輝度信号分離手段により分離された非エッジ成分の信号レベルの絶対値が所定の第１の閾値より大きい場合、増幅量を小さくするようにすることができる。
【００２９】
前記非エッジ成分増幅手段は、入力輝度信号分離手段により分離された非エッジ成分より低周波成分を抽出する低周波成分抽出手段と、入力輝度信号分離手段により分離された非エッジ成分より高周波成分を抽出する高周波成分抽出手段と、低周波成分抽出手段により抽出された低周波成分に基づいて、低周波成分の増幅量を決定し、低周波成分を増幅する低周波成分増幅手段と、高周波成分抽出手段により抽出された高周波成分に基づいて、高周波成分の増幅量を決定し、高周波成分を増幅する高周波成分増幅手段とを備えるようにすることができる。
【００３０】
前記高周波成分抽出手段は、入力輝度信号分離手段により分離された非エッジ成分から、低周波成分抽出手段により抽出された低周波成分を減算して高周波成分を抽出するようにすることができる。
【００３１】
前記低周波成分増幅手段は、低周波成分抽出手段により抽出された低周波成分の信号レベルの絶対値が所定の閾値より大きい場合、低周波成分の増幅量を小さくするようにすることができる。
【００３４】
前記低周波成分増幅手段により増幅された低周波成分と、高周波成分増幅手段により増幅された高周波成分を加算する周波数成分加算手段をさらに備えるようにすることができる。
【００３５】
前記第１の信号レベル調整手段は、入力色信号に基づいて、非エッジ成分の、対応する画像の色を検出し、検出された画像の色に基づいて、第１のゲインの値を設定する色検出ゲイン値設定手段と、色検出ゲイン値設定手段により値が設定された第１のゲインを非エッジ成分に乗算する色ゲイン乗算手段とを備えるようにすることができる。
【００３６】
前記色検出ゲイン値設定手段は、検出された画像の色が予め定められた所定の色である場合、第１のゲインの値を「１」より小さい値に設定し、画像の色が所定の色以外の色である場合、第１のゲインの値を「１」に設定するようにすることができる。
【００３７】
前記所定の色は肌色であるようにすることができる。
【００３８】
前記第１の信号レベル調整手段は、エッジ成分に基づいて、非エッジ成分の、対応する画像の明度を検出し、検出された画像の明度に基づいて、色設定ゲイン値設定手段により値が設定された第１のゲインの値の調整量を設定するゲイン値調整量設定手段と、ゲイン値調整量設定手段により設定された第１のゲインの値の調整量に基づいて、第１のゲインの値を調整するゲイン値調整手段とをさらに備え、色ゲイン乗算手段は、ゲイン値調整手段により値が調整された第１のゲインを非エッジ成分に乗算するようにすることができる。
【００４０】
前記第２の信号レベル調整手段は、エッジ成分の信号レベルを検出し、第２のゲインの値を設定する明度検出ゲイン値設定手段と、明度検出ゲイン値設定手段により値が設定された第２のゲインを、非エッジ成分に乗算する明度ゲイン乗算手段とを備えるようにすることができる。
【００４１】
前記明度検出ゲイン値設定手段は、検出されたエッジ成分の信号レベルが予め定められた所定の第１の閾値より小さい場合、または、画像の明度が第１の閾値より大きい所定の第２の閾値よりさらに大きい場合、第２のゲインの値を小さい値に設定するようにすることができる。
【００４２】
前記第２の信号レベル調整手段は、第１の信号レベル調整手段により信号レベルが調整された非エッジ成分を正側成分および負側成分に分離する正負分離手段をさらに備え、明度検出ゲイン値設定手段は、エッジ成分の信号レベルを検出し、正負分離手段により分離された正側成分および負側成分について、第２のゲインの値をそれぞれ設定し、明度ゲイン乗算手段は、明度検出ゲイン値設定手段により値が設定された正側成分に対する第２のゲインである正側ゲインを正側成分に乗算し、明度検出ゲイン値設定手段により値が設定された負側成分に対する第２のゲインである負側ゲインを負側成分に乗算するようにすることができる。
【００４６】
前記第３の信号レベル調整手段は、入力輝度信号および出力輝度信号より、輝度信号の増幅量を算出する増幅量算出手段と、増幅量算出手段により算出された増幅量を乗算して入力色信号の信号レベルを調整する入力色信号レベル調整手段と、入力色信号レベル調整手段による信号レベル調整処理前後の入力色信号の信号レベルを比較する比較手段と、比較手段による比較結果に基づいて、入力色信号レベル調整手段による信号レベル調整処理前後の入力色信号の内、いずれか一方を出力色信号として選択する色信号選択手段とを備えるようにすることができる。
【００４８】
前記第３の信号レベル調整手段は、入力色信号レベル調整手段による信号レベル調整処理前後の入力色信号を、予め定められた所定の割合で混合する混合手段をさらに備え、色信号選択手段は、信号レベル調整処理後の入力色信号の信号レベルが、信号レベル調整前の入力色信号の信号レベルより大きい場合、信号レベル調整処理後の入力色信号を出力信号として選択し、信号レベル調整処理後の入力色信号の信号レベルが、信号レベル調整前の入力色信号の信号レベルより小さい場合、混合手段の混合結果を出力信号として選択するようにすることができる。
【００４９】
本発明の信号処理方法は、入力された輝度信号である入力輝度信号を、エッジ成分、および、非エッジ成分に分離する入力輝度信号分離ステップと、入力輝度信号分離ステップの処理により分離された非エッジ成分に基づいて、非エッジ成分の増幅量を設定し、非エッジ成分を増幅する非エッジ成分増幅ステップと、入力色信号に基づいて、第１のゲインを設定し、非エッジ成分増幅ステップの処理により増幅された非エッジ成分に第１のゲインを乗算し、非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、入力輝度信号分離ステップの処理により分離されたエッジ成分に基づいて、第２のゲインを設定し、第１の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分に第２のゲインを乗算し、非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、第２の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分と、入力輝度信号分離ステップの処理により分離されたエッジ成分を加算する輝度信号加算ステップと、入力輝度信号、輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、入力色信号の信号レベルを調整する第３の信号レベル調整ステップとを含むことを特徴とする。
【００５０】
本発明の記録媒体のプログラムは、入力された輝度信号である入力輝度信号を、エッジ成分、および、非エッジ成分に分離する入力輝度信号分離ステップと、入力輝度信号分離ステップの処理により分離された非エッジ成分に基づいて、非エッジ成分の増幅量を設定し、非エッジ成分を増幅する非エッジ成分増幅ステップと、入力色信号に基づいて、第１のゲインを設定し、非エッジ成分増幅ステップの処理により増幅された非エッジ成分に第１のゲインを乗算し、非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、入力輝度信号分離ステップの処理により分離されたエッジ成分に基づいて、第２のゲインを設定し、第１の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分に第２のゲインを乗算し、非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、第２の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分と、入力輝度信号分離ステップの処理により分離されたエッジ成分を加算する輝度信号加算ステップと、入力輝度信号、輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、入力色信号の信号レベルを調整する第３の信号レベル調整ステップとを含むことを特徴とする。
【００５１】
本発明のプログラムは、入力された輝度信号である入力輝度信号を、エッジ成分、および、非エッジ成分に分離する入力輝度信号分離ステップと、入力輝度信号分離ステップの処理により分離された非エッジ成分に基づいて、非エッジ成分の増幅量を設定し、非エッジ成分を増幅する非エッジ成分増幅ステップと、入力色信号に基づいて、第１のゲインを設定し、非エッジ成分増幅ステップの処理により増幅された非エッジ成分に第１のゲインを乗算し、非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、入力輝度信号分離ステップの処理により分離されたエッジ成分に基づいて、第２のゲインを設定し、第１の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分に第２のゲインを乗算し、非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、第２の信号レベル調整ステップの処理により信号レベルが調整された非エッジ成分と、入力輝度信号分離ステップの処理により分離されたエッジ成分を加算する輝度信号加算ステップと、入力輝度信号、輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、入力色信号の信号レベルを調整する第３の信号レベル調整ステップとをコンピュータに実現させる。
【００５２】
本発明の信号処理装置および方法、記録媒体、並びにプログラムにおいては、入力された輝度信号である入力輝度信号が、エッジ成分、および、非エッジ成分に分離され、その非エッジ成分に基づいて設定された増幅量で非エッジ成分が増幅され、入力色信号に基づいて設定された第１のゲインが非エッジ成分に乗算され、エッジ成分に基づいて設定された第２のゲインが非エッジ成分に乗算され、非エッジ成分と、エッジ成分が加算され、入力輝度信号、出力輝度信号、および入力色信号に基づいて、入力色信号の信号レベルが調整される。
【００５３】
【発明の実施の形態】
図８は、本発明を適用した画像処理装置の構成例を示す図である。
【００５４】
図８において、画像処理装置１１０は、入力された信号を、信号レベルの変化が急峻で大きなエッジを含む成分（エッジ成分）と、それ以外の成分（非エッジ成分）に分離する分離回路１１、入力された非エッジ成分の低周波成分と高周波成分を、それぞれ独立して強調する帯域分離増幅部１１１、画像の肌色部分に対応する輝度信号の振幅の強調量を調整する肌色処理部１１２、輝度信号の信号レベルに応じて振幅の強調量を調整する強調量調整部１１３、分離回路１１により分離された輝度信号のエッジ成分と非エッジ成分を加算する加算器１１４、および、非エッジ成分が強調された輝度信号の補正量に基づいて、色信号レベルを調整する色信号レベル調整部１１５により構成されており、入力輝度信号１２１、並びに、入力色信号１３１Ａおよび１３１Ｂを入力し、出力輝度信号１２７、並びに、出力色信号１３２Ａおよび１３２Ｂを出力する。
【００５５】
分離回路１１は、非線形フィルタ等により構成され、画像処理装置１１０の外部より入力された入力輝度信号１２１を、信号レベルの変化が急峻で大きなエッジを含むエッジ成分と、それ以外の非エッジ成分に分離し、エッジ成分からなる第１の輝度信号１２２を強調量調整部１１３および加算器１１４に供給し、さらに、非エッジ成分からなる第２の輝度信号１２３を帯域分離増幅部１１１に供給する。
【００５６】
帯域分離強調部１１１は、分離回路１１より供給された第２の信号１２３を、低周波成分および高周波成分に分離し、それぞれ増幅した後、増幅した２つの成分を加算した第３の輝度信号１２４を肌色処理部１１２に供給する。
【００５７】
肌色処理部１１２は、画像処理装置１１０の外部より入力された入力色信号１３１Ａおよび１３１Ｂから肌色部分を検出し、その部分に対応する輝度信号の強調量を調整し、調整後の第４の輝度信号１２５を強調量調整部１１３に供給する。
【００５８】
強調量調整部１１３は、分離回路１１により供給された第１の輝度信号１２２の信号レベルに基づいて、第４の輝度信号１２５の強調量を調整し、調整後の第５の輝度信号１２６を加算器１１４に供給する。
【００５９】
加算器１１４は、分離回路１１により供給された第１の輝度信号１２２、および、強調量調整部１１３により供給された第５の輝度信号１２６を加算し、加算後の出力輝度信号１２７を画像処理装置１１０の外部に出力するとともに、色信号レベル調整部１１５に供給する。
【００６０】
色信号レベル調整部１１５は、加算器１１４により供給された出力輝度信号１２７、および、画像処理装置１１０の外部より入力された入力輝度信号１２１に基づいて、輝度信号に対する補正量を算出し、その補正量に基づいて、画像処理装置１１０の外部より入力された入力色信号１３１Ａおよび１３１Ｂの信号レベルをそれぞれ調整し、調整後の信号からなる出力色信号１３２Ａおよび１３２Ｂを画像処理装置１１０の外部に出力する。
【００６１】
図９は、図８の帯域分離増幅部１１１の詳細な構成例を示す図である。
【００６２】
図９において、帯域分離増幅部１１１は、入力された信号に含まれる所定の周波数より低い低周波成分を抽出するローパスフィルタ１５１、入力された信号を増幅する強調処理部１５２および１５５、入力された２つの信号の差分値を算出し、減算器として動作する加算器１５４、および、入力された２つの信号を加算する加算器１５４により構成され、入力された第２の輝度信号１２３を低周波成分と高周波成分に分離して強調した後、各成分を加算し、加算後の第３の輝度信号１２４を出力する。
【００６３】
ローパスフィルタ１５１は、所定の周波数より高い高周波成分を遮断し、所定の周波数より低い低周波成分を通過させるフィルタであり、図８の分離回路１１により供給された、入力輝度信号１２１の非エッジ成分からなる第２の輝度信号１２３より、低周波成分を抽出し、抽出した信号１６１を強調処理部１５２および加算器１５４に供給する。
【００６４】
強調処理部１５２は、図１０Ａを参照して後述するルックアップテーブルを、内蔵する記憶部（図示せず）に予め保持しており、そのルックアップテーブルに基づいて、ローパスフィルタ１５１により供給された信号１６１を増幅する。また、強調処理部１５２は、信号１６１を増幅した信号１６３を加算器１５３に供給する。
【００６５】
加算器１５３は、強調処理部１５２により供給された信号１６３に、強調処理部１５５により供給された信号１６４を加算し、第３の輝度信号１２４として図８の肌色処理部１１２に供給する。
【００６６】
加算器１５４は、図８の分離回路１１により供給された第２の輝度信号１２３より、ローパスフィルタ１５１により供給された信号１６１を減算し、信号１６２として強調処理部１５５に供給する。
【００６７】
強調処理部１５５は、図１０Ｂを参照して後述するルックアップテーブルを、内蔵する記憶部（図示せず）に予め保持しており、そのルックアップテーブルに基づいて、加算器１５４により供給された信号１６２を増幅する。また、強調処理部１５５は、信号１６２を増幅した信号１６４を加算器１５３に供給する。
【００６８】
図１０は、図９の強調処理部１５２および１５５により保持されるルックアップテーブルの例を示す図である。
【００６９】
図１０Ａにおいて、曲線１７１は、強調処理部１５２が保持しているルックアップテーブルであり、横軸は強調処理部１５２の入力信号の信号レベルを表し、縦軸は強調処理部１５５の出力信号の信号レベルを表している。
【００７０】
強調処理部１５２は、図１０Ａに示される曲線１７１を参照し、入力信号レベルに対応する出力信号レベルを出力する。図１０Ａに示されるように、曲線１７１は、信号レベルが所定のレベルＸ１１以下の入力信号、または、Ｘ１１より大きい所定のレベルＸ１２より大きい入力信号に対応する部分と、信号レベルがＸ１１より大きく、かつＸ１２以下である入力信号に対応する部分とで、その傾きが異なる。すなわち、強調処理部１５２は、第２の輝度信号１２３の低周波成分である信号１６１の、適正レベルの上限値および下限値付近まで振幅が拡がる大きな振幅成分に対しては強調量を抑えて増幅する。
【００７１】
また、図１０Ｂにおいて、曲線１７２は、強調処理部１５５が保持しているルックアップテーブルであり、横軸は強調処理部１５５の入力信号の信号レベルを表し、縦軸は強調処理部１５５の出力信号の信号レベルを表している。
【００７２】
強調処理部１５５は、図１０Ｂに示される曲線１７２を参照し、入力信号レベルに対応する出力信号レベルを出力する。曲線１７２は、信号レベルが所定のレベルＸ１３以下の入力信号に対応する直線、信号レベルがＸ１３より大きく、かつ、Ｘ１３より大きい所定のレベルＸ１４以下である入力信号に対応する直線、信号レベルがＸ１４より大きく、かつ、Ｘ１４より大きい所定のレベルＸ１５以下である入力信号に対応する直線、信号レベルがＸ１５より大きく、かつ、Ｘ１５より大きい所定のレベルＸ１６以下である入力信号に対応する直線、並びに、信号レベルがＸ１６より大きい入力信号に対応する直線により形成されている。
【００７３】
図１０Ｂに示されるように、曲線１７２は、信号レベルがＸ１３より大きく、かつ、Ｘ１４以下である入力信号に対応する直線の傾き、並びに、信号レベルがＸ１５より大きく、かつ、Ｘ１６以下である入力信号に対応する直線の傾きが最も大きい。また、曲線１７２の信号レベルがＸ１４より大きく、かつ、Ｘ１５以下である入力信号に対応する部分の、曲線１７２の傾きは「０」であり、そのとき出力される信号レベルは「０」である。
【００７４】
すなわち、強調処理部１５５は、第２の輝度信号１２３の高周波成分である信号１６２の、適正レベルの上限値および下限値付近まで振幅が拡がる大きな振幅成分に対しては強調量を抑えて増幅するとともに、信号レベルが「０」付近においては小振幅成分を平滑化する。
【００７５】
図９に戻り、分離回路１１より出力された第２の輝度信号１２３は、帯域分離増幅部１１１のローパスフィルタ１５１に供給され、低周波成分を抽出される。抽出された信号１６１は、強調処理部１５２に供給され、図１０Ａに示されるルックアップテーブルに基づいて増幅される。増幅された信号１６３は、加算器１５３に供給される。
【００７６】
信号１６１は、加算器１５４にも供給されており、分離回路１１より出力された第２の輝度信号１２３は、加算器１５４において、低周波成分である信号１６１を減算され、高周波成分である信号１６２が抽出される。抽出された信号１６２は、強調処理部１５５に供給され、図１０Ｂのルックアップテーブルに基づいて増幅され、信号１６４として、加算器１５３に供給される。加算器１５３において、信号１６３は、信号１６４と加算され、第３の輝度信号１２４として帯域分離増幅部１１１の外部に出力される。
【００７７】
以上のようにして、帯域分離増幅部１１１は、非エッジ成分の信号レベルが「０」近傍でない部分に含まれるノイズ成分を強調せずに、非エッジ成分を強調することができる。また、強調処理部１５５における、「０」近傍に対する強調量を調節することにより、帯域分離増幅部１１１は、非エッジ成分の信号レベルが「０」近傍でない部分に含まれるノイズ成分を抑制、または、除去することも可能である。
【００７８】
帯域分離増幅部１１１より出力された第３の輝度信号１２４は、図８の肌色処理部１１２に供給される。
【００７９】
図１１は、図８の肌色処理部１１２の詳細な構成例を示す図である。
【００８０】
図１１において、肌色処理部１１２は、入力された色信号を、輝度信号の調整量である出力信号に変換する変換処理部２０２、および、入力された２つの信号を乗算する乗算器２０１により構成され、入力された色信号のＣｂ成分（入力色信号１３１Ａ）、およびＣｒ成分（入力色信号１３１Ｂ）に基づいて、第３の輝度信号１２４の強調量を調整し、信号１２５として出力する。
【００８１】
変換処理部２０２は、内蔵する記憶部（図示せず）に、図１２に示すような肌色検出テーブルを予め保持しており、この肌色検出テーブルに基づいて、入力色信号１３１Ａおよび１３１Ｂより対応する画像が肌色であるか否かを判定し、判定結果に対応する信号レベルの信号２１１を加算器２０１に供給する。
【００８２】
加算器２０１は、帯域分離増幅部１１１により供給された信号１２４に、変換処理部２０２により供給された信号２１１を乗算し、信号１２５として図８の強調量調整部１１３に供給する。
【００８３】
図１２は、図１１の変換処理部２０２が保持する肌色検出テーブルの例を示す図である。
【００８４】
図１２Ａにおいて、横軸は、入力された色信号のＣｂ成分である入力色信号１３１Ａの信号レベルを示し、縦軸は、入力された色信号のＣｒ成分である入力色信号１３１Ｂの信号レベルを示す。また、直線２２１および２２２は、予め設定された所定の直線であり、直線２２１および直線２２２に挟まれた領域２２３は、肌色を示す領域である。すなわち、直線２２１および２２２は、領域２２３が肌色を示す領域となるように設定されている。
【００８５】
変換処理部２０２は、入力色信号１３１Ａおよび１３１Ｂの信号レベルの組み合わせが領域２２３に含まれる場合、対応する画像の色が肌色であると判定し、輝度信号の強調量を調整する係数として、信号レベルが「１」より小さい信号２１１を乗算器２０１に供給し、入力色信号１３１Ａおよび１３１Ｂの信号レベルの組み合わせが領域２２３に含まれない場合、対応する画像の色が肌色ではないと判定し、輝度信号の強調量を調整する係数として、信号レベルが「１」の信号２１１を乗算器２０１に供給する。
【００８６】
図１２Ｂは、変換処理部２０２の変換特性の他の例を示している。図１２Ｂにおいて、領域２２４は、領域２２３と同様に肌色を示す領域であり、所定のレベルＸ２１以上であり、かつ、Ｘ２１より大きい所定のレベルＸ２２より小さい信号レベルのＣｂ成分（入力色信号１３１Ａ）と、所定のレベルＬ３以上であり、かつＬ３より大きい所定のレベルＨ３より小さい信号レベルのＣｒ成分（入力色信号１３１Ｂ）の組み合わせにより構成される領域である。
【００８７】
変換処理部２０２は、入力色信号１３１Ａおよび１３１Ｂの信号レベルの組み合わせが領域２２４に含まれる場合、対応する画像の色が肌色であると判定し、輝度信号の強調量を調整する係数として、信号レベルが「１」より小さい信号２１１を乗算器２０１に供給し、入力色信号１３１Ａおよび１３１Ｂの信号レベルの組み合わせが領域２２４に含まれない場合、対応する画像の色が肌色ではないと判定し、輝度信号の強調量を調整する係数として、信号レベルが「１」の信号２１１を乗算器２０１に供給する。
【００８８】
加算器２０１は、変換処理部２０２より供給された信号２１１を、第３の輝度信号１２４に乗算する。以上のようにして、肌色処理部１１２は、肌色の画像に対応する輝度信号の強調量を調整する。
【００８９】
以上のように、変換処理部２０２は、入力色信号１３１Ａおよび信号１３１Ｂの信号レベルに対して、図１２Ａに示されるような２本の直線により肌色領域を指定してもよいし、図１２Ｂに示されるような上限値と下限値を入力色信号１３１Ａおよび信号１３１Ｂに対して設定することにより、肌色領域を指定してもよい。
【００９０】
以上のようにして、肌色処理部１１２は、強調された輝度信号のエッジ成分の、対応する画像の色が肌色である部分の強調量を最適な値に調整することができる。
【００９１】
肌色処理部１１２より出力された第４の輝度信号１２５は、図８の強調量調整部１１３に供給される。
【００９２】
図１３は、図８の強調量調整部１１３の詳細な構成例を示す図である。
【００９３】
図１３において、強調量調整部１１３は、入力信号を出力信号に変換するルックアップテーブル２５１、および入力された２つの信号を乗算する乗算器２５２により構成されており、分離回路１１により供給された輝度信号のエッジ成分からなる第１の輝度信号１２２に基づいて、肌色処理部１１２により供給された第４の輝度信号１２５の強調量を調整して、第５の輝度信号１２６として出力する。
【００９４】
ルックアップテーブル２５１は、内蔵する記憶部（図示せず）に予め保持されている変換テーブルに基づいて、入力された第１の輝度信号１２２を信号２６１に変換する。
【００９５】
図１４は、図１３のルックアップテーブル２５１に保持される変換テーブルの例を示す図である。
【００９６】
図１４において、横軸は第１の輝度信号１２２の信号レベルを表しており、縦軸は信号２６１の信号レベルを表している。ルックアップテーブル２５１は、曲線２７１に基づいて、「０」から、「０」より大きい所定のレベルＨ４までの、第１の輝度信号１２２の信号レベルに対応する信号レベルの信号２６１を出力する。なお、図１４に示すように、第１の輝度信号１２２の信号レベルが所定のレベルＸ３１以上であり、かつ、Ｘ３１より大きい所定のレベルＸ３２以下である場合、ルックアップテーブル２５１は、信号レベルがＨ４の信号２６１を出力する。
【００９７】
すなわち、ルックアップテーブル２５１は、信号２６１を出力することにより、図１５に示すような乗算器２５２の入出力特性（信号１２５と信号１２６の信号レベルの比）を、直線２８１から直線２８２の範囲で、原点を中心に回転させるように、変化させる。
【００９８】
乗算器２５２より出力された信号１２６は、図８の加算器１１４に供給され、加算器１１４において、信号１２２を加算され、出力輝度信号１２７として、画像処理装置１１０の外部に出力される。
【００９９】
以上のようにして、強調量調整部１１３は、信号レベルが黒近傍または白近傍に位置する非エッジ成分の強調量を抑制し、波形歪の発生を抑制することができる。
【０１００】
また、出力輝度信号１２７は、色信号レベル調整部１１５にも供給される。
【０１０１】
図１６は、色信号レベル調整部１１５の詳細な構成例を示す図である。図１６において、色信号レベル調整部３０１は、補正後の輝度信号である出力輝度信号１２７より、補正前の輝度信号である入力輝度信号１２１を除算し、補正量を算出する除算器３０１、除算器３０１により算出された補正量を、入力色信号１３１Ａに乗算する乗算器３０２Ａ、同様に、除算器３０１により算出された補正量を、入力色信号１３１Ｂに乗算する乗算器３０２Ｂ、乗算器３０２Ａの入力と出力の信号レベルを比較する比較器３０３Ａ、同様に、乗算器３０２Ｂの入力と出力の信号レベルを比較する比較器３０３Ｂ、比較器３０３Ａの出力に基づいて、乗算器３０２Ａの入力信号と出力信号のいずれか一方を選択し、色信号レベル調整部１１５の外部に出力するセレクタ３０４Ａ、同様に、比較器３０３Ｂの出力に基づいて、乗算器３０２Ｂの入力信号と出力信号のいずれか一方を選択し、色信号レベル調整部１１５の外部に出力するセレクタ３０４Ｂにより構成される。
【０１０２】
除算器３０１は、図８の加算器１１４より供給された出力輝度信号１２７を、画像処理装置１１０の外部より入力された入力輝度信号１２１で除算し、その結果を信号３１１として乗算器３０２Ａおよび３０２Ｂに供給する。
【０１０３】
乗算器３０２Ａは、入力された色信号のＣｂ成分である入力色信号１３１Ａに、除算器３０１により供給された信号３１１を乗算し、乗算結果である信号３１２Ａを比較器３０３Ａおよびセレクタ３０４Ａに供給する。
【０１０４】
同様に、乗算器３０２Ｂは、入力された色信号のＣｒ成分である入力色信号１３１Ｂに、除算器３０１により供給された信号３１１を乗算し、乗算結果である信号３１２Ｂを比較器３０３Ｂおよびセレクタ３０４Ｂに供給する。
【０１０５】
比較器３０３Ａは、乗算器３０２Ａの入力信号である入力色信号１３１Ａの信号レベルと、乗算器３０２Ａの出力信号である信号３１２Ａの信号レベルを比較し、比較結果である信号３１３Ａをセレクタ３０４Ａに供給する。
【０１０６】
同様に、比較器３０３Ｂは、乗算器３０２Ｂの入力信号である入力色信号１３１Ｂの信号レベルと、乗算器３０２Ｂの出力信号である信号３１２Ｂの信号レベルを比較し、比較結果である信号３１３Ｂをセレクタ３０４Ｂに供給する。
【０１０７】
セレクタ３０４Ａは、比較器３０３Ａにより供給された信号３１３Ａに基づいて、入力された信号３１２Ａおよび入力色信号１３１Ａの内、信号レベルが大きい方を選択し、出力色信号１３２Ａとして画像処理装置１１０の外部に出力する。
【０１０８】
同様に、セレクタ３０４Ｂは、比較器３０３Ｂにより供給された信号３１３Ｂに基づいて、入力された信号３１２Ｂおよび入力色信号１３１Ｂの内、信号レベルが大きい方を選択し、出力色信号１３２Ｂとして画像処理装置１１０の外部に出力する。
【０１０９】
色信号レベル調整部１１５は、除算器３０１において、非エッジ成分を強調された輝度信号である信号１２７から、補正前の輝度信号である入力輝度信号１２１を除算し、画像処理装置における輝度信号への補正量を算出する。そして、色信号レベル調整部１１５は、乗算器３０２Ａにおいて、その補正量を色信号のＣｂ成分である入力色信号１３１Ａに乗算し、比較器３０３Ａにおいて、乗算後の色信号のＣｂ成分である信号３１２Ａの信号レベルと、入力色信号１３１Ａの信号レベルを比較し、セレクタ３０４Ａにおいて、その比較結果に基づいて、信号１３１Ａおよび信号３１２Ａの内、信号レベルの大きい方を選択して、出力色信号１３２Ａとして出力する。
【０１１０】
また、色信号レベル調整部１１５は、入力色信号１３１Ｂに対しても、入力色信号１３１Ａに対する場合と同様に、乗算器３０２Ｂ、比較器３０３Ｂ、および、セレクタ３０４Ｂを用いて色信号レベルを調整し、輝度信号に対する補正量を乗算された色信号である信号３１２Ｂと、入力色信号１３１Ｂの内、信号レベルの大きい方を選択して、出力色信号１３２Ｂとして出力する。
【０１１１】
以上のようにして、色信号レベル調整部１１５は、輝度信号の補正量に合わせて色信号の信号レベルを調整する際に、調整後の色信号の信号レベルが調整前の色信号の信号レベルより小さくなる部分については調整前の色信号レベルを出力するようにし、色信号の信号レベルが「０」になることを防止し、対応する画像の「色消え」を防止することができる。
【０１１２】
次に、図８の画像処理装置１１０の動作を説明する。
【０１１３】
画像処理装置１１０に入力された入力輝度信号１２１は、分離回路１１に供給され、エッジ成分と非エッジ成分に分離される。そして、分離された非エッジ成分である第２の輝度信号１２３は、帯域別分離増幅部１１１に供給され、強調処理が施され、低周波成分と高周波成分とをそれぞれ独立して強調される。
【０１１４】
画像処理装置１１０による強調処理について、図１７および図１８のフローチャートを参照して説明する。また、必要に応じて、図１９乃至図２３を参照して説明する。
【０１１５】
最初に図１７のステップＳ１において、帯域分離増幅部１１１のローパスフィルタ１５１は、第２の輝度信号１２３から低周波数成分を抽出し、信号１６１として強調処理部１５２および加算器１５４に供給する。
【０１１６】
図１９は、信号１６１の波形の例を示す図である。図１９において、信号１６１には、低周波の振幅成分１６１Ｃおよび１６１Ｄが含まれている。なお、信号１６１に含まれる振幅成分１６１Ｄの振幅の方が、振幅成分１６１Ｃの振幅より大きく形成されている。
【０１１７】
次に、入力輝度信号１２３および信号１６１を取得した加算器１５４は、ステップＳ２において、取得した入力輝度信号１２３より信号１６１を減算し、高周波成分を抽出する。そして、加算器１５４は、抽出した高周波成分である信号１６２を強調処理部１５５に供給する。
【０１１８】
図２０は、信号１６２の波形の例を示す図である。図２０において、信号１６２には、高周波の小振幅成分からなるノイズ成分１６２Ａ−１乃至１６２Ａ−９、並びに、高周波の振幅成分１６２Ｂが含まれている。なお、信号１６２に含まれる振幅成分１６２Ｂは、図１９の振幅成分１６１Ｃの振幅と同じ大きさの振幅で形成されている。また、ノイズ成分１６２Ａ−１乃至１６２Ａ−９は、振幅成分１６２Ｂより小さい振幅で形成されている。
【０１１９】
そして、ステップＳ３において、強調処理部１５２は、ローパスフィルタ１５１により供給された信号１６１に基づいて、抽出した第２の輝度信号の低周波成分（信号１６１）の信号レベルが第１の閾値（Ｘ１１）以下か否かを判定し、第１の閾値以下であると判定すると、強調処理部１５２は、ステップＳ４に処理を進め、第２の輝度信号の低周波成分（信号１６１）に第１の係数を乗算する。すなわち、図１０Ａに示されるように、強調処理部１５２は、信号１６１の信号レベルがＸ１１以下である場合、信号１６１に比較的小さい係数を乗算する。
【０１２０】
第１の係数を乗算すると強調処理部１５２は、乗算結果である信号１６３を加算器１５３に供給し、処理を図１８のステップＳ８に進める。
【０１２１】
また、図１７のステップＳ３において、抽出した第２の輝度信号の低周波成分の信号レベルが第１の閾値より大きく、第１の閾値以下ではないと判定した場合、強調処理部１５２は、ステップＳ５に処理を進め、抽出した第２の輝度信号の低周波成分（信号１６１）の信号レベルが第２の閾値以下か否かを判定する。
【０１２２】
第２の閾値以下であると判定すると、強調処理部１５２は、ステップＳ６に処理を進め、第２の輝度信号の低周波成分（信号１６１）に第２の係数を乗算する。すなわち、図１０Ａに示されるように、強調処理部１５２は、信号１６１の信号レベルがＸ１１より大きく、かつ、Ｘ１２以下である場合、信号１６１に比較的大きい係数を乗算する。
【０１２３】
第２の係数を乗算すると強調処理部１５２は、乗算結果である信号１６３を加算器１５３に供給し、処理を図１８のステップＳ８に進める。
【０１２４】
また、図１７のステップＳ５において、抽出した第２の輝度信号の低周波成分の信号レベルが第２の閾値より大きく、第２の閾値以下ではないと判定した場合、強調処理部１５２は、ステップＳ７に処理を進め、第２の輝度信号の低周波成分（信号１６１）に第３の係数を乗算する。すなわち、図１０Ａに示されるように、強調処理部１５２は、信号１６１の信号レベルがＸ１２より大きい場合、信号１６１に比較的小さい係数を乗算する。
【０１２５】
第３の係数を乗算すると強調処理部１５２は、乗算結果である信号１６３を加算器１５３に供給し、処理を図１８のステップＳ８に進める。
【０１２６】
以上のように、ステップＳ３乃至Ｓ７の処理により、図１９の信号１６１は、強調され、図２１に示すような信号１６３に変換される。図２１は、信号１６３の波形の例を示す図である。図２１において、信号１６３に含まれる低周波の振幅成分１６３Ｃは、図１９の信号１６１に含まれる振幅成分１６１Ｃを強調したものであり、同様に、信号１６３に含まれる低周波の振幅成分１６３Ｄは、図１９の信号１６１に含まれる振幅成分１６１Ｄを強調したものである。また、振幅成分１６３Ｃおよび１６３Ｄは、図１０Ａに示されるルックアップテーブルにより、適正レベルの上限値Ｈ１および下限値Ｌ１を超えないように調整されて強調されており、強調前は互いに異なっていた振幅の大きさが同じになっている。
【０１２７】
図１８のステップＳ８において、強調処理部１５５は、加算器１５４により供給された信号１６２に基づいて、抽出した第２の輝度信号の高周波成分（信号１６２）の信号レベルが第３の閾値（Ｘ１３）以下か否かを判定し、第３の閾値以下であると判定すると、強調処理部１５５は、ステップＳ９に処理を進め、第２の輝度信号の高周波成分（信号１６２）に第４の係数を乗算する。すなわち、図１０Ｂに示されるように、強調処理部１５５は、信号１６２の信号レベルがＸ１３以下である場合、信号１６２に比較的小さい係数を乗算する。
【０１２８】
第４の係数を乗算すると強調処理部１５５は、乗算結果である信号１６４を加算器１５３に供給し、処理を図１８のステップＳ１７に進める。
【０１２９】
また、図１８のステップＳ８において、第２の輝度信号の高周波成分（信号１６２）の信号レベルが第３の閾値（Ｘ１３）より大きく、第３の閾値以下ではないと判定した場合、強調処理部１５５は、ステップＳ１０に処理を進め、抽出した第２の輝度信号の高周波成分（信号１６２）の信号レベルが第４の閾値（Ｘ１４）以下か否かを判定する。
【０１３０】
信号１６２の信号レベルが第４の閾値以下であると判定した場合、強調処理部１５５は、ステップＳ１１に処理を進め、第２の輝度信号の高周波成分（信号１６２）に第５の係数を乗算する。すなわち、図１０Ｂに示されるように、強調処理部１５５は、信号１６２の信号レベルがＸ１３より大きく、かつ、Ｘ１４以下である場合、信号１６２に比較的大きい係数を乗算する。
【０１３１】
第５の係数を乗算すると強調処理部１５５は、乗算結果である信号１６４を加算器１５３に供給し、処理を図１８のステップＳ１７に進める。
【０１３２】
さらに、図１８のステップＳ１０において、第２の輝度信号の高周波成分（信号１６２）の信号レベルが第４の閾値（Ｘ１４）より大きく、第４の閾値以下ではないと判定した場合、強調処理部１５５は、ステップＳ１２に処理を進め、抽出した第２の輝度信号の高周波成分（信号１６２）の信号レベルが第５の閾値（Ｘ１５）以下か否かを判定する。
【０１３３】
信号１６２の信号レベルが第５の閾値以下であると判定した場合、強調処理部１５５は、ステップＳ１３に処理を進め、第２の輝度信号の高周波成分（信号１６２）に第６の係数を乗算する。すなわち、図１０Ｂに示されるように、強調処理部１５５は、信号１６２の信号レベルがＸ１４より大きく、かつ、Ｘ１５以下である場合、信号１６２に値が「０」の係数を乗算し、信号１６２を平滑化する。
【０１３４】
第６の係数を乗算すると強調処理部１５５は、乗算結果である信号１６４を加算器１５３に供給し、処理を図１８のステップＳ１７に進める。
【０１３５】
また、図１８のステップＳ１２において、第２の輝度信号の高周波成分（信号１６２）の信号レベルが第５の閾値（Ｘ１５）より大きく、第５の閾値以下ではないと判定した場合、強調処理部１５５は、ステップＳ１４に処理を進め、抽出した第２の輝度信号の高周波成分（信号１６２）の信号レベルが第６の閾値（Ｘ１６）以下か否かを判定する。
【０１３６】
信号１６２の信号レベルが第６の閾値以下であると判定した場合、強調処理部１５５は、ステップＳ１５に処理を進め、第２の輝度信号の高周波成分（信号１６２）に第７の係数を乗算する。すなわち、図１０Ｂに示されるように、強調処理部１５５は、信号１６２の信号レベルがＸ１５より大きく、かつ、Ｘ１６以下である場合、信号１６２に比較的大きい係数を乗算する。
【０１３７】
第７の係数を乗算すると強調処理部１５５は、乗算結果である信号１６４を加算器１５３に供給し、処理を図１８のステップＳ１７に進める。
【０１３８】
さらに、図１８のステップＳ１４において、第２の輝度信号の高周波成分（信号１６２）の信号レベルが第６の閾値（Ｘ１６）より大きく、第５の閾値以下ではないと判定した場合、強調処理部１５５は、ステップＳ１６に処理を進め、第２の輝度信号の高周波成分（信号１６２）に第８の係数を乗算する。すなわち、図１０Ｂに示されるように、強調処理部１５５は、信号１６２の信号レベルがＸ１６より大きい場合、信号１６２に比較的小さい係数を乗算する。
【０１３９】
第８の係数を乗算すると強調処理部１５５は、乗算結果である信号１６４を加算器１５３に供給し、処理を図１８のステップＳ１７に進める。
【０１４０】
以上のように、ステップＳ８乃至Ｓ１６の処理により、図２０の信号１６２は、強調され、図２２に示すような信号１６４に変換される。図２２は、信号１６４の波形の例を示す図である。図２２において、信号１６４に含まれる高周波の振幅成分１６４Ｂは、図２０の信号１６２に含まれる振幅成分１６２Ｂを強調したものである。また、信号１６４は、図１０Ｂに示されるルックアップテーブルに基づいて強調された信号であり、図２０の信号１６２に含まれていたノイズ成分１６２Ａ−１乃至１６２Ａ−９は、全て平滑化されている。
【０１４１】
ステップＳ１７において、信号１６３および１６４を供給された加算器１５３は、輝度信号の非エッジ成分の低周波成分である信号１６３に、輝度信号の非エッジ成分の高周波成分である信号１６４を加算し、第３の輝度信号１２４を生成し、強調処理を終了する。
【０１４２】
加算器１５３は、図２１に示される信号１６３に、図２２に示される信号１６４を加算し、図２３に示される第３の輝度信号１２４が生成される。図２３は第３の輝度信号１２４の波形の例を示す図である。図２３において、第３の輝度信号１２４に含まれる振幅成分１２４Ｂは、図２２に示される振幅成分１６４Ｂに対応し、第３の輝度信号１２４に含まれる振幅成分１２４Ｃおよび１２４Ｄは、図２１に示される振幅成分１６３Ｃおよび１６３Ｄにそれぞれ対応している。
【０１４３】
画像処理装置１１０は、帯域分離増幅部１１１において、上述した強調処理を、入力輝度信号１２１が入力される度に繰り返す。
【０１４４】
以上のようにして、第２の輝度信号１２３は、帯域分離増幅部１１１において、図２３に示すように、適正レベルの上限値Ｈ１および下限値Ｌ１を超えないように調整されて強調された第３の輝度信号１２４に変換される。
【０１４５】
以上のように、帯域分離増幅部１１１は、非エッジ成分の信号レベルが「０」近傍でない部分に含まれるノイズ成分を強調せずに、非エッジ成分を強調することができる。また、強調処理部１５５における、「０」近傍に対する強調量を調節することにより、帯域分離増幅部１１１は、非エッジ成分の信号レベルが「０」近傍でない部分に含まれるノイズ成分を抑制、または、除去することも可能である。
【０１４６】
そして、図２３の第３の輝度信号１２４は、肌色処理部１１２に供給される。第３の輝度信号１２４は、肌色検出部１１２において、入力色信号１３１Ａおよび１３１Ｂに基づいて、対応する画像が肌色の部分が検出され、その部分について強調量が調整される。
【０１４７】
図２４のフローチャートを参照して、画像処理装置１１０による肌色調整処理について説明する。
【０１４８】
最初にステップＳ３１において、変換処理部２０２は、色信号のCb成分である入力色信号１３１Ａ、および、Ｃｒ成分である入力色信号１３１Ｂを取得し、予め保持しいている、図１２に示されるような肌色検出テーブルを用いて、入力色信号１３１Ａおよび１３１Ｂに対応する画像の色が肌色であるか否かを判定する。
【０１４９】
入力色信号１３１Ａおよび１３１Ｂに対応する画像の色が肌色であると判定した場合、変換処理部２０２は、ステップＳ３２に処理を進め、第３の輝度信号に乗算するゲイン値を予め決められた「１」より小さい所定の値に設定し、設定したゲイン値を乗算器２０１に供給し、処理をステップＳ３４に進める。
【０１５０】
また、ステップＳ３１において、入力色信号１３１Ａおよび１３１Ｂに対応する画像の色が肌色ではないと判定した場合、変換処理部２０２は、処理をステップＳ３３に進め、第３の輝度信号に乗算するゲイン値を「１」に設定し、設定したゲイン値を乗算器２０１に供給し、処理をステップＳ３４に進める。
【０１５１】
ステップＳ３４において、ゲイン値を供給された乗算器２０１は、入力された第３の輝度信号１２４にゲイン値を乗算し、第４の輝度信号を生成する。第４の輝度信号を生成した乗算器２０１は、肌色調整処理を終了する。
【０１５２】
画像処理装置１１０は、肌色処理部１１２において、以上のような肌色調整処理を、入力輝度信号１２１が入力される度に繰り返す。
【０１５３】
以上のようにして、第３の輝度信号１２４は、肌色処理部１１２において、対応する画像の色が肌色の部分について、強調量を調整された第４の輝度信号１２５に変換される。
【０１５４】
以上のように、肌色処理部１１２は、強調された輝度信号の非エッジ成分の、対応する画像の色が肌色である部分の強調量を最適な値に調整することができる。
【０１５５】
そして、その第４の輝度信号１２５は、強調量調整部１１３に供給される。第４の輝度信号１２５は、強調量調整部１１３において、第１の輝度信号１２２に基づいて、白近傍または黒近傍の第４の輝度信号１２５が検出され、その部分について強調量が調整される。
【０１５６】
図２５のフローチャートを参照して、画像処理装置１１０による強調量調整処理について説明する。また、必要に応じて、図２６乃至図２８を参照して説明する。
【０１５７】
最初に、ステップＳ５１において、強調量調整部１１３のルックアップテーブル２５１は、第１の輝度信号１２２を取得し、取得した第１の輝度信号１２２の信号レベルを検出すると、内蔵する記憶部（図示せず）に予め保持している、図１４に示すような変換テーブルを用いて、検出した第１の輝度信号１２２の信号レベルに対応する、第４の輝度信号に乗算するゲイン値を設定する。そしてルックアップテーブル２５１は、設定したゲイン値を乗算器２５２に供給する。
【０１５８】
ゲイン値を供給された乗算器２５２は、ステップＳ５２において、入力された第４の輝度信号に、供給されたゲイン値を乗算し、第５の輝度信号を生成する。第５の輝度信号を生成した乗算器２５２は、強調量調整処理を終了する。
【０１５９】
図２６は、乗算器２５２に供給された第４の輝度信号１２５の波形の例を示す図である。図２６において、第４の輝度信号１２５には、互いに同じ大きさに強調された振幅成分１２５Ａ，１２５Ｂ、および１２５Ｃが含まれる。
【０１６０】
図２６の第４の輝度信号１２５に含まれる振幅成分１２５Ａ，１２５Ｂ、および１２５Ｃは、入力輝度信号のエッジ成分である第１の輝度信号１２２を加算した場合、その振幅の中心となる信号レベルがそれぞれ異なる。すなわち、振幅成分１２５Ａは、その振幅の中心となる信号レベルが他と比べて最も小さく、黒近傍で振幅し、振幅成分１２５Ｃは、その振幅の中心となる信号レベルが他と比べて最も大きく、白近傍で振幅し、振幅成分１２５Ｂは、全階調の中間部分で振幅する。
【０１６１】
従って、ルックアップテーブル２５１は、保持している図１４の変換テーブルを用いて、第１の輝度信号の、これらの振幅成分１２５Ａ，１２５Ｂ、および１２５Ｃにそれぞれ対応する部分の信号レベルより、各振幅成分に乗算するゲイン値を設定し、設定したゲイン値を乗算器２５２に供給する。乗算器２５２は、供給されたゲイン値を、図２６の第４の輝度信号１２５に乗算し、第５の輝度信号１２６を生成する。
【０１６２】
図２７は、生成された第５の輝度信号１２６の波形の例を示す図である。
【０１６３】
図２７において、第５の輝度信号１２６に含まれる振幅成分１２６Ａ，１２６Ｂ、および１２６Ｃは、それぞれ、図２６の第４の輝度信号１２５に含まれる振幅成分１２５Ａ，１２５Ｂ、および１２５Ｃに対応しているが、ゲイン値を乗算された結果、振幅成分１２６Ｂの振幅が一番大きくなっている。
【０１６４】
このような第５の振幅成分１２６に、エッジ成分である第１の輝度信号１２２を加算すると、図２８に示されるような波形の出力輝度信号１２７になる。図２８において、出力輝度信号１２７に含まれる振幅成分１２７Ａ，１２７Ｂ、および１２７Ｃは、それぞれ、図２７の第５の輝度信号１２６に含まれる振幅成分１２６Ａ，１２６Ｂ、および１２６Ｃに対応している。振幅成分１２７Ａおよび１２７Ｃは、振幅成分１２７Ｂと比べて、その振幅が小さくなるように強調量を調整されており、出力輝度信号１２７は、階調レベルの上限値Ｈ５から下限値Ｌ５までの範囲内で形成されている。
【０１６５】
画像処理装置１１０は、強調量調整部１１３において、以上のような強調量調整処理を、入力輝度信号１２１が入力される度に繰り返す。
【０１６６】
以上のようにして、第４の輝度信号１２５は、強調量調整部１１３において、第１の輝度信号の信号レベルに応じて強調量を調整された第５の輝度信号１２６に変換される。
【０１６７】
以上のように、強調量調整部１１３は、信号レベルが黒近傍または白近傍に位置する非エッジ成分の強調量を抑制し、波形歪の発生を抑制することができる。
【０１６８】
そして、その第５の輝度信号１２６は、加算器１１４に供給され、第１の輝度信号と加算され、出力輝度信号１２７に変換され、画像処理装置１１０の外部に出力される。
【０１６９】
また、出力輝度信号１２７は、色信号レベル調整部１１５にも供給され、色信号のレベル調整に用いられる。入力色信号１３１Ａおよび１３１Ｂは、色信号レベル調整部１１５において、入力輝度信号１２１および出力輝度信号１２７に基づいて、信号レベルを調整される。
【０１７０】
画像処理装置１１０による色信号レベル調整処理について、図２９のフローチャートを参照して説明する。また、必要に応じて、図３０乃至図３５を参照して説明する。
【０１７１】
なお、色信号レベル調整処理において、色信号のＣｒ成分である入力色信号１３１Ｂは、乗算器３０２Ｂ、比較器３０３Ｂ、および、セレクタ３０４Ｂにより、色信号のＣｂ成分である入力色信号１３１Ａが、乗算器３０２Ａ、比較器３０３Ａ、およびセレクタ３０４Ａにより処理される場合と同様に処理される。従って、以下においては、入力色信号１３１Ａおよび１３１Ｂ、乗算器３０２Ａおよび３０２Ｂ、比較器３０３Ａおよび３０３Ｂ、並びに、セレクタ３０４Ａおよび３０４Ｂをそれぞれ区別せずに、単に、入力色信号１３１、乗算器３０２、比較器３０３、およびセレクタ３０４と称する。また、それに伴い、信号３１２Ａおよび３１２Ｂ、信号３１３Ａおよび３１３Ｂ、並びに、出力色信号１３２Ａおよび１３２Ｂも、それぞれ区別せずに、単に、信号３１２、信号３１３、および出力色信号１３２と称する。
【０１７２】
最初に、ステップＳ７１において、色信号レベル調整部１１５の除算器３０１は、取得した出力輝度信号１２７を入力輝度信号１２１で除算して輝度信号の強調量を算出し、色信号の信号レベルを調整する色信号ゲイン値を算出する。そして、除算器３０１は、算出した色信号ゲイン値からなる信号３１１を乗算器３０２に供給する。
【０１７３】
図３０は、入力輝度信号１２１の波形の例を示す図である。図３０に示されるように、入力輝度信号１２１は、時刻「０」から時刻Ｘ４１までの区間において、その信号レベルが「０」となり、時刻Ｘ４１から時刻Ｘ４２までの区間において、その信号レベルがＭ６となる。また、時刻Ｘ４２から時刻Ｘ４４までの区間において、入力輝度信号１２１は、Ｍ６を中心に、最大値をＨ６とし、最小値をＬ６として振幅する。このとき、時刻Ｘ４３における入力輝度信号１２１の信号レベルはＭ６である。そして、入力輝度信号１２１は、時刻Ｘ４４から時刻Ｘ４５までの区間において、その信号レベルがＭ６となり、時刻Ｘ４５以降の区間において、その信号レベルが「０」となる。
【０１７４】
図３１は、出力輝度信号１２７の波形の例を示す図である。図３１に示されるように、出力輝度信号１２７は、時刻「０」から時刻Ｘ４１までの区間において、その信号レベルが「０」となり、時刻Ｘ４１から時刻Ｘ４２までの区間において、その信号レベルがＭ６となる。また、時刻Ｘ４２から時刻Ｘ４４までの区間において、出力輝度信号１２７は、Ｍ６を中心に、最大値をＨ７とし、最小値をＬ７として振幅する。このとき、時刻Ｘ４３における出力輝度信号１２７の信号レベルはＭ６である。そして、出力輝度信号１２７は、時刻Ｘ４４から時刻Ｘ４５までの区間において、その信号レベルがＭ６となり、時刻Ｘ４５以降の区間において、その信号レベルが「０」となる。
【０１７５】
乗算器３０１は、図３１に示されるような出力輝度信号１２７を、図３０に示されるような入力輝度信号１２１で除算し、図３２に示されるような信号３１１を生成する。
【０１７６】
図３２は、信号３１１の波形の例を示す図である。信号３１１は、出力輝度信号１２７を、入力輝度信号１２１を用いて除算した結果であり、図３２に示されるように、時刻「０」から時刻Ｘ４２までの区間において、その信号レベルが「１」となり、時刻Ｘ４２から時刻Ｘ４３までの区間において、その信号レベルがＨ８となり、時刻Ｘ４３から時刻Ｘ４４までの区間において、その信号レベルがＬ８となり、時刻Ｘ４４以降の区間において、その信号レベルが「１」となる。
【０１７７】
すなわち、入力輝度信号１２１は、画像処理装置１１０により、時刻Ｘ４２からＸ４４までの振幅部分についてのみ、補正された出力信号１２７に変換されている。
【０１７８】
ステップＳ７２において、色信号ゲイン値からなる信号３１１を供給された乗算器３０２は、入力色信号１３１に信号３１１を乗算し、信号３１２として比較器３０３およびセレクタ３０４に供給する。
【０１７９】
図３３は、入力色信号１３１の波形の例を示す図である。図３３に示されるように、入力色信号１３１は、時刻「０」から時刻Ｘ４１までの区間において、その信号レベルが「０」となり、時刻Ｘ４１から時刻Ｘ４２までの区間において、その信号レベルがＭ９となる。また、時刻Ｘ４２から時刻Ｘ４４までの区間において、入力色信号１３１は、Ｍ９を中心に、最大値をＨ９とし、最小値をＬ９として振幅する。このとき、時刻Ｘ４３における入力色信号１３１の信号レベルはＭ９である。そして、入力色信号１３１は、時刻Ｘ４４から時刻Ｘ４５までの区間において、その信号レベルがＭ９となり、時刻Ｘ４５以降の区間において、その信号レベルが「０」となる。
【０１８０】
図３３に示される入力信号１３１は、乗算器３０２において、図３２に示される信号３１１を乗算され、信号３１２に変換される。図３４は、信号３１２の波形の例を示す図である。図３４に示されるように、信号３１２は、時刻「０」から時刻Ｘ４１までの区間において、その信号レベルが「０」となり、時刻Ｘ４１から時刻Ｘ４２までの区間において、その信号レベルがＭ９となる。また、時刻Ｘ４２から時刻Ｘ４４までの区間において、信号３１２は、Ｍ９を中心に、最大値をＨ１０とし、最小値をＬ１０として振幅する。このとき、時刻Ｘ４３における信号３１２の信号レベルはＭ９である。そして、信号３１２は、時刻Ｘ４４から時刻Ｘ４５までの区間において、その信号レベルがＭ９となり、時刻Ｘ４５以降の区間において、その信号レベルが「０」となる。
【０１８１】
ステップＳ７３において、比較器３０３は、乗算器３０２より供給された信号３１２の信号レベルと、入力色信号１３１の信号レベルを比較し、比較結果をセレクタ３０４に供給する。
【０１８２】
そして、ステップＳ７４において、セレクタ３０４は、供給された比較結果に基づいて、入力色信号１３１の信号レベルの方が、信号３１２の信号レベルより大きいか否かを判定する。入力色信号１３１の信号レベルの方が大きいと判定した場合、セレクタ３０４は、ステップＳ７５に進み、入力色信号１３１を選択し、出力色信号１３２として出力する。出力色信号１３２を出力したセレクタ３０４は、色信号レベル調整処理を終了する。
【０１８３】
また、ステップＳ７４において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であり、入力色信号１３１の信号レベルの方が大きくないと判定した場合、セレクタ３０４は、ステップＳ７６に進み、信号３１２を選択し、出力色信号１３２として出力する。出力色信号１３２を出力したセレクタ３０４は、色信号レベル調整処理を終了する。
【０１８４】
すなわち、セレクタ３０４は、図３３に示される信号１３１、および、図３４に示される信号３１２の内、信号レベルが大きい方を選択し、出力色信号１３２として出力する。
【０１８５】
図３５は、出力色信号１３２の波形の例を示す図である。図３５に示されるように、出力色信号１３２は、時刻「０」から時刻Ｘ４１までの区間において、その信号レベルが「０」となり、時刻Ｘ４１から時刻Ｘ４２までの区間において、その信号レベルがＭ９となる。また、時刻Ｘ４２から時刻Ｘ４４までの区間において、出力色信号１３２は、最大値をＨ１０とし、最小値をＬ９として振幅する。このとき、時刻Ｘ４３における出力色信号１３２の信号レベルはＭ９である。そして、出力色信号１３２は、時刻Ｘ４４から時刻Ｘ４５までの区間において、その信号レベルがＭ９となり、時刻Ｘ４５以降の区間において、その信号レベルが「０」となる。
【０１８６】
すなわち、時刻「０」から、時刻Ｘ４３までの区間において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であるので、セレクタ３０４は、信号３１２を選択し、出力色信号１３２として出力する。また、時刻Ｘ４３から、時刻Ｘ４４までの区間において、入力色信号１３１の信号レベルが、信号３１２の信号レベルより大きいので、セレクタ３０４は、入力色信号１３１を選択し、出力色信号１３２として出力する。さらに、時刻Ｘ４４以降の区間において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であるので、セレクタ３０４は、信号３１２を選択し、出力色信号１３２として出力する。
【０１８７】
画像処理装置１１０は、色信号レベル調整部１１５において、以上のような色信号レベル調整処理を、入力輝度信号１２１が入力される度に繰り返す。
【０１８８】
以上のように、出力色信号１３２として、信号レベルを調整される前後の信号の内、信号の大きい方が適用されるので、出力色信号の信号レベルが「０」になることが防止される。これにより、画像処理装置１１０は、色信号の処理において発生する、信号に対応する画像の色消えを防止し、コントラストを改善することができる。そして、その出力色信号１３２は、画像処理装置１１０の外部に出力される。
【０１８９】
以上のようにして、画像処理装置１１０は、輝度信号の信号レベルに応じて補正量を調整して、入力輝度信号１２１、並びに、入力色信号１３１Ａおよび１３１Ｂに対して、より効果的な補正処理を行う。
【０１９０】
以上において、帯域分離増幅部１１１は、図９に示されるように、入力された第２の輝度信号１２３を低周波成分と高周波成分に分離し、それぞれ、独立して増幅した後、増幅した低周波成分と高周波成分とを加算して第３の輝度信号１２４を生成するように説明したが、これに限らず、例えば、図３６に示すように、低周波成分と高周波成分を分離したまま、増幅した輝度信号を肌色処理部１１２に供給するようにしてもよい。
【０１９１】
図３６は、本発明を適用した画像処理装置の他の構成例を示す図である。
【０１９２】
図３６において、画像処理装置４００は、入力輝度信号１２１をエッジ成分（第１の輝度信号１２２）と非エッジ成分（第２の輝度信号１２３）に分離する分離回路１１、分離回路１１により供給された第２の輝度信号１２３を低周波成分および高周波成分に分離し、それぞれ、独立して増幅する帯域分離増幅部４０１、供給された低周波成分および高周波成分の各成分に対して処理する肌色処理部４０２および強調量調整部４０３、補正処理後の非エッジ成分の低周波成分および高周波成分を加算し、さらに、エッジ成分を加算し、出力輝度信号１２７を生成する合成回路４０４、並びに、入力輝度信号１２１および出力輝度信号に基づいて、入力色信号１３１Ａおよび１３１Ｂの信号レベルを調整する色信号レベル調整部１１５により構成されている。
【０１９３】
帯域分離増幅部４０１は、図９に示される帯域分離増幅部１１１から加算器１５３を除いた構成となっており、ローパスフィルタ１５１、強調処理部１５２および１５５、並びに、加算器１５４により構成されている。すなわち、分離回路１１より供給された第２の輝度信号１２３は、帯域分離増幅部４０１のローパスフィルタ１５１に供給され、低周波成分を抽出される。第２の輝度信号１２３の低周波成分である信号１６１は、強調処理部１５２に供給され、図１０Ａに示されるようなルックアップテーブルに基づいて増幅され、信号１６３として肌色処理部４０２に供給される。
【０１９４】
また、信号１６１は、加算器１５４にも供給される。分離回路１１より供給された第２の輝度信号１２３は、加算器１５４において、低周波成分である信号１６１を減算され、高周波成分である信号１６２が抽出される。信号１６２は、強調処理部１５５に供給され、図１０Ｂに示されるルックアップテーブルに基づいて増幅され、信号１６４として肌色処理部４０２に供給される。
【０１９５】
肌色処理部４０２は、輝度信号の非エッジ成分の低周波成分である信号１６３、および、輝度信号の非エッジ成分の高周波成分である信号１６４のそれぞれに対して図１１に示すような構成を備えており、図２４のフローチャートを参照して説明したような肌色処理を各信号に対して実行する。肌色処理部４０２は、肌色処理を施した、低周波成分および高周波成分の信号を、強調処理調整部４０３にそれぞれ供給する。
【０１９６】
強調処理調整部４０３は、供給された低周波成分および高周波成分のそれぞれに対して、図１３に示すような構成を備えており、図２５のフローチャートを参照して説明したような強調量調整処理を各信号に対して実行する。強調量調整部４０３は、強調量調整処理を施した、低周波成分および高周波成分の信号を合成回路４０４に供給する。
【０１９７】
合成回路４０４は、図９の加算器１５３に対応する加算器４０５、図８の加算器１１４に対応する加算器４０６により構成されている。加算器４０５は、強調量調整部４０３により供給された低周波成分である信号４１１に、強調量調整部４０３により供給された高周波成分である信号４１２を加算し、信号４１３として加算器４０６に供給する。加算器４０６は、加算器４０５により供給された信号４１３に、分離回路１１により供給された信号１２２を加算し、出力色信号１２７を生成する。
【０１９８】
以上のように、帯域分離増幅部１１１に含まれる加算器１５３を強調量調整部１１３の後段に配置し、帯域分離増幅部１１１が非エッジ成分の低周波成分および高周波成分をそれぞれ独立して出力するようにし、肌色処理部１１２および強調量調整部１１３が、各成分に対して、それぞれ、処理を行うようにしてもよい。
【０１９９】
なお、この場合における画像処理装置１１０による強調処理は、図１７のフローチャートを参照して説明した場合とほぼ同様に処理が行われるので、その説明は省略する。
【０２００】
また、以上のほかにも、画像処理装置１１０は、例えば、回路規模を抑えるため、図３７に示すように、帯域分離増幅部１１１の代わりに、図９の強調処理部１５２または１５５と同様の強調処理部４２１で構成するようにしてもよい。
【０２０１】
図３７は、本発明を適用した画像処理装置１１０のさらに他の構成例を示す図である。
【０２０２】
図３７において、画像処理装置４２０は、図８に示される画像処理装置１１０の帯域分離増幅部１１１を強調処理部４２１に置き換えた構成となっている。
【０２０３】
強調処理部４２１は、図３８を参照して後述するルックアップテーブルを、内蔵する記憶部（図示せず）に予め保持しており、そのルックアップテーブルに基づいて、分離回路１１により供給された第２の輝度信号１２３を増幅する。また、強調処理部４２１は、第２の輝度信号１２３を増幅した信号４３１を肌色処理部１１２に供給する。
【０２０４】
図３８は、図３７の強調処理部４２１により保持されるルックアップテーブルの例を示す図である。
【０２０５】
図３８において、曲線４４１は、強調処理部４２１が保持しているルックアップテーブルであり、横軸は入力信号である第２の輝度信号１２３の信号レベルを表し、縦軸は出力信号である信号４３１の信号レベルを表している。
【０２０６】
強調処理部４２１は、図３８に示される曲線４４１を参照し、入力信号レベルに対応する出力信号レベルを出力する。図３８に示されるように、曲線４４１は、信号レベルが所定のレベルＸ５１以下の入力信号に対応する直線、信号レベルがＸ５１より大きく、かつ、Ｘ５１より大きい所定のレベルＸ５２以下である入力信号に対応する直線、信号レベルがＸ５２より大きく、かつ、Ｘ５２より大きい所定のレベルＸ５３以下である入力信号に対応する直線、信号レベルがＸ５３より大きく、かつ、Ｘ５３より大きい所定のレベルＸ５４以下である入力信号に対応する直線、並びに、信号レベルがＸ５４より大きい入力信号に対応する直線により形成されている。
【０２０７】
図３８に示されるように、曲線４４１は、信号レベルがＸ５１より大きく、かつ、Ｘ５２以下である入力信号に対応する直線の傾き、並びに、信号レベルがＸ５３より大きく、かつ、Ｘ５４以下である入力信号に対応する直線の傾きが最も大きい。また、曲線４４１の信号レベルがＸ５２より大きく、かつ、Ｘ５３以下である入力信号に対応する直線の傾きが最も小さい。
【０２０８】
すなわち、強調処理部４２１は、第２の輝度信号１２３に含まれる、適正レベルの上限値および下限値付近まで振幅が拡がる大きな振幅に対しては、強調量を抑えて増幅するとともに、信号レベルが「０」付近において振幅する小振幅成分に対しては、増幅しない、若しくは、平滑化する。
【０２０９】
次に、図３７の画像処理装置４２０による強調処理について、図３９のフローチャートを参照して説明する。また、必要に応じて、図４０および４１を参照して説明する。
【０２１０】
最初に、ステップＳ９１において、強調処理部４２１は、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第１の閾値（Ｘ５１）以下であるか否かを判定する。
【０２１１】
図４０は、強調処理部４２１に供給される第２の輝度信号１２３の波形の例を示す図である。図４０において、第２の輝度信号１２３には、ノイズ成分１２３Ａ−１乃至１２３Ａ−３、比較的振幅の小さい振幅成分１２３Ｂ、比較的振幅の大きい振幅成分１２３Ｃが含まれている。
【０２１２】
図３９のステップＳ９１において、第２の輝度信号１２３の信号レベルが、第１の閾値以下であると判定した場合、強調処理部４２１は、ステップＳ９２に処理を進め、第２の輝度信号１２３に第１の係数を乗算する。すなわち、図３８に示されるように、強調処理部４２１は、第２の輝度信号１２３の信号レベルがＸ５１以下である場合、第２の輝度信号１２３に、図３８に示される直線４４１の、信号レベルがＸ５１以下の入力信号に対応する直線の傾きである第１の係数を乗算する。第１の係数を乗算した強調処理部４２１は、強調処理を終了する。
【０２１３】
また、ステップＳ９１において、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第１の閾値（Ｘ５１）以下ではないと判定した場合、処理をステップＳ９３に進め、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第２の閾値（Ｘ５２）以下であるか否かを判定する。
【０２１４】
第２の輝度信号１２３の信号レベルが、Ｘ５１より大きく、かつ、Ｘ５２以下であり、第２の閾値以下であると判定した場合、強調処理部４２１は、ステップＳ９４に処理を進め、第２の輝度信号１２３に第２の係数を乗算する。すなわち、図３８に示されるように、強調処理部４２１は、第２の輝度信号１２３の信号レベルがＸ５１より大きく、かつ、Ｘ５２以下である場合、第２の輝度信号１２３に、図３８に示される直線４４１の、信号レベルがＸ５１より大きく、かつ、Ｘ５２以下の入力信号に対応する直線の傾きである第２の係数を乗算する。第２の係数を乗算した強調処理部４２１は、強調処理を終了する。
【０２１５】
さらに、ステップＳ９３において、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第２の閾値（Ｘ５２）以下ではないと判定した場合、処理をステップＳ９５に進め、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第３の閾値（Ｘ５３）以下であるか否かを判定する。
【０２１６】
第２の輝度信号１２３の信号レベルが、Ｘ５２より大きく、かつ、Ｘ５３以下であり、第３の閾値以下であると判定した場合、強調処理部４２１は、ステップＳ９６に処理を進め、第２の輝度信号１２３に第３の係数を乗算する。すなわち、図３８に示されるように、強調処理部４２１は、第２の輝度信号１２３の信号レベルがＸ５２より大きく、かつ、Ｘ５３以下である場合、第２の輝度信号１２３に、図３８に示される直線４４１の、信号レベルがＸ５２より大きく、かつ、Ｘ５３以下の入力信号に対応する直線の傾きである第３の係数を乗算する。第３の係数を乗算した強調処理部４２１は、強調処理を終了する。
【０２１７】
また、ステップＳ９５において、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第３の閾値（Ｘ５３）以下ではないと判定した場合、処理をステップＳ９７に進め、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第４の閾値（Ｘ５４）以下であるか否かを判定する。
【０２１８】
第２の輝度信号１２３の信号レベルが、Ｘ５３より大きく、かつ、Ｘ５４以下であり、第４の閾値以下であると判定した場合、強調処理部４２１は、ステップＳ９８に処理を進め、第２の輝度信号１２３に第４の係数を乗算する。すなわち、図３８に示されるように、強調処理部４２１は、第２の輝度信号１２３の信号レベルがＸ５３より大きく、かつ、Ｘ５４以下である場合、第２の輝度信号１２３に、図３８に示される直線４４１の、信号レベルがＸ５３より大きく、かつ、Ｘ５４以下の入力信号に対応する直線の傾きである第４の係数を乗算する。第４の係数を乗算した強調処理部４２１は、強調処理を終了する。
【０２１９】
さらに、ステップＳ９７において、取得した第２の輝度信号１２３の信号レベルが、図３８に示すようなルックアップテーブルにおける第４の閾値（Ｘ５４）以下ではないと判定した場合、処理をステップＳ９９に進め、第２の輝度信号１２３に第５の係数を乗算する。すなわち、図３８に示されるように、強調処理部４２１は、第２の輝度信号１２３の信号レベルがＸ５４より大きい場合、第２の輝度信号１２３に、図３８に示される直線４４１の、信号レベルがＸ５４より大きい入力信号に対応する直線の傾きである第５の係数を乗算する。第５の係数を乗算した強調処理部４２１は、強調処理を終了する。
【０２２０】
図４１は、強調処理部４２１より出力される、第２の輝度信号１２３に強調処理を施した信号４３１の波形の例を示す図である。
【０２２１】
図４１において、信号４３１には、ノイズ成分４３１Ａ−１乃至４３１Ａ−３、並びに、振幅成分４３１Ｂおよび４３１Ｃが含まれている。
【０２２２】
図４０の第２の輝度信号１２３に含まれるノイズ成分１２３Ａ−１乃至１２３Ａ−３は、振幅が非常に小さく、信号レベルが「０」付近において振幅しているので、図３８の曲線４４１の、入力信号レベルがＸ５２より大きく、かつ、Ｘ５３以下である場合に対応する部分を用いて、強調処理が施され、それぞれ、図４１の信号４３１に含まれるノイズ成分４３１Ａ−１乃至４３１Ａ−３に変換される。従って、図４１のノイズ成分４３１Ａ−１乃至４３１Ａ−３の振幅の大きさは、強調されておらず、図４０のノイズ成分１２３Ａ−１乃至１２３Ａ−３の振幅の大きさと同じである。
【０２２３】
また、図４０の第２の輝度信号１２３に含まれる振幅成分１２３Ｃは、その振幅が適正レベルの上限値および下限値付近まで振幅が拡がるほど大きいので、図３８の曲線４４１のほぼ全体を用いて、強調処理が施され、図４１の信号４３１に含まれる振幅成分４３１Ｃに変換される。従って、図４１の振幅成分４３１Ｃの振幅の大きさは、適正レベルの上限値および下限値を超えないように強調量を抑制されている。
【０２２４】
さらに、図４０の第２の輝度信号１２３に含まれる振幅成分１２３Ｂは、その振幅が振幅成分１２３Ｃと比べて小さいので、図３８の曲線４４１の入力信号レベルがＸ５２より大きく、かつ、Ｘ５３以下に対応する部分を用いて、強調処理が施され、図４１の信号４３１に含まれる振幅成分４３１Ｂに変換される。従って、図４１の振幅成分４３１Ｂの振幅の大きさは、図４０の振幅成分１２３Ｂの振幅の大きさと比べて十分に強調されており、強調量が抑制された図４１の振幅成分４３１Ｃとほぼ同じ大きさとなっている。
【０２２５】
画像処理装置４２０は、強調処理部４２１において、以上のような強調処理を、入力輝度信号１２１が入力される度に繰り返す。
【０２２６】
以上のように、帯域分離増幅部１１１の代わりに強調処理部４２１を用いることにより、回路規模を抑え、強調処理を簡易化することができる。
【０２２７】
また、以上において、画像処理装置１１０は、入力色信号１３１Ａおよび１３１Ｂに基づいて、輝度信号の、対応する画像の色が肌色である部分を検出し、その部分について強調量を調整するように説明したが、これに限らず、例えば、入力輝度信号１２１のエッジ成分からなる第１の輝度信号１２２に基づいて、対応する画像が肌色であると判定した部分が、人物の肌であるか否かをさらに判定し、その判定に基づいて、対応する画像が人物の肌である部分についてのみ強調量を調整するようにしてもよい。
【０２２８】
図４２は、肌色処理部の他の詳細な構成例を示す図である。
【０２２９】
図４２において、肌色処理部４５０は、入力色信号１３１Ａおよび１３１Ｂに基づいて、輝度信号の強調量を調整するゲイン値を決定する変換処理部２０２、第１の輝度信号１２２に基づいて、算出されたゲイン値をさらに調整する調整量を決定する変換処理部４５１、変換処理部４５１より供給される調整量に基づいて、変換処理部２０２より供給されるゲイン値を調整する制御部４５２、および、調整されたゲイン値を第３の輝度信号に乗算する乗算器２０１により構成されている。
【０２３０】
変換処理部４５１は、内蔵する記憶部（図示せず）に、図４３に示すようなルックアップテーブルを予め保持しており、そのルックアップテーブルを用いて、入力輝度信号１２１のエッジ成分である第１の輝度信号１２２から、対応する画像が人物の肌である可能性のある明るさか否かを判定し、その判定に基づいて、変換処理部２０２により決定されるゲイン値の調整量を決定し、信号４６１として制御部４５２に供給する。
【０２３１】
図４３は、図４２の変換処理部４５１により予め保持されているルックアップテーブルの例を示す図である。
【０２３２】
図４３において、横軸は、入力する第１の輝度信号１２２の信号レベルを表し、縦軸は、出力するゲイン値の調整量を表している。変換処理部４５１は、第１の輝度信号１２２の信号レベルに応じて、曲線４７１のようにゲイン値の調整量を決定する。
【０２３３】
変換処理部４５１は、第１の輝度信号１２２の信号レベルが所定のレベルＸ６１以下である場合、その信号に対応する画像の明るさが人物の肌としては暗すぎであると判定し、ゲイン値の調整量を「０」に設定する。
【０２３４】
また、第１の輝度信号１２２の信号レベルがＸ６１より大きく、かつ、Ｘ６１より大きい所定のレベルＸ６２以下である場合、変換処理部４５１は、その信号に対応する画像の明るさが人物の肌として適正であると判定し、ゲイン値の調整量を、第１の輝度信号１２２の信号レベルに対応する曲線４７１上の値に設定する。
【０２３５】
さらに、変換処理部４５１は、第１の輝度信号１２２の信号レベルがＸ６２より大きい場合、その信号に対応する画像の明るさが人物の肌としては明るすぎであると判定し、ゲイン値の調整量を「０」に設定する。
【０２３６】
すなわち、変換処理部４５１は、第１の輝度信号１２２の信号レベルに基づいて、画像の明るさを確認することにより、第３の輝度信号１２４の対応する画像が人物の肌である可能性のある部分を検出する。
【０２３７】
制御部４５２は、例えば、混合器等により構成され、内蔵する記憶部（図示せず）に、図４４に示すようなルックアップテーブルを予め保持している。制御部４５２は、そのルックアップテーブルを用いて、変換処理部４５１より供給された信号４６１に含まれるゲイン値の調整量から、輝度信号に乗算するゲイン値を、信号レベルが「１」である信号と、変換処理部２０２により供給された信号２１１を混合する割合を決定し、決定された割合で混合したゲイン値を信号４６２として乗算器２０１に供給する。
【０２３８】
図４４は、図４２の制御部４５２により予め保持されているルックアップテーブルの例を示す図である。
【０２３９】
図４４において、横軸は、変換処理部４５１より供給される信号４６１の信号レベル、すなわち、ゲイン値の調整量を表し、縦軸は、乗算器２０１に供給され、第３の輝度信号１２４に乗算される調整後のゲイン値からなる信号４６２の信号レベルを表している。
【０２４０】
制御部４５２は、変換処理部４５１により供給される信号４６１の信号レベルに応じて、曲線４７２のように、第３の輝度信号１２４に乗算される信号４６２の信号レベルを決定する。
【０２４１】
制御部４５２は、信号４６１の信号レベルが所定のレベルＸ６３以下の場合、信号レベルが「１」の信号４６２を乗算器２０１に供給し、信号４６１の信号レベルがＸ６３より大きく、かつ、Ｘ６３より大きい所定のレベルＸ６４以下である場合、信号４６１の信号レベルに対応する曲線４７２上の値の信号レベルである信号４６２を乗算器２０１に供給し、信号４６１の信号レベルがＸ６４より大きい場合、変換処理部２０２より供給される信号２１１の信号レベルＬ１２と同じ信号レベルの信号４６２を乗算器２０１に供給する。
【０２４２】
すなわち、制御部４５２は、変換処理部２０２による、対応する画像の色が肌色であるか否かの判定と、変換処理部４５１による、対応する画像が人物の肌の明るさであるか否かの判定に基づいて、第３の輝度信号１２４の強調量を調整するゲイン値を決定する。
【０２４３】
図４５は、第１の輝度信号１２２の信号レベルと、制御部４５２により乗算器２０１に供給される信号４６２の信号レベルの関係を示す図である。
【０２４４】
図４５において、横軸は、第１の輝度信号１２２の信号レベルを表し、縦軸は、信号４６２の信号レベルを表している。制御部４５２は、第１の輝度信号１２２の信号レベルに応じて、曲線４７３のように、第３の輝度信号１２４に乗算される信号４６２の信号レベルを決定し、決定された信号レベルの信号４６２を乗算器２０１に供給する。
【０２４５】
すなわち、第１の輝度信号１２２の信号レベルが、所定のレベルＸ６５以下の場合、若しくは、Ｘ６５より大きい所定のレベルＸ６６よりさらに大きい場合、信号４６２の信号レベルは、「１」となり、第１の輝度信号１２２の信号レベルがＸ６５より大きく、かつ、Ｘ６６以下である場合、信号４６２の信号レベルは、「１」以下であり、かつ、変換処理部２０２より供給される信号２１１の信号レベルＬ１２より大きい範囲の、第１の輝度信号１２２の信号レベルに対応する曲線４７３上の値の信号レベルとなる。
【０２４６】
すなわち、変換処理部２０２により、対応する画像の色が肌色であると判定されても、変換処理部４５１により、対応する画像の明るさが人物の肌として適正でないと判定された場合、制御部４５２は、帯域分離増幅部１１１により第３の輝度信号に施された強調量を調整しないようにゲイン値を決定する。言い換えると、制御部４５２は、色および明るさから、対応する画像が人物の肌であると判定された場合にのみ、帯域分離増幅部１１１により第３の輝度信号に施された強調量を調整するようにゲイン値を決定する。
【０２４７】
乗算器２０１は、供給された信号４６２を、帯域分離増幅１１１より供給された第３の輝度信号１２４に乗算し、第４の輝度信号４６３として、強調量調整部１１３に供給する。
【０２４８】
図４６のフローチャートを参照して、図４２の肌色処理部４５０を用いた画像処理装置１１０による肌色調整処理について説明する。
【０２４９】
最初に、ステップＳ１１１において、肌色処理部４５０の変換処理部２０２は、入力色信号１３１Ａおよび１３１Ｂに基づいて、第３の輝度信号１２４に対応する画像の色が肌色であるか否かを判定し、肌色であると判定した場合、ステップＳ１１２に処理を進め、ゲイン値を設定し、信号２１１として制御部４５２に供給する。
【０２５０】
変換処理部４５１は、ステップＳ１１３において、図４３に示されるようなルックアップテーブルを用いて、第１の輝度信号の信号レベルに基づいて、対応する画像の明るさが人物の肌として適正な明るさか否かを判定し、ゲイン値の調整量を決定する。そして、変換処理部４５１は、決定したゲイン値の調整量を信号４６１として制御部４５２に供給する。
【０２５１】
ステップＳ１１４において、制御部４５２は、変換処理部４５１により決定されたゲイン値の調整量に基づいて、変換処理部２０２により供給されたゲイン値を調整し、信号４６２として乗算器２０１に供給する。
【０２５２】
そして、ステップＳ１１５において、乗算器２０１は、第３の輝度信号１２４にゲイン値を乗算し、第４の輝度信号４６３を生成し、生成した第４の輝度信号４６３を強調量調整部１１３に供給する。ステップＳ１１５の処理を終了した乗算器２０１は、肌色処理を終了する。
【０２５３】
また、ステップＳ１１１において、第３の輝度信号に対応する画像の色が肌色ではないと判定した場合、変換処理部２０２は、肌色処理を終了する。
【０２５４】
画像処理装置１１０は、肌色処理部４５０において、以上のような肌色処理を、入力輝度信号１２１が入力される度に繰り返す。
【０２５５】
以上のようにして、図４２の肌色処理部４５０は、入力色信号１３１Ａおよび１３１Ｂだけでなく、第１の輝度信号１２２に基づいて、第３の輝度信号１２４の、対応する画像が人物の肌である部分を検出し、その部分について、強調量を調整する。
【０２５６】
また、以上において、画像処理装置１１０は、入力輝度信号１２１のエッジ成分である第１の輝度信号１２２の信号レベルに基づいて、第４の輝度信号１２５より白近傍および黒近傍の非エッジ成分を検出し、その部分について強調量を調整するように説明したが、これに限らず、例えば、第４の輝度信号を正側成分および負側成分に分離し、正側成分の、白近傍に位置する部分と、負側成分の黒近傍に位置する部分を検出し、それらの部分について、それぞれ、強調量を調整するようにしてもよい。
【０２５７】
図４７は、図８の強調量調整部の他の詳細な構成例を示す図である。
【０２５８】
図４７において、強調量調整部５００は、第４の輝度信号１２５を、正側成分（信号５１１）および負側成分（信号５１２）に分離する正負分離回路５０１、正負分離回路５０１により供給された第４の輝度信号１２５の正側成分に、ゲイン値を乗算する乗算器５０２、正負分離回路５０１により供給された第４の輝度信号１２５の負側成分に、ゲイン値を乗算する乗算器５０３、第１の輝度信号の信号レベルに応じて、第４の輝度信号１２５の正側成分に乗算するゲイン値を設定するルックアップテーブル５０４、第１の輝度信号の信号レベルに応じて、第４の輝度信号１２５の負側成分に乗算するゲイン値を設定するルックアップテーブル５０５、ゲイン値を乗算された第４の輝度信号１２５の正側成分および負側成分を加算する加算器５０６により構成されている。
【０２５９】
正負分離回路５０１は、入力された第４の輝度信号１２５より正側成分を抽出し、信号５１１として乗算器５０２に供給するとともに、入力された第４の輝度信号１２５より負側成分を抽出し、信号５１２として乗算器５０３に供給する。
【０２６０】
乗算器５０２は、正負分離回路５０１より供給された信号５１１に、ルックアップテーブル５０４より供給された信号５１３を乗算し、信号５１４として加算器５０６に供給する。
【０２６１】
乗算器５０３は、正負分離回路５０１より供給された信号５１２に、ルックアップテーブル５０４より供給された信号５１５を乗算し、信号５１６として加算器５０６に供給する。
【０２６２】
ルックアップテーブル５０４は、内蔵する記憶部（図示せず）に図４８に示すような変換テーブルを保持しており、この変換テーブルを用いて、入力された第１の輝度信号１２２の信号レベルに応じた値の信号５１３を出力する。
【０２６３】
ルックアップテーブル５０５は、内蔵する記憶部（図示せず）に図４８に示すような変換テーブルを保持しており、この変換テーブルを用いて、入力された第１の輝度信号１２２の信号レベルに応じた値の信号５１５を出力する。
【０２６４】
図４８は、ルックアップテーブル５０４および５０５が保持する変換テーブルの例を示す図である。
【０２６５】
図４８Ａに示される変換テーブルは、ルックアップテーブル５０４が保持する変換テーブルであり、横軸は、入力される第１の輝度信号１２２の信号レベルを表し、縦軸は、出力される信号５１３の信号レベルを表している。
【０２６６】
ルックアップテーブル５０４は、入力された第１の輝度信号１２２の信号レベルに応じて、曲線５２１のように、出力する信号５１３の信号レベルを決定する。すなわち、ルックアップテーブル５０４は、入力された第１の輝度信号１２２の信号レベルが、所定のレベルＸ７１以下の場合、所定の信号レベルＨ１２の信号５１３を出力し、入力された第１の輝度信号１２２の信号レベルがＸ７１より大きい場合、入力された第１の輝度信号１２２の信号レベルに対応する曲線５２１上の値の信号レベルである信号５１３を乗算器５０２に供給する。
【０２６７】
すなわち、ルックアップテーブル５０４は、信号５１３を出力することにより、図４９Ａに示すような乗算器５０２の入出力特性（信号５１１と信号５１４の信号レベルの比）を、直線５３１から直線５３２の範囲で、原点を中心に回転させるように、変化させることにより、白近傍の振幅成分の強調量を抑制するように正側ゲイン値を設定する。
【０２６８】
また、図４８Ｂに示される変換テーブルは、ルックアップテーブル５０５が保持する変換テーブルであり、横軸は、入力される第１の輝度信号１２２の信号レベルを表し、縦軸は、出力される信号５１５の信号レベルを表している。
【０２６９】
ルックアップテーブル５０５は、入力された第１の輝度信号１２２の信号レベルに応じて、曲線５２２のように、出力する信号５１５の信号レベルを決定する。すなわち、ルックアップテーブル５０５は、入力された第１の輝度信号１２２の信号レベルが、所定のレベルＸ７２以下の場合、入力された第１の輝度信号１２２の信号レベルに対応する曲線５２２上の値の信号レベルである信号５１５を乗算器５０３に供給し、入力された第１の輝度信号１２２の信号レベルがＸ７２より大きい場合、所定の信号レベルＨ１２の信号５１３を乗算器５０５に供給する。
【０２７０】
すなわち、ルックアップテーブル５０５は、信号５１５を出力することにより、図４９Ｂに示すような乗算器５０３の入出力特性（信号５１４と信号１２６の信号レベルの比）を、直線５３３から直線５３４の範囲で、原点を中心に回転させるように、変化させることにより、黒近傍の振幅成分の強調量を抑制するように正側ゲイン値を設定する。
【０２７１】
加算器５０６は、乗算器５０２により供給された正側成分である信号５１４に、乗算器５０３より供給された負側成分である信号５１６を加算し、第５の輝度信号１２６として出力する。
【０２７２】
次に、図５０のフローチャートを参照して、画像処理装置による強調量調整処理について説明する。また、必要に応じて、図５１乃至図５５を参照して説明する。
【０２７３】
最初にステップＳ１３１において、強調量調整部５００の正負分離回路５０１は、第４の輝度信号１２５を正側成分（信号５１１）と負側成分（信号５１２）とに分離する。
【０２７４】
図５１は、正負分離回路５０１により分離された第4の輝度信号１２５の正側成分である信号５１１の波形の例を示す図である。図５１において、信号５１１には、第4の輝度信号１２５に含まれる振幅成分の正側部分に対応する振幅成分５１１Ａ，５１１Ｂ、および５１１Ｃが含まれている。
【０２７５】
図５２は、正負分離回路５０１により分離された第4の輝度信号１２５の負側成分である信号５１２の波形の例を示す図である。図５２において、信号５１２には、第4の輝度信号１２５に含まれる振幅成分の負側部分に対応する振幅成分５１２Ａ，５１２Ｂ、および５１２Ｃが含まれている。なお、これらの振幅成分５１２Ａ，５１２Ｂ、および５１２Ｃの振幅の大きさは、全て等しい。
【０２７６】
正負分離回路５０１は、第4の輝度信号１２５を分離すると、分離された正側成分である、図５１に示されるような波形の信号５１１を乗算器５０２に供給し、分離された負側成分である、図５２に示されるような波形の信号５１２を乗算器５０３に供給する。
【０２７７】
ステップＳ１３２において、ルックアップテーブル５０４は、予め保持している、図４８Ａに示されるような変換テーブルを用い、入力された第1の輝度信号１２２に応じて、正側ゲイン値を設定する。ルックアップテーブル５０４は、設定した正側ゲイン値を、信号５１３として乗算器５０２に供給する。
【０２７８】
そして、ステップＳ１３３において、乗算器５０２は、正負分離回路５０１により供給された第４の輝度信号１２５の正側成分である信号５１１に、ルックアップテーブル５０４により供給された正側ゲイン値からなる信号５１３を乗算する。乗算器５０２は、乗算された信号５１４を加算器５０６に供給する。
【０２７９】
図５３は、乗算器５０２より出力される信号５１４の波形の例を示す図である。図５３において、信号５１４は、乗算器５０２において、図５１に示される信号５１１に、ルックアップテーブル５０４より供給された信号５１３を乗算された信号である。振幅成分５１４Ａは、図５１の振幅成分５１１Ａに対応しており、振幅成分５１４Ｂは、図５１の振幅成分５１１Ｂに対応しており、振幅成分５１４Ｃは、図５１の振幅成分５１１Ｃに対応している。また、振幅成分５１４Ａおよび振幅成分５１４Ｂの振幅は、同じ大きさであるが、振幅成分５１４Ｃの振幅は、それ以外の振幅成分と比較して小さくなっている。
【０２８０】
図５１の信号５１１に含まれる振幅成分５１１Ａおよび５１１Ｂは、対応する第１の輝度信号１２２の信号レベルがＸ７１（図４８Ａ）よりも小さく、白近傍の振幅成分ではないので、信号レベルがＨ１２の信号５１３が乗算され、それぞれ、信号５１４に含まれる振幅成分５１４Ａおよび５１４Ｂに変換される。従って、図５３の振幅成分５１４Ａおよび５１４Ｂの振幅は、互いに同じ大きさになる。
【０２８１】
また、図５１の信号５１１に含まれる振幅成分５１１Ｃは、対応する第１の輝度信号１２２の信号レベルがＸ７１（図４８Ａ）よりも大きく、白近傍の振幅成分であるので、Ｈ１２より小さい信号レベルの信号５１３が乗算され、信号５１４に含まれる振幅成分５１４Ｃに変換される。従って、図５３の振幅成分５１４Ｃの振幅は、振幅成分５１４Ａおよび５１４Ｂに比べて小さくなる。
【０２８２】
図５０に戻り、ステップＳ１３４において、ルックアップテーブル５０５は、予め保持している、図４８Ｂに示されるような変換テーブルを用い、入力された第1の輝度信号１２２に応じて、負側ゲイン値を設定する。ルックアップテーブル５０５は、設定した負側ゲイン値を、信号５１５として乗算器５０３に供給する。
【０２８３】
そして、ステップＳ１３５において、乗算器５０３は、正負分離回路５０１により供給された第４の輝度信号１２５の負側成分である信号５１２に、ルックアップテーブル５０５により供給された負側ゲイン値からなる信号５１５を乗算する。乗算器５０３は、乗算された信号５１６を加算器５０６に供給する。
【０２８４】
図５４は、乗算器５０３より出力される信号５１６の波形の例を示す図である。図５４において、信号５１６は、乗算器５０３において、図５２に示される信号５１２に、ルックアップテーブル５０５より供給された信号５１５を乗算された信号である。振幅成分５１６Ａは、図５２の振幅成分５１２Ａに対応しており、振幅成分５１６Ｂは、図５２の振幅成分５１２Ｂに対応しており、振幅成分５１６Ｃは、図５２の振幅成分５１２Ｃに対応している。また、振幅成分５１６Ｂおよび振幅成分５１６Ｃの振幅は、同じ大きさであるが、振幅成分５１６Ａの振幅は、それ以外の振幅成分と比較して小さくなっている。
【０２８５】
図５２の信号５１２に含まれる振幅成分５１２Ｂおよび５１２Ｃは、対応する第１の輝度信号１２２の信号レベルがＸ７２（図４８Ｂ）よりも大きく、黒近傍の振幅成分ではないので、信号レベルがＨ１２の信号５１５が乗算され、それぞれ、信号５１６に含まれる振幅成分５１６Ｂおよび５１６Ｃに変換される。従って、図５４の振幅成分５１６Ｂおよび５１６Ｃの振幅は、互いに同じ大きさになる。
【０２８６】
また、図５２の信号５１２に含まれる振幅成分５１２Ａは、対応する第１の輝度信号１２２の信号レベルがＸ７２（図４８Ｂ）以下であり、黒近傍の振幅成分であるので、Ｈ１２より小さい信号レベルの信号５１５が乗算され、信号５１６に含まれる振幅成分５１６Ａに変換される。従って、図５４の振幅成分５１６Ａの振幅は、振幅成分５１６Ｂおよび５１６Ｃに比べて小さくなる。
【０２８７】
図５０に戻り、ステップＳ１３６において、加算器５０６は、乗算器５０２により供給された正側成分である信号５１４に、乗算器５０３により供給された負側成分である信号５１６を加算して、第５の輝度信号１２６を生成する。
【０２８８】
図５５は、強調処理部５００より出力された第５の輝度信号に、第１の輝度信号が加算された出力輝度信号の波形の例を示す図である。
【０２８９】
図５５において、出力輝度信号１２７は、振幅成分１２７Ａ，１２７Ｂ、および１２７Ｃを含んでいる。振幅成分１２７Ａは、白近傍における振幅成分であるので、階調レベルの下限値Ｌ１３を超えないように、振幅の下側に対する強調量が抑制されている。同様に、振幅成分１２７Ｃは、黒近傍における振幅成分であるので、階調レベルの上限値Ｈ１３を超えないように、振幅の上側に対する強調量が抑制されている。
【０２９０】
画像処理装置１１０は、強調量調整部５００において、以上のような強調量調整処理を、入力輝度信号１２１が入力される度に繰り返す。
【０２９１】
以上のようにして、図４７の強調量調整部５００は、入力された第４の輝度信号１２５を正側成分（信号５１１）と負側成分（信号５１２）に分離し、各成分の強調量をそれぞれ調整するので、白近傍または黒近傍において、コントラストをより改善することができる。
【０２９２】
また、以上において、画像処理装置１１０は、輝度信号の補正量に応じて、色信号のレベルを調整する際に、調整前の色信号と調整後の色信号を用いるようにして、色消えを防止するように説明したが、これに限らず、例えば、調整後の色信号と、調整前後の信号を混合した色信号を用いるようにするようにしてもよい。
【０２９３】
図５６は、図１６の色信号レベル調整部の他の構成例を示す図である。
【０２９４】
図５６において、色信号レベル調整部５５０は、除算器３０１、乗算器３０２Ａおよび３０２Ｂ、比較器３０３Ａおよび３０３Ｂ、乗算器３０２Ａにより、輝度信号の補正量に基づいた調整量を乗算される前後の色信号のＣｂ成分を混合する混合器５５１Ａ、乗算器３０２Ｂにより、輝度信号の補正量に基づいた調整量を乗算される前後の色信号のＣｒ成分を混合する混合器５５１Ｂ、比較器３０３Ａの出力に基づいて、混合器５５１Ａの出力、および、乗算器３０２Ａの出力の内、いずれか一方を選択し、色信号レベル調整部５５０の外部に出力するセレクタ５５２Ａ、同様に、混合器５５１Ｂの出力、および、乗算器３０２Ｂの出力の内、いずれか一方を選択し、色信号レベル調整部５５０の外部に出力するセレクタ５５２Ｂにより構成される。
【０２９５】
混合器５５１Ａは、入力色信号１３１Ａと、乗算器３０２Ａにより色信号ゲイン値を乗算された入力色信号１３１Ａである信号３１２Ａを所定の割合で混合し、混合した信号５６１Ａをセレクタ５５２Ａに供給する。混合器５５１Ａが入力色信号１３１Ａと信号３１２Ａを混合する割合は、予め設定されており、内蔵する記憶部（図示せず）等に保持されている。例えば、混合する割合が４対６に設定されている場合、混合器５５１Ａは、信号レベルを０．４倍した入力色信号１３１Ａと、信号レベルを０．６倍した信号３１２Ａを加算し、入力色信号１３１Ａおよび信号３１２Ａを混合した信号５６１Ａを生成する。
【０２９６】
同様に、混合器５５１Ｂは、入力色信号１３１Ｂと、乗算器３０２Ｂにより色信号ゲイン値を乗算された入力色信号１３１Ｂである信号３１２Ｂを所定の割合で混合し、混合した信号５６１Ｂをセレクタ５５２Ｂに供給する。混合器５５１Ｂが入力色信号１３１Ｂと信号３１２Ｂを混合する割合は、予め設定されており、内蔵する記憶部（図示せず）等に保持されている。
【０２９７】
セレクタ５５２Ａは、比較器３０３Ａにより供給された信号３１３Ａに基づいて、入力された信号３１２Ａおよび信号５６１Ａの内、どちらか一方を選択し、出力色信号１３２Ａとして画像処理装置１１０の外部に出力する。
【０２９８】
同様に、セレクタ５５２Ｂは、比較器３０３Ｂにより供給された信号３１３Ｂに基づいて、入力された信号３１２Ｂおよび信号５６１Ｂの内、どちらか一方を選択し、出力色信号１３２Ｂとして画像処理装置１１０の外部に出力する。
【０２９９】
色信号レベル調整部５５０は、除算器３０１において、非エッジ成分を強調された輝度信号である信号１２７から、補正前の輝度信号である入力輝度信号１２１を除算し、画像処理装置における輝度信号への補正量を算出する。そして、色信号レベル調整部１１５は、乗算器３０２Ａにおいて、その補正量を色信号のＣｂ成分である入力色信号１３１Ａに乗算し、混合器５５１Ａにおいて、入力色信号１３１Ａと、乗算後の色信号のＣｂ成分である信号３１２Ａを混合し、比較器３０３Ａにおいて、入力色信号１３１Ａと信号３１２Ａとを比較し、セレクタ５５２Ａにおいて、その比較結果に基づいて、入力色信号１３１Ａと信号３１２Ａを混合した信号５６１Ａおよび信号３１２Ａの内、どちらか一方を選択して、出力色信号１３２Ａとして出力する。
【０３００】
また、色信号レベル調整部５５０は、入力色信号１３１Ｂに対しても、入力色信号１３１Ａに対する場合と同様に、乗算器３０２Ｂ、比較器３０３Ｂ、混合器５５１Ｂおよび、セレクタ５５２Ｂを用いて色信号レベルを調整し、信号３１２Ｂと信号５６１Ｂの内、どちらか一方を選択して、出力色信号１３２Ｂとして出力する。
【０３０１】
次に、図５７のフローチャートを参照して、画像処理装置１１０による色信号レベル調整処理の他の例について説明する。また、必要に応じて、図５８乃至図６２を参照して説明する。
【０３０２】
なお、色信号レベル調整処理において、色信号のＣｒ成分である入力色信号１３１Ｂは、乗算器３０２Ｂ、比較器３０３Ｂ、混合器５５１Ｂおよび、セレクタ５５２Ｂにより、色信号のＣｂ成分である入力色信号１３１Ａが、乗算器３０２Ａ、比較器３０３Ａ、混合器５５１Ａおよびセレクタ５５２Ａにより処理される場合と同様に処理される。従って、以下においては、入力色信号１３１Ａおよび１３１Ｂ、乗算器３０２Ａおよび３０２Ｂ、比較器３０３Ａおよび３０３Ｂ、混合器５５１Ａおよび５５１Ｂ、並びに、セレクタ５５２Ａおよび５５２Ｂをそれぞれ区別せずに、単に、入力色信号１３１、乗算器３０２、比較器３０３、混合器５５１およびセレクタ５５２と称する。また、それに伴い、信号３１２Ａおよび３１２Ｂ、信号３１３Ａおよび３１３Ｂ、信号５６１Ａおよび５６１Ｂ、並びに、出力色信号１３２Ａおよび１３２Ｂも、それぞれ区別せずに、単に、信号３１２、信号３１３、信号５６１および出力色信号１３２と称する。
【０３０３】
最初に、ステップＳ１７１において、色信号レベル調整部５５０の除算器３０１は、出力輝度信号１２７および入力輝度信号１２１を取得すると、出力輝度信号１２７を入力輝度信号１２１により除算し、その除算結果である色信号ゲイン値を算出する。そして、除算器３０１は、算出した色信号ゲイン値を乗算器３０２に供給する。
【０３０４】
ステップＳ１７２において、色信号ゲイン値からなる信号３１１を供給された乗算器３０２は、入力色信号１３１に信号３１１を乗算し、信号３１２として比較器３０３および混合器５５１に供給する。
【０３０５】
図５８は、入力色信号１３１の波形の例を示す図である。図５８に示されるように、入力色信号１３１は、時刻「０」から時刻Ｘ８１までの区間において、その信号レベルが「０」となり、時刻Ｘ８１から時刻Ｘ８２までの区間において、その信号レベルがＭ１４となる。また、時刻Ｘ８２から時刻Ｘ８４までの区間において、入力色信号１３１は、Ｍ１４を中心に、最大値をＨ１４とし、最小値をＬ１４として振幅する。このとき、時刻Ｘ８３における入力色信号１３１の信号レベルはＭ１４である。そして、入力色信号１３１は、時刻Ｘ８４から時刻Ｘ８５までの区間において、その信号レベルがＭ１４となり、時刻Ｘ８５以降の区間において、その信号レベルが「０」となる。
【０３０６】
図５８に示される入力信号１３１は、乗算器３０２において、信号３１１を乗算され、信号３１２に変換される。図５９は、信号３１２の波形の例を示す図である。図５９に示されるように、信号３１２は、時刻「０」から時刻Ｘ８１までの区間において、その信号レベルが「０」となり、時刻Ｘ８１から時刻Ｘ８２までの区間において、その信号レベルがＭ１４となる。また、時刻Ｘ８２から時刻Ｘ８４までの区間において、信号３１２は、Ｍ１４を中心に、最大値をＨ１５とし、最小値をＬ１５として振幅する。このとき、時刻Ｘ８３における信号３１２の信号レベルはＭ１４である。そして、信号３１２は、時刻Ｘ８４から時刻Ｘ８５までの区間において、その信号レベルがＭ１４となり、時刻Ｘ８５以降の区間において、その信号レベルが「０」となる。
【０３０７】
ステップＳ１７３において、混合器５５１は、乗算器３０２より供給された信号３１２と、入力信号１３１を予め設定された所定の割合で混合し、混合結果である信号５６１をセレクタ５５２に供給する。
【０３０８】
図６０は、信号５６１の波形の例を示す図である。信号５６１は、図５８の入力色信号１３１、および、図５９の信号３１２を所定の割合で混合した信号である。図５８および図５９に示されるように、入力色信号１３１と信号３１２の波形は、時刻Ｘ８２から時刻Ｘ８４までの区間の振幅成分のみが、互いに異なっており、それ以外の区間においては、同じ波形となっている。従って、信号５６１は、図６０に示されるように、時刻「０」から時刻Ｘ８１までの区間において、その信号レベルが「０」となり、時刻Ｘ８１から時刻Ｘ８２までの区間において、その信号レベルがＭ１４となり、時刻Ｘ８２から時刻Ｘ８４までの区間において、Ｍ１４を中心に、最大値をＨ１６とし、最小値をＬ１６として振幅する。このとき、Ｈ１６は、Ｈ１４より大きく、Ｈ１５より小さいレベルであり、Ｌ１６は、Ｌ１４より大きく、Ｌ１５より小さいレベルである。そして、信号５６１は、時刻Ｘ８４から時刻Ｘ８５までの区間において、その信号レベルがＭ１４となり、時刻Ｘ８５以降の区間において、その信号レベルが「０」となる。
【０３０９】
図５７のステップＳ１７４において、比較器３０３は、乗算器３０２より供給された信号３１２の信号レベルと、入力色信号１３１の信号レベルを比較し、比較結果である信号３１３をセレクタ５５２に供給する。
【０３１０】
図６１は、比較器３０３より出力される、比較結果である信号３１３の波形の例を示す図である。比較器３０３は、図５８の入力信号１３１の信号レベルと図５９の信号３１２の信号レベルを比較しており、信号３１３は、その比較結果に応じて値を変化させる２値の信号である。すなわち、図６１において、信号３１３の信号レベルは、例えば、時刻「０」から時刻Ｘ８３までの区間において、値「１」をとり、入力色信号１３１の信号レベルが信号３１２の信号レベルより大きくないことを表し、時刻Ｘ８３から時刻Ｘ８４までの区間において、値「０」をとり、入力色信号１３１の信号レベルが信号３１２の信号レベルより大きいことを表し、時刻Ｘ８４以降の区間において、値「１」をとり、入力色信号１３１の信号レベルが信号３１２の信号レベルより大きくないことを表している。
【０３１１】
そして、ステップＳ１７５において、セレクタ５５２は、供給された信号３１３に基づいて、入力色信号１３１の信号レベルの方が、信号３１２の信号レベルより大きいか否かを判定する。入力色信号１３１の信号レベルの方が大きいと判定した場合、セレクタ５５２は、ステップＳ１７６に処理を進め、信号５６１を選択し、出力色信号１３２として出力する。出力色信号１３２を出力したセレクタ５５２は、色信号レベル調整処理を終了する。
【０３１２】
また、ステップＳ１７５において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であり、入力色信号１３１の信号レベルの方が大きくないと判定した場合、セレクタ５５２は、ステップＳ１７７に処理を進め、信号３１２を選択し、出力色信号１３２として出力する。出力色信号１３２を出力したセレクタ５５２は、色信号レベル調整処理を終了する。
【０３１３】
すなわち、セレクタ５５２は、図５９に示される信号３１２、および、図６０に示される信号５６１の内、信号レベルが大きい方を選択し、出力色信号１３２として出力する。
【０３１４】
図６２は、出力色信号１３２の波形の例を示す図である。図６２に示されるように、出力色信号１３２は、時刻「０」から時刻Ｘ８１までの区間において、その信号レベルが「０」となり、時刻Ｘ８１から時刻Ｘ８２までの区間において、その信号レベルがＭ１４となる。また、時刻Ｘ８２から時刻Ｘ８４までの区間において、出力色信号１３２は、最大値をＨ１５とし、最小値をＬ１６として振幅する。このとき、時刻Ｘ８３における出力色信号１３２の信号レベルはＭ１４である。そして、出力色信号１３２は、時刻Ｘ８４から時刻Ｘ８５までの区間において、その信号レベルがＭ１４となり、時刻Ｘ８５以降の区間において、その信号レベルが「０」となる。
【０３１５】
すなわち、時刻「０」から、時刻Ｘ８３までの区間において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であるので、セレクタ５５２は、信号３１２を選択し、出力色信号１３２として出力する。また、時刻Ｘ８３から、時刻Ｘ８４までの区間において、入力色信号１３１の信号レベルが、信号３１２の信号レベルより大きいので、セレクタ５５２は、信号５６１を選択し、出力色信号１３２として出力する。さらに、時刻Ｘ８４以降の区間において、信号３１２の信号レベルが、入力色信号１３１の信号レベル以上であるので、セレクタ５５２は、信号３１２を選択し、出力色信号１３２として出力する。
【０３１６】
画像処理装置１１０は、色信号レベル調整部５５０において、以上のような色信号レベル調整処理を、入力輝度信号１２１が入力される度に繰り返す。
【０３１７】
以上のように、出力色信号１３２として、信号レベルを調整される前の信号と、調整前後の信号を混合した信号の内、信号レベルの大きい方が適用されるので、出力色信号の信号レベルが「０」になることが防止される。これにより、画像処理装置１１０は、色信号の処理において発生する、信号に対応する画像の色消えを防止し、コントラストを改善することができる。そして、その出力色信号１３２は、画像処理装置１１０の外部に出力される。
【０３１８】
以上のようにして、画像処理装置１１０は、輝度信号の信号レベルに応じて補正量を調整して、入力輝度信号１２１、並びに、入力色信号１３１Ａおよび１３１Ｂに対して、より効果的な補正処理を行う。
【０３１９】
上述した一連の処理は、ハードウエアにより実行させることもできるが、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【０３２０】
図６３は、上記処理を実行するパーソナルコンピュータの構成例を表している。パーソナルコンピュータ６００のCPU（Central Processing Unit）６０１は、ROM６０２に記憶されているプログラム、または記憶部６２３からRAM６０３にロードされたプログラムに従って各種の処理を実行する。RAM６０３にはまた、CPU６０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０３２１】
CPU６０１、ROM６０２、およびRAM６０３は、バス６１０を介して相互に接続されている。このバス６１０にはまた、入出力インタフェース６２０も接続されている。
【０３２２】
入出力インタフェース６２０には、キーボード、マウスなどよりなる入力部６２１、CRT、LCDなどよりなるディスプレイ、並びにスピーカなどよりなる出力部６２２、ハードディスクなどより構成される記憶部６２３、モデム、ターミナルアダプタなどより構成される通信部６２４が接続されている。通信部６２４は、ネットワークを介しての通信処理を行う。
【０３２３】
入出力インタフェース６２０にはまた、必要に応じてドライブ６３０が接続され、磁気ディスク６３１、光ディスク６３２、光磁気ディスク６３３、或いは半導体メモリ６３４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部６２３にインストールされる。
【０３２４】
プログラムが記録されている記録媒体は、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク６３１（フレキシブルディスクを含む）、光ディスク６３２（CD-ROM(Compact Disk - Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク６３３（ＭＤ（Mini-Disk）（商標）を含む）、もしくは半導体メモリ６３４などよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM６０２や、記憶部６２３に含まれるハードディスクなどで構成される。
【０３２５】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０３２６】
【発明の効果】
以上のように、本発明によれば、入力信号を、信号レベルの変化が急峻で大きなエッジを保存した成分と、それ以外の成分に、より正確に分離することができる。
【図面の簡単な説明】
【図１】従来の画像処理装置の構成例を示す図である。
【図２】図１の強調処理部に入力される信号２３および雑音除去フィルタより出力される信号の関係の例を示す図である。
【図３】図１の画像処理装置における信号の変化の例を示す図である。
【図４】図１の階調変換部の入出力特性を示す図である。
【図５】図１の画像処理装置の入出力信号の波形の例を示す図である。
【図６】図１の色信号レベル調整部の詳細な構成例を示す図である。
【図７】図６の色信号レベル調整部の入出力色信号の波形の例を示す図である。
【図８】本発明を適用した画像処理装置の構成例を示す図である。
【図９】図８の帯域分離増幅部の詳細な構成例を示す図である。
【図１０】図９の強調処理部およびにより保持されるルックアップテーブルの例を示す図である。
【図１１】図８の肌色処理部の詳細な構成例を示す図である。
【図１２】図１１の変換処理部が保持する肌色検出テーブルの例を示す図である。
【図１３】図８の強調量調整部の詳細な構成例を示す図である。
【図１４】図１３のルックアップテーブルに保持される変換テーブルの例を示す図である。
【図１５】図１３の乗算器の入出力特性の変化の様子を示す図である。
【図１６】図８の色信号レベル調整部の詳細な構成例を示す図である。
【図１７】図８の画像処理装置による強調処理について説明するフローチャートである。
【図１８】図８の画像処理装置による強調処理について説明する、図１７に続くフローチャートである。
【図１９】図９のローパスフィルタにより抽出される低周波成分の信号の波形の例を示す図である。
【図２０】図９の加算器により抽出される高周波成分の信号の波形の例を示す図である。
【図２１】図９の強調処理部により強調された低周波成分の信号の波形の例を示す図である。
【図２２】図９の強調処理部により強調された高周波成分の信号の波形の例を示す図である。
【図２３】図９の帯域分離増幅部により出力される第３の輝度信号の波形の例を示す図である。
【図２４】図８の画像処理装置による肌色調整処理について説明するフローチャートである。
【図２５】図８の画像処理装置による強調量調整処理について説明するフローチャートである。
【図２６】図１３の乗算器に供給された第４の輝度信号の波形の例を示す図である。
【図２７】図１３の乗算器より出力される第５の輝度信号の波形の例を示す図である。
【図２８】図２７の第５の輝度信号に対応する出力輝度信号の波形の例を示す図である。
【図２９】図８の画像処理装置による色信号レベル調整処理について説明するフローチャートである。
【図３０】入力輝度信号の波形の例を示す図である。
【図３１】出力輝度信号の波形の例を示す図である。
【図３２】図１６の助産器３０１の出力信号の波形の例を示す図である。
【図３３】入力色信号の波形の例を示す図である。
【図３４】図１６の乗算器３０２の出力信号の波形の例を示す図である。
【図３５】出力色信号の波形の例を示す図である。
【図３６】本発明を適用した画像処理装置の他の構成例を示す図である。
【図３７】本発明を適用した画像処理装置のさらに他の構成例を示す図である。
【図３８】図３７の強調処理部により保持されるルックアップテーブルの例を示す図である。
【図３９】図３７の画像処理装置による強調処理について説明するフローチャートである。
【図４０】図３７の強調処理部に供給される第２の輝度信号の波形の例を示す図である。
【図４１】図３７の強調処理部の出力信号の波形の例を示す図である。
【図４２】図８の肌色処理部の他の詳細な構成例を示す図である。
【図４３】図４２の変換処理部により予め保持されているルックアップテーブルの例を示す図である。
【図４４】図４２の制御部により予め保持されているルックアップテーブルの例を示す図である。
【図４５】第１の輝度信号の信号レベルと、図４２の制御部の出力信号の信号レベルとの関係を示す図である。
【図４６】図４２の肌色処理部を用いた画像処理装置による肌色調整処理について説明するフローチャートである。
【図４７】図８の強調量調整部の他の詳細な構成例を示す図である。
【図４８】図４７のルックアップテーブルが保持する変換テーブルの例を示す図である。
【図４９】図４７の乗算器の入出力特性の変化の例を示す図である。
【図５０】画像処理装置による強調量調整処理について説明するフローチャートである。
【図５１】図４７の正負分離回路により分離された第4の輝度信号の正側成分の波形の例を示す図である。
【図５２】図４７の正負分離回路により分離された第4の輝度信号の負側成分の波形の例を示す図である。
【図５３】図４７の乗算器より出力される正側成分の波形の例を示す図である。
【図５４】図４７の乗算器より出力される負側成分の波形の例を示す図である。
【図５５】図４７の強調処理部より出力された第５の輝度信号に対応する出力輝度信号の波形の例を示す図である。
【図５６】図１６の色信号レベル調整部の他の構成例を示す図である。
【図５７】画像処理装置による色信号レベル調整処理の他の例について説明するフローチャートである。
【図５８】図５６の色信号レベル調整部に入力される入力色信号の波形の例を示す図である。
【図５９】図５６の乗算器の出力信号の波形の例を示す図である。
【図６０】図５６の混合器の出力信号の波形の例を示す図である。
【図６１】図５６の比較器より出力される、比較結果である信号の波形の例を示す図である。
【図６２】図５６の色信号レベル調整部より出力される出力色信号の波形の例を示す図である。
【図６３】本発明を適用したパーソナルコンピュータの構成例を表している。
【符号の説明】
１１０ 画像処理装置， １１１ 帯域分離増幅部， １１２ 肌色処理部，１１３ 強調量調整部， １１４ 加算器， １１５ 色信号レベル調整部，１５１ ローパスフィルタ， １５２ 強調処理部， １５３および１５４ 加算器， １５５ 強調処理部， １７１および１７２ 曲線， ２０１ 乗算器， ２０２ 変換処理部， ２２３および２２４ 領域， ２５１ ルックアップテーブル， ２５２ 乗算器， ２７１ 曲線， ３０１ 除算器， ３０２Ａおよび３０２Ｂ 乗算器， ３０３Ａおよび３０３Ｂ 比較器， ３０４Ａおよび３０４Ｂ セレクタ， ４００ 画像処理装置， ４０１ 帯域分離増幅部， ４０２ 肌色処理部， ４０３ 強調量調整部， ４０４ 合成回路， ４０５および４０６ 加算器， ４２０ 画像処理装置， ４２１ 強調処理部， ４４１ 曲線， ４５０ 肌色処理部， ４５１ 変換処理部， ４５２ 制御部， ５００ 強調処理部， ５０１ 正負分離回路， ５０２および５０３ 乗算器， ５０４および５０５ ルックアップテーブル， ５０６ 加算器， ５２１および５２２ 曲線， ５５０ 色信号レベル調整部， ５５１Ａおよび５５１Ｂ 混合器， ５５２Ａおよび５５２Ｂ セレクタ， ６０１ CPU， ６０２ ROM， ６０３ RAM， ６２１ 入力部， ６２３ 記憶部， ６２４ 通信部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image processing apparatus and method, a recording medium, and a program, and more particularly, by adjusting a correction amount to be applied to image data to an optimum amount according to a signal level of a luminance signal of the image data. The present invention relates to an image processing apparatus and method, a recording medium, and a program that enable image processing.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, for example, in a television receiver or the like, as a method for improving the contrast (difference in brightness of an image) or the sharpness (clearness of a boundary) of image data, the luminance signal of the image data is There is a method of performing a correction process in which only a non-edge component is emphasized by separating a component (edge component) that includes a sharp edge and a large edge (an edge component) and another component (non-edge component).
[0003]
FIG. 1 is a diagram illustrating a configuration example of a conventional image processing apparatus.
[0004]
In FIG. 1, an image processing apparatus 10 includes a separation circuit 11 that separates an input luminance signal into an edge component and a non-edge component, an enhancement processing unit 12 that emphasizes amplitude included in the non-edge component of the input luminance signal, An adder that adds the noise removal filter 13 that removes noise included in the non-edge component whose amplitude is emphasized, the edge component separated by the separation circuit 11, and the non-edge component from which noise has been removed by the noise removal filter 13. 14. The gradation conversion processing unit 15 that corrects the gradation of the luminance signal in which the edge component and the non-edge component are added by the adder 14, and the signal level of the color signal is adjusted in accordance with the correction amount of the luminance signal. The color signal level adjusting unit 16 corrects the input luminance signal 21 and the input color signal 31, and outputs an output luminance signal 27 and an output color signal 32. To.
[0005]
The input luminance signal 21 input to the image processing apparatus 10 is separated by the separation circuit 11 into a signal 22 that is an edge component and a signal 23 that is a non-edge component. The signal 23 output from the separation circuit 11 is subjected to enhancement of the amplitude included in the signal 23 by the enhancement processing unit 12, and then the noise component near the signal level is removed by the noise removal filter 13. To be supplied.
[0006]
The signal 22 output from the separation circuit 11 is directly supplied to the adder 14. The signals 22 and 25 input to the adder 14 are added, and the gradation conversion processing unit 15 corrects the gradation. Further, the signal 26 obtained by adding the signal 22 and the signal 25 is supplied to the color signal level adjustment unit 16 and the ratio with the input luminance signal 21 is calculated. The color signal level adjustment unit 16 adjusts the signal level of the input color signal 31 based on the calculated ratio.
[0007]
The image processing apparatus 10 outputs an output luminance signal 27 whose gradation has been corrected by the gradation conversion process 27 and an output color signal 32 whose signal level has been adjusted by the color signal level adjustment unit 16.
[0008]
[Problems to be solved by the invention]
However, when the above method is used, the enhancement processing unit 12 uniformly emphasizes all the amplitudes, so that the amplitude reaches the upper limit value or the lower limit value of the signal level, and the signal waveform There is a problem that the image quality of the image corresponding to the output signal deteriorates.
[0009]
FIG. 2 is a diagram illustrating an example of the relationship between the signal 23 input to the enhancement processing unit 12 of FIG. 1 and the signal 25 output from the noise removal filter 13.
[0010]
In FIG. 2, the horizontal axis indicates the signal level of the signal 23 input to the enhancement processing unit 12, and the vertical axis indicates the signal level of the signal 25 output from the noise removal filter 13. That is, the curve 41 shows the input / output characteristics of the portion constituted by the enhancement processing unit 12 and the noise removal filter 13 of FIG.
[0011]
As shown by the curve 41 in FIG. 2, the enhancement processing unit 12 multiplies the input signal 23 by a predetermined coefficient to enhance the amplitude component included in the signal 23. The noise removal filter 13 is equal to or higher than a predetermined threshold X1 of the signal 24 in order to remove a noise component included in the signal 24 that is the signal 23 whose amplitude component is enhanced by the enhancement processing unit 12, and The signal level portion smaller than the predetermined threshold value X2 is smoothed to “0”.
[0012]
When the signal 51 as shown in FIG. 3A is input, the enhancement processing unit 12 multiplies the signal 51 by a predetermined coefficient to enhance the amplitude components (51B, 51C, and 51D) of the signal 51. At this time, when the coefficient multiplied by the enhancement processing unit 12 is small, all the amplitude components (52B, 52C, and 52D) maintain the waveform as in the signal 52 shown in FIG. 3B. To be emphasized.
[0013]
However, when the coefficient multiplied by the enhancement processing unit 12 is large, the waveform of the signal 51 in FIG. 3A is like the signal 53 shown in FIG. 3C and the amplitude of the signal 53 corresponding to the large amplitude 51D of the signal 51. 53D exceeds the upper limit H1 and the lower limit L1 of the appropriate level, and the waveform is distorted.
[0014]
That is, the emphasis processing unit 12 similarly multiplies the input signal 23 by a predetermined coefficient, regardless of whether the amplitude of the input signal 23 is large or small. Therefore, when a signal with a large amplitude is entered, the waveform of the output signal May be distorted.
[0015]
In the case of image data, even when the luminance signals have the same signal level, the optimum adjustment amount of contrast and sharpness varies depending on the content and color of the corresponding image. For example, an image of a person's face or the like has an optimum amount of contrast enhancement that is smaller than that of other images, and if contrast is enhanced by an amount comparable to the amount of enhancement for other images, the image becomes unnatural. End up. However, since the enhancement processing unit 12 uniformly enhances all the amplitudes included in the non-edge components of the luminance signal, the amount of enhancement is too much or too little depending on the content and color of the image. There is a problem that the contrast cannot be emphasized with a preferable amount of emphasis.
[0016]
Further, when the image processing apparatus 10 shown in FIG. 1 is used, the noise removal filter 13 smoothes a small amplitude component whose signal level is near “0” as shown in FIG. Like the noise component included in the portion, the noise component included in the signal level other than near “0” cannot be removed, and the image quality of the image corresponding to the output signal is deteriorated.
[0017]
When the image processing apparatus 10 shown in FIG. 1 is used, the luminance signal is obtained by adding the edge component and the emphasized non-edge component to the vicinity of black and white by the gradation conversion processing unit 15. Since the gradation conversion to be compressed is performed, the waveform is generated in the vicinity of black and white when the edge component and the non-edge component of the luminance signal are added, that is, before being input to the gradation conversion processing unit 15. Is distorted, and the image quality of the image corresponding to the output signal may deteriorate.
[0018]
The adder 14 supplies the signal 26 obtained by adding the signal 25 output from the noise removal filter 15 and the signal 22 output from the separation circuit 11 to the gradation conversion unit 15. The gradation conversion unit 15 has input / output characteristics as shown in FIG. 4, and the signal 26 in the vicinity of white having a high signal level and in the vicinity of black having a low signal level with respect to the input signal 26. The correction process is performed so as to compress the gradation of.
[0019]
However, when the signal 71 shown in FIG. 5A is input to the image processing apparatus 10, the adder 14 emphasizes the signal 22 including the edge component of the signal 71 and the amplitude (71A, 71B, and 71C). When the signal 25 composed of the non-edge component of the signal 71 is added, as shown in FIG. 5B, the signal level of the amplitude 72C in which the amplitude 71C is emphasized exceeds the upper limit value H2, and the waveform is destroyed. Further, the signal level of the amplitude 72A in which the amplitude 71A is emphasized also exceeds the lower limit “0”, and the waveform is corrupted. Even if the gradation conversion processing unit 15 converts the gradation of the signal 72, the waveforms of the amplitude 72A and the amplitude 72C remain distorted.
[0020]
By the way, the luminance signal is set to be black when the signal level is a value larger than “0” (black level), that is, at a level brighter than the true black level, for example, in a television receiver or the like. .
[0021]
In the image processing apparatus 10 shown in FIG. 1, the color signal level adjustment unit 16 sets the output level of the color signal based on the correction amount of the luminance signal so that the color density does not change by the correction process of the luminance signal. adjust. Therefore, when the image processing apparatus 10 is used, even if the signal level of the luminance signal is greater than “0” due to the correction process, and falls below the black level, the color signal level adjustment unit 16 causes the signal of the corresponding color signal. The level is adjusted to “0”, and there is a problem that the corresponding image loses color and becomes an unnatural image.
[0022]
For example, as shown in FIG. 6, the color signal level adjustment unit 16, a divider 81 that calculates a value (signal 83) obtained by dividing the signal 26 composed of the luminance signal with the non-edge component enhanced by the input luminance signal 21, A multiplier 82 that multiplies the calculated signal 83 by the color signal 31 is configured.
[0023]
That is, the color signal level adjustment unit 16 divides and calculates the signal 92 (FIG. 7B) in which the non-edge component of the luminance signal 91 is emphasized using the luminance signal 91 including the amplitude 91A as shown in FIG. 7A. The input color signal 31 is multiplied by a signal 83 having a ratio between the luminance signal 91 and the luminance signal 92 thus obtained.
[0024]
At this time, as shown in FIG. 7B, the signal level of the color signal corresponding to the portion where the signal level is lower than L2 of the signal 92 in which the non-edge component is emphasized is adjusted to “0” and corresponds to that portion. The image loses color.
[0025]
The present invention has been made in view of such a situation, and makes it possible to perform more effective image processing.
[0026]
[Means for Solving the Problems]
The signal processing apparatus according to the present invention includes an input luminance signal separating unit that separates an input luminance signal, which is an input luminance signal, into an edge component and a non-edge component, and a non-edge component separated by the input luminance signal separating unit. Based on the non-edge component amplification means for amplifying the non-edge component and a first gain based on the input color signal and amplified by the non-edge component amplification means. The first gain is multiplied by the first gain to adjust the signal level of the non-edge component, and the second gain based on the edge component separated by the input luminance signal separation means And a second signal level adjustment for adjusting the signal level of the non-edge component by multiplying the non-edge component whose signal level is adjusted by the first signal level adjusting means by the second gain. A luminance signal adding means for adding the stage, a non-edge component whose signal level is adjusted by the second signal level adjusting means, and an edge component separated by the input luminance signal separating means, an input luminance signal, and a luminance signal adding means And a third signal level adjusting means for adjusting the signal level of the input color signal based on the output luminance signal that is the result of the addition and the input color signal.
[0027]
The non-edge component amplifying unit can reduce the amount of amplification when the absolute value of the signal level of the non-edge component separated by the input luminance signal separating unit is larger than a predetermined first threshold value.
[0029]
The non-edge component amplifying unit includes a low-frequency component extracting unit that extracts a low-frequency component from the non-edge component separated by the input luminance signal separating unit, and a high-frequency component from the non-edge component separated by the input luminance signal separating unit. A high-frequency component extracting means for extracting, a low-frequency component amplifying means for amplifying the low-frequency component, determining an amplification amount of the low-frequency component based on the low-frequency component extracted by the low-frequency component extracting means, High frequency component amplification means for determining an amplification amount of the high frequency component based on the high frequency component extracted by the means and amplifying the high frequency component can be provided.
[0030]
The high frequency component extracting unit can extract the high frequency component by subtracting the low frequency component extracted by the low frequency component extracting unit from the non-edge component separated by the input luminance signal separating unit.
[0031]
The low frequency component amplifying unit can reduce the amount of amplification of the low frequency component when the absolute value of the signal level of the low frequency component extracted by the low frequency component extracting unit is larger than a predetermined threshold.
[0034]
The apparatus may further comprise frequency component adding means for adding the low frequency component amplified by the low frequency component amplifying means and the high frequency component amplified by the high frequency component amplifying means.
[0035]
The first signal level adjusting means detects the color of the corresponding image of the non-edge component based on the input color signal, and sets the value of the first gain based on the detected color of the image. Color detection gain value setting means and color gain multiplication means for multiplying the non-edge component by the first gain set by the color detection gain value setting means can be provided.
[0036]
The color detection gain value setting means sets the first gain value to a value smaller than “1” when the color of the detected image is a predetermined color, and the color of the image is predetermined. When the color is other than the color, the value of the first gain can be set to “1”.
[0037]
The predetermined color may be a skin color.
[0038]
The first signal level adjusting means detects the brightness of the corresponding image of the non-edge component based on the edge component, and sets the value by the color setting gain value setting means based on the detected brightness of the image Based on the gain adjustment amount setting means for setting the adjustment amount of the first gain value and the adjustment amount of the first gain value set by the gain value adjustment amount setting means, the first gain value is adjusted. Gain value adjusting means for adjusting the value is further provided, and the color gain multiplying means can multiply the non-edge component by the first gain whose value is adjusted by the gain value adjusting means.
[0040]
The second signal level adjusting means detects the signal level of the edge component and sets the value of the second gain, and the second value set by the brightness detection gain value setting means. Brightness gain multiplying means for multiplying the non-edge component by the gain.
[0041]
The brightness detection gain value setting unit is configured to detect a signal level of the detected edge component lower than a predetermined first threshold value, or a predetermined second threshold value where the brightness of the image is higher than the first threshold value. If it is even larger, the second gain value can be set to a small value.
[0042]
The second signal level adjusting means further comprises positive / negative separating means for separating the non-edge component whose signal level is adjusted by the first signal level adjusting means into a positive side component and a negative side component, and setting a brightness detection gain value The means detects the signal level of the edge component, sets a second gain value for each of the positive side component and the negative side component separated by the positive / negative separation means, and the lightness gain multiplication means sets the lightness detection gain value. This is the second gain for the negative component whose value is set by the lightness detection gain value setting means by multiplying the positive component, which is the second gain for the positive component whose value is set by the means, by the positive component. The negative gain can be multiplied by the negative gain.
[0046]
The third signal level adjusting means multiplies the amplification amount calculation means for calculating the amplification amount of the luminance signal from the input luminance signal and the output luminance signal, and the amplification amount calculated by the amplification amount calculation means to multiply the input color signal. Input color signal level adjusting means for adjusting the signal level, comparison means for comparing the signal level of the input color signal before and after the signal level adjustment processing by the input color signal level adjusting means, and input based on the comparison result by the comparing means Color signal selection means for selecting one of the input color signals before and after the signal level adjustment processing by the color signal level adjustment means as the output color signal can be provided.
[0048]
The third signal level adjusting means further includes a mixing means for mixing the input color signals before and after the signal level adjustment processing by the input color signal level adjusting means at a predetermined ratio, and the color signal selecting means includes: If the signal level of the input color signal after the signal level adjustment process is greater than the signal level of the input color signal before the signal level adjustment, the input color signal after the signal level adjustment process is selected as the output signal, and after the signal level adjustment process When the signal level of the input color signal is lower than the signal level of the input color signal before the signal level adjustment, the mixing result of the mixing means can be selected as the output signal.
[0049]
In the signal processing method of the present invention, an input luminance signal that is an input luminance signal is separated into an edge luminance component and a non-edge component, and an input luminance signal separation step is performed. A non-edge component amplification amount is set based on the edge component, a non-edge component amplification step for amplifying the non-edge component, and a first gain is set based on the input color signal. Based on the first signal level adjustment step of adjusting the signal level of the non-edge component by multiplying the non-edge component amplified by the processing with the first gain, and the edge component separated by the processing of the input luminance signal separation step The second gain is set, the non-edge component whose signal level is adjusted by the processing of the first signal level adjustment step is multiplied by the second gain, The second signal level adjustment step for adjusting the signal level of the wedge component, the non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step, and the processing of the input luminance signal separation step A luminance signal addition step for adding edge components; and a third adjustment for adjusting the signal level of the input color signal based on the input luminance signal, the output luminance signal resulting from the addition in the luminance signal addition step, and the input color signal. And a signal level adjusting step.
[0050]
The program of the recording medium of the present invention is separated by an input luminance signal separation step that separates an input luminance signal that is an inputted luminance signal into an edge component and a non-edge component, and an input luminance signal separation step. A non-edge component amplification step for setting a non-edge component amplification amount based on the non-edge component, a non-edge component amplification step for amplifying the non-edge component, a first gain setting based on the input color signal, and a non-edge component amplification step The edge component separated by the processing of the first signal level adjustment step of adjusting the signal level of the non-edge component and the input luminance signal separation step is multiplied by the first gain to the non-edge component amplified by the processing of Based on this, the second gain is set, and the non-edge component whose signal level is adjusted by the processing of the first signal level adjustment step is multiplied by the second gain. The second signal level adjustment step for adjusting the signal level of the non-edge component, the non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step, and the input luminance signal separation step are separated. A luminance signal adding step for adding the edge components, an input luminance signal, an output luminance signal obtained from the addition result of the luminance signal adding step, and an input color signal to adjust the signal level of the input color signal. 3 signal level adjustment steps.
[0051]
The program of the present invention includes an input luminance signal separation step for separating an input luminance signal, which is an inputted luminance signal, into an edge component and a non-edge component, and a non-edge component separated by the processing of the input luminance signal separation step. The non-edge component amplification amount is set based on the non-edge component amplification step, the first edge gain is set based on the input color signal, and the non-edge component amplification step processing is performed. Based on the first signal level adjustment step of adjusting the signal level of the non-edge component by multiplying the amplified non-edge component by the first gain, and the edge component separated by the processing of the input luminance signal separation step, A second gain is set, and the non-edge component whose signal level has been adjusted by the processing of the first signal level adjustment step is multiplied by the second gain to obtain a non-energy. A second signal level adjustment step for adjusting the signal level of the di component, a non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step, and an edge separated by the processing of the input luminance signal separation step A luminance signal adding step for adding the components, an input luminance signal, an output luminance signal formed from the addition result of the luminance signal adding step, and a third signal for adjusting the signal level of the input color signal based on the input color signal The level adjustment step is realized by a computer.
[0052]
In the signal processing apparatus and method, the recording medium, and the program of the present invention, the input luminance signal, which is an input luminance signal, is separated into an edge component and a non-edge component, and is set based on the non-edge component. The non-edge component is amplified by the amplified amount, the first gain set based on the input color signal is multiplied by the non-edge component, and the second gain set based on the edge component is multiplied by the non-edge component. Then, the non-edge component and the edge component are added, and the signal level of the input color signal is adjusted based on the input luminance signal, the output luminance signal, and the input color signal.
[0053]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 8 is a diagram illustrating a configuration example of an image processing apparatus to which the present invention is applied.
[0054]
In FIG. 8, the image processing apparatus 110 separates an input signal into a component (edge component) having a sharp signal level change and including a large edge, and a component other than that (non-edge component), A band separation amplification unit 111 that independently enhances the low frequency component and the high frequency component of the input non-edge component, a skin color processing unit 112 that adjusts the enhancement amount of the amplitude of the luminance signal corresponding to the skin color part of the image, and the luminance An enhancement amount adjusting unit 113 that adjusts the amplitude enhancement amount according to the signal level of the signal, an adder 114 that adds the edge component and the non-edge component of the luminance signal separated by the separation circuit 11, and the non-edge component are enhanced. The color signal level adjustment unit 115 adjusts the color signal level based on the correction amount of the luminance signal thus generated. The input luminance signal 121 and the input color signal 1 Enter the 1A and 131B, the output luminance signal 127, and outputs the output color signals 132A and 132B.
[0055]
The separation circuit 11 is configured by a non-linear filter or the like, and converts the input luminance signal 121 input from the outside of the image processing apparatus 110 into an edge component having a sharp signal level change and including a large edge, and other non-edge components. The first luminance signal 122 composed of the edge component is supplied to the enhancement amount adjusting unit 113 and the adder 114, and the second luminance signal 123 composed of the non-edge component is supplied to the band separation amplification unit 111.
[0056]
The band separation emphasis unit 111 separates the second signal 123 supplied from the separation circuit 11 into a low frequency component and a high frequency component, amplifies each, and then adds a third luminance signal 124 obtained by adding the two amplified components. Is supplied to the skin color processing unit 112.
[0057]
The skin color processing unit 112 detects the skin color part from the input color signals 131A and 131B input from the outside of the image processing apparatus 110, adjusts the enhancement amount of the luminance signal corresponding to the part, and the adjusted fourth brightness The signal 125 is supplied to the enhancement amount adjustment unit 113.
[0058]
The enhancement amount adjustment unit 113 adjusts the enhancement amount of the fourth luminance signal 125 based on the signal level of the first luminance signal 122 supplied from the separation circuit 11, and obtains the adjusted fifth luminance signal 126. This is supplied to the adder 114.
[0059]
The adder 114 adds the first luminance signal 122 supplied from the separation circuit 11 and the fifth luminance signal 126 supplied from the enhancement amount adjusting unit 113, and performs image processing on the output luminance signal 127 after the addition. The signal is output to the outside of the apparatus 110 and supplied to the color signal level adjustment unit 115.
[0060]
The color signal level adjustment unit 115 calculates a correction amount for the luminance signal based on the output luminance signal 127 supplied from the adder 114 and the input luminance signal 121 input from the outside of the image processing apparatus 110. Based on the correction amount, the signal levels of the input color signals 131A and 131B input from the outside of the image processing apparatus 110 are respectively adjusted, and the output color signals 132A and 132B composed of the adjusted signals are output to the outside of the image processing apparatus 110. Output.
[0061]
FIG. 9 is a diagram illustrating a detailed configuration example of the band separation amplification unit 111 in FIG. 8.
[0062]
In FIG. 9, the band separation amplification unit 111 includes a low-pass filter 151 that extracts a low-frequency component lower than a predetermined frequency included in the input signal, enhancement processing units 152 and 155 that amplify the input signal, and the input Comprising an adder 154 that calculates a difference value between two signals and operates as a subtracter, and an adder 154 that adds the two input signals, the input second luminance signal 123 is a low frequency component. Are separated into high frequency components and emphasized, and then the respective components are added, and the added third luminance signal 124 is output.
[0063]
The low-pass filter 151 is a filter that blocks high-frequency components higher than a predetermined frequency and passes low-frequency components lower than the predetermined frequency, and is a non-edge component of the input luminance signal 121 supplied by the separation circuit 11 of FIG. A low frequency component is extracted from the second luminance signal 123 consisting of the above, and the extracted signal 161 is supplied to the enhancement processing unit 152 and the adder 154.
[0064]
The enhancement processing unit 152 holds a lookup table described later with reference to FIG. 10A in a built-in storage unit (not shown), and is supplied by the low-pass filter 151 based on the lookup table. The signal 161 is amplified. Further, the enhancement processing unit 152 supplies a signal 163 obtained by amplifying the signal 161 to the adder 153.
[0065]
The adder 153 adds the signal 164 supplied from the enhancement processing unit 155 to the signal 163 supplied from the enhancement processing unit 152, and supplies the resultant signal to the skin color processing unit 112 in FIG. 8 as the third luminance signal 124.
[0066]
The adder 154 subtracts the signal 161 supplied from the low-pass filter 151 from the second luminance signal 123 supplied from the separation circuit 11 in FIG. 8 and supplies the signal 162 to the enhancement processing unit 155.
[0067]
The enhancement processing unit 155 holds a lookup table described later with reference to FIG. 10B in a built-in storage unit (not shown), and is supplied from the adder 154 based on the lookup table. The signal 162 is amplified. The enhancement processing unit 155 supplies a signal 164 obtained by amplifying the signal 162 to the adder 153.
[0068]
FIG. 10 is a diagram illustrating an example of a lookup table held by the enhancement processing units 152 and 155 of FIG.
[0069]
10A, a curve 171 is a lookup table held by the enhancement processing unit 152, the horizontal axis represents the signal level of the input signal of the enhancement processing unit 152, and the vertical axis represents the output signal of the enhancement processing unit 155. Indicates the signal level.
[0070]
The enhancement processing unit 152 refers to the curve 171 shown in FIG. 10A and outputs an output signal level corresponding to the input signal level. As shown in FIG. 10A, the curve 171 has a portion corresponding to an input signal whose signal level is lower than a predetermined level X11 or an input signal higher than a predetermined level X12 higher than X11, and a signal level higher than X11. In addition, the slope of the portion corresponding to the input signal that is X12 or less is different. That is, the enhancement processing unit 152 amplifies the signal 161, which is the low-frequency component of the second luminance signal 123, by suppressing the enhancement amount for a large amplitude component whose amplitude expands to near the upper limit value and lower limit value of the appropriate level. To do.
[0071]
In FIG. 10B, a curve 172 is a lookup table held by the enhancement processing unit 155, the horizontal axis represents the signal level of the input signal of the enhancement processing unit 155, and the vertical axis represents the output of the enhancement processing unit 155. It represents the signal level of the signal.
[0072]
The enhancement processing unit 155 refers to the curve 172 shown in FIG. 10B and outputs an output signal level corresponding to the input signal level. A curve 172 is a straight line corresponding to an input signal whose signal level is a predetermined level X13 or lower, a straight line corresponding to an input signal whose signal level is higher than X13 and lower than a predetermined level X14 higher than X13, and the signal level is X14. A straight line corresponding to an input signal that is greater than X14 and a predetermined level X15 or less, a straight line corresponding to an input signal that has a signal level greater than X15 and less than a predetermined level X16 greater than X15, and The signal level is formed by a straight line corresponding to an input signal larger than X16.
[0073]
As shown in FIG. 10B, a curve 172 shows the slope of a straight line corresponding to an input signal whose signal level is greater than X13 and less than or equal to X14, and an input whose signal level is greater than X15 and less than or equal to X16. The slope of the straight line corresponding to the signal is the largest. In addition, the slope of the curve 172 corresponding to an input signal whose signal level on the curve 172 is greater than X14 and equal to or less than X15 is “0”, and the signal level output at that time is “0”. .
[0074]
That is, the enhancement processing unit 155 amplifies the signal 162, which is the high-frequency component of the second luminance signal 123, by suppressing the enhancement amount for a large amplitude component whose amplitude extends to near the upper limit value and lower limit value of the appropriate level. At the same time, when the signal level is near “0”, the small amplitude component is smoothed.
[0075]
Returning to FIG. 9, the second luminance signal 123 output from the separation circuit 11 is supplied to the low-pass filter 151 of the band separation amplification unit 111, and a low frequency component is extracted. The extracted signal 161 is supplied to the enhancement processing unit 152 and amplified based on the lookup table shown in FIG. 10A. The amplified signal 163 is supplied to the adder 153.
[0076]
The signal 161 is also supplied to the adder 154, and the second luminance signal 123 output from the separation circuit 11 is subtracted from the signal 161, which is a low frequency component, in the adder 154, and is a signal that is a high frequency component. 162 is extracted. The extracted signal 162 is supplied to the enhancement processing unit 155, amplified based on the lookup table in FIG. 10B, and supplied to the adder 153 as the signal 164. In the adder 153, the signal 163 is added to the signal 164 and output as the third luminance signal 124 to the outside of the band separation amplification unit 111.
[0077]
As described above, the band separation amplification unit 111 can emphasize the non-edge component without enhancing the noise component included in the portion where the signal level of the non-edge component is not near “0”. Further, by adjusting the enhancement amount for the vicinity of “0” in the enhancement processing unit 155, the band separation amplification unit 111 suppresses the noise component included in the portion where the signal level of the non-edge component is not near “0”, or It is also possible to remove it.
[0078]
The third luminance signal 124 output from the band separation amplification unit 111 is supplied to the skin color processing unit 112 in FIG.
[0079]
FIG. 11 is a diagram illustrating a detailed configuration example of the skin color processing unit 112 in FIG. 8.
[0080]
In FIG. 11, the skin color processing unit 112 includes a conversion processing unit 202 that converts an input color signal into an output signal that is an adjustment amount of a luminance signal, and a multiplier 201 that multiplies the two input signals. Based on the Cb component (input color signal 131A) and the Cr component (input color signal 131B) of the input color signal, the enhancement amount of the third luminance signal 124 is adjusted and output as a signal 125.
[0081]
The conversion processing unit 202 holds in advance a skin color detection table as shown in FIG. 12 in a built-in storage unit (not shown), and corresponds to the input color signals 131A and 131B based on this skin color detection table. It is determined whether or not the image is skin color, and a signal 211 having a signal level corresponding to the determination result is supplied to the adder 201.
[0082]
The adder 201 multiplies the signal 124 supplied from the band separation amplification unit 111 by the signal 211 supplied from the conversion processing unit 202, and supplies the result to the enhancement amount adjustment unit 113 in FIG.
[0083]
FIG. 12 is a diagram illustrating an example of a skin color detection table held by the conversion processing unit 202 in FIG.
[0084]
In FIG. 12A, the horizontal axis indicates the signal level of the input color signal 131A that is the Cb component of the input color signal, and the vertical axis indicates the signal level of the input color signal 131B that is the Cr component of the input color signal. Show. The straight lines 221 and 222 are predetermined straight lines set in advance, and an area 223 sandwiched between the straight lines 221 and 222 is an area showing skin color. That is, the straight lines 221 and 222 are set so that the region 223 is a region showing skin color.
[0085]
When the combination of the signal levels of the input color signals 131A and 131B is included in the region 223, the conversion processing unit 202 determines that the color of the corresponding image is a skin color, and uses the signal as a coefficient for adjusting the enhancement amount of the luminance signal. When the signal 211 whose level is smaller than “1” is supplied to the multiplier 201 and the combination of the signal levels of the input color signals 131A and 131B is not included in the region 223, it is determined that the color of the corresponding image is not flesh color, A signal 211 having a signal level “1” is supplied to the multiplier 201 as a coefficient for adjusting the enhancement amount of the luminance signal.
[0086]
FIG. 12B shows another example of the conversion characteristics of the conversion processing unit 202. In FIG. 12B, an area 224 is an area showing a skin color like the area 223, and is a Cb component (input color signal 131A) having a signal level that is equal to or higher than a predetermined level X21 and lower than a predetermined level X22 that is higher than X21. And a region constituted by a combination of Cr components (input color signal 131B) having a signal level that is equal to or higher than a predetermined level L3 and lower than a predetermined level H3 that is higher than L3.
[0087]
When the combination of the signal levels of the input color signals 131A and 131B is included in the region 224, the conversion processing unit 202 determines that the color of the corresponding image is a flesh color, and uses the signal as a coefficient for adjusting the enhancement amount of the luminance signal. When the signal 211 whose level is smaller than “1” is supplied to the multiplier 201 and the combination of the signal levels of the input color signals 131A and 131B is not included in the region 224, it is determined that the color of the corresponding image is not flesh color, A signal 211 having a signal level “1” is supplied to the multiplier 201 as a coefficient for adjusting the enhancement amount of the luminance signal.
[0088]
The adder 201 multiplies the third luminance signal 124 by the signal 211 supplied from the conversion processing unit 202. As described above, the skin color processing unit 112 adjusts the enhancement amount of the luminance signal corresponding to the skin color image.
[0089]
As described above, the conversion processing unit 202 may designate the flesh color region by two straight lines as shown in FIG. 12A with respect to the signal levels of the input color signal 131A and the signal 131B. The skin color region may be specified by setting the upper limit value and the lower limit value as shown for the input color signal 131A and the signal 131B.
[0090]
As described above, the skin color processing unit 112 can adjust the enhancement amount of the portion of the edge component of the enhanced luminance signal where the corresponding image color is the skin color to an optimum value.
[0091]
The fourth luminance signal 125 output from the skin color processing unit 112 is supplied to the enhancement amount adjustment unit 113 in FIG.
[0092]
FIG. 13 is a diagram illustrating a detailed configuration example of the enhancement amount adjustment unit 113 in FIG. 8.
[0093]
In FIG. 13, the enhancement amount adjustment unit 113 includes a lookup table 251 that converts an input signal into an output signal, and a multiplier 252 that multiplies two input signals, and is supplied from the separation circuit 11. Based on the first luminance signal 122 composed of the edge component of the luminance signal, the enhancement amount of the fourth luminance signal 125 supplied by the skin color processing unit 112 is adjusted and output as the fifth luminance signal 126.
[0094]
The lookup table 251 converts the input first luminance signal 122 into a signal 261 based on a conversion table stored in advance in a built-in storage unit (not shown).
[0095]
FIG. 14 is a diagram illustrating an example of a conversion table held in the lookup table 251 of FIG.
[0096]
In FIG. 14, the horizontal axis represents the signal level of the first luminance signal 122, and the vertical axis represents the signal level of the signal 261. Based on the curve 271, the lookup table 251 outputs a signal 261 having a signal level corresponding to the signal level of the first luminance signal 122 from “0” to a predetermined level H <b> 4 greater than “0”. As shown in FIG. 14, when the signal level of the first luminance signal 122 is equal to or higher than the predetermined level X31 and lower than the predetermined level X32 greater than X31, the lookup table 251 has a signal level of The H4 signal 261 is output.
[0097]
That is, the look-up table 251 outputs the signal 261 to change the input / output characteristics (the ratio of the signal levels of the signal 125 and the signal 126) of the multiplier 252 as shown in FIG. Then, change it to rotate around the origin.
[0098]
The signal 126 output from the multiplier 252 is supplied to the adder 114 shown in FIG. 8, and the adder 114 adds the signal 122 and outputs it as an output luminance signal 127 to the outside of the image processing apparatus 110.
[0099]
As described above, the enhancement amount adjustment unit 113 can suppress the enhancement amount of a non-edge component whose signal level is located near black or near white, and suppress the occurrence of waveform distortion.
[0100]
The output luminance signal 127 is also supplied to the color signal level adjustment unit 115.
[0101]
FIG. 16 is a diagram illustrating a detailed configuration example of the color signal level adjustment unit 115. In FIG. 16, a color signal level adjustment unit 301 divides an input luminance signal 121 that is a luminance signal before correction from an output luminance signal 127 that is a luminance signal after correction, and a divider 301 that calculates a correction amount. The multiplier 302A that multiplies the input color signal 131A by the correction amount calculated by the multiplier 301, and similarly the multiplier 302B and multiplier 302A that multiplies the input color signal 131B by the correction amount calculated by the divider 301. A comparator 303A that compares the input and output signal levels, similarly, a comparator 303B that compares the input and output signal levels of the multiplier 302B, and an input signal and output of the multiplier 302A based on the outputs of the comparator 303A. A selector 304A that selects one of the signals and outputs the selected signal to the outside of the color signal level adjustment unit 115. Similarly, based on the output of the comparator 303B, Selects either of the input signals of the adder 302B and the output signal, constituted by the selector 304B to be output to the outside of the color signal level adjusting portion 115.
[0102]
The divider 301 divides the output luminance signal 127 supplied from the adder 114 in FIG. 8 by the input luminance signal 121 input from the outside of the image processing apparatus 110, and uses the result as a signal 311 for the multipliers 302 A and 302 B. To supply.
[0103]
The multiplier 302A multiplies the input color signal 131A that is the Cb component of the input color signal by the signal 311 supplied from the divider 301, and supplies the signal 312A that is the multiplication result to the comparator 303A and the selector 304A. .
[0104]
Similarly, the multiplier 302B multiplies the input color signal 131B that is the Cr component of the input color signal by the signal 311 supplied from the divider 301, and the signal 312B that is the multiplication result is compared with the comparator 303B and the selector 304B. To supply.
[0105]
The comparator 303A compares the signal level of the input color signal 131A, which is the input signal of the multiplier 302A, with the signal level of the signal 312A, which is the output signal of the multiplier 302A, and supplies the signal 313A, which is the comparison result, to the selector 304A. To do.
[0106]
Similarly, the comparator 303B compares the signal level of the input color signal 131B that is the input signal of the multiplier 302B with the signal level of the signal 312B that is the output signal of the multiplier 302B, and selects the signal 313B that is the comparison result as a selector. 304B is supplied.
[0107]
Based on the signal 313A supplied from the comparator 303A, the selector 304A selects the input signal 312A and the input color signal 131A having the higher signal level and outputs the output color signal 132A to the outside of the image processing apparatus 110. Output to.
[0108]
Similarly, the selector 304B selects the input signal 312B and the input color signal 131B having the higher signal level based on the signal 313B supplied from the comparator 303B, and outputs it as the output color signal 132B. 110 is output to the outside.
[0109]
In the divider 301, the color signal level adjustment unit 115 divides the input luminance signal 121, which is the luminance signal before correction, from the signal 127, which is the luminance signal in which the non-edge component is emphasized, to obtain the luminance signal in the image processing apparatus. The amount of correction is calculated. Then, the color signal level adjustment unit 115 multiplies the correction amount by the input color signal 131A which is the Cb component of the color signal in the multiplier 302A, and the signal which is the Cb component of the color signal after the multiplication in the comparator 303A. The signal level of 312A and the signal level of input color signal 131A are compared, and selector 304A selects the higher one of signal 131A and signal 312A based on the comparison result to output color signal 132A. Output as.
[0110]
The color signal level adjustment unit 115 also adjusts the color signal level for the input color signal 131B using the multiplier 302B, the comparator 303B, and the selector 304B, as in the case of the input color signal 131A. The signal 312B, which is a color signal multiplied by the correction amount for the luminance signal, and the input color signal 131B are selected and output as the output color signal 132B.
[0111]
As described above, when the color signal level adjustment unit 115 adjusts the signal level of the color signal in accordance with the correction amount of the luminance signal, the signal level of the color signal after adjustment is the signal level of the color signal before adjustment. For the smaller portion, the color signal level before adjustment is output, so that the signal level of the color signal is prevented from becoming “0”, and “color disappearance” of the corresponding image can be prevented.
[0112]
Next, the operation of the image processing apparatus 110 in FIG. 8 will be described.
[0113]
The input luminance signal 121 input to the image processing apparatus 110 is supplied to the separation circuit 11 and separated into an edge component and a non-edge component. Then, the separated second luminance signal 123, which is a non-edge component, is supplied to the band-specific separation amplification unit 111 and subjected to enhancement processing, and the low-frequency component and the high-frequency component are independently enhanced.
[0114]
The enhancement processing by the image processing apparatus 110 will be described with reference to the flowcharts of FIGS. 17 and 18. Further, description will be made with reference to FIGS. 19 to 23 as necessary.
[0115]
First, in step S <b> 1 of FIG. 17, the low-pass filter 151 of the band separation amplification unit 111 extracts a low frequency component from the second luminance signal 123 and supplies it as a signal 161 to the enhancement processing unit 152 and the adder 154.
[0116]
FIG. 19 is a diagram illustrating an example of the waveform of the signal 161. In FIG. 19, the signal 161 includes low-frequency amplitude components 161C and 161D. Note that the amplitude of the amplitude component 161D included in the signal 161 is formed larger than the amplitude of the amplitude component 161C.
[0117]
Next, the adder 154 that has acquired the input luminance signal 123 and the signal 161 subtracts the signal 161 from the acquired input luminance signal 123 in step S2, and extracts a high-frequency component. Then, the adder 154 supplies the signal 162 that is the extracted high frequency component to the enhancement processing unit 155.
[0118]
FIG. 20 is a diagram illustrating an example of the waveform of the signal 162. In FIG. 20, the signal 162 includes noise components 162A-1 to 162A-9, which are high-frequency small amplitude components, and a high-frequency amplitude component 162B. The amplitude component 162B included in the signal 162 is formed with the same amplitude as the amplitude of the amplitude component 161C in FIG. Further, the noise components 162A-1 to 162A-9 are formed with an amplitude smaller than the amplitude component 162B.
[0119]
In step S3, the enhancement processing unit 152 determines that the signal level of the low-frequency component (signal 161) of the extracted second luminance signal is based on the signal 161 supplied from the low-pass filter 151 is the first threshold (X11). ) If it is determined whether or not it is less than or equal to the first threshold value, the enhancement processing unit 152 proceeds to step S4, and the first low frequency component (signal 161) of the second luminance signal is Multiply by a coefficient. That is, as illustrated in FIG. 10A, the enhancement processing unit 152 multiplies the signal 161 by a relatively small coefficient when the signal level of the signal 161 is X11 or less.
[0120]
When multiplying by the first coefficient, the enhancement processing unit 152 supplies the signal 163, which is the multiplication result, to the adder 153, and the process proceeds to step S8 in FIG.
[0121]
If it is determined in step S3 in FIG. 17 that the signal level of the low frequency component of the extracted second luminance signal is greater than the first threshold and not less than or equal to the first threshold, the enhancement processing unit 152 The process proceeds to S5, and it is determined whether or not the signal level of the low frequency component (signal 161) of the extracted second luminance signal is equal to or lower than the second threshold value.
[0122]
If it is determined that the value is equal to or smaller than the second threshold value, the enhancement processing unit 152 proceeds to step S6 and multiplies the low-frequency component (signal 161) of the second luminance signal by the second coefficient. That is, as illustrated in FIG. 10A, the enhancement processing unit 152 multiplies the signal 161 by a relatively large coefficient when the signal level of the signal 161 is greater than X11 and less than or equal to X12.
[0123]
When the second coefficient is multiplied, the enhancement processing unit 152 supplies the signal 163, which is the multiplication result, to the adder 153, and the process proceeds to step S8 in FIG.
[0124]
If it is determined in step S5 of FIG. 17 that the signal level of the low frequency component of the extracted second luminance signal is greater than the second threshold and not less than or equal to the second threshold, the enhancement processing unit 152 The process proceeds to S7, where the low frequency component (signal 161) of the second luminance signal is multiplied by the third coefficient. That is, as illustrated in FIG. 10A, the enhancement processing unit 152 multiplies the signal 161 by a relatively small coefficient when the signal level of the signal 161 is greater than X12.
[0125]
When the third coefficient is multiplied, the enhancement processing unit 152 supplies the signal 163, which is the multiplication result, to the adder 153, and the process proceeds to step S8 in FIG.
[0126]
As described above, the signal 161 in FIG. 19 is emphasized and converted into a signal 163 as shown in FIG. 21 by the processing in steps S3 to S7. FIG. 21 is a diagram illustrating an example of the waveform of the signal 163. In FIG. 21, the low frequency amplitude component 163C included in the signal 163 is an enhancement of the amplitude component 161C included in the signal 161 in FIG. 19, and similarly, the low frequency amplitude component 163D included in the signal 163 is , The amplitude component 161D included in the signal 161 in FIG. 19 is emphasized. Further, the amplitude components 163C and 163D are adjusted and emphasized by the lookup table shown in FIG. 10A so as not to exceed the upper limit value H1 and the lower limit value L1 of the appropriate level. Are the same size.
[0127]
In step S8 of FIG. 18, the enhancement processing unit 155 determines that the signal level of the high-frequency component (signal 162) of the extracted second luminance signal is the third threshold value (X13) based on the signal 162 supplied by the adder 154. ) If it is determined whether or not it is equal to or less than the third threshold value, the enhancement processing unit 155 proceeds to step S9 to add the fourth coefficient to the high-frequency component (signal 162) of the second luminance signal. Multiply That is, as illustrated in FIG. 10B, the enhancement processing unit 155 multiplies the signal 162 by a relatively small coefficient when the signal level of the signal 162 is X13 or less.
[0128]
When the fourth coefficient is multiplied, the enhancement processing unit 155 supplies the signal 164, which is the multiplication result, to the adder 153, and the process proceeds to step S17 in FIG.
[0129]
Further, when it is determined in step S8 in FIG. 18 that the signal level of the high-frequency component (signal 162) of the second luminance signal is greater than the third threshold value (X13) and not less than or equal to the third threshold value, the enhancement processing unit In step S155, the process proceeds to step S10, and it is determined whether the signal level of the extracted high-frequency component (signal 162) of the second luminance signal is equal to or lower than the fourth threshold value (X14).
[0130]
If it is determined that the signal level of the signal 162 is equal to or lower than the fourth threshold value, the enhancement processing unit 155 proceeds to step S11 and multiplies the high-frequency component (signal 162) of the second luminance signal by the fifth coefficient. To do. That is, as illustrated in FIG. 10B, the enhancement processing unit 155 multiplies the signal 162 by a relatively large coefficient when the signal level of the signal 162 is greater than X13 and less than or equal to X14.
[0131]
When the fifth coefficient is multiplied, the enhancement processing unit 155 supplies the signal 164, which is the multiplication result, to the adder 153, and the process proceeds to step S17 in FIG.
[0132]
Furthermore, when it is determined in step S10 of FIG. 18 that the signal level of the high-frequency component (signal 162) of the second luminance signal is greater than the fourth threshold value (X14) and not less than or equal to the fourth threshold value, the enhancement processing unit In step S155, the process proceeds to step S12, and it is determined whether or not the signal level of the extracted high-frequency component (signal 162) of the second luminance signal is equal to or lower than the fifth threshold value (X15).
[0133]
If it is determined that the signal level of the signal 162 is equal to or lower than the fifth threshold value, the enhancement processing unit 155 proceeds to step S13 and multiplies the high-frequency component (signal 162) of the second luminance signal by the sixth coefficient. To do. That is, as illustrated in FIG. 10B, when the signal level of the signal 162 is greater than X14 and equal to or less than X15, the enhancement processing unit 155 multiplies the signal 162 by a coefficient having a value of “0”, Is smoothed.
[0134]
When the sixth coefficient is multiplied, the enhancement processing unit 155 supplies the signal 164, which is the multiplication result, to the adder 153, and the process proceeds to step S17 in FIG.
[0135]
When it is determined in step S12 of FIG. 18 that the signal level of the high-frequency component (signal 162) of the second luminance signal is greater than the fifth threshold value (X15) and not less than or equal to the fifth threshold value, the enhancement processing unit In step S155, the process proceeds to step S14, and it is determined whether or not the signal level of the extracted high-frequency component (signal 162) of the second luminance signal is equal to or less than the sixth threshold value (X16).
[0136]
If it is determined that the signal level of the signal 162 is equal to or lower than the sixth threshold value, the enhancement processing unit 155 proceeds to step S15 and multiplies the high-frequency component (signal 162) of the second luminance signal by the seventh coefficient. To do. That is, as illustrated in FIG. 10B, the enhancement processing unit 155 multiplies the signal 162 by a relatively large coefficient when the signal level of the signal 162 is greater than X15 and less than or equal to X16.
[0137]
When the seventh coefficient is multiplied, the enhancement processing unit 155 supplies the signal 164, which is the multiplication result, to the adder 153, and the process proceeds to step S17 in FIG.
[0138]
Furthermore, when it is determined in step S14 of FIG. 18 that the signal level of the high-frequency component (signal 162) of the second luminance signal is greater than the sixth threshold value (X16) and not less than or equal to the fifth threshold value, the enhancement processing unit In step S155, the process proceeds to step S16, and the high frequency component (signal 162) of the second luminance signal is multiplied by the eighth coefficient. That is, as illustrated in FIG. 10B, the enhancement processing unit 155 multiplies the signal 162 by a relatively small coefficient when the signal level of the signal 162 is greater than X16.
[0139]
When the eighth coefficient is multiplied, the enhancement processing unit 155 supplies the signal 164, which is the multiplication result, to the adder 153, and the process proceeds to step S17 in FIG.
[0140]
As described above, the signal 162 in FIG. 20 is emphasized and converted into a signal 164 as shown in FIG. 22 by the processing in steps S8 to S16. FIG. 22 is a diagram illustrating an example of the waveform of the signal 164. In FIG. 22, a high frequency amplitude component 164B included in the signal 164 is an enhancement of the amplitude component 162B included in the signal 162 in FIG. The signal 164 is a signal emphasized based on the lookup table shown in FIG. 10B, and the noise components 162A-1 to 162A-9 included in the signal 162 in FIG. 20 are all smoothed. Yes.
[0141]
In step S17, the adder 153 supplied with the signals 163 and 164 adds the signal 164 that is the high-frequency component of the non-edge component of the luminance signal to the signal 163 that is the low-frequency component of the non-edge component of the luminance signal, A third luminance signal 124 is generated, and the enhancement process ends.
[0142]
The adder 153 adds the signal 164 shown in FIG. 22 to the signal 163 shown in FIG. 21 to generate the third luminance signal 124 shown in FIG. FIG. 23 is a diagram illustrating an example of the waveform of the third luminance signal 124. 23, the amplitude component 124B included in the third luminance signal 124 corresponds to the amplitude component 164B illustrated in FIG. 22, and the amplitude components 124C and 124D included in the third luminance signal 124 are illustrated in FIG. Respectively corresponding to amplitude components 163C and 163D.
[0143]
The image processing apparatus 110 repeats the above-described enhancement processing in the band separation amplification unit 111 every time the input luminance signal 121 is input.
[0144]
As described above, the second luminance signal 123 is adjusted and emphasized by the band separation amplification unit 111 so as not to exceed the upper limit value H1 and the lower limit value L1 of the appropriate level as shown in FIG. 3 luminance signal 124.
[0145]
As described above, the band separation amplification unit 111 can emphasize the non-edge component without enhancing the noise component included in the portion where the signal level of the non-edge component is not near “0”. Further, by adjusting the enhancement amount for the vicinity of “0” in the enhancement processing unit 155, the band separation amplification unit 111 suppresses the noise component included in the portion where the signal level of the non-edge component is not near “0”, or It is also possible to remove it.
[0146]
Then, the third luminance signal 124 in FIG. 23 is supplied to the skin color processing unit 112. In the third luminance signal 124, the skin color detection unit 112 detects the skin color portion of the corresponding image based on the input color signals 131A and 131B, and the enhancement amount is adjusted for that portion.
[0147]
With reference to the flowchart of FIG. 24, the skin color adjustment processing by the image processing apparatus 110 will be described.
[0148]
First, in step S31, the conversion processing unit 202 acquires the input color signal 131A that is the Cb component of the color signal and the input color signal 131B that is the Cr component, and holds them in advance, as shown in FIG. Using a simple skin color detection table, it is determined whether or not the color of the image corresponding to the input color signals 131A and 131B is a skin color.
[0149]
If the conversion processing unit 202 determines that the image color corresponding to the input color signals 131A and 131B is a flesh color, the conversion processing unit 202 proceeds to step S32 and determines a gain value to be multiplied by the third luminance signal in advance. A predetermined value smaller than “1” is set, the set gain value is supplied to the multiplier 201, and the process proceeds to step S34.
[0150]
If it is determined in step S31 that the color of the image corresponding to the input color signals 131A and 131B is not a skin color, the conversion processing unit 202 proceeds to step S33 and multiplies the third luminance signal by a gain value. Is set to “1”, the set gain value is supplied to the multiplier 201, and the process proceeds to step S34.
[0151]
In step S34, the multiplier 201 supplied with the gain value multiplies the input third luminance signal 124 by the gain value to generate a fourth luminance signal. The multiplier 201 that has generated the fourth luminance signal ends the skin color adjustment process.
[0152]
The image processing apparatus 110 repeats the above skin color adjustment processing in the skin color processing unit 112 every time the input luminance signal 121 is input.
[0153]
As described above, the third luminance signal 124 is converted by the skin color processing unit 112 into the fourth luminance signal 125 in which the enhancement amount is adjusted for the skin color portion of the corresponding image.
[0154]
As described above, the skin color processing unit 112 can adjust the enhancement amount of the non-edge component of the emphasized luminance signal in the portion where the corresponding image color is the skin color to an optimum value.
[0155]
Then, the fourth luminance signal 125 is supplied to the enhancement amount adjustment unit 113. In the fourth luminance signal 125, the enhancement amount adjusting unit 113 detects the fourth luminance signal 125 in the vicinity of white or black based on the first luminance signal 122, and the enhancement amount is adjusted for that portion. .
[0156]
With reference to the flowchart of FIG. 25, the enhancement amount adjustment processing by the image processing apparatus 110 will be described. Further, description will be made with reference to FIGS. 26 to 28 as necessary.
[0157]
First, in step S51, when the lookup table 251 of the enhancement amount adjustment unit 113 acquires the first luminance signal 122 and detects the signal level of the acquired first luminance signal 122, a built-in storage unit (FIG. A gain value for multiplying the fourth luminance signal corresponding to the detected signal level of the first luminance signal 122 is set using a conversion table as shown in FIG. . Then, the lookup table 251 supplies the set gain value to the multiplier 252.
[0158]
In step S52, the multiplier 252 supplied with the gain value multiplies the supplied fourth luminance signal by the supplied gain value to generate a fifth luminance signal. The multiplier 252 that has generated the fifth luminance signal ends the enhancement amount adjustment process.
[0159]
FIG. 26 is a diagram illustrating an example of the waveform of the fourth luminance signal 125 supplied to the multiplier 252. In FIG. 26, the fourth luminance signal 125 includes amplitude components 125A, 125B, and 125C emphasized to the same magnitude.
[0160]
The amplitude components 125A, 125B, and 125C included in the fourth luminance signal 125 in FIG. 26 have a signal level that is the center of the amplitude when the first luminance signal 122 that is an edge component of the input luminance signal is added. Each is different. That is, the amplitude component 125A has the lowest signal level that is the center of its amplitude compared to the others, and has an amplitude in the vicinity of black, and the amplitude component 125C has the highest signal level that is the center of its amplitude compared to the others. The amplitude is in the vicinity of white, and the amplitude component 125B is amplified in the middle portion of all gradations.
[0161]
Therefore, the look-up table 251 uses the conversion table of FIG. 14 that is held, and the amplitude of each of the first luminance signals from the signal levels of the portions corresponding to these amplitude components 125A, 125B, and 125C. A gain value to be multiplied by the component is set, and the set gain value is supplied to the multiplier 252. The multiplier 252 multiplies the supplied gain value by the fourth luminance signal 125 in FIG. 26 to generate a fifth luminance signal 126.
[0162]
FIG. 27 is a diagram illustrating an example of a waveform of the generated fifth luminance signal 126.
[0163]
In FIG. 27, amplitude components 126A, 126B, and 126C included in the fifth luminance signal 126 correspond to amplitude components 125A, 125B, and 125C included in the fourth luminance signal 125 in FIG. 26, respectively. However, as a result of multiplication by the gain value, the amplitude of the amplitude component 126B is the largest.
[0164]
When the first luminance signal 122 which is an edge component is added to the fifth amplitude component 126, an output luminance signal 127 having a waveform as shown in FIG. In FIG. 28, amplitude components 127A, 127B, and 127C included in output luminance signal 127 correspond to amplitude components 126A, 126B, and 126C included in fifth luminance signal 126 in FIG. The amplitude components 127A and 127C are adjusted in enhancement amount so that the amplitude is smaller than that of the amplitude component 127B, and the output luminance signal 127 is within the range from the upper limit value H5 of the gradation level to the lower limit value L5. It is formed with.
[0165]
The image processing apparatus 110 repeats the above-described enhancement amount adjustment processing in the enhancement amount adjustment unit 113 every time the input luminance signal 121 is input.
[0166]
As described above, the fourth luminance signal 125 is converted by the enhancement amount adjustment unit 113 into the fifth luminance signal 126 having the enhancement amount adjusted according to the signal level of the first luminance signal.
[0167]
As described above, the enhancement amount adjustment unit 113 can suppress the enhancement amount of the non-edge component whose signal level is located near black or near white and suppress the occurrence of waveform distortion.
[0168]
Then, the fifth luminance signal 126 is supplied to the adder 114, added with the first luminance signal, converted into an output luminance signal 127, and output to the outside of the image processing apparatus 110.
[0169]
The output luminance signal 127 is also supplied to the color signal level adjustment unit 115 and is used for color signal level adjustment. The input color signals 131 </ b> A and 131 </ b> B are adjusted in signal level by the color signal level adjustment unit 115 based on the input luminance signal 121 and the output luminance signal 127.
[0170]
The color signal level adjustment processing by the image processing apparatus 110 will be described with reference to the flowchart of FIG. Further, description will be made with reference to FIGS. 30 to 35 as necessary.
[0171]
In the color signal level adjustment processing, the input color signal 131B that is the Cr component of the color signal is multiplied by the input color signal 131A that is the Cb component of the color signal by the multiplier 302B, the comparator 303B, and the selector 304B. Processing is performed in the same manner as when processing is performed by the comparator 302A, the comparator 303A, and the selector 304A. Therefore, in the following, without distinguishing the input color signals 131A and 131B, the multipliers 302A and 302B, the comparators 303A and 303B, and the selectors 304A and 304B, respectively, the input color signal 131, the multiplier 302, and the comparison They are referred to as a device 303 and a selector 304. Accordingly, the signals 312A and 312B, the signals 313A and 313B, and the output color signals 132A and 132B are also simply referred to as the signal 312, the signal 313, and the output color signal 132 without being distinguished from each other.
[0172]
First, in step S71, the divider 301 of the color signal level adjustment unit 115 divides the acquired output luminance signal 127 by the input luminance signal 121 to calculate the enhancement amount of the luminance signal and adjust the signal level of the color signal. The color signal gain value to be calculated is calculated. Then, the divider 301 supplies a signal 311 composed of the calculated color signal gain value to the multiplier 302.
[0173]
FIG. 30 is a diagram illustrating an example of the waveform of the input luminance signal 121. As shown in FIG. 30, the input luminance signal 121 has a signal level “0” in the section from time “0” to time X41, and the signal level is M6 in the section from time X41 to time X42. It becomes. In the section from time X42 to time X44, the input luminance signal 121 has an amplitude centering on M6, with the maximum value being H6 and the minimum value being L6. At this time, the signal level of the input luminance signal 121 at time X43 is M6. The signal level of the input luminance signal 121 is M6 in the section from time X44 to time X45, and the signal level is “0” in the section after time X45.
[0174]
FIG. 31 is a diagram illustrating an example of the waveform of the output luminance signal 127. As shown in FIG. 31, the output luminance signal 127 has a signal level “0” in the section from time “0” to time X41, and the signal level is M6 in the section from time X41 to time X42. It becomes. Further, in the section from time X42 to time X44, the output luminance signal 127 has an amplitude centering on M6, with the maximum value being H7 and the minimum value being L7. At this time, the signal level of the output luminance signal 127 at time X43 is M6. The signal level of the output luminance signal 127 is M6 in the section from time X44 to time X45, and the signal level is “0” in the section after time X45.
[0175]
The multiplier 301 divides the output luminance signal 127 as shown in FIG. 31 by the input luminance signal 121 as shown in FIG. 30, and generates a signal 311 as shown in FIG.
[0176]
FIG. 32 is a diagram illustrating an example of the waveform of the signal 311. The signal 311 is the result of dividing the output luminance signal 127 by using the input luminance signal 121. As shown in FIG. 32, the signal level is “1” in the section from time “0” to time X42. The signal level is H8 in the section from time X42 to time X43, the signal level is L8 in the section from time X43 to time X44, and the signal level is “1” in the section after time X44. It becomes.
[0177]
That is, the input luminance signal 121 is converted into the corrected output signal 127 only by the image processing apparatus 110 for the amplitude portion from the time X42 to X44.
[0178]
In step S <b> 72, the multiplier 302 to which the signal 311 including the color signal gain value is supplied multiplies the input color signal 131 by the signal 311 and supplies the signal 312 to the comparator 303 and the selector 304.
[0179]
FIG. 33 is a diagram illustrating an example of the waveform of the input color signal 131. As shown in FIG. 33, the input color signal 131 has a signal level “0” in the section from time “0” to time X41, and the signal level is M9 in the section from time X41 to time X42. It becomes. In the section from time X42 to time X44, the input color signal 131 swings around M9, with the maximum value being H9 and the minimum value being L9. At this time, the signal level of the input color signal 131 at time X43 is M9. The signal level of the input color signal 131 is M9 in the section from time X44 to time X45, and the signal level is “0” in the section after time X45.
[0180]
An input signal 131 shown in FIG. 33 is multiplied by a signal 311 shown in FIG. FIG. 34 is a diagram illustrating an example of the waveform of the signal 312. As shown in FIG. 34, the signal 312 has a signal level of “0” in a section from time “0” to time X41, and a signal level of M9 in a section from time X41 to time X42. . In the section from time X42 to time X44, the signal 312 swings around M9 with the maximum value being H10 and the minimum value being L10. At this time, the signal level of the signal 312 at time X43 is M9. The signal level of the signal 312 is M9 in the section from the time X44 to the time X45, and the signal level is “0” in the section after the time X45.
[0181]
In step S <b> 73, the comparator 303 compares the signal level of the signal 312 supplied from the multiplier 302 with the signal level of the input color signal 131 and supplies the comparison result to the selector 304.
[0182]
In step S74, the selector 304 determines whether the signal level of the input color signal 131 is higher than the signal level of the signal 312 based on the supplied comparison result. When it is determined that the signal level of the input color signal 131 is higher, the selector 304 proceeds to step S75, selects the input color signal 131, and outputs it as the output color signal 132. The selector 304 that has output the output color signal 132 ends the color signal level adjustment processing.
[0183]
If it is determined in step S74 that the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 and the signal level of the input color signal 131 is not higher, the selector 304 proceeds to step S76. The signal 312 is selected and output as the output color signal 132. The selector 304 that has output the output color signal 132 ends the color signal level adjustment processing.
[0184]
That is, the selector 304 selects one of the signal 131 shown in FIG. 33 and the signal 312 shown in FIG.
[0185]
FIG. 35 is a diagram illustrating an example of the waveform of the output color signal 132. As shown in FIG. 35, the signal level of the output color signal 132 is “0” in the section from time “0” to time X41, and the signal level is M9 in the section from time X41 to time X42. It becomes. In the section from time X42 to time X44, the output color signal 132 has an amplitude with the maximum value being H10 and the minimum value being L9. At this time, the signal level of the output color signal 132 at time X43 is M9. The output color signal 132 has a signal level M9 in the section from time X44 to time X45, and the signal level is “0” in the section after time X45.
[0186]
That is, since the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 in the section from time “0” to time X43, the selector 304 selects the signal 312 and outputs it as the output color signal 132. To do. Further, since the signal level of the input color signal 131 is higher than the signal level of the signal 312 in the section from the time X43 to the time X44, the selector 304 selects the input color signal 131 and outputs it as the output color signal 132. . Further, since the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 in the section after the time X44, the selector 304 selects the signal 312 and outputs it as the output color signal 132.
[0187]
The image processing apparatus 110 repeats the color signal level adjustment processing as described above in the color signal level adjustment unit 115 every time the input luminance signal 121 is input.
[0188]
As described above, as the output color signal 132, the signal having the larger signal among the signals before and after the signal level is adjusted is applied, so that the signal level of the output color signal is prevented from becoming “0”. . Thereby, the image processing apparatus 110 can prevent the color disappearance of the image corresponding to the signal, which occurs in the processing of the color signal, and can improve the contrast. The output color signal 132 is output to the outside of the image processing apparatus 110.
[0189]
As described above, the image processing apparatus 110 adjusts the correction amount according to the signal level of the luminance signal, and performs more effective correction processing on the input luminance signal 121 and the input color signals 131A and 131B. I do.
[0190]
In the above, as shown in FIG. 9, the band separation amplifying unit 111 separates the input second luminance signal 123 into a low frequency component and a high frequency component, independently amplifies each, and then amplifies the low luminance signal. The third luminance signal 124 is generated by adding the frequency component and the high frequency component. However, the present invention is not limited to this. For example, as illustrated in FIG. 36, the low frequency component and the high frequency component are separated. The amplified luminance signal may be supplied to the skin color processing unit 112.
[0191]
FIG. 36 is a diagram showing another configuration example of the image processing apparatus to which the present invention is applied.
[0192]
36, the image processing apparatus 400 is supplied by a separation circuit 11 and a separation circuit 11 that separate an input luminance signal 121 into an edge component (first luminance signal 122) and a non-edge component (second luminance signal 123). The second luminance signal 123 is separated into a low-frequency component and a high-frequency component, and each band-separation amplification unit 401 that amplifies each independently, and skin color processing that processes each component of the supplied low-frequency component and high-frequency component Unit 402 and enhancement amount adjustment unit 403, a synthesis circuit 404 that adds the low-frequency component and the high-frequency component of the non-edge component after correction processing, adds the edge component, and generates output luminance signal 127, and input luminance Based on the signal 121 and the output luminance signal, a color signal level adjusting unit 115 that adjusts the signal level of the input color signals 131A and 131B is configured. It is.
[0193]
The band separation amplification unit 401 is configured by removing the adder 153 from the band separation amplification unit 111 illustrated in FIG. 9, and includes a low-pass filter 151, enhancement processing units 152 and 155, and an adder 154. Yes. That is, the second luminance signal 123 supplied from the separation circuit 11 is supplied to the low-pass filter 151 of the band separation amplification unit 401, and a low frequency component is extracted. A signal 161 that is a low frequency component of the second luminance signal 123 is supplied to the enhancement processing unit 152, amplified based on a lookup table as shown in FIG. 10A, and supplied to the skin color processing unit 402 as a signal 163. The
[0194]
The signal 161 is also supplied to the adder 154. The adder 154 subtracts the low-frequency component signal 161 from the second luminance signal 123 supplied from the separation circuit 11 and extracts the high-frequency component signal 162. The signal 162 is supplied to the enhancement processing unit 155, amplified based on the lookup table shown in FIG. 10B, and supplied to the skin color processing unit 402 as a signal 164.
[0195]
The skin color processing unit 402 has a configuration as shown in FIG. 11 for each of the signal 163 that is a low-frequency component of the non-edge component of the luminance signal and the signal 164 that is the high-frequency component of the non-edge component of the luminance signal. The flesh color processing described with reference to the flowchart of FIG. 24 is executed for each signal. The skin color processing unit 402 supplies the low frequency component and high frequency component signals subjected to the skin color processing to the enhancement processing adjustment unit 403, respectively.
[0196]
The enhancement processing adjustment unit 403 has a configuration as shown in FIG. 13 for each of the supplied low frequency component and high frequency component, and the enhancement amount adjustment processing as described with reference to the flowchart of FIG. For each signal. The enhancement amount adjustment unit 403 supplies the low frequency component and high frequency component signals subjected to the enhancement amount adjustment processing to the synthesis circuit 404.
[0197]
The synthesis circuit 404 includes an adder 405 corresponding to the adder 153 in FIG. 9 and an adder 406 corresponding to the adder 114 in FIG. The adder 405 adds the signal 412 that is the high-frequency component supplied by the enhancement amount adjustment unit 403 to the signal 411 that is the low-frequency component supplied by the enhancement amount adjustment unit 403, and supplies the signal 413 to the adder 406. To do. The adder 406 adds the signal 122 supplied from the separation circuit 11 to the signal 413 supplied from the adder 405 to generate an output color signal 127.
[0198]
As described above, the adder 153 included in the band separation amplification unit 111 is disposed after the enhancement amount adjustment unit 113, and the band separation amplification unit 111 independently outputs the low-frequency component and the high-frequency component of the non-edge components. In this case, the skin color processing unit 112 and the enhancement amount adjusting unit 113 may perform processing on each component.
[0199]
In this case, the enhancement processing by the image processing apparatus 110 is performed in substantially the same manner as described with reference to the flowchart of FIG.
[0200]
In addition to the above, the image processing apparatus 110 is similar to the enhancement processing unit 152 or 155 of FIG. 9 instead of the band separation amplification unit 111 as shown in FIG. The enhancement processing unit 421 may be configured.
[0201]
FIG. 37 is a diagram showing still another configuration example of the image processing apparatus 110 to which the present invention is applied.
[0202]
In FIG. 37, the image processing device 420 has a configuration in which the band separation amplification unit 111 of the image processing device 110 shown in FIG.
[0203]
The enhancement processing unit 421 holds a lookup table described later with reference to FIG. 38 in a built-in storage unit (not shown), and is supplied by the separation circuit 11 based on the lookup table. The second luminance signal 123 is amplified. Further, the enhancement processing unit 421 supplies the skin color processing unit 112 with a signal 431 obtained by amplifying the second luminance signal 123.
[0204]
FIG. 38 is a diagram showing an example of a lookup table held by the enhancement processing unit 421 in FIG.
[0205]
In FIG. 38, a curve 441 is a lookup table held by the enhancement processing unit 421, the horizontal axis represents the signal level of the second luminance signal 123 that is an input signal, and the vertical axis is a signal that is an output signal. 431 shows the signal level.
[0206]
The enhancement processing unit 421 refers to a curve 441 shown in FIG. 38 and outputs an output signal level corresponding to the input signal level. As shown in FIG. 38, a curve 441 is a straight line corresponding to an input signal whose signal level is a predetermined level X51 or lower, and an input signal whose signal level is higher than X51 and lower than a predetermined level X52 higher than X51. Corresponding line, input corresponding to an input signal whose signal level is greater than X52 and less than a predetermined level X53 greater than X52, input whose signal level is greater than X53 and greater than X53 and less than a predetermined level X54 It is formed by a straight line corresponding to a signal and a straight line corresponding to an input signal whose signal level is higher than X54.
[0207]
As shown in FIG. 38, a curve 441 shows an inclination of a straight line corresponding to an input signal whose signal level is higher than X51 and lower than X52, and an input whose signal level is higher than X53 and lower than X54. The slope of the straight line corresponding to the signal is the largest. Further, the slope of the straight line corresponding to the input signal having the signal level of the curve 441 greater than X52 and less than or equal to X53 is the smallest.
[0208]
That is, the enhancement processing unit 421 amplifies the large amplitude included in the second luminance signal 123 that expands to the vicinity of the upper limit value and the lower limit value of the appropriate level while suppressing the enhancement amount and the signal level is increased. Small amplitude components that swing near “0” are not amplified or smoothed.
[0209]
Next, enhancement processing by the image processing apparatus 420 in FIG. 37 will be described with reference to the flowchart in FIG. Moreover, it demonstrates with reference to FIG. 40 and 41 as needed.
[0210]
First, in step S91, the enhancement processing unit 421 determines whether or not the signal level of the acquired second luminance signal 123 is equal to or lower than the first threshold value (X51) in the lookup table as shown in FIG. judge.
[0211]
FIG. 40 is a diagram illustrating an example of the waveform of the second luminance signal 123 supplied to the enhancement processing unit 421. In FIG. 40, the second luminance signal 123 includes noise components 123A-1 to 123A-3, an amplitude component 123B having a relatively small amplitude, and an amplitude component 123C having a relatively large amplitude.
[0212]
In step S91 of FIG. 39, when it is determined that the signal level of the second luminance signal 123 is equal to or lower than the first threshold value, the enhancement processing unit 421 proceeds to step S92, and outputs the second luminance signal 123 to the second luminance signal 123. Multiply by the first coefficient. That is, as illustrated in FIG. 38, when the signal level of the second luminance signal 123 is X51 or less, the enhancement processing unit 421 converts the signal of the straight line 441 illustrated in FIG. 38 into the second luminance signal 123. Multiply by a first coefficient which is the slope of a straight line corresponding to an input signal whose level is X51 or less. The enhancement processing unit 421 that has multiplied the first coefficient ends the enhancement processing.
[0213]
If it is determined in step S91 that the signal level of the acquired second luminance signal 123 is not less than or equal to the first threshold value (X51) in the lookup table as shown in FIG. 38, the process proceeds to step S93. Then, it is determined whether or not the signal level of the acquired second luminance signal 123 is equal to or lower than the second threshold value (X52) in the lookup table as shown in FIG.
[0214]
If it is determined that the signal level of the second luminance signal 123 is greater than X51, less than or equal to X52, and less than or equal to the second threshold, the enhancement processing unit 421 proceeds to step S94, The luminance signal 123 is multiplied by the second coefficient. That is, as shown in FIG. 38, the enhancement processing unit 421 displays the second luminance signal 123 in the second luminance signal 123 when the signal level of the second luminance signal 123 is higher than X51 and lower than or equal to X52. The second coefficient, which is the slope of the straight line corresponding to the input signal having a signal level higher than X51 and lower than X52, is multiplied by the straight line 441. The enhancement processing unit 421 that has multiplied the second coefficient ends the enhancement processing.
[0215]
Furthermore, when it is determined in step S93 that the signal level of the acquired second luminance signal 123 is not less than or equal to the second threshold value (X52) in the lookup table as shown in FIG. 38, the process proceeds to step S95. Then, it is determined whether or not the signal level of the acquired second luminance signal 123 is equal to or lower than the third threshold value (X53) in the lookup table as shown in FIG.
[0216]
When it is determined that the signal level of the second luminance signal 123 is greater than X52 and less than or equal to X53 and less than or equal to the third threshold value, the enhancement processing unit 421 proceeds to step S96 and proceeds to the second The luminance signal 123 is multiplied by the third coefficient. That is, as shown in FIG. 38, the enhancement processing unit 421 displays the second luminance signal 123 in the second luminance signal 123 when the signal level of the second luminance signal 123 is higher than X52 and lower than or equal to X53. The third coefficient which is the slope of the straight line corresponding to the input signal of the straight line 441 having a signal level higher than X52 and lower than X53 is multiplied. The enhancement processing unit 421 that has multiplied the third coefficient ends the enhancement processing.
[0217]
If it is determined in step S95 that the signal level of the acquired second luminance signal 123 is not less than or equal to the third threshold value (X53) in the lookup table as shown in FIG. 38, the process proceeds to step S97. Then, it is determined whether or not the signal level of the acquired second luminance signal 123 is equal to or lower than the fourth threshold value (X54) in the lookup table as shown in FIG.
[0218]
When it is determined that the signal level of the second luminance signal 123 is greater than X53, less than or equal to X54, and less than or equal to the fourth threshold value, the enhancement processing unit 421 proceeds to step S98 and proceeds to the second The luminance signal 123 is multiplied by the fourth coefficient. That is, as shown in FIG. 38, the enhancement processing unit 421 displays the second luminance signal 123 in the second luminance signal 123 when the signal level of the second luminance signal 123 is higher than X53 and lower than or equal to X54. The fourth coefficient, which is the slope of the straight line corresponding to the input signal having a signal level higher than X53 and lower than X54, is multiplied by the straight line 441. The enhancement processing unit 421 that has multiplied the fourth coefficient ends the enhancement processing.
[0219]
Furthermore, if it is determined in step S97 that the signal level of the acquired second luminance signal 123 is not less than or equal to the fourth threshold value (X54) in the lookup table as shown in FIG. 38, the process proceeds to step S99. The second luminance signal 123 is multiplied by the fifth coefficient. That is, as illustrated in FIG. 38, when the signal level of the second luminance signal 123 is greater than X54, the enhancement processing unit 421 converts the signal level of the straight line 441 illustrated in FIG. 38 into the second luminance signal 123. Is multiplied by a fifth coefficient which is the slope of a straight line corresponding to an input signal greater than X54. The enhancement processing unit 421 that has multiplied the fifth coefficient ends the enhancement processing.
[0220]
FIG. 41 is a diagram illustrating an example of a waveform of a signal 431 obtained by performing enhancement processing on the second luminance signal 123 output from the enhancement processing unit 421.
[0221]
In FIG. 41, the signal 431 includes noise components 431A-1 to 431A-3 and amplitude components 431B and 431C.
[0222]
The noise components 123A-1 to 123A-3 included in the second luminance signal 123 of FIG. 40 have a very small amplitude and a signal level that is around “0”. Therefore, the curve 441 in FIG. Emphasis processing is performed using a portion corresponding to the case where the input signal level is higher than X52 and lower than or equal to X53, and converted into noise components 431A-1 to 431A-3 included in the signal 431 in FIG. Is done. Therefore, the magnitudes of the amplitudes of the noise components 431A-1 to 431A-3 in FIG. 41 are not emphasized and are the same as the magnitudes of the amplitudes of the noise components 123A-1 to 123A-3 in FIG.
[0223]
In addition, the amplitude component 123C included in the second luminance signal 123 of FIG. 40 is so large that the amplitude expands to the vicinity of the upper limit value and the lower limit value of the appropriate level. Therefore, the curve 441 of FIG. , The emphasis process is performed, and converted into an amplitude component 431C included in the signal 431 in FIG. Accordingly, the amount of enhancement is suppressed so that the amplitude of the amplitude component 431C in FIG. 41 does not exceed the upper limit value and lower limit value of the appropriate level.
[0224]
Furthermore, since the amplitude component 123B included in the second luminance signal 123 in FIG. 40 has a smaller amplitude than the amplitude component 123C, the input signal level of the curve 441 in FIG. 38 is greater than X52 and less than or equal to X53. Emphasis processing is performed using the corresponding portion, and converted into an amplitude component 431B included in the signal 431 in FIG. Accordingly, the amplitude of the amplitude component 431B in FIG. 41 is sufficiently emphasized compared with the amplitude of the amplitude component 123B in FIG. 40, and is almost the same as the amplitude component 431C in FIG. 41 in which the enhancement amount is suppressed. It is a size.
[0225]
The image processing apparatus 420 repeats the above-described enhancement processing in the enhancement processing unit 421 every time the input luminance signal 121 is input.
[0226]
As described above, by using the enhancement processing unit 421 instead of the band separation amplification unit 111, the circuit scale can be suppressed and the enhancement processing can be simplified.
[0227]
Also, in the above, the image processing apparatus 110 is described based on the input color signals 131A and 131B so as to detect a portion of the luminance signal corresponding to the skin color of the luminance signal and adjust the enhancement amount for that portion. However, the present invention is not limited to this. For example, whether or not the portion where the corresponding image is determined to be skin color based on the first luminance signal 122 composed of the edge component of the input luminance signal 121 is human skin. May be further determined, and based on the determination, the enhancement amount may be adjusted only for a portion where the corresponding image is the skin of a person.
[0228]
FIG. 42 is a diagram illustrating another detailed configuration example of the skin color processing unit.
[0229]
42, the skin color processing unit 450 is calculated based on the first luminance signal 122 and the conversion processing unit 202 that determines a gain value for adjusting the enhancement amount of the luminance signal based on the input color signals 131A and 131B. A conversion processing unit 451 for determining an adjustment amount for further adjusting the gain value, a control unit 452 for adjusting the gain value supplied from the conversion processing unit 202 based on the adjustment amount supplied from the conversion processing unit 451, and The multiplier 201 is configured to multiply the third luminance signal by the adjusted gain value.
[0230]
The conversion processing unit 451 holds a lookup table as shown in FIG. 43 in advance in a built-in storage unit (not shown), and is an edge component of the input luminance signal 121 using the lookup table. From the first luminance signal 122, it is determined whether or not the corresponding image has a brightness that may be human skin, and an adjustment amount of the gain value determined by the conversion processing unit 202 is determined based on the determination. Then, the signal 461 is supplied to the control unit 452.
[0231]
FIG. 43 is a diagram illustrating an example of a lookup table held in advance by the conversion processing unit 451 in FIG.
[0232]
In FIG. 43, the horizontal axis represents the signal level of the input first luminance signal 122, and the vertical axis represents the amount of gain value adjustment to be output. The conversion processing unit 451 determines an adjustment amount of the gain value as indicated by a curve 471 according to the signal level of the first luminance signal 122.
[0233]
When the signal level of the first luminance signal 122 is equal to or lower than the predetermined level X61, the conversion processing unit 451 determines that the brightness of the image corresponding to the signal is too dark for human skin, and the gain value Is set to “0”.
[0234]
When the signal level of the first luminance signal 122 is greater than X61 and not more than a predetermined level X62 greater than X61, the conversion processing unit 451 determines that the brightness of the image corresponding to the signal is human skin. It is determined that it is appropriate, and the gain adjustment amount is set to a value on the curve 471 corresponding to the signal level of the first luminance signal 122.
[0235]
Further, when the signal level of the first luminance signal 122 is higher than X62, the conversion processing unit 451 determines that the brightness of the image corresponding to the signal is too bright for human skin, and adjusts the gain value. Set the amount to “0”.
[0236]
That is, the conversion processing unit 451 confirms the brightness of the image based on the signal level of the first luminance signal 122, so that there is a possibility that the corresponding image of the third luminance signal 124 is human skin. Detect a part.
[0237]
The control unit 452 is configured by, for example, a mixer and holds a lookup table as shown in FIG. 44 in a built-in storage unit (not shown). Using the look-up table, the control unit 452 has a signal level “1” for a gain value to be multiplied by the luminance signal from the adjustment amount of the gain value included in the signal 461 supplied from the conversion processing unit 451. A ratio of mixing the signal and the signal 211 supplied from the conversion processing unit 202 is determined, and a gain value mixed at the determined ratio is supplied to the multiplier 201 as a signal 462.
[0238]
FIG. 44 is a diagram illustrating an example of a lookup table held in advance by the control unit 452 of FIG.
[0239]
In FIG. 44, the horizontal axis represents the signal level of the signal 461 supplied from the conversion processing unit 451, that is, the amount of gain adjustment, and the vertical axis is supplied to the multiplier 201 and is added to the third luminance signal 124. It represents the signal level of the signal 462 consisting of the adjusted gain value to be multiplied.
[0240]
The control unit 452 determines the signal level of the signal 462 to be multiplied by the third luminance signal 124 as shown by a curve 472 according to the signal level of the signal 461 supplied from the conversion processing unit 451.
[0241]
When the signal level of the signal 461 is equal to or lower than the predetermined level X63, the control unit 452 supplies the signal 462 having the signal level “1” to the multiplier 201, the signal level of the signal 461 is greater than X63, and from X63. When the signal level is larger than the predetermined level X64, the signal 462 having the value on the curve 472 corresponding to the signal level of the signal 461 is supplied to the multiplier 201. When the signal level of the signal 461 is greater than X64, the conversion is performed. A signal 462 having the same signal level as the signal level L 12 of the signal 211 supplied from the processing unit 202 is supplied to the multiplier 201.
[0242]
That is, the control unit 452 determines whether or not the color of the corresponding image is a skin color by the conversion processing unit 202, and whether or not the corresponding image is the brightness of the human skin by the conversion processing unit 451. Based on this determination, a gain value for adjusting the enhancement amount of the third luminance signal 124 is determined.
[0243]
FIG. 45 is a diagram illustrating a relationship between the signal level of the first luminance signal 122 and the signal level of the signal 462 supplied to the multiplier 201 by the control unit 452.
[0244]
In FIG. 45, the horizontal axis represents the signal level of the first luminance signal 122, and the vertical axis represents the signal level of the signal 462. The control unit 452 determines the signal level of the signal 462 to be multiplied by the third luminance signal 124 as indicated by a curve 473 according to the signal level of the first luminance signal 122, and the signal having the determined signal level. 462 is supplied to the multiplier 201.
[0245]
That is, when the signal level of the first luminance signal 122 is equal to or lower than the predetermined level X65 or higher than the predetermined level X66 greater than X65, the signal level of the signal 462 is “1”, and the first level When the signal level of the luminance signal 122 is greater than X65 and less than or equal to X66, the signal level of the signal 462 is “1” or less and the signal level L12 of the signal 211 supplied from the conversion processing unit 202. The signal level of the value on the curve 473 corresponding to the signal level of the first luminance signal 122 in a large range is obtained.
[0246]
That is, even if the conversion processing unit 202 determines that the color of the corresponding image is a skin color, if the conversion processing unit 451 determines that the brightness of the corresponding image is not appropriate for human skin, the control unit 452 determines a gain value so as not to adjust the amount of enhancement applied to the third luminance signal by the band separation amplification unit 111. In other words, the control unit 452 adjusts the enhancement amount applied to the third luminance signal by the band separation amplification unit 111 only when it is determined from the color and brightness that the corresponding image is human skin. The gain value is determined as follows.
[0247]
The multiplier 201 multiplies the supplied signal 462 by the third luminance signal 124 supplied from the band separation amplifier 111, and supplies the resultant signal to the enhancement amount adjustment unit 113 as the fourth luminance signal 463.
[0248]
The skin color adjustment processing by the image processing apparatus 110 using the skin color processing unit 450 of FIG. 42 will be described with reference to the flowchart of FIG.
[0249]
First, in step S111, the conversion processing unit 202 of the skin color processing unit 450 determines whether or not the color of the image corresponding to the third luminance signal 124 is a skin color based on the input color signals 131A and 131B. If the skin color is determined, the process proceeds to step S112, the gain value is set, and supplied to the control unit 452 as the signal 211.
[0250]
In step S113, the conversion processing unit 451 uses a look-up table as shown in FIG. 43, and based on the signal level of the first luminance signal, the brightness of the corresponding image is appropriate for human skin. It is determined whether or not the gain value is adjusted. Then, the conversion processing unit 451 supplies the determined gain value adjustment amount to the control unit 452 as a signal 461.
[0251]
In step S <b> 114, the control unit 452 adjusts the gain value supplied from the conversion processing unit 202 based on the gain value adjustment amount determined by the conversion processing unit 451, and supplies the gain value to the multiplier 201 as a signal 462.
[0252]
In step S <b> 115, the multiplier 201 multiplies the third luminance signal 124 by a gain value to generate a fourth luminance signal 463, and supplies the generated fourth luminance signal 463 to the enhancement amount adjustment unit 113. To do. The multiplier 201 that has finished the process of step S115 ends the skin color process.
[0253]
If it is determined in step S111 that the color of the image corresponding to the third luminance signal is not a skin color, the conversion processing unit 202 ends the skin color process.
[0254]
The image processing apparatus 110 repeats the above skin color processing in the skin color processing unit 450 every time the input luminance signal 121 is input.
[0255]
As described above, the skin color processing unit 450 of FIG. 42 uses the first luminance signal 122 as well as the input luminance signals 131A and 131B, and the corresponding image of the third luminance signal 124 is human skin. Is detected, and the amount of enhancement is adjusted for that portion.
[0256]
In addition, in the above, the image processing apparatus 110 uses the signal level of the first luminance signal 122 that is the edge component of the input luminance signal 121 to generate non-edge components near white and black from the fourth luminance signal 125. However, the present invention is not limited to this. For example, the fourth luminance signal is separated into a positive component and a negative component, and the positive component is positioned near white. It is also possible to detect a portion to be detected and a portion located in the vicinity of black of the negative component, and adjust the amount of enhancement for each of these portions.
[0257]
FIG. 47 is a diagram illustrating another detailed configuration example of the enhancement amount adjustment unit in FIG. 8.
[0258]
In FIG. 47, the enhancement amount adjustment unit 500 is supplied by a positive / negative separation circuit 501 and a positive / negative separation circuit 501 that separates the fourth luminance signal 125 into a positive side component (signal 511) and a negative side component (signal 512). A multiplier 502 that multiplies the positive component of the fourth luminance signal 125 by a gain value; a multiplier 503 that multiplies the negative component of the fourth luminance signal 125 supplied by the positive / negative separation circuit 501 by a gain value; A look-up table 504 for setting a gain value to be multiplied with the positive side component of the fourth luminance signal 125 according to the signal level of the first luminance signal, and a fourth value according to the signal level of the first luminance signal. Look-up table 505 for setting a gain value to be multiplied with the negative side component of the luminance signal 125, and an adder for adding the positive side component and the negative side component of the fourth luminance signal 125 multiplied with the gain value And it is made of 06.
[0259]
The positive / negative separation circuit 501 extracts a positive component from the input fourth luminance signal 125 and supplies the positive component to the multiplier 502 as a signal 511 and extracts a negative component from the input fourth luminance signal 125. The signal 512 is supplied to the multiplier 503.
[0260]
The multiplier 502 multiplies the signal 511 supplied from the positive / negative separation circuit 501 by the signal 513 supplied from the lookup table 504, and supplies the result to the adder 506.
[0261]
The multiplier 503 multiplies the signal 512 supplied from the positive / negative separation circuit 501 by the signal 515 supplied from the lookup table 504, and supplies the result to the adder 506 as a signal 516.
[0262]
The look-up table 504 holds a conversion table as shown in FIG. 48 in a built-in storage unit (not shown), and uses this conversion table to set the signal level of the input first luminance signal 122. A signal 513 having a corresponding value is output.
[0263]
The look-up table 505 holds a conversion table as shown in FIG. 48 in a built-in storage unit (not shown). By using this conversion table, the signal level of the input first luminance signal 122 is set. A signal 515 having a corresponding value is output.
[0264]
FIG. 48 is a diagram illustrating an example of a conversion table held by the look-up tables 504 and 505.
[0265]
The conversion table shown in FIG. 48A is a conversion table held by the lookup table 504. The horizontal axis represents the signal level of the input first luminance signal 122, and the vertical axis represents the output signal 513. Indicates the signal level.
[0266]
The look-up table 504 determines the signal level of the output signal 513 as shown by the curve 521 in accordance with the signal level of the input first luminance signal 122. That is, the look-up table 504 outputs a signal 513 of a predetermined signal level H12 when the signal level of the input first luminance signal 122 is equal to or lower than the predetermined level X71, and the input first luminance signal When the signal level of 122 is greater than X71, a signal 513 having a value on the curve 521 corresponding to the signal level of the input first luminance signal 122 is supplied to the multiplier 502.
[0267]
That is, the look-up table 504 outputs the signal 513 to change the input / output characteristics (the ratio of the signal level of the signal 511 and the signal 514) of the multiplier 502 as shown in FIG. Thus, the positive gain value is set so as to suppress the enhancement amount of the amplitude component in the vicinity of white by changing the rotation around the origin.
[0268]
48B is a conversion table held by the lookup table 505. The horizontal axis represents the signal level of the input first luminance signal 122, and the vertical axis represents the output signal. 515 signal levels are represented.
[0269]
The look-up table 505 determines the signal level of the signal 515 to be output as shown by the curve 522 according to the signal level of the input first luminance signal 122. That is, the look-up table 505 indicates that the value on the curve 522 corresponding to the signal level of the input first luminance signal 122 when the signal level of the input first luminance signal 122 is equal to or lower than the predetermined level X72. Is supplied to the multiplier 503. When the signal level of the input first luminance signal 122 is greater than X72, the signal 513 of the predetermined signal level H12 is supplied to the multiplier 505.
[0270]
That is, the look-up table 505 outputs the signal 515, thereby changing the input / output characteristics of the multiplier 503 as shown in FIG. 49B (the signal level ratio between the signal 514 and the signal 126) from the straight line 533 to the straight line 534. Thus, the positive gain value is set so as to suppress the enhancement amount of the amplitude component in the vicinity of black by changing the rotation around the origin.
[0271]
The adder 506 adds the signal 516 that is the negative component supplied from the multiplier 503 to the signal 514 that is the positive component supplied from the multiplier 502, and outputs the result as the fifth luminance signal 126.
[0272]
Next, enhancement amount adjustment processing by the image processing apparatus will be described with reference to the flowchart of FIG. Further, description will be made with reference to FIGS. 51 to 55 as necessary.
[0273]
First, in step S131, the positive / negative separation circuit 501 of the enhancement amount adjustment unit 500 separates the fourth luminance signal 125 into a positive component (signal 511) and a negative component (signal 512).
[0274]
FIG. 51 is a diagram illustrating an example of a waveform of a signal 511 that is a positive side component of the fourth luminance signal 125 separated by the positive / negative separation circuit 501. In FIG. 51, the signal 511 includes amplitude components 511A, 511B, and 511C corresponding to the positive side portion of the amplitude component included in the fourth luminance signal 125.
[0275]
FIG. 52 is a diagram illustrating an example of a waveform of a signal 512 that is a negative component of the fourth luminance signal 125 separated by the positive / negative separation circuit 501. In FIG. 52, the signal 512 includes amplitude components 512A, 512B, and 512C corresponding to the negative side portion of the amplitude component included in the fourth luminance signal 125. The amplitudes of these amplitude components 512A, 512B, and 512C are all equal.
[0276]
When separating the fourth luminance signal 125, the positive / negative separation circuit 501 supplies a signal 511 having a waveform as shown in FIG. 51, which is a separated positive side component, to the multiplier 502, and the separated negative side component. A signal 512 having a waveform as shown in FIG.
[0277]
In step S132, the look-up table 504 uses a conversion table as shown in FIG. 48A that is held in advance, and sets the positive gain value according to the input first luminance signal 122. The lookup table 504 supplies the set positive gain value to the multiplier 502 as a signal 513.
[0278]
In step S <b> 133, the multiplier 502 adds a signal including the positive gain value supplied from the lookup table 504 to the signal 511 that is the positive component of the fourth luminance signal 125 supplied from the positive / negative separation circuit 501. Multiply 513. The multiplier 502 supplies the multiplied signal 514 to the adder 506.
[0279]
FIG. 53 is a diagram illustrating an example of the waveform of the signal 514 output from the multiplier 502. 53, a signal 514 is a signal obtained by multiplying the signal 511 shown in FIG. 51 by the signal 513 supplied from the lookup table 504 in the multiplier 502. The amplitude component 514A corresponds to the amplitude component 511A in FIG. 51, the amplitude component 514B corresponds to the amplitude component 511B in FIG. 51, and the amplitude component 514C corresponds to the amplitude component 511C in FIG. . The amplitudes of the amplitude component 514A and the amplitude component 514B are the same, but the amplitude of the amplitude component 514C is smaller than the other amplitude components.
[0280]
The amplitude components 511A and 511B included in the signal 511 in FIG. 51 have a signal level of H12 because the signal level of the corresponding first luminance signal 122 is smaller than X71 (FIG. 48A) and is not an amplitude component near white. The signal 513 is multiplied and converted into amplitude components 514A and 514B included in the signal 514, respectively. Therefore, the amplitude components 514A and 514B in FIG. 53 have the same magnitude.
[0281]
Further, the amplitude component 511C included in the signal 511 in FIG. 51 is a signal level smaller than H12 because the signal level of the corresponding first luminance signal 122 is larger than X71 (FIG. 48A) and is an amplitude component near white. The signal 513 is multiplied and converted into an amplitude component 514C included in the signal 514. Therefore, the amplitude of the amplitude component 514C in FIG. 53 is smaller than the amplitude components 514A and 514B.
[0282]
Returning to FIG. 50, in step S134, the look-up table 505 uses a conversion table as shown in FIG. 48B, which is held in advance, and the negative gain value according to the input first luminance signal 122. Set. The lookup table 505 supplies the set negative gain value to the multiplier 503 as a signal 515.
[0283]
In step S <b> 135, the multiplier 503 adds a signal including the negative gain value supplied from the lookup table 505 to the signal 512 that is the negative component of the fourth luminance signal 125 supplied from the positive / negative separation circuit 501. Multiply 515. The multiplier 503 supplies the multiplied signal 516 to the adder 506.
[0284]
FIG. 54 is a diagram illustrating an example of the waveform of the signal 516 output from the multiplier 503. 54, a signal 516 is a signal obtained by multiplying the signal 512 shown in FIG. 52 by the signal 515 supplied from the lookup table 505 in the multiplier 503. The amplitude component 516A corresponds to the amplitude component 512A in FIG. 52, the amplitude component 516B corresponds to the amplitude component 512B in FIG. 52, and the amplitude component 516C corresponds to the amplitude component 512C in FIG. . The amplitudes of the amplitude component 516B and the amplitude component 516C are the same, but the amplitude of the amplitude component 516A is smaller than the other amplitude components.
[0285]
The amplitude components 512B and 512C included in the signal 512 of FIG. 52 have a signal level of H12 because the signal level of the corresponding first luminance signal 122 is higher than X72 (FIG. 48B) and is not an amplitude component near black. Signal 515 is multiplied and converted into amplitude components 516B and 516C included in signal 516, respectively. Therefore, the amplitude components 516B and 516C in FIG. 54 have the same amplitude.
[0286]
Also, the amplitude component 512A included in the signal 512 of FIG. 52 is a signal level lower than H12 because the signal level of the corresponding first luminance signal 122 is X72 (FIG. 48B) or less and is an amplitude component near black. The signal 515 is multiplied and converted into an amplitude component 516A included in the signal 516. Accordingly, the amplitude of the amplitude component 516A in FIG. 54 is smaller than the amplitude components 516B and 516C.
[0287]
Returning to FIG. 50, in step S <b> 136, the adder 506 adds the signal 516 that is the negative component supplied from the multiplier 503 to the signal 514 that is the positive component supplied from the multiplier 502, and 5 luminance signals 126 are generated.
[0288]
FIG. 55 is a diagram illustrating an example of a waveform of an output luminance signal obtained by adding the first luminance signal to the fifth luminance signal output from the enhancement processing unit 500.
[0289]
In FIG. 55, the output luminance signal 127 includes amplitude components 127A, 127B, and 127C. Since the amplitude component 127A is an amplitude component in the vicinity of white, the amount of emphasis on the lower side of the amplitude is suppressed so as not to exceed the lower limit value L13 of the gradation level. Similarly, since the amplitude component 127C is an amplitude component in the vicinity of black, the enhancement amount on the upper side of the amplitude is suppressed so as not to exceed the upper limit value H13 of the gradation level.
[0290]
The image processing apparatus 110 repeats the above-described enhancement amount adjustment processing in the enhancement amount adjustment unit 500 every time the input luminance signal 121 is input.
[0291]
As described above, the enhancement amount adjustment unit 500 in FIG. 47 separates the input fourth luminance signal 125 into the positive component (signal 511) and the negative component (signal 512), and the enhancement amount of each component. Therefore, the contrast can be further improved in the vicinity of white or black.
[0292]
Further, in the above, the image processing apparatus 110 uses the color signal before adjustment and the color signal after adjustment when adjusting the level of the color signal according to the correction amount of the luminance signal, thereby eliminating the color disappearance. However, the present invention is not limited to this. For example, a color signal obtained by mixing a color signal after adjustment and a signal before and after adjustment may be used.
[0293]
FIG. 56 is a diagram showing another configuration example of the color signal level adjustment unit of FIG.
[0294]
In FIG. 56, the color signal level adjustment unit 550 includes colors before and after being multiplied by the adjustment amount based on the correction amount of the luminance signal by the divider 301, the multipliers 302A and 302B, the comparators 303A and 303B, and the multiplier 302A. The output of the mixer 551B and the comparator 303A for mixing the Cr components of the color signal before and after being multiplied by the adjustment amount based on the correction amount of the luminance signal by the mixer 551A and the multiplier 302B for mixing the Cb component of the signal. Based on the selector 552A that selects one of the output of the mixer 551A and the output of the multiplier 302A and outputs the selected signal to the outside of the color signal level adjustment unit 550. Similarly, the output of the mixer 551B, and The selector 552B selects one of the outputs from the multiplier 302B and outputs the selected signal to the outside of the color signal level adjustment unit 550. It is.
[0295]
The mixer 551A mixes the input color signal 131A and the signal 312A, which is the input color signal 131A multiplied by the color signal gain value by the multiplier 302A, at a predetermined ratio, and supplies the mixed signal 561A to the selector 552A. The ratio at which the mixer 551A mixes the input color signal 131A and the signal 312A is set in advance and is held in a built-in storage unit (not shown) or the like. For example, when the mixing ratio is set to 4 to 6, the mixer 551A adds the input color signal 131A obtained by multiplying the signal level by 0.4 and the signal 312A obtained by multiplying the signal level by 0.6, A signal 561A obtained by mixing the color signal 131A and the signal 312A is generated.
[0296]
Similarly, the mixer 551B mixes the input color signal 131B and the signal 312B, which is the input color signal 131B multiplied by the color signal gain value by the multiplier 302B, at a predetermined ratio, and the mixed signal 561B is sent to the selector 552B. Supply. The ratio at which the mixer 551B mixes the input color signal 131B and the signal 312B is set in advance and is held in a built-in storage unit (not shown) or the like.
[0297]
The selector 552A selects one of the input signal 312A and the signal 561A based on the signal 313A supplied from the comparator 303A, and outputs the selected signal as an output color signal 132A to the outside of the image processing apparatus 110.
[0298]
Similarly, the selector 552B selects one of the input signal 312B and the signal 561B based on the signal 313B supplied from the comparator 303B, and outputs it as an output color signal 132B to the outside of the image processing apparatus 110. Output.
[0299]
In the divider 301, the color signal level adjustment unit 550 divides the input luminance signal 121, which is the luminance signal before correction, from the signal 127, which is the luminance signal in which the non-edge component is emphasized, to obtain the luminance signal in the image processing apparatus. The amount of correction is calculated. The color signal level adjustment unit 115 multiplies the input color signal 131A, which is the Cb component of the color signal, by the multiplier 302A, and the input color signal 131A and the color signal after multiplication by the mixer 551A. A signal 312A which is a Cb component of the input signal is mixed, the comparator 303A compares the input color signal 131A with the signal 312A, and the selector 552A mixes the input color signal 131A and the signal 312A based on the comparison result. Either 561A or signal 312A is selected and output as an output color signal 132A.
[0300]
Also, the color signal level adjustment unit 550 uses the multiplier 302B, the comparator 303B, the mixer 551B, and the selector 552B for the input color signal 131B as in the case of the input color signal 131A. Is selected, and one of the signal 312B and the signal 561B is selected and output as the output color signal 132B.
[0301]
Next, another example of color signal level adjustment processing by the image processing apparatus 110 will be described with reference to the flowchart of FIG. Further, description will be made with reference to FIGS. 58 to 62 as necessary.
[0302]
In the color signal level adjustment processing, the input color signal 131B that is the Cr component of the color signal is input to the input color signal 131A that is the Cb component of the color signal by the multiplier 302B, the comparator 303B, the mixer 551B, and the selector 552B. Are processed in the same manner as when processed by the multiplier 302A, the comparator 303A, the mixer 551A, and the selector 552A. Therefore, in the following, the input color signals 131A and 131B, the multipliers 302A and 302B, the comparators 303A and 303B, the mixers 551A and 551B, and the selectors 552A and 552B are not distinguished from each other. , Multiplier 302, comparator 303, mixer 551 and selector 552. Accordingly, the signals 312A and 312B, the signals 313A and 313B, the signals 561A and 561B, and the output color signals 132A and 132B are not distinguished from each other, and are simply the signal 312, the signal 313, the signal 561, and the output color signal. 132.
[0303]
First, in step S171, when the divider 301 of the color signal level adjustment unit 550 acquires the output luminance signal 127 and the input luminance signal 121, the divider 301 divides the output luminance signal 127 by the input luminance signal 121, and the result of the division. A color signal gain value is calculated. Then, the divider 301 supplies the calculated color signal gain value to the multiplier 302.
[0304]
In step S <b> 172, the multiplier 302 to which the signal 311 including the color signal gain value is supplied multiplies the input color signal 131 by the signal 311 and supplies the signal 312 to the comparator 303 and the mixer 551.
[0305]
FIG. 58 is a diagram showing an example of the waveform of the input color signal 131. As shown in FIG. 58, the signal level of the input color signal 131 is “0” in the section from time “0” to time X81, and the signal level is M14 in the section from time X81 to time X82. It becomes. In the section from time X82 to time X84, the input color signal 131 swings around M14 with the maximum value being H14 and the minimum value being L14. At this time, the signal level of the input color signal 131 at time X83 is M14. Then, the signal level of the input color signal 131 is M14 in the section from time X84 to time X85, and the signal level is “0” in the section after time X85.
[0306]
An input signal 131 shown in FIG. 58 is multiplied by a signal 311 in a multiplier 302 and converted into a signal 312. FIG. 59 is a diagram illustrating an example of the waveform of the signal 312. As shown in FIG. 59, the signal level of the signal 312 is “0” in the section from time “0” to time X81, and the signal level is M14 in the section from time X81 to time X82. . In the section from the time X82 to the time X84, the signal 312 swings around M14 with the maximum value as H15 and the minimum value as L15. At this time, the signal level of the signal 312 at time X83 is M14. The signal level of the signal 312 is M14 in the section from the time X84 to the time X85, and the signal level is “0” in the section after the time X85.
[0307]
In step S <b> 173, the mixer 551 mixes the signal 312 supplied from the multiplier 302 and the input signal 131 at a predetermined ratio set in advance, and supplies a signal 561 as a mixing result to the selector 552.
[0308]
FIG. 60 is a diagram illustrating an example of the waveform of the signal 561. The signal 561 is a signal obtained by mixing the input color signal 131 in FIG. 58 and the signal 312 in FIG. 59 at a predetermined ratio. 58 and 59, the waveforms of the input color signal 131 and the signal 312 are different from each other only in the amplitude components in the section from the time X82 to the time X84, and the same waveform in the other sections. It has become. Therefore, as shown in FIG. 60, the signal level of the signal 561 is “0” in the section from time “0” to time X81, and the signal level is M14 in the section from time X81 to time X82. Thus, in the section from time X82 to time X84, the amplitude is centered on M14 and the maximum value is H16 and the minimum value is L16. At this time, H16 is greater than H14 and less than H15, and L16 is greater than L14 and less than L15. The signal level of the signal 561 is M14 in the section from the time X84 to the time X85, and the signal level is “0” in the section after the time X85.
[0309]
In step S174 of FIG. 57, the comparator 303 compares the signal level of the signal 312 supplied from the multiplier 302 with the signal level of the input color signal 131, and supplies a signal 313 as a comparison result to the selector 552.
[0310]
FIG. 61 is a diagram illustrating an example of a waveform of a signal 313 that is a comparison result output from the comparator 303. The comparator 303 compares the signal level of the input signal 131 in FIG. 58 with the signal level of the signal 312 in FIG. 59, and the signal 313 is a binary signal whose value is changed according to the comparison result. That is, in FIG. 61, the signal level of the signal 313 takes a value “1” in the section from the time “0” to the time X83, for example, and the signal level of the input color signal 131 is not higher than the signal level of the signal 312. In the section from the time X83 to the time X84, the value “0” is taken, and the signal level of the input color signal 131 is larger than the signal level of the signal 312. In the section after the time X84, the value “1” is obtained. ”Represents that the signal level of the input color signal 131 is not higher than the signal level of the signal 312.
[0311]
In step S175, the selector 552 determines whether the signal level of the input color signal 131 is higher than the signal level of the signal 312 based on the supplied signal 313. If it is determined that the signal level of the input color signal 131 is higher, the selector 552 proceeds to step S176, selects the signal 561, and outputs it as the output color signal 132. The selector 552 that has output the output color signal 132 ends the color signal level adjustment processing.
[0312]
If it is determined in step S175 that the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 and the signal level of the input color signal 131 is not higher, the selector 552 performs the process in step S177. Then, the signal 312 is selected and output as the output color signal 132. The selector 552 that has output the output color signal 132 ends the color signal level adjustment processing.
[0313]
That is, the selector 552 selects the signal 312 shown in FIG. 59 and the signal 561 shown in FIG.
[0314]
FIG. 62 is a diagram showing an example of the waveform of the output color signal 132. As shown in FIG. 62, the signal level of the output color signal 132 is “0” in the section from time “0” to time X81, and the signal level is M14 in the section from time X81 to time X82. It becomes. In the section from time X82 to time X84, the output color signal 132 has an amplitude with the maximum value as H15 and the minimum value as L16. At this time, the signal level of the output color signal 132 at time X83 is M14. The signal level of the output color signal 132 is M14 in the section from time X84 to time X85, and the signal level is “0” in the section after time X85.
[0315]
That is, since the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 in the section from the time “0” to the time X83, the selector 552 selects the signal 312 and outputs it as the output color signal 132. To do. Further, since the signal level of the input color signal 131 is higher than the signal level of the signal 312 in the section from the time X83 to the time X84, the selector 552 selects the signal 561 and outputs it as the output color signal 132. Further, since the signal level of the signal 312 is equal to or higher than the signal level of the input color signal 131 in the section after the time X84, the selector 552 selects the signal 312 and outputs it as the output color signal 132.
[0316]
The image processing apparatus 110 repeats the color signal level adjustment process as described above in the color signal level adjustment unit 550 every time the input luminance signal 121 is input.
[0317]
As described above, as the output color signal 132, the signal having the higher signal level is applied to the signal obtained by mixing the signal before the signal level is adjusted and the signal before and after the adjustment. Is prevented from becoming “0”. Thereby, the image processing apparatus 110 can prevent the color disappearance of the image corresponding to the signal, which occurs in the processing of the color signal, and can improve the contrast. The output color signal 132 is output to the outside of the image processing apparatus 110.
[0318]
As described above, the image processing apparatus 110 adjusts the correction amount according to the signal level of the luminance signal, and performs more effective correction processing on the input luminance signal 121 and the input color signals 131A and 131B. I do.
[0319]
The series of processes described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, a program constituting the software executes various functions by installing a computer incorporated in dedicated hardware or various programs. For example, a general-purpose personal computer is installed from a network or a recording medium.
[0320]
FIG. 63 shows a configuration example of a personal computer that executes the above processing. A CPU (Central Processing Unit) 601 of the personal computer 600 executes various processes according to a program stored in the ROM 602 or a program loaded from the storage unit 623 to the RAM 603. The RAM 603 also appropriately stores data necessary for the CPU 601 to execute various processes.
[0321]
The CPU 601, ROM 602, and RAM 603 are connected to each other via a bus 610. An input / output interface 620 is also connected to the bus 610.
[0322]
The input / output interface 620 includes an input unit 621 including a keyboard and a mouse, a display including a CRT and an LCD, an output unit 622 including a speaker, a storage unit 623 including a hard disk, a modem, a terminal adapter, and the like. A configured communication unit 624 is connected. The communication unit 624 performs communication processing via a network.
[0323]
A drive 630 is connected to the input / output interface 620 as necessary, and a magnetic disk 631, an optical disk 632, a magneto-optical disk 633, a semiconductor memory 634, and the like are appropriately mounted, and a computer program read from them is loaded. It is installed in the storage unit 623 as necessary.
[0324]
The recording medium on which the program is recorded is distributed to provide the program to the user separately from the computer, and the magnetic disk 631 (including the flexible disk) on which the program is recorded, the optical disk 632 (CD-ROM ( (Comprising Compact Disk-Read Only Memory), DVD (Digital Versatile Disk)), magneto-optical disk 633 (including MD (Mini-Disk) (trademark)), semiconductor memory 634, etc. Instead, it is configured by a ROM 602 storing a program, a hard disk included in the storage unit 623, and the like provided to the user in a state of being incorporated in the apparatus main body in advance.
[0325]
In the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in chronological order according to the described order, but is not necessarily performed in chronological order. It also includes processes that are executed individually.
[0326]
【The invention's effect】
As described above, according to the present invention, it is possible to more accurately separate an input signal into a component having a sharp signal level change and storing a large edge, and a component other than that.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a configuration example of a conventional image processing apparatus.
2 is a diagram illustrating an example of a relationship between a signal 23 input to an enhancement processing unit in FIG. 1 and a signal output from a noise removal filter. FIG.
FIG. 3 is a diagram illustrating an example of signal changes in the image processing apparatus of FIG. 1;
4 is a diagram illustrating input / output characteristics of the gradation conversion unit of FIG. 1;
5 is a diagram illustrating an example of a waveform of an input / output signal of the image processing apparatus of FIG. 1. FIG.
6 is a diagram illustrating a detailed configuration example of a color signal level adjustment unit in FIG. 1; FIG.
7 is a diagram illustrating an example of a waveform of an input / output color signal of the color signal level adjustment unit in FIG. 6;
FIG. 8 is a diagram illustrating a configuration example of an image processing apparatus to which the present invention has been applied.
FIG. 9 is a diagram illustrating a detailed configuration example of a band separation amplification unit in FIG. 8;
10 is a diagram illustrating an example of a look-up table held by the emphasis processing unit and in FIG. 9;
FIG. 11 is a diagram illustrating a detailed configuration example of a skin color processing unit in FIG. 8;
12 is a diagram illustrating an example of a skin color detection table held by the conversion processing unit of FIG. 11;
13 is a diagram illustrating a detailed configuration example of an enhancement amount adjustment unit in FIG. 8;
14 is a diagram showing an example of a conversion table held in the lookup table of FIG.
FIG. 15 is a diagram showing a change in input / output characteristics of the multiplier shown in FIG. 13;
16 is a diagram illustrating a detailed configuration example of a color signal level adjustment unit in FIG. 8;
FIG. 17 is a flowchart for describing enhancement processing by the image processing apparatus of FIG. 8;
18 is a flowchart continued from FIG. 17 for explaining the enhancement processing by the image processing apparatus of FIG. 8;
19 is a diagram showing an example of a waveform of a low frequency component signal extracted by the low pass filter of FIG. 9;
20 is a diagram illustrating an example of a waveform of a high-frequency component signal extracted by the adder of FIG. 9;
FIG. 21 is a diagram illustrating an example of a waveform of a low frequency component signal emphasized by the enhancement processing unit of FIG. 9;
22 is a diagram illustrating an example of a waveform of a high-frequency component signal emphasized by the enhancement processing unit of FIG. 9;
23 is a diagram illustrating an example of a waveform of a third luminance signal output from the band separation amplification unit in FIG. 9;
24 is a flowchart illustrating skin color adjustment processing by the image processing apparatus in FIG.
25 is a flowchart illustrating enhancement amount adjustment processing by the image processing apparatus in FIG.
FIG. 26 is a diagram illustrating an example of a waveform of a fourth luminance signal supplied to the multiplier of FIG.
27 is a diagram illustrating an example of a waveform of a fifth luminance signal output from the multiplier in FIG. 13;
FIG. 28 is a diagram illustrating an example of a waveform of an output luminance signal corresponding to the fifth luminance signal of FIG.
29 is a flowchart for describing color signal level adjustment processing by the image processing apparatus of FIG. 8;
FIG. 30 is a diagram illustrating an example of a waveform of an input luminance signal.
FIG. 31 is a diagram illustrating an example of a waveform of an output luminance signal.
32 is a diagram showing an example of a waveform of an output signal of the midwife 301 of FIG.
FIG. 33 is a diagram illustrating an example of a waveform of an input color signal.
34 is a diagram illustrating an example of a waveform of an output signal of the multiplier 302 in FIG.
FIG. 35 is a diagram illustrating an example of a waveform of an output color signal.
FIG. 36 is a diagram illustrating another configuration example of an image processing apparatus to which the present invention has been applied.
FIG. 37 is a diagram illustrating still another configuration example of the image processing apparatus to which the present invention has been applied.
38 is a diagram illustrating an example of a lookup table held by the enhancement processing unit in FIG. 37. FIG.
FIG. 39 is a flowchart for describing enhancement processing by the image processing apparatus in FIG. 37;
40 is a diagram illustrating an example of a waveform of a second luminance signal supplied to the enhancement processing unit in FIG. 37. FIG.
41 is a diagram illustrating an example of a waveform of an output signal of the enhancement processing unit in FIG. 37. FIG.
42 is a diagram illustrating another detailed configuration example of the skin color processing unit in FIG. 8;
43 is a diagram showing an example of a look-up table held in advance by the conversion processing unit in FIG.
44 is a diagram showing an example of a look-up table held in advance by the control unit shown in FIG.
45 is a diagram illustrating a relationship between the signal level of the first luminance signal and the signal level of the output signal of the control unit in FIG. 42;
46 is a flowchart for describing skin color adjustment processing by the image processing apparatus using the skin color processing unit of FIG. 42;
47 is a diagram illustrating another detailed configuration example of the enhancement amount adjustment unit in FIG. 8. FIG.
48 is a diagram showing an example of a conversion table held by the lookup table of FIG. 47. FIG.
49 is a diagram showing an example of changes in input / output characteristics of the multiplier shown in FIG. 47;
FIG. 50 is a flowchart illustrating enhancement amount adjustment processing by the image processing apparatus.
51 is a diagram showing an example of the waveform of the positive side component of the fourth luminance signal separated by the positive / negative separation circuit of FIG. 47;
52 is a diagram showing an example of the waveform of the negative side component of the fourth luminance signal separated by the positive / negative separation circuit of FIG. 47;
53 is a diagram showing an example of the waveform of the positive side component output from the multiplier of FIG. 47. FIG.
54 is a diagram showing an example of a negative-side component waveform output from the multiplier shown in FIG. 47;
55 is a diagram illustrating an example of a waveform of an output luminance signal corresponding to the fifth luminance signal output from the enhancement processing unit in FIG. 47;
56 is a diagram illustrating another configuration example of the color signal level adjustment unit in FIG. 16;
FIG. 57 is a flowchart illustrating another example of color signal level adjustment processing by the image processing apparatus.
58 is a diagram showing an example of a waveform of an input color signal input to the color signal level adjustment unit in FIG. 56. FIG.
59 is a diagram showing an example of a waveform of an output signal of the multiplier shown in FIG. 56. FIG.
60 is a diagram illustrating an example of a waveform of an output signal of the mixer in FIG. 56. FIG.
61 is a diagram illustrating an example of a waveform of a signal that is a comparison result output from the comparator of FIG. 56;
62 is a diagram showing an example of a waveform of an output color signal output from the color signal level adjustment unit in FIG. 56. FIG.
FIG. 63 illustrates a configuration example of a personal computer to which the present invention has been applied.
[Explanation of symbols]
110 image processing device, 111 band separation amplification unit, 112 skin color processing unit, 113 enhancement amount adjustment unit, 114 adder, 115 color signal level adjustment unit, 151 low-pass filter, 152 enhancement processing unit, 153 and 154 adder, 155 enhancement Processing unit, 171 and 172 curve, 201 multiplier, 202 conversion processing unit, 223 and 224 region, 251 lookup table, 252 multiplier, 271 curve, 301 divider, 302A and 302B multiplier, 303A and 303B comparator, 304A and 304B selector, 400 image processing device, 401 band separation amplification unit, 402 skin color processing unit, 403 enhancement amount adjustment unit, 404 synthesis circuit, 405 and 406 adder, 420 image processing device, 421 enhancement processing unit, 441 curve, 450 skin Processing unit, 451 conversion processing unit, 452 control unit, 500 enhancement processing unit, 501 positive / negative separation circuit, 502 and 503 multiplier, 504 and 505 look-up table, 506 adder, 521 and 522 curve, 550 color signal level adjustment unit , 551A and 551B mixer, 552A and 552B selector, 601 CPU, 602 ROM, 603 RAM, 621 input unit, 623 storage unit, 624 communication unit

Claims (18)

輝度信号を、信号レベルの変化が急峻で大きなエッジを保存した成分であるエッジ成分と、それ以外の成分である非エッジ成分に分離し、非エッジ成分を増幅する信号処理装置であって、
入力された前記輝度信号である入力輝度信号を、前記エッジ成分、および、前記非エッジ成分に分離する入力輝度信号分離手段と、
前記入力輝度信号分離手段により分離された前記非エッジ成分に基づいて、前記非エッジ成分の増幅量を設定し、前記非エッジ成分を増幅する非エッジ成分増幅手段と、
入力色信号に基づいて、第１のゲインを設定し、前記非エッジ成分増幅手段により増幅された前記非エッジ成分に前記第１のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第１の信号レベル調整手段と、
前記入力輝度信号分離手段により分離された前記エッジ成分に基づいて、第２のゲインを設定し、前記第１の信号レベル調整手段により前記信号レベルが調整された前記非エッジ成分に前記第２のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第２の信号レベル調整手段と、
前記第２の信号レベル調整手段により前記信号レベルが調整された前記非エッジ成分と、前記入力輝度信号分離手段により分離された前記エッジ成分を加算する輝度信号加算手段と、
前記入力輝度信号、前記輝度信号加算手段による加算結果からなる出力輝度信号、および前記入力色信号に基づいて、前記入力色信号の信号レベルを調整する第３の信号レベル調整手段と
を備えることを特徴とする信号処理装置。A signal processing apparatus that separates a luminance signal into an edge component that is a component that has a sharp signal level change and stores a large edge, and a non-edge component that is a component other than that, and amplifies the non-edge component,
Input luminance signal separation means for separating the input luminance signal, which is the inputted luminance signal, into the edge component and the non-edge component;
Non-edge component amplification means for setting the amplification amount of the non-edge component based on the non-edge component separated by the input luminance signal separation means, and amplifying the non-edge component;
A first gain is set based on an input color signal, the non-edge component amplified by the non-edge component amplifying means is multiplied by the first gain, and a signal level of the non-edge component is adjusted. 1 signal level adjusting means;
A second gain is set based on the edge component separated by the input luminance signal separation unit, and the second edge component is adjusted to the non-edge component whose signal level is adjusted by the first signal level adjustment unit. Second signal level adjusting means for multiplying the gain and adjusting the signal level of the non-edge component;
A luminance signal adding means for adding the non-edge component whose signal level has been adjusted by the second signal level adjusting means and the edge component separated by the input luminance signal separating means;
A third signal level adjusting unit that adjusts a signal level of the input color signal based on the input luminance signal, an output luminance signal that is an addition result by the luminance signal adding unit, and the input color signal. A characteristic signal processing apparatus. 前記非エッジ成分増幅手段は、前記入力輝度信号分離手段により分離された前記非エッジ成分の信号レベルの絶対値が所定の第１の閾値より大きい場合、前記増幅量を小さくする
ことを特徴とする請求項１に記載の信号処理装置。The non-edge component amplification means reduces the amplification amount when the absolute value of the signal level of the non-edge component separated by the input luminance signal separation means is larger than a predetermined first threshold value. The signal processing apparatus according to claim 1. 前記非エッジ成分増幅手段は、
前記入力輝度信号分離手段により分離された前記非エッジ成分より低周波成分を抽出する低周波成分抽出手段と、
前記入力輝度信号分離手段により分離された前記非エッジ成分より高周波成分を抽出する高周波成分抽出手段と、
前記低周波成分抽出手段により抽出された前記低周波成分に基づいて、前記低周波成分の増幅量を決定し、前記低周波成分を増幅する低周波成分増幅手段と、
前記高周波成分抽出手段により抽出された前記高周波成分に基づいて、前記高周波成分の増幅量を決定し、前記高周波成分を増幅する高周波成分増幅手段と
を備えることを特徴とする請求項１に記載の信号処理装置。The non-edge component amplification means includes
Low frequency component extraction means for extracting a low frequency component from the non-edge component separated by the input luminance signal separation means;
High-frequency component extraction means for extracting a high-frequency component from the non-edge component separated by the input luminance signal separation means;
Low frequency component amplification means for determining an amplification amount of the low frequency component based on the low frequency component extracted by the low frequency component extraction means, and amplifying the low frequency component;
The high-frequency component amplification means for determining the amplification amount of the high-frequency component based on the high-frequency component extracted by the high-frequency component extraction means and amplifying the high-frequency component. Signal processing device. 前記高周波成分抽出手段は、前記入力輝度信号分離手段により分離された前記非エッジ成分から、前記低周波成分抽出手段により抽出された前記低周波成分を減算して前記高周波成分を抽出する
ことを特徴とする請求項３に記載の信号処理装置。The high-frequency component extraction unit subtracts the low-frequency component extracted by the low-frequency component extraction unit from the non-edge component separated by the input luminance signal separation unit, and extracts the high-frequency component. The signal processing apparatus according to claim 3 . 前記低周波成分増幅手段は、前記低周波成分抽出手段により抽出された前記低周波成分の信号レベルの絶対値が所定の閾値より大きい場合、前記低周波成分の増幅量を小さくする
ことを特徴とする請求項３に記載の信号処理装置。The low frequency component amplifying unit reduces the amplification amount of the low frequency component when the absolute value of the signal level of the low frequency component extracted by the low frequency component extracting unit is larger than a predetermined threshold value. The signal processing device according to claim 3 . 前記低周波成分増幅手段により増幅された前記低周波成分と、前記高周波成分増幅手段により増幅された前記高周波成分を加算する周波数成分加算手段をさらに備える
ことを特徴とする請求項３に記載の信号処理装置。The signal according to claim 3 , further comprising frequency component addition means for adding the low frequency component amplified by the low frequency component amplification means and the high frequency component amplified by the high frequency component amplification means. Processing equipment. 前記第１の信号レベル調整手段は、
前記入力色信号に基づいて、前記非エッジ成分の、対応する画像の色を検出し、検出された前記画像の色に基づいて、前記第１のゲインの値を設定する色検出ゲイン値設定手段と、
前記色検出ゲイン値設定手段により値が設定された前記第１のゲインを前記非エッジ成分に乗算する色ゲイン乗算手段と
を備えることを特徴とする請求項１に記載の信号処理装置。The first signal level adjusting means includes:
Color detection gain value setting means for detecting the color of the corresponding image of the non-edge component based on the input color signal and setting the first gain value based on the detected color of the image When,
The signal processing apparatus according to claim 1, further comprising: a color gain multiplication unit that multiplies the non-edge component by the first gain whose value is set by the color detection gain value setting unit. 前記色検出ゲイン値設定手段は、検出された前記画像の色が予め定められた所定の色である場合、前記第１のゲインの値を「１」より小さい値に設定し、前記画像の色が前記所定の色以外の色である場合、前記第１のゲインの値を「１」に設定する
ことを特徴とする請求項７に記載の信号処理装置。The color detection gain value setting means sets the first gain value to a value smaller than “1” when the detected color of the image is a predetermined color, and the color of the image The signal processing device according to claim 7 , wherein when the color is a color other than the predetermined color, the value of the first gain is set to “1”. 前記所定の色は肌色である
ことを特徴とする請求項８に記載の信号処理装置。The signal processing apparatus according to claim 8 , wherein the predetermined color is a skin color. 前記第１の信号レベル調整手段は、
前記エッジ成分に基づいて、前記非エッジ成分の、対応する画像の明度を検出し、検出された前記画像の明度に基づいて、前記色設定ゲイン値設定手段により値が設定された前記第１のゲインの値の調整量を設定するゲイン値調整量設定手段と、
前記ゲイン値調整量設定手段により設定された前記第１のゲインの値の調整量に基づいて、前記第１のゲインの値を調整するゲイン値調整手段と
をさらに備え、
前記色ゲイン乗算手段は、前記ゲイン値調整手段により値が調整された前記第１のゲインを前記非エッジ成分に乗算する
ことを特徴とする請求項７に記載の信号処理装置。The first signal level adjusting means includes:
Based on the edge component, the brightness of the corresponding image of the non-edge component is detected, and the value set by the color setting gain value setting means is set based on the detected brightness of the image. A gain value adjustment amount setting means for setting an adjustment amount of the gain value;
Gain value adjusting means for adjusting the value of the first gain based on the adjustment amount of the first gain value set by the gain value adjustment amount setting means;
The signal processing apparatus according to claim 7 , wherein the color gain multiplication unit multiplies the non-edge component by the first gain whose value is adjusted by the gain value adjustment unit. 前記第２の信号レベル調整手段は、
前記エッジ成分の信号レベルを検出し、前記第２のゲインの値を設定する明度検出ゲイン値設定手段と、
前記明度検出ゲイン値設定手段により値が設定された前記第２のゲインを、前記非エッジ成分に乗算する明度ゲイン乗算手段と
を備えることを特徴とする請求項１に記載の信号処理装置。The second signal level adjusting means includes:
Brightness detection gain value setting means for detecting the signal level of the edge component and setting the value of the second gain;
2. The signal processing apparatus according to claim 1, further comprising: a lightness gain multiplication unit that multiplies the non-edge component by the second gain whose value is set by the lightness detection gain value setting unit. 前記明度検出ゲイン値設定手段は、検出された前記エッジ成分の信号レベルが予め定められた所定の第１の閾値より小さい場合、または、前記画像の明度が前記第１の閾値より大きい所定の第２の閾値よりさらに大きい場合、前記第２のゲインの値を小さい値に設定する
ことを特徴とする請求項１１に記載の信号処理装置。The lightness detection gain value setting means is configured to output a predetermined first signal level when the detected signal level of the edge component is lower than a predetermined first threshold value or when the lightness value of the image is higher than the first threshold value. The signal processing device according to claim 11 , wherein when the value is larger than a threshold value of 2, the value of the second gain is set to a small value. 前記第２の信号レベル調整手段は、前記第１の信号レベル調整手段により前記信号レベルが調整された前記非エッジ成分を正側成分および負側成分に分離する正負分離手段をさらに備え、
前記明度検出ゲイン値設定手段は、前記エッジ成分の信号レベルを検出し、前記正負分離手段により分離された正側成分および負側成分について、前記第２のゲインの値をそれぞれ設定し、
前記明度ゲイン乗算手段は、前記明度検出ゲイン値設定手段により値が設定された前記正側成分に対する前記第２のゲインである正側ゲインを前記正側成分に乗算し、前記明度検出ゲイン値設定手段により値が設定された前記負側成分に対する前記第２のゲインである負側ゲインを前記負側成分に乗算する
ことを特徴とする請求項１１に記載の信号処理装置。The second signal level adjusting means further comprises positive / negative separating means for separating the non-edge component whose signal level has been adjusted by the first signal level adjusting means into a positive side component and a negative side component,
The brightness detection gain value setting means detects the signal level of the edge component, and sets the second gain value for the positive side component and the negative side component separated by the positive / negative separation means,
The lightness gain multiplying unit multiplies the positive side component, which is the second gain with respect to the positive side component, the value of which is set by the lightness detection gain value setting unit, and sets the lightness detection gain value The signal processing apparatus according to claim 11 , wherein the negative side component is multiplied by a negative side gain that is the second gain for the negative side component whose value is set by means. 前記第３の信号レベル調整手段は、
前記入力輝度信号および前記出力輝度信号より、前記輝度信号の増幅量を算出する増幅量算出手段と、
前記増幅量算出手段により算出された前記増幅量を乗算して前記入力色信号の信号レベルを調整する入力色信号レベル調整手段と、
前記入力色信号レベル調整手段による信号レベル調整処理前後の前記入力色信号の信号レベルを比較する比較手段と、
前記比較手段による比較結果に基づいて、前記入力色信号レベル調整手段による前記信号レベル調整処理前後の前記入力色信号の内、いずれか一方を出力色信号として選択する色信号選択手段と
を備えることを特徴とする請求項１に記載の情報処理装置。The third signal level adjusting means includes
Amplification amount calculation means for calculating an amplification amount of the luminance signal from the input luminance signal and the output luminance signal;
Input color signal level adjusting means for adjusting the signal level of the input color signal by multiplying the amplification amount calculated by the amplification amount calculating means;
Comparison means for comparing the signal levels of the input color signals before and after the signal level adjustment processing by the input color signal level adjustment means;
Color signal selection means for selecting one of the input color signals before and after the signal level adjustment processing by the input color signal level adjustment means as an output color signal based on the comparison result by the comparison means. The information processing apparatus according to claim 1. 前記第３の信号レベル調整手段は、
前記入力色信号レベル調整手段による前記信号レベル調整処理前後の前記入力色信号を、予め定められた所定の割合で混合する混合手段をさらに備え、
前記色信号選択手段は、
前記信号レベル調整処理後の前記入力色信号の信号レベルが、前記信号レベル調整処理前の前記入力色信号の信号レベルより大きい場合、前記信号レベル調整処理後の前記入力色信号を前記出力色信号として選択し、
前記信号レベル調整処理後の前記入力色信号の信号レベルが、前記信号レベル調整前の前記入力色信号の信号レベルより小さい場合、前記混合手段の混合結果を前記出力色信号として選択する
ことを特徴とする請求項１４に記載の情報処理装置。The third signal level adjusting means includes
The apparatus further comprises mixing means for mixing the input color signals before and after the signal level adjustment processing by the input color signal level adjusting means at a predetermined ratio.
The color signal selection means includes
When the signal level of the input color signal after the signal level adjustment process is higher than the signal level of the input color signal before the signal level adjustment process, the input color signal after the signal level adjustment process is converted to the output color signal. Select as
When the signal level of the input color signal after the signal level adjustment processing is smaller than the signal level of the input color signal before the signal level adjustment, the mixing result of the mixing unit is selected as the output color signal. The information processing apparatus according to claim 14 . 輝度信号を、信号レベルの変化が急峻で大きなエッジを保存した成分であるエッジ成分と、それ以外の成分である非エッジ成分に分離し、非エッジ成分を増幅する信号処理装置の信号処理方法であって、
入力された前記輝度信号である入力輝度信号を、前記エッジ成分、および、前記非エッジ成分に分離する入力輝度信号分離ステップと、
前記入力輝度信号分離ステップの処理により分離された前記非エッジ成分に基づいて、前記非エッジ成分の増幅量を設定し、前記非エッジ成分を増幅する非エッジ成分増幅ステップと、
入力色信号に基づいて、第１のゲインを設定し、前記非エッジ成分増幅ステップの処理により増幅された前記非エッジ成分に前記第１のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、
前記入力輝度信号分離ステップの処理により分離された前記エッジ成分に基づいて、第２のゲインを設定し、前記第１の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分に前記第２のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、
前記第２の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分と、前記入力輝度信号分離ステップの処理により分離された前記エッジ成分を加算する輝度信号加算ステップと、
前記入力輝度信号、前記輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、前記入力色信号の信号レベルを調整する第３の信号レベル調整ステップと
を含むことを特徴とする信号処理方法。A signal processing method of a signal processing apparatus that separates a luminance signal into an edge component that is a component having a sharp signal level change and preserves a large edge and a non-edge component that is a component other than that, and amplifies the non-edge component. There,
An input luminance signal separation step of separating the input luminance signal which is the inputted luminance signal into the edge component and the non-edge component;
A non-edge component amplification step of setting an amplification amount of the non-edge component based on the non-edge component separated by the processing of the input luminance signal separation step, and amplifying the non-edge component;
Based on the input color signal, a first gain is set, the non-edge component amplified by the processing of the non-edge component amplification step is multiplied by the first gain, and the signal level of the non-edge component is adjusted. A first signal level adjustment step to:
A second gain is set based on the edge component separated by the process of the input luminance signal separation step, and the non-edge component having the signal level adjusted by the process of the first signal level adjustment step is set. A second signal level adjustment step of multiplying the second gain to adjust the signal level of the non-edge component;
A luminance signal addition step of adding the non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step and the edge component separated by the processing of the input luminance signal separation step;
And a third signal level adjustment step of adjusting a signal level of the input color signal based on the input luminance signal, an output luminance signal obtained as a result of addition by the processing of the luminance signal addition step, and an input color signal. A signal processing method characterized by the above. 輝度信号を、信号レベルの変化が急峻で大きなエッジを保存した成分であるエッジ成分と、それ以外の成分である非エッジ成分に分離し、非エッジ成分を増幅する信号処理装置用のプログラムであって、
入力された前記輝度信号である入力輝度信号を、前記エッジ成分、および、前記非エッジ成分に分離する入力輝度信号分離ステップと、
前記入力輝度信号分離ステップの処理により分離された前記非エッジ成分に基づいて、前記非エッジ成分の増幅量を設定し、前記非エッジ成分を増幅する非エッジ成分増幅ステップと、
入力色信号に基づいて、第１のゲインを設定し、前記非エッジ成分増幅ステップの処理により増幅された前記非エッジ成分に前記第１のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、
前記入力輝度信号分離ステップの処理により分離された前記エッジ成分に基づいて、第２のゲインを設定し、前記第１の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分に前記第２のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、
前記第２の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分と、前記入力輝度信号分離ステップの処理により分離された前記エッジ成分を加算する輝度信号加算ステップと、
前記入力輝度信号、前記輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、前記入力色信号の信号レベルを調整する第３の信号レベル調整ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。This is a program for a signal processing apparatus that separates a luminance signal into an edge component that is a component with a sharp signal level change and preserves a large edge and a non-edge component that is a component other than that, and amplifies the non-edge component. And
An input luminance signal separation step of separating the input luminance signal which is the inputted luminance signal into the edge component and the non-edge component;
A non-edge component amplification step of setting an amplification amount of the non-edge component based on the non-edge component separated by the processing of the input luminance signal separation step, and amplifying the non-edge component;
Based on the input color signal, a first gain is set, the non-edge component amplified by the processing of the non-edge component amplification step is multiplied by the first gain, and the signal level of the non-edge component is adjusted. A first signal level adjustment step to:
A second gain is set based on the edge component separated by the process of the input luminance signal separation step, and the non-edge component having the signal level adjusted by the process of the first signal level adjustment step is set. A second signal level adjustment step of multiplying the second gain to adjust the signal level of the non-edge component;
A luminance signal addition step of adding the non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step and the edge component separated by the processing of the input luminance signal separation step;
And a third signal level adjustment step of adjusting a signal level of the input color signal based on the input luminance signal, an output luminance signal obtained as a result of addition by the processing of the luminance signal addition step, and an input color signal. A recording medium on which a computer-readable program is recorded. 輝度信号を、信号レベルの変化が急峻で大きなエッジを保存した成分であるエッジ成分と、それ以外の成分である非エッジ成分に分離し、非エッジ成分を増幅する信号処理装置を制御するコンピュータが実行可能なプログラムであって、
入力された前記輝度信号である入力輝度信号を、前記エッジ成分、および、前記非エッジ成分に分離する入力輝度信号分離ステップと、
前記入力輝度信号分離ステップの処理により分離された前記非エッジ成分に基づいて、前記非エッジ成分の増幅量を設定し、前記非エッジ成分を増幅する非エッジ成分増幅ステップと、
入力色信号に基づいて、第１のゲインを設定し、前記非エッジ成分増幅ステップの処理により増幅された前記非エッジ成分に前記第１のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第１の信号レベル調整ステップと、
前記入力輝度信号分離ステップの処理により分離された前記エッジ成分に基づいて、第２のゲインを設定し、前記第１の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分に前記第２のゲインを乗算し、前記非エッジ成分の信号レベルを調整する第２の信号レベル調整ステップと、
前記第２の信号レベル調整ステップの処理により前記信号レベルが調整された前記非エッジ成分と、前記入力輝度信号分離ステップの処理により分離された前記エッジ成分を加算する輝度信号加算ステップと、
前記入力輝度信号、前記輝度信号加算ステップの処理による加算結果からなる出力輝度信号、および入力色信号に基づいて、前記入力色信号の信号レベルを調整する第３の信号レベル調整ステップと
を含むことを特徴とするプログラム。A computer that controls a signal processing device that separates a luminance signal into an edge component that has a sharp signal level change and preserves a large edge, and a non-edge component that is a component other than that, and amplifies the non-edge component An executable program,
An input luminance signal separation step of separating the input luminance signal which is the inputted luminance signal into the edge component and the non-edge component;
A non-edge component amplification step of setting an amplification amount of the non-edge component based on the non-edge component separated by the processing of the input luminance signal separation step, and amplifying the non-edge component;
Based on the input color signal, a first gain is set, the non-edge component amplified by the processing of the non-edge component amplification step is multiplied by the first gain, and the signal level of the non-edge component is adjusted. A first signal level adjustment step to:
A second gain is set based on the edge component separated by the process of the input luminance signal separation step, and the non-edge component having the signal level adjusted by the process of the first signal level adjustment step is set. A second signal level adjustment step of multiplying the second gain to adjust the signal level of the non-edge component;
A luminance signal addition step of adding the non-edge component whose signal level is adjusted by the processing of the second signal level adjustment step and the edge component separated by the processing of the input luminance signal separation step;
And a third signal level adjustment step of adjusting a signal level of the input color signal based on the input luminance signal, an output luminance signal obtained as a result of addition by the processing of the luminance signal addition step, and an input color signal. A program characterized by
JP2002150058A 2002-05-24 2002-05-24 Signal processing apparatus and method, recording medium, and program Expired - Fee Related JP3997833B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002150058A JP3997833B2 (en) 2002-05-24 2002-05-24 Signal processing apparatus and method, recording medium, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002150058A JP3997833B2 (en) 2002-05-24 2002-05-24 Signal processing apparatus and method, recording medium, and program

Publications (3)

Publication Number Publication Date
JP2003348615A JP2003348615A (en) 2003-12-05
JP2003348615A5 JP2003348615A5 (en) 2005-09-29
JP3997833B2 true JP3997833B2 (en) 2007-10-24

Family

ID=29768001

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002150058A Expired - Fee Related JP3997833B2 (en) 2002-05-24 2002-05-24 Signal processing apparatus and method, recording medium, and program

Country Status (1)

Country Link
JP (1) JP3997833B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4832900B2 (en) * 2006-01-11 2011-12-07 パナソニック株式会社 Image output apparatus, image output method, and computer program
JP2011090569A (en) 2009-10-23 2011-05-06 Sony Corp Image processing apparatus and image processing method

Also Published As

Publication number Publication date
JP2003348615A (en) 2003-12-05

Similar Documents

Publication Publication Date Title
EP2216988B1 (en) Image processing device and method, program, and recording medium
JP4556276B2 (en) Image processing circuit and image processing method
EP2160020B1 (en) Image processing apparatus for performing gradation correction on subject image
US7853095B2 (en) Apparatus, method, recording medium and program for processing signal
US20050123214A1 (en) Image processing method and apparatus, and image processing program
US8265418B2 (en) Image processing apparatus, image processing method, and computer-readable storage medium for calculating a depth value of a subject in an image
JPH0944654A (en) Image processing device and method therefor, and noise eliminating device and method therefor
US20100128332A1 (en) Image signal processing apparatus and method, and program
US6915023B2 (en) Contour correction device
JP4639037B2 (en) Image processing method and apparatus
KR101031153B1 (en) Apparatus and method for signal processing
JP4109001B2 (en) Image quality correction method
WO2005122552A1 (en) Image processing device, method, and program
JP4096613B2 (en) Image processing method and image processing apparatus
JP4497959B2 (en) Video signal processing apparatus and video signal processing method
JP3997833B2 (en) Signal processing apparatus and method, recording medium, and program
JP2000278529A (en) Image processor, image processing method and recording medium recorded with image processing program
JP5381354B2 (en) Image processing apparatus, image processing method, program, and storage medium
JP4457787B2 (en) Video signal processing apparatus and method, and program
JP4120928B2 (en) Image processing apparatus, image processing method, and program thereof
JP5135134B2 (en) Image processing apparatus and method
JP2003224718A (en) Image processing method and image processor
JP5199650B2 (en) Image processing apparatus and image processing method
JP4303061B2 (en) Image processing apparatus and method, and program
KR100603061B1 (en) Color transient improvement apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050428

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050428

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070706

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070717

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070730

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100817

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110817

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110817

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120817

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees