JP3913356B2

JP3913356B2 - Image processing method

Info

Publication number: JP3913356B2
Application number: JP06652598A
Authority: JP
Inventors: 文人竹本
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 1998-03-17
Filing date: 1998-03-17
Publication date: 2007-05-09
Anticipated expiration: 2018-03-17
Also published as: JPH11266358A

Description

【０００１】
【発明の属する技術分野】
本発明は、写真や印刷物等の反射原稿、ネガフィルム、リバーサルフィルム等の透過原稿に担持されるカラー原画像から、特定の色を持つ被写体を抽出して、この特定領域の被写体に応じて所定画像処理を行う画像処理方法に関する。
【０００２】
【従来の技術】
近年、ネガフィルム、リバーサルフィルム等の写真フィルムや印刷物等に記録された画像情報を光電的に読み取って、読み取った画像をデジタル画像信号とした後、種々の画像処理を施して記録用デジタル画像信号とし、この画像信号に応じて変調された記録光ビームによって印画紙等の感光材料を走査露光して潜像を形成し、現像処理して仕上がりプリントとするデジタルフォトプリンタが提案され、現在本出願人によって実用化されている。
【０００３】
このようなデジタルフォトプリンタは、写真フィルムに記録された画像を光電的に読み取る画像読取装置と、読み取った画像に所望の画像処理を施すとともに画像記録の露光条件を決定する画像処理装置と、決定された露光条件に従って処理済画像を感光材料に走査露光した後現像処理を施して可視像として再生する画像再生装置とから構成される。
【０００４】
このようなデジタルフォトプリンタでは、読取画像がデジタル画像信号化されているため、複数画像の合成や画像の分割等の編集や、文字と画像との編集等のプリント画像のレイアウトや、色／濃度調整、変倍率、輪郭強調等の各種の画像処理も自由に行うことができ、用途に応じて自由に編集および画像処理を施した仕上りプリントを出力することができる。また、仕上りプリント画像を画像情報としてフロッピーディスク等の記録媒体に保存できるので、焼増し等の際に、原稿となる写真フィルムや印刷物等を用意する必要がなく、かつ再度露光条件を決定する必要がないので迅速かつ簡易に作業を行うことができる。
さらに、従来の直接露光によるプリントでは、分解能、色／濃度再現性等の制約から、フィルム等に記録されている画像をすべて再生することはできないが、デジタルフォトプリンタによればフィルムに記録されている画像（濃度情報）をほぼ１００％再生したプリントが出力可能である。
【０００５】
ところで、写真フィルム等に撮影された画像の撮影条件は一定ではなく、ストロボ撮影や逆光シーン等、明暗（濃度）の差、すなわちダイナミックレンジが非常に広い場合がある。これに対し、一般に、フィルムの担持画像を再生するための印画紙等の感光材料が記録可能な被写体画像のダイナミックレンジ（輝度レンジ）は、比較的広いものではあるが、印画紙等の感光材料はその最大濃度が制限されているため、フィルムに記録可能な被写体画像のダイナミックレンジ（輝度レンジ）に比べると狭い。
【０００６】
このような場合、写真フィルム上のカラー原画像を通常の印画紙に露光してプリントを作成すると、ハイライト部またはシャドウ部のディテールが再現できない場合がある。例えば、人物を逆光下で撮影した場合、人物が明瞭な画像となるように露光を行うと、空のような明るい部分は白く飛んでしまい、逆に、空が明瞭な画像となるように露光を行うと、人物が黒くつぶれてしまう。そこで、従来の写真焼付装置では、覆い焼きやマスキングプリントというような方法が用いられている。
【０００７】
覆い焼きとは、シーンの中の中間的な濃度の領域には通常の露光を与え、プリント上で白くとびそうな領域に穴あき遮蔽板を使って選択的に長時間露光を与えたり、逆にプリント上で黒くつぶれそうな領域には遮蔽板を用いて選択的に露光時間を短くすることにより、個々の被写体のコントラストを維持し、かつ明部・暗部のつぶれのないプリントを得る方法である。このように局部的に露光時間を制御する遮蔽板として、原画フィルムのネガポジを反転したボケ像を写真的に作成したものを用いて、原画フィルムとボケ画像フィルムとを重ねてプリントを行う方法が提案されている。しかし、ボケ画像フィルムを作成するには手間と時間がかかる。
また、写真原画の照明光源の明るさを部分的に変化させることにより、覆い焼きと同様の効果を得ることができるマスキングプリント方法もよく知られているが、マスキングプリントでは、再生される画像に関係なく用意された複数の遮蔽板を操作するので、極めて高度な技術を必要とする。
【０００８】
このため、本出願人は、デジタルフォトプリンタにおいて従来の覆い焼きやマスキングプリント等と同等もしくはこれ以上の効果を挙げることのできるダイナミックレンジ圧縮技術を特願平７−１６５９６５号、同７−３３７５０９号および同８−１６６４６号明細書において提案している。
【０００９】
特願平７−１６５９６５号明細書に記載の発明は、カラー原画像に対してボケ画像を作成し、カラー原画像からボケ画像を減算し、こうして得られた差信号に所定の信号処理を施し、可視画像として再生するもので、いわば電子的に覆い焼き処理を行う技術を開示している。また、特願平７−３３７５０９号明細書に記載の発明は、カラー原画像に対して無限インパルス応答フィルタ（ＩＩＲフィルタ）によるデジタル処理によりボケ画像を作成し、このボケ画像に基づき、カラー原画像のダイナミックレンジ圧縮処理を行う技術を開示している。これらの技術によれば、画像全体のコントラストは弱められているものの、ハイライト部およびシャドウ部内の細かなコントラストは残っているため、ハイライト部がとばず、シャドウ部がつぶれることがない画像が得られるという効果を奏する。
しかしながら、上記の特願平７−１６５９６５号および特願平７−３３７５０９号明細書に記載のデジタル画像処理技術においては、ダイナミックレンジの圧縮処理に伴い、コントラストの大きい輪郭部分に偽輪郭が発生することがあるという問題があった。
【００１０】
一方、特願平８−１６６４６号明細書に記載の発明は、カラー原画像に対してメディアンフィルタによるボケ画像を作成し、カラー原画像からボケ画像を減算して差信号を得、この差信号に所定の信号処理を施し、可視画像として再生するものである。この技術は、メディアンフィルタを用いることにより、上記の偽輪郭の問題点をある程度解決しているが、ここに挙げた技術はいづれもコントラストの高い画像を対象にしており、カラー原画像に対するダイナミックレンジの圧縮処理を基本原理とするもので、コントラストの低い画像、例えば曇天時のような画像は考慮されていないという問題があった。
【００１１】
【発明が解決しようとする課題】
ところで、カラー原画像をプリント画像として仕上げる場合、カラー原画像に上述したダイナミックレンジ圧縮伸長処理などを含む種々の画像処理が施されるが、画像処理によっては、カラー画像全体の色再現は良好であっても、人物の肌などの特定の領域においては、粒状などのノイズが目立ってしまう場合があるという問題があった。例えば、ダイナミックレンジ圧縮処理後階調を立てる階調変換処理を行ったり、シャープネス処理を掛けたり、見えを良くするために彩度を上げたりすると、人物の肌などの粒状などのノイズが目立つようになるという問題があった。
【００１２】
一方、カラー原画像の中で人物の肌色や青空色や緑色等の重要色が占める特定の被写体領域、すなわち人物の顔や、青空や、緑色の草木などの特定領域には、背景領域と別の特別な画像処理を行いたい場合がある。例えば、カラー原画像の忠実な色再現より、人物の肌色の明度を上げ、肌色をもっと明るい好ましい色に仕上げたり、草木の緑色の彩度を上げ、緑色を鮮やかに仕上げる画像処理が好ましい、あるいは要求される場合がある。
このため、カラー原画像から人物の肌色などの特定領域を抽出する場合、カラー原画像において、色空間の特定領域を指定し、この領域内に存在する画素のみを抽出する方法がある。しかし、この方法では、カラー原画像自体には高周波成分、すなわちノイズ成分が含まれているため、人物の肌色などの特定領域を正確に抽出することができない場合があるという問題があった。
また、この方法では、特定領域を大きく設定した場合には、人物の肌色以外のものも一緒に抽出されることになるし、反対に特定領域を小さく設定すると、人物の肌色を見落とすことになるという問題があった。
【００１３】
本発明の目的は、上記従来技術の問題点を解消し、カラー原画像から、特定の色を持つ被写体、例えば人物の肌色などの重要色が占める特定領域を精度良く抽出して、特定領域に応じた画像処理を行う、例えば、人物の肌色などの特定領域に粒状などのノイズを目立たせることなく、また偽輪郭を発生させることなく、覆い焼きなどのダイナミックレンジ圧縮伸長処理などの画像処理を行うことができる画像処理方法を提供することにある。
【００１４】
【課題を解決するための手段】
上記目的を解決するために、本発明は、カラー原画像を表すデジタル原画像信号を可視像として再生するための画像処理信号を得る画像処理方法であって、
このデジタル原画像信号に対してエッジ保存平滑化フィルタによるフィルタリング処理を施して前記原画像のボケ画像を表すボケ画像信号を生成し、
このボケ画像信号から前記ボケ画像に対して抽出対象となる画素を抽出し、これらの画素に対応する前記原画像の抽出対象画素の特定領域を抽出し、
この特定領域に応じて所定画像処理を行い、
前記エッジ保存平滑化フィルタは、メディアンフィルタおよびローパスフィルタであり、前記メディアンフィルタによる第１のボケ画像信号と前記ローパスフィルタによる第２のボケ画像信号とを重み付け加算して前記ボケ画像信号を生成することを特徴とする画像処理方法を提供するものである。
【００１５】
ここで、前記所定画像処理は、前記ボケ画像信号に基づいて前記デジタル原画像信号に対して前記原画像のダイナミックレンジ圧縮伸長処理を施して、伸縮処理済画像信号を得た後に、この伸縮処理済画像信号に前記特定領域を除いて階調変換を行うのが好ましい。
【００１６】
また、前記ボケ画像に対する画素抽出は、予め設定しておいた色空間内の特定範囲に存在する画素を抽出することによって行うのが好ましい。
また、前記抽出対象画素の特定領域は、人物の肌色、空のシアン色、あるいは草木の緑色のようなゆるやかなグラデーションを持つ重要色の領域であるのが好ましい。
【００１７】
また、前記カラー原画像の前記デジタル画像信号の間引き信号を補間した信号を前記ローパスフィルタに入力して、第２のボケ画像信号を生成するのが好ましい。また、前記ローパスフィルタは、無限インパルス応答フィルタであるのが好ましい。
【００１８】
【発明の実施の形態】
本発明に係る画像処理方法を添付の図面に示す好適実施形態に基づいて以下に詳細に説明する。
【００１９】
図１は、本発明の画像処理方法を実施する画像再生装置の一実施例の模式図である。
図１に示すように、本発明の画像処理方法を実施する画像再生装置１０は、デジタルフォトプリンタとして構成されるものであって、原稿となる写真フィルムＡに撮影されたカラー原画像を光電的に読み取る画像読取装置１２と、この画像読取装置１２によって読み取られたデジタル画像信号を本発明の画像処理方法に従ってデジタル画像処理する画像処理装置１４と、この画像処理装置１４から出力された処理済画像信号を、可視像（ハードコピー画像）として感光材料Ｚ上に再生する画像記録装置１６および可視像（ソフトコピー画像）として表示画面上に表示するモニタ１８とを有する。
【００２０】
画像読取装置１２は、写真フィルムＡに撮影された画像を光電的に読み取る装置であって、光源２０と、光源２０から射出される光量を調整する可変絞り２２と、光源２０からの光をＲ（赤）、Ｇ（緑）およびＢ（青）の３色に分解するためのＲ、ＧおよびＢの３枚の色フィルタを有し、回転して任意の色フィルタを光路に挿入するための色フィルタ板２４と、この色フィルタ板２４の各色フィルタを透過した光を拡散させて写真フィルムＡの２次元平面を均一に照明するための拡散ボックス２６と、写真フィルムＡを透過した読取光をＣＣＤ３０に結像するための結像レンズ２８と、結像レンズ２８によって結像された写真フィルムＡの１枚（１コマ）の画像を光電的に読み取るエリア（２次元）センサであるＣＣＤ３０と、ＣＣＤ３０によって読み取られたＲＧＢ３色の画像信号を増幅するアンプ３２と、増幅された画像信号をＡ／Ｄ変換するＡ／Ｄ変換器３４と、得られたデジタル画像信号を対数変換して濃度信号とするための第１のルックアップテーブル（以下、第１ＬＵＴという）３６とを有する。
【００２１】
このような画像読取装置１２においては、光源２０から射出され、絞り２２によって光量調整され、色フィルタ板２４を通過して色分解され、拡散ボックス２６で拡散された読取光が写真フィルムＡを透過することにより、写真フィルムＡに撮影された画像で変調された透過光が得られる。この透過光は、結像レンズ２８によって写真フィルムＡの画像の１枚（１コマ）分がＣＣＤ３０の受光面に結像され、ＣＣＤ３０によって光電的に読み取られる。ＣＣＤ３０からの出力信号は、アンプ３２で増幅され、Ａ／Ｄ変換器３４によってデジタル信号化され、ＬＵＴ３６で濃度信号とされた後、写真フィルムＡに撮影された画像の濃度変換デジタル画像信号が入力画像情報として画像処理装置１４に送られる。画像読取装置１２では、このような画像読取を、色フィルタ板２４のＲ、ＧおよびＢの色フィルタを順次光路に挿入することにより、写真フィルムＡに撮影された画像をＲ、ＧおよびＢの３原色に分解して読み取って、入力画像情報を得ることができる。なお、画像読取装置の画像読取方法は、エリアＣＣＤ３０の代わりにラインセンサを相対的に移動する方法でもよいし、ドラムスキャナのようにスポット測光する方法であってもよい。
【００２２】
次に、画像処理装置１４は、画像読取装置１２から供給されるＲＧＢ３色のデジタル画像信号を入力画像情報として各色毎に格納するフレームメモリ３８と、フレームメモリ３８に格納された入力画像情報を用いて各種の画像処理条件の設定を行う画像処理条件設定部４０と、設定された画像処理条件に従って本発明の特徴である特定領域、例えば肌色の領域の座標の抽出および抽出された特定領域に応じた画像処理やダイナミックレンジ圧縮伸長処理等を含む各種画像処理を行う画像処理部４２とを有する。
画像読取装置１２によって読み取られた写真フィルムＡの１コマの画像のＲＧＢ３色のデジタル画像信号は、各色毎にフレームメモリ３８に格納された後、読み出されて、画像処理条件設定部４０および画像処理部４２に送られる。
【００２３】
ここで、画像処理条件設定部４０は、セットアップ部４４と、キー補正部４６と、パラメータ統合部４８とを有する。
セットアップ部４４は、画像処理条件を設定するためにあり、オートセットアップアルゴリズムを実行するためのＣＰＵを含み、フレームメモリ３８に記憶されたデジタル画像信号から、オートセットアップアルゴリズムによって、濃度ヒストグラムの作成、最高濃度、最低濃度およびダイナミックレンジの算出等を行って、ダイナミックレンジ伸縮率を設定し、更に、マトリクス演算、画像処理アルゴリズム、画像処理テーブル等を用いて、色／濃度処理条件等の画像処理条件を設定する。より具体的には、各種の変換テーブル、補正テーブル、処理テーブル等を作成し、あるいは調整する。
【００２４】
まず、セットアップ部４４で行われる濃度ヒストグラムの作成、ダイナミックレンジの算出およびダイナミックレンジ伸縮率の設定について説明する。セットアップ部４４は、まずフレームメモリ３８から１コマの画像信号を読み出して、オートセットアップアルゴリズムにより、濃度ヒストグラムを作成する。この時、濃度ヒストグラム作成処理の迅速化および簡略化や処理回路の小規模化を図るために、図示しない読み出しタイミングコントローラなどの間引処理手段によってフレームメモリ３８から読み出される画像信号を間引いて（読み出した後間引いてまたは間引いて読み出して）、セットアップ部４４に供給し、間引かれた画像信号で濃度ヒストグラムを作成するようにしてもよい。なお、濃度ヒストグラムは、ＲＧＢの３色についてそれぞれ作成される。
セットアップ部４４では、これらのＲＧＢ３色の濃度ヒストグラムを用いて白黒信号を生成する。この白黒信号は、３色の信号の加算平均信号、または、標準比視感度を考慮した、下記式で表される輝度信号Ｙを用いる。
Ｙ＝０．３Ｒ＋０．５９Ｇ＋０．１１Ｂ
ここで、Ｒ、Ｇ、Ｂは各カラー信号である。
【００２５】
ここで、図２に示すように１コマ中の３種の異なる絵柄（シーン）について、３種の輝度Ｙについての濃度ヒストグラムが得られたものとする。図２において実線で示す濃度ヒストグラムａは、中間濃度の頻度が高い晴天時等の画像を表すヒストグラムであり、その濃度ダイナミックレンジＤＲ_aはＹ_{max a}−Ｙ_{min a}である。また、一点鎖線で示す濃度ヒストグラムｂは、中間濃度の頻度が低いが高濃度域および低濃度域での頻度が高いためコントラストが高い画像を表すヒストグラムであり、その濃度ダイナミックレンジＤＲ_bはＹ_{max b}−Ｙ_{min b}である。さらに、破線で示す濃度ヒストグラムｃは、中間濃度のみが多く、高低両濃度が極めて少なく、コントラストの低い曇天時等の画像を表すヒストグラムであり、その濃度ダイナミックレンジＤＲ_cはＹ_{max c}−Ｙ_{min c}である。
【００２６】
なお、図２には印画紙等にプリントされた標準的なシーンの濃度ダイナミックレンジを、標準濃度レンジＤＲ_oとして表示している。なお、標準濃度レンジＤＲ_oをはみ出るヒストグラムａおよびｂの場合、そのままプリントすると、原画像のハイライト部は白く飛び、シャドウ部は黒くつぶれることになる。
このため、本発明においては、コントラストの高い画像であっても低い画像であっても、安定して適切な仕上りを得るために、濃度ヒストグラムａおよびｂで示される画像は、ダイナミックレンジの圧縮を行い、濃度ヒストグラムｃで示される画像は、ダイナミックレンジの伸長を行う必要がある。そこで、本発明においては、濃度ヒストグラムから最高濃度Ｙ_maxおよび最低濃度Ｙ_minの差を濃度ダイナミックレンジでＤＲとし、ダイナミックレンジ伸縮率αを次の式に従って算出する； α＝１−ＤＲ_o／ＤＲ（ここに、ＤＲ_oは、対象とする感光材料のプリント再現域内に再生可能な、数十種のシーンの平均濃度ダイナミックレンジ）。この定義に従って、伸縮率α＞０の時、カラー原画像のダイナミックレンジは圧縮され、伸縮率α＜０の時、カラー原画像のダイナミックレンジは伸長される。すなわち、元のダイナミックレンジＤＲは、αの正負に関わらず、（ＤＲ−α・ＤＲ）＝ＤＲ_oに変換されるのである。
【００２７】
このようにして、セットアップ部４４ではオートセットアップアルゴリズムによって伸縮率αが自動的に算出されるが、本発明においては、オペレータがカラー原画像のシーンを目視判断して、伸縮率αを決定し、キー補正部４６によって入力してもよい。
キー補正部４６は、図３に示される調整キー４７によるオペレータのキー補正に応じて、上述した伸縮率αを含む各種の画像処理条件の補正量を演算する。図示例の調整キー４７では、一例として、濃度Ｄ、シアン濃度Ｃ、マゼンタ濃度Ｍ、イエロー濃度Ｙ、階調γ、カラー原画像全体の伸縮率α、カラー原画像中のハイライト部の伸縮率α_l、シャドウ部の伸縮率α_dを、それぞれ調整することができるようにしている。
オペレータは、後述するモニタ１８に表示された画像を見ながら検定を行い、必要に応じて各パラメータの（＋）キーおよび（−）キーを押圧して、所望の状態に画像を調整することもできる。それぞれの補正量は、キーの押圧回数に応じて調整される。なお、オペレータによる調整は、このようなキー操作以外にも、モニタ１８に調整キー４７に対応する表示、例えばスライダー等を表示し、マウス６６やキーボード操作で調整を行う方法であってもよい。
【００２８】
ここでオペレータは、本発明の特徴とする特定領域の抽出処理を行うために、キー補正部４６で、またはマウス６６やキーボード操作で、抽出すべき色、または３色の色濃度、または色度、もしくはその範囲を指定または設定してもよい。また、オペレータは、モニタ１８の表示画像を見ながら検定を行う際に、抽出すべき特定の色を持つ領域をマウス６６やキーボード操作等を用いて点または領域として指定し、指定された点または領域の画像データから抽出すべき色や色度やその範囲を取得するようにしてもよい。なお、この色や色度の範囲の指定や設定は、特定の色が予め画像処理装置１４に設定されている場合には、オートセットアップアルゴリズムに行わせてもよい。このようにして抽出される特定領域の色（色度）範囲が、画像処理条件の一つとして設定される。また、本発明において特定領域として抽出処理すべき色は、主要被写体の色であれば、特に制限されないが、特に、人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色であるのが好ましい。
【００２９】
パラメータ統合部４８は、セットアップ部４４によって設定された画像処理条件と、キー補正部４６による補正量とを統合して、抽出すべき色の範囲等を含む最終的な画像処理条件を設定する。なお、調整キー４７による入力が無い場合には、ここで最終的に設定される画像処理条件は、セットアップ部４４のオートセットアップアルゴリズムによって設定された画像処理条件となる。このように、パラメータ統合部４８は、画像処理条件を統合して、画像処理部４２中の第２ルックアップテーブル（以下、第２ＬＵＴという）５０、乗算器ＭＵＬ５６、特定領域抽出手段５９、第３ルックアップテーブル（以下、第３ＬＵＴという）６０に送る。なお、調整キー４７からの入力があり、先にパラメータ統合部４８で設定された画像処理条件が変更されると、これに応じてモニタ１８の表示画像も変化する。
画像条件設定手段４０は以上のように構成されるが、オペレータによる調整をモニタ１８上でマウス６６等による操作で行う場合には、キー補正部４６を省略してもよい。また、マウス操作に伴うＧＵＩ出力をセットアップ部４４に直接反映させてもよい。
【００３０】
一方、画像処理部４２は、フレームメモリ３８に記憶された画像情報を読み出し、画像条件設定手段４０で設定された画像処理条件に応じて所定の画像処理を施し、画像記録装置１６によるプリントＰ出力のための出力画像情報とする手段であって、第２ＬＵＴ５０、マトリクス演算器（ＭＴＸ）５２、フィルタ（ＦＩＬ）５４、乗算器（ＭＵＬ）５６、減算器５８、本発明の特徴とする肌色などの特定領域の座標を抽出する特定領域抽出手段（ＥＸＴ）５９および第３ＬＵＴ６０を有する。
【００３１】
第２ＬＵＴ５０は、フレームメモリ３８に記憶された入力画像情報を読み出し、濃度、グレイバランス、γのそれぞれを補正する処理を行うもので、それぞれの補正や調整を行うためのテーブルがカスケード接続されて構成されている。第２ＬＵＴ５０の各テーブルは、前述の画像条件設定手段４０のパラメータ統合部４８で設定され、あるいは調整される。なおここに、グレイバランス調整とは無彩色を無彩色として再現するための調整をいう。
【００３２】
図４に第２ＬＵＴ５０に設定されるテーブルの一例を示す。図４中の（ａ）はグレイバランスの補正テーブルで、セットアップ部４４はオートセットアップアルゴリズムにより、算出された最高濃度および最低濃度から、グレイバランスを取るためにこの調整テーブルを作成する。また、図３の調整キー４７からの入力があった場合には、パラメータ統合部４８でこの補正量とセットアップ部４４が作成した補正テーブルとが統合され、調整テーブルのＲ、ＧおよびＢの各テーブルの傾きが更に調整される。図４中の（ｂ）は濃度の補正テーブルで、セットアップ部４４は、作成した濃度ヒストグラムや最高濃度および最低濃度から、オートセットアップアルゴリズムを用いて、この補正テーブルを作成する。また、この補正テーブルも、図３の調整キー４７からの入力で更に調整され得る。図４中の（ｃ）はγの補正テーブルで、セットアップ部４４は、作成した濃度ヒストグラムや最高濃度および最低濃度から、オートセットアップアルゴリズムを用いて、この補正テーブルを作成する。また、この補正テーブルも、図３の調整キー４７の入力によって更に調整され得る。
【００３３】
次にマトリクス演算器５２は、第２ＬＵＴ５０で処理されたＲＧＢ３色の画像信号の色補正を行うものである。
マトリクス演算器５２で色補正処理された画像信号は、減算器５８と、特定領域抽出処理やダイナミックレンジの圧縮伸長処理を行うためのボケ画像信号を生成するためのフィルタ５４との両方に送られる。なお、特定領域抽出処理やダイナミックレンジ圧縮伸長処理を施さない場合は、ボケ画像信号の生成は行われないため、マトリクス演算器５２の出力だけが減算器５８を通って第３ＬＵＴ６０に入力される。このダイナミックレンジで圧縮伸長処理の有無は、オペレータからの指示、または画像条件設定手段４０からの指示で行う。
【００３４】
ボケ画像を生成するフィルタ５４としては、メディアンフィルタ等のエッジ平滑化フィルタが好適である。ここで、メディアンフィルタは、画像信号の中の大きなエッジは保存し、細かい構造は２次元的にぼかすためのボケマスクフィルタであり、図５に示すような特性を持つ。ここで、ボケマスクサイズが小さ過ぎると細かい構造の濃淡が残ったボケマスクになり、一方、ボケマスクサイズが大き過ぎると主要被写体が小さいときにボケマスクの効果があまり現れなかったり、演算量が多くなって装置の規模が大きくなってしまうという欠点が生じる。本出願人による各種シーンに対する実験の結果によれば、１３５型写真フィルムの場合のボケマスクサイズは２０×２０から５×５程度が好ましい。
【００３５】
フィルタ５４としてメディアンフィルタを用いることにより、従来のローパスフィルタ（ＬＰＦ）のみでカラー原画像の低周波成分のみを取り出して、カラー原画像を２次元的にボケて、ボケ画像信号を得る場合に生じていたエッジ部のだれや偽輪郭の発生などを防止することができ、エッジを保存しておいて、非エッジ部のノイズを除去した画像を得ることが可能となる。ところで、フィルタ５４としてメディアンフィルタを用いると、エッジを保存して平滑化することができるが、上述したようにメディアンフィルタはマスクサイズを適切に選択しなければ、エッジ保存平滑化フィルタとしてのボケマスク効果を十分に得ることができない場合がある。
【００３６】
このため、本発明において用いられるフィルタ５４を図６のように構成するのがより好ましい。図１中のフィルタ５４の相当する部分は、図６に示されたように、メディアンフィルタ（ＭＦ）５４ａとローパスフィルタ（ＬＰＦ）５４ｂの並列接続部分に重み付け加算手段５４ｃを直列接続した部分である。このようにフィルタ５４を構成すれば、エッジ情報を十分に保存し、かつ超低周波成分の情報のみを拾うことができる。
【００３７】
さらにここで用いられるローパスフィルタ５４ｂとしては、ボケ画像生成に通常用いられる有限インパルス応答（ＦＩＲ）型のローパスフィルタを用いてもよいが、小型の回路で大きく画像をボカたボケ画像情報を生成できる点で、無限インパルス応答（ＩＩＲ) 型のローパスフィルタを用いるのが好ましい。図７にＩＩＲ型のローパスフィルタの一例を示す。図示例のローパスフィルタは、順方向に加算器が配置され、フィードバック方向に遅延回路が配置されている構成を含むものである。なお、本発明に用いることのできるＩＩＲ型のローパスフィルタとしては、本出願人の出願にかかる特願平７−３３７５０９号公報に記載されたＩＩＲ型のローパスフィルタを用いることができる。
このようにしてフィルタ５４で生成されたＲＧＢ３色の各色のボケ画像信号は、乗算器５６および特定領域抽出手段５９に送られる。
【００３８】
ここで、乗算器５６は、フィルタ５４から送られた各色のボケ画像信号と各色毎に画像条件設定手段４０から受け取ったダイナミックレンジ伸縮率αとを乗算する。
ところで、写真フィルムＡに撮影可能な画像の濃度領域は、一般的に仕上りプリントにおける再現域よりも広く、種々の濃度範囲の被写体が写真フィルムＡに様々な濃度ダイナミックレンジ（ＤＲ）を持つ画像として撮影できるようになっている。例えば、晴天時の画像のように広い濃度ダイナミックレンジを持つ画像もあれば、曇天時の画像のように狭い濃度ダイナミックレンジを持つ画像もあるし、広いダイナミックレンジを持ち、コントラストの高い画像もある。また、雪中シーンや逆光シーンやストロボ撮影の画像などのように、ハイライト部またシャドウ部に、仕上りプリントの再現域を大きく超えて偏った濃度範囲の画像の場合もある。さらに、写真フィルムＡの露光状態は常に適正な訳ではなく、いわゆる、アンダー／オーバー露光のものも多数存在する。
【００３９】
図２に示すように、写真フィルムＡの画像情報からセットアップ部４４で作成された濃度ヒストグラムが曲線ａおよびｂで示される画像では、その濃度ダイナミックレンジＤＲがプリント再現域に対応する標準濃度レンジＤＲ_oより広いため、標準濃度レンジ以上のネガフィルム上の高濃度部は仕上りプリント上では白くとび、逆に、標準濃度レンジ以下のネガフィルム上の低濃度部は仕上りプリント上では黒くつぶれてしまう。そのため、カラー原画像の全てを再現した画像を得るためには、カラー原画像のダイナミックレンジを圧縮して、仕上りプリントの標準濃度レンジＤＲ_oに合わせる必要がある。一方、図２において曲線ｃのヒストグラムで示される画像では、その濃度ダイナミックレンジＤＲが標準濃度レンジＤＲ_oより狭いため、白の抜けが悪く、また黒の締まりが悪く、コントラストのない、メリハリのない画像として再生されてしまうため、ダイナミックレンジを伸長して、標準濃度レンジＤＲ_oに合わせる必要がある。
【００４０】
また、雪中シーンや逆光シーンなどのようにハイライト部の画像情報の頻度が高い場合は、シャドウ部のダイナミックレンジを圧縮することが効果的な場合がある。一方、ストロボ撮影画像のようにシャドウ部の画像情報の頻度が高い場合は、ハイライト部のダイナミックレンジを圧縮することが効果的である場合もある。あるいはこのように従来の直接露光による覆い焼きと同様の効果を付与することを目的として、中間濃度部の階調を変化させずにハイライト部およびシャドウ部の濃度を調整して、ダイナミックレンジを圧縮することが効果的である場合もある。
【００４１】
さらに、原稿となる写真フィルムＡの画像がオーバー露光の場合には、仕上りプリント上ではハイライト部に濃度が乗って白の抜けが悪くなる結果メリハリのない画像に成りがちである。逆にアンダー露光の場合には、仕上りプリント上では黒の締まりが悪くなる結果やはりメリハリのない画像に成りがちである。そのため、ネガフィルム上で露光不適正がある場合に高画質な仕上がりプリントを得るためには、シーンに応じて部分的にコントラストを上げる必要がある。すなわち、オーバー露光の場合にはネガフィルム上の低濃度部の階調を立てたり、ダイナミックレンジを伸長したりしてコントラストを部分的に上げる補正処理を行い、アンダー露光の場合には、ネガフィルム上の高濃度部の階調を立てたり、ダイナミックレンジを伸長したりして、部分的にコントラストを上げる補正処理を行う必要がある。更に、アンダー露光／オーバー露光を修正する際に、中間濃度部の階調を変化させずに、ダイナミックレンジを伸長するのがよい場合もある。
そこで、雪中シーン、逆光シーン、ストロボ撮影シーンなどや、アンダー露光、オーバー露光などのように、原画像の一部のみのダイナミックレンジを補正したい場合には、ハイライト部の伸縮率α_lおよびシャドウ部の伸縮率α_dをセットアップ部４４で自動算出するか、または、オペレータがキー補正部４６を用いて、他の部分の伸縮率αと異なるように非線形関数として設定するようにしてもよい。
【００４２】
図１においては、ボケ画像に伸縮率αを乗算するために、乗算器５６を用いているが、本発明はこれに替えて、圧縮伸長ルックアップテーブルを用意することとしてもよい。特に、伸縮率αが非線形関数として与えられる場合には、圧縮伸長ルックアップテーブルを用いるのが好ましい。なお、圧縮伸長ルックアップテーブルを用いたダイナミックレンジの圧縮伸長の方法は、本出願人の出願に係る特願平７−３３７５０９号公報および同８−１５７２００号公報に記載された方法も用いることもできる。
このようにして乗算器５６でダイナミックレンジ伸縮処理を施されたＲＧＢ３色の各色のボケ画像信号は、減算器５８に送られる。減算器５８では、カラー原画像信号からボケ画像信号を減算して、差信号を各色ごとに得る。この差信号は、エッジや高周波成分は保存され、低周波成分のみにダイナミックレンジ圧縮伸長処理が施され、標準濃度レンジを持ち、偽輪郭などの発生のない適切な高画質画像を再生することのできる画像信号となっている。こうして得られた差信号は、第３ＬＵＴ６０に送られる。
【００４３】
一方、フィルタ５４から送られた各色のボケ画像信号は特定領域抽出手段５９にも入力されている。また、特定領域抽出手段５９には、パラメータ統合部４８から画像処理条件として設定された抽出すべき色や色度範囲についての情報も入力されている。そこで、特定領域抽出手段５９は、入力されたボケ画像信号を用いて、抽出すべき色や色度範囲についての情報に基づいて設定された特定の色を持つ画素を抽出し、その座標（位置）情報を抽出することを繰り返して、特定領域全体を抽出し、特定領域の全座標の抽出する。なお、図示例では、特定領域抽出手段５９による特定領域の抽出に用いられるボケ画像信号は、フィルタ５４で生成されたボケ画像信号であるが、本発明はこれに限定されず、乗算器５６でダイナミックレンジ伸縮処理されたボケ画像信号であってもよい。
本発明においては、高周波成分を含まないボケ画像信号に基づいて、特定領域の抽出を行うので、ノイズ等の高周波成分に影響されないで、人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める対象被写体、あるいは主要被写体、すなわち特定領域を、正確に抽出することができる。
このようにして特定領域抽出手段５９において抽出された特定領域の座標（位置）情報は、第３ＬＵＴ６０に送られる。
【００４４】
ここで、特定領域の抽出の方法には特に限定はなく、いわゆる主要部抽出方法として公知の方法であればどのような方法でも用いることができる。例えば、オペレータがマウス６６等を用いて主要部中の一点を指示し、色の連続性等から主要部を抽出する方法、オペレータがマウス６６を用いて切り出す方法、公知の主要部抽出アルゴリズムを用いて自動抽出する方法等が例示される。
また、主要部の自動抽出アルゴリズムとしては、例えば、特開平９−１３８４７０号公報に開示される、特定色を抽出する方法、特定形状パターンを抽出する方法、背景に相当すると推定される領域を除去する方法等、複数の異なる主要部（主要部）抽出方法をあらかじめ評価して重みを定め、各抽出方法で主要部を抽出して、抽出された主要部を定めた重みで重み付けし、その結果に応じて主要部を判定、抽出する方法が例示される。また、これ以外にも、特開平４−３４６３３３号、同５−１５８１６４号、同５−１６５１２０号、同６−１６０９９３号、同８−１８４９２５号、同９−１０１５７９号、同９−１３８４７１号等の各公報に開示される主要部抽出方法も好適に利用可能である。
【００４５】
次に、第３ＬＵＴ６０は、減算器５８から送られるカラー原画像信号とボケ画像信号との差信号を最終的な出力媒体に応じた画像信号に階調変換を行うものであるが、特定領域抽出手段５９で得られた特定領域の座標情報が、第３ＬＵＴ６０に入力されるので、抽出された特定領域には、この階調変換を行わず、特定領域を除いた残りの領域のみに階調変換を施す。すなわち、ここでは、ボケ画像の肌色などの特定領域に対して階調変換を掛けない。ここで、第３ＬＵＴ６０における階調変換は伸縮率αの逆数で行われる。そのため、例えば、乗算器５６においてダイナミックレンジ圧縮処理（α＞０）を行った時、第３ＬＵＴ６０における階調変換は階調を立てる処理（伸長処理）となるので、階調を立てるとざらつきなどの粒状、すなわちノイズが目立って問題となる人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める特定領域には、階調変換を行わないのが特に効果があるのである。逆に、ダイナミックレンジ伸長処理（α＜０）の場合には、第３ＬＵＴ６０の階調変換は階調を寝せる処理（圧縮処理）となるので、ざらつきなどの粒状やノイズが問題となる人物の肌色などのゆるやかなグラデーションを持つ重要色が占める特定領域にとっては、粒状やノイズを抑制する方向に働くので、階調変換を行なってもよい。さらに、カラー原画像が曇天などのシーンの場合には、肌色などの抽出された特定領域には、ダイナミックレンジ伸長処理処理自体を行わない、すなわち、これらの処理は行わず、なにもしないでカラー原画像のまま出力するようにしてもよい。こうすることで、肌色などの特定領域の粒状やノイズが目立つのを抑えることができる。
【００４６】
こうして第３ＬＵＴ６０は、特定領域を除いた残りの領域のみが階調変換された処理済画像情報を生成し、画像記録装置１６およびモニタ１８に向けて出力する。このようにして第３ＬＵＴ６０で得られた処理済画像情報は、人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める特定領域には、階調を立てる、すなわち硬調にする階調変換処理はもちろん、場合によっては乗算器５６によるダイナミックレンジ伸長処理（α＜０）自体が行われていないので、肌色などの特定領域のコントラストが高くなっておらず、従って、粒状やノイズなどが抑制されてざらつきなどがなく、その他の部分のコントラストが高く、メリハリのある画像を再現できるものである。
なお、図示例においては、人物の肌などの粒状やノイズなどが目立たないように、特定領域抽出手段５９によって抽出された肌色などの特定領域に第３ＬＵＴ６０による階調を立てるような階調変換を施さない処理を行っているが、本発明はこれに限定されず、同様に特定領域が人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める特定領域である場合には、シャープネス処理や、見えを良くするための彩度を上げる処理などを特定領域に施さない処理であってもよいし、さらには、逆に抽出特定領域のみの色味を好ましい色に変える処理であってもよいなど、正確に抽出された特定領域に応じて施される処理は、特定領域のみに掛ける処理であっても、特定領域のみに掛けない処理であってもよく、どの様な処理であってもよい。
【００４７】
第３ＬＵＴ６０から出力された処理済画像情報は、図１中の信号変換器６２とＤ／Ａ変換器６４を介して、モニタ１８に可視像として表示される。また一方で、第３ＬＵＴ６０の出力は画像記録装置１６に入力され、画像記録装置１６において仕上がりプリント画像Ｐが出力される。ここで、モニタ１８に表示される画像と、画像記録装置１６に送られて再生される仕上がりプリント画像は、ダイナミックレンジ圧縮伸長処理や抽出された人物の肌色などの特定領域に応じた画像処理（階調変換処理を掛けない処理）を含む各種の画像処理が施された全く同一の画像信号から得られたものであるので、画像処理効果を持つメリハリのある高画質画像であることは言うまでもない。
【００４８】
なお、前述したように、オペレータはモニタ１８に表示された画像を見て検定を行うことができ、必要に応じて、図３の調整キー４７を押して、白黒濃度Ｄ、Ｃ濃度、Ｍ濃度、Ｙ濃度、階調、画面全体のダイナミックレンジ圧縮率α、ハイライト部のダイナミックレンジ伸縮率α_l 、およびシャドウ部のダイナミックレンジ伸縮率α_d の調整を行い、仕上りプリントに記録される画像の調整を行うことができる。オペレータによる調整キー４７のキー補正は、キー補正部４６に送られ、伸縮率αを含む画像処理条件の補正量とされ、パラメータ統合部４８おいて、この補正量とセットアップ部４４が設定した伸縮率αを含む画像処理条件とが統合されて、キー補正後の新たな画像処理条件が設定される。すなわち、第２ＬＵＴ５０の３つの補正テーブル（グレイバランス補正テーブル、輝度補正テーブルおよびγ補正テーブル）と、乗算器５６に供給される伸縮率α、α_l 、α_d と第３ＬＵＴ６０における階調変換テーブルは、調整キー４７によるキー操作によって調整あるいは再設定される。その結果、それに応じて、モニタ１８に表示される画像も変化するし、画像記録装置１６から出力される仕上がりプリント画像Ｐも変化する。
【００４９】
ところで、図１に示すモニタ１８のように、表示画面に再生画像とともに伸縮率α、α_l、α_dを表示して、マウス６６等によって調整もしくは再設定できるようにしてもよい。図８は、ダイナミックレンジ圧縮伸長処理済画像が表示されたモニタ１８の表示画面の一例を示す。このモニタ１８の表示画面には処理済画像を表示するとともに、表示された画像の伸縮率をマウス６６等により調整するための調整用スライダー１８ａが表示されており、オペレータが表示画像のシーンの判別を行って、伸縮率α、α_l、α_dの微調整を行うことができる。こうして調整された伸縮率α、α_l、α_dは、画像条件設定手段４０のセットアップ部４４またはパラメータ統合部４８に入力され、最終的に画像処理部４２の乗算器５６に乗数として設定される。また、オペレータがモニタ１８を見ながら、特定領域の色や色度の範囲を決めて、条件設定手段４０に指示するのも伸縮率調整の場合と同様に行うことができる。
本発明の画像処理方法を実施する画像処理装置１４は、基本的に以上のように構成される。
【００５０】
次に、図１０に画像記録装置１６を示す。画像記録装置１６は、出力画像情報として、画像処理装置１４の画像処理部４２の第３ＬＵＴ６０での階調変換処理が終了した仕上りプリントの画像記録に応じた画像信号を受け、この出力画像情報に応じて、光ビーム走査によって感光材料Ｚを走査露光し、露光を終了した感光材料Ｚを現像処理して、仕上がりプリント画像Ｐを可視像として出力するものであって、図１０に示すように、ドライバ８８と、画像露光手段９０と、現像手段９２とを有する。
【００５１】
画像処理装置１４の画像処理部４２より出力された画像信号は、ドライバ８８に転送され、図示しないＤ／Ａ変換器によって、アナログ画像信号に変換される。そしてドライバ８８は、Ｄ／Ａ変換されたアナログ画像信号に応じて、画像露光手段９０の走査光ビームを変調するために、画像露光手段９０の音響光学変調器を駆動する。
一方、画像露光手段９０は、光ビーム走査によって感光材料Ｚを走査露光して、前記画像情報の画像を感光材料Ｚに記録するもので、図１０に概念的に示されるように、感光材料Ｚに形成されるＲ感光層の露光に対応する狭帯波長域の光ビームを射出する光源９６Ｒ、以下同様にＧ感光層の露光に対応する光源９６Ｇ、およびＢ感光層の露光に対応する光源９６Ｂの各光ビームの光源、各光源より射出された光ビームを、それぞれ記録画像に応じて変調する音響光学変調器９４Ｒ、９４Ｇおよび９４Ｂ、光偏向器としてのポリゴンミラー９８、ｆθレンズ１００と、感光材料Ｚの副走査搬送手段を備えている。
【００５２】
光源９６Ｒ、９６Ｇ、９６Ｂより出射し、互いに相異なる角度で進行する各光ビームは、それぞれに対応する音響光学変調器９４Ｒ、９４Ｇ、９４Ｂに入射する。各音響光学変調器には、ドライバ８８より記録画像に応じたＲ、ＧおよびＢそれぞれの駆動信号が転送されており、入射した光ビームを記録画像に応じて強度変調する。
音響光学変調器によって変調された各光ビームは、ポリゴンミラー９８の略同一点に入射して反射され、主走査方向（図中矢印ｘ方向）に偏向され、次いでｆθレンズ１００によって所定の走査位置に所定のビーム形状で結像するように調整され、感光材料Ｚに入射する。なお、画像露光手段９０には、必要に応じて光ビームの整形手段や面倒れ補正光学系が配置されていてもよい。
【００５３】
一方、感光材料Ｚはロール状に巻回されて遮光された状態で所定位置に装填されている。このような感光材料Ｚは図示しない引き出しローラで引き出され、主走査位置を挟んで配置された搬送ローラ対１０２ａおよび１０２ｂによって、副走査方向（図中矢印ｙ方向）に搬送される。光ビームは主走査方向に偏向されているので、副走査方向に搬送される感光材料Ｚは光ビームによって全面を２次元的に走査露光され、感光材料Ｚに画像処理装置１４の画像処理手段４０より転送された画像情報の画像（潜像）が記録される。
【００５４】
露光を終了した感光材料Ｚは、次いで搬送ローラ対１０４によって現像手段９２に搬入され、現像処理を施され仕上りプリントＰとされる。ここで、例えば感光材料Ｚが銀塩写真感光材料であれば、現像手段９２は発色現像槽１０６、漂白定着槽１０８、水洗槽１１０ａ、１１０ｂ、１１０ｃおよび１１０ｄ、乾燥手段およびカッタ（図示せず）等より構成され、感光材料Ｚはそれぞれの処理槽において所定の処理を施され、乾燥された後、カッタによってプリント１枚に対応する所定長に切断され、仕上りプリントＰとして出力される。画像記録装置１６は、基本的に以上のように構成される。
【００５５】
本発明の画像処理方法を実施する画像再生装置１０は、基本的に以上のように構成されるが、ここで、本発明の画像処理方法の好ましい態様について以下に説明する。
この態様の画像処理方法の特徴は、図９に示すように、予め原画像から濃度ヒストグラムを作成して濃度レンジを算出し、次いでダイナミックレンジ圧縮伸長率αを算出しておき、原画像からメディアンフィルタ（ＭＦ）によって生成されたボケ画像１とローパスフィルタ（ＬＰＦ）によって生成されたボケ画像２とを重み付け加算した後、予め算出された圧縮伸長率αを用いて圧縮伸長することにより、ボケ画像を生成し、最後に得られたボケ画像を原画像から差し引いて差信号を生成するとともに、一方ではボケ画像信号から肌色などの特定領域の座標を抽出しておき、差信号を階調変換する時に、抽出された肌色などの特定領域（または、ボケ画像の特定領域）には階調を立てるような階調変換処理を施さないことにある。
【００５６】
このため、本発明においては、高コントラスト画像であっても、低コントラスト画像であっても、高コントラスト部と低コントラスト部が混在する画像であっても、ノイズなどの高周波成分に影響されずに、人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める特定領域を正確に抽出できる。
また、本発明においては、正確に抽出された特定領域には、階調を立てるような階調変換処理が行われないので、ダイナミックレンジが適切に圧縮伸長され、偽輪郭の発生や明部や暗部のつぶれがないばかりか、肌色などの特定領域のコントラストは高くならず、その他の部分のコントラストは高くなっている、メリハリのある高画質画像を得ることができる。
【００５７】
ところで、図１に示す画像再生装置１０においては、プレスキャンを行うことなく、フィルムＡからカラー原画像の読み取りを１回行うのみで画像情報の処理を行うことができるため、画像の読み取りおよび処理を迅速に行うことができるが、本発明はこれに限定されず、プレスキャンを行うものであってもよい。
図１１に示す画像再生装置１０Ａは、図１に示す画像再生装置１０と、画像処理装置１４Ａの構成、具体的には画像処理装置１４の構成に加え、さらにプレスキャンメモリ６８と、プレスキャン画像処理部７０とを有している点を除いて、全く同一の構成を有しているので、同一の構成要素には、同一の符号を付し、その詳細な説明は省略する。
【００５８】
図１１に示す画像再生装置１０Ａにおいては、画像読取装置１２において、出力のための画像情報を得るための画像読取（本スキャン）に先立ち、低解像度で画像を粗に読み取るプレスキャンを行う。画像処理装置１４Ａは、プレスキャンで得られた画像情報から各種の画像処理条件を設定（セットアップ）し、この画像処理条件に応じて本スキャンの画像情報を画像処理して、画像記録装置１６による画像記録ための出力画像情報とする。なお、プレスキャンと本スキャンにおける画像読取方法は、基本的に同様であるが、両者の違いは、読取画像の解像度が異なることだけである。
プレスキャンの際には、ＣＣＤセンサ３０で読み取られた画像は、画像処理装置１４Ａのプレスキャンメモリ６８に接続されるタイミングコントローラ７２による制御で画素が間引され、解像度の低い粗な画像情報とされてプレスキャン画像処理部７０において画像処理される。
【００５９】
図示例の画像処理装置１４Ａは、画像読取装置１２から入力されるデジタル画像信号に対して、特定領域抽出処理および抽出特定領域に応じた画像処理やダイナミックレンジ圧縮伸長処理を含む各種の画像処理を行うものであって、本スキャン画像メモリとして用いられるフレームメモリ３８と、画像処理条件設定部４０と、本スキャン画像の画像処理部４２とに加え、プレスキャンメモリ６８と、プレスキャン画像処理部（以下、表示画像処理部という）７０とを有する。また、フレームメモリ３８およびプレスキャンメモリ６８には、画像情報の画素毎の読み出しを制御するタイミングコントローラ７２が接続される。
画像読取装置１２によるプレスキャンの画像情報はプレスキャンメモリ６８に、本スキャンの画像情報はフレームメモリ３８にそれぞれ送られ、記憶される。
プレスキャンメモリ６８は、基本的に本スキャンメモリであるフレームメモリ３８と同様の構成を有するものであり、共に、画像読取装置１２から供給されたＲ画像情報、Ｇ画像情報およびＢ画像情報を、それぞれ記憶する３つのフレームメモリから構成される。なお、必要に応じて、プレスキャンメモリ６８とフレームメモリ３８の記録容量を異なるものとしてもよい。
【００６０】
プレスキャンメモリ６８に記憶された画像情報は、表示画像処理部７０および条件設定部４０に、フレームメモリ３８に記憶された画像情報は、画像処理部４２に、それぞれ読み出される。
条件設定部４０は、プレスキャンメモリ６８から記憶された画像情報を受け取る点が図１に示す画像処理装置１４の条件設定部４０と異なるが、セットアップ部４４と、キー補正部４６と、パラメータ統合部４８とを有し、特定領域の色やダイナミックレンジの算出や圧縮伸長率α等の算出などの種々の画像処理条件の設定において全く同様に機能する。
なお、条件設定部４０のセットアップ部４４において算出された圧縮伸長率α、α_l 、α_d 等は、パラメータ統合部４８から画像処理部４２のＭＵＬ５６に送られ、乗数として設定されるのみならず、表示画像処理部７０の第３ＬＵＴ７８にも送られ、乗数もしくはダイナミックレンジ圧縮伸長テーブルとして設定される。また、セットアップ部４４において設定された他の各種の画像処理条件（テーブル等を含む）は、パラメータ統合部４８から画像処理部４２の第２および第３ＬＵＴ５０および６０のみならず、表示画像処理部７０の第２ＬＵＴ７４にも送られ、各種の画像処理テーブル等が設定される。
【００６１】
表示画像処理部７０は、プレスキャンメモリ６８に記憶されたプレスキャン画像情報を読み出し、条件設定部４０で設定された画像処理条件に応じた各種の画像処理を施し、モニタ１８表示用の画像情報とする部分で、第２ＬＵＴ７４、ＭＴＸ７６、第３ＬＵＴ７８および信号変換器６２を有する。
ここで第２ＬＵＴ７４は、画像処理部４２の第２ＬＵＴ５０と全く同様の機能を有し、プレスキャンメモリ６８に記憶された画像情報を読み出し、グレイバランスの調整、明るさ補正および階調補正を行う。
ＭＴＸ７６は、画像処理部４２のＭＴＸ５２と全く同様の機能を有し、第２ＬＵＴ７４で処理された画像情報の色補正を行う。
【００６２】
表示画像処理部７０においては、ＭＴＸ７６で処理された画像情報は、フィルタリング処理（ボケマスク処理）によるボケ画像情報を使ったダイナミックレンジ圧縮伸長処理を行わずに、直接第３ＬＵＴ７８に入力される。
第３ＬＵＴ７８は、ダイナミックレンジ圧縮伸長処理を施さずに、ＭＴＸ７６で色補正されたプレスキャン画像情報をモニタ１８に表示する場合には、画像処理部４２の第３ＬＵＴ６０と全く同様の階調変換機能を有し、色補正プレスキャン画像情報をモニタ１８に表示するのに適した画像情報に階調変換、濃度変換する。一方、色補正プレスキャン画像情報にもダイナミックレンジ圧縮伸長処理を施す場合には、第３ＬＵＴ７８は、このような階調変換機能に加え、条件設定部４０から送られた伸縮率α、α_l、α_dを乗数とする乗算機能または倍率変換機能を有し、色補正プレスキャン画像情報に設定伸縮率α、α_l、α_dの圧縮伸長処理および階調変換、濃度変換処理を施して、ダイナミックレンジが適切で、モニタ１８への表示に適した画像信号に変換する。
【００６３】
このようにして、第３ＬＵＴ７８で変換されたプレスキャン画像情報は、出力され、信号変換器６２によってモニタ１８に対応する信号に変換され、さらに、Ｄ／Ａ変換器６４によってＤ／Ａ変換されて、モニタ１８に表示される。
ここで、モニタ１８に表示される画像は、ダイナミックレンジ圧縮伸長処理が施されている場合、画像記録装置１６に送られて再生される仕上りプリント画像Ｐと各種の画像処理や圧縮伸長処理として、同様の処理が施されたものであり、従って、モニタ１８には、仕上りプリント画像Ｐと同様の画像が表示される。
なお、図１１に示す例ではモニタ１８に接続されるマウス６６が省略されている。
【００６４】
オペレータはモニタ１８に表示されたプレスキャン画像を見て検定を行い、必要に応じて、特定領域の位置や色や色度やその範囲をマウス６６やキーボード操作で指定し、または、条件設定部４０の調整キー４７の各キーを押圧して、各種の調整が行われるのは前述のとおりである。
オペレータによる調整キー４７のキー入力は、条件設定部４０のキー補正部４６に送られ、画像処理条件の補正量とされ、パラメータ統合部４８において、この補正量とセットアップ部４４が設定した画像処理条件とが統合されて、キー補正後の新たな画像処理条件が設定される。ここで調整キー４７によるキー入力によって、画像処理部４２では、第２ＬＵＴ５０の各補正テーブル、ＭＵＬ５６の乗数α等および第３ＬＵＴ６０における階調変換テーブルが調整あるいは再設定され、表示画像処理部７０でも、第２ＬＵＴ７４の各補正テーブルおよび第３ＬＵＴ７８における伸縮率αによるダイナミックレンジ圧縮伸長および階調変換テーブルが調整あるいは再設定され、また、これに応じて、モニタ１８に表示される画像も変化する。
オペレータが画像が適正であると判断すると（検定ＯＫ）、出力の指示が出され、画像処理部４２の第２ＬＵＴ５０がフレームメモリ３８から本スキャン画像情報を読み出す。
【００６５】
以下、画像処理装置１４Ａの画像処理部４２においても、こうして読み出された本スキャン画像情報に対して、図１に示す画像再生装置１０の画像処理装置１４の画像処理部４２と全く同様に、ダイナミックレンジ圧縮伸長処理を含む各種の画像処理を行って、画像記録のための出力画像情報を生成し、画像記録装置１６に送られる。
なお、上記検定は必ずしも行われる必要はなく、例えば、フルオートモード等を設定して、検定なしでプリント作成を行うように構成してもよい。この場合には、例えば、セットアップ部４４が画像処理条件を設定し、パラメータ統合部４８が画像処理部４２にこれらの画像処理条件を設定した時点で、第２ＬＵＴ５０が本スキャン画像情報を読み出しを開始し、画像処理を行う。
【００６６】
画像記録装置１６は、出力画像情報を受けると、同様にして仕上りプリント画像Ｐを出力する。こうして得られた仕上りプリント画像Ｐも同様に、高コントラスト画像であっても、低コントラスト画像であっても、高低コントラスト部の混在画像であっても、肌色などの特定領域がノイズ等の高周波成分の影響を受けずに正確に抽出され、正確に抽出された特定領域には特定領域に悪影響のある階調変換処理が施されないので、肌色などの特定領域には粒状やノイズなどによるざらつきがなく、その外の部分にはコントラストが高められ、しかも偽輪郭の発生や明部や暗部のつぶれがなく、ダイナミックレンジが適切に圧縮伸長されたメリハリのある高画質画像である。
本態様の画像再生装置１０Ａにおいては、プレスキャンを行って得た低画素密度の（本スキャン画像に比較して画素数の少ない）プレスキャン画像を用いて、条件設定部４０のセットアップ部４４でオートセットアップアルゴリズムを行うことができるので、条件設定部４０の処理およびモニタ１８への表示のための画像信号の画像処理を迅速かつ簡単なものとすることができ、条件設定部４０や表示画像処理部７０の構成を簡素化でき、それらの回路規模を簡単なものとすることができる。
【００６７】
また、図１および図１１に示す画像再生装置１０および１０Ａにおいては、ボケ画像情報を作成する際に、ＲＧＢの３色の各色のデジタル画像信号についてそれぞれ、画像処理装置１４および１４Ａの画像処理部４２のフィルタ（ＦＩＬ５４）によるフィルタリング処理を行ってボケマスク信号を生成しているが、本発明はこれに限定されず、図１２に示す画像再生装置１０Ｂのように、ＲＧＢの３色のデジタル画像信号を明暗画像信号に変換した後に、フィルタ（ＦＩＬ５４）によるフィルタリング処理を行ってボケマスク信号を生成するように構成してもよい。
図１２に示す画像再生装置１０Ｂは、図１１に示す画像再生装置１０Ａと、画像処理装置１４Ｂの構成、具体的には画像処理部４２Ｂでは、第１のＭＴＸ５２とＦＩＬ５４との間に明暗画像信号に変換するための第２のＭＴＸ８０を有している点と、条件設定部４０がセットアップ部４４のみで構成されている点と、プレスキャン画像処理部７０が、ダイナミック伸長圧縮および階調変換してモニタ１８に表示するのに適した画像信号にするためのＬＵＴ７８のみで構成されている点を除いて、全く同一の構成を有しているので、同一の構成要素には、同一の符号を付し、その詳細な説明は省略する。
【００６８】
図１２に示す画像再生装置１０Ｂの画像処理装置１４Ｂの画像処理部４２Ｂにおいては、第１のＭＴＸ５２で色補正されたＲＧＢ３色の画像信号は、減算器５８に送られるとともに、ダイナミックレンジの圧縮伸長等の画像処理を行うためのボケマスク信号を生成するＦＩＬ５４にも送られることになるが、直接送られるのではなく、予め明暗画像信号に変換されるために、ＦＩＬ５４より先に第２のＭＴＸ８０に送られる。
第２のＭＴＸ８０は、第１のＭＴＸ５２から送られるＲ、ＧおよびＢの画像信号から、カラー原画像の明暗画像信号を生成する。
明暗画像信号の生成方法としては、Ｒ、ＧおよびＢの画像信号の平均値の３分の１を取る方法、ＹＩＱ規定を用いてカラー画像信号を明暗画像信号に変換する方法等が例示される。
ＹＩＱ規定を用いて明暗画像信号を得る方法としては、例えば、下記式により、ＹＩＱ規定のＹ成分のみを、Ｒ、ＧおよびＢの画像信号から算出する方法が例示される。
Ｙ＝０．３Ｒ＋０．５９Ｇ＋０．１１Ｂ
【００６９】
こうして第２のＭＴＸ８０で得られた明暗画像信号は、ボケマスク信号を生成するためにＦＩＬ５４に送られる。ＦＩＬ５４で生成されたボケマスク信号はＭＵＬ５６に送られ、伸縮率αでダイナミックレンジ圧縮伸長処理された後、減算器５８に送られ、第１のＭＴＸ５２から送られた色補正ＲＧＢ３色の画像信号から各色毎に引き算される。
以下、同様にして、第３ＬＵＴ６０にて階調変換されて、画像記録装置１６に向けて送られ、可視再生像として仕上がりプリント画像Ｐが出力される。
本実施例では、フィルタリング処理によるボケ画像信号をカラー原画像のデジタル画像信号から変換された明暗画像信号に基づいて作成しているので、再生可視画像、特に被写体のエッジ部分の明るさは変化しても、色の再現性は変化しないため、適切なダイナミックレンジを持ち、高低濃度部のつぶれのない、特定領域が正確に抽出され、特定領域の粒状やノイズが抑制された、メリハリのある画像であるのはもちろん、カラー原画像と同様の不自然さのない画像を再生することができる。
【００７０】
また、図６に示す実施例では、エッジを保存した平滑化フィルタ（ＦＩＬ）５４として、メディアンフィルタ（ＭＦ）５４ａおよびローパスフィルタ（ＬＰＦ）５４ｂを用い、これらのフィルタ５４ａおよび５４ｂでＭＴＸ５２で色補正された、同一のデジタル画像信号Ｓ_Aをフィルタリング処理して、それぞれのボケマスク信号１および２（それぞれボケ画像１および２）を生成しているが、本発明はこれに限定されず、図１３に示す実施例のように、ＭＦ５４ａでは同様にＭＴＸ５２で色補正された本スキャン画像信号Ｓ_Aをフィルタリング処理してボケマスク信号１（ボケ画像１）を生成し、ＬＰＦ５４ｂでは表示画像処理部７０のＭＴＸ７６で色補正されたプレスキャン画像信号、すなわち画素密度が低く、本スキャン画像信号Ｓ_Aに比べて間引かれた画素についての間引き画像信号をフィルタリング処理した後、本スキャン画像信号Ｓ_Aと同じ画素密度になるように補間してボケマスク信号２（ボケ画像２）を生成するようにしてもよい。なお、ローパスフィルタによるボケ画像のみならず、メディアンフィルタによるボケ画像もカラー原画像の間引き信号を補間して作成してもよい。
こうすることにより、画素数の少ないプレスキャン画像信号に基づいてボケマスク処理を行えるので、大規模な回路構成を必要とするボケマスクフィルタが不要となり、装置構成を簡易なものとすることができる。
【００７１】
なお、偽輪郭の発生をさらに低減するために、メディアンフィルタとして複数のレベルの異なる中間値を出力する、またはマスクサイズの異なる複数のメディアンフィルタを用意し、ボケ画像信号を作成するためのデジタル画像信号の信号分布に応じて中間値のレベルまたはマスクサイズを選択するようにしてもよい。
また、図１１および図１２に示す画像処理装置１４Ａおよび１４Ｂにおいては、プレスキャン画像のための表示画像処理部７０（またはセットアップ部４４のみ）と、本スキャン画像のための画像処理部４２（または４２Ｂ）とを異なるものとしているが、本発明はこれに限定されず、両画像処理部４２（または４２Ｂ）および７０を処理対象画素規模（画素数、容量）を除いて、同様に、または全く同一に構成してもよい
【００７２】
以上、本発明の画像処理方法について詳細に説明したが、本発明は上述の例に限定はされず、本発明の要旨を逸脱しない範囲において、種々の改良や設計の変更等を行ってもよいのはもちろんである。
【００７３】
【発明の効果】
以上詳述したように、本発明によれば、高コントラスト画像であっても、低コントラスト画像であっても、高コントラスト部と低コントラスト部が混在する画像であっても、ノイズなどの高周波成分に影響されずに、人物の肌色、良く晴れた青空のシアン色、草木の緑色等のようなゆるやかなグラデーションを持つ重要色が占める特定領域を正確に抽出できる。
また、本発明によれば、正確に抽出された特定領域には、階調を立てるような階調変換処理が行われないので、ダイナミックレンジが適切に圧縮伸長され、偽輪郭の発生や明部や暗部のつぶれがないばかりか、肌色などの特定領域のコントラストは高くならず、その他の部分のコントラストは高くなっている、メリハリのある高画質画像を得ることができる。
【図面の簡単な説明】
【図１】本発明に係る画像処理方法を実施する画像再生装置の一実施例の模式図である。
【図２】図１に示される画像再生装置に用いられる画像処理装置で得られる濃度ヒストグラムの一例を表すグラフである。
【図３】図１に示される画像処理装置に接続される調整キーの一実施例の概念図である。
【図４】図１に示される画像処理装置の第２ＬＵＴに設定されるテーブルの特性図の一例であって、それぞれ、（ａ）はグレイバランス調整テーブルを、（ｂ）は明るさ補正テーブルを、（ｃ）は階調補正テーブルを示す。
【図５】図１に示される画像処理装置に用いられるメディアンフィルタの特性の一例を説明する説明図である。
【図６】図１に示される画像処理装置のフィルタ（ＦＩＬ）の一実施例を含む一部分を示すブロック図である。
【図７】図１に示される画像処理装置に用いられるＩＩＲ型のローパスフィルタの一例を示す回路図である。
【図８】図１に示される画像再生装置に用いられるモニタの一実施例の概念図である。
【図９】本発明に係る画像処理方法の一例の特徴部分のフローを示す図である。
【図１０】図１に示される画像再生装置に用いられる画像記録装置の一実施例の模式的斜視図である。
【図１１】本発明に係る画像処理方法を実施する画像再生装置の別の実施例の模式図である。
【図１２】本発明に係る画像処理方法を実施する画像再生装置の別の実施例の模式図である。
【図１３】本発明に係る画像処理方法を実施する画像再生装置に用いられる画像処理装置の別の実施例のブロック図である。
【符号の説明】
１０画像再生装置
１２画像読取装置
１４画像処理装置
１６画像記録装置
１８モニタ
２０，９６光源
２２可変絞り
２４色フィルタ板
２６拡散ボックス
２８結像レンズ
３０ＣＣＤ
３２アンプ
３４Ａ／Ｄ変換器
３６第１のルックアップテーブル（ＬＵＴ）
３８フレームメモリ
４０条件設定手段
４２画像処理部
４４セットアップ部
４６キー補正部
４７調整キー
４８パラメータ統合部
５０，７４第２ルックアップテーブル（ＬＵＴ）
５２，７６マトリクス演算器（ＭＴＸ）
５４フィルタ（ＦＩＬ）
５４ａメディアンフィルタ（ＭＤ）
５４ｂローパスフィルタ（ＬＰＦ）
５４ｃ重み付け加算器
５６乗算器（ＭＵＬ）
５８減算器
５９特定領域抽出手段
６０，７８第３ルックアップテーブル（ＬＵＴ）
６２信号変換器
６４Ｄ／Ａ変換器
６６マウス
６８プレスキャンメモリ
７０表示画像処理手段
７２タイミングコントローラ
８０第２のマトリクス演算器（ＭＴＸ）
８８ドライバ
９０画像露光手段
９２現像手段
９４音響光学変調器（ＡＯＭ）
９８ポリゴンミラー
１００Ｆθレンズ
１０２，１０４搬送ローラ対
１０６発色現像槽
１０８漂白定着槽
１１０水洗槽
Ａ写真フィルム
Ｚ感光材料
Ｐプリント[0001]
BACKGROUND OF THE INVENTION
The present invention extracts a subject having a specific color from a color original image carried on a reflective original such as a photograph or printed matter, a transparent original such as a negative film or a reversal film, and determines a predetermined color according to the subject in the specific area. The present invention relates to an image processing method for performing image processing.
[0002]
[Prior art]
In recent years, image information recorded on photographic films such as negative films and reversal films and printed materials is photoelectrically read, and the read images are converted into digital image signals, which are then subjected to various image processing and recorded digital image signals. A digital photo printer has been proposed in which a latent image is formed by scanning and exposing a photosensitive material such as photographic paper with a recording light beam modulated in accordance with the image signal, and the resulting image is developed to produce a finished print. It has been put to practical use by people.
[0003]
Such a digital photo printer includes an image reading device that photoelectrically reads an image recorded on a photographic film, an image processing device that performs desired image processing on the read image and determines exposure conditions for image recording, The image reproducing apparatus is configured to scan and expose a processed image on a photosensitive material in accordance with the exposure conditions and then develop the processed image to reproduce it as a visible image.
[0004]
In such a digital photo printer, since the read image is converted into a digital image signal, the layout of the print image, such as composition of a plurality of images, image division, edit of characters and images, color / density, etc. Various types of image processing such as adjustment, magnification, and edge enhancement can be performed freely, and finished prints that have been subjected to editing and image processing can be output according to the application. Further, since the finished print image can be stored as image information in a recording medium such as a floppy disk, it is not necessary to prepare a photographic film or printed material as a manuscript at the time of reprinting, and it is necessary to determine exposure conditions again. Because there is no, work can be done quickly and easily.
Furthermore, conventional direct exposure printing cannot reproduce all the images recorded on film or the like due to restrictions on resolution, color / density reproducibility, etc., but is recorded on film by a digital photo printer. A print that reproduces almost 100% of the existing image (density information) can be output.
[0005]
By the way, the photographing conditions of an image photographed on a photographic film or the like are not constant, and there may be a case where the difference in lightness and darkness (density), that is, the dynamic range is very wide, such as flash photography or a backlight scene. In contrast, in general, the dynamic range (luminance range) of a subject image that can be recorded by a photosensitive material such as a photographic paper for reproducing a film-supported image is relatively wide, but the photosensitive material such as a photographic paper. Since the maximum density is limited, it is narrower than the dynamic range (luminance range) of the subject image that can be recorded on the film.
[0006]
In such a case, when a color original image on a photographic film is exposed on ordinary photographic paper to create a print, the details of the highlight or shadow portion may not be reproduced. For example, when a person is photographed under backlighting, if exposure is performed so that the person becomes a clear image, bright parts such as the sky will fly white, and conversely, exposure will be performed so that the sky becomes a clear image. If you do, the person will be black. Therefore, methods such as dodging and masking printing are used in conventional photo printing apparatuses.
[0007]
Dodging means that normal exposure is given to an intermediate density area in the scene, and the area that seems to be white on the print is selectively exposed for a long time using a perforated shielding plate, and vice versa. In this method, the exposure time is selectively shortened using a shielding plate in areas that are likely to be crushed black on the print, thereby maintaining the contrast of individual subjects and obtaining a print that is free of light and dark areas. is there. As a shielding plate for locally controlling the exposure time in this way, there is a method of performing printing by overlaying the original image film and the blurred image film using a photographed image obtained by reversing the negative and positive of the original image film. Proposed. However, it takes time and effort to create a blurred image film.
In addition, a masking print method that can achieve the same effect as dodging by changing the brightness of the illumination light source of the original picture is also well known. Regardless of the operation of a plurality of shield plates prepared, it requires extremely advanced technology.
[0008]
For this reason, the applicant of the present invention has proposed a dynamic range compression technique capable of producing an effect equivalent to or better than that of a conventional dodging or masking print in a digital photo printer, such as Japanese Patent Application Nos. 7-165965 and 7-337509. And JP-A-8-16646.
[0009]
The invention described in the specification of Japanese Patent Application No. 7-165965 creates a blurred image from a color original image, subtracts the blurred image from the color original image, and performs predetermined signal processing on the difference signal thus obtained. In other words, a technique for reproducing as a visible image, and so-called electronic dodging processing is disclosed. The invention described in the specification of Japanese Patent Application No. 7-337509 creates a blurred image by digital processing using an infinite impulse response filter (IIR filter) for a color original image, and based on this blurred image, the color original image Discloses a technique for performing dynamic range compression processing. According to these technologies, the contrast of the entire image is weakened, but the fine contrast in the highlight part and the shadow part remains, so that the highlight part does not skip and the shadow part does not collapse. The effect that is obtained.
However, in the digital image processing techniques described in Japanese Patent Application Nos. 7-165965 and 7-337509, a false contour is generated in a contour portion having a large contrast in accordance with the dynamic range compression processing. There was a problem that there was something.
[0010]
On the other hand, the invention described in the specification of Japanese Patent Application No. 8-16646 creates a blurred image by a median filter for a color original image, subtracts the blurred image from the color original image, and obtains a difference signal. Is subjected to predetermined signal processing and reproduced as a visible image. This technology solves the above-mentioned problem of false contours to some extent by using a median filter. However, all of these technologies are intended for images with high contrast, and have a dynamic range for the original color image. Therefore, there is a problem that an image with a low contrast, for example, an image in cloudy weather is not taken into consideration.
[0011]
[Problems to be solved by the invention]
By the way, when finishing a color original image as a print image, the color original image is subjected to various image processing including the dynamic range compression / decompression processing described above. However, depending on the image processing, the color reproduction of the entire color image is good. Even in such a case, there is a problem that noise such as graininess may be conspicuous in a specific region such as a person's skin. For example, if you perform gradation conversion processing that raises gradation after dynamic range compression processing, apply sharpness processing, or increase the saturation to improve the appearance, noise such as granularity such as human skin will be noticeable There was a problem of becoming.
[0012]
On the other hand, a specific subject area occupied by important colors such as human skin color, blue sky, and green in the original color image, that is, a specific area such as a person's face, a blue sky, and a green plant is separated from the background area. You may want to perform special image processing. For example, image processing that raises the brightness of the skin color of a person and finishes the skin color to a brighter preferable color, raises the saturation of the green of the plant, and finishes the green vividly is more preferable than faithful color reproduction of the original color image, or May be required.
For this reason, when a specific region such as a person's skin color is extracted from the color original image, there is a method of designating a specific region of the color space in the original color image and extracting only the pixels existing in this region. However, in this method, since the color original image itself contains a high-frequency component, that is, a noise component, there is a problem in that it may not be possible to accurately extract a specific region such as a person's skin color.
Also, in this method, when the specific area is set large, other than the skin color of the person is extracted together, and conversely, when the specific area is set small, the person's skin color is overlooked. There was a problem.
[0013]
  An object of the present invention is to solve the above-mentioned problems of the prior art and accurately extract a specific area occupied by an important color such as a subject having a specific color, for example, a person's skin color, from the original color image, Perform image processing such as dynamic range compression / expansion processing such as dodging without conspicuous noise such as granularity in specific areas such as human skin color and without generating false contours. An object of the present invention is to provide an image processing method that can be performed.
[0014]
[Means for Solving the Problems]
  In order to solve the above object, the present invention is an image processing method for obtaining an image processing signal for reproducing a digital original image signal representing a color original image as a visible image,
  The digital original image signal is subjected to filtering processing using an edge-preserving smoothing filter to generate a blurred image signal representing the blurred image of the original image,
  Extract pixels to be extracted from the blurred image signal from the blurred image signal, extract specific regions of the extraction target pixels of the original image corresponding to these pixels,
  Predetermined image processing is performed according to this specific area.Yes,
  The edge-preserving smoothing filter is a median filter and a low-pass filter, and generates the blurred image signal by weighted addition of the first blurred image signal from the median filter and the second blurred image signal from the low-pass filter.An image processing method characterized by the above is provided.
[0015]
Here, the predetermined image processing is performed by performing dynamic range compression / expansion processing of the original image on the digital original image signal based on the blurred image signal to obtain an expansion / contraction processed image signal. It is preferable that gradation conversion is performed on the finished image signal by excluding the specific area.
[0016]
Further, it is preferable that the pixel extraction for the blurred image is performed by extracting pixels existing in a specific range in a preset color space.
The specific area of the extraction target pixel is preferably an important color area having a gentle gradation such as a person's skin color, sky cyan, or green vegetation.
[0017]
  In addition, it is preferable that a signal obtained by interpolating the thinned signal of the digital image signal of the color original image is input to the low-pass filter to generate a second blurred image signal. The low-pass filter is preferably an infinite impulse response filter.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
An image processing method according to the present invention will be described below in detail based on a preferred embodiment shown in the accompanying drawings.
[0019]
  FIG. 1 is a schematic diagram of an embodiment of an image reproducing apparatus that implements the image processing method of the present invention.
  As shown in FIG. 1, an image reproducing apparatus 10 that performs the image processing method of the present invention is configured as a digital photo printer, and photoelectrically converts a color original image taken on a photographic film A serving as a document. The image reading device 12 to be read by the image reader and the digital image signal read by the image reading device 12 are the present invention.ofAn image processing device 14 that performs digital image processing according to an image processing method, an image recording device 16 that reproduces a processed image signal output from the image processing device 14 on a photosensitive material Z as a visible image (hard copy image), and Display on the display screen as a visible image (soft copy image)monitor18.
[0020]
The image reading device 12 is a device that photoelectrically reads an image photographed on the photographic film A, and includes a light source 20, a variable aperture 22 that adjusts the amount of light emitted from the light source 20, and R light from the light source 20. (Red), G (Green) and B (Blue) have three color filters R, G and B to separate into three colors, rotate to insert any color filter into the optical path A color filter plate 24, a diffusion box 26 for diffusing the light transmitted through each color filter of the color filter plate 24 to uniformly illuminate the two-dimensional plane of the photographic film A, and reading light transmitted through the photographic film A An image forming lens 28 for forming an image on the CCD 30; a CCD 30 which is an area (two-dimensional) sensor for photoelectrically reading one (one frame) image of the photographic film A formed by the image forming lens 28; CCD30 An amplifier 32 that amplifies the RGB three-color image signal read in this way, an A / D converter 34 that A / D converts the amplified image signal, and a density signal obtained by logarithmically converting the obtained digital image signal. A first look-up table (hereinafter referred to as a first LUT) 36.
[0021]
  In such an image reading device 12, the reading light emitted from the light source 20, adjusted in light amount by the diaphragm 22, separated through the color filter plate 24, and diffused by the diffusion box 26 passes through the photographic film A. By doing so, the transmitted light modulated by the image photographed on the photographic film A is obtained. The transmitted light forms an image (one frame) of the image on the photographic film A by the imaging lens 28 and forms an image on the light receiving surface of the CCD 30, and is read photoelectrically by the CCD 30. An output signal from the CCD 30 is amplified by an amplifier 32, converted into a digital signal by an A / D converter 34, converted to a density signal by an LUT 36, and then a density converted digital image signal of an image taken on the photographic film A is input. The image information is sent to the image processing device 14. The image reading device 12 performs such image reading by using a color filter plate.24By sequentially inserting the R, G, and B color filters into the optical path, the image photographed on the photographic film A can be separated into the three primary colors R, G, and B and read to obtain input image information. . Note that the image reading method of the image reading apparatus may be a method of relatively moving the line sensor instead of the area CCD 30, or a method of spot metering like a drum scanner.
[0022]
  Next, the image processing apparatus 14 uses a frame memory 38 that stores the digital image signals of three colors RGB supplied from the image reading apparatus 12 for each color as input image information, and the input image information stored in the frame memory 38. In accordance with the image processing condition setting unit 40 for setting various image processing conditions and the extraction of the coordinates of a specific area, for example, a skin color area, which is a feature of the present invention in accordance with the set image processing conditions. Image processing that performs various image processing including image processing and dynamic range compression / decompression processingPart42.
  The RGB three-color digital image signals of one frame image of the photographic film A read by the image reading device 12 are stored in the frame memory 38 for each color and then read out, and the image processing condition setting unit 40 and the image are read out. It is sent to the processing unit 42.
[0023]
Here, the image processing condition setting unit 40 includes a setup unit 44, a key correction unit 46, and a parameter integration unit 48.
The setup unit 44 is for setting image processing conditions, and includes a CPU for executing an auto setup algorithm. The digital image signal stored in the frame memory 38 is used to create a density histogram by the auto setup algorithm. The density, minimum density, and dynamic range are calculated, the dynamic range expansion / contraction ratio is set, and image processing conditions such as color / density processing conditions are set using matrix calculation, image processing algorithm, image processing table, etc. Set. More specifically, various conversion tables, correction tables, processing tables, and the like are created or adjusted.
[0024]
First, creation of a density histogram, calculation of a dynamic range, and setting of a dynamic range expansion / contraction rate performed by the setup unit 44 will be described. The setup unit 44 first reads out one frame image signal from the frame memory 38 and creates a density histogram by an auto setup algorithm. At this time, in order to speed up and simplify the density histogram creation process and reduce the size of the processing circuit, the image signal read out from the frame memory 38 is thinned out (read out) by a thinning processing means such as a read timing controller (not shown). After that, it may be thinned out or read out after thinning) and supplied to the set-up unit 44 to create a density histogram with the thinned image signals. A density histogram is created for each of the three colors RGB.
The setup unit 44 generates a black and white signal using the density histogram of these three RGB colors. As the black and white signal, an addition average signal of signals of three colors or a luminance signal Y represented by the following formula in consideration of standard relative luminous sensitivity is used.
Y = 0.3R + 0.59G + 0.11B
Here, R, G, and B are color signals.
[0025]
Here, it is assumed that density histograms for three types of luminance Y are obtained for three different patterns (scenes) in one frame as shown in FIG. A density histogram a indicated by a solid line in FIG. 2 is a histogram representing an image in a clear sky where the frequency of intermediate density is high, and its density dynamic range DR._aIs Y_{max a}-Y_{min a}It is. A density histogram b indicated by a one-dot chain line is a histogram representing an image having a high contrast because the frequency of the intermediate density is low but the frequency in the high density region and the low density region is high. The density dynamic range DR_bIs Y_{max b}-Y_{min b}It is. Furthermore, the density histogram c indicated by a broken line is a histogram representing an image in a cloudy sky or the like with a low contrast and a high contrast, and a density dynamic range DR._cIs Y_{max c}-Y_{min c}It is.
[0026]
FIG. 2 shows a standard scene dynamic density range printed on photographic paper or the like as a standard density range DR._oIt is displayed as. Standard concentration range DR_oIn the case of histograms a and b that protrude from the image, if printing is performed as it is, the highlight portion of the original image will be white and the shadow portion will be black.
Therefore, in the present invention, in order to obtain an appropriate finish stably regardless of whether the image is high or low in contrast, the images shown by the density histograms a and b are subjected to dynamic range compression. It is necessary to expand the dynamic range of the image indicated by the density histogram c. Therefore, in the present invention, the maximum density Y is determined from the density histogram._maxAnd minimum concentration Y_minAnd the dynamic range expansion / contraction rate α is calculated according to the following formula: α = 1−DR_o/ DR (Here, DR_oIs the average density dynamic range of dozens of scenes that can be reproduced within the print reproduction area of the photosensitive material of interest. According to this definition, when the expansion ratio α> 0, the dynamic range of the color original image is compressed, and when the expansion ratio α <0, the dynamic range of the color original image is expanded. That is, the original dynamic range DR is (DR−α · DR) = DR regardless of the sign of α._oIt is converted into.
[0027]
In this way, the set-up unit 44 automatically calculates the expansion / contraction rate α by the auto setup algorithm.In the present invention, the operator visually determines the color original image scene to determine the expansion / contraction rate α, It may be input by the key correction unit 46.
The key correction unit 46 calculates correction amounts for various image processing conditions including the above-described expansion / contraction rate α in accordance with the operator's key correction by the adjustment key 47 shown in FIG. In the adjustment key 47 in the illustrated example, for example, density D, cyan density C, magenta density M, yellow density Y, gradation γ, expansion rate α of the entire color original image, expansion rate of the highlight portion in the color original image. α_l, Shadow expansion / contraction rate α_dCan be adjusted individually.
The operator performs an examination while looking at an image displayed on the monitor 18 described later, and adjusts the image to a desired state by pressing the (+) key and the (-) key of each parameter as necessary. it can. Each correction amount is adjusted according to the number of times the key is pressed. The adjustment by the operator may be a method in which a display corresponding to the adjustment key 47, for example, a slider or the like is displayed on the monitor 18 and adjustment is performed by operating the mouse 66 or the keyboard, in addition to such key operation.
[0028]
Here, the operator uses the key correction unit 46 or the mouse 66 or the keyboard operation to perform extraction processing of the specific area, which is a feature of the present invention, or the color to be extracted, or the color density or chromaticity of the three colors. Alternatively, the range may be specified or set. Further, when performing an examination while looking at the display image on the monitor 18, the operator designates an area having a specific color to be extracted as a point or area using the mouse 66 or a keyboard operation, and the designated point or area You may make it acquire the color which should be extracted from the image data of an area | region, chromaticity, and its range. The specification and setting of the color and chromaticity range may be performed by an auto setup algorithm when a specific color is set in the image processing apparatus 14 in advance. The color (chromaticity) range of the specific area extracted in this way is set as one of the image processing conditions. In the present invention, the color to be extracted as the specific region is not particularly limited as long as it is the color of the main subject, but in particular, a gentle color such as a human skin color, a well-clear blue sky cyan, or a green plant. It is preferable that it is an important color having a gradual gradation.
[0029]
The parameter integration unit 48 integrates the image processing conditions set by the setup unit 44 and the correction amount by the key correction unit 46, and sets final image processing conditions including the color range to be extracted. If there is no input by the adjustment key 47, the image processing condition finally set here is the image processing condition set by the auto setup algorithm of the setup unit 44. In this way, the parameter integration unit 48 integrates the image processing conditions, and the second look-up table (hereinafter referred to as second LUT) 50, the multiplier MUL 56, the specific area extraction unit 59, the third in the image processing unit 42. The data is sent to a lookup table (hereinafter referred to as third LUT) 60. If there is an input from the adjustment key 47 and the image processing condition previously set by the parameter integration unit 48 is changed, the display image on the monitor 18 changes accordingly.
Although the image condition setting means 40 is configured as described above, the key correction unit 46 may be omitted when adjustment by the operator is performed on the monitor 18 by an operation with the mouse 66 or the like. Further, the GUI output accompanying the mouse operation may be directly reflected on the setup unit 44.
[0030]
On the other hand, the image processing unit 42 reads the image information stored in the frame memory 38, performs predetermined image processing according to the image processing conditions set by the image condition setting means 40, and outputs the print P output by the image recording device 16. Output image information for the second LUT 50, the matrix calculator (MTX) 52, the filter (FIL) 54, the multiplier (MUL) 56, the subtractor 58, and the skin color characteristic of the present invention. Specific area extraction means (EXT) 59 for extracting the coordinates of the specific area and a third LUT 60 are provided.
[0031]
The second LUT 50 reads the input image information stored in the frame memory 38 and performs a process of correcting each of density, gray balance, and γ, and is configured by cascading tables for performing each correction and adjustment. Has been. Each table of the second LUT 50 is set or adjusted by the parameter integration unit 48 of the image condition setting means 40 described above. Here, the gray balance adjustment means an adjustment for reproducing an achromatic color as an achromatic color.
[0032]
FIG. 4 shows an example of a table set in the second LUT 50. (A) in FIG. 4 is a gray balance correction table, and the setup unit 44 creates this adjustment table in order to obtain gray balance from the calculated maximum density and minimum density by an auto setup algorithm. When there is an input from the adjustment key 47 of FIG. 3, the parameter integration unit 48 integrates the correction amount and the correction table created by the setup unit 44, and each of R, G, and B of the adjustment table is integrated. The tilt of the table is further adjusted. (B) in FIG. 4 is a density correction table, and the setup unit 44 creates this correction table from the created density histogram and the highest density and the lowest density using an auto setup algorithm. This correction table can also be further adjusted by input from the adjustment key 47 of FIG. (C) in FIG. 4 is a correction table for γ, and the setup unit 44 creates this correction table from the created density histogram and the highest density and the lowest density using an auto setup algorithm. This correction table can also be further adjusted by inputting the adjustment key 47 in FIG.
[0033]
Next, the matrix calculator 52 performs color correction on the RGB three-color image signal processed by the second LUT 50.
The image signal subjected to the color correction processing by the matrix calculator 52 is sent to both the subtractor 58 and the filter 54 for generating a blurred image signal for performing a specific area extraction process and a dynamic range compression / decompression process. . Note that, when the specific area extraction process and the dynamic range compression / decompression process are not performed, the generation of the blurred image signal is not performed, so that only the output of the matrix calculator 52 is input to the third LUT 60 through the subtractor 58. The presence / absence of compression / decompression processing in this dynamic range is determined by an instruction from the operator or an instruction from the image condition setting means 40.
[0034]
As the filter 54 for generating a blurred image, an edge smoothing filter such as a median filter is suitable. Here, the median filter is a blur mask filter for preserving a large edge in an image signal and blurring a fine structure two-dimensionally, and has characteristics as shown in FIG. Here, if the blur mask size is too small, it will result in a blur mask with fine shades of contrast, while if the blur mask size is too large, the effect of the blur mask will not appear much when the main subject is small, and the amount of computation will increase. As a result, the scale of the apparatus becomes large. According to the results of experiments on various scenes by the applicant, the blur mask size in the case of 135-type photographic film is preferably about 20 × 20 to 5 × 5.
[0035]
By using a median filter as the filter 54, only a low-frequency component of a color original image is extracted only by a conventional low-pass filter (LPF), and the color original image is two-dimensionally blurred to obtain a blurred image signal. It is possible to prevent the dripping of the edge portion and generation of false contours, and it is possible to obtain an image in which the edge is stored and noise of the non-edge portion is removed. By the way, if a median filter is used as the filter 54, edges can be stored and smoothed. However, as described above, if the median filter does not appropriately select a mask size, the blur mask effect as an edge preserving smoothing filter is used. You may not get enough.
[0036]
Therefore, the filter 54 used in the present invention is more preferably configured as shown in FIG. The corresponding portion of the filter 54 in FIG. 1 is a portion in which weighted addition means 54c is connected in series to a parallel connection portion of a median filter (MF) 54a and a low-pass filter (LPF) 54b, as shown in FIG. . If the filter 54 is configured in this manner, the edge information can be sufficiently preserved and only the information of the very low frequency component can be picked up.
[0037]
Further, as the low-pass filter 54b used here, a finite impulse response (FIR) type low-pass filter that is usually used for generating a blurred image may be used, but it is possible to generate blurred image information that is largely blurred with a small circuit. In this respect, it is preferable to use an infinite impulse response (IIR) type low-pass filter. FIG. 7 shows an example of an IIR type low-pass filter. The low-pass filter of the illustrated example includes a configuration in which an adder is arranged in the forward direction and a delay circuit is arranged in the feedback direction. As an IIR type low-pass filter that can be used in the present invention, an IIR type low-pass filter described in Japanese Patent Application No. 7-337509 filed by the present applicant can be used.
In this way, the blurred image signals of the three colors of RGB generated by the filter 54 are sent to the multiplier 56 and the specific area extracting means 59.
[0038]
Here, the multiplier 56 multiplies the blurred image signal of each color sent from the filter 54 and the dynamic range expansion / contraction rate α received from the image condition setting means 40 for each color.
By the way, the density area of an image that can be photographed on the photographic film A is generally wider than the reproduction area in the finished print, and an object having various density ranges is an image having various density dynamic ranges (DR) on the photographic film A. You can shoot. For example, some images have a wide density dynamic range, such as images in fine weather, some images have a narrow density dynamic range, such as images in cloudy weather, and others have a wide dynamic range and high contrast. . Also, there are cases where the image has a density range that is largely biased beyond the reproduction range of the finished print in the highlight portion or shadow portion, such as a snow scene, a backlight scene, or a strobe image. Furthermore, the exposure state of the photographic film A is not always appropriate, and there are many so-called under / over exposures.
[0039]
As shown in FIG. 2, in an image in which the density histogram created by the setup unit 44 from the image information of the photographic film A is indicated by curves a and b, the density dynamic range DR corresponds to the standard reproduction range DR corresponding to the print reproduction area._oSince it is wider, the high density portion on the negative film above the standard density range is white on the finished print, and conversely, the low density portion on the negative film below the standard density range is blackened on the finished print. Therefore, in order to obtain an image that reproduces all of the original color image, the dynamic range of the original color image is compressed, and the standard density range DR of the finished print_oIt is necessary to adjust to. On the other hand, in the image shown by the histogram of the curve c in FIG. 2, the density dynamic range DR is the standard density range DR._oSince it is narrower, whites are not clearly missing, blacks are not well tightened, and the image is reproduced as an image having no contrast and no sharpness. Therefore, the dynamic range is extended and the standard density range DR is expanded._oIt is necessary to adjust to.
[0040]
In addition, when the frequency of the image information in the highlight portion is high, such as in a snow scene or a backlight scene, it may be effective to compress the dynamic range of the shadow portion. On the other hand, when the frequency of the image information in the shadow portion is high, such as a flash image, it may be effective to compress the dynamic range of the highlight portion. Alternatively, for the purpose of providing the same effect as the conventional dodging by direct exposure, the dynamic range is adjusted by adjusting the density of the highlight part and the shadow part without changing the gradation of the intermediate density part. It may be effective to compress.
[0041]
Further, when the image of the photographic film A serving as a document is overexposed, on the finished print, the density tends to be on the highlight area, resulting in a poor white dropout. On the other hand, in the case of underexposure, black tightening tends to deteriorate on the finished print, and as a result, the image tends to be unclear. Therefore, in order to obtain a high-quality finished print when there is improper exposure on the negative film, it is necessary to partially increase the contrast according to the scene. That is, in the case of overexposure, correction processing is performed to raise the contrast partially by raising the gradation of the low density part on the negative film or extending the dynamic range. In the case of underexposure, the negative film It is necessary to perform correction processing that partially raises the contrast by raising the gradation of the upper high density part or extending the dynamic range. Furthermore, when correcting underexposure / overexposure, it may be desirable to extend the dynamic range without changing the gradation of the intermediate density portion.
Therefore, if you want to correct the dynamic range of only part of the original image, such as in snowy scenes, backlit scenes, flash photography scenes, underexposure, overexposure, etc., the expansion ratio α_lAnd shadow expansion / contraction ratio α_dMay be automatically calculated by the setup unit 44, or the operator may use the key correction unit 46 to set as a non-linear function so as to be different from the expansion / contraction rate α of other parts.
[0042]
In FIG. 1, the multiplier 56 is used to multiply the blurred image by the expansion / contraction rate α, but the present invention may prepare a compression / decompression look-up table instead. In particular, when the expansion / contraction rate α is given as a nonlinear function, it is preferable to use a compression / expansion lookup table. The dynamic range compression / decompression method using the compression / decompression look-up table may be the method described in Japanese Patent Application Nos. 7-337509 and 8-157200 according to the applicant's application. it can.
The blurred image signals of each of the three colors RGB subjected to the dynamic range expansion / contraction processing by the multiplier 56 are sent to the subtractor 58. The subtractor 58 subtracts the blurred image signal from the color original image signal to obtain a difference signal for each color. This difference signal preserves edges and high-frequency components, performs dynamic range compression / expansion processing only on low-frequency components, has a standard density range, and reproduces an appropriate high-quality image without the occurrence of false contours. This is an image signal that can be generated. The difference signal thus obtained is sent to the third LUT 60.
[0043]
On the other hand, the blurred image signal of each color sent from the filter 54 is also input to the specific area extraction unit 59. In addition, information on the color to be extracted and the chromaticity range set as the image processing conditions from the parameter integration unit 48 is also input to the specific area extraction unit 59. Therefore, the specific area extraction unit 59 uses the input blurred image signal to extract pixels having a specific color set based on information about the color to be extracted and the chromaticity range, and the coordinates (position) ) Repeating the extraction of information, the entire specific area is extracted, and all coordinates of the specific area are extracted. In the illustrated example, the blurred image signal used for extraction of the specific area by the specific area extracting unit 59 is a blurred image signal generated by the filter 54. However, the present invention is not limited to this, and the multiplier 56 It may be a blurred image signal subjected to dynamic range expansion / contraction processing.
In the present invention, since a specific area is extracted based on a blurred image signal that does not include a high-frequency component, it is not affected by high-frequency components such as noise. Thus, it is possible to accurately extract a target subject occupied by an important color having a gentle gradation such as a main subject, that is, a specific region.
The coordinate (position) information of the specific area extracted by the specific area extracting unit 59 in this way is sent to the third LUT 60.
[0044]
Here, the method for extracting the specific region is not particularly limited, and any method known as a so-called main part extraction method can be used. For example, a method in which an operator designates one point in the main part using the mouse 66 or the like and extracts the main part from color continuity, a method in which the operator cuts out using the mouse 66, or a known main part extraction algorithm is used. For example, a method of automatically extracting is used.
Further, as an automatic extraction algorithm for the main part, for example, a method for extracting a specific color, a method for extracting a specific shape pattern, and a region estimated to correspond to the background disclosed in JP-A-9-138470 are removed. A number of different main part (main part) extraction methods, such as the method to perform in advance, determine the weight, extract the main part with each extraction method, weight the extracted main part with the determined weight, and the result The method of determining and extracting the main part according to the above is exemplified. Besides these, JP-A-4-346333, 5-158164, 5-165120, 6-160993, 8-184925, 9-101579, 9-138471, etc. The main part extraction method disclosed in each of the above publications can also be suitably used.
[0045]
Next, the third LUT 60 performs gradation conversion on the difference signal between the color original image signal and the blurred image signal sent from the subtractor 58 to an image signal corresponding to the final output medium. Since the coordinate information of the specific area obtained by the means 59 is input to the third LUT 60, the gradation conversion is not performed on the extracted specific area, but only on the remaining area excluding the specific area. Apply. That is, here, gradation conversion is not applied to a specific region such as a skin color of a blurred image. Here, the gradation conversion in the third LUT 60 is performed by the reciprocal of the expansion / contraction rate α. For this reason, for example, when dynamic range compression processing (α> 0) is performed in the multiplier 56, gradation conversion in the third LUT 60 is processing for generating gradation (expansion processing). Tone conversion is not performed for specific areas that are grainy, that is, important colors with gentle gradations such as the skin color of people who are prominently noisy, cyan with a clear blue sky, green of plants, etc. Is particularly effective. Conversely, in the case of the dynamic range expansion process (α <0), the gradation conversion of the third LUT 60 is a process (compression process) that lays down the gradation, so that the skin color of a person who has problems with graininess and noise such as roughness For a specific area occupied by an important color having a gradual gradation such as gradation, the gradation conversion may be performed because it works in a direction to suppress graininess and noise. Further, when the color original image is a scene such as cloudy, the dynamic range expansion processing itself is not performed on the extracted specific area such as the skin color, that is, these processing is not performed and nothing is performed. The original color image may be output as it is. By doing so, it is possible to suppress the noticeable graininess and noise in a specific area such as skin color.
[0046]
In this way, the third LUT 60 generates processed image information in which only the remaining area excluding the specific area has been subjected to gradation conversion, and outputs it to the image recording device 16 and the monitor 18. The processed image information obtained by the third LUT 60 in this way is in a specific area occupied by an important color having a gentle gradation such as a person's skin color, a well-saturated blue sky cyan color, a green plant color, etc. In addition to the tone conversion processing for making a tone, that is, a hard tone, in some cases, the dynamic range expansion processing (α <0) itself by the multiplier 56 is not performed, so the contrast of a specific area such as skin color is increased. Therefore, graininess, noise, and the like are suppressed, there is no roughness, the contrast of other portions is high, and a sharp image can be reproduced.
In the illustrated example, gradation conversion is performed such that gradation by the third LUT 60 is applied to a specific area such as a skin color extracted by the specific area extraction unit 59 so that the granularity or noise of the human skin or the like is not conspicuous. However, the present invention is not limited to this. Similarly, an important color having a gentle gradation such as a skin color of a person, a well-clear blue sky cyan, a green of a plant, etc. If it is a specific area that occupies, it may be a process that does not apply sharpness processing, saturation processing for better visibility, etc. to the specific area, and conversely the color of the extracted specific area only Processing that is performed according to a specific region that has been accurately extracted, such as processing that changes the taste into a preferred color, is processing that is applied only to a specific region, but not applied only to a specific region. May be in, it may be any kind of treatment.
[0047]
The processed image information output from the third LUT 60 is displayed as a visible image on the monitor 18 via the signal converter 62 and the D / A converter 64 in FIG. On the other hand, the output of the third LUT 60 is input to the image recording device 16, and the finished print image P is output from the image recording device 16. Here, the image displayed on the monitor 18 and the finished print image sent to the image recording device 16 for reproduction are subjected to image processing according to a specific area such as dynamic range compression / expansion processing or extracted human skin color ( Needless to say, it is a high-quality image having a sharp image processing effect because it is obtained from the same image signal that has been subjected to various image processing including processing that does not perform gradation conversion processing. .
[0048]
  As described above, the operator can perform the verification by looking at the image displayed on the monitor 18, and if necessary, press the adjustment key 47 in FIG. 3 to obtain the black and white density D, C density, M density, Y density, gradation, overall screen dynamic range compression rate α, highlight range dynamic range expansion rate α_l , And shadow range dynamic range expansion ratio α_d The image recorded on the finished print can be adjusted. The key correction of the adjustment key 47 by the operator is sent to the key correction unit 46 and used as the correction amount of the image processing condition including the expansion / contraction rate α. The parameter integration unit 48 sets the correction amount and the expansion / contraction set by the setup unit 44. The image processing conditions including the rate α are integrated, and new image processing conditions after key correction are set. That is,Second LUT50 three correction tables (gray balance correction table, luminance correction table and γ correction table);MultiplierStretch rate α, α supplied to 56_l , Α_d The gradation conversion table in the third LUT 60 is adjusted or reset by a key operation using the adjustment key 47. As a result, the image displayed on the monitor 18 changes accordingly, and the finished print image P output from the image recording device 16 also changes.
[0049]
By the way, like the monitor 18 shown in FIG._l, Α_dMay be displayed and adjusted or reset by the mouse 66 or the like. FIG. 8 shows an example of a display screen of the monitor 18 on which the dynamic range compression / decompression processed image is displayed. On the display screen of the monitor 18, a processed image is displayed, and an adjustment slider 18a for adjusting the expansion / contraction ratio of the displayed image with the mouse 66 or the like is displayed. The operator can determine the scene of the display image. The expansion / contraction rate α, α_l, Α_dCan be fine-tuned. Expansion and contraction ratios α and α thus adjusted_l, Α_dIs input to the setup unit 44 or the parameter integration unit 48 of the image condition setting means 40 and finally set as a multiplier in the multiplier 56 of the image processing unit 42. Also, the operator can determine the color and chromaticity range of the specific area while looking at the monitor 18 and instruct the condition setting means 40 in the same manner as in the case of adjusting the expansion / contraction ratio.
The image processing apparatus 14 that implements the image processing method of the present invention is basically configured as described above.
[0050]
Next, FIG. 10 shows the image recording apparatus 16. The image recording device 16 receives, as output image information, an image signal corresponding to the image recording of the finished print for which the tone conversion processing in the third LUT 60 of the image processing unit 42 of the image processing device 14 has been completed. Accordingly, the photosensitive material Z is scanned and exposed by light beam scanning, and the exposed photosensitive material Z is developed to output a finished print image P as a visible image, as shown in FIG. , Driver 88, image exposure means 90, and development means 92.
[0051]
The image signal output from the image processing unit 42 of the image processing apparatus 14 is transferred to the driver 88 and converted into an analog image signal by a D / A converter (not shown). Then, the driver 88 drives the acousto-optic modulator of the image exposure unit 90 in order to modulate the scanning light beam of the image exposure unit 90 in accordance with the analog image signal that has been D / A converted.
On the other hand, the image exposure means 90 scans and exposes the photosensitive material Z by light beam scanning and records an image of the image information on the photosensitive material Z. As shown conceptually in FIG. A light source 96R that emits a light beam in a narrow wavelength range corresponding to the exposure of the R photosensitive layer formed on the light source, a light source 96G corresponding to the exposure of the G photosensitive layer, and a light source 96B corresponding to the exposure of the B photosensitive layer. The light source of each light beam, the acousto-optic modulators 94R, 94G and 94B for modulating the light beam emitted from each light source according to the recorded image, the polygon mirror 98 as the light deflector, the fθ lens 100, and the photosensitive member. Sub-scanning conveying means for the material Z is provided.
[0052]
  The light beams emitted from the light sources 96R, 96G, and 96B and traveling at different angles enter the corresponding acousto-optic modulators 94R, 94G, and 94B. R, G, and B drive signals corresponding to the recorded image are transferred from the driver 88 to each acousto-optic modulator, and the incident light beam is intensity-modulated according to the recorded image.
  Each light beam modulated by the acousto-optic modulator is incident on and reflected by substantially the same point of the polygon mirror 98, deflected in the main scanning direction (arrow x direction in the figure), and then the fθ lens.100Is adjusted to form an image with a predetermined beam shape at a predetermined scanning position, and enters the photosensitive material Z. The image exposure unit 90 may be provided with a light beam shaping unit and a surface tilt correction optical system as necessary.
[0053]
On the other hand, the photosensitive material Z is wound in a roll shape and is loaded at a predetermined position in a light-shielded state. Such a photosensitive material Z is pulled out by a drawing roller (not shown), and is conveyed in the sub-scanning direction (in the direction of arrow y in the figure) by a pair of conveying rollers 102a and 102b arranged with the main scanning position interposed therebetween. Since the light beam is deflected in the main scanning direction, the photosensitive material Z conveyed in the sub-scanning direction is two-dimensionally scanned and exposed by the light beam, and the photosensitive material Z is subjected to image processing means 40 of the image processing apparatus 14. The image (latent image) of the transferred image information is recorded.
[0054]
The exposed photosensitive material Z is then carried into the developing means 92 by the conveying roller pair 104 and subjected to development processing to be a finished print P. Here, for example, if the photosensitive material Z is a silver salt photographic photosensitive material, the developing means 92 is a color developing tank 106, a bleach-fixing tank 108, washing tanks 110a, 110b, 110c and 110d, a drying means and a cutter (not shown). The photosensitive material Z is subjected to a predetermined processing in each processing tank, dried, cut into a predetermined length corresponding to one print by a cutter, and output as a finished print P. The image recording device 16 is basically configured as described above.
[0055]
The image reproduction apparatus 10 that implements the image processing method of the present invention is basically configured as described above. Here, a preferable aspect of the image processing method of the present invention will be described below.
As shown in FIG. 9, the image processing method of this aspect is characterized in that a density histogram is created in advance from an original image to calculate a density range, and then a dynamic range compression / expansion rate α is calculated. The blur image 1 generated by the filter (MF) and the blur image 2 generated by the low-pass filter (LPF) are weighted and added, and then compressed and decompressed using the compression / expansion rate α calculated in advance, so that the blur image is obtained. And the difference signal is generated by subtracting the finally obtained blurred image from the original image. On the other hand, the coordinates of a specific area such as skin color are extracted from the blurred image signal, and the difference signal is subjected to gradation conversion. In some cases, the gradation conversion processing that raises the gradation is not performed on the specific area (or the specific area of the blurred image) such as the extracted skin color.
[0056]
Therefore, in the present invention, a high-contrast image, a low-contrast image, or an image in which a high-contrast part and a low-contrast part are mixed is not affected by high-frequency components such as noise. Therefore, it is possible to accurately extract a specific area occupied by an important color having a gentle gradation such as a person's skin color, a cyan color of a well-clear blue sky, a green color of a plant or the like.
Further, in the present invention, since the gradation conversion processing that raises the gradation is not performed on the accurately extracted specific region, the dynamic range is appropriately compressed and expanded, the generation of false contours, bright portions, It is possible to obtain a sharp and high-quality image in which not only the dark portion is not crushed but also the contrast of a specific region such as skin color is not high and the contrast of other portions is high.
[0057]
By the way, in the image reproducing apparatus 10 shown in FIG. 1, image information can be processed only by reading the color original image from the film A once without performing prescan. However, the present invention is not limited to this, and pre-scanning may be performed.
An image reproduction device 10A shown in FIG. 11 includes the image reproduction device 10 shown in FIG. 1 and the configuration of the image processing device 14A, specifically, the configuration of the image processing device 14, and further includes a prescan memory 68 and a prescan image. Since it has the completely same structure except having the process part 70, the same code | symbol is attached | subjected to the same component and the detailed description is abbreviate | omitted.
[0058]
  In the image reproducing device 10A shown in FIG. 11, the image reading device 12 performs pre-scan that coarsely reads an image at a low resolution prior to image reading (main scan) for obtaining image information for output. The image processing device 14A sets (sets up) various image processing conditions from the image information obtained by the pre-scan, performs image processing on the image information of the main scan in accordance with the image processing conditions, and outputs the image recording device.16Output image information for image recording according to the above. Note that the image reading methods in the pre-scan and the main scan are basically the same, but the only difference is that the resolution of the read image is different.
  At the time of pre-scanning, the image read by the CCD sensor 30 is thinned out by the control by the timing controller 72 connected to the pre-scan memory 68 of the image processing apparatus 14A, and the rough image information with low resolution and Then, the prescan image processing unit 70 performs image processing.
[0059]
  The image processing apparatus 14 </ b> A in the illustrated example performs various image processes including a specific area extraction process, an image process corresponding to the extracted specific area, and a dynamic range compression / decompression process on the digital image signal input from the image reading apparatus 12. In addition to the frame memory 38 used as the main scan image memory, the image processing condition setting unit 40, and the image processing unit 42 for the main scan image, a prescan memory 68 and a prescan image processing unit ( (Hereinafter referred to as a display image processing unit) 70. Also,Frame memory38 andPre-scan memory68 is connected to a timing controller 72 that controls reading of image information for each pixel.
  The prescan image information from the image reading device 12 is sent to the prescan memory 68, and the main scan image information is sent to the frame memory 38 and stored therein.
  The pre-scan memory 68 basically has the same configuration as that of the frame memory 38 which is the main scan memory, and together, R image information, G image information and B image information supplied from the image reading device 12 are obtained. Each frame consists of three frame memories. Note that the recording capacities of the pre-scan memory 68 and the frame memory 38 may be different as necessary.
[0060]
  The image information stored in the prescan memory 68 is read by the display image processing unit 70 and the condition setting unit 40, and the image information stored in the frame memory 38 is read by the image processing unit 42, respectively.
  The condition setting unit 40 is different from the condition setting unit 40 of the image processing apparatus 14 shown in FIG. 1 in that the image information stored from the pre-scan memory 68 is received.Key correction section46 and a parameter integration unit 48, which function in exactly the same manner in setting various image processing conditions such as calculation of the color and dynamic range of a specific area and calculation of the compression / expansion rate α.
  The compression / expansion rates α and α calculated by the setup unit 44 of the condition setting unit 40_l , Α_d Are sent from the parameter integration unit 48 to the MUL 56 of the image processing unit 42 and set as a multiplier, and are also sent to the third LUT 78 of the display image processing unit 70 and set as a multiplier or dynamic range compression / decompression table. The In addition, various other image processing conditions (including tables and the like) set in the setup unit 44 include not only the second and third LUTs 50 and 60 of the image processing unit 42 to the display image processing unit 70 from the parameter integration unit 48. To the second LUT 74, and various image processing tables and the like are set.
[0061]
  The display image processing unit 70 reads the pre-scan image information stored in the pre-scan memory 68, performs various image processes according to the image processing conditions set by the condition setting unit 40, and displays image information for display on the monitor 18. The second LUT 74, the MTX 76, the third LUT 78, and the signal converter 62 are included.
  Here, the second LUT 74 is the second LUT of the image processing unit 42.50The image information stored in the pre-scan memory 68 is read out, and gray balance adjustment, brightness correction, and gradation correction are performed.
  The MTX 76 has exactly the same function as the MTX 52 of the image processing unit 42 and performs color correction of the image information processed by the second LUT 74.
[0062]
In the display image processing unit 70, the image information processed by the MTX 76 is directly input to the third LUT 78 without performing the dynamic range compression / decompression process using the blurred image information by the filtering process (blur mask process).
The third LUT 78 has the same tone conversion function as the third LUT 60 of the image processing unit 42 when displaying the pre-scan image information color-corrected by the MTX 76 on the monitor 18 without performing the dynamic range compression / decompression process. The color correction pre-scan image information is converted to gradation and density into image information suitable for display on the monitor 18. On the other hand, when the dynamic range compression / decompression process is also performed on the color correction pre-scan image information, the third LUT 78 adds the expansion / contraction ratios α and α sent from the condition setting unit 40 in addition to the gradation conversion function._l, Α_dHas a multiplication function or a magnification conversion function with a multiplier of, and the set expansion / contraction rate α, α is set in the color correction pre-scan image information_l, Α_dAre subjected to compression / decompression processing, gradation conversion, and density conversion processing, and converted into an image signal having an appropriate dynamic range and suitable for display on the monitor 18.
[0063]
  In this way, the pre-scan image information converted by the third LUT 78 is output, converted to a signal corresponding to the monitor 18 by the signal converter 62, and further D / A converted by the D / A converter 64. Are displayed on the monitor 18.
  Here, when the image displayed on the monitor 18 is subjected to the dynamic range compression / expansion processing, the image recording apparatus16The finished print image P sent to and reproduced by the same processing as the various image processing and compression / decompression processing is displayed on the monitor 18, so that the same image as the finished print image P is displayed on the monitor 18. Is done.
  In the example shown in FIG. 11, the mouse 66 connected to the monitor 18 is omitted.
[0064]
  The operator looks at the pre-scan image displayed on the monitor 18 and performs an examination, and if necessary, specifies the position, color, chromaticity, and range of the specific area by operating the mouse 66 or the keyboard, or a condition setting unit. As described above, various adjustments are performed by pressing each of the 40 adjustment keys 47.
  The key input of the adjustment key 47 by the operator is performed by the condition setting unit 40.Key correction unit 46The parameter integration unit 48 integrates the correction amount and the image processing condition set by the setup unit 44 to set a new image processing condition after key correction. The Here, by the key input using the adjustment key 47, the correction table of the second LUT 50, the multiplier α of the MUL 56, and the gradation conversion table of the third LUT 60 are adjusted or reset in the image processing unit 42. The correction table of the second LUT 74 and the dynamic range compression / expansion and gradation conversion table according to the expansion / contraction rate α in the third LUT 78 are adjusted or reset, and the image displayed on the monitor 18 changes accordingly.
  When the operator determines that the image is appropriate (test OK), an output instruction is issued, and the second LUT 50 of the image processing unit 42 reads the main scan image information from the frame memory 38.
[0065]
Hereinafter, in the image processing unit 42 of the image processing device 14A, the main scan image information thus read out is exactly the same as the image processing unit 42 of the image processing device 14 of the image reproduction device 10 shown in FIG. Various image processing including dynamic range compression / decompression processing is performed to generate output image information for image recording, which is sent to the image recording device 16.
Note that the above-described verification does not necessarily have to be performed. For example, a configuration may be adopted in which a full auto mode or the like is set and print creation is performed without verification. In this case, for example, when the setup unit 44 sets image processing conditions and the parameter integration unit 48 sets these image processing conditions in the image processing unit 42, the second LUT 50 starts reading the main scan image information. Then, image processing is performed.
[0066]
Upon receiving the output image information, the image recording device 16 outputs a finished print image P in the same manner. Similarly, the finished print image P obtained in this way is a high-contrast image, a low-contrast image, a mixed image of high-low-contrast areas, and a specific region such as skin color is a high-frequency component such as noise. The specific area extracted accurately without being affected by the image is not subjected to gradation conversion processing that adversely affects the specific area, so the specific area such as skin color is not rough due to graininess or noise. Further, the contrast is enhanced in the other portions, and there is no generation of false contours and the bright and dark portions are not crushed, and the image is a sharp high-quality image in which the dynamic range is appropriately compressed and expanded.
In the image reproduction device 10A of this aspect, the setup unit 44 of the condition setting unit 40 uses a pre-scan image having a low pixel density (having a smaller number of pixels than the main scan image) obtained by performing the pre-scan. Since the auto setup algorithm can be performed, the processing of the condition setting unit 40 and the image processing of the image signal for display on the monitor 18 can be made quick and simple. The configuration of the unit 70 can be simplified, and the circuit scale thereof can be simplified.
[0067]
  Further, in the image reproducing devices 10 and 10A shown in FIGS. 1 and 11, when the blurred image information is created, the image processing units of the image processing devices 14 and 14A respectively for the digital image signals of the three colors of RGB. 42 filters (FIL54However, the present invention is not limited to this, and a digital image signal of three colors of RGB is converted into a light and dark image signal as in the image reproducing device 10B shown in FIG. After conversion, filter (FIL54) To generate a blur mask signal.
  The image reproduction device 10B shown in FIG. 12 has the configuration of the image reproduction device 10A shown in FIG. 11 and the image processing device 14B. Specifically, in the image processing unit 42B, a bright and dark image signal is present between the first MTX 52 and the FIL 54. The second MTX 80 for converting the image data into the image data, the condition setting unit 40 including only the setup unit 44, and the pre-scan image processing unit 70 performs dynamic decompression compression and gradation conversion. Except that the image signal is suitable only for the LUT 78 for display on the monitor 18, the same components have the same reference numerals. A detailed description thereof will be omitted.
[0068]
  In the image processing unit 42B of the image processing device 14B of the image reproduction device 10B shown in FIG. 12, the RGB three-color image signals that have been color-corrected by the first MTX 52 are sent to the subtractor 58, and compression / expansion of the dynamic range is performed. FIL for generating a blur mask signal for image processing such as54FIL is not sent directly, but is converted into a bright and dark image signal in advance.54It is sent to the second MTX 80 earlier.
  The second MTX 80 generates a bright and dark image signal of the color original image from the R, G, and B image signals sent from the first MTX 52.
  Examples of the method for generating the bright and dark image signal include a method of taking one third of the average value of the R, G, and B image signals, a method of converting a color image signal into a bright and dark image signal using the YIQ rule, and the like. .
  As a method of obtaining a bright and dark image signal using the YIQ standard, for example, a method of calculating only the Y component of the YIQ standard from the R, G, and B image signals by the following formula is exemplified.
                  Y = 0.3R + 0.59G + 0.11B
[0069]
The bright and dark image signal thus obtained by the second MTX 80 is sent to the FIL 54 in order to generate a blur mask signal. The blur mask signal generated by the FIL 54 is sent to the MUL 56, subjected to dynamic range compression / expansion processing with the expansion / contraction ratio α, sent to the subtractor 58, and each color from the color correction RGB three-color image signal sent from the first MTX 52. Subtracted every time.
In the same manner, the tone is converted by the third LUT 60 and sent to the image recording device 16 to output the finished print image P as a visible reproduction image.
In this embodiment, the blurred image signal generated by the filtering process is created based on the bright and dark image signal converted from the digital image signal of the color original image, so that the brightness of the reproduced visible image, particularly the edge portion of the subject changes. However, since the color reproducibility does not change, it has an appropriate dynamic range, the high and low density parts are not crushed, the specific area is accurately extracted, and the granularity and noise of the specific area are suppressed. Of course, it is possible to reproduce an image having no unnaturalness similar to a color original image.
[0070]
In the embodiment shown in FIG. 6, a median filter (MF) 54a and a low-pass filter (LPF) 54b are used as the smoothing filter (FIL) 54 storing the edges, and color correction is performed by the MTX 52 using these filters 54a and 54b. The same digital image signal S_AThe blur mask signals 1 and 2 (blurred images 1 and 2 respectively) are generated by filtering, but the present invention is not limited to this, and the same applies to the MF 54a as in the embodiment shown in FIG. The main scan image signal S that has been color-corrected by the MTX 52_AIs filtered to generate a blurred mask signal 1 (blurred image 1). In the LPF 54b, the pre-scan image signal color-corrected by the MTX 76 of the display image processing unit 70, that is, the pixel density is low, and the main-scanned image signal S_AAfter performing the filtering process on the thinned-out image signal for the pixels thinned out compared to the main-scanned image signal S_AThe blur mask signal 2 (blurred image 2) may be generated by interpolation so as to have the same pixel density. Note that not only the blurred image by the low-pass filter but also the blurred image by the median filter may be created by interpolating the thinned signal of the color original image.
By doing so, blur mask processing can be performed based on a pre-scan image signal with a small number of pixels, so that a blur mask filter that requires a large-scale circuit configuration is not necessary, and the apparatus configuration can be simplified.
[0071]
In order to further reduce the occurrence of false contours, a digital image for generating a blurred image signal by outputting a plurality of median filters having different levels as median filters or preparing a plurality of median filters having different mask sizes. An intermediate level or mask size may be selected according to the signal distribution of the signal.
In addition, in the image processing apparatuses 14A and 14B shown in FIGS. 11 and 12, the display image processing unit 70 (or only the setup unit 44) for the pre-scan image and the image processing unit 42 (or the main scan image) 42B) is different, but the present invention is not limited to this, and both image processing units 42 (or 42B) and 70 are the same or not, except for the pixel size to be processed (number of pixels, capacity). May be configured identically
[0072]
The image processing method of the present invention has been described in detail above. However, the present invention is not limited to the above-described example, and various improvements and design changes may be made without departing from the scope of the present invention. Of course.
[0073]
【The invention's effect】
As described above in detail, according to the present invention, whether it is a high contrast image, a low contrast image, or an image in which a high contrast portion and a low contrast portion are mixed, a high frequency component such as noise is used. Therefore, it is possible to accurately extract a specific area occupied by an important color having a gentle gradation such as a person's skin color, a cyan color of a clear blue sky, a green color of a plant, and the like.
In addition, according to the present invention, since the gradation conversion processing that raises the gradation is not performed on the accurately extracted specific region, the dynamic range is appropriately compressed and expanded, the generation of false contours and bright portions It is possible to obtain a sharp high-quality image in which the contrast of a specific region such as skin color is not high and the contrast of other portions is high.
[Brief description of the drawings]
FIG. 1 is a schematic diagram of an embodiment of an image reproduction apparatus that performs an image processing method according to the present invention.
2 is a graph showing an example of a density histogram obtained by an image processing apparatus used in the image reproduction apparatus shown in FIG.
3 is a conceptual diagram of an embodiment of an adjustment key connected to the image processing apparatus shown in FIG.
4 is an example of a characteristic diagram of a table set in the second LUT of the image processing apparatus shown in FIG. 1, where (a) is a gray balance adjustment table and (b) is a brightness correction table. , (C) shows a gradation correction table.
FIG. 5 is an explanatory diagram for explaining an example of characteristics of a median filter used in the image processing apparatus shown in FIG. 1;
6 is a block diagram showing a part including an embodiment of a filter (FIL) of the image processing apparatus shown in FIG. 1; FIG.
7 is a circuit diagram showing an example of an IIR type low-pass filter used in the image processing apparatus shown in FIG. 1;
FIG. 8 is a conceptual diagram of an embodiment of a monitor used in the image reproduction device shown in FIG.
FIG. 9 is a diagram showing a flow of a characteristic portion of an example of an image processing method according to the present invention.
10 is a schematic perspective view of an embodiment of an image recording apparatus used in the image reproduction apparatus shown in FIG.
FIG. 11 is a schematic diagram of another embodiment of an image reproduction apparatus that performs an image processing method according to the present invention.
FIG. 12 is a schematic diagram of another embodiment of an image reproduction apparatus that performs an image processing method according to the present invention.
FIG. 13 is a block diagram of another embodiment of an image processing apparatus used in an image reproduction apparatus that performs an image processing method according to the present invention.
[Explanation of symbols]
  10 Image playback device
  12 Image reader
  14 Image processing device
  16 Image recording device
  18 Monitor
  20,96 light source
  22 Variable aperture
  24 color filter plate
  26 Diffusion box
  28 Imaging lens
  30 CCD
  32 amplifiers
  34 A / D converter
  36 First Lookup Table (LUT)
  38 frame memory
  40 Condition setting means
  42Image processing unit
  44Setup section
  46 Key correction part
  47 Adjustment key
  48 Parameter integration section
  50, 74 Second lookup table (LUT)
  52,76 Matrix calculator (MTX)
  54 Filter (FIL)
  54a Median filter (MD)
  54b Low pass filter (LPF)
  54c Weighted adder
  56 Multiplier (MUL)
  58 Subtractor
  59 Specific area extraction means
  60, 78 Third look-up table (LUT)
  62 Signal converter
  64 D / A converter
  66 mice
  68 Pre-scan memory
  70 Display image processing means
  72 Timing controller
  80 Second matrix calculator (MTX)
  88 drivers
  90 Image exposure means
  92 Developing means
  94 Acousto-optic modulator (AOM)
  98 polygon mirror
  100 Fθ lens
  102, 104 Conveying roller pair
  106 Color developer tank
  108 Bleach fixing tank
  110 Flush tank
  A Photo film
  Z photosensitive material
  P print

Claims

An image processing method for obtaining an image processing signal for reproducing a digital original image signal representing a color original image as a visible image,
The digital original image signal is subjected to filtering processing using an edge-preserving smoothing filter to generate a blurred image signal representing the blurred image of the original image,
Extract pixels to be extracted from the blurred image signal from the blurred image signal, extract specific regions of the extraction target pixels of the original image corresponding to these pixels,
There rows predetermined image processing in accordance with the specific area,
The edge-preserving smoothing filter is a median filter and a low-pass filter, and generates the blurred image signal by weighted addition of the first blurred image signal from the median filter and the second blurred image signal from the low-pass filter. An image processing method.

The image processing method according to claim 1 , wherein a signal obtained by interpolating the thinned signal of the digital image signal of the color original image is input to the low-pass filter to generate a second blurred image signal.

The low-pass filter, the image processing method according to claim 1 or 2 which is an infinite impulse response filter.

The predetermined image processing includes
After performing the dynamic range compression / expansion processing of the original image on the digital original image signal based on the blurred image signal, and obtaining the stretched image signal,
The image processing method according to any one of claims 1 to 3 is to perform the gradation conversion with the exception of the specific area in the expansion processed image signal.

5. The image processing method according to claim 1, wherein pixel extraction for the blurred image is performed by extracting pixels existing in a specific range in a preset color space.

Specific region of the extraction target pixel, the image processing method according to any one of claims 1 to 5, which is a region of the key color with skin color of a person, or an empty cyan, or vegetation green or gradual gradient, .