JP3992177B2 - 画像処理装置、画像処理方法及びコンピュータ・プログラム - Google Patents
画像処理装置、画像処理方法及びコンピュータ・プログラム Download PDFInfo
- Publication number
- JP3992177B2 JP3992177B2 JP2001363785A JP2001363785A JP3992177B2 JP 3992177 B2 JP3992177 B2 JP 3992177B2 JP 2001363785 A JP2001363785 A JP 2001363785A JP 2001363785 A JP2001363785 A JP 2001363785A JP 3992177 B2 JP3992177 B2 JP 3992177B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- dynamic range
- information
- input image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000012545 processing Methods 0.000 title claims description 136
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000004590 computer program Methods 0.000 title claims description 4
- 238000012937 correction Methods 0.000 claims description 105
- 238000000034 method Methods 0.000 claims description 50
- 239000000284 extract Substances 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 28
- 230000006870 function Effects 0.000 description 27
- 238000004364 calculation method Methods 0.000 description 19
- 230000001186 cumulative effect Effects 0.000 description 11
- 238000005259 measurement Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 229920006395 saturated elastomer Polymers 0.000 description 5
- 238000013139 quantization Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
- H04N1/4072—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on the contents of the original
- H04N1/4074—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on the contents of the original using histograms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
Description
【０００１】
【発明の属する技術分野】
本発明は、画像補正処理の分野に係り、特に、デジタル画像のコントラスト補正処理に関する。
【０００２】
【従来の技術】
デジタルカメラには撮影時の露出を常に最適に保つための自動露出制御機構が装備されている。その露出制御方式には種々のものがあるが、光量検出のため画面を複数の適当な領域に分割し、領域ごとに重み付けを行って光量の加重平均を取り、絞りやシャッタスピードなどを調節する方法が一般的である。
【０００３】
デジタルカメラの撮影シーンとしては一般的に以下の４つが考えられる。
通常撮影：順光状態の屋外撮影や室内での一般的な撮影
逆光撮影：被写体の後ろに光源が存在する状態での撮影
夜間ポートレート撮影：夜間、屋外でフラッシュを用いた撮影
夜景撮影：イルミネーション等、自己発光している被写体の撮影。
【０００４】
また、露出状態には、被写体の露出が適正である『適正』と、被写体の露出が不足気味の『露出不足』状態が存在する。
【０００５】
デジタルカメラの露出制御方式は、各社様々であるが、撮影条件によって適正に作動しない場合もあるため完全なものは存在せず、その結果、コントラスト不足や露出不足が往々にして起こる。
【０００６】
デジタル画像の撮影時における不適切なコントラスト状態に対応するため、画像データの全画素について輝度分布を求めた後、上端と下端において所定の分布割合だけ内側に入った端部を前記輝度分布の端部とみなしてダイナミックレンジ（シャドーポイント及びハイライトポイント）を設定し、コントラスト補正を行う技術（特開平１０−１９８８０２）が提案されている。また、シーンに応じた補正を行うため、ニューラルネットを用いて画像のシーンを分析し、輝度ヒストグラムからシーンに応じて異常と思われる濃度域を除き、残りを有効濃度域とし、有効濃度域の中から参照濃度値（シャドーポイント及びハイライトポイント）を算出する技術（特開平１１−１５４２３５）が提案されている。
【０００７】
デジタルカメラの自動露出制御機構は、とりわけ逆光撮影では背景の明るさに引っ張られて露出がマイナスに補正されるため、被写体が暗く写ってしまう。また、夜間ポートレート撮影では、被写体にストロボ光が当たることが前提になるため、絞りやシャッタスピードは既定値に固定されるが、ストロボと被写体の距離が遠すぎると光が届かず、この場合も被写体は暗く写ってしまう。
【０００８】
このようなデジタル画像の撮影時における不適切な露出状態に対応するため、画像データを自動的に階調補正する技術が提案されている。例えば、輝度ヒストグラムの形状より原画像が逆光画像か夜間ストロボ画像か標準露出画像かを推定し、状況に応じて処理を行う技術（特開２０００−１３４４６７）、被写体と背景との測光値から撮影状態（逆光から過順光まで）を把握して露出の調節を行う技術（特開平０９−０３７１４３）、撮像画面の中央部と周辺部の出力信号を比較して、周辺部の出力が大きくなるに従って連続的に利得を上げるか、もしくは利得を一定にする制御信号を出力する技術（特公平７−１１８７８６）が提案されている。
【０００９】
なお、露出補正とは、シーンに対して不適切な明るさを持つ被写体を、シーンに適した明るさに調節することを意味する。例えば露出不足で全体に暗い被写体や、逆光で被写体が暗くなっている被写体を明るくしたり、露出オーバの被写体を暗くしたりすることである。カメラにおける露出補正は、レンズに入る入射光量を調節するために絞りやシャッタスピードを変える方法が一般的である。また、プリンタやディスプレイでは、入出力変換関数（線型もしくは非線型の階調補正テーブル）等を用い、入力信号の明るさに対し出力信号の明るさを最適化するための処理等を意味する。このように露出を補正して画像データの明るさを調節することと、本明細書における階調補正処理とは目的が同等であるので、以下、階調補正処理と記す。
【００１０】
【発明が解決しようとする課題】
夜間ポートレート撮影画像のように、輝度の分布が極端に偏っており、かつハイライトに人物以外の被写体が存在しない画像では、特開平１０−１９８８０２のように画像全域でダイナミックレンジを設定すると、被写体が小さい場合に、被写体の有する明るさ付近にハイライトポイントが設定さるため、過補正になり階調がつぶれてしまう。人間の視覚特性で階調つぶれが目立つのは、少しの色味を持っているハイライト領域である。よって、輝度ヒストグラムのみでハイライトポイントを決めると色情報が無視されるため、上記の特徴を持つ領域で階調つぶれや色相変化が起こる場合がある。
【００１１】
また、特開平１１−１５４２３５では、シーンに応じて濃度ヒストグラムの異常域を除去した有効濃度域からハイライトポイントを算出しているが、特開平１０−１９８８０２と同様に、階調つぶれが目立つハイライト領域の面積が小さければ補正により階調つぶれが起こる。
【００１２】
また、階調補正処理を行う上で重要なのは、シーンを的確に判定し、シーンに応じて補正パラメータを設定することである。デジタル画像の場合、特開２０００−１３４４６７のようにデジタル特有の輝度ヒストグラムをとり、その形状やハイライト及びシャドーポイントからシーンを把握するのが一般的である。また、中央値等の統計値から露出判定を行う。しかし、シーンに分類すると、その後の補正処理はシーンに依存することになるため、シーン判定の精度が悪いと誤処理が行われてしまう。また、位置情報を欠いたヒストグラムから露出状態を判定するのは困難であり、特に、画像が特異な場合には正しい判定が行えない可能性がある。
【００１３】
例えば、暗い色の壁を背景に人物を撮影した画像で、その被写体が適正露出であった場合、ヒストグラムを用いて露出判定をすると、被写体は適正であるにもかかわらず全体的には暗いため、露出アンダーと判定され、その結果、過補正になる。また、被写体の真後ろに光源が存在する真逆光状態では背景が白飛びを起すため、真逆光状態か否かを判定するには、特開平０９−０３７１４３や特公平７−１１８７８６のように、背景と被写体のコントラスト情報ではなく、背景の色情報を用いる方が高精度に判定を行うことができる。
【００１４】
本発明の主たる目的は、背景が白飛びを起こした逆光撮影画像や、被写体がハイライト側に存在する夜間ポートレート撮影画像など、従来の技術によっては階調つぶれや色相変化を起こしやすい撮影状況で撮影された画像に対し、階調つぶれを起こさない、さらには色相変化を起こさない、適切なコントラスト補正を施すための画像処理装置及び方法を提供することにある。
【００１５】
【課題を解決するための手段】
本発明は、入力画像のコントラスト補正処理を行う画像処理装置において、入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれか成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定手段と、前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得手段と、前記対象領域情報獲得手段により得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定手段と、前記ダイナミックレンジ設定手段により設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理手段と、を有することを特徴とする。
【００１６】
また、本発明は、前記対象領域情報獲得手段は、前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする。また、前記ダイナミックレンジ設定手段は、前記対象領域情報獲得手段により得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする。
【００１７】
また、本発明は、入力画像のコントラスト補正処理を行う画像処理方法において、入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれかが成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定ステップと、前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得ステップと、前記対象領域情報獲得ステップにより得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定ステップと、前記ダイナミックレンジ設定ステップにより設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理ステップとを有することを特徴とする。
【００１８】
また、前記対象領域情報獲得ステップは、前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする。また、前記ダイナミックレンジ設定ステップは、前記対象領域情報獲得ステップにより得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする。
【００１９】
さらに、本発明の画像処理装置はコンピュータを利用してソフトウェアにより実現することも可能である。したがって、画像処理装置の上記各手段の機能をコンピュータで実現させるためのコンピュータ・プログラムも本発明に包含される。また、そのようなコンピュータ・プログラムが記録された、コンピュータが読み取り可能な各種の情報記録媒体も本発明に包含される。
【００２０】
【発明の実施の形態】
以下、添付図面を参照し、本発明の実施の形態について詳細に説明する。
《実施例１》
図１は本発明の実施例１の構成を示すブロック図であり、図２は本実施例における処理手順を示すフローチャートである。
【００２１】
図１に示す画像処理装置１は、画像データのコントラスト補正を行うもので、入力画像のタイプ判定処理（ステップＳ１）を行う判定手段２、判定されたタイプに応じてハイライトポイントを設定するための対象領域の情報を獲得する処理（ステップＳ２）を行う対象領域情報獲得手段３、獲得された対象領域の情報を用いてダイナミックレンジを設定する処理（ステップＳ３）を行うダイナミックレンジ設定手段４、及び、設定されたダイナミックレンジを用いて画像全体のコントラスト補正処理（ステップＳ４）を行う処理手段５より構成される。以下、各手段について具体的に説明する。なお、入力画像データをＲＧＢデータとして扱うが、他の形式のカラー画像データも同様に処理可能であることは以下の説明から明らかであろう。
【００２２】
まず、判定手段２（ステップＳ１）について説明する。この判定手段２は、コントラスト補正により階調つぶれの目立ちやすい領域が存在する画像をＡタイプ、そのような領域が存在しない画像をＢタイプに分類する判定を行う。ここで、「階調つぶれの目立ちやすい領域」とは、画像を構成するうえで意味のある重要領域である。
【００２３】
Ａタイプと判定されるのは、例えば、逆光撮影画像や、フラッシュを使用した夜間ポートレート撮影画像等である。逆光撮影で背景が白飛びを起こしている場合、背景以外のハイライト部分は階調つぶれが目立ちやすい。また、夜間ポートレート撮影画像も、被写体はハイライト側に存在するためコントラストを強調しすぎる処理を行うと、階調つぶれが目立つ。これ以外にも、被写体の明るさが画像内の明るさにおいて相対的に明るい範囲に存在する場合は、Ａタイプに判定される。図２７及び図２８にＡタイプの画像例を示す。Ｂタイプと判定される画像は、Ａタイプに判定されなかった画像であり、例えば通常撮影の適正露出画像、露出不足画像等である。図２９にＢタイプの画像例を示す。
【００２４】
図３に判定手段２の構成例を示す。ここに示す判定手段２は輝度ヒストグラム二極化測定手段２１、輝度ヒストグラム歪度算出手段２２、領域別明るさ検出手段２３、付随情報参照手段２４及びタイプ決定手段２５から構成される。Ａタイプの画像の輝度ヒストグラムは分布のバランスが悪い場合が多いが、この特徴を得るための手段が輝度ヒストグラム二極化測定手段２１、輝度ヒストグラム歪度算出手段２２及び領域別明るさ検出手段２３である。画像データにはヘッダ情報等として撮影時の情報が付随していることが多い。例えば、デジタルカメラで撮影された画像データをＥｘｉｆ等の情報形式で保存する場合、撮影時の情報をタグに埋め込むことが可能である。付随情報参照手段２４は、そのような画像データに付随したタイプ判定に利用可能な情報（具体的には、逆光モードや夜間撮影モード等のモード情報やストロボのＯＮ／ＯＦＦ情報等）を取得するための手段である。タイプ決定手段２５は、各手段２１〜２４により取得された情報に基づいて最終的に画像のタイプを判断する手段であり、その判定フローを図４に示す。
【００２５】
まず、輝度ヒストグラム二極化測定手段２１について説明する。前述のようにＡタイプに判定される画像のヒストグラムは分布のバランスが悪い場合が多いが、特に、逆光画像では、背景が極端に明るく被写体が極端に暗い場合が多く、その場合には輝度ヒストグラムが図５に例示するように二極化する。輝度ヒストグラム二極化測定手段２１は、輝度ヒストグラムの頻度と勾配を用いて、輝度ヒストグラムの二極化度合を測定する手段であり、その処理フローを図６に示す。図７及び図８は二極化していない輝度ヒストグラム及び二極化した輝度ヒストグラムに対する処理の説明のための図である。
【００２６】
ここで、輝度ヒストグラムにおける輝度レベルをｉ（i=0,1,2,...255）、レベルｉの頻度をｆ（ｉ）、勾配をｈ（ｉ）とする。ｈ（ｉ）は以下の式で表される。
h(i)＝(f(i+δ)-f(i))/δ (i=0,1,2,,,,,255-δ,δ>0) … (1)
【００２７】
二極化測定はレベル255-δ からレベルをデクリメントしながら行われ、Ｘと，Ｙ１又はＹ２の各レベルを検出する。
【００２８】
輝度ヒストグラムが二極化していない場合の処理について、図７を参照して説明する。勾配ｈ（ｉ）がマイナスの255≧ｉ≧Ｑのレベル領域ではステップＳ２１→Ｓ２２→Ｓ２３〜Ｓ２４→Ｓ２１のループが繰り返され、ｉがデクリメントされるだけである。つぎの勾配ｈ（ｉ）がプラスで頻度ｆ（ｉ）が閾値th1より大きいＱ＞ｉ＞Ｘのレベル領域では、ステップＳ２１→Ｓ２５→Ｓ２８→Ｓ２１のループが繰り返されｉがデクリメントされるだけであるが、ｆ（ｉ）＝Th1となると（ステップＳ２６，Ｙｅｓ）、その時のｉがレベルＸとして検出され（ステップＳ２７）、ステップＳ２８より処理が継続される。その後、勾配は多少あっても頻度が低いＸ＞ｉ＞Ｙ１のレベル領域では、ステップＳ２１→Ｓ２５→Ｓ２６→Ｓ２８→Ｓ２１のループ又はステップＳ２２→Ｓ３０→Ｓ３１→Ｓ３３→Ｓ２２のループが繰り返されｉがデクリメントされるだけであるが、ｆ（ｉ）＝Th1となると（ステップＳ３１，Ｙｅｓ）、その時のｉがレベルＹ１として検出され（ステップＳ３２）、処理を終了する。
【００２９】
輝度ヒストグラムが二極化している場合の処理について、図８を参照して説明する。この場合も、レベルＸの検出までは図７の例の場合と同じ処理であるが、二極化している場合には頻度ｆ（ｉ）が閾値Th1未満の領域で勾配ｈ（ｉ）がマイナス方向に急激に増加し、ｈ（ｉ）＝-Th2（Th2は閾値）となると（ステップＳ２３，Ｙｅｓ）、その時のｉがレベルＹ２として検出され（ステップＳ３５）、処理を終了する。
【００３０】
なお、Ｔｈ１，Ｔｈ２は、その設定によって検出される二極化度合いが変わるが、例えばヒストグラムの総頻度数をＮとして次式により決定することができる。
Th1＝C*N
Th2＝f(i)*D
但し、Ｃ，Ｄは定数 … （２）
【００３１】
タイプ決定手段２５においては、輝度ヒストグラム二極化測定手段２１により検出されたレベルＹ１，Ｙ２の大きい方のレベルをＸ’とし、レベルＸとレベルＸ’の差（X-X’）と閾値Ｔｈ３の比較判定を行い（図４、ステップＳ５１）、X-X’≧Th3の場合に二極化していると判定し入力画像のタイプをＡタイプに決定する（図４、ステップＳ５５）。
【００３２】
次に、輝度ヒストグラム歪度算出手段２２について説明する。フラッシュを使用した夜間ポートレート撮影画像の場合、背景が暗闇のためヒストグラムは極端にアンダー寄りである。これに対し、Ｂタイプを代表する通常撮影の適正露出画像は、輝度ヒストグラムの偏りが少なくバランス良く分布している。このような輝度ヒストグラムの偏りを表す尺度として、輝度ヒストグラム歪度算出手段２２は輝度ヒストグラムの歪度Ｚを次式により算出する。
Z＝(1/N)Σ((Y(j)/ave(Y(j))/S(Y(j)))^3 … （３）
ただし、Ｎは総画素数であり、Y(j)はｊ番目の画素の輝度、Σの和はｊ＝１からＮについてとる。また、ａｖｅ（Y(j)）はY(j)の平均値、S(Y(j))は標準偏差である。
【００３３】
Ｚ＞０の場合、輝度ヒストグラムは図９に例示するようなアンダー寄りの形状である。したがって、判定手段２のタイプ決定手段２５は、算出された歪度Ｚが０より大きいか判定し（図４、ステップＳ５２）、その条件が成立する場合には入力画像のタイプをＡタイプに決定する（図４、ステップＳ５６）。なお、０以外の閾値を設定し、その閾値を歪度Ｚが越えている場合にＡタイプと判定することも可能である。
【００３４】
また、画像の背景領域と被写体領域の明るさが極端に異なる場合にも、輝度ヒストグラムはバランス良く分布していないと考えられる。そこで、判定手段２の領域別明るさ検出手段２３は、入力画像の背景領域と被写体領域を識別し、各領域の明るさを検出する。各領域の明るさの尺度としては、例えば輝度中央値や輝度平均値を用いることができる。そして、判定手段２のタイプ決定手段２５は、下記（４）式の条件判定を行い（図４、ステップＳ５３）、条件が成立するときには入力画像のタイプをＡタイプに決定する（図４、ステップＳ５７）。
背景の明るさ≪被写体の明るさ
もしくは
背景の明るさ≫被写体の明るさ … （４）
この条件判定は、具体的には、例えば、
背景の輝度平均値／被写体の輝度平均値＞Th4
もしくは、
背景の輝度中央値／被写体の輝度中央値＞Th5
の場合にＡタイプ（逆光撮影画像）とし、また、
背景の輝度平均値／被写体の輝度平均値＜Th4
もしくは、
背景の輝度中央値／被写体の輝度中央値＜Th5
の場合にＡタイプ（夜間ポートレート撮影画像）とすることができる。
【００３５】
また、前述のように、画像データに撮影状態を把握できるような情報が付随しているならば、その情報によって画像のタイプを判別できる。そのような付随情報を参照するのが判定手段２の付随情報参照手段２４の役割である。より具体的には、逆光モード撮影、夜間撮影モード、ストロボＯＮのように、Ａタイプに相当する特定の撮影状態を示す情報を参照する。判定手段２のタイプ決定手段２５においては、そのような特定の撮影状態を示す情報が存在するときには（図４、ステップＳ５４、Ｙｅｓ）、入力画像のタイプをＡタイプに決定する（図４、ステップＳ５８）。そして、ステップＳ５１〜Ｓ５４のいずれの判定条件も成立しない場合に、タイプ決定手段２５は入力画像のタイプをＢタイプと決定する（図４、ステップＳ５９）。
【００３６】
なお、逆光モード撮影、夜間撮影モード、ストロボＯＮなどの特定の撮影状態を示す情報をオペレータが与えるようにすることも可能であり、そのような構成も本発明に包含される。また、他の情報、例えばシャッタースピードの情報も利用可能である（シャッタースピードが遅ければ適正露出以外の露出状態で撮影が行われた可能性が高く、Ａタイプと判定し得る）。
【００３７】
ステップＳ５１，Ｓ５２の判定は輝度ヒストグラムの形状に基づいた判定であるが、その際にヒストグラムの間引きを行ってもよい。
【００３８】
また、ヒストグラムの形状以外にも、ハイライトポイントをタイプ判定に利用してもよい。この場合、輝度レベル２５５から頻度を積算していき、積算頻度が例えば総度数の０．５％を超えたレベルをハイライトポイントとすることができる。
つまり、全度数をＮ、レベルｉの頻度をz(i)（i=0,1,2...255）とする場合、
Ｎ＝Σz(i)、（和はi=0,1,2...255、についてとる）と表せ、
ハイライトポイントは（0.5*N）／100≦Σz(i)（i=255,254,....の順にとる）となるｉの最大値とすることができる。
【００３９】
判定手段２の判定方法は以上の方法のみに限定されるものではなく、コントラスト補正によって階調つぶれの目立ちやすい領域が存在するか否かを判定できるならば他の方法を利用しても構わない。
【００４０】
次に、対象領域情報獲得手段３（図２、ステップＳ２）について説明する。対象領域情報獲得手段３は、判定手段２により判定されたタイプに応じて、ハイライトポイントの設定のための領域（対象領域）の情報を得る。以下、Ａタイプの場合とＢタイプの場合とに分けて説明する。
【００４１】
まず、Ａタイプと判定された場合について説明する。入力画像がＡタイプと判定された場合には、階調つぶれの目立ちやすい領域を対象領域とする。そのような領域は、ハイライトでかすかに色づいている領域、すなわち画像を明るさの分布を表す情報で表現した場合の『相対的に明るい』範囲に対応する画像領域である。そのような領域を得るための処理フローを図１０に示し、その各ステップについて説明する。
【００４２】
ステップＳ７１：入力画像全体の輝度ヒストグラムを作成する。なお、判定手段２で作成された輝度ヒストグラムを利用することも可能である。
【００４３】
ステップＳ７２：画像のなかで相対的に明るい部分を取り出すために、対象領決定用ダイナミックレンジ（Scene_Min,Scene_Max）を算出する。すなわち、輝度ヒストグラムにおいて、最小レベルから最大レベルに向かって、及び、最大レベルから最小レベルに向かって、頻度を累積し、累積頻度が総頻度の１％になるレベルをそれぞれシャドーポイントScene_Min、ハイライトポイントScene_Maxとする。ただし、この設定パラメータ（累積頻度１％）は一例であり、変更可能である。なお、デジタルカメラで撮影された画像などは、レベル０とレベル２５５にノイズがのり易いため、最小レベルを１、最大レベルを２５４とするのが一般に好ましい。
【００４４】
ステップＳ７３：画像のなかで相対的に明るい部分をヒストグラム上の分布域から決定するため、輝度ヒストグラムをいくつかの区分に量子化する。例えば、Scene_MinとScene_Maxの間を４つの区分に分割する。そして各区分にレベルの低い順から番号付けを行う。図１１に量子化例を示す。最もレベルの高い区分３に属する画素が「相対的に明るい領域」である。
【００４５】
ステップＳ７４：上のステップで得た「相対的に明るい領域」から、高輝度白色光画素及びエッジ画素を排除し、残った画素を対象領域とする（ステップＳ７４）。
【００４６】
図２８に示した夜間ポートレート撮影画像の場合、図３０に示した白抜き領域が対象領域である。高輝度白色光画素の領域をあらかじめ排除する理由は、その領域は後述するコントラスト補正によって仮に階調がつぶれたとしても、そのつぶれが認識しにくい（目立たない）からである。また、エッジ画素の領域をあらかじめ排除する理由は、デジタルカメラ内のエッジ強調処理により故意に強調された可能性があるため判定には適さないからである。
【００４７】
ここで、高輝度白色画素とは、その色成分（Ｒ，Ｇ，Ｂ）が、例えば、
((R＞240 && G＞240 && B＞240) && (|G-R|＜10 && |G-B|<10)) … （５）
を満たす領域である。
【００４８】
次に、Ｂタイプと判定された入力画像の場合について説明する。Ｂタイプの画像は、適度なコントラストを持ち、輝度ヒストグラムは広い範囲でバランス良く分布しているため、画像全域をハイライトポイントの設定に用いることができる。したがって、対象領域情報獲得手段３は、入力画像の全領域から上に述べた高輝度白色光画素とエッジ画素を除き、残った領域を対象領域とする。ここで高輝度白色光画素とエッジ画素を排除する理由は上に述べた通りである。
【００４９】
なお、（５）式においては、ＲＧＢ情報を用いて高輝度白色光画素か否かの判定を行っているが、輝度色差情報、明度色差情報などＲＧＢ以外の色空間を用いることもできる。また、高輝度白色画素を定義しているパラメータ（前記（５）式中の閾値２４０，１０）は処理後の画像を出力するデバイスの特性等に応じて適宜変更することができる。また、輝度情報を用いて画像のなかで相対的に明るい部分を算出しているが、明度情報あるいはＧ信号などの色情報を用いることもできる。
【００５０】
次に、ダイナミックレンジ設定手段４（図２、ステップＳ３）について説明する。対象領域情報獲得手段３により得られた対象領域の情報を用いて、以下の手順でダイナミックレンジを設定する。
【００５１】
ハイライトポイントの設定であるが、対象領域のＲ，Ｇ，Ｂ各ヒストグラムにおいて最大レベルからの累積頻度をそれぞれ計算し、累積頻度の値が総頻度の０．５％となるＲ，Ｇ，Ｂ各々のレベルの中で最大のレベルをハイライトポイントRange_Maxとする。シャドーポイントについては、画像の全領域のＲ，Ｇ，Ｂ各ヒストグラムにおいて、最小レベルからの累積頻度をそれぞれ計算し、その値が０．５％に対するＲ，Ｇ，Ｂ各々のレベルの中で最小のレベルをシャドーポイントRange_Minとする。なお、デジタルカメラで撮影された画像は０レベル、２５５レベルにノイズがのり易いため、累積頻度の計算の際には最小レベルを１、最大レベルを２５４とするのが一般に好ましい。
【００５２】
このように、ハイライトポイントの設定に、輝度ヒストグラムではなく、Ｒ，Ｇ，Ｂ各色のヒストグラムを用いるのは、輝度値は同じでも異なる色成分を持つ画素が存在する場合には、輝度ヒストグラムのみでハイライトポイントを決めると色情報が無視されるために階調つぶれが起こる可能性があるからである。つまり、少なくともハイライトポイントの設定には、色情報を用いる。ただし、色情報として、ＲＧＢ情報以外の輝度色差情報や明度色差情報等を用いてもよい。一方、シャドー部分は色が認識されにくいため、処理速度の高速化のために、シャドーポイントは輝度情報のみを用いて設定してもよい。
【００５３】
なお、ダイナミックレンジの設定パラメータ（累積頻度１％）は一例であり、適宜変更し得る。また、ここまでの説明から明らかなように、対象領域情報獲得手段３によって獲得する対象領域情報は、対象領域のヒストグラムを作成できるならば、どのような形の情報でも構わない。
【００５４】
次に、処理手段５（図２、ステップＳ４）について説明する。処理手段５は、ダイナミックレンジ設定手段４により設定されたダイナミックレンジを用いて、画像全体に対しコントラスト補正を行う。すなわち、ｊ番目の画素（ｊ＝１，２，．．．Ｎ−１，Ｎ）の輝度値をＹｉｎ（ｊ）とし、そのコントラスト補正後の輝度値Ｙ１（ｊ）を（６）式により算出し、補正係数Ｃ０（ｊ）を（７）式により算出する。
【００５５】
Y1(j)＝α×Yin(j)＋β
α＝（255-0）／(Range_Max−Range_Min）
β＝（１−α）・（255・Range_Min−０・Range_Max）／
（（255-0）-(Range_Max−Range_Min)） … （６）
C0(j)＝Y1(j)／Yin(j) … （７）
そして、算出された補正係数C0(j)を色成分（Rin(j),Gin(j),Bin(j)）に乗じることにより、コントラスト補正された色成分（Ｒ１（ｊ），Ｇ１（ｊ），Ｂ１（ｊ））を得る。
（R1(j)，G1(j)ｍ，B1(j)）＝C0(j)・(Rin(j)，Gin(j)，Bin(j)） … （８）
【００５６】
以上説明した画像処理装置１は、独立した装置として実現することも、他の機器の組み込み装置として実現することもでき、また、ハードウェア、ソフトウェア、その組み合わせのいずれによっても実現できる。ソフトウェアにより実現する場合について図１２を参照して説明する。
【００５７】
図１２に示す画像処理システム１０１は、コンピュータ１０７と周辺機器とからなる。ここに示す例では、周辺機器として、スキャナ１０４、デジタルカメラ１０５、ビデオカメラ１０６などの、カラー画像をマトリックス状の画素として表した実写の画像データとしてコンピュータ１０７に入力するための機器、オペレータからコマンド、その他の情報を入力するためのキーボード１０９、補助記憶のためのハードディスク１０８、フロッピディスクドライブ１１１など、データやプログラムなどが記録されたＣＤ−ＲＯＭを読み取るためのＣＤ−ＲＯＭドライブ１１０、コンピュータ１０７より画像を出力するためのディスプレイ１１４、プリンタ１１５などを有する。また、モデム１１２及びサーバ１１３もコンピュータ１０１に接続されている。
【００５８】
コンピュータ１０７上で動作する画像処理アプリケーション１１８は、オペレーティングシステム１１６により処理の実行が制御され、また、必要に応じてディスプレイドライバ１１９と連携し所定の画像処理を実行する。この画像処理アプリケーション１１８には、図１の画像処理装置１の機能（図２に示す処理手順）をコンピュータ１０７上で実現するための補正プログラム１１７が組み込まれている。画像処理アプリケーション１１８で画像処理を行う時に、補正プログラム１１７で画像データに対するコントラスト補正処理が施される。コントラスト補正後の画像データは、ディスプレイドライバ１１９を介してディスプレイ１１４に出力され、あるいはプリンタドライバ１２０を介してプリンタ１１５に出力される。
【００５９】
なお、ここでは画像処理システムの例であったが、汎用のコンピュータシステムで動作する画像処理アプリケーションに補正プログラム１１７と同様の機能を実装することも可能である。また、コントラスト補正処理を画像出力時にのみ施すのであれば、補正プログラム１１７と同様の機能を、プリンタドライバ１２０やディスプレイドライバ１１９、あるいは、プリンタ１１５やディスプレイ１１４に実装することも可能である。このようなコントラスト補正のための機能をコンピュータ上で実現するためプログラム類、及び、それが記録されたコンピュータが読み取り可能な情報記憶媒体、例えば磁気ディスク、光ディスク、光磁気ディスク、半導体記憶素子等も本発明に包含される。
【００６０】
《実施例２》
図１３は本発明の実施例２の構成を示すブロック図である。ここに示す画像出力システムは複数のパソコン（ＰＣ）１３１ａ，１３１ｂと複数のプリンタ１３６ａ，１３６ｂを有し、任意のパソコンより任意のプリンタに画像を出力することができる。この画像出力システムは、各プリンタ１３６ａ，１３６ｂに対応した画像処理装置１３２ａ，１３２ｂも備える。
【００６１】
この画像出力システムにおいて、例えばパソコン１３１ａでオペレータがプリンタ１３６ａを選択して出力指令を入力すると、パソコン１３１ａは画像を撮像するなどして取り込まれた画像データや各種ＤＴＰソフトで作成された画像データを画像処理装置１３２ａに送る。画像処理装置１３２ａは、送られた画像データのコントラスト補正処理を行ってから複数の出力色成分Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、Ｋ（ブラック）への色変換処理を行って印刷データを生成し、それをプリンタ１３６ａに送り印刷させる。
【００６２】
なお、画像処理装置１３２ａ，１３２ｂは独立した装置として示されているが、後により具体的に述べるように、画像処理装置１３２ａ，１３２ｂの全機能をパソコン１３１ａ，１３１ｂ上で動作するプリンタドライバに実装することも、一部機能をプリンタドライバに実装し残りの機能をプリンタ１３６ａ，１３６ｂに実装するなど、様々な実現形態をとり得る。
【００６３】
各画像処理装置１３２ａ，１３２ｂは、色変換手段１３３と、中間調処理等を実施する描画手段１３４と、描画手段１３４で描画された１ページ分の印刷画像を一時的に格納するための画像記憶手段１３５とからなる。
【００６４】
色変換手段１３３は、図１４に示すように、コントラスト補正手段１５０、補間演算部１５１及び色変換テーブル記憶部１５２から構成される。コントラスト補正手段１５０は、前記実施例１の画像処理装置１と同じ判定手段２、対象領域情報獲得手段３、ダイナミックレンジ設定手段４及び処理手段５に、対象領域情報獲得手段３のための設定パラメータテーブル７と、ダイナミックレンジ設定手段４のための許容基準テーブル８が追加された構成である。
【００６５】
以下、パソコン１３１ａ又は１３１ｂからＲＧＢ画像データを画像処理装置１３２ａに送り、ＣＭＹＫの印刷データに変換してプリンタ１３６ａで画像出力する場合を例にして、画像処理装置１３２ａにおける処理を説明する。
【００６６】
ＲＧＢの画像データが画像処理装置１３２ａに送られると、色変換手段１３３のコントラスト補正手段１５０において、判定手段２により画像のタイプ（Ａ，Ｂタイプ）が判定され、判定されたタイプに応じた対象領域の情報が対象領域情報獲得手段３によって取得される。次に、ダイナミックレンジ設定手段４においてダイナミックレンジが設定され、そのダイナミックレンジに基づいて処理手段５においてコントラスト補正が行われる。
【００６７】
ここで、使用されるプリンタによって再現範囲が異なるため、階調つぶれの許容基準もプリンタ毎に異なる。よって、コントラスト補正手段１５０は、出力予定のプリンタ（ここでは１３６ａ）に関するパラメータ情報をテーブルとして保持する。具体的には、前記（５）式において高輝度白色画素を定義しているパラメータを設定パラメータテーブル７に保持し、ダイナミックレンジを設定する際の累積頻度パラメータを許容基準テーブル８に保持する。対象領域情報獲得手段３は対象領域情報の取得処理の際に設定パラメータテーブル７よりパラメータを読み込んで使用し、また、ダイナミックレンジ設定手段４はダイナミックレンジの設定の際に許容基準テーブル８よりパラメータを読み込み使用する。
【００６８】
次に、色変換手段１３３において、色変換テーブル記憶部１５２に記憶されている色変換テーブルの中から最適なテーブルを選択して補間演算部１５１に送る。補間演算部１５１では、その選択された色変換テーブルのメモリマップの入力ＲＧＢに対し、後述するメモリマップ補間を実施し、ＲＧＢ画像データをＣＭＹＫの印刷データに変換し、それを描画手段１３４に送る。
【００６９】
このメモリマップ補間は、図１５に示すように、ＲＧＢ空間を入力色空間とした場合、ＲＧＢ空間を同種類の立体図形に分割し、入力の座標（ＲＧＢ）おける出力値Ｐを求めるために、入力の座標（ＲＧＢ）を含む立方体を選択し、選択された立方体の８点の予め設定した頂点上の出力値と立体図形の中における位置すなわち各頂点からの距離に基づいて線形補間を実施する。ここで出力値Ｐは、Ｃ、Ｍ、Ｙ値にそれぞれ相当し、補間演算に使用される入力空間上の座標（ＲＧＢ）には、実際の入出力（Ｌ＊ａ＊ｂ＊，ＣＭＹ）の関係を測定して、このデータを使用して最小２乗法等により算出したＲＧＢ（Ｌ＊ａ＊ｂ＊）に対するＣ、Ｍ、Ｙの値が予め設定してある。そして、ＣＭＹ信号は、例えば下記（９）式の演算によってＣＭＹＫ信号に変換される。
Ｋ＝α・min（Ｃ，Ｍ，Ｙ）
Ｃ１＝Ｃβ・Ｋ
Ｍ１＝Ｍβ・Ｋ
Ｙ１＝Ｙβ・Ｋ … （９）
【００７０】
なお、色変換方法として、画像データではなく、メモリマップの色変換を行う方法を用いることもできる。例えば、補正係数を補間演算部１５１に送り、選択された色変換テーブルのメモリマップの入力ＲＧＢに対し前記（９）式で色変換を行い、さらに色変換後のＣＭＹ信号に書換えを行う。次に、この変更されたメモリマップを用い、全画素に対しメモリマップ補間を実施する。このように、画像データではなく、メモリマップの書換えを行う方法は、処理の高速化に一般に有利である。
【００７１】
以上のようにして補間演算部１５１によりＣＭＹＫに変換された印刷データは描画手段１３４に送られ、ここで中間調処理等が行われた印刷画像データが１ページ分ずつ画像記憶手段１３５に一時記憶される。この印刷画像がプリンタ１３６ａで印刷される。
【００７２】
以上に説明した画像処理装置１３２ａ，１３２ｂは、独立したハードウェア装置として実現することも勿論可能であるが、その機能の全部又は一部をプリンタ１３６ａ，１３６ｂに組み込むことも可能である。また、画像処理装置の機能の全部又は一部をソフトウェアにより実現することも可能である。例えば、パソコン１３１ａ，１３１ｂ上で動作するプリンタドライバに、画像処理装置の機能の全部又は一部を実装することも可能である。プリンタドライバに実装する場合、補間演算部１５１の機能の中、前記（９）式のＣ，Ｙ，Ｋデータ生成までの機能をプリンタドライバに持たせ、（Ｃ１，Ｍ１，Ｙ１，Ｋ）データへの変換機能はプリンタ側に持たせる構成にすると、パソコンからプリンタへの転送データ量が減り高速化の面で一般に有利であろう。このようなプリンタドライバ等のプログラムと、それが記録された各種情報記録媒体も本発明に包含される。
【００７３】
ここで、１枚のプリントデータに自然画像やグラフィック画像など、種類の異なる複数のオブジェクトが貼り付いている場合、例えば図１６に示すようなオブジェクトobject1，object2，object3がはりついているプリントデータの場合、色変換手段１３３において色変換テーブルをオブジェクト毎に選択する必要がある。また、自然画像のオブジェクトobject1，object3の間でも一般的に補正係数が異なるため、補間演算部１５１で書きかえられたメモリマップはオブジェクトobject1用とオブジェクトobject3用とでは異なることになる。よって、このような場合には、図１６の右側に図示するように、補正係数を画像データのヘッダに付属させて画像処理装置１３２ａ，１３２ｂに送る必要がある（画像データと別送ることも可能である）。なお、プリンタドライバに実装する場合には、ＩＣＣ（Inter Color Consortium）で標準化されているデバイス・プロファイルを読み出して用いるような構成とすることも可能である。
【００７４】
《実施例３》
図１７は本発明の実施例３の構成を示すブロック図であり、図１８は本実施例における処理手順を示すフローチャートである。
【００７５】
図１７に示す画像処理装置２０１は、画像の階調補正を行うもので、第一の判定手段２０２、第二の判定手段２０３、及び、処理手段２０４から構成される。第一の判定手段２０２は、入力したカラー画像データにおける背景領域の色信号よりＤタイプの画像か否かを判定する処理（図１８、ステップＳ２０１）を行う手段である。第二の判定手段２０３は、第一の判定手段２０２でＤタイプでないと判定された場合に、画像における背景領域と被写体領域との相対的な明るさ関係を調べることによりＥタイプの画像であるかＦタイプの画像であるか判定する処理（図１８、ステップＳ２０３）を行う手段である。処理手段２０４は、第一の判定手段２０２、第二の判定手段２０３で判定された画像のタイプに応じ適応的な階調補正処理を行う手段であり、より具体的には、タイプに応じた階調補正テーブルを作成し（図１８、ステップＳ２０２，Ｓ２０４，Ｓ２０５）、そのテーブルを用いて、画像データに対し階調補正処理（図１８、ステップＳ２０６）を行う。
【００７６】
以下、画像処理装置２０１の各手段について詳細に説明する。
まず、第一の判定手段２０２（図１８、ステップＳ２０１）について説明する。第一の判定手段２０２では、入力画像が逆光画像（Ｄタイプ）か否かを判定する。Ｄタイプと判定される画像とは、背景領域が主に高輝度白色光に属する画像であり、その主な撮影状況は背景が白飛びを起こしている真逆光画像である。この判定には様々な方法を用いることができるが、その２つの例について次に説明する。
【００７７】
第１の方法においては、図１９のフローチャートに示すように、入力画像の背景領域と被写体領域との像域分離を行う（ステップＳ２１０）。図２７の画像の場合、図３１のように像域分離がなされる。そして、背景背景領域において、高輝度白色光の画素をカウントし（ステップＳ２１１）、背景領域の例えば７０％以上の画素が高輝度白色光画素ならばＤタイプと判定する（ステップＳ２１２）。ここで、高輝度白色光画素とは、その色成分（Ｒ，Ｇ，Ｂ）が前記（５）式を満たす画素である。なお、像域分離の処理と、高輝度白色光画素のカウント処理とを同時に実行することも可能である。
【００７８】
第２の方法においては、図２０のフローチャートに示すように、入力画像全域に対し高輝度白色光画素のカウントを行う（ステップＳ２２０）。この際、画像端部に属する画素か否かの識別もおこなう。画像端部とは、例えば図２１に斜線部として示すような画像の周辺部分である。そして、高輝度白色光画素が総画素数の例えば７％以上であり、かつ、高輝度白色光画素の７０％以上が画像端部に存在するならばＤタイプと判定する（ステップＳ２２１）。
【００７９】
次に、第二の判定手段２０３（図１８、ステップＳ２０３）について説明する。この第二の判定手段２０３においては、第一の判定手段２０２でＤタイプと判定されなかった画像が、背景領域の方が被写体領域よりも相対的に暗い場合にＥタイプと判定し、そうでない場合にＦタイプと判定する。Ｅタイプに判定される画像の一例が図２８に示した夜間ポートレート撮影画像である。
【００８０】
第二の判定手段２０３の処理フローを図２２に示し、各ステップの処理内容について説明する。
【００８１】
ステップＳ２５０：入力画像の全域の輝度ヒストグラムを作成する。ここで輝度Ｙは、色成分（Ｒ，Ｇ，Ｂ）から次式により求められる。これは前記各実施例においても同様である。
Y＝0.299・R＋0.587・G＋0.114・B … （１０）
【００８２】
ステップＳ２５１：前ステップで作成された輝度ヒストグラムからタイプ判定用ダイナミックレンジ（Scene_Min,Scene_Max）を求める。具体的には、輝度ヒストグラムにおいて、最小レベルから累積頻度を求め、その値が総頻度の例えば１％に達したレベルをシャドーポイントScene_Minとする。また、最大レベルから累積頻度を求め、その値が総頻度の例えば１％に達したレベルをハイライトポイントScene_Maxとする。なお、デジタルカメラで撮影された画像は０レベルと２５５レベルにノイズがのり易いため、最小レベルを１、最大レベルを２５４とするのがよい。
【００８３】
ステップＳ２５２：画像のなかで相対的に暗い部分を輝度ヒストグラム上の分布域から決定するため、前ステップで求めたシャドーポイントScene_MinとハイライトポイントScene_Maxの間を４分割することにより、図１１に例示するように、４つの区分０，１，２，３に量子化する。区分０が相対的に暗い分布域となる。
【００８４】
ステップＳ２５３：入力画像に対し、前ステップで得られた各区分の輝度レベルを持つ画素を代表レベルに置き換えることにより、輝度レベルを４レベルに量子化した画像（過度のコントラストをつけた画像）を作成する。図２８に示した夜間ポートレート撮影画像の場合、図３２のような量子化画像が得られる。そして、量子化画像の背景領域（図Ａ５の白領域）の平均輝度と被写体領域（図３２の黒領域）の平均輝度を算出して比較し、背景領域の平均輝度の方が被写体領域の平均輝度よりも低い場合に（背景が被写体よりも相対的に暗い場合に）Ｅタイプと判定する。そうでない場合は、Ｆタイプと判定する。ここで画像を量子化するのは、画像に過度のコントラストをつけることにより、背景と被写体との相対的な明るさ関係の把握を容易にするためである。
【００８５】
Ｅタイプに判定される画像は、背景が被写体よりも相対的に暗い画像、つまり夜間ポートレート画像や夜景画像、通常撮影の露出不足画像などである。Ｆタイプに判定されるのは、背景のほうが被写体よりも明るい、真逆光以外の逆光画像や、通常撮影の適正画像（例えば図２９に示す画像）、通常撮影の露出不足画像などである。
【００８６】
ここで、第一の判定手段２０２で真逆光画像（Ｄタイプ）であるか否かを判定したの後に第二の判定手段２０３でさらにタイプ判定を行う理由は２つある。一つ目の理由は、判定の容易な真逆光画像の判定を先に行うほうが誤判定が起こりにくいからである。また、第二の判定手段２０３において画像中の相対的に明るい部分と暗い部分を抽出するためにタイプ判定用ダイナミックレンジを算出するが、これは、露出不足などでコントラスト不足な画像の明るい部分と暗い部分とをはっきりさせることで背景と被写体との明るさ関係を分かりや易くするためである。よって、元々背景が絶対的に明るく、逆光撮影画像と思われるＤタイプの画像に同様の量子化を行うと、適正露出のＦタイプの画像と混同し易いため、第一の判定手段２０２でＤタイプの判定を先に行う必要があり、これが二つ目の理由である。
【００８７】
なお、上に説明した画像タイプの判定処理において、高輝度白色領域や輝度ヒストグラムを算出する際には適当に間引きを行っても良い。また、高輝度白色光か否かの判定にＲＧＢ情報を用いる例を説明したが、輝度色差情報や明度色差情報などＲＧＢ以外の色空間を判定に用いることも可能である。また、第二の判定手段２０３において、輝度情報を用いて画像のなかで相対的に暗い部分を算出しているが明度情報やＧ信号などの色情報を用いても良い。また、高輝度白色光の判定パラメータ（前記（５）式中の閾値）やタイプ判別用ダイナミックレンジの判定パラメータ（累積頻度１％）は必要に応じて変更可能である。
【００８８】
また、第一の判定手段２０２による判定をオペレータが判定するようにしてもよい。例えば、オペレータの判定結果を入力するための「逆光補正キー」のような手段を用意し、オペレータによって「逆光補正キー」が押された場合にはＤタイプとしての処理に移行し、押されない場合には第二の判定手段２０３による判定処理に移行するような構成とすることも可能である。
【００８９】
次に、処理手段２０４（図１８のステップＳ２０２，Ｓ２０４，Ｓ２０６）について、図２３のフローチャートに沿って説明する。
【００９０】
ステップＳ２６０：露出補正量決定領域と制御領域の抽出を行う。露出補正量決定領域とは露出補正量を決定するための領域であり、制御領域とは補正を制御する時に使用する領域である。下記に従って全ての画素をこの２領域に振り分ける。
【００９１】
背景が被写体よりも明るいＤタイプ又はＦタイプの場合（図１８のステップＳ２０２又はＳ２０５の場合）においては、被写体領域を露出補正量決定領域とし、また、背景領域及び被写体領域（つまり画像全域）のハイライト画素を制御領域とする。これに対し、背景は被写体よりも暗いＥタイプの場合（図１８のステップＳ２０４）においては、被写体領域を露出補正量決定領域とし、被写体領域のハイライト画素を制御領域とする。ここで、ハイライト画素とは、例えば図１１のように量子化した輝度ヒストグラムの区分３に属する画素である。
【００９２】
ステップＳ２６１〜Ｓ２６４：まず、ステップＳ２６１において、露出補正量決定領域の情報、例えば輝度中央値と、画像のタイプとに応じて、補正量δの初期値を決定する（これが露出の判定に相当する）。その決定には様々な方法を用い得るが、例えば、輝度中央値が第１の閾値より小さいときに、Ｄタイプならば第１の所定値を初期値とし、Ｅ又はＦタイプならば輝度中央値を用いて第１の計算式で算出した値を初期値とする。輝度中央値が第１の閾値より大きく第２の閾値より小さい場合には、どのタイプであっても、輝度中央値を用いて第２の計算式で算出した値を初期値とする。輝度中央値が第２の閾値より大きい場合には、どのタイプであっても第２の所定値を初期値とする。そして、決定した補正量δの初期値を用いて、初期の階調補正テーブルｆ０（ｘ）を作成する（ステップＳ２６１）。
f0(x)＝｛(x/255)^δ｝・255 … （１１）
【００９３】
次に、現在の階調補正テーブルを用いて階調補正を行った場合の階調つぶれが許容される程度であるか評価する（ステップＳ２６２）。具体的には、現在の階調補正テーブルを用いて、後述するステップＳ２６５と同じ色変換方法を用いて制御領域に属する画素の変換を行う。そして、階調補正後の画像データの階調つぶれを評価する。例えば、出力デバイスの再現範囲を超えた（つまりレベル２５５を超えた）飽和画素に対し、平均的な超越値を算出する。すなわち、ｋ個の飽和画素に対し、各画素ごとに飽和した色成分の最大レベルｌｊ（ｊ＝１，２．．．Ｋ）を求め、最大レベルと再現範囲上限との差分の平均値Ｏａｖｅを飽和度として算出する。
Oave＝Σ(lj−255)／K … （１２）
但し、Σはj=1,2...Kについてとる。
そして、飽和度がある閾値以上の場合に、飽和度合すなわち階調つぶれが許容されないと判断する。
【００９４】
なお、制御領域に属する画素数Ｍと制御領域における飽和画素数Ｋの比Ｋ／Ｍを飽和度とすることもできる。あるいは、画像全領域の画素数Ｎと飽和画素数Ｋの比Ｋ／Ｎを飽和度とすることもできる。
【００９５】
ステップＳ２６２で階調つぶれが許容されないと判定された場合は、補正量δを小さくなるように調節し（ステップＳ２６３）、その補正量δを用いた階調補正テーブルfi(x)を作成し（ステップＳ２６４）、再び階調つぶれが許容されるか判定する（ステップＳ２６２）。この階調補正テーブルの更新処理は階調つぶれが許容されると判断されるまで繰り返される（以上のステップＳ２６２〜Ｓ２６４のループによる階調補正テーブルの更新処理が露出の制御である）。図２４に、初期の階調補正テーブルf0(x)と１回目の更新後の階調補正テーブルf1(x)の
例を示す。
【００９６】
ステップＳ２６５：以上の手順により得られた最終の階調補正テーブルfn(x)を用いて、入力画像に対し色変換を行う。ここでは、入力画像のＲＧＢデータに対する色変換について説明する。
【００９７】
入力画像の輝度値Y1(j)（j=1,2,...,N、Ｎは総画素数）に対し、階調補正テーブルfn(x)による補正後の出力輝度値Y2(j)を定義し、階調補正係数C1(j)を算出する。
C1(j)＝Y2(j)／Y1(j)
＝fn(Y1(j))／Y1(j) … （１３）
そして、この階調補正係数を用いてカラー画像信号（R1(j),G1(j),B1(j)）を変換し、出力カラー信号（R2(j),G2(j),B2(j)）を得る。
【００９８】
（R2(j),G2(j),B2(j)）＝C1(j)・(R1(j),G1(j),B1(j)) … （１４）
以上説明した画像処理装置２０１は、独立した装置として実現することも、他の機器の組み込み装置として実現することもでき、また、ハードウェア、ソフトウェア、その組み合わせのいずれによっても実現できる。
【００９９】
ソフトウェアで実現する場合について図１２を援用して説明する。例えば、図１２に示すような画像処理システム１０１において、コンピュータ１０７上で動作する画像処理アプリケーション１１８に、図１７に示した画像処理装置２０１の機能（図１８に示す処理手順）をコンピュータ１０７上で実現するための補正プログラム１１７を組み込むことができる。画像処理アプリケーション１１８で画像処理を行う時に、補正プログラム１１７で画像データに対する階調補正処理が施され、階調補正後の画像データは、ディスプレイドライバ１１９を介してディスプレイ１１４に出力されたり、プリンタドライバ１２０を介してプリンタ１１５に出力される。なお、階調補正処理を画像出力時にのみ施すのであれば、補正プログラム１１７と同様の機能を、プリンタドライバ１１５やディスプレイドライバ１１９、あるいは、プリンタ１１５やディスプレイ１１４に実装することも可能である。このようなコントラスト補正のための機能を実現するためプログラム類、及び、それが記録されたコンピュータが読み取り可能な情報記憶媒体、例えば磁気ディスク、光ディスク、光磁気ディスク、半導体記憶素子等も本発明に包含される。
【０１００】
《実施例４》
図２５は本発明の実施例３の構成を示すブロック図である。ここに示す画像出力システムは複数のパソコン（ＰＣ）２３１ａ，２３１ｂと複数のプリンタ２３６ａ，２３６ｂを有し、任意のパソコンより任意のプリンタに画像を出力することができる。画像出力システムは、各プリンタ２３６ａ，２３６ｂに対応した画像処理装置２３２ａ，１３２ｂも備える。
【０１０１】
この画像出力システムにおいて、例えばパソコン２３１ａでオペレータがプリンタ２３６ａを選択して出力指令を入力すると、パソコン２３１ａは画像を撮像するなどして取り込まれた画像データや各種ＤＴＰソフトで作成された画像データを画像処理装置２３２ａに送る。画像処理装置２３２ａは、送られた画像データの階調補正処理を行ってから複数の出力色成分Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、Ｋ（ブラック）への色変換処理を行って印刷データを生成し、それをプリンタ２３６ａに送り印刷させる。
【０１０２】
なお、画像処理装置２３２ａ，１３２ｂは独立した装置として示されているが、後により具体的に述べるように、画像処理装置２３２ａ，２３２ｂの全機能をパソコン２３１ａ，２３１ｂ上で動作するプリンタドライバに実装することも、一部機能をプリンタドライバに実装し残りの機能をプリンタ２３６ａ，２３６ｂに実装するなど、様々な実現形態をとり得る。
【０１０３】
各画像処理装置２３２ａ，２３２ｂは、色変換手段２３３と、中間調処理等を実施する描画手段２３４と、描画手段２３４で描画された１ページ分の印刷画像を一時的に格納するための画像記憶手段２３５とからなる。
【０１０４】
色変換手段２３３は、図２６に示すように、補正処理手段２５０、補間演算部２５１及び色変換テーブル記憶部２５２から構成される。補正処理手段２５０は、前記実施例３の画像処理装置２０１と同じ第一の判定手段２０２、第二の判定手段２０３、処理手段２０４に、設定パラメータテーブル２０７と許容基準テーブル２０８が追加された構成である。
【０１０５】
以下、パソコン２３１ａ又は２３１ｂからＲＧＢ画像データを画像処理装置２３２ａに送り、ＣＭＹＫの印刷データに変換してプリンタ２３６ａで画像出力する場合を例にして、画像処理装置２３２ａにおける処理を説明する。
【０１０６】
ＲＧＢの画像データが画像処理装置２３２ａに送られると、色変換手段２３３の補正処理手段２５０において、第一と第二の判定手段２０２，２０３により画像のタイプが判定される。処理手段２０４において、判定されたタイプに応じた階調補正テーブルが作成され、それを用いた階調補正が行われる。
【０１０７】
ここで、使用されるプリンタによって再現範囲が異なるため、階調つぶれの許容基準もプリンタ毎に異なる。よって、補正処理手段２５０は、出力予定のプリンタ（ここでは２３６ａ）に関するパラメータ情報をテーブルとして保持している。具体的には、前記（５）式における高輝度白色画素を定義しているパラメータや、ダイナミックレンジを設定する際の累積頻度パラメータを設定パラメータテーブル２０７に保持している。また、プリンタのインク特性や、描画手段２５１による中間調処理に応じて階調つぶれの許容基準が異なるため、階調つぶれ許容評価のための飽和度の判定閾値などを許容基準テーブル２０８に保持している。第一と第２の判定手段２０２，２０３は設定パラメータテーブル２０７に保持されているパラメータを読み込んで使用し、処理手段２０４は許容基準テーブル２０８に保持されているパラメータを読み込んで使用する。
【０１０８】
次に、色変換手段２３３において、色変換テーブル記憶部２５２に記憶されている色変換テーブルの中から最適なテーブルを選択して補間演算部２５１に送る。補間演算部２５１では、その選択された色変換テーブルのメモリマップの入力ＲＧＢに対し前記実施例２と同様のメモリマップ補間を実施し、ＲＧＢ画像データをＣＭＹＫの印刷データに変換し、それを描画手段２３４に送る。
【０１０９】
補間演算部２５１によりＣＭＹＫに変換された印刷データは描画手段２３４に送られ、ここで中間調処理等が行われた印刷画像データが１ページ分ずつ画像記憶手段２３５に一時的に記憶され、最終的にプリンタ２３６ａで印刷される。
【０１１０】
以上に説明した画像処理装置２３２ａ，２３２ｂは、独立したハードウェア装置として実現することも勿論可能であるが、その機能の全部又は一部をプリンタ２３６ａ，２３６ｂに組み込むことも可能である。また、画像処理装置の機能の全部又は一部をソフトウェアにより実現することも可能である。例えば、パソコン２３１ａ，２３１ｂ上で動作するプリンタドライバに、画像処理装置の機能の全部又は一部を実装することも可能である。プリンタドライバに実装する場合、補間演算部２５１の機能の中、（Ｃ，Ｙ，Ｋ）データ生成までの機能をプリンタドライバに持たせ、（Ｃ，Ｍ，Ｙ，Ｋ）データへの変換機能はプリンタ側に持たせる構成にすると、パソコンからプリンタへの転送データ量が減り高速化の面で一般に有利であろう。このようなプリンタドライバ等のプログラムと、それが記録された各種情報記録媒体も本発明に包含される。
【０１１１】
前記実施例２に関連して説明したように、１枚のプリントデータに自然画像やグラフィック画像など、種類の異なるオブジェクトが貼り付いている場合、画像データのヘッダに補正係数を付属させて画像処理装置２３２ａ，２３２ｂに送る必要がある（画像データと別に送ることも可能である）。また、プリンタドライバに実装する場合には、ＩＣＣ（Inter Color Consortium）で標準化されているデバイス・プロファイルを読み出して用いる構成とすることも可能である。
【０１１２】
【発明の効果】
以上の説明から明らかなように、本発明によれば、コントラスト補正によって階調つぶれを起こしやすい領域の情報を用いてダイナミックレンジを設定することにより、背景が白飛びを起こした逆光画像や、被写体がハイライト側に存在する夜間ポートレート撮影画像などに対し、階調つぶれを起こさない適切なコントラスト補正を施すことが可能となる。特に、ハイライトポイントの設定に色情報を用いることにより、階調つぶれのみならず色相変化も起こさない適切なコントラスト補正が可能である。
【図面の簡単な説明】
【図１】 実施例１の構成を示すブロック図である。
【図２】 実施例２の処理手順を示すフローチャートである。
【図３】 図１中の判定手段の構成を示すブロック図である。
【図４】 図３中のタイプ決定手段のタイプ決定手順を示すフローチャートである。
【図５】 逆光画像の輝度ヒストグラムの例を示す図である。
【図６】 輝度ヒストグラムの二極化測定手順を示すフローチャートである。
【図７】 輝度ヒストグラムが二極化していない場合の二極化測定の説明図である。
【図８】 輝度ヒストグラムが二極化している場合の二極化測定の説明図である。
【図９】 歪度Ｚが０より大きい輝度ヒストグラムの例を示す図である。
【図１０】 図１中の対象領域情報獲得手段のＡタイプ画像に対する処理を示すフローチャートである。
【図１１】 輝度ヒストグラムの量子化の説明図である。
【図１２】 画像処理システムの一例を示すブロック図である。
【図１３】 実施例２の構成を示すブロック図である。
【図１４】 図１３中の色変換手段の構成を示すブロック図である。
【図１５】 メモリマップ補間の説明のための図である。
【図１６】 複数のオブジェクトからなるプリントデータとオブジェクトの付随情報を説明するための図である。
【図１７】 実施例３の構成を示すブロック図である。
【図１８】 実施例３の処理手順を示すフローチャートである。
【図１９】 図１７中の第一の判定手段における判定処理の一例を示すフローチャートである。
【図２０】 図１７中の第一の判定手段における判定処理の他の一例を示すフローチャートである。
【図２１】 画像端部の説明図である。
【図２２】 図１７中の第二の判定手段における判定処理を示すフローチャートである。
【図２３】 図１７中の処理手段における処理を示すフローチャートである。
【図２４】 階調補正テーブルの例を示す図である。
【図２５】 実施例４の構成を示すブロック図である。
【図２６】 図２５中の色変換手段の構成を示すブロック図である。
【図２７】 逆光撮影画像の例を示す図である。
【図２８】 夜間ポートレート撮影画像の例を示す図である。
【図２９】 通常撮影画像の例を示す図である。
【図３０】 図２８の夜間ポートレート撮影画像の対象領域を示す図である。
【図３１】 図２７の逆光撮影画像の背景領域と被写体領域を示す図である。
【図３２】 図２８の夜間ポートレート撮影画像の量子化画像を示す図である。
【符号の説明】
１ 画像処理装置
２ 判定手段
３ 対象領域情報獲得手段
４ ダイナミックレンジ設定手段
５ 処理手段
２１ 二極化測定手段
２２ 輝度ヒストグラム歪度算出手段
２３ 領域別明るさ検出手段
２４ 付随情報参照手段
２５ タイプ決定手段
１０１ 画像処理システム
１０７ コンピュータ
１１７ 補正プログラム
１１８ 画像処理アプリケーション
１３２ 画像処理装置
１３３ 色変換手段
１３４ 描画手段
１３５ 画像記憶手段
１５０ コントラスト補正手段
１５１ 補間演算部
１５２ 色変換テーブル記憶部
２０１ 画像処理装置
２０２ 第一の判定手段
２０３ 第二の判定手段
２０４ 処理手段
２３２ 画像処理装置
２３３ 色変換手段
２３４ 描画手段
２３５ 画像記憶手段
２５０ 補正処理手段
２５１ 補間演算部
２５２ 色変換テーブル記憶部
【発明の属する技術分野】
本発明は、画像補正処理の分野に係り、特に、デジタル画像のコントラスト補正処理に関する。
【０００２】
【従来の技術】
デジタルカメラには撮影時の露出を常に最適に保つための自動露出制御機構が装備されている。その露出制御方式には種々のものがあるが、光量検出のため画面を複数の適当な領域に分割し、領域ごとに重み付けを行って光量の加重平均を取り、絞りやシャッタスピードなどを調節する方法が一般的である。
【０００３】
デジタルカメラの撮影シーンとしては一般的に以下の４つが考えられる。
通常撮影：順光状態の屋外撮影や室内での一般的な撮影
逆光撮影：被写体の後ろに光源が存在する状態での撮影
夜間ポートレート撮影：夜間、屋外でフラッシュを用いた撮影
夜景撮影：イルミネーション等、自己発光している被写体の撮影。
【０００４】
また、露出状態には、被写体の露出が適正である『適正』と、被写体の露出が不足気味の『露出不足』状態が存在する。
【０００５】
デジタルカメラの露出制御方式は、各社様々であるが、撮影条件によって適正に作動しない場合もあるため完全なものは存在せず、その結果、コントラスト不足や露出不足が往々にして起こる。
【０００６】
デジタル画像の撮影時における不適切なコントラスト状態に対応するため、画像データの全画素について輝度分布を求めた後、上端と下端において所定の分布割合だけ内側に入った端部を前記輝度分布の端部とみなしてダイナミックレンジ（シャドーポイント及びハイライトポイント）を設定し、コントラスト補正を行う技術（特開平１０−１９８８０２）が提案されている。また、シーンに応じた補正を行うため、ニューラルネットを用いて画像のシーンを分析し、輝度ヒストグラムからシーンに応じて異常と思われる濃度域を除き、残りを有効濃度域とし、有効濃度域の中から参照濃度値（シャドーポイント及びハイライトポイント）を算出する技術（特開平１１−１５４２３５）が提案されている。
【０００７】
デジタルカメラの自動露出制御機構は、とりわけ逆光撮影では背景の明るさに引っ張られて露出がマイナスに補正されるため、被写体が暗く写ってしまう。また、夜間ポートレート撮影では、被写体にストロボ光が当たることが前提になるため、絞りやシャッタスピードは既定値に固定されるが、ストロボと被写体の距離が遠すぎると光が届かず、この場合も被写体は暗く写ってしまう。
【０００８】
このようなデジタル画像の撮影時における不適切な露出状態に対応するため、画像データを自動的に階調補正する技術が提案されている。例えば、輝度ヒストグラムの形状より原画像が逆光画像か夜間ストロボ画像か標準露出画像かを推定し、状況に応じて処理を行う技術（特開２０００−１３４４６７）、被写体と背景との測光値から撮影状態（逆光から過順光まで）を把握して露出の調節を行う技術（特開平０９−０３７１４３）、撮像画面の中央部と周辺部の出力信号を比較して、周辺部の出力が大きくなるに従って連続的に利得を上げるか、もしくは利得を一定にする制御信号を出力する技術（特公平７−１１８７８６）が提案されている。
【０００９】
なお、露出補正とは、シーンに対して不適切な明るさを持つ被写体を、シーンに適した明るさに調節することを意味する。例えば露出不足で全体に暗い被写体や、逆光で被写体が暗くなっている被写体を明るくしたり、露出オーバの被写体を暗くしたりすることである。カメラにおける露出補正は、レンズに入る入射光量を調節するために絞りやシャッタスピードを変える方法が一般的である。また、プリンタやディスプレイでは、入出力変換関数（線型もしくは非線型の階調補正テーブル）等を用い、入力信号の明るさに対し出力信号の明るさを最適化するための処理等を意味する。このように露出を補正して画像データの明るさを調節することと、本明細書における階調補正処理とは目的が同等であるので、以下、階調補正処理と記す。
【００１０】
【発明が解決しようとする課題】
夜間ポートレート撮影画像のように、輝度の分布が極端に偏っており、かつハイライトに人物以外の被写体が存在しない画像では、特開平１０−１９８８０２のように画像全域でダイナミックレンジを設定すると、被写体が小さい場合に、被写体の有する明るさ付近にハイライトポイントが設定さるため、過補正になり階調がつぶれてしまう。人間の視覚特性で階調つぶれが目立つのは、少しの色味を持っているハイライト領域である。よって、輝度ヒストグラムのみでハイライトポイントを決めると色情報が無視されるため、上記の特徴を持つ領域で階調つぶれや色相変化が起こる場合がある。
【００１１】
また、特開平１１−１５４２３５では、シーンに応じて濃度ヒストグラムの異常域を除去した有効濃度域からハイライトポイントを算出しているが、特開平１０−１９８８０２と同様に、階調つぶれが目立つハイライト領域の面積が小さければ補正により階調つぶれが起こる。
【００１２】
また、階調補正処理を行う上で重要なのは、シーンを的確に判定し、シーンに応じて補正パラメータを設定することである。デジタル画像の場合、特開２０００−１３４４６７のようにデジタル特有の輝度ヒストグラムをとり、その形状やハイライト及びシャドーポイントからシーンを把握するのが一般的である。また、中央値等の統計値から露出判定を行う。しかし、シーンに分類すると、その後の補正処理はシーンに依存することになるため、シーン判定の精度が悪いと誤処理が行われてしまう。また、位置情報を欠いたヒストグラムから露出状態を判定するのは困難であり、特に、画像が特異な場合には正しい判定が行えない可能性がある。
【００１３】
例えば、暗い色の壁を背景に人物を撮影した画像で、その被写体が適正露出であった場合、ヒストグラムを用いて露出判定をすると、被写体は適正であるにもかかわらず全体的には暗いため、露出アンダーと判定され、その結果、過補正になる。また、被写体の真後ろに光源が存在する真逆光状態では背景が白飛びを起すため、真逆光状態か否かを判定するには、特開平０９−０３７１４３や特公平７−１１８７８６のように、背景と被写体のコントラスト情報ではなく、背景の色情報を用いる方が高精度に判定を行うことができる。
【００１４】
本発明の主たる目的は、背景が白飛びを起こした逆光撮影画像や、被写体がハイライト側に存在する夜間ポートレート撮影画像など、従来の技術によっては階調つぶれや色相変化を起こしやすい撮影状況で撮影された画像に対し、階調つぶれを起こさない、さらには色相変化を起こさない、適切なコントラスト補正を施すための画像処理装置及び方法を提供することにある。
【００１５】
【課題を解決するための手段】
本発明は、入力画像のコントラスト補正処理を行う画像処理装置において、入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれか成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定手段と、前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得手段と、前記対象領域情報獲得手段により得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定手段と、前記ダイナミックレンジ設定手段により設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理手段と、を有することを特徴とする。
【００１６】
また、本発明は、前記対象領域情報獲得手段は、前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする。また、前記ダイナミックレンジ設定手段は、前記対象領域情報獲得手段により得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする。
【００１７】
また、本発明は、入力画像のコントラスト補正処理を行う画像処理方法において、入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれかが成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定ステップと、前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得ステップと、前記対象領域情報獲得ステップにより得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定ステップと、前記ダイナミックレンジ設定ステップにより設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理ステップとを有することを特徴とする。
【００１８】
また、前記対象領域情報獲得ステップは、前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする。また、前記ダイナミックレンジ設定ステップは、前記対象領域情報獲得ステップにより得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする。
【００１９】
さらに、本発明の画像処理装置はコンピュータを利用してソフトウェアにより実現することも可能である。したがって、画像処理装置の上記各手段の機能をコンピュータで実現させるためのコンピュータ・プログラムも本発明に包含される。また、そのようなコンピュータ・プログラムが記録された、コンピュータが読み取り可能な各種の情報記録媒体も本発明に包含される。
【００２０】
【発明の実施の形態】
以下、添付図面を参照し、本発明の実施の形態について詳細に説明する。
《実施例１》
図１は本発明の実施例１の構成を示すブロック図であり、図２は本実施例における処理手順を示すフローチャートである。
【００２１】
図１に示す画像処理装置１は、画像データのコントラスト補正を行うもので、入力画像のタイプ判定処理（ステップＳ１）を行う判定手段２、判定されたタイプに応じてハイライトポイントを設定するための対象領域の情報を獲得する処理（ステップＳ２）を行う対象領域情報獲得手段３、獲得された対象領域の情報を用いてダイナミックレンジを設定する処理（ステップＳ３）を行うダイナミックレンジ設定手段４、及び、設定されたダイナミックレンジを用いて画像全体のコントラスト補正処理（ステップＳ４）を行う処理手段５より構成される。以下、各手段について具体的に説明する。なお、入力画像データをＲＧＢデータとして扱うが、他の形式のカラー画像データも同様に処理可能であることは以下の説明から明らかであろう。
【００２２】
まず、判定手段２（ステップＳ１）について説明する。この判定手段２は、コントラスト補正により階調つぶれの目立ちやすい領域が存在する画像をＡタイプ、そのような領域が存在しない画像をＢタイプに分類する判定を行う。ここで、「階調つぶれの目立ちやすい領域」とは、画像を構成するうえで意味のある重要領域である。
【００２３】
Ａタイプと判定されるのは、例えば、逆光撮影画像や、フラッシュを使用した夜間ポートレート撮影画像等である。逆光撮影で背景が白飛びを起こしている場合、背景以外のハイライト部分は階調つぶれが目立ちやすい。また、夜間ポートレート撮影画像も、被写体はハイライト側に存在するためコントラストを強調しすぎる処理を行うと、階調つぶれが目立つ。これ以外にも、被写体の明るさが画像内の明るさにおいて相対的に明るい範囲に存在する場合は、Ａタイプに判定される。図２７及び図２８にＡタイプの画像例を示す。Ｂタイプと判定される画像は、Ａタイプに判定されなかった画像であり、例えば通常撮影の適正露出画像、露出不足画像等である。図２９にＢタイプの画像例を示す。
【００２４】
図３に判定手段２の構成例を示す。ここに示す判定手段２は輝度ヒストグラム二極化測定手段２１、輝度ヒストグラム歪度算出手段２２、領域別明るさ検出手段２３、付随情報参照手段２４及びタイプ決定手段２５から構成される。Ａタイプの画像の輝度ヒストグラムは分布のバランスが悪い場合が多いが、この特徴を得るための手段が輝度ヒストグラム二極化測定手段２１、輝度ヒストグラム歪度算出手段２２及び領域別明るさ検出手段２３である。画像データにはヘッダ情報等として撮影時の情報が付随していることが多い。例えば、デジタルカメラで撮影された画像データをＥｘｉｆ等の情報形式で保存する場合、撮影時の情報をタグに埋め込むことが可能である。付随情報参照手段２４は、そのような画像データに付随したタイプ判定に利用可能な情報（具体的には、逆光モードや夜間撮影モード等のモード情報やストロボのＯＮ／ＯＦＦ情報等）を取得するための手段である。タイプ決定手段２５は、各手段２１〜２４により取得された情報に基づいて最終的に画像のタイプを判断する手段であり、その判定フローを図４に示す。
【００２５】
まず、輝度ヒストグラム二極化測定手段２１について説明する。前述のようにＡタイプに判定される画像のヒストグラムは分布のバランスが悪い場合が多いが、特に、逆光画像では、背景が極端に明るく被写体が極端に暗い場合が多く、その場合には輝度ヒストグラムが図５に例示するように二極化する。輝度ヒストグラム二極化測定手段２１は、輝度ヒストグラムの頻度と勾配を用いて、輝度ヒストグラムの二極化度合を測定する手段であり、その処理フローを図６に示す。図７及び図８は二極化していない輝度ヒストグラム及び二極化した輝度ヒストグラムに対する処理の説明のための図である。
【００２６】
ここで、輝度ヒストグラムにおける輝度レベルをｉ（i=0,1,2,...255）、レベルｉの頻度をｆ（ｉ）、勾配をｈ（ｉ）とする。ｈ（ｉ）は以下の式で表される。
h(i)＝(f(i+δ)-f(i))/δ (i=0,1,2,,,,,255-δ,δ>0) … (1)
【００２７】
二極化測定はレベル255-δ からレベルをデクリメントしながら行われ、Ｘと，Ｙ１又はＹ２の各レベルを検出する。
【００２８】
輝度ヒストグラムが二極化していない場合の処理について、図７を参照して説明する。勾配ｈ（ｉ）がマイナスの255≧ｉ≧Ｑのレベル領域ではステップＳ２１→Ｓ２２→Ｓ２３〜Ｓ２４→Ｓ２１のループが繰り返され、ｉがデクリメントされるだけである。つぎの勾配ｈ（ｉ）がプラスで頻度ｆ（ｉ）が閾値th1より大きいＱ＞ｉ＞Ｘのレベル領域では、ステップＳ２１→Ｓ２５→Ｓ２８→Ｓ２１のループが繰り返されｉがデクリメントされるだけであるが、ｆ（ｉ）＝Th1となると（ステップＳ２６，Ｙｅｓ）、その時のｉがレベルＸとして検出され（ステップＳ２７）、ステップＳ２８より処理が継続される。その後、勾配は多少あっても頻度が低いＸ＞ｉ＞Ｙ１のレベル領域では、ステップＳ２１→Ｓ２５→Ｓ２６→Ｓ２８→Ｓ２１のループ又はステップＳ２２→Ｓ３０→Ｓ３１→Ｓ３３→Ｓ２２のループが繰り返されｉがデクリメントされるだけであるが、ｆ（ｉ）＝Th1となると（ステップＳ３１，Ｙｅｓ）、その時のｉがレベルＹ１として検出され（ステップＳ３２）、処理を終了する。
【００２９】
輝度ヒストグラムが二極化している場合の処理について、図８を参照して説明する。この場合も、レベルＸの検出までは図７の例の場合と同じ処理であるが、二極化している場合には頻度ｆ（ｉ）が閾値Th1未満の領域で勾配ｈ（ｉ）がマイナス方向に急激に増加し、ｈ（ｉ）＝-Th2（Th2は閾値）となると（ステップＳ２３，Ｙｅｓ）、その時のｉがレベルＹ２として検出され（ステップＳ３５）、処理を終了する。
【００３０】
なお、Ｔｈ１，Ｔｈ２は、その設定によって検出される二極化度合いが変わるが、例えばヒストグラムの総頻度数をＮとして次式により決定することができる。
Th1＝C*N
Th2＝f(i)*D
但し、Ｃ，Ｄは定数 … （２）
【００３１】
タイプ決定手段２５においては、輝度ヒストグラム二極化測定手段２１により検出されたレベルＹ１，Ｙ２の大きい方のレベルをＸ’とし、レベルＸとレベルＸ’の差（X-X’）と閾値Ｔｈ３の比較判定を行い（図４、ステップＳ５１）、X-X’≧Th3の場合に二極化していると判定し入力画像のタイプをＡタイプに決定する（図４、ステップＳ５５）。
【００３２】
次に、輝度ヒストグラム歪度算出手段２２について説明する。フラッシュを使用した夜間ポートレート撮影画像の場合、背景が暗闇のためヒストグラムは極端にアンダー寄りである。これに対し、Ｂタイプを代表する通常撮影の適正露出画像は、輝度ヒストグラムの偏りが少なくバランス良く分布している。このような輝度ヒストグラムの偏りを表す尺度として、輝度ヒストグラム歪度算出手段２２は輝度ヒストグラムの歪度Ｚを次式により算出する。
Z＝(1/N)Σ((Y(j)/ave(Y(j))/S(Y(j)))^3 … （３）
ただし、Ｎは総画素数であり、Y(j)はｊ番目の画素の輝度、Σの和はｊ＝１からＮについてとる。また、ａｖｅ（Y(j)）はY(j)の平均値、S(Y(j))は標準偏差である。
【００３３】
Ｚ＞０の場合、輝度ヒストグラムは図９に例示するようなアンダー寄りの形状である。したがって、判定手段２のタイプ決定手段２５は、算出された歪度Ｚが０より大きいか判定し（図４、ステップＳ５２）、その条件が成立する場合には入力画像のタイプをＡタイプに決定する（図４、ステップＳ５６）。なお、０以外の閾値を設定し、その閾値を歪度Ｚが越えている場合にＡタイプと判定することも可能である。
【００３４】
また、画像の背景領域と被写体領域の明るさが極端に異なる場合にも、輝度ヒストグラムはバランス良く分布していないと考えられる。そこで、判定手段２の領域別明るさ検出手段２３は、入力画像の背景領域と被写体領域を識別し、各領域の明るさを検出する。各領域の明るさの尺度としては、例えば輝度中央値や輝度平均値を用いることができる。そして、判定手段２のタイプ決定手段２５は、下記（４）式の条件判定を行い（図４、ステップＳ５３）、条件が成立するときには入力画像のタイプをＡタイプに決定する（図４、ステップＳ５７）。
背景の明るさ≪被写体の明るさ
もしくは
背景の明るさ≫被写体の明るさ … （４）
この条件判定は、具体的には、例えば、
背景の輝度平均値／被写体の輝度平均値＞Th4
もしくは、
背景の輝度中央値／被写体の輝度中央値＞Th5
の場合にＡタイプ（逆光撮影画像）とし、また、
背景の輝度平均値／被写体の輝度平均値＜Th4
もしくは、
背景の輝度中央値／被写体の輝度中央値＜Th5
の場合にＡタイプ（夜間ポートレート撮影画像）とすることができる。
【００３５】
また、前述のように、画像データに撮影状態を把握できるような情報が付随しているならば、その情報によって画像のタイプを判別できる。そのような付随情報を参照するのが判定手段２の付随情報参照手段２４の役割である。より具体的には、逆光モード撮影、夜間撮影モード、ストロボＯＮのように、Ａタイプに相当する特定の撮影状態を示す情報を参照する。判定手段２のタイプ決定手段２５においては、そのような特定の撮影状態を示す情報が存在するときには（図４、ステップＳ５４、Ｙｅｓ）、入力画像のタイプをＡタイプに決定する（図４、ステップＳ５８）。そして、ステップＳ５１〜Ｓ５４のいずれの判定条件も成立しない場合に、タイプ決定手段２５は入力画像のタイプをＢタイプと決定する（図４、ステップＳ５９）。
【００３６】
なお、逆光モード撮影、夜間撮影モード、ストロボＯＮなどの特定の撮影状態を示す情報をオペレータが与えるようにすることも可能であり、そのような構成も本発明に包含される。また、他の情報、例えばシャッタースピードの情報も利用可能である（シャッタースピードが遅ければ適正露出以外の露出状態で撮影が行われた可能性が高く、Ａタイプと判定し得る）。
【００３７】
ステップＳ５１，Ｓ５２の判定は輝度ヒストグラムの形状に基づいた判定であるが、その際にヒストグラムの間引きを行ってもよい。
【００３８】
また、ヒストグラムの形状以外にも、ハイライトポイントをタイプ判定に利用してもよい。この場合、輝度レベル２５５から頻度を積算していき、積算頻度が例えば総度数の０．５％を超えたレベルをハイライトポイントとすることができる。
つまり、全度数をＮ、レベルｉの頻度をz(i)（i=0,1,2...255）とする場合、
Ｎ＝Σz(i)、（和はi=0,1,2...255、についてとる）と表せ、
ハイライトポイントは（0.5*N）／100≦Σz(i)（i=255,254,....の順にとる）となるｉの最大値とすることができる。
【００３９】
判定手段２の判定方法は以上の方法のみに限定されるものではなく、コントラスト補正によって階調つぶれの目立ちやすい領域が存在するか否かを判定できるならば他の方法を利用しても構わない。
【００４０】
次に、対象領域情報獲得手段３（図２、ステップＳ２）について説明する。対象領域情報獲得手段３は、判定手段２により判定されたタイプに応じて、ハイライトポイントの設定のための領域（対象領域）の情報を得る。以下、Ａタイプの場合とＢタイプの場合とに分けて説明する。
【００４１】
まず、Ａタイプと判定された場合について説明する。入力画像がＡタイプと判定された場合には、階調つぶれの目立ちやすい領域を対象領域とする。そのような領域は、ハイライトでかすかに色づいている領域、すなわち画像を明るさの分布を表す情報で表現した場合の『相対的に明るい』範囲に対応する画像領域である。そのような領域を得るための処理フローを図１０に示し、その各ステップについて説明する。
【００４２】
ステップＳ７１：入力画像全体の輝度ヒストグラムを作成する。なお、判定手段２で作成された輝度ヒストグラムを利用することも可能である。
【００４３】
ステップＳ７２：画像のなかで相対的に明るい部分を取り出すために、対象領決定用ダイナミックレンジ（Scene_Min,Scene_Max）を算出する。すなわち、輝度ヒストグラムにおいて、最小レベルから最大レベルに向かって、及び、最大レベルから最小レベルに向かって、頻度を累積し、累積頻度が総頻度の１％になるレベルをそれぞれシャドーポイントScene_Min、ハイライトポイントScene_Maxとする。ただし、この設定パラメータ（累積頻度１％）は一例であり、変更可能である。なお、デジタルカメラで撮影された画像などは、レベル０とレベル２５５にノイズがのり易いため、最小レベルを１、最大レベルを２５４とするのが一般に好ましい。
【００４４】
ステップＳ７３：画像のなかで相対的に明るい部分をヒストグラム上の分布域から決定するため、輝度ヒストグラムをいくつかの区分に量子化する。例えば、Scene_MinとScene_Maxの間を４つの区分に分割する。そして各区分にレベルの低い順から番号付けを行う。図１１に量子化例を示す。最もレベルの高い区分３に属する画素が「相対的に明るい領域」である。
【００４５】
ステップＳ７４：上のステップで得た「相対的に明るい領域」から、高輝度白色光画素及びエッジ画素を排除し、残った画素を対象領域とする（ステップＳ７４）。
【００４６】
図２８に示した夜間ポートレート撮影画像の場合、図３０に示した白抜き領域が対象領域である。高輝度白色光画素の領域をあらかじめ排除する理由は、その領域は後述するコントラスト補正によって仮に階調がつぶれたとしても、そのつぶれが認識しにくい（目立たない）からである。また、エッジ画素の領域をあらかじめ排除する理由は、デジタルカメラ内のエッジ強調処理により故意に強調された可能性があるため判定には適さないからである。
【００４７】
ここで、高輝度白色画素とは、その色成分（Ｒ，Ｇ，Ｂ）が、例えば、
((R＞240 && G＞240 && B＞240) && (|G-R|＜10 && |G-B|<10)) … （５）
を満たす領域である。
【００４８】
次に、Ｂタイプと判定された入力画像の場合について説明する。Ｂタイプの画像は、適度なコントラストを持ち、輝度ヒストグラムは広い範囲でバランス良く分布しているため、画像全域をハイライトポイントの設定に用いることができる。したがって、対象領域情報獲得手段３は、入力画像の全領域から上に述べた高輝度白色光画素とエッジ画素を除き、残った領域を対象領域とする。ここで高輝度白色光画素とエッジ画素を排除する理由は上に述べた通りである。
【００４９】
なお、（５）式においては、ＲＧＢ情報を用いて高輝度白色光画素か否かの判定を行っているが、輝度色差情報、明度色差情報などＲＧＢ以外の色空間を用いることもできる。また、高輝度白色画素を定義しているパラメータ（前記（５）式中の閾値２４０，１０）は処理後の画像を出力するデバイスの特性等に応じて適宜変更することができる。また、輝度情報を用いて画像のなかで相対的に明るい部分を算出しているが、明度情報あるいはＧ信号などの色情報を用いることもできる。
【００５０】
次に、ダイナミックレンジ設定手段４（図２、ステップＳ３）について説明する。対象領域情報獲得手段３により得られた対象領域の情報を用いて、以下の手順でダイナミックレンジを設定する。
【００５１】
ハイライトポイントの設定であるが、対象領域のＲ，Ｇ，Ｂ各ヒストグラムにおいて最大レベルからの累積頻度をそれぞれ計算し、累積頻度の値が総頻度の０．５％となるＲ，Ｇ，Ｂ各々のレベルの中で最大のレベルをハイライトポイントRange_Maxとする。シャドーポイントについては、画像の全領域のＲ，Ｇ，Ｂ各ヒストグラムにおいて、最小レベルからの累積頻度をそれぞれ計算し、その値が０．５％に対するＲ，Ｇ，Ｂ各々のレベルの中で最小のレベルをシャドーポイントRange_Minとする。なお、デジタルカメラで撮影された画像は０レベル、２５５レベルにノイズがのり易いため、累積頻度の計算の際には最小レベルを１、最大レベルを２５４とするのが一般に好ましい。
【００５２】
このように、ハイライトポイントの設定に、輝度ヒストグラムではなく、Ｒ，Ｇ，Ｂ各色のヒストグラムを用いるのは、輝度値は同じでも異なる色成分を持つ画素が存在する場合には、輝度ヒストグラムのみでハイライトポイントを決めると色情報が無視されるために階調つぶれが起こる可能性があるからである。つまり、少なくともハイライトポイントの設定には、色情報を用いる。ただし、色情報として、ＲＧＢ情報以外の輝度色差情報や明度色差情報等を用いてもよい。一方、シャドー部分は色が認識されにくいため、処理速度の高速化のために、シャドーポイントは輝度情報のみを用いて設定してもよい。
【００５３】
なお、ダイナミックレンジの設定パラメータ（累積頻度１％）は一例であり、適宜変更し得る。また、ここまでの説明から明らかなように、対象領域情報獲得手段３によって獲得する対象領域情報は、対象領域のヒストグラムを作成できるならば、どのような形の情報でも構わない。
【００５４】
次に、処理手段５（図２、ステップＳ４）について説明する。処理手段５は、ダイナミックレンジ設定手段４により設定されたダイナミックレンジを用いて、画像全体に対しコントラスト補正を行う。すなわち、ｊ番目の画素（ｊ＝１，２，．．．Ｎ−１，Ｎ）の輝度値をＹｉｎ（ｊ）とし、そのコントラスト補正後の輝度値Ｙ１（ｊ）を（６）式により算出し、補正係数Ｃ０（ｊ）を（７）式により算出する。
【００５５】
Y1(j)＝α×Yin(j)＋β
α＝（255-0）／(Range_Max−Range_Min）
β＝（１−α）・（255・Range_Min−０・Range_Max）／
（（255-0）-(Range_Max−Range_Min)） … （６）
C0(j)＝Y1(j)／Yin(j) … （７）
そして、算出された補正係数C0(j)を色成分（Rin(j),Gin(j),Bin(j)）に乗じることにより、コントラスト補正された色成分（Ｒ１（ｊ），Ｇ１（ｊ），Ｂ１（ｊ））を得る。
（R1(j)，G1(j)ｍ，B1(j)）＝C0(j)・(Rin(j)，Gin(j)，Bin(j)） … （８）
【００５６】
以上説明した画像処理装置１は、独立した装置として実現することも、他の機器の組み込み装置として実現することもでき、また、ハードウェア、ソフトウェア、その組み合わせのいずれによっても実現できる。ソフトウェアにより実現する場合について図１２を参照して説明する。
【００５７】
図１２に示す画像処理システム１０１は、コンピュータ１０７と周辺機器とからなる。ここに示す例では、周辺機器として、スキャナ１０４、デジタルカメラ１０５、ビデオカメラ１０６などの、カラー画像をマトリックス状の画素として表した実写の画像データとしてコンピュータ１０７に入力するための機器、オペレータからコマンド、その他の情報を入力するためのキーボード１０９、補助記憶のためのハードディスク１０８、フロッピディスクドライブ１１１など、データやプログラムなどが記録されたＣＤ−ＲＯＭを読み取るためのＣＤ−ＲＯＭドライブ１１０、コンピュータ１０７より画像を出力するためのディスプレイ１１４、プリンタ１１５などを有する。また、モデム１１２及びサーバ１１３もコンピュータ１０１に接続されている。
【００５８】
コンピュータ１０７上で動作する画像処理アプリケーション１１８は、オペレーティングシステム１１６により処理の実行が制御され、また、必要に応じてディスプレイドライバ１１９と連携し所定の画像処理を実行する。この画像処理アプリケーション１１８には、図１の画像処理装置１の機能（図２に示す処理手順）をコンピュータ１０７上で実現するための補正プログラム１１７が組み込まれている。画像処理アプリケーション１１８で画像処理を行う時に、補正プログラム１１７で画像データに対するコントラスト補正処理が施される。コントラスト補正後の画像データは、ディスプレイドライバ１１９を介してディスプレイ１１４に出力され、あるいはプリンタドライバ１２０を介してプリンタ１１５に出力される。
【００５９】
なお、ここでは画像処理システムの例であったが、汎用のコンピュータシステムで動作する画像処理アプリケーションに補正プログラム１１７と同様の機能を実装することも可能である。また、コントラスト補正処理を画像出力時にのみ施すのであれば、補正プログラム１１７と同様の機能を、プリンタドライバ１２０やディスプレイドライバ１１９、あるいは、プリンタ１１５やディスプレイ１１４に実装することも可能である。このようなコントラスト補正のための機能をコンピュータ上で実現するためプログラム類、及び、それが記録されたコンピュータが読み取り可能な情報記憶媒体、例えば磁気ディスク、光ディスク、光磁気ディスク、半導体記憶素子等も本発明に包含される。
【００６０】
《実施例２》
図１３は本発明の実施例２の構成を示すブロック図である。ここに示す画像出力システムは複数のパソコン（ＰＣ）１３１ａ，１３１ｂと複数のプリンタ１３６ａ，１３６ｂを有し、任意のパソコンより任意のプリンタに画像を出力することができる。この画像出力システムは、各プリンタ１３６ａ，１３６ｂに対応した画像処理装置１３２ａ，１３２ｂも備える。
【００６１】
この画像出力システムにおいて、例えばパソコン１３１ａでオペレータがプリンタ１３６ａを選択して出力指令を入力すると、パソコン１３１ａは画像を撮像するなどして取り込まれた画像データや各種ＤＴＰソフトで作成された画像データを画像処理装置１３２ａに送る。画像処理装置１３２ａは、送られた画像データのコントラスト補正処理を行ってから複数の出力色成分Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、Ｋ（ブラック）への色変換処理を行って印刷データを生成し、それをプリンタ１３６ａに送り印刷させる。
【００６２】
なお、画像処理装置１３２ａ，１３２ｂは独立した装置として示されているが、後により具体的に述べるように、画像処理装置１３２ａ，１３２ｂの全機能をパソコン１３１ａ，１３１ｂ上で動作するプリンタドライバに実装することも、一部機能をプリンタドライバに実装し残りの機能をプリンタ１３６ａ，１３６ｂに実装するなど、様々な実現形態をとり得る。
【００６３】
各画像処理装置１３２ａ，１３２ｂは、色変換手段１３３と、中間調処理等を実施する描画手段１３４と、描画手段１３４で描画された１ページ分の印刷画像を一時的に格納するための画像記憶手段１３５とからなる。
【００６４】
色変換手段１３３は、図１４に示すように、コントラスト補正手段１５０、補間演算部１５１及び色変換テーブル記憶部１５２から構成される。コントラスト補正手段１５０は、前記実施例１の画像処理装置１と同じ判定手段２、対象領域情報獲得手段３、ダイナミックレンジ設定手段４及び処理手段５に、対象領域情報獲得手段３のための設定パラメータテーブル７と、ダイナミックレンジ設定手段４のための許容基準テーブル８が追加された構成である。
【００６５】
以下、パソコン１３１ａ又は１３１ｂからＲＧＢ画像データを画像処理装置１３２ａに送り、ＣＭＹＫの印刷データに変換してプリンタ１３６ａで画像出力する場合を例にして、画像処理装置１３２ａにおける処理を説明する。
【００６６】
ＲＧＢの画像データが画像処理装置１３２ａに送られると、色変換手段１３３のコントラスト補正手段１５０において、判定手段２により画像のタイプ（Ａ，Ｂタイプ）が判定され、判定されたタイプに応じた対象領域の情報が対象領域情報獲得手段３によって取得される。次に、ダイナミックレンジ設定手段４においてダイナミックレンジが設定され、そのダイナミックレンジに基づいて処理手段５においてコントラスト補正が行われる。
【００６７】
ここで、使用されるプリンタによって再現範囲が異なるため、階調つぶれの許容基準もプリンタ毎に異なる。よって、コントラスト補正手段１５０は、出力予定のプリンタ（ここでは１３６ａ）に関するパラメータ情報をテーブルとして保持する。具体的には、前記（５）式において高輝度白色画素を定義しているパラメータを設定パラメータテーブル７に保持し、ダイナミックレンジを設定する際の累積頻度パラメータを許容基準テーブル８に保持する。対象領域情報獲得手段３は対象領域情報の取得処理の際に設定パラメータテーブル７よりパラメータを読み込んで使用し、また、ダイナミックレンジ設定手段４はダイナミックレンジの設定の際に許容基準テーブル８よりパラメータを読み込み使用する。
【００６８】
次に、色変換手段１３３において、色変換テーブル記憶部１５２に記憶されている色変換テーブルの中から最適なテーブルを選択して補間演算部１５１に送る。補間演算部１５１では、その選択された色変換テーブルのメモリマップの入力ＲＧＢに対し、後述するメモリマップ補間を実施し、ＲＧＢ画像データをＣＭＹＫの印刷データに変換し、それを描画手段１３４に送る。
【００６９】
このメモリマップ補間は、図１５に示すように、ＲＧＢ空間を入力色空間とした場合、ＲＧＢ空間を同種類の立体図形に分割し、入力の座標（ＲＧＢ）おける出力値Ｐを求めるために、入力の座標（ＲＧＢ）を含む立方体を選択し、選択された立方体の８点の予め設定した頂点上の出力値と立体図形の中における位置すなわち各頂点からの距離に基づいて線形補間を実施する。ここで出力値Ｐは、Ｃ、Ｍ、Ｙ値にそれぞれ相当し、補間演算に使用される入力空間上の座標（ＲＧＢ）には、実際の入出力（Ｌ＊ａ＊ｂ＊，ＣＭＹ）の関係を測定して、このデータを使用して最小２乗法等により算出したＲＧＢ（Ｌ＊ａ＊ｂ＊）に対するＣ、Ｍ、Ｙの値が予め設定してある。そして、ＣＭＹ信号は、例えば下記（９）式の演算によってＣＭＹＫ信号に変換される。
Ｋ＝α・min（Ｃ，Ｍ，Ｙ）
Ｃ１＝Ｃβ・Ｋ
Ｍ１＝Ｍβ・Ｋ
Ｙ１＝Ｙβ・Ｋ … （９）
【００７０】
なお、色変換方法として、画像データではなく、メモリマップの色変換を行う方法を用いることもできる。例えば、補正係数を補間演算部１５１に送り、選択された色変換テーブルのメモリマップの入力ＲＧＢに対し前記（９）式で色変換を行い、さらに色変換後のＣＭＹ信号に書換えを行う。次に、この変更されたメモリマップを用い、全画素に対しメモリマップ補間を実施する。このように、画像データではなく、メモリマップの書換えを行う方法は、処理の高速化に一般に有利である。
【００７１】
以上のようにして補間演算部１５１によりＣＭＹＫに変換された印刷データは描画手段１３４に送られ、ここで中間調処理等が行われた印刷画像データが１ページ分ずつ画像記憶手段１３５に一時記憶される。この印刷画像がプリンタ１３６ａで印刷される。
【００７２】
以上に説明した画像処理装置１３２ａ，１３２ｂは、独立したハードウェア装置として実現することも勿論可能であるが、その機能の全部又は一部をプリンタ１３６ａ，１３６ｂに組み込むことも可能である。また、画像処理装置の機能の全部又は一部をソフトウェアにより実現することも可能である。例えば、パソコン１３１ａ，１３１ｂ上で動作するプリンタドライバに、画像処理装置の機能の全部又は一部を実装することも可能である。プリンタドライバに実装する場合、補間演算部１５１の機能の中、前記（９）式のＣ，Ｙ，Ｋデータ生成までの機能をプリンタドライバに持たせ、（Ｃ１，Ｍ１，Ｙ１，Ｋ）データへの変換機能はプリンタ側に持たせる構成にすると、パソコンからプリンタへの転送データ量が減り高速化の面で一般に有利であろう。このようなプリンタドライバ等のプログラムと、それが記録された各種情報記録媒体も本発明に包含される。
【００７３】
ここで、１枚のプリントデータに自然画像やグラフィック画像など、種類の異なる複数のオブジェクトが貼り付いている場合、例えば図１６に示すようなオブジェクトobject1，object2，object3がはりついているプリントデータの場合、色変換手段１３３において色変換テーブルをオブジェクト毎に選択する必要がある。また、自然画像のオブジェクトobject1，object3の間でも一般的に補正係数が異なるため、補間演算部１５１で書きかえられたメモリマップはオブジェクトobject1用とオブジェクトobject3用とでは異なることになる。よって、このような場合には、図１６の右側に図示するように、補正係数を画像データのヘッダに付属させて画像処理装置１３２ａ，１３２ｂに送る必要がある（画像データと別送ることも可能である）。なお、プリンタドライバに実装する場合には、ＩＣＣ（Inter Color Consortium）で標準化されているデバイス・プロファイルを読み出して用いるような構成とすることも可能である。
【００７４】
《実施例３》
図１７は本発明の実施例３の構成を示すブロック図であり、図１８は本実施例における処理手順を示すフローチャートである。
【００７５】
図１７に示す画像処理装置２０１は、画像の階調補正を行うもので、第一の判定手段２０２、第二の判定手段２０３、及び、処理手段２０４から構成される。第一の判定手段２０２は、入力したカラー画像データにおける背景領域の色信号よりＤタイプの画像か否かを判定する処理（図１８、ステップＳ２０１）を行う手段である。第二の判定手段２０３は、第一の判定手段２０２でＤタイプでないと判定された場合に、画像における背景領域と被写体領域との相対的な明るさ関係を調べることによりＥタイプの画像であるかＦタイプの画像であるか判定する処理（図１８、ステップＳ２０３）を行う手段である。処理手段２０４は、第一の判定手段２０２、第二の判定手段２０３で判定された画像のタイプに応じ適応的な階調補正処理を行う手段であり、より具体的には、タイプに応じた階調補正テーブルを作成し（図１８、ステップＳ２０２，Ｓ２０４，Ｓ２０５）、そのテーブルを用いて、画像データに対し階調補正処理（図１８、ステップＳ２０６）を行う。
【００７６】
以下、画像処理装置２０１の各手段について詳細に説明する。
まず、第一の判定手段２０２（図１８、ステップＳ２０１）について説明する。第一の判定手段２０２では、入力画像が逆光画像（Ｄタイプ）か否かを判定する。Ｄタイプと判定される画像とは、背景領域が主に高輝度白色光に属する画像であり、その主な撮影状況は背景が白飛びを起こしている真逆光画像である。この判定には様々な方法を用いることができるが、その２つの例について次に説明する。
【００７７】
第１の方法においては、図１９のフローチャートに示すように、入力画像の背景領域と被写体領域との像域分離を行う（ステップＳ２１０）。図２７の画像の場合、図３１のように像域分離がなされる。そして、背景背景領域において、高輝度白色光の画素をカウントし（ステップＳ２１１）、背景領域の例えば７０％以上の画素が高輝度白色光画素ならばＤタイプと判定する（ステップＳ２１２）。ここで、高輝度白色光画素とは、その色成分（Ｒ，Ｇ，Ｂ）が前記（５）式を満たす画素である。なお、像域分離の処理と、高輝度白色光画素のカウント処理とを同時に実行することも可能である。
【００７８】
第２の方法においては、図２０のフローチャートに示すように、入力画像全域に対し高輝度白色光画素のカウントを行う（ステップＳ２２０）。この際、画像端部に属する画素か否かの識別もおこなう。画像端部とは、例えば図２１に斜線部として示すような画像の周辺部分である。そして、高輝度白色光画素が総画素数の例えば７％以上であり、かつ、高輝度白色光画素の７０％以上が画像端部に存在するならばＤタイプと判定する（ステップＳ２２１）。
【００７９】
次に、第二の判定手段２０３（図１８、ステップＳ２０３）について説明する。この第二の判定手段２０３においては、第一の判定手段２０２でＤタイプと判定されなかった画像が、背景領域の方が被写体領域よりも相対的に暗い場合にＥタイプと判定し、そうでない場合にＦタイプと判定する。Ｅタイプに判定される画像の一例が図２８に示した夜間ポートレート撮影画像である。
【００８０】
第二の判定手段２０３の処理フローを図２２に示し、各ステップの処理内容について説明する。
【００８１】
ステップＳ２５０：入力画像の全域の輝度ヒストグラムを作成する。ここで輝度Ｙは、色成分（Ｒ，Ｇ，Ｂ）から次式により求められる。これは前記各実施例においても同様である。
Y＝0.299・R＋0.587・G＋0.114・B … （１０）
【００８２】
ステップＳ２５１：前ステップで作成された輝度ヒストグラムからタイプ判定用ダイナミックレンジ（Scene_Min,Scene_Max）を求める。具体的には、輝度ヒストグラムにおいて、最小レベルから累積頻度を求め、その値が総頻度の例えば１％に達したレベルをシャドーポイントScene_Minとする。また、最大レベルから累積頻度を求め、その値が総頻度の例えば１％に達したレベルをハイライトポイントScene_Maxとする。なお、デジタルカメラで撮影された画像は０レベルと２５５レベルにノイズがのり易いため、最小レベルを１、最大レベルを２５４とするのがよい。
【００８３】
ステップＳ２５２：画像のなかで相対的に暗い部分を輝度ヒストグラム上の分布域から決定するため、前ステップで求めたシャドーポイントScene_MinとハイライトポイントScene_Maxの間を４分割することにより、図１１に例示するように、４つの区分０，１，２，３に量子化する。区分０が相対的に暗い分布域となる。
【００８４】
ステップＳ２５３：入力画像に対し、前ステップで得られた各区分の輝度レベルを持つ画素を代表レベルに置き換えることにより、輝度レベルを４レベルに量子化した画像（過度のコントラストをつけた画像）を作成する。図２８に示した夜間ポートレート撮影画像の場合、図３２のような量子化画像が得られる。そして、量子化画像の背景領域（図Ａ５の白領域）の平均輝度と被写体領域（図３２の黒領域）の平均輝度を算出して比較し、背景領域の平均輝度の方が被写体領域の平均輝度よりも低い場合に（背景が被写体よりも相対的に暗い場合に）Ｅタイプと判定する。そうでない場合は、Ｆタイプと判定する。ここで画像を量子化するのは、画像に過度のコントラストをつけることにより、背景と被写体との相対的な明るさ関係の把握を容易にするためである。
【００８５】
Ｅタイプに判定される画像は、背景が被写体よりも相対的に暗い画像、つまり夜間ポートレート画像や夜景画像、通常撮影の露出不足画像などである。Ｆタイプに判定されるのは、背景のほうが被写体よりも明るい、真逆光以外の逆光画像や、通常撮影の適正画像（例えば図２９に示す画像）、通常撮影の露出不足画像などである。
【００８６】
ここで、第一の判定手段２０２で真逆光画像（Ｄタイプ）であるか否かを判定したの後に第二の判定手段２０３でさらにタイプ判定を行う理由は２つある。一つ目の理由は、判定の容易な真逆光画像の判定を先に行うほうが誤判定が起こりにくいからである。また、第二の判定手段２０３において画像中の相対的に明るい部分と暗い部分を抽出するためにタイプ判定用ダイナミックレンジを算出するが、これは、露出不足などでコントラスト不足な画像の明るい部分と暗い部分とをはっきりさせることで背景と被写体との明るさ関係を分かりや易くするためである。よって、元々背景が絶対的に明るく、逆光撮影画像と思われるＤタイプの画像に同様の量子化を行うと、適正露出のＦタイプの画像と混同し易いため、第一の判定手段２０２でＤタイプの判定を先に行う必要があり、これが二つ目の理由である。
【００８７】
なお、上に説明した画像タイプの判定処理において、高輝度白色領域や輝度ヒストグラムを算出する際には適当に間引きを行っても良い。また、高輝度白色光か否かの判定にＲＧＢ情報を用いる例を説明したが、輝度色差情報や明度色差情報などＲＧＢ以外の色空間を判定に用いることも可能である。また、第二の判定手段２０３において、輝度情報を用いて画像のなかで相対的に暗い部分を算出しているが明度情報やＧ信号などの色情報を用いても良い。また、高輝度白色光の判定パラメータ（前記（５）式中の閾値）やタイプ判別用ダイナミックレンジの判定パラメータ（累積頻度１％）は必要に応じて変更可能である。
【００８８】
また、第一の判定手段２０２による判定をオペレータが判定するようにしてもよい。例えば、オペレータの判定結果を入力するための「逆光補正キー」のような手段を用意し、オペレータによって「逆光補正キー」が押された場合にはＤタイプとしての処理に移行し、押されない場合には第二の判定手段２０３による判定処理に移行するような構成とすることも可能である。
【００８９】
次に、処理手段２０４（図１８のステップＳ２０２，Ｓ２０４，Ｓ２０６）について、図２３のフローチャートに沿って説明する。
【００９０】
ステップＳ２６０：露出補正量決定領域と制御領域の抽出を行う。露出補正量決定領域とは露出補正量を決定するための領域であり、制御領域とは補正を制御する時に使用する領域である。下記に従って全ての画素をこの２領域に振り分ける。
【００９１】
背景が被写体よりも明るいＤタイプ又はＦタイプの場合（図１８のステップＳ２０２又はＳ２０５の場合）においては、被写体領域を露出補正量決定領域とし、また、背景領域及び被写体領域（つまり画像全域）のハイライト画素を制御領域とする。これに対し、背景は被写体よりも暗いＥタイプの場合（図１８のステップＳ２０４）においては、被写体領域を露出補正量決定領域とし、被写体領域のハイライト画素を制御領域とする。ここで、ハイライト画素とは、例えば図１１のように量子化した輝度ヒストグラムの区分３に属する画素である。
【００９２】
ステップＳ２６１〜Ｓ２６４：まず、ステップＳ２６１において、露出補正量決定領域の情報、例えば輝度中央値と、画像のタイプとに応じて、補正量δの初期値を決定する（これが露出の判定に相当する）。その決定には様々な方法を用い得るが、例えば、輝度中央値が第１の閾値より小さいときに、Ｄタイプならば第１の所定値を初期値とし、Ｅ又はＦタイプならば輝度中央値を用いて第１の計算式で算出した値を初期値とする。輝度中央値が第１の閾値より大きく第２の閾値より小さい場合には、どのタイプであっても、輝度中央値を用いて第２の計算式で算出した値を初期値とする。輝度中央値が第２の閾値より大きい場合には、どのタイプであっても第２の所定値を初期値とする。そして、決定した補正量δの初期値を用いて、初期の階調補正テーブルｆ０（ｘ）を作成する（ステップＳ２６１）。
f0(x)＝｛(x/255)^δ｝・255 … （１１）
【００９３】
次に、現在の階調補正テーブルを用いて階調補正を行った場合の階調つぶれが許容される程度であるか評価する（ステップＳ２６２）。具体的には、現在の階調補正テーブルを用いて、後述するステップＳ２６５と同じ色変換方法を用いて制御領域に属する画素の変換を行う。そして、階調補正後の画像データの階調つぶれを評価する。例えば、出力デバイスの再現範囲を超えた（つまりレベル２５５を超えた）飽和画素に対し、平均的な超越値を算出する。すなわち、ｋ個の飽和画素に対し、各画素ごとに飽和した色成分の最大レベルｌｊ（ｊ＝１，２．．．Ｋ）を求め、最大レベルと再現範囲上限との差分の平均値Ｏａｖｅを飽和度として算出する。
Oave＝Σ(lj−255)／K … （１２）
但し、Σはj=1,2...Kについてとる。
そして、飽和度がある閾値以上の場合に、飽和度合すなわち階調つぶれが許容されないと判断する。
【００９４】
なお、制御領域に属する画素数Ｍと制御領域における飽和画素数Ｋの比Ｋ／Ｍを飽和度とすることもできる。あるいは、画像全領域の画素数Ｎと飽和画素数Ｋの比Ｋ／Ｎを飽和度とすることもできる。
【００９５】
ステップＳ２６２で階調つぶれが許容されないと判定された場合は、補正量δを小さくなるように調節し（ステップＳ２６３）、その補正量δを用いた階調補正テーブルfi(x)を作成し（ステップＳ２６４）、再び階調つぶれが許容されるか判定する（ステップＳ２６２）。この階調補正テーブルの更新処理は階調つぶれが許容されると判断されるまで繰り返される（以上のステップＳ２６２〜Ｓ２６４のループによる階調補正テーブルの更新処理が露出の制御である）。図２４に、初期の階調補正テーブルf0(x)と１回目の更新後の階調補正テーブルf1(x)の
例を示す。
【００９６】
ステップＳ２６５：以上の手順により得られた最終の階調補正テーブルfn(x)を用いて、入力画像に対し色変換を行う。ここでは、入力画像のＲＧＢデータに対する色変換について説明する。
【００９７】
入力画像の輝度値Y1(j)（j=1,2,...,N、Ｎは総画素数）に対し、階調補正テーブルfn(x)による補正後の出力輝度値Y2(j)を定義し、階調補正係数C1(j)を算出する。
C1(j)＝Y2(j)／Y1(j)
＝fn(Y1(j))／Y1(j) … （１３）
そして、この階調補正係数を用いてカラー画像信号（R1(j),G1(j),B1(j)）を変換し、出力カラー信号（R2(j),G2(j),B2(j)）を得る。
【００９８】
（R2(j),G2(j),B2(j)）＝C1(j)・(R1(j),G1(j),B1(j)) … （１４）
以上説明した画像処理装置２０１は、独立した装置として実現することも、他の機器の組み込み装置として実現することもでき、また、ハードウェア、ソフトウェア、その組み合わせのいずれによっても実現できる。
【００９９】
ソフトウェアで実現する場合について図１２を援用して説明する。例えば、図１２に示すような画像処理システム１０１において、コンピュータ１０７上で動作する画像処理アプリケーション１１８に、図１７に示した画像処理装置２０１の機能（図１８に示す処理手順）をコンピュータ１０７上で実現するための補正プログラム１１７を組み込むことができる。画像処理アプリケーション１１８で画像処理を行う時に、補正プログラム１１７で画像データに対する階調補正処理が施され、階調補正後の画像データは、ディスプレイドライバ１１９を介してディスプレイ１１４に出力されたり、プリンタドライバ１２０を介してプリンタ１１５に出力される。なお、階調補正処理を画像出力時にのみ施すのであれば、補正プログラム１１７と同様の機能を、プリンタドライバ１１５やディスプレイドライバ１１９、あるいは、プリンタ１１５やディスプレイ１１４に実装することも可能である。このようなコントラスト補正のための機能を実現するためプログラム類、及び、それが記録されたコンピュータが読み取り可能な情報記憶媒体、例えば磁気ディスク、光ディスク、光磁気ディスク、半導体記憶素子等も本発明に包含される。
【０１００】
《実施例４》
図２５は本発明の実施例３の構成を示すブロック図である。ここに示す画像出力システムは複数のパソコン（ＰＣ）２３１ａ，２３１ｂと複数のプリンタ２３６ａ，２３６ｂを有し、任意のパソコンより任意のプリンタに画像を出力することができる。画像出力システムは、各プリンタ２３６ａ，２３６ｂに対応した画像処理装置２３２ａ，１３２ｂも備える。
【０１０１】
この画像出力システムにおいて、例えばパソコン２３１ａでオペレータがプリンタ２３６ａを選択して出力指令を入力すると、パソコン２３１ａは画像を撮像するなどして取り込まれた画像データや各種ＤＴＰソフトで作成された画像データを画像処理装置２３２ａに送る。画像処理装置２３２ａは、送られた画像データの階調補正処理を行ってから複数の出力色成分Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）、Ｋ（ブラック）への色変換処理を行って印刷データを生成し、それをプリンタ２３６ａに送り印刷させる。
【０１０２】
なお、画像処理装置２３２ａ，１３２ｂは独立した装置として示されているが、後により具体的に述べるように、画像処理装置２３２ａ，２３２ｂの全機能をパソコン２３１ａ，２３１ｂ上で動作するプリンタドライバに実装することも、一部機能をプリンタドライバに実装し残りの機能をプリンタ２３６ａ，２３６ｂに実装するなど、様々な実現形態をとり得る。
【０１０３】
各画像処理装置２３２ａ，２３２ｂは、色変換手段２３３と、中間調処理等を実施する描画手段２３４と、描画手段２３４で描画された１ページ分の印刷画像を一時的に格納するための画像記憶手段２３５とからなる。
【０１０４】
色変換手段２３３は、図２６に示すように、補正処理手段２５０、補間演算部２５１及び色変換テーブル記憶部２５２から構成される。補正処理手段２５０は、前記実施例３の画像処理装置２０１と同じ第一の判定手段２０２、第二の判定手段２０３、処理手段２０４に、設定パラメータテーブル２０７と許容基準テーブル２０８が追加された構成である。
【０１０５】
以下、パソコン２３１ａ又は２３１ｂからＲＧＢ画像データを画像処理装置２３２ａに送り、ＣＭＹＫの印刷データに変換してプリンタ２３６ａで画像出力する場合を例にして、画像処理装置２３２ａにおける処理を説明する。
【０１０６】
ＲＧＢの画像データが画像処理装置２３２ａに送られると、色変換手段２３３の補正処理手段２５０において、第一と第二の判定手段２０２，２０３により画像のタイプが判定される。処理手段２０４において、判定されたタイプに応じた階調補正テーブルが作成され、それを用いた階調補正が行われる。
【０１０７】
ここで、使用されるプリンタによって再現範囲が異なるため、階調つぶれの許容基準もプリンタ毎に異なる。よって、補正処理手段２５０は、出力予定のプリンタ（ここでは２３６ａ）に関するパラメータ情報をテーブルとして保持している。具体的には、前記（５）式における高輝度白色画素を定義しているパラメータや、ダイナミックレンジを設定する際の累積頻度パラメータを設定パラメータテーブル２０７に保持している。また、プリンタのインク特性や、描画手段２５１による中間調処理に応じて階調つぶれの許容基準が異なるため、階調つぶれ許容評価のための飽和度の判定閾値などを許容基準テーブル２０８に保持している。第一と第２の判定手段２０２，２０３は設定パラメータテーブル２０７に保持されているパラメータを読み込んで使用し、処理手段２０４は許容基準テーブル２０８に保持されているパラメータを読み込んで使用する。
【０１０８】
次に、色変換手段２３３において、色変換テーブル記憶部２５２に記憶されている色変換テーブルの中から最適なテーブルを選択して補間演算部２５１に送る。補間演算部２５１では、その選択された色変換テーブルのメモリマップの入力ＲＧＢに対し前記実施例２と同様のメモリマップ補間を実施し、ＲＧＢ画像データをＣＭＹＫの印刷データに変換し、それを描画手段２３４に送る。
【０１０９】
補間演算部２５１によりＣＭＹＫに変換された印刷データは描画手段２３４に送られ、ここで中間調処理等が行われた印刷画像データが１ページ分ずつ画像記憶手段２３５に一時的に記憶され、最終的にプリンタ２３６ａで印刷される。
【０１１０】
以上に説明した画像処理装置２３２ａ，２３２ｂは、独立したハードウェア装置として実現することも勿論可能であるが、その機能の全部又は一部をプリンタ２３６ａ，２３６ｂに組み込むことも可能である。また、画像処理装置の機能の全部又は一部をソフトウェアにより実現することも可能である。例えば、パソコン２３１ａ，２３１ｂ上で動作するプリンタドライバに、画像処理装置の機能の全部又は一部を実装することも可能である。プリンタドライバに実装する場合、補間演算部２５１の機能の中、（Ｃ，Ｙ，Ｋ）データ生成までの機能をプリンタドライバに持たせ、（Ｃ，Ｍ，Ｙ，Ｋ）データへの変換機能はプリンタ側に持たせる構成にすると、パソコンからプリンタへの転送データ量が減り高速化の面で一般に有利であろう。このようなプリンタドライバ等のプログラムと、それが記録された各種情報記録媒体も本発明に包含される。
【０１１１】
前記実施例２に関連して説明したように、１枚のプリントデータに自然画像やグラフィック画像など、種類の異なるオブジェクトが貼り付いている場合、画像データのヘッダに補正係数を付属させて画像処理装置２３２ａ，２３２ｂに送る必要がある（画像データと別に送ることも可能である）。また、プリンタドライバに実装する場合には、ＩＣＣ（Inter Color Consortium）で標準化されているデバイス・プロファイルを読み出して用いる構成とすることも可能である。
【０１１２】
【発明の効果】
以上の説明から明らかなように、本発明によれば、コントラスト補正によって階調つぶれを起こしやすい領域の情報を用いてダイナミックレンジを設定することにより、背景が白飛びを起こした逆光画像や、被写体がハイライト側に存在する夜間ポートレート撮影画像などに対し、階調つぶれを起こさない適切なコントラスト補正を施すことが可能となる。特に、ハイライトポイントの設定に色情報を用いることにより、階調つぶれのみならず色相変化も起こさない適切なコントラスト補正が可能である。
【図面の簡単な説明】
【図１】 実施例１の構成を示すブロック図である。
【図２】 実施例２の処理手順を示すフローチャートである。
【図３】 図１中の判定手段の構成を示すブロック図である。
【図４】 図３中のタイプ決定手段のタイプ決定手順を示すフローチャートである。
【図５】 逆光画像の輝度ヒストグラムの例を示す図である。
【図６】 輝度ヒストグラムの二極化測定手順を示すフローチャートである。
【図７】 輝度ヒストグラムが二極化していない場合の二極化測定の説明図である。
【図８】 輝度ヒストグラムが二極化している場合の二極化測定の説明図である。
【図９】 歪度Ｚが０より大きい輝度ヒストグラムの例を示す図である。
【図１０】 図１中の対象領域情報獲得手段のＡタイプ画像に対する処理を示すフローチャートである。
【図１１】 輝度ヒストグラムの量子化の説明図である。
【図１２】 画像処理システムの一例を示すブロック図である。
【図１３】 実施例２の構成を示すブロック図である。
【図１４】 図１３中の色変換手段の構成を示すブロック図である。
【図１５】 メモリマップ補間の説明のための図である。
【図１６】 複数のオブジェクトからなるプリントデータとオブジェクトの付随情報を説明するための図である。
【図１７】 実施例３の構成を示すブロック図である。
【図１８】 実施例３の処理手順を示すフローチャートである。
【図１９】 図１７中の第一の判定手段における判定処理の一例を示すフローチャートである。
【図２０】 図１７中の第一の判定手段における判定処理の他の一例を示すフローチャートである。
【図２１】 画像端部の説明図である。
【図２２】 図１７中の第二の判定手段における判定処理を示すフローチャートである。
【図２３】 図１７中の処理手段における処理を示すフローチャートである。
【図２４】 階調補正テーブルの例を示す図である。
【図２５】 実施例４の構成を示すブロック図である。
【図２６】 図２５中の色変換手段の構成を示すブロック図である。
【図２７】 逆光撮影画像の例を示す図である。
【図２８】 夜間ポートレート撮影画像の例を示す図である。
【図２９】 通常撮影画像の例を示す図である。
【図３０】 図２８の夜間ポートレート撮影画像の対象領域を示す図である。
【図３１】 図２７の逆光撮影画像の背景領域と被写体領域を示す図である。
【図３２】 図２８の夜間ポートレート撮影画像の量子化画像を示す図である。
【符号の説明】
１ 画像処理装置
２ 判定手段
３ 対象領域情報獲得手段
４ ダイナミックレンジ設定手段
５ 処理手段
２１ 二極化測定手段
２２ 輝度ヒストグラム歪度算出手段
２３ 領域別明るさ検出手段
２４ 付随情報参照手段
２５ タイプ決定手段
１０１ 画像処理システム
１０７ コンピュータ
１１７ 補正プログラム
１１８ 画像処理アプリケーション
１３２ 画像処理装置
１３３ 色変換手段
１３４ 描画手段
１３５ 画像記憶手段
１５０ コントラスト補正手段
１５１ 補間演算部
１５２ 色変換テーブル記憶部
２０１ 画像処理装置
２０２ 第一の判定手段
２０３ 第二の判定手段
２０４ 処理手段
２３２ 画像処理装置
２３３ 色変換手段
２３４ 描画手段
２３５ 画像記憶手段
２５０ 補正処理手段
２５１ 補間演算部
２５２ 色変換テーブル記憶部
Claims (7)
- 入力画像のコントラスト補正処理を行う画像処理装置であって、
入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれかが成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定手段と、
前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得手段と、
前記対象領域情報獲得手段により得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定手段と、
前記ダイナミックレンジ設定手段により設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理手段と、
を有することを特徴とする画像処理装置。 - 前記対象領域情報獲得手段は、前記判定手段によってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする請求項１記載の画像処理装置。
- 前記ダイナミックレンジ設定手段は、前記対象領域情報獲得手段により得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする請求項１または２記載の画像処理装置。
- 入力画像のコントラスト補正処理を行う画像処理方法であって、
入力画像の輝度ヒストグラムが二極化しているか、入力画像の輝度ヒストグラムに偏りがあるか、入力画像の背景領域と被写体領域の明るさに所定以上の差があるかを調べ、少なくともいずれかが成立した場合に、該入力画像中にコントラスト補正による階調つぶれの目立ちやすい領域が存在すると判定する判定ステップと、
前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、該領域の情報を得る対象領域情報獲得ステップと、
前記対象領域情報獲得ステップにより得られた領域の情報を用いてダイナミックレンジを設定するダイナミックレンジ設定ステップと、
前記ダイナミックレンジ設定ステップにより設定されたダイナミックレンジを用いて入力画像のコントラスト補正を行う処理ステップと、
を有することを特徴とする画像処理方法。 - 前記対象領域情報獲得ステップは、前記判定ステップによってコントラスト補正により階調つぶれの目立ちやすい領域が存在すると判定された場合に、前記入力画像中の相対的に明るい領域を抽出し、該領域から高輝度白色光画素及びエッジ画素を除いた領域を対象領域として、該領域の情報を得ることを特徴とする請求項４記載の画像処理方法。
- 前記ダイナミックレンジ設定ステップは、前記対象領域情報獲得ステップにより得られた領域の色情報を用いて、前記ダイナミックレンジの少なくともハイライトポイントを設定することを特徴とする請求項４または５記載の画像処理方法。
- 請求項１乃至３のいずれか１項に記載の画像処理装置の各手段の機能をコンピュータで実現させるためのコンピュータ・プログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001363785A JP3992177B2 (ja) | 2001-11-29 | 2001-11-29 | 画像処理装置、画像処理方法及びコンピュータ・プログラム |
| US10/270,065 US7167597B2 (en) | 2001-11-29 | 2002-10-15 | Image processing apparatus, image processing method, computer program and storage medium |
| US11/553,885 US7315657B2 (en) | 2001-11-29 | 2006-10-27 | Image processing apparatus, image processing method, computer program and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001363785A JP3992177B2 (ja) | 2001-11-29 | 2001-11-29 | 画像処理装置、画像処理方法及びコンピュータ・プログラム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007080247A Division JP4293469B2 (ja) | 2007-03-26 | 2007-03-26 | 画像処理装置、画像処理方法及びコンピュータ・プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003169231A JP2003169231A (ja) | 2003-06-13 |
| JP3992177B2 true JP3992177B2 (ja) | 2007-10-17 |
Family
ID=19174075
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001363785A Expired - Lifetime JP3992177B2 (ja) | 2001-11-29 | 2001-11-29 | 画像処理装置、画像処理方法及びコンピュータ・プログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US7167597B2 (ja) |
| JP (1) | JP3992177B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101509003B1 (ko) | 2011-12-16 | 2015-04-07 | 도꾸리쯔교세이호징 가가꾸 기쥬쯔 신꼬 기꼬 | 특징량 추출 방법, 피사체 분류 방법, 피사체 판별 방법, 특징량 추출 장치, 피사체 분류 장치, 피사체 판별 장치, 특징량 추출·피사체 분류 및 피사체 판별 프로그램, 및 그 프로그램을 기록한 기록 매체 |
Families Citing this family (82)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6628830B1 (en) * | 1998-06-24 | 2003-09-30 | Canon Kabushiki Kaisha | Image processing method and apparatus and storage medium |
| US6999202B2 (en) | 2001-03-27 | 2006-02-14 | Polaroid Corporation | Method for generating a halftone of a source image |
| US6842186B2 (en) * | 2001-05-30 | 2005-01-11 | Polaroid Corporation | High speed photo-printing apparatus |
| WO2002096651A2 (en) * | 2001-05-30 | 2002-12-05 | Polaroid Corporation | A high speed photo-printing apparatus |
| US6937365B2 (en) | 2001-05-30 | 2005-08-30 | Polaroid Corporation | Rendering images utilizing adaptive error diffusion |
| US6906736B2 (en) * | 2002-02-19 | 2005-06-14 | Polaroid Corporation | Technique for printing a color image |
| US7221807B2 (en) * | 2002-03-29 | 2007-05-22 | Sharp Laboratories Of America, Inc. | Methods and systems for digital image characteristic adjustment using a neural network |
| EP1524854B8 (en) | 2002-07-19 | 2013-02-20 | Seiko Epson Corporation | Image-quality adjustment of image data |
| US20040126009A1 (en) * | 2002-09-19 | 2004-07-01 | Hirokazu Takenaka | Image processing apparatus, image processing method, and image processing program |
| KR20040040699A (ko) * | 2002-11-07 | 2004-05-13 | 삼성전자주식회사 | 콘트라스트 보정 장치 및 방법 |
| US7327504B2 (en) * | 2002-12-06 | 2008-02-05 | Eastman Kodak Company | Method of detecting clipped image pixels |
| US7283666B2 (en) * | 2003-02-27 | 2007-10-16 | Saquib Suhail S | Digital image exposure correction |
| JP2004282282A (ja) * | 2003-03-14 | 2004-10-07 | Yokogawa Electric Corp | カメラシステム及びカメラ制御方法 |
| JP4167097B2 (ja) * | 2003-03-17 | 2008-10-15 | 株式会社沖データ | 画像処理方法および画像処理装置 |
| US7684096B2 (en) * | 2003-04-01 | 2010-03-23 | Avid Technology, Inc. | Automatic color correction for sequences of images |
| US8773685B2 (en) | 2003-07-01 | 2014-07-08 | Intellectual Ventures I Llc | High-speed digital image printing system |
| JP4172346B2 (ja) * | 2003-07-15 | 2008-10-29 | コニカミノルタビジネステクノロジーズ株式会社 | 画像処理装置及びプログラム |
| US7469072B2 (en) | 2003-07-18 | 2008-12-23 | Canon Kabushiki Kaisha | Image processing apparatus and method |
| JP4001079B2 (ja) * | 2003-08-11 | 2007-10-31 | セイコーエプソン株式会社 | カラー画像のモノトーン化処理 |
| EP1694053A4 (en) * | 2003-12-12 | 2007-08-22 | Fujitsu Ltd | PROGRAM, DEVICE AND METHOD FOR CORRECTION OF COLOR BALANCE |
| JP4078649B2 (ja) * | 2004-01-28 | 2008-04-23 | 日本ビクター株式会社 | 映像信号処理装置及び方法 |
| JP4127537B2 (ja) * | 2004-02-04 | 2008-07-30 | 富士フイルム株式会社 | 画像処理方法および装置並びにプログラム |
| JP4283704B2 (ja) * | 2004-02-25 | 2009-06-24 | 富士フイルム株式会社 | 撮影装置 |
| US20050215876A1 (en) * | 2004-03-25 | 2005-09-29 | Eastman Kodak Company | Method and system for automatic image adjustment for in vivo image diagnosis |
| JP4466261B2 (ja) | 2004-07-30 | 2010-05-26 | カシオ計算機株式会社 | 撮像装置、明るさ補正方法及びプログラム |
| TWI262471B (en) * | 2004-09-06 | 2006-09-21 | Mstar Semiconductor Inc | Method and device for reducing color noise |
| US8285041B2 (en) * | 2004-09-14 | 2012-10-09 | Olympus Corporation | Image processing apparatus, image recording apparatus, and image processing method |
| US7545435B2 (en) * | 2004-10-15 | 2009-06-09 | Lifesize Communications, Inc. | Automatic backlight compensation and exposure control |
| JP4325552B2 (ja) | 2004-12-24 | 2009-09-02 | セイコーエプソン株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
| JP2006217406A (ja) * | 2005-02-04 | 2006-08-17 | Sony Corp | 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム、画像処理システムおよび方法 |
| JP4379362B2 (ja) * | 2005-03-28 | 2009-12-09 | セイコーエプソン株式会社 | 画像処理装置、および、階調再現方法 |
| JP4412236B2 (ja) * | 2005-05-30 | 2010-02-10 | ソニー株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
| US7551334B2 (en) * | 2005-07-20 | 2009-06-23 | Xerox Corporation | Background suppression method and apparatus |
| US7512269B2 (en) * | 2005-08-04 | 2009-03-31 | Asaf Golan | Method of adaptive image contrast enhancement |
| JP2007074415A (ja) * | 2005-09-07 | 2007-03-22 | Nippon Hoso Kyokai <Nhk> | 動きベクトル推定装置および動きベクトル推定プログラム |
| JP2007081550A (ja) * | 2005-09-12 | 2007-03-29 | Konica Minolta Photo Imaging Inc | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム |
| JP2007106111A (ja) * | 2005-09-16 | 2007-04-26 | Ricoh Co Ltd | 画像形成装置及び画像形成方法 |
| JP4934326B2 (ja) * | 2005-09-29 | 2012-05-16 | 富士フイルム株式会社 | 画像処理装置およびその処理方法 |
| WO2007072548A1 (ja) | 2005-12-20 | 2007-06-28 | Fujitsu Limited | 画像判別装置 |
| JP4826260B2 (ja) * | 2006-01-16 | 2011-11-30 | 株式会社ニコン | 撮像装置及びプログラム |
| JP4687475B2 (ja) * | 2006-01-31 | 2011-05-25 | コニカミノルタホールディングス株式会社 | 撮像装置、撮像システムおよび撮像方法 |
| JP4345757B2 (ja) | 2006-02-22 | 2009-10-14 | セイコーエプソン株式会社 | 画像データの色の補正 |
| JP4701111B2 (ja) * | 2006-03-16 | 2011-06-15 | Ｈｏｙａ株式会社 | パターンマッチングシステム及び被写体追尾システム |
| CN100568926C (zh) * | 2006-04-30 | 2009-12-09 | 华为技术有限公司 | 自动曝光控制参数的获得方法及控制方法和成像装置 |
| DE102006036305A1 (de) * | 2006-08-03 | 2008-02-21 | Mekra Lang Gmbh & Co. Kg | Verfahren zur Berechnung von Gammakorrekturwerten sowie Bildaufnahmevorrichtung mit einer entsprechenden Gammaadaptionseinheit |
| KR100843090B1 (ko) * | 2006-10-25 | 2008-07-02 | 삼성전자주식회사 | 영상의 깜박임을 개선하는 디스플레이 장치 및 방법 |
| US8218868B2 (en) * | 2007-06-13 | 2012-07-10 | Sensors Unlimited, Inc. | Method and apparatus for enhancing images |
| JP5053724B2 (ja) * | 2007-06-19 | 2012-10-17 | オリンパスイメージング株式会社 | 画像表示装置、撮像装置、画像再生装置、及び画像表示方法 |
| JP4308319B2 (ja) * | 2007-08-07 | 2009-08-05 | パナソニック株式会社 | 画像処理装置および画像処理方法 |
| JP2010537330A (ja) * | 2007-08-28 | 2010-12-02 | ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー | 画像評価適応走行制御システムのセンサ画像における輝度値を評価するための方法およびシステム |
| JP4402710B2 (ja) * | 2007-09-18 | 2010-01-20 | オリンパス株式会社 | 撮像装置 |
| JP2009154365A (ja) | 2007-12-26 | 2009-07-16 | Ricoh Co Ltd | 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体 |
| JP2009290661A (ja) * | 2008-05-30 | 2009-12-10 | Seiko Epson Corp | 画像処理装置、画像処理方法、画像処理プログラムおよび印刷装置 |
| JP2010039329A (ja) * | 2008-08-07 | 2010-02-18 | Sony Corp | 投射型表示装置および画像表示制御方法 |
| JP5370056B2 (ja) * | 2008-11-04 | 2013-12-18 | オムロン株式会社 | 画像処理装置 |
| JP5325562B2 (ja) * | 2008-12-22 | 2013-10-23 | ローム株式会社 | 画像補正処理回路及びこれを集積化して成る半導体装置 |
| CN102265594B (zh) * | 2008-12-22 | 2014-07-02 | 罗姆股份有限公司 | 图像修正处理电路、半导体装置、图像修正处理装置 |
| JP4539778B2 (ja) * | 2009-01-26 | 2010-09-08 | セイコーエプソン株式会社 | 画像データの色の補正 |
| JP5743384B2 (ja) * | 2009-04-14 | 2015-07-01 | キヤノン株式会社 | 画像処理装置及び画像処理方法とコンピュータプログラム |
| FR2947082B1 (fr) * | 2009-06-22 | 2014-12-12 | St Ericsson France Sas | Procede et dispositif de traitement d'une image numerique pour eclaircir ladite image. |
| JP5438414B2 (ja) * | 2009-07-23 | 2014-03-12 | パナソニック株式会社 | 明るさ検知システムおよびそれを用いた照明システム |
| JP5123270B2 (ja) * | 2009-10-02 | 2013-01-23 | 株式会社東芝 | 画像処理装置及び画像表示装置 |
| JP5624809B2 (ja) * | 2010-06-24 | 2014-11-12 | 株式会社 日立産業制御ソリューションズ | 画像信号処理装置 |
| WO2011161081A1 (en) * | 2010-06-25 | 2011-12-29 | Oce-Technologies B.V. | Method to enhance detailed information |
| US9024951B2 (en) * | 2011-02-16 | 2015-05-05 | Apple Inc. | Devices and methods for obtaining high-local-contrast image data |
| US9672609B1 (en) * | 2011-11-11 | 2017-06-06 | Edge 3 Technologies, Inc. | Method and apparatus for improved depth-map estimation |
| CN104106109B (zh) * | 2012-02-03 | 2017-06-06 | 松下知识产权经营株式会社 | 视频显示控制装置 |
| TWI471808B (zh) * | 2012-07-20 | 2015-02-01 | Pixart Imaging Inc | 瞳孔偵測裝置 |
| US9313415B2 (en) * | 2013-02-19 | 2016-04-12 | Sensormatic Electronics, LLC | Method and system for adjusting exposure settings of video cameras |
| JP6243629B2 (ja) * | 2013-05-29 | 2017-12-06 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
| CN103716547A (zh) * | 2014-01-15 | 2014-04-09 | 厦门美图之家科技有限公司 | 一种智能模式的拍照方法 |
| JP6320946B2 (ja) * | 2015-02-05 | 2018-05-09 | 三菱電機株式会社 | 映像再生装置及び方法 |
| US10354370B2 (en) | 2016-03-24 | 2019-07-16 | Panasonic Intellectual Property Management Co., Ltd. | Image processor, image processing method, and program |
| CN107635102B (zh) | 2017-10-30 | 2020-02-14 | Oppo广东移动通信有限公司 | 高动态范围图像曝光补偿值获取方法和装置 |
| JP6965132B2 (ja) * | 2017-12-05 | 2021-11-10 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
| JP7378823B2 (ja) * | 2018-05-07 | 2023-11-14 | ｔｏｎｏｉ株式会社 | システム、データ処理方法、及びプログラム |
| JP7247609B2 (ja) | 2019-01-30 | 2023-03-29 | 株式会社リコー | 撮像装置、撮像方法およびプログラム |
| CN111048056A (zh) * | 2019-12-19 | 2020-04-21 | 惠州Tcl移动通信有限公司 | 终端设备亮度调节方法及其系统、存储介质及终端设备 |
| JP7185656B2 (ja) * | 2020-03-30 | 2022-12-07 | Ｔｖｓ Ｒｅｇｚａ株式会社 | 映像信号処理装置および映像信号処理方法 |
| US11818320B2 (en) | 2020-04-17 | 2023-11-14 | Ricoh Company, Ltd. | Convert a dot area ratio of a target process color using a fluorescent color for higher brightness and saturation |
| JP2022040818A (ja) | 2020-08-31 | 2022-03-11 | 株式会社リコー | 画像処理装置、画像処理方法およびプログラム |
| CN113714496B (zh) * | 2021-07-20 | 2023-01-24 | 武汉钢铁有限公司 | 钢包底吹氩故障诊断方法、装置及存储介质 |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US669405A (en) * | 1899-12-18 | 1901-03-05 | Frederick Wicks | Metal-pump for type-casting. |
| JP3011432B2 (ja) * | 1990-05-14 | 2000-02-21 | 株式会社東芝 | カラー画像処理装置 |
| JP2748678B2 (ja) * | 1990-10-09 | 1998-05-13 | 松下電器産業株式会社 | 階調補正方法および階調補正装置 |
| US5289282A (en) * | 1991-05-28 | 1994-02-22 | Matsushita Electric Industrial Co., Ltd. | Video signal gradation corrector |
| JP3385667B2 (ja) | 1993-08-31 | 2003-03-10 | いすゞ自動車株式会社 | 鉄・テルビウム系磁歪材料及びその製造方法 |
| US5715377A (en) * | 1994-07-21 | 1998-02-03 | Matsushita Electric Industrial Co. Ltd. | Gray level correction apparatus |
| US6040860A (en) * | 1994-09-30 | 2000-03-21 | Matsushita Electric Industrial Co., Ltd. | Imaging apparatus for supplying images with rich gradation across the entire luminance range for all subject types |
| JPH08138043A (ja) * | 1994-11-10 | 1996-05-31 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
| JPH0937143A (ja) | 1995-07-24 | 1997-02-07 | Hitachi Ltd | 撮像装置 |
| JP3669448B2 (ja) * | 1995-10-31 | 2005-07-06 | 富士写真フイルム株式会社 | 画像再生方法および装置 |
| US6694052B1 (en) * | 1995-10-31 | 2004-02-17 | Fuji Photo Film Co., Ltd. | Image reproducing method and apparatus |
| JP4069333B2 (ja) | 1996-11-13 | 2008-04-02 | セイコーエプソン株式会社 | 画像処理装置、画像処理方法および画像処理プログラムを記録した媒体 |
| JPH11154235A (ja) | 1997-11-21 | 1999-06-08 | Dainippon Screen Mfg Co Ltd | 画像の参照濃度値の抽出方法およびその装置、並びに画像処理装置 |
| JP2000134467A (ja) | 1998-10-26 | 2000-05-12 | Canon Inc | 画像処理方法、装置および記憶媒体 |
| JP3208762B2 (ja) * | 1998-11-18 | 2001-09-17 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
| US6771815B2 (en) * | 1999-02-19 | 2004-08-03 | Nikon Corporation | Image correction apparatus and recording medium for storing image correction program |
| JP3926947B2 (ja) * | 1999-06-22 | 2007-06-06 | 富士フイルム株式会社 | 画像データ形成装置および画像データ処理方法 |
| JP2001144962A (ja) | 1999-11-11 | 2001-05-25 | Fuji Xerox Co Ltd | 画像処理装置 |
| JP2001222710A (ja) | 2000-02-09 | 2001-08-17 | Fuji Photo Film Co Ltd | 画像処理装置および画像処理方法 |
| US6873729B2 (en) * | 2000-07-14 | 2005-03-29 | Ricoh Company, Ltd. | Method, apparatus and computer program product for processing image data |
| US7251056B2 (en) * | 2001-06-11 | 2007-07-31 | Ricoh Company, Ltd. | Image processing apparatus, image processing method and information recording medium |
-
2001
- 2001-11-29 JP JP2001363785A patent/JP3992177B2/ja not_active Expired - Lifetime
-
2002
- 2002-10-15 US US10/270,065 patent/US7167597B2/en not_active Expired - Fee Related
-
2006
- 2006-10-27 US US11/553,885 patent/US7315657B2/en not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101509003B1 (ko) | 2011-12-16 | 2015-04-07 | 도꾸리쯔교세이호징 가가꾸 기쥬쯔 신꼬 기꼬 | 특징량 추출 방법, 피사체 분류 방법, 피사체 판별 방법, 특징량 추출 장치, 피사체 분류 장치, 피사체 판별 장치, 특징량 추출·피사체 분류 및 피사체 판별 프로그램, 및 그 프로그램을 기록한 기록 매체 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20070041637A1 (en) | 2007-02-22 |
| US20030099407A1 (en) | 2003-05-29 |
| US7167597B2 (en) | 2007-01-23 |
| US7315657B2 (en) | 2008-01-01 |
| JP2003169231A (ja) | 2003-06-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3992177B2 (ja) | 画像処理装置、画像処理方法及びコンピュータ・プログラム | |
| US10412296B2 (en) | Camera using preview image to select exposure | |
| US7251056B2 (en) | Image processing apparatus, image processing method and information recording medium | |
| US7421120B2 (en) | Apparatus correcting image by luminance histogram | |
| JP4006347B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、記憶媒体、及びプログラム | |
| US7945109B2 (en) | Image processing based on object information | |
| JP4978378B2 (ja) | 画像処理装置 | |
| JP2008271574A (ja) | 画像生成履歴情報を用いた画像の逆光処理 | |
| JP4154128B2 (ja) | 画像処理装置、画像処理方法およびその方法を実施するためのプログラムを記録した記録媒体 | |
| JP4367821B2 (ja) | 画像処理装置、画像処理方法および記録媒体 | |
| KR101754425B1 (ko) | 이미지 촬영 장치의 밝기를 자동으로 조절하는 장치 및 방법 | |
| JP4107812B2 (ja) | 画像処理装置および画像処理方法および記録媒体 | |
| JP2002092607A (ja) | 画像処理装置、画像状態判別方法及び記録媒体 | |
| JP2007311895A (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
| JP4219577B2 (ja) | 画像処理装置と画像出力装置と画像処理方法及び記憶媒体 | |
| JP2009070099A (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
| JP4293469B2 (ja) | 画像処理装置、画像処理方法及びコンピュータ・プログラム | |
| JP2007221678A (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
| JP2007293686A (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
| JP2004112494A (ja) | 画像処理装置、画像処理方法および記録媒体 | |
| JP2002094810A (ja) | 画像処理装置、画像処理方法およびその方法を実施するためのプログラムを記憶した記憶媒体 | |
| JP2007235204A (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
| JP2007318320A (ja) | 画像処理装置、撮影装置、画像処理方法及び画像処理プログラム | |
| JP2007243556A (ja) | 撮像装置、画像処理方法及び画像処理プログラム | |
| JP2007258890A (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040607 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070124 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070326 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070718 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070719 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 3992177 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100803 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100803 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110803 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110803 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120803 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120803 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130803 Year of fee payment: 6 |
|
| EXPY | Cancellation because of completion of term |