JP2001313844A - 局所的な色補正を実行する方法および装置 - Google Patents

局所的な色補正を実行する方法および装置

Info

Publication number
JP2001313844A
JP2001313844A JP2001074054A JP2001074054A JP2001313844A JP 2001313844 A JP2001313844 A JP 2001313844A JP 2001074054 A JP2001074054 A JP 2001074054A JP 2001074054 A JP2001074054 A JP 2001074054A JP 2001313844 A JP2001313844 A JP 2001313844A
Authority
JP
Japan
Prior art keywords
image
mask
pixel
values
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001074054A
Other languages
English (en)
Other versions
JP4443064B2 (ja
JP2001313844A5 (ja
Inventor
Nathan Moroney
ネイサン・モロニー
Irwin Sobel
アーウィン・ソヴェル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HP Inc
Original Assignee
Hewlett Packard Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Co filed Critical Hewlett Packard Co
Publication of JP2001313844A publication Critical patent/JP2001313844A/ja
Publication of JP2001313844A5 publication Critical patent/JP2001313844A5/ja
Application granted granted Critical
Publication of JP4443064B2 publication Critical patent/JP4443064B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Color Image Communication Systems (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

(57)【要約】 【課題】局所的な色補正を実行して、簡単かつ高速に、
高品質な画像を生成する。 【解決手段】この発明は、局所的なカラー補正を実行す
る方法および装置に関する。この発明の一実施形態は、
2つのプロセスから成る。第1のプロセスは、入力画像
から画像マスクを抽出する。一実施形態においては、マ
スクは反転され、ローパスフィルタリングされた、入力
画像のモノクロである。第2のプロセスは、該取り出し
た画像と入力画像を非線形演算によって組み合わせる。
一実施形態においては、この組み合わせ演算は、マスク
値を指数の一部として有し、ピクセル値を底の一部とし
て有する可変の指数関数である。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、局所的な色補正を
実行する方法および装置に関する。
【0002】
【従来の技術】色調の再現は、画像処理の重要な一態様
である。歴史的に見ると、トーン補正は、所与の画像に
対するグローバルなやり方に基づいて実行されてきた。
グローバルトーン補正動作は、通常、画像のピクセルす
べてに同一の補正を適用する。換言すれば、それぞれの
入力値を1つのみの出力値に1対1にマッピングする一
次元動作である。
【0003】グローバルトーン補正は、原画像のダイナ
ミックレンジがかなり限られている場合には妥当な補正
である。原画像のダイナミックレンジが大きい場合、影
およびハイライトの両方のディテールに対処するようグ
ローバルトーン補正を実行することは、ますます困難に
なる。
【0004】その結果、ダイナミックレンジの大きい画
像を処理するいくつかの局所的なトーン補正動作が提案
されてきた。局所的なトーン補正動作は、典型的には、
隣接するピクセルの値に従って、1つの入力値を異なる
出力値にマップする。これにより、影およびハイライト
の調節を同時に行うことができる。
【0005】
【発明が解決しようとする課題】従来の局所的なトーン
補正技術としては、覆い焼き(dodging)、焼き付け(b
urning)等の手動操作、ヒストグラム平坦化、ピクセル
的ガンマ補正、Retinexアルゴリズム等の自動方
式がある。これらの技術は、かなりの将来性を示してき
た。しかしながら、これらの技術の中には、かなり複雑
であり、かつ時間のかかるものもある。また、許容でき
る品質を一定して提供することができないものもある。
このため、簡単かつ高速であり、かつ高品質な画像を生
成する局所的なトーン補正技術が必要とされている。
【0006】
【課題を解決するための手段】本発明は、局所的な色補
正を実行する方法および装置のためのものである。本発
明の一実施形態は、2つのプロセスからなる。第1のプ
ロセスでは、入力画像から画像マスクを導出する。実施
形態によっては、このマスクは、入力画像の、反転さ
れ、ローパス・フィルタリングされたモノクロ画像であ
る。第2のプロセスでは、非線形演算を介して、導出し
たマスクを入力画像と組み合わせる。実施形態によって
は、この組合せ演算は、マスク値をその指数の一部と
し、かつピクセル値をその底の一部として有する可変な
指数関数である。
【0007】この発明の1つの側面によると、局所的な
色補正を実行する方法が提供される。該方法は、(a)
それぞれが原ピクセルカラー値の集合で表される複数の
ピクセルを有する入力画像を受信するステップと、
(b)それぞれがピクセルマスク値の集合により表され
る複数のピクセルを有するトーンマスク画像を、入力画
像から生成するステップと、(c)原ピクセルカラー値
のそれぞれの集合について、修正されたピクセルカラー
値の集合を求めるステップとを含む。原ピクセルカラー
値のそれぞれの集合は、対応するピクセルマスク値の集
合を有しており、修正されたピクセルカラー値のそれぞ
れの集合は、原ピクセルカラー値の集合と、該原ピクセ
ルカラー値の集合の対応するピクセルマスク値の集合と
の非線形の組み合わせに等しい。
【0008】
【発明の実施の形態】本発明は、局所的な色補正を実行
する方法および装置のためのものである。以下の説明に
おいて、説明の目的で多数のディテールが記載される。
しかしながら、当業者であれば、これらの具体的なディ
テールを使用せずに本発明を実施し得ることが理解され
よう。他の例において、無用な詳細記述により本発明の
記載を不明瞭にすることがないよう、周知の構造および
装置はブロック図で示される。
【0009】図1は、本発明のいくつかの実施形態にお
いて使用されるプロセス100を示す。図に示されるよ
うに、プロセス100は、最初に、多数のピクセル(す
なわち、画素)によって形成されるデジタルカラー画像
を受信する(105)。具体的には、いくつかの実施形
態において、本プロセスは、デジタルカラー画像を表す
コンポーネントカラー値の集合(set)を受信する。コ
ンポーネントカラー値の各集合は、デジタル画像におけ
るピクセルの色を特定する。本発明のいくつかの実施形
態において、コンポーネントカラーは、加法三原色の
赤、緑または青(「RGB」)である。しかしながら、
他の実施形態では、他のコンポーネントカラー値(たと
えば、CMYK値、YCrCb値、CIELAB、CI
ECAM97s値等)を用いて、デジタル画像のピクセ
ルの色を特定する。
【0010】図1に示すように、本プロセスは、受信し
たデジタル画像からトーンマスクを生成する(11
0)。トーンマスクは、受信したデジタル画像のトーン
特性を省略形式で符号化する画像である。換言すれば、
マスクは、受信画像におけるアイテムの色調に関する情
報を、アイテムの内容およびアイデンティティにかかわ
らず含む。トーンマスクの数値は、受信したデジタル画
像における影、ハイライトおよび中間階調を表す。
【0011】受信したデジタル画像と同様に、トーンマ
スク画像は多数のピクセルを有する。トーンマスクにお
ける各ピクセルの色は、マスクカラー値により特定され
る。トーンマスク画像における各ピクセルは、デジタル
画像におけるピクセルに対応する。同様に、トーンマス
クにおける各ピクセルのマスクカラー値は、デジタル画
像における対応するピクセルのコンポーネントカラー値
に関連づけられる。
【0012】本発明の様々な実施形態では、受信したデ
ジタル画像のトーンマスクを生成する様々な技術が用い
られる。いくつかの実施形態では、受信画像に反復処理
を行うことによってこのマスクを生成する。たとえば、
いくつかの実施形態では、人間の視覚系について仮定を
行う反復プロセス(たとえば、Retinexプロセ
ス)を使用することによってマスクを生成する。他の実
施形態では、受信画像に非反復処理を行うことによって
このマスクを生成する。たとえば、いくつかの実施形態
では、受信画像にローパスフィルタリング演算を行って
このマスクを生成する。かかるアプローチの1つについ
ては、図2を参照して後述する。
【0013】図1に示すように、プロセス100がトー
ンマスク画像を生成した後、本プロセスは、トーンマス
クの値を用いて、受信画像におけるピクセルカラー値を
非線形演算により修正する(115)。マスク値および
クセルカラー値の非線形の組合せは、線形な加法演算ま
たは減法演算によりピクセル値およびマスク値を組み合
わせる従来技術とは異なる。マスクの非線形的な適用に
より、受信画像における高コントラストな境界の変わり
目が緩やかなものになる。
【0014】本発明の様々な実施形態では、ピクセルカ
ラー値をマスク値で修正するために様々な非線形演算を
使用する。ある実施形態では、回転され、スケーリング
された正弦波関数を使用し、また別の実施形態ではシグ
モイドの(sigmoidal)関数を使用する。さらに別の実
施形態では、マスク値をその指数の一部とし、かつピク
セル値をその底の一部として有する指数関数を使用す
る。かかる指数演算子の一例については、図3を参照し
て後述する。
【0015】図2は、ローパスフィルタリング演算によ
りトーンマスクを生成するプロセス200を示す。図に
示すように、本プロセスは、最初に、受信したカラー画
像をモノクロ画像(すなわち、白および黒のピクセル値
のみを含む画像、または、黒、白およびグレイ値のみを
含む画像)に変換する(205)。モノクロ画像を生成
する1つの方法は、1つのカラーコンポーネント(たと
えば、緑)のカラー値を使用し、残りのカラー値を破棄
することである。別のアプローチでは、スケーリング式
(たとえば、0.2R+0.7G+0.1B)を使用す
ることによってコンポーネントカラー値の非線形平均を
計算することである。
【0016】次に、本プロセスは、モノクロ画像を反転
させる(210)。換言すれば、本プロセスでは、各ピ
クセル値を最大デジタルカウントから減算することで、
白値は黒値となり、黒値は白値となり、大部分のグリー
ン値は新たなグレイ値を帯び、中間グレイ値はそのまま
である。次に、本プロセスは、反転モノクロ画像をデシ
メート(decimate)する(215)。いくつかの実施形態
では、当該画像におけるn番目(たとえば、20番目)
ごとの水平および垂直ピクセルを選択(すなわち、水平
および垂直方向のn番目のピクセルごとにピクセルカラ
ー値を選択)し、残りのピクセルを破棄することによっ
て当該画像をデシメートする。
【0017】次に、本プロセスは、デシメートされた反
転モノクロ画像における各ピクセルに平滑化演算を行う
(220)。ある実施形態においては、この平滑化演算
は、1/9カーネル(kernel)による3×3の畳み込み演
算である。このような畳み込み演算は本質的に、各ピク
セル値を、そのピクセルの周りにある3×3の近傍ピク
セルを平均することによって求められる平均値で置き換
える。
【0018】最後に、本プロセスは、平滑化され、デシ
メートされた反転モノクロ画像を、元の受信画像の解像
度まで再びスケールアップする(225)。いくつかの
実施形態において、本プロセスは、平滑化され、デシメ
ートされた反転画像の各ピクセル値を、n×n(たとえ
ば、20×20)のピクセル領域のピクセル値として選
択することによって、このスケーリング演算を行う。デ
シメーション、平滑化およびスケーリング演算の組合せ
により、プロセス200のローパスフィルタリング演算
を行うことができる。この結果、得られたトーンマスク
においては、ディテールが精細でない、不明瞭な大きな
領域のみが見られる。
【0019】画像の彩度(クロマ)を歪ませることを回
避するため、プロセス200により生成されたマスクは
モノクロである。このマスクは反転され、組合せ演算の
指数のベキ(累乗)が入力値と逆になるようにする。た
とえば、受信画像の明るい領域は、より暗いマスク値を
有する(すなわち、マスク値が高い)ので暗くなる。本
発明の他の実施形態では、トーンマスクを生成するのに
原画像を反転しない。代わりに、これらの実施形態で
は、マスクを受信画像と組み合わせるために用いられる
非線形演算子の反転が必要になる。
【0020】さらに、マスクは、マスクを生成するプロ
セスを高速化するためにデシメートされた後、平滑化さ
れる。しかしながら、本発明のいくつかの実施形態で
は、反転モノクロ画像をデシメートしないで、迅速な平
滑化が可能なサムネイル画像を生成する。代わりに、こ
れらの実施形態では、反転モノクロ画像に直接平滑化動
作を行う。
【0021】プロセス200により生成されたマスク
は、ローパスフィルタリングされる(すなわち、ぼかさ
れる(blurred))が、それは、これを行わなければ、
マスクが画像のコントラストを平坦にしてしまうためで
ある。換言すれば、マスク画像がぼかされていない場
合、マスクおよび受信画像の非線形の組合せは、画像コ
ントラストが低減した画像を生じさせる。一方、マスク
が過剰にぼかされた場合には、本発明のプロセスは単純
なガンマ補正になってしまい、局所的なトーン補正は効
果が低減する。
【0022】上述したように、本発明は、トーンマスク
の値を使用して、非線形演算により受信画像のピクセル
値を修正する。図3は、非線形の指数演算によりピクセ
ル値をその対応のマスク値と組み合わせるプロセス30
0を示す。
【0023】プロセス300は、最初に、受信したデジ
タル画像におけるピクセルについてコンポーネントカラ
ー値を取り出す(305)。次に、本プロセスは、選択
されたコンポーネントカラー値に対応するマスク値をト
ーンマスクから取り出す(310)。次に、本プロセス
は、指数関数を用いて、取り出されたコンポーネントカ
ラー値のそれぞれについて、修正されたコンポーネント
カラー値を計算する(315)。いくつかの実施形態に
おいて、本プロセスは、取り出されたコンポーネントカ
ラー値を指数関数の底の一部として使用し、取り出され
たマスク値をこの関数の指数の一部として使用する。
【0024】最後に、本プロセスは、受信画像のすべて
のピクセルカラー値を修正し終えたかどうかを判定する
(320)。修正していなければ、本プロセスは305
に戻り、次のピクセルについて次のコンポーネントカラ
ー値の集合を選択することによって、次のピクセルにつ
いて同様の動作を繰り返す。すべてのピクセルカラー値
を修正したと判断されたならば、プロセスは終了する。
【0025】本発明のいくつかの実施形態では、コンポ
ーネントカラー値をその対応マスク値によって修正する
指数関数として以下の数式(A)を使用する。
【0026】
【数1】
【0027】式中、Oは修正された出力カラー値を表
し、Iは入力コンポーネントカラー値を表し、Mはマス
ク値を表し、C1およびC2は定数を表す。本発明のい
くつかの実施形態では、各コンポーネントカラーのピク
セル値に数式(A)を用いる。たとえば、いくつかの実
施形態では、この数式を、受信画像における各ピクセル
の赤、緑および青値に使用し、すべての画像ピクセルに
ついて、修正された赤、緑および青値を求める。
【0028】数式(A)により実行される演算は、ピク
セル的なガンマ補正(pixel-wise gamma correction;
すなわち、ピクセルごとのガンマ補正)を実行すること
と本質的に同様である。このピクセル的なガンマ補正で
は、各ピクセルは、該ピクセルおよびその周りのピクセ
ルのトーン特性によって決定される、(その特定のマス
ク値に起因する)特定のガンマ値を有する。数式(A)
は、8ビット画像を前提とし、したがって255の値を
用いてデータをスケーリングする。しかしながら、これ
より大きいまたは小さいビット深さの画像を使用しても
よく、この場合、スケール値は最大デジタルカウントに
対応する。
【0029】数式(A)に挿入される各マスク値は、ト
ーン再現曲線を画定する。換言すれば、各マスク値につ
いて、修正された出力カラー値に入力コンポーネントカ
ラー値を数式(A)がどのようにマッピングするかを表
すのにトーン再現曲線を用いることができる。同様に、
すべてのマスク値について、修正された出力カラー値に
対する入力値のこの式のマッピングを示すためにトーン
再現曲線群を使用することができる。
【0030】図4は、定数C1が1に等しく、定数C2
が128に等しく、マスク値が0から255の範囲にあ
る場合のトーン再現曲線群を示す。図において、X軸は
入力ピクセル値であり、Y軸は出力値である。マスク値
は、8ビットカラー方式を使用する場合(すなわち、各
コンポーネントカラーが8ビットで表される場合)0か
ら255の範囲にある。この例において、128より大
きいマスク値では指数が1未満となり、128より小さ
いマスク値では指数が1より大きい。マスク値が128
に等しいと指数は1になり、入力データは変化しない。
【0031】定数C1およびC2は、トーン再現曲線群
の中心および幅を決定する。すなわち、定数C2は、曲
線群の中心を決定する。図4に示す例では、中心は、マ
スク値128を表す45度の線である。定数C1は、群
における曲線の広がりを決定する。したがって、定数C
2が変化すると曲線群が上下し、一方、定数C1が変化
すると曲線群が拡張収縮する。
【0032】本発明のいくつかのインタラクティブ(対
話式)な実施形態では、ユーザは、 (1)C1およびC2を修正し、および/または(2)
これらの定数の一方または両方を、画像特性に基づいて
自動的に修正することができる。これらの定数を修正す
ることで、べき関数の大きさを変えることができる。し
たがって、このような修正は、ユーザの好みまたは画像
特性に基づいてプロセス300によって実行される局所
的なトーン補正の程度を変化させる。たとえば、受信し
た原画像が非常に明るい場合、ユーザは、該画像の明る
いオブジェクト間により良好なコントラストを提供する
ために本プロセスが原画像をさらに暗くすることができ
るよう、トーン再現曲線群を上に移動させることができ
る。
【0033】数式(A)はルックアップテーブルとして
実現されることができ、この場合、受信したピクセル値
および生成されたマスク値は、ピクセル値とマスク値の
異なる組合せについて予め計算された修正ピクセル値の
位置を識別するインデックスとして、このテーブル内で
使用される。図5は、このアプローチの概念図を表す。
【0034】本発明は、画像処理パイプラインに設けら
れたいくつかの段階(ステージ)によって実施されるこ
とができる。図6は、このような段階をいくつか示して
いる。図に示すように、画像捕捉装置610(たとえ
ば、デジタルカメラまたはスキャナ)は、本発明の局所
的な色補正プロセス605を使用して、本装置によって
捕捉された画像の品質を高めることができる。不均一な
露光またはフラッシュ照明で捕捉された画像の色調を補
正するのに、本発明を使用することができる。また、本
発明を用いて、ダイナミックレンジの大きい画像の事後
処理を行うこともできる。
【0035】画像を捕捉した後、この捕捉装置は、図2
の高速および高効率のプロセス200を実行することに
よって画像のトーンマスクを迅速に生成することができ
る。捕捉装置は、次にルックアップテーブル(図5によ
って概念的に示されるもの等)を使用して、各コンポー
ネントカラーの修正されたピクセル値を迅速に識別する
ことができる。換言すれば、捕捉装置は、原ピクセル値
および生成されたマスク値をインデックスとしてルック
アップテーブルを参照し、修正されたピクセル値を取り
出すことができる。
【0036】図6に示すように、本発明の局所的な色補
正プロセス605は、コンピュータシステム620上で
動作するアプリケーション615の一部であってもよ
い。コンピュータシステムは、このアプリケーションを
走らせ、捕捉装置610によって捕捉された画像、また
は別のアプリケーション(たとえば、ウェブブラウザの
アプリケーション)によって供給された画像の色を補正
することができる。また、本プロセス605を、デバイ
スドライバ625(プリンタドライバ等)の一部として
実現して、表示装置630が画像を表示する前に画像上
でドライバが局所的なトーン補正を実行するようにする
ことができる。
【0037】図7は、本発明のいくつかの実施形態にお
いて使用されるコンピュータシステム620のブロック
図を表す。いくつかの実施形態において、コンピュータ
システム620は、画像捕捉装置610と分離されてい
る。しかしながら、本発明の他の実施形態では、このコ
ンピュータシステム620は、画像捕捉装置の一部であ
る。また、以下においてコンピュータシステム620を
説明するが、当業者ならば、他のコンピュータシステム
およびアーキテクチャを本発明とともに使用することが
できるということが理解されよう。
【0038】図7に示すように、コンピュータシステム
620は、バス705と、プロセッサ710と、システ
ムメモリ715と、読み取り専用メモリ720と、永久
記憶装置725と、入力装置730と、出力装置735
と、を備える。バス705は、コンピュータシステム6
20の多数の内部デバイスを通信可能に接続するすべて
のシステム、周辺機器およびチップセットバスを総称的
に表している。たとえば、バス705は、プロセッサ7
10を、読み取り専用メモリ720、システムメモリ7
15および永久記憶装置725に通信可能なように接続
している。これらの様々なメモリユニットから、プロセ
ッサ710は、実行すべき命令および処理すべきデータ
を取り出す。
【0039】読み取り専用メモリ(ROM)720は、
プロセッサ710およびコンピュータシステムの他のモ
ジュールにより必要とされる静的データおよび命令を格
納する。一方、永久記憶装置725は、読み書きのメモ
リ装置である。この装置は不揮発性メモリユニットであ
り、コンピュータ620がオフの場合であっても命令お
よびデータを格納する。本発明のいくつかの実施形態で
は、大容量記憶装置(たとえば、磁気または光ディス
ク、およびその対応するディスクドライブのような)を
永久記憶装置725として使用する。他の実施形態で
は、取り外し可能記憶装置(たとえば、フロッピー(登
録商標)ディスクまたはzip(商標)ディスク、およ
びその対応するディスクドライブ)を永久記憶装置とし
て使用する。
【0040】永久記憶装置725のように、システムメ
モリ715は、読み書きメモリ装置である。しかしなが
ら、記憶装置725と異なり、システムメモリは、ラン
ダムアクセスメモリのような揮発性の読み書きメモリで
ある。システムメモリは、プロセッサ710がランタイ
ム時に必要とする命令およびデータを記憶する。たとえ
ば、いくつかの実施形態において、システムメモリ71
5は、修正されたピクセルカラー値を記憶するルックア
ップテーブルを含む。また、いくつかの実施形態におい
て、本発明のプロセスを実行するのに必要な命令は、シ
ステムメモリ、永久記憶装置725、および/または読
み取り専用メモリ720に記憶される。
【0041】また、バス705は、入力装置730およ
び出力装置735にも接続する。入力装置により、ユー
ザは、情報を伝達し、コンピュータに対するコマンドを
選択することが可能となる。入力装置730には、英数
字キーボードおよびカーソルコントローラが含まれる。
出力装置735は、コンピュータによって生成された画
像を表示する。たとえば、これらの装置は、本発明の局
所的な補正技術が生成する修正済みデジタル画像を表示
する。出力装置には、プリンタが含まれ、また、CRT
ディスプレイまたは液晶ディスプレイ(LCD)のよう
な表示装置が含まれる。
【0042】最後に、図7に示すように、バス705
は、コンピュータ620をネットワークアダプタ(図示
せず)を介してネットワーク740に接続する。このよ
うに、コンピュータは、コンピュータのネットワーク
(たとえば、ローカルエリアネットワーク(LAN)、
広域ネットワーク(WAN)またはイントラネット)、
またはいくつかのネットワークのうちの1つのネットワ
ーク(たとえば、インターネット)の一部であることが
できる。
【0043】本発明の局所的な色補正技術は、多数の有
利な点を有する。たとえば、本発明の局所的な補正は、
入力データの単純なピクセル的な「ガンマ」補正を使用
することによって、影を明るくすると同時にハイライト
部分を暗くすることができる。また、いくつかの実施形
態では、原画像の、反転されローパスフィルタリングさ
れたモノクロ画像をトーンマスクとして使用することに
よって、グローバルなコントラスト変化とローカルなコ
ントラスト変化とのバランスをとり、彩度の歪みを低減
することができる。
【0044】さらに、本発明は、局所的なトーン補正を
計算して適用する簡単かつ高速の方法を提供する。その
局所的な色補正は、グローバル補正と比較して画像品質
に大幅な改良をもたらす。また、その補正は、Reti
nexまたは導関数アルゴリズムのような、他の局所的
なトーン補正方法により与えられる補正とも同程度のも
のである。しかしながら、該他の局所的なトーン補正方
法と異なり、本発明は、複雑な視覚モデルやマスクに依
存する必要がない。要するに、本発明は、局所的な色補
正を実行するための単純で計算上効率的な、かつパラメ
ータ化が容易なフレームワークを提供する。
【0045】本発明の局所的なトーン補正は、いくつか
のタイプの画像を改良する際に有効である。たとえば、
従来の写真技術では、画像のある領域は正しく露出され
るが別の領域は露出不足である、ということがあった。
フラッシュ撮影は、画像のある領域は露出過度であるが
別の領域は露出不足である別の例である。これらの状況
において、人間の視覚系に基づく複雑な局所的補正技術
は不適切なことがある。さらに、中には、ダイナミック
レンジの広い画像シーンもある。本発明の単純かつ高速
な局所補正プロセスは、これらの状況において画像品質
を迅速に向上させる理想的な解決策を提供する。
【0046】最後に、本発明の局所的なトーン補正は、
従来のピクセルベース処理の相補技術である。たとえ
ば、本発明を用いて画像の色を補正すると、画像は、従
来のピクセルベースのパイプラインを用いて所与のプリ
ンタ上で再現されることができる。イメージングパイプ
ラインの一部に対する近傍画像処理技術の使用は、以降
のピクセルベースの画像処理を排除しない。このこと
は、イメージングパイプラインの全体的な品質および速
度を最適化するのに適切な場合には、ピクセルおよび近
傍のイメージング処理を使用し得ることを示唆してい
る。
【0047】本発明の一実施形態は、アドビ社のPho
toShopアプリケーションを使用することによって
実現される。より具体的には、この実施形態において、
このアプリケーションを用いて、(1)原画像を入力
し、(2)原画像を第2のレイヤにコピーし、(3)半
径が約15のガウスぼかしフィルタ(Gaussian blur fi
lter)を用いて画像をぼかし、(4)このぼかした画像
を反転し、(5)色相(hue)/飽和度(saturation)調
節によりぼかされたネガを非飽和にし、(6)ソフトラ
イトレイヤ演算子(Soft Light layer operation)を用
いて原画像および生成画像を組み合わせ、最終的な画像
を作成する、ことができる。PhotoShopのぼか
しフィルタ(blur filter)の半径による実験は、全体
的な画像コントラストがどのように半径の関数となるか
を示す。特に、半径が大きいほどコントラスト全体が良
好となるが、半径が大きすぎると局所的なトーン補正の
効果は低減される。
【0048】多数の具体的なディテールを参照して本発
明を説明してきたが、当業者であれば、本発明の精神か
ら逸脱せずに他の具体的な形態において本発明を具現化
することができる、ということが理解されよう。たとえ
ば、上述した実施形態では、すべてのコンポーネントカ
ラーについてピクセル値を修正するのに1つのモノクロ
マスクが使用される。当業者であれば、他の実施形態で
は、各コンポーネントカラーに別々のマスクを使用する
ことができるということが理解されよう。これらの実施
形態において、それぞれのマスクは、それぞれそのコン
ポーネントカラー値に合わせて最適化されることができ
る。したがって、当業者であれば、本発明は上述した例
示の詳細に限定されず、特許請求の範囲によって定義さ
れるべきであることが理解されよう。
【0049】本発明は、以下の実施態様を含む。 (1)局所的な色補正を実行する方法であって、(a)
複数のピクセルを有するn個の入力画像を受信するステ
ップ(105)であって、前記入力画像の各ピクセル
は、原ピクセルカラー値の集合で表されるステップと、
(b)それぞれがピクセルマスク値の集合により表され
る複数のピクセルを有するトーンマスク画像を前記入力
画像から生成するステップ(110)であって、原ピク
セルカラー値の各集合は、対応するピクセルマスク値の
集合を有するステップと、(c)原ピクセルカラー値の
各集合について、修正されたピクセルカラー値の集合を
求めるステップ(115)であって、修正されたピクセ
ルカラー値の各集合は、原ピクセルカラー値の集合と、
その対応するピクセルマスク値の集合との非線形の組み
合わせに等しいステップと、を含む方法。
【0050】(2)修正されたピクセルカラー値の集合
を求める前記ステップは、原ピクセルカラー値の集合お
よびその対応するピクセルマスク値の集合をインデック
スとしてルックアップテーブルを参照し、前記修正され
たピクセルカラー値の集合を取り出すステップを含む、
上記(1)に記載の方法。 (3)修正されたピクセルカラー値の集合を求める前記
ステップは、非線形演算を用いて、原ピクセルカラー値
の集合とその対応するピクセルマスク値の集合を組み合
わせるステップ(115)を含む、上記(1)に記載の
方法。
【0051】(4)前記非線形演算は減法または加法演
算ではない上記(3)に記載の方法。 (5)前記非線形演算は底および指数を有する指数演算
であって、該指数演算は、前記原ピクセルカラー値の集
合をその底の一部とし、前記対応するピクセルマスク値
の集合をその指数の一部として使用する、上記(3)に
記載の方法。 (6)前記マスク画像を生成する前記ステップは、非反
復プロセスを使用するステップを含む上記(1)に記載
の方法。 (7)前記マスク画像を生成する前記ステップは、前記
入力画像に対してローパスフィルタリング演算を実行す
るステップ(215、220、225)を含む、上記
(1)に記載の方法。 (8)前記マスク画像を生成する前記ステップは、前記
入力画像を反転するステップ(210)を含む、上記
(7)に記載の方法。 (9)前記マスク画像を生成する前記ステップは、前記
入力画像をモノクロ画像に変換するステップ(205)
を含む、上記(8)に記載の方法。 (10)原ピクセルカラー値のそれぞれの集合は、コン
ポーネントカラー値の集合である、上記(1)に記載の
方法。
【0052】(11)原ピクセルカラー値のそれぞれの
集合は、グレースケールのマスク値である、上記(1)
に記載の方法。
【0053】
【発明の効果】局所的な色補正を実行して、簡単かつ高
速であり、かつ高品質な画像を生成することができる。
【図面の簡単な説明】
【図1】本発明のいくつかの実施形態に使用される局所
的な色補正プロセスを示す図。
【図2】ローパスフィルタリング演算を介してトーンマ
スクを生成するプロセスを示す図。
【図3】ピクセル値と、トーンマスクからのその対応す
るマスク値を、非線形の指数演算により組み合わせるプ
ロセスを示す図。
【図4】特定のマスク値に従ってピクセルカラー値がど
のように出力カラー値にマッピングされるかを表すいく
つかの曲線を示す図。
【図5】修正したピクセルカラー値を格納する二次元の
ルックアップテーブルの概念図を表す図。
【図6】本発明を取り入れたコンピュータおよび画像捕
捉装置の位置づけを示す図。
【図7】本発明のいくつかの実施形態を実現するのに使
用されるコンピュータシステムを示す図。
【符号の説明】
605 局所的な色補正プロセス 610 画像捕捉装置 620 コンピュータシステム 625 デバイスドライバ 630 表示装置
───────────────────────────────────────────────────── フロントページの続き (72)発明者 アーウィン・ソヴェル アメリカ合衆国94025カリフォルニア州メ ンロ・パーク、アーバー・ロード 228

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】局所的な色補正を実行する方法であって、 (a)それぞれが原ピクセルカラー値の集合で表される
    複数のピクセルを有する入力画像を受信するステップ
    と、 (b)それぞれがピクセルマスク値の集合により表され
    る複数のピクセルを有するトーンマスク画像を、前記入
    力画像から生成するステップと、 (c)前記原ピクセルカラー値のそれぞれの集合につい
    て、修正されたピクセルカラー値の集合を求めるステッ
    プと、を含み、 前記原ピクセルカラー値のそれぞれの集合は、対応する
    ピクセルマスク値の集合を有しており、 前記修正されたピクセルカラー値のそれぞれの集合は、
    前記原ピクセルカラー値の集合と、該現ピクセルカラー
    値の集合の対応するピクセルマスク値の集合との非線形
    の組み合わせに等しい、局所的な色補正を実行する方
    法。
JP2001074054A 2000-03-31 2001-03-15 局所的な色補正を実行する方法および装置 Expired - Fee Related JP4443064B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/540162 2000-03-31
US09/540,162 US6813041B1 (en) 2000-03-31 2000-03-31 Method and apparatus for performing local color correction

Publications (3)

Publication Number Publication Date
JP2001313844A true JP2001313844A (ja) 2001-11-09
JP2001313844A5 JP2001313844A5 (ja) 2008-04-17
JP4443064B2 JP4443064B2 (ja) 2010-03-31

Family

ID=24154278

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001074054A Expired - Fee Related JP4443064B2 (ja) 2000-03-31 2001-03-15 局所的な色補正を実行する方法および装置

Country Status (4)

Country Link
US (1) US6813041B1 (ja)
EP (1) EP1139284B1 (ja)
JP (1) JP4443064B2 (ja)
DE (1) DE60127016T2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005059833A1 (ja) * 2003-12-17 2005-06-30 Matsushita Electric Industrial Co., Ltd. 輝度補正装置および輝度補正方法
US7298917B2 (en) 2002-11-11 2007-11-20 Minolta Co., Ltd. Image processing program product and device for executing Retinex processing
US7949201B2 (en) 2004-09-01 2011-05-24 Nec Corporation Image correction processing system and image correction processing method
US8218027B2 (en) 2009-04-09 2012-07-10 Hand Held Products, Inc. Imaging terminal having color correction
US9183425B2 (en) 2009-04-09 2015-11-10 Hand Held Products, Inc. Image sensor pixel array having output response curve including logarithmic pattern for image sensor based terminal

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4574057B2 (ja) * 2000-05-08 2010-11-04 キヤノン株式会社 表示装置
US7221381B2 (en) * 2001-05-09 2007-05-22 Clairvoyante, Inc Methods and systems for sub-pixel rendering with gamma adjustment
EP2280376B1 (en) 2002-02-12 2015-10-28 Panasonic Intellectual Property Corporation of America Image processing apparatus and image processing method
EP1398733A1 (en) * 2002-09-12 2004-03-17 GRETAG IMAGING Trading AG Texture-based colour correction
US7251363B2 (en) 2003-07-29 2007-07-31 Ventana Medical Systems, Inc. Method and system for creating an image mask
KR20060120643A (ko) * 2003-09-11 2006-11-27 마쯔시다덴기산교 가부시키가이샤 화상처리 장치, 화상처리 방법 및 화상처리 프로그램
KR101089426B1 (ko) * 2003-09-11 2011-12-07 파나소닉 주식회사 시각 처리 장치, 시각 처리 방법, 시각 처리 프로그램 및 반도체 장치
KR101027825B1 (ko) * 2003-09-11 2011-04-07 파나소닉 주식회사 시각 처리 장치, 시각 처리 방법, 시각 처리 프로그램 및반도체 장치
CN101686306A (zh) * 2003-09-11 2010-03-31 松下电器产业株式会社 可视处理装置、基于它的装置以及可视处理方法
US7760943B2 (en) * 2003-10-02 2010-07-20 Hewlett-Packard Development Company, L.P. Method to speed-up Retinex-type algorithms
US8014034B2 (en) 2005-04-13 2011-09-06 Acd Systems International Inc. Image contrast enhancement
WO2006137361A1 (ja) * 2005-06-20 2006-12-28 Nikon Corporation 画像処理装置、画像処理方法、画像処理プログラム製品、および撮像装置
US8031961B2 (en) * 2007-05-29 2011-10-04 Hewlett-Packard Development Company, L.P. Face and skin sensitive image enhancement
US8238687B1 (en) 2008-01-09 2012-08-07 Helwett-Packard Development Company, L.P. Local contrast enhancement of images
US20100100813A1 (en) * 2008-10-20 2010-04-22 Kabushiki Kaisha Toshiba Document processing apparatus and document processing method
US20110097011A1 (en) * 2009-10-27 2011-04-28 Suk Hwan Lim Multi-resolution image editing
TW201503052A (zh) 2013-07-04 2015-01-16 Novatek Microelectronics Corp 影像處理裝置及應用其之影像處理方法
US9740046B2 (en) * 2013-11-12 2017-08-22 Nvidia Corporation Method and apparatus to provide a lower power user interface on an LCD panel through localized backlight control
EP3503019A1 (en) 2017-12-21 2019-06-26 Thomson Licensing Improved inverse tone mapping method and corresponding device

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3650773T2 (de) * 1985-11-18 2002-12-05 Canon K.K., Tokio/Tokyo Bilderzeugungsgerät
JPH02161872A (ja) * 1988-12-14 1990-06-21 Fuji Xerox Co Ltd 画像処理装置の縮拡処理方式
US5282036A (en) 1992-01-06 1994-01-25 Hewlett-Packard Company High resolution gamma correction method and apparatus for pixel intensity values in a computer graphics system using minimal memory
JPH08241407A (ja) * 1995-01-31 1996-09-17 Internatl Business Mach Corp <Ibm> ディジタル・カラー・イメージの空間フィルタ処理システム
US5926532A (en) 1995-10-26 1999-07-20 Peck/Pellssier Integrated wireless communication system
JPH09247473A (ja) 1996-03-07 1997-09-19 Minolta Co Ltd 画像形成装置
US6275304B1 (en) * 1998-12-22 2001-08-14 Xerox Corporation Automated enhancement of print quality based on feature size, shape, orientation, and color
US6822762B2 (en) * 2000-03-31 2004-11-23 Hewlett-Packard Development Company, L.P. Local color correction

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7298917B2 (en) 2002-11-11 2007-11-20 Minolta Co., Ltd. Image processing program product and device for executing Retinex processing
WO2005059833A1 (ja) * 2003-12-17 2005-06-30 Matsushita Electric Industrial Co., Ltd. 輝度補正装置および輝度補正方法
US7949201B2 (en) 2004-09-01 2011-05-24 Nec Corporation Image correction processing system and image correction processing method
US8218027B2 (en) 2009-04-09 2012-07-10 Hand Held Products, Inc. Imaging terminal having color correction
US9183425B2 (en) 2009-04-09 2015-11-10 Hand Held Products, Inc. Image sensor pixel array having output response curve including logarithmic pattern for image sensor based terminal
US9609241B2 (en) 2009-04-09 2017-03-28 Hand Held Products, Inc. Image sensor pixel array having output response curve including logarithmic pattern for image sensor based terminal

Also Published As

Publication number Publication date
DE60127016T2 (de) 2008-02-14
EP1139284A3 (en) 2004-01-02
US6813041B1 (en) 2004-11-02
EP1139284B1 (en) 2007-03-07
DE60127016D1 (de) 2007-04-19
EP1139284A2 (en) 2001-10-04
JP4443064B2 (ja) 2010-03-31

Similar Documents

Publication Publication Date Title
JP4443064B2 (ja) 局所的な色補正を実行する方法および装置
US6822762B2 (en) Local color correction
JP4085058B2 (ja) ディジタル画像の細部の視覚的認識を高める汎用画像強調アルゴリズム
TW538382B (en) Dynamic image correction and imaging systems
Moroney Local color correction using non-linear masking
RU2400815C2 (ru) Способ повышения качества цифрового фотоизображения
US7580566B2 (en) Image processing device, image processing method, storage medium, and program
JP5300595B2 (ja) 画像処理装置及び方法、及びコンピュータプログラム
US20030189579A1 (en) Adaptive enlarging and/or sharpening of a digital image
JP2000115539A (ja) 画像処理方法、画像処理装置及び記録媒体
JP2002262094A (ja) 画像処理方法及び画像処理装置
KR20070046010A (ko) 디지털 이미지 개선방법
JP2001229377A (ja) 適応帰納的フィルタでディジタル画像のコントラストを調整する方法
WO2009141340A2 (en) Image processing to enhance image sharpness
JP2004030670A (ja) デジタル画像の色調特徴の強調方法
JP2002044473A (ja) 画像処理方法、画像処理装置および画像処理方法を実行するプログラムを記録した記録媒体
JP2003134352A (ja) 画像処理方法及び装置並びにプログラム
JP2002314817A (ja) マスクを用いて写真画像の鮮鋭度を局部的に変更するための方法、装置、プログラムおよび記録媒体、並びに画像再生装置
JP2004221644A (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP4721285B2 (ja) ピクセルごとに差分的に準規則的にデジタルイメージを修正するための方法およびシステム
US20210368088A1 (en) Systems and methods of image enhancement
CN110009574A (zh) 一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法
JP2003264699A (ja) レンダリングデジタル画像の色、輝度及び階調スケールの調整方法
US7212674B1 (en) Method, apparatus and recording medium for face extraction
JP4345366B2 (ja) 画像処理プログラムおよび画像処理装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080303

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080303

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090616

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090914

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20090914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091215

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100112

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130122

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees