JP4456819B2 - デジタル画像鮮鋭化装置 - Google Patents
デジタル画像鮮鋭化装置 Download PDFInfo
- Publication number
- JP4456819B2 JP4456819B2 JP2003050148A JP2003050148A JP4456819B2 JP 4456819 B2 JP4456819 B2 JP 4456819B2 JP 2003050148 A JP2003050148 A JP 2003050148A JP 2003050148 A JP2003050148 A JP 2003050148A JP 4456819 B2 JP4456819 B2 JP 4456819B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- gain
- digital image
- pixel
- noise
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003707 image sharpening Methods 0.000 title claims description 25
- 238000000034 method Methods 0.000 claims abstract description 28
- 238000001514 detection method Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 7
- 239000000463 material Substances 0.000 abstract description 4
- 230000006870 function Effects 0.000 description 7
- 239000003607 modifier Substances 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 5
- 230000000875 corresponding effect Effects 0.000 description 4
- 230000000873 masking effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 244000025254 Cannabis sativa Species 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012886 linear function Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 239000013077 target material Substances 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
- G06T5/75—Unsharp masking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
【発明の属する技術分野】
本発明は、概略的にはデジタル画像の処理に関する分野、より詳しくは画像を鮮鋭化する方法に関する。
【0002】
【従来の技術】
デジタル画像の処理においては、一般的に、画像の鮮鋭(sharp)化により、鮮鋭化アルゴリズムを用いて微細な詳細部が改善される。通常、鮮鋭化は畳み込みプロセス(たとえば、A. K. Jain, Fundamentals of Digital Image Processing, Prentice-Hall: 1989, pp.249-251参照)によって行われる。アンシャープマスキングプロセスは、畳み込みによる鮮鋭化プロセスの一例である。たとえば、アンシャープマスキングを使った画像の鮮鋭化は、次の等式で説明することができる。
【0003】
s(x,y)=i(x,y)**b(x,y)+βf(i(x,y)-i(x,y)**b(x,y)) (0)
ここで、
s(x,y)=鮮鋭さが改善された出力画像
i(x,y)=原入力画像
b(x,y)=ローパスフィルタ
β=アンシャープマスクのスケールファクタ
f()=フリンジ関数
**は、二次元畳み込みを示す。
(x,y)は、画像のx番目の行とy番目の列を示す。
【0004】
一般に、不鮮明画像は、ローパスフィルタによる画像の畳み込みによって生成される(つまり、不鮮明画像はi(x,y)**b(x,y)で示される)。次に、原画像から不鮮明画像を引くことにより、ハイパス、つまりフリンジデータが生成される(すなわち、ハイパスデータはi(x,y)−i(x,y)**b(x,y)で得られる)。次にハイパスデータは、スケールファクタβかフリンジ関数f()のいずれかまたはその両方によって修正される。最後に、修正されたハイパスデータに、原画像または不鮮明画像のいずれかを加算することにより、鮮鋭化された画像が得られる。
【0005】
同様の鮮鋭化効果は、デジタル信号処理の分野ではよく知られる周波数ドメイン(たとえば、FFTドメイン)における画像修正によって実現できる。
【0006】
画像の異なる領域または画素を、異なる量だけ鮮鋭化することが好ましい場合がある。たとえば、人の顔を表す画素は、ビルを表す画素ほど鮮鋭化しないほうが好ましいとされている。たとえば、1997年10月28日発行のゴーシュ他(Gouch et al.)の米国特許5,682,443号において、画素の色(と周辺近傍の色)に基づくアンシャープマスクのゲインの修正が開示されている。この方式を用いた場合の問題は、画像鮮鋭化に伴う不要なノイズの増大である。
【0007】
また、1996年2月18日発行のマームーディ他(Mahmoodi et al.)の米国特許第4,571,635号は、近傍中の画像画素の標準偏差に応じて、デジタル画像の高周波数情報をスケーリングするのに使用される強調係数βを得る方法を教示している。さらに、1992年1月14日発行のクウォン他(Kwon et al.)の米国特許第5,081,692号は、強調係数βが中央加重分散計算に基づいていると教示している。1988年8月2日発行の米国特許第4,761,819号において、デニソン他(Denison et al.)はアンシャープマスクのゲインが局地分散計算とノイズ統計の両方に依存する方法について述べている。
【0008】
上記の方法はたしかに、ノイズの増大をなるべく抑えながら画像を鮮鋭化するが、ゴーシュが述べているように、色に基づいて鮮鋭化の適用量が変化することはない。画像のノイズ特性と非ノイズ特性(たとえば色)の両方に基づくリニア鮮鋭化フィルタのゲインパラメータβの修正について、どのように取り組むかは不明である。一般に、ノイズ情報を利用した適応型の鮮鋭化方法の場合、ノイズの大きい画像領域には他より小さい鮮鋭化が適用される。しかし、これらの画像領域が受ける鮮鋭化は、他の要因によってすでに非常に小さい場合がある。
【0009】
2002年1月23日に公開された欧州特許出願第1174824A2号において、ギンデル(Gindele)とギャラー(Gallagher)は、画素の色に応じてノイズ軽減の量を変えるノイズ軽減フィルタについて開示している。このフィルタにおいて、畳み込みの係数は各画素について動的に得られ、画素と近隣画素(畳み込み操作に関わるもの)の数値に応じて変わる。畳み込み係数は各画素について動的に得られるため、フィルタ係数は局所の近隣における画素の数値によって異なる。このようなフィルタは画像鮮鋭化には使用されないのが普通である。
【0010】
【特許文献1】
米国特許5,682,443号公報
【特許文献2】
米国特許4,571,635号公報
【特許文献3】
米国特許5,081,692号公報
【特許文献4】
米国特許4,761,819号公報
【特許文献5】
欧州特許出願第1174824A2号公報
【0011】
【発明が解決しようとする課題】
そこで、画像のマテリアルコンテンツ(material content)と画像におけるノイズ量の両方に基づいて鮮鋭化の適用量を調整する、改良された画像鮮鋭化方法に対するニーズがある。
【0012】
【課題を解決するための手段】
本発明は、複数の画像画素を有するデジタル画像を、そのデジタル画像のノイズコンテンツに応じて鮮鋭化させるデジタル画像鮮鋭化装置であって、デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求める鮮鋭化部と、データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、データに含まれる変調成分がノイズによるものである可能性を示すノイズビリーフ値を、前記デジタル画像データの信号対ノイズ比に基づいて、前記画素データに対して求めるノイズビリーフ値生成部と、を備え、前記鮮鋭化部は、求められたゲインが所定の範囲を超え、前記ノイズビリーフ値が、それに対応する画素のノイズが大きいとの高ビリーフであることを示す領域に対しては、当該ゲインを当該ノイズビリーフ値に基づいて制限した値を調整後ゲインとして求め、その他の領域に対しては、当該ゲインを調整後ゲインとして求め、求められた調整後ゲインに基づいて前記鮮鋭化画像データを求めることを特徴とする。また、本発明は、複数の画像画素を有するデジタル画像を描画対象物に応じて鮮鋭化するデジタル画像鮮鋭化装置であって、デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求める鮮鋭化部と、データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、を備え、前記ゲイン生成部は、それぞれが1つの描画対象物に対応する複数の前記対象物検出部であって、互いに異なる描画対象物に応付けられた複数の前記対象物検出部によって求められた各対象物ビリーフ値を制御し、制御された各対象物ビリーフ値に基づいて、前記デジタル画像データに含まれる画素データに対するゲインを求め、前記鮮鋭化部は、求められたゲインに基づいて前記鮮鋭化画像データを求めることを特徴とする。また、本発明は、複数の画像画素を有するデジタル画像を描画対象物に応じて鮮鋭化するデジタル画像鮮鋭化装置であって、デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求め鮮鋭化部と、データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、を備え、前記ゲイン生成部は、それぞれが1つの描画対象物に対応する複数の前記対象物検出部によって求められた各対象物ビリーフ値に基づいて、前記デジタル画像データに含まれる画素データに対するゲインを求め、前記鮮鋭化部は、求められたゲインに基づいて前記鮮鋭化画像データを求め、前記デジタル画像鮮鋭化装置は、さらに、データに含まれる変調成分がノイズによるものである可能性を示すノイズビリーフ値を、前記デジタル画像データの信号対ノイズ比に基づいて、前記画素データに対して求めるノイズビリーフ値生成部を備え、前記鮮鋭化部は、求められたゲインが所定の範囲を超え、前記ノイズビリーフ値が、それに対応する画素のノイズが大きいとの高ビリーフであることを示す領域に対しては、当該ゲインを当該ノイズビリーフ値に基づいて制限した値を調整後ゲインとして求め、その他の領域に対しては、当該ゲインを調整後ゲインとして求め、求められた調整後ゲインに基づいて前記鮮鋭化画像データを求めることを特徴とする。
【0013】
また、本発明に係るデジタル画像鮮鋭化装置においては、前記デジタル画像データからサンプル画素データを摘出する画像サンプラを備え、前記対象物検出部は、各サンプル画素データに対して前記対象物ビリーフ値を求め、前記ゲイン生成部は、各サンプル画素データに対して求められた前記対象物ビリーフ値に基づいて、各サンプル画素に対するゲインを求め、前記各サンプル画素間の画素に対するゲインを、前記各サンプル画素に対して求められたゲインに基づく補間処理によって求めることが好適である。
【0014】
【発明の実施の形態】
以下の説明において、本発明の実施形態はソフトウェアプログラムとして実現された方法として述べられている。当業者は、このようなソフトウェアと同等物をハードウェアで構成することができると容易に認識できる。画像改良アルゴリズムと方法は周知であるため、本願の説明は特に、本発明による方法とシステムの一部を構成する、あるいはより直接的にこれと協働する要素について行うものとする。本願において特に示されていない、あるいは説明されていないその他の要素および、画像信号生成および他の処理のためのハードウェアおよび/またはソフトウェアは、当業界で知られている材料、コンポーネント、要素から選択することができる。以下の資料において本発明に従って示され、説明されているシステムと方法について、本発明の実行にとって有益な、本願で具体的に示されていない、説明または提案されていないソフトウェアは従来のものであり、当業界における一般的技術である。
【0015】
さらに、ここで使用されているように、コンピュータプログラムはコンピュータが読み出すことのできる記憶媒体に記憶させることができる。この記憶媒体には、たとえば磁気ディスク(ハードドライブやフレキシブルディスク)または磁気テープ等の磁気記憶媒体、光ディスク、光テープまたは機械判読可能なバーコード等の光学記憶媒体、ランダムアクセスメモリ(RAM)またはリードオンリーメモリ(ROM)等のソリッドステート電子記憶装置あるいはその他、コンピュータプログラムを記憶するのに使用される物理的装置または媒体がある。
【0016】
デジタル画像は一般に、ひとつまたは複数の二次元アレイを含む。たとえば、カラーデジタル画像には、それぞれ赤、緑、青の画素値を示す3つのアレイが含まれ、単色画像には光の強度に対応する画素値の1つのアレイが含まれる。呼び方の問題については、デジタル画像のx番目の行とy番目の列を指す座標(x,y)に位置する画像の画素の数値は、本願において、位置(x,y)におけるそれぞれ赤、緑、青のデジタル画像チャネルの数値を指す3つの値のセット[r(x,y),g(x,y),b(x,y)]である。この点において、デジタル画像は特定の数のデジタル画像チャネルを有するものと考えることができる。赤、緑、青の二次元アレイを含むデジタル画像の場合、この画像は3つのチャネル、つまり赤、緑、青の分光チャネルを有する。
【0017】
一般に、本発明は、(画像の、ある局所領域に加えられる)鮮鋭化の適用量がその局所領域に存在するノイズの量とその局所領域における意味(semantic)情報に関する鮮鋭化目標レベルの両方に依存する画像鮮鋭化方法を説明する。ここで用いる意味(semantic)という用語は、観察者がある領域に割り当てるであろう意味を指す。たとえば、領域の意味コンテンツは、人間の顔、ビル、雲、空といったオブジェクトである。
【0018】
図1において、x0個の行とy0個の列を有する画像i(x,y)がノイズマップ発生器4に入力され、ノイズ画素ビリーフマップN(x,y)が生成される。好ましくは、画像i(x,y)は高解像度で、たとえば、一例となる高解像度の画像はx0=1024行、y0=1536列の画素を有する。ノイズ画素ビリーフマップとは、ある画素に関して発生する強度(intensity)の偏差が画像のコンテンツではなく、画像成形システムにおけるノイズによるものであるビリーフ(確信の度合)を示すマップである。
【0019】
画像成形システムのノイズは強度によって異なる。したがって、所与の強度レベルにおけるノイズによる変調(modulation)は、予想可能である。観察された変調が予想したノイズ変調より大きい場合、その変調は画像のコンテンツによるものであるというビリーフが強い。観察された変調が予想したノイズより小さい、あるいはこれと同等であると、その変調はノイズによるものであるというビリーフが強い。好ましくは、ビリーフは0から画素がノイズの大きい画素である100%までの確率として表す。均一な画像領域(たとえば晴れた青空)の場合、通常、その画素はノイズが大きい画素であるというビリーフが高く、混雑した領域(たとえば髪や草)に属する画素の場合、その画素はノイズが大きい画素であるというビリーフは低くなる、あるいは0となる。
【0020】
ノイズ画素ビリーフマップN(x,y)は、好ましくは、画像i(x,y)と同じサイズである。また、ノイズ画素ビリーフマップのビリーフ値は好ましくは、局地での信号分散(画像画素の数値に対して測定)と予想されるノイズ量の両方を考慮して生成される。たとえば、前述のデニソン他(Dennison et al.)による米国特許第4,761,819号は、局地での分散V(i,j)と予想されるノイズレベルV(noise)の両方に依存する信号G(i,j)の生成を開示している。このように、ノイズ画素ビリーフマップは、信号対ノイズ比が低い確率が高い(つまり、ノイズの大きい画素である確率が高い)画素または領域を示す。G(i,j)等の信号は、画像処理技術において知られているルックアップテーブル(LUT)または一次関数を使って、ノイズ画素ビリーフマップに容易に変換できる。たとえば、ノイズ画素ビリーフマップの数値は、G(i,j)>t1の場合の0、G(i.j)<t2の場合の100で、G(i,j)がt1とt2との間にある時、0と100の中間の数値となる。たとえば、t1=5、t2=1/2である。あるいは、2001年6月27日に公開されたギャラー他(Gallagher Et al.)による欧州特許出願第1111906A2号は、予想されるノイズの数値を生成する方法は、画素の強度に基づき、これをルックアップテーブルとともに使用してノイズ画素ビリーフマップを作ることができると書いている。
【0021】
ノイズマップ発生器4によってノイズ画素ビリーフマップを生成する好ましい方法を図2に示す。画像i(x,y)は画像サブサンプラ22に送られ、これがその画像の低解像度バージョンi(m,n)を発生する。低解像度バージョンi(m,n)はm0個の行とn0個の列の画素を含み、ここで、m0=x0/2R,n0=y0/2R、Rはサブサンプルの数を必要な2の係数によって示す画像のサブサンプリング係数である。通常、低解像度画像i(m,n)は、エーリアシングの影響を低減するために、当業界でよく知られているように、フィルタリングと係数Rによるサブサンプリングを組み合わせることによって生成される。低解像度画像からノイズ画素ビリーフマップを生成することにより、計算しなければならない画素が少なくなるため、(画像i(x,y)からノイズ画素ビリーフマップを生成する場合と比較し)時間が大幅に削減される。好ましくは、R=2であり、これによって画像i(x,y)について同じ操作を行うのに必要な処理時間の約94%が削減される。
【0022】
低解像度画像i(m,n)は、各位置において鮮鋭化すべき画像チャネルの局地の信号対ノイズ比SNR(m,n)を計算するためのSNR計算機24に入力される。局地における信号対ノイズ比は、画像i(x,y)の色チャネルの数に関係なく、各位置(m,n)でひとつの数値として表される。以下に詳しく説明するが、好ましい鮮鋭化は、画像のひとつのチャネル、輝度チャネルl(x,y)に適用される。輝度チャネルは、画像のすべての色チャネルを線形にまとめることによって作られる。たとえば、
【数1】
ここで、
Cは画像チャネル数
cnは画像i(x,y)のn番目の色チャネル
anはn番目の色チャネルに関する係数加重ファクタ(coefficient weighting factors)である。すべての係数加重ファクタの合計は、好ましくは1.0である。以下、赤、緑、青チャネルを有する画像i(x,y)の場合、赤、緑、青の係数加重ファクタの好ましい数値はすべて等しく1/3である。
【0023】
各画素位置における局地の信号対ノイズ比を計算するために、SNR計算機24は各画素位置における予想されるノイズの大きさを判断しなければならない。先行技術による方法において、予想されるノイズの大きさは鮮鋭化すべきチャネル、たとえば輝度チャネルからのみ計算される。しかし、各種のチャネルからの何種類もの画素数値の組み合わせにより、等式1を通じて同一の輝度チャネルが形成される場合があることを認識しなければならない。このため、画像の領域が同じ平均輝度値をもちながら、予想されるノイズ値が大きく異なるということが往々にしてある。
【0024】
SNR計算機24は、以下の等式で輝度チャネルの局地SNRを判断する。
【0025】
【数2】
ここで、
σn(m,n)は、好ましくは位置(m,n)に中心を置く5x5のウィンドウについて測定された輝度チャネルにおける画素の局地標準偏差である。
【0026】
σk(i(m,n))は、i(m,n)の各色チャネルにおいて予想されるノイズのレベルに基づき、鮮鋭化される画像チャネル(好ましくはi(m,n)の輝度チャネル)での画素のノイズの予想される標準偏差である。
【0027】
sign[q]は、q<0であると−1,その他であると1である。
【0028】
σk(i(m,n))の数値は、輝度チャネルを作るのに使用される係数加重ファクタ、ノイズテーブル、サブサンプリング係数Rおよびサブサンプルされた画像i(m,n)の画素数値等のいくつかの項目の関数である。
【0029】
σk(i(m,n))の数値は、次のように表される。
【数3】
ここで、
Rは画像サブサンプラ22によって使用されるサブサンプリングレベルの数である。好ましくは、R=2である。
【0030】
Rfは、ノイズの標準偏差を各解像度レベルで低減する比率である。相関性のないノイズの場合、Rf=2である。実際のフィルムデータの場合、Rf=1.7は小さな数値のR(R<=3)について大まかに修正される。
【0031】
σcn[q]は、画像色チャネルcnに関する強度qにおけるノイズの標準偏差である。ノイズテーブルは、たとえば2000年12月27日に公開されたギャラー他(Gallagher et al.)による欧州特許出願第1063611A2号において述べられているように、この関係を表している。図3は、カラー写真のネガを走査することによって作られたデジタル画像に関する赤、緑、青の色チャネルを有する画像のノイズテーブルをプロットしたものである。ノイズテーブルは、画像i(x,y)の解像度における各色チャネルの強度と予想されるノイズの大きさとの関係を示すことに注意する。等式(3)の項1/Rf Rは基本的に、フル解像度テーブルを画像i(m,n)の解像度に調整するための補正係数である。
【0032】
SNR計算機24は、i(m,n)の各画素位置における信号対ノイズ比を示すマップSNR(m,n)を出力する。このマップは、ノイズ画素分類器26に入力され、信号対ノイズ比マップはノイズ画素ビリーフマップに変換される。これは、画像処理業界において周知のように、ルックアップテーブル(LUT)または一次関数を使って行われる。たとえば、ノイズ画素ビリーフマップの数値は、図4に示すように、SNR(m,n)>t3のときは0、SNR(m,n)<t4のときは100、G(i,j)がt3とt4の間であると、0と100の中間値となる。ノイズ画素ビリーフマップは次に、補間回路28によって、画像i(x,y)の解像度に合わせて補間される。
【0033】
当業者には、ノイズマップ発生器24にノイズ画素ビリーフマップの外観にわずかな影響しか与えない特定の変更を、比較的容易に加えることができることがわかるであろう。たとえば、等式2において輝度チャネルの局地偏差を計算する代わりに、輝度チャネルのハイパス部分の局地偏差を計算してもよい。輝度チャネルのハイパス部分における予想されるノイズレベルは、等式3で計算される量に線形に関連している。この関係は、周知の確率変数関数の原理を使い、輝度チャネルのハイパス部分を生成するのに必要なフィルタから得られる。
【0034】
図1に戻り、画像i(x,y)はゲインマップ発生器2に渡される。ゲインマップ発生器2の目的は、パターン認識から得られる意味ラベルに基づいて、画素ごとまたは領域ごとに鮮鋭化操作のゲインを示すマップを作ることである。ゲインマップは、画素ごとに適用される鮮鋭化レベルを決定するのに使用される制御信号である。ルオ他(Luo et al.)による2001年12月10日出願のUSSN10/016,601は、アンシャープマスク内のゲインを画素領域の意味コンテンツに基づいて変える方法を開示している。ルオ(Luo)のビリーフマップM(m,n)は、特定の画素が、好ましい鮮鋭化レベルが決定された、肌や空といった特定の標的対象物を表すというビリーフを示す。
【0035】
ビリーフマップは、画像の中のひとつの画素または領域が特定の標的マテリアルを表すという確率を決定する対象物検出器によって作成される。ビリーフは、好ましくは確率として表される。たとえば、各画素値M(m,n)は、各画素M(m,n)は100*P(低解像度画像(m,n)は標的マテリアルを示す)に等しく、P(A)は事象Aの確率を示す。あるいは、各画素値M(m,n)はビリーフを示すバイナリ分類を示す。たとえば、ビリーフマップの画素値1は、その画素が標的となる対象物を表すというビリーフを示し、画素値0は、その画素が標的となる対象物を表さないというビリーフを示す。好ましい実施形態において、標的となる対象物は人の肌である。たとえば、画質の点で、人の肌を他の対象物より鮮鋭化の度合いを低くすることが有利である。制御信号β(x,y)は、入力画像の各画素に関すアンシャープマスクのゲインを示す。
【0036】
図5に示すように、制御信号β(x,y)は、まず画像(または画像の低解像度バージョン)にひとつまたは複数の対象物検出器321,...,32Iを適用して対象物ビリーフマップを作り、次にビリーフマップアナライザ34がビリーフマップを各対象物に関する目標鮮鋭化レベルと組み合わせ、ゲインマップ制御信号β(x,y)を生成するという方法で作られる。特定の位置(x,y)における制御信号β(x,y)の数値は、対応する画像の位置における各種のビリーフマップM(x,y)の数値に関係する。ビリーフマップのサイズ(ラインと列)が画像のサイズと同じであると仮定すると、ゲインマップ制御信号β(x,y)とビリーフマップM(x,y)との好ましい関係は、次の等式によって与えられる。
【0037】
【数4】
ここで、iは、対象物検出器の指数である。たとえば、M1(x,y)は、人の肌のビリーフを示すビリーフマップ、M2(x,y)は青空のビリーフを示すビリーフマップ、M3(x,y)は草のビリーフを示すビリーフマップ、等である。
【0038】
Tiは、関連する標的となる対象物において高いビリーフを有する画素に関する制御信号目標値である。Tiは、目標鮮鋭化レベルといわれる。再び上記の例を用いれば、人の肌についてはT1=0.5、青空についてはT2=1.0、緑の草についてはT3=3.0、等となる。
【0039】
T0は、対象物検出器によって一般に背景と考えられる画素に関する制御信号目標を示す。好ましくは、T0=2.75である。
【0040】
図1に戻り、ゲインマップ発生器2によって生成されるゲインマップβ(x,y)は、デジタル画像i(x,y)の特定の領域または画素に適用される鮮鋭化の量を示す制御信号である。好ましい実施形態において、ゲインマップβ(x,y)は、アンシャープマスク鮮鋭化アルゴリズムのゲインパラメータを示す数値によって設定(populate)される。ゲインマップの数値は、ゲインマップ発生器2がそのゲインマップを作成したときの基準に応じて、画素ごとまたは領域ごとに異なる。一般に、ゲインマップβ(x,y)の数値は、肌を示すビリーフが高い画素についての0.5から、空を示すビリーフが高い画素の3.0、背景画素の2.75へと変化する。ゲインマップ発生器2は、ゲインマップを生成する際、画像のノイズコンテンツを考慮しない。
【0041】
ノイズマップ発生器4とゲインマップ発生器2はどちらも、画像の低解像度バージョンi(x,y)について動作させ、計算費用を削減することができる。
【0042】
ノイズマップ発生器4によるノイズマップN(x,y)とゲインマップ発生器2によるゲインマップβ(x,y)は、ゲインマップ修正器6に入力される。ゲインマップ修正器6の目的は、ノイズ画素ビリーフマップがその画素または領域はノイズが大きいとの高いビリーフを示す領域において、ゲインが所定の限度を超えないように、ゲインマップを修正することである。このために、ゲインマップ修正器は、ノイズの大きい画素に関する鮮鋭化の最大レベルを示すパラメータであるノイズ鮮鋭化限度Nslを入力する。好ましい実施形態において、ノイズ鮮鋭化限度Nslは、ノイズ画素ビリーフマップβ(x,y)におけるビリーフの高い画素に関するアンシャープマスクの最大ゲインである。好ましくは、Nsl=1.3である。ノイズ鮮鋭化限度は、ノイズの大きい画素すべてについて望まれる鮮鋭化レベルというわけではない。なぜなら、ノイズ画素ビリーフマップの中でノイズが大きい画素として示された画素のいくつかは、すでにゲインマップにおいて、ノイズ鮮鋭化限度より低い鮮鋭化レベルを持っているかもしれないからである。ノイズ鮮鋭化限度は、次の2つの条件が満たされる場合にかぎり、画素のゲイン値に影響を与える。
【0043】
A.ゲインマップβ(x,y)における画素のゲイン値がノイズ鮮鋭化限度Nslより大きい。
【0044】
B.その画素についてのその画素はノイズの大きい画素であるというビリーフがゼロではない。
【0045】
画像ノイズを考慮する最終ゲインマップβn(x,y)がゲインマップ修正器6から出力される。最終ゲインマップは、上記A,Bの要件を満たす次の等式で生成される。
【0046】
βn(x,y)=min[β(x,y),Nsl]+N(x,y)・(max[β(x,y),Nsl]- Nsl) (5)
ここで、
min(β(x,y),Nsl)はβ(x,y)と同じ数の行と列を有する画像である。この画像は、Nslより大きなすべての画素についてはβ(x,y)と同じ、それ以外はNslと等しい。
【0047】
max(β(x,y),Nsl)は、β(x,y)と同じ数の行と列を有する画像である。この画像は、Nslより小さいすべての画素についてはβ(x,y)と同じ、それ以外はNslと等しい。
【0048】
ゲインマップ修正器6によって決定される最終ゲインマップβn(x,y)は次に、画像鮮鋭化手段10に入力される。本発明の好ましい実施形態において、最終ゲインマップβn(x,y)はアンシャープマスクのスケールファクタであるが、ゲインマップ修正器6の機能は、スケールファクタの利用に限られることなく、鮮鋭さに関する他の決定を使用することもできる。たとえば、画像鮮鋭化手段10が実行する鮮鋭化畳み込みにおいて使用されるフィルタは、ビリーフマップの分析に基づき、ゲインマップ修正器6によって決定できる。
【0049】
画像i(x,y)と最終ゲインマップβn(x,y)は、画像鮮鋭化装置に送られ、ここで最終ゲインマップβn(x,y)に応じて画像の鮮鋭化が行われる。
【0050】
画像鮮鋭化手段10は鮮鋭化パラメータを入力し、この鮮鋭化パラメータを使って画像に鮮鋭化アルゴリズムを適用し、不快な鮮鋭さのアーチファクトを発生させることなく、鮮鋭化されたより質の高い出力画像を生成する。好ましい実施形態において、鮮鋭化手段10は、以下の等式で説明されるように、最終ゲインマップβn(x,y)を使って画像にアンシャープマスキングアルゴリズムを適用し、改善された画像を生成する。たとえば、アンシャープマスクを使用した画像の鮮鋭化は、次の式で説明できる。
【0051】
s(x,y)=i(x,y)**b(m,n)+βn(x,y)f(i(x,y)-i(x,y)**b(m,n)) (6)
ここで、
s(x,y)=鮮鋭化された出力画像
i(x,y)=原入力画像
b(m,n)=ローパス畳み込みフィルタ(好ましくは、標準偏差あたり1画素サイズのガウシアンローパスフィルタ。5x5フィルタのフィルタ係数は次のとおり
[0.003 0.0133 0.0219 0.0133 0.003
0.0133 0.0596 0.0983 0.0596 0.0133
0.019 0.0983 0.162 0.0983 0.0219
0.0133 0.0596 0.0983 0.0596 0.0133
0.003 0.0133 0.0219 0.0133 0.003])。
βn(x,y)=最終ゲインマップ
f(x,y)=フリンジ関数
**は、二次元畳み込みを示す。
(x,y)は、画像のx番目の行、y番目の列を示す。
(m,n)は、畳み込みフィルタのm番目の行、n番目の列を示す。
【0052】
当業者は、複数のチャネルを有するカラー画像にアンシャープマスキング(等式(1)で示すもの等)を適用するにはいくつかの方法があることがわかるであろう。たとえば、アンシャープマスクプロセスを、カラー画像の各チャネルに適用できる。好ましくは、アンシャープマスクプロセスは、次のように適用する。
【0053】
入力画像が赤、緑、青の色チャネルで構成されるカラー画像であるとすると、まず画像にマトリクスを適用し、輝度チャネルと2つまたはそれ以上の色差チャネルを作る。次に、アンシャープマスクプロセスを輝度チャネルに適用する。最後に、逆マトリクスを輝度および色差チャネルに適用し、赤、緑、青のチャネルを有する改善されたカラー画像を得る。
【0054】
あるいは、アンシャープマスクプロセスは、ひとつの画像チャネルだけ(たとえば緑チャネル)に適用し、修正されたハイパスデータを各色チャネルと加算し、改善されたカラー画像を得ることもできる。アンシャープマスクプロセスに対する上記およびそれ以外の同様な変更や改善は、当業者にとって十分に理解できる。その使用の具体的事柄は基本的に、可変ゲイン鮮鋭化のための鮮鋭化パラメータを選択する方法には関係がないため、特定の使用態様が本発明の範囲を限定することにはならない。
【0055】
等式(6)と本発明では、アンシャープマスクによって行われる画像に対する鮮鋭化を一般的に説明しているが、当業者であれば必ずしもこれに限られないことを認識できるであろう。等式(6)のフリンジ関数f()が恒等式であるとすると、アンシャープマスクプロセスは、画像に畳み込みとともに適用し、アンシャープマスクと同じ結果を生むことのできる単独フィルタとして構成しなおすことができる。たとえば、b(x,y)のフィルタ係数を次のように仮定する。
【0056】
【数5】
次のように与えられる係数を有する畳み込みフィルタc(x,y)を使用すると、
【数6】
等式(1)のアンシャープマスクにおいてフィルタb(x,y)を使った場合と同じ結果が得られる。代数およびデジタル信号処理において周知の方法で決定されるように、画像鮮鋭化手段10における動作をグループ分けすることによって好ましい実施形態を変更することは、当業者にとって自明であり、本発明の範囲に含まれる。いずれの場合も、フィルタの係数は位置(x,y)周辺の画素値とは関係がない。
【図面の簡単な説明】
【図1】 本発明の第一の実施形態による画像を鮮鋭化する技術を示すブロック図である。
【図2】 図1に示すノイズマップ発生器のブロック図である。
【図3】 サンプルノイズテーブルを示すグラフである。
【図4】 SNR(m,n)画像からノイズ画素ビリーフマップN(m,n)に変換するために使用するルックアップテーブルである。
【図5】 図1に示すゲインマップ発生器のブロック図である。
【符号の説明】
2 ゲインマップ発生器、4 ノイズマップ発生器、6 ゲインマップ修正器、10 画像鮮鋭化手段、22 画像サブサンプラ、24 SNR計算機、26ノイズ画素分類器、28 画像補間回路、32 対象物検出器、34 ビリーフマップアナライザ。
Claims (4)
- 複数の画像画素を有するデジタル画像を、そのデジタル画像のノイズコンテンツに応じて鮮鋭化させるデジタル画像鮮鋭化装置であって、
デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、
前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求める鮮鋭化部と、
データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、
前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、
データに含まれる変調成分がノイズによるものである可能性を示すノイズビリーフ値を、前記デジタル画像データの信号対ノイズ比に基づいて、前記画素データに対して求めるノイズビリーフ値生成部と、
を備え、
前記鮮鋭化部は、
求められたゲインが所定の範囲を超え、前記ノイズビリーフ値が、それに対応する画素のノイズが大きいとの高ビリーフであることを示す領域に対しては、当該ゲインを当該ノイズビリーフ値に基づいて制限した値を調整後ゲインとして求め、その他の領域に対しては、当該ゲインを調整後ゲインとして求め、求められた調整後ゲインに基づいて前記鮮鋭化画像データを求めることを特徴とするデジタル画像鮮鋭化装置。 - 複数の画像画素を有するデジタル画像を描画対象物に応じて鮮鋭化するデジタル画像鮮鋭化装置であって、
デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、
前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求める鮮鋭化部と、
データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、
前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、
を備え、
前記ゲイン生成部は、
それぞれが1つの描画対象物に対応する複数の前記対象物検出部であって、互いに異なる描画対象物に応付けられた複数の前記対象物検出部によって求められた各対象物ビリーフ値を制御し、制御された各対象物ビリーフ値に基づいて、前記デジタル画像データに含まれる画素データに対するゲインを求め、
前記鮮鋭化部は、
求められたゲインに基づいて前記鮮鋭化画像データを求めることを特徴とするデジタル画像鮮鋭化装置。 - 複数の画像画素を有するデジタル画像を描画対象物に応じて鮮鋭化するデジタル画像鮮鋭化装置であって、
デジタル画像データと、当該デジタル画像データに対してフィルタ処理を施したデータとの差異を示すフリンジデータを求めるフリンジデータ生成部と、
前記デジタル画像データおよび前記フリンジデータに基づいて鮮鋭化画像データを求める鮮鋭化部と、
データが描画対象物の画素に対応するものである可能性を示す対象物ビリーフ値を、前記デジタル画像データに含まれる画素データに対して求める対象物検出部と、
前記フリンジデータを前記鮮鋭化画像データに寄与させる程度を示すゲインを、前記対象物ビリーフ値に基づいて、前記画素データに対して求めるゲイン生成部と、
を備え、
前記ゲイン生成部は、
それぞれが1つの描画対象物に対応する複数の前記対象物検出部によって求められた各対象物ビリーフ値に基づいて、前記デジタル画像データに含まれる画素データに対するゲインを求め、
前記鮮鋭化部は、
求められたゲインに基づいて前記鮮鋭化画像データを求め、
前記デジタル画像鮮鋭化装置は、さらに、
データに含まれる変調成分がノイズによるものである可能性を示すノイズビリーフ値を、前記デジタル画像データの信号対ノイズ比に基づいて、前記画素データに対して求めるノイズビリーフ値生成部を備え、
前記鮮鋭化部は、
求められたゲインが所定の範囲を超え、前記ノイズビリーフ値が、それに対応する画素のノイズが大きいとの高ビリーフであることを示す領域に対しては、当該ゲインを当該ノイズビリーフ値に基づいて制限した値を調整後ゲインとして求め、その他の領域に対しては、当該ゲインを調整後ゲインとして求め、求められた調整後ゲインに基づいて前記鮮鋭化画像データを求めることを特徴とするデジタル画像鮮鋭化装置。 - 請求項1から請求項3のいずれか1項に記載のデジタル画像鮮鋭化装置において、
前記デジタル画像データからサンプル画素データを摘出する画像サンプラを備え、
前記対象物検出部は、
各サンプル画素データに対して前記対象物ビリーフ値を求め、
前記ゲイン生成部は、
各サンプル画素データに対して求められた前記対象物ビリーフ値に基づいて、各サンプル画素に対するゲインを求め、前記各サンプル画素間の画素に対するゲインを、前記各サンプル画素に対して求められたゲインに基づく補間処理によって求めることを特徴とするデジタル画像鮮鋭化装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/084,006 US6891977B2 (en) | 2002-02-27 | 2002-02-27 | Method for sharpening a digital image without amplifying noise |
US10/084,006 | 2002-02-27 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003256831A JP2003256831A (ja) | 2003-09-12 |
JP4456819B2 true JP4456819B2 (ja) | 2010-04-28 |
Family
ID=27753411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003050148A Expired - Fee Related JP4456819B2 (ja) | 2002-02-27 | 2003-02-26 | デジタル画像鮮鋭化装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US6891977B2 (ja) |
EP (1) | EP1347415B1 (ja) |
JP (1) | JP4456819B2 (ja) |
DE (1) | DE60300097T2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220151713A (ko) * | 2020-04-13 | 2022-11-15 | 애플 인크. | 콘텐츠 기반 이미지 프로세싱 |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6788824B1 (en) * | 2000-09-29 | 2004-09-07 | Adobe Systems Incorporated | Creating image-sharpening profiles |
US7050636B2 (en) * | 2001-12-07 | 2006-05-23 | Eastman Kodak Company | Method and system for improving an image characteristic based on image content |
US7092573B2 (en) * | 2001-12-10 | 2006-08-15 | Eastman Kodak Company | Method and system for selectively applying enhancement to an image |
WO2005024724A2 (en) * | 2003-09-04 | 2005-03-17 | Koninklijke Philips Electronics N.V. | Locally adaptive nonlinear noise reduction |
JP2005141477A (ja) * | 2003-11-06 | 2005-06-02 | Noritsu Koki Co Ltd | 画像鮮鋭化処理方法とこの方法を実施する画像処理装置 |
US7570831B2 (en) * | 2004-04-29 | 2009-08-04 | Hewlett-Packard Development Company, L.P. | System and method for estimating image noise |
US20060149129A1 (en) * | 2005-01-05 | 2006-07-06 | Watts H D | Catheter with multiple visual elements |
US8289381B2 (en) | 2005-01-05 | 2012-10-16 | Avantis Medical Systems, Inc. | Endoscope with an imaging catheter assembly and method of configuring an endoscope |
US8182422B2 (en) | 2005-12-13 | 2012-05-22 | Avantis Medical Systems, Inc. | Endoscope having detachable imaging device and method of using |
US8797392B2 (en) | 2005-01-05 | 2014-08-05 | Avantis Medical Sytems, Inc. | Endoscope assembly with a polarizing filter |
US8872906B2 (en) | 2005-01-05 | 2014-10-28 | Avantis Medical Systems, Inc. | Endoscope assembly with a polarizing filter |
WO2007087421A2 (en) | 2006-01-23 | 2007-08-02 | Avantis Medical Systems, Inc. | Endoscope |
US8287446B2 (en) | 2006-04-18 | 2012-10-16 | Avantis Medical Systems, Inc. | Vibratory device, endoscope having such a device, method for configuring an endoscope, and method of reducing looping of an endoscope |
EP2023794A2 (en) | 2006-05-19 | 2009-02-18 | Avantis Medical Systems, Inc. | System and method for producing and improving images |
US7652788B2 (en) * | 2006-06-23 | 2010-01-26 | Nokia Corporation | Apparatus, method, mobile station and computer program product for noise estimation, modeling and filtering of a digital image |
US20090231419A1 (en) * | 2007-02-06 | 2009-09-17 | Avantis Medical Systems, Inc. | Endoscope Assembly and Method of Performing a Medical Procedure |
US8064666B2 (en) | 2007-04-10 | 2011-11-22 | Avantis Medical Systems, Inc. | Method and device for examining or imaging an interior surface of a cavity |
US9407890B2 (en) * | 2008-01-14 | 2016-08-02 | Broadcom Corporation | Method and system for sharpening the luma and the chroma signals |
US8120679B2 (en) | 2008-08-01 | 2012-02-21 | Nikon Corporation | Image processing method |
EP2435983A4 (en) * | 2009-05-28 | 2017-08-23 | Hewlett-Packard Development Company, L.P. | Image processing |
JP6417851B2 (ja) * | 2014-10-28 | 2018-11-07 | ブラザー工業株式会社 | 画像処理装置、および、コンピュータプログラム |
JP2021065370A (ja) * | 2019-10-21 | 2021-04-30 | ソニー株式会社 | 画像処理装置、画像処理方法および内視鏡システム |
WO2021239224A1 (en) * | 2020-05-27 | 2021-12-02 | Telefonaktiebolaget Lm Ericsson (Publ) | A computer software module arrangement, a circuitry arrangement, an arrangement and a method for improved image processing |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4571635A (en) | 1984-02-17 | 1986-02-18 | Minnesota Mining And Manufacturing Company | Method of image enhancement by raster scanning |
IL78675A (en) | 1986-05-02 | 1993-02-21 | Scitex Corp Ltd | Color separation scanner |
US4761819A (en) | 1987-02-27 | 1988-08-02 | Picker International, Inc. | Adaptive noise reduction filter for reconstructed images |
US5081692A (en) | 1991-04-04 | 1992-01-14 | Eastman Kodak Company | Unsharp masking using center weighted local variance for image sharpening and noise suppression |
DE69428148T2 (de) | 1993-03-24 | 2002-05-29 | Fujifilm Electronic Imaging Ltd., London | Farbabänderung von Bildern |
JP3877385B2 (ja) | 1997-07-04 | 2007-02-07 | 大日本スクリーン製造株式会社 | 画像処理パラメータ決定装置およびその方法 |
US6118906A (en) * | 1998-02-03 | 2000-09-12 | Eastman Kodak Company | Sharpening system adjusted for measured noise of photofinishing images |
US6707950B1 (en) | 1999-06-22 | 2004-03-16 | Eastman Kodak Company | Method for modification of non-image data in an image processing chain |
US6330372B1 (en) | 1999-09-13 | 2001-12-11 | Intel Corporation | Compression edge adaptive video and image sharpening and scaling |
US6731823B1 (en) | 1999-12-22 | 2004-05-04 | Eastman Kodak Company | Method for enhancing the edge contrast of a digital image independently from the texture |
US6738494B1 (en) * | 2000-06-23 | 2004-05-18 | Eastman Kodak Company | Method for varying an image processing path based on image emphasis and appeal |
US6807300B1 (en) | 2000-07-20 | 2004-10-19 | Eastman Kodak Company | Noise reduction method utilizing color information, apparatus, and program for digital image processing |
-
2002
- 2002-02-27 US US10/084,006 patent/US6891977B2/en not_active Expired - Lifetime
-
2003
- 2003-02-17 EP EP03075452A patent/EP1347415B1/en not_active Expired - Lifetime
- 2003-02-17 DE DE60300097T patent/DE60300097T2/de not_active Expired - Lifetime
- 2003-02-26 JP JP2003050148A patent/JP4456819B2/ja not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220151713A (ko) * | 2020-04-13 | 2022-11-15 | 애플 인크. | 콘텐츠 기반 이미지 프로세싱 |
KR102585573B1 (ko) | 2020-04-13 | 2023-10-05 | 애플 인크. | 콘텐츠 기반 이미지 프로세싱 |
Also Published As
Publication number | Publication date |
---|---|
DE60300097T2 (de) | 2005-10-27 |
EP1347415B1 (en) | 2004-10-20 |
US6891977B2 (en) | 2005-05-10 |
JP2003256831A (ja) | 2003-09-12 |
DE60300097D1 (de) | 2004-11-25 |
EP1347415A1 (en) | 2003-09-24 |
US20030161544A1 (en) | 2003-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4460839B2 (ja) | デジタル画像鮮鋭化装置 | |
JP4456819B2 (ja) | デジタル画像鮮鋭化装置 | |
US6807300B1 (en) | Noise reduction method utilizing color information, apparatus, and program for digital image processing | |
US8068163B2 (en) | Optical imaging systems and methods utilizing nonlinear and/or spatially varying image processing | |
US6611627B1 (en) | Digital image processing method for edge shaping | |
US7856150B2 (en) | Denoise method on image pyramid | |
US7570829B2 (en) | Selection of alternative image processing operations to maintain high image quality | |
JP4498671B2 (ja) | イメージコンテンツに基づいて画像の特性を改善するための方法及びシステム | |
US8717456B2 (en) | Optical imaging systems and methods utilizing nonlinear and/or spatially varying image processing | |
JP4498361B2 (ja) | レティネックス型アルゴリズムを高速化する方法 | |
JP2001229377A (ja) | 適応帰納的フィルタでディジタル画像のコントラストを調整する方法 | |
JP2001005960A (ja) | 画像処理方法および装置 | |
US8565549B2 (en) | Image contrast enhancement | |
Santhi et al. | Contrast enhancement by modified octagon histogram equalization | |
Goel | The implementation of image enhancement techniques using Matlab | |
Pardhi et al. | Contrast Enhancement Using Adaptive Threshold Based Dynamic Range Adjustment In Luv Colour Space | |
CN117422656B (zh) | 一种低照度模糊交通图像增强方法、装置、设备及介质 | |
RU2680754C2 (ru) | Способ повышения резкости цифрового изображения | |
EP4242960A1 (en) | High efficiency dynamic contrast processing | |
Vishalakshi et al. | Wavelet energy-based adaptive retinex algorithm for low light mobile video enhancement | |
Thakur et al. | Image Enhancement Techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090203 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090427 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090609 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20090903 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20090908 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091005 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100126 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100208 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130212 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4456819 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130212 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140212 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |