JP6256704B2 - 画像処理方法、及び画像処理装置 - Google Patents

画像処理方法、及び画像処理装置 Download PDF

Info

Publication number
JP6256704B2
JP6256704B2 JP2014512626A JP2014512626A JP6256704B2 JP 6256704 B2 JP6256704 B2 JP 6256704B2 JP 2014512626 A JP2014512626 A JP 2014512626A JP 2014512626 A JP2014512626 A JP 2014512626A JP 6256704 B2 JP6256704 B2 JP 6256704B2
Authority
JP
Japan
Prior art keywords
hierarchy
area
correction
value
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014512626A
Other languages
English (en)
Other versions
JPWO2013161840A1 (ja
Inventor
健太 先崎
健太 先崎
塚田 正人
正人 塚田
裕明 河口
裕明 河口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2013161840A1 publication Critical patent/JPWO2013161840A1/ja
Application granted granted Critical
Publication of JP6256704B2 publication Critical patent/JP6256704B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20076Probabilistic image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

本発明は、画像処理方法、及び画像処理装置に関する。
画像処理技術の中でも、画像に含まれるランダムなノイズを低減する技術は、撮像した画像をより鮮明に再現するためには、欠かせない技術である。ランダムノイズを低減する技術としては、例えば、特許文献1に開示された技術がある。
特許文献1に記載された技術は、入力画像処理回路から出力されたカラーデジタル信号の主走査方向の任意の注目画素iについて、所定の数式に基づき移動平均画素数nを算出する複数の演算回路と、注目画素i及び前後n画素の参照画素jを選択出力する複数のビット選択回路と、注目画素iの出力レベルと参照画素jのそれぞれの出力レベルとの差分の絶対値を算出する複数の差分回路と、注目画素iを出力するとともに、複数の差分回路から出力される値と閾値記憶メモリ内の所定の閾値とを比較し、該比較結果に基づいて参照画素jを出力する複数の判定回路と、複数の判定回路から出力された出力信号の移動平均化処理を行う複数の演算回路とから構成される。
すなわち、注目画素iの出力レベルと参照画素jの出力レベルとの差分の絶対値が閾値以下である場合にのみ、該参照画素jが移動平均化処理に加えられるような構成としているため、上記差分の絶対値が閾値以上に急峻に変化している部分については移動平均化処理から除外され、これにより、ノイズ成分を効果的に除去することができる。
特開2002−57900号公報
しかしながら、特許文献1の技術は、平滑化のフィルタサイズ以上の周期性を有する低周波ノイズを除去することができなかった。
また、ノイズ成分の目立ちやすい画像中の低輝度領域でノイズ除去性能が不十分となる場合があった。
そこで、本発明は上記課題に鑑みて発明されたものであって、その目的はノイズ成分の目立ちやすい低輝度領域でのノイズ除去性能を改善する画像処理方法及び画像処理装置を提供することにある。
本発明は、注目画素を含み、範囲が順次狭くなる多階層の領域毎に画素の画素統計値とエッジ情報を求め、当該階層の領域の画素統計値と当該階層の領域より広い階層の領域の画素統計値の差分情報を、前記エッジ情報を用いて補正し、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正し、最大範囲から最小範囲の領域になるまで、順次各階層において、前記当該階層の領域の画素統計値の補正と再補正を繰り返すことで、前記注目画素を補正する画像処理方法である。
本発明は、注目画素を含み、範囲が順次狭くなる多階層の領域毎に、その領域の画素の画素統計値を算出する画素統計値算出手段と、注目画素を含み、範囲が順次狭くなる多階層の領域毎に、とエッジ情報を算出するエッジ情報算出手段と、当該階層の領域の画素統計値と当該階層の領域より広い階層の領域の画素統計値の差分情報を、前記エッジ情報を用いて補正し、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正し、最大範囲から最小範囲の領域になるまで、順次各階層において、前記当該階層の領域の画素統計値の補正と再補正を繰り返すことで、前記注目画素を補正する補正手段とを有する画像処理装置である。
本発明によれば、ノイズ成分の目立ちやすい低輝度領域でのノイズを効果的に除去することができる。
図1は本発明の実施の形態の処理を説明する為の図である。 図2は補正関数Funcの一例を示した図である。 図3は本実施の形態における再補正関数Func2の形状の一例を説明する為の図である。 図4はパラメータaの設定例を示す図である。 図5は本実施の形態における再補正関数Func2の形状の一例を説明する為の図である。 図6は本実施の形態における再補正関数Func2の形状の一例を説明する為の図である。 図7は本実施の形態の画像処理装置のブロック図である。 図8は本実施の形態の画像処理装置のブロック図である。
本発明の実施形態を説明する。
図1は、本発明の実施の形態である画像処理方法を説明するための図である。尚、図1では、三階層の多重解像度処理を行う場合の処理の流れを示しているが、本発明は二階層にも対応できるし、四階層以上でも容易に拡張が可能である。
図1は、本発明の実施の形態である画像処理方法を説明するための図である。
本発明の実施の形態は、画素位置(x,y)(注目画素)を中心とする広領域における空間の画素統計値である空間平均値L3(x,y)、その領域でのエッジ情報、もしくはエッジ量E3(x,y)、および広領域以上の広さをもつ空間の画素統計値である空間平均値L4(x,y)を用いて、中領域における空間平均値(L2(x,y))を補正する。そして、補正された中領域における空間平均値(L2’(x,y))、中領域でのエッジ量(E2(x,y))、空間平均値L4(x,y)を用いて、狭領域の空間平均値(L1(x,y))を補正する。この補正を順番に処理していくことで、入力画素値Pin(x,y)を補正し、出力画素値Pout(x,y)を得ることを特徴とする。
ここで、画素統計値とは、対象領域の空間平均値であり、空間平均値は領域に存在する画素の相加平均値や、相乗平均値、加重平均値などである。以下の説明では、画素統計値を空間平均値とし、空間平均値を領域に存在する画素の相加平均値である場合を説明する。また、エッジ量、もしくはエッジ情報とは、注目画素(入力画素)を中心とした上下左右の領域間の画素の統計量(平均値、メディアンなど)の差分値で定義されるものとする。以下の説明では、画素統計値と同様に、エッジ量を空間平均値の差分である場合を説明する。
以下、具体的な処理の説明を行うが、図1における各階層での処理は、補正量を決定するためのパラメータが異なるのみで、処理の流れは同一である。そこで,一例として,広領域における空間平均値L3(x,y)、その領域でのエッジ量E3(x,y) および広領域以上の広さをもつ領域の画素統計値である空間平均値L4(x,y)を用いて、中領域における空間平均値L2(x,y)を補正する処理の詳細を説明する。
まず、画素位置(x,y)における広領域(範囲:-k3〜k3)の空間平均値L3(x,y)、中領域(範囲:-k2〜k2)の空間平均値L2(x,y)、及び広領域以上の広さをもつ領域(範囲:-k4〜k4)の空間平均値L4(x,y)を、式(1)、式(2)及び式(3)のように計算する。ここで、広領域、中領域をそれぞれk4、k3、k2にて縦横同じ画素数で範囲を指定しているが、必ずしも縦横同じ画素数でなくてもよい。
Figure 0006256704
Figure 0006256704
Figure 0006256704
ここで、k4>=k3である。
次に、広領域におけるエッジ量E3(x,y)を算出する。エッジ量の算出では,まず、縦方向のエッジ量EV3(x,y)と横方向のエッジ量EH3(x,y)とを、式(4)および式(5)のように算出し、これらを式(6)のように加算することで、広領域におけるエッジ量E3(x,y)を算出する。ここで、広領域をk3にて縦横同じ画素数で範囲を指定しているが、必ずしも縦横同じ画素数でなくてもよい。
Figure 0006256704
Figure 0006256704
Figure 0006256704
続いて、算出されたエッジ量E3(x,y)から算出される合成重みα3(x,y)を用いて、式(7)のように広領域における空間平均値L3(x,y)を補正し、補正された広領域の空間平均値L3’(x,y)を算出する。合成重みα3(x,y)は、あらかじめ設定されている閾値hi3およびlo3を用いて、式(8)のように算出される。
Figure 0006256704
Figure 0006256704
ここで、本実施の形態では、ノイズ抑制を目的とする補正関数Funcで算出される補正量を、さらに、空間平均値L4(x,y)、L4(x,y)に関する2つの閾値τ1、τ2、パラメータγ1、γ2を用いて補正し、中領域の空間平均値L2’(x,y)を出力する。この処理は以下の式(9)であらわされる
Figure 0006256704
補正関数Funcの一例として、図2に示したものを用いる。例えば、画素位置(x,y)における中領域の空間平均値L2(x,y)の補正は、diffinを(L2(x,y)-L3”(x,y))とし、図2の補正関数によって得られるdiffoutを、補正関数Funcで算出される補正量とする。図2の補正関数内のパラメータであるa,b,limitは、処理する解像度および補正する色成分毎に決定される。
更に、式(9)における補正関数Func2の一例を以下の式(10)に示す。
Figure 0006256704
ここで、τ1<=τ2、γ1<=γ2であり、基本的には0.0<=γ1<=γ2<=1.0である。式(10)に示す補正関数Func2における入力値lと出力値の関係を図3に示す。なお、式(10)におけるτ1、τ2、およびγ1、γ2は、各階層で変更してもよいし、そうでなくてもよい。
ここで、各注目画素におけるノイズの強さは、その画素値と周辺画素値の空間平均値に依存する傾向がある。広領域以上の広さをもつ領域の空間平均値が小さい場合(L4(x,y)<τ1)では、その領域においてはノイズが目立ちやすいというノイズ特性がある。
補正関数Funcは、注目画素を中心とする広領域の空間平均値と注目画素を中心とする中領域の空間平均値の差分値、および注目画素を含む領域のエッジ量を用いて、中領域の空間平均値に対する補正値を算出するが、本実施の形態では、さらに、上記のノイズ特性に着目し、式(10)の補正関数Func2を導入することによって、広領域以上の広い領域の空間平均値に基づき中領域の空間平均値に対する補正値を算出する。
ノイズの目立ちやすい低輝度領域(L4(x,y)<τ1)では、補正量を大きくするように補正関数Func2を設計することで、ノイズ除去性能を改善することができる。
また、輝度が十分ある領域(L4(x,y)>τ2)では、例えば、γ2=1.0とすることで、補正関数Funcの特性がそのまま反映される。
また、それ以外の領域(τ1<= L4(x,y)<= τ2)では、輝度値に比例して補正量を変化させることで、ノイズ除去の性能を調整することができる。
次に、他の実施の形態を説明する。
他の実施の形態では、式(1)から式(6)までの処理は同様である。
他の実施の形態では、各階層において式(6)で算出されるエッジ量E3(x,y)を、ノイズ成分を抑制する補正関数Funcに反映させ、各階層の補正関数Funcを変更することで、各階層のノイズ成分を適応的に抑制する構成も可能である。
いま、エッジ量E3(x,y)に応じて式(11)に示すように値が変化する係数β3(x,y)を定義する。E3(x, y)の閾値であるhi3およびlo3は予め設定する値である。
Figure 0006256704
式(11)で定義される係数β3(x,y)は、0〜1.0までの実数となる。係数β3(x,y)を利用して、以下の式(12)のように、補正関数Funcにおけるパラメータaを設定する。エッジ量E3(x,y)とパラメータaの関係を図4に示す。
Figure 0006256704
ここで、a_lo3は、エッジ量E3(x,y)が閾値lo3より小さい場合にパラメータaとして使用する値であり、a_hi3はエッジ量が閾値hi3より大きくなる場合のパラメータaに使用する値である。エッジ量E3(x,y)が閾値lo3からhi3までパラメータaは、a_hi3からa_lo3までの間の値となる。ここで、a_hi3は0以上の実数であり、a_lo3は,a_lo3>=a_hi3の実数である。
こうして得られた補正関数Funcを用い、補正された中領域における空間平均値L2’(x,y)を得る方法については、以下の式(13)で実現できる。
Figure 0006256704
尚、上述した再補正関数Func2は、式(10)に限定されるものではなく、例えば、以下の式(14)や式(15)のような構成も考えられる。
Figure 0006256704
Figure 0006256704
式(14)および式(15)に示す再補正関数Func2における入力値lと出力値の関係を、それぞれ図5および図6に示す。
次に、上述した実施の形態で述べた処理を実現する画像処理装置について説明する。
まず、式(1)から式(10)を用いて補正値を得る方法に対応する画像処理装置について説明する。
図7は式(1)から式(10)を用いて補正値を得る方法に対応する画像処理装置のブロック図である。
図7に示す画像処理装置は、領域画素値抽出部1と、空間平均値算出部2と、補正部3と、再補正関数決定部4と、出力画像制御部5と、エッジ情報算出部6とを備える。
領域画素値抽出部1は、画素位置(x,y)(注目画素)を中心とする広領域にある画素の画素値と、中領域にある画素の画素値と、狭領域にある画素の画素値と、広領域以上の領域にある画素の画素値と、入力画素値Pin(x,y) (注目画素)の画素値とを、それぞれのタイミングで抽出して空間平均値算出部2とエッジ情報算出部6に出力する。
空間平均値算出部2は、領域画素値抽出部1からの各領域の画素値を受信し、その領域の空間平均値を算出する。そして、算出された広領域、中領域、狭領域の空間平均値は、補正部3に出力される。算出された広領域以上の領域の空間平均値は、再補正関数決定部4に出力される。
再補正関数決定部4は、空間平均値算出部2により算出された広領域以上の領域の空間平均値に基づいて、式(10)のように、再補正関数Func2を決定する。再補正関数Func2は式(10)に限定されず、例えば、式(14)や式(15)のような構成でも良いし、同様の機能を有するならばそれ以外でもよい。
エッジ情報算出部6は、領域画素値抽出部1からの広領域に存在する画素の画素値に基づいて、広領域におけるエッジ量E3(x,y)を算出する。エッジ量の算出は、縦方向のエッジ量EV3(x,y)と横方向のエッジ量EH3(x,y)とを、式(4)および式(5)のように算出し、これらを式(6)のように加算することで、広領域におけるエッジ量E3(x,y)を算出する。同様に、中領域のエッジ量E2(x,y)、狭領域のエッジ量E1(x,y)を算出する。なお、横方向と縦方向のエッジ量について言及してあるが、斜め方向のエッジ量を算出し使用してもよい。
補正部3は、エッジ情報算出部6により算出されたエッジ量E3 (x,y)から得られる合成重みα3 (x,y)を用いて、式(7)のように広領域における空間平均値L3(x,y)を補正し、補正された広領域の空間平均値L3”(x,y)を算出する。尚、合成重みα3 (x,y)は、あらかじめ設定されている閾値hi3およびlo3を用いて、式(8)のように算出される。
更に、算出された空間平均値L3”と、再補正関数決定部4で決定された再補正関数Func2を用い、式(9)のように中領域の空間平均値L2(x,y)を補正し、補正された空間平均値L2’(x,y)を得る。同様な補正を、空間平均値L1(x,y)、入力画素値Pin(x,y)にも行う。
出力画像制御部5は、順次補正された空間平均値が入力される毎に、次階層の領域の画素の画素値を抽出するように領域画素値抽出部1に指示を出す。また、再補正された空間平均値が入力される毎に、補正部3にその値をフィードバックする。そして、1画素のPout(x,y)が入力されると、出力画素値としてPout(x,y)を出力する。
次に、式(1)から式(6)、および式(11)から式(13)を用いて補正値を得る方法に対応する画像処理装置について説明する。
図8は式(1)から式(6)、および式(11)から式(13)を用いて補正値を得る方法に対応する画像処理装置のブロック図である。
図8に示す画像処理装置は、領域画素値抽出部1と、空間平均値算出部2と、補正部3と、再補正関数決定部4と、出力画像制御部5と、エッジ情報算出部6と、補正関数決定部7とを備える。
領域画素値抽出部1、空間平均値算出部2、再補正関数決定部4、出力画像制御部5、エッジ情報算出部6は、図7に示す画像処理装置と同じ動作を行う。
補正関数決定部7は、エッジ情報算出部6により算出されたエッジ量に基づいて、式(11)、(12)に示すように補正関数Funcにおけるパラメータaを算出し、各階層の補正関数Funcを決定する。
補正部3は、補正関数決定部7で決定された各階層の補正関数Funcと、再補正関数決定部4で決定された再補正関数Func2を用いて、式(13)のように各階層の空間平均値を補正する。
以上の如く、本実施の形態によれば、注目画素が含まれる領域の輝度情報に基づいてノイズ抑制における再補正量の制御を行うことで、ノイズ成分の目立ちやすい低輝度領域でのノイズ除去性能を改善することができる。
尚、上述した説明からも明らかなように、各部をハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。この場合、プログラムメモリに格納されているプログラムで動作するプロセッサによって、上述した各実施の形態と同様の機能、動作を実現させる。また、上述した実施の形態の一部の機能のみをコンピュータプログラムにより実現することも可能である。
また、上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
注目画素を含み、範囲が順次狭くなる多階層の領域毎に画素の画素統計値とエッジ情報を求め、
当該階層の領域の画素統計値と当該階層の領域より広い階層の領域の画素統計値の差分情報を、前記エッジ情報を用いて補正し、
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正し、
最大範囲から最小範囲の領域になるまで、順次各階層において、前記当該階層の領域の画素統計値の補正と再補正を繰り返すことで、前記注目画素を補正する
画像処理方法。
(付記2)
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、
前記各階層の領域よりも広い領域が、輝度が第1の値よりも小さい領域である場合には、補正量を大きくし、
前記各階層の領域よりも広い領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
前記各階層の領域よりも広い領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、輝度に応じた補正量で補正を行う
付記1に記載の画像処理方法。
(付記3)
当該階層の領域の画素統計値と、当該階層の領域より広い階層の領域の画素統計値と、当該階層の領域より広い階層の領域におけるエッジ情報を用いて、前記差分情報を算出する
付記1又は付記2に記載の画像処理方法。
(付記4)
当該階層の領域より広い階層の領域におけるエッジ情報が所定の閾値を超える場合、当該階層の画素統計値の補正を行わない
付記3に記載の画像処理方法。
(付記5)
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、補正の強度を階層毎に変化させる
付記1から付記4のいずれかに記載の画像処理方法。
(付記6)
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域のノイズによる画素値の変動量に応じて補正の強度を変化させる
付記5に記載の画像処理方法。
(付記7)
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域より広い領域のエッジ量に応じて補正の強度を変化させる
付記5に記載の画像処理方法。
(付記8)
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、前記差分情報がゼロに近づくほどゼロに近い値を出力し、前記差分情報が大きくなるほど補正を弱める補正を行う
付記1から付記7のいずれかに記載の画像処理方法。
(付記9)
前記画素統計値は、画素の空間平均値を用いる
付記1から付記8のいずれかに記載の画像処理方法。
(付記10)
前記空間平均値は、画素の相加平均値、相乗平均値、加重平均値のいずれかである
付記9に記載の画像処理方法。
(付記11)
注目画素を含み、範囲が順次狭くなる多階層の領域毎に、その領域の画素の画素統計値を算出する画素統計値算出手段と、
注目画素を含み、範囲が順次狭くなる多階層の領域毎に、とエッジ情報を算出するエッジ情報算出手段と、
当該階層の領域の画素統計値と当該階層の領域より広い階層の領域の画素統計値の差分情報を、前記エッジ情報を用いて補正し、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正し、最大範囲から最小範囲の領域になるまで、順次各階層において、前記当該階層の領域の画素統計値の補正と再補正を繰り返すことで、前記注目画素を補正する補正手段と
を有する画像処理装置。
(付記12)
前記補正手段は、
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、
前記各階層の領域よりも広い領域が、輝度が第1の値よりも小さい領域である場合には、補正量を大きくし、
前記各階層の領域よりも広い領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
前記各階層の領域よりも広い領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、輝度に応じた補正量で補正を行う
付記11に記載の画像処理装置。
(付記13)
前記補正手段は、当該階層の領域の画素統計値と、当該階層の領域より広い階層の領域の画素統計値と、当該階層の領域より広い階層の領域におけるエッジ情報を用いて、前記差分情報を算出する
付記11又は付記12に記載の画像処理装置。
(付記14)
前記補正手段は、当該階層の領域より広い階層の領域におけるエッジ情報が所定の閾値を超える場合、当該階層の画素統計値の補正を行わない
付記13に記載の画像処理装置。
(付記15)
前記補正手段は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、補正の強度を階層毎に変化させる
付記11から付記14のいずれかに記載の画像処理装置。
(付記16)
前記補正手段は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域のノイズによる画素値の変動量に応じて補正の強度を変化させる
付記15に記載の画像処理装置。
(付記17)
前記補正手段は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域より広い領域のエッジ量に応じて補正の強度を変化させる
付記15に記載の画像処理装置。
(付記18)
前記補正手段は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、前記差分情報がゼロに近づくほどゼロに近い値を出力し、前記差分情報が大きくなるほど補正を弱める補正を行う
付記11から付記17のいずれかに記載の画像処理装置。
(付記19)
前記画素統計値は、画素の空間平均値を用いる
付記11から付記18のいずれかに記載の画像処理装置。
(付記20)
前記空間平均値は、画素の相加平均値、相乗平均値、加重平均値のいずれかである
付記19に記載の画像処理装置。
(付記21)
注目画素を含み、範囲が順次狭くなる多階層の領域毎に、その領域の画素の画素統計値を算出する画素統計値算出処理と、
注目画素を含み、範囲が順次狭くなる多階層の領域毎に、とエッジ情報を算出するエッジ情報算出処理と、
当該階層の領域の画素統計値と当該階層の領域より広い階層の領域の画素統計値の差分情報を、前記エッジ情報を用いて補正し、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正し、最大範囲から最小範囲の領域になるまで、順次各階層において、前記当該階層の領域の画素統計値の補正と再補正を繰り返すことで、前記注目画素を補正する補正処理と
をコンピュータに実行させるプログラム。
(付記22)
前記補正処理は、
補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値と、各階層の領域よりも広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、
前記各階層の領域よりも広い領域が、輝度が第1の値よりも小さい領域である場合には、補正量を大きくし、
前記各階層の領域よりも広い領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
前記各階層の領域よりも広い領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、輝度に応じた補正量で補正を行う
付記21に記載のプログラム。
(付記23)
前記補正処理は、当該階層の領域の画素統計値と、当該階層の領域より広い階層の領域の画素統計値と、当該階層の領域より広い階層の領域におけるエッジ情報を用いて、前記差分情報を算出する
付記21又は付記22に記載のプログラム。
(付記24)
前記補正処理は、当該階層の領域より広い階層の領域におけるエッジ情報が所定の閾値を超える場合、当該階層の画素統計値の補正を行わない
付記23に記載のプログラム。
(付記25)
前記補正処理は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、補正の強度を階層毎に変化させる
付記21から付記24のいずれかに記載のプログラム。
(付記26)
前記補正処理は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域のノイズによる画素値の変動量に応じて補正の強度を変化させる
付記25に記載のプログラム。
(付記27)
前記補正処理は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、当該階層の領域より広い領域のエッジ量に応じて補正の強度を変化させる
付記25に記載のプログラム。
(付記28)
前記補正処理は、補正後の前記差分情報と、前記当該階層の領域より広い領域の画素統計値を用いて、当該階層の領域の画素統計値を補正する際、前記差分情報がゼロに近づくほどゼロに近い値を出力し、前記差分情報が大きくなるほど補正を弱める補正を行う
付記21から付記27のいずれかに記載のプログラム。
(付記29)
前記画素統計値は、画素の空間平均値を用いる
付記21から付記28のいずれかに記載のプログラム。
(付記30)
前記空間平均値は、画素の相加平均値、相乗平均値、加重平均値のいずれかである
付記29に記載のプログラム。
以上好ましい実施の形態をあげて本発明を説明したが、本発明は必ずしも上記実施の形態に限定されるものではなく、その技術的思想の範囲内において様々に変形し実施することが出来る。
本出願は、2012年4月26日に出願された日本出願特願2012−100911号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
1 領域画素値抽出部
2 空間平均値算出部
3 補正部
4 再補正関数決定部
5 出力画像制御部
6 エッジ情報算出部
7 補正関数決定部

Claims (10)

  1. 注目画素を含み、範囲が順次狭くなる多階層の領域毎に画素の画素統計値とエッジ情報を求め、
    当該第1階層の領域の画素統計値と前記第1階層の領域より広い第2階層の領域の画素統計値の差分情報を、前記第2階層の前記エッジ情報を用いて補正し、
    前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正し、
    再補正後の前記差分情報と、前記第2階層の画素統計値とを用いて、前記第1階層の領域の画素統計値を補正し、
    最大範囲から最小範囲の領域になるまで、順次各階層において、前記補正と前記再補正を繰り返すことで、前記注目画素を補正する
    画像処理方法。
  2. 前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも小さい領域である場合には、第1補正量で補正を行い
    前記第3階層の領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、輝度に比例した補正量で補正を行う
    請求項1に記載の画像処理方法。
  3. 前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも小さい領域である場合には、輝度に比例した第1補正量で補正を行い、
    前記第3階層の領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、前記第1補正量よりも前記輝度の増加に対して補正量の変化が大きく、かつ、輝度に比例した第2補正量で補正を行う
    請求項1に記載の画像処理方法。
  4. 前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも小さい領域である場合には、前記輝度に比例した補正量で補正を行う
    請求項1に記載の画像処理方法。
  5. 前記補正及び前記再補正の強度を階層毎に変化させる
    請求項1から請求項4のいずれかに記載の画像処理方法。
  6. 前記差分情報を、前記第2階層の前記エッジ情報を用いて補正する際、前記第2階層の前記エッジ情報に応じて補正の強度を変化させる
    請求項1から請求項5のいずれかに記載の画像処理方法。
  7. 注目画素を含み、範囲が順次狭くなる多階層の領域毎に、その領域の画素の画素統計値を算出する画素統計値算出手段と、
    注目画素を含み、範囲が順次狭くなる多階層の領域毎に、エッジ情報を算出するエッジ情報算出手段と、
    当該第1階層の領域の画素統計値と前記第1階層の領域より広い第2階層の領域の画素統計値との差分情報を、前記エッジ情報を用いて補正し、前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正し、再補正後の前記差分情報と前記第2階層の画素統計値とを用いて、前記第1階層の領域の画素統計値を補正し、最大範囲から最小範囲の領域になるまで、前記補正と前記再補正を繰り返すことで、前記注目画素を補正する補正手段と
    を有する画像処理装置。
  8. 前記補正手段は、
    前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも小さい領域である場合には、第1補正量で補正を行い
    前記第3階層の領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、輝度に比例した第2補正量で補正を行う
    請求項7に記載の画像処理装置。
  9. 前記補正手段は、
    前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも小さい領域である場合には、輝度に比例した第1補正量で補正を行い、
    前記第3階層の領域が、輝度が第2の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも大きく、かつ、前記第2の値よりも小さい領域である場合には、前記第1補正量よりも前記輝度の増加に対して補正量の変化が大きく、かつ、輝度に比例した第2補正量で補正を行う
    請求項7に記載の画像処理装置。
  10. 前記補正手段は、
    前記第1階層及び前記第2階層の領域よりも広い領域の第3階層の画素統計値を用いて、補正後の前記差分情報を再補正する際、
    前記第3階層の領域が、輝度が第1の値よりも大きい領域である場合には、補正せず、
    前記第3階層の領域が、輝度が前記第1の値よりも小さい領域である場合には、前記輝度に比例した補正量で補正を行う
    請求項7に記載の画像処理装置。
JP2014512626A 2012-04-26 2013-04-24 画像処理方法、及び画像処理装置 Active JP6256704B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012100911 2012-04-26
JP2012100911 2012-04-26
PCT/JP2013/061970 WO2013161840A1 (ja) 2012-04-26 2013-04-24 画像処理方法、及び画像処理装置

Publications (2)

Publication Number Publication Date
JPWO2013161840A1 JPWO2013161840A1 (ja) 2015-12-24
JP6256704B2 true JP6256704B2 (ja) 2018-01-10

Family

ID=49483148

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014512626A Active JP6256704B2 (ja) 2012-04-26 2013-04-24 画像処理方法、及び画像処理装置

Country Status (4)

Country Link
US (1) US9519958B2 (ja)
EP (1) EP2843617B1 (ja)
JP (1) JP6256704B2 (ja)
WO (1) WO2013161840A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6213558B2 (ja) * 2013-02-28 2017-10-18 日本電気株式会社 画像処理方法、及び画像処理装置
JP6403490B2 (ja) * 2014-08-20 2018-10-10 キヤノン株式会社 画像処理装置、画像形成装置、画像処理方法及びプログラム。
US10438323B2 (en) 2014-09-29 2019-10-08 Nec Corporation Image brightness correction and noise suppression method, device, and recording medium for storing image processing program

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3664231B2 (ja) 2000-08-09 2005-06-22 日本電気株式会社 カラー画像処理装置
JP2002183727A (ja) * 2000-12-19 2002-06-28 Konica Corp 画像処理装置
EP1217826A3 (en) 2000-12-19 2005-05-25 Konica Corporation Image processing apparatus
WO2006106919A1 (ja) * 2005-03-31 2006-10-12 Nikon Corporation 画像処理方法
JP2007018379A (ja) * 2005-07-08 2007-01-25 Konica Minolta Medical & Graphic Inc 画像処理方法及び画像処理装置
EP2082566B1 (en) * 2006-10-18 2016-08-31 Robert Bosch GmbH Image processing system, method and computer program for contrast enhancement of images
JP2011041183A (ja) * 2009-08-18 2011-02-24 Sony Corp 画像処理装置および方法、並びにプログラム
JP6146574B2 (ja) * 2011-08-22 2017-06-14 日本電気株式会社 ノイズ除去装置、ノイズ除去方法及びプログラム
JP6256703B2 (ja) * 2012-04-26 2018-01-10 日本電気株式会社 画像処理方法、及び画像処理装置
WO2013161839A1 (ja) * 2012-04-26 2013-10-31 日本電気株式会社 画像処理方法、及び画像処理装置
JP6213558B2 (ja) * 2013-02-28 2017-10-18 日本電気株式会社 画像処理方法、及び画像処理装置

Also Published As

Publication number Publication date
US9519958B2 (en) 2016-12-13
EP2843617A4 (en) 2016-03-09
US20150086129A1 (en) 2015-03-26
JPWO2013161840A1 (ja) 2015-12-24
EP2843617A1 (en) 2015-03-04
EP2843617B1 (en) 2021-01-06
WO2013161840A1 (ja) 2013-10-31

Similar Documents

Publication Publication Date Title
JP6213558B2 (ja) 画像処理方法、及び画像処理装置
JP6146574B2 (ja) ノイズ除去装置、ノイズ除去方法及びプログラム
JP6369150B2 (ja) アンチエイリアシングエッジを回復するフィルタリング方法及びフィルタリング装置
JP6249173B2 (ja) 画像処理方法、及び画像処理装置
TWI460681B (zh) 影像的邊緣處理方法及影像處理裝置
US20150187051A1 (en) Method and apparatus for estimating image noise
JP6256703B2 (ja) 画像処理方法、及び画像処理装置
JP6256704B2 (ja) 画像処理方法、及び画像処理装置
JP4381240B2 (ja) 画像処理装置及びこれを用いた画像表示装置、並びに画像処理方法及びこれをコンピュータに実行させるためのプログラム
JP6256680B2 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
JP6079962B2 (ja) 画像処理方法、及び画像処理装置
JP5933690B2 (ja) 画像処理装置及び方法、並びに画像処理プログラム
JP4913246B1 (ja) エッジ強調方法またはエッジ強調度演算方法
JP5350497B2 (ja) 動き検出装置、制御プログラム、および集積回路
TWI386868B (zh) 使用內容調適懲罰函數的移動偵測方法
JP4992438B2 (ja) 画像処理装置および画像処理プログラム
JP2009212750A (ja) 画像処理装置および方法
JP2018160746A5 (ja)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160303

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170516

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171121

R150 Certificate of patent or registration of utility model

Ref document number: 6256704

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150