JP2008259242A - 画像処理装置、画像処理方法、記録媒体、およびプログラム - Google Patents

画像処理装置、画像処理方法、記録媒体、およびプログラム Download PDF

Info

Publication number
JP2008259242A
JP2008259242A JP2008150629A JP2008150629A JP2008259242A JP 2008259242 A JP2008259242 A JP 2008259242A JP 2008150629 A JP2008150629 A JP 2008150629A JP 2008150629 A JP2008150629 A JP 2008150629A JP 2008259242 A JP2008259242 A JP 2008259242A
Authority
JP
Japan
Prior art keywords
image
luminance
gain value
pixels constituting
contrast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008150629A
Other languages
English (en)
Other versions
JP4632100B2 (ja
Inventor
Tomoo Mitsunaga
知生 光永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2008150629A priority Critical patent/JP4632100B2/ja
Publication of JP2008259242A publication Critical patent/JP2008259242A/ja
Application granted granted Critical
Publication of JP4632100B2 publication Critical patent/JP4632100B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Picture Signal Circuits (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

【課題】使用するメモリの容量がより小さく、演算量が少なくて、ハードウェア化が容易であり、かつ、適切に階調圧縮された画像のコントラストを強調する。
【解決手段】ステップS21で、広DR画像Lの輝度が対数変換される。ステップS22で、対数トーンカーブ補正画像logLcが生成される。ステップS23で、対数縮小画像logLclが生成され、さらに、補間演算により、対数平滑化画像の画素の輝度logLcl(p)が算出される。ステップS24で、ゲイン値g(p)が各画素位置に対して算出される。ステップS25で、対数階調圧縮画像logLuの画素の輝度logLu(p)が算出される。ステップS26で、輝度logLu(p)が対数逆変換される。本発明は、ディジタルビデオカメラ等の撮影デバイス、ディスプレイ、プリンタ等の再現デバイスに適用することができる。
【選択図】図16

Description

本発明は、画像処理装置、画像処理方法、記録媒体、およびプログラムに関し、特に、見栄得を損なうことなく、画像のコントラストを強調する場合に用いて好適な画像処理装置、画像処理方法、記録媒体、およびプログラムに関する。
従来、CCD(Charge Coupled Device)やCMOS(Complementary Metal-Oxide Semiconductor)等の固体撮像素子がビデオカメラやスチルカメラなどの撮像機器、FA(Factory Automation)における部品検査装置、ME(Medical Electronics)における電子内視鏡などの光計測装置等に幅広く利用されている。
近年、これらの固体撮像素子を用いて光学フィルム写真に匹敵するような画素値のダイナミックレンジが広い画像(以下、広DR画像と記述する)を得るための技術が多数提案されている(例えば、特許文献1参照)。
一方、動画像や静止画像を表示するCRT(Cathode Ray Tube)、LCD(Liquid Crystal Display)等の表示装置、プロジェクタ等の投影装置、各種の印刷装置は、現在においても、対応できる画素値のダイナミックレンジは広域化されておらず、対応可能な輝度階調に制限がある。このため、広DR画像を撮影したとしても、それをその状態で表示、投影あるいは印刷可能な装置が存在していないのが現状である。
そこで、当面においては、広DR画像の画素値のダイナミックレンジを狭めて、換言すれば、輝度階調を圧縮して、表示装置などのダイナミックレンジに適応させた画像(以下、狭DR画像と記述する)を生成するための技術(以下、階調圧縮技術と記述する)が必要とされている。
ここで、従来において提案された階調圧縮技術について説明する。階調圧縮技術は、単純には、広DR画像の画素値の階調を、表示装置等が対応可能なより狭いダイナミックレンジの階調に合わせて再配分することにより実現される。
しかしながら、上述したように、単に、広DR画像の画素値の階調を、狭いダイナミックレンジに均等に階調を再配分しただけでは、画像全体の輝度変化が小さくなってしまい、コントラストが低下した見栄得が悪い画像に変換されてしまうことになる。そこで、従来、コントラスト低下を抑制することができる階調圧縮技術がいくつか提案されている。以下、従来提案されている3種類の階調圧縮技術について説明する。
第1の階調圧縮技術としては、入力する広DR画像の輝度のヒストグラムに基づき、階調の再配分規則を適応的に決定する(具体的には、階調変換曲線を、入力画像のヒストグラムを元に算出する)技術を挙げることができる。第1の階調圧縮技術は、画像中の重要な被写体が占める面積の比率は大きいことを前提として、ヒストグラムのピーク近辺の輝度値になるべく多くの階調を配分するように階調変換曲線を決定するようにし、少なくとも重要な被写体におけるコントラスト低下を抑制しようとするものである(例えば、特許文献2参照)。
しかしながら、このような階調配分のみの工夫ではあらゆる状況で満足が得られる結果を得ることは難しい。例えば、重要な被写体が画像中に複数存在する場合、背景が均一な輝度であって、かつ、比較的広い面積を占めている場合(例えば青空)などでは、しばしば被写体に十分な階調が配分されなくなることがある。
第2の階調圧縮技術としては、階調変換前または後のどちらか一方において画像中の高周波成分を強調する技術を挙げることができる。第2の階調圧縮技術は、階調変換によって失われた(または階調変換によって失われると思われる)コントラストを画像から見積もり、その分をアンシャープマスキングなどの高周波強調フィルタを用いて補償するものである(例えば、特許文献3参照)。
第2の階調圧縮技術は、第1の階調圧縮技術のように画像の構図に依存する問題は生じないという利点がある。しかしながら、高周波強調フィルタは被写体の輪郭部分においてオーバーシュートを生じたり、平坦な部分においてノイズを強調したりするなどの問題があり、見栄得が良い画像を得られないことがある。
第3の階調変換技術としては、広DR画像を低周波成分画像と高周波成分画像に分離し、高周波成分画像はそのままに、低周波成分画像に対して適当な階調変換処理を施して、最後にそれらを1つの画像に加算合成する技術を挙げることができる(例えば、特許文献4参照)。
第3の階調変換技術によれば、広DR画像の高周波成分は階調圧縮を施さないので、生成される画像のコントラスト低下を防ぐことができる。しかしながら、第3の階調変換技術も、第2の階調変換技術と同様に、被写体の輪郭部分において輝度のオーバーシュートを生じたり、平坦な部分においてノイズを強調したりするなどの問題があるので、低周波成分画像と高周波成分画像に分離する処理に非線形フィルタ(例えば、メディアンフィルタ)を用いることにより、この問題を解決する方法も提案されている(例えば、特許文献4参照)。
特開平8−223491号公報 特開平9−331469号公報 特開2000−115534号公報 特開平9−214766号公報
以上に説明した第1乃至第3の階調圧縮技術をまとめると以下の課題が存在する。
第1に、高周波成分を強調することに伴い、被写体の輪郭部分において輝度のオーバーシュートが生じることである。これを抑止するためには、比較的大きいサイズ(20×20画素)の2次元非線形フィルタが必要であるが、このようなサイズの2次元非線形フィルタをソフトウェアとして実現するには演算コストが非常に大きくなる課題があり、ハードウェアとして実現するためにはディレイラインを大量に必要とするため回路規模が大きくなってしまう課題があった。
第2に、高輝度域および低輝度域における高周波成分のコントラスト強調量の制御についてである。上述した第2および第3の階調圧縮技術では、輝度を低周波成分と高周波成分に分離して、低周波成分を比較的抑制し、高周波成分を強調することにより、コントラストを保持した階調圧縮を行うことが共通している。
しかしながら、表示装置などが許容する最大輝度と最小輝度の近辺では高周波成分を強調することによって輝度のクリッピングが生じて結果的に画像のディテールが失われ、適切な階調変換が行われたとはいえないので、輝度のクリッピングが生じないような対処が必要である課題があった。
さらに、輝度のクリッピングが生じないような状態でも、コントラストの強調が強すぎれば、被写体の輪郭部分が不自然に強調された画像となってしまう課題があった。
本発明はこのような状況に鑑みてなされたものであり、使用するメモリの容量がより小さく、演算が少なくて、ハードウェア化が容易であり、かつ、適切に画像のコントラストを強調できるようにするものである。
本発明の第1の側面である画像処理装置は、入力された画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化手段と、入力された画像を構成する画素の輝度L、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正手段と、ゲイン値gを設定するゲイン値設定手段とを含み、前記ゲイン値設定手段は、ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する。
前記ゲイン値設定手段は、ゲイン値gを次式
g=1+(g0−1)・attn(Th1,Th2,Lc
に従って設定するようにすることができる。
前記ゲイン値設定手段は、減衰値attn(Th1,Th2,Lc)を、次式
attn(Th1,Th2,Lc)=|(Lc−Th1)/(Th2−Th1)|
(2Th1−Th2≦Lc≦Th2
attn(Th1,Th2,Lc)=1
(Lc<2Th1−Th2,Th2<Lc
に従って算出するようにすることができる。
前記コントラスト補正手段は、コントラスト補正画像を構成する画素の輝度Luを、次式
u=g・(Lc−Ll)+Ll
に基づいて算出するようにすることができる。
前記第1の輝度閾値Th1は、中庸のグレイレベルであり、前記第2の輝度閾値Th2は、最大の白レベルであるようにすることができる。
本発明の第1の側面である画像処理装置は、平滑化手段に入力する前の画像を構成する画素の輝度Lcを対数変換する対数変換手段と、コントラスト補正手段によって出力されたコントラスト補正画像を構成する画素の輝度を対数逆変換する対数逆変換手段とをさらに含むことができる。
本発明の第1の側面である画像処理方法は、入力された画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、入力された画像を構成する画素の輝度L、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップの処理は、ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する。
本発明の第1の側面である記録媒体は、入力された画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、入力された画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップは、ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する処理をコンピュータに実行させるプログラムが記録されている。
本発明の第1の側面であるプログラムは、入力された画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、入力された画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップは、ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する処理をコンピュータに実行させる。
本発明の第1の側面においては、入力された画像を構成する画素の輝度Lcを元に平滑化画像が生成され、入力された画像を構成する画素の輝度L、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像が生成される。ゲイン値gは、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定される。
本発明の第2の側面である画像処理装置は、入力された画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換手段と、トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化手段と、トーン変換画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正手段と、変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、ゲイン値gを設定するゲイン値設定手段とを含み、前記ゲイン値設定手段は、ゲイン値gを、初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、およびトーン変換画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する。
前記ゲイン値設定手段は、ゲイン値gを次式
g=1+(g0−1)・attn(Th1,Th2,Lc
に従って設定するようにすることができる。
前記ゲイン値設定手段は、減衰値attn(Th1,Th2,Lc)を、次式
attn(Th1,Th2,Lc)=|(Lc−Th1)/(Th2−Th1)|
(2Th1−Th2≦Lc≦Th2
attn(Th1,Th2,Lc)=1
(Lc<2Th1−Th2,Th2<Lc
に従って算出するようにすることができる。
前記コントラスト補正手段は、コントラスト補正画像を構成する画素の輝度Luを、次式
u=g・(Lc−Ll)+Ll
に基づいて算出するようにすることができる。
前記第1の輝度閾値Th1は、中庸のグレイレベルであり、前記第2の輝度閾値Th2は、最大の白レベルであるようにすることができる。
本発明の第2の側面である画像処理装置は、トーン変換手段に入力する前の画像を構成する画素の輝度Lを対数変換する対数変換手段と、コントラスト補正手段によって出力されたコントラスト補正画像を構成する画素の輝度を対数逆変換する対数逆変換手段とをさらに含むことができる。
前記平滑化手段は、入力されたトーン変換画像を縮小して、縮小画像を生成する縮小手段と、縮小手段によって生成された縮小画像を構成する画素を用いた補間演算により、平滑化画像の画素の輝度Llを演算する補間手段とを含むようにすることができる。
本発明の第2の側面である画像処理方法は、入力された画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、トーン変換画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップは、ゲイン値gを、初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、およびトーン変換画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する。
本発明の第2の側面である記録媒体は、入力された画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、トーン変換画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップは、ゲイン値gを、初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、およびトーン変換画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する処理をコンピュータに実行させるプログラムが記録されている。
本発明の第2の側面であるプログラムは、入力された画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、トーン変換画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、ゲイン値gを設定するゲイン値設定ステップとを含み、前記ゲイン値設定ステップの処理は、ゲイン値gを、初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、およびトーン変換画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する処理をコンピュータに実行させる。
本発明の第2の側面においては、入力された画像を構成する画素の輝度Lが、変換関数に基づいてトーン変換画像に変換され、トーン変換画像を構成する画素の輝度Lcを元に平滑化画像が生成される。また、トーン変換画像を構成する画素の輝度Lc、平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像が生成される。ゲイン値gは、変換関数の傾きγの逆数1/γ、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、およびトーン変換画像を構成する画素の輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定される。
以上のように、本発明によれば、使用するメモリの容量がより小さく、演算量が少なくて、ハードウェア化が容易であり、かつ、適切に階調圧縮された画像のコントラストを強調することが可能となる。
図1は、本発明を適用した画像処理システムの構成例を示している。この画像処理システム1は、被写体を撮影し、通常よりも広いダイナミックレンジの画素値(輝度)を有する画素から構成される広DR画像Lを生成するビデオカメラ2、ビデオカメラ2によって生成された広DR画像Lの階調を、ディスプレイ11が表示可能な階調の範囲に圧縮する画像処理装置10、および画像処理装置10によって生成される階調圧縮画像Luを表示するディスプレイ11から構成される。
ビデオカメラ2は、被写体の光画像を集光するレンズ3、光画像の光量を調整する絞り4、集光された光画像を光電変換して輝度信号を生成するCCDイメージセンサ5、生成された輝度信号からノイズ成分を除去する前置増幅器(Pre-amp.)6、ノイズ成分が除去された輝度信号を、例えば14乃至16ビット程度のビット幅のディジタルデータに変換するADコンバータ(A/D)7、およびディジタル化された輝度を有する画素から構成される広DR画像Lを画像処理装置10に出力するI/Oインタフェース(I/O)8から構成される。
図2は、画像処理システム1の動作概要を示している。ステップS1において、ビデオカメラ2は、被写体を撮影し、対応する広DR画像Lを生成して、画像処理装置10に出力する。ステップS2において、画像処理装置10は、広DR画像Lに階調圧縮処理を施して階調圧縮画像Luを生成し、ディスプレイ11に出力する。ステップS3において、ディスプレイ11は、階調圧縮画像Luを表示する。
次に、図3は、画像処理装置10の第1の構成例を示している。画像処理装置10のトーンカーブ補正部21は、ビデオカメラ2から入力される広DR画像Lを、予め用意されているトーンカーブに基づいて、階調を圧縮する方向に補正し、その結果として得られるトーンカーブ補正画像Lcを、平滑化輝度生成部22、ゲイン値設定部23、およびコントラスト補正部24に出力する。なお、このトーンカーブ補正画像Lcは、階調が圧縮されており、階調が圧縮されたことに起因して、コントラストが弱められたものとなっている。また、トーンカーブ補正部21は、補正に用いたトーンカーブの傾きを示す代表値γをゲイン値設定部23に出力する。
図4は、トーンカーブ補正部21の構成例を示している。トーンカーブ補正部21のLUTメモリ31には、図5に示すような単調増加のトーンカーブに相当するルックアップテーブル(以下、LUTと記述する)と、トーンカーブの傾きを示す代表値γが予め保持されている。なお、LUTの代わりに、トーンカーブに相当する関数を保持するようにしてもよい。テーブル参照部32は、LUTメモリ31に保持されているLUTに基づき、広DR画像Lを、トーンカーブ補正画像Lcに補正する。
図5は、トーンカーブの一例を示しており、横軸が広DR画像Lの輝度を、縦軸が補正後のトーンカーブ補正画像Lcの輝度を、それぞれ[0,1]に正規化して表示している。図5に示されたトーンカーブは、正規化された広DR画像Lの輝度値が0.5よりも大きい場合にはその値を補正せず、正規化された広DR画像Lの輝度値が0.5よりも小さい場合には、その値が小さいほど、大きな補正量で補正する。つまり、ディスプレイ11に表示されたとき、画像の中の暗い領域が黒くつぶれないように補正が行われる。なお、トーンカーブの傾きを示す代表値γは、例えば、輝度全域の傾きをそれぞれ求めて、それらの平均値を代表値γとすればよい。例えば、図5に示されたトーンカーブの代表値は、γ=0.94である。
図3に戻る。平滑化輝度生成部22は、トーンカーブ補正画像Lcの輝度を平滑化し、得られる平滑化画像の輝度Lcl(p)をコントラスト補正部24に出力する。図6は、平滑化輝度生成部22の構成例を示している。
平滑化輝度生成部22の縮小画像生成部41は、トーンカーブ補正部21から入力されたトーンカーブ補正画像Lcの画素を、その画素位置に対応してm×nブロックに分類し、各ブロックに分類された画素の輝度の平均値を画素とする縮小画像Lclを生成する。縮小画像メモリ42は、生成されたm×n画素の縮小画像Lclを保持する。補間部43は、順次指定される画素位置pの輝度を、縮小画像メモリ42に保持されている縮小画像の画素を用いた補間処理により算出して、得られた補間値Lcl(p)を、平滑化画像の画素の輝度としてコントラスト補正部24に出力する。ここで、p=(x,y)は、画素位置を示す座標またはベクトルである。従って、補間部43から出力される平滑化画像のサイズは、トーンカーブ補正画像Lcのサイズは同一である。
すなわち、平滑化輝度生成部22では、トーンカーブ補正画像Lcが縮小されて縮小画像Lclが生成され、保持された縮小画像Lclが利用されて平滑化画像の輝度Lcl(p)が1画素ずつ補間演算によって算出されることになる。
従来では、上述したように、効果的な階調圧縮処理を実施するためには比較的大きなサイズのフィルタ処理が必要であったが、平滑化輝度生成部22では、m×n画素の縮小画像を保持する縮小画像メモリ42を設ければ済むことになる。
図7は、図6の縮小画像生成部41の構成例を示している。縮小画像生成部41のソート部51は、前段のトーンカーブ補正部21から入力されたトーンカーブ補正画像Lcの画素を、その画素位置に応じてm×n個のブロックに分類し、平均値計算部52−1乃至52−N(=m×n)に供給する。例えば、1番目のブロックに分類されたものは平均値計算部52−1に供給され、2番目のブロックに分類されたものは平均値計算部52−2に供給される。以下同様であり、N番目のブロックに分類されたものは平均値計算部52−Nに供給される。以下、平均値計算部52−1乃至52−Nを個々に区別する必要がない場合、単に平均値計算部72と記述する。
平均値計算部52−i(i=1,2,…,N)は、i番目のブロックに分類されたトーンカーブ補正画像Lcの画素の輝度の平均値を算出して、合成部53に出力する。合成部53は、平均値計算部52−iからそれぞれ入力される輝度の平均値を画素値とするm×n画素の縮小画像を生成する。
図8は、図7の平均値計算部52の構成例を示している。平均値計算部52の加算器61は、前段のソート部51から入力されるトーンカーブ補正画像Lcの輝度に、レジスタ(r)62が保持する値を加算して、レジスタ(r)62が保持する値を更新する。除算器63は、レジスタ62が最終的に保持している値を、1個のブロックを構成する画素数Qで除算することにより、1個のブロックに分類されたQ個の画素の輝度の平均値を算出する。
図9は、図6の補間部43の構成例を示している。補間部43の近傍選択部71は、補間位置pの入力を受けて、縮小画像メモリ42に保持されているm×n画素の縮小画像Lclから、補間位置pの近傍の4×4画素の輝度a[4][4]を取得して、積和部74に出力する。
ここでa[i][j]の表記は、輝度aがi×jの2次元配列データであることを示す。また、近傍選択部71は、取得した輝度a[4][4]と補間位置pとの水平方向の位置ずれ量dx、垂直方向の位置ずれ量dyを、それぞれ、水平係数算出部72または垂直係数算出部73に出力する。
ここで、補間位置p、近傍の輝度a[4][4]、位置ずれ量dx,dyの関係について、図10を参照して説明する。
図10のm×nのマス目は、縮小画像Lclを構成するm×n画素を表している。いま、補間位置p=(px,py)が与えられたとすると、補間位置pに対応する縮小画像Lcl上の位置qは、q=(qx,qy)=(px/bx−0.5,py/by−0.5)である。ただし、(bx,by)=(トーンカーブ補正画像Lcの水平画素数/m,トーンカーブ補正画像Lcの垂直画素数/n)である。
補間位置pに対応する縮小画像Lcl上の位置qから近傍の画素を得るには、図10においては斜線で示されたqx−2<x<qx+2、qy−2<y<qy+2の範囲に位置する縮小画像Lclの画素を取得すればよい。斜線で示された領域内の4×4の”+”マークで示された位置が取得される画素の位置である。近傍画素と補間位置pのずれ量(dx,dy)は、補間位置qの左下方向の最も近い画素との差分とする。すなわち、ずれ量(dx,dy)=(qxの小数部,qyの小数部)である。
図9に戻る。水平係数算出部72は、近傍選択部71から入力された水平方向ずれ量dxに基づき、水平方向の3次補間係数kx[4]を計算する。同様に、垂直係数算出部73は、近傍選択部71から入力された垂直方向ずれ量dyに基づき、垂直方向の3次補間係数ky[4]を計算する。
例えば、水平方向の3次補間係数kx[4]は、次式(1)を用いて計算する。
Figure 2008259242
…(1)
また、例えば、垂直方向の3次補間係数ky[4]は、次式(2)を用いて計算する。
Figure 2008259242
…(2)
なお、3次補間係数kx[4],ky[4]の計算には、上述した式(1),(2)の他、十分に滑らかな補間が得られるならば、任意の計算式を用いることができる。
積和部74は、近傍の画素の輝度a[4][4]と、水平方向の補間係数kx[4]および垂直方向の補間係数ky[4]との積和計算により、縮小画像Lclの補間位置pの補間値Lcl(p)を、次式(3)を用いて算出する。
Figure 2008259242
…(3)
図3に戻る。ゲイン設定部23は、トーンカーブ補正部21から入力される代表値γに基づき、コントラスト補正部24において平滑化画像の輝度Lcl(p)のコントラストを補正するときの補正量を調整するゲイン値g(p)を各画素位置に対して算出し、コントラスト補正部24に出力する。
ここで、ゲイン値g(p)について説明する。ゲイン値g(p)=1である場合、コントラスト補正部24においてコントラストは強調も抑制も行われない。ゲイン値g(p)>1である場合、その値に対応してコントラストが強調される。反対に、ゲイン値g(p)<1である場合、その値に対応してコントラストが抑制される。
ゲイン値設定の概略を説明する。トーンカーブ補正画像Lcのコントラストは、トーンカーブ補正による階調圧縮によって既に抑制されているが、その抑制量はトーンカーブの傾きに依存している。例えば強い階調圧縮を行うように傾きの小さなトーンカーブが適用されていれば、コントラストの抑制も強くなされていることになる。また、例えばトーンカーブとして傾き1の直線が適用されていれば、画像が変化しない、すなわち、コントラストの抑制は行われていないことになる。
そこで、ゲイン値設定部23では、トーンカーブの傾きの代表値γが1よりも小さい場合には、ゲイン値が1より大きくなるように、トーンカーブの傾きの代表値γの逆数1/γをゲイン値として採用する。
また、入力されるトーンカーブ補正された輝度Lcが白レベルまたは黒レベルに近い場合には、中間輝度域と同じようなコントラスト強調を行うとクリッピングが生じて逆に画像のディテールを失う結果となるので、入力されたトーンカーブ補正された輝度Lcが白レベルまたは黒レベルに近くなるに従って、ゲイン値が1に近づくようする。
すなわち、代表値γの逆数1/γ=g0として、ゲイン値g(p)を次式(4)のように算出する。
g(p)=1+(g0−1)×attn(p)
…(4)
ここで、attn(p)は、減衰する係数であって、次式(5)を用いて計算される。
Figure 2008259242
…(5)
なお、式(5)において、Lgrayは、中庸なグレイレベルの輝度を示し、Lwhiteは、白クリップレベル(最大の白レベル)の輝度を示しており、どちらも予め設定されている定数である。
図11は、ゲイン値設定部23の構成例を示している。除算器81は、前段から入力される代表値γの逆数1/γ=g0を算出して減算器82に出力する。減算器82は、(g0−1)を演算して乗算器88に出力する。
減算器83は、トーンカーブ補正画像Lcの各輝度と、中庸なグレイレベルの輝度Lgrayの差(Lc−Lgray)を演算して、除算器85に出力する。減算器84は、白クリップレベルの輝度Lwhiteと、輝度Lgrayの差(Lwhite−Lgray)を演算して、除算器85に出力する。除算器85は、減算器83の出力(Lc−Lgray)を、減算器84の出力(Lwhite−Lgray)で除算して、絶対値計算器86に出力する。絶対値計算器86は、除算器85の出力の絶対値を計算してクリップ器87に出力する。クリップ器87は、絶対値計算器86の出力が1を超過する場合、その値を1にクリッピングし、絶対値計算器86の出力が1を超過しない場合、その値をそのまま、attn(p)として乗算器88に出力する。
乗算器88は、減算器82の出力に、クリップ器87の出力を乗算して、加算器89に出力する。加算器89は、乗算器88の出力に1を加算し、演算結果をゲイン値g(p)として後段に出力する。
図3に戻る。コントラスト補正部24は、ゲイン値設定部23から入力される各画素位置pのゲイン値g(p)および平滑化輝度生成部22から入力される平滑化画像の輝度Lcl(p)に基づき、コントラストが弱められているトーンカーブ補正画像Lcのコントラストを強調して階調圧縮画像Luを生成する。
図12は、コントラスト補正部24の構成例を示している。コントラスト補正部24の減算器91は、トーンカーブ補正画像Lcの各画素の輝度Lc(p)と、平滑化画像の対応する画素の輝度(すなわち、縮小画像の補間値Lcl(p))との差(Lc(p)−Lcl(p))を演算して、乗算器92に出力する。乗算器92は、減算器91の出力と、ゲイン値設定部23から入力されたゲイン値g(p)との積を演算して、加算器93に出力する。加算器93は、乗算器92の出力に、平滑化画像の画素の輝度(縮小画像の補間値Lcl(p))を加算して、その結果得られた輝度Lu(p)を、コントラスト補正がなされた階調圧縮画像Luを構成する画素の輝度として後段に出力する。
なお、平滑化画像の画素の輝度(縮小画像の補間値Lcl(p))は、m×n画素の縮小画像Lclの画素を元にして補間された値であるから、縮小前のトーンカーブ補正画像Lcのごく低周波域成分だけをもつものである。
従って、減算器91の出力(Lc(p)−Lcl(p))は、元のトーンカーブ補正画像logLcから、ごく低域成分だけを差し引いたものとなる。このように輝度信号を、ごく低周波域の成分とそれ以外の成分に分離し、そのうち、低周波域成分以外(減算器91の出力)を、ゲイン値g(p)を乗算することによってコントラストを強調した後、再び加算器93により合成したものが、コントラスト補正がなされた階調圧縮画像の輝度Lu(p)である。
このように、コントラスト補正部24では、ごく低周波域を除く、低中周波域から高周波域の成分が同じゲイン値g(p)で強調されるようになされている。従って、コントラスト補正がなされた階調圧縮画像の輝度Lu(p)は、高周波域だけを強調したときに目立つ、エッジ部分の局所的なオーバーシュートは発生せず、見た目にもごく自然にコントラストが強調された画像が得られるようになされている。
次に、画像処理装置10の第1の構成例による階調圧縮画像生成処理(すなわち、図2のフローチャートを参照して上述したステップS2の処理)の詳細について、図13のフローチャートを参照して説明する。
ステップS11において、トーンカーブ補正部21は、ビデオカメラ2から入力された広DR画像Lの輝度を、予め用意されているLUTに基づいて補正し、その結果として得られるトーンカーブ補正画像Lcを、平滑化輝度生成部22、ゲイン値設定部23、およびコントラスト補正部24に出力する。また、トーンカーブ補正部21は、補正に用いたトーンカーブの傾きを示す代表値γをゲイン値設定部23に出力する。
ステップS12において、平滑化輝度生成部22は、トーンカーブ補正画像Lcを縮小して、縮小画像Lclを生成し、さらに、縮小画像Lclの画素を用いた補間演算により、平滑化画像の画素の輝度Lcl(p)を算出して、コントラスト補正部24に出力する。
ステップS13において、ゲイン設定部23は、トーンカーブ補正部21から入力された代表値γに基づき、コントラスト補正部24において平滑化画像の輝度Lcl(p)のコントラストを補正するときの補正量を調整するゲイン値g(p)を各画素位置に対して算出し、コントラスト補正部24に出力する。
なお、ステップS12の処理と、ステップS13の処理は、並行して実施することが可能である。
ステップS14において、コントラスト補正部24は、ゲイン値設定部23から入力された各画素位置pのゲイン値g(p)および平滑化輝度生成部22から入力される平滑化画像の輝度Lcl(p)に基づき、トーンカーブ補正画像Lcの輝度を補正して、階調圧縮画像Luの画素の輝度Lu(p)を算出する。このようにして得られた、コントラスト補正がなされた階調圧縮画像Luは、高周波域だけを強調したときに目立つ、エッジ部分の局所的なオーバーシュートは発生せず、見た目にもごく自然にコントラストが強調された画像となる。以上で、画像処理装置10の第1の構成例による階調圧縮画像生成処理の説明を終了する。
次に、図14は、画像処理装置10の第2の構成例を示している。この第2の構成例は、図3に示された第1の構成例のトーンカーブ補正部21の上段に、ビデオカメラ1から入力される広DR画像Lの輝度を対数変換する対数変換部101を設け、さらに、第1の構成例のコントラスト補正部24の下段に、コントラスト補正部24の出力を対数逆変換する対数逆変換部102を設けたものである。
画像処理装置10の第2の構成例を構成する対数変換部101および対数逆変換部102以外の構成要素については、図3の第1の構成例と同等であるので、同一の符号を付しており、その説明は適宜省略する。ただし、第2の構成例において、トーンカーブ補正部21乃至コントラスト補正部24は、それぞれ対数変換された輝度を処理することになる。
図15は、第2の構成例におけるトーンカーブ補正部21で適用されるトーンカーブの一例であり、横軸が広DR画像Lの輝度を、縦軸がトーンカーブ補正画像Lcの輝度を、それぞれ[0,1]に正規化して対数軸で表示している。この例のように、単調増加であって、緩やかな逆S字形のトーンカーブを適用すると、高輝度領域と低輝度領域では、階調圧縮があまり強く作用しないので、階調圧縮後でも白ツブレや黒ツブレが少ない良好な色調が得られる。逆に中間輝度域は階調圧縮が強く作用するが、その分だけ、中間輝度域に対しては、コントラスト補正が十分に適用されるので、中間輝度域でもコントラスト劣化のない良好な階調圧縮画像Luを得ることができる。図15に示されたトーンカーブの場合、代表値γ=0.67である。
次に、画像処理装置10の第2の構成例による階調圧縮画像生成処理の詳細について、図16のフローチャートを参照して説明する。
ステップS21において、対数変換部101は、ビデオカメラ2から入力された広DR画像Lの輝度を対数変換し、その結果得られた対数広DR画像logLをトーンカーブ補正部21に出力する。
ステップS22において、トーンカーブ補正部21は、対数広DR画像logL
の輝度を、予め用意されている、例えば、図15に示されたトーンカーブに相当するLUTに基づいて補正し、その結果として得られた対数トーンカーブ補正画像logLcを、平滑化輝度生成部22、ゲイン値設定部23、およびコントラスト補正部24に出力する。また、トーンカーブ補正部21は、補正に用いたトーンカーブの傾きを示す代表値γをゲイン値設定部23に出力する。
ステップS23において、平滑化輝度生成部22は、対数トーンカーブ補正画像logLcを縮小して、対数縮小画像logLclを生成し、さらに、対数縮小画像logLclの画素を用いた補間演算により、対数平滑化画像の画素の輝度logLcl(p)を算出して、コントラスト補正部24に出力する。
ステップS24において、ゲイン設定部23は、トーンカーブ補正部21から入力された代表値γに基づき、コントラスト補正部24において対数平滑化画像の輝度logLcl(p)のコントラストを補正するときの補正量を調整するゲイン値g(p)を各画素位置に対して算出し、コントラスト補正部24に出力する。
なお、ステップS23の処理と、ステップS24の処理は、並行して実施することが可能である。
ステップS25において、コントラスト補正部24は、ゲイン値設定部23から入力された各画素位置pのゲイン値g(p)および平滑化輝度生成部22から入力される対数平滑化画像の輝度logLcl(p)に基づき、対数トーンカーブ補正画像logLcの輝度を補正して、対数階調圧縮画像logLuの画素の輝度logLu(p)を算出し、対数逆変換部102に出力する。
ステップS26において、対数逆変換部102は、対数階調圧縮画像logLuの画素の輝度logLu(p)を対数逆変換して、その結果得られたLu(p)を階調圧縮画像Luの画素の輝度として出力する。
このようにして得られた、コントラスト補正がなされた階調圧縮画像Luは、高輝度領域と低輝度領域では、階調圧縮があまり強く作用しないので、階調圧縮後でも白ツブレや黒ツブレが少ない良好な色調となる。逆に中間輝度域は階調圧縮が強く作用するが、その分だけ、中間輝度域に対しては、コントラスト補正が十分に適用されるので、中間輝度域でもコントラスト劣化のない良好な画像となる。以上で、画像処理装置10の第2の構成例による階調圧縮画像生成処理の説明を終了する。
以上説明したように、本発明の一実施の形態である画像処理装置10によれば、従来の階調圧縮技術に必要であった大量のメモリ(フレームメモリや画素系列データのディレイラインとして使用される)を大幅に削減した構成で、通常よりも広いダイナミックレンジの輝度を有する広DR画像を、見栄得を損なうことなく、表示可能な輝度のダイナミックレンジがより狭いディスプレイ11に表示させることができる階調圧縮画像に変換することが可能となる。また、従来大きなフィルタ処理をもって実現されていた階調圧縮処理と遜色のない階調圧縮画像を得ることができる。
勿論、画像処理装置10は、広DR画像を、ディスプレイ11以外のプリンタやプロジェクタが表現可能なダイナミックレンジに適合させて、広DR画像を階調圧縮画像に変換することが可能である。
なお、本発明は、例えば、ディジタルビデオカメラ、ディジタルスチルカメラの撮影デバイスの他、ディスプレイ、プリンタ、プロジェクタ等の表現デバイスに内蔵される画像信号処理回路に適用することができる。
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
図17は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータ120は、CPU(Central Processing Unit)121を内蔵している。CPU121にはバス124を介して、入出力インタフェース125が接続されている。バス124には、ROM(Read Only Memory)122およびRAM(Random Access Memory)123が接続されている。
入出力インタフェース125には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部126、処理操作画面や処理結果の画像を表示デバイスに出力する出力部127、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部128、ビデオカメラ2等と画像データを通信するI/Oインタフェース129が接続されている。また、磁気ディスク131(フレキシブルディスクを含む)、光ディスク132(CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む)、光磁気ディスク133(MD(Mini Disc)を含む)、もしくは半導体メモリ134などの記録媒体に対してデータを読み書きするドライブ130が接続されている。
CPU121は、ROM122に記憶されているプログラム、または磁気ディスク131乃至半導体メモリ134から読み出されて記憶部128にインストールされ、記憶部128からRAM123にロードされたプログラムに従って各種の処理を実行する。RAM123にはまた、CPU121が各種の処理を実行する上において必要なデータなども適宜記憶される。
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理は勿論、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
本発明を適用した画像処理システムの構成例を示すブロック図である。 図1に示された画像処理システムの動作を説明するフローチャートである。 図1に示された画像処理装置の第1の構成例を示すブロック図である。 図3に示されたトーンカーブ補正部の構成例を示すブロック図である。 画像処理装置の第1の構成例において用いられるトーンカーブの一例を示す図である。 図3に示された平滑化輝度生成部の構成例を示すブロック図である。 図6に示された縮小画像生成部の構成例を示すブロック図である。 図7に示された平均値計算部の構成例を示すブロック図である。 図6に示された補間部の構成例を示すブロック図である。 図6に示された補間部の処理を説明するための図である。 う 図3に示されたゲイン値設定部の構成例を示すブロック図である。 図3に示されたコントラスト補正部の構成例を示すブロック図である。 画像処理装置の第1の構成例による階調圧縮画像生成処理を説明するフローチャートである。 図1に示された画像処理装置の第2の構成例を示すブロック図である。 画像処理装置の第2の構成例において用いられるトーンカーブの一例を示す図である。 画像処理装置の第2の構成例による階調圧縮画像生成処理を説明するフローチャートである。 汎用のパーソナルコンピュータの構成例を示すブロック図である。
符号の説明
1 画像処理システム, 2 ビデオカメラ,5 CCDイメージセンサ, 10 画像処理装置, 11 ディスプレイ, 21 トーンカーブ補正部, 22 平滑化輝度生成部, 23 ゲイン値設定部, 24 コントラスト補正部, 101 対数変換部, 102 対数逆変換部, 121 CPU, 131 磁気ディスク, 132 光ディスク, 133 光磁気ディスク, 134 半導体メモリ

Claims (19)

  1. 画像のコントラストを補正する画像処理装置において、
    入力された前記画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化手段と、
    入力された前記画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正手段と、
    前記ゲイン値gを設定するゲイン値設定手段と
    を含み、
    前記ゲイン値設定手段は、前記ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された前記画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    画像処理装置。
  2. 前記ゲイン値設定手段は、前記ゲイン値gを次式
    g=1+(g0−1)・attn(Th1,Th2,Lc
    に従って設定する
    請求項1に記載の画像処理装置。
  3. 前記ゲイン値設定手段は、前記減衰値attn(Th1,Th2,Lc)を、次式
    attn(Th1,Th2,Lc)=|(Lc−Th1)/(Th2−Th1)|
    (2Th1−Th2≦Lc≦Th2
    attn(Th1,Th2,Lc)=1
    (Lc<2Th1−Th2,Th2<Lc
    に従って算出する
    請求項2に記載の画像処理装置。
  4. 前記コントラスト補正手段は、前記コントラスト補正画像を構成する画素の輝度Luを、次式
    u=g・(Lc−Ll)+Ll
    に基づいて算出する
    請求項1に記載の画像処理装置。
  5. 前記第1の輝度閾値Th1は、中庸のグレイレベルであり、
    前記第2の輝度閾値Th2は、最大の白レベルである
    請求項1に記載の画像処理装置。
  6. 前記平滑化手段に入力する前の前記画像を構成する画素の輝度Lcを対数変換する対数変換手段と、
    前記コントラスト補正手段によって出力された前記コントラスト補正画像を構
    成する画素の輝度を対数逆変換する対数逆変換手段と
    をさらに含む請求項1に記載の画像処理装置。
  7. 画像のコントラストを補正する画像処理装置の画像処理方法において、
    入力された前記画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    入力された前記画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップの処理は、前記ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された前記画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    画像処理方法。
  8. 入力された前記画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    入力された前記画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップは、前記ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された前記画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    処理をコンピュータに実行させるプログラムが記録されている記録媒体。
  9. 入力された前記画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    入力された前記画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップは、前記ゲイン値gを、入力された初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および入力された前記画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    処理をコンピュータに実行させるプログラム。
  10. 画像の輝度の階調を圧縮する画像処理装置において、
    入力された前記画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換手段と、
    前記トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化手段と、
    前記トーン変換画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正手段と、
    前記変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、前記ゲイン値gを設定するゲイン値設定手段と
    を含み、
    前記ゲイン値設定手段は、前記ゲイン値gを、前記初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および前記トーン変換画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    画像処理装置。
  11. 前記ゲイン値設定手段は、前記ゲイン値gを次式
    g=1+(g0−1)・attn(Th1,Th2,Lc
    に従って設定する
    請求項10に記載の画像処理装置。
  12. 前記ゲイン値設定手段は、前記減衰値attn(Th1,Th2,Lc)を、次式
    attn(Th1,Th2,Lc)=|(Lc−Th1)/(Th2−Th1)|
    (2Th1−Th2≦Lc≦Th2
    attn(Th1,Th2,Lc)=1
    (Lc<2Th1−Th2,Th2<Lc
    に従って算出する
    請求項11に記載の画像処理装置。
  13. 前記コントラスト補正手段は、前記コントラスト補正画像を構成する画素の輝度Luを、次式
    u=g・(Lc−Ll)+Ll
    に基づいて算出する
    請求項10に記載の画像処理装置。
  14. 前記第1の輝度閾値Th1は、中庸のグレイレベルであり、
    前記第2の輝度閾値Th2は、最大の白レベルである
    請求項10に記載の画像処理装置。
  15. 前記トーン変換手段に入力する前の前記画像を構成する画素の輝度Lを対数変換する対数変換手段と、
    前記コントラスト補正手段によって出力された前記コントラスト補正画像を構成する画素の輝度を対数逆変換する対数逆変換手段と
    をさらに含む請求項10に記載の画像処理装置。
  16. 前記平滑化手段は、
    入力された前記トーン変換画像を縮小して、縮小画像を生成する縮小手段と、
    前記縮小画像を構成する画素を用いた補間演算により、前記平滑化画像の画素の輝度Llを演算する補間手段と
    を含む
    請求項10に記載の画像処理装置。
  17. 画像の輝度の階調を圧縮する画像処理装置の画像処理方法において、
    入力された前記画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、
    前記トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    前記トーン変換画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップは、前記ゲイン値gを、前記初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および前記トーン変換画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    画像処理方法。
  18. 入力された前記画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、
    前記トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    前記トーン変換画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップは、前記ゲイン値gを、前記初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および前記トーン変換画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    処理をコンピュータに実行させるプログラムが記録されている記録媒体。
  19. 入力された前記画像を構成する画素の輝度Lを、変換関数に基づいて変換し、トーン変換画像を生成する変換ステップと、
    前記トーン変換画像を構成する画素の輝度Lcを平滑化して、平滑化画像を生成する平滑化ステップと、
    前記トーン変換画像を構成する画素の輝度Lc、前記平滑化画像を構成する画素の輝度Ll、およびゲイン値gに基づき、コントラスト補正画像を生成するコントラスト補正ステップと、
    前記変換関数の傾きγの逆数1/γである初期ゲイン値g0に基づき、前記ゲイン値gを設定するゲイン値設定ステップと
    を含み、
    前記ゲイン値設定ステップは、前記ゲイン値gを、前記初期ゲイン値g0、基準ゲイン値1、並びに、第1の輝度閾値Th1、第2の輝度閾値Th2、および前記トーン変換画像を構成する画素の前記輝度Lcによって算出される減衰値attn(Th1,Th2,Lc)に基づいて設定する
    処理をコンピュータに実行させるプログラム。
JP2008150629A 2008-06-09 2008-06-09 画像処理装置、画像処理方法、記録媒体、およびプログラム Expired - Fee Related JP4632100B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008150629A JP4632100B2 (ja) 2008-06-09 2008-06-09 画像処理装置、画像処理方法、記録媒体、およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008150629A JP4632100B2 (ja) 2008-06-09 2008-06-09 画像処理装置、画像処理方法、記録媒体、およびプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003003134A Division JP4214457B2 (ja) 2003-01-09 2003-01-09 画像処理装置および方法、記録媒体、並びにプログラム

Publications (2)

Publication Number Publication Date
JP2008259242A true JP2008259242A (ja) 2008-10-23
JP4632100B2 JP4632100B2 (ja) 2011-02-16

Family

ID=39982280

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008150629A Expired - Fee Related JP4632100B2 (ja) 2008-06-09 2008-06-09 画像処理装置、画像処理方法、記録媒体、およびプログラム

Country Status (1)

Country Link
JP (1) JP4632100B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015064869A (ja) * 2013-08-28 2015-04-09 パナソニックIpマネジメント株式会社 画像処理方法および画像処理装置
CN105190687A (zh) * 2013-05-07 2015-12-23 株式会社电装 图像处理装置以及图像处理方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05110896A (ja) * 1991-10-15 1993-04-30 Matsushita Electric Ind Co Ltd 階調補正回路
JPH10319922A (ja) * 1997-03-14 1998-12-04 Seiko Epson Corp 液晶表示装置のダイナミックレンジ調整方法並びに液晶表示装置及び電子機器
JP2000156871A (ja) * 1998-11-19 2000-06-06 Sony Corp 画像処理装置及び画像処理方法
JP2001257905A (ja) * 2000-03-14 2001-09-21 Sony Corp 映像処理方法および映像処理装置
JP2002016821A (ja) * 2000-04-28 2002-01-18 Fuji Photo Film Co Ltd 画像処理方法および装置並びにそのためのプログラムを記録した記録媒体
JP2002288650A (ja) * 2001-03-26 2002-10-04 Casio Comput Co Ltd 画像処理装置及びデジタルカメラ、画像処理方法、記録媒体

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05110896A (ja) * 1991-10-15 1993-04-30 Matsushita Electric Ind Co Ltd 階調補正回路
JPH10319922A (ja) * 1997-03-14 1998-12-04 Seiko Epson Corp 液晶表示装置のダイナミックレンジ調整方法並びに液晶表示装置及び電子機器
JP2000156871A (ja) * 1998-11-19 2000-06-06 Sony Corp 画像処理装置及び画像処理方法
JP2001257905A (ja) * 2000-03-14 2001-09-21 Sony Corp 映像処理方法および映像処理装置
JP2002016821A (ja) * 2000-04-28 2002-01-18 Fuji Photo Film Co Ltd 画像処理方法および装置並びにそのためのプログラムを記録した記録媒体
JP2002288650A (ja) * 2001-03-26 2002-10-04 Casio Comput Co Ltd 画像処理装置及びデジタルカメラ、画像処理方法、記録媒体

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105190687A (zh) * 2013-05-07 2015-12-23 株式会社电装 图像处理装置以及图像处理方法
JP2015064869A (ja) * 2013-08-28 2015-04-09 パナソニックIpマネジメント株式会社 画像処理方法および画像処理装置

Also Published As

Publication number Publication date
JP4632100B2 (ja) 2011-02-16

Similar Documents

Publication Publication Date Title
JP4214457B2 (ja) 画像処理装置および方法、記録媒体、並びにプログラム
KR101051604B1 (ko) 화상 처리 장치 및 방법
JP4894595B2 (ja) 画像処理装置および方法、並びに、プログラム
JP4595330B2 (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP5003196B2 (ja) 画像処理装置および方法、並びに、プログラム
JP4687320B2 (ja) 画像処理装置および方法、記録媒体、並びに、プログラム
US8411991B2 (en) Image processing apparatus, image processing method, and program
JP4556276B2 (ja) 画像処理回路及び画像処理方法
EP2624204B1 (en) Image processing apparatus and method of controlling the same
JPWO2006025486A1 (ja) 画像補正処理システム及び画像補正処理方法
US9747674B2 (en) Method and device for converting an image sequence whose luminance values belong to a high dynamic range
JP2008177801A (ja) 撮像装置、ノイズ除去装置、ノイズ除去方法、ノイズ除去方法のプログラム及びノイズ除去方法のプログラムを記録した記録媒体
JP6087612B2 (ja) 画像処理装置および画像処理方法
JP2006115444A (ja) 画像処理方法、画像処理装置、画像処理プログラム、および電子カメラ
JP4161719B2 (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP4872508B2 (ja) 画像処理装置および画像処理方法、並びにプログラム
JP2007180851A (ja) Raw画像の階調変換装置、プログラム、方法、および電子カメラ
JP2011015277A (ja) 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムが記録された記録媒体
US10387999B2 (en) Image processing apparatus, non-transitory computer-readable medium storing computer program, and image processing method
JP4632100B2 (ja) 画像処理装置、画像処理方法、記録媒体、およびプログラム
JP2012028937A (ja) 映像信号補正装置および映像信号補正プログラム
JP2020145553A (ja) 画像処理装置、画像処理方法、及びプログラム
US11647298B2 (en) Image processing apparatus, image capturing apparatus, image processing method, and storage medium
JP5365881B2 (ja) 画像処理装置、画像処理方法
JP2015211320A (ja) 画像処理装置、その制御方法、及びプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100812

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100916

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101021

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101103

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131126

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees