JP3578878B2

JP3578878B2 - 画像処理装置

Info

Publication number: JP3578878B2
Application number: JP31184196A
Authority: JP
Inventors: 文雄神農
Original assignee: Screen Holdings Co Ltd; Dainippon Screen Manufacturing Co Ltd
Current assignee: Screen Holdings Co Ltd; Dainippon Screen Manufacturing Co Ltd
Priority date: 1996-11-22
Filing date: 1996-11-22
Publication date: 2004-10-20
Anticipated expiration: 2016-11-22
Also published as: JPH10155089A

Description

【０００１】
【発明の属する技術分野】
本発明は、画像の階調補間を行う画像処理装置に関する。
【０００２】
【従来の技術】
周知のように、製版用スキャナなどには、階調を有する画像原稿を読みとって得られる画像データの階調値変換を行うための階調値変換装置、いわゆるルックアップテーブル（以下、「ＬＵＴ」とする）が設けられている。そして、この階調値変換は、オペレータが原稿上のハイライト点とシャドウ点とを選択し、それらの点の階調値に基づいて階調値変換曲線を設定し、当該階調値変換曲線に従って入力階調値（読みとられた階調値）を変換するという工程を通じて行われる。
【０００３】
ところで、階調値変換を行った場合に、ＬＵＴから出力される出力階調値の分布が連続しておらず、特定の階調値が欠落する現象が見られることがある。この現象を以下に示す図６を用いて説明する。
【０００４】
図６は、ＬＵＴの階調値変換曲線の一例を示す図である。この図において、横軸がＬＵＴに入力される入力階調値、縦軸が変換されて出力される出力階調値を示している。ＬＵＴに入力される入力階調値は量子化されたディジタル信号であり、また、ＬＵＴから出力される出力階調値もディジタル信号である。ここで、ＬＵＴに入力される入力階調値が量子化されたディジタル信号であるがゆえに、例えば、入力階調値が図中の範囲Ｂに含まれるような値である場合には、出力階調値が比較的密な分布となるのに対して、範囲Ａに含まれるような値の場合には、出力階調値が疎な分布となり、特定の出力階調値の欠落が発生する。なお、図６は、階調値欠落現象に対する理解を容易にするために極端に描いているが、実際のＬＵＴにおいても同様の原理により階調値の欠落が発生する場合がある。
【０００５】
図７は、１枚の画像に含まれる画素のＬＵＴによる処理後の階調値度数分布の一例を示す図である。図示の如く、複数の特定階調値の度数が”０”となっており、本来あるべき階調値が欠落した状態となっている。
【０００６】
【発明が解決しようとする課題】
以上のような問題は、ＬＵＴにおいて扱う信号がディジタル信号であるために起こる本質的な問題であり、以下に述べるような不具合の原因となる。
【０００７】
即ち、まず、図７に示すように、本来あるべき階調値が欠落した状態となっているため、原稿において平滑であった部分が不自然な濃度変化となる可能性がある。また、図７に示すような階調値度数分布を有する画像に対してシャープネス処理（輪郭強調処理）を施した場合、本来平滑であるのにも係わらず特定の階調値が欠落しているために、その階調値の前後の階調値を有する部分が輪郭部分と誤認され、その部分に対して強調処理が行われる可能性がある。そして、本来輪郭でない部分が輪郭として強調されると、画像全体の画質が著しく低下することとなる。
【０００８】
このような課題を解決する方法として、「局所移動平均」を利用することが考えられる。例えば、連続する３つの画素の階調値が「１０８、１０８、１１０」（この場合、１０９の階調値が欠落している）となっている場合に、それらの平均値を注目画素（真ん中の画素）の階調値に置換することにより、それぞれの階調値が「１０８、１０９、１１０」となり、階調値の欠落を改善することができる。ところが、「局所移動平均」では、画像の輪郭部分をも平滑にしてしまうため、いわゆるエッジがぼやけた状態となり、画像の鮮鋭度が失われることとなる。
【０００９】
そこで、本発明は、上記課題に鑑み、画像の鮮鋭度を維持しつつ、階調値の補間を行うことができる画像処理装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】
上記課題を解決するため、請求項１の発明は、階調値が欠落した第１の階調を有する画像の階調補間を行う画像処理装置において、（ａ）前記第１の階調の画像を前記第１の階調よりも大きい第２の階調に拡張する階調拡張手段と、（ｂ）前記第２の階調に拡張された画像上の注目画素の周辺画素階調値の平均値を算出する周辺画素平均値算出手段と、（ｃ）前記第１の階調と前記第２の階調との階調比に応じてしきい値を決定するしきい値決定手段と、（ｄ）前記第２の階調に拡張された画像上の前記注目画素の階調値と前記平均値との階調値差を前記しきい値と比較する比較手段と、（ｅ）前記比較の結果、前記階調値差が前記しきい値未満であることが判明した場合には、前記注目画素の階調値を前記平均値に置換する置換手段と、（ｆ）前記置換手段による置換後の画像を前記第１の階調に圧縮する階調圧縮手段とを備えている。
【００１１】
また、請求項２の発明は、請求項１の発明に係る画像処理装置において、前記第１の階調をｎビットとし、前記第２の階調をｍビットとしたときに、前記しきい値決定手段に前記しきい値を２^{（ｍ−ｎ）}とさせている。
【００１２】
【発明の実施の形態】
以下、図面を参照しつつ本発明の実施の形態について詳細に説明するが、それに先立って本明細書中で使用する用語の意味について明確にしておく。
【００１３】
まず、「階調値」とは、画像を構成する各画素が有する濃度情報を表現する値であり、グレースケール画像の場合白黒の濃淡を示す値であり、また、カラー画像の場合、例えば「Ｒ、Ｇ、Ｂ」のそれぞれの濃度を示す値である。なお、以下の本実施形態中においては、カラー画像を取り扱う場合について説明する。
【００１４】
また、「階調」とは、階調値がとり得る段階を表現する用語であり、例えば８ビットの階調では２^８段階の階調値が存在し得るし、１６ビットの階調では２^１６段階の階調値が存在し得る。
【００１５】
【Ａ．画像処理装置の構成】
図１は、本発明に係る画像処理装置の要部概略構成を示すブロック図である。この画像処理装置１００には装置外部に画像入力部５０と画像出力部６０とが接続されている。
【００１６】
画像入力部５０は、写真やフィルムなどの原稿を光学的に読み取り、その読み取った情報を画像データとして画像処理装置１００に与える機能を有する。この機能を実現するため、画像入力部５０は、撮像部５１とＡ／Ｄ変換部５２とフレームメモリ５３とＬＵＴ５４とインターフェイス５５とを備えている。撮像部５１は、原稿の情報をＲ、Ｇ、Ｂの各成分ごとにアナログ信号として読み取りＡ／Ｄ変換部５２に伝達する。そして、読み取られた情報はディジタル信号に変換されて、フレームメモリ５３に格納される。従って、フレームメモリ５３に格納されているデータは、画像を構成する各画素のＲ、Ｇ、Ｂのそれぞれについての量子化された階調値である。そして、上述したように、画像入力部５０はこれらの階調値に階調値変換を行うべく、ＬＵＴ５４による処理を行った後、インターフェイス５５を介して画像処理装置１００にデータ転送する。
【００１７】
画像処理装置１００は、画像入力部５０から受け取った画像データに対して種々の画像処理を行う装置であり、記憶部１０と制御部２０とを備えている。記憶部１０は、原画像保持部１１と、画像情報保持部１２と、出力画像保持部１３とを備えており、画像入力部５０から転送された画像データを記憶するとともに、画像処理に必要なソフトウェアやパラメータなどを記憶している。
【００１８】
制御部２０は、画像処理や装置全体の管理を行う処理部であり、階調拡張手段２１と、しきい値決定手段２４と、比較分析手段２５と、画素置換処理手段２６と、階調圧縮手段２７とを有している。階調拡張手段２１は、さらに注目画素処理部２２と周辺画素処理部２３とを備えている。制御部２０に備えられたこれら各手段や上記記憶部１０内の各保持部は、画像処理用ソフトウェアに応じて実行される処理内容を表わしており、その処理内容については、さらに後述する。
【００１９】
また、画像処理装置１００は、インターフェイス４０を備えており、当該インターフェイス４０を介して画像出力部６０に接続されている。画像出力部６０は、処理済みの画像データを画像処理装置１００から受け取ってフィルムなどに出力する装置である。
【００２０】
【Ｂ．画像処理装置の動作および処理内容】
次に、上記構成を有する画像処理装置１００の動作および処理内容について説明する。図２は、画像処理装置１００が行う画像処理手順を示すフローチャートである。
【００２１】
まず、処理対象となる画像の原稿が画像入力部５０の撮像部５１によって読み取られ（ステップＳ１）、その読み取られた画像データはＬＵＴ５４による階調値変換を経た後（ステップＳ２）、画像処理装置１００に転送され、原画像保持部１１に記憶される。また、同時に、原画像の階調ビット数（本実施形態においては８ビットとする）が画像情報保持部１２に記憶される。この画像情報保持部１２には、後述する階調拡張後の階調ビット数（本実施形態においては１０ビットとする）も予め格納されている。なお、ここで示す例においては、Ｒ、Ｇ、Ｂのそれぞれについて８ビットの階調を有するカラー画像データが転送され、記憶されるものとする。
【００２２】
ここで、上述したように、ＬＵＴ５４による階調値変換を経た画像データは、特定の階調値が欠落している。そこで、以下に説明するように、本発明に係る画像処理装置１００の特徴である階調値補間処理が行われる。
【００２３】
階調値補間処理は、フィルタリング処理、即ち、画像に対して局所画素群であるフィルタを走査させることによって行われる。図３は、フィルタリング処理を説明するための概念図である。３×３の画素行列で構成され、図中において太線で示されたフィルタＦが原画像保持部１１に記憶されている画像データを有する画像上を走査することによって、局所画素群は選択されることとなる。このときに、フィルタＦは、画像の左上隅を出発点として図中のＸ方向（主走査方向）に走査し、カラー画像の右上隅に達すると、次に、Ｙ方向（副走査方向）に隣接した左端の画素からＸ方向に走査し、以下フィルタＦが画像の右下隅に達するまで同様の手順が繰り返されることとなる。そして、ある時点でのフィルタＦによって走査されている局所画素群が選択された局所画素群となり、当該局所画素群の中央の画素ＦＰが注目画素として、階調値補間処理の対象となる。なお、カラー画像の場合は、Ｒ、Ｇ、Ｂの３つのプレーンを有しており、それぞれのプレーンについてフィルタリング処理が行われる。図４および図５は、フィルタＦの走査によって選択された局所画素群の処理過程の一例を示す図であり、以下、これらの例を適宜参照しつつ階調値補間処理について説明する。
【００２４】
図２に戻って、上記局所画素群が選択されているときに、階調拡張手段２１が画像情報保持部１２に記憶されている拡張前後の階調ビット数を参照しつつ当該局所画素群に対して階調拡張を行う（ステップＳ３）。ここで、階調拡張とは、階調値がとり得る段階を拡げること、すなわち階調表現段階において高密度とすることであり、本実施形態では、８ビットの階調を有する画像データを１０ビットの階調を有する画像データにする。このときに、階調の拡張に対応して、局所画素群を構成する画素の階調値も２^{（１０−８）}倍され、具体的には、８ビットの階調を有する局所画素群の階調値が図４（ａ）に示すような場合、１０ビットの階調に拡張すると、注目画素処理部２２が注目画素の階調値”１２８”を２^{（１０−８）}＝４倍にするとともに、周辺画素処理部２３が注目画素に隣接する周辺４画素の階調値を同様にそれぞれ４倍にする。そして、その結果、局所画素群の階調値は、図４（ｂ）に示すような値となる。なお、この例における周辺４画素は、図示のように注目画素の上下左右に隣接する４画素である。
【００２５】
次に、ステップＳ４に進み、周辺画素処理部２３が、上記乗算された周辺４画素の階調値の平均値を算出する。すなわち、周辺画素処理部２３は、階調の拡張に対応して、周辺画素の乗算を行うとともに、その乗算された結果の平均値を算出する機能をも有している。なお、図４（ｂ）の場合、周辺４画素の階調値の平均値は”５０９”となる。そして、ステップＳ５に進み、上記乗算された注目画素の階調値と周辺４画素の階調値の平均値との差の絶対値を算出する。この例では、その絶対値の値は”３”となる。
【００２６】
一方、このときしきい値決定手段２４が、後述する「比較」に用いるためのしきい値を決定する。そして、しきい値は、階調拡張前後の階調比に応じて決定される。即ち、しきい値決定手段２４は、画像情報保持部１２に記憶されている階調拡張前後の階調ビット数を参照し、拡張前のビット数をｎ拡張後のビット数をｍ（ここでｍ、ｎはｍ＞ｎを満たす整数）としたときに、しきい値を２^{（ｍ−ｎ）}として決定する。従って、この例では、２^{（１０−８）}＝４がしきい値として決定される。
【００２７】
そして、次に、ステップＳ６に進み、比較分析手段２５は、上記差の絶対値がしきい値未満となるか否かを判別する。この例では、差の絶対値”３”がしきい値”４”未満であるため、ステップＳ７に進み、画素置換処理が行われる。
【００２８】
画素置換処理は、画素置換処理手段２６が上記乗算された注目画素の階調値を周辺４画素の階調値の平均値に置換することにより行われる。この例では、図４（ｃ）に示すように、注目画素の階調値が周辺４画素の階調値の平均値”５０９”に置換される。そして、ステップＳ７ａに進み、階調圧縮手段２７が階調圧縮を行う。階調圧縮は、上記階調拡張と逆の処理であり、即ち、階調値がとり得る段階を狭めることであり、本実施形態では、１０ビットの階調を有する画像データを元の８ビットの階調を有する画像データにする。このときに、階調の圧縮に対応して、局所画素群を構成する画素の階調値も２^{（８−１０）}倍される。その結果、この例では、図４（ｄ）に示すような値となる。
【００２９】
図４（ａ）と図４（ｄ）とを比較すると明らかなように、上記階調値補間処理の結果、局所画素群の注目画素の階調値が”１２８”から”１２７”に置換されており、この結果、欠落した階調値が補間されることとなる。
【００３０】
一方、図５に示す例においても、上記と同様に、局所画素群に対して８ビットから１０ビットに階調拡張が行われ（図５（ｂ）の状態）、乗算された周辺４画素の階調値の平均値が算出される。ここでの平均値は、”４８３”となる。従って、乗算された注目画素の階調値と周辺４画素の階調値の平均値との差の絶対値は”１５５”となり、しきい値”４”以上となる。この場合は、図２に示すように、画素置換処理を行うことなく、元の注目画素の階調値のまま階調圧縮処理が行われることとなる（図５（ｃ）の状態）。
【００３１】
図５（ａ）に示す例では、局所画素群内の階調値が急峻な変化をしており、フィルタＦが画像の輪郭部分を走査しているときに対応している。このような場合は、周辺画素の階調値の平均値と注目画素の階調値との差の絶対値がしきい値以上となるため、画素置換処理が行われず、その結果、処理前の画像が有する輪郭部分の鮮鋭度が失われることはない。
【００３２】
図２に戻り、階調圧縮処理の後、その処理済み画素の階調値は出力画像保持部１３に格納される。そして、ステップＳ８に進み、画像上の全ての画素について上記処理が終了したか否かが判断される。そして、全ての画素について処理が終了していない場合には、ステップＳ９に進み、フィルタＦが１画素分走査された後、ステップＳ３〜ステップＳ７ａの一連の処理が繰り返して行われることとなる。
【００３３】
一方、画像上の全ての画素について処理が終了している場合には、出力画像保持部１３に蓄積された画像データがインターフェイス４０を介して画像出力部６０から出力されて画像処理が終了する。なお、ここでの画像出力は必須のものではなく、必要に応じて行えばよい。また、本実施形態においては、カラー画像を処理対象としているため、上記階調値補間処理がＲ、Ｇ、Ｂの３つのプレーンのそれぞれについて行われることとなる。
【００３４】
以上のようにすれば、周辺画素の階調値の平均値と注目画素の階調値との差の絶対値がしきい値未満の場合には、画素置換処理が行われ、欠落した階調値の補間が行われるとともに、しきい値以上の場合には、画素置換処理が行われず、処理前の画像が有する鮮鋭度が維持されることとなる。すなわち、輪郭部分などの鮮鋭度を維持しつつ、必要な箇所のみ階調値の補間を行うことができる。
【００３５】
なお、以上において、しきい値を”２^{（ｍ−ｎ）}”としているのは、階調拡張前の元の階調で考えた場合、注目画素の階調値と周辺画素の階調値の平均値との差が”２^０＝１”未満となるか否かを判別するのと同じ意味である。本発明に係る画像処理装置１００における階調値補間処理は、ＬＵＴによる処理の結果欠落した階調値の補間を目的としており、また、ＬＵＴによる処理の結果欠落する階調値の幅は通常”１”未満である。従って、この目的に鑑みた場合、注目画素の階調値と周辺画素の階調値平均値との差が”１”未満のときのみ階調値補間を行えば十分であり、また、差が”１”以上のときに階調値補間を行うと画像の輪郭部分をも平滑にしてしまうなどの弊害が生じることとなる。そして、しきい値との比較を階調拡張後の階調において行うのは、画像処理装置１００において扱う画像データが量子化されたディジタル信号であるため、”１”未満であるかの否かの判断が困難であるからである。従って、上記実施形態においては、８ビットの階調を１０ビットの階調に拡張していたが、これに限定されるものではなく、他の階調に拡張するものであってもよい。そして、拡張前後の階調比が大きいほど、量子化による弊害が希釈され、正確な階調値補間が行える。
【００３６】
【変形例】
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されるものではない。例えば、上記においては、カラー画像を対象としていたが、これがグレースケール画像であってもかまわない。この場合、白黒の濃淡を示す値を階調値とすることにより上記と同様に、画像の鮮鋭度を維持しつつ、必要な箇所のみ階調値の補間を行うことができる。
【００３７】
また、上記実施形態においては、局所画素群における注目画素の周辺４画素の平均値を算出するようにしていたが、これを例えば周辺８画素の平均値を算出するようにしてもよい。もっとも、本実施形態のようにしても十分な効果が得られる上に、演算量が少なくて済むため処理速度が早い。
【００３８】
【発明の効果】
以上説明したように、請求項１の発明によれば、階調値が欠落した第１の階調の画像を第１の階調よりも大きい第２の階調に拡張する階調拡張手段と、第２の階調に拡張された画像上の注目画素の周辺画素階調値の平均値を算出する周辺画素平均値算出手段と、第１の階調と第２の階調との階調比に応じてしきい値を決定するしきい値決定手段と、第２の階調に拡張された画像上の注目画素の階調値と平均値との階調値差をしきい値と比較する比較手段と、比較の結果階調値差がしきい値未満であることが判明した場合には、注目画素の階調値を平均値に置換する置換手段と、置換手段による置換後の画像を第１の階調に圧縮する階調圧縮手段とを備えているため、階調値差がしきい値未満の場合には、画素置換処理が行われ、欠落した階調値の補間が行われるとともに、しきい値以上の場合には、画素置換処理が行われず、処理前の画像が有する鮮鋭度が維持され、その結果、輪郭部分などの鮮鋭度を維持しつつ、必要な箇所のみ階調値の補間を行うことができる。
【００３９】
また、請求項２の発明によれば、第１の階調をｎビットとし、第２の階調をｍビットとしたときに、しきい値決定手段は、しきい値を２^{（ｍ−ｎ）}としているため、画像の鮮鋭度を維持しつつも、ＬＵＴによる処理の結果欠落した階調値を確実に補間することができる。
【図面の簡単な説明】
【図１】本発明に係る画像処理装置の要部概略構成を示すブロック図である。
【図２】図１の画像処理装置が行う画像処理手順を示すフローチャートである。
【図３】フィルタリング処理を説明するための概念図である。
【図４】フィルタの走査によって選択された局所画素群の処理過程の一例を示す図である。
【図５】フィルタの走査によって選択された局所画素群の処理過程の一例を示す図である。
【図６】ＬＵＴの階調値変換曲線の一例を示す図である。
【図７】１枚の画像に含まれる画素のＬＵＴによる処理後の階調値度数分布の一例を示す図である。
【符号の説明】
２１階調拡張手段
２２注目画素処理部
２３周辺画素処理部
２４しきい値決定手段
２５比較分析手段
２６画素置換処理手段
２７階調圧縮手段

Claims

階調値が欠落した第１の階調を有する画像の階調補間を行う画像処理装置であって、
（ａ）前記第１の階調の画像を前記第１の階調よりも大きい第２の階調に拡張する階調拡張手段と、
（ｂ）前記第２の階調に拡張された画像上の注目画素の周辺画素階調値の平均値を算出する周辺画素平均値算出手段と、
（ｃ）前記第１の階調と前記第２の階調との階調比に応じてしきい値を決定するしきい値決定手段と、
（ｄ）前記第２の階調に拡張された画像上の前記注目画素の階調値と前記平均値との階調値差を前記しきい値と比較する比較手段と、
（ｅ）前記比較の結果、前記階調値差が前記しきい値未満であることが判明した場合には、前記注目画素の階調値を前記平均値に置換する置換手段と、
（ｆ）前記置換手段による置換後の画像を前記第１の階調に圧縮する階調圧縮手段と、
を備えることを特徴とする画像処理装置。
請求項１記載の画像処理装置において、
前記第１の階調をｎビットとし、前記第２の階調をｍビットとしたときに、
前記しきい値決定手段は、前記しきい値を２^{（ｍ−ｎ）}とすることを特徴とする画像処理装置。