JP3714657B2 - 階調補正装置 - Google Patents
階調補正装置 Download PDFInfo
- Publication number
- JP3714657B2 JP3714657B2 JP13072599A JP13072599A JP3714657B2 JP 3714657 B2 JP3714657 B2 JP 3714657B2 JP 13072599 A JP13072599 A JP 13072599A JP 13072599 A JP13072599 A JP 13072599A JP 3714657 B2 JP3714657 B2 JP 3714657B2
- Authority
- JP
- Japan
- Prior art keywords
- luminance
- level
- memory
- table memory
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/20—Circuitry for controlling amplitude response
- H04N5/202—Gamma control
Description
【０００１】
【発明が属する技術分野】
本発明は、映像信号の輝度階調を補正する階調補正装置に関する。
【０００２】
【従来の技術】
近年、表示装置の大型化に伴い、画像をより鮮明に見せるために階調補正装置を備えることが要求されている。階調補正装置は、通常、映像信号を非線形な増幅器に供給することによって輝度分布をダイナミックレンジの範囲に拡大するように映像信号の輝度階調を補正するものである。
【０００３】
図１は従来の階調補正装置を示している。この階調補正装置は、ヒストグラムメモリ１、最大補正値算出回路２及びルックアップテーブルメモリ３から構成されている。ヒストグラムメモリ１及びルックアップテーブルメモリ３にはディジタル化された輝度信号が入力信号として供給される。ヒストグラムメモリ１は入力輝度信号の輝度分布をとるためのメモリであり、予め定められた複数の輝度レベル毎にその輝度レベルでアドレス指定される記憶領域を有し、各記憶領域には頻度が格納される。すなわち、１画素分の輝度信号が供給される毎にその輝度レベルに対応するヒストグラムメモリ１の記憶領域の頻度が１だけ上昇する。また、ヒストグラムメモリ１の記憶内容は所定の期間（１垂直走査期間又はその整数倍）毎に全て０にクリアされ、新たな輝度分布をとることになる。
【０００４】
最大補正値算出回路２は、ヒストグラムメモリ１のデータを低輝度から順次累算するヒストグラム累積回路２ａと、その累積回路２ａの結果を記憶する累積ヒストグラムメモリ２ｂと、累積ヒストグラムメモリの記憶データに基づいてその最大累積度数が出力輝度信号の最大値となるように各データを正規化する正規化演算回路２ｃとからなる。累積ヒストグラムメモリ２ｂはヒストグラムメモリ１と同様に輝度信号の複数の輝度レベル毎にその輝度レベルでアドレス指定される頻度の記憶領域を有している。
【０００５】
ルックアップテーブルメモリ３は累積ヒストグラムメモリの記憶データを正規化したデータを記憶する。ルックアップテーブルメモリ３のアドレスは入力輝度信号の輝度レベルによって指定され、指定されたアドレスの記憶領域に記憶された輝度レベルが正規化されたレベルとして出力される。
図２はかかる従来の階調補正装置による輝度変換動作を波形として示している。入力輝度信号の１画素毎にヒストグラムメモリ１のいずれか１のアドレスが指定され、その指定アドレスの記憶領域の値が１だけ増加される。所定の期間に亘る入力輝度信号の輝度レベルに対する頻度が図２(a)に示すように検出されたとする。ここで、分かり易くするために輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210で頻度がヒストグラムメモリ１にて検出されたとする。Ｙ150＜Ｙ160＜Ｙ170＜Ｙ180＜Ｙ190＜Ｙ200＜Ｙ210の関係がある。所定期間内の頻度が輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210に対して１，３，５，７，５，３，１であったとすると、累積頻度は輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210に対して１，４，９，１６，２１，２４，２５の如くなる。すなわち、図２(b)に示すように輝度レベルが大になるに従って累積頻度は大きくなる。この累積頻度の最大値に対応する輝度レベルが出力輝度レベルの最大値となるように正規化係数が正規化演算回路２ｃにて算出され、この正規化係数はヒストグラムメモリ１の各データに乗算し、その乗算結果は対応するルックアップテーブルメモリ３の記憶領域に記憶される。ルックアップデーブルメモリ３の入力輝度レベルと出力輝度レベルとの関係は図２(c)に示すようになり、入力輝度信号をルックアップデーブルメモリ３を介することにより階調補正した輝度信号が出力される。
【０００６】
【発明が解決しようとする課題】
しかしながら、かかる従来の階調補正装置においては、ダイナミックレンジの範囲の１００％に輝度分布が拡大されるので、輝度分布が偏ったテレビジョン動画像等の映像に対してかかる階調補正処理を行うと、現実の映像とはかけ離れ、却って見辛い画像となってしまうという問題点があった。
【０００７】
そこで、本発明の目的は、輝度分布のダイナミックレンジの範囲における広がり過ぎを防止して、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる階調補正装置を提供することである。
【０００８】
【課題を解決するための手段】
本発明の階調補正装置は、入力輝度信号の輝度レベル各々の頻度データを所定の期間毎に作成して記憶するヒストグラムメモリと、前記入力輝度信号の輝度分布を所定のダイナミックレンジの範囲に拡大するように複数の輝度レベル各々の補正輝度レベルを前記ヒストグラムメモリの頻度データに基づいて作成して記憶する拡大補正テーブルメモリと、前記ヒストグラムメモリの頻度データに応じて輝度分布の偏りの程度が大なるほど大なる値を有する分散値を算出する手段と、前記複数の輝度レベル各々についてその輝度レベルとそれに対応する前記拡大補正テーブルメモリの前記補正輝度レベルとを、前記分散値が大なるほど前記補正輝度レベルの混合割合を小さくして混合する混合手段と、前記混合手段によって混合されたレベルを複数の輝度レベル各々に対応するテーブルデータとして記憶するルックアップテーブルメモリと、前記入力輝度信号の輝度レベルに対応するレベルデータを前記ルックアップテーブルメモリから読み出してそれを階調補正輝度信号として出力することを特徴としている。
【０００９】
【発明の実施の形態】
以下、本発明の実施例を図面を参照しつつ詳細に説明する。
図３は本発明による階調補正装置を示している。この階調補正装置は、図３に示すようにヒストグラムメモリ１１、最大補正値算出回路１２、最大補正値テーブルメモリ１３、基準テーブルメモリ１４、ヒストグラム分散値算出回路１５、混合比算出回路１６、乗算器１７，１８，２５、加算器１９、ルックアップテーブルメモリ２０、制御回路２１、ｙ／ｘ演算回路２２及び２つの１フィールド遅延回路２３，２４から構成されている。
【００１０】
ヒストグラムメモリ１１にはディジタル化された輝度信号が入力信号として供給される。ヒストグラムメモリ１１は上記したヒストグラムメモリ１と同様に、入力輝度信号の輝度分布をとるためのメモリであり、輝度信号の輝度レベル単位毎にその輝度レベルでアドレス指定される記憶領域を有し、各記憶領域には頻度が格納される。すなわち、１画素分の輝度信号が供給される毎にその輝度レベルに対応するヒストグラムメモリ１１の記憶領域の頻度が１だけ上昇する。また、ヒストグラムメモリ１の記憶内容は１垂直走査期間毎に制御回路２１によって全て０にクリアされ、新たな輝度分布をとることになる。
【００１１】
最大補正値算出回路１２は、最大補正値算出回路２と同様にヒストグラムメモリ１１のデータを低輝度から順次累算する累積回路と、その累積回路の結果を記憶する累積ヒストグラムメモリと、累積ヒストグラムメモリの記憶データに基づいてその最大累積度数が出力輝度信号の最大値となるように各データを正規化する正規化演算回路とからなる。累積ヒストグラムメモリはヒストグラムメモリ１１と同様に輝度信号の輝度レベル単位毎にその輝度レベルでアドレス指定される頻度の記憶領域を有している。
【００１２】
最大補正値テーブルメモリ（拡大補正テーブルメモリ）１３は、累積ヒストグラムメモリの記憶データを正規化したデータを記憶する。最大補正値テーブルメモリ１３のアドレスは入力輝度信号の輝度レベルによって指定され、指定されたアドレスの記憶領域に記憶された輝度レベルが正規化されたレベルとして出力される。最大補正値テーブルメモリ１３の記憶輝度レベルは制御回路２１によって読み出されて乗算器１７に供給される。
【００１３】
基準テーブルメモリ１４は、輝度信号の輝度レベル単位毎に基準輝度レベルを記憶している。すなわち、基準テーブルメモリ１４では入力輝度レベルに対して基準輝度レベルは比例関係を有している。基準テーブルメモリ１４の記憶輝度レベルは制御回路２１によって読み出されて乗算器１８に供給される。
ヒストグラム分散値算出回路１５はヒストグラムメモリ１１の出力に接続され、１垂直走査期間毎にヒストグラムメモリ１１の輝度分布を基に分散値（輝度分布の偏り具合）を算出する。混合比算出回路１６はヒストグラム分散値算出回路１５の出力に接続され、分散値に対応した混合比ｋを算出する。また、混合比算出回路１６は混合比ｋ（ｋ＜１）を示す係数信号を乗算器１７，１８に供給する。
【００１４】
乗算器１７は最大補正値テーブルメモリ１３から読み出された輝度レベルに混合比ｋを乗算し、乗算器１８は基準テーブルメモリ１４から読み出された輝度レベルに混合比１−ｋを乗算する。乗算器１７，１８の各出力には加算器１９が接続されている。加算器１９は加算器１７，１８の各乗算結果を加算してルックアップテーブルメモリ２０に供給する。
【００１５】
ルックアップテーブルメモリ２０には入力輝度信号が１フィールド遅延回路２３によって遅延されて供給され、ルックアップテーブルメモリ２０はこの１フィールド遅延回路２３による１フィールド遅延の輝度信号の輝度レベルによってアドレス指定される記憶領域を有し、そのアドレス指定された記憶領域のデータを読み出して出力する。また、ルックアップテーブルメモリ２０の各記憶領域には加算器１９の出力データが輝度レベルとして書き込まれるようになっている。この書き込みは制御回路２１によって制御される。
【００１６】
制御回路２１にはヒストグラムメモリ１１、最大補正値算出回路１２、最大補正値テーブルメモリ１３、基準テーブルメモリ１４及びルックアップテーブルメモリ２０各々の制御のために垂直同期信号Ｖ及び水平同期信号Ｈが供給される。なお、ヒストグラムメモリ１１、最大補正値算出回路１２内の累積ヒストグラムメモリ、最大補正値テーブルメモリ１３、基準テーブルメモリ１４及びルックアップテーブルメモリ２０各々の記憶領域は輝度レベルをアドレスとして指定することができ、それらメモリには輝度レベルの変化分の記憶領域が備えられている。
【００１７】
ｙ／ｘ演算回路２２はルックアップテーブルメモリ２０の出力輝度レベルｙと１フィールド遅延回路２３による１フィールド遅延の輝度レベルｘとの比ｙ／ｘを補正係数として乗算器２５に出力する。
１フィールド遅延回路２４はディジタル化された入力色信号を受け入れ、その色信号を１フィールド分だけ遅延して乗算器２５に出力する。この入力色信号と上記入力輝度信号とは同一の映像信号から分離された信号である。乗算器２５は１フィールド遅延回路２４を経た色信号とｙ／ｘ演算回路２２の出力補正係数と乗算し、階調補正した色信号を出力する。
【００１８】
かかる構成の階調補正装置においては、入力輝度信号の１画素毎にヒストグラムメモリ１１のいずれか１のアドレスが入力輝度信号の輝度レベルによって指定され、その指定されたアドレスの記憶領域の値が１だけ増加される。ヒストグラムメモリ１１には１垂直走査期間毎に１垂直走査期間に亘る輝度分布が形成される。その１垂直走査期間に亘る輝度分布に基づいて最大補正値算出回路１２では累積回路によって累積頻度がとられ、その累積回路の結果が累積ヒストグラムメモリに記憶される。累積ヒストグラムメモリに記憶された累積頻度のうちの最大値が出力輝度レベルの最大値となるように正規化係数が正規化演算回路にて算出され、この正規化係数はヒストグラムメモリ１１の各データと乗算され、その乗算結果は対応する最大補正値テーブルメモリ１３の記憶領域に記憶される。
【００１９】
ヒストグラムメモリ１１に記憶された輝度分布に応じてヒストグラム分散値算出回路１５では分散値が算出され、分散値に対応して混合比算出回路１６では混合比ｋが算出される。
制御回路２１は垂直帰線期間内において最大補正値テーブルメモリ１３及び基準テーブルメモリ１４の各アドレスを順に指定して輝度レベルを各々読み出す。最大補正値テーブルメモリ１３から読み出された輝度レベルには混合比ｋが乗算器１７で乗算され、基準テーブルメモリ１４から読み出された輝度レベルには混合比１−ｋが乗算器１８で乗算され、各乗算結果が加算器１９で加算されてルックアップテーブルメモリ２０に供給される。制御回路２１は垂直帰線期間内において最大補正値テーブルメモリ１３及び基準テーブルメモリ１４の各アドレス指定に同期してルックアップテーブルメモリ２０の書き込みアドレスを順に指定するので、ルックアップテーブルメモリ２０の指定アドレスの記憶領域には加算器１９の出力データが書き込まれる。このようにアドレス毎に繰り返すことにより、ルックアップテーブルメモリ２０の全ての記憶領域に混合輝度レベルが書き込まれる。
【００２０】
ここで、ヒストグラムメモリ１１に記憶された輝度分布が図４(a)に示す如き分布である場合には、輝度分布の偏りが小さいので、分散値は小さい。このように分散値が小さい場合には混合比算出回路１６で算出される混合比ｋはｋ＞０．５となる。図４(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図４(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図４(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図４(d) に示す如き基準輝度特性である。ｋ＞０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの混合割合としては最大補正値テーブルメモリ１３から読み出された輝度レベルの方が大きくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図４(e)に実線で示す如き特性となる。図４(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２１】
次に、ヒストグラムメモリ１１に記憶された輝度分布が図５(a)に示す如き分布である場合には、輝度分布の偏りは中程度であるので、分散値は中程度である。このように分散値が中程度である場合には混合比算出回路１６で算出される混合比ｋはｋ≒０．５となる。図５(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図５(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図５(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図５(d)に示す如き基準輝度特性である。ｋ≒０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの混合割合は互いに等しくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図５(e)に実線で示す如き特性となる。図５(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２２】
更に、ヒストグラムメモリ１１に記憶された輝度分布が図６(a)に示す如き分布である場合には、輝度分布が大きく偏っているので、分散値は大きい。このように分散値が大きい場合には混合比算出回路１６で算出される混合比ｋはｋ＜０．５となる。図６(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図６(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図６(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図６(d)に示す如き基準輝度特性である。ｋ＜０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの加算器１９における混合割合においては基準テーブルメモリ１４から読み出された輝度レベルの方が大きくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図６(e)に実線で示す如き特性となる。図６(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２３】
このように各記憶領域に混合輝度レベルが記憶されたルックアップテーブルメモリ２０においては、１フィールド遅延回路２３から出力される１フィールド遅延の輝度信号の輝度レベルに対応する記憶領域から輝度レベルが読み出され、それが階調補正された輝度信号として出力される。すなわち、輝度分布の偏りが小さい場合にはダイナミックレンジの範囲に十分に拡大した輝度信号が出力され、輝度分布の偏りが大きい場合にはダイナミックレンジの範囲にほとんど拡大しない輝度信号が出力されるので、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる。
【００２４】
また、この階調補正の輝度信号はｙ／ｘ演算回路２２において入力輝度信号によって割り算され、その結果が補正係数として乗算器２５に供給される。その補正係数は乗算器２５において１フィールド遅延の色信号と乗算され、これによって色信号が輝度信号の階調補正に対応して補正されることになる。
【００２５】
【発明の効果】
以上の如く、本発明によれば、輝度分布のダイナミックレンジの範囲における広がり過ぎを防止して、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる。
【図面の簡単な説明】
【図１】従来の階調補正装置を示すブロック図である。
【図２】図１の装置の動作例を説明するための特性図である。
【図３】本発明の実施例を示すブロック図である。
【図４】輝度分布の偏りが小さい場合の図３の装置による階調補正動作を説明するための図である。
【図５】輝度分布の偏りが中程度の場合の図３の装置による階調補正動作を説明するための図である。
【図６】輝度分布の偏りが大きい場合の図３の装置による階調補正動作を説明するための図である。
【符号の説明】
１，１１ ヒストグラムメモリ
２，１２ 最大補正値算出回路
３，２０ ルックアップテーブルメモリ
１４ 基準テーブルメモリ
１５ ヒストグラム分散値算出回路
１７，１８，２５ 乗算器
１９ 加算器
【発明が属する技術分野】
本発明は、映像信号の輝度階調を補正する階調補正装置に関する。
【０００２】
【従来の技術】
近年、表示装置の大型化に伴い、画像をより鮮明に見せるために階調補正装置を備えることが要求されている。階調補正装置は、通常、映像信号を非線形な増幅器に供給することによって輝度分布をダイナミックレンジの範囲に拡大するように映像信号の輝度階調を補正するものである。
【０００３】
図１は従来の階調補正装置を示している。この階調補正装置は、ヒストグラムメモリ１、最大補正値算出回路２及びルックアップテーブルメモリ３から構成されている。ヒストグラムメモリ１及びルックアップテーブルメモリ３にはディジタル化された輝度信号が入力信号として供給される。ヒストグラムメモリ１は入力輝度信号の輝度分布をとるためのメモリであり、予め定められた複数の輝度レベル毎にその輝度レベルでアドレス指定される記憶領域を有し、各記憶領域には頻度が格納される。すなわち、１画素分の輝度信号が供給される毎にその輝度レベルに対応するヒストグラムメモリ１の記憶領域の頻度が１だけ上昇する。また、ヒストグラムメモリ１の記憶内容は所定の期間（１垂直走査期間又はその整数倍）毎に全て０にクリアされ、新たな輝度分布をとることになる。
【０００４】
最大補正値算出回路２は、ヒストグラムメモリ１のデータを低輝度から順次累算するヒストグラム累積回路２ａと、その累積回路２ａの結果を記憶する累積ヒストグラムメモリ２ｂと、累積ヒストグラムメモリの記憶データに基づいてその最大累積度数が出力輝度信号の最大値となるように各データを正規化する正規化演算回路２ｃとからなる。累積ヒストグラムメモリ２ｂはヒストグラムメモリ１と同様に輝度信号の複数の輝度レベル毎にその輝度レベルでアドレス指定される頻度の記憶領域を有している。
【０００５】
ルックアップテーブルメモリ３は累積ヒストグラムメモリの記憶データを正規化したデータを記憶する。ルックアップテーブルメモリ３のアドレスは入力輝度信号の輝度レベルによって指定され、指定されたアドレスの記憶領域に記憶された輝度レベルが正規化されたレベルとして出力される。
図２はかかる従来の階調補正装置による輝度変換動作を波形として示している。入力輝度信号の１画素毎にヒストグラムメモリ１のいずれか１のアドレスが指定され、その指定アドレスの記憶領域の値が１だけ増加される。所定の期間に亘る入力輝度信号の輝度レベルに対する頻度が図２(a)に示すように検出されたとする。ここで、分かり易くするために輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210で頻度がヒストグラムメモリ１にて検出されたとする。Ｙ150＜Ｙ160＜Ｙ170＜Ｙ180＜Ｙ190＜Ｙ200＜Ｙ210の関係がある。所定期間内の頻度が輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210に対して１，３，５，７，５，３，１であったとすると、累積頻度は輝度レベルＹ150，Ｙ160，Ｙ170，Ｙ180，Ｙ190，Ｙ200，Ｙ210に対して１，４，９，１６，２１，２４，２５の如くなる。すなわち、図２(b)に示すように輝度レベルが大になるに従って累積頻度は大きくなる。この累積頻度の最大値に対応する輝度レベルが出力輝度レベルの最大値となるように正規化係数が正規化演算回路２ｃにて算出され、この正規化係数はヒストグラムメモリ１の各データに乗算し、その乗算結果は対応するルックアップテーブルメモリ３の記憶領域に記憶される。ルックアップデーブルメモリ３の入力輝度レベルと出力輝度レベルとの関係は図２(c)に示すようになり、入力輝度信号をルックアップデーブルメモリ３を介することにより階調補正した輝度信号が出力される。
【０００６】
【発明が解決しようとする課題】
しかしながら、かかる従来の階調補正装置においては、ダイナミックレンジの範囲の１００％に輝度分布が拡大されるので、輝度分布が偏ったテレビジョン動画像等の映像に対してかかる階調補正処理を行うと、現実の映像とはかけ離れ、却って見辛い画像となってしまうという問題点があった。
【０００７】
そこで、本発明の目的は、輝度分布のダイナミックレンジの範囲における広がり過ぎを防止して、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる階調補正装置を提供することである。
【０００８】
【課題を解決するための手段】
本発明の階調補正装置は、入力輝度信号の輝度レベル各々の頻度データを所定の期間毎に作成して記憶するヒストグラムメモリと、前記入力輝度信号の輝度分布を所定のダイナミックレンジの範囲に拡大するように複数の輝度レベル各々の補正輝度レベルを前記ヒストグラムメモリの頻度データに基づいて作成して記憶する拡大補正テーブルメモリと、前記ヒストグラムメモリの頻度データに応じて輝度分布の偏りの程度が大なるほど大なる値を有する分散値を算出する手段と、前記複数の輝度レベル各々についてその輝度レベルとそれに対応する前記拡大補正テーブルメモリの前記補正輝度レベルとを、前記分散値が大なるほど前記補正輝度レベルの混合割合を小さくして混合する混合手段と、前記混合手段によって混合されたレベルを複数の輝度レベル各々に対応するテーブルデータとして記憶するルックアップテーブルメモリと、前記入力輝度信号の輝度レベルに対応するレベルデータを前記ルックアップテーブルメモリから読み出してそれを階調補正輝度信号として出力することを特徴としている。
【０００９】
【発明の実施の形態】
以下、本発明の実施例を図面を参照しつつ詳細に説明する。
図３は本発明による階調補正装置を示している。この階調補正装置は、図３に示すようにヒストグラムメモリ１１、最大補正値算出回路１２、最大補正値テーブルメモリ１３、基準テーブルメモリ１４、ヒストグラム分散値算出回路１５、混合比算出回路１６、乗算器１７，１８，２５、加算器１９、ルックアップテーブルメモリ２０、制御回路２１、ｙ／ｘ演算回路２２及び２つの１フィールド遅延回路２３，２４から構成されている。
【００１０】
ヒストグラムメモリ１１にはディジタル化された輝度信号が入力信号として供給される。ヒストグラムメモリ１１は上記したヒストグラムメモリ１と同様に、入力輝度信号の輝度分布をとるためのメモリであり、輝度信号の輝度レベル単位毎にその輝度レベルでアドレス指定される記憶領域を有し、各記憶領域には頻度が格納される。すなわち、１画素分の輝度信号が供給される毎にその輝度レベルに対応するヒストグラムメモリ１１の記憶領域の頻度が１だけ上昇する。また、ヒストグラムメモリ１の記憶内容は１垂直走査期間毎に制御回路２１によって全て０にクリアされ、新たな輝度分布をとることになる。
【００１１】
最大補正値算出回路１２は、最大補正値算出回路２と同様にヒストグラムメモリ１１のデータを低輝度から順次累算する累積回路と、その累積回路の結果を記憶する累積ヒストグラムメモリと、累積ヒストグラムメモリの記憶データに基づいてその最大累積度数が出力輝度信号の最大値となるように各データを正規化する正規化演算回路とからなる。累積ヒストグラムメモリはヒストグラムメモリ１１と同様に輝度信号の輝度レベル単位毎にその輝度レベルでアドレス指定される頻度の記憶領域を有している。
【００１２】
最大補正値テーブルメモリ（拡大補正テーブルメモリ）１３は、累積ヒストグラムメモリの記憶データを正規化したデータを記憶する。最大補正値テーブルメモリ１３のアドレスは入力輝度信号の輝度レベルによって指定され、指定されたアドレスの記憶領域に記憶された輝度レベルが正規化されたレベルとして出力される。最大補正値テーブルメモリ１３の記憶輝度レベルは制御回路２１によって読み出されて乗算器１７に供給される。
【００１３】
基準テーブルメモリ１４は、輝度信号の輝度レベル単位毎に基準輝度レベルを記憶している。すなわち、基準テーブルメモリ１４では入力輝度レベルに対して基準輝度レベルは比例関係を有している。基準テーブルメモリ１４の記憶輝度レベルは制御回路２１によって読み出されて乗算器１８に供給される。
ヒストグラム分散値算出回路１５はヒストグラムメモリ１１の出力に接続され、１垂直走査期間毎にヒストグラムメモリ１１の輝度分布を基に分散値（輝度分布の偏り具合）を算出する。混合比算出回路１６はヒストグラム分散値算出回路１５の出力に接続され、分散値に対応した混合比ｋを算出する。また、混合比算出回路１６は混合比ｋ（ｋ＜１）を示す係数信号を乗算器１７，１８に供給する。
【００１４】
乗算器１７は最大補正値テーブルメモリ１３から読み出された輝度レベルに混合比ｋを乗算し、乗算器１８は基準テーブルメモリ１４から読み出された輝度レベルに混合比１−ｋを乗算する。乗算器１７，１８の各出力には加算器１９が接続されている。加算器１９は加算器１７，１８の各乗算結果を加算してルックアップテーブルメモリ２０に供給する。
【００１５】
ルックアップテーブルメモリ２０には入力輝度信号が１フィールド遅延回路２３によって遅延されて供給され、ルックアップテーブルメモリ２０はこの１フィールド遅延回路２３による１フィールド遅延の輝度信号の輝度レベルによってアドレス指定される記憶領域を有し、そのアドレス指定された記憶領域のデータを読み出して出力する。また、ルックアップテーブルメモリ２０の各記憶領域には加算器１９の出力データが輝度レベルとして書き込まれるようになっている。この書き込みは制御回路２１によって制御される。
【００１６】
制御回路２１にはヒストグラムメモリ１１、最大補正値算出回路１２、最大補正値テーブルメモリ１３、基準テーブルメモリ１４及びルックアップテーブルメモリ２０各々の制御のために垂直同期信号Ｖ及び水平同期信号Ｈが供給される。なお、ヒストグラムメモリ１１、最大補正値算出回路１２内の累積ヒストグラムメモリ、最大補正値テーブルメモリ１３、基準テーブルメモリ１４及びルックアップテーブルメモリ２０各々の記憶領域は輝度レベルをアドレスとして指定することができ、それらメモリには輝度レベルの変化分の記憶領域が備えられている。
【００１７】
ｙ／ｘ演算回路２２はルックアップテーブルメモリ２０の出力輝度レベルｙと１フィールド遅延回路２３による１フィールド遅延の輝度レベルｘとの比ｙ／ｘを補正係数として乗算器２５に出力する。
１フィールド遅延回路２４はディジタル化された入力色信号を受け入れ、その色信号を１フィールド分だけ遅延して乗算器２５に出力する。この入力色信号と上記入力輝度信号とは同一の映像信号から分離された信号である。乗算器２５は１フィールド遅延回路２４を経た色信号とｙ／ｘ演算回路２２の出力補正係数と乗算し、階調補正した色信号を出力する。
【００１８】
かかる構成の階調補正装置においては、入力輝度信号の１画素毎にヒストグラムメモリ１１のいずれか１のアドレスが入力輝度信号の輝度レベルによって指定され、その指定されたアドレスの記憶領域の値が１だけ増加される。ヒストグラムメモリ１１には１垂直走査期間毎に１垂直走査期間に亘る輝度分布が形成される。その１垂直走査期間に亘る輝度分布に基づいて最大補正値算出回路１２では累積回路によって累積頻度がとられ、その累積回路の結果が累積ヒストグラムメモリに記憶される。累積ヒストグラムメモリに記憶された累積頻度のうちの最大値が出力輝度レベルの最大値となるように正規化係数が正規化演算回路にて算出され、この正規化係数はヒストグラムメモリ１１の各データと乗算され、その乗算結果は対応する最大補正値テーブルメモリ１３の記憶領域に記憶される。
【００１９】
ヒストグラムメモリ１１に記憶された輝度分布に応じてヒストグラム分散値算出回路１５では分散値が算出され、分散値に対応して混合比算出回路１６では混合比ｋが算出される。
制御回路２１は垂直帰線期間内において最大補正値テーブルメモリ１３及び基準テーブルメモリ１４の各アドレスを順に指定して輝度レベルを各々読み出す。最大補正値テーブルメモリ１３から読み出された輝度レベルには混合比ｋが乗算器１７で乗算され、基準テーブルメモリ１４から読み出された輝度レベルには混合比１−ｋが乗算器１８で乗算され、各乗算結果が加算器１９で加算されてルックアップテーブルメモリ２０に供給される。制御回路２１は垂直帰線期間内において最大補正値テーブルメモリ１３及び基準テーブルメモリ１４の各アドレス指定に同期してルックアップテーブルメモリ２０の書き込みアドレスを順に指定するので、ルックアップテーブルメモリ２０の指定アドレスの記憶領域には加算器１９の出力データが書き込まれる。このようにアドレス毎に繰り返すことにより、ルックアップテーブルメモリ２０の全ての記憶領域に混合輝度レベルが書き込まれる。
【００２０】
ここで、ヒストグラムメモリ１１に記憶された輝度分布が図４(a)に示す如き分布である場合には、輝度分布の偏りが小さいので、分散値は小さい。このように分散値が小さい場合には混合比算出回路１６で算出される混合比ｋはｋ＞０．５となる。図４(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図４(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図４(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図４(d) に示す如き基準輝度特性である。ｋ＞０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの混合割合としては最大補正値テーブルメモリ１３から読み出された輝度レベルの方が大きくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図４(e)に実線で示す如き特性となる。図４(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２１】
次に、ヒストグラムメモリ１１に記憶された輝度分布が図５(a)に示す如き分布である場合には、輝度分布の偏りは中程度であるので、分散値は中程度である。このように分散値が中程度である場合には混合比算出回路１６で算出される混合比ｋはｋ≒０．５となる。図５(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図５(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図５(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図５(d)に示す如き基準輝度特性である。ｋ≒０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの混合割合は互いに等しくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図５(e)に実線で示す如き特性となる。図５(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２２】
更に、ヒストグラムメモリ１１に記憶された輝度分布が図６(a)に示す如き分布である場合には、輝度分布が大きく偏っているので、分散値は大きい。このように分散値が大きい場合には混合比算出回路１６で算出される混合比ｋはｋ＜０．５となる。図６(a)の輝度分布に対して最大補正値算出回路１２内の累積ヒストグラムメモリに記憶される輝度レベルに対する累積頻度は図６(b)に示す如き特性となり、最大補正値テーブルメモリ１３に記憶される入力輝度レベルに対する出力輝度レベルは図６(c)に示す如き最大補正輝度特性となる。基準テーブルメモリ１４に記憶される入力輝度レベルに対する出力基準輝度レベルは図６(d)に示す如き基準輝度特性である。ｋ＜０．５である場合には最大補正値テーブルメモリ１３から読み出された輝度レベルと基準テーブルメモリ１４から読み出された輝度レベルとの加算器１９における混合割合においては基準テーブルメモリ１４から読み出された輝度レベルの方が大きくなる。よって、ルックアップテーブルメモリ２０に書き込まれる混合輝度レベルによってルックアップテーブルメモリ２０における入力輝度レベルに対する出力輝度レベルは図６(e)に実線で示す如き特性となる。図６(e)の特性において破線Ａは基準輝度特性であり、破線Ｂは最大補正輝度特性である。
【００２３】
このように各記憶領域に混合輝度レベルが記憶されたルックアップテーブルメモリ２０においては、１フィールド遅延回路２３から出力される１フィールド遅延の輝度信号の輝度レベルに対応する記憶領域から輝度レベルが読み出され、それが階調補正された輝度信号として出力される。すなわち、輝度分布の偏りが小さい場合にはダイナミックレンジの範囲に十分に拡大した輝度信号が出力され、輝度分布の偏りが大きい場合にはダイナミックレンジの範囲にほとんど拡大しない輝度信号が出力されるので、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる。
【００２４】
また、この階調補正の輝度信号はｙ／ｘ演算回路２２において入力輝度信号によって割り算され、その結果が補正係数として乗算器２５に供給される。その補正係数は乗算器２５において１フィールド遅延の色信号と乗算され、これによって色信号が輝度信号の階調補正に対応して補正されることになる。
【００２５】
【発明の効果】
以上の如く、本発明によれば、輝度分布のダイナミックレンジの範囲における広がり過ぎを防止して、映像の輝度分布の偏り具合に応じて最適な階調補正を行うことができる。
【図面の簡単な説明】
【図１】従来の階調補正装置を示すブロック図である。
【図２】図１の装置の動作例を説明するための特性図である。
【図３】本発明の実施例を示すブロック図である。
【図４】輝度分布の偏りが小さい場合の図３の装置による階調補正動作を説明するための図である。
【図５】輝度分布の偏りが中程度の場合の図３の装置による階調補正動作を説明するための図である。
【図６】輝度分布の偏りが大きい場合の図３の装置による階調補正動作を説明するための図である。
【符号の説明】
１，１１ ヒストグラムメモリ
２，１２ 最大補正値算出回路
３，２０ ルックアップテーブルメモリ
１４ 基準テーブルメモリ
１５ ヒストグラム分散値算出回路
１７，１８，２５ 乗算器
１９ 加算器
Claims (2)
- 入力輝度信号の輝度レベル各々の頻度データを所定の期間毎に作成して記憶するヒストグラムメモリと、
前記入力輝度信号の輝度分布を所定のダイナミックレンジの範囲に拡大するように複数の輝度レベル各々の補正輝度レベルを前記ヒストグラムメモリの頻度データに基づいて作成して記憶する拡大補正テーブルメモリと、
前記ヒストグラムメモリの頻度データに応じて輝度分布の偏りの程度が大なるほど大なる値を有する分散値を算出する手段と、
前記複数の輝度レベル各々についてその輝度レベルとそれに対応する前記拡大補正テーブルメモリの前記補正輝度レベルとを、前記分散値が大なるほど前記補正輝度レベルの混合割合を小さくして混合する混合手段と、
前記混合手段によって混合されたレベルを複数の輝度レベル各々に対応するテーブルデータとして記憶するルックアップテーブルメモリと、
前記入力輝度信号の輝度レベルに対応するレベルデータを前記ルックアップテーブルメモリから読み出してそれを階調補正輝度信号として出力することを特徴とする階調補正装置。 - 前記入力輝度信号と前記階調補正輝度信号とに基づいて補正係数を算出し、入力色信号に前記補正係数を乗算して階調補正色信号を得る手段を有することを特徴とする請求項１記載の階調補正装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13072599A JP3714657B2 (ja) | 1999-05-12 | 1999-05-12 | 階調補正装置 |
| US09/567,079 US6661917B1 (en) | 1999-05-12 | 2000-05-08 | Gradation correcting apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13072599A JP3714657B2 (ja) | 1999-05-12 | 1999-05-12 | 階調補正装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000322047A JP2000322047A (ja) | 2000-11-24 |
| JP3714657B2 true JP3714657B2 (ja) | 2005-11-09 |
Family
ID=15041149
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13072599A Expired - Fee Related JP3714657B2 (ja) | 1999-05-12 | 1999-05-12 | 階調補正装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6661917B1 (ja) |
| JP (1) | JP3714657B2 (ja) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002082645A (ja) * | 2000-06-19 | 2002-03-22 | Sharp Corp | 画像表示装置の列電極駆動回路及びそれを用いた画像表示装置 |
| JP4280904B2 (ja) * | 2003-03-25 | 2009-06-17 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
| KR101032437B1 (ko) * | 2004-04-30 | 2011-05-03 | 엘지디스플레이 주식회사 | 액정표시장치의 구동방법 및 구동장치 |
| JP2006024090A (ja) * | 2004-07-09 | 2006-01-26 | Nissan Motor Co Ltd | 画像情報処理装置及び画像情報処理方法 |
| CN101010937A (zh) * | 2004-09-01 | 2007-08-01 | 日本电气株式会社 | 图像修正处理系统以及图像修正处理方法 |
| US7586653B2 (en) * | 2005-04-22 | 2009-09-08 | Lexmark International, Inc. | Method and system for enhancing an image using luminance scaling |
| JP4551836B2 (ja) * | 2005-07-29 | 2010-09-29 | 株式会社東芝 | 映像信号処理装置及び映像信号処理方法 |
| JPWO2007145168A1 (ja) * | 2006-06-13 | 2009-10-29 | パナソニック株式会社 | 階調補正装置 |
| JP2008016940A (ja) * | 2006-07-03 | 2008-01-24 | Seiko Instruments Inc | コントラスト自動調整方法 |
| JP4582349B2 (ja) * | 2007-07-24 | 2010-11-17 | ソニー株式会社 | 表示装置 |
| US20090091660A1 (en) * | 2007-10-08 | 2009-04-09 | Yu-Wei Wang | Method and apparatus for processing color components of pixel through adding white light adaptively |
| DE102008032686B4 (de) * | 2008-07-06 | 2020-07-16 | Dürr Dental SE | Verfahren zur Verbesserung des Kontrastes von Bildern, insbesondere Grauwertbildern und Vorrichtung zu seiner Durchführung |
| JP4575501B2 (ja) * | 2009-02-26 | 2010-11-04 | 株式会社東芝 | 映像信号処理装置及びその制御方法及びテレビジョン信号受信装置 |
| JP5201038B2 (ja) * | 2009-03-18 | 2013-06-05 | 株式会社Ｊｖｃケンウッド | 映像信号処理方法及び映像信号処理装置 |
| JP5819897B2 (ja) * | 2013-09-10 | 2015-11-24 | 株式会社Ｓｃｒｅｅｎホールディングス | 撮像システムおよび撮像方法 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2748678B2 (ja) * | 1990-10-09 | 1998-05-13 | 松下電器産業株式会社 | 階調補正方法および階調補正装置 |
| JP3019479B2 (ja) * | 1991-06-28 | 2000-03-13 | 松下電器産業株式会社 | 階調補正装置 |
| DE4309878C2 (de) * | 1992-04-06 | 1994-07-21 | Hell Ag Linotype | Verfahren und Einrichtung zur Analyse und Korrektur der Bildgradation in Bildvorlagen |
| DE69414153T2 (de) * | 1993-02-24 | 1999-06-10 | Matsushita Electric Ind Co Ltd | Vorrichtung zur Gradationskorrektur und Bildaufnahmegerät mit einer solchen Vorrichtung |
| JP3201449B2 (ja) * | 1994-04-06 | 2001-08-20 | 株式会社富士通ゼネラル | 電子ディスプレイの映像表示処理方法およびその装置 |
| WO1996010886A1 (fr) * | 1994-09-30 | 1996-04-11 | Matsushita Electric Industrial Co., Ltd. | Dispositif de prise de vues |
| US5828793A (en) * | 1996-05-06 | 1998-10-27 | Massachusetts Institute Of Technology | Method and apparatus for producing digital images having extended dynamic ranges |
| JPH10181103A (ja) * | 1996-11-08 | 1998-07-07 | Fuji Photo Film Co Ltd | プリンタ |
| US6351558B1 (en) * | 1996-11-13 | 2002-02-26 | Seiko Epson Corporation | Image processing system, image processing method, and medium having an image processing control program recorded thereon |
| US6393148B1 (en) * | 1999-05-13 | 2002-05-21 | Hewlett-Packard Company | Contrast enhancement of an image using luminance and RGB statistical metrics |
-
1999
- 1999-05-12 JP JP13072599A patent/JP3714657B2/ja not_active Expired - Fee Related
-
2000
- 2000-05-08 US US09/567,079 patent/US6661917B1/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000322047A (ja) | 2000-11-24 |
| US6661917B1 (en) | 2003-12-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3714657B2 (ja) | 階調補正装置 | |
| EP1858257B1 (en) | Display device, contrast adjusting method and contrast adjusting program | |
| US7400363B2 (en) | Image processing apparatus and image processing method | |
| CN100387064C (zh) | 视频信号处理装置及方法 | |
| US7508457B2 (en) | Video signal processor circuit and television receiver | |
| EP0505073B1 (en) | Video signal gradation corrector | |
| JP3986732B2 (ja) | 映像信号の輝度レベル補正装置 | |
| JP3201039B2 (ja) | 表示装置 | |
| JP2004320632A (ja) | 映像信号処理回路、映像表示装置及び映像表示方法 | |
| JPH04349783A (ja) | 階調補正装置 | |
| US6611296B1 (en) | Video signal enhancement | |
| JPH06209439A (ja) | テレビジョン受信機 | |
| JP2004266755A (ja) | 画像処理装置および画像表示装置、並びに画像処理方法 | |
| US7233307B2 (en) | Display controller, image display and method for transferring control data | |
| JP2007219792A (ja) | 画像処理装置およびその方法、プログラム、記録媒体 | |
| JPH05292346A (ja) | 映像信号処理回路 | |
| JP2001296855A (ja) | 画像表示装置および画像信号補正装置 | |
| JP4171247B2 (ja) | コントラスト補正回路 | |
| JP2006311167A (ja) | 映像処理装置及び映像表示装置 | |
| JP2001125557A (ja) | 色相及び彩度調整装置及び画像表示装置、色相及び彩度調整方法 | |
| JPH04286492A (ja) | テレビジョン受像機 | |
| JP4373128B2 (ja) | 階調補正装置 | |
| JP2001249655A (ja) | 表示装置 | |
| JPH0690382A (ja) | 階調補正装置 | |
| JP2003189178A (ja) | オンスクリーンディスプレイ装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040105 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040902 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041101 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050530 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050727 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050822 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050822 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090902 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100902 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100902 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110902 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |