JP2905676B2 - 光直交変換による画像圧縮復元装置 - Google Patents
光直交変換による画像圧縮復元装置Info
- Publication number
- JP2905676B2 JP2905676B2 JP28639193A JP28639193A JP2905676B2 JP 2905676 B2 JP2905676 B2 JP 2905676B2 JP 28639193 A JP28639193 A JP 28639193A JP 28639193 A JP28639193 A JP 28639193A JP 2905676 B2 JP2905676 B2 JP 2905676B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- mask
- image compression
- unit
- equation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Image Processing (AREA)
Description
光学的手段で実現する画像圧縮復元装置に関するもので
あり、より詳細には、テレビ電話、テレビ会議等に用い
られる光直交変換による画像圧縮復元装置に関するもの
である。
膨大な情報量を持つ画像データを重要な1つのメディア
として伝送したり蓄積したりすることが求められてい
る。
タの処理を行う場合、画像データの分量が非常に多いた
め、該画像データをそのまま記録・伝送することは現在
の記録装置およびディジタル回線の容量から考えて、非
常に困難である。
は、約1Mbyteの容量が必要であり、1秒間のテレ
ビ画像には、約30Mbyteの情報量が含まれてい
る。
たは伝送を行うためには、情報量の圧縮を行なうことが
必要となってくる。
は、現在のディジタル技術を用いたものであるが、使用
するコンピューターの処理速度に限界があるため、画面
を多数のブロックである小画面に分解し、該ブロック毎
に処理を行うことを基本としている。
従来用いられている画像圧縮復元装置は図14に一例を
示すように、縦480点、横640点の画素からなる原
画素141を、縦8点×横8点の正方形のブロック14
2に分割し、各ブロック毎に独立に、2次元直交基底パ
ターンを用いて離散的コサイン変換(Discrete
Cosin Transform,略してDCT)
や、ウォルシュ−アダマール変換(Walsh−Had
amard Transform,略してWHT)を電
気的演算によって行なっている。
像が得られ、量子化、ハフマン符号化される。このデー
タは、通信または蓄積される。
分から高周波成分に分けられ、通常は低周波成分にパワ
ーが集中する。
ーの大きい低周波成分を残し、高周波成分を削除するこ
とにより、全体としてデータ量の低減を図ることが可能
となる。
り伝送された画素データ144から、予め用意されてい
る2次元直交基底パターンの組を使って逆DCTを行
い、縦8点×横8点の正方形の画素からなる中間画像1
45を得る。
復元画像146が得られる。
変換には、多数の積和演算を必要とするため、動画像を
実時間で圧縮あるいは復元するためには高速処理が必要
となる。この高速処理を、ディジタルコンピュータを用
いた直交変換演算に基づいて行う必要があるため、経済
的にシステムを製造することは困難であった。
おいては、離散的コサイン変換に基づく多数の積和演算
が必要であった。
たもので、コンピュータによる直交変換演算に全面的に
依ることなく、高速並列光演算による画像圧縮復元装置
を提供することを目的としている。
れた原画像を2次元の小ブロックに分けて、該小ブロッ
クの画像と2次元直交基底濃淡パターンとの光による2
次元積演算を行う積演算手段と、該積演算手段より出力
された信号から前記原画像の周波数成分を得るための光
による和演算手段と、前記積演算手段及び前記和演算手
段において実行出来ない負の演算について電気的に補正
を行うための電気的演算手段とで構成される画像圧縮部
と、前記画像圧縮部により記録された画像周波数濃淡デ
ータと直交基底濃淡パターンとの光による画像間の積演
算を行ない各展開係数に対応する要素画像を得る積演算
手段と、前記演算手段により得られた要素画像を光学的
に重ね合わせる和演算手段と、前記和演算手段にて実行
出来ない負の演算処理について電気的演算を用いて補正
を行うための電気的演算手段とで構成される画像復元部
とを具備することを特徴とする光直交変換を用いた画像
圧縮復元装置によって達成される。
通過した信号に対して透過率が1または0となるように
電気的に補正を行う透過率補正手段を備えることが更に
望ましい。
演算手段において2次元の小ブロックに分けられ、2次
元直交基底濃淡パターンとの光による2次元積演算が行
われる。積演算された画像データから、和演算手段によ
り、前記原画像の周波数成分が得られる。ここで、前記
積演算手段及び前記和演算手段において実行出来ない負
の演算については、電気的演算手段により電気的に補正
が行われる。
前記画像圧縮部により記録された画像周波数濃淡データ
と直交基底濃淡パターンとの光による画像間の積演算が
行なわれ、各展開係数に対応する要素画像が得られる。
前記要素画像は、和演算手段により光学的に重ね合わさ
れる。ここで、前記和演算手段にて実行出来ない負の演
算処理については、電気的演算手段により電気的演算を
用いて補正が行われる。
基底濃淡パターンを通過した信号に対して透過率が1ま
たは0となるように電気的に補正する。
光直交変換による画像圧縮復元装置の第1の実施例を以
下、詳述していく。
用マスクに図10に示すような2次元濃淡パターンが記
録されており、2次元レンズアレイによって複製された
原画像が、直交変換用マスクのパターン上に投影され、
画像間の積演算を同時に行なう。しかし、光による負の
演算は出来ないので、電気的演算処理により補正を行
う。
同様に、マスクとレンズアレイによって画像周波数濃淡
データとマスクの画像間の積和演算を同時に行ない、最
後に負の演算オフセット分の補正を行う。
順変換は数1で、逆変換は数2でそれぞれ表される。
の演算を行うことができないのでDCT基底関数をその
まま使う訳にはいかない。
淡パターンを導入する。
逆変換を行うと、余計な係数と項が発生してしまう。
数と第2項が、一方、復元部ではさらにFXY(u,v)
自体が負の数になりうるため、その数5で表されるオフ
セット加算演算による効果も含めると、数6の第1項の
係数と第2項、第3項が出てきてしまうことがわかる。
演算に引き続き、以下の数7、数8に示す処理をしなけ
ればならない。
算を用いて取り除いている。
明していく。
の第1の実施例を説明するための全体構成図を示し、図
1aには画像圧縮を行うための画像圧縮部を、また図b
には、圧縮された画像の復元を行うための画像復元部を
それぞれ示す。
行う液晶パネル1と、前記液晶パネル1より供給される
原信号を次段に照準させるためのコリメーター2と、前
記コリメーター2から供給される画像データの集束を行
うレンズアレイ3と、第1のマスク4と、第2のマスク
5と、入力された光の強度を電気信号に変換するCCD
アレイ6と、電気的演算部7とで構成される。なお、よ
り詳細な図面を、コリメーター2及びレンズアレイ3に
ついては図2に、第1のマスク4は図3に、CCDアレ
イ6は図5にそれぞれ示す。
用マスクに図10に示すような2次元濃淡パターンが記
録されており、2次元レンズアレイによって複製された
原画像が直交変換用マスクのパターン上に投影され、画
像間の積演算を並列的に行なう。
ないため、そのための補正を行う。
レイによって画像周波数濃淡データとマスクの画像間の
積和演算を並列的に行ない、最後にオフセット分の補正
を行う。
ドット、縦480ドットであり、これに640×480
の原画像fが表示される。
処理を示すので、この原画像fを横80分割、縦60分
割にしたブロックサイズ8×8の部分画像fxy(m,
n)(0≦x≦79、0≦y≦59、0≦m≦7、0≦
n≦7)4,800個を考える。
2に示すコリメーター2及びレンズアレイ3を透過する
ことにより、図3aに示すマスク4上に投射される。図
3aに示すu=3,v=2であるブロックαを拡大した
図を図3bに示す。図3bにおいて、Aに示すX=7
8,Y=59の部分、Bに示すX=1,Y=57の部
分、Cに示すX=0,Y=0の部分に投射される光の強
度はそれぞれ数31、数32、数33でそれぞれ表され
る。
像に比べて明るさは64分の1になるとともに、上下左
右が逆転している。
8つの領域に分割されており、横方向をu、縦方向をv
とし、それに対応した数34で表される変換用パターン
Duv(m,n)をそれぞれの領域内に横80個×縦60
個の合計4,800個づつ、リソグラフィー技術もしく
は、ICフォトマスク作成に用いるエレクトロンビーム
による描画等を用いて書かれているものである。
示す第2のマスク5上に、投射される。図4aのu=
3,v=2であるブロックβを拡大した図を、図4bに
示す。
59の部分、Eに示すX=74,Y=56の部分、Fに
示すX=0,Y=0の部分に投射される光の強度はそれ
ぞれ数41、数42、数43表される。
示す第1のマスク4と同様に8×8の領域に分割されて
おり、u,vに対応するc(u,v)が、それぞれの領
域に光の透過率として書かれているものである。
レイ6でその強度を電気信号に変換される。
×縦480のピクセルから成っており、各ピクセルはブ
ロックサイズ8×8の変換用パターンと、それに対応す
る係数c(u,v)を通過したブロックサイズ8×8の
1/64fxy(m,n)のmとnに対する和演算の結果
である F′xy(u,v) を読み取っている。図5aに示すu=3,v=2である
ブロックγの拡大図を図5bに示す。図5bにおいて、
Gに示すX=78,Y=59の部分、Hに示すX=3,
Y=57の部分、Iに示すX=0,Y=0の部分に投射
される光の強度はそれぞれ数51、数52、数53表さ
れる。
は Σm Σn fxy(m,n)=128F′XY(0,0) となっていることより、数6と同等である
れ、各ブロックXYに対応する8×8ブロックサイズの
部分画像fxy(m,n)の周波数成分FXY(u,v)を
それぞれ得ることが出来る。
波数成分を削除し、圧縮をかけることが可能となる。
供給される画像周波数濃淡データに対して電気的な演算
を行う電気的演算部8と、前記電気的演算部8より供給
されるデータの表示を行う液晶パネル9と、前記液晶パ
ネル9より供給されるデータとで光演算を行うための第
3のマスク10と、前記第3のマスク10から供給され
るデータを二分し次段へ供給を行うハーフミラー11
と、前記ハーフミラー11から供給されるデータとで光
演算を行うための第4のマスク12と、前記第4のマス
ク12で演算されたデータの集束を行うためのレンズア
レイ13と、前記レンズアレイ13からの光データを次
段へ照準させるためのコリメーター14と、前記コリメ
ーター14から入力される光データを電気信号へ変換す
るCCDアレイ15と、前記第3のマスク10からの光
信号を次段へ反射させるためのミラー16と、前記ミラ
ーからのデータを次段へ照準させるためのコリメーター
17と、前記コリメーター17からのデータを次段へ集
束させるレンズアレイ18と、前記レンズアレイ18よ
り入力された光信号の強度を電気信号に変換するCCD
アレイ19と、前記CCDアレイ15及びCCDアレイ
19から供給される電気信号に対して電気的演算より補
正を行う電気演算部20とで構成される。
2については図7に示し、CCDアレイ15にいては図
8に示す。
3のマスク10、 第4のマスク12、レンズアレイ1
3、コリメーター14、CCDアレイ15、レンズアレ
イ18は、それぞれ前記した画像圧縮部で用いられてい
る液晶パネル1と、第1のマスク4と、第2のマスク5
と、レンズアレイ3と、コリメーター2と、CCDアレ
イ6と同じものがそれぞれ用いられる。
い光演算処理で処理が行われる様に、前記圧縮部から伝
送された負の値を含んでいる画像周波数データF
XY(u,v)から負の値を含まないデータ{1/8FXY
(u,v)+1/4c(u,v)FXY(0,0)}に変
換されるものである。この変換されたデータは前記した
画像圧縮部におけるCCDアレイ6が受ける光強度F’
XY(u,v)と等しい。
号{1/8FXY(u,v)+1/4c(u,v)F
XY(0,0)}が送られ、その信号が濃淡(光強度)と
して画面上に表示される。画面上に表示された光は、図
6aに示す第3のマスク10に投射される。図6aのu
=3,v=2であるブロックδを拡大した図を図6bに
示すが、図6においてJに示すX=78,Y=59の部
分、Kに示すX=3,Y=58の部分、Lに示すX=
0,Y=0の部分に投射される光の強度は、それぞれ数
61、数62、数63で表される。
ミラー11に送られる。
マスク12へ進むものと、ミラー16へ進むものへと2
分される。
=3,v=2であるブロックεを拡大した図を、図7b
に示す。
59の部分、Nに示すX=4,Y=58の部分、Oに示
すX=0,Y=0の部分に投射される光の強度はそれぞ
れ数71、数72、数73で表される。
レンズアレイ13、コリメーター14を通って図8aに
示されるCCDアレイ15上に投射され、各部分画像ブ
ロック(8×8)の中の1画素内で、周波数u,vにつ
いての和演算がなされf′XY(m,n)が得られる。
の部分は、数81で表される
ター17、レンズアレイ18を通ってCCDアレイ19
上に投射される。
60ピクセルで構成され、各X、Yで1/2Σu Σv c
(u,v){1/8FXY(u,v)+1/4c(u,
v)FXY(0,0)}の積和演算が行われる。この値は
数7の第3項の定数倍になっている。
v)〔Du,v(m,n)−1〕の部分は、本装置固有の
数値であるので電気的演算部20に予めそれを記憶させ
ておけばよい。
される定数倍と負の演算が行われ、各ブロックXYに対
応する8×8ブロックサイズの部分画像fxy(m,n)
がそれぞれ得られ、原画像全体の復元が可能となる。
けば、第3のマスク10からコリメータ14までの光学
系は画像圧縮部で用いられているコリメータ2からマス
ク5までの光学系と同じ構成が可能となる。
像復元化の双方向での使用を可能としている。
交変換を用いた画像圧縮復元装置の実施例を示したが、
ウォルシュ−アダマール変換についての光直交変換を用
いた画像圧縮復元装置を第2の実施例として、以下に示
す。
ーンをWHTuv(m,n)とすると、順変換は数11
で、逆変換は数12でそれぞれ書ける。
れにはDCTの係数c(u,v)に対応するものがな
い。
置の構成は、第1の実施例で用いられた図1に示すDC
Tの装置において、c(u,v)=1とすること、つま
り第2のマスク5と第3のマスク10が無い構成とな
る。
1のどちらかとなっている。
入する必要がある。本装置における理論式は第1の実施
例にならい、以下のように表される。
た信号をもとに、電気的演算部7でその定数倍処理と減
算処理が行われる。
示をさせるためのオフセット加算処理で電気的演算部8
で行われる。
に、第3項がCCDアレイ19の受ける信号から得ら
れ、第2項のΣuΣvWu,v(m,n)の部分はシステム
固有の値であり、電気的演算部20に予めそれを記憶さ
せておけばよい。
20において行われる。
変換による画像圧縮復元も本装置において可能となる。
光学系は、第1の実施例と同様、双方向の画像圧縮化及
び復元化を可能としている。
ンは二値で表されるため、第1のマスク4,12の製造
がDCTパターンに比べて容易である。
変換においても有用であることは言うまでもない。上記
した第1、第2の実施例において用いられる2次元直交
基底濃淡パターンであるマスクは、実際にはリソグラフ
ィープリント技術もしくは、ICフォトマスク作成に用
いるエレクトロンビームによる描画等によって製造され
る。
クや面積階調で表現されたDCT用のマスクの透過率
は、目的のものと完全に一致しているとは限らない。現
実的には、例えば透過率0であるべきものが0.006
であったり、1であるべきものが0.86であったりす
る。
交性は失われてしまっているので、順変換によって得ら
れる周波数成分や逆変換によって得られる復元画像は目
的のものと違ったものになってしまう。
正部を電気的演算部7、20に持たせることにより、上
記した不具合を大きく改善することが可能となる。
像圧縮復元装置の概略全体構成図を示す。
行うための画像圧縮部Xと圧縮された画像の復元を行う
画像復元部Yとの両者に用いられる。
算手段111と、光学的演算部であると共に電気的演算
部でもある和演算手段112と、電気的演算部である透
過率補正部113と、オフセット除去部114とからな
る。
るオフセット加算部115と、光学的演算部である積演
算手段116及び和演算手段117と、電気的演算部で
ある透過率補正部118及びオフセット除去部119と
からなる。
えた周波数成分と基底パターンとの光による積和演算を
示した図である。
透過率で表現された基底パターンであるバイナリーのマ
スク121と光による積和演算が並列的に処理された
後、集光レンズ122によって受光素子123上に集光
される。受光素子123で集められた画像データF’
は、透過率補正部124に供給される。
正の数で表現された周波数成分Fが、オフセットを加え
て0または1の透過率で表現された基底パターンである
バイナリーのマスク121と光による積和演算が並列的
に処理された後、集光レンズ122によって受光素子1
23上に集光される。受光素子123で集められた画像
データF’は、透過率補正部124に供給される。
した図である。
す様に、理想的なマスクパターン値である0または1の
透過率になっておらず、現実の透過率であるblack
(理想的には0に対応)及びtrans(理想的には1
に対応)は、それぞれ0<black<trans<1
となる。
の数で表現された周波数成分Fである光が、このマスク
を透過することになる。
来通過しない光の総量をLBとすると、理想的には、透
過率0の部分のFは全て遮蔽され、透過率1の部分のF
は全て透過し、その総量はLAとなるべきである。
なく、blackとtransである現実的なマスクの
場合には、これを透過する光の総量F′は、図11の記
号を用いて以下のように記述され、また変形することが
できる。
は、数21より以下に示す数22のように導出される。
知の値、または、実験値から容易な計算によって求める
ことが出来る。
ったマスクの2つの透過率の差であり、F′はこのマス
クを透過したFの総量である。ΣFはFの総量である
が、これは直交変換の直流成分そのものである。
レている不完全なマスクを用いた場合でも、2次元行列
の積和演算をすることなく、理想的なマスクを用いた場
合と同等な値を得ることが出来る。
基底パターンの正負をそれぞれの2つのマスクに分ける
方法においても、同様に行えることは明らかである。
ことで、基底パターンが0か1のバイナリーで表される
ことの出来るマスクの透過率が本来の目的通りの値でな
くとも、行列同士の積和を電気的演算に頼ることなく順
変換・逆変換が正しく行なわれる画像圧縮復元装置を提
供することができる。
による画像圧縮復元装置は、光の高速性と並列性を生か
した高速並列演算に基づくものであるため、電子回路で
の処理を大幅に軽減することが出来る。また、従来より
知られているレンズアレイ技術とリソグラフィープリン
ト技術またはエレクトロンビームによる描画技術等を用
いることにより装置を製造することが可能であるため、
低コストにて画像圧縮復元装置を実現することが可能と
なる。
例の圧縮部を示す。
例の復元部を示す。
アレイ3の働きを示した図である。
た図である。
図である。
示す図を示す。
す。
た図である。
した図である。
す図である。
示す図である。
トを加えた周波数成分と基底パターンとの光による積和
演算を示した図を示す。
Claims (2)
- 【請求項1】 光直交変換を用いた画像圧縮復元装置で
あって、 入力された原画像を2次元の小ブロックに分けて、該小
ブロックの画像と2次元直交基底濃淡パターンとの光に
よる2次元積演算を行う積演算手段と、 該積演算手段より出力された信号から前記原画像の周波
数成分を得るための光による和演算手段と、 前記積演算手段及び前記和演算手段において実行出来な
い負の演算について電気的に補正を行うための電気的演
算手段とを具備することを特徴とする画像圧縮部と、 前記画像圧縮部により記録された画像周波数濃淡データ
と直交基底濃淡パターンとの光による画像間の積演算を
行ない各展開係数に対応する要素画像を得る積演算手段
と、 前記演算手段により得られた要素画像を光学的に重ね合
わせる和演算手段と、 前記和演算手段にて実行出来ない負の演算処理について
電気的演算を用いて補正を行うための電気的演算手段と
を具備することを特徴とする画像復元部とで構成される
光直交変換を用いた画像圧縮復元装置。 - 【請求項2】 前記2次元直交基底濃淡パターンの透過
率が1または0ではない場合、前記2次元直交基底濃淡
パターンを通過した信号に対して透過率が1または0と
なるように電気的に補正する透過率補正手段を備えた請
求項1に記載の画像圧縮復元装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP28639193A JP2905676B2 (ja) | 1993-11-16 | 1993-11-16 | 光直交変換による画像圧縮復元装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP28639193A JP2905676B2 (ja) | 1993-11-16 | 1993-11-16 | 光直交変換による画像圧縮復元装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH07143484A JPH07143484A (ja) | 1995-06-02 |
JP2905676B2 true JP2905676B2 (ja) | 1999-06-14 |
Family
ID=17703797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP28639193A Expired - Fee Related JP2905676B2 (ja) | 1993-11-16 | 1993-11-16 | 光直交変換による画像圧縮復元装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2905676B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7194139B1 (en) | 1999-05-19 | 2007-03-20 | Lenslet Ltd. | Image compression |
WO2024024129A1 (ja) * | 2022-07-26 | 2024-02-01 | ソニーグループ株式会社 | 光演算装置および光演算処理システム |
-
1993
- 1993-11-16 JP JP28639193A patent/JP2905676B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH07143484A (ja) | 1995-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5537492A (en) | Picture compressing and restoring system and record pattern forming method for a spatial light modulator | |
JP4465112B2 (ja) | Lcdパネルにおける画像表示に適したdwtに基づくアップサンプリング・アルゴリズム | |
US5453844A (en) | Image data coding and compression system utilizing controlled blurring | |
US7194143B2 (en) | Method of enhancement of the visual display of images and other visual data records | |
Miceli et al. | Inverse halftoning | |
EP1010138A1 (en) | Device profiles for use in a digital image processing system | |
EP0909516A1 (en) | Method and apparatus for decoding spatiochromatically multiplexed color images using predetermined coefficients | |
JP2005535010A (ja) | 光学異常の電子補正のためのシステムおよび方法 | |
US6141017A (en) | Method and apparatus for scaling an array of digital data using fractal transform | |
JP3557626B2 (ja) | 画像復元装置及び方法 | |
JP2555430B2 (ja) | 画像の輪郭強調方法 | |
JPH06348840A (ja) | 画像復元方法 | |
US6181831B1 (en) | Spatial frequency-domain video signal processing | |
JP3112800B2 (ja) | 光演算装置 | |
JP2905676B2 (ja) | 光直交変換による画像圧縮復元装置 | |
US7123773B2 (en) | Image coding-decoding method, image coding-decoding system, image coder, image decoder, and storage medium | |
JP3733225B2 (ja) | 画像処理装置及び方法 | |
JP2869306B2 (ja) | 光直交変換方法及び装置 | |
US6882752B1 (en) | Image compression and expansion apparatus and pixel number increasing apparatus | |
JP3532961B2 (ja) | キャラクタフォント合成装置 | |
JPH07294972A (ja) | 光学的2次元直交変換装置 | |
JP2024077420A (ja) | 撮像装置 | |
Izario et al. | Technical review on digital image/video processing algorithms. | |
JPH10145790A (ja) | 画像形成装置および画像形成方法 | |
JPH0998414A (ja) | 画像符号化・復号化方法及びシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080326 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090326 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100326 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100326 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110326 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120326 Year of fee payment: 13 |
|
LAPS | Cancellation because of no payment of annual fees |