JP3076070B2 - Encoded data transmission device - Google Patents

Encoded data transmission device

Info

Publication number
JP3076070B2
JP3076070B2 JP03023890A JP2389091A JP3076070B2 JP 3076070 B2 JP3076070 B2 JP 3076070B2 JP 03023890 A JP03023890 A JP 03023890A JP 2389091 A JP2389091 A JP 2389091A JP 3076070 B2 JP3076070 B2 JP 3076070B2
Authority
JP
Japan
Prior art keywords
code
transmitting
data
past
generated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP03023890A
Other languages
Japanese (ja)
Other versions
JPH04250775A (en
Inventor
泰之 野水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP03023890A priority Critical patent/JP3076070B2/en
Publication of JPH04250775A publication Critical patent/JPH04250775A/en
Application granted granted Critical
Publication of JP3076070B2 publication Critical patent/JP3076070B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Image Processing (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は、2値データを予測符号
化によりデータ圧縮して送信する符号化データ送信装置
に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an encoded data transmitting apparatus for compressing binary data by predictive encoding and transmitting the compressed data.

【0002】[0002]

【従来の技術】データ圧縮を行なうための予測符号化の
一方式として、算術符号(Arithmetic Co
ding)が知られている。
2. Description of the Related Art As one method of predictive coding for performing data compression, arithmetic codes (Arithmetic Co.
ding) is known.

【0003】この算術符号では、符号化データを元のデ
ータに復元する場合、符号化データと、先に復号化する
過程で得られた各種パラメータとの間で一定の演算処理
を行なうようにしている。
[0003] In this arithmetic code, when the coded data is restored to the original data, a fixed operation process is performed between the coded data and various parameters obtained in the decoding process. I have.

【0004】このため、符号化データを伝送する場合
に、受信側が一旦受信エラーを起こすと、その後元のデ
ータを正しく復元することができなくなる。
[0004] For this reason, when transmitting the encoded data, if the receiving side once causes a reception error, the original data cannot be correctly restored thereafter.

【0005】ところで、通常、ファクシミリ装置は、原
稿画像をページ単位に1ラインずつ伝送している。この
ため、ファクシミリ装置で、算術符号により画像データ
をデータ圧縮して伝送する場合に、一度伝送エラーが発
生すると、その後受信する全ラインの画情報を復元する
ことができなくなり、受信画像が大幅に欠落することに
なる。
Usually, a facsimile apparatus transmits a document image line by line in page units. For this reason, when a facsimile apparatus transmits image data after compressing the image data using arithmetic codes, if a transmission error occurs once, it becomes impossible to restore the image information of all subsequently received lines, and the received image is greatly reduced. Will be missing.

【0006】[0006]

【発明が解決しようとする課題】このように、従来は、
算術符号によりデータ圧縮してデータ伝送する場合、伝
送エラー発生時に伝送データの欠落が大きいため、実用
的でないという問題があった。
As described above, conventionally,
When data is transmitted by compressing data using an arithmetic code, there is a problem that transmission data is lost when a transmission error occurs, which is not practical.

【0007】本発明は、上記の問題を解決し、伝送エラ
ー発生時の伝送データの欠落を減少し実用に供すること
ができる符号化データ送信装置を提供することを目的と
する。
SUMMARY OF THE INVENTION It is an object of the present invention to solve the above-mentioned problems and to provide an encoded data transmitting apparatus which can reduce the loss of transmission data when a transmission error occurs and can be put to practical use.

【0008】[0008]

【課題を解決するための手段】通常、符号化処理は、過
去の予測結果および生成した符号が共にない初期状態で
開始するが、本発明は、その符号化処理により生成した
符号を順次送信して、その符号を一定バイト数送信する
ごとに、上記初期状態にすると共に、一定の識別符号を
送信するようにしたことを特徴とするものである。
Normally, the encoding process starts in an initial state in which there is no past prediction result and no generated code, but the present invention sequentially transmits the codes generated by the encoding process. Each time the code is transmitted for a fixed number of bytes, the code is set to the initial state and a fixed identification code is transmitted.

【0009】[0009]

【作用】伝送エラーが発生しても、受信側では、その
後、上記識別符号を受信した時点で、復号化部を初期化
することにより、その後の受信データを正しく復元する
ことができる。これにより、伝送エラー発生時の伝送デ
ータの欠落が減少し、実用に供することができるように
なる。
Even if a transmission error occurs, the receiving side can correctly restore the subsequent received data by initializing the decoding section when the above-mentioned identification code is received. As a result, loss of transmission data when a transmission error occurs is reduced, and the transmission data can be put to practical use.

【0010】[0010]

【実施例】以下、添付図面を参照しながら、本発明の実
施例を詳細に説明する。
Embodiments of the present invention will be described below in detail with reference to the accompanying drawings.

【0011】図1は、本発明の一実施例に係る画像伝送
システムのブロック構成図を示したものである。図にお
いて、データ圧縮部1は、シンボル確率評価器1aと符
号化器1bとで構成され、2値画像データをQ−COD
ERと呼ばれる算術符号の既知方式により符号化するも
のである。送信部2は、その符号化により得られた符号
情報を通信回線に送信するものである。制御部3は、デ
ータ圧縮部1や送信部2の動作の監視および制御を行な
うものである。
FIG. 1 is a block diagram showing an image transmission system according to an embodiment of the present invention. In the figure, a data compression unit 1 includes a symbol probability evaluator 1a and an encoder 1b, and converts binary image data into a Q-COD.
It is encoded by a known method of an arithmetic code called ER. The transmitting unit 2 transmits the code information obtained by the coding to a communication line. The control unit 3 monitors and controls the operation of the data compression unit 1 and the transmission unit 2.

【0012】受信部4は、上記通信回線を介して符号情
報を受信するものである。データ復元部5は、復号化器
5aと確率評価器5bとで構成され、受信した符号情報
を元の2値画像データに復元するものである。制御部6
は、受信部4やデータ復元部5の動作の監視および制御
を行なうものである。
The receiving section 4 receives code information via the communication line. The data restoring unit 5 includes a decoder 5a and a probability evaluator 5b, and restores received code information to original binary image data. Control unit 6
Monitors and controls the operation of the receiving unit 4 and the data restoring unit 5.

【0013】以上の構成で、次に、本実施例の画像伝送
システムの画像伝送動作を説明する。
Next, an image transmission operation of the image transmission system according to the present embodiment having the above configuration will be described.

【0014】送信側は、起動すると、図2に示すよう
に、制御部3は、送信データを計数するための変数rを
一定値Rとおき(処理101)、画像データの入力をチ
ェックする(処理102)。
When the transmitting side starts, as shown in FIG. 2, the control section 3 sets a variable r for counting transmission data to a constant value R (processing 101) and checks input of image data (step 101). Process 102).

【0015】画像送信の際には、図示せぬ装置から黒白
の2値像データが1ラインずつ順次入力される。画像デ
ータが入力されると(処理102のY)、制御部3はデ
ータ圧縮部1および送信部2を作動させる。
At the time of image transmission, black and white binary image data is sequentially input line by line from a device (not shown). When image data is input (Y in process 102), the control unit 3 operates the data compression unit 1 and the transmission unit 2.

【0016】これにより、確率評価器1aは、入力され
る画像データをシンボル情報として識別し、各画素ごと
に過去の画素状態に基づいてシンボルの出現確率を予測
する。そして、優勢シンボルは黒か白かを示す優勢シン
ボル情報MPSと、劣勢シンボルの出現確率Qeとを出
力する。
Thus, the probability evaluator 1a identifies the input image data as symbol information, and predicts the appearance probability of the symbol for each pixel based on the past pixel state. Then, it outputs the superior symbol information MPS indicating whether the superior symbol is black or white, and the appearance probability Qe of the inferior symbol.

【0017】符号化器1bは、入力された画像データお
よび上記優勢シンボル情報MPSと劣勢シンボルの出現
確率Qeに基ずいて所定の演算処理を行ない、順次算術
符号を生成する(以上、処理103)。
The encoder 1b performs predetermined arithmetic processing based on the input image data, the above-mentioned superior symbol information MPS, and the appearance probability Qe of the inferior symbol, and sequentially generates an arithmetic code (the above processing 103). .

【0018】次いで、制御部3は、生成された符号のビ
ット数をチェックし(処理104)、1バイト未満の場
合(処理104のN)、上記処理を継続する(処理10
2へ)。そして、1バイト分の符号が生成されると(処
理104のY)、送信部2は生成された符号を送信する
(処理105)。
Next, the control unit 3 checks the number of bits of the generated code (step 104), and if the number is less than 1 byte (N in step 104), continues the above processing (step 10).
2). Then, when a code for one byte is generated (Y in process 104), the transmitting unit 2 transmits the generated code (process 105).

【0019】次いで、制御部3は、変数rを−1して
(処理106)、その値をチェックする(処理10
7)。ここで、変数r=0でなければ(処理107の
N)、上記処理を繰り返す(処理102)。
Next, the controller 3 decrements the variable r by 1 (step 106) and checks the value (step 10).
7). Here, if the variable r is not 0 (N in Step 107), the above processing is repeated (Step 102).

【0020】これにより、生成された符号が1バイト送
信されるごとに変数rが減少する。このようにして、変
数r=0になったとき(処理107のY)、予め設定さ
れた識別符号Sを送信する(処理108)。この識別符
号は、上記符号化で得られる符号とは重複しない一定デ
ータであり、例えば、オール“1”の2バイトのデータ
に設定する。
As a result, the variable r decreases each time the generated code is transmitted by one byte. In this way, when the variable r = 0 (Y in step 107), a preset identification code S is transmitted (step 108). This identification code is constant data that does not overlap with the code obtained by the above-described encoding, and is set to, for example, 2-byte data of all “1”.

【0021】この後、確率評価器1aおよび符号化器1
bを初期化する(処理109)。これにより、確率評価
器1aから出力される優勢シンボル情報MPSおよび劣
勢シンボルの出現確率Qeの値は、初期値が示されるこ
とになる。
Thereafter, the probability evaluator 1a and the encoder 1
b is initialized (process 109). As a result, initial values are shown for the values of the superior symbol information MPS and the inferior symbol appearance probability Qe output from the probability evaluator 1a.

【0022】そして、以上の処理を最初から同様に繰り
返す(処理101へ)。これにより、図3に示すよう
に、画像データの算術符号は、一定数Rバイトごとに識
別符号Sが挿入されて順次送信される。そして、画像デ
ータの入力がなくなると(処理102のN)、以上の送
信処理を終了する。
Then, the above processing is repeated in the same manner from the beginning (to processing 101). As a result, as shown in FIG. 3, the arithmetic code of the image data is sequentially transmitted with the identification code S inserted for every fixed number of R bytes. Then, when there is no input of image data (N in process 102), the above-described transmission process ends.

【0023】一方、受信側は、図4に示すように、受信
部4が送信される符号を順次受信する(処理201)。
このとき、制御部6は、受信する符号を監視し(処理2
02)、算術符号である場合には(処理202のN)、
復号化器5a,確率評価器5bを作動させる。
On the other hand, as shown in FIG. 4, the receiving side sequentially receives the codes transmitted by the receiving unit 4 (process 201).
At this time, the control unit 6 monitors the code to be received (Process 2
02), if it is an arithmetic code (N in process 202),
The decoder 5a and the probability evaluator 5b are operated.

【0024】これにより、復号化器5aは、受信した算
術符号を、確率評価器5bから出力される優勢シンボル
情報MPSおよび劣勢シンボルの出現確率Qeに基づい
て、元の画像データに復元する。これに並行して、確率
評価器5bは復元された画像データを入力して、優勢シ
ンボル情報MPSおよび劣勢シンボルの出現確率Qeを
出力する(以上、処理203)。
Thus, the decoder 5a restores the received arithmetic code to the original image data based on the superior symbol information MPS and the inferior symbol appearance probability Qe output from the probability evaluator 5b. In parallel with this, the probability evaluator 5b inputs the restored image data, and outputs the superior symbol information MPS and the appearance probability Qe of the inferior symbol (step 203).

【0025】復元された画像データは、例えば、記録装
置などの図示せぬ装置に出力する(処理204)。
The restored image data is output to a device (not shown) such as a recording device (step 204).

【0026】本実施例では、受信画像の画素数は予め一
定値に設定されているものとする。上記画像データ出力
の際には、出力した画素数を計数することにより、画像
受信が終了かどうかを判別する(処理205)。画像受
信が継続している場合には(処理205のN)、受信し
た1バイト単位の1つの算術符号の復号化が終了したか
どうか判別する(処理206)。その1つの算術符号の
処理が完了してない場合には(処理206のN)、前記
復号処理に戻る(処理203)。
In this embodiment, it is assumed that the number of pixels of the received image is set to a fixed value in advance. At the time of outputting the image data, it is determined whether or not the image reception is completed by counting the number of output pixels (step 205). If image reception is continued (N in process 205), it is determined whether decoding of one received one-byte arithmetic code has been completed (process 206). If the processing of the one arithmetic code is not completed (N in processing 206), the process returns to the decoding processing (processing 203).

【0027】そして、上記1つの算術符号に対する復号
化が終了すると(処理206のY)、次の符号を受信し
て同様の処理を繰り返す(処理201へ)。
When the decoding of the one arithmetic code is completed (Y in step 206), the next code is received and the same processing is repeated (to step 201).

【0028】図3から分るように、算術符号を一定数R
バイト受信するごとに、前記識別符号Sを受信すること
になる。この識別符号Sを受信した場合には(処理20
2のY)、復号化器5aと確率評価器5bとを初期化し
て(処理207)、前記と同様の復号化処理を実行する
(処理203)。
As can be seen from FIG. 3, the arithmetic code is a constant number R
Each time a byte is received, the identification code S is received. When the identification code S is received (step 20
(Y of 2), the decoder 5a and the probability evaluator 5b are initialized (process 207), and the same decoding process as described above is executed (process 203).

【0029】識別符号Sの次の算術符号は、送信側にお
いても、確率評価器1aと符号化器1bとを初期化して
生成されたものである。従って、受信側も、上記初期化
により、その算術符号を正しく復号することができる。
The arithmetic code following the identification code S is generated on the transmitting side by initializing the probability evaluator 1a and the encoder 1b. Therefore, the receiving side can also correctly decode the arithmetic code by the initialization.

【0030】このようにして、予め設定された上記一定
値の画素数分の画像データを受信すると(処理205の
Y)、以上の受信処理を終了する。
When image data for the predetermined number of pixels is received (Y in step 205), the above-described reception processing is terminated.

【0031】以上のように、本実施例では、画像データ
を算術符号により符号化して伝送する際に、送信側は、
算術符号を一定バイト送信するごとに、データ圧縮部1
を初期化すると共に一定の識別符号Sを送信し、受信側
は、識別符号Sを受信するごとに、データ復元部5を初
期化している。
As described above, in this embodiment, when image data is encoded by an arithmetic code and transmitted, the transmitting side
Each time a certain number of bytes of the arithmetic code are transmitted, the data compression unit 1
Is initialized and a certain identification code S is transmitted, and the receiving side initializes the data restoration unit 5 every time the identification code S is received.

【0032】このような初期化を行なうと、受信側で
は、算術符号を復号化する際、過去に復号化する過程で
得られた各種パラメータを参照しないで、元の画像デー
タを復元することができる。これにより、伝送エラーが
発生したとしても、次に、識別符号Sを受信する時点か
ら、必ず画像データを正しく復元できるため、伝送デー
タの欠落が減少する。
By performing such initialization, when decoding the arithmetic code, the receiving side can restore the original image data without referring to various parameters obtained in the past decoding process. it can. As a result, even if a transmission error occurs, the image data can always be correctly restored from the time when the identification code S is received, so that the loss of transmission data is reduced.

【0033】従って、ファクシミリ装置で画像伝送する
場合、例えば数ラインごとに初期化するように設定すれ
ば、伝送エラーが発生したとしても、1ページの画像の
内、数ラインという僅かの画像しか欠落しないので、実
用上支障がなくなる。
Therefore, when transmitting an image with a facsimile apparatus, if initialization is performed every several lines, for example, even if a transmission error occurs, only a few lines of an image of one page are lost. No practical problem occurs.

【0034】なお、上記実施例では、画像データは予測
符号化の一方式であるQ−CODERにより符号化する
場合を例にとって説明したが、本発明は他の予測符号化
方式においても同様に適用することが考えられる。
Although the above embodiment has been described by taking as an example the case where image data is encoded by Q-CODER, which is a method of predictive coding, the present invention is similarly applied to other predictive coding methods. It is possible to do.

【0035】また、画像データを伝送する場合について
説明したが、例えば、音声信号をデジタル信号に変換し
て伝送する場合のように、部分的に伝送データが欠落し
ても支障がないデータ伝送分野において、本発明を適用
することができる。
Although the description has been given of the case where image data is transmitted, for example, in a data transmission field where transmission data is partially lost, such as when an audio signal is converted into a digital signal and transmitted, there is no problem. In the above, the present invention can be applied.

【0036】[0036]

【発明の効果】以上のように、本発明によれば、生成し
た符号を一定バイト数送信するごとに、過去の予測結果
および生成した符号が共にない初期状態に戻して、一定
の識別符号を送信するようにしたので、受信側では、そ
の識別符号を受信した時点で復号化部を初期化すること
により、その後の受信データを確実に復元することがで
きるため、伝送エラー発生時の伝送データの欠落が減少
し、実用に供することができるようになる。
As described above, according to the present invention, every time the generated code is transmitted by a certain number of bytes, the code is returned to the initial state where neither the past prediction result nor the generated code is present, and a certain identification code is transmitted. Since the transmission is performed, the receiving side initializes the decoding unit when the identification code is received, so that the subsequent reception data can be reliably restored. Can be reduced, and can be put to practical use.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施例に係る画像伝送システムのブ
ロック構成図。
FIG. 1 is a block diagram of an image transmission system according to an embodiment of the present invention.

【図2】送信側のデータ処理を示す動作フローチャー
ト。
FIG. 2 is an operation flowchart showing data processing on the transmission side.

【図3】伝送データの説明図。FIG. 3 is an explanatory diagram of transmission data.

【図4】受信側のデータ処理を示す動作フローチャー
ト。
FIG. 4 is an operation flowchart illustrating data processing on the receiving side.

【符号の説明】[Explanation of symbols]

1 データ圧縮部 1a,5b 確率評価器 1b 符号化器 2 送信部 3,6 制御部 4 受信部 5 データ復元部 5a 復号化器 DESCRIPTION OF SYMBOLS 1 Data compression part 1a, 5b Probability evaluator 1b encoder 2 Transmission part 3, 6 Control part 4 Receiving part 5 Data decompression part 5a Decoder

フロントページの続き (58)調査した分野(Int.Cl.7,DB名) H04N 1/41 - 1/419 G06T 9/00 Continuation of the front page (58) Field surveyed (Int.Cl. 7 , DB name) H04N 1/41-1/419 G06T 9/00

Claims (1)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 2値データを順次入力する入力手段と、
その2値データの過去のシンボル系列と過去の予測結果
とに基づいて各シンボルの出現確率を予測する予測評価
手段と、その予測結果と過去に生成した符号とに基づい
て新たな符号を順次生成する予測符号化手段と、生成し
た符号を送信する送信手段とを備えている符号化データ
送信装置において、過去の予測結果および生成した符号
が共にない初期状態で上記予測および上記符号の生成を
開始する処理開始手段と、生成した上記符号を順次送信
する送信手段と、その符号を一定バイト数送信するごと
に過去における上記予測結果および生成した符号が共に
ない上記初期状態にする初期化手段と、上記初期状態に
するごとに一定の識別符号を送信する識別符号送信手段
とを備えていることを特徴とする符号化データ送信装
置。
An input unit for sequentially inputting binary data;
Prediction evaluation means for predicting the appearance probability of each symbol based on the past symbol sequence of the binary data and the past prediction result, and sequentially generating a new code based on the prediction result and the code generated in the past In a coded data transmitting apparatus including a predictive coding unit for performing the above and a transmitting unit for transmitting the generated code, the prediction and the generation of the code are started in an initial state in which there is no past prediction result and the generated code. Processing starting means, and transmitting means for sequentially transmitting the generated code, and initialization means for setting the initial state in which neither the prediction result in the past nor the generated code is present each time the code is transmitted by a fixed number of bytes, A coded data transmitting device comprising: an identification code transmitting means for transmitting a fixed identification code each time the initial state is set.
JP03023890A 1991-01-25 1991-01-25 Encoded data transmission device Expired - Lifetime JP3076070B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP03023890A JP3076070B2 (en) 1991-01-25 1991-01-25 Encoded data transmission device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP03023890A JP3076070B2 (en) 1991-01-25 1991-01-25 Encoded data transmission device

Publications (2)

Publication Number Publication Date
JPH04250775A JPH04250775A (en) 1992-09-07
JP3076070B2 true JP3076070B2 (en) 2000-08-14

Family

ID=12123047

Family Applications (1)

Application Number Title Priority Date Filing Date
JP03023890A Expired - Lifetime JP3076070B2 (en) 1991-01-25 1991-01-25 Encoded data transmission device

Country Status (1)

Country Link
JP (1) JP3076070B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694126A (en) * 1995-03-20 1997-12-02 Oki Data Corporation Adaptive predictive data compression method and apparatus

Also Published As

Publication number Publication date
JPH04250775A (en) 1992-09-07

Similar Documents

Publication Publication Date Title
US5861824A (en) Encoding method and system, and decoding method and system
JP2836467B2 (en) Binary symbol encoding / decoding circuit
JP3123792B2 (en) Encoding device and decoding device using arithmetic code
JP3093830B2 (en) Image data compression transmission method
JP5006631B2 (en) Video data encoding apparatus, video data decoding apparatus, video data encoding method, and video data decoding method
US5960117A (en) Method of adaptive arithmetic encoding/decoding according to JBIG standard
JP3076070B2 (en) Encoded data transmission device
JPH07264417A (en) Image coding method
EP0710008A1 (en) Image compression and decompression using predictive coding and error diffusion
JP3226637B2 (en) Coding device and decoding device for predictive coding method
JP3123795B2 (en) Encoding device and decoding device using arithmetic code
JP3235793B2 (en) Image transmission method
JP2002290742A (en) Image error stream correction method and decoding apparatus
US6738521B2 (en) Coding device and coding method
KR960014318B1 (en) Data compressing method of facsimile
JP3187696B2 (en) Image coding device
CN101207698B (en) System for second order image association compressed encoding and decoding
JPS63117562A (en) Image data coding system
JPH088754A (en) Data compression transmission system and data transmitter and storage device using it
JPH0984003A (en) Image data communication method and image data communication equipment
JPH07193817A (en) Method and device for picture transmission
JPH05122534A (en) Encoder and decoder using arithmetic code
JPH04183070A (en) Method for compressing image data
JPH06268830A (en) Data transmission controller
JPH029260A (en) Transmission data verification system for facsimile equipment

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080609

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090609

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090609

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100609

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110609

Year of fee payment: 11

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110609

Year of fee payment: 11