JP3568213B2 - Digital signal processor - Google Patents

Digital signal processor Download PDF

Info

Publication number
JP3568213B2
JP3568213B2 JP01639093A JP1639093A JP3568213B2 JP 3568213 B2 JP3568213 B2 JP 3568213B2 JP 01639093 A JP01639093 A JP 01639093A JP 1639093 A JP1639093 A JP 1639093A JP 3568213 B2 JP3568213 B2 JP 3568213B2
Authority
JP
Japan
Prior art keywords
error
data
processing
circuit
scale factor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP01639093A
Other languages
Japanese (ja)
Other versions
JPH06232760A (en
Inventor
桂太 河原
正人 夫馬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP01639093A priority Critical patent/JP3568213B2/en
Publication of JPH06232760A publication Critical patent/JPH06232760A/en
Application granted granted Critical
Publication of JP3568213B2 publication Critical patent/JP3568213B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Error Detection And Correction (AREA)

Description

【0001】
【産業上の利用分野】
本発明はディジタル信号処理装置に係り、詳しくは、量子化されたデータを逆量子化することによって復号化する逆量子化回路に関するものである。
【0002】
【従来の技術】
近年、ディジタル信号を圧縮化することにより記録媒体の低容量化や伝送路の縮小化を図ることが求められている。
【0003】
そのために、標本化したデータを適宜な個数分ずつひとまとめにして各ユニットとし、その各ユニット毎に量子化を行う方法が提案されている。
この方法においては、量子化のビット数(以下、ワード長コードという)と規格化したときの値の大きさ(以下、スケール因子値という)とを各ユニット毎に割り当てて量子化を行い、量子化されたデータ(以下、サンプルデータという)を求めている。すなわち、一般的な量子化においては固定ワード長で量子化されるが、この方法では通常、固定ワード長より少ない可変ワード長で量子化されるため全データ量を圧縮することができる。また、この方法では、ユニット毎にワード長コードとスケール因子値とを割り当てるので、そのデータの増加分は、可変ワード長で量子化することによる全データ量の減少に比べて少ない。
【0004】
そして、この方法における逆量子化では、サンプルデータAとそのサンプルデータAに対応するユニットのワード長コードWLおよびスケール因子値SFから、サンプルデータAを逆量子化したデータBを例えば式(1)に示す演算によって求めている。すなわち、逆量子化回路内で式(1)に示す演算を行うことにより、圧縮されたデータを伸長して復号化することができる。
【0005】
B=A・SF・F(WL) ………(1)
(但し、F(WL)はワード長コードWLの関数)
また、この方法では、ユニットを適宜な個数分ひとまとめにして1つのグループとし、そのグループ単位でシリアル転送することにより記録媒体への書き込み及び読み出し(または、伝送路への送受信)が行われるようになっている。
【0006】
図3に、1グループのシリアルデータの配列を示す。この図3では、シリアルデータの転送方向を右方向としている。すなわち、記録媒体から読み出される(または、伝送路から送られてくる)シリアルデータは、図3に示す最も左側のビットを先頭ビットとし、その先頭ビットから順次右方向に逆量子化回路へ入力されるものとしている。
【0007】
1グループのシリアルデータは例えば先頭から、ワード長コード,スケール因子コード,サンプルデータの順で配列されている。ここで、1つのグループはn個のユニットで構成され、各ユニットに対応する各ワード長コードはそれぞれmビット、各ユニットに対応する各スケール因子コードはそれぞれeビットで構成されている。尚、スケール因子コードは、逆量子化回路内に設けられたデコーダによって変換されて前記スケール因子値となる。
【0008】
図4に、各ユニットとサンプルデータの各サンプルの対応関係の一例を示す。
この例では、サンプルデータの先頭サンプルからa個目のサンプルまで(1〜a)がユニット1に対応し、サンプルデータのa+1個目のサンプルからb個目のサンプルまで(a+1〜b)がユニット2に対応している。そして、サンプルデータのc個目のサンプルから最後(N個目)のサンプルまで(c〜N)がユニットnに対応している。
【0009】
ここで、サンプルデータの各サンプルのビット数は、対応するユニット(1〜n)のワード長コードによって規定されている。すなわち、各ワード長コードおよび各スケール因子コードのビット数はそれぞれ一律(mビット、eビット)に規定されているが、サンプルデータの各サンプルのビット数は一律にはならない。そのため、1グループ全体としてのデータ長(kバイト)も一律にはならない。
【0010】
このような方法による量子化・逆量子化は、音響や画像等のデータの圧縮処理に利用することが考えられる。
例えば、オーディオ信号の処理に利用する場合は、先ず、時間軸上のオーディオ信号をA/D変換したディジタルオーディオデータを適宜な時間窓で切り出す。その時間窓で切り出した各ディジタルオーディオデータがそれぞれ前記1グループのデータに対応している。そして、切り出されたディジタルオーディオデータを、適宜な直交変換(離散的フーリエ変換(DFT)や離散的余弦変換(DCT)または改良離散的余弦変換(MDCT)等)によって周波数軸上に変換して、適宜な周波数幅の複数個の信号成分に分解する。
【0011】
その複数個の信号成分を、人間の聴覚の雑音に対する感覚や周波数分析能力(周波数分解能)に基づく臨界帯域幅(クリティカルバンドと呼ばれ、高域ほど帯域幅が広くなる))をもとにして決められるバンドでまとめる。
【0012】
そして、各信号成分を前記ワード長コードおよびスケール因子値を用いて量子化し、図3に示すようなシリアルデータ列として記録媒体(光ディスク,光磁気ディスク,磁気テープ等)への書き込み(または、伝送路への送新)を行う。逆量子化においては、前記したように、サンプルデータとそのサンプルデータに対応するワード長コードおよびスケール因子値から、サンプルデータを逆量子化したデータ(すなわち、前記信号成分)を求めるようにするわけである。
【0013】
【発明が解決しようとする課題】
ところで、上記の方法では、逆量子化において、1つのグループのいずれかのビットに誤りがある場合、その誤りのあるビットがワード長コード,スケール因子コード,サンプルデータの内いずれにあるかに関係なく、そのグループ全体に対して誤り処理を行っていた。
【0014】
しかしながら、1つのグループ全体に対して誤り処理を行うため、有効データ(無誤りのデータ)の利用率が低くなるという問題があった。すなわち、誤りのあるビット以外のビットがもっている有効データに対しても一律に誤り処理を行うために(言い換えれば、せっかくの有効データを誤りのあるデータと一緒に「捨てて」しまうために)、有効データを十分に利用することができなかった。
【0015】
さらに、誤り処理では完全なデータの復元はできず、結局のところ、逆量子化全体をみたときに誤りのあるデータが目立たないようにするものでしかない。そのため、有効データの利用率が低いと、逆量子化の精度が低下するという問題があった。
【0016】
また、上記の方法では、逆量子化の前処理として、1グループを適宜なビット数で分割したセット毎に、エラーフラグが立てられている。このエラーフラグは、対応するセットのいずれかのビットに誤りがあるかどうかを検出するためのものである。そして、1グループのデータ列と共にエラーフラグのデータ列がシリアル転送されて、逆量子化回路に入力されるようになっている。
【0017】
逆量子化回路内にはバッファRAMが設けられており、シリアル転送されてきた1グループのデータとエラーフラグのデータとは一旦そのバッファRAMに蓄えられるようになっている。そして、必要に応じてバッファRAMからエラーフラグのデータを読み出し、読み出したエラーフラグに基づいて誤り処理を行っている。そのため、バッファRAMへのアクセス回数が多くなると逆量子化の処理速度が低下するという問題があった。
【0018】
そこで、バッファRAMとは別個にエラーフラグ処理用レジスタを設け、バッファRAMに蓄えられている1グループ分のエラーフラグの全データをエラーフラグ処理用レジスタに一度に転送することが考えられている。この場合は、必要に応じてエラーフラグ処理用レジスタからエラーフラグのデータを読み出し、読み出したエラーフラグに基づいて誤り処理を行うわけである。
【0019】
この場合、エラーフラグ処理用レジスタのアクセス速度はバッファRAMのそれに比べてはるかに速いため、逆量子化の処理速度が低下することはない。しかしながら、エラーフラグのデータ量が多い場合(すなわち、1グループまたは1セットのビット数が多い場合)には、エラーフラグ処理用レジスタの回路規模およびエラーフラグ処理用レジスタから所望のエラーフラグを取り出す回路の回路規模が大きくなると共に、バッファRAMとエラーフラグ処理用レジスタを結ぶデータバスの幅も広くなる。そのため、逆量子化回路全体の回路規模が増大して高集積化を阻害するという問題がある。
【0020】
本発明は上記問題点を解決するためになされたものであって、第1の発明の目的は、誤り処理において有効データの利用率を高めることにより逆量子化の精度を高めることが可能なディジタル信号処理装置を提供することにある。また、第2の発明の目的は、逆量子化処理において誤り処理を行う際に、回路規模を増大させることなく処理速度を高めることが可能なディジタル信号処理装置を提供することにある。
【0021】
【課題を解決するための手段】
第1の発明は、標本化したデータを適宜な個数分ずつひとまとめにして各ユニットとし、その各ユニット単位でデータを量子化してから、ユニットを適宜な個数分ずつひとまとめにして各グループとし、その各グループ毎にユニット単位で逆量子化するディジタル信号処理装置において、1つのグループ内のいずれかのビットに誤りが発生した場合には、その誤りの影響を受ける量子化データについてのみ誤り処理を行うことをその要旨とする。
【0022】
第2の発明は、標本化したデータを適宜な個数分ずつひとまとめにして各ユニットとし、その各ユニット単位でデータを量子化してから、ユニットを適宜な個数分ずつひとまとめにして各グループとし、1つのグループのデータを適宜に分割したセット毎に、そのセットのいずれかのビットに誤りがあるかどうかを検出するためのエラーフラグを立て、各グループ毎にユニット単位で逆量子化するディジタル信号処理装置において、1つのグループに対応するエラーフラグのデータを蓄えるバッファRAMと、そのバッファRAMに蓄えられたエラーフラグのデータから、一度に予め定められたデータ数分ずつ読み出して格納するエラーフラグ処理用レジスタとを備えたことをその要旨とする。
【0023】
【作用】
従って第1の発明によれば、誤りによって影響を受けない量子化データについてはそのまま逆量子化に生かされるため、有効データの利用率を上げて逆量子化の精度を高めることができる。
【0024】
また、第2の発明によれば、バッファRAMに対する一度のアクセスでエラーフラグ処理用レジスタのデータ幅分だけのエラーフラグを取り込むことができるため、バッファRAMに対するアクセス回数が少なくなり、処理速度を向上させることができる。
【0025】
【実施例】
以下、本発明を具体化した一実施例を図1〜図4に従って説明する。
尚、本実施例で処理するディジタル信号において、図3および図4に示す従来例と同じ構成についてはその詳細な説明を省略する。
【0026】
図3に示すような量子化された1グループのシリアルデータが記録媒体から読み出されて(または、伝送路から送られて)、逆量子化の前処理回路(図示略)に入力される。
【0027】
尚、1グループのデータ列の前には逆量子化に必要な基本データのデータ列が付加されている。基本データとは、ワード長コードおよびスケール因子コードのユニット数がサンプルデータのユニット数より少ない場合等に、ワード長コードおよびスケール因子コードのユニット数を示すデータである。
【0028】
例えば、ワード長コードおよびスケール因子コードのユニット数をp個に、サンプルデータのユニット数をp個より多いr個に設定しておく(p<r)。そして、サンプルデータのユニット1〜pについてはワード長コードおよびスケール因子コードの対応するユニット1〜pに基づいて逆量子化を行い、サンプルデータのユニットp+1〜rについてはワード長コードおよびスケール因子コードのユニットpに基づいて逆量子化を行う。
【0029】
すなわち、サンプルデータのユニットを適宜な個数分ひとまとめにして大ユニットとし、その大ユニットに対してワード長コードおよびスケール因子コードを割り当てて逆量子化を行うわけである(言い換えれば、サンプルデータのユニットp+1〜rについては「粗い」逆量子化を行うわけである)。従って、1グループ全体としてのデータ長は従来例で説明した方法よりも短くなるため、圧縮化を高めることができる。
【0030】
例えば、オーディオ信号の処理に利用する場合、低・中域の信号に比べて高域の信号の重要度は低いため、高域の信号に対しては上記のように「粗い」逆量子化(および量子化)を行えば聴感を損なうことなくデータを圧縮化することができる。
【0031】
逆量子化の前処理回路では、基本データとそれに続く1グループのデータとを適宜なビット数で分割したセット毎にエラーフラグが立てられる。このエラーフラグは、対応するセットのいずれかのビットに誤りがあるかどうかを検出するためのものである。そして、基本データとそれに続く1グループのデータ列の後に続いてエラーフラグのデータ列がシリアル転送されて、逆量子化回路11に入力される。
【0032】
例えば、基本データのデータ長と1グループのデータ長とが合わせてsビットで、1セットのビット数がtビットの場合は、1グループのデータの先頭ビットからtビット毎にエラーフラグが立てられ、エラーフラグの総数はs/t個になる。エラーフラグの1つのデータは1ビットで表されるため、エラーフラグのデータ長はs/tビットになる。
【0033】
図1に、本実施例の逆量子化回路11のブロック回路図を示す。
逆量子化回路11内にはバッファRAM12が設けられており、シリアル転送されてきた基本データと1グループのデータとエラーフラグのデータ(図2参照)とは一旦バッファRAM12に蓄えられる。
【0034】
そして、バッファRAM12からエラーフラグのデータが予め定められたデータ数分ずつ順次読み出され、読み出されたエラーフラグのデータはエラーフラグ処理用レジスタ13に転送されて格納される。
【0035】
ここで、エラーフラグ処理用レジスタ13のデータ幅と、バッファRAM12から一度に読み出されるエラーフラグのデータ数とは等しくなっている。例えば、バッファRAM12から一度に読み出されるエラーフラグのデータを8ビットとすると、エラーフラグ処理用レジスタ13のデータ幅も8ビットになる。尚、本実施例においては、エラーフラグ処理用レジスタ13のデータ幅と、バッファRAM12から一度に読み出されるエラーフラグのデータ数とを等しくしたが、必ずしも等しくする必要はない。
【0036】
エラー検出回路14は、エラーフラグ処理用レジスタ13に格納されているエラーフラグのデータを順次読み出し、そのエラーフラグのデータが対応するセットのいずれかのビットの誤りを示すものであるかどうかを検出する。
【0037】
エラータイプ判定回路15は、エラーフラグのデータが誤りを示すものであるとエラー検出回路14が検出した場合、そのエラーフラグのデータに対応するセットが、基本データとワード長コードとスケール因子コードとサンプルデータとの内、どこに含まれているのかを判定する。
【0038】
一方、バッファRAM12に蓄えられた基本データと1グループのデータとは、逆量子化演算回路15に転送される。
逆量子化演算回路15は、基本データに基づいて、サンプルデータAとそのサンプルデータAに対応するワード長コードWLおよびスケール因子値SFから、サンプルデータAを逆量子化したデータBを前記式(1)に示す演算によって求める。すなわち、逆量子化演算回路15内で式(1)に示す演算を行うことにより、圧縮されたデータを伸長して復号化することができる。そして、逆量子化されたデータは補完処理回路17へ転送される。
【0039】
基本データ誤り処理回路18とワード長コード誤り処理回路19とユニット因子コード誤り処理回路20とサンプルデータ誤り処理回路21とは、エラータイプ判定回路15の判定結果に基づいて補完処理回路17へ誤り処理の指示を行う。
【0040】
誤りを示すエラーフラグのデータに対応するセットが基本データに含まれているとエラータイプ判定回路15にて判定された場合、基本データ誤り処理回路18は1グループ全体に対して誤り処理を行うように補完処理回路17へ指示する。
【0041】
誤りを示すエラーフラグのデータに対応するセットがワード長コードに含まれているとエラータイプ判定回路15にて判定された場合、ワード長コード誤り処理回路19は、誤りのあるワード長コードのユニット以降に対応する全てのサンプルデータについて誤り処理を行うように補完処理回路17へ指示する。例えば、ワード長コードのユニット2内のいずれかのビットに誤りがある場合は、ワード長コードのユニット2〜nに対応する全サンプルデータ(サンプルa+1〜N)について誤り処理を行うわけである(図4参照)。
【0042】
誤りを示すエラーフラグのデータに対応するセットがスケール因子コードに含まれているとエラータイプ判定回路15にて判定された場合、スケール因子コード誤り処理回路20は、誤りのあるスケール因子コードのユニットに対応するサンプルデータについてのみ誤り処理を行うように補完処理回路17へ指示する。例えば、スケール因子コードのユニット2内のいずれかのビットに誤りがある場合は、スケール因子コードのユニット2に対応するサンプルデータ(サンプルa+1〜b)についてのみ誤り処理を行うわけである(図4参照)。
【0043】
誤りを示すエラーフラグのデータに対応するセットがサンプルデータに含まれているとエラータイプ判定回路15にて判定された場合、サンプルデータ誤り処理回路20は、誤りのあるサンプルデータのサンプル1個についてのみ誤り処理を行うように補完処理回路17へ指示する。例えば、サンプルデータのサンプルcのいずれかのビットに誤りがある場合は、サンプルcについてのみ誤り処理を行うわけである(図4参照)。
【0044】
補完処理回路17は、各誤り処理回路18〜21の指示に従って逆量子化されたデータの誤り処理を行い、誤り処理されたデータを逆量子化回路11の出力データとして出力する。
【0045】
ここで、誤り処理には、内挿、前値保持、ゼロレベル化等があるが、ここでは複数のグループのデータ処理全体を勘案して適宜な処理を選択して行えばよい。尚、内挿とは、誤りのあるデータをその前後のデータの中間の値に置き換える処理、または、前後のグループの同等のデータの中間値に置き換える処理である。前値保持とは、誤りのあるデータをその前のデータの値に置き換える処理、または、その前のグループにおける同等のデータの値に置き換える処理である。ゼロレベル化とは、誤りのあるデータの全ビットを「0」に置き換える処理である。
【0046】
このように本実施例においては、バッファRAM12とは別個にエラーフラグ処理用レジスタ13を設け、バッファRAM12から一度に読み出されるのはエラーフラグのデータのうちの一部のみにしている。ここで、バッファRAM12から一度に読みだされるエラーフラグのデータ数(すなわち、エラーフラグ処理用レジスタ13のデータ幅)は、逆量子化回路11の処理速度の向上と、逆量子化回路11の回路規模(すなわち、エラーフラグ処理用レジスタ13の回路規模およびバッファRAM12とエラーフラグ処理用レジスタ13とを結ぶデータバスの幅)の増大とのトレードオフ関係から回路設計時に決定しておく。
【0047】
すなわち、バッファRAM12から一度に読みだされるエラーフラグのデータ数を多くすると、バッファRAM12に対するアクセス回数が少なくなるため処理速度が向上するが、その向上もある程度までで飽和してしまう。一方、エラーフラグ処理用レジスタ13の回路規模を大きくすると、バッファRAM12とエラーフラグ処理用レジスタ13とを結ぶデータバスの幅も広くなり、逆量子化回路11の回路規模が増大する。そこで、両者のトレードオフ関係により、バッファRAM12から一度に読みだされるエラーフラグのデータ数を最適な値に設定するわけである。
【0048】
その結果、本実施例では逆量子化回路11の回路規模を増大させることなく処理速度を高めることができる。
また、本実施例においては、エラーフラグのデータが誤りを示すものであった場合、そのエラーフラグのデータに対応するセットが、基本データと1グループ(ワード長コード,スケール因子コード,サンプルデータ)との内、どこに含まれているのかを判定し、その判定結果に基づいて誤り処理を行っている。
【0049】
ここで、誤りの程度をみると、スケール因子コードの誤りよりサンプルデータの誤りの方が、誤りの程度が小さいということがいえる。また、ワード長コードの誤りよりスケール因子コードの誤りの方が、誤りの程度が小さいということがいえる。さらに、基本データの誤りよりワード長コードの誤りの方が、誤りの程度が小さいということがいえる。
【0050】
そして、本実施例では、誤りによって影響を受けないサンプルデータのサンプルについてはそのまま生かし、誤りによって影響を受けるサンプルデータのサンプルについてのみ誤り処理を行っている。すなわち、本実施例では、誤りの程度に応じて誤り処理を行うサンプルデータの単位を変えることにより、有効データの利用率を高めている。
【0051】
その結果、本実施例では逆量子化の精度を高めることができる。
尚、本発明は上記実施例に限定されるものではなく、例えば、基本データを省いて1グループのデータについてだけ誤り処理を行うようにしてもよい。
【0052】
また、エラーフラグ処理用レジスタ13を設けてそれについて実施するだけにとどめ、エラータイプ判定回路15および各誤り処理回路18〜21については省き、従来例と同様に1グループ全体に対して誤り処理を行うようにしてもよい。
【0053】
さらに、エラータイプ判定回路15および各誤り処理回路18〜21を設けてそれについて実施するだけにとどめ、エラーフラグ処理用レジスタ13については省いてもよい。 加えて、1つのグループのユニット数をグループ毎に変えてもよく、各セットのビット数を各セット毎に変えてもよい。
【0054】
【発明の効果】
以上詳述したように、第1の発明によれば、誤り処理において有効データの利用率を高めることにより逆量子化の精度を高めることができる優れた効果がある。また、第2の発明によれば、逆量子化処理において誤り処理を行う際に、回路規模を増大させることなく処理速度を高めることができる優れた効果がある。
【図面の簡単な説明】
【図1】本発明を具体化した一実施例のブロック回路図である。
【図2】バッファRAM12にシリアル転送されてくる、基本データと1グループのデータとエラーフラグのデータとの配列を説明するための説明図である。
【図3】1グループのシリアルデータの配列を説明するための説明図である。
【図4】各ユニットとサンプルデータの対応関係を説明するための説明図である。
【符号の説明】
12 バッファRAM
13 エラーフラグ処理用レジスタ
14 エラー検出回路
15 エラータイプ判定回路
16 逆量子化演算回路
17 補完処理回路
18 基本データ誤り処理回路
19 ワード長コード誤り処理回路
20 スケール因子コード誤り処理回路
21 サンプルデータ誤り処理回路
[0001]
[Industrial applications]
The present invention relates to a digital signal processing device, and more particularly, to a dequantization circuit that decodes quantized data by dequantizing the data.
[0002]
[Prior art]
In recent years, it has been required to reduce the capacity of a recording medium and reduce the size of a transmission path by compressing a digital signal.
[0003]
For this purpose, a method has been proposed in which sampled data is grouped by an appropriate number into individual units, and quantization is performed for each unit.
In this method, quantization is performed by assigning the number of quantization bits (hereinafter, referred to as a word length code) and the magnitude of a normalized value (hereinafter, referred to as a scale factor value) to each unit, and performing quantization. For data (hereinafter referred to as sample data). That is, in general quantization, quantization is performed with a fixed word length. However, in this method, usually, quantization is performed with a variable word length smaller than the fixed word length, so that the entire data amount can be compressed. Further, in this method, since a word length code and a scale factor value are assigned to each unit, an increase in the data is smaller than a decrease in the total data amount due to quantization with a variable word length.
[0004]
Then, in the inverse quantization in this method, data B obtained by inversely quantizing the sample data A is obtained from the sample data A and the word length code WL and the scale factor value SF of the unit corresponding to the sample data A, for example, by the formula (1) Is calculated by the following calculation. That is, by performing the operation shown in the expression (1) in the inverse quantization circuit, the compressed data can be expanded and decoded.
[0005]
B = A · SF · F (WL) (1)
(However, F (WL) is a function of the word length code WL)
Also, in this method, an appropriate number of units are grouped together to form one group, and writing and reading (or transmission / reception to / from a transmission path) to / from a recording medium are performed by serially transferring the group. Has become.
[0006]
FIG. 3 shows an array of serial data of one group. In FIG. 3, the transfer direction of the serial data is rightward. That is, the serial data read from the recording medium (or sent from the transmission path) is input to the inverse quantization circuit sequentially rightward from the first bit with the leftmost bit shown in FIG. It shall be.
[0007]
One group of serial data is arranged, for example, from the top in the order of a word length code, a scale factor code, and sample data. Here, one group is composed of n units, each word length code corresponding to each unit is composed of m bits, and each scale factor code corresponding to each unit is composed of e bits. The scale factor code is converted by the decoder provided in the inverse quantization circuit to become the scale factor value.
[0008]
FIG. 4 shows an example of the correspondence between each unit and each sample of the sample data.
In this example, from the first sample of the sample data to the a-th sample (1 to a) corresponds to unit 1, and from the a + 1-th sample to the b-th sample (a + 1 to b) of the sample data, the unit 1 2 is supported. The units (c to N) from the c-th sample to the last (N-th) sample of the sample data correspond to the unit n.
[0009]
Here, the number of bits of each sample of the sample data is defined by the word length code of the corresponding unit (1 to n). That is, the number of bits of each word length code and each scale factor code are defined uniformly (m bits, e bits), but the number of bits of each sample of sample data is not uniform. Therefore, the data length (k bytes) of the entire group is not uniform.
[0010]
Quantization and inverse quantization by such methods can be used for compression processing of data such as sound and images.
For example, when using for audio signal processing, first, digital audio data obtained by A / D conversion of an audio signal on a time axis is cut out with an appropriate time window. Each digital audio data clipped in the time window corresponds to the one group of data. Then, the cut-out digital audio data is transformed on the frequency axis by an appropriate orthogonal transform (such as a discrete Fourier transform (DFT), a discrete cosine transform (DCT), or an improved discrete cosine transform (MDCT)). The signal is decomposed into a plurality of signal components having an appropriate frequency width.
[0011]
The plurality of signal components are determined based on the critical bandwidth (called the critical band, the higher the bandwidth, the wider the bandwidth) based on the human perception of noise and the frequency analysis capability (frequency resolution). Put together in a determined band.
[0012]
Then, each signal component is quantized using the word length code and the scale factor value, and written (or transmitted) to a recording medium (optical disk, magneto-optical disk, magnetic tape, etc.) as a serial data string as shown in FIG. Relocation to the road). In the inverse quantization, as described above, data obtained by inversely quantizing the sample data (that is, the signal components) is obtained from the sample data, the word length code corresponding to the sample data, and the scale factor value. It is.
[0013]
[Problems to be solved by the invention]
By the way, in the above-mentioned method, in the inverse quantization, when there is an error in any one bit of one group, it is determined whether the erroneous bit is in the word length code, the scale factor code, or the sample data. Error processing was performed on the entire group.
[0014]
However, since error processing is performed on one entire group, there is a problem that the utilization rate of valid data (error-free data) is reduced. That is, in order to uniformly perform error processing on valid data having bits other than the erroneous bit (in other words, to "discard" the valid data together with the erroneous data). , Valid data could not be fully utilized.
[0015]
Furthermore, error processing cannot completely restore data, and after all, it only makes the erroneous data inconspicuous when viewing the entire inverse quantization. Therefore, when the utilization rate of the effective data is low, there is a problem that the accuracy of the inverse quantization is reduced.
[0016]
In the above method, as a pre-process of inverse quantization, an error flag is set for each set obtained by dividing one group by an appropriate number of bits. This error flag is for detecting whether any bit of the corresponding set has an error. Then, the data string of the error flag is serially transferred together with the data string of one group, and is input to the inverse quantization circuit.
[0017]
A buffer RAM is provided in the inverse quantization circuit, and the serially transferred data of one group and the data of the error flag are temporarily stored in the buffer RAM. Then, error flag data is read from the buffer RAM as needed, and error processing is performed based on the read error flag. Therefore, when the number of accesses to the buffer RAM increases, the processing speed of the inverse quantization decreases.
[0018]
Therefore, it has been considered that an error flag processing register is provided separately from the buffer RAM, and all data of one group of error flags stored in the buffer RAM is transferred to the error flag processing register at a time. In this case, error flag data is read from the error flag processing register as necessary, and error processing is performed based on the read error flag.
[0019]
In this case, since the access speed of the error flag processing register is much higher than that of the buffer RAM, the processing speed of the inverse quantization does not decrease. However, when the data amount of the error flag is large (that is, when the number of bits in one group or one set is large), the circuit scale of the error flag processing register and a circuit for extracting a desired error flag from the error flag processing register And the width of the data bus connecting the buffer RAM and the error flag processing register increases. Therefore, there is a problem that the circuit scale of the entire inverse quantization circuit is increased and high integration is hindered.
[0020]
SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and an object of the first invention is to improve the efficiency of inverse quantization by increasing the utilization rate of effective data in error processing. A signal processing device is provided. It is another object of the present invention to provide a digital signal processing apparatus capable of increasing the processing speed without increasing the circuit scale when performing error processing in the inverse quantization processing.
[0021]
[Means for Solving the Problems]
In the first invention, the sampled data is grouped by an appropriate number into each unit, the data is quantized in each unit, and then the units are grouped by an appropriate number into each group. In a digital signal processing apparatus that performs inverse quantization on a unit basis for each group, if an error occurs in any bit in one group, error processing is performed only on quantized data affected by the error. That is the gist.
[0022]
According to a second aspect of the present invention, the sampled data is grouped by an appropriate number into each unit, and the data is quantized in each unit. Digital signal processing that sets an error flag to detect whether any bit in the set contains an error for each set obtained by appropriately dividing data of two groups, and performs inverse quantization on a unit basis for each group. A buffer RAM for storing error flag data corresponding to one group, and an error flag process for reading and storing a predetermined number of data at a time from the error flag data stored in the buffer RAM. The gist is that a register is provided.
[0023]
[Action]
Therefore, according to the first aspect, quantized data that is not affected by an error is used for inverse quantization as it is, so that the utilization rate of effective data can be increased and the accuracy of inverse quantization can be increased.
[0024]
Further, according to the second aspect, an error flag corresponding to the data width of the error flag processing register can be fetched by a single access to the buffer RAM, so that the number of accesses to the buffer RAM is reduced and the processing speed is improved. Can be done.
[0025]
【Example】
An embodiment of the present invention will be described below with reference to FIGS.
In the digital signal processed in this embodiment, detailed description of the same configuration as the conventional example shown in FIGS. 3 and 4 will be omitted.
[0026]
One group of quantized serial data as shown in FIG. 3 is read from a recording medium (or sent from a transmission path) and input to a pre-processing circuit (not shown) for inverse quantization.
[0027]
Note that a data string of basic data required for inverse quantization is added before the data string of one group. The basic data is data indicating the number of units of the word length code and the scale factor code when the number of units of the word length code and the scale factor code is smaller than the number of units of the sample data.
[0028]
For example, the number of units of the word length code and the scale factor code is set to p, and the number of units of the sample data is set to r more than p (p <r). Then, for the units 1 to p of the sample data, inverse quantization is performed based on the corresponding units 1 to p of the word length code and the scale factor code, and for the units p + 1 to r of the sample data, the word length code and the scale factor code Inverse quantization is performed on the basis of the unit p.
[0029]
That is, the unit of the sample data is grouped by an appropriate number into a large unit, and a word length code and a scale factor code are assigned to the large unit and inverse quantization is performed (in other words, the unit of the sample data is "Coarse" inverse quantization is performed for p + 1 to r). Therefore, since the data length of the entire group is shorter than that of the method described in the conventional example, the compression can be improved.
[0030]
For example, when used for processing an audio signal, the importance of a high-frequency signal is lower than that of a low / mid-frequency signal, so that a "coarse" inverse quantization ( And quantization), the data can be compressed without impairing the hearing.
[0031]
In the pre-processing circuit for inverse quantization, an error flag is set for each set obtained by dividing the basic data and the subsequent data of one group by an appropriate number of bits. This error flag is for detecting whether any bit of the corresponding set has an error. Then, the data sequence of the error flag is serially transferred following the basic data and the data sequence of one group subsequent thereto, and is input to the inverse quantization circuit 11.
[0032]
For example, if the data length of the basic data and the data length of one group are s bits and the number of bits in one set is t bits, an error flag is set every t bits from the first bit of the data of one group. , The total number of error flags is s / t. Since one data of the error flag is represented by one bit, the data length of the error flag is s / t bits.
[0033]
FIG. 1 shows a block circuit diagram of the inverse quantization circuit 11 of the present embodiment.
A buffer RAM 12 is provided in the inverse quantization circuit 11, and the serially transferred basic data, one group of data, and error flag data (see FIG. 2) are temporarily stored in the buffer RAM 12.
[0034]
The error flag data is sequentially read from the buffer RAM 12 by a predetermined number of data, and the read error flag data is transferred to and stored in the error flag processing register 13.
[0035]
Here, the data width of the error flag processing register 13 is equal to the number of data of the error flag read from the buffer RAM 12 at one time. For example, if the error flag data read out from the buffer RAM 12 at one time is 8 bits, the data width of the error flag processing register 13 is also 8 bits. In the present embodiment, the data width of the error flag processing register 13 is equal to the number of data of the error flag read from the buffer RAM 12 at one time, but it is not always necessary to make them equal.
[0036]
The error detection circuit 14 sequentially reads the error flag data stored in the error flag processing register 13 and detects whether the error flag data indicates an error of any bit of the corresponding set. I do.
[0037]
If the error detection circuit 14 detects that the data of the error flag indicates an error, the error type determination circuit 15 sets the basic data, the word length code, the scale factor code and the set corresponding to the error flag data. It is determined where the sample data is included.
[0038]
On the other hand, the basic data and one group of data stored in the buffer RAM 12 are transferred to the inverse quantization operation circuit 15.
Based on the basic data, the inverse quantization operation circuit 15 converts the data B obtained by inversely quantizing the sample data A from the sample data A and the word length code WL and the scale factor value SF corresponding to the sample data A according to the above equation ( It is determined by the calculation shown in 1). That is, by performing the operation shown in Expression (1) in the inverse quantization operation circuit 15, the compressed data can be expanded and decoded. Then, the inversely quantized data is transferred to the complementary processing circuit 17.
[0039]
The basic data error processing circuit 18, the word length code error processing circuit 19, the unit factor code error processing circuit 20, and the sample data error processing circuit 21 perform error processing on the complement processing circuit 17 based on the determination result of the error type determination circuit 15. Instructions.
[0040]
When the error type determination circuit 15 determines that the set corresponding to the error flag data indicating the error is included in the basic data, the basic data error processing circuit 18 performs error processing on the entire group. To the complementary processing circuit 17.
[0041]
When the error type determination circuit 15 determines that the set corresponding to the data of the error flag indicating the error is included in the word length code, the word length code error processing circuit 19 outputs the word length code unit having the error. Thereafter, it instructs the complementary processing circuit 17 to perform error processing on all corresponding sample data. For example, if any bit in the word length code unit 2 has an error, error processing is performed on all sample data (samples a + 1 to N) corresponding to the word length code units 2 to n ( (See FIG. 4).
[0042]
When the error type determination circuit 15 determines that the set corresponding to the data of the error flag indicating the error is included in the scale factor code, the scale factor code error processing circuit 20 sets the unit of the erroneous scale factor code. Is instructed to perform the error processing only on the sample data corresponding to. For example, if any bit in the scale factor code unit 2 has an error, error processing is performed only on the sample data (samples a + 1 to b) corresponding to the scale factor code unit 2 (FIG. 4). reference).
[0043]
If the error type determination circuit 15 determines that the set corresponding to the data of the error flag indicating the error is included in the sample data, the sample data error processing circuit 20 performs processing on one sample of the erroneous sample data. Only the error processing is instructed to the complementary processing circuit 17. For example, if there is an error in any bit of the sample c of the sample data, error processing is performed only on the sample c (see FIG. 4).
[0044]
The complementary processing circuit 17 performs error processing on the dequantized data according to the instructions of the error processing circuits 18 to 21, and outputs the error-processed data as output data of the inverse quantization circuit 11.
[0045]
Here, the error processing includes interpolation, pre-value holding, zero-level conversion, and the like. Here, an appropriate processing may be selected in consideration of the entire data processing of a plurality of groups. Note that the interpolation is a process of replacing erroneous data with an intermediate value of data before and after the error or a process of replacing an erroneous data with an intermediate value of equivalent data of the preceding and following groups. Retaining the previous value is a process of replacing erroneous data with the value of the previous data or a process of replacing the erroneous data with an equivalent data value in the previous group. Zeroing is a process of replacing all bits of erroneous data with “0”.
[0046]
As described above, in the present embodiment, the error flag processing register 13 is provided separately from the buffer RAM 12, and only a part of the error flag data is read from the buffer RAM 12 at a time. Here, the number of data of the error flag read at one time from the buffer RAM 12 (that is, the data width of the error flag processing register 13) depends on the improvement of the processing speed of the inverse quantization circuit 11 and the improvement of the inverse quantization circuit 11. It is determined at the time of circuit design from a trade-off relationship with an increase in the circuit scale (that is, the circuit scale of the error flag processing register 13 and the width of the data bus connecting the buffer RAM 12 and the error flag processing register 13).
[0047]
That is, if the number of data of the error flag read from the buffer RAM 12 at one time is increased, the number of accesses to the buffer RAM 12 is reduced and the processing speed is improved, but the improvement is saturated to some extent. On the other hand, when the circuit size of the error flag processing register 13 is increased, the width of the data bus connecting the buffer RAM 12 and the error flag processing register 13 is also increased, and the circuit size of the inverse quantization circuit 11 is increased. Therefore, the number of data of the error flag read at once from the buffer RAM 12 is set to an optimum value according to a trade-off relationship between the two.
[0048]
As a result, in this embodiment, the processing speed can be increased without increasing the circuit size of the inverse quantization circuit 11.
In this embodiment, when the error flag data indicates an error, the set corresponding to the error flag data is the basic data and one group (word length code, scale factor code, sample data). Is determined, and error processing is performed based on the result of the determination.
[0049]
Looking at the degree of error, it can be said that the error of the sample data is smaller than that of the scale factor code. In addition, it can be said that the error of the scale factor code is smaller than the error of the word length code. Furthermore, it can be said that the error degree of the word length code is smaller than that of the basic data.
[0050]
In this embodiment, the sample data sample not affected by the error is used as it is, and the error processing is performed only on the sample data sample affected by the error. That is, in the present embodiment, the unit of sample data for which error processing is performed is changed according to the degree of error, thereby increasing the utilization rate of valid data.
[0051]
As a result, in this embodiment, the accuracy of the inverse quantization can be increased.
Note that the present invention is not limited to the above embodiment. For example, error processing may be performed on only one group of data without basic data.
[0052]
Further, the error flag processing register 13 is provided and implemented only. The error type determination circuit 15 and each of the error processing circuits 18 to 21 are omitted, and the error processing is performed on the entire group as in the conventional example. It may be performed.
[0053]
Further, the error type determination circuit 15 and the error processing circuits 18 to 21 may be provided and implemented, and the error flag processing register 13 may be omitted. In addition, the number of units in one group may be changed for each group, and the number of bits in each set may be changed for each set.
[0054]
【The invention's effect】
As described in detail above, according to the first invention, there is an excellent effect that the accuracy of inverse quantization can be increased by increasing the utilization rate of valid data in error processing. Further, according to the second aspect, when performing error processing in the inverse quantization processing, there is an excellent effect that the processing speed can be increased without increasing the circuit scale.
[Brief description of the drawings]
FIG. 1 is a block circuit diagram of an embodiment embodying the present invention.
FIG. 2 is an explanatory diagram for explaining an array of basic data, one group of data, and error flag data serially transferred to a buffer RAM 12;
FIG. 3 is an explanatory diagram for explaining an array of serial data of one group.
FIG. 4 is an explanatory diagram for explaining a correspondence relationship between each unit and sample data.
[Explanation of symbols]
12 Buffer RAM
13 Error Flag Processing Register 14 Error Detection Circuit 15 Error Type Determination Circuit 16 Inverse Quantization Operation Circuit 17 Complementary Processing Circuit 18 Basic Data Error Processing Circuit 19 Word Length Code Error Processing Circuit 20 Scale Factor Code Error Processing Circuit 21 Sample Data Error Processing circuit

Claims (7)

標本化したデータを適宜な個数分ずつひとまとめにして各ユニットとし、量子化のビット数であるワード長コードと、規格化したときの値の大きさであるスケール因子値とを各ユニット毎に割り当てて量子化を行い、ユニットを適宜な個数分ずつひとまとめにして各グループとし、
量子化されたデータであるサンプルデータと、当該スケール因子値をコード変換したスケール因子コードと、当該ワード長コードとからなる1グループのデータを適宜に分割したセット毎に、そのセットのいずれかのビットに誤りがあるかどうかを検出するためのエラーフラグを立て、
各グループ毎にユニット単位で逆量子化するディジタル信号処理装置において、
エラーフラグが対応するセットのいずれかのビットの誤りを示すものであるかどうかを検出するエラー検出回路と、
エラーフラグが誤りを示すものであるとエラー検出回路が検出した場合、そのエラーフラグに対応するセットが、ワード長コードとスケール因子コードとサンプルデータとの内、どこに含まれているのかを判定するエラータイプ判定回路と、
サンプルデータとそのサンプルデータに対応するワード長コードおよびスケール因子値から、サンプルデータを逆量子化したデータを演算によって求める逆量子化演算回路と、
逆量子化演算回路が求めた逆量子化したデータに対して、誤り処理を行って出力するデータ補完処理回路と、
エラータイプ判定回路における、誤りを示すエラーフラグに対応するセットがどこに含まれているのかの判定に基づいて、誤りが発生したデータ自身と、このデータとは異なるデータであって、前記誤りの影響を受ける量子化データについてのみ、誤り処理を行うように補完処理回路へ指示する誤り処理回路とを備えたことを特徴とするディジタル信号処理装置。
The sampled data is grouped by the appropriate number into each unit, and a word length code, which is the number of quantization bits, and a scale factor value, which is the size of the normalized value, are assigned to each unit. Quantization is performed, and an appropriate number of units are grouped together into groups,
For each set obtained by appropriately dividing a group of data consisting of sample data that is quantized data, a scale factor code obtained by code-converting the scale factor value, and the word length code, one of the sets Set an error flag to detect if the bit is incorrect,
In a digital signal processing device that performs inverse quantization on a unit basis for each group,
An error detection circuit for detecting whether the error flag indicates an error in any bit of the corresponding set,
When the error detection circuit detects that the error flag indicates an error, it determines where the set corresponding to the error flag is included in the word length code, the scale factor code, and the sample data. An error type determination circuit;
A dequantization operation circuit for calculating data obtained by dequantizing the sample data from the sample data and a word length code and a scale factor value corresponding to the sample data,
A data complement processing circuit that performs error processing on the inversely quantized data obtained by the inverse quantization operation circuit and outputs the result;
Based on the determination of where the set corresponding to the error flag indicating the error is included in the error type determination circuit, the data itself in which the error occurred and the data different from this data, and the influence of the error An error processing circuit for instructing a complementary processing circuit to perform error processing only on the quantized data received.
前記誤り処理回路は、誤りを示すエラーフラグに対応するセットがワード長コードに含まれているとエラータイプ判定回路にて判定された場合、誤りのあるワード長コードのユニット以降に対応する全てのサンプルデータについて誤り処理を行うように補完処理回路へ指示することを特徴とする請求項1記載のディジタル信号処理装置。The error processing circuit, when the error type determination circuit determines that the set corresponding to the error flag indicating the error is included in the word length code, all of the units corresponding to the unit of the word length code after the error 2. The digital signal processing apparatus according to claim 1, wherein an instruction is given to a complementary processing circuit to perform error processing on the sample data. 前記誤り処理回路は、The error processing circuit, 誤りを示すエラーフラグに対応するセットがスケール因子コードに含まれているとエラータイプ判定回路にて判定された場合、誤りのあるスケール因子コードのユニットに対応するサンプルデータについてのみ誤り処理を行うように補完処理回路へ指示することを特徴とする請求項1記載のディジタル信号処理装置。When the error type determination circuit determines that the set corresponding to the error flag indicating the error is included in the scale factor code, the error processing is performed only on the sample data corresponding to the unit of the erroneous scale factor code. 2. The digital signal processing apparatus according to claim 1, wherein a command is sent to a complementary processing circuit. 前記誤り処理回路は、The error processing circuit, 誤りを示すエラーフラグに対応するセットがサンプルデータに含まれているとエラータイプ判定回路にて判定された場合、誤りのあるサンプルデータのサンプル1個についてのみ誤り処理を行うように補完処理回路へ指示することを特徴とする請求項1記載のディジタル信号処理装置。When the error type determination circuit determines that the set corresponding to the error flag indicating the error is included in the sample data, the complement processing circuit performs error processing on only one sample of the erroneous sample data. 2. The digital signal processing device according to claim 1, wherein the instruction is issued. 前記誤り処理は、誤りのあるデータをその前後のデータの中間の値に置き換える処理、または、前後のグループの同等のデータの中間値に置き換える処理であることを特徴とする請求項1乃至4の何れかに記載のディジタル信号処理装置。5. The error processing according to claim 1, wherein the error processing is processing of replacing erroneous data with an intermediate value of data before and after the error, or replacing error data with an intermediate value of equivalent data of the preceding and following groups. 6. The digital signal processing device according to any one of the above . 前記誤り処理は、誤りのあるデータをその前のデータの値に置き換える処理、または、その前のグループにおける同等のデータの値に置き換える処理であることを特徴とする請求項1乃至4の何れかに記載のディジタル信号処理装置。The error processing is any one of claims 1 to 4, characterized in that the process replaces the erroneous data on the value of the previous data, or a process of replacing the value of the equivalent data in the previous group 2. The digital signal processing device according to claim 1. 前記誤り処理は、誤りのあるデータの全ビットを「0」に置き換える処理であることを特徴とする請求項1乃至4の何れかに記載のディジタル信号処理装置。 The digital signal processing device according to claim 1 , wherein the error processing is processing of replacing all bits of erroneous data with “0”.
JP01639093A 1993-02-03 1993-02-03 Digital signal processor Expired - Lifetime JP3568213B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP01639093A JP3568213B2 (en) 1993-02-03 1993-02-03 Digital signal processor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP01639093A JP3568213B2 (en) 1993-02-03 1993-02-03 Digital signal processor

Publications (2)

Publication Number Publication Date
JPH06232760A JPH06232760A (en) 1994-08-19
JP3568213B2 true JP3568213B2 (en) 2004-09-22

Family

ID=11914930

Family Applications (1)

Application Number Title Priority Date Filing Date
JP01639093A Expired - Lifetime JP3568213B2 (en) 1993-02-03 1993-02-03 Digital signal processor

Country Status (1)

Country Link
JP (1) JP3568213B2 (en)

Also Published As

Publication number Publication date
JPH06232760A (en) 1994-08-19

Similar Documents

Publication Publication Date Title
US6396421B1 (en) Method and system for sampling rate conversion in digital audio applications
KR101273486B1 (en) Adaptive hybrid transform for signal analysis and synthesis
US8275897B2 (en) System and methods for accelerated data storage and retrieval
US5768292A (en) Error handling process for MPEG decoder
US8682680B2 (en) Methods and apparatuses for bit stream decoding in MP3 decoder
US8271293B2 (en) Audio decoding using variable-length codebook application ranges
JP2010501090A (en) Speech decoding
CN101127212A (en) Audio encoding
US5812982A (en) Digital data encoding apparatus and method thereof
JP3568213B2 (en) Digital signal processor
JP2776300B2 (en) Audio signal processing circuit
US6847314B2 (en) Method for coding integer supporting diverse frame sizes and CODEC implementing the method
JP3222967B2 (en) Digital signal processor
JP3885684B2 (en) Audio data encoding apparatus and encoding method
US20050096765A1 (en) Reduction of memory requirements by de-interleaving audio samples with two buffers
JP3889738B2 (en) Inverse quantization apparatus, audio decoding apparatus, image decoding apparatus, inverse quantization method, and inverse quantization program
JPH06232763A (en) Signal coder and signal decoder
JP2670398B2 (en) Coded signal duplication device
JPH0918355A (en) Crc arithmetic unit for variable length data
JPH08181618A (en) Coded signal decoder
JPH06232762A (en) Signal coder and signal decoder
JPH0414529B2 (en)
KR0171838B1 (en) Method for data interfacing of mini disc decoding system
JP2002176361A (en) Quantizing method and device
JPH08186504A (en) Method and device for decoding encoded data

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040615

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080625

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090625

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090625

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100625

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110625

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110625

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120625

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130625

Year of fee payment: 9

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130625

Year of fee payment: 9