JP2002026736A - オーディオ信号符号化方法及びその装置 - Google Patents
オーディオ信号符号化方法及びその装置Info
- Publication number
- JP2002026736A JP2002026736A JP2000204915A JP2000204915A JP2002026736A JP 2002026736 A JP2002026736 A JP 2002026736A JP 2000204915 A JP2000204915 A JP 2000204915A JP 2000204915 A JP2000204915 A JP 2000204915A JP 2002026736 A JP2002026736 A JP 2002026736A
- Authority
- JP
- Japan
- Prior art keywords
- quantization
- bits
- unit
- audio signal
- band level
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
の許容歪み、使用ビット数が許容範囲を適正値に入れる
までの算出推定ループの回数を良好に削減可能な符号化
装置を提供する。 【解決手段】 時間−周波数変換部11と聴覚モデル部
12と量子化符号化部13とビットストリーム化部14
を有するオーディオ信号符号化装置において、前記量子
化符号化部13は、量子化歪みが、前記聴覚モデル部1
2から算出される許容ノイズレベル以下に収まるように
制御を行なう量子化歪算出判断手段134とバンドレベ
ル変更手段135とを有するブロックと、量子化を行な
い、範囲内に収まるよう制御するビット数算出判断手段
132と、全帯域レベル変更手段133とを有するブロ
ックとより構成され、前記ブロックにおける全帯域レベ
ル変更手段133の初期値を推測する全帯域レベル推測
手段131を先頭に有する構成とした。
Description
周波数領域に変換した後に符号化を行なうオーディオ信
号符号化方法に係り、特に装置の許容歪み、使用ビット
数が許容範囲の適正値に入れるまでの算出推定ループの
回数を削減可能なオーディオ信号符号化装置に関する。
には、例えば適応スペクトル聴感制御エントロピー符号
化法(ASPEC, Adaptive Spectral Perceptual Entropy
Coding)、MPEG1オーディオ・レイヤ3、MPEG
2オーディオAAC(AdvancedAudio Coding)がある。
これらは、非線形量子化とハフマン符号化のために2重
ループを構成して、量子化歪みと、符号量を制御してい
る。
ンナーループと呼ばれており、アウターループでは、量
子化歪みが、聴覚心理モデルから得られた許容ノイズレ
ベル以下になるように制御し、インナーループでは、量
子化を行ない所定のビット数の範囲内に収まるように制
御を行なう。
イタレーションループ処理を示す。従来の処理では、所
定ビット数に収める処理と量子化歪みを所定量に収める
処理とに対して、それぞれループを作ることで実現して
いる。所定ビット数とは、設定されたビットレートより
求められる1オーディオフレームにおいて使用可能なビ
ット数を意味する。
EP11A)とハフマン符号化(STEP12A)によ
り求められる使用ビット数が所定ビット数に収まってい
るかの判断を行ない(STEP13A)、収まっていな
い場合には、周波数スペクトルを全ての帯域に対して一
様に可変する変数(global gain)を調整することで、
量子化器のステップサイズに相当するglobal gainを調
整する(STEP14A)ことにより、所定のビット数
に納める。
obal gainの初期値は初期化部で求められる(STEP
1A)。初期化部では、周波数スペクトル中の最大値を
量子化式により量子化した際に、量子化値がハフマン符
号化を行なうための制限値を超えないようなglobal gai
nを求め、これを初期値とする。この初期値は、周波数
スペクトルの最大値を基準に求めるため、量子化値全体
が小さい値となる。そのため、所定のビット数に対して
ビットが余る傾向になる。
ープで求められた量子化結果を元に逆量子化を行ない、
周波数スペクトルのバンド単位で量子化歪みを求める
(STEP3A)。
マスキング率SMR(Signal-to-Mask-ratio)から求めた許
容歪み内に収まっているかを判断し(STEP4A)、
収まっていない場合、そのバンドのscalefactor(sfb)を
調整する(STEP5A)。量子化歪みが収まっていな
いバンドが1バンド以上存在する場合には、再びインナ
ーループからやり直す。
は、量子化歪みが収まるまでscalefactor(sfb)を何度も
調整し(STEP5A)、インナーループを繰り返す。
よって、これまでのやり方では収束するまで時間が掛か
ってしまう。
ターの2重ループ処理では、外側に存在するアウタール
ープが満足されない場合に、再び内側にあるインナール
ープを呼び出さねばならないため、収束時間の確定が難
しい。この収束時間を速めること、即ち、ループの回数
を削減するには、ループを開始する初期値の決定が重要
となる。そこで本発明は、ループの初期値の決定手段を
有する符号化装置及びその方法を提供することで、ルー
プ回数を削減することを目的とする。
の手段として、前記第1のブロック内にあるパラメータ
の初期値を推測するブロックでは、周波数スペクトルを
別の符号化方法で符号化を行ない算出した使用ビット数
と所定ビット数を用いてパラメータの初期値を推測し、
求められた初期値を用いてインナーループ処理を行な
う。
信号が供給される時間−周波数変換ステップと聴覚モデ
ルステップと、前記時間−周波数変換ステップと聴覚モ
デルステップの各出力が供給される量子化符号化ステッ
プと、前記量子化符号化ステップの出力が供給されるビ
ットストリーム化ステップとを有して、前記オーディオ
信号を符号化する際に、前記量子化符号化ステップは、
量子化を行ない、使用ビット数が所定ビット数の範囲内
に収まるように制御を行なう使用ビット数算出判断ステ
ップと、周波数スペクトル全帯域のレベルを変更する全
帯域レベル変更ステップと、量子化歪みが、前記聴覚モ
デルステップから算出される許容ノイズレベル以下に収
まるように制御を行なう量子化歪算出判断ステップと、
バンドレベルを変更するバンドレベル変更ステップとを
有するオーディオ信号符号化方法であつて、前記時間−
周波数変換ステップより供給される周波数スペクトルに
対して、2の対数を取ることで求められる周波数スペク
トル値をビット表現するのに必要な第1のビット数と、
そのビット表現が何ビット幅であるかを示す補助情報と
しての第2のビット数と、前記所定ビット数とを用い
て、前記全帯域レベル変更ステップの初期値を推測する
全帯域レベル推測ステップを前記量子化符号化ステップ
の先頭に設けるようにしたことを特徴とするオーディオ
信号符号化方法を提供し、請求項2の発明は、オーディ
オ信号が供給される時間−周波数変換部と聴覚モデル部
と、前記時間−周波数変換部と聴覚モデル部の各出力が
供給される量子化符号化部と、前記量子化符号化部の出
力が供給されるビットストリーム化部とを有して、前記
オーディオ信号を符号化する際に、前記量子化符号化部
は、量子化を行ない、使用ビット数が所定ビット数の範
囲内に収まるように制御を行なう使用ビット数算出判断
手段と、周波数スペクトル全帯域のレベルを変更する全
帯域レベル変更手段と、量子化歪みが、前記聴覚モデル
部から算出される許容ノイズレベル以下に収まるように
制御を行なう量子化歪算出判断手段と、バンドレベルを
変更するバンドレベル変更手段とを有するオーディオ信
号符号化装置であつて、前記時間−周波数変換部より供
給される周波数スペクトルに対して、2の対数を取るこ
とで求められる周波数スペクトル値をビット表現するの
に必要な第1のビット数と、そのビット表現が何ビット
幅であるかを示す補助情報としての第2のビット数と、
前記所定ビット数とを用いて、前記全帯域レベル変更手
段の初期値を推測する全帯域レベル推測手段を前記量子
化符号化手段の先頭に設けるようにしたことを特徴とす
るオーディオ信号符号化装置を提供するものである。
びその方法の一実施例について、図と共に以下に説明す
る。図1は本発明のオーディオ信号符号化装置の一実施
例のブロック構成図を示し、図2には本発明のオーディ
オ信号符号化装置の量子化符号化部の一実施例のブロッ
ク構成図を示す。
号化装置の一実施例は、時間−周波数変換部11、聴覚
モデル部12、量子化符号化部13、及びビットストリ
ーム化部14より構成されている。
号化装置の量子化符号化部13の一実施例は、量子化、
符号化器130、全帯域レベル (global gain)推測器1
31、使用ビット数算出判断器132、全帯域レベル
(global gain) 変更器133、量子化歪算出判断器13
4、バンドレベル(scalefactor)変更器135、及び逆
量子化器136より構成されている。
号は、時間−周波数変換部11においてFFTやMDCT等を
用いて、時間軸から周波数軸への変換が行なわれ、その
周波数スペクトルが量子化符号化部13に供給される。
対して聴覚心理に基づいたマスキングレベルの計算によ
り求められた信号対マスキング率SMR(Signal to Mask R
atio)化符号化部13に供給される。
に対するレベルを所定のビット数でかつ、前記SMRより
求められた許容歪み内に量子化歪みが収まるように量子
化、符号化を行ない、量子化、符号化された信号をビッ
トストリーム化部14に出力する。ビットストリーム化
部14では、量子化符号化部13より供給された信号を
ビットストリームとして出力する。
符号化部13において、量子化、及び逆量子化で使用さ
れる各式の一実施例を示した。
ine(k)は、時間−周波数変換部11より出力される周波
数スペクトルを示しており、global gainは、周波数ス
ペクトル全帯域のレベルを全帯域レベル変更器133に
より変更するものである。
周波数スペクトルのレベルをバンドレベル変更器135
により変更するものである。Global gainは、量子化器
のステップサイズに相当し、scalefactor(sfb)は各スケ
ールファクタバンドの増幅度を決定する。
号化により求められる使用ビット数が所定ビット数に収
まっているかどうかの判断を行ない、収まっていない場
合には、周波数スペクトルを全ての帯域に対して一様に
可変する全帯域レベル(global gain)変更器133の変
数(global gain)を調整することで、所定のビット数
に納めるようにする。
化結果を元に逆量子化を行ない、バンド単位で量子化歪
みを求める。求めた量子化歪みが聴覚モデル部12の信
号対マスキング率SMRから求めた許容歪み内に収まって
いるかどうかを判断し、収まっていない場合、そのバン
ドのscalefactor (sfb)をバンドレベル(scalefactor)変
更器135により調整する。量子化歪みが収まっていな
いバンドが1バンド以上存在する場合には、再びインナ
ーループからやり直す。
及びその方法におけるイタレーションループを示す。本
発明のイタレーションループは、先に示した図4に対し
て、その先頭に、所定ビット数に収まるglobal gain値
を推測するブロックである、全帯域レベル(global gai
n)推測器131を追加した形のものになる。
bal gain算出方法を変更して、最初から最終結果に近い
global gain値を推測することが可能な算出方法とした
ものである。
gain算出方法について、以下に説明する。ここでで求
めたglobal gain値を初期値として(STEP1)、つぎ
のインナーループ(STEP2)を実行する。
に収まるglobal gain値を推測する全帯域レベル推測器
131において使用される、別の符号化法を用いて使用
ビット数を求め、global gain値を算出推測する一実施
例について、以下に示す。
記(数3)となる。
かを求めると、下記(数4)のnum-bitのように示され
る。
ビットPCMである場合、絶対値を取っているため、正負
の符号を取り除いた15ビットまで取り得る。
のように、ビット単位の羅列をした場合、サンプルx1,x
2が何ビットで表現されているかが情報として与えられ
ていないと、取り出せなくなる。そのため、取り出すた
めのサイド情報として0〜15まで表現出来るように4
ビットを別に使用する(補助情報としての第2のビット
数 4×1024)。
(sfb) = all zero とすると、前記(数4)は、下記
(数5)のようになる。
めると、下記の(数6)のようになる。
erage bit)であるような、global gainを下記(数7)
より求める。
(数8)が得られる。
変換部11より供給される周波数スペクトルを量子化し
て得られる量子化値に対して、全帯域レベル(global ga
in)推測器131は、2の対数を取ることで求められ
る、量子化値をビット表現するのに必要な第1のビット
数((1/192)×(3/4)Σ(log2(x))と、そのビット表現が
何ビット幅であるかを示す補助情報としての第2のビッ
ト数(1/192×4096)と、前記所定ビット数(1/192)×(ave
rage bit)とから、前記全帯域レベル変更手段133の
初期値(global gain)を推測する。これによって、ル
ープが収束した時に得られる値に近い値が推測される。
化とハフマン符号化により求められる使用ビット数(S
TEP12)が所定ビット数に収まっているかの判断
を、使用ビット数算出判断器132により行なう(ST
EP13)。
ルを全ての帯域に対して一様に可変する全帯域レベル変
更器133の変数(global gain)を調整する(STE
P14)ことにより、所定のビット数に納めるようにす
る。
ナーループ(STEP2)で求められた量子化結果を元
に逆量子化を行ない、バンド単位で量子化歪みを求める
(STEP3)。
号対マスキング率SMRから求めた許容歪み内に収まって
いるかどうかを量子化歪算出判断器134により判断
し、収まっていない場合(STEP4)には、そのバン
ドのscalefactor(sfb)をバンドレベル(scalefactor)変
更器135により調整を行なう(STEP5)。
ンド以上存在する場合(STEP4)には、再びインナ
ーループ(STEP2)からやり直す。
obal gainの初期値は従来のものでは初期化部で求めら
れる。この初期化部では、周波数スペクトル中の最大値
を量子化式により量子化した際に、量子化値がハフマン
符号化を行なうための制限値を超えないようなglobalga
inを求め、これを初期値としている。
の最大値を基準に求めるため、量子化値全体が小さい値
となる。
が余る傾向になるが、本発明のものは所定のビット数が
的確に推定されるので、大幅にループの改善がなされ、
ループの回数を減少させることが出来る。
器131により初期値の推定を最適に近く出来る(ST
EP1)ことにより、インナーループからやり直す回数
は従来のものと比較すると大幅に削減させることが出来
る。
方法によれば、前記第1のブロック内のパラメータ(glo
bal gain)の初期値を推測する全帯域レベル推測手段に
より求められた初期値は、ループが収束した時に得られ
る値に近い値が推測されるため、第2のブロックにおけ
るインナーループの回数を大幅に削減させることが出来
る。
一実施例のブロック構成を示した図である。
一実施例のブロック構成を示した図である。
イタレーションループのフローを示した図である。
図である。
プ) 12 聴覚モデル部(聴覚モデルステップ) 13 量子化符号化部(量子化符号化ステップ) 130 量子化符号化器 131 全帯域レベル(global gain)推測器(全帯域レ
ベル推測手段、ステップ) 132 使用ビット数算出判断器(使用ビット数算出判
断手段、ステップ) 133 全帯域レベル (global gain) 変更器(全帯域
レベル変更手段、ステップ) 134 量子化歪算出判断器(量子化歪算出判断手段、
ステップ) 135 バンドレベル(scalefactor)変更器(バンドレ
ベル変更手段、ステップ) 136 逆量子化器 14 ビットストリーム化部(ビットストリーム化ステ
ップ)
Claims (2)
- 【請求項1】オーディオ信号が供給される時間−周波数
変換ステップと聴覚モデルステップと、前記時間−周波
数変換ステップと聴覚モデルステップの各出力が供給さ
れる量子化符号化ステップと、前記量子化符号化ステッ
プの出力が供給されるビットストリーム化ステップとを
有して、前記オーディオ信号を符号化する際に、前記量
子化符号化ステップは、 量子化を行ない、使用ビット数が所定ビット数の範囲内
に収まるように制御を行なう使用ビット数算出判断ステ
ップと、周波数スペクトル全帯域のレベルを変更する全
帯域レベル変更ステップと、量子化歪みが、前記聴覚モ
デルステップから算出される許容ノイズレベル以下に収
まるように制御を行なう量子化歪算出判断ステップと、
バンドレベルを変更するバンドレベル変更ステップとを
有するオーディオ信号符号化方法であつて、 前記時間−周波数変換ステップより供給される周波数ス
ペクトルに対して、2の対数を取ることで求められる周
波数スペクトル値をビット表現するのに必要な第1のビ
ット数と、そのビット表現が何ビット幅であるかを示す
補助情報としての第2のビット数と、前記所定ビット数
とを用いて、前記全帯域レベル変更ステップの初期値を
推測する全帯域レベル推測ステップを前記量子化符号化
ステップの先頭に設けるようにしたことを特徴とするオ
ーディオ信号符号化方法。 - 【請求項2】オーディオ信号が供給される時間−周波数
変換部と聴覚モデル部と、前記時間−周波数変換部と聴
覚モデル部の各出力が供給される量子化符号化部と、前
記量子化符号化部の出力が供給されるビットストリーム
化部とを有して、前記オーディオ信号を符号化する際
に、前記量子化符号化部は、 量子化を行ない、使用ビット数が所定ビット数の範囲内
に収まるように制御を行なう使用ビット数算出判断手段
と、周波数スペクトル全帯域のレベルを変更する全帯域
レベル変更手段と、量子化歪みが、前記聴覚モデル部か
ら算出される許容ノイズレベル以下に収まるように制御
を行なう量子化歪算出判断手段と、バンドレベルを変更
するバンドレベル変更手段とを有するオーディオ信号符
号化装置であつて、 前記時間−周波数変換部より供給される周波数スペクト
ルに対して、2の対数を取ることで求められる周波数ス
ペクトル値をビット表現するのに必要な第1のビット数
と、そのビット表現が何ビット幅であるかを示す補助情
報としての第2のビット数と、前記所定ビット数とを用
いて、前記全帯域レベル変更手段の初期値を推測する全
帯域レベル推測手段を前記量子化符号化手段の先頭に設
けるようにしたことを特徴とするオーディオ信号符号化
装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000204915A JP3630082B2 (ja) | 2000-07-06 | 2000-07-06 | オーディオ信号符号化方法及びその装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000204915A JP3630082B2 (ja) | 2000-07-06 | 2000-07-06 | オーディオ信号符号化方法及びその装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002026736A true JP2002026736A (ja) | 2002-01-25 |
JP3630082B2 JP3630082B2 (ja) | 2005-03-16 |
Family
ID=18702095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000204915A Expired - Lifetime JP3630082B2 (ja) | 2000-07-06 | 2000-07-06 | オーディオ信号符号化方法及びその装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3630082B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005004113A1 (ja) * | 2003-06-30 | 2005-01-13 | Fujitsu Limited | オーディオ符号化装置 |
JP2008145716A (ja) * | 2006-12-08 | 2008-06-26 | Victor Co Of Japan Ltd | 音声信号処理装置 |
JP2009532738A (ja) * | 2006-04-04 | 2009-09-10 | ドルビー・ラボラトリーズ・ライセンシング・コーポレーション | Mdct領域におけるオーディオ信号音量測定と改良 |
-
2000
- 2000-07-06 JP JP2000204915A patent/JP3630082B2/ja not_active Expired - Lifetime
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005004113A1 (ja) * | 2003-06-30 | 2005-01-13 | Fujitsu Limited | オーディオ符号化装置 |
US7613603B2 (en) | 2003-06-30 | 2009-11-03 | Fujitsu Limited | Audio coding device with fast algorithm for determining quantization step sizes based on psycho-acoustic model |
JP2009532738A (ja) * | 2006-04-04 | 2009-09-10 | ドルビー・ラボラトリーズ・ライセンシング・コーポレーション | Mdct領域におけるオーディオ信号音量測定と改良 |
US8504181B2 (en) | 2006-04-04 | 2013-08-06 | Dolby Laboratories Licensing Corporation | Audio signal loudness measurement and modification in the MDCT domain |
JP2008145716A (ja) * | 2006-12-08 | 2008-06-26 | Victor Co Of Japan Ltd | 音声信号処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP3630082B2 (ja) | 2005-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI415115B (zh) | 用以產生帶寬擴展輸出資料之裝置與方法 | |
CA2425926C (en) | Apparatus for bandwidth expansion of a speech signal | |
DK2791937T3 (en) | Generation of an højbåndsudvidelse of a broadband extended buzzer | |
EP1328927B1 (en) | Method and system for estimating artificial high band signal in speech codec | |
US20100063803A1 (en) | Spectrum Harmonic/Noise Sharpness Control | |
US11798570B2 (en) | Concept for encoding an audio signal and decoding an audio signal using deterministic and noise like information | |
JP2011527451A (ja) | オーディオエンコーダ、オーディオデコーダ、オーディオ信号を符号化および復号化する方法、オーディオストリームおよびコンピュータプログラム | |
JP2004310088A (ja) | 半レート・ボコーダ | |
JP2010540990A (ja) | 埋め込み話声およびオーディオコーデックにおける変換情報の効率的量子化のための方法および装置 | |
AU2014336356B2 (en) | Concept for encoding an audio signal and decoding an audio signal using speech related spectral shaping information | |
US9082398B2 (en) | System and method for post excitation enhancement for low bit rate speech coding | |
EP3175457B1 (en) | Method for estimating noise in an audio signal, noise estimator, audio encoder, audio decoder, and system for transmitting audio signals | |
US20180033444A1 (en) | Audio encoder and method for encoding an audio signal | |
JP2002026736A (ja) | オーディオ信号符号化方法及びその装置 | |
JP4409733B2 (ja) | 符号化装置、符号化方法、及びその記録媒体 | |
Wang | Speech coding | |
JP2001184091A (ja) | オーディオ信号符号化方法 | |
Wang | Source Coding Basics and Speech Coding | |
JP2003271199A (ja) | オーディオ信号の符号化方法及び符号化装置 | |
CN110534119A (zh) | 一种基于人耳听觉频率尺度信号分解的音频编解码方法 | |
JP2001154697A (ja) | オーディオ信号の符号化方法 | |
JP2002221997A (ja) | オーディオ信号符号化方法 | |
JPH09146598A (ja) | 音声符号化における雑音抑圧方法 | |
JP2002116799A (ja) | オーディオ信号符号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040611 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040809 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040903 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041207 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 3630082 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071224 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081224 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091224 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101224 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111224 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111224 Year of fee payment: 7 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111224 Year of fee payment: 7 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121224 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121224 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131224 Year of fee payment: 9 |
|
EXPY | Cancellation because of completion of term |