JP4177755B2 - 発話特徴抽出システム - Google Patents
発話特徴抽出システム Download PDFInfo
- Publication number
- JP4177755B2 JP4177755B2 JP2003505912A JP2003505912A JP4177755B2 JP 4177755 B2 JP4177755 B2 JP 4177755B2 JP 2003505912 A JP2003505912 A JP 2003505912A JP 2003505912 A JP2003505912 A JP 2003505912A JP 4177755 B2 JP4177755 B2 JP 4177755B2
- Authority
- JP
- Japan
- Prior art keywords
- frequency
- signal
- filter
- circuit
- bandpass filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
Description
本発明は、発話認識、音声識別、音声認証システムにおいて使用するための発話特徴抽出システムに関する。より詳細には、本発明は、低減されたエラーレートを有する発話認識システムまたは他の発話処理システムを作成するために使用され得る発話特徴処理システムに関する。
上記観点から、本発明の目的は、発話の周波数変調特徴および以前から公知の振幅変調特徴をキャプチャすることが可能な発話特徴抽出システムを提供することである。
図1を参照すると、例示的なスピーチ認識システム5の一般的な記載は、本発明のスピーチ抽出システムを取り込むことが記載される。当業者に明らかなように、本発明のスピーチ特徴抽出システムはまた、話し手の識別、認証、および他の音声処理システムにおいて用いられ得る。
Claims (38)
- 周波数特徴および振幅特徴を有する入力発話信号から特徴を抽出する装置であって、
該装置は、
該入力発話信号を受信するように適合された第1および第2のバンドパスフィルタであって、該第1のバンドパスフィルタは、第1の信号を提供し、該第2のバンドパスフィルタは、第2の信号を提供し、該第1のバンドパスフィルタおよび該第2のバンドパスフィルタは、隣接した周波数帯域を有する、第1および第2のバンドパスフィルタと、
該第2のバンドパスフィルタに接続された共役回路であって、該第2の信号の共役である第3の信号を提供する共役回路と、
該第1のバンドパスフィルタおよび該共役回路に接続された乗算器であって、該第1の信号と該第3の信号との積である第4の信号を提供する乗算器と、
該乗算器に接続されたフィルタ手段であって、該第4の信号をフィルタリングして、該入力発話信号の該周波数特徴に対応する第5の信号と、該入力発話信号の該振幅特徴に対応する第6の信号とを出力するフィルタ手段と
を備える、装置。 - 前記フィルタ手段は、ロウパスフィルタを含む、請求項1に記載の装置。
- 前記入力発話信号と前記第1および第2のバンドパスフィルタとの間に接続されたハイパスフィルタをさらに備える、請求項1に記載の装置。
- 前記ロウパスフィルタは、実数部Rおよび虚数部Iを有する信号を提供し、前記フィルタ手段は、A=log RおよびF=I/Sqrt(R2+I2)を計算する回路をさらに備える、請求項2に記載の装置。
- 前記第1のバンドパスフィルタおよび第2のバンドパスフィルタの各々は、遅延エレメントと、複素乗算器と、加算器とを備える、請求項1に記載の装置。
- 前記加算器は、前記入力発話信号を受信し、出力信号を出力し、該加算器は、該入力発話信号と、該出力信号に複素係数を乗算したものの遅延されたサンプルを含む信号とを加
算する、請求項5に記載の装置。 - 離散コサイン変換、メルスケール変換、平均規格化、デルタおよび加速度解析、線形判別解析、または主成分解析などの1つ以上の特徴強調手法を実行する回路をさらに備える、請求項4に記載の装置。
- 前記1つ以上の特徴強調手法を実行する回路の出力を統計的に処理して、該出力を複数の所定のモデルと比較する回路をさらに備える、請求項7に記載の装置。
- 前記1つ以上の特徴強調手法を実行する回路は、AおよびFの離散コサイン変換を計算する回路を備える、請求項7に記載の装置。
- 前記1つ以上の特徴強調手法を実行する回路は、Aの連続する離散コサイン変換間の差を計算し、Fの連続する離散コサイン変換間の差を計算する回路をさらに備える、請求項7に記載の装置。
- 音を電気信号に変換するトランスデューサと、
該電気信号をデジタル信号に変換するサンプラーと
をさらに備え、前記入力発話信号は、該デジタル信号を含む、請求項1に記載の装置。 - デジタルプロセッサをさらに備え、前記第1および第2のバンドパスフィルタと、前記共役回路と、前記乗算器と、前記フィルタ手段とは、該デジタルプロセッサ上で実行されるように適合されたアルゴリズムを含む、請求項1に記載の装置。
- 線形スケールでの前記第1のバンドパスフィルタの中心周波数は、対数スケールでの対応する周波数に変換され、前記第2のバンドパスフィルタの中心周波数は、該第1のバンドパスフィルタの該周波数より所定の周波数だけ低い周波数に選択される、請求項1に記載の装置。
- 前記第2のフィルタの中心周波数は、前記第1のフィルタの中心周波数より100ヘルツだけ低い周波数である、請求項13に記載の装置。
- 前記第1のフィルタの帯域と前記第2のフィルタの帯域とは重なる、請求項13に記載の装置。
- 前記第1のフィルタの帯域幅と前記第2のフィルタの帯域幅とは同じである、請求項13に記載の装置。
- 線形スケールでの前記第1のバンドパスフィルタの中心周波数は、メルスケールでの対応する周波数に変換され、前記第2のバンドパスフィルタの中心周波数は、該第1のバンドパスフィルタの該周波数よりも所定の周波数だけ低い周波数に選択される、請求項1に記載の装置。
- 前記第2のフィルタの中心周波数は、前記第1のフィルタの中心周波数より100ヘルツだけ低い周波数である、請求項17に記載の装置。
- 前記第1のフィルタの帯域と前記第2のフィルタの帯域とは重なる、請求項17に記載の装置。
- 前記第1のフィルタの帯域幅と前記第2のフィルタの帯域幅とは同じである、請求項17に記載の装置。
- 前記第1および第2のバンドパスフィルタは、高速フーリエ変換を用いてインプリメントされる、請求項1に記載の装置。
- 入力発話信号から特徴を抽出するための方法であって、
該方法は、
第1のバンドパスフィルタと第2のバンドパスフィルタとを用いて、該入力発話信号を、第1の周波数帯域における第1の信号と第2の周波数帯域における第2の信号とに分離することであって、該第1のバンドパスフィルタおよび該第2のバンドパスフィルタは、隣接した周波数帯域を有する、ことと、
共役回路を用いて該第2の信号の共役をとることと、
乗算器を用いて該第2の信号の該共役と該第1の信号とを乗算することにより、第3の信号を提供することと、
フィルタ手段を用いて該第3の信号を処理することにより、該入力発話信号における周波数特徴に対応する周波数成分と、該入力発話信号における振幅特徴に対応する振幅成分とを生成することと
を包含する、方法。 - 前記入力発話信号を処理することにより前記第1および第2の信号を生成する前に、ハイパスフィルタを用いて該入力発話信号をハイパスフィルタリングすることをさらに包含する、請求項23に記載の方法。
- 前記フィルタ手段を用いて前記第3の信号を処理することは、ロウパスフィルタを用いて該第3の信号をロウパスフィルタリングすることをさらに包含する、請求項23に記載の方法。
- 前記第3の信号をロウパスフィルタリングすることは、実数部Rおよび虚数部Iを有する信号を提供し、前記第3の信号を処理することは、A=log RおよびF=I/Sqrt(R2+I2)を計算することを包含する、請求項25に記載の方法。
- 第1の回路を用いて、一連の特徴ベクトルを生成するための特徴強調手法を用いて前記第3の信号を処理することをさらに包含する、請求項26に記載の方法。
- 第2の回路を用いて、前記一連の特徴ベクトルを複数の所定のモデルと比較することによって該一連の特徴ベクトルを統計的に処理することをさらに包含する、請求項27に記載の方法。
- 第3の回路を用いてAおよびFの離散コサイン変換を計算することをさらに包含する、請求項27に記載の方法。
- 第4の回路を用いて、Aの連続する離散コサイン変換間の差およびFの連続する離散コサイン変換間の差を計算することをさらに包含する、請求項29に記載の方法。
- 第5の回路を用いて、前記連続する離散コサイン変換間の差を統計的に処理して、該差を複数の所定のパターンと比較することをさらに包含する、請求項30に記載の方法。
- トランスデューサを用いて音を電気信号に変換することと、
サンプラーを用いて該電気信号をサンプリングすることにより、デジタル信号を提供することと
をさらに包含し、前記入力発話信号は、該デジタル信号を含む、請求項23に記載の方法。 - 変換手段を用いて、線形スケールでの前記第1の周波数帯域の中心周波数を対数スケールでの対応する周波数に変換することと、選択手段を用いて、前記第2の周波数帯域の中心周波数を該第1の周波数帯域の該周波数よりも所定の周波数だけ低い周波数に選択することとを包含する、請求項23に記載の方法。
- 前記第2の周波数帯域の中心周波数は、前記第1の周波数帯域の中心周波数よりも100ヘルツだけ低い周波数である、請求項33に記載の方法。
- 前記第1の周波数帯域と前記第2の周波数帯域とは重なる、請求項33に記載の方法。
- 変換手段を用いて、線形スケールでの前記第1の周波数帯域の中心周波数をメルスケールでの対応する周波数に変換することと、選択手段を用いて、前記第2の周波数帯域の中心周波数を該第1の周波数帯域の該周波数よりも所定の周波数だけ低い周波数に選択することとを包含する、請求項23に記載の方法。
- 前記第2の周波数帯域の中心周波数は、前記第1の周波数帯域の中心周波数よりも100ヘルツだけ低い周波数である、請求項36に記載の方法。
- 前記第1の周波数帯域と前記第2の周波数帯域とは重なる、請求項36に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/882,744 US6493668B1 (en) | 2001-06-15 | 2001-06-15 | Speech feature extraction system |
PCT/US2002/019182 WO2002103676A1 (en) | 2001-06-15 | 2002-06-14 | Speech feature extraction system |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2004531767A JP2004531767A (ja) | 2004-10-14 |
JP2004531767A5 JP2004531767A5 (ja) | 2008-04-17 |
JP4177755B2 true JP4177755B2 (ja) | 2008-11-05 |
Family
ID=25381249
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003505912A Expired - Fee Related JP4177755B2 (ja) | 2001-06-15 | 2002-06-14 | 発話特徴抽出システム |
Country Status (7)
Country | Link |
---|---|
US (2) | US6493668B1 (ja) |
EP (1) | EP1402517B1 (ja) |
JP (1) | JP4177755B2 (ja) |
AT (1) | ATE421137T1 (ja) |
CA (1) | CA2450230A1 (ja) |
DE (1) | DE60230871D1 (ja) |
WO (1) | WO2002103676A1 (ja) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3673507B2 (ja) * | 2002-05-16 | 2005-07-20 | 独立行政法人科学技術振興機構 | 音声波形の特徴を高い信頼性で示す部分を決定するための装置およびプログラム、音声信号の特徴を高い信頼性で示す部分を決定するための装置およびプログラム、ならびに擬似音節核抽出装置およびプログラム |
JP4265908B2 (ja) * | 2002-12-12 | 2009-05-20 | アルパイン株式会社 | 音声認識装置及び音声認識性能改善方法 |
DE102004008225B4 (de) * | 2004-02-19 | 2006-02-16 | Infineon Technologies Ag | Verfahren und Einrichtung zum Ermitteln von Merkmalsvektoren aus einem Signal zur Mustererkennung, Verfahren und Einrichtung zur Mustererkennung sowie computerlesbare Speichermedien |
US20070041517A1 (en) * | 2005-06-30 | 2007-02-22 | Pika Technologies Inc. | Call transfer detection method using voice identification techniques |
US20070118372A1 (en) * | 2005-11-23 | 2007-05-24 | General Electric Company | System and method for generating closed captions |
US20070118364A1 (en) * | 2005-11-23 | 2007-05-24 | Wise Gerald B | System for generating closed captions |
US8345890B2 (en) | 2006-01-05 | 2013-01-01 | Audience, Inc. | System and method for utilizing inter-microphone level differences for speech enhancement |
US8744844B2 (en) | 2007-07-06 | 2014-06-03 | Audience, Inc. | System and method for adaptive intelligent noise suppression |
US9185487B2 (en) | 2006-01-30 | 2015-11-10 | Audience, Inc. | System and method for providing noise suppression utilizing null processing noise subtraction |
US8194880B2 (en) | 2006-01-30 | 2012-06-05 | Audience, Inc. | System and method for utilizing omni-directional microphones for speech enhancement |
US8204252B1 (en) | 2006-10-10 | 2012-06-19 | Audience, Inc. | System and method for providing close microphone adaptive array processing |
US7778831B2 (en) * | 2006-02-21 | 2010-08-17 | Sony Computer Entertainment Inc. | Voice recognition with dynamic filter bank adjustment based on speaker categorization determined from runtime pitch |
US8204253B1 (en) | 2008-06-30 | 2012-06-19 | Audience, Inc. | Self calibration of audio device |
US20080010067A1 (en) * | 2006-07-07 | 2008-01-10 | Chaudhari Upendra V | Target specific data filter to speed processing |
US8259926B1 (en) | 2007-02-23 | 2012-09-04 | Audience, Inc. | System and method for 2-channel and 3-channel acoustic echo cancellation |
US8189766B1 (en) | 2007-07-26 | 2012-05-29 | Audience, Inc. | System and method for blind subband acoustic echo cancellation postfiltering |
JP5183741B2 (ja) | 2007-08-27 | 2013-04-17 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | ノイズ補充と帯域拡張との間の遷移周波数の適合 |
US20090150164A1 (en) * | 2007-12-06 | 2009-06-11 | Hu Wei | Tri-model audio segmentation |
US8180064B1 (en) | 2007-12-21 | 2012-05-15 | Audience, Inc. | System and method for providing voice equalization |
US8194882B2 (en) | 2008-02-29 | 2012-06-05 | Audience, Inc. | System and method for providing single microphone noise suppression fallback |
US8355511B2 (en) | 2008-03-18 | 2013-01-15 | Audience, Inc. | System and method for envelope-based acoustic echo cancellation |
US8521530B1 (en) | 2008-06-30 | 2013-08-27 | Audience, Inc. | System and method for enhancing a monaural audio signal |
US8626516B2 (en) * | 2009-02-09 | 2014-01-07 | Broadcom Corporation | Method and system for dynamic range control in an audio processing system |
US9838784B2 (en) | 2009-12-02 | 2017-12-05 | Knowles Electronics, Llc | Directional audio capture |
US9008329B1 (en) | 2010-01-26 | 2015-04-14 | Audience, Inc. | Noise reduction using multi-feature cluster tracker |
US9142220B2 (en) | 2011-03-25 | 2015-09-22 | The Intellisis Corporation | Systems and methods for reconstructing an audio signal from transformed audio information |
US8548803B2 (en) * | 2011-08-08 | 2013-10-01 | The Intellisis Corporation | System and method of processing a sound signal including transforming the sound signal into a frequency-chirp domain |
US8620646B2 (en) | 2011-08-08 | 2013-12-31 | The Intellisis Corporation | System and method for tracking sound pitch across an audio signal using harmonic envelope |
US9183850B2 (en) | 2011-08-08 | 2015-11-10 | The Intellisis Corporation | System and method for tracking sound pitch across an audio signal |
WO2013184667A1 (en) | 2012-06-05 | 2013-12-12 | Rank Miner, Inc. | System, method and apparatus for voice analytics of recorded audio |
US9536540B2 (en) | 2013-07-19 | 2017-01-03 | Knowles Electronics, Llc | Speech signal separation and synthesis based on auditory scene analysis and speech modeling |
US9280968B2 (en) * | 2013-10-04 | 2016-03-08 | At&T Intellectual Property I, L.P. | System and method of using neural transforms of robust audio features for speech processing |
WO2016040885A1 (en) | 2014-09-12 | 2016-03-17 | Audience, Inc. | Systems and methods for restoration of speech components |
US9922668B2 (en) | 2015-02-06 | 2018-03-20 | Knuedge Incorporated | Estimating fractional chirp rate with multiple frequency representations |
US9870785B2 (en) | 2015-02-06 | 2018-01-16 | Knuedge Incorporated | Determining features of harmonic signals |
US9842611B2 (en) | 2015-02-06 | 2017-12-12 | Knuedge Incorporated | Estimating pitch using peak-to-peak distances |
US9820042B1 (en) | 2016-05-02 | 2017-11-14 | Knowles Electronics, Llc | Stereo separation and directional suppression with omni-directional microphones |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4300229A (en) * | 1979-02-21 | 1981-11-10 | Nippon Electric Co., Ltd. | Transmitter and receiver for an othogonally multiplexed QAM signal of a sampling rate N times that of PAM signals, comprising an N/2-point offset fourier transform processor |
US4221934A (en) * | 1979-05-11 | 1980-09-09 | Rca Corporation | Compandor for group of FDM signals |
GB8307702D0 (en) * | 1983-03-21 | 1983-04-27 | British Telecomm | Digital band-split filter means |
NL8400677A (nl) * | 1984-03-02 | 1985-10-01 | Philips Nv | Transmissiesysteem voor de overdracht van data signalen in een modulaatband. |
-
2001
- 2001-06-15 US US09/882,744 patent/US6493668B1/en not_active Expired - Lifetime
-
2002
- 2002-06-14 US US10/173,247 patent/US7013274B2/en not_active Expired - Lifetime
- 2002-06-14 EP EP02744395A patent/EP1402517B1/en not_active Expired - Lifetime
- 2002-06-14 JP JP2003505912A patent/JP4177755B2/ja not_active Expired - Fee Related
- 2002-06-14 AT AT02744395T patent/ATE421137T1/de not_active IP Right Cessation
- 2002-06-14 WO PCT/US2002/019182 patent/WO2002103676A1/en active Application Filing
- 2002-06-14 DE DE60230871T patent/DE60230871D1/de not_active Expired - Lifetime
- 2002-06-14 CA CA002450230A patent/CA2450230A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US6493668B1 (en) | 2002-12-10 |
EP1402517A4 (en) | 2007-04-25 |
EP1402517B1 (en) | 2009-01-14 |
EP1402517A1 (en) | 2004-03-31 |
WO2002103676A1 (en) | 2002-12-27 |
US7013274B2 (en) | 2006-03-14 |
DE60230871D1 (de) | 2009-03-05 |
US20020198711A1 (en) | 2002-12-26 |
CA2450230A1 (en) | 2002-12-27 |
ATE421137T1 (de) | 2009-01-15 |
US20030014245A1 (en) | 2003-01-16 |
JP2004531767A (ja) | 2004-10-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4177755B2 (ja) | 発話特徴抽出システム | |
JP2004531767A5 (ja) | ||
US6804643B1 (en) | Speech recognition | |
Sailor et al. | Auditory Filterbank Learning for Temporal Modulation Features in Replay Spoof Speech Detection. | |
EP1580730A2 (en) | Isolating speech signals utilizing neural networks | |
Kim et al. | Nonlinear enhancement of onset for robust speech recognition. | |
CN102054480A (zh) | 一种基于分数阶傅立叶变换的单声道混叠语音分离方法 | |
US5806022A (en) | Method and system for performing speech recognition | |
CN112382300A (zh) | 声纹鉴定方法、模型训练方法、装置、设备及存储介质 | |
Wang et al. | Low pass filtering and bandwidth extension for robust anti-spoofing countermeasure against codec variabilities | |
Maazouzi et al. | MFCC and similarity measurements for speaker identification systems | |
KR100571427B1 (ko) | 잡음 환경에서의 음성 인식을 위한 특징 벡터 추출 장치및 역상관 필터링 방법 | |
CN116312561A (zh) | 一种电力调度系统人员声纹识别鉴权降噪和语音增强方法、系统及装置 | |
CN110767238B (zh) | 基于地址信息的黑名单识别方法、装置、设备及存储介质 | |
JP7184236B2 (ja) | 声紋を認識する方法、装置、設備、および記憶媒体 | |
JP3916834B2 (ja) | 雑音が付加された周期波形の基本周期あるいは基本周波数の抽出方法 | |
Rosell | An introduction to front-end processing and acoustic features for automatic speech recognition | |
Nikhil et al. | Impact of ERB and bark scales on perceptual distortion based near-end speech enhancement | |
Lalitha et al. | An encapsulation of vital non-linear frequency features for various speech applications | |
JPS6229799B2 (ja) | ||
KR100381372B1 (ko) | 음성특징 추출장치 | |
KR100563316B1 (ko) | 보완적 특징벡터를 이용한 화자특징벡터 생성방법 및 장치 | |
CN117079666A (zh) | 歌曲打分方法、装置、终端设备以及存储介质 | |
Niyozmatova et al. | Development Software for Preprocessing Voice Signals | |
JP4014374B2 (ja) | 音声分析方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050613 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071031 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20080130 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20080206 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20080227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080402 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080603 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080801 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080822 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130829 Year of fee payment: 5 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |