JP4854630B2 - 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム - Google Patents
音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP4854630B2 JP4854630B2 JP2007238144A JP2007238144A JP4854630B2 JP 4854630 B2 JP4854630 B2 JP 4854630B2 JP 2007238144 A JP2007238144 A JP 2007238144A JP 2007238144 A JP2007238144 A JP 2007238144A JP 4854630 B2 JP4854630 B2 JP 4854630B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- gain
- unit
- gain control
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 221
- 238000000034 method Methods 0.000 title claims description 58
- 238000004590 computer program Methods 0.000 title claims description 20
- 230000005236 sound signal Effects 0.000 claims description 231
- 230000003321 amplification Effects 0.000 claims description 43
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 43
- 238000009795 derivation Methods 0.000 claims description 42
- 230000008569 process Effects 0.000 claims description 27
- 238000000926 separation method Methods 0.000 claims description 27
- 238000009499 grossing Methods 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 16
- 230000002123 temporal effect Effects 0.000 claims description 14
- 230000015556 catabolic process Effects 0.000 abstract description 3
- 238000006731 degradation reaction Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 20
- 238000006243 chemical reaction Methods 0.000 description 10
- 230000035945 sensitivity Effects 0.000 description 7
- 230000001186 cumulative effect Effects 0.000 description 6
- 230000006866 deterioration Effects 0.000 description 5
- 238000012805 post-processing Methods 0.000 description 5
- 239000000470 constituent Substances 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 229920006395 saturated elastomer Polymers 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03G—CONTROL OF AMPLIFICATION
- H03G3/00—Gain control in amplifiers or frequency changers
- H03G3/20—Automatic control
- H03G3/30—Automatic control in amplifiers having semiconductor devices
- H03G3/32—Automatic control in amplifiers having semiconductor devices the control being dependent upon ambient noise level or sound level
Landscapes
- Control Of Amplification And Gain Control (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Description
図1は、本発明の実施の形態1に係る音処理装置のハードウェアの構成例を示すブロック図である。図1中1は、カーナビゲーションシステム等のシステムに用いられるコンピュータである音処理装置であり、音処理装置1は、話者が発声する音声及び雑音等の外部から到来する音を受音し、受音した音に基づいて音信号を生成する複数の受音部10,10,…と、複数の受音部10,10,…にて生成した音信号を増幅する可変ゲインアンプ等の増幅部11,11,…と、増幅部11,11,…にて増幅したアナログ信号である音信号をデジタル信号に変換するA/D変換部12,12,…と、DSP(Digital Signal Processor)等の制御部13とを備えている。
但し、adj’(n):原利得制御値
ref:パワー目標値
但し、adj(t):利得制御値
α:0以上1未満の時定数
実施の形態2は、実施の形態1において、背景雑音のパワー推定結果及びパワー目標値の大小関係に基づいて利得制御値の算出の要否を判定する形態である。実施の形態2に係るハードウェアの構成例及び機能の例は、実施の形態1と同様であるので、実施の形態1を参照するものとし、その説明を省略する。なお以降の説明において、実施の形態1と同様の構成要件については、実施の形態1と同様の符号を付して説明する。
then adj’(n)=ref−pow_noise(n)
else adj’(n)=0
…(4)
then adj’(n)=ref−pow_noise(n)
else adj’(n)=0
…(5)
実施の形態3は、実施の形態1において、求めた原利得制御値及び前回の利得制御値の大小関係に基づいて時定数を決定する形態である。実施の形態3に係るハードウェアの構成例及び機能の例は、実施の形態1と同様であるので、実施の形態1を参照するものとし、その説明を省略する。なお以降の説明において、実施の形態1と同様の構成要件については、実施の形態1と同様の符号を付して説明する。
then adj(t)=α1・adj(t−1)+(1−α1)・adj’(n)
else adj(t)=α2・adj(t−1)+(1−α2)・adj’(n)
…(6)
但し、α1:0以上1未満の第1時定数
α2:0以上1未満の第2時定数
実施の形態4は、実施の形態1において、増幅部の制御方法を変更した形態である。実施の形態4に係るハードウェアの構成例は、実施の形態1と同様であるので、実施の形態1を参照するものとし、その説明を省略する。なお以降の説明において、実施の形態1と同様の構成要件については、実施の形態1と同様の符号を付して説明する。
但し、total_adj(t):adj(t)の累計値
>max_amp_gain)
then total_adj(t)
=max_amp_gain−init_amp_gain
if((total_adj(t)+init_amp_gain)
<min_amp_gain)
then total_adj(t)
=min_amp_gain−init_amp_gain
…(8)
但し、max_amp_gain:増幅部11,11の利得の最大値
min_amp_gain:増幅部11,11の利得の最小値
init_amp_gain:増幅部11,11の利得の初期値
…式(9)
但し、amp_gain(t):利得制御値
実施の形態5は、実施の形態1において、増幅部の利得を制御するのではなく、利得が異なる複数組の増幅部を用いる形態である。なお以降の説明において、実施の形態1と同様の構成については、実施の形態1と同様の符号を付し、その説明を省略する。
=select_gain_H(t)・signal_H(t)
+select_gain_M(t)・signal_M(t)
+select_gain_L(t)・signal_L(t) …(10)
但し、signal(t):音声信号
select_gain_H(t):高利得係数
signal_H(t):高利得音声信号
select_gain_M(t):中利得係数
signal_M(t):中利得音声信号
select_gain_L(t);低利得係数
signal_L(t):低利得音声信号
実施の形態6は、実施の形態1において、アプリケーション手段にて利得を加味して処理を実行する形態である。実施の形態6に係るハードウェアの構成例は、実施の形態1と同様であるので、実施の形態1を参照するものとし、その説明を省略する。なお以降の説明において、実施の形態1と同様の構成要件については、実施の形態1と同様の符号を付して説明する。
実施の形態7は、実施の形態1を拡張した実施の形態6において、利得を加味して補正した音声信号をアプリケーション手段に入力させる形態である。実施の形態7に係るハードウェアの構成例は、実施の形態1と同様であるので、実施の形態1を参照するものとし、その説明を省略する。なお以降の説明において、実施の形態6と同様の構成要件については、実施の形態6と同様の符号を付して説明する。
但し、gain_cor(t):利得の補正値
total_adj(t):利得制御値adj(t)の累計値
…(12)
但し、signal_cor(t):補正信号
実施の形態8は、実施の形態1における音処理装置に相当するシステムを、複数台の装置を用いて実現する形態である。なお以降の説明において、実施の形態1と同様の構成については、実施の形態1と同様の符号を付し、その説明を省略する。
10 受音部
10a 第1受音部
10b 第2受音部
11 増幅部
11a 第1増幅部
11b 第2増幅部
11c 第3増幅部
12 A/D変換部
13 制御部
130 分離手段
130a 第1分離手段
130b 第2分離手段
130c 第3分離手段
131 推定手段
132 導出手段
132a 利得テーブル
133 アプリケーション手段
134 選択手段
135 補正手段
2 受音装置
3 利得制御装置
4 処理装置
100 コンピュータプログラム
Claims (10)
- 受音した音に基づいて音信号を生成する複数の受音部を備え、該複数の受音部が生成した音信号を増幅して処理する音処理装置において、
設定された利得制御値に基づいて、各受音部が生成した音信号に対する利得を夫々制御する複数の増幅部と、
複数の受音部に係る夫々の音信号に基づいて、予め設定されている目的方向から到来する音に基づく音信号及び他の方向から到来する音に基づく音信号を分離する分離部と、
分離した目的方向に係る音信号及び他の方向に係る音信号の相関に基づいて、音信号に含まれる背景雑音のパワーを推定する推定部と、
推定した背景雑音のパワー及び予め設定されているパワー目標値に基づいて、前記複数の増幅部へ出力する利得制御値を求める導出部と
を備え、
前記複数の増幅部は、前記導出部が求めた利得制御値に基づいて利得を制御する様にしてある
ことを備えることを特徴とする音処理装置。 - 前記導出部は、推定した背景雑音のパワー及びパワー目標値の差分を求め、求めた差分の時間変化を平滑化することにより利得制御値を求める様にしてあることを特徴とする請求項1に記載の音処理装置。
- 前記導出部は、求めた差分及び以前に求めた利得制御値の大小関係に基づいて、平滑化の程度を示す時定数を決定する様にしてあり、差分の時間変化の平滑化は、決定された時定数に基づいて行う様にしてあることを特徴とする請求項2に記載の音処理装置。
- 前記導出部は、推定した背景雑音のパワーがパワー目標値より大きい場合にのみ、又は推定した背景雑音のパワーがパワー目標値より小さい場合にのみ利得を変更する利得制御値を求める様にしてあることを特徴とする請求項1乃至請求項3のいずれかに記載の音処理装置。
- 前記導出部は、利得の制御幅が予め設定されている前記増幅部の制御範囲内となる様に利得制御値を調整する様にしてあることを特徴とする請求項1乃至請求項4のいずれかに記載の音処理装置。
- 受音した音に基づいて音信号を生成する複数の受音部を備え、該複数の受音部が生成した音信号を増幅して処理する音処理装置において、
前記複数の受音部が夫々生成した音信号の夫々に対し、夫々異なる利得にて音信号を夫々増幅する複数の増幅部と、
複数の受音部に係る夫々の音信号に基づいて、予め設定されている目的方向から到来する音に基づく音信号及び他の方向から到来する音に基づく音信号を分離する分離部と、
分離した目的方向に係る音信号及び他の方向に係る音信号の相関に基づいて、音信号に含まれる背景雑音のパワーを推定する推定部と、
推定した背景雑音のパワー及び予め設定されているパワー目標値に基づいて、受音部が生成した音信号に対する利得の目標値を求める導出部と、
利得の目標値及び予め記憶されている各増幅部の利得に基づいて、どの増幅部からの音信号を処理の対象とするかを選択する選択部と
を備えることを特徴とする音処理装置。 - 雑音環境下で受音した音に基づいて音信号を生成する複数の受音部、及び該複数の受音部が受音した音信号を、設定された利得制御値に基づいて増幅する増幅部を備える受音装置と連携し、前記増幅部の利得を制御する利得制御装置であって、
複数の受音部に係る夫々の音信号に基づいて、予め設定されている目的方向から到来する音に基づく音信号及び他の方向から到来する音に基づく音信号を分離する分離部と、
分離した目的方向に係る音信号及び他の方向に係る音信号の相関に基づいて、音信号に含まれる背景雑音のパワーを推定する推定部と、
推定した背景雑音のパワー及び予め設定されているパワー目標値に基づいて、前記受音装置へ出力する利得制御値を求める導出部と
を備えることを特徴とする利得制御装置。 - 受音した音に基づいて音信号を生成する複数の受音部、及び該複数の受音部が受音した音信号を、設定された利得制御値に基づいて増幅する増幅部を備える受音装置と連携可能なコンピュータに、前記増幅部の利得を制御させる利得制御方法であって、
前記コンピュータに、
複数の受音部に係る夫々の音信号に基づいて、予め設定されている目的方向から到来する音に基づく音信号及び他の方向から到来する音に基づく音信号を分離する手順と、
分離した目的方向に係る音信号及び他の方向に係る音信号の相関に基づいて、音信号に含まれる背景雑音のパワーを推定する手順と、
推定した背景雑音のパワー及び予め設定されているパワー目標値に基づいて、前記増幅部に設定する利得制御値を求める手順と
を実行させることを特徴とする利得制御方法。 - 受音した音に基づいて音信号を生成する複数の受音部、及び該複数の受音部が受音した音信号を、設定された利得制御値に基づいて増幅する増幅部を備える受音装置と連携可能なコンピュータに、前記増幅部の利得を制御させるコンピュータプログラムにおいて、
前記コンピュータに、
複数の受音部に係る夫々の音信号に基づいて、予め設定されている目的方向から到来する音に基づく音信号及び他の方向から到来する音に基づく音信号を分離させる手順と、
分離した目的方向に係る音信号及び他の方向に係る音信号の相関に基づいて、音信号に含まれる背景雑音のパワーを推定させる手順と、
推定した背景雑音のパワー及び予め設定されているパワー目標値に基づいて、前記増幅部に設定する利得制御値を求めさせる導出手順と
を実行させることを特徴とするコンピュータプログラム。 - 前記導出手順は、推定した背景雑音のパワー及びパワー目標値の差分を求め、求めた差分の時間変化を平滑化することにより利得制御値を求める様にしてあることを特徴とする請求項9に記載のコンピュータプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007238144A JP4854630B2 (ja) | 2007-09-13 | 2007-09-13 | 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム |
DE102008039276.6A DE102008039276B4 (de) | 2007-09-13 | 2008-08-23 | Tonverarbeitungsvorrichtung, Vorrichtung und Verfahren zum Steuern der Verstärkung und Computerprogramm |
US12/232,177 US8473291B2 (en) | 2007-09-13 | 2008-09-11 | Sound processing apparatus, apparatus and method for controlling gain, and computer program |
CN2008101491467A CN101388216B (zh) | 2007-09-13 | 2008-09-12 | 声音处理装置、控制增益的装置和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007238144A JP4854630B2 (ja) | 2007-09-13 | 2007-09-13 | 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009069503A JP2009069503A (ja) | 2009-04-02 |
JP4854630B2 true JP4854630B2 (ja) | 2012-01-18 |
Family
ID=40348773
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007238144A Active JP4854630B2 (ja) | 2007-09-13 | 2007-09-13 | 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US8473291B2 (ja) |
JP (1) | JP4854630B2 (ja) |
CN (1) | CN101388216B (ja) |
DE (1) | DE102008039276B4 (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2012070670A1 (ja) * | 2010-11-25 | 2014-05-19 | 日本電気株式会社 | 信号処理装置、信号処理方法、及び信号処理プログラム |
JP5857403B2 (ja) * | 2010-12-17 | 2016-02-10 | 富士通株式会社 | 音声処理装置および音声処理プログラム |
EP2485395B1 (en) * | 2011-02-04 | 2013-05-01 | Harman International Industries Ltd. | Audio Mixing Console avoiding Signal Level Overload |
US9037276B2 (en) * | 2011-04-06 | 2015-05-19 | International Business Machines Corporation | Dynamic setting of increments on an amplitude scale |
WO2012137263A1 (ja) * | 2011-04-08 | 2012-10-11 | 三菱電機株式会社 | 音声認識装置およびナビゲーション装置 |
GB2491173A (en) * | 2011-05-26 | 2012-11-28 | Skype | Setting gain applied to an audio signal based on direction of arrival (DOA) information |
GB2493327B (en) | 2011-07-05 | 2018-06-06 | Skype | Processing audio signals |
JP5817368B2 (ja) * | 2011-09-13 | 2015-11-18 | ソニー株式会社 | 情報処理装置及び情報処理方法 |
GB2495130B (en) | 2011-09-30 | 2018-10-24 | Skype | Processing audio signals |
GB2495128B (en) | 2011-09-30 | 2018-04-04 | Skype | Processing signals |
GB2495278A (en) | 2011-09-30 | 2013-04-10 | Skype | Processing received signals from a range of receiving angles to reduce interference |
GB2495131A (en) | 2011-09-30 | 2013-04-03 | Skype | A mobile device includes a received-signal beamformer that adapts to motion of the mobile device |
GB2495472B (en) | 2011-09-30 | 2019-07-03 | Skype | Processing audio signals |
GB2495129B (en) | 2011-09-30 | 2017-07-19 | Skype | Processing signals |
GB2496660B (en) | 2011-11-18 | 2014-06-04 | Skype | Processing audio signals |
GB201120392D0 (en) | 2011-11-25 | 2012-01-11 | Skype Ltd | Processing signals |
GB2497343B (en) | 2011-12-08 | 2014-11-26 | Skype | Processing audio signals |
MX342965B (es) * | 2013-04-05 | 2016-10-19 | Dolby Laboratories Licensing Corp | Sistema y método de compansión para reducir el ruido de cuantificación usando extensión espectral avanzada. |
JP2016109725A (ja) * | 2014-12-02 | 2016-06-20 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
CN107925819B (zh) * | 2015-08-24 | 2020-10-02 | 雅马哈株式会社 | 声音拾取装置和声音拾取方法 |
US10535360B1 (en) * | 2017-05-25 | 2020-01-14 | Tp Lab, Inc. | Phone stand using a plurality of directional speakers |
JP2019205114A (ja) | 2018-05-25 | 2019-11-28 | ヤマハ株式会社 | データ処理装置、及びデータ処理方法。 |
CN109905814B (zh) * | 2019-03-22 | 2020-09-11 | 广州小鹏汽车科技有限公司 | 一种车内多音频播放方法、车载音频系统及车辆 |
CN116168719A (zh) * | 2022-12-26 | 2023-05-26 | 杭州爱听科技有限公司 | 一种基于语境分析的声音增益调节方法及系统 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2867425B2 (ja) * | 1989-05-30 | 1999-03-08 | 日本電気株式会社 | 音声認識用前処理装置 |
US5440639A (en) * | 1992-10-14 | 1995-08-08 | Yamaha Corporation | Sound localization control apparatus |
US5530760A (en) * | 1994-04-29 | 1996-06-25 | Audio Products International Corp. | Apparatus and method for adjusting levels between channels of a sound system |
JPH09116362A (ja) * | 1995-10-19 | 1997-05-02 | Matsushita Electric Ind Co Ltd | 自動音量制御装置 |
US5852800A (en) * | 1995-10-20 | 1998-12-22 | Liquid Audio, Inc. | Method and apparatus for user controlled modulation and mixing of digitally stored compressed data |
US5809472A (en) * | 1996-04-03 | 1998-09-15 | Command Audio Corporation | Digital audio data transmission system based on the information content of an audio signal |
JP3310225B2 (ja) | 1998-09-29 | 2002-08-05 | 松下電器産業株式会社 | 雑音レベル時間変動率計算方法及び装置と雑音低減方法及び装置 |
JP2003232847A (ja) * | 2002-02-07 | 2003-08-22 | Toshiba Corp | 受信装置および利得制御方法 |
US7092529B2 (en) * | 2002-11-01 | 2006-08-15 | Nanyang Technological University | Adaptive control system for noise cancellation |
JP4247037B2 (ja) * | 2003-01-29 | 2009-04-02 | 株式会社東芝 | 音声信号処理方法と装置及びプログラム |
JP3891153B2 (ja) * | 2003-07-31 | 2007-03-14 | ソニー株式会社 | 通話装置 |
JP2006201286A (ja) * | 2005-01-18 | 2006-08-03 | Matsushita Electric Ind Co Ltd | 車載収音装置及び車内収音情報表示方法 |
US7464029B2 (en) * | 2005-07-22 | 2008-12-09 | Qualcomm Incorporated | Robust separation of speech signals in a noisy environment |
JP4637725B2 (ja) * | 2005-11-11 | 2011-02-23 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法、プログラム |
-
2007
- 2007-09-13 JP JP2007238144A patent/JP4854630B2/ja active Active
-
2008
- 2008-08-23 DE DE102008039276.6A patent/DE102008039276B4/de active Active
- 2008-09-11 US US12/232,177 patent/US8473291B2/en active Active
- 2008-09-12 CN CN2008101491467A patent/CN101388216B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
DE102008039276A1 (de) | 2009-03-19 |
US20090076810A1 (en) | 2009-03-19 |
JP2009069503A (ja) | 2009-04-02 |
DE102008039276B4 (de) | 2016-10-06 |
CN101388216A (zh) | 2009-03-18 |
US8473291B2 (en) | 2013-06-25 |
CN101388216B (zh) | 2012-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4854630B2 (ja) | 音処理装置、利得制御装置、利得制御方法及びコンピュータプログラム | |
JP4916394B2 (ja) | エコー抑圧装置、エコー抑圧方法及びコンピュータプログラム | |
JP5562836B2 (ja) | 移動体オーディオデバイスのための自動的な音量およびダイナミックレンジの調整 | |
JP5257366B2 (ja) | 雑音抑圧装置、雑音抑圧制御装置、雑音抑圧方法及び雑音抑圧プログラム | |
US8903721B1 (en) | Smart auto mute | |
EP2265039B1 (en) | Hearing aid | |
JP5141691B2 (ja) | 音処理装置、補正装置、補正方法及びコンピュータプログラム | |
US20080031469A1 (en) | Multi-channel echo compensation system | |
JP4580409B2 (ja) | 音量制御装置および方法 | |
US20120303363A1 (en) | Processing Audio Signals | |
WO2005125272A1 (ja) | ハウリング抑圧装置、プログラム、集積回路、およびハウリング抑圧方法 | |
JP2007515830A (ja) | 補聴器の受音特性の指向性制御方法および制御可能な指向特性を備える補聴器用の信号処理装置 | |
WO2009104252A1 (ja) | 音処理装置、音処理方法及び音処理プログラム | |
JPWO2010131470A1 (ja) | ゲイン制御装置及びゲイン制御方法、音声出力装置 | |
JP4249729B2 (ja) | 自動利得制御方法、自動利得制御装置、自動利得制御プログラム及びこれを記録した記録媒体 | |
KR101182017B1 (ko) | 휴대 단말기에서 복수의 마이크들로 입력된 신호들의잡음을 제거하는 방법 및 장치 | |
CN112272848A (zh) | 使用间隙置信度的背景噪声估计 | |
JP4843691B2 (ja) | 信号特性変化装置 | |
US11205437B1 (en) | Acoustic echo cancellation control | |
JP2008129107A (ja) | オートゲインコントロール装置、音声記録装置、映像・音声記録装置および通話装置 | |
WO2018173526A1 (ja) | 音声処理用コンピュータプログラム、音声処理装置及び音声処理方法 | |
JP3619461B2 (ja) | 多チャネル雑音抑圧装置、その方法、そのプログラム及びその記録媒体 | |
JP2005157086A (ja) | 音声認識装置 | |
JP2006039108A (ja) | 特定話者音声出力装置及び特定話者判定プログラム | |
JP5857216B2 (ja) | 自動利得制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100517 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111017 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111025 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111025 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141104 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4854630 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |