JP2010054731A - 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム - Google Patents
雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2010054731A JP2010054731A JP2008218610A JP2008218610A JP2010054731A JP 2010054731 A JP2010054731 A JP 2010054731A JP 2008218610 A JP2008218610 A JP 2008218610A JP 2008218610 A JP2008218610 A JP 2008218610A JP 2010054731 A JP2010054731 A JP 2010054731A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- sound
- usage
- noise suppression
- microphone array
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 100
- 238000004590 computer program Methods 0.000 title claims abstract description 12
- 238000012545 processing Methods 0.000 claims abstract description 455
- 230000005236 sound signal Effects 0.000 claims abstract description 141
- 230000001629 suppression Effects 0.000 claims description 228
- 230000008569 process Effects 0.000 claims description 74
- 238000006243 chemical reaction Methods 0.000 claims description 52
- 238000001228 spectrum Methods 0.000 claims description 49
- 238000001514 detection method Methods 0.000 claims description 24
- 238000004364 calculation method Methods 0.000 claims description 13
- 238000002493 microarray Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 43
- 230000008859 change Effects 0.000 description 35
- 238000004891 communication Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 13
- 230000001413 cellular effect Effects 0.000 description 11
- 230000035945 sensitivity Effects 0.000 description 10
- 238000012937 correction Methods 0.000 description 7
- 238000009432 framing Methods 0.000 description 5
- 101100328887 Caenorhabditis elegans col-34 gene Proteins 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 230000037433 frameshift Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
【解決手段】携帯電話機の使用形態が変更された場合、マイクアレイ処理制御部24は、変更された使用形態に応じてスイッチ22,23の切り替えを制御し、音入力部6,7からの音信号をマイクアレイ処理部26,27のいずれかへ入力させる。携帯電話機の使用形態が変更された場合、情報変換部25は、変更前の使用形態に対応するマイクアレイ処理部26(又は27)から使用環境情報を取得し、変更後の使用形態に対応するマイクアレイ処理部27(又は26)へ渡す。マイクアレイ処理部26,27は、情報変換部25からの使用環境情報を用いて、音入力部6,7からの音信号に対してマイクアレイ処理を実行する。
【選択図】図3
Description
金田豊著、「マイクロホン系におけるディジタルフィルタの応答」、日本音響学会誌、1989年,第45巻,第2号、125−128頁
以下に、実施形態1に係る携帯電話機について説明する。図1A、図1B及び図1Cは実施形態1の携帯電話機の構成を示す模式図である。なお、本実施形態1の携帯電話機1は折り畳み式の携帯電話機である。図1Aには折り畳んでいない状態の携帯電話機1の外観斜視図を、図1Bには表示部11を内側にして折り畳んだ状態の携帯電話機1の外観斜視図を、図1Cには表示部11を外側にして折り畳んだ状態の携帯電話機1の外観斜視図をそれぞれ示す。
表示部11は、例えば液晶ディスプレイ(LCD)であり、演算処理部2からの指示に従って、携帯電話機1の動作状況、操作部10を介して入力された情報、ユーザに対して通知すべき情報等を表示する。
以下に、実施形態2に係る携帯電話機について説明する。なお、本実施形態2の携帯電話機は、上述した実施形態1の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
本実施形態2のマイクアレイ処理制御部24は、実施形態1と同様に、携帯電話機1が通常スタイルであることを示す判断結果を筺体の状態判断部21から通知された場合、音入力部6,7からの音信号を第1マイクアレイ処理部26へ送出するようにスイッチ22,23の切り替えを制御する。
そこで、本実施形態2の情報変換部25は、第1マイクアレイ処理部26が用いる使用環境情報を雑音抑圧部29に渡す際、及び雑音抑圧部29が用いる使用環境情報を第1マイクアレイ処理部26に渡す際に、それぞれの使用環境情報を、雑音抑圧部29又は第1マイクアレイ処理部26用に変換する。
以下に、実施形態3に係る携帯電話機について説明する。なお、本実施形態3の携帯電話機は、上述した実施形態1の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
以下に、実施形態4に係る携帯電話機について説明する。なお、本実施形態4の携帯電話機は、上述した実施形態3の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
以下に、実施形態5に係る携帯電話機について説明する。なお、本実施形態5の携帯電話機は、上述した実施形態1の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
本実施形態5のマイクアレイ処理制御部24は、筺体の状態判断部21から通知された携帯電話機の使用形態に応じて、音入力部6,7,12のうちの2つの音入力部からの音信号をマイクアレイ処理部26(又は27)へ送出するように入力切替部32による切り替えを制御する。
以下に、実施形態6に係る携帯電話機について説明する。なお、本実施形態6の携帯電話機は、上述した実施形態5の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
以下に、実施形態7に係る携帯電話機について説明する。なお、本実施形態7の携帯電話機は、上述した実施形態1の携帯電話機1と同様の構成によって実現することができるので、同様の構成については同一の符号を付して説明を省略する。
以下に、実施形態8に係る携帯電話機について説明する。本実施形態8は、上述の実施形態1〜7の携帯電話機1に対する外観の変形例について説明する。図23A、図23B及び図23Cは実施形態8の携帯電話機の構成を示す模式図である。なお、図23Aには折り畳んでいない状態の携帯電話機1の外観斜視図を、図23Bには折り畳んだ状態の携帯電話機1を筺体1a側から見た外観斜視図を、図23Cには折り畳んだ状態の携帯電話機1を筺体1b側から見た外観斜視図をそれぞれ示す。
受音した音を音信号に変換する複数の受音部を接続可能で、前記音信号に含まれる雑音成分を抑圧する雑音抑圧装置において、
前記複数の受音部の位置関係及び/又は前記複数の受音部と目的音源との位置関係が変化する複数の使用形態での使用が可能であり、
前記使用形態を検知する検知部と、
前記複数の受音部で変換された各音信号に対して雑音抑圧処理に用いる使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換する変換部と、
該変換部が変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なう抑圧部と
を備えることを特徴とする雑音抑圧装置。
前記使用形態のそれぞれに応じた使用環境を推定する推定部を更に備え、
前記変換部は、前記推定部が推定した使用環境を示す使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換すること
を特徴とする付記1に記載の雑音抑圧装置。
前記推定部が推定したそれぞれの使用形態に応じた使用環境を示す使用環境情報を、それぞれの使用形態に対応付けて記憶する記憶部を備え、
前記変換部は、前記記憶部に記憶してある使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換すること
を特徴とする付記2に記載の雑音抑圧装置。
前記推定部は、
前記検知部が検知した使用形態に応じて、前記受音部のそれぞれによって変換された音信号における音声区間及び雑音区間、該音声区間及び雑音区間の情報を用いて背景雑音レベル及び/又は背景雑音スペクトルを推定し、
現在の使用形態に対して推定した前記音声区間及び雑音区間の情報を用いて、現在の使用形態ではない使用形態に対応する背景雑音レベル及び/又は背景雑音スペクトルを推定すること
を特徴とする付記2又は3に記載の雑音抑圧装置。
前記使用形態のそれぞれに対応して、前記抑圧部によって雑音抑圧処理が行なわれた音信号のSN比及び/又は前記抑圧部による雑音抑圧処理における抑圧量を算出する算出部と、
前記使用形態のそれぞれに対応して算出されたSN比及び/又は抑圧量を比較する比較部と、
比較した結果を外部に通知する通知部とを更に備え、
前記推定部は、前記受音部のそれぞれによって変換された音信号に基づいて、前記使用形態のそれぞれに対応する使用環境を推定し、
前記抑圧部は、前記推定部が推定した前記使用形態のそれぞれに対応する使用環境を示す使用環境情報を用いて、前記音信号に対して雑音抑圧処理を行なうこと
を特徴とする付記2から4までのいずれかひとつに記載の雑音抑圧装置。
前記受音部の使用形態の切り替えが可能であり、
前記受音部の使用形態のそれぞれに対応付けて、所定の音源の方向を示す方向情報を記憶する方向情報記憶部を更に備え、
前記抑圧部は、前記検知部が検知した前記受音部の使用形態に対応して記憶してある方向情報を用いて、前記使用形態に応じた雑音抑圧処理を行なうこと
を特徴とする付記1から5までのいずれかひとつに記載の雑音抑圧装置。
前記受音部は、3つ以上であり、
前記使用形態のそれぞれに応じて、前記受音部のうちの複数の受音部を選択する選択部を更に備え、
前記抑圧部は、選択された受音部によって変換された音信号に対して前記雑音抑圧処理を行なうことを特徴とする付記1から6までのいずれかひとつに記載の雑音抑圧装置。
前記使用環境情報は、背景雑音レベル、背景雑音スペクトルの統計量、雑音区間及び雑音帯域を示す情報、所定の音源の方向を示す方向情報、雑音源の方向を示す方向情報、SN比、及び前記複数の受音部の感度のばらつきを補正するための補正値の少なくとも1つを含む情報であることを特徴とする付記1から7までのいずれかひとつに記載の雑音抑圧装置。
前記複数の受音部はマイクロホンであり、
付記1から8までのいずれかひとつに記載の雑音抑圧装置を備えることを特徴とする携帯電話機。
前記受音部の少なくとも1つが設けられた可動部を有する筺体を備え、
前記可動部を動かすことによって前記複数の受音部の配置位置が変更されるように構成してあることを特徴とする付記9に記載の携帯電話機。
受音した音を音信号に変換する複数の受音部と接続可能な雑音抑圧装置が、前記音信号に含まれる雑音成分を抑圧する雑音抑圧方法において、
前記雑音抑圧装置は、前記複数の受音部の位置関係及び/又は前記複数の受音部と目的音源との位置関係が変化する複数の使用形態での使用が可能であり、
前記雑音抑圧装置が、前記使用形態を検知するステップと、
前記雑音抑圧装置が、前記複数の受音部で変換された各音信号に対して雑音抑圧処理に用いる使用環境情報を、検知した使用形態に応じた使用環境情報に変換するステップと、
前記雑音抑圧装置が、変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なうステップと
を有することを特徴とする雑音抑圧方法。
コンピュータに、受音して得られた音信号に含まれる雑音成分を抑圧させるためのコンピュータプログラムにおいて、
コンピュータに、
受音した際の使用形態を検知させるステップと、
前記音信号に対して雑音抑圧処理に用いる使用環境情報を、検知した使用形態に応じた使用環境情報に変換させるステップと、
変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なうステップと
を有することを特徴とするコンピュータプログラム。
2 演算処理部
21 筺体の状態判断部(検知手段)
25 情報変換部(変換手段)
26,27 マイクアレイ処理部(抑圧手段)
261,271 使用環境推定部(推定手段)
6,7 音入力部(受音部)
Claims (10)
- 受音した音を音信号に変換する複数の受音部を接続可能で、前記音信号に含まれる雑音成分を抑圧する雑音抑圧装置において、
前記複数の受音部の位置関係及び/又は前記複数の受音部と目的音源との位置関係が変化する複数の使用形態での使用が可能であり、
前記使用形態を検知する検知部と、
前記複数の受音部で変換された各音信号に対して雑音抑圧処理に用いる使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換する変換部と、
該変換部が変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なう抑圧部と
を備えることを特徴とする雑音抑圧装置。 - 前記使用形態のそれぞれに応じた使用環境を推定する推定部を更に備え、
前記変換部は、前記推定部が推定した使用環境を示す使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換すること
を特徴とする請求項1に記載の雑音抑圧装置。 - 前記推定部が推定したそれぞれの使用形態に応じた使用環境を示す使用環境情報を、それぞれの使用形態に対応付けて記憶する記憶部を備え、
前記変換部は、前記記憶部に記憶してある使用環境情報を、前記検知部が検知した使用形態に応じた使用環境情報に変換すること
を特徴とする請求項2に記載の雑音抑圧装置。 - 前記推定部は、
前記検知部が検知した使用形態に応じて、前記受音部のそれぞれによって変換された音信号における音声区間及び雑音区間、該音声区間及び雑音区間の情報を用いて背景雑音レベル及び/又は背景雑音スペクトルを推定し、
現在の使用形態に対して推定した前記音声区間及び雑音区間の情報を用いて、現在の使用形態ではない使用形態に対応する背景雑音レベル及び/又は背景雑音スペクトルを推定すること
を特徴とする請求項2又は3に記載の雑音抑圧装置。 - 前記使用形態のそれぞれに対応して、前記抑圧部によって雑音抑圧処理が行なわれた音信号のSN比及び/又は前記抑圧部による雑音抑圧処理における抑圧量を算出する算出部と、
前記使用形態のそれぞれに対応して算出されたSN比及び/又は抑圧量を比較する比較部と、
比較した結果を外部に通知する通知部とを更に備え、
前記推定部は、前記受音部のそれぞれによって変換された音信号に基づいて、前記使用形態のそれぞれに対応する使用環境を推定し、
前記抑圧部は、前記推定部が推定した前記使用形態のそれぞれに対応する使用環境を示す使用環境情報を用いて、前記音信号に対して雑音抑圧処理を行なうこと
を特徴とする請求項2から4までのいずれかひとつに記載の雑音抑圧装置。 - 前記受音部の使用形態の切り替えが可能であり、
前記受音部の使用形態のそれぞれに対応付けて、所定の音源の方向を示す方向情報を記憶する方向情報記憶部を更に備え、
前記抑圧部は、前記検知部が検知した前記受音部の使用形態に対応して記憶してある方向情報を用いて、前記使用形態に応じた雑音抑圧処理を行なうこと
を特徴とする請求項1から5までのいずれかひとつに記載の雑音抑圧装置。 - 前記受音部は、3つ以上であり、
前記使用形態のそれぞれに応じて、前記受音部のうちの複数の受音部を選択する選択部を更に備え、
前記抑圧部は、選択された受音部によって変換された音信号に対して前記雑音抑圧処理を行なうことを特徴とする請求項1から6までのいずれかひとつに記載の雑音抑圧装置。 - 前記複数の受音部はマイクロホンであり、
請求項1から7までのいずれかひとつに記載の雑音抑圧装置を備えることを特徴とする携帯電話機。 - 受音した音を音信号に変換する複数の受音部と接続可能な雑音抑圧装置が、前記音信号に含まれる雑音成分を抑圧する雑音抑圧方法において、
前記雑音抑圧装置は、前記複数の受音部の位置関係及び/又は前記複数の受音部と目的音源との位置関係が変化する複数の使用形態での使用が可能であり、
前記雑音抑圧装置が、前記使用形態を検知するステップと、
前記雑音抑圧装置が、前記複数の受音部で変換された各音信号に対して雑音抑圧処理に用いる使用環境情報を、検知した使用形態に応じた使用環境情報に変換するステップと、
前記雑音抑圧装置が、変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なうステップと
を有することを特徴とする雑音抑圧方法。 - コンピュータに、受音して得られた音信号に含まれる雑音成分を抑圧させるためのコンピュータプログラムにおいて、
コンピュータに、
受音した際の使用形態を検知させるステップと、
前記音信号に対して雑音抑圧処理に用いる使用環境情報を、検知した使用形態に応じた使用環境情報に変換させるステップと、
変換した使用環境情報を用いた雑音抑圧処理を前記音信号に対して行なうステップと
を有することを特徴とするコンピュータプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008218610A JP5206234B2 (ja) | 2008-08-27 | 2008-08-27 | 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム |
EP09161566A EP2159791B1 (en) | 2008-08-27 | 2009-05-29 | Noise suppressing device, mobile phone and noise suppressing method |
KR1020090057579A KR101084420B1 (ko) | 2008-08-27 | 2009-06-26 | 잡음 억압 장치, 휴대 전화기, 잡음 억압 방법 및 기록 매체 |
US12/494,779 US8620388B2 (en) | 2008-08-27 | 2009-06-30 | Noise suppressing device, mobile phone, noise suppressing method, and recording medium |
CN2009101513278A CN101661753B (zh) | 2008-08-27 | 2009-06-30 | 噪声抑制装置、移动电话和噪声抑制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008218610A JP5206234B2 (ja) | 2008-08-27 | 2008-08-27 | 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010054731A true JP2010054731A (ja) | 2010-03-11 |
JP5206234B2 JP5206234B2 (ja) | 2013-06-12 |
Family
ID=40999940
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008218610A Expired - Fee Related JP5206234B2 (ja) | 2008-08-27 | 2008-08-27 | 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US8620388B2 (ja) |
EP (1) | EP2159791B1 (ja) |
JP (1) | JP5206234B2 (ja) |
KR (1) | KR101084420B1 (ja) |
CN (1) | CN101661753B (ja) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014077736A (ja) * | 2012-10-11 | 2014-05-01 | Fuji Xerox Co Ltd | 音声解析装置、音声解析システムおよびプログラム |
JP2014093680A (ja) * | 2012-11-05 | 2014-05-19 | Yuji Hosoi | 携帯電話 |
JP2014110546A (ja) * | 2012-12-03 | 2014-06-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオ会議システム |
US8996373B2 (en) | 2010-12-27 | 2015-03-31 | Fujitsu Limited | State detection device and state detecting method |
CN104538040A (zh) * | 2014-11-28 | 2015-04-22 | 广东欧珀移动通信有限公司 | 一种动态选择通话语音信号的方法和装置 |
EP2996314A1 (en) | 2014-08-27 | 2016-03-16 | Fujitsu Limited | Voice processing device, voice processing method, and computer program for voice processing |
US9705548B2 (en) | 2013-10-24 | 2017-07-11 | Rohm Co., Ltd. | Wristband-type handset and wristband-type alerting device |
US9716782B2 (en) | 2010-12-27 | 2017-07-25 | Rohm Co., Ltd. | Mobile telephone |
US9729971B2 (en) | 2012-06-29 | 2017-08-08 | Rohm Co., Ltd. | Stereo earphone |
US9742887B2 (en) | 2013-08-23 | 2017-08-22 | Rohm Co., Ltd. | Mobile telephone |
US9894430B2 (en) | 2010-12-27 | 2018-02-13 | Rohm Co., Ltd. | Incoming/outgoing-talk unit and incoming-talk unit |
US9980024B2 (en) | 2011-02-25 | 2018-05-22 | Rohm Co., Ltd. | Hearing system and finger ring for the hearing system |
US10013862B2 (en) | 2014-08-20 | 2018-07-03 | Rohm Co., Ltd. | Watching system, watching detection device, and watching notification device |
US10079925B2 (en) | 2012-01-20 | 2018-09-18 | Rohm Co., Ltd. | Mobile telephone |
US10356231B2 (en) | 2014-12-18 | 2019-07-16 | Finewell Co., Ltd. | Cartilage conduction hearing device using an electromagnetic vibration unit, and electromagnetic vibration unit |
US10778824B2 (en) | 2016-01-19 | 2020-09-15 | Finewell Co., Ltd. | Pen-type handset |
US10795321B2 (en) | 2015-09-16 | 2020-10-06 | Finewell Co., Ltd. | Wrist watch with hearing function |
US10967521B2 (en) | 2015-07-15 | 2021-04-06 | Finewell Co., Ltd. | Robot and robot system |
US11526033B2 (en) | 2018-09-28 | 2022-12-13 | Finewell Co., Ltd. | Hearing device |
Families Citing this family (94)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7856252B2 (en) * | 2007-11-02 | 2010-12-21 | Agere Systems Inc. | Method for seamless noise suppression on wideband to narrowband cell switching |
JP5407848B2 (ja) * | 2009-12-25 | 2014-02-05 | 富士通株式会社 | マイクロホンの指向性制御装置 |
JP5672770B2 (ja) | 2010-05-19 | 2015-02-18 | 富士通株式会社 | マイクロホンアレイ装置及び前記マイクロホンアレイ装置が実行するプログラム |
GB2493327B (en) | 2011-07-05 | 2018-06-06 | Skype | Processing audio signals |
GB2495131A (en) * | 2011-09-30 | 2013-04-03 | Skype | A mobile device includes a received-signal beamformer that adapts to motion of the mobile device |
GB2495130B (en) | 2011-09-30 | 2018-10-24 | Skype | Processing audio signals |
GB2495129B (en) | 2011-09-30 | 2017-07-19 | Skype | Processing signals |
GB2495278A (en) | 2011-09-30 | 2013-04-10 | Skype | Processing received signals from a range of receiving angles to reduce interference |
CN103002171B (zh) * | 2011-09-30 | 2015-04-29 | 斯凯普公司 | 处理音频信号的方法和装置 |
GB2495128B (en) | 2011-09-30 | 2018-04-04 | Skype | Processing signals |
GB2495472B (en) | 2011-09-30 | 2019-07-03 | Skype | Processing audio signals |
CN102368793B (zh) * | 2011-10-12 | 2014-03-19 | 惠州Tcl移动通信有限公司 | 手机及其通话信号处理方法 |
GB2496660B (en) | 2011-11-18 | 2014-06-04 | Skype | Processing audio signals |
GB201120392D0 (en) | 2011-11-25 | 2012-01-11 | Skype Ltd | Processing signals |
US20130136282A1 (en) | 2011-11-30 | 2013-05-30 | David McClain | System and Method for Spectral Personalization of Sound |
GB2497343B (en) | 2011-12-08 | 2014-11-26 | Skype | Processing audio signals |
US8831686B2 (en) * | 2012-01-30 | 2014-09-09 | Blackberry Limited | Adjusted noise suppression and voice activity detection |
CN102946493B (zh) * | 2012-11-27 | 2019-01-29 | 康佳集团股份有限公司 | 一种移动终端通话环境音调节方法 |
CN103077725B (zh) * | 2012-12-31 | 2015-12-23 | 东莞宇龙通信科技有限公司 | 语音处理的方法及装置 |
CN103929557B (zh) * | 2013-01-11 | 2016-04-13 | 华为技术有限公司 | 语音会议噪声处理方法及装置 |
US20140211949A1 (en) * | 2013-01-29 | 2014-07-31 | Qnx Software Systems Limited | Sound field reproduction |
US9426573B2 (en) | 2013-01-29 | 2016-08-23 | 2236008 Ontario Inc. | Sound field encoder |
US9307337B2 (en) * | 2013-03-11 | 2016-04-05 | Arris Enterprises, Inc. | Systems and methods for interactive broadcast content |
CN105469806B (zh) * | 2014-09-12 | 2020-02-21 | 联想(北京)有限公司 | 一种声音处理方法、装置及系统 |
KR101683480B1 (ko) * | 2015-04-17 | 2016-12-07 | (주)에스앤아이스퀘어 | 근거리 무선 통신망을 기반으로 하는 음성인식 통역기 및 음성인식 통역기의 동작 방법 |
JP6596689B2 (ja) * | 2015-07-24 | 2019-10-30 | 株式会社オーディオテクニカ | マイクロホン装置 |
CN105654960A (zh) * | 2015-09-21 | 2016-06-08 | 宇龙计算机通信科技(深圳)有限公司 | 一种对终端声音消噪的处理方法及装置 |
CN105357566B (zh) * | 2015-10-29 | 2019-05-24 | 歌尔智能科技有限公司 | 一种语音遥控器及其供电方法 |
US10095470B2 (en) | 2016-02-22 | 2018-10-09 | Sonos, Inc. | Audio response playback |
US9965247B2 (en) | 2016-02-22 | 2018-05-08 | Sonos, Inc. | Voice controlled media playback system based on user profile |
US10264030B2 (en) | 2016-02-22 | 2019-04-16 | Sonos, Inc. | Networked microphone device control |
US9947316B2 (en) | 2016-02-22 | 2018-04-17 | Sonos, Inc. | Voice control of a media playback system |
US9811314B2 (en) | 2016-02-22 | 2017-11-07 | Sonos, Inc. | Metadata exchange involving a networked playback system and a networked microphone system |
US10097919B2 (en) | 2016-02-22 | 2018-10-09 | Sonos, Inc. | Music service selection |
CN105957527A (zh) * | 2016-05-16 | 2016-09-21 | 珠海格力电器股份有限公司 | 一种语音控制电器的方法、装置及语音控制空调 |
US9978390B2 (en) | 2016-06-09 | 2018-05-22 | Sonos, Inc. | Dynamic player selection for audio signal processing |
US10134399B2 (en) | 2016-07-15 | 2018-11-20 | Sonos, Inc. | Contextualization of voice inputs |
US10152969B2 (en) | 2016-07-15 | 2018-12-11 | Sonos, Inc. | Voice detection by multiple devices |
US10115400B2 (en) | 2016-08-05 | 2018-10-30 | Sonos, Inc. | Multiple voice services |
US9942678B1 (en) | 2016-09-27 | 2018-04-10 | Sonos, Inc. | Audio playback settings for voice interaction |
US9743204B1 (en) | 2016-09-30 | 2017-08-22 | Sonos, Inc. | Multi-orientation playback device microphones |
US10181323B2 (en) | 2016-10-19 | 2019-01-15 | Sonos, Inc. | Arbitration-based voice recognition |
US11183181B2 (en) | 2017-03-27 | 2021-11-23 | Sonos, Inc. | Systems and methods of multiple voice services |
CN107087208B (zh) * | 2017-05-25 | 2020-07-07 | 深圳市酷开网络科技有限公司 | 一种全景视频播放方法、系统及存储装置 |
US10475449B2 (en) | 2017-08-07 | 2019-11-12 | Sonos, Inc. | Wake-word detection suppression |
US10048930B1 (en) | 2017-09-08 | 2018-08-14 | Sonos, Inc. | Dynamic computation of system response volume |
US10446165B2 (en) | 2017-09-27 | 2019-10-15 | Sonos, Inc. | Robust short-time fourier transform acoustic echo cancellation during audio playback |
US10051366B1 (en) | 2017-09-28 | 2018-08-14 | Sonos, Inc. | Three-dimensional beam forming with a microphone array |
US10621981B2 (en) | 2017-09-28 | 2020-04-14 | Sonos, Inc. | Tone interference cancellation |
US10482868B2 (en) | 2017-09-28 | 2019-11-19 | Sonos, Inc. | Multi-channel acoustic echo cancellation |
US10466962B2 (en) | 2017-09-29 | 2019-11-05 | Sonos, Inc. | Media playback system with voice assistance |
JP7013789B2 (ja) * | 2017-10-23 | 2022-02-01 | 富士通株式会社 | 音声処理用コンピュータプログラム、音声処理装置及び音声処理方法 |
US10880650B2 (en) | 2017-12-10 | 2020-12-29 | Sonos, Inc. | Network microphone devices with automatic do not disturb actuation capabilities |
US10818290B2 (en) | 2017-12-11 | 2020-10-27 | Sonos, Inc. | Home graph |
US11343614B2 (en) | 2018-01-31 | 2022-05-24 | Sonos, Inc. | Device designation of playback and network microphone device arrangements |
US10522167B1 (en) * | 2018-02-13 | 2019-12-31 | Amazon Techonlogies, Inc. | Multichannel noise cancellation using deep neural network masking |
US11175880B2 (en) | 2018-05-10 | 2021-11-16 | Sonos, Inc. | Systems and methods for voice-assisted media content selection |
US10847178B2 (en) | 2018-05-18 | 2020-11-24 | Sonos, Inc. | Linear filtering for noise-suppressed speech detection |
US10959029B2 (en) | 2018-05-25 | 2021-03-23 | Sonos, Inc. | Determining and adapting to changes in microphone performance of playback devices |
US10681460B2 (en) | 2018-06-28 | 2020-06-09 | Sonos, Inc. | Systems and methods for associating playback devices with voice assistant services |
US11076035B2 (en) | 2018-08-28 | 2021-07-27 | Sonos, Inc. | Do not disturb feature for audio notifications |
US10461710B1 (en) | 2018-08-28 | 2019-10-29 | Sonos, Inc. | Media playback system with maximum volume setting |
US10878811B2 (en) | 2018-09-14 | 2020-12-29 | Sonos, Inc. | Networked devices, systems, and methods for intelligently deactivating wake-word engines |
US10587430B1 (en) | 2018-09-14 | 2020-03-10 | Sonos, Inc. | Networked devices, systems, and methods for associating playback devices based on sound codes |
US11024331B2 (en) | 2018-09-21 | 2021-06-01 | Sonos, Inc. | Voice detection optimization using sound metadata |
US10811015B2 (en) | 2018-09-25 | 2020-10-20 | Sonos, Inc. | Voice detection optimization based on selected voice assistant service |
US11100923B2 (en) | 2018-09-28 | 2021-08-24 | Sonos, Inc. | Systems and methods for selective wake word detection using neural network models |
US10692518B2 (en) | 2018-09-29 | 2020-06-23 | Sonos, Inc. | Linear filtering for noise-suppressed speech detection via multiple network microphone devices |
US11899519B2 (en) | 2018-10-23 | 2024-02-13 | Sonos, Inc. | Multiple stage network microphone device with reduced power consumption and processing load |
EP3654249A1 (en) | 2018-11-15 | 2020-05-20 | Snips | Dilated convolutions and gating for efficient keyword spotting |
US11183183B2 (en) | 2018-12-07 | 2021-11-23 | Sonos, Inc. | Systems and methods of operating media playback systems having multiple voice assistant services |
US11132989B2 (en) | 2018-12-13 | 2021-09-28 | Sonos, Inc. | Networked microphone devices, systems, and methods of localized arbitration |
US10602268B1 (en) | 2018-12-20 | 2020-03-24 | Sonos, Inc. | Optimization of network microphone devices using noise classification |
US10867604B2 (en) | 2019-02-08 | 2020-12-15 | Sonos, Inc. | Devices, systems, and methods for distributed voice processing |
US11315556B2 (en) | 2019-02-08 | 2022-04-26 | Sonos, Inc. | Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification |
US11120794B2 (en) | 2019-05-03 | 2021-09-14 | Sonos, Inc. | Voice assistant persistence across multiple network microphone devices |
US10741164B1 (en) * | 2019-05-28 | 2020-08-11 | Bose Corporation | Multipurpose microphone in acoustic devices |
US11361756B2 (en) | 2019-06-12 | 2022-06-14 | Sonos, Inc. | Conditional wake word eventing based on environment |
US10586540B1 (en) | 2019-06-12 | 2020-03-10 | Sonos, Inc. | Network microphone device with command keyword conditioning |
US11200894B2 (en) | 2019-06-12 | 2021-12-14 | Sonos, Inc. | Network microphone device with command keyword eventing |
US11138969B2 (en) | 2019-07-31 | 2021-10-05 | Sonos, Inc. | Locally distributed keyword detection |
US11138975B2 (en) | 2019-07-31 | 2021-10-05 | Sonos, Inc. | Locally distributed keyword detection |
US10871943B1 (en) | 2019-07-31 | 2020-12-22 | Sonos, Inc. | Noise classification for event detection |
US11189286B2 (en) | 2019-10-22 | 2021-11-30 | Sonos, Inc. | VAS toggle based on device orientation |
US11200900B2 (en) | 2019-12-20 | 2021-12-14 | Sonos, Inc. | Offline voice control |
US11562740B2 (en) | 2020-01-07 | 2023-01-24 | Sonos, Inc. | Voice verification for media playback |
US11556307B2 (en) | 2020-01-31 | 2023-01-17 | Sonos, Inc. | Local voice data processing |
US11308958B2 (en) | 2020-02-07 | 2022-04-19 | Sonos, Inc. | Localized wakeword verification |
US11482224B2 (en) | 2020-05-20 | 2022-10-25 | Sonos, Inc. | Command keywords with input detection windowing |
US11308962B2 (en) | 2020-05-20 | 2022-04-19 | Sonos, Inc. | Input detection windowing |
US11727919B2 (en) | 2020-05-20 | 2023-08-15 | Sonos, Inc. | Memory allocation for keyword spotting engines |
US11698771B2 (en) | 2020-08-25 | 2023-07-11 | Sonos, Inc. | Vocal guidance engines for playback devices |
US11984123B2 (en) | 2020-11-12 | 2024-05-14 | Sonos, Inc. | Network device interaction by range |
US11551700B2 (en) | 2021-01-25 | 2023-01-10 | Sonos, Inc. | Systems and methods for power-efficient keyword detection |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004228920A (ja) * | 2003-01-23 | 2004-08-12 | Sony Ericsson Mobilecommunications Japan Inc | 携帯通信端末 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6377680B1 (en) * | 1998-07-14 | 2002-04-23 | At&T Corp. | Method and apparatus for noise cancellation |
US6931138B2 (en) * | 2000-10-25 | 2005-08-16 | Matsushita Electric Industrial Co., Ltd | Zoom microphone device |
JP4138290B2 (ja) | 2000-10-25 | 2008-08-27 | 松下電器産業株式会社 | ズームマイクロホン装置 |
JP2005148163A (ja) | 2003-11-11 | 2005-06-09 | Canon Inc | 音声認識装置およびその制御方法 |
DE102004000043A1 (de) * | 2004-11-17 | 2006-05-24 | Siemens Ag | Verfahren zur selektiven Aufnahme eines Schallsignals |
JP4863713B2 (ja) | 2005-12-29 | 2012-01-25 | 富士通株式会社 | 雑音抑制装置、雑音抑制方法、及びコンピュータプログラム |
CN101410900A (zh) * | 2006-03-24 | 2009-04-15 | 皇家飞利浦电子股份有限公司 | 用于可佩戴装置的数据处理 |
JP4912036B2 (ja) * | 2006-05-26 | 2012-04-04 | 富士通株式会社 | 指向性集音装置、指向性集音方法、及びコンピュータプログラム |
WO2009069184A1 (ja) | 2007-11-26 | 2009-06-04 | Fujitsu Limited | 音処理装置、補正装置、補正方法及びコンピュータプログラム |
-
2008
- 2008-08-27 JP JP2008218610A patent/JP5206234B2/ja not_active Expired - Fee Related
-
2009
- 2009-05-29 EP EP09161566A patent/EP2159791B1/en not_active Not-in-force
- 2009-06-26 KR KR1020090057579A patent/KR101084420B1/ko not_active IP Right Cessation
- 2009-06-30 US US12/494,779 patent/US8620388B2/en not_active Expired - Fee Related
- 2009-06-30 CN CN2009101513278A patent/CN101661753B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004228920A (ja) * | 2003-01-23 | 2004-08-12 | Sony Ericsson Mobilecommunications Japan Inc | 携帯通信端末 |
Cited By (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9894430B2 (en) | 2010-12-27 | 2018-02-13 | Rohm Co., Ltd. | Incoming/outgoing-talk unit and incoming-talk unit |
US10779075B2 (en) | 2010-12-27 | 2020-09-15 | Finewell Co., Ltd. | Incoming/outgoing-talk unit and incoming-talk unit |
US8996373B2 (en) | 2010-12-27 | 2015-03-31 | Fujitsu Limited | State detection device and state detecting method |
US9716782B2 (en) | 2010-12-27 | 2017-07-25 | Rohm Co., Ltd. | Mobile telephone |
US9980024B2 (en) | 2011-02-25 | 2018-05-22 | Rohm Co., Ltd. | Hearing system and finger ring for the hearing system |
US10778823B2 (en) | 2012-01-20 | 2020-09-15 | Finewell Co., Ltd. | Mobile telephone and cartilage-conduction vibration source device |
US10158947B2 (en) | 2012-01-20 | 2018-12-18 | Rohm Co., Ltd. | Mobile telephone utilizing cartilage conduction |
US10079925B2 (en) | 2012-01-20 | 2018-09-18 | Rohm Co., Ltd. | Mobile telephone |
US10506343B2 (en) | 2012-06-29 | 2019-12-10 | Finewell Co., Ltd. | Earphone having vibration conductor which conducts vibration, and stereo earphone including the same |
US9729971B2 (en) | 2012-06-29 | 2017-08-08 | Rohm Co., Ltd. | Stereo earphone |
US10834506B2 (en) | 2012-06-29 | 2020-11-10 | Finewell Co., Ltd. | Stereo earphone |
JP2014077736A (ja) * | 2012-10-11 | 2014-05-01 | Fuji Xerox Co Ltd | 音声解析装置、音声解析システムおよびプログラム |
JP2014093680A (ja) * | 2012-11-05 | 2014-05-19 | Yuji Hosoi | 携帯電話 |
JP2014110546A (ja) * | 2012-12-03 | 2014-06-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオ会議システム |
US10237382B2 (en) | 2013-08-23 | 2019-03-19 | Finewell Co., Ltd. | Mobile telephone |
US10075574B2 (en) | 2013-08-23 | 2018-09-11 | Rohm Co., Ltd. | Mobile telephone |
US9742887B2 (en) | 2013-08-23 | 2017-08-22 | Rohm Co., Ltd. | Mobile telephone |
US9705548B2 (en) | 2013-10-24 | 2017-07-11 | Rohm Co., Ltd. | Wristband-type handset and wristband-type alerting device |
US10103766B2 (en) | 2013-10-24 | 2018-10-16 | Rohm Co., Ltd. | Wristband-type handset and wristband-type alerting device |
US10380864B2 (en) | 2014-08-20 | 2019-08-13 | Finewell Co., Ltd. | Watching system, watching detection device, and watching notification device |
US10013862B2 (en) | 2014-08-20 | 2018-07-03 | Rohm Co., Ltd. | Watching system, watching detection device, and watching notification device |
EP2996314A1 (en) | 2014-08-27 | 2016-03-16 | Fujitsu Limited | Voice processing device, voice processing method, and computer program for voice processing |
US9847094B2 (en) | 2014-08-27 | 2017-12-19 | Fujitsu Limited | Voice processing device, voice processing method, and non-transitory computer readable recording medium having therein program for voice processing |
CN104538040A (zh) * | 2014-11-28 | 2015-04-22 | 广东欧珀移动通信有限公司 | 一种动态选择通话语音信号的方法和装置 |
US10356231B2 (en) | 2014-12-18 | 2019-07-16 | Finewell Co., Ltd. | Cartilage conduction hearing device using an electromagnetic vibration unit, and electromagnetic vibration unit |
US10848607B2 (en) | 2014-12-18 | 2020-11-24 | Finewell Co., Ltd. | Cycling hearing device and bicycle system |
US11601538B2 (en) | 2014-12-18 | 2023-03-07 | Finewell Co., Ltd. | Headset having right- and left-ear sound output units with through-holes formed therein |
US10967521B2 (en) | 2015-07-15 | 2021-04-06 | Finewell Co., Ltd. | Robot and robot system |
US10795321B2 (en) | 2015-09-16 | 2020-10-06 | Finewell Co., Ltd. | Wrist watch with hearing function |
US10778824B2 (en) | 2016-01-19 | 2020-09-15 | Finewell Co., Ltd. | Pen-type handset |
US11526033B2 (en) | 2018-09-28 | 2022-12-13 | Finewell Co., Ltd. | Hearing device |
Also Published As
Publication number | Publication date |
---|---|
CN101661753B (zh) | 2012-07-04 |
US20100056227A1 (en) | 2010-03-04 |
US8620388B2 (en) | 2013-12-31 |
JP5206234B2 (ja) | 2013-06-12 |
EP2159791B1 (en) | 2013-02-13 |
EP2159791A1 (en) | 2010-03-03 |
KR101084420B1 (ko) | 2011-11-21 |
CN101661753A (zh) | 2010-03-03 |
KR20100025463A (ko) | 2010-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5206234B2 (ja) | 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム | |
US9135924B2 (en) | Noise suppressing device, noise suppressing method and mobile phone | |
JP5499633B2 (ja) | 再生装置、ヘッドホン及び再生方法 | |
JP2009530950A (ja) | ウェアラブル装置のためのデータ処理 | |
WO2015154282A1 (zh) | 一种通话设备及应用于通话设备的切换方法、装置 | |
JP2007214976A (ja) | エコーキャンセル装置、テレビ電話端末、及びエコーキャンセル方法 | |
EP2996352A1 (en) | Audio system and method using a loudspeaker output signal for wind noise reduction | |
JP3964325B2 (ja) | 通話システムおよび通信機 | |
CN110996308B (zh) | 声音播放设备及其控制方法、控制装置和可读存储介质 | |
KR101395329B1 (ko) | 두 개의 마이크로폰을 이용하여 잡음을 제거하는 방법 및이동통신 단말기 | |
JP5707871B2 (ja) | 音声通話装置及び携帯電話 | |
JP3904086B2 (ja) | 携帯通信端末 | |
US11388281B2 (en) | Adaptive method and apparatus for intelligent terminal, and terminal | |
JPH11239093A (ja) | 移動体無線通信装置 | |
JP2009153053A (ja) | 音声推定方法及びそれを用いた携帯端末 | |
JP5022459B2 (ja) | 収音装置、収音方法及び収音プログラム | |
JP5316442B2 (ja) | 携帯電話機、スピーカ出力制御方法およびスピーカ出力制御プログラム | |
JP5189515B2 (ja) | インターホンシステム | |
JP2010204564A (ja) | 通信装置 | |
CN105681527B (zh) | 一种消噪调整方法及电子设备 | |
CN115529537A (zh) | 一种差分波束形成方法、装置及存储介质 | |
CN113470675A (zh) | 音频信号处理方法及装置 | |
JP2010016516A (ja) | 電話装置 | |
JP2015226198A (ja) | 電話機、ハンズフリー通話システム、および、電話機の制御方法 | |
JP2013042562A (ja) | 携帯電話 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110513 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120621 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120703 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120828 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120918 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121213 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20121221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130204 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160301 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |