JP2009033470A - 音声取得装置、音声出力装置、雑音除去システム、及び、プログラム - Google Patents
音声取得装置、音声出力装置、雑音除去システム、及び、プログラム Download PDFInfo
- Publication number
- JP2009033470A JP2009033470A JP2007195219A JP2007195219A JP2009033470A JP 2009033470 A JP2009033470 A JP 2009033470A JP 2007195219 A JP2007195219 A JP 2007195219A JP 2007195219 A JP2007195219 A JP 2007195219A JP 2009033470 A JP2009033470 A JP 2009033470A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- sound
- voice
- signal
- audio signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
【解決手段】音声取得装置1は、音声出力通知の要求をブロードキャスト配信し、ネットワーク内の音声出力装置に要求する。要求に応じて、音声出力装置が音声出力動作を開始することを通知すると、音声取得装置1は、出力音声データの転送の要求をブロードキャスト配信する。音声出力装置は、その求めに応じて、自らがスピーカで出力する音声に対応する出力音声データを音声取得装置1に転送する。音声取得装置1は、転送された出力音声データを使用して、マイクで取得した音声データから雑音成分を除去する。
【選択図】図4
Description
以下、本発明の実施形態1に係る雑音除去システムを説明する。本実施形態に係る雑音除去システムNSは、図1に示すように、音声取得装置1、第1音声出力装置2、第2音声出力装置3、ネットワーク4、を備える。ネットワーク4は、例えば、LAN(Local Area Network)から構成される。各装置は、ネットワーク4を介して、有線又は無線により相互に通信可能である。なお、音声取得装置及び音声出力装置の数は任意である。
前述の実施形態1では、音声出力装置は、ネットワーク4内に存在する全ての音声取得装置の「音声出力通知要求期間」を識別し、その「音声出力通知要求期間」中に出力音声データを転送する。
前述の実施形態1及び実施形態2では、音声取得装置1は、音声出力装置から転送された出力音声データを使用して、雑音を除去する。しかし、音声取得装置が、音声出力装置から受信する方法以外の方法で出力音声データを取得可能な場合、それにより取得した出力音声データを使用して雑音成分の除去を行うことができる。
これにより、通信ネットワークを介して出力音声データを受信することによる遅延の影響をある程度補償して、精度よく時間同期できる。
これにより、音声取得装置1は、音声出力装置が放音を開始することを識別でき、さらに、識別したことに応答して、出力音声データの送信を音声出力装置に要求できる。このため、音声出力装置が放音するタイミングとほぼ同じタイミングで、出力音声データの受信を開始でき、雑音成分の除去を開始できる。
これにより、音声取得装置1が出力音声データを自ら取得可能なときに音声出力装置は出力音声データの転送が不要となり、音声出力装置の処理負荷を低減できる。
Claims (16)
- 音声を集音し、その音声を第1の音声信号に変換する音声取得手段と、
外部の音声出力装置に、該音声出力装置が放音する音声の第2の音声信号を送信することを、通信ネットワークを介して、要求する音声信号要求手段と、
前記音声信号要求手段の要求に応じて前記外部の音声出力装置が送信した第2の音声信号を、通信ネットワークを介して、受信する外部信号受信手段と、
前記音声取得手段からの第1の音声信号と、前記外部信号受信手段で受信した第2の音声信号とを、同期化する同期化手段と、
前記同期化手段で同期化された前記第1の音声信号と前記第2の音声信号とに基づいて、該第1の音声信号に含まれる該第2の音声信号を除去し、除去後の信号を出力する雑音除去手段と、
を備えることを特徴とする音声取得装置。 - 前記同期化手段は、
前記外部の音声出力装置が送信した第2の音声信号が通信ネットワークを介して送信されることに起因する伝送遅延時間を求める伝送遅延演算手段、を備え、
前記伝送遅延演算手段で求めた伝送遅延時間に基づいて前記第1の音声信号と前記第2の音声信号とを遅延させた後に、前記第1の音声信号と前記第2の音声信号とを同期化し、
前記雑音除去手段は、
前記外部の音声出力装置が放音した音声が空間を伝達することに起因する伝達遅延時間を推定する伝達遅延推定手段、を備え、
前記伝達遅延推定手段で推定した伝達遅延時間に基づいて前記同期化手段で同期化された第2の音声信号を遅延させた後に、前記遅延させた第2の音声信号と前記同期化手段で同期化された第1の音声信号とに基づいて、該第1の音声信号に含まれる該第2の音声信号を除去し、除去後の信号を出力する、ことを特徴とする請求項1に記載の音声取得装置。 - 前記伝送遅延演算手段が求める伝送遅延時間は、前記外部の音声出力装置が第2の音声信号を送信するための処理を開始してから、該第2の音声信号を受信した前記外部信号受信手段が前記同期化手段に出力するための処理が完了するまでの間における時間である、ことを特徴とする請求項2に記載の音声取得装置。
- 前記伝送遅延演算手段は、
前記外部の音声出力装置から、該音声出力装置が第2の音声信号を送信するときに使用した符号化方式を示す符号化情報、を取得する手段と、
前記符号化情報が示す符号化方式に従って前記音声出力装置が前記第2の音声信号を符号化した時間と、該符号化方式に従って前記音声取得装置が該第2の音声信号を復号した時間と、の少なくとも1つを求めることにより、前記伝送遅延時間を算出する手段と、を備える、ことを特徴とする請求項3に記載の音声取得装置。 - 前記伝送遅延演算手段は、
前記外部の音声出力装置が第2の音声信号を送信するときに該音声出力装置が保証できる通信の遅延時間を示す通信保証情報を、該音声出力装置から取得する手段と、
前記通信保証情報が示す遅延時間に基づいて、前記伝送遅延時間を算出する手段と、を備える、ことを特徴とする請求項3又は4に記載の音声取得装置。 - 前記伝達遅延推定手段は、前記音声出力装置が音声を放音してから前記音声取得手段がその音声を集音するまでの伝達遅延時間を推定する、ことを特徴とする請求項2に記載の音声取得装置。
- 前記音声取得手段は、
音声をアナログ音声信号に変換し、そのアナログ音声信号を出力するマイクと、
前記マイクが出力したアナログ音声信号をディジタル音声信号に変換し、そのディジタル音声信号を前記第1の音声信号として出力する変換手段と、を備える、ことを特徴とする請求項1乃至6のいずれか1項に記載の音声取得装置。 - 前記雑音除去手段は、前記外部信号受信手段で受信した第2の音声信号に基づいて、前記変換手段で変換したディジタル音声信号から、前記外部の音声出力装置が出力した音声に起因する音響エコーを除去し、出力するエコー除去手段、を備える、ことを特徴とする請求項7に記載の音声取得装置。
- 前記同期化手段は、
前記外部の音声出力装置が放音した音声の第2の音声信号を、該音声出力装置と異なる外部装置から受信する第2の外部信号受信手段、を備え、
前記第2の外部信号受信手段で受信した第2の音声信号と、前記音声取得手段からの第1の音声信号とを、同期化する、ことを特徴とする請求項1乃至8のいずれか1項に記載の音声取得装置。 - 前記同期化手段は、
前記第2の外部信号受信手段により、前記外部の音声出力装置と異なる外部装置から、該外部の音声出力装置が放音した音声の第2の音声信号を受信可能か否か判別する判別手段、を備え、
前記判別手段で受信可能であると判別したときに、前記第2の外部信号受信手段で受信した第2の音声信号と、前記音声取得手段からの第1の音声信号とを同期化し、
前記判別手段で受信不可能であると判別したときに、前記外部信号受信手段により前記外部の音声取得装置から第2の音声信号を受信し、該受信した第2の音声信号と、前記音声取得手段からの第1の音声信号とを同期化する、ことを特徴とする請求項9に記載の音声取得装置。 - 前記音声信号要求手段は、
前記外部の音声出力装置が音声の放音を開始する前に、放音を開始することを示す放音開始信号を、該音声出力装置に送信することを要求する通知要求手段、を備え、
前記通知要求手段の要求に応じて前記外部の音声出力装置が送信した放音開始信号を受け取ったことに応答して、前記第2の音声信号の送信を該音声出力装置に要求する、ことを特徴とする請求項1乃至10のいずれか1項に記載の音声取得装置。 - 音声信号を音声に変換する音声変換手段と、
前記音声変換手段で変換した音声を放音する放音手段と、
前記放音手段で放音する音声を集音する可能性のある外部の音声取得装置からの要求に応じ、前記放音手段で放音する音声の音声信号を、通信ネットワークを介して、該音声取得装置に送信する外部信号送信手段と、
を備えることを特徴とする音声出力装置。 - 前記外部信号送信手段は、
前記外部の音声取得装置からの要求に応じて、前記放音手段による音声の放音を開始することを示す放音開始信号を、該音声出力装置に送信する通知手段、を備え、
前記通知手段により前記放音開始信号を送信した後に、前記第2の音声信号を該音声出力装置に要求する、ことを特徴とする請求項12に記載の音声出力装置。 - 音声を集音し、その音声を第1の音声信号に変換する音声取得手段と、外部の音声出力装置に、該音声出力装置が放音する音声の第2の音声信号を送信することを、通信ネットワークを介して、要求する音声信号要求手段と、前記音声信号要求手段の要求に応じて前記外部の音声出力装置が送信した第2の音声信号を、通信ネットワークを介して、受信する外部信号受信手段と、前記音声取得手段からの第1の音声信号と、前記外部信号受信手段で受信した第2の音声信号とを、同期化する同期化手段と、前記同期化手段で同期化された前記第1の音声信号と前記第2の音声信号とに基づいて、該第1の音声信号に含まれる該第2の音声信号を除去し、除去後の信号を出力する雑音除去手段と、
を備える音声取得装置と、
音声信号を音声に変換する音声変換手段と、前記音声変換手段で変換した音声を放音する放音手段と、前記放音手段で放音する音声を集音する可能性のある前記外部の音声取得装置からの要求に応じ、前記放音手段で放音する音声の第2の音声信号を、通信ネットワークを介して、該音声取得装置に送信する外部信号送信手段と、
を備える音声出力装置と、
から構成されることを特徴とする雑音除去システム。 - コンピュータに、
音声取得部で集音した音声を第1の音声信号に変換させ、
外部の音声出力装置に、該音声出力装置が放音する音声の第2の音声信号を送信することを、通信ネットワークを介して要求させ、
前記要求に応じて前記外部の音声出力装置が送信した第2の音声信号を、通信ネットワークを介して、受信させ、
前記音声取得手段からの第1の音声信号と、前記外部信号受信手段で受信した第2の音声信号とを、同期化させ、
前記同期化された前記第1の音声信号と前記第2の音声信号とに基づいて、該第1の音声信号に含まれる該第2の音声信号を除去し、除去後の信号を出力させる、
ための処理を実行させるプログラム。 - コンピュータに、
音声信号を音声に変換させ、
前記変換させた音声を音声出力部で放音させ、
前記音声出力部で放音する音声を集音する可能性のある外部の音声取得装置からの要求に応じ、前記音声出力部で放音する音声の音声信号を、通信ネットワークを介して、該音声取得装置に送信させる、
ための処理を実行させるプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007195219A JP4431836B2 (ja) | 2007-07-26 | 2007-07-26 | 音声取得装置、雑音除去システム、及び、プログラム |
KR1020080065823A KR101017384B1 (ko) | 2007-07-26 | 2008-07-08 | 잡음제거시스템, 음성취득장치, 음성출력장치 및프로그램을 기록한 컴퓨터 판독 가능한 기록매체 |
US12/179,776 US8165641B2 (en) | 2007-07-26 | 2008-07-25 | Noise suppression system, sound acquisition apparatus, sound output apparatus, and computer-readable medium |
EP08013437.2A EP2019544A3 (en) | 2007-07-26 | 2008-07-25 | Noise suppression system, sound acquisition apparatus, sound output apparatus and computer-readable medium |
CN2008101443336A CN101355600B (zh) | 2007-07-26 | 2008-07-25 | 杂音去除系统、声音获取装置、声音输出装置及记录介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007195219A JP4431836B2 (ja) | 2007-07-26 | 2007-07-26 | 音声取得装置、雑音除去システム、及び、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009033470A true JP2009033470A (ja) | 2009-02-12 |
JP4431836B2 JP4431836B2 (ja) | 2010-03-17 |
Family
ID=39831599
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007195219A Expired - Fee Related JP4431836B2 (ja) | 2007-07-26 | 2007-07-26 | 音声取得装置、雑音除去システム、及び、プログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US8165641B2 (ja) |
EP (1) | EP2019544A3 (ja) |
JP (1) | JP4431836B2 (ja) |
KR (1) | KR101017384B1 (ja) |
CN (1) | CN101355600B (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013197773A (ja) * | 2012-03-19 | 2013-09-30 | Fujitsu Ltd | 通信装置、信号処理プログラム、信号処理方法および通信システム |
JP2015152619A (ja) * | 2014-02-10 | 2015-08-24 | ソニー株式会社 | オーディオ機器、音声処理方法、音声処理プログラム、音声出力方法および音声出力プログラム |
JP2016513816A (ja) * | 2013-03-06 | 2016-05-16 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | コンテンツベースのノイズ抑制 |
JP2017123648A (ja) * | 2016-12-20 | 2017-07-13 | ソニー株式会社 | オーディオ機器 |
KR20190039777A (ko) * | 2016-08-16 | 2019-04-15 | 구글 엘엘씨 | 제스처로 활성화되는 원격 제어기 |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101538383B1 (ko) * | 2010-01-22 | 2015-07-21 | 엘지전자 주식회사 | 세탁기 |
TW201233178A (en) * | 2011-01-28 | 2012-08-01 | Hon Hai Prec Ind Co Ltd | Apparatus and method for dialing VOIP on TV screen |
JP5695447B2 (ja) * | 2011-03-01 | 2015-04-08 | 株式会社東芝 | テレビジョン装置及び遠隔操作装置 |
US9373338B1 (en) * | 2012-06-25 | 2016-06-21 | Amazon Technologies, Inc. | Acoustic echo cancellation processing based on feedback from speech recognizer |
CN102779525B (zh) * | 2012-07-23 | 2014-12-03 | 华为终端有限公司 | 降噪方法及终端 |
KR101462055B1 (ko) * | 2012-09-04 | 2014-11-17 | 에스케이 텔레콤주식회사 | 다중 홈 미디어 컨텐츠 공유를 수행하는 dlna 디바이스 및 그 방법 |
JP6314088B2 (ja) | 2012-11-15 | 2018-04-18 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報提供方法及び情報提供装置 |
CN103888630A (zh) * | 2012-12-20 | 2014-06-25 | 杜比实验室特许公司 | 用于控制声学回声消除的方法和音频处理装置 |
CN104836927B (zh) * | 2015-02-10 | 2017-09-15 | 数据通信科学技术研究所 | 一种语音同步方法和终端 |
US9640061B1 (en) * | 2015-12-31 | 2017-05-02 | Google Inc. | Remote alarm hushing with acoustic presence verification |
CN106792349A (zh) * | 2016-12-15 | 2017-05-31 | 北京塞宾科技有限公司 | 一种三通道全息声场录音设备 |
CN106792367A (zh) * | 2016-12-15 | 2017-05-31 | 北京塞宾科技有限公司 | 一种全息声场录音设备 |
JP6677662B2 (ja) * | 2017-02-14 | 2020-04-08 | 株式会社東芝 | 音響処理装置、音響処理方法およびプログラム |
CN107240405B (zh) * | 2017-06-14 | 2021-04-30 | 深圳市冠旭电子股份有限公司 | 一种音箱及告警方法 |
TWI656789B (zh) * | 2017-12-29 | 2019-04-11 | 瑞軒科技股份有限公司 | 影音控制系統 |
CN109920437B (zh) * | 2019-04-26 | 2021-03-09 | 北京小米智能科技有限公司 | 干扰去除的方法及装置 |
US20220303682A1 (en) * | 2019-06-11 | 2022-09-22 | Telefonaktiebolaget Lm Ericsson (Publ) | Method, ue and network node for handling synchronization of sound |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1148884C (zh) * | 1999-12-28 | 2004-05-05 | 文化传信科技(澳门)有限公司 | 一种处理声音讯号的方法 |
JP4530587B2 (ja) * | 2001-07-30 | 2010-08-25 | 株式会社リコー | 放送受信装置 |
JP2003124849A (ja) | 2001-10-17 | 2003-04-25 | Fujitsu Ltd | エコーキャンセラ及びその方法 |
JP2004080143A (ja) | 2002-08-12 | 2004-03-11 | Canon Inc | 通信装置及びその管理方法、テレビ電話システム |
US7230955B1 (en) * | 2002-12-27 | 2007-06-12 | At & T Corp. | System and method for improved use of voice activity detection |
JP2005084253A (ja) * | 2003-09-05 | 2005-03-31 | Matsushita Electric Ind Co Ltd | 音響処理装置、方法、プログラム及び記憶媒体 |
KR100560750B1 (ko) * | 2003-12-04 | 2006-03-13 | 삼성전자주식회사 | 홈네트워크의 음성 인식 시스템 |
JP4247994B2 (ja) | 2004-12-27 | 2009-04-02 | 株式会社カシオ日立モバイルコミュニケーションズ | 移動通信端末、基地局およびレジストレーション制御方法 |
KR100617109B1 (ko) * | 2004-12-29 | 2006-08-31 | 엘지전자 주식회사 | 통신 단말기용 잡음 제거 장치 |
JP4465661B2 (ja) | 2005-03-01 | 2010-05-19 | 株式会社カシオ日立モバイルコミュニケーションズ | 移動通信端末及び通信制御方法 |
JP4086200B2 (ja) | 2005-05-27 | 2008-05-14 | 株式会社カシオ日立モバイルコミュニケーションズ | 無線通信端末 |
JP2006340321A (ja) | 2005-06-06 | 2006-12-14 | Canon Inc | ネットワークシステム及びネットワークシステムにおける通信方法 |
EP1964295A2 (en) * | 2005-09-19 | 2008-09-03 | Nxp B.V. | Method of synchronizing the playback of an audio broadcast on a plurality of network output devices |
-
2007
- 2007-07-26 JP JP2007195219A patent/JP4431836B2/ja not_active Expired - Fee Related
-
2008
- 2008-07-08 KR KR1020080065823A patent/KR101017384B1/ko not_active IP Right Cessation
- 2008-07-25 EP EP08013437.2A patent/EP2019544A3/en not_active Withdrawn
- 2008-07-25 CN CN2008101443336A patent/CN101355600B/zh not_active Expired - Fee Related
- 2008-07-25 US US12/179,776 patent/US8165641B2/en not_active Expired - Fee Related
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013197773A (ja) * | 2012-03-19 | 2013-09-30 | Fujitsu Ltd | 通信装置、信号処理プログラム、信号処理方法および通信システム |
JP2016513816A (ja) * | 2013-03-06 | 2016-05-16 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | コンテンツベースのノイズ抑制 |
JP2015152619A (ja) * | 2014-02-10 | 2015-08-24 | ソニー株式会社 | オーディオ機器、音声処理方法、音声処理プログラム、音声出力方法および音声出力プログラム |
KR20190039777A (ko) * | 2016-08-16 | 2019-04-15 | 구글 엘엘씨 | 제스처로 활성화되는 원격 제어기 |
JP2019528526A (ja) * | 2016-08-16 | 2019-10-10 | グーグル エルエルシー | ジェスチャによりアクティブ化されるリモートコントロール |
KR102258710B1 (ko) | 2016-08-16 | 2021-06-01 | 구글 엘엘씨 | 제스처로 활성화되는 원격 제어기 |
JP2017123648A (ja) * | 2016-12-20 | 2017-07-13 | ソニー株式会社 | オーディオ機器 |
Also Published As
Publication number | Publication date |
---|---|
CN101355600A (zh) | 2009-01-28 |
KR101017384B1 (ko) | 2011-02-28 |
US8165641B2 (en) | 2012-04-24 |
EP2019544A3 (en) | 2016-03-23 |
JP4431836B2 (ja) | 2010-03-17 |
CN101355600B (zh) | 2012-09-26 |
KR20090012069A (ko) | 2009-02-02 |
EP2019544A2 (en) | 2009-01-28 |
US20090030654A1 (en) | 2009-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4431836B2 (ja) | 音声取得装置、雑音除去システム、及び、プログラム | |
JP5175948B2 (ja) | 映像表示装置、ノイズ除去方法および映像表示システム | |
JP5877351B2 (ja) | 通信装置および通信方法 | |
US8264521B2 (en) | Media detection and packet distribution in a multipoint conference | |
US10032475B2 (en) | Enhancing an audio recording | |
US20080225750A1 (en) | Method of transmitting data in a communication system | |
US9538318B2 (en) | Apparatus and method for playing music | |
CN106937009B (zh) | 一种级联回声抵消系统及其控制方法及装置 | |
CN102571147A (zh) | 声音处理设备、方法和程序 | |
JP2015152619A5 (ja) | ||
US20130266149A1 (en) | Communication system and method having echo-cancelling mechanism | |
US20070129037A1 (en) | Mute processing apparatus and method | |
TWI790718B (zh) | 會議終端及用於會議的回音消除方法 | |
JP2007274623A (ja) | 放送受信装置及び放送受信方法 | |
EP1878225A1 (en) | Mobile station assisted scheduling of recording of media content | |
JP5470407B2 (ja) | 通信制御装置及びプログラム | |
JP5752550B2 (ja) | サービス提供システム、端末装置、および、制御プログラム | |
JP2007329630A (ja) | エコー品質測定装置、システム、方法およびプログラム | |
JP2009124386A (ja) | 音声信号処理装置、音声信号処理方法 | |
KR101627824B1 (ko) | 전화 음질 향상 서비스 시스템 및 전화 음질 향상 서비스 방법 | |
CN115798495A (zh) | 会议终端及用于会议的回声消除方法 | |
JP2012217006A (ja) | 試験方法および電話端末装置 | |
JP2006295477A (ja) | 通信装置 | |
JP2009159159A (ja) | 通信端末装置 | |
KR20150078640A (ko) | 소음 제거 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090601 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090609 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091124 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091207 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130108 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130108 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130108 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130108 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140108 Year of fee payment: 4 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140108 Year of fee payment: 4 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |