JP2009246528A - 画像付音声通信システム、画像付音声通信方法およびプログラム - Google Patents
画像付音声通信システム、画像付音声通信方法およびプログラム Download PDFInfo
- Publication number
- JP2009246528A JP2009246528A JP2008088399A JP2008088399A JP2009246528A JP 2009246528 A JP2009246528 A JP 2009246528A JP 2008088399 A JP2008088399 A JP 2008088399A JP 2008088399 A JP2008088399 A JP 2008088399A JP 2009246528 A JP2009246528 A JP 2009246528A
- Authority
- JP
- Japan
- Prior art keywords
- speaker
- image
- audio
- output device
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
Abstract
【解決手段】音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信システムであって、受話者各人に割り当てられた個別のスピーカ61、62、63と、通信相手の画像を表示する表示部4と、スピーカ61、62、63と当該拠点の表示部4との位置関係を検出する位置検出部11と、スピーカ61、62、63ごとに音量を調節可能な音声出力部16と、通信相手から受信した音声を、スピーカ61、62、63のそれぞれと当該拠点の表示部4との距離の比よりも大きい音量比で、それぞれのスピーカ61、62、63から出力する音声の音量を調節して、スピーカ61、62、63から出力する音量制御部17と、を備える。
【選択図】図1
Description
音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信システムであって、
受話者各人に割り当てられた個別の音声出力装置と、
通信相手の画像を表示する画像表示手段と、
前記音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出手段と、
前記音声出力装置ごとに音量を調節可能な音量調節手段と、
通信相手から受信した音声を、前記音声出力装置のそれぞれと当該拠点の前記画像表示手段との距離の比よりも大きい音量比で、それぞれの前記音声出力装置から出力する音声の音量を調節して、前記音声出力装置から出力する音声制御手段と、
を備えることを特徴とする。
音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信システムであって、
受話者各人に割り当てられた個別の音声出力装置と、
通信相手の画像を表示する画像表示手段と、
前記音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出手段と、
話者を識別可能な音声入力手段と、
前記話者の音声を区別して送信する音声通信手段と、
前記話者を撮影する撮像手段と、
前記話者と話者側の前記撮像手段との位置関係を検出する話者位置検出手段と、
前記音声出力装置ごとに音量を調節可能な音量調節手段と、
前記話者と話者側の撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、前記話者と前記音声出力装置との相互距離を算出する距離算出手段と、
前記音声出力装置のそれぞれについて、通信相手から受信した前記話者のそれぞれの音量を前記話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合手段と、
を備えることを特徴とする。
音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信方法であって、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
通信相手から話者の音声を受信する音声受信ステップと、
前記通信相手から受信した音声を、前記音声出力装置と当該拠点の前記画像表示手段との距離の比よりも大きい音量比でそれぞれの前記音声出力装置から出力する音声の音量を調節して、各音声出力装置から出力する音声制御ステップと、
を備えることを特徴とする。
音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信方法であって、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者ごとの音声を区別して送信する音声通信ステップと、
前記話者と前記撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、それぞれの前記話者と前記音声出力装置との相互距離を算出する距離算出ステップと、
各音声出力装置について、通信相手から受信したそれぞれの話者の音量を各話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合ステップと、
を備えることを特徴とする。
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
通信相手から話者の音声を受信する音声受信ステップと、
前記通信相手から受信した音声を、前記音声出力装置と当該拠点の前記画像表示手段との距離の比よりも大きい音量比でそれぞれの前記音声出力装置から出力する音声の音量を調節して、各音声出力装置から出力する音声制御ステップと、
を実行させることを特徴とする。
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者ごとの音声を区別して送信する音声通信ステップと、
前記話者と前記撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、それぞれの前記話者と前記音声出力装置との相互距離を算出する距離算出ステップと、
各音声出力装置について、通信相手から受信したそれぞれの話者の音量を各話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合ステップと、
を実行させることを特徴とする。
図1は、本発明の画像付通信装置の例として、実施の形態1に係るテレビ会議装置の構成例を示すブロック図である。テレビ会議装置1は、制御装置2、カメラ3、表示部4、マイク51、52、53、スピーカ61、62、63、およびID検知部102から構成される。マイク51、52、53とスピーカ61、62、63の数はいくつでもよく、制約はない。以下、マイク51、52、53を総称する場合は、マイク5という。また、スピーカ61、62、63を総称する場合は、スピーカ6という。スピーカ6は、テレビ会議の参加者ごとに割り当てられるように設けられる。
実施の形態2は、実施の形態1の動作に加えて、1つの拠点の話者が複数であって、話者の音声をミキシングする場合である。ミキシングするレベルを話者とカメラとの距離の比よりも大きい比率に設定する。図4は、実施の形態2に係るテレビ会議装置の構成の例を示すブロック図である。実施の形態1のテレビ会議装置に比較して、ミキシングレベル制御部20が追加されている。
実施の形態3は、話者側のカメラ3と受話者側の表示部4が所定の位置関係にあるとみなして、話者と受話者の距離に対応して音量を調節する。図6は、実施の形態3に係るテレビ会議装置の構成例を示すブロック図である。実施の形態3のテレビ会議システム100は、2チャネル以上の音声を同時に送信する。図6では、音声が複数のチャネルで通信されることを白抜き矢印で表す。
話者を識別可能な音声入力手段と、
前記話者を撮影する撮像手段と、
前記話者と話者側の前記撮像手段との位置関係を検出する話者位置検出手段と、
前記話者ごとに入力する音声の音量レベルを調節可能な入力音量調節手段と、
前記話者と話者側の前記撮像手段との距離の比よりも大きい音量比で、それぞれの話者の入力音量を調節してミキシングする音声重畳手段と、
を備えることを特徴とする。
前記話者位置検出手段で検出した前記話者と前記撮像手段との位置関係を、通信相手に送信する話者位置送信手段と、
前記通信相手からその話者と撮像手段との位置関係を受信する話者位置受信手段と、
を備えることを特徴とする。
前記位置検出手段は、前記音声出力装置に付与された前記符号表示手段に表示される識別符号と前記符号表示手段の位置を検出する手段を備えてもよい。
話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者と話者側の撮像手段との距離の比よりも大きい音量比で、それぞれの話者の入力音量を調節してミキシングする音声重畳ステップと、
を備えることを特徴とする。
前記話者位置検出ステップで検出した、前記話者と前記撮像手段との位置関係を通信相手に送信する話者位置送信ステップと、
通信相手からその話者と撮像手段との位置関係を受信する話者位置受信ステップと、
を備えることを特徴とする。
また、他の人から離れると聞こえにくくなるため、部屋の一角で常時接続したままにしておき、必要なときに必要な人だけが参加するテレビコミュニケーション環境といった用途にも適用できる。
2 制御装置
3、3A、3B カメラ
4、4A、4B 表示部
11 位置検出部
12 参加者距離算出部
13 画像入力部
14 画像出力部
15 音声入力部
16 音声出力部
17 音量制御部
18 通信処理部
19 送受信部
20 ミキシングレベル制御部
51、52、53 マイク
61、62、63 スピーカ
71、72、73 ヘッドセット
102 ID検知部
401、402、403 参加者
404 テレビ会議スクリーン
411、412、413 デバイス
Claims (11)
- 音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信システムであって、
受話者各人に割り当てられた個別の音声出力装置と、
通信相手の画像を表示する画像表示手段と、
前記音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出手段と、
前記音声出力装置ごとに音量を調節可能な音量調節手段と、
通信相手から受信した音声を、前記音声出力装置のそれぞれと当該拠点の前記画像表示手段との距離の比よりも大きい音量比で、それぞれの前記音声出力装置から出力する音声の音量を調節して、前記音声出力装置から出力する音声制御手段と、
を備えることを特徴とする画像付音声通信システム。 - 話者を識別可能な音声入力手段と、
前記話者を撮影する撮像手段と、
前記話者と話者側の前記撮像手段との位置関係を検出する話者位置検出手段と、
前記話者ごとに入力する音声の音量レベルを調節可能な入力音量調節手段と、
前記話者と話者側の前記撮像手段との距離の比よりも大きい音量比で、それぞれの話者の入力音量を調節してミキシングする音声重畳手段と、
を備えることを特徴とする請求項1に記載の画像付音声通信システム。 - 音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信システムであって、
受話者各人に割り当てられた個別の音声出力装置と、
通信相手の画像を表示する画像表示手段と、
前記音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出手段と、
話者を識別可能な音声入力手段と、
前記話者の音声を区別して送信する音声通信手段と、
前記話者を撮影する撮像手段と、
前記話者と話者側の前記撮像手段との位置関係を検出する話者位置検出手段と、
前記音声出力装置ごとに音量を調節可能な音量調節手段と、
前記話者と話者側の撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、前記話者と前記音声出力装置との相互距離を算出する距離算出手段と、
前記音声出力装置のそれぞれについて、通信相手から受信した前記話者のそれぞれの音量を前記話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合手段と、
を備えることを特徴とする画像付音声通信システム。 - 前記話者位置検出手段で検出した前記話者と前記撮像手段との位置関係を、通信相手に送信する話者位置送信手段と、
前記通信相手からその話者と撮像手段との位置関係を受信する話者位置受信手段と、
を備えることを特徴とする請求項3に記載の画像付音声通信システム。 - 前記音声出力装置は、固有の識別符号と、その符号を表示または送信する符号表示手段を有し、
前記位置検出手段は、前記音声出力装置に付与された前記符号表示手段に表示される識別符号と前記符号表示手段の位置を検出する手段を備える、
ことを特徴とする請求項1ないし4のいずれか1項に記載の画像付音声通信システム。 - 音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信方法であって、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
通信相手から話者の音声を受信する音声受信ステップと、
前記通信相手から受信した音声を、前記音声出力装置と当該拠点の前記画像表示手段との距離の比よりも大きい音量比でそれぞれの前記音声出力装置から出力する音声の音量を調節して、各音声出力装置から出力する音声制御ステップと、
を備えることを特徴とする画像付音声通信方法。 - 話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者と話者側の撮像手段との距離の比よりも大きい音量比で、それぞれの話者の入力音量を調節してミキシングする音声重畳ステップと、
を備えることを特徴とする請求項6に記載の画像付音声通信方法。 - 音声信号と画像信号とを通信ネットワークを経由して送信する画像付音声通信方法であって、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者ごとの音声を区別して送信する音声通信ステップと、
前記話者と前記撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、それぞれの前記話者と前記音声出力装置との相互距離を算出する距離算出ステップと、
各音声出力装置について、通信相手から受信したそれぞれの話者の音量を各話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合ステップと、
を備えることを特徴とする画像付音声通信方法。 - 前記話者位置検出ステップで検出した、前記話者と前記撮像手段との位置関係を通信相手に送信する話者位置送信ステップと、
通信相手からその話者と撮像手段との位置関係を受信する話者位置受信ステップと、
を備えることを特徴とする請求項8に記載の画像付音声通信方法。 - コンピュータに、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
通信相手から話者の音声を受信する音声受信ステップと、
前記通信相手から受信した音声を、前記音声出力装置と当該拠点の前記画像表示手段との距離の比よりも大きい音量比でそれぞれの前記音声出力装置から出力する音声の音量を調節して、各音声出力装置から出力する音声制御ステップと、
を実行させることを特徴とするプログラム。 - コンピュータに、
通信相手から受信した画像を画像表示手段に表示する画像表示ステップと、
受話者各人に個別に設けられた音声出力装置と当該拠点の前記画像表示手段との位置関係を検出する位置検出ステップと、
話者を識別して、話者ごとの音声を入力する音声入力ステップと、
前記話者と前記話者を撮影する撮像手段との位置関係を検出する話者位置検出ステップと、
前記話者ごとの音声を区別して送信する音声通信ステップと、
前記話者と前記撮像装置との位置関係および前記音声出力装置と当該拠点の前記画像表示手段との位置関係とに基づいて、話者側の前記撮像手段と受話者側の前記画像表示手段が一定の位置関係にあるとみなして、それぞれの前記話者と前記音声出力装置との相互距離を算出する距離算出ステップと、
各音声出力装置について、通信相手から受信したそれぞれの話者の音量を各話者とその音声出力装置との距離の比よりも大きい音量比でミキシングして、各音声出力装置から出力する音声複合ステップと、
を実行させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008088399A JP5120020B2 (ja) | 2008-03-28 | 2008-03-28 | 画像付音声通信システム、画像付音声通信方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008088399A JP5120020B2 (ja) | 2008-03-28 | 2008-03-28 | 画像付音声通信システム、画像付音声通信方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009246528A true JP2009246528A (ja) | 2009-10-22 |
JP5120020B2 JP5120020B2 (ja) | 2013-01-16 |
Family
ID=41307990
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008088399A Expired - Fee Related JP5120020B2 (ja) | 2008-03-28 | 2008-03-28 | 画像付音声通信システム、画像付音声通信方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5120020B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014175979A (ja) * | 2013-03-12 | 2014-09-22 | Ricoh Co Ltd | 通信装置、及び音声入出力ユニットの制御方法 |
WO2015186686A1 (ja) * | 2014-06-02 | 2015-12-10 | ヤマハ株式会社 | 位置特定装置、オーディオ装置、位置特定方法およびプログラム |
WO2017073324A1 (ja) * | 2015-10-26 | 2017-05-04 | ソニー株式会社 | 信号処理装置、信号処理方法、並びにプログラム |
WO2023286680A1 (ja) * | 2021-07-13 | 2023-01-19 | 京セラ株式会社 | 電子機器、プログラム、及びシステム |
WO2023286678A1 (ja) * | 2021-07-13 | 2023-01-19 | 京セラ株式会社 | 電子機器、プログラム、及びシステム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07193798A (ja) * | 1993-12-27 | 1995-07-28 | Hitachi Ltd | 映像音響通信装置 |
JPH08125761A (ja) * | 1994-10-28 | 1996-05-17 | Oki Electric Ind Co Ltd | 音声受信装置 |
JP2000059772A (ja) * | 1998-08-05 | 2000-02-25 | Toshiba Corp | 映像表示方式 |
JP2007258951A (ja) * | 2006-03-22 | 2007-10-04 | Yamaha Corp | 通信会議装置 |
-
2008
- 2008-03-28 JP JP2008088399A patent/JP5120020B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07193798A (ja) * | 1993-12-27 | 1995-07-28 | Hitachi Ltd | 映像音響通信装置 |
JPH08125761A (ja) * | 1994-10-28 | 1996-05-17 | Oki Electric Ind Co Ltd | 音声受信装置 |
JP2000059772A (ja) * | 1998-08-05 | 2000-02-25 | Toshiba Corp | 映像表示方式 |
JP2007258951A (ja) * | 2006-03-22 | 2007-10-04 | Yamaha Corp | 通信会議装置 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014175979A (ja) * | 2013-03-12 | 2014-09-22 | Ricoh Co Ltd | 通信装置、及び音声入出力ユニットの制御方法 |
WO2015186686A1 (ja) * | 2014-06-02 | 2015-12-10 | ヤマハ株式会社 | 位置特定装置、オーディオ装置、位置特定方法およびプログラム |
CN106465030A (zh) * | 2014-06-02 | 2017-02-22 | 雅马哈株式会社 | 位置确定设备、音频设备、位置确定方法和程序 |
US9774978B2 (en) | 2014-06-02 | 2017-09-26 | Yamaha Corporation | Position determination apparatus, audio apparatus, position determination method, and program |
WO2017073324A1 (ja) * | 2015-10-26 | 2017-05-04 | ソニー株式会社 | 信号処理装置、信号処理方法、並びにプログラム |
CN108141665A (zh) * | 2015-10-26 | 2018-06-08 | 索尼公司 | 信号处理装置、信号处理方法和程序 |
JPWO2017073324A1 (ja) * | 2015-10-26 | 2018-08-16 | ソニー株式会社 | 信号処理装置、信号処理方法、並びにプログラム |
US10425726B2 (en) | 2015-10-26 | 2019-09-24 | Sony Corporation | Signal processing device, signal processing method, and program |
WO2023286680A1 (ja) * | 2021-07-13 | 2023-01-19 | 京セラ株式会社 | 電子機器、プログラム、及びシステム |
WO2023286678A1 (ja) * | 2021-07-13 | 2023-01-19 | 京セラ株式会社 | 電子機器、プログラム、及びシステム |
Also Published As
Publication number | Publication date |
---|---|
JP5120020B2 (ja) | 2013-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11991315B2 (en) | Audio conferencing using a distributed array of smartphones | |
US8379076B2 (en) | System and method for displaying a multipoint videoconference | |
US8451315B2 (en) | System and method for distributed meeting capture | |
US10771694B1 (en) | Conference terminal and conference system | |
US8208664B2 (en) | Audio transmission system and communication conference device | |
US9154730B2 (en) | System and method for determining the active talkers in a video conference | |
ES2327288T3 (es) | Sistema, metodo y nodo para limitar el numero de flujos de audio en u teleconferencia. | |
US20050271194A1 (en) | Conference phone and network client | |
US20050280701A1 (en) | Method and system for associating positional audio to positional video | |
US7539486B2 (en) | Wireless teleconferencing system | |
JP2017034502A (ja) | 通信装置、通信方法、プログラムおよび通信システム | |
JP2010511333A (ja) | 複数の補聴器間における会話グループ構築システムおよび方法 | |
US7177413B2 (en) | Head position based telephone conference system and associated method | |
JP5120020B2 (ja) | 画像付音声通信システム、画像付音声通信方法およびプログラム | |
JP2007274462A (ja) | テレビ会議装置、テレビ会議システム | |
JP2006254064A (ja) | 遠隔会議システム、音像位置割当方法および音質設定方法 | |
JP2009177592A (ja) | 通信端末装置、画像表示制御方法 | |
JP2006339869A (ja) | 映像信号と音響信号の統合装置 | |
JP2017103641A (ja) | 情報処理装置、会議システム、情報処理方法およびプログラム | |
JP7361460B2 (ja) | コミュニケーション装置、コミュニケーションプログラム、及びコミュニケーション方法 | |
JP2017163466A (ja) | 情報処理装置および会議システム | |
JP2011055103A (ja) | 集合住宅インターホンシステム | |
JP2010288114A (ja) | 電話会議装置とそれを用いた電話会議システム | |
JPH06175942A (ja) | マルチメディア電子会議装置 | |
JP4768578B2 (ja) | テレビ会議システム、及び、テレビ会議システムにおける制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120904 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120925 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121008 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151102 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |