JP4400490B2 - Loudspeaker equipment, loudspeaker system - Google Patents

Loudspeaker equipment, loudspeaker system Download PDF

Info

Publication number
JP4400490B2
JP4400490B2 JP2005081036A JP2005081036A JP4400490B2 JP 4400490 B2 JP4400490 B2 JP 4400490B2 JP 2005081036 A JP2005081036 A JP 2005081036A JP 2005081036 A JP2005081036 A JP 2005081036A JP 4400490 B2 JP4400490 B2 JP 4400490B2
Authority
JP
Japan
Prior art keywords
voice signal
voice
loudspeaker
gain
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005081036A
Other languages
Japanese (ja)
Other versions
JP2006270147A (en
Inventor
忠夫 一ノ瀬
譲 天野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Electric Works Co Ltd
Original Assignee
Panasonic Corp
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Works Ltd filed Critical Panasonic Corp
Priority to JP2005081036A priority Critical patent/JP4400490B2/en
Publication of JP2006270147A publication Critical patent/JP2006270147A/en
Application granted granted Critical
Publication of JP4400490B2 publication Critical patent/JP4400490B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)

Description

本発明は、ハンズフリー通話を行う拡声通話装置に関する。   The present invention relates to a loudspeaker device that performs a hands-free call.

従来から、音声スイッチによる片方向通話性を解決するために、それぞれの端末の音響エコー成分を抑制するためのエコーキャンセラーを使用した拡声インターホン装置がある。   2. Description of the Related Art Conventionally, there is a loudspeaker intercom apparatus that uses an echo canceller for suppressing the acoustic echo component of each terminal in order to solve the one-way communication performance by a voice switch.

又、エコーキャンセラーと音声スイッチを併用したハウリング防止装置、或いは拡声通話装置がある。
特開平11−275243号公報 特開平5−75500号公報 特開平8−335977号公報
In addition, there is a howling prevention device or a voice communication device using an echo canceller and a voice switch in combination.
JP-A-11-275243 JP-A-5-75500 JP-A-8-335977

拡声インターホン装置の場合、ハンドセット通話の場合に比べて音響エコーの量が明らかに大きくなる。従って、特許文献1の構成においてエコーキャンセラーから送信された受話音声信号に対して前記エコーキャンセラーに戻ってくる音響エコー成分が明らかに大きくなってくる。この音響エコー成分の量がエコーキャンセラーの正常動作範囲の能力以下に抑えられれば、エコーキャンセラーのみで安定的に同時双方向通話が成立する。   In the case of a loudspeaker intercom device, the amount of acoustic echo is clearly greater than in the case of a handset call. Therefore, the acoustic echo component that returns to the echo canceller with respect to the received voice signal transmitted from the echo canceller in the configuration of Patent Document 1 is clearly increased. If the amount of the acoustic echo component is suppressed below the normal operation range of the echo canceller, a simultaneous two-way call can be established stably only with the echo canceller.

しかしながら、拡声インターホン装置のスピーカーからの受話音声を十分な音量に確保しようとスピーカー出力音量を上げた場合、その音量増大に伴いマイクに戻る音響エコーの量も大きくなり、容易にエコーキャンセラーの正常動作範囲能力以上の音響エコー成分が戻ってくることになってしまう。この様な系となってしまった場合はエコーキャンセラーが安定した動作をすることができず、ハウリングを起こすという問題があった。特に影響を受けるのは、相手端末の送話よりも十分小さい周囲雑音である(ただしエコーキャンセラーに、一定レベル以下の音量の場合に減衰制御が働く機能を有する場合は、減衰制御の働かないしきい値レベル以上の周囲雑音であるものとする)。相手端末側で送話せず周囲雑音だけとなっているタイミングにおいて、この周囲雑音に対してもこの系が成立してしまっているため、わずかな雑音を起点にハウリングを引き起こしてしまうという問題があった。   However, if the speaker output volume is increased to ensure that the received voice from the speaker of the loudspeaker intercom device is at a sufficient volume, the amount of acoustic echo that returns to the microphone increases as the volume increases, and the echo canceller can easily operate normally. An acoustic echo component exceeding the range capability will be returned. In such a system, there is a problem that the echo canceller cannot operate stably and causes howling. The noise that is particularly affected is the ambient noise that is sufficiently smaller than the transmission of the other terminal (however, if the echo canceller has a function that works when the volume is below a certain level) It shall be ambient noise above the value level). At the timing when only the ambient noise is not transmitted on the other party's terminal side, this system has also been established against this ambient noise, so there is a problem of causing howling starting from a slight noise. It was.

相手側の周囲雑音として挙げられるのは、道路沿いの屋外などに拡声インターホン装置が設置された場合の車などの騒音が例となる。   An example of the other party's ambient noise is the noise of a car or the like when a loudspeaker intercom device is installed outdoors along the road.

特許文献2の構成において、前記十分な受話音量を確保する場合、特に減衰回路の減衰量を強くしなければならない。しかしながら、この前提においては、双方向同時通話性感じることができる最も重要なダブルトーク中(互いの端末から同時に送話している最中)の場合に前記減衰量を強くする傾向にあるため、実使用上どちらか強い音声の片方向通話と感じてしまうという問題があった。   In the configuration of Patent Document 2, in order to secure the sufficient reception volume, it is necessary to increase the attenuation amount of the attenuation circuit in particular. However, in this premise, the attenuation tends to be increased during the most important double talk (during simultaneous transmission from each other's terminal) where it is possible to feel bidirectional simultaneous communication. In use, there was a problem that it felt like a one-way call with strong voice.

特許文献3の構成についても、特許文献2の構成の減衰回路と同様に送話減衰器を備えており、自動的に減衰量を最小に設定されることが挙げられているものの、その適正値は予め測定された結果に基づいて固定的に有するため、ダブルトーク中にもこの減衰が発生することによる片方向通話性の発生や、周囲環境変化に適応する柔軟性に書け、更に通話相手毎にその適正値を予め有する必要があるという問題があった。   The configuration of Patent Document 3 also includes a transmission attenuator as in the case of the attenuation circuit of Patent Document 2, and it is mentioned that the attenuation amount is automatically set to the minimum value. Is fixed based on the pre-measured result, so that it is possible to write in one-way communication characteristics due to this attenuation during double talk and flexibility to adapt to changes in the surrounding environment. There is a problem that it is necessary to have the appropriate value in advance.

本発明は、上記従来の問題を解決するためになされたもので、周囲雑音に反応してハウリングを起こすことなく、ダブルトーク中の同時通話性を確保することができ、エコー成分の減衰を目的とした適正値の事前測定を必要とせず、更には周囲音の秘話性を必要とする端末側からの音が相手側に漏れにくくすることができる拡声インターホン装置を提供することを目的とするものである。   The present invention has been made to solve the above-described conventional problems, and can ensure simultaneous communication during double talk without causing howling in response to ambient noise, and aims to attenuate echo components. It is intended to provide a loudspeaker intercom device that does not require prior measurement of the appropriate value, and that makes it difficult for the sound from the terminal side that requires the secrecy of ambient sounds to leak to the other side It is.

本発明の拡声通話装置は、伝送路によって接続され、端末に備えられるスピーカーとマイクによってハンズフリー通話を行う拡声通話装置であって、伝送路を介して他の端末との間で送受話の音声信号を送受信するディジタル通信インターフェースと、随時音響エコー成分の状況に応じて補正追従して最適な制御を行って自己の音響エコー成分を抑圧するためのエコーキャンセラーと、デジタル音声信号をアナログ音声信号に且つアナログ音声信号をデジタル音声信号に変換するコーディックと、相手端末から送信された受話音声信号のゲインを制御する受話アンプと、前記マイクで受信した送話音声信号のゲインやインピーダンスを制御する送話アンプを備え、受話音声信号と送話音声信号を比較して受話中と判定した場合は送話音声信号を大きく減衰させ、送話中と判定した場合は受話音声信号を大きく減衰させる音声スイッチと、前記音声スイッチから出力された送話音声信号の大小を予め設定したしきい値に従って判定し、その結果を出力することのできるレベル検出部と、前記レベル検出部が小と判定している間は前記コーディックからの受話音声信号を前記音声スイッチ側へ切り替え、大と判定している間は前記コーディックからの受話音声信号を前記音声スイッチを経由しない経路側へ切り替える第1の切替部と、前記レベル検出部が小と判定している間は前記音声スイッチ側からの受話音声信号を前記受話アンプへ切り替え、大と判定している間は前記第1の切替部側からの受話音声信号を前記受話アンプへ切り替える第2の切替部とを備えることとした。   The loudspeaker device of the present invention is a loudspeaker device that is connected by a transmission line and performs a hands-free call using a speaker and a microphone provided in the terminal, and transmits and receives voices to and from other terminals via the transmission line. A digital communication interface that transmits and receives signals, an echo canceller that suppresses its own acoustic echo component by performing optimal control according to the state of the acoustic echo component as needed, and a digital audio signal to an analog audio signal In addition, a codec that converts an analog voice signal into a digital voice signal, a receiver amplifier that controls the gain of a received voice signal transmitted from the partner terminal, and a transmitter that controls the gain and impedance of the transmitted voice signal received by the microphone. An amplifier is provided, and if the received voice signal and sent voice signal are compared and it is determined that the incoming call is being received, the sent voice signal When it is determined to be greatly attenuated and the transmission is in progress, a voice switch that greatly attenuates the received voice signal and the magnitude of the transmitted voice signal output from the voice switch are determined according to a preset threshold value, and the result is determined. The level detection unit that can output, and while the level detection unit is determined to be small, the received voice signal from the codec is switched to the voice switch side, and while the level detection unit is determined to be large, from the codec A first switching unit that switches a received voice signal to a path side that does not pass through the voice switch; and while the level detection unit determines that the received voice signal is small, the received voice signal from the voice switch side is switched to the receiver amplifier, While it is determined to be large, a second switching unit that switches the received voice signal from the first switching unit side to the receiving amplifier is provided.

この構成により、音声スイッチから出力される送話音声信号のレベルによって、小の間は音声スイッチの制御機能を利用し、大の間は音声スイッチの制御機能を停止させることで送話音声信号の減衰制御を停止させることができる。   With this configuration, depending on the level of the transmitted voice signal output from the voice switch, the voice switch control function is used for the small period, and the voice switch control function is stopped for the large period. Attenuation control can be stopped.

更に、本発明の拡声通話装置は、前記レベル検出部が大と判定している間はその端末の使用者に通知する通知部を備えることとした。   Furthermore, the loudspeaker apparatus according to the present invention includes a notification unit that notifies the user of the terminal while the level detection unit determines that the level is large.

この構成により、拡声通話装置にて通話している拡声通話装置の使用者に送話音声信号が大であるか否かを認識することができる。なお、通知部の構成としては、例えば、目視可能な発光をする発光部や、拡声通話装置を振動させて知らせる振動部など様々な構成が考えられる。   With this configuration, it is possible to recognize whether or not the transmitted voice signal is large for the user of the loudspeaker device that is talking on the loudspeaker device. As the configuration of the notification unit, for example, various configurations such as a light-emitting unit that emits visible light and a vibration unit that vibrates and notifies a loudspeaker device can be considered.

更に、本発明の拡声通話装置は、前記第1の切替部と前記第2の切替部との間にて予め決められたゲインを制御するゲインコントロール部を備えることとした。   Furthermore, the loudspeaker apparatus according to the present invention includes a gain control unit that controls a gain determined in advance between the first switching unit and the second switching unit.

この構成により、音声スイッチの制御機能が動作している間と停止している間のレベル差のバランスを調整することができる。   With this configuration, it is possible to adjust the balance of the level difference between when the control function of the voice switch is operating and when it is stopped.

更に、本発明の拡声通話装置は、前記デジタル通信インターフェースを介してゲインに関する情報の通信を行うゲイン情報通信部を備え、前記ゲイン情報通信部は、前記第1の切替部と前記第2の切替部との間に備えられたゲインコントロール部に前記ゲインに関する情報に適合したゲイン制御情報を出力できるものであり、前記ゲインコントロール部は前記ゲイン制御情報に従ったゲインの制御を行うことができることとした。   The loudspeaker apparatus according to the present invention further includes a gain information communication unit that communicates information about gain via the digital communication interface, and the gain information communication unit includes the first switching unit and the second switching unit. Gain control information suitable for the information related to the gain can be output to a gain control unit provided between the gain control unit, the gain control unit can perform gain control according to the gain control information, and did.

この構成により、各種相手側拡声通話装置の種類によってそれぞれ発生してしまう受話音声信号のレベル誤差にたいして、ダブルトーク中に無駄な受話音声信号量を拡声しないように微調整することができる。ここで、ゲイン情報通信部は、ゲインに関する情報として、ゲインの情報そのものを通信してもよいし、端末の種別の情報を通信してもよい。通信相手の端末の種別の情報を取得することにより、拡声通話装置は端末の種別の情報からゲインの情報を判定することができる。   With this configuration, it is possible to finely adjust the amount of received voice signal that is wasted during double talk so that the level error of the received voice signal that occurs depending on the type of the other party loudspeaker apparatus is not loud. Here, the gain information communication unit may communicate the gain information itself as the information about the gain, or may communicate the terminal type information. By acquiring information on the type of the communication partner terminal, the voice communication device can determine gain information from the information on the terminal type.

本発明の拡声通信システムは、端末に備えられるスピーカーとマイクによって互いにハンズフリー通話を行う拡声通話装置と、前記拡声通話装置と伝送路によって接続された通話装置とを備え、前記拡声通話装置は、前記伝送路を介して互いの端末間の送受話の音声信号を送受信するディジタル通信インターフェースと、デジタル音声信号をアナログ音声信号に且つアナログ音声信号をデジタル音声信号に変換するコーディックと、相手端末から送信された受話音声信号のゲインを制御する受話アンプと、前記マイクで受信した送話音声信号のゲインやインピーダンスを制御する送話アンプと、受話音声信号と送話音声信号を比較して受話中と判定した場合は送話音声信号を大きく減衰させ、送話中と判定した場合は受話音声信号を大きく減衰させる音声スイッチと、前記音声スイッチから出力された送話音声信号の大小を予め設定したしきい値に従って判定し、その結果を出力することのできるレベル検出部と、前記レベル検出部が小と判定している間は前記コーディックからの受話音声信号を前記音声スイッチ側へ切り替え、大と判定している間は前記コーディックからの受話音声信号を前記音声スイッチを経由しない経路側へ切り替える第1の切替部と、前記レベル検出部が小と判定している間は前記音声スイッチ側からの受話音声信号を前記受話アンプへ切り替え、大と判定している間は前記第1の切替部側からの受話音声信号を前記受話アンプへ切り替える第2の切替部とを備え、前記拡声通話装置は、随時音響エコー成分の状況に応じて補正追従して最適な制御を行って自己の音響エコー成分を抑圧すると共に相手装置側の音響エコー成分を抑圧するエコーキャンセラーを備えた構成を有する。   The loudspeaker communication system of the present invention includes a loudspeaker device that performs hands-free communication with a speaker and a microphone provided in a terminal, and a speech device that is connected to the loudspeaker device and a transmission line. A digital communication interface that transmits and receives voice signals for transmission / reception between terminals via the transmission line, a codec that converts digital voice signals into analog voice signals and analog voice signals into digital voice signals, and transmission from a partner terminal A reception amplifier for controlling the gain of the received voice signal, a transmission amplifier for controlling the gain and impedance of the transmission voice signal received by the microphone, and comparing the reception voice signal and the transmission voice signal during reception. If it is judged, the transmission voice signal is greatly attenuated. If it is judged that the transmission is in progress, the reception voice signal is greatly reduced. A voice switch to be output, a level detection unit capable of determining the magnitude of a transmitted voice signal output from the voice switch according to a preset threshold value, and outputting the result, and determining that the level detection unit is small The first switching for switching the received voice signal from the codec to the voice switch side while switching the received voice signal from the codec to the path side not passing through the voice switch while determining that the received voice signal is large. And the level detection unit switch the received voice signal from the voice switch side to the receiving amplifier while the level detection unit determines that the level is low, and receive the signal from the first switching unit side while the level detection unit determines that the level is high. A second switching unit that switches the voice signal to the receiver amplifier, and the loudspeaker device performs optimal control by performing correction tracking according to the state of the acoustic echo component at any time. And it has a configuration in which an echo canceller for suppressing acoustic echo component of the partner apparatus while suppressing its own acoustic echo component.

この構成により、本発明の拡声通話装置と同様に、ハウリングの発生を低減すると共にダブルトークによる同時通話を実現できる。また、エコーキャンセラーを拡声通話装置または通話装置のいずれかに設けることにより、エコー成分を除去できるので、拡声通話装置または通話装置のいずれかのエコーキャンセラーを省略した簡易な構成とすることができる。   With this configuration, similar to the loudspeaker device of the present invention, it is possible to reduce the occurrence of howling and realize simultaneous conversation using double talk. Further, since the echo component can be removed by providing the echo canceller in either the voice communication device or the telephone device, a simple configuration in which either of the voice communication device or the telephone device is omitted can be achieved.

以上のように本発明は、周囲雑音に反応してハウリングを起こすことなく、ダブルトーク中の同時通話性を確保することができ、エコー成分の減衰を目的とした適正値の事前測定を必要とせず、更には周囲音の秘話性を必要とする端末側からの音が相手側に漏れにくくすることができる。   As described above, the present invention can ensure simultaneous communication during double talk without causing howling in response to ambient noise, and requires prior measurement of an appropriate value for the purpose of attenuation of echo components. Furthermore, it is possible to make it difficult for the sound from the terminal side that requires the secrecy of ambient sounds to leak to the other party side.

以下、本発明の実施の形態について、図面を用いて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

[実施の形態1]
本発明の第1の実施形態を図1を用いて説明する。以下の説明では、拡声インターホン端末を拡声通話装置の例として説明する。
[Embodiment 1]
A first embodiment of the present invention will be described with reference to FIG. In the following description, a loudspeaker intercom terminal will be described as an example of a loudspeaker call device.

図1は、伝送路100によって互いに接続された各拡声インターホン端末1−n(n=1,2,…,n)(以降拡声インターホン端末1−1、及び拡声インターホン端末1−2を例とする)を示す。拡声インターホン装置は、スピーカー6−1とマイク7−1を備えることで互いにハンズフリー通話を行う拡声インターホン装置であって、各拡声インターホン端末1−1は、伝送路100を介して互いの前記拡声インターホン端末間の送受話の音声信号を送受信するディジタル通信インターフェース2−1と、自己の音響エコー成分を抑圧するためのエコーキャンセラー3−1と、デジタル音声信号をアナログ音声信号に且つアナログ音声信号をデジタル音声信号に変換するコーディック4−1と、相手拡声インターホン端末1−2から送信された受話音声信号のゲインを制御する受話アンプ5−1と、マイク7−1で受信した送話音声信号のゲインやインピーダンスを制御する送話アンプ8−1を備える。   FIG. 1 illustrates each of the loudspeaker interphone terminals 1-n (n = 1, 2,..., N) (hereinafter referred to as the loudspeaker interphone terminal 1-1 and the loudspeaker interphone terminal 1-2) connected to each other via the transmission line 100. ). The loudspeaker intercom apparatus is a loudspeaker interphone apparatus that includes a speaker 6-1 and a microphone 7-1 and performs hands-free communication with each other. The loudspeaker interphone terminals 1-1 communicate with each other through the transmission line 100. Digital communication interface 2-1 for transmitting and receiving voice signals for transmission / reception between intercom terminals, echo canceller 3-1 for suppressing its own acoustic echo component, digital voice signals into analog voice signals and analog voice signals The codec 4-1 for converting to a digital audio signal, the reception amplifier 5-1 for controlling the gain of the reception audio signal transmitted from the partner loudspeaker intercom terminal 1-2, and the transmission audio signal received by the microphone 7-1. A transmission amplifier 8-1 for controlling gain and impedance is provided.

周囲音の秘話性を必要とする拡声インターホン端末1−1側に、受話音声信号と送話音声信号を比較して受話中と判定した場合は送話音声信号を大きく減衰させ、送話中と判定した場合は受話音声信号を大きく減衰させる音声スイッチ10−1と、音声スイッチ10−1から出力された送話音声信号の大小を予め設定したしきい値に従って判定し、その結果を出力することのできるレベル検出部9−1と、レベル検出部9−1が小と判定している間はコーディック4−1からの受話音声信号を音声スイッチ10−1側へ切り替え、大と判定している間はコーディック4−1からの受話音声信号を音声スイッチ10−1を経由しない経路側へ切り替える切替部11−1と、レベル検出部9−1が小と判定している間は音声スイッチ10−1側からの受話音声信号を受話アンプ5−1へ切り替え、大と判定している間は前記切替部11−1側からの受話音声信号を受話アンプ5−1へ切り替える切替部12−1とを備えている。   If the received voice signal and the transmitted voice signal are compared to the loudspeaker intercom terminal 1-1 that requires the confidentiality of the surrounding sound, and the received voice signal is determined to be being received, the transmitted voice signal is greatly attenuated, If it is determined, the voice switch 10-1 for greatly attenuating the received voice signal and the magnitude of the transmitted voice signal output from the voice switch 10-1 are determined according to a preset threshold value, and the result is output. While the level detection unit 9-1 and the level detection unit 9-1 that are capable of performing the determination are small, the received voice signal from the codec 4-1 is switched to the voice switch 10-1 side and is determined to be large. In the meantime, the switching unit 11-1 that switches the received voice signal from the codec 4-1 to the path side that does not pass through the voice switch 10-1, and the voice switch 10- while the level detection unit 9-1 determines that it is small. 1 side or A switching unit 12-1 for switching the received voice signal from the switching unit 11-1 side to the receiving amplifier 5-1 while switching the received voice signal to the receiving amplifier 5-1. Yes.

尚、前記エコーキャンセラー3−1は、音響エコーに加え相手端末側の音響エコー成分を含む回線エコー成分を抑圧する機能を備える場合、相手拡声インターホン端末1−2にはエコーキャンセラー3−2を備える必要はなく、更に、音声スイッチ10−1を備える拡声インターホン端末1−1側、音声スイッチ10−1を備えない拡声インターホン端末1−2側のいずれかに備える構成であっても良い。   When the echo canceller 3-1 has a function of suppressing a line echo component including an acoustic echo component on the counterpart terminal side in addition to the acoustic echo, the counterpart loudspeaker interphone terminal 1-2 includes an echo canceller 3-2. There is no need, and the configuration may be such that it is provided on either the loudspeaker interphone terminal 1-1 side including the voice switch 10-1 or the loudspeaker interphone terminal 1-2 side not including the voice switch 10-1.

又、伝送路100に接続される拡声インターホン端末数は2台ないしは複数台接続可能で、複数台の場合ある端末は、伝送路によって接続される他の全ての端末と通話可能なシステム構成であっても良い。   In addition, two or a plurality of voice intercom terminals connected to the transmission line 100 can be connected, and the terminal in the case of a plurality of terminals has a system configuration capable of talking with all other terminals connected by the transmission line. May be.

一方、前記エコーキャンセラー3−1は、随時音響エコー成分の状況に応じて補正追従して最適なエコーキャンセルを行う機能を備えている。また、音声スイッチ10−1は双方向無音中の場合は送話音声信号を大きく減衰させる側の動作となる設定にするものとする。   On the other hand, the echo canceller 3-1 has a function of performing an optimal echo cancellation by correcting and tracking according to the state of the acoustic echo component at any time. Also, the voice switch 10-1 is set to operate so as to greatly attenuate the transmitted voice signal when there is no sound in both directions.

次に各通話状態について説明する。   Next, each call state will be described.

拡声インターホン端末1−1と拡声インターホン端末1−2との双方向ハンズフリー通話状態において、まず拡声インターホン端末1−2より送話中で拡声インターホン端末1−1ではその音声を聞いているのみの場合の動作について説明する。   In the two-way hands-free call state between the loudspeaker interphone terminal 1-1 and the loudspeaker interphone terminal 1-2, first, the loudspeaker interphone terminal 1-1 is listening to the voice during the transmission from the loudspeaker interphone terminal 1-2. The operation in this case will be described.

この場合、送話音声信号は十分小さいため音声スイッチ10−1の動作により大きく減衰されており、レベル検出部9−1の判定は小となる。従って、コーディック4−1から出力されたアナログの受話音声信号は音声スイッチ10−1を経由し、音声スイッチ10−1は送話音声信号側に、より確実な減衰を行う。この状態中にスピーカー6−1から十分な受話音声信号を送出したとしても、その音響エコー30−1でマイク7−1が拾った音響エコー成分は音声スイッチ10−1にて十分に減衰される。従って、レベル検出部9−1が間違って受話音声信号の音響エコー成分に反応して大と判定することも無く、十分減衰した音響エコー成分としてコーディック4−1を経由してエコーキャンセラー3−1へと入力されることとなるため、エコーキャンセラー3−1は正常動作範囲の能力以下で安定的に音響エコー成分の抑圧をすることができる。一方この動作中は、拡声拡声インターホン端末1−1にとって実使用上ほぼ片方向通話(音声受話状態)となるが、通すべき送話音声以外の周囲音(例えば室内の周囲音)を拡声インターホン端末1−2に漏らさない状態でもある。   In this case, since the transmitted voice signal is sufficiently small, it is greatly attenuated by the operation of the voice switch 10-1, and the determination of the level detection unit 9-1 is small. Therefore, the analog received voice signal output from the codec 4-1 passes through the voice switch 10-1, and the voice switch 10-1 performs more reliable attenuation on the transmitted voice signal side. Even if a sufficient received voice signal is transmitted from the speaker 6-1 during this state, the acoustic echo component picked up by the microphone 7-1 by the acoustic echo 30-1 is sufficiently attenuated by the voice switch 10-1. . Therefore, the level detector 9-1 does not erroneously determine that the level is large in response to the acoustic echo component of the received voice signal, and the echo canceller 3-1 passes through the codec 4-1 as a sufficiently attenuated acoustic echo component. Therefore, the echo canceller 3-1 can stably suppress the acoustic echo component within the capability of the normal operation range. On the other hand, during this operation, the loudspeak loudspeaker intercom terminal 1-1 becomes almost one-way call (voice reception state) for practical use, but ambient sound other than the transmitted voice to be passed (for example, room ambient sound) is loudspeaker intercom terminal. It is also a state which does not leak to 1-2.

次に拡声インターホン端末1−1側から送話中、或いはダブルトーク中の場合の動作について説明する。   Next, the operation in the case of transmitting from the loudspeaker intercom terminal 1-1 or during double talk will be described.

スピーカー6−1からの音響エコー30−1に十分打ち勝つ送話音声が発せられた場合に限り、音声スイッチ10−1は送話状態と判定し、受話音声信号側を大きく減衰させ、送話音声信号側の減衰を無くす。これにより、音声スイッチ10−1から出力される送話音声信号は大きくなるためレベル検出部9−1は大と判定する。それと共に切替部11−1,12−1の切り替わりによって、受話音声信号は音声スイッチ10−1を経由しなくなるため、受話音声信号の大きな減衰も速やかに解除される。   Only when the transmitted voice that sufficiently overcomes the acoustic echo 30-1 from the speaker 6-1 is emitted, the voice switch 10-1 determines that the voice is transmitted, greatly attenuates the received voice signal side, and transmits the transmitted voice. Eliminate signal side attenuation. As a result, the transmitted voice signal output from the voice switch 10-1 becomes larger, so that the level detector 9-1 determines that it is large. At the same time, the switching of the switching units 11-1 and 12-1 causes the received voice signal to stop passing through the voice switch 10-1, so that the large attenuation of the received voice signal is also quickly released.

従って、この状態中に限り双方向同時通話として成立することになる。   Therefore, only during this state, a two-way simultaneous call is established.

一方でこの瞬間はエコーキャンセラー3−1には正常動作範囲の能力以上の音響エコー成分が戻ることになるが、それ以上に送話音声信号が強いため、エコーキャンセラー3−1に有する送話状態に挿入される若干の受話音声信号減衰効果が働き、長時間継続されることのない送話音声信号の期間では問題なく動作する。   On the other hand, at this moment, the echo canceller 3-1 returns an acoustic echo component that exceeds the capability of the normal operation range, but since the transmitted voice signal is stronger than that, the transmission state that the echo canceller 3-1 has. A slight received voice signal attenuation effect is inserted into the transmission voice signal, and it operates without problems during the period of the transmitted voice signal that does not last for a long time.

送話が終了するとレベル検出部9−1が速やかに小と判定するため、受話音声信号の経路は速やかに音声スイッチ10−1経由となる。従って、送話音声信号は速やかに大きく減衰され、再び実使用上ほぼ片方向通話(音声受話状態)に戻る。   When the transmission is completed, the level detection unit 9-1 promptly determines that the level is small, so that the path of the received voice signal immediately passes through the voice switch 10-1. Therefore, the transmitted voice signal is rapidly attenuated greatly, and again returns to an almost one-way call (voice reception state) in actual use.

最後に拡声インターホン端末1−1,1−2は互いに送話しない場合で且つ拡声インターホン端末1−2には騒音などの周囲雑音がある場合について説明する。   Finally, a case where the loudspeaker interphone terminals 1-1 and 1-2 do not transmit each other and the loudspeaker interphone terminal 1-2 has ambient noise such as noise will be described.

拡声インターホン端末1−1側では送話されていないので、前記同様に片方向通話(音声受話状態)となっている。この状態中はマイク7−1からの信号を音声スイッチ10−1で十分に減衰させることになるので、コーディック4−1などで有する雑音除去機能のレベルを越えて通過してしまった拡声インターホン端末1−2側から周囲雑音の音響エコー30−1の成分も十分に減衰される。従って、この雑音の音響エコー成分はエコーキャンセラー3−1によって正常に抑圧される。   Since no voice is transmitted on the loudspeaker intercom terminal 1-1 side, a one-way call (voice reception state) is set as described above. Since the signal from the microphone 7-1 is sufficiently attenuated by the voice switch 10-1 during this state, the loudspeaker intercom terminal that has passed beyond the level of the noise removal function possessed by the codec 4-1 or the like. The component of the acoustic echo 30-1 of ambient noise from the 1-2 side is also sufficiently attenuated. Therefore, the acoustic echo component of this noise is normally suppressed by the echo canceller 3-1.

以上、本発明の実施の形態1の拡声インターホン装置は、周囲雑音に反応してハウリングを起こすことなく、ダブルトーク中の同時通話性を確保することができ、エコー成分の減衰を目的とした適正値の事前測定を必要とせず、更には周囲音の秘話性を必要とする端末側からの音が相手側に漏れにくくすることができる。   As described above, the loudspeaker intercom apparatus according to Embodiment 1 of the present invention can ensure simultaneous communication during double talk without causing howling in response to ambient noise, and is suitable for the purpose of attenuation of echo components. It is possible to make it difficult for the sound from the terminal side, which does not require prior measurement of the value, and further requires the secrecy of ambient sounds, to leak to the other party side.

[実施の形態2]
本発明の第2の実施形態を図2を用いて説明する。
[Embodiment 2]
A second embodiment of the present invention will be described with reference to FIG.

音声スイッチ10−1及びレベル検出部9−1を備える拡声インターホン端末1−1において、レベル検出部9−1が大と判定している間はその端末で通話している使用者に目視可能な発光をする発光部13−1を備えている。   In the loudspeaker interphone terminal 1-1 having the voice switch 10-1 and the level detection unit 9-1, while the level detection unit 9-1 determines that the level is large, it is visible to the user who is talking on the terminal. A light emitting unit 13-1 that emits light is provided.

以上、本発明の第2の実施の形態の拡声インターホン装置は、拡声インターホン端末1−1側では確実な音声を発しない限り解除されない音声スイッチ10−1の送話音声信号の減衰状態を送話者が認識することができるため、送話者に確実送話音声を発することを促すことができる。   As described above, the loudspeaker intercom apparatus according to the second embodiment of the present invention transmits the attenuation state of the transmitted voice signal of the voice switch 10-1 that is not canceled unless a reliable voice is emitted on the loudspeaker interphone terminal 1-1 side. Therefore, it is possible to prompt the transmitter to emit the transmitted voice surely.

なお、本実施の形態では、送話音声信号の減衰状態を送話者に認識させるために発光部を備える例について説明したが、発光部以外の構成によって送話者に減衰状態を認識させてもよい。例えば、拡声インターホン装置を振動させる構成等も可能である。   In the present embodiment, an example is described in which a light emitting unit is provided in order to make the speaker recognize the attenuation state of the transmitted voice signal. However, the attenuation state of the transmitter can be recognized by a configuration other than the light emitting unit. Also good. For example, the structure etc. which vibrate a loudspeaker intercom apparatus are also possible.

[実施の形態3]
本発明の第3の実施形態を図2を用いて説明する。
[Embodiment 3]
A third embodiment of the present invention will be described with reference to FIG.

音声スイッチ10−1及びレベル検出部9−1を備える拡声インターホン端末1−1において、切替部11−1,12−1間にて予め決められたゲインを制御するゲインコントロール部14−1を備えている。   The loudspeaker interphone terminal 1-1 including the voice switch 10-1 and the level detection unit 9-1 includes a gain control unit 14-1 that controls a predetermined gain between the switching units 11-1 and 12-1. ing.

以上、本発明の第3の実施の形態の拡声インターホン装置は、音声スイッチ10−1の制御機能によって一瞬減衰する受話音声信号とのレベル差のバランスを聴感に合わせて調整することができる。   As described above, the loudspeaker intercom apparatus according to the third embodiment of the present invention can adjust the balance of the level difference from the received voice signal that is attenuated momentarily by the control function of the voice switch 10-1 according to the sense of hearing.

[実施の形態4]
本発明の第4の実施形態を図2を用いて説明する。
[Embodiment 4]
A fourth embodiment of the present invention will be described with reference to FIG.

各端末において、デジタル通信インターフェース2−1を介して互いの端末の種別の通信、或いは直接ゲイン情報の通信を行う端末判定部15−1を備え、更に音声スイッチ10−1及びレベル検出部9−1を備える拡声インターホン端末1−1側において、前記端末判定部15−1は切替部11−1,12−1間に備えるゲインコントロール部14−1に前記通信情報に適合したゲイン制御情報を出力できるものであり、ゲインコントロール部14−1は前記ゲイン制御情報に従ったゲインの制御を行うことができる。   Each terminal includes a terminal determination unit 15-1 that performs communication of each terminal type or direct gain information via the digital communication interface 2-1, and further includes a voice switch 10-1 and a level detection unit 9-. 1, the terminal determination unit 15-1 outputs gain control information suitable for the communication information to a gain control unit 14-1 provided between the switching units 11-1 and 12-1. The gain control unit 14-1 can perform gain control according to the gain control information.

以上、本発明の第4の実施の形態の拡声インターホン装置は、各種相手側拡声インターホン端末の種類によってそれぞれ発生してしまう受話音声信号のレベル誤差にたいして、ダブルトーク中に無駄な受話音声信号量を拡声しないように微調整することができる。   As described above, the loudspeaker intercom apparatus according to the fourth embodiment of the present invention reduces the amount of received voice signal that is wasted during double talk to the level error of the received voice signal that is generated depending on the type of each other loudspeaker intercom terminal. Fine adjustments can be made to prevent loudening.

以上説明したように、本発明は、周囲雑音に反応してハウリングを起こすことなく、ダブルトーク中の同時通話性を確保することができ、エコー成分の減衰を目的とした適正値の事前測定を必要とせず、更には周囲音の秘話性を必要とする端末側からの音が相手側に漏れにくくすることができ、ハンズフリー通話を行う拡声インターホン装置等として有用である。   As described above, the present invention can ensure simultaneous communication during double talk without causing howling in response to ambient noise, and can perform appropriate prior measurement for the purpose of attenuation of echo components. In addition, it is possible to make it difficult for the sound from the terminal side that requires the secrecy of the surrounding sound to leak to the other party side, which is useful as a loudspeaker intercom apparatus or the like for performing a hands-free call.

本発明の第1の実施形態の拡声インターホン装置の構成図The block diagram of the loudspeaker intercom apparatus of the 1st Embodiment of this invention 本発明の第2〜第4の実施の形態の拡声インターホン装置の構成図The block diagram of the loudspeaker intercom apparatus of the 2nd-4th embodiment of this invention

符号の説明Explanation of symbols

1−1,1−2 拡声インターホン端末
2−1,2−2 ディジタル通信インターフェース
3−1,3−2 エコーキャンセラー
4−1,4−2 コーディック
5−1,5−2 受話アンプ
6−1,6−2 スピーカー
7−1,7−2 マイク
8−1,8−2 送話アンプ
9−1 レベル検出部
10−1 音声スイッチ
11−1 切替部
12−1 切替部
13−1 発光部
14−1 ゲインコントロール部
15−1,15−2 端末判定部
20−1 ゲインコントロール部
30−1,30−2 音響エコー
100 伝送路

1-1, 1-2 Loudspeaker interphone terminal 2-1, 2-2 Digital communication interface 3-1, 3-2 Echo canceller 4-1, 4-2 Codec 5-1, 5-2 Receiver amplifier 6-1, 6-2 Speakers 7-1 and 7-2 Microphones 8-1 and 8-2 Transmitting amplifier 9-1 Level detector 10-1 Voice switch 11-1 Switching unit 12-1 Switching unit 13-1 Light emitting unit 14- DESCRIPTION OF SYMBOLS 1 Gain control part 15-1,15-2 Terminal determination part 20-1 Gain control part 30-1,30-2 Acoustic echo 100 Transmission path

Claims (5)

伝送路によって接続され、端末に備えられるスピーカーとマイクによってハンズフリー通話を行う拡声通話装置であって、
前記伝送路を介して他の端末との間で送受話の音声信号を送受信するディジタル通信インターフェースと、
随時音響エコー成分の状況に応じて補正追従して最適な制御を行って自己の音響エコー成分を抑圧するためのエコーキャンセラーと、
デジタル音声信号をアナログ音声信号に且つアナログ音声信号をデジタル音声信号に変換するコーディックと、
相手端末から送信された受話音声信号のゲインを制御する受話アンプと、
前記マイクで受信した送話音声信号のゲインやインピーダンスを制御する送話アンプと、
受話音声信号と送話音声信号を比較して受話中と判定した場合は送話音声信号を大きく減衰させ、送話中と判定した場合は受話音声信号を大きく減衰させる音声スイッチと、
前記音声スイッチから出力された送話音声信号の大小を予め設定したしきい値に従って判定し、その結果を出力することのできるレベル検出部と、
前記レベル検出部が小と判定している間は前記コーディックからの受話音声信号を前記音声スイッチ側へ切り替え、大と判定している間は前記コーディックからの受話音声信号を前記音声スイッチを経由しない経路側へ切り替える第1の切替部と、
前記レベル検出部が小と判定している間は前記音声スイッチ側からの受話音声信号を前記受話アンプへ切り替え、大と判定している間は前記第1の切替部側からの受話音声信号を前記受話アンプへ切り替える第2の切替部と、
を備えることを特徴とする拡声通話装置。
A loudspeaker device connected by a transmission line and performing a hands-free call with a speaker and a microphone provided in the terminal,
A digital communication interface for transmitting and receiving voice signals for transmission and reception with other terminals via the transmission path;
An echo canceller to suppress the acoustic echo component of its own by performing an optimal control by correcting and tracking according to the state of the acoustic echo component at any time,
A codec for converting a digital audio signal into an analog audio signal and an analog audio signal into a digital audio signal;
A receiver amplifier for controlling the gain of the received voice signal transmitted from the other terminal;
A transmission amplifier for controlling the gain and impedance of the transmission voice signal received by the microphone;
A voice switch that greatly attenuates the transmitted voice signal when it is determined to be receiving by comparing the received voice signal and the transmitted voice signal;
A level detector capable of determining the magnitude of the transmitted voice signal output from the voice switch according to a preset threshold value and outputting the result;
The received voice signal from the codec is switched to the voice switch side while the level detector determines that it is small, and the received voice signal from the codec is not passed through the voice switch while it is determined to be large. A first switching unit for switching to the route side;
The received voice signal from the voice switch side is switched to the receiving amplifier while the level detector determines that the level is low, and the received voice signal from the first switch side is determined while the level detector is determined to be high. A second switching unit for switching to the receiver amplifier;
A loudspeaker device characterized by comprising:
前記レベル検出部が大と判定している間はその端末の使用者に通知する通知部を備えることを特徴とする請求項1記載の拡声通話装置。   The loudspeaker apparatus according to claim 1, further comprising a notification unit that notifies a user of the terminal while the level detection unit determines that the level is large. 前記第1の切替部と前記第2の切替部との間にて予め決められたゲインを制御するゲインコントロール部を備えることを特徴とする請求項1又は請求項2記載の拡声通話装置。   The loudspeaker apparatus according to claim 1 or 2, further comprising a gain control unit that controls a gain predetermined between the first switching unit and the second switching unit. 前記デジタル通信インターフェースを介してゲインに関する情報の通信を行うゲイン情報通信部を備え、前記ゲイン情報通信部は、前記第1の切替部と前記第2の切替部との間に備えられたゲインコントロール部に前記ゲインに関する情報に適合したゲイン制御情報を出力できるものであり、前記ゲインコントロール部は前記ゲイン制御情報に従ったゲインの制御を行うことができることを特徴とする請求項3記載の拡声通話装置。   A gain information communication unit configured to communicate gain-related information via the digital communication interface, the gain information communication unit including a gain control provided between the first switching unit and the second switching unit; The loudspeaker call according to claim 3, wherein gain control information adapted to the gain-related information can be output to a unit, and the gain control unit can perform gain control according to the gain control information. apparatus. 端末に備えられるスピーカーとマイクによって互いにハンズフリー通話を行う拡声通話装置と、前記拡声通話装置と伝送路によって接続された通話装置とを備え、
前記拡声通話装置は、前記伝送路を介して互いの端末間の送受話の音声信号を送受信するディジタル通信インターフェースと、デジタル音声信号をアナログ音声信号に且つアナログ音声信号をデジタル音声信号に変換するコーディックと、相手端末から送信された受話音声信号のゲインを制御する受話アンプと、前記マイクで受信した送話音声信号のゲインやインピーダンスを制御する送話アンプと、受話音声信号と送話音声信号を比較して受話中と判定した場合は送話音声信号を大きく減衰させ、送話中と判定した場合は受話音声信号を大きく減衰させる音声スイッチと、前記音声スイッチから出力された送話音声信号の大小を予め設定したしきい値に従って判定し、その結果を出力することのできるレベル検出部と、前記レベル検出部が小と判定している間は前記コーディックからの受話音声信号を前記音声スイッチ側へ切り替え、大と判定している間は前記コーディックからの受話音声信号を前記音声スイッチを経由しない経路側へ切り替える第1の切替部と、前記レベル検出部が小と判定している間は前記音声スイッチ側からの受話音声信号を前記受話アンプへ切り替え、大と判定している間は前記第1の切替部側からの受話音声信号を前記受話アンプへ切り替える第2の切替部と、を備え、
前記拡声通話装置は、随時音響エコー成分の状況に応じて補正追従して最適な制御を行って自己の音響エコー成分を抑圧すると共に相手装置側の音響エコー成分を抑圧するエコーキャンセラーを備えたことを特徴とする拡声通話システム。

A loudspeaker device that performs a hands-free call with a speaker and a microphone provided in a terminal, and a speech device connected to the loudspeaker device and a transmission path,
The loudspeaker apparatus includes a digital communication interface that transmits and receives voice signals for transmission / reception between terminals via the transmission line, and a codec that converts a digital voice signal into an analog voice signal and an analog voice signal into a digital voice signal. A receiving amplifier that controls the gain of the received voice signal transmitted from the partner terminal, a transmitting amplifier that controls the gain and impedance of the transmitted voice signal received by the microphone, and the received voice signal and the transmitted voice signal. If it is determined that the call is being received, the transmitted voice signal is greatly attenuated. If it is determined that the call is being transmitted, the received voice signal is greatly attenuated, and the transmitted voice signal output from the voice switch is A level detector that can determine the magnitude according to a preset threshold and output the result, and the level detector The received voice signal from the codec is switched to the voice switch side while the codec is determined to be large, and the received voice signal from the codec is switched to the path side that does not pass through the voice switch while it is determined to be large. The switching unit and the level detection unit switch the received voice signal from the voice switch side to the receiving amplifier while it is determined to be small, and from the first switching unit side while it is determined to be large. A second switching unit that switches the received voice signal to the receiver amplifier,
The loudspeaker device has an echo canceller that suppresses the acoustic echo component of the counterpart device and suppresses the acoustic echo component of the counterpart device while performing optimal control by correcting and tracking according to the state of the acoustic echo component at any time. A voice call system characterized by

JP2005081036A 2005-03-22 2005-03-22 Loudspeaker equipment, loudspeaker system Expired - Fee Related JP4400490B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005081036A JP4400490B2 (en) 2005-03-22 2005-03-22 Loudspeaker equipment, loudspeaker system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005081036A JP4400490B2 (en) 2005-03-22 2005-03-22 Loudspeaker equipment, loudspeaker system

Publications (2)

Publication Number Publication Date
JP2006270147A JP2006270147A (en) 2006-10-05
JP4400490B2 true JP4400490B2 (en) 2010-01-20

Family

ID=37205684

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005081036A Expired - Fee Related JP4400490B2 (en) 2005-03-22 2005-03-22 Loudspeaker equipment, loudspeaker system

Country Status (1)

Country Link
JP (1) JP4400490B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5070073B2 (en) * 2008-01-30 2012-11-07 アイホン株式会社 Intercom system
JP5093092B2 (en) * 2008-12-26 2012-12-05 ヤマハ株式会社 Communication device
JP5391118B2 (en) * 2010-03-23 2014-01-15 アイホン株式会社 Intercom system
JP5874031B2 (en) * 2012-03-09 2016-03-01 パナソニックIpマネジメント株式会社 Call signal processing device
CN105848052B (en) * 2015-01-16 2019-10-11 宇龙计算机通信科技(深圳)有限公司 A kind of Mike's switching method and terminal

Also Published As

Publication number Publication date
JP2006270147A (en) 2006-10-05

Similar Documents

Publication Publication Date Title
EP0683621B1 (en) Transmitter-receiver having ear-piece type acoustic transducing part
US20140307868A1 (en) Headset system with microphone for ambient sounds
US20090253418A1 (en) System for conference call and corresponding devices, method and program products
JPH0823373A (en) Talking device circuit
JPH01194555A (en) Telephone set
JP4400490B2 (en) Loudspeaker equipment, loudspeaker system
JP2002359580A (en) Loudspeaker call device
JPH04323938A (en) Hand-free circuit
CA2207461C (en) Non-constant echo return loss for telephone terminal with handsfree
US10200795B2 (en) Method of operating a hearing system for conducting telephone calls and a corresponding hearing system
JP6945158B2 (en) Calling devices, programs and calling systems
JP2002368891A (en) Loudspeaking system
JPS6324584B2 (en)
JPH08335977A (en) Loudspeaking device
JP2009135596A (en) Intercom system
JP6775162B2 (en) Calling device and calling system using it
KR200217301Y1 (en) Repeater for internet phone
JP3069572B2 (en) Loudspeaker
JPH0846679A (en) Cordless telephone set
JP2006287431A (en) Telephone device
GB2209906A (en) Telephone instrument
JPH11284550A (en) Voice input-output device
JP2006174007A (en) Telephone system and earphone microphone set
JPS602705Y2 (en) public address telephone
JP2002314465A (en) Hands-free phone

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20070316

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20070322

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20070322

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070802

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090916

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091006

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091019

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121106

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees