JP4292374B2 - Echo canceller - Google Patents
Echo canceller Download PDFInfo
- Publication number
- JP4292374B2 JP4292374B2 JP2003073086A JP2003073086A JP4292374B2 JP 4292374 B2 JP4292374 B2 JP 4292374B2 JP 2003073086 A JP2003073086 A JP 2003073086A JP 2003073086 A JP2003073086 A JP 2003073086A JP 4292374 B2 JP4292374 B2 JP 4292374B2
- Authority
- JP
- Japan
- Prior art keywords
- echo canceller
- echo
- path
- signal
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Telephone Function (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、通話装置における回り込みによるエコーを抑圧除去するエコーキャンセラ装置に関するものである。
【0002】
【従来の技術】
通話装置において、2線−4線変換を行うハイブリッド回路での回り込みやハンドフリー通話におけるスピーカからマイクロホンへの回り込みによるエコーを除去する技術として、主にエコーキャンセラ装置が用いられている。このエコーキャンセラ装置は、回り込み経路の信号特性を適応フィルタで推定し、入力信号から推定したエコー信号を減じることにより回り込み量を低減している。(例えば、特許文献1参照)
【0003】
【特許文献1】
特開平9−307484号公報
【0004】
【発明が解決しようとする課題】
しかし、適応フィルタの推定方法は線形に変化する信号を前提としているため、回り込み経路で信号が遮断されると無音に対して推定エコー信号を減じるように過渡動作してエコーを発生してしまうことになる。即ち、例えば、ダイヤル発信の場合におけるハイブリッド回路を含むトランク回路20では、回り込み経路の受話側を遮断することにより発信音の回り込みを防止している。このような回路にエコーキャンセラ装置を接続した場合には、上記理由によりダイヤル発信時にエコーを発生したり、ハンドフリー通話装置ではハウリングを発生する過渡動作が発生する。また、一般にはダイヤル制御部の制御情報が得られない場合が多いため、これによるエコーキャンセラ装置の動作を正常に制御することができない。
【0005】
本発明は、エコーキャンセラを接続した回り込み経路が遮断された場合においても過渡動作を防止してエコーの発生を抑圧することができるエコーキャンセラ装置を提供することを目的とする。
【0006】
【課題を解決するための手段】
前記目的を達成するために、本発明によるエコーキャンセラ装置は、4線側送話路から反響経路を介して4線側受話路に回り込んだエコー信号を低減するエコーキャンセラ装置であって、該エコーキャンセラ装置は、擬似エコー信号を発生するエコーキャンセラと、前記擬似エコー信号を前記4線側受話路への入力信号から減算して前記エコー信号を低減する加算器と、前記4線側受話路への入力が有音か無音かを検出する無音検出部と、前記無音検出部の検出結果に基づいて前記エコーキャンセラの動作を制御するエコーキャンセラ制御部を有している。
そして、前記4線側受話路への入力が有音であるときには、前記エコーキャンセラ制御部の制御に基づいて、前記エコーキャンセラが、前記反響経路の回り込み特性を適応フィルタの適応フィルタ係数の推定によって求め、この推定に基づき前記擬似エコー信号を出力して、4線側受話路に回り込んだエコー信号を低減する。
また、前記4線側受話路への入力が無音になったときには、前記エコーキャンセラ制御部の制御に基づいて、前記4線側受話路からの出力が無音状態にされて前記4線側受話路の出力への回り込み経路が遮断されるとともに、前記エコーキャンセラが、前記適応フィルタ係数の推定を停止して、前記適応フィルタ係数を前記遮断直前の推定値に維持することで、前記4線側受話路への入力が有音に復帰したときに、前記適応フィルタの適応フィルタ係数の推定に過渡動作が生じることを防いで、エコーキャンセラの過渡動作による信号を低減する。
さらに、前記エコーキャンセラ制御部が、無音検出保護部を有することで、この無音検出保護部が、前記無音検出部による無音検出が前記4線受話路への入力信号のサンプリング周期の2倍以上の時間をこえて続いたことを検出したときに、前記4線側受話路への入力が無音になったと判定することで、エコーキャンセラまでの遅延時間(前記4線側受話路への入力が無音になったことをエコーキャンセラに伝達する時間遅れ)を短くすることができる(エコーキャンセラの過渡動作を低減できる)。
【0007】
【発明の実施の形態】
以下、図面に基づき、本発明の一実施例を説明する。
図1はエコーキャンセラ制御の構成を示すブロック図である。図1において、1は4線側受話路への入力信号y(n)の遮断を検出する無音検出部、2は無音検出部1からの出力結果を判定する際に複数回の判定結果を用いる等の確認機能を持たせてその検出保護を行い検出フラグdm- flg を出力する無音検出保護部、3は検出フラグdm- flg に基づきエコーキャンセラの動作を制御するエコーキャンセラ制御部、4は擬似エコー信号s(n)を出力するエコーキャンセラ、5は回り込み経路遮断時にエコーキャンセラ4の出力である擬似エコー信号s(n)の代わりに無音を出力するための例えば、論理値“0”を出力する無音発生器、6はダイヤル発信を制御するダイヤル制御部、7はダイヤル信号送出器、8はダイヤル信号発信時にハイブリッドによる回り込み経路を遮断するダイヤルミュート、9は入力信号y(n)から擬似エコー信号s(n)を差し引き誤差信号ef(n)を出力するための加算器、Hはハイブリッド回路、3aは無音発生器5の出力又は加算器9の出力のいずれかを4線受話路出力u(n)とするスイッチである。1〜5及び9はエコーキャンセラ回路10を構成し、6〜8及びHはトランク回路20を構成している。
【0008】
以下、図1に示すブロック図と、図2,図3に示す動作フローを参照して、サンプリング周波数8kHz でサンプリングした入力信号y(n)を例として、本発明装置の動作の詳細について、説明する。
図2は、エコーキャンセラ回路10における動作の概要を説明するためのフロー図である。エコーキャンセラ回路10では、通常の状態では4線側送話路からの参照信号x(n)と4線側受話路への入力信号y(n)および4線側受話路へ送出される誤差信号ef(n)に基づき、一定時間毎に、エコーキャンセラ4内の適応フィルタを動作させて、エコーキャンセラ4から擬似エコー信号s(n)を出力する。
すなわち、エコーキャンセラ回路10では、平常時には、直前の入力信号y(n)と直前の擬似エコー信号s(n)との差により得られる誤差信号ef(n)と、4線側送話路からの参照信号x(n)により、エコーキャンセラ4からその擬似エコー信号s(n)が得られるように制御されている。
そこで、新たな入力データy(n)が到来すると(S1)、先に算出されている擬似エコーs(n)とこの新たな入力データy(n)との減算を加算回路9で行って新たな誤差信号e(f)を得る(S2,S3)。
次に、無音検出部1において無音検出を行い、無音検出保護部2において、検出保護の動作を行う(S4)。この詳細は、図3を参照して後述する。
【0009】
次に、「ダイヤルミュート検出か」のテストをする(S5)。
このステップS5におけるテストが、「no」で有音のときには、エコーキャンセラ4における適応計算を行い(S6)、エコーキャンセラ制御部3は、スイッチ3aを図示の実線のように切換えて、誤差信号ef(n)を4線受話路の出力u(n)とし(S7)、その入力データy(n)に対する動作を終了する。
ステップS5の出力が「yes」であって、無音状態であることが検知されたときには、エコーキャンセラ4の適応動作を停止し(S9)、その入力データy(n)に対する動作を終了する。
【0010】
ステップS4における無音検出・検出保護の動作について、図3を参照してさらに説明する。
この動作のスタート後(S40)、「前回ダイヤルミュート非検出か」のテストをする(S41)。
このテストが「yes」であったときには、そのときの無音判定をする(S42)。
この判定の結果が「no」のときには、保護時間計測用カウンタの計数値をリセットして(S46)、このステップ4の動作を終了する。
ステップS42のテストが「yes」であったときには、「検出保護時間経過か」のテストをし(S43)、そのテストが「no」であったときには、保護時間計測用カウンタの計数値をインクリメントして(S47)、このステップ4の動作を終了する。ステップS43のテストが「yes」であったときには、保護時間計測用カウンタの計数値をリセットして(S44)、ダイヤルミュート検出[ dm- flg =1] をして(S45)、このステップ4の動作を終了する。
ステップS41のテストが「no」であったときには、そのときの無音判定をし(S48)、その判定が「yes」であったときには、このステップ4の動作を終了する。
ステップS48のテストの結果が「no」であったときには、「非検出保護時間経過か」のテストをし(S49)、そのテストの結果が「no」であったときには、保護時間計測用カウンタの計測値をインクリメントして(S52)、そのときのステップS4の動作を終了する。
ステップS49のテストの結果が「yes」であったときには、保護時間計測用カウンタの計測値をリセットして(S50)、「ダイヤルミュート非検出(dm- flg =0)」とし(S51)、そのときのステップS4の動作を終了する。
【0011】
トランク回路20では、ダイヤル制御部6によりダイヤル信号が送出されると、これに同期してダイヤルミュート8により回り込み経路が遮断される。この時エコーキャンセラ回路10の4線側受話路への入力y(n)は非線形的に変化し無音となる。無音検出部1では入力信号y(n)の振幅により無音を判定し、無音検出保護部2に通知する。無音検出保護部2では設定した保護時間を経過した後に無音検出フラグdm- flag=1をエコーキャンセラ制御部3に出力する。通常の状態には、音声信号では2サンプル連続して“0”交差することはないので、検出保護時間は2〜3サンプル以上あればよく、実施例では無音検出器1の入力からエコーキャンセラ4の入力までの遅延時間を考慮して1msec(8サンプル)とした。
【0012】
エコーキャンセラ制御部3は、検出フラッグdm- flag=0(有音)のとき、エコーキャンセラ4の適応動作を接続し、誤差信号ef(n)を出力u(n)に接続する。一方、検出フラッグdm- flag=1のとき、エコーキャンセラ4の適応動作を停止し、無音発生器の信号をu(n)に接続して強制的に無音を出力する。
【0013】
このように、エコーキャンセラ4の適応動作を停止しダイヤルミュート動作前の適応フィルタ係数を保持することにより、遮断された経路に対する過渡動作を防止する。ダイヤル信号送出が終了し、ダイヤルミュートを解除した後はミュート前の経路に適応した状態が維持されているので、直ちに正常なエコー消去が可能である。
【0014】
実施例では、エコーキャンセラ4の適応停止までの所要時間は最大1msecであるが、エコーキャンセラ4の適応動作には2〜3sec かかるので、この適応停止までの所要時間内に、遮断された経路に対してエコーキャンセラ4が不必要な適応動作をしてエコーまたはハウリングを発生することはない。
【0015】
本実施例では無音発生器5により強制的に無音出力したが、エコーキャンセラをバイパスして入力信号y(n)を出力u(n)としてもよい。
【0016】
【発明の効果】
以上から明らかなように、本発明によれば、入力信号の振幅により無音を判定することによって、ダイヤル発信時のダイヤルミュートによる回り込み経路の遮断を検出して、エコーキャンセラの適応動作停止するとともにエコーキャンセラの出力の代わりに無音を強制的に出力することにより、エコーの発生を回避することができる。
【図面の簡単な説明】
【図1】本発明の実施例を示すブロック図である。
【図2】図1の実施例の動作を示すフローチャートである。
【図3】図1の実施例の動作を示すフローチャートである。
【符号の説明】
1 無音検出部
2 無音検出保護部
3 エコーキャンセラ制御部
3a スイッチ
4 エコーキャンセラ
5 無音発生部
6 ダイヤル制御部
7 ダイヤル信号送出器
8 ダイヤルミュート
9 加算器
10 エコーキャンセラ回路
20 トランク回路
H ハイブリッド回路[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an echo canceller apparatus that suppresses and removes echoes caused by wraparound in a communication apparatus.
[0002]
[Prior art]
In a call device, an echo canceller device is mainly used as a technique for removing echoes caused by wraparound in a hybrid circuit that performs 2-wire to 4-wire conversion and wraparound from a speaker to a microphone in a hands-free call. This echo canceller apparatus reduces the amount of sneak by estimating the signal characteristic of the sneak path with an adaptive filter and subtracting the estimated echo signal from the input signal. (For example, see Patent Document 1)
[0003]
[Patent Document 1]
JP-A-9-307484 [0004]
[Problems to be solved by the invention]
However, since the adaptive filter estimation method is based on a linearly changing signal, if the signal is cut off by a wraparound path, an echo is generated by transient operation to reduce the estimated echo signal against silence. become. That is, for example, in the
[0005]
An object of the present invention is to provide an echo canceller that can prevent transient operation and suppress the occurrence of echo even when a sneak path to which the echo canceller is connected is interrupted.
[0006]
[Means for Solving the Problems]
To achieve the above object, the echo canceller device according to the present invention is a echo canceller apparatus for reducing the echo signal that goes around the four-wire side receiver path through the echo path from the four-wire side transmission path, said An echo canceller apparatus includes: an echo canceller that generates a pseudo echo signal; an adder that reduces the echo signal by subtracting the pseudo echo signal from an input signal to the 4-wire side receiving path; and the 4-line side receiving path A silence detection unit that detects whether the input to the voice is sound or silence, and an echo canceller control unit that controls the operation of the echo canceller based on the detection result of the silence detection unit.
When the input to the 4-line receiving path is sounded, the echo canceller determines the wraparound characteristic of the echo path by estimating the adaptive filter coefficient of the adaptive filter based on the control of the echo canceller control unit. Based on this estimation, the pseudo echo signal is output, and the echo signal that has entered the 4-line side receiving path is reduced.
In addition, when the input to the 4-wire side receiving path becomes silent, the output from the 4-line side receiving path is silenced based on the control of the echo canceller control unit, and the 4-line side receiving path is set. And the echo canceller stops the estimation of the adaptive filter coefficient and maintains the adaptive filter coefficient at the estimated value immediately before the cutoff, thereby receiving the 4-line side reception. When the input to the road returns to sound, a transient operation is prevented from occurring in the estimation of the adaptive filter coefficient of the adaptive filter, and a signal due to the transient operation of the echo canceller is reduced.
Furthermore, since the echo canceller control unit includes a silence detection protection unit, the silence detection protection unit detects that the silence detection by the silence detection unit is at least twice the sampling period of the input signal to the 4-wire reception path. When it is detected that the input has continued for a long time, it is determined that the input to the 4-wire side reception path has been silenced, so that the delay time to the echo canceller (the input to the 4-wire side reception path is silent) (The time delay for transmitting the fact to the echo canceller) can be shortened (transient operation of the echo canceller can be reduced).
[0007]
DETAILED DESCRIPTION OF THE INVENTION
An embodiment of the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram showing a configuration of echo canceller control. In FIG. 1, 1 is a silence detection unit that detects the interruption of the input signal y (n) to the 4-wire side receiving path, and 2 is a plurality of determination results when determining the output result from the
[0008]
Hereinafter, with reference to the block diagram shown in FIG. 1 and the operation flow shown in FIG. 2 and FIG. 3, the details of the operation of the device of the present invention will be described using the input signal y (n) sampled at the sampling frequency of 8 kHz as an example. To do.
FIG. 2 is a flowchart for explaining the outline of the operation in the
That is, in the
Therefore, when new input data y (n) arrives (S1), subtraction between the previously calculated pseudo echo s (n) and the new input data y (n) is performed by the
Next, the
[0009]
Next, a test of "whether dial mute is detected" is performed (S5).
When the test in step S5 is “no” and there is sound, the
When the output of step S5 is “yes” and it is detected that there is no sound, the adaptive operation of the
[0010]
The silent detection / detection protection operation in step S4 will be further described with reference to FIG.
After the start of this operation (S40), a test of "whether the previous dial mute is not detected" is performed (S41).
When this test is “yes”, the silence determination at that time is performed (S42).
When the result of this determination is “no”, the count value of the protection time measurement counter is reset (S46), and the operation of
When the test of step S42 is “yes”, a test of “whether the detection protection time has elapsed” is performed (S43). When the test is “no”, the count value of the protection time measurement counter is incremented. (S47), the operation of
If the test in step S41 is “no”, the silence is determined at that time (S48), and if the determination is “yes”, the operation in
If the result of the test in step S48 is “no”, a test of “whether the non-detection protection time has elapsed” is performed (S49). If the result of the test is “no”, the protection time measurement counter The measured value is incremented (S52), and the operation of step S4 at that time ends.
When the result of the test in step S49 is “yes”, the measurement value of the protection time measurement counter is reset (S50), and “dial mute non-detection (dm − flg = 0)” is set (S51). The operation of step S4 is terminated.
[0011]
In the
[0012]
The echo canceller control unit 3 connects the adaptive operation of the
[0013]
As described above, the adaptive operation of the
[0014]
In the embodiment, the maximum time required for the
[0015]
In the present embodiment, the silence generator 5 forcibly outputs silence, but the echo canceller may be bypassed and the input signal y (n) may be output u (n).
[0016]
【The invention's effect】
As is apparent from the above, according to the present invention, silence is determined based on the amplitude of the input signal, thereby detecting the interruption of the sneak path due to dial mute when dialing, and stopping the adaptive operation of the echo canceller and the echo. By forcibly outputting silence instead of the output of the canceller, the occurrence of echo can be avoided.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an embodiment of the present invention.
FIG. 2 is a flowchart showing the operation of the embodiment of FIG.
FIG. 3 is a flowchart showing the operation of the embodiment of FIG. 1;
[Explanation of symbols]
1
Claims (2)
該エコーキャンセラ装置は、
擬似エコー信号を発生するエコーキャンセラと、
前記擬似エコー信号を前記4線側受話路への入力信号から減算して前記エコー信号を低減する加算器と、
前記4線側受話路への入力が有音か無音かを検出する無音検出部と、
前記無音検出部の検出結果に基づいて前記エコーキャンセラの動作を制御するエコーキャンセラ制御部を有し、
前記4線側受話路への入力が有音であるときには、
前記エコーキャンセラ制御部の制御に基づいて、前記エコーキャンセラが、前記反響経路の回り込み特性を適応フィルタの適応フィルタ係数の推定によって求め、この推定に基づき前記擬似エコー信号を出力して、4線側受話路に回り込んだエコー信号を低減し、
前記4線側受話路への入力が無音になったときには、
前記エコーキャンセラ制御部の制御に基づいて、前記4線側受話路からの出力が無音状態にされて前記4線側受話路の出力への回り込み経路が遮断されるとともに、前記エコーキャンセラが、前記適応フィルタ係数の推定を停止して、前記適応フィルタ係数を前記遮断直前の推定値に維持することで、
前記4線側受話路への入力が有音に復帰したときに、前記適応フィルタの適応フィルタ係数の推定に過渡動作が生じることを防いで、エコーキャンセラの過渡動作による信号を低減すること
を特徴とするエコーキャンセラ装置。In an echo canceller that reduces echo signals that have passed from the 4-wire transmission path to the 4-wire reception path via the echo path,
The echo canceller device
An echo canceller that generates a pseudo echo signal;
An adder for reducing the echo signal by subtracting the pseudo echo signal from an input signal to the 4-wire receiving path;
A silence detector for detecting whether the input to the 4-wire side receiving path is voiced or silent;
An echo canceller control unit that controls the operation of the echo canceller based on the detection result of the silence detection unit;
When the input to the 4-wire receiving path is sound,
Based on the control of the echo canceller control unit, the echo canceller obtains the wraparound characteristic of the echo path by estimating the adaptive filter coefficient of the adaptive filter, and outputs the pseudo echo signal based on this estimation, Reduce the echo signal that wraps around the listening path,
When the input to the 4-wire receiving path is silent,
Based on the control of the echo canceller control unit, the output from the 4-wire side receiving path is silenced, the wraparound path to the output of the 4-wire side receiving path is blocked, and the echo canceller is By stopping the estimation of the adaptive filter coefficient and maintaining the adaptive filter coefficient at the estimated value immediately before the cutoff,
When the input to the 4-wire side receiving path returns to voice, a transient operation is prevented from occurring in the estimation of the adaptive filter coefficient of the adaptive filter, and a signal due to the transient operation of the echo canceller is reduced. Echo canceller device.
無音検出保護部をさらに有し、
この無音検出保護部が、前記無音検出部による無音の検出が前記4線受話路への入力信号のサンプリング周期の2倍以上の時間をこえて続いたことを検出したときに、
前記4線側受話路への入力が無音になったと判定することを特徴とする請求項1に記載のエコーキャンセラ装置。 The echo canceller control unit
It further has a silence detection protection part,
When the silence detection protection unit detects that the silence detection by the silence detection unit has continued for more than twice the sampling period of the input signal to the 4-wire receiving path,
2. The echo canceller according to claim 1, wherein it is determined that the input to the four-wire side receiving path has become silent .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003073086A JP4292374B2 (en) | 2003-03-18 | 2003-03-18 | Echo canceller |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003073086A JP4292374B2 (en) | 2003-03-18 | 2003-03-18 | Echo canceller |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004282539A JP2004282539A (en) | 2004-10-07 |
JP4292374B2 true JP4292374B2 (en) | 2009-07-08 |
Family
ID=33289065
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003073086A Expired - Fee Related JP4292374B2 (en) | 2003-03-18 | 2003-03-18 | Echo canceller |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4292374B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5883751B2 (en) | 2011-09-22 | 2016-03-15 | パナソニックIpマネジメント株式会社 | Input / output device and call terminal |
JP6338728B1 (en) * | 2017-03-31 | 2018-06-06 | 日本電信電話株式会社 | Echo canceller device |
-
2003
- 2003-03-18 JP JP2003073086A patent/JP4292374B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2004282539A (en) | 2004-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5332733B2 (en) | Echo canceller | |
JP2626437B2 (en) | Residual echo control device | |
KR100265908B1 (en) | Hands-free telephone | |
JPH11289282A (en) | Echo canceler controlling method and echo removing device | |
US6377679B1 (en) | Speakerphone | |
JP4292374B2 (en) | Echo canceller | |
JP2000209135A (en) | Echo canceller | |
JP2003051879A (en) | Speech device | |
US20040179676A1 (en) | Speech communication apparatus | |
JP3443302B2 (en) | Periodic signal detector | |
JP2009218849A (en) | Acoustic echo cancel control method and apparatus | |
JP3404236B2 (en) | Loudspeaker | |
JP3370594B2 (en) | Filter coefficient update controller for echo canceller | |
JPH07121027B2 (en) | Loud phone | |
JPH0514475A (en) | Loudspeaker telephone set | |
JP3754241B2 (en) | Telephone device | |
JP2913905B2 (en) | Private branch exchange | |
JP3392498B2 (en) | Call failure prevention device | |
JP4421993B2 (en) | Howling reduction device | |
JP2980141B2 (en) | Center clipper circuit | |
JP3357284B2 (en) | Double talk detection control device and double talk detection control method | |
JP2004274683A (en) | Echo canceler, echo canceling method, program, and recording medium | |
JPH0622025A (en) | Echo canceller | |
JP2004088369A (en) | Hands-free device, hands-free call control method and program | |
JPH04287549A (en) | Howling prevention device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051115 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20060330 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20060330 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071226 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090311 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090324 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120417 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120417 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130417 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140417 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |