JP2006178314A - Device for separating and extracting mixed signal - Google Patents

Device for separating and extracting mixed signal Download PDF

Info

Publication number
JP2006178314A
JP2006178314A JP2004373580A JP2004373580A JP2006178314A JP 2006178314 A JP2006178314 A JP 2006178314A JP 2004373580 A JP2004373580 A JP 2004373580A JP 2004373580 A JP2004373580 A JP 2004373580A JP 2006178314 A JP2006178314 A JP 2006178314A
Authority
JP
Japan
Prior art keywords
original signal
signal data
sampling
mixed
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004373580A
Other languages
Japanese (ja)
Other versions
JP4237699B2 (en
Inventor
Yutaka Okubo
裕 大久保
Toshiaki Sonoda
利明 園田
Tetsuo Tejima
哲郎 手島
Kunio Suzuki
久仁男 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Japan Steel Works Ltd
Technical Research and Development Institute of Japan Defence Agency
Original Assignee
Toshiba Corp
Japan Steel Works Ltd
Technical Research and Development Institute of Japan Defence Agency
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Japan Steel Works Ltd, Technical Research and Development Institute of Japan Defence Agency filed Critical Toshiba Corp
Priority to JP2004373580A priority Critical patent/JP4237699B2/en
Publication of JP2006178314A publication Critical patent/JP2006178314A/en
Application granted granted Critical
Publication of JP4237699B2 publication Critical patent/JP4237699B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a device for separating/extracting a mixed signal capable of reproducing an original signal continuously and faithfully. <P>SOLUTION: The device for separating/extracting a mixed signal obtains signal separation outputs XA (XA<SB>1</SB>, ..., XA<SB>i</SB>) and XB (XB<SB>1</SB>, ..., XB<SB>i</SB>) by performing separation/extraction processing by an independent component analysis of each two continuous sampling periods Δt1, Δt2. Further, the device produces a signal separation output XC (XC<SB>1</SB>, ..., XC<SB>i</SB>) in Δt1+Δt2, and divides XC into a component (XA') corresponding to the period Δt1 and a component (XB') corresponding to Δt2. Then, the device calculates combinations to couple each component of (XA<SB>1</SB>, ..., XA<SB>i</SB>) to any of the components (XB<SB>1</SB>, ..., XB<SB>i</SB>) based on a correlation value between XA and XA', and that between XB and XB'. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、混合信号分離・抽出装置に関する。特に本発明は、複数のセンサにおいて個別に観測される混合信号から原信号を分離・抽出する技術の改良に関する。   The present invention relates to a mixed signal separation / extraction apparatus. In particular, the present invention relates to an improvement in a technique for separating and extracting an original signal from mixed signals individually observed by a plurality of sensors.

複数の原信号を含む混合信号からそれぞれの原信号を分離・抽出するために、ブラインド信号分離法(BBS:Blind Source Separation)が用いられる(例えば、特許文献1を参照)。ブラインド信号分離法に独立成分分析を組み合わせることにより、到来信号に対する予備知識が無くとも複数の信号を分離できる。混合信号を受信するセンサをN個用いれば、最大でN個の信号成分を分離することができる。ブラインド信号分離法では、各センサに到達する混合信号を所定の時間間隔でサンプリングすることにより得られるデジタルデータが使用される。   In order to separate and extract each original signal from a mixed signal including a plurality of original signals, a blind signal separation method (BBS: Blind Source Separation) is used (see, for example, Patent Document 1). By combining independent component analysis with the blind signal separation method, a plurality of signals can be separated without prior knowledge of the incoming signal. If N sensors that receive the mixed signal are used, a maximum of N signal components can be separated. In the blind signal separation method, digital data obtained by sampling a mixed signal reaching each sensor at a predetermined time interval is used.

ところで、独立成分分析により原信号を分離・抽出するには、受信した混合信号の独立性のみに頼らざるを得ない。このことから、分離・抽出された信号にはサンプリング周期ごとの順番の入れ違いと、大きさの任意性とが残ることになる。分離・抽出する期間が決まっている場合には、このような現象は波形自体に影響を与えるものではないために、信号の分離・抽出という側面では深刻な問題を生じることはない。   By the way, in order to separate and extract the original signal by independent component analysis, it is necessary to rely only on the independence of the received mixed signal. For this reason, the separated / extracted signals remain in the wrong order for each sampling period and the arbitraryness of the size. When the period for separation / extraction is determined, such a phenomenon does not affect the waveform itself, so that there is no serious problem in terms of signal separation / extraction.

しかしながら分離・抽出処理を連続的に実施する場合や、原信号の数や状態が時々刻々と変化する場合には、受信信号の分離・抽出結果を一定の時間間隔ごとに出力する必要がある。このような処理において分離・抽出された信号の入れ違いの任意性が生じると、信号の連続性が損なわれることになる。
特開2003−92557号公報
However, when the separation / extraction process is continuously performed, or when the number and state of the original signals change every moment, it is necessary to output the reception signal separation / extraction results at regular time intervals. If the arbitrary separation of the separated and extracted signals occurs in such processing, the continuity of the signals is impaired.
JP 2003-92557 A

以上述べたように、ブラインド信号分離法により分離・抽出された原信号には、サンプリング周期ごとの順番の入れ違いと、大きさの任意性とが残る。よって分離・抽出処理を連続的に(すなわち一定の時間間隔で)実施する場合には本来の順序が失われ、原信号を連続信号として出力することができない場合がある。
本発明は上記事情によりなされたもので、その目的は、原信号を連続的かつ忠実に再生することの可能な混合信号分離・抽出装置を提供することにある。
As described above, in the original signal separated and extracted by the blind signal separation method, the difference in order for each sampling period and the arbitraryness of the size remain. Therefore, when the separation / extraction process is performed continuously (that is, at regular time intervals), the original order may be lost and the original signal may not be output as a continuous signal.
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a mixed signal separating / extracting apparatus capable of reproducing an original signal continuously and faithfully.

上記目的を達成するために本発明の一態様によれば、複数の原信号を含む混合信号をそれぞれ受信する複数のセンサと、この複数のセンサごとの受信信号から独立成分分析により前記原信号を分離・抽出する独立成分分析部とを具備する混合信号分離・抽出装置において、前記独立成分分析部は、連続するサンプリング期間ごとに前記複数のセンサごとの受信信号をサンプリングしてサンプルデータを取得するサンプリング手段と、前記サンプルデータを用いた独立成分分析により前記サンプリング期間ごとに複数の原信号データを生成する分離手段と、連続する2つのサンプリング期間のうち先行する第1サンプリング期間において生成された複数の第1原信号データと、前記第1サンプリング期間に続く第2サンプリング期間において生成された複数の第2原信号データとの、相互に連結すべき組み合わせを算出する算出手段と、この算出手段により算出された組み合わせで前記複数の第1原信号データの各々を前記複数の第2原信号データのいずれかに連結して、連続する原信号を再生する連結手段とを備えることを特徴とする混合信号分離・抽出装置が提供される。   In order to achieve the above object, according to an aspect of the present invention, a plurality of sensors each receiving a mixed signal including a plurality of original signals, and the original signal is analyzed by independent component analysis from the received signals for each of the plurality of sensors. In the mixed signal separating / extracting device including the independent component analyzing unit for separating / extracting, the independent component analyzing unit acquires the sample data by sampling the received signals for each of the plurality of sensors for each continuous sampling period. Sampling means, separation means for generating a plurality of original signal data for each sampling period by independent component analysis using the sample data, and a plurality generated in the preceding first sampling period of two consecutive sampling periods In the second sampling period following the first sampling period. A calculation means for calculating a combination to be connected to the plurality of second original signal data, and a combination of the plurality of first original signal data calculated by the calculation means. There is provided a mixed signal separating / extracting device, characterized in that the mixed signal separating / extracting device is provided with connecting means for reproducing a continuous original signal by connecting to any of the original signal data.

このような手段を講じることにより、時間的に連続するサンプリング期間においてそれぞれ分離・抽出された原信号は、例えばその相関性の強さの度合いに基づいて組み合わされ、連結される。すなわちサンプリング周期ごとの順番の入れ違いと、大きさの任意性とを、各原信号の特徴に基づいて排除することができ、連続する原信号同士を的確に連結することが可能になる。従って、原信号を連続的かつ忠実に再生することの可能な混合信号分離・抽出装置を提供することができるようになる。   By taking such means, the original signals separated and extracted in the sampling periods that are temporally continuous are combined and connected based on, for example, the degree of correlation strength. That is, it is possible to eliminate the difference in the order of each sampling period and the arbitraryness of the magnitude based on the characteristics of each original signal, and it is possible to accurately connect consecutive original signals. Therefore, it is possible to provide a mixed signal separating / extracting apparatus capable of reproducing the original signal continuously and faithfully.

本発明によれば、原信号を連続的かつ忠実に再生することの可能な混合信号分離・抽出装置を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the mixed signal separation / extraction apparatus which can reproduce | regenerate an original signal continuously and faithfully can be provided.

以下、本発明の実施の形態を図面を参照しながら詳細に説明する。この実施の形態に係る混合信号分離・抽出装置は、アレイ状に配列される複数のセンサ(n個とする)に同時に到来する複数の原信号(m個とする)を、ブラインド信号分離の手法により分離・抽出する。ブラインド信号分離とは、センサの応答性や信号の性質、入射信号の予備知識なしでセンサ数と同数までの入射信号を分離するアルゴリズムである。このアルゴリズムは、ブラインド信号分離や独立成分分析(ICA:Independent Component Analysis)と呼ばれ、多くの公知文献が発表されている。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The mixed signal separating / extracting apparatus according to this embodiment is a method for blind signal separation of a plurality of original signals (m) simultaneously arriving at a plurality of sensors (n) arranged in an array. To separate and extract. Blind signal separation is an algorithm that separates up to the same number of incident signals as the number of sensors without prior knowledge of sensor responsiveness and signal characteristics and incident signals. This algorithm is called blind signal separation or independent component analysis (ICA), and many known documents have been published.

[第1の実施形態]
本発明の第1の実施の形態に係る混合信号分離・抽出装置は、センサとしてアンテナを使用し、複数のアンテナに入射された複数の入射信号の混合信号から原信号を分離して出力する。なお、以下では、説明を簡単にするために、アンテナの数および入射信号の数をいずれも4として説明するが、アンテナの数及び入射信号の数はこれらに限定されず任意である。
[First Embodiment]
The mixed signal separating / extracting apparatus according to the first embodiment of the present invention uses an antenna as a sensor, and separates and outputs an original signal from a mixed signal of a plurality of incident signals incident on a plurality of antennas. In the following, for simplicity of explanation, the number of antennas and the number of incident signals are both assumed to be four, but the number of antennas and the number of incident signals are not limited to these and are arbitrary.

図1は、本発明に係わる混合信号分離・抽出装置の実施の形態を示す機能ブロック図である。この混合信号分離・抽出装置は、第1アンテナ11、第2アンテナ12、第3アンテナ13、第4アンテナ14、第1帯域制限ろ波装置F1、第2帯域制限ろ波装置F2、第3帯域制限ろ波装置F3、第4帯域制限ろ波装置F4、サンプリング処理部100、独立成分分析部200、および、出力処理部400を備える。   FIG. 1 is a functional block diagram showing an embodiment of a mixed signal separating / extracting apparatus according to the present invention. This mixed signal separating / extracting device includes a first antenna 11, a second antenna 12, a third antenna 13, a fourth antenna 14, a first band limited filtering device F1, a second band limited filtering device F2, a third band. A limiting filtering device F3, a fourth band limiting filtering device F4, a sampling processing unit 100, an independent component analysis unit 200, and an output processing unit 400 are provided.

第1〜第4アンテナ11〜14としては、バーチカルアンテナ、ダイポールアンテナといった無指向性のアンテナ、及び任意の指向性を持ったアンテナ等が用いられ、種々の方位からの電波を受信する。これら第1〜第4アンテナ11〜14を設置する間隔や高さは任意である。   As the first to fourth antennas 11 to 14, a non-directional antenna such as a vertical antenna or a dipole antenna, an antenna having an arbitrary directivity, or the like is used, and receives radio waves from various directions. The interval and height at which these first to fourth antennas 11 to 14 are installed are arbitrary.

第1アンテナ11は、空中からの複数の入射信号(電波)X1〜X4を受信し、これらが混合された混合信号を第1帯域制限ろ波装置F1に送る。同様に、第2〜第4アンテナ12〜14は、空中からの複数の入射信号X1〜X4を受信し、これらが混合された混合信号を第2〜第4帯域制限ろ波装置F2〜F4にそれぞれ送る。   The first antenna 11 receives a plurality of incident signals (radio waves) X1 to X4 from the air, and sends a mixed signal in which these signals are mixed to the first band-limited filtering device F1. Similarly, the second to fourth antennas 12 to 14 receive a plurality of incident signals X1 to X4 from the air, and the mixed signals obtained by mixing these signals are sent to the second to fourth band-limited filtering devices F2 to F4. Send each one.

第1帯域制限ろ波装置F1は、第1アンテナ11からの混合信号に含まれる所定帯域の周波数成分のみを通過させてサンプリング処理部100に送る。同様に、第2〜第4帯域制限ろ波装置F2〜F4は、第2〜第4アンテナ12〜14からの混合信号に含まれる所定帯域の周波数成分のみをそれぞれ通過させてサンプリング処理部100に送る。なお、各第1〜第4帯域制限ろ波装置F1〜F4が通過させる周波数帯域は同じである。   The first band-limited filtering device F <b> 1 passes only the frequency components in the predetermined band included in the mixed signal from the first antenna 11, and sends them to the sampling processing unit 100. Similarly, the second to fourth band-limited filtering devices F2 to F4 pass only frequency components in a predetermined band included in the mixed signals from the second to fourth antennas 12 to 14 to the sampling processing unit 100, respectively. send. In addition, the frequency band which each 1st-4th band limitation filter apparatus F1-F4 passes is the same.

図2は、図1の独立成分分析部200を概略的に示す模式図である。図2においてサンプリング処理部100は、連続するサンプリング期間ごとに第1〜第4帯域制限ろ波装置F1〜F4の出力をサンプリングし、入力信号Xa,…,Xjを得る。各入力信号Xa,…,Xjは、それぞれサンプリング期間Δt1,Δt2,…,Δtiにおいて取得される。これらの入力信号Xa,…,Xjは混合信号連結処理部300に入力され、連結されて連続信号が出力される。   FIG. 2 is a schematic diagram schematically showing the independent component analysis unit 200 of FIG. In FIG. 2, the sampling processing unit 100 samples the outputs of the first to fourth band-limited filtering devices F1 to F4 for each successive sampling period, and obtains input signals Xa,. The input signals Xa,..., Xj are acquired in the sampling periods Δt1, Δt2,. These input signals Xa,..., Xj are input to the mixed signal connection processing unit 300 and connected to output a continuous signal.

次式(1)は、独立成分分析手法をモデル化して表現する式である。本実施形態では、ブラインド信号分離の手法により式(1)のS1,…,m(t)を算出する。 The following expression (1) is an expression expressing the independent component analysis method as a model. In the present embodiment, S 1,..., M (t) in Expression (1) is calculated by a blind signal separation method.

Figure 2006178314
Figure 2006178314

ところで、ブラインド信号分離で分離された信号X1,…,n(t)と原信号S1,…,m(t)との間には、一般に順序の入れ違いの任意性が生じる。以下ではこの任意性に対処し、分離された信号を適切な順序で連結するための手法につき説明する。なおサンプリング処理部100のサンプリング間隔は、各センサに到達する混合信号の到達の時間差の影響の無い値とする。 By the way, in general, there is an arbitrary order of randomness between the signals X1 , ..., n (t) separated by the blind signal separation and the original signals S1 , ..., m (t). In the following, a technique for dealing with this arbitraryness and concatenating the separated signals in an appropriate order will be described. The sampling interval of the sampling processing unit 100 is a value that is not affected by the time difference of arrival of the mixed signal that reaches each sensor.

図3は、図1の独立成分分析部200の第1の実施形態をより詳細に示す機能ブロック図である。図3において、時間的に連続する2つのサンプリング期間Δt1、Δt2ごとに入力信号がサンプリングされ、それぞれ入力信号Xa(Xa,…,Xa),Xb(Xb,…,Xb)が得られる。各入力信号ごとにそれぞれ分離・抽出処理が実施され、信号分離出力XA(XA,…,XA),XB(XB,…,XB)が得られる。 FIG. 3 is a functional block diagram showing in more detail the first embodiment of the independent component analysis unit 200 of FIG. In FIG. 3, the input signal is sampled every two sampling periods Δt1 and Δt2 that are continuous in time, and input signals Xa (Xa 1 ,..., Xa i ) and Xb (Xb 1 ,..., Xb i ) are obtained, respectively. It is done. Separation / extraction processing is performed for each input signal, and signal separation outputs XA (XA 1 ,..., XA i ), XB (XB 1 ,..., XB i ) are obtained.

本実施形態では、さらにΔt1+Δt2に相当する期間、すなわち2つのサンプリング期間を連結した期間における信号分離出力XC(XC,…,XC)を生成する。そしてXCを、期間△t1に相当する成分(XA’)と、△t2に相当する成分(XB’)とに分割する。そして(XA,…,XA)の各成分と、(XB,…,XB)の各成分との連結すべき組み合わせを、XAとXA’との相関値、およびXBとXB’との相関値に基づいて算出する。 In the present embodiment, signal separation outputs XC (XC 1 ,..., XC i ) are generated in a period corresponding to Δt1 + Δt2, that is, a period in which two sampling periods are connected. XC is divided into a component (XA ′) corresponding to the period Δt1 and a component (XB ′) corresponding to Δt2. A combination to be connected to each component of (XA 1 ,..., XA i ) and each component of (XB 1 ,..., XB i ) is a correlation value between XA and XA ′, and XB and XB ′. It is calculated based on the correlation value.

組み合わせが算出されると、その結果に基づいて端子選択スイッチ500が制御され、相互相関値の大きい信号が入力される端子が相互に接続される。これによりXAとXBとが適切な組み合わせで連結され、従って△t1、△t2の時間で分離・抽出され互いに独立する連続信号を出力することが可能となる。   When the combination is calculated, the terminal selection switch 500 is controlled based on the result, and terminals to which signals having a large cross-correlation value are input are connected to each other. As a result, XA and XB are connected in an appropriate combination. Therefore, it is possible to output continuous signals that are separated and extracted at the times of Δt1 and Δt2 and independent of each other.

サンプリング期間が長くなると、入射信号間に若干の相関性が生じる場合がある。この状態でブラインド信号分離で分離・抽出した場合、信号間の分離が充分でなく他の入射信号の成分が分離されず混合された状態となる場合がある。これは、長時間の信号や連続信号を分離抽出する場合に問題となる。一般にサンプリング期間が短くなるほど相関性が小さくなるため、互いに独立した信号を分離・抽出しやすい。   As the sampling period becomes longer, there may be some correlation between the incident signals. When separation / extraction is performed by blind signal separation in this state, separation between signals may not be sufficient, and other incident signal components may be mixed without being separated. This becomes a problem when a long-time signal or a continuous signal is separated and extracted. In general, the shorter the sampling period is, the smaller the correlation is, so that it is easy to separate and extract independent signals.

そこで本実施形態では、図2に示すように一定間隔の信号を短い任意の時間間隔信号Δt1,Δt2,…,Δtiに分割し、一定間隔の信号との周波数分析の結果、相関値あるいは、高次統計量を使用して算出する混合信号連結手段により信号の順序の入れ違いを無くし、連続信号を分離抽出することが可能となる。   Therefore, in the present embodiment, as shown in FIG. 2, a signal with a constant interval is divided into short arbitrary time interval signals Δt1, Δt2,..., Δti, and as a result of frequency analysis with the signal with a constant interval, a correlation value or a high value is obtained. The mixed signal linking means calculated using the next statistic eliminates the mistake in the order of the signals, and the continuous signals can be separated and extracted.

つまり本実施形態では、連続する2つのサンプリング期間においてそれぞれ分離・抽出された信号を連結するために、各サンプリング期間を合わせた期間における分離・抽出の結果を用いるようにしている。サンプリング期間ごとに分離・抽出された信号の分離度は高いが、順序の任意性が残る。逆に、各サンプリング期間を合わせた期間において分離・抽出された信号は、分離度は緩いが順序の任意性を考慮する必要が無い。そこで、両者の相関性を算出して相関値の高い組み合わせで連結することにより、原信号を連続的かつ忠実に再生することが可能となる。   That is, in the present embodiment, in order to connect the signals separated and extracted in two consecutive sampling periods, the results of separation and extraction in the combined period of each sampling period are used. Although the degree of separation of the signals separated and extracted for each sampling period is high, the arbitraryness of the order remains. On the contrary, the signals separated and extracted in the combined period of each sampling period have a low degree of separation but do not need to consider the arbitraryness of the order. Therefore, by calculating the correlation between the two and connecting them with a combination having a high correlation value, the original signal can be reproduced continuously and faithfully.

[第2の実施形態]
図4は、図1の独立成分分析部200の第2の実施形態をより詳細に示す機能ブロック図である。図4においては、サンプリング期間Δt1、Δt2ごとに分離・抽出した信号分離出力XA(XA,…,XA),XB(XB,…,XB)の周波数を相互に比較し、端子選択スイッチ500において周波数が同一となる端子を選択することにより、連結すべきXAとXBとの組合わせを求める。このようにしても原信号を連続的かつ忠実に再生することが可能となる。
[Second Embodiment]
FIG. 4 is a functional block diagram showing the second embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. In FIG. 4, the frequency of the signal separation outputs XA (XA 1 ,..., XA i ) and XB (XB 1 ,..., XB i ) separated and extracted for each sampling period Δt 1 and Δt 2 is compared with each other to select a terminal. By selecting terminals having the same frequency in the switch 500, a combination of XA and XB to be connected is obtained. In this way, the original signal can be reproduced continuously and faithfully.

[第3の実施形態]
図5は、図1の独立成分分析部200の第3の実施形態をより詳細に示す機能ブロック図である。図5においては、期間(Δt1+Δt2)における信号分離出力(XA+XB)と、サンプリング期間Δt1、Δt2ごとに分離・抽出した信号分離出力XA,XBとの周波数を相互に比較し、端子選択スイッチ500において周波数が同一となる端子を選択することにより、連結すべきXAとXBとの組合わせを求める。このようにしても原信号を連続的かつ忠実に再生することが可能となる。
[Third Embodiment]
FIG. 5 is a functional block diagram illustrating the third embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. In FIG. 5, the frequency of the signal separation output (XA + XB) in the period (Δt1 + Δt2) and the signal separation outputs XA and XB separated and extracted for each of the sampling periods Δt1 and Δt2 are compared with each other. By selecting the terminals with the same X, the combination of XA and XB to be connected is obtained. In this way, the original signal can be reproduced continuously and faithfully.

[第4の実施形態]
図6は、図1の独立成分分析部200の第4の実施形態をより詳細に示す機能ブロック図である。図6においては、期間(Δt1+Δt2)における信号分離出力(XA+XB:すなわちXC)と、サンプリング期間Δt1、Δt2ごとに分離・抽出した信号分離出力XA,XBとの4次統計量(4次のキュムラントと称する)を算出する。そして、その結果に基づいて端子選択スイッチ500において独立でない端子を選択することにより、連結すべきXAとXBとの組合わせを求める。このようにしても原信号を連続的かつ忠実に再生することが可能となる。
[Fourth Embodiment]
FIG. 6 is a functional block diagram illustrating the fourth embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. In FIG. 6, the fourth-order statistics (fourth-order cumulants and fourth-order cumulants) of the signal separation output (XA + XB: XC) in the period (Δt1 + Δt2) and the signal separation outputs XA and XB separated and extracted for each of the sampling periods Δt1 and Δt2. Calculated). Based on the result, the terminal selection switch 500 selects a non-independent terminal to obtain a combination of XA and XB to be connected. In this way, the original signal can be reproduced continuously and faithfully.

[第5の実施形態]
図7は、図1の独立成分分析部200の第5の実施形態をより詳細に示す機能ブロック図である。図7においてはマトリクススイッチ600により、XAとXBとの組合わせを予め全て用意する。そして、これらの組と、XCiとの相関値を算出し、その値に基づいて端子選択スイッチ500を制御することにより、連結すべきXAとXBとの組合わせを選択するようにする。このようにしても原信号を連続的かつ忠実に再生することが可能となる。
[Fifth Embodiment]
FIG. 7 is a functional block diagram illustrating the fifth embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. In FIG. 7, the matrix switch 600 prepares all combinations of XA and XB in advance. Then, a correlation value between these sets and XCi is calculated, and the terminal selection switch 500 is controlled based on the calculated value to select a combination of XA and XB to be connected. In this way, the original signal can be reproduced continuously and faithfully.

[第6の実施形態]
図8は、図1の独立成分分析部200の第6の実施形態をより詳細に示す機能ブロック図である。図8においても、マトリクススイッチ600によりXAとXBとの組合わせを予め全て用意する。そして、これらの組のうち周波数が単一になる組み合わせを端子選択スイッチ500により選択するようにする。このようにしても原信号を連続的かつ忠実に再生することが可能となる。
[Sixth Embodiment]
FIG. 8 is a functional block diagram showing the sixth embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. Also in FIG. 8, all combinations of XA and XB are prepared in advance by the matrix switch 600. Then, a combination having a single frequency among these sets is selected by the terminal selection switch 500. In this way, the original signal can be reproduced continuously and faithfully.

[第7の実施形態]
図9は、図1の独立成分分析部200の第7の実施形態をより詳細に示す機能ブロック図である。図9においても、期間(Δt1+Δt2)における信号分離出力XCを求める。また、マトリクススイッチ600によりXAとXBとの組合わせを予め全て用意する。そして、これらの組合わせとXCとの4次統計量を算出し、その結果に基づいて端子選択スイッチ500において独立でない端子を選択するようにする。このようにしてもXAとXBとの組合わせの最適解を求めることができ、原信号を連続的かつ忠実に再生することが可能となる。
[Seventh Embodiment]
FIG. 9 is a functional block diagram showing the seventh embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. Also in FIG. 9, the signal separation output XC in the period (Δt1 + Δt2) is obtained. Further, all combinations of XA and XB are prepared in advance by the matrix switch 600. Then, a quaternary statistic of these combinations and XC is calculated, and a terminal that is not independent is selected in the terminal selection switch 500 based on the result. Even in this way, the optimum solution of the combination of XA and XB can be obtained, and the original signal can be reproduced continuously and faithfully.

[第8の実施形態]
図10は、図1の独立成分分析部200の第8の実施形態をより詳細に示す機能ブロック図である。図10においては、信号分離出力XAiとXBiとを、全ての組合わせにわたって混合(ミキシングまたは乗算)する。そして、混同した結果をすべてFFT(Fast Fourier Transform)処理して周波数分析し、そのうちベースバンド成分およびXA(またはXB)の2倍の高調波成分のスペクトラムを検出する。
[Eighth Embodiment]
FIG. 10 is a functional block diagram showing the eighth embodiment of the independent component analyzer 200 of FIG. 1 in more detail. In FIG. 10, the signal separation outputs XAi and XBi are mixed (mixed or multiplied) over all combinations. All the mixed results are subjected to FFT (Fast Fourier Transform) processing and frequency analysis, and the spectrum of the baseband component and twice the harmonic component of XA (or XB) is detected.

XAiとXBiとを混合(ミキシングまたは乗算)した場合、XAiとXBiの周波数成分が同一の場合は、2倍の高調波成分のスペクトラムが最大となる。成分が異なる場合は、値が小さくなる。このことを利用し、スペクトラムが最大になる組み合わせを端子選択スイッチ500により選択することで、XAとXBとの組合わせの最適解を求めるようにする。このようにしても、原信号を連続的かつ忠実に再生することが可能となる。   When XAi and XBi are mixed (mixed or multiplied), when the frequency components of XAi and XBi are the same, the spectrum of the doubled harmonic component is maximized. If the components are different, the value will be smaller. By utilizing this fact, an optimum solution of the combination of XA and XB is obtained by selecting the combination that maximizes the spectrum by the terminal selection switch 500. Even in this way, the original signal can be reproduced continuously and faithfully.

[第9の実施形態]
図11は、図1の独立成分分析部200の第9の実施形態をより詳細に示す機能ブロック図である。図11においては、マトリクススイッチ600によりXAとXBとの組合わせを予め全て用意し、全ての組み合わせの信号成分を連接する。この連接信号とXCとを混合(ミキシングまたは乗算)し、FFT処理する。そして、第8の実施形態と同様に、スペクトラムが最大になる組み合わせを端子選択スイッチ500により選択することで、XAとXBとの組合わせの最適解を求めるようにする。このようにしても、原信号を連続的かつ忠実に再生することが可能となる。
[Ninth Embodiment]
FIG. 11 is a functional block diagram illustrating the ninth embodiment of the independent component analysis unit 200 of FIG. 1 in more detail. In FIG. 11, all combinations of XA and XB are prepared in advance by the matrix switch 600, and the signal components of all combinations are connected. This concatenated signal and XC are mixed (mixed or multiplied) and subjected to FFT processing. Then, as in the eighth embodiment, an optimum solution for the combination of XA and XB is obtained by selecting the combination having the maximum spectrum by the terminal selection switch 500. Even in this way, the original signal can be reproduced continuously and faithfully.

[第10の実施形態]
図12は、図1の独立成分分析部200の第10の実施形態をより詳細に示す機能ブロック図である。図12においては、Δt1間の入力信号Xa、Δt2間の入力信号Xbの信号分離出力XA,XBと、(Δt1+Δt2)における信号分離出力XCの△t1、△t2成分XA’,XB’とを、それぞれ混合(ミキシングまたは乗算)する。その混合成分にFFT(周波数分析)処理を施し、第8および第9実施形態と同様に、スペクトラムが最大になる組み合わせを端子選択スイッチ500により選択することで、XAとXBとの組合わせの最適解を求めるようにする。このようにしても、原信号を連続的かつ忠実に再生することが可能となる。
[Tenth embodiment]
FIG. 12 is a functional block diagram showing in more detail the tenth embodiment of the independent component analysis unit 200 of FIG. In FIG. 12, the signal separation outputs XA and XB of the input signal Xa between Δt1 and the input signal Xb between Δt2 and Δt1 and Δt2 components XA ′ and XB ′ of the signal separation output XC at (Δt1 + Δt2) Mix (mix or multiply) each. The mixture component is subjected to FFT (frequency analysis) processing, and the combination of XA and XB is optimized by selecting the combination that maximizes the spectrum by the terminal selection switch 500, as in the eighth and ninth embodiments. Try to find a solution. Even in this way, the original signal can be reproduced continuously and faithfully.

なお本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。   Note that the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the components without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.

本発明に係わる混合信号分離・抽出装置の実施の形態を示す機能ブロック図。The functional block diagram which shows embodiment of the mixed signal separation / extraction apparatus concerning this invention. 図1の独立成分分析部200を概略的に示す模式図。The schematic diagram which shows the independent component analysis part 200 of FIG. 1 roughly. 図1の独立成分分析部200の第1の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 1st Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第2の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 2nd Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第3の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 3rd Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第4の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 4th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第5の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 5th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第6の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 6th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第7の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 7th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第8の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 8th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第9の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 9th Embodiment of the independent component analysis part 200 of FIG. 1 in detail. 図1の独立成分分析部200の第10の実施形態をより詳細に示す機能ブロック図。The functional block diagram which shows 10th Embodiment of the independent component analysis part 200 of FIG. 1 in detail.

符号の説明Explanation of symbols

F1〜F4…帯域制限ろ波装置、11〜14…アンテナ、100…サンプリング処理部、200…独立成分分析部、300…混合信号連結処理部、400…出力処理部、500…端子選択スイッチ、600…マトリクススイッチ   F1 to F4: Band-limited filtering device, 11-14: Antenna, 100 ... Sampling processing unit, 200 ... Independent component analysis unit, 300 ... Mixed signal connection processing unit, 400 ... Output processing unit, 500 ... Terminal selection switch, 600 ... Matrix switch

Claims (10)

複数の原信号を含む混合信号をそれぞれ受信する複数のセンサと、この複数のセンサごとの受信信号から独立成分分析により前記原信号を分離・抽出する独立成分分析部とを具備する混合信号分離・抽出装置において、
前記独立成分分析部は、
連続するサンプリング期間ごとに前記複数のセンサごとの受信信号をサンプリングしてサンプルデータを取得するサンプリング手段と、
前記サンプルデータを用いた独立成分分析により前記サンプリング期間ごとに複数の原信号データを生成する分離手段と、
連続する2つのサンプリング期間のうち先行する第1サンプリング期間において生成された複数の第1原信号データと、前記第1サンプリング期間に続く第2サンプリング期間において生成された複数の第2原信号データとの、相互に連結すべき組み合わせを算出する算出手段と、
この算出手段により算出された組み合わせで前記複数の第1原信号データの各々を前記複数の第2原信号データのいずれかに連結して、連続する原信号を再生する連結手段とを備えることを特徴とする混合信号分離・抽出装置。
A mixed signal separation unit comprising: a plurality of sensors that respectively receive mixed signals including a plurality of original signals; and an independent component analysis unit that separates and extracts the original signals from the received signals of the plurality of sensors by independent component analysis. In the extraction device,
The independent component analyzer is
Sampling means for sampling the received signals for each of the plurality of sensors for each successive sampling period to obtain sample data;
Separation means for generating a plurality of original signal data for each sampling period by independent component analysis using the sample data;
A plurality of first original signal data generated in a preceding first sampling period of two consecutive sampling periods; a plurality of second original signal data generated in a second sampling period following the first sampling period; Calculating means for calculating a combination to be connected to each other;
Connecting means for connecting each of the plurality of first original signal data to any one of the plurality of second original signal data in a combination calculated by the calculating means, and reproducing a continuous original signal. A mixed signal separator / extractor.
前記算出手段は、前記複数の第1および第2原信号データの互いの相関性に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。 2. The mixed signal separating / extracting apparatus according to claim 1, wherein the calculating unit calculates the combination based on a correlation between the plurality of first and second original signal data. 前記算出手段は、前記複数の第1および第2原信号データの互いの周波数に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。 2. The mixed signal separating / extracting apparatus according to claim 1, wherein the calculating unit calculates the combination based on a frequency of the plurality of first and second original signal data. 前記算出手段は、前記複数の第1および第2原信号データから算出される4次統計量の値に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。 2. The mixed signal separation / extraction according to claim 1, wherein the calculation unit calculates the combination based on a value of a fourth-order statistic calculated from the plurality of first and second original signal data. apparatus. 前記算出手段は、前記複数の第1および第2原信号データの互いの混合成分における2倍高調波成分のスペクトラムに基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。 2. The mixed signal according to claim 1, wherein the calculation unit calculates the combination based on a spectrum of a second harmonic component in a mixed component of the plurality of first and second original signal data. Separation / extraction equipment. 前記サンプリング手段は、前記第1および第2サンプリング期間を連結した連結期間における前記複数のセンサごとの受信信号をサンプリングして長期間サンプルデータを取得し、
前記分離手段は、前記長期間サンプルデータを用いた独立成分分析により前記連結期間における複数の第3原信号データを生成し、
前記算出手段は、前記複数の第1および第2原信号データと前記第3原信号データとの互いの相関値を算出し、その結果に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。
The sampling means samples the received signals for each of the plurality of sensors in a connected period obtained by connecting the first and second sampling periods, and acquires long-term sample data.
The separation means generates a plurality of third original signal data in the connected period by independent component analysis using the long-term sample data,
The calculation means calculates a correlation value between the plurality of first and second original signal data and the third original signal data, and calculates the combination based on the result. 2. The mixed signal separating / extracting device according to 1.
前記サンプリング手段は、前記第1および第2サンプリング期間を連結した連結期間における前記複数のセンサごとの受信信号をサンプリングして長期間サンプルデータを取得し、
前記分離手段は、前記長期間サンプルデータを用いた独立成分分析により前記連結期間における複数の第3原信号データを生成し、
前記算出手段は、前記複数の第1および第2原信号データと前記第3原信号データとの互いの周波数を比較し、その結果に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。
The sampling means samples the received signals for each of the plurality of sensors in a connected period obtained by connecting the first and second sampling periods, and acquires long-term sample data.
The separation means generates a plurality of third original signal data in the connected period by independent component analysis using the long-term sample data,
2. The calculation unit compares the frequencies of the plurality of first and second original signal data and the third original signal data, and calculates the combination based on the result. The mixed signal separating / extracting device described in 1.
前記サンプリング手段は、前記第1および第2サンプリング期間を連結した連結期間における前記複数のセンサごとの受信信号をサンプリングして長期間サンプルデータを取得し、
前記分離手段は、前記長期間サンプルデータを用いた独立成分分析により前記連結期間における複数の第3原信号データを生成し、
前記算出手段は、前記複数の第1および第2原信号データと前記第3原信号データとの4次統計量を算出し、その結果に基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。
The sampling means samples the received signals for each of the plurality of sensors in a connected period obtained by connecting the first and second sampling periods, and acquires long-term sample data.
The separation means generates a plurality of third original signal data in the connected period by independent component analysis using the long-term sample data,
The calculation means calculates a fourth-order statistic of the plurality of first and second original signal data and the third original signal data, and calculates the combination based on the result. 2. The mixed signal separating / extracting device according to 1.
前記サンプリング手段は、前記第1および第2サンプリング期間を連結した連結期間における前記複数のセンサごとの受信信号をサンプリングして長期間サンプルデータを取得し、
前記分離手段は、前記長期間サンプルデータを用いた独立成分分析により前記連結期間における複数の第3原信号データを生成し、
前記算出手段は、前記複数の第1および第2原信号データと前記第3原信号データとの混合成分における2倍高調波成分のスペクトラムに基づいて前記組み合わせを算出することを特徴とする請求項1に記載の混合信号分離・抽出装置。
The sampling means samples the received signals for each of the plurality of sensors in a connected period obtained by connecting the first and second sampling periods, and acquires long-term sample data.
The separation means generates a plurality of third original signal data in the connected period by independent component analysis using the long-term sample data,
The calculation means calculates the combination based on a spectrum of a second harmonic component in a mixed component of the plurality of first and second original signal data and the third original signal data. 2. The mixed signal separating / extracting device according to 1.
前記算出手段は、前記複数の第1原信号データと前記複数の第2原信号データとの全ての組み合わせを生成し、これらの組み合わせのそれぞれに含まれる第1および第2原信号データの互いの相関性から前記相互に連結すべき組み合わせを抽出することを特徴とする請求項2乃至9のいずれか1に記載の混合信号分離・抽出装置。 The calculation means generates all combinations of the plurality of first original signal data and the plurality of second original signal data, and the first and second original signal data included in each of the combinations are mutually 10. The mixed signal separating / extracting apparatus according to claim 2, wherein the combinations to be connected to each other are extracted from the correlation.
JP2004373580A 2004-12-24 2004-12-24 Mixed signal separation and extraction device Active JP4237699B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004373580A JP4237699B2 (en) 2004-12-24 2004-12-24 Mixed signal separation and extraction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004373580A JP4237699B2 (en) 2004-12-24 2004-12-24 Mixed signal separation and extraction device

Publications (2)

Publication Number Publication Date
JP2006178314A true JP2006178314A (en) 2006-07-06
JP4237699B2 JP4237699B2 (en) 2009-03-11

Family

ID=36732473

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004373580A Active JP4237699B2 (en) 2004-12-24 2004-12-24 Mixed signal separation and extraction device

Country Status (1)

Country Link
JP (1) JP4237699B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008039693A (en) * 2006-08-09 2008-02-21 Toshiba Corp Direction finding system and signal extraction method
JP2009053088A (en) * 2007-08-28 2009-03-12 Mitsubishi Electric Corp Signal separation device
WO2009113192A1 (en) * 2008-03-11 2009-09-17 トヨタ自動車株式会社 Signal separating apparatus and signal separating method
JP2010020169A (en) * 2008-07-11 2010-01-28 Toshiba Corp Receiver and waveform processing method
JP2010112994A (en) * 2008-11-04 2010-05-20 Sony Corp Voice processing device, voice processing method and program
JP2010112995A (en) * 2008-11-04 2010-05-20 Sony Corp Call voice processing device, call voice processing method and program
JP2010112996A (en) * 2008-11-04 2010-05-20 Sony Corp Voice processing device, voice processing method and program

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008039693A (en) * 2006-08-09 2008-02-21 Toshiba Corp Direction finding system and signal extraction method
JP2009053088A (en) * 2007-08-28 2009-03-12 Mitsubishi Electric Corp Signal separation device
WO2009113192A1 (en) * 2008-03-11 2009-09-17 トヨタ自動車株式会社 Signal separating apparatus and signal separating method
US8452592B2 (en) 2008-03-11 2013-05-28 Toyota Jidosha Kabushiki Kaisha Signal separating apparatus and signal separating method
JP2010020169A (en) * 2008-07-11 2010-01-28 Toshiba Corp Receiver and waveform processing method
JP2010112994A (en) * 2008-11-04 2010-05-20 Sony Corp Voice processing device, voice processing method and program
JP2010112995A (en) * 2008-11-04 2010-05-20 Sony Corp Call voice processing device, call voice processing method and program
JP2010112996A (en) * 2008-11-04 2010-05-20 Sony Corp Voice processing device, voice processing method and program
US8818805B2 (en) 2008-11-04 2014-08-26 Sony Corporation Sound processing apparatus, sound processing method and program
US8996367B2 (en) 2008-11-04 2015-03-31 Sony Corporation Sound processing apparatus, sound processing method and program

Also Published As

Publication number Publication date
JP4237699B2 (en) 2009-03-11

Similar Documents

Publication Publication Date Title
JP4649437B2 (en) Signal separation and extraction device
TW201128981A (en) Method and apparatus for testing multiple data signal transceivers substantially simultaneously with common transceiver tester
JP4237699B2 (en) Mixed signal separation and extraction device
Hanna et al. Wisig: A large-scale wifi signal dataset for receiver and channel agnostic rf fingerprinting
EP1639816A1 (en) Method and apparatus for testing lip-sync of digital television receiver
CN102630385A (en) Audio zooming process within an audio scene
CN103167260B (en) The sending, receiving method of voice data and device
RU2012134496A (en) APPLICATION OF MULTI-CHANNEL DECORRELATION FOR THE IMPROVED MULTI-CHANNEL UPGRADING MIXING
EP1953562A1 (en) VOR monitoring receiving apparatus and VOR monitor receiving method
KR101921095B1 (en) Wide-band digital receiving apparatus using double compressive sensing
JP5605575B2 (en) Multi-channel acoustic signal processing method, system and program thereof
JP4313522B2 (en) Lip sync control device
JP2014120839A (en) Microphone array device
CN114356843B (en) Chip internal signal processing method and chip
JP5750429B2 (en) Mobile communication terminal test apparatus and mobile communication terminal test method
US20190116074A1 (en) Method of processing compressive sensing signal and apparatus for same
JP2005283276A (en) Radar signal identification apparatus
JP2014138252A (en) Pulse train separation apparatus, pulse train separation method and program
US9507017B2 (en) Simultaneous multi-frequency signal processing method
JP4772627B2 (en) Mixed signal separation and extraction device
CN113488068A (en) Audio anomaly detection method and device and computer-readable storage medium
KR101069629B1 (en) Apparatus and Method for Control of Ion Cyclotron Resonance mass spectrometer
Turqueti et al. Real-time independent component analysis implementation and applications
JP2005311602A (en) Signal extraction device and signal extraction method
CN111863041B (en) Sound signal processing method, device and equipment

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070313

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080909

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081110

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20081117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081216

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081218

R150 Certificate of patent or registration of utility model

Ref document number: 4237699

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111226

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121226

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131226

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250