JP3111933B2 - 生体内ダイポール推定精度評価装置 - Google Patents

生体内ダイポール推定精度評価装置

Info

Publication number
JP3111933B2
JP3111933B2 JP09197126A JP19712697A JP3111933B2 JP 3111933 B2 JP3111933 B2 JP 3111933B2 JP 09197126 A JP09197126 A JP 09197126A JP 19712697 A JP19712697 A JP 19712697A JP 3111933 B2 JP3111933 B2 JP 3111933B2
Authority
JP
Japan
Prior art keywords
dipole
plane
value
analysis means
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP09197126A
Other languages
English (en)
Other versions
JPH1133008A (ja
Inventor
敏正 山崎
憲一 上條
聡久 剣持
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP09197126A priority Critical patent/JP3111933B2/ja
Publication of JPH1133008A publication Critical patent/JPH1133008A/ja
Application granted granted Critical
Publication of JP3111933B2 publication Critical patent/JP3111933B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、生体内組織、特
に、脳内の活動部位をダイポールとして推定した際に、
その推定精度を定量的に評価する装置に関する。
【0002】
【従来の技術】従来から、頭皮上の複数点で計測された
電磁場分布から脳内の活動部位を推定する場合、得られ
た推定結果の精度を評価する方法として、以下のような
方法が知られていた。頭皮上電磁場分布の計測値と理論
値の差の二乗をすべての観測点について総和を取り、そ
の総和を計測値の二乗和で除すことによって得られる正
規化二乗誤差を使って推定精度を評価していた。
【0003】
【発明が解決しようとする課題】しかしながら、上述し
た生体内ダイポール推定精度評価装置では、モデルの適
合度を与えるだけで、その信頼性までは評価できない。
例えば、深部に推定されたダイポールに対しては、特
に、信頼性が問題になるが、正規化二乗誤差ではその信
頼性を定量的に評価することができない。更に、複数の
ダイポールを推定する場合には、ダイポール間の距離が
いくら短くても、それらを1つのダイポールと見倣すべ
きかどうかの判断材料を定量的に与えることができなか
った。
【0004】本発明の目的は、上述の課題を解決するた
めのものであり、順問題の解を与える式を利用して、推
定されたダイポールの統計的な信頼領域を計算する。利
用する順問題の解が特殊な形をしているので、信頼領域
の計算が非常に簡単であり、ダイポールが推定されると
即座にその信頼領域の算出を可能とする生体内ダイポー
ル推定精度評価装置を提供することである。
【0005】
【課題を解決するための手段】本発明の生体内ダイポー
ル推定精度評価装置は、生体内組織、特に、脳内の活動
部位をダイポールとして推定した際に、活動部位の推定
精度を評価する生体内ダイポール推定精度評価装置にお
いて、ダイポールが作る頭皮上の電位分布を、3次元直
交座標系(x、y、z)のx−z平面上にダイポールが
位置し、始点がz軸上にある場合の電位値として計算す
るx−z平面ダイポール順問題解析手段と、x−z平面
ダイポール順問題解析手段により求められた電位分布の
理論値と頭皮上で実際に観測された計測値の差の二乗和
が最小となる、ダイポールの位置とモーメントを推定す
るx−z平面ダイポール逆問題解析手段と、x−z平面
ダイポール順問題解析手段で利用された計算式を使っ
て、電位値の、ダイポールの位置パラメータの動径成分
に関する1階偏微分を求め、微分された式にx−z平面
ダイポール逆問題解析手段で得られたダイポールパラメ
ータの最適値を代入し、微分した式の値を各電極位置に
ついて求めるx−z平面ダイポールJacobian行
列算出手段と、x−z平面ダイポールJacobian
行列算出手段により得られた行列成分を電極位置に関し
て総和を取り、推定されたダイポールの数を次元とする
正方行列を算出し、正方行列に固有値分解を施すx−z
平面ダイポールJacobian行列積固有値分解解析
手段と、x−z平面ダイポールJacobian行列積
固有値分解解析手段で得られた固有値と固有ベクトル、
及びχ 2 分布の95%あるいは99%点の値を使って、
推定されたダイポールパラメータの信頼領域を与える楕
円体を構成するダイポールパラメータ信頼領域楕円体構
成手段と、x−z平面ダイポールJacobian行列
積固有値分解解析手段で得られた固有値と固有ベクト
ル、及びχ 2 分布の95%あるいは99%点の値を使っ
て、推定されたダイポールパラメータの信頼限界を算出
するダイポールパラメータ信頼限界算出手段と、を有す
ることを特徴とする。
【0006】
【0007】
【0008】
【0009】
【0010】
【0011】
【0012】本発明の基本原理は、順問題の解を与える
式のダイポールパラメータに関する1階偏微分に基づい
て、推定されたダイポールの統計的な信頼領域を計算す
ることにある。順問題の解法にはx−z平面に位置する
ダイポールを利用するので、各ダイポールについて信頼
領域を計算する場合、その推定精度が最も重要となる動
径成分のみに関する1階偏微分だけを計算すれば良いの
で、計算が非常に簡単であり、複数及び深部に推定され
たダイポールの信頼性を定量的にしかも即座に評価する
ことができる。
【0013】
【発明の実施の形態】本発明の生体内ダイポール推定精
度評価装置の一実施例を図1に示す。同図に示すよう
に、本発明の生体内ダイポール推定精度評価装置は、脳
電位データを得るために、頭皮上に装着される複数個の
脳波センサ(電極)10と、ダイポールが作る頭皮上の
電位分布を、3次元直交座標系(x、y、z)のx−z
平面上にそのダイポールが位置し、始点がz軸上にある
ような場合の電位値として計算するx−z平面ダイポー
ル順問題解析部11と、x−z平面ダイポール順問題解
析部11で求まった電位分布の理論値と頭皮上で実際に
観測された計測値の差の二乗和が最小となるように、ダ
イポールの位置とモーメントを推定するx−z平面ダイ
ポール逆問題解析部12と、x−z平面ダイポール順問
題解析部11で利用された計算式を使って、電位値の、
ダイポールの位置パラメータ、特に動径成分に関する1
階偏微分を求め、微分された式にx−z平面ダイポール
逆問題解析部12で得られたダイポールパラメータの最
適値を代入し、微分した式の値を各電極位置について求
めるx−z平面ダイポールJacobian行列算出部13と、
x−z平面ダイポールJacobian行列算出部13で得られ
た行列成分を電極位置に関して総和を取り、推定された
ダイポールの数を次元とする正方行列を算出し、その正
方行列に固有値分解を施すx−z平面ダイポールJacobi
an行列積固有値分解解析部14と、x−z平面ダイポー
ルJacobian行列積固有値分解解析部14で得られた固有
値と固有ベクトル、及びχ2 分布の95%あるいは99
%点の値を使って、推定されたダイポールパラメータの
信頼領域を与える楕円体を構成するダイポールパラメー
タ信頼領域楕円体構成部15と、x−z平面ダイポール
Jacobian行列積固有値分解解析部14で得られた固有値
と固有ベクトル、及びχ2 分布の95%あるいは99%
点の値を使って、推定されたダイポールパラメータの信
頼限界を算出するダイポールパラメータ信頼限界算出部
16を有している。
【0014】
【実施例】図1を用いて、本発明の実施例について説明
する。
【0015】尚、脳波計測については、電極10、例え
ば、Ag/AgCl皿電極を複数個頭皮上に装着したり、ある
いは、Electro-Cap (ECI社(米国)製)を被験者の
頭部にかぶせたりして、頭皮上の複数点で同時計測され
た脳電位を増幅する生体信号アンプ、例えば、NECメ
デイカルシステムズ(株)製 Biotop 6R-12、の構成に
より、脳波波形のアナログ信号が得られる。このアナロ
グ信号はA/D変換器、例えば、カノープス電子(株)
製A/Dコンバータボード ADXM-98A 、によってデジタ
ル信号に変換され、記憶媒体、例えば、日本電気(株)
製パーソナルコンピュータ PC-9821Xt内のハードディス
クに格納される。また、ダイポール推定に必要な電極位
置データは、生体の外表面に固定された磁場発生器とそ
の磁場を検知する磁気センサにより、簡単に計測するこ
とができる。
【0016】以下では、x−z平面ダイポール順問題解
析部11及びx−z平面ダイポール逆問題解析部12へ
入力されるデータとして、多チヤネル脳波データ10
1、電極位置データ102を仮定する。
【0017】頭皮上で観測された(脳)電位から脳内の
ダイポールを推定する生体内ダイポール推定装置とし
て、例えば、 NECメディカルシステムズ(株)製ダ
イポールソフト「Syna Point」(登録商標)を利用する
ことができる。
【0018】ダイポールを推定するためには、一般に、
頭皮上の電位分布の理論値を計算する「順問題」と、計
測値と理論値の差が最小になるようにダイポールパラメ
ータを最適化する「逆問題」を解かなければならない。
そこで、以下では、「順問題」の解法と「逆問題」の解
法に分けて説明する。
【0019】x−z平面ダイポール順問題解析部11、
例えば、日本電気(株)製パーソナルコンピュータ PC-
9821Xtは、電極位置データ102を利用して、以下のよ
うに順問題を解く。
【0020】順問題の解は、頭部モデルとして3層同心
球が仮定され、l 番目のダイポールの位置とモーメント
が、それぞれ、
【0021】
【数1】 で与えられる場合、即ち、ダイポールが3次元直交座標
系(x、y、z)のx−z平面内に位置し、その始点が
z軸上にある場合、極座標表現された電極位置(R、
θ、ψ)に作る電位φ
【0022】
【数2】 が利用される。但し、
【0023】
【数3】 とする。ここで、Pn (cosθ)とPn l(cosθ)
は、それぞれ、Legendre関数とLegendreの随伴関数であ
り、
【0024】
【数4】 である。但し、R、R1 、R2 は、それぞれ、頭皮、
脳、頭蓋骨の外側に相当する同心球の半径、σ1 は脳と
頭皮の導電率、σ2 は頭蓋骨の導電率とし、 f1 ≡R1 /R、f2 ≡R2 /R、ξ≡σ2 /σ1 (4) とした、尚、(x、y、z)と(R、θ、ψ)の関係及
びダイポールモデルは図2と、3層同心球の頭部モデル
(R、R1 、R2 、σ1 、σ2 の意味)は図3、をそれ
ぞれ参照することにより理解される。
【0025】x−z平面ダイポール逆問題解析部12、
例えば、日本電気(株)製パーソナルコンピュータ PC-
9821Xtは、前記x−z平面ダイポール順問題解析部11
で得られた脳電位の理論値と多チヤネル脳波データ10
1を利用して、以下の手順に従って逆問題を解く。
【0026】1.逆問題の解析は最適化問題に帰着され
る。最適化には繰り返し演算が伴うが、演算を開始する
ためには初期値が必要である。この初期値とは、正し
く、ダイポールの位置とモーメントであり、例えば、乱
数発生により、Nasion座標系(3次元直交座標
系)の中にダイポールを配置させる。
【0027】2.定位されたダイポールを、回転によ
り、x−z平面上に移動させる(ダイポールの始点はz
軸上)。
【0028】3.同じ回転により、各電極位置を移動さ
せる(電極位置データ102を変換させる)。移動した
電極位置における電位値を、前記x−z平面ダイポール
順問題解析部11を使って、計算する。
【0029】4.電位の理論値(計算値)φi (i=
1、・・・・、I)(Iは電極数)と計測値
【0030】
【数5】 の間の正規化二乗誤差
【0031】
【数6】 を計算する。
【0032】5.最初に設定した初期値を少しずらし、
上記の手順2〜4を行ない、正規化二乗誤差が最小とな
るまで、こうした手順を繰り返す。尚、パラメータ値を
ずらす方法として、例えば、Gauss-Newton法と最急降下
法を混合したPowellのhibrid法を利用することができ
る。
【0033】こうして推定されたダイポールパラメータ
の値(動径成分のみ)121をr0 *k(k=1、・・・、
L)とする。
【0034】次に、x−z平面ダイポールJacobian行列
算出部13、例えば、日本電気(株)製パーソナルコン
ピュータ PC-9821Xtは、x−z平面ダイポールに関する
Jacobian行列の成分を以下のようにして算出する。
【0035】順問題の解111が前記x−z平面ダイポ
ール順問題解析部11のように与えられ、評価すべき推
定精度をダイポールの位置に限定すると、(2)式から
明らかなように、変数と見倣せるダイポールパラメータ
はr0 のみであるから、得られる推定精度はダイポール
の動径方向のみに限ることができる、この時、(2)式
のダイポールパラメータに関する1階偏微分はr0 に関
する1階偏微分
【0036】
【数7】 のみに帰着され、しかも上式と順問題の解を与える式が
非常に類似している。即ち、上式と(2)式の右辺の無
限級数の各項は(n−1)/r0 だけが異なるのみであ
る。
【0037】こうして、推定されたダイポールパラメー
タにおけるx−z平面ダイポールに関するJacobian行列
の各成分の値131は、各軍極位置(Ri 、θi 、ψ
i )(i=1、・・・・、I)に対して、
【0038】
【数8】 で求まる。Ailは、I×L次の行列の成分を表している
ことになる。
【0039】次に、x−z平面ダイポールJacobian行列
積固有値分解解析部14、例えば、日本電気(株)製パ
ーソナルコンピュータ PC-9821Xtは、
【0040】
【数9】 で定義されるx−z平面ダイポールJacobian行列積Bkl
(k、l=1、2、・・、L)を算出し、その行列積に固
有値分解を施す。但し、Ailは前記x−z平面ダイポー
ルJacobian行列算出部13で得られた行列の成分、Lは
所定の時刻で同時推定されたダイポールの数である。ま
た、Bklは定義から明らかなようにL次の対称正方行列
となる。例えば、推定されたダイポールの数が4の場
合、行列積Bは
【0041】
【数10】 となる。
【0042】ここで、行列Bの固有値と対応する固有ベ
クトルを、それぞれ、 βk 、υk (k=1、・・・、L) とおく。但し、υk ≡(υk1 ,・・・,υkLT とする。
【0043】次に、ダイポールパラメータ信頼領域楕円
体構成部15、例えば、日本電気(株)製パーソナルコ
ンピュータ PC-9821Xtは、以下のようにして、推定され
たダイポールパラメータの信頼領域を算出する。
【0044】推定されたダイポールパラメータr0 *の信
頼領域は楕円体
【0045】
【数11】 によつて表現することができる。但し、[B]kl
kl、p2 は自由度Lのχ2分布の99(あるいは9
5)%点である。更に、前記x−z平面ダイポールJaco
bian行列積固有値分解解析部14で得られた行列Bの固
有値βk と対応する固有ベクトルυk 141を利用すれ
ば、
【0046】
【数12】 を得る。ここで、Gr0はr0 *を中心とするRL 内の楕円
体であり、その軸の半分はpβk -1υk (k=1、・・・、
L)となる。
【0047】更に、ダイポールパラメータ信頼限界算出
部16、例えば、日本電気(株)製パーソナルコンピュ
ータ PC-9821Xtは、前記x−z平面ダイポールJacobian
行列積固有値分解解析部14で得られた行列Bの固有値
βk と対応する固有ベクトルυk 142を利用して、真
のダイポールパラメータに対する信頼限界を以下のよう
にして算出する。
【0048】真のダイポールパラメータ
【0049】
【数13】 に対する99(あるいは95)%の信頼限界は
【0050】
【数14】 で与えられる、ここで、δk はGr0に接する
【0051】
【数15】 の最大値であり、
【0052】
【数16】 で求まる。但し、υk ≡(υk1 ,・・・,υkLT とする。
【0053】前記ダイポールパラメータ信頼限界算出部
16で得られた信頼限界を利用すると、図4のように得
られたダイポールの推定精度を視覚的に捉えることがで
きる。
【0054】
【発明の効果】本発明を用いることにより、ダイポール
の推定精度及び推定結果の信頼性を定量的に表現でき、
しかも視覚的に把握することができる。本発明の特長
は、順問題の解法にx−z平面内に位置するダイポール
を利用することにある。これにより、推定精度が最も問
題となるダイポール位置の動径成分に対する信頼領域及
び信頼限界の算出に演算を留めることができるので、デ
ータ解析が簡単でそれに要する時間も短縮できる。例え
ば、4つのダイポールの推定精度を調べる場合、本発明
では4次の正方行列の固有値分解だけで済むが、従来の
装置ではダイポールパラメータすべて(ダイポールの位
置に関して3つ、ダイポールのモーメントに関して3
つ)の信頼領域を計算するためには24(=4×6)次
の正方行列の固有値分解を行なわなければならず、本発
明ではデータ解析に要する時間が大幅に短縮できる。本
発明により、複数及び深部に推定されたダイポールの信
頼性を、定量的にしかも即座に評価することができる効
果がある。
【図面の簡単な説明】
【図1】本発明の一実施例を示す基本構成図。
【図2】3次元直交座標系(x、y、z)と対応する極
座標系(R、θ、ψ)の関係とダイポールモデルを例示
した図。
【図3】頭部の3層同心球モデルを例示した図。
【図4】推定された複数ダイポールの信頼限界を例示し
た図。
【符号の説明】
10 電極 11 x−z平面ダイポール順問題解析部 12 x−z平面ダイポール逆問題解析部 13 x−z平面ダイポールJacobian行列算出部 14 x−z平面ダイポールJacobian行列積固有値
分解解析部 15 ダイポールパラメータ信頼領域楕円体構成部 16 ダイポールパラメータ信頼限界算出部 101 多チヤネル脳波データ 102 電極位置データ 111 順問題の解を与える式に関するデータ 121 ダイポールパラメータの推定結果に関する
データ 131 Jacobian行列の成分に関するデータ 141 固有値と対応する固有ベクトルに関するデ
ータ 142 固有値と対応する固有ベクトルに関するデ
ータ
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平9−66038(JP,A) 特開 平8−126623(JP,A) 特開 平7−327945(JP,A) (58)調査した分野(Int.Cl.7,DB名) A61B 5/05 JICSTファイル(JOIS)

Claims (1)

    (57)【特許請求の範囲】
  1. 【請求項1】 生体内組織、特に、脳内の活動部位をダ
    イポールとして推定した際に、活動部位の推定精度を評
    価する生体内ダイポール推定精度評価装置において、ダイポールが作る頭皮上の電位分布を、3次元直交座標
    系(x、y、z)のx−z平面上にダイポールが位置
    し、始点がz軸上にある場合の電位値として計算するx
    −z平面ダイポール順問題解析手段と、 前記x−z平面ダイポール順問題解析手段により求めら
    れた電位分布の理論値と頭皮上で実際に観測された計測
    値の差の二乗和が最小となる、ダイポールの位置とモー
    メントを推定するx−z平面ダイポール逆問題解析手段
    と、 前記x−z平面ダイポール順問題解析手段で利用された
    計算式を使って、電位値の、ダイポールの位置パラメー
    タの動径成分に関する1階偏微分を求め、微分された式
    に前記x−z平面ダイポール逆問題解析手段で得られた
    ダイポールパラメータの最適値を代入し、微分した式の
    値を各電極位置について求めるx−z平面ダイポールJ
    acobian行列算出手段と、 前記x−z平面ダイポールJacobian行列算出手
    段により得られた行列成分を電極位置に関して総和を取
    り、推定されたダイポールの数を次元とする正方行列を
    算出し、前記正方行列に固有値分解を施すx−z平面ダ
    イポールJacobian行列積固有値分解解析手段
    と、 前記x−z平面ダイポールJacobian行列積固有
    値分解解析手段で得られた固有値と固有ベクトル、及び
    χ 2 分布の95%あるいは99%点の値を使って、推定
    されたダイポールパラメータの信頼領域を与える楕円体
    を構成するダイポールパラメータ信頼領域楕円体構成手
    段と、 前記x−z平面ダイポールJacobian行列積固有
    値分解解析手段で得られた固有値と固有ベクトル、及び
    χ 2 分布の95%あるいは99%点の値を使って、推定
    されたダイポールパラメータの信頼限界を算出するダイ
    ポールパラメータ信頼限界算出手段と、 を有することを特徴とする生体内ダイポール推定精度評
    価装置。
JP09197126A 1997-07-23 1997-07-23 生体内ダイポール推定精度評価装置 Expired - Fee Related JP3111933B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09197126A JP3111933B2 (ja) 1997-07-23 1997-07-23 生体内ダイポール推定精度評価装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP09197126A JP3111933B2 (ja) 1997-07-23 1997-07-23 生体内ダイポール推定精度評価装置

Publications (2)

Publication Number Publication Date
JPH1133008A JPH1133008A (ja) 1999-02-09
JP3111933B2 true JP3111933B2 (ja) 2000-11-27

Family

ID=16369182

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09197126A Expired - Fee Related JP3111933B2 (ja) 1997-07-23 1997-07-23 生体内ダイポール推定精度評価装置

Country Status (1)

Country Link
JP (1) JP3111933B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11712189B2 (en) 2019-10-30 2023-08-01 Ricoh Company, Ltd. Dipole group quantification method and dipole group display system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4876988B2 (ja) * 2007-03-13 2012-02-15 日本電気株式会社 ブレイン・コンピュータ・インタフェース装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11712189B2 (en) 2019-10-30 2023-08-01 Ricoh Company, Ltd. Dipole group quantification method and dipole group display system

Also Published As

Publication number Publication date
JPH1133008A (ja) 1999-02-09

Similar Documents

Publication Publication Date Title
Stok The influence of model parameters on EEG/MEG single dipole source estimation
US6371924B1 (en) Acoustic window identification
Lin et al. Microwave apexcardiography
US6735460B2 (en) Biomagnetic field measuring method and apparatus
Song et al. Magnetic tracking of wireless capsule endoscope in mobile setup based on differential signals
Attivissimo et al. A novel electromagnetic tracking system for surgery navigation
US4995395A (en) Method and apparatus for location finding of electrodes placed onto the body, particularly to the head
EP0830562A1 (en) Magnetic location system with adaptive feedback control
JP2012157696A (ja) 心磁図システムおよび心磁図画像を作成する方法
AU2020233670B2 (en) Intraoperative magnetometry monitoring system
JPH05200009A (ja) 電気生理学的活動の局所限定のための方法
CN100444176C (zh) 用于显示用于源重构的置信区间的方法和系统
EP3563763B1 (en) Improved active voltage location (avl) resolution
JP2007268034A (ja) 生体信号計測方法及び装置
Van Uitert et al. Volume currents in forward and inverse magnetoencephalographic simulations using realistic head models
JP3111933B2 (ja) 生体内ダイポール推定精度評価装置
Yetik et al. Line-source modeling and estimation with magnetoencephalography
JP2850763B2 (ja) 生体内部状態伝達装置およびその方法
Stopforth et al. Contactless Yagi-Patch electrodes for electroencephalogram (EEG) headsets, to be used for robotic applications
JP2690678B2 (ja) 近似モデル表示装置
JP4006543B2 (ja) 生体活動電流源推定装置
JPH05146416A (ja) 生体活動電流源推定法
US20220257212A1 (en) Non-invasive system and method of spatial localization of specific electrocardiac elements
JP3811628B2 (ja) 脳内等価双極子の推定結果を制御信号に利用する制御装置
Jaiswal et al. On electromagnetic head-surface digitization in MEG and EEG

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080922

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080922

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090922

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090922

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100922

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110922

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120922

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130922

Year of fee payment: 13

LAPS Cancellation because of no payment of annual fees