JPH0772244A - 干渉型合成開口レーダ装置および地形変動観測方式 - Google Patents

干渉型合成開口レーダ装置および地形変動観測方式

Info

Publication number
JPH0772244A
JPH0772244A JP5167400A JP16740093A JPH0772244A JP H0772244 A JPH0772244 A JP H0772244A JP 5167400 A JP5167400 A JP 5167400A JP 16740093 A JP16740093 A JP 16740093A JP H0772244 A JPH0772244 A JP H0772244A
Authority
JP
Japan
Prior art keywords
processing unit
terrain
interference
ground
synthetic aperture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5167400A
Other languages
English (en)
Other versions
JP2590689B2 (ja
Inventor
Hiroshi Shinohara
博 篠原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP5167400A priority Critical patent/JP2590689B2/ja
Publication of JPH0772244A publication Critical patent/JPH0772244A/ja
Application granted granted Critical
Publication of JP2590689B2 publication Critical patent/JP2590689B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

(57)【要約】 【目的】 地震予知、火山噴火予知、土石流予測等の数
cm単位の精度で微妙な地形変動の抽出を要求される観測
分野に適用可能な、地形変動をリアルタイムで高精度に
抽出できる干渉型合成開口レーダ装置を提供する。 【構成】 航空機等の飛翔体に2つのアンテナ1、2を
取り付け、この2つのアンテナ部1,2で同時に地上の
ターゲット19に電波を放射し、また地上からの反射波
を同時に受信する。受信したビデオ信号14、15は、
画像処理部6でSAR再生処理を行い、干渉処理部8で
干渉処理を実施して等高線図または標高が算出される。
リアルタイムで得られた干渉処理部8のデータは、地形
変動解析処理部9により同一地域を複数回フライトして
得られた過去のデータと比較され、その標高差を検出す
ることでリアルタイムで高精度に地形変動を取得する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は干渉型合成開口レーダ装
置、より具体的には航空機、人工衛星等の飛翔体に搭載
される合成開口レーダ装置に係り、特にリアルタイムで
地形変動を高精度に抽出することができる干渉型合成開
口レーダ装置および地形変動観測方式に関する。
【0002】
【従来の技術】地震予知、火山噴火予知、土石流予測を
行うには地形変動を抽出することが必要不可欠である。
従来、このような地形変動を抽出するためには光学カメ
ラを用いた航空測量やステレオ視が行われていた。しか
し、これら手法では地形変動量を抽出するまでに原理的
に多くの時間が必要であり、また、精度が十分でなかっ
たり、雲天時/夜間観測できないため、必要な時、リア
ルタイムで情報が収集できないという問題点があった。
【0003】このような欠点を解消するため、たとえば
特開昭63−262578号公報には昼夜間/全天候で
観測が可能な合成開口レーダを用いた干渉型SAR(地
形マッピングレーダ)が記載されている。干渉型SAR
は、必要な時に地表面の3次元情報を精度が数m程度で
取得することができるレーダ装置である。
【0004】図3はこのような干渉型合成開口レーダの
動作概念を示したものである。図3において、A1,A
2はアンテナ位置、Nsはアンテナ間距離、Htは被測
定物の標高、HoはアンテナA1,A2が搭載された航
空機または人工衛星などの飛翔体高度、A,B,C,D
はスラントレンジ距離をそれぞれ示している。
【0005】地形変動を観測する場合、航空機等の飛翔
体に2つのアンテナA1,A2を取り付け、同一シーン
を見るように個々のアンテナA1,A2のオフナディア
角を設定する。同一点からの反射波は、2つのアンテナ
A1,A2で同時に受信し、そのわずかな位相差Δφを
検出する。アンテナA1とアンテナA2で検出される位
相差は地上の標高により異なるため、〔Δφ1 −Δ
φ2 〕∝Htの性質を利用すれば3次元情報(標高情
報)を得ることができる。なお、Δφ1 およびΔφ
2は、λを送信波波長とすると以下の式で示すことがで
きる。 Δφ1 =(A−B−n・λ)×2π×1/λ Δφ2 =(C−D−n・λ)×2π×1/λ
【0006】
【発明が解決しようとする課題】しかしながら昼夜間/
全天候で観測が可能な従来技術における合成開口レーダ
を用いた干渉型SARは、必要な時に3次元情報を取得
することができるが、2つのアンテナ間距離や受信機ノ
イズ等のシステム雑音により生じる位相誤差φNがある
ため、分解能をφN 以上にすることはできない。したが
って、その精度を数m程度よりも上げることができず、
数cm単位の精度で微妙な地形変動の抽出を要求される地
震予知、火山噴火予知、土石流予測等では正確な予知ま
たは予測が困難になるという欠点があった。
【0007】本発明はこのような従来技術の欠点を解消
し、地震予知、火山噴火予知、土石流予測等の数cm単位
の精度で微妙な地形変動の抽出を要求される観測分野に
適用可能な、地形変動をリアルタイムで高精度に抽出で
きる干渉型合成開口レーダ装置および地形変動観測方式
を提供することを目的とする。
【0008】
【課題を解決するための手段】本発明は上述の課題を解
決するために、飛翔体より地上に向かって電波を放射
し、地上からの反射波を受信することにより地形変動を
抽出する干渉型合成開口レーダ装置は、地上に電波を放
射し、また地上からの反射波を同時に受信する2つのア
ンテナと、2つアンテナに同時に送信波を出力しかつ同
時に受信波を入力する送受信部と、送受信部からの受信
出力信号をSAR再生処理する画像処理部と、画像処理
部からの出力信号を干渉させて3次元画像を出力する干
渉処理部と、干渉処理部でリアルタイムで取得した3次
元画像データと、この干渉処理部で以前に取得した同一
地域の3次元画像データとを比較することにより、リア
ルタイムで地形の変動を抽出する地形変動解析処理部と
を有する。
【0009】また、本発明によれば、飛翔体に搭載され
たレーダにより同一地形を定期的に観測して当該地形の
変化を抽出する地形変動観測方式において、レーダによ
り観測されたリアルタイムの地形データは以前に観測さ
れてた同一地域の地形データと比較され、この比較結果
を基に観測された地形の変化が抽出される。
【0010】
【作用】本発明によれば、2つのアンテナより放射され
た電波の反射波は、再びこれらアンテナに受信され、受
信出力信号として画像処理部に送られてSAR再生処理
が施される。SAR再生処理が行われた画像処理部出力
信号は干渉処理部に送られて3次元画像が形成される。
このリアルタイムで得られた3次元画像のデータは、地
形変動解析処理部により以前に取得した同一地域のデー
タと比較されてその差分が検出されることで地形変動の
抽出が行われる。また、地上に基準点(コーナーリフレ
クタ)を常設することで、cm単位の校正を行うことが可
能である。
【0011】
【実施例】次に添付図面を参照して本発明による干渉型
合成開口レーダ装置および地形変動観測方式の実施例を
詳細に説明する。
【0012】図1は本発明による地形変動抽出用干渉型
合成開口レーダ装置の一実施例を示すブロック図であ
り、このレーダ装置は航空機または人工衛星等の飛翔体
に搭載される。
【0013】図1において、アンテナ1,2は地上に電
波を放射し、また、地上からの反射波を受信するアンテ
ナ部である。これらアンテナ1,2は、オフナディア角
設定部3により同一反射ターゲット19に向けられる。
ターゲット19内には、複数の基準点(リフレクタ)が
設置されている。アンテナ1,2は、それぞれ信号線1
2,13を介して送受信部4、5に接続されている。
【0014】送受信部4,5は、接続されているアンテ
ナ1,2に同時に送信波を出力し、かつ同時に受信波を
入力する電波送受信部であり、それぞれ信号線14,1
5を介して画像処理部6に接続されている。
【0015】画像処理部6は、送受信部4,5からの受
信出力信号であるビデオ信号をSAR再生処理する画像
処理部である。具体的には、画像処理部6は衛星22か
らの電波を受信して飛翔体の位置・速度情報を計算する
GPS部7に接続され、これから当該レーダが搭載され
ている飛翔体の位置・速度情報から幾何歪み補正を行
う。画像処理部6は、信号線16を介して干渉処理部8
に接続され、これに幾何歪み補正を行なった画像データ
16を出力する。
【0016】干渉処理部8は、画像処理部6からのSA
R画像データ16を入力し、それぞれのアンテナ1,2
対応したSAR画像データの位相差を算出し、等高線図
または標高を算出して3次元画像データである標高デー
タ17を作成する。干渉処理部8は、信号線17を介し
て地形変動解析処理部9に接続され、これに現時点の標
高データ17を出力する。なお、地形変動解析処理部9
は、合成開口レーダ特有のフォーショートニング歪みを
標高データ17を基に補正する。また、リフレクタによ
る校正も実施する。
【0017】地形変動解析処理部9は、リアルタイムで
得られた標高データ17と以前に得られた同一地域での
標高データとを比較することで地形変動を高精度で抽出
する解析処理部である。すなわち、地形変動解析処理部
9は、以前観測を行ったターゲット19の標高データを
記憶しているデータベース部11と、このデータベース
部11に記録されている標高データ18とリアルタイム
で観測された標高データ17との差を取り地形変動デー
タ20を検出出力する標高検出部10により構成されて
いる。
【0018】図2は、図1の実施例における処理画像の
流れを示した概念図である。(a)の画像はアンテナ
1,2で受信処理したSARデータを干渉させて得られ
る位相差画像である。このデータ取得時の飛翔体位置・
速度等に関する情報から適切な地球の回転楕円体モデル
を設定し、そのモデルによる位相差画像(b)を算出
し、(a)との差をとることで等高線図(c)が得られ
る。
【0019】幾何歪み/フォーショートニング補正が行
われた画像(c)は、図1の信号18に対応する。
(d)〜(f)は(a)〜(c)と同様の画像である
が、データを取得された時期が異なるもので図1のデー
タベース11に記憶されている。(c)と(f)はほと
んど同じであるが同じ座標でわずかに標高が異なる。こ
の2つのデータG(x,y)とG′(x,y)の差をと
ると非常にわずかな変化ΔG(x,y)を検出すること
ができる。
【0020】(g)は、ΔG(x,y)を表わしたもの
で斜線部は変化のない所、その他が地形が変化した部分
である。この変化抽出精度は数cm程度が実現できる。
これは、干渉型合成開口レーダが位相を検出しているた
め可能になる技術で、画像のピクセルサイズ(センサ分
解能)には依存しない。
【0021】
【発明の効果】以上詳細に説明したように本発明の地形
変動抽出用干渉型合成開口レーダ装置によれば、同一シ
ーンを2度観測しその2つの3次元画像の変化を抽出す
ることで、地形変動を高精度にリアルタイムで抽出でき
る。すなわち、航空機等を移動プラットフォームとする
干渉型合成開口レーダ装置において、同一シーンを定期
的に監視(観測)し個々の3次元画像の変化分を抽出す
ることで、リアルタイムで地形変動を抽出できるため、
地震予知、火山噴火予知、土石流予測等に対する有益性
を格段に向上できる効果がある。なお、その高精度は、
画像のピクセルサイズには依存しないため、他のセンサ
に比べ格段に優れているという効果を有する。
【図面の簡単な説明】
【図1】本発明による地形変動抽出用干渉型合成開口レ
ーダ装置の一実施例を示すブロック図である。
【図2】図1の実施例における処理画像の流れを示す概
念図である。
【図3】従来の干渉型合成開口レーダ装置の概要を示す
説明図である。
【符号の説明】
1,2 アンテナ部 3 オフナディア角設定部 4,5 送受信部 6 画像処理部 7 GPS部 8 干渉処理部 9 地形変動解析処理部 10 標高差検出部 11 データベース部 19 ターゲット

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 飛翔体より地上に向かって電波を放射
    し、この地上からの反射波を受信することにより地形変
    動を抽出する干渉型合成開口レーダ装置において、 前記地上に電波を放射し、また地上からの反射波を同時
    に受信する2つのアンテナと、 前記2つアンテナに同時に送信波を出力しかつ同時に受
    信波を入力する送受信部と、 前記送受信部からの受信出力信号をSAR再生処理する
    画像処理部と、 前記画像処理部からの出力信号を干渉させて3次元画像
    を出力する干渉処理部と、 前記干渉処理部でリアルタイムで取得した3次元画像デ
    ータと、この干渉処理部で以前に取得した同一地域の3
    次元画像データとを比較することにより、リアルタイム
    で地形の変動を抽出する地形変動解析処理部とを有する
    ことを特徴とする干渉型合成開口レーダ装置。
  2. 【請求項2】 飛翔体に搭載されたレーダにより同一地
    形を定期的に観測して当該地形の変化を抽出する地形変
    動観測方式において、 前記レーダにより観測されたリアルタイムの地形データ
    は、以前に観測されてた同一地域の地形データと比較さ
    れ、 この比較結果を基に前記観測された地形の変化を抽出す
    ることを特徴とする地形変動観測方式。
JP5167400A 1993-06-14 1993-06-14 干渉型合成開口レーダ装置および地形変動観測方法 Expired - Lifetime JP2590689B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP5167400A JP2590689B2 (ja) 1993-06-14 1993-06-14 干渉型合成開口レーダ装置および地形変動観測方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP5167400A JP2590689B2 (ja) 1993-06-14 1993-06-14 干渉型合成開口レーダ装置および地形変動観測方法

Publications (2)

Publication Number Publication Date
JPH0772244A true JPH0772244A (ja) 1995-03-17
JP2590689B2 JP2590689B2 (ja) 1997-03-12

Family

ID=15849004

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5167400A Expired - Lifetime JP2590689B2 (ja) 1993-06-14 1993-06-14 干渉型合成開口レーダ装置および地形変動観測方法

Country Status (1)

Country Link
JP (1) JP2590689B2 (ja)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH095433A (ja) * 1995-06-21 1997-01-10 Nec Corp 干渉型合成開口レーダ画像処理方法及び干渉型合 成開口レーダ装置
JPH09113615A (ja) * 1995-10-24 1997-05-02 Nec Corp インターフェロメトリsar方式
JPH09159756A (ja) * 1995-12-12 1997-06-20 Mitsubishi Electric Corp 干渉型高分解能レーダ装置及び高分解能レーダ装置を用いた地形高さ測定方法
JPH09189762A (ja) * 1996-01-08 1997-07-22 Mitsubishi Electric Corp レーダ装置を用いた地表変動観測方法並びにこの方法に用いる合成開口レーダ装置及びトランスポンダ
JPH11125674A (ja) * 1997-10-24 1999-05-11 Mitsubishi Electric Corp 合成開口レーダ装置
JP2000019248A (ja) * 1998-07-03 2000-01-21 Nec Corp 合成開口レーダシステム及びそれに用いるプラットフォーム位置計測方法並びにその制御プログラムを記録した記録媒体
JP2002535662A (ja) * 1999-01-21 2002-10-22 アストリウム・ゲゼルシャフト・ミット・ベシュレンクテル・ハフツング 干渉型レーダー測定方法
JP2004191053A (ja) * 2002-12-06 2004-07-08 Mitsubishi Electric Corp 合成開口レーダ装置及び数値標高モデル作成方法
JP2004309178A (ja) * 2003-04-02 2004-11-04 Oyo Corp 合成開口レーダを用いる地表面変動量計測方法
JP2007322383A (ja) * 2006-06-05 2007-12-13 Mitsubishi Electric Corp 画像レーダ装置
JP2008046107A (ja) * 2006-07-21 2008-02-28 Pasuko:Kk レーダ画像処理装置及びレーダ画像処理方法
JP2011133341A (ja) * 2009-12-24 2011-07-07 Pasuko:Kk 変位計測装置、変位計測方法、及び変位計測プログラム
JP2011237195A (ja) * 2010-05-06 2011-11-24 Mitsubishi Electric Corp 画像レーダ装置
KR101636879B1 (ko) * 2015-03-05 2016-07-11 대한민국 위성레이더 영상에 의한 벤토나이트 탐사방법
KR20170019923A (ko) * 2015-08-13 2017-02-22 강원대학교산학협력단 InSAR 및 GIS를 이용한 화산 활동 분석 방법 및 시스템
JP6179911B1 (ja) * 2016-06-01 2017-08-16 国立研究開発法人宇宙航空研究開発機構 変状度判定方法及び変状度判定システム
WO2022018791A1 (ja) * 2020-07-20 2022-01-27 日本電気株式会社 画像処理装置および画像処理方法
CN114609635A (zh) * 2022-03-17 2022-06-10 电子科技大学 一种基于视频合成孔径雷达的干涉测量方法
US20220308203A1 (en) * 2021-03-24 2022-09-29 R2 Space, LLC Synthetic aperture radar simulation

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60187872A (ja) * 1984-03-07 1985-09-25 Mitsubishi Electric Corp 合成開口レ−ダシステム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60187872A (ja) * 1984-03-07 1985-09-25 Mitsubishi Electric Corp 合成開口レ−ダシステム

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH095433A (ja) * 1995-06-21 1997-01-10 Nec Corp 干渉型合成開口レーダ画像処理方法及び干渉型合 成開口レーダ装置
JPH09113615A (ja) * 1995-10-24 1997-05-02 Nec Corp インターフェロメトリsar方式
JPH09159756A (ja) * 1995-12-12 1997-06-20 Mitsubishi Electric Corp 干渉型高分解能レーダ装置及び高分解能レーダ装置を用いた地形高さ測定方法
JPH09189762A (ja) * 1996-01-08 1997-07-22 Mitsubishi Electric Corp レーダ装置を用いた地表変動観測方法並びにこの方法に用いる合成開口レーダ装置及びトランスポンダ
JPH11125674A (ja) * 1997-10-24 1999-05-11 Mitsubishi Electric Corp 合成開口レーダ装置
JP2000019248A (ja) * 1998-07-03 2000-01-21 Nec Corp 合成開口レーダシステム及びそれに用いるプラットフォーム位置計測方法並びにその制御プログラムを記録した記録媒体
US6208283B1 (en) 1998-07-03 2001-03-27 Nec Corporation Synthetic aperture radar system and platform position measuring apparatus used in the same
JP2002535662A (ja) * 1999-01-21 2002-10-22 アストリウム・ゲゼルシャフト・ミット・ベシュレンクテル・ハフツング 干渉型レーダー測定方法
JP2004191053A (ja) * 2002-12-06 2004-07-08 Mitsubishi Electric Corp 合成開口レーダ装置及び数値標高モデル作成方法
JP2004309178A (ja) * 2003-04-02 2004-11-04 Oyo Corp 合成開口レーダを用いる地表面変動量計測方法
JP2007322383A (ja) * 2006-06-05 2007-12-13 Mitsubishi Electric Corp 画像レーダ装置
JP2008046107A (ja) * 2006-07-21 2008-02-28 Pasuko:Kk レーダ画像処理装置及びレーダ画像処理方法
JP2011133341A (ja) * 2009-12-24 2011-07-07 Pasuko:Kk 変位計測装置、変位計測方法、及び変位計測プログラム
JP2011237195A (ja) * 2010-05-06 2011-11-24 Mitsubishi Electric Corp 画像レーダ装置
KR101636879B1 (ko) * 2015-03-05 2016-07-11 대한민국 위성레이더 영상에 의한 벤토나이트 탐사방법
KR20170019923A (ko) * 2015-08-13 2017-02-22 강원대학교산학협력단 InSAR 및 GIS를 이용한 화산 활동 분석 방법 및 시스템
JP6179911B1 (ja) * 2016-06-01 2017-08-16 国立研究開発法人宇宙航空研究開発機構 変状度判定方法及び変状度判定システム
JP2017215248A (ja) * 2016-06-01 2017-12-07 国立研究開発法人宇宙航空研究開発機構 変状度判定方法及び変状度判定システム
WO2022018791A1 (ja) * 2020-07-20 2022-01-27 日本電気株式会社 画像処理装置および画像処理方法
US20220308203A1 (en) * 2021-03-24 2022-09-29 R2 Space, LLC Synthetic aperture radar simulation
CN114609635A (zh) * 2022-03-17 2022-06-10 电子科技大学 一种基于视频合成孔径雷达的干涉测量方法

Also Published As

Publication number Publication date
JP2590689B2 (ja) 1997-03-12

Similar Documents

Publication Publication Date Title
JP2590689B2 (ja) 干渉型合成開口レーダ装置および地形変動観測方法
Rabus et al. The shuttle radar topography mission—a new class of digital elevation models acquired by spaceborne radar
Gray et al. Repeat-pass interferometry with airborne synthetic aperture radar
US5659318A (en) Interferometric SAR processor for elevation
CN113439220B (zh) 一种基于卫星编队的遥感系统及星座系统
US5726656A (en) Atmospheric correction method for interferometric synthetic array radar systems operating at long range
EP1724592B1 (fr) Système d'estimation de la vitesse d'un aéronef et son application à la détection d'obstacles
WO2021248636A1 (zh) 一种自动驾驶对象探测和定位系统及方法
CN110488292B (zh) 一种基于卫星编队的遥感系统
US9310198B2 (en) Three-dimensional location of target land area by merging images captured by two satellite-based sensors
Siegmund et al. First demonstration of surface currents imaged by hybrid along-and cross-track interferometric SAR
Magnard et al. Processing of MEMPHIS Ka-band multibaseline interferometric SAR data: From raw data to digital surface models
CN110068817B (zh) 一种基于激光测距和InSAR的地形测图方法、仪器和系统
CN111522005A (zh) 一种形变监测与地形重构方法
Cui et al. 3D detection and tracking for on-road vehicles with a monovision camera and dual low-cost 4D mmWave radars
Faller et al. First results with the airborne single-pass DO-SAR interferometer
JPH07199804A (ja) 干渉型合成開口レーダ装置から得た3次元情報を用いる地形図作成装置
KR100441590B1 (ko) 간섭측정용 합성 개구 레이다의 기하학적 특성을 이용하여지형고도를 측정하기 위한 디지털 고도모형 생성방법
JP2655136B2 (ja) 干渉型合成開口レーダ画像処理方法及び干渉型合 成開口レーダ装置
JP2699964B2 (ja) 森林樹木高測定装置
Holecz et al. Height model generation, automatic geocoding and a mosaicing using airborne AeS-1 InSAR data
Nitti et al. Automatic GCP extraction with high resolution COSMO-SkyMed products
Tarchi et al. Low-cost mini radar: design prototyping and tests
Cantalloube et al. A first bistatic airborne SAR interferometry experiment-preliminary results
Cramer et al. Data capture

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19961022

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071219

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081219

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091219

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091219

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101219

Year of fee payment: 14

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101219

Year of fee payment: 14

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111219

Year of fee payment: 15

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111219

Year of fee payment: 15

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121219

Year of fee payment: 16

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121219

Year of fee payment: 16

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131219

Year of fee payment: 17

EXPY Cancellation because of completion of term