JPH08286221A - アクティブなゲインを有する非線形媒体を用いた光学的画像処理装置 - Google Patents

アクティブなゲインを有する非線形媒体を用いた光学的画像処理装置

Info

Publication number
JPH08286221A
JPH08286221A JP8082429A JP8242996A JPH08286221A JP H08286221 A JPH08286221 A JP H08286221A JP 8082429 A JP8082429 A JP 8082429A JP 8242996 A JP8242996 A JP 8242996A JP H08286221 A JPH08286221 A JP H08286221A
Authority
JP
Japan
Prior art keywords
input
active gain
light beam
fourier transform
superimposing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8082429A
Other languages
English (en)
Other versions
JP3634493B2 (ja
Inventor
Theodoor Charlouis Damen
チャールイズ デイメン テオドア
Hailin Wang
ワン ハイリン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AT&T Corp
Original Assignee
AT&T Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AT&T Corp filed Critical AT&T Corp
Publication of JPH08286221A publication Critical patent/JPH08286221A/ja
Application granted granted Critical
Publication of JP3634493B2 publication Critical patent/JP3634493B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06EOPTICAL COMPUTING DEVICES; COMPUTING DEVICES USING OTHER RADIATIONS WITH SIMILAR PROPERTIES
    • G06E3/00Devices not provided for in group G06E1/00, e.g. for processing analogue or hybrid data
    • G06E3/001Analogue devices in which mathematical operations are carried out with the aid of optical or electro-optical elements
    • G06E3/003Analogue devices in which mathematical operations are carried out with the aid of optical or electro-optical elements forming integrals of products, e.g. Fourier integrals, Laplace integrals, correlation integrals; for analysis or synthesis of functions using orthogonal functions

Landscapes

  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Nonlinear Science (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Optical Modulation, Optical Deflection, Nonlinear Optics, Optical Demodulation, Optical Logic Elements (AREA)
  • Lasers (AREA)
  • Holo Graphy (AREA)
  • Semiconductor Lasers (AREA)

Abstract

(57)【要約】 【課題】 大量のデータを処理できるように迅速な応答
時間を有し、同時に、入力信号を低下させずむしろ増幅
するような光学画像処理装置を提供することである。 【手段】 非線形アクティブゲイン媒体を含む光学的画
像処理装置であって、前記非線形アクティブゲイン媒体
は、入力画像のフーリエ変換に対応する干渉パターンも
しくは、2つの入力画像それぞれのフーリエ変換の掛け
合わせの結果を記録する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、光学的画像処理装
置に関し、特に、画像情報がゲインを有する非線形媒体
に格納される、光学的画像処理装置に関する。
【0002】
【従来の技術】光学的画像処理装置が多様な光学的処理
を行い得ることは、従来から知られている。例えば、画
像コリレータは、パターン認識のために用いることので
きる種類の画像処理装置である。
【0003】第1の種類の画像コリレータは、「結合
(ジョイント)フーリエ変換型画像処理装置」として知
られている。図1に従来例として示したように、この装
置では、フーリエ変換レンズ80が、リファレンスRと
未知の対象Sをそれぞれ表す一組のコヒーレントな画像
を処理する。そして、フーリエ変換レンズの焦点面で得
られる光学強度分布は、非線形媒体25に記録される。
ここで、このような非線形媒体は、典型的には、光学的
な屈折性を有する材料から成る。そのコリレータからの
出力は、同図中にレンズ80で示されるフーリエ変換レ
ンズが、記録されたパターンを処理することにより得ら
れる。出力された画像の両側のそれぞれ(中心から、R
とSの間の距離だけ離れて、中心から対称にずれてい
る)は、RとSの間のクロスコリレーションに対応する
強度分布を有する。コリレーションピークの位置は、S
に類似しているRの、特徴部の位置を示す。また、その
ピークの高さは類似の程度を示す。
【0004】このような種類のコリレータは、例えば、
H.Rajbenbachらによる、アプライドオプテ
ィックス誌第31巻(1992年)第5666−567
4頁の「Compact Photorefractive correlator for rob
otic applications」において、記述されている。この
システムでは、光学的な屈折性を有する媒体として、B
12SiO20(BSO)の結晶が用いられている。この
材料により、典型的な応答時間として、約50msが達
成されている。また、約1mmの厚さを有する結晶を用
いて、0.1%から1%の回折効率が得られている。
【0005】一方、第2の種類のコリレータは、「Va
nderlugt型光学25コリレータ」として知られ
ている。この装置は、例えば、D.T.H.Liuらに
よる、アプライドオプティクス誌第31巻(1992
年)第5675−5680頁の「Real-time Vanderlugt
optical correlator that uses photorefractive GaA
s」において記述されている。図2に従来例として示し
たように、このコリレータでは、例えば、Sの画像のフ
ーリエ変換は、リファレンス光5と干渉させることによ
り、非線形媒体25に書き込まれる。ここで、リファレ
ンス光5は、通常は、平面波である。コリレータからの
出力は、レンズ84を用いてRの画像のフーリエ変換を
行い、媒体に照射することにより、得られる。図に示し
たように、レンズ82は、Sの画像のフーリエ変換と、
非線形媒体からの出力の逆フーリエ変換の両方を行うた
めに用いられる。
【0006】D.T.H.Liuらにより記述されたシ
ステムは、光学的な屈折性を有する媒体として5mmの
厚さのGaAs結晶を用いている。0.1%以下の回折
効率が得られている。また、測定した最小応答時間は、
レーザ出力が約1.5W/cm2で、0.8msであっ
た。
【0007】米国特許出願(出願人の整理番号:Chi
u2−27−1、必要によっては、後日明細書を提出す
る用意がある)には、半絶縁性の多重量子井戸(SI−
MQW)型構造の有する非線形光学特性を利用した光学
的画像コリレータが開示されている。このシステムは、
3%またはそれより低い回折効率で、1μs以下でコリ
レーションを行うことができる。
【0008】
【発明が解決しようとする課題】以上説明した従来の光
学的画像処理装置の有するひとつの制限は、用いられて
いる非線形材料がパッシブな構造であり、かなりの量の
光エネルギーを吸収するということである。その結果と
して、画像処理装置からの出力は、入力信号の大きさに
比べて、しばしば2桁も小さい。光吸収を低減するため
にはより効率的な光屈折性材料を使うこともできるが、
応答時間が犠牲にされることとなる。したがって、大量
のデータを処理できるように迅速な応答時間を有し、同
時に、入力信号を低下させずむしろ増幅するような光学
画像処理装置を提供することが望まれる。
【0009】
【課題を解決するための手段】本発明は、コヒーレント
光の入力ソースと出力ソースを含むような種類の光学画
像処理装置に関する。ここで、「光」という用語は、赤
外放射のように、目に見えない電磁波の波長領域も含む
ものとして用いられる。入力ソースは、制御用の光線と
信号光線を含み得る、入力光線である。処理装置は、さ
らに、少なくともひとつの入力画像に対応する入力光の
空間的強度変調パターンに重ねる手段と、前記変調パタ
ーンのフーリエ変換を生ずるためのレンズと、前記フー
リエ変換を吸収の変調または屈折率の変調として記録
し、記録されたパターンに従って出力光を変調するため
の非線形媒体とを備える。
【0010】従来の処理装置と異なり、本発明の処理装
置の有する非線形媒体は、垂直型キャビティを有する面
発光型レーザや光ポンプ増幅媒体のようなアクティブ増
幅媒体を含む。アクティブな媒体を用いることにより得
られる処理装置は、応答時間をそれほど犠牲にすること
なく、従来の処理装置よりも出力強度の損失を小さくす
ることができる。その結果として、パワーの低下を考え
ることなく、複数のこのような処理装置を直列につなげ
ることができる。さらに、異なる場所から、増幅媒体を
通して複数回にわたり光信号をフィードバックすること
により、さまざまな処理ができるようになる。
【0011】
【発明の実施の形態】本発明による処理装置は、結合
(ジョイント)フーリエ変換コリレータとしてもVan
derlugt型コリレータとしても実施することがで
きる。いずれの場合も、処理装置の一般的な特徴は良く
知られている。結合(ジョイント)フーリエ変換コリレ
ータは、前述のように、例えば、H.Rajbenba
chらにより説明されている。また、Vanderlu
gt型コリレータは、前述のように、例えば、 D.
T.H.Liuらにより説明されている。図1を参照し
て、実験的な試みにより成功をおさめた結合(ジョイン
ト)フーリエ変換コリレータについて、簡単に説明す
る。このシステムを改良して、替わりにVanderl
ugt型コリレータとすることは、当業者にとって、き
わめて自明であろう。
【0012】入射光の光線は、レーザ10により供給さ
れる。そのレーザは、垂直偏向型で出力150mW、発
振波長830nmの単一LOモードダイオードレーザで
ある。出力光の光線は、レーザ20により供給される。
そのレーザは、垂直偏向型で、発振波長850nmの単
一LOモードダイオードレーザである。レーザ20は、
通常は、約10mWの出力レベルで動作する。その発振
波長は、光学的屈折性媒体25からの回折効率を最大に
するために温度によるチューニングをすることができ
る。レーザ10とレーザ20のそれぞれからの光線は、
レンズと、アナモルフィックプリズムペアと、ビームエ
キスパンダから成る副光学系30または40を通過す
る。これらの副光学系は、レーザ光線をエキスパンド
し、コリメートする。
【0013】変調器50は、典型的には、エプソン株式
会社により「エプソンクリスタルイメージビデオプロジ
ェクタ」として販売されているような、液晶である。こ
の変調器は、開口が2.0cmx2.6cmで、画素分
解能が320x220である。この変調器は、購入時に
偏光フィルムを含み、それは変調器をコリレータに組み
込む前に取り除かれる。その変調器は、ビデオソース6
0からのビデオ信号により駆動され、制御光線と、特定
のコリレータの場合にはRとSのとなり合った一組の画
像に対応する信号光線とを、それぞれ発生させる。(こ
の段階では、画像は、単に偏光回転としてのみ存在する
ので、目では識別できない。)偏光ビームスプリッタキ
ューブ70は、偏光回転のパターンを強度変調のパター
ンに変換する。レンズ80は、典型的には、焦点距離2
6cmのレンズ対であり、入射光線を受けて入力画像の
フーリエ変換を行う。より正確に説明すると、レンズ8
0のフーリエ面に位置する非線形媒体25は、それぞれ
の入力画像のフーリエ変換の重ね合わせに対応する干渉
パターンを記録する。
【0014】出力光線は、非線形媒体を通過することに
より、記録されたパターンを読みとる。出力光線は、そ
れからレンズ80を通過し、その結果として記録された
パターンの逆フーリエ変換が出力光線によって伝達され
る。出力光線は、それからレンズ80の背面焦点面に位
置するCCDカメラ100に入射する。カメラ100の
出力は、フレーム読み取り器105に記録される。83
0nm(即ち、入射光の波長)のスプリアス光を除去す
るため、中心波長850nm(即ち、出力光の波長)の
バンドパス干渉フィルタが、レンズ80とカメラ100
の間に配置される。カメラ100に入射する光の強度を
抑えるために、ND(ニュートラルデンシティ)フィル
タ120(典型的には、デンシティが1である)も、レ
ンズとカメラの間に配置される。空間的波長がゼロ(無
回折の0次ビーム)の出力光線の成分を除外するため、
ビームブロック130がレンズとカメラの間に配置され
る。
【0015】従来技術による処理装置と異なり、本発明
の処理装置の非線形媒体25は入力光を増幅する光ポン
プ半導体材料である。この種類の素子で本発明に用いる
ことのできるものとしては、Y.Yamamotoらに
よる「Coherence、Amplification and Quantum Efficien
cy in Semiconductor Lasers」Ch.13、1991
年、John Wiley &Sons、Inc.に概
説的に述べられている。従来技術による処理装置が、非
線形処理のために光学的屈折性を有する材料を用いてい
るのに対し、本発明による処理装置は、半導体材料に固
有の非線形特性を利用している。
【0016】本発明に用いることのできる光ポンプ半導
体材料のひとつとして、発振しきい値以下で動作する垂
直キャビティ型面発光レーザ(VCSEL)がある。V
CSELは、GaAs/AlGaAs多層構造のように
アクティブなゲインを有する材料から成り、そのGaA
s/AlGaAs多層構造は2つのミラーの間に配置さ
れてファブリーペローキャビティを形成する。この構造
は、電子的な注入により増幅作用を生ずる。このキャビ
ティは、入力信号にフィードバックすることにより素子
の効率を向上させ、アクティブゲイン材料自身による分
だけ全体のゲインが増加する。VCSEL素子の非線形
性は、Jiangらの、Conference onLaseres and Ele
ctooptics第8巻第224−225頁1984年、OSA T
echnical Digest Series、Optical Society of America
において、4波合成を実証するために利用されている。
しかし、この例ではVCSEL構造の光学画像処理装置
での利用については示されていない。
【0017】以下に図面を参照しながら、本発明による
処理装置に用いることのできるVCSEL素子について
簡単に説明する。この素子は、本願と同日に米国特許商
標庁に出願された、「Surface Emitting Laser Having
Improved Pomping Efficiency」という名称の特許出願
(出願人の整理番号:IDS109154 必要によっ
ては、後日明細書を提出する用意がある)においてより
詳細に説明されている。
【0018】図3は、波長870nmで動作するように
設計されたVCSEL構造を示す。上部ミラー19は、
Al0.11Ga0.89As(737Å)層とAlAs(62
5Å)層が交互に25ペアー積層された構造により形成
される。また、下部ミラーは、29.5ペアーのAl
0.11Ga0.89As(719Å)層とAlAs(608
Å)層により形成される。増幅媒体は、3つのGaAs
(609Å)活性層により構成され、それぞれの活性層
は、Al0.11Ga0.89As(625Å)バリア層によっ
て分離されている。また、活性層と上下のミラーの間に
は、Al0.11Ga0.89As(312Å)バリア層が、挿
入されている。これらの活性層は、効率を最大にするた
めに、ミラー13と19の間に生ずる定在波のはら(a
ntinodes)の場所に位置する。
【0019】下部ミラー13が高い反射率を生ずる波長
は、上部ミラー19と比較して相対的に約14nmほど
ずらされている。ミラー13と19は、例えば米国特許
4999842号に定義されている用語によれば、「ア
ンバランス」である。即ち、下部ミラー13は、上部ミ
ラー19よりも多くの積層を有する。その結果として、
設計波長における、下部ミラー13の反射率は、上部ミ
ラー19の反射率よりも高い。そして、反射率が下部ミ
ラー13よりも低いために、出力光線は上部ミラー19
から放射される。
【0020】ここで、このような半導体材料は必ずしも
III−V材料系に限定されない点は、明記される必要
がある。例えば、II−VI系材料もアクティブゲイン
材料として同様に用いることができる。
【0021】
【発明の効果】本発明による、アクティブな媒体を用い
ることにより得られる処理装置は、応答時間をそれほど
犠牲にすることなく、従来の処理装置よりも出力強度の
損失を小さくすることができるという効果を有する。そ
の結果として、パワーの低下を考えることなく、複数の
このような処理装置を直列につなげることができる。さ
らに、異なる場所から、増幅媒体を通して複数回にわた
り光信号をフィードバックすることにより、さまざまな
処理ができるようになるという効果も有する。
【図面の簡単な説明】
【図1】結合(ジョイント)フーリエ変換型光学的画像
コリレータの概略ブロックダイアグラム図である。
【図2】Vanderlugt型光学的画像コリレータ
の概略ブロックダイアグラム図である。
【図3】本発明による、画像処理装置のアクティブゲイ
ン材料として利用することのできるVCSEL構造の一
例を示す構造図である。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 ハイリン ワン アメリカ合衆国,08854 ニュージャージ ー、ピスカータウェイ、タウンセンド コ ート 484

Claims (9)

    【特許請求の範囲】
  1. 【請求項1】 a)コヒーレントな入力光線の光源
    と、 b)コヒーレントな出力光線の光源と、 c)少なくとも第1の入力画像に対応した空間的な強度
    変調パターンを前記入力光線に重ね合わせる手段と、 d)前記変調パターンのフーリエ変換を得るレンズと、 e)前記フーリエ変換の結果を強度変調パターンとして
    記録し、記録されたパターンに従って前記出力光線を変
    調する非線形媒体であって、アクティブゲイン媒体を含
    む、非線形媒体とを備えることを特徴とする光学的画像
    処理装置。
  2. 【請求項2】 前記アクティブゲイン媒体は、真性I
    II−V族材料を含むことを特徴とする請求項1記載の
    装置。
  3. 【請求項3】 前記アクティブゲイン媒体は、真性I
    I−VI族材料を含むことを特徴とすることを特徴とす
    る請求項1記載の装置。
  4. 【請求項4】 前記アクティブゲイン媒体は、垂直キ
    ャビティ型面発光レーザを含むことを特徴とする請求項
    1記載の装置。
  5. 【請求項5】 前記真性III−V族材料は、GaA
    sとAlxGa1−xAsを含むものであり、前記xは
    0と1の間の値であることを特徴とする請求項2記載の
    装置。
  6. 【請求項6】 前記強度変調パターンを重ね合わせる
    手段は、真性多重量子井戸型素子を含むことを特徴とす
    る請求項1記載の装置。
  7. 【請求項7】 前記重ね合わせる手段は、第1および
    第2の入力画像にそれぞれ対応する2つの空間的強度変
    調パターンを入力光線に重ね合わせる手段を含むことを
    特徴とする請求項1記載の装置。
  8. 【請求項8】 第2の入力画像に対応する空間的強度
    変調パターンを出力光線に重ね合わせる手段を含むこと
    を特徴とする請求項1記載の装置。
  9. 【請求項9】 前記入力光線は、制御光線と信号光線
    を含むことを特徴とする請求項1記載の装置。
JP08242996A 1995-04-05 1996-04-04 アクティブなゲインを有する非線形媒体を用いた光学的画像処理装置 Expired - Fee Related JP3634493B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US416610 1995-04-05
US08/416,610 US5675436A (en) 1995-04-05 1995-04-05 Optical image processor employing a nonlinear medium with active gain

Publications (2)

Publication Number Publication Date
JPH08286221A true JPH08286221A (ja) 1996-11-01
JP3634493B2 JP3634493B2 (ja) 2005-03-30

Family

ID=23650635

Family Applications (1)

Application Number Title Priority Date Filing Date
JP08242996A Expired - Fee Related JP3634493B2 (ja) 1995-04-05 1996-04-04 アクティブなゲインを有する非線形媒体を用いた光学的画像処理装置

Country Status (6)

Country Link
US (1) US5675436A (ja)
EP (1) EP0741351B1 (ja)
JP (1) JP3634493B2 (ja)
CA (1) CA2171996C (ja)
DE (1) DE69630988T2 (ja)
TW (1) TW299549B (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6160656A (en) * 1998-01-07 2000-12-12 Templex Technology, Inc. Method and apparatus for optical correlation recognition by time-integrated nonlinear detection
US6538791B2 (en) 1999-12-02 2003-03-25 Teraconnect, Inc Method and apparatus for real time optical correlation
AU2001251384A1 (en) * 2000-04-07 2001-10-23 The Regents Of The University Of California Remotely-interrogated high data rate free space laser communications link
US6528827B2 (en) 2000-11-10 2003-03-04 Optolynx, Inc. MSM device and method of manufacturing same
FR2937791B1 (fr) * 2008-10-24 2010-11-26 Thales Sa Dispositif d'imagerie polarimetrique optimise par rapport au contraste de polarisation
WO2015168039A1 (en) * 2014-04-28 2015-11-05 Earl Dennis Duncan Scalable source of quantum entangled photons

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4948212A (en) * 1988-08-22 1990-08-14 California Institute Of Technology Optical processing in III-V and II-VI compound semiconductors
US4968107A (en) * 1988-10-11 1990-11-06 Rockwell International Corporation Real time image inversion using four-wave mixing
US4999842A (en) * 1989-03-01 1991-03-12 At&T Bell Laboratories Quantum well vertical cavity laser
US5130849A (en) * 1989-10-13 1992-07-14 Hughes Aircraft Company Method and apparatus for energy transfers between optical beams using near-bandgap electrorefractive effect
WO1991014202A1 (en) * 1990-03-15 1991-09-19 Nippon Telegraph And Telephone Corporation All optical image processing and pattern recognition apparatus using stimulated photon echoes
US5337170A (en) * 1992-07-29 1994-08-09 The United States Of America As Represented By The Secretary Of The Air Force Quadratic optical processor for reducing multiplicative noise and other uses
US5270853A (en) * 1992-11-30 1993-12-14 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for imaging an object in or through a scattering medium by using multiple-wave mixing
US5508829A (en) * 1992-12-18 1996-04-16 International Business Machines Corporation LTG AlGaAs non-linear optical material and devices fabricated therefrom
US5412499A (en) * 1993-03-29 1995-05-02 At&T Corp. Spatial light modulator using quantum well material
US5376807A (en) * 1993-04-07 1994-12-27 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Motion-sensitive optical correlator using a VanderLugt Correlator

Also Published As

Publication number Publication date
EP0741351B1 (en) 2003-12-10
CA2171996C (en) 2000-02-15
DE69630988D1 (de) 2004-01-22
JP3634493B2 (ja) 2005-03-30
EP0741351A3 (en) 1997-04-16
CA2171996A1 (en) 1996-10-06
EP0741351A2 (en) 1996-11-06
DE69630988T2 (de) 2004-12-30
TW299549B (ja) 1997-03-01
US5675436A (en) 1997-10-07

Similar Documents

Publication Publication Date Title
US4074361A (en) Parallel data processing system
US4948212A (en) Optical processing in III-V and II-VI compound semiconductors
US5111312A (en) Coupling mechanism for efficient conversion of axisymmetric beam profiles into profiles suitable for diffraction-free transmission in free space
JPS58215679A (ja) 多モ−ド光キヤビテイにおけるコヒ−レント像の記憶装置
EP0256964A1 (en) Optical apparatus and method for beam coupling useful in light beam steering and spatial light modulation
Firester Image upconversion: part III
JP3634493B2 (ja) アクティブなゲインを有する非線形媒体を用いた光学的画像処理装置
US4586053A (en) Laser beam product marking system
US4720176A (en) Erase beam apparatus and method for spatial intensity threshold detection
JPH0728109A (ja) 周波数逓倍装置及び方法
JPS63316082A (ja) 光学装置
US5223966A (en) Method and apparatus for obtaining modulated light indicative of an image operationally formed by projecting an inputted image on the flat plate of an optical induction reflective index crystal
JP2850611B2 (ja) 光情報処理装置
JP2661771B2 (ja) 半導体レーザ装置
JP2004157504A (ja) レーザ装置
JP2004157505A (ja) レーザ光源およびレーザ投射装置
JP2850263B2 (ja) 光学的画像演算装置
Putilin et al. Waveguide holograms in LCD illumination units
JP2661772B2 (ja) 半導体レーザ装置
JP3210447B2 (ja) 光学的目的物抽出装置
KR100374805B1 (ko) 광변조시스템
Petts et al. A Real-Time Optical Image Processing System
Carter et al. Hologram laser-beam corrector and combiner for a satellite data link
JP2004070286A (ja) レーザ装置
Odoulov et al. Mirrorless coherent oscillation due to vectorial four-wave mixing in LiNbO 3

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041224

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080107

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090107

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100107

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110107

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110107

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120107

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130107

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees