JP4284803B2 - コード付き写真計測用ターゲット - Google Patents

コード付き写真計測用ターゲット Download PDF

Info

Publication number
JP4284803B2
JP4284803B2 JP37733699A JP37733699A JP4284803B2 JP 4284803 B2 JP4284803 B2 JP 4284803B2 JP 37733699 A JP37733699 A JP 37733699A JP 37733699 A JP37733699 A JP 37733699A JP 4284803 B2 JP4284803 B2 JP 4284803B2
Authority
JP
Japan
Prior art keywords
light reflecting
code
measurement
reflecting portion
origin
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP37733699A
Other languages
English (en)
Other versions
JP2001194146A (ja
Inventor
治孝 井本
孝善 太箸
進 服部
圭一 秋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IHI Corp
Original Assignee
IHI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by IHI Corp filed Critical IHI Corp
Priority to JP37733699A priority Critical patent/JP4284803B2/ja
Publication of JP2001194146A publication Critical patent/JP2001194146A/ja
Application granted granted Critical
Publication of JP4284803B2 publication Critical patent/JP4284803B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、写真計測の際に計測対象物の各計測点に貼付される写真計測用ターゲットをコード番号によって識別するコード付き写真計測用ターゲットに関する。
【0002】
【従来の技術】
周知のように、構造物の3次元計測の一手法として写真計測技術がある。この写真計測技術は、高解像度のCCDカメラを用いて複数の方向から構造物(計測対象物)の写真(画像)を撮影し、これら画像をコンピュータを用いて画像処理することにより、各画像上に写し出された各計測点の2次元座標から当該各計測点の3次元座標を算出するものである。このような写真計測技術では、計測対象物の画像上に各計測点を鮮明に写し出すために、各計測点にストロボ光を反射するレトロターゲット(写真計測用ターゲット)を貼付している。
【0003】
【発明が解決しようとする課題】
ところで、このような写真計測技術を用いて計測対象物を3次元計測する場合には、少なくとも画像処理に先立って計測対象物の各計測点毎に貼付された複数のレトロターゲット(つまり各計測点)を識別する必要がある。従来、このレトロターゲットの識別作業は、例えば計測担当者がコンピュータの表示装置に表示された対象物の画像上で各レトロターゲットに一連番号(計測点番号)を手入力で指定することによって行われている。画像処理の結果として得られる各計測点の3次元座標は、この各計測点番号毎すなわち各レトロターゲット毎に出力される。
【0004】
しかしながら、上記計測点番号の設定作業は、計測担当者による手入力で行われているため、▲1▼特にレトロターゲットの個数が増えた場合に作業が繁雑であり作業性が悪い、▲2▼誤設定した場合(同一番号を複数のレトロターゲットに指定した場合等)に後続処理である画像処理で誤った計測結果が得られる、▲3▼後続の画像処理を正常に実行することができない、等の不具合があった。
【0005】
一方、構造物を精度良く3次元計測するためには、多方向から複数枚あるいは数十枚の写真を撮影する必要があり、また構造物全体の形状を計測する場合にも構造物の各部分を繋ぎ合わせながら写真撮影する必要がある。このような場合、各写真に共通して撮影された同一のレトロターゲットを照合して各写真を繋ぎ合わせる必要がある。このような写真の繋ぎ合わせの際にも、各写真に共通撮影された同一のレトロターゲットの計測点番号が各写真間で一致していない場合には、後続の演算処理を正常に行うことができない。
【0006】
本発明は、上述する問題点に鑑みてなされたもので、以下の点を目的とするものである。
(1)写真計測の作業性を向上させる。
(2)写真計測の信頼性を向上させる。
(3)各計測点を正確に識別する。
【0007】
【課題を解決するための手段】
上記目的を達成するために、本発明では、第1の手段として、計測対象物に複数設定された各計測点の3次元座標を写真計測する際に、前記各計測点を識別するために当該各計測点近傍に設けられる写真計測用ターゲットにおいて、所定の位置関係で配置されることにより自らが計測点の識別用であることを示す複数の種別用光反射部と、該種別用光反射部に対する相対位置に応じてコード番号を示す1あるいは複数のコード用光反射部とを具備する手段を採用する。
【0008】
また、本発明では、第2の手段として、上記第1の手段において、種別用光反射部は、所定の格子間隔を有する直交格子の頂点上に配置された原点光反射部と、該原点光反射部を中心として直角を成すと共に原点光反射部から所定距離離れた頂点上に配置された2つの直角光反射部とからなり、かつ、コード用光反射部は、原点光反射部と直角光反射部とを結ぶ2つの直線及び直角光反射部を通過かつ当該直線に直交する2つの直線に囲まれた領域内の頂点上に離間配置された少なくとも3つからなり、このうち少なくとも1つは直角光反射部と直角光反射部を結ぶ直線を境界線として他の2つとは異なる側に配置されるという手段を採用する。
【0009】
本発明では、第3の手段として、上記第1または第2の手段において、種別用光反射部及びコード用光反射部の各表面を銀白色の台紙の上に透明なガラスビーズを密集状に配置して形成するという手段を採用する。
【0010】
【発明の実施の形態】
以下、図面を参照して、本発明に係わるコード付き写真計測用ターゲットの一実施形態について説明する。
【0011】
図1は、本実施形態の構成を示す正面図である。なお、この図に示すコード付き写真計測用ターゲットは、以下に説明するように各コード番号1〜35を示すコード付き写真計測用ターゲットA1〜A35のうち、コード番号「10」を示すコード付き写真計測用ターゲットA10に該当するものである。
【0012】
この図に示すように、本コード付き写真計測用ターゲットA10は、正方形の薄板状に形成されており、円形に形成されると共に所定の位置関係で配置されることにより自らが計測点の識別用であることを示す複数(本実施形態では3つ)の種別用光反射部S1〜S3と、同じく円形に形成されると共に上記種別用光反射部S1〜S3に対する相対位置に応じて所定のコード番号を示す1あるいは複数(本実施形態では3つ)のコード用光反射部C1〜C3とから構成されている。
【0013】
このようなコード付き写真計測用ターゲットA10は、例えば正方形に裁断された台紙に種別用光反射部S1〜S3及びコード用光反射部C1〜C3を印刷したものであり、写真計測の計測対象物に複数設定された各計測点の近傍に貼付されて、コード用光反射部C1〜C3の配置パターンによって特定されるコード番号によって各々の計測点を識別させるものである。当該コード付き写真計測用ターゲットA10の裏面には、写真計測の計測対象物に容易に貼付できるように粘着材が塗布されている。
【0014】
また、上記種別用光反射部S1〜S3及びコード用光反射部C1〜C3は、銀白色の台紙の上に微細かつ透明なガラスビーズを密集状態に接着固定することによって形成されている。この種別用光反射部S1〜S3及びコード用光反射部C1〜C3以外の部分については、良好なコントラストを得るために無光沢性の黒色インクを印刷することによって形成されている。
【0015】
本コード付き写真計測用ターゲットA10の構成についてさらに詳細を説明すると、正方形に形成された当該コード付き写真計測用ターゲットA10は、図示するように縦方向及び横方向共に各々8つに、つまり所定の格子間隔を有する合計64個の直交格子K1,K2,……,K64に仮想分割されており、この直交格子K1,K2,……,K64の各頂点T1,T2,……,T49(縁部に位置する頂点を除く)上に各々に円形状の種別用光反射部S1〜S3及びコード用光反射部C1〜C3の各中心が位置するように配置されている。
【0016】
なお、上記直交格子K1,K2,……,K64は、種別用光反射部S1〜S3及びコード用光反射部C1〜C3の配置を示すために仮想的に設定されているものであり、実際に写真計測に共されるコード付き写真計測用ターゲットA10に描かれているものではない。
【0017】
種別用光反射部S1〜S3については、最左かつ最上の頂点T1上に原点光反射部S1が配置され、該原点光反射部S1から横方向に所定距離離れた最右かつ最上の頂点T7上には一方の直角光反射部S2が配置され、同じく原点光反射部S1から縦方向に上記直角光反射部S2と同等距離離れた最左かつ最下の頂点T43上にはもう一方の直角光反射部S3が配置されている。すなわち、上記一方の直角光反射部S2ともう一方の直角光反射部S3とは、原点光反射部S1を中心として直角を成すように配置されている。
【0018】
このような種別用光反射部S1〜S3(つまり原点光反射部S1と直角光反射部S2,S3)に対して、コード用光反射部C1〜C3は、原点光反射部S1と直角光反射部S2,S3とを結ぶ2つの直線L1,L2及び直角光反射部S2,S3を通過かつ当該直線L1,L2に直交する2つの直線L3,L4に囲まれた正方形の領域内の頂点上に離間するように配置されており、このうち1つのコード用光反射部C3は、直角光反射部S2と直角光反射部S3を結ぶ直線Ltを境界線として他の2つのコード用光反射部C1,C2とは異なる側に配置されている。
【0019】
図2を参照して、このコード用光反射部C1〜C3についてさらに詳細に説明すると、本実施形態では、上述した配置条件に加え、コード用光反射部C1〜C3を配置する領域を図示するように頂点T10〜T12,T16〜T20,T23〜T27,T30〜T34,T38〜T40の何れかに限定している。また、コード用光反射部C1〜C3の面積を最大限に広くすることにより画像処理によるコード用光反射部C1〜C3の認識をより容易とすべくコード用光反射部C1〜C3の直径を直交格子K1,K2,……,K64の格子間隔と同等またはそれ以上としているので、コード用光反射部C1〜C3は、横方向、縦方向及び斜め方向に互いに隣接しないように離散配置されている。
【0020】
図3は、このような配置条件で3つのコード用光反射部C1からC3が配置される本コード付き写真計測用ターゲットA1〜A35とコード番号1〜35との対応表である。この図に示すように、上述した配置条件の下にコード用光反射部C1〜C3がそれぞれ異なる配置パターンで配置されることにより、各コード付き写真計測用ターゲットA1〜A35は、各々に異なるコード番号1〜35を示す。
【0021】
次に、このように構成されたコード付き写真計測用ターゲットA1〜A35の作用について詳しく説明する。
【0022】
従来の写真計測では、各計測点にストロボ光を反射するレトロターゲット及び計測対象物の適当な位置に基準尺をそれぞれ貼付してCCDカメラで撮影するが、本コード付き写真計測用ターゲットA1〜A35を用いた写真計測では、さらに各計測点の近傍に各コード付き写真計測用ターゲットA1〜A35を貼付した後に計測対象物の写真が撮影される。そして、このように撮影された写真(計測対象物の画像)をコンピュータを用いて画像処理することにより、各計測点の3次元座標が算出される。
【0023】
例えば、図1に示したコード付き写真計測用ターゲットA10を例に取って説明すると、本実施形態における画像処理では、各レトロターゲット(計測点)を上述した種別用光反射部S1〜S3(原点光反射部S1と直角光反射部S2,S3)及びコード用光反射部C1〜C3の特異な配置に基づいてコード番号として識別する。種別用光反射部S1〜S3とコード用光反射部C1〜C3がある領域内に密集して配置されるという特異な配置パターンを手掛かりとして計測対象物の画像の中からコード付き写真計測用ターゲットA10が抽出され、さらに最も外郭に位置する点として3つの種別用光反射部S1〜S3が抽出される。
【0024】
ここで、3次元空間上のある一点に配置されたCCDカメラによって計測対象物が撮影されるので、コード付き写真計測用ターゲットA10の画像は、CCDカメラの位置に応じて異なったものとなる。すなわち、上記抽出された種別用光反射部S1〜S3の画像は、コード付き写真計測用ターゲットA10を正対視したもの、つまり図1に示したように原点光反射部S1を中心として直角を成し、かつ当該原点光反射部S1に対して互いに等距離に各直角光反射部S2,S3を配置されたものとはならない。コード付き写真計測用ターゲットA10を斜め方向から眺めるとこのことは容易に理解できよう。
【0025】
したがって、3つの種別用光反射部S1〜S3を抽出できるものの、当該種別用光反射部S1〜S3のみを手掛かりとして原点光反射部S1と直角光反射部S2,S3とを確実に判別することができない。これに対して、本実施形態では、上述したようにコード用光反射部C3は、直角光反射部S2と直角光反射部S3を結ぶ直線Ltを境界線として他の2つのコード用光反射部C1,C2とは異なる側に配置されているので、この特異な配置に基づいて原点光反射部S1を特定することが可能である。すなわち、種別用光反射部S1〜S3を互いに通過する直線L1,L2,Ltによって囲まれた領域外に位置するコード用光反射部C3を手掛かりとし、該コード用光反射部C3に直線Ltを挟んで対峙する点として原点光反射部S1を特定することができる。
【0026】
このようにして原点光反射部S1が特定されると、原点光反射部S1を原点として直角光反射部S2と直角光反射部S3とが直角を成すように、つまりコード付き写真計測用ターゲットA10を正対視するようにコード付き写真計測用ターゲットA10の画像が座標変換されて、コード用光反射部C1〜C3の配置が直交格子K1,K2,……,K64を参照することによって確認され、当該確認結果に基づいて図3に示したコード番号対応表が検索されてコード番号「10」が認識される。このコード付き写真計測用ターゲットA10に限ることなく、他のコード付き写真計測用ターゲットA1〜A9,A11〜A35についても、同様にして原点光反射部S1と直角光反射部S2,S3とが判別され、各々の各コード用光反射部C1〜C3の配置位置に基づいてコード番号1〜9,11〜35が認識される。
【0027】
なお、本実施形態では、コード用光反射部C1〜C3が横方向、縦方向及び斜め方向に互いに隣接することがないように配置したが、これは以下の点を考慮したものである。例えばコード用光反射部C2は頂点T19上に配置されているが、2つの頂点T18,T20は当該頂点T19に対して横方向に隣接し、頂点T12,T26は頂点T19に対して縦方向に隣接し、また4つの頂点T11,T13,T25,T27は頂点T19に対して斜め方向に隣接している。このうち、横方向あるいは縦方向に隣接する頂点T18,T20,T12,T26に他のコード用光反射部C1,C3を配置した場合、コード用光反射部C2に対してコード用光反射部C1,C3が接近することになるので、画像処理によってコード用光反射部C1〜C3を個々に判別することがより困難になる。一方、斜め方向に隣接する頂点T11,T13,T25,T27に他のコード用光反射部C1,C3を配置しても接することはないが、コード用光反射部C2に対する距離が小さいために判別が困難である。
【0028】
上記図3では、コード番号1〜35に対応するコード付き写真計測用ターゲットA1〜A35を示しているが、上述したコード用光反射部C1〜C3の配置条件の下では、合計で420通りの配置パターンを設定することが可能であり、よってコード番号1〜420によって合計420個のレトロターゲット(計測点)を識別することができる。
【0029】
本発明は、上記実施形態に限定されるものではなく、例えば以下のような変形が考えられる。
(1)上記実施形態では、コード用光反射部C3のみを直線L1,L2,Ltによって囲まれた領域外に位置するように配置したが、本発明はこれに限定されるものではない。全てのコード用光反射部C1〜C3を上記領域外に配置しても良いし、あるいはコード用光反射部C3に加えて、コード用光反射部C1あるいはコード用光反射部C2のいずれか一方を上記領域外に配置しても良い。
【0030】
(2)上記実施形態では、コード用光反射部C1〜C3を合計3つとしたが、本発明はこれに限定されるものではない。コード用光反射部の個数は、コード番号の総個数(つまり計測点の識別個数)と上記コード用光反射部の個々の判別性等を考慮して決定されるものである。
【0031】
(3)上記実施形態では、種別用光反射部S1〜S3及びコード用光反射部C1〜C3の形状を円形としたが、本発明はこれに限定されるものではない。他の形状、例えば方形状あるいは三角形としても良い。
【0032】
【発明の効果】
以上説明したように、本発明に係わるコード付き写真計測用ターゲットによれば、以下のような効果を奏する。
【0033】
(1)第1の発明によれば、計測対象物に複数設定された各計測点の3次元座標を写真計測する際に、前記各計測点を識別するために当該各計測点近傍に設けられる写真計測用ターゲットにおいて、所定の位置関係で配置されることにより自らが計測点の識別用であることを示す複数の種別用光反射部と、該種別用光反射部に対する相対位置に応じてコード番号を示す1あるいは複数のコード用光反射部とから構成されるので、種別用光反射部の位置関係に基づいて計測点の識別用であることを計測対象物の写真の画像処理によって認識することが可能であり、コード用光反射部の種別用光反射部に対する相対位置に応じてコード番号を同じく画像処理を用いて認識することが可能である。
すなわち、従来のように人手に頼ることなく、計測対象物の写真に写し出されたコード付き写真計測用ターゲットを画像処理することにより各計測点を識別することが可能であり、よって写真計測の作業性及び信頼性を向上させることができる。
【0034】
(2)第2の発明によれば、種別用光反射部は、所定の格子間隔を有する直交格子の頂点上に配置された原点光反射部と、該原点光反射部を中心として直角を成すと共に原点光反射部から所定距離離れた頂点上に配置された2つの直角光反射部とからなり、かつ、コード用光反射部は、原点光反射部と直角光反射部とを結ぶ2つの直線及び直角光反射部を通過かつ当該直線に直交する2つの直線に囲まれた領域内の頂点上に離間配置された少なくとも3つからなり、このうち少なくとも1つは直角光反射部と直角光反射部を結ぶ直線を境界線として他の2つとは異なる側に配置されるので、当該コード付き写真計測用ターゲットを傾斜角を持って写真撮影した場合であっても、原点光反射部と直角光反射部とを判別して、コード用光反射部によって示されるコード番号を識別することが可能である。
【0035】
(4)第3の発明によれば、種別用光反射部及びコード用光反射部の各表面が銀白色の台紙の上に透明なガラスビーズを密集状に配置して形成されるので、ストロボ光を照射して計測対象物を撮影する場合に、いずれの方向から撮影してもストロボ光の反射光の強度がほぼ同等となる。したがって、計測対象物をいずれの方向から撮影しても高コントラストで種別用光反射部及びコード用光反射部を撮影することが可能であり、よって画像処理において種別用光反射部及びコード用光反射部を判別し易い。
【図面の簡単な説明】
【図1】 本発明の一実施形態の構成を示す正面図である。
【図2】 本発明の一実施形態の構成原理を説明するための正面図である。
【図3】 本発明の一実施形態におけるコード対応表である。
【符号の説明】
A……コード付き写真計測用ターゲット
S1……種別用光反射部(原点光反射部)
S2,S3……種別用光反射部(直角光反射部)
C1〜C3……コード用光反射部
K1〜K64……直交格子
L1〜L4,Lt……直線
T1〜T49……頂点

Claims (2)

  1. 計測対象物に複数設定された各計測点の3次元座標を写真計測する際に各計測点を識別するために当該各計測点近傍に設けられる写真計測用ターゲットであって、
    所定の格子間隔を有する直交格子の頂点上に配置された原点光反射部(S1)と、該原点光反射部を中心として直角を成すと共に原点光反射部(S1)から所定距離離れた頂点上に配置された2つの直角光反射部(S2,S3)とからなり、コード用光反射部(C1〜C3)は、原点光反射部(S1)と直角光反射部(S2,S3)とを結ぶ2つの直線(L1,L2)及び直角光反射部(S2,S3)を通過かつ当該直線(L1,L2)に直交する2つの直線(L3,L4)に囲まれた領域内の頂点上に離間配置された少なくとも3つからなり、このうち少なくとも1つ(C3)は直角光反射部(S2)と直角光反射部(S3)を結ぶ直線(Lt)を境界線として他の2つ(C1,C2)とは異なる側に配置される複数の種別用光反射部(S1〜S3)と、
    該種別用光反射部(S1〜S3)に対する相対位置に応じてコード番号を示す1あるいは複数のコード用光反射部(C1〜C3)と、
    を具備することを特徴とするコード付き写真計測用ターゲット。
  2. 種別用光反射部(S1〜S3)及びコード用光反射部(C1〜C3)の各表面を銀白色の台紙の上に透明なガラスビーズを密集状に配置して形成することを特徴とする請求項1記載のコード付き写真計測用ターゲット。
JP37733699A 1999-12-28 1999-12-28 コード付き写真計測用ターゲット Expired - Lifetime JP4284803B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP37733699A JP4284803B2 (ja) 1999-12-28 1999-12-28 コード付き写真計測用ターゲット

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP37733699A JP4284803B2 (ja) 1999-12-28 1999-12-28 コード付き写真計測用ターゲット

Publications (2)

Publication Number Publication Date
JP2001194146A JP2001194146A (ja) 2001-07-19
JP4284803B2 true JP4284803B2 (ja) 2009-06-24

Family

ID=18508643

Family Applications (1)

Application Number Title Priority Date Filing Date
JP37733699A Expired - Lifetime JP4284803B2 (ja) 1999-12-28 1999-12-28 コード付き写真計測用ターゲット

Country Status (1)

Country Link
JP (1) JP4284803B2 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4828195B2 (ja) * 2005-09-30 2011-11-30 株式会社トプコン カラーコード付き標識
KR100809533B1 (ko) 2006-09-21 2008-03-04 삼성중공업 주식회사 공간의 정밀 계측을 위한 글로벌 좌표 생성방법
JP5207719B2 (ja) 2007-12-05 2013-06-12 株式会社トプコン カラーコード付き標識、カラーコード抽出手段及び三次元計測システム
JP5179995B2 (ja) * 2008-08-07 2013-04-10 株式会社ニシヤマ 軌道のレールの管理寸法測定方法、およびその装置
KR101475742B1 (ko) * 2013-03-15 2014-12-24 삼성중공업(주) 사진 계측 장치 및 방법
CN106871873A (zh) * 2017-02-24 2017-06-20 上海坤辕检测科技有限公司 一种近景摄影测量中编码标志的编码方法

Also Published As

Publication number Publication date
JP2001194146A (ja) 2001-07-19

Similar Documents

Publication Publication Date Title
US7432914B2 (en) Coordinate input apparatus, its control method, and program
EP3371779B1 (en) Systems and methods for forming models of three dimensional objects
US20110102550A1 (en) 3d imaging system
US8625107B2 (en) Target for motion tracking system
US20040201823A1 (en) Context aware projector
JP4656745B2 (ja) トンネル坑内の形状測定方法
EP0523152A1 (en) THREE-DIMENSIONAL REAL-TIME FEELING SYSTEM.
WO2021185216A1 (zh) 一种基于多激光测距的标定方法
CN108989794B (zh) 基于抬头显示系统的虚像信息测量方法及系统
WO2009152715A1 (zh) 触摸检测传感装置
JP4284803B2 (ja) コード付き写真計測用ターゲット
JP2000171705A5 (ja)
US9797833B2 (en) Method for determining the refractive power of a transparent object, and corresponding device
JPH05257005A (ja) 光反射器
US4637715A (en) Optical distance measuring apparatus
JP2010181325A (ja) 3次元座標測定装置
WO2019196536A1 (zh) 用于投射显示装置的视角测试方法、装置和系统
JP2001330915A (ja) 立体画像撮影方法及び撮影補助具
CN208141454U (zh) 一种标定板及双目对视摄像装置标定系统
JP4604348B2 (ja) 写真計測用ターゲット
JP2517062B2 (ja) 3次元計測装置
US5416317A (en) Visual line detecting device
JP4266459B2 (ja) トンネル坑内の写真測量方法及びトンネル坑内の写真測量システム
JP6303545B2 (ja) 計測装置、投影装置、計測方法、及びプログラム
JP4841081B2 (ja) トンネル坑内の形状測定システムおよび形状測定方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061025

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081202

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090303

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090316

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120403

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4284803

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120403

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120403

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130403

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140403

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term