JP5082941B2 - 標線位置測定装置、標線位置測定用プログラム、および標線マーク - Google Patents
標線位置測定装置、標線位置測定用プログラム、および標線マーク Download PDFInfo
- Publication number
- JP5082941B2 JP5082941B2 JP2008059462A JP2008059462A JP5082941B2 JP 5082941 B2 JP5082941 B2 JP 5082941B2 JP 2008059462 A JP2008059462 A JP 2008059462A JP 2008059462 A JP2008059462 A JP 2008059462A JP 5082941 B2 JP5082941 B2 JP 5082941B2
- Authority
- JP
- Japan
- Prior art keywords
- mark
- marked
- marked line
- line
- test piece
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20068—Projection on vertical or horizontal image axis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
本発明に係る標線マークは、試験片の標線位置を非接触ビデオ式により検出するための標線マークであって、上記の標線位置測定装置に用いることを特徴とする。
本発明に係る標線位置測定用プログラムは、試験片に付されている標線の位置を非接触ビデオ式により測定する装置に用いるための標線位置測定用プログラムであって、連続した階調の濃度分布が前記標線を挟んで線対称となるよう分布している標線マークの画像データを入力する処理と、前記標線マーク画像データに基づいて前記標線の位置を演算する際に、前記標線の位置変位に伴って前記標線マークがX軸方向に変位するとき、前記標線マークの変位方向と直交するY軸方向に前記標線マーク画像データを積算して関数f(x)を求め、予め定めた直交する2つの関数と前記関数f(x)との相関をそれぞれ算出し、得られた2つの算出結果の比に基づいて前記標線の位置を演算する処理と、をコンピュータで実行させることを特徴とする。
図1は、本発明を適用した非接触ビデオ式伸び計の全体構成図である。本図において、TPは試験片であり、図示しない材料試験機の上つかみ具2および下つかみ具4により把持されている。試験片TPに付けられているG1およびG2は標線である。この標線G1,G2の上には標線シールが貼り付けてあり、その標線シール上には標線マーク(後に詳述する)が印刷されている。ここで、標線マークは標線シール上に印刷されているものであるが、標線マークと標線シールは一体として機能するので、以下、単に標線マークM1,M2と呼ぶ。
本明細書において、標線マークM1,M2を含む標線マークの総称を指すときには、単に標線マークMという。同様に、標線G1,G2を含む標線の総称を指すときには、単に標線Gという。
図3(A)は、変位した標線マークM1の位置と、標線マーク画像データをY軸方向に積算する際の計算領域を示している。この図3(A)に示されているbは、変位した標線G1のX座標を表していると同時に、上下対称のグレイスケールにおける対称軸の位置でもある。
上記の関数f(x)は、次の数式2で示される。
まず次の数式3に基づいて、上記の関数f(x)とcos x の相関を計算し、その計算結果をx相関と定義する。これと同時に、上記の関数f(x)とsin x の相関を計算し、その計算結果をy相関と定義する。ここで、cos xとsin xについては、直交関数となっていることから便宜的に用いたものである。また、数式3に示してある=マークは、右辺により計算した結果を左辺にする、という意味である。
実際にコンピュータ8でbの値を計算するためには、数式3の演算を離散的に実行すればよい。すなわち、図3(B)において説明した関数f(x)とcos x の相関Rxを計算し、且つ、上記の関数f(x)とsin x の相関Ryを計算し、それら計算結果の比からtan-1 (Ry/Rx)を求めればよい。
ステップS1では、ビデオカメラ6から標線マーク画像データをCPU内のワークエリアに取り込む。
ステップS2では、図3(A),(B)で説明したように、試験片TPに負荷がかけられたときの関数f(x)を計算する。
ステップS3では、ステップS2で求めた関数f(x)とcos x の相関Rxを計算する。同時に、上記の関数f(x)とsin x の相関Ryを計算する。
ステップS4では、ステップS3で求めた計算結果の比からtan-1 (Ry/Rx)を計算し、その結果をbとする。
ステップS5では、ステップS4で求めたbの値を実際の長さに変換するための変換処理および校正処理を行う。
まず、x相関は次の数式8により求められる。
図7は、図6に示した計算結果と理想的直線との誤差を示している。この図から明らかなように、計算に関わる素子は僅かに4素子であるにも拘わらず、計算領域(撮像範囲)の0.2%程度の精度が得られている。よって、撮像素子が離散的に配置されていることは、測定結果にほとんど影響を与えないことがわかる。
(1)本実施の形態では、試験片TP上の標線Gを対称軸として、その両側に黒色濃度が徐々に下がっていく連続階調分布(いわゆるグレイスケール)を備えた標線マークMを用いた。その結果、従来から用いられてきた白黒の標線マークを用いる場合に比べて撮像素子間の補間までも行うことができるので、より高分解能を達成することができる。
(2)本実施の形態では、試験片TP上の標線Gを対称軸として、その両側に黒色濃度が徐々に下がっていく連続階調分布をビデオカメラで撮影しているので、撮像素子から出力される映像信号のレベルも連続的なものとなる。その結果として、高い測定精度を安定的に得ることができる。
(3)1つの撮像素子に着目すると、感光部分はその素子のある1部の領域にすぎないことになるが、従来から知られている白黒の標線マークでは境界部が通り過ぎてから隣の素子の感光部分が応答するまで映像出力が変化せず、適切な計算結果が得られなかった。他方、本実施の形態では、黒色濃度が徐々に下がっていく連続階調分布を撮像しているので、常に安定した位置演算を実行することができる。
(4)本実施の形態では、標線マークMを撮影するビデオカメラ側の設定、および、映像信号のコントラスに依存することなく、標線位置の演算を行うことができる。
(5)標線Gの位置を計算するに際して、所定値の閾値を用いることなく演算を実行することができるので、演算結果にばらつきが生じることがない。
(6)撮像素子が離散的に配置されていたとしても、標線マークMとして連続階調の黒色濃度を撮影しているので、撮像素子が離散的に配置されていることは、位置測定のための演算結果にほとんど影響を与えることがない。
実施の形態1における各構成要素は、以下に列挙するよう変形することができる。
(1)上述した標線マークMでは、黒色の連続階調分布を用いているが、有彩色の連続階調分布を線対称とした場合にも同様に適用可能である。また、対称軸位置での色濃度を1(100%)とすることなく、逆に0(0%)としてもよい。
伸び計と幅計を同時に機能させるための全体構成は、図1に示した構成と同じである。但し、標線マークの画像として、線対称の濃度分布をX軸方向のみならず、Y軸方向にも備えた画像とする必要がある。
X軸方向の伸びと、Y軸方向の伸びを同時に測定するために、一例として、次の数式11に示す濃淡をもつ標線マークを使用することができる。
数式11は、無彩色のみならず有彩色にも適用し得ることは勿論である。
図9は、X軸方向の伸びと、Y軸方向の伸びを同時に測定するための濃度分布を示した一例である。なお、この図9においてはContrastという変数を用いているが、このContrastとは、通常の意味におけるコントラスト(明度差)ではなく、各座標位置における色濃度を1〜0の範囲で表したものである。
図10は、X軸方向の伸びとY軸方向の伸びを同時に測定するために、連続階調の色濃度分布を備えた標線マークの一例を示す。
図11は、図3(B)に示した関数f(x)を用いることにより、標線Gの位置(=標線マークの重心位置)bを算出する手順を示した説明図である。
図3(B)に示した関数f(x)を算出する手順は実施の形態1で説明した通りであるので、説明は省略する。ここで述べる実施の形態2では、所定の閾値Thと関数f(x)との交点X1およびX2を求め、その中点をbの座標としている。
本実施の形態では、従来から知られている閾値を使用しているので、図3(B)に示した関数f(x)を算出した後は、より簡便に標線の位置を算出することができる。
図11から明らかなように、実施の形態2で重要な数値は、閾値Thと関数f(x)との交点となるX1およびX2である。従って、これら交点X1およびX2を含む立上がり領域および立下り領域以外は、どのような濃度分布であってもよい。すなわち、標線マークの対称軸近辺における濃度は必ずしも連続階調とする必要はない。一例として、標線を挟んだX軸方向の所定領域を一定の濃度とした標線マークを用いることができる。
図12は、図3(B)に示した関数f(x)を用いることにより、標線Gの位置(=標線マークの重心位置)bを算出する手順を示した説明図である。
図3(B)に示した関数f(x)を算出する手順は実施の形態1で説明した通りであるので、説明は省略する。ここで述べる実施の形態3では、試験片TPへ負荷を作用させる前に、標線マークMの濃淡分布を横方向に積分して関数f1(x)を予め求めておく。次に、変位後の関数f2(x)と一致するまでX軸上をΔτずつ移動させる。Δτは、所望する分解能である。これにより、標線マークMの重心位置bを求めることができる。関数f1(x)をX軸上で移動させるためには、f1(x −τ)とf2(x)との相関を計算すればい。そして、最大の相関値を呈するτをbの座標とする。
本実施の形態によれば、標線マークMの濃淡分布を横方向に積分して関数f1(x)を予め求めておけばよいので、同一の標線マークMを用いるユーザにとっては、既知の関数f1(x)を共用することができる。
実施の形態3では、1)試験片TPの標線Gと直交するX軸方向に負荷が作用される前に、標線Gと平行なY軸方向に標線マーク画像データを積算することにより、X座標を変数とする第1の関数f1(x)を予め算出しておき、2)試験片TPに負荷が作用されたとき標線Gの位置変位に伴って標線マークMがX軸方向に変位した時点で、Y軸方向に前記標線マーク画像データを積算することにより、X座標を変数とする第2の関数f2(x)を算出し、3)第1の関数f1(x)と第2の関数f2(x)との相関関数R12(τ)が最大値を呈するτを求めることにより前記標線の位置を判定していた。
しかし、X軸上を移動させる関数は上記第1の関数f1(x)に限らず、正規分布曲線あるいは2等辺三角形など、任意な関数を用いることが可能である。
試験片は、図1の試験片TPに相当する。標線は、図1の標線G1,G2に相当する。連続した階調の色濃度が標線を挟んで線対称となるよう分布している標線マークは、図1の標線マークM1,M2に相当する。ビデオカメラは、図1のビデオカメラ6に相当する。演算手段は、図1のコンピュータ8に相当する。
なお、本発明を解釈する上で上記の対応関係は何ら限定とならない。
4 下つかみ具
6 ビデオカメラ
8 コンピュータ
10 表示装置
12 入力装置
14 外部記憶装置
G1,G2 標線
M1,M2 標線マーク
Claims (5)
- 試験片に付されている標線の位置を非接触ビデオ式により測定する装置であって、
連続した階調の濃度分布が前記標線を挟んで線対称となるよう分布している標線マークを撮像し、標線マーク画像データを出力するビデオカメラと、
前記標線マーク画像データに基づいて、前記標線の位置を演算する演算手段とを備え、
前記演算手段は、
前記標線の位置変位に伴って前記標線マークがX軸方向に変位するとき、前記標線マークの変位方向と直交するY軸方向に前記標線マーク画像データを積算して関数f(x)を求め、予め定めた直交する2つの関数と前記関数f(x)との相関をそれぞれ算出し、得られた2つの算出結果の比に基づいて前記標線の位置を演算する、
ことを特徴とする標線位置測定装置。 - 請求項1に記載の標線位置測定装置において、
前記標線マークは、無彩色または有彩色の連続的な階調の濃度分布が所定の対称軸を挟んでいる画像として、標線シール上に印刷されていることを特徴とする標線位置測定装置。 - 請求項1または2に記載の標線位置測定装置において、
前記試験片に対して負荷が作用されたとき、前記標線が、前記標線に直交するX軸方向および前記標線に平行なY軸方向に向って変位する際には、
前記標線マークとして、
連続した階調の濃度分布が、前記試験片の標線を挟んで線対称となるよう連続分布している第1の濃度パターンと、
連続した階調の色濃度が、前記試験片の標線上における所定の点を通り且つ前記標線と直行する直線を挟んで線対称となるよう連続分布している第2の濃度パターンとを併せ備えたマークを用いることにより、
前記試験片のX座標およびY座標を算出することを特徴とする標線位置測定装置。 - 試験片の標線位置を非接触ビデオ式により検出するための標線マークであって、
請求項1から請求項3のいずれか一項に記載の標線位置測定装置に用いることを特徴とする標線マーク。 - 試験片に付されている標線の位置を非接触ビデオ式により測定する装置に用いるための標線位置測定用プログラムであって、
連続した階調の濃度分布が前記標線を挟んで線対称となるよう分布している標線マークの画像データを入力する処理と、
前記標線マーク画像データに基づいて前記標線の位置を演算する際に、前記標線の位置変位に伴って前記標線マークがX軸方向に変位するとき、前記標線マークの変位方向と直交するY軸方向に前記標線マーク画像データを積算して関数f(x)を求め、予め定めた直交する2つの関数と前記関数f(x)との相関をそれぞれ算出し、得られた2つの算出結果の比に基づいて前記標線の位置を演算する処理と、
をコンピュータで実行させることを特徴とする標線位置測定用プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008059462A JP5082941B2 (ja) | 2008-03-10 | 2008-03-10 | 標線位置測定装置、標線位置測定用プログラム、および標線マーク |
US12/379,393 US8502871B2 (en) | 2008-03-10 | 2009-02-20 | Gauge line position measuring device, program for measuring a gauge line position, and gauge line mark |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008059462A JP5082941B2 (ja) | 2008-03-10 | 2008-03-10 | 標線位置測定装置、標線位置測定用プログラム、および標線マーク |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009216494A JP2009216494A (ja) | 2009-09-24 |
JP5082941B2 true JP5082941B2 (ja) | 2012-11-28 |
Family
ID=41053178
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008059462A Expired - Fee Related JP5082941B2 (ja) | 2008-03-10 | 2008-03-10 | 標線位置測定装置、標線位置測定用プログラム、および標線マーク |
Country Status (2)
Country | Link |
---|---|
US (1) | US8502871B2 (ja) |
JP (1) | JP5082941B2 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5282853B2 (ja) * | 2010-09-06 | 2013-09-04 | 株式会社島津製作所 | 材料試験機 |
JP5378340B2 (ja) * | 2010-10-14 | 2013-12-25 | 株式会社コベルコ科研 | ひずみ測定装置およびひずみ測定方法 |
JP5549530B2 (ja) * | 2010-10-21 | 2014-07-16 | 株式会社島津製作所 | 材料試験機および材料試験機の標線測定方法 |
JP5549531B2 (ja) * | 2010-10-21 | 2014-07-16 | 株式会社島津製作所 | 材料試験機および材料試験機の試験片の幅測定方法 |
CN102003945B (zh) * | 2010-10-28 | 2013-05-22 | 汪远银 | 一种虚拟光学引伸计的测量方法 |
KR101310345B1 (ko) * | 2010-12-31 | 2013-09-23 | 전남대학교산학협력단 | 이미지 강도에 의한 변위측정 프로그램이 저장된 기록매체 및 변위측정 장치 |
US9053561B2 (en) * | 2012-03-23 | 2015-06-09 | Specialty Minerals (Michigan) Inc. | System and method for workpiece measurement during forging by image processing |
CN103376065B (zh) * | 2012-04-26 | 2016-06-22 | 北京隆盛泰科石油管科技有限公司 | 类条形码引伸计系统及其测量应力应变全曲线的方法 |
CN109470165A (zh) * | 2018-12-07 | 2019-03-15 | 广州大学 | 一种基于机器视觉的测量材料弯曲变形的引伸计测量方法 |
US11803943B2 (en) * | 2019-06-25 | 2023-10-31 | Illinois Tool Works Inc. | Brightness and contrast correction for video extensometer systems and methods |
CN110514330A (zh) * | 2019-08-08 | 2019-11-29 | 西安中星测控有限公司 | 一种无源二维码压力传感器及其制备方法 |
CN110514329A (zh) * | 2019-08-08 | 2019-11-29 | 西安中星测控有限公司 | 一种无源二维码载荷传感器及其制备方法 |
CN110806182A (zh) * | 2019-10-30 | 2020-02-18 | 河海大学 | 基于远心镜头的高精度光学引伸计及测量方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1448611A (en) * | 1973-01-10 | 1976-09-08 | Nippon Kokan Kk | Method and apparatus for on-contact measurement of a gauge of a high temperature material |
JPH0274814A (ja) * | 1988-09-09 | 1990-03-14 | Fujitsu Ltd | 検出装置 |
JP3550605B2 (ja) * | 1995-09-25 | 2004-08-04 | 株式会社ニコン | 位置検出方法、それを用いた露光方法、その露光方法を用いた半導体素子、液晶表示素子又は薄膜磁気ヘッドの製造方法、及び位置検出装置、それを備えた露光装置 |
JPH0987632A (ja) * | 1995-09-18 | 1997-03-31 | Yaskawa Electric Corp | コークス炉移動台車位置ずれ検出装置 |
WO1997047943A1 (fr) * | 1996-06-14 | 1997-12-18 | Kabushiki Kaisya Saginomiya Seisakusyo | Dispositif pour controler l'alignement des roues et controle de l'alignement des roues |
JP3750249B2 (ja) * | 1997-02-03 | 2006-03-01 | 株式会社島津製作所 | ビデオ式非接触伸び計 |
JPH10270304A (ja) * | 1997-03-26 | 1998-10-09 | Nikon Corp | 露光パターンの評価方法、露光パターンの評価用マーク及び露光パターンの評価装置 |
JP3230466B2 (ja) * | 1997-09-18 | 2001-11-19 | 株式会社島津製作所 | 光学式伸び計用標線マーク |
JP2001201322A (ja) * | 2000-01-21 | 2001-07-27 | Japan Tobacco Inc | 非接触伸び計ターゲットおよび非接触伸び計 |
US7061628B2 (en) * | 2001-06-27 | 2006-06-13 | Southwest Research Institute | Non-contact apparatus and method for measuring surface profile |
JP3899915B2 (ja) * | 2001-12-06 | 2007-03-28 | 旭硝子株式会社 | 光学歪の評価方法および評価装置 |
JP3983573B2 (ja) * | 2002-03-06 | 2007-09-26 | 富士重工業株式会社 | ステレオ画像特性検査システム |
JP3837503B2 (ja) * | 2002-05-09 | 2006-10-25 | 独立行政法人産業技術総合研究所 | 3次元座標評価ゲージ |
DE102004013441A1 (de) * | 2004-03-18 | 2005-10-13 | Beissbarth Gmbh | Meßverfahren und Meßgerät zur Bestimmung der räumlichen Lage einer Radfelge sowie Fahrwerkvermessungseinrichtung |
JP2006078345A (ja) * | 2004-09-09 | 2006-03-23 | Toyota Motor Corp | 標点設定方法 |
EP1840686B1 (en) * | 2005-01-19 | 2013-05-08 | Mitsubishi Electric Corporation | Positioning device and positioning method |
JP2007256240A (ja) * | 2006-03-27 | 2007-10-04 | Aisin Seiki Co Ltd | 表面歪み欠陥検査装置、検査方法及びコンピュータプログラム |
-
2008
- 2008-03-10 JP JP2008059462A patent/JP5082941B2/ja not_active Expired - Fee Related
-
2009
- 2009-02-20 US US12/379,393 patent/US8502871B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2009216494A (ja) | 2009-09-24 |
US8502871B2 (en) | 2013-08-06 |
US20090225167A1 (en) | 2009-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5082941B2 (ja) | 標線位置測定装置、標線位置測定用プログラム、および標線マーク | |
EP2889575B1 (en) | Three-dimensional measurement apparatus, three-dimensional measurement method, and storage medium | |
CN109100100B (zh) | 刚性测定装置以及刚性测定方法 | |
US20100310128A1 (en) | System and Method for Remote Measurement of Displacement and Strain Fields | |
CN106415663B (zh) | 光学跟踪系统及光学跟踪系统的标记部姿势及位置算出方法 | |
JP2006329628A (ja) | 構造物における変形量計測方法 | |
JP6170281B2 (ja) | 三次元計測装置、三次元計測装置の制御方法、およびプログラム | |
CN107883874B (zh) | 一种圆结构光的标定方法 | |
EP3548838B1 (en) | Wire rope measuring device and wire rope measuring method | |
JP5487946B2 (ja) | カメラ画像の補正方法およびカメラ装置および座標変換パラメータ決定装置 | |
KR101734372B1 (ko) | 싱글 카메라 모듈을 이용한 이용자 거리 측정 방법 | |
JP6634842B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP2016066995A (ja) | 像ズレ量算出装置、撮像装置、および像ズレ量算出方法 | |
JP3508659B2 (ja) | ビデオ式伸び計 | |
JP2001201322A (ja) | 非接触伸び計ターゲットおよび非接触伸び計 | |
JP4240215B2 (ja) | ビデオ式3次元位置計測装置およびビデオ式伸び計並びにビデオ式幅計 | |
JP2008170282A (ja) | 形状測定装置 | |
KR20100080640A (ko) | 디지털 카메라를 이용한 배관의 2차원 정도관리 방법 및 측정 시스템 | |
TWI424373B (zh) | 決定物件特徵之影像處理裝置及其方法 | |
JP5549530B2 (ja) | 材料試験機および材料試験機の標線測定方法 | |
KR20180105215A (ko) | 카메라 촬영 제어 방법 및 장치 | |
JP5378340B2 (ja) | ひずみ測定装置およびひずみ測定方法 | |
JP2024047868A (ja) | ラインセンサカメラの位置姿勢推定装置及び位置姿勢推定方法 | |
JP2021162305A (ja) | 測距システム、測距方法及び測距プログラム | |
JP2005249729A (ja) | 設置ズレ検出システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100805 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120426 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120807 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120820 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5082941 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150914 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |