JP2006287504A - 撮影装置、撮影画像の画像処理方法及びプログラム - Google Patents
撮影装置、撮影画像の画像処理方法及びプログラム Download PDFInfo
- Publication number
- JP2006287504A JP2006287504A JP2005103402A JP2005103402A JP2006287504A JP 2006287504 A JP2006287504 A JP 2006287504A JP 2005103402 A JP2005103402 A JP 2005103402A JP 2005103402 A JP2005103402 A JP 2005103402A JP 2006287504 A JP2006287504 A JP 2006287504A
- Authority
- JP
- Japan
- Prior art keywords
- image
- distortion
- images
- pixel value
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000012545 processing Methods 0.000 title abstract description 109
- 238000012937 correction Methods 0.000 claims abstract description 29
- 239000000203 mixture Substances 0.000 claims description 58
- 238000004364 calculation method Methods 0.000 claims description 27
- 239000002131 composite material Substances 0.000 claims description 21
- 230000015572 biosynthetic process Effects 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 claims description 10
- 238000003786 synthesis reaction Methods 0.000 claims description 10
- 230000002194 synthesizing effect Effects 0.000 claims description 9
- 238000012935 Averaging Methods 0.000 claims description 8
- 238000003672 processing method Methods 0.000 claims description 6
- 238000010187 selection method Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 claims description 3
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 49
- 230000009466 transformation Effects 0.000 description 22
- 230000008569 process Effects 0.000 description 20
- 230000006870 function Effects 0.000 description 17
- 238000013500 data storage Methods 0.000 description 16
- 238000005286 illumination Methods 0.000 description 16
- 238000000605 extraction Methods 0.000 description 10
- 239000004973 liquid crystal related substance Substances 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 238000013144 data compression Methods 0.000 description 4
- 229910052709 silver Inorganic materials 0.000 description 4
- 239000004332 silver Substances 0.000 description 4
- -1 silver halide Chemical class 0.000 description 4
- 238000007906 compression Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 241001125929 Trisopterus luscus Species 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- GGCZERPQGJTIQP-UHFFFAOYSA-N sodium;9,10-dioxoanthracene-2-sulfonic acid Chemical compound [Na+].C1=CC=C2C(=O)C3=CC(S(=O)(=O)O)=CC=C3C(=O)C2=C1 GGCZERPQGJTIQP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】デジタルカメラ1は、異なる方向から複数回撮影して、複数の画像を取得する。このデジタルカメラ1は、画像処理装置を備え、画像処理装置は、各画像に対して台形補正を行い、あたかも正面から撮影したような画像を生成する。画像処理装置は、補正した複数の画像の各画素の画素値を加算平均して、複数の画像を合成する。光沢紙の写真を撮影することにより映り込みがあったとしても、複数の画像の各画素の画素値を加算平均することにより、映り込みの影響が低減される。
【選択図】図1
Description
被写体を撮影する撮影装置において、
前記被写体を異なる方向から複数回撮影することによって得られた複数の撮影画像の歪みを補正して、歪み補正画像を取得する補正部と、
前記補正部が補正した複数の歪み補正画像の各画素を対応させて、前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する画像合成部と、を備えたことを特徴とする。
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するようにしてもよい。
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するようにしてもよい。
前記複数の歪み補正画像の各画素値から、それぞれ、前記撮影部が前記被写体を撮影する時の光の光強度を示すパラメータを取得し、複数の歪み補正画像の対応する画素毎に、取得したパラメータの値を比較し、前記パラメータの値が小さい方の画素値を選択する選択法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するようにしてもよい。
被合成画像を第1の画像、前記第1の画像に合成する画像を第2の画像として、前記第1の画像、前記第2の画像から、それぞれ、前記パラメータを画素毎に取得して、前記第2の画像のパラメータの値から前記第1の画像のパラメータの値を差し引いた差を求め、
前記第1の画像が最初の撮影画像の場合に、前記求めた差が予め設定された負の第1の閾値以上であるときは、前記第1の画像の画素値を選択し、前記求めた差が前記第1の閾値未満であるときは、第2の画像の画素値を選択し、選択した画素値を合成画像の画素値として2つの歪み補正画像を画素毎に合成し、
前記第1の画像が既に合成した合成画像の場合に、前記求めた差が予め設定された正の第2の閾値を越えたときは、前記第1の画像の画素値を選択し、選択した画素値を新たな合成画像の画素値とし、前記求めた差が前記第2の閾値以下であるときは、前記第1の画像の画素値と第2の画像の画素値とを画像合成の回数に基づいて加重平均した値を新たな合成画像の画素値とする選択加算平均法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するようにしてもよい。
前記パラメータとして、各歪み補正画像の輝度値を用いるようにしてもよい。
前記パラメータとして、各歪み補正画像の色相値を用いるようにしてもよい。
注目した画素近傍の領域の輝度値を用いて加算演算し、注目した画素の画素値を取得する演算法を用い、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するようにしてもよい。
被写体を撮影することによって得られた撮影画像の画像処理方法において、
前記被写体を異なる方向から複数回撮影し、前記撮影によって得られた複数の撮影画像の歪みを補正して、複数の歪み補正画像を取得するステップと、
前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するステップと、を備えたことを特徴とする。
コンピュータに、
被写体を異なる方向から複数回撮影し、撮影によって得られた複数の画像の歪みを補正して、歪み補正画像を取得する手順、
前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する手順、
を実行させるためのものである。
本実施形態に係るデジタルカメラ1は、光沢紙等を用いた銀塩写真2、原稿を被写体として、複数の異なる方向から撮影して、撮影によって得られた複数の撮影画像に対して、画像の歪みを検出して補正し、あたかも正面から撮影したような画像を生成する。また、このデジタルカメラ1は、撮影によって得られた画像から、照明光の映り込みを低減するように画像合成を行うものである。デジタルカメラ1は、撮影レンズ部11と、液晶モニタ12と、シャッタボタン13と、を備える。
シャッタボタン13は、撮影対象を撮影するときに押下するものである。
(1)連写画像の画像合成処理
(2)画像変換処理
(3)画像データの圧縮処理
(4)画像保存処理
(1)連写画像の画像合成処理
画像処理装置25は、銀塩写真2を保存用として撮影する際の照明光の映り込み等の影響を低減するため、異なる方向から撮影した複数の撮影画像を合成する。この際、画像処理装置25は、複数の撮影画像に対して、歪み補正として台形補正を行って複数の撮影画像の歪みを補正する。
画像変換処理は、低解像度Bayer画像から低解像度RGB画像への変換、高解像度RGB画像から低解像度画像への変換、Bayer画像からYUV画像への変換を行う処理である。
画像データの圧縮処理は、メモリカード31に画像データを保存する際に、画像データをJPEG圧縮する処理である。画像処理装置25は、画像変換処理において合成画像データをYUV画像のデータに変換すると、この処理を実行する。
画像をメモリカード31に保存する処理であり、画像処理装置25は、JPEG圧縮したYUV画像の画像データを、外部記憶IO装置28を介してメモリカード31に保存する。尚、画像処理装置25は、メモリカード31には、画像データを画像ファイルに分けて記録する。メモリカード31は、画像データに関するヘッダ情報のためのヘッダ情報記憶領域を備え、画像処理装置25は、画像データをメモリカード31に記録する際、画像データに関するヘッダ情報もヘッダ情報記憶領域に記録する。
ユーザがデジタルカメラ1の電源キーを押下すると、CPU30は、起動してプログラムコード記憶装置29に記憶されているプログラムのデータを取得する。
RGB画像生成部25−1は、このBayer配列の画像をRGB画像pに変換し、変換したRGB画像pをメモリ23の処理画像記憶領域23bに記憶する(ステップS41)。
画像処理装置25は、JPEG圧縮したYUV画像の画像データを、外部記憶IO装置28を介してメモリカード31に保存する(ステップS32)。
そして、CPU30は、操作部26からの操作情報に基づいて、電源キーが押下されたか否かを判定する(ステップS19)。
従って、光沢紙等を撮影した場合のように、照明光等の映り込みが生じた場合でも、映り込み領域の画素値が、映り込みがない領域の画素値に近づき、映り込みの影響を低減することができる。
例えば、上記実施形態では、画像処理装置25の画像合成部25−12は、数14に従い、加算平均を行うことにより、照明光の映り込みの影響を低減するようにした。しかし、演算法は、このものに限られるものではない。
Claims (10)
- 被写体を撮影する撮影装置において、
前記被写体を異なる方向から複数回撮影することによって得られた複数の撮影画像の歪みを補正して、歪み補正画像を取得する補正部と、
前記補正部が補正した複数の歪み補正画像の各画素を対応させて、前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する画像合成部と、を備えた、
ことを特徴とする撮影装置。 - 前記画像合成部は、前記演算法として、複数の歪み補正画像の画素値の加算平均値を画素毎に取得する加算平均法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する、
ことを特徴とする請求項1に記載の撮影装置。 - 前記画像合成部は、前記演算法として、複数の歪み補正画像の画素値の最小値を画素毎に取得する演算法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する、
ことを特徴とする請求項1に記載の撮影装置。 - 前記画像合成部は、前記演算法として、
前記複数の歪み補正画像の各画素値から、それぞれ、前記被写体を撮影する時の光の光強度を示すパラメータを取得し、複数の歪み補正画像の対応する画素毎に、取得したパラメータの値を比較し、前記パラメータの値が小さい方の画素値を選択する選択法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する、
ことを特徴とする請求項1に記載の撮影装置。 - 前記画像合成部は、前記演算法として、
被合成画像を第1の画像、前記第1の画像に合成する画像を第2の画像として、前記第1の画像、前記第2の画像から、それぞれ、前記パラメータを画素毎に取得して、前記第2の画像のパラメータの値から前記第1の画像のパラメータの値を差し引いた差を求め、
前記第1の画像が最初の撮影画像の場合に、前記求めた差が予め設定された負の第1の閾値以上であるときは、前記第1の画像の画素値を選択し、前記求めた差が前記第1の閾値未満であるときは、第2の画像の画素値を選択し、選択した画素値を合成画像の画素値として2つの歪み補正画像を画素毎に合成し、
前記第1の画像が既に合成した合成画像の場合に、前記求めた差が予め設定された正の第2の閾値を越えたときは、前記第1の画像の画素値を選択し、選択した画素値を新たな合成画像の画素値とし、前記求めた差が前記第2の閾値以下であるときは、前記第1の画像の画素値と第2の画像の画素値とを画像合成の回数に基づいて加重平均した値を新たな合成画像の画素値とする選択加算平均法を用いて、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する、
ことを特徴とする請求項4に記載の撮影装置。 - 前記画像合成部は、
前記パラメータとして、各歪み補正画像の輝度値を用いる、
ことを特徴とする請求項4又は5に記載の撮影装置。 - 前記画像合成部は、
前記パラメータとして、各歪み補正画像の色相値を用いる、
ことを特徴とする請求項4又は5に記載の撮影装置。 - 前記画像合成部は、
注目した画素近傍の領域の輝度値を用いて加算演算し、注目した画素の画素値を取得する演算法を用い、
前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する、
ことを特徴とする請求項1項に記載の撮影装置。 - 被写体を撮影することによって得られた撮影画像の画像処理方法において、
前記被写体を異なる方向から複数回撮影し、前記撮影によって得られた複数の撮影画像の歪みを補正して、複数の歪み補正画像を取得するステップと、
前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成するステップと、を備えた、
ことを特徴とする撮影画像の画像処理方法。 - コンピュータに、
被写体を異なる方向から複数回撮影し、撮影によって得られた複数の画像の歪みを補正して、歪み補正画像を取得する手順、
前記被写体を撮影する時の光の映り込みによって生じた画素値の変化を低減させるような演算法を用いて、前記複数の歪み補正画像の各画素値に対する演算を行い、前記複数の歪み補正画像を合成する手順、
を実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005103402A JP4507948B2 (ja) | 2005-03-31 | 2005-03-31 | 撮影装置、撮影画像の画像処理方法及びプログラム |
US11/390,808 US7760962B2 (en) | 2005-03-30 | 2006-03-28 | Image capture apparatus which synthesizes a plurality of images obtained by shooting a subject from different directions, to produce an image in which the influence of glare from a light is reduced |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005103402A JP4507948B2 (ja) | 2005-03-31 | 2005-03-31 | 撮影装置、撮影画像の画像処理方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2006287504A true JP2006287504A (ja) | 2006-10-19 |
JP2006287504A5 JP2006287504A5 (ja) | 2007-09-20 |
JP4507948B2 JP4507948B2 (ja) | 2010-07-21 |
Family
ID=37408948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005103402A Expired - Fee Related JP4507948B2 (ja) | 2005-03-30 | 2005-03-31 | 撮影装置、撮影画像の画像処理方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4507948B2 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009258868A (ja) * | 2008-04-15 | 2009-11-05 | Sony Corp | 画像処理装置および画像処理方法 |
JP2010072813A (ja) * | 2008-09-17 | 2010-04-02 | Fujitsu Ltd | 画像処理装置および画像処理プログラム |
WO2015029114A1 (ja) * | 2013-08-26 | 2015-03-05 | 株式会社 東芝 | 電子機器および通知制御方法 |
WO2015029113A1 (ja) * | 2013-08-26 | 2015-03-05 | 株式会社 東芝 | 電子機器、画像処理方法およびプログラム |
JP2015197745A (ja) * | 2014-03-31 | 2015-11-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
JP2016152605A (ja) * | 2015-02-19 | 2016-08-22 | 大日本印刷株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP2017211720A (ja) * | 2016-05-23 | 2017-11-30 | 日本電信電話株式会社 | 画像検索装置、方法、及びプログラム |
US9940700B2 (en) | 2012-10-24 | 2018-04-10 | Fuji Xerox Co., Ltd. | Information processing apparatus, information processing method, information processing system, and non-transitory computer readable medium |
JP2018106349A (ja) * | 2016-12-26 | 2018-07-05 | 京セラドキュメントソリューションズ株式会社 | 画像処理装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08307657A (ja) * | 1995-05-12 | 1996-11-22 | Minolta Co Ltd | 画像入力装置 |
JPH11224324A (ja) * | 1998-02-06 | 1999-08-17 | Fuji Photo Film Co Ltd | 画像信号処理方法及び装置 |
-
2005
- 2005-03-31 JP JP2005103402A patent/JP4507948B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08307657A (ja) * | 1995-05-12 | 1996-11-22 | Minolta Co Ltd | 画像入力装置 |
JPH11224324A (ja) * | 1998-02-06 | 1999-08-17 | Fuji Photo Film Co Ltd | 画像信号処理方法及び装置 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009258868A (ja) * | 2008-04-15 | 2009-11-05 | Sony Corp | 画像処理装置および画像処理方法 |
JP4544334B2 (ja) * | 2008-04-15 | 2010-09-15 | ソニー株式会社 | 画像処理装置および画像処理方法 |
US8446957B2 (en) | 2008-04-15 | 2013-05-21 | Sony Corporation | Image processing apparatus and method using extended affine transformations for motion estimation |
JP2010072813A (ja) * | 2008-09-17 | 2010-04-02 | Fujitsu Ltd | 画像処理装置および画像処理プログラム |
US9940700B2 (en) | 2012-10-24 | 2018-04-10 | Fuji Xerox Co., Ltd. | Information processing apparatus, information processing method, information processing system, and non-transitory computer readable medium |
WO2015029114A1 (ja) * | 2013-08-26 | 2015-03-05 | 株式会社 東芝 | 電子機器および通知制御方法 |
WO2015029113A1 (ja) * | 2013-08-26 | 2015-03-05 | 株式会社 東芝 | 電子機器、画像処理方法およびプログラム |
JP2015197745A (ja) * | 2014-03-31 | 2015-11-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
JP2016152605A (ja) * | 2015-02-19 | 2016-08-22 | 大日本印刷株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP2017211720A (ja) * | 2016-05-23 | 2017-11-30 | 日本電信電話株式会社 | 画像検索装置、方法、及びプログラム |
JP2018106349A (ja) * | 2016-12-26 | 2018-07-05 | 京セラドキュメントソリューションズ株式会社 | 画像処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4507948B2 (ja) | 2010-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4507948B2 (ja) | 撮影装置、撮影画像の画像処理方法及びプログラム | |
US7760962B2 (en) | Image capture apparatus which synthesizes a plurality of images obtained by shooting a subject from different directions, to produce an image in which the influence of glare from a light is reduced | |
JP4715527B2 (ja) | 撮影装置、撮影画像の画像処理方法及びプログラム | |
JP4487191B2 (ja) | 画像処理装置および画像処理プログラム | |
JP4760973B2 (ja) | 撮像装置及び画像処理方法 | |
US9094648B2 (en) | Tone mapping for low-light video frame enhancement | |
US9307212B2 (en) | Tone mapping for low-light video frame enhancement | |
JP2009303196A (ja) | 撮影装置およびプログラム | |
JP4818393B2 (ja) | 画像処理方法および画像処理装置 | |
JP2017168982A (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
JP6656035B2 (ja) | 画像処理装置、撮像装置および画像処理装置の制御方法 | |
JP2009017223A (ja) | 撮影装置、画像処理装置、これらにおける画像処理方法およびプログラム | |
JP2018107526A (ja) | 画像処理装置、撮像装置、画像処理方法およびコンピュータのプログラム | |
JP2010193058A (ja) | 撮像装置、撮像方法及び撮像プログラム | |
JP4985660B2 (ja) | 擬似濃淡画像生成装置及びプログラム | |
JP2019047169A (ja) | ハイダイナミックレンジ画像を作成する装置、方法、及びプログラム | |
JP2012054873A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2008164758A (ja) | 画像復元装置 | |
JP2008166947A (ja) | 撮像装置 | |
JP2004246644A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP2005269449A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP4595660B2 (ja) | 撮影装置、撮影画像処理方法及びプログラム | |
JP2000013675A (ja) | デジタルカメラ | |
JP6245847B2 (ja) | 画像処理装置および画像処理方法 | |
JP2017212698A (ja) | 撮像装置、撮像装置の制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070806 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070806 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100413 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100426 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4507948 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |