JPH1164905A - 手ぶれ補正方法 - Google Patents
手ぶれ補正方法Info
- Publication number
- JPH1164905A JPH1164905A JP9223808A JP22380897A JPH1164905A JP H1164905 A JPH1164905 A JP H1164905A JP 9223808 A JP9223808 A JP 9223808A JP 22380897 A JP22380897 A JP 22380897A JP H1164905 A JPH1164905 A JP H1164905A
- Authority
- JP
- Japan
- Prior art keywords
- camera shake
- signal
- state
- noise component
- angular velocity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Adjustment Of Camera Lenses (AREA)
- Studio Devices (AREA)
Abstract
るようにする。 【解決手段】 図示しないビデオカメラ(撮像装置)の
手ぶれ状態を検出する角速度センサ1で検出された角速
度信号が高域通過フィルタ2に供給され、低域成分が除
去された角速度信号Shpf がコアリング値Sc の演算部
3に供給される。そしてこのコアリング値Sc と、角速
度信号Shpf がコアリング部4に供給され、所定のコア
リングされた信号Scor が積分フィルタ5で積分され
て、例えばビデオカメラの手ぶれによる角度変位信号が
形成される。この角度変位信号が特性補償フィルタ6で
信号の利得または位相が補償され、さらにこの特性補償
された角度変位信号がプリズム制御部7、プリズム8、
プリズム頂角センサ9からなる撮像画像の移動ブロック
に入力されて、例えばビデオカメラの手ぶれを相殺する
ように撮像画像の移動が行われる。
Description
を行うビデオカメラに使用して好適な手ぶれ補正方法に
関するものである。
オカメラにおいては、撮影時のいわゆる手ぶれによって
撮影画像に振動が生じ、再生時に鑑賞の妨げになる場合
がある。そこでこのような手ぶれによる撮影画像の振動
を減少させる手段として、従来から幾多の手ぶれ補正方
法が検討されてきた。
正方法の一つを実現する装置を示している。この図5に
おいて、角速度センサ51は、例えば図示しないビデオ
カメラ(撮像装置)の手ぶれ状態を検出する検出手段で
ある。この角速度センサ51で検出された角速度信号が
高域通過フィルタ52に供給されて低域成分が除去され
る。そしてこの低域成分の除去された角速度信号が積分
フィルタ53により積分されて、例えばビデオカメラの
手ぶれによる角度変位信号が形成される。
ィルタ54に供給されて信号の利得または位相が補償さ
れる。さらにこの特性補償された角度変位信号がプリズ
ム制御部55、プリズム56、プリズム頂角センサ57
からなる撮像画像の移動ブロックに入力される。そして
上述の角度変位信号に従ってプリズム56の角度が調整
されて、上述の例えばビデオカメラの手ぶれを相殺する
ように、撮像手段(図示せず)に投射される撮像画像の
移動が行われる。
の手ぶれ補正方法を実現する装置においては、ビデオカ
メラの手ぶれ状態の検出手段として角速度センサを用い
ているために、検出信号へのノイズの混入が避けられな
い。このためビデオカメラを静止させた手ぶれの無い状
態でも、ノイズ成分によって撮像画像移動ブロックのプ
リズムが駆動され、逆に撮像画像が移動してしまう恐れ
がある。なお、ビデオカメラを静止させた状態では、撮
像画像も静止していることが望まれるものである。
ものであって、解決しようとする問題点は、従来の方法
では、例えばビデオカメラを静止させた手ぶれの無い状
態でも、ノイズ成分によって撮像画像移動ブロックのプ
リズムが駆動され、逆に撮像画像が移動してしまう恐れ
があるというものである。
は、検出手段の検出結果からノイズ成分を除去し、この
ノイズ成分を除去した検出信号から撮像装置の手ぶれに
よる画像のぶれの補正に必要な特定情報を算出するよう
にしたものであって、これによれば、撮像装置が静止し
て手ぶれのない状態では、撮像画像も静止するようにし
た手ぶれ補正方法を実現することができる。
度センサを用いて撮像装置の手ぶれ状態を検出する検出
手段と、検出手段の検出結果からノイズ成分を除去した
検出信号を算出する第1の演算手段と、第1の演算手段
で算出されたノイズ成分を除去した検出信号から撮像装
置の手ぶれによる画像のぶれの補正に必要な特定情報を
算出する第2の演算手段と、第2の演算手段の算出結果
から撮像装置の手ぶれによる画像のぶれを補正する補正
手段とを有してなるものである。
図1は本発明による手ぶれ補正方法を適用した装置の一
例の構成を示すブロック図である。
えば図示しないビデオカメラ(撮像装置)の手ぶれ状態
を検出する検出手段である。この角速度センサ1で検出
された角速度信号が高域通過フィルタ2に供給されて低
域成分が除去された角速度信号Shpf が形成される。こ
の低域成分の除去された角速度信号Shpf が後述するコ
アリング値Sc の演算部3に供給される。そしてこのコ
アリング値Sc と、上述の低域成分の除去された角速度
信号Shpf がコアリング部4に供給される。
すようにして角速度信号Shpf をコアリングした信号S
cor の形成が行われる。すなわちコアリング部4では、
信号Shpf の絶対値が値Sc より大きい場合には、 Scor =Shpf −Sc (Shpf >0の時) Scor =Shpf +Sc (Shpf <0の時) 信号Shpf の絶対値が値Sc 以下の場合には、 Scor =0 として信号Scor が算出される。
積分フィルタ5により積分されて、例えばビデオカメラ
の手ぶれによる角度変位信号が形成され、この形成され
た角度変位信号が特性補償フィルタ6に供給されて信号
の利得または位相が補償される。さらにこの特性補償さ
れた角度変位信号がプリズム制御部7、プリズム8、プ
リズム頂角センサ9からなる撮像画像の移動ブロックに
入力されて、上述の例えばビデオカメラの手ぶれを相殺
するように撮像画像の移動が行われる。
では以下のようにして演算が行われる。すなわち上述の
角速度信号Shpf は時間とともに変化する値であるが、
この信号Shpf の絶対値が一定の閾値Sthr 以下である
状態が一定の時間Tthr 以上続いたときに「静止状態」
であると判断し、それ以外のときを「手ぶれ状態」であ
ると判断することができる。
c を角速度信号Shpf のノイズレベル以上のある一定値
Scmaxを上限として、時間とともに連続的に増加させ
る。また「手ぶれ状態」では、コアリング値Sc を0ま
たは小さな値Scminを下限として、時間とともに連続的
に減少させる。
ている状態では、角速度信号Shpfとコアリングされた
信号Scor の関係は図3のAに示すようになり、信号S
hpfのノイズレベルよりコアリング値Sc の方が大きい
ので、 Scor =0 となり、ノイズ成分が除去されてノイズ成分による画像
の移動が防止される。
ている状態では、角速度信号Shpfとコアリングされた
信号Scor の関係は図3のBに示すようになり、 Scor ≒Shpf となって手ぶれが補正される。
と、角速度信号Shpf 、コアリングされた信号Scor 、
コアリング値Sc との関係は図4に示すようになる。す
なわち図4において、時間t=t0 〜t1 では「静止状
態」と判断しているので、 Sc =Scmax、Scor =0 となっており、ノイズ成分による画像の移動は発生しな
い。
値Sthr を越えると「手ぶれ状態」であると判断し、コ
アリング値Sc は減少し始める。そしてこの時間t=t
1 からの「手ぶれ状態」が継続して充分時間が経過する
と、 Sc =Scmin、Scor ≒Shpf となって手ぶれが補正される。
Shpf の絶対値が閾値Sthr 以下である状態が一定時間
Tthr 以上継続すると、「静止状態」であると判断し、
時間t=t3 からコアリング値Sc は増加を始める。そ
してこの時間t=t3 からの「静止状態」が継続して充
分時間が経過すると、再び Sc =Scmax、Scor =0 となって、ノイズ成分による画像の移動が防止される。
結果からノイズ成分を除去し、このノイズ成分を除去し
た検出信号から撮像装置の手ぶれによる画像のぶれの補
正に必要な特定情報を算出することによって、撮像装置
が静止して手ぶれのない状態では、撮像画像も静止する
ようにした手ぶれ補正方法を実現することができるもの
である。
(撮像装置)の静止状態及び/または手ぶれ状態を判別
して、コアリング値Sc (ノイズ成分の除去レベル)を
切り換えることによって、静止状態においてはコアリン
グ値Sc をノイズレベルより大きく設定することにより
ノイズ成分による画像の移動を防止し、かつ手ぶれ状態
においてはコアリング値Sc を0または充分小さくする
ことにより、Scor ≒Shpf として手ぶれ補正の性能を
悪化させないようにすることができる。
オカメラを静止させた手ぶれの無い状態でも、ノイズ成
分によって撮像画像移動ブロックのプリズムが駆動さ
れ、逆に撮像画像が移動してしまう恐れがあったもの
を、本発明によればこれらの問題点を容易に解消するこ
とができるものである。
静止状態及び/または手ぶれ状態に応じてコアリング値
Sc を連続的に変化させるようにすることもできる。そ
の場合には以下のような効果がある。
換えた場合には、コアリングされた信号Scor が不連続
に変化することになり、これによってコアリング値Sc
が切り換わる時に不自然な画像の移動が生じる恐れがあ
る。そこでコアリング値Scを連続的に変化させれば、
コアリング値Sc の変化によるコアリングされた信号S
cor の変化も連続的なものとなり、コアリング値Sc の
変化による不自然な画像の移動を無くすことができる。
角速度センサを用いて撮像装置の手ぶれ状態を検出する
検出手段と、検出手段の検出結果からノイズ成分を除去
した検出信号を算出する第1の演算手段と、第1の演算
手段で算出されたノイズ成分を除去した検出信号から撮
像装置の手ぶれによる画像のぶれの補正に必要な特定情
報を算出する第2の演算手段と、第2の演算手段の算出
結果から撮像装置の手ぶれによる画像のぶれを補正する
補正手段とを有することにより、撮像装置が静止して手
ぶれのない状態では、撮像画像も静止するようにした手
ぶれ補正方法を実現することができるものである。
段の検出結果からノイズ成分を除去し、このノイズ成分
を除去した検出信号から撮像装置の手ぶれによる画像の
ぶれの補正に必要な特定情報を算出することによって、
撮像装置が静止して手ぶれのない状態では、撮像画像も
静止するようにした手ぶれ補正方法を実現することがで
きるようになった。
オカメラを静止させた手ぶれの無い状態でも、ノイズ成
分によって撮像画像移動ブロックのプリズムが駆動さ
れ、逆に撮像画像が移動してしまう恐れがあったもの
を、本発明によればこれらの問題点を容易に解消するこ
とができるものである。
一例の構成を示すブロック図である。
示すブロック図である。
ング値Sc の演算部、4…コアリング部、5…積分フィ
ルタ、6…特性補償フィルタ、7…プリズム制御部、8
…プリズム、9…プリズム頂角センサ
Claims (3)
- 【請求項1】 角速度センサを用いて撮像装置の手ぶれ
状態を検出する検出手段と、 上記検出手段の検出結果からノイズ成分を除去した検出
信号を算出する第1の演算手段と、 上記第1の演算手段で算出されたノイズ成分を除去した
検出信号から上記撮像装置の手ぶれによる画像のぶれの
補正に必要な特定情報を算出する第2の演算手段と、 上記第2の演算手段の算出結果から上記撮像装置の手ぶ
れによる画像のぶれを補正する補正手段とを有すること
を特徴とする手ぶれ補正方法。 - 【請求項2】 上記検出信号のノイズ成分を除去する第
1の演算手段は、 上記撮像装置の静止状態及び/または手ぶれ状態を判別
して、 上記ノイズ成分の除去レベルを切り換えることを特徴と
する請求項1記載の手ぶれ補正方法。 - 【請求項3】 上記検出信号のノイズ成分を除去する第
1の演算手段は、 上記撮像装置の静止状態及び/または手ぶれ状態を判別
して、 上記ノイズ成分の除去レベルを連続的に変化させること
を特徴とする請求項1記載の手ぶれ補正方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22380897A JP3791144B2 (ja) | 1997-08-20 | 1997-08-20 | 撮像装置及び手ぶれ補正方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22380897A JP3791144B2 (ja) | 1997-08-20 | 1997-08-20 | 撮像装置及び手ぶれ補正方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH1164905A true JPH1164905A (ja) | 1999-03-05 |
JP3791144B2 JP3791144B2 (ja) | 2006-06-28 |
Family
ID=16804053
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP22380897A Expired - Fee Related JP3791144B2 (ja) | 1997-08-20 | 1997-08-20 | 撮像装置及び手ぶれ補正方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3791144B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100735762B1 (ko) | 2005-01-27 | 2007-07-04 | 캐논 가부시끼가이샤 | 촬상장치 및 그의 카메라 본체 그리고 교환렌즈 |
JP2010518443A (ja) * | 2007-02-12 | 2010-05-27 | ポライト エイエス | 手持ちカメラで安定画像を与える装置 |
WO2013121788A1 (ja) | 2012-02-14 | 2013-08-22 | ミツミ電機株式会社 | レンズ駆動装置およびカメラ |
US9001224B2 (en) | 2009-08-21 | 2015-04-07 | Mitsumi Electric Co., Ltd. | Lens holder drive apparatus, and camera equipped therewith |
US9036260B2 (en) | 2011-07-15 | 2015-05-19 | Mitsumi Electric Co., Ltd. | Lens holder driving device capable of avoiding deleterious effect on hall elements |
US9046642B2 (en) | 2011-07-15 | 2015-06-02 | Mitsumi Electric Co., Ltd. | Lens holder driving device including fracture preventing member for suspension wires |
-
1997
- 1997-08-20 JP JP22380897A patent/JP3791144B2/ja not_active Expired - Fee Related
Cited By (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100735762B1 (ko) | 2005-01-27 | 2007-07-04 | 캐논 가부시끼가이샤 | 촬상장치 및 그의 카메라 본체 그리고 교환렌즈 |
JP2010518443A (ja) * | 2007-02-12 | 2010-05-27 | ポライト エイエス | 手持ちカメラで安定画像を与える装置 |
EP2983041A2 (en) | 2009-08-21 | 2016-02-10 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9013588B2 (en) | 2009-08-21 | 2015-04-21 | Mitsumi Electric Co., Ltd. | Camera-shake correction device |
US9001224B2 (en) | 2009-08-21 | 2015-04-07 | Mitsumi Electric Co., Ltd. | Lens holder drive apparatus, and camera equipped therewith |
US11159728B2 (en) | 2009-08-21 | 2021-10-26 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US10721406B2 (en) | 2009-08-21 | 2020-07-21 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US10321061B2 (en) | 2009-08-21 | 2019-06-11 | Mitsumi Electric Co., Ltd. | Camera-shake correction apparatus, camera module and camera |
EP2942664A1 (en) | 2009-08-21 | 2015-11-11 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2942665A1 (en) | 2009-08-21 | 2015-11-11 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2942666A1 (en) | 2009-08-21 | 2015-11-11 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2945003A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US10097760B2 (en) | 2009-08-21 | 2018-10-09 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2944994A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP3001244A1 (en) | 2009-08-21 | 2016-03-30 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2945014A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2944993A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2955572A1 (en) | 2009-08-21 | 2015-12-16 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2955571A1 (en) | 2009-08-21 | 2015-12-16 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2957939A2 (en) | 2009-08-21 | 2015-12-23 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2957940A2 (en) | 2009-08-21 | 2015-12-23 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2960716A2 (en) | 2009-08-21 | 2015-12-30 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2944992A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US10075641B2 (en) | 2009-08-21 | 2018-09-11 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
EP2944995A2 (en) | 2009-08-21 | 2015-11-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9459465B2 (en) | 2009-08-21 | 2016-10-04 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9477093B2 (en) | 2009-08-21 | 2016-10-25 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9798159B2 (en) | 2009-08-21 | 2017-10-24 | Mitsumi Electronics Co., Ltd. | Lens drive apparatus, camera module and camera |
US9625737B2 (en) | 2009-08-21 | 2017-04-18 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9651797B2 (en) | 2009-08-21 | 2017-05-16 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9658466B2 (en) | 2009-08-21 | 2017-05-23 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9753302B2 (en) | 2009-08-21 | 2017-09-05 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9753301B2 (en) | 2009-08-21 | 2017-09-05 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9766474B2 (en) | 2009-08-21 | 2017-09-19 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9766475B2 (en) | 2009-08-21 | 2017-09-19 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9769386B2 (en) | 2009-08-21 | 2017-09-19 | Mitsumi Electric Co., Ltd. | Lens drive apparatus, camera module and camera |
US9500878B2 (en) | 2011-07-15 | 2016-11-22 | Mitsumi Electric Co., Ltd. | Lens driving device |
US9835872B2 (en) | 2011-07-15 | 2017-12-05 | Mitsumi Electric Co., Ltd. | Lens holder driving device |
US9046642B2 (en) | 2011-07-15 | 2015-06-02 | Mitsumi Electric Co., Ltd. | Lens holder driving device including fracture preventing member for suspension wires |
US9036260B2 (en) | 2011-07-15 | 2015-05-19 | Mitsumi Electric Co., Ltd. | Lens holder driving device capable of avoiding deleterious effect on hall elements |
US9298017B2 (en) | 2011-07-15 | 2016-03-29 | Mitsumi Electric Co., Ltd. | Lens driving device |
US9933628B2 (en) | 2012-02-14 | 2018-04-03 | Mitsumi Electric Co., Ltd. | Lens driving device and camera |
KR20140135154A (ko) | 2012-02-14 | 2014-11-25 | 미쓰미덴기가부시기가이샤 | 렌즈 구동장치 및 카메라 |
WO2013121788A1 (ja) | 2012-02-14 | 2013-08-22 | ミツミ電機株式会社 | レンズ駆動装置およびカメラ |
KR20190091573A (ko) | 2012-02-14 | 2019-08-06 | 미쓰미덴기가부시기가이샤 | 렌즈 홀더 구동장치 |
KR20200060554A (ko) | 2012-02-14 | 2020-05-29 | 미쓰미덴기가부시기가이샤 | 렌즈 구동장치 |
Also Published As
Publication number | Publication date |
---|---|
JP3791144B2 (ja) | 2006-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7496289B2 (en) | Image pickup apparatus, image pickup method therefor, and computer-readable medium storing computer program with panning control | |
US7064777B2 (en) | Blur correction aparatus, control apparatus to be used in a blur correction apparatus, image taking apparatus, control method to be used in these apparatuses and computer program product to be used with these apparatuses | |
JP2007189478A (ja) | 振れ補正装置および光学機器 | |
JP3250245B2 (ja) | 防振カメラ | |
JP6833451B2 (ja) | 画像処理装置、その画像処理方法および光学機器 | |
JP3740398B2 (ja) | 振れ補正装置、振れ補正装置に適用される制御装置、振れ補正装置に適用される制御方法、振れ補正装置に適用される制御プログラム、撮像装置 | |
JPH1164905A (ja) | 手ぶれ補正方法 | |
JP3402770B2 (ja) | 像安定化装置及び撮影装置 | |
JP2011118073A (ja) | 画像振れ補正装置 | |
JP7324284B2 (ja) | 撮像デバイス、手ぶれ補正デバイス、撮像方法及び手ぶれ補正方法 | |
JP3279342B2 (ja) | ビデオカメラにおける手振れ補正装置 | |
JP2003107550A (ja) | 像振れ防止装置 | |
JPH0951469A (ja) | 撮像装置及び画像揺れの補正方法 | |
JPH09139881A (ja) | 手振れ補正装置 | |
JP2007201570A (ja) | 画像処理装置、撮影装置、画像処理方法、および、制御プログラム | |
JPH07177418A (ja) | 画像振れ防止装置 | |
JP3460385B2 (ja) | 手振れ補正装置 | |
JP3380918B2 (ja) | ビデオカメラ及びビデオ再生装置 | |
JP3937574B2 (ja) | 撮像装置 | |
JPH06245136A (ja) | ビデオカメラ及びビデオ再生装置 | |
JPH08331429A (ja) | 手振れ補正装置及びビデオカメラ | |
JP2020085992A (ja) | 像ブレ補正装置およびその制御方法、撮像装置 | |
JP2005326776A (ja) | 像振れ補正装置 | |
JP2762486B2 (ja) | ブレ補正装置 | |
JP2004144824A (ja) | 像振れ補正装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051216 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060327 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090414 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100414 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100414 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110414 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120414 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130414 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130414 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140414 Year of fee payment: 8 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |