JP4187704B2 - 手ぶれ補正装置 - Google Patents
手ぶれ補正装置 Download PDFInfo
- Publication number
- JP4187704B2 JP4187704B2 JP2004253416A JP2004253416A JP4187704B2 JP 4187704 B2 JP4187704 B2 JP 4187704B2 JP 2004253416 A JP2004253416 A JP 2004253416A JP 2004253416 A JP2004253416 A JP 2004253416A JP 4187704 B2 JP4187704 B2 JP 4187704B2
- Authority
- JP
- Japan
- Prior art keywords
- correction
- shake
- state
- value
- camera shake
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 239000003381 stabilizer Substances 0.000 title 1
- 238000012937 correction Methods 0.000 claims description 114
- 238000001514 detection method Methods 0.000 claims description 74
- 230000004044 response Effects 0.000 claims description 2
- 239000013598 vector Substances 0.000 description 112
- 230000007704 transition Effects 0.000 description 33
- 230000003287 optical effect Effects 0.000 description 25
- 238000000034 method Methods 0.000 description 22
- 238000004091 panning Methods 0.000 description 12
- 238000005070 sampling Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000010354 integration Effects 0.000 description 9
- 238000009825 accumulation Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 3
- 238000009966 trimming Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 2
- 238000013016 damping Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6815—Motion detection by distinguishing pan or tilt from motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Adjustment Of Camera Lenses (AREA)
- Manipulator (AREA)
- Lens Barrels (AREA)
- Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
Description
(a)揺れ検出手段によって検出された揺れの方向が同じ方向であるフレームが連続しておりその連続回数が第1閾値以上であること
(b)第1の補正量生成手段によって生成された補正量が補正範囲の限界値以上であるフレームが連続しており、その連続回数が第2閾値以上であること
(c)揺れ検出手段によって検出された揺れの方向が同じ方向であるフレームが連続しておりかつその同一方向に連続する揺れの積分値が画角の第3閾値以上の割合であること
ビデオカメラ10は、レンズ11から入力される被写体(図示せず)からの光信号を電気信号に変換するCCDのような固体撮像素子12を含んでいる。固体撮像素子12からの電気信号はカメラ回路13に入力される。カメラ回路13は、周知のように、サンプルホールド回路を含み、固体撮像素子12からの電気信号をサンプルホールドする。サンプルホールドされた電気信号のレベルがAGCによって調整されるとともに、さらに同期信号付加回路によって同期信号が付加される。このようにして、カメラ回路13は固体撮像素子12からのイメージ信号をアナログビデオ信号に変換する。
具体的には、全体動きベクトルVn の垂直成分の方向(上または下)が同じ方向であるフレームが連続しておりかつその連続回数が閾値TH1以上であることまたは全体動きベクトルVn の水平成分の方向(左または右)が同じ方向であるフレームが連続しておりかつその連続回数が閾値TH1以上であること
具体的には、積分ベクトルSn の垂直成分が補正範囲の限界値以上あるフレームが連続しておりかつその連続回数が閾値TH2以上であることまたは積分ベクトルSn の水平成分が補正範囲の限界値以上あるフレームが連続しておりかつその連続回数が閾値TH2以上であること
なお、上述したように、積分ベクトルSn の垂直成分Svが補正範囲の限界値を越えた場合には、垂直成分SvがSv−minより小さければ垂直成分SvがSv−min(限界値)とされ、垂直成分SvがSv−max(限界値)より大きければ垂直成分SvがSv−maxとされる。また、積分ベクトルSn の水平成分Shが補正範囲の限界値を越えた場合は、水平成分ShがSh−minより小さければ水平成分ShがSh−min(限界値)とされ、水平成分ShがSh−maxより大きければ水平成分ShをSh−max(限界値)とされる。
具体的には、全体動きベクトルVn の垂直成分の方向(上または下)が同じ方向であるフレームが連続しておりかつその同一方向に連続する全体動きベクトルVn の垂直成分の積分値が切り出し枠の上下幅の閾値TH3以上の割合であるか、または全体動きベクトルVn の水平成分の方向(左または右)が同じ方向であるフレームが連続しておりかつその同一方向に連続する全体動きベクトルVn の水平成分の積分値が切り出し枠の左右幅の閾値TH3以上の割合であること
(a)TH1の算出時:THmin =20回,THmax =30回
(b)TH2の算出時:THmin =5回,THmax =10回
(c)TH3の算出時:THmin =15%、THmax =20%
具体的には、全体動きベクトルVn の垂直成分が0.5画素以下であるフレームが連続しておりかつその連続回数が10以上であることまたは全体動きベクトルVn の水平成分が0.5画素以下であるフレームが連続しておりかつその連続回数が10以上であること
具体的には、全体動きベクトルVn の垂直成分の方向が、「手ぶれ状態」から「パンまたはチルト状態」に遷移したときの全体動きベクトルVn の垂直成分の方向と反対方向であるフレームが連続しておりかつその連続回数が10以上であることまたは全体動きベクトルVn の水平成分の方向が、「手ぶれ状態」から「パンまたはチルト状態」に遷移したときの全体動きベクトルVn の水平成分の方向と反対方向であるフレームが連続しておりかつその連続回数が10以上であること
Th2=10+5*(F−38)/(280−38) …(6)
Th3=15+5*(F−38)/(280−38) …(7)
11 レンズ
12 固体撮像素子
13 カメラ回路
14 A/D変換器
15 フレームメモリ
16 電子ズーム回路
18 動き検出回路
19 焦点距離検出回路
20 マイクロコンピュータ
21 メモリ制御回路
19 焦点距離検出回路
Claims (7)
- ズーム倍率に応じた値を検出するズーム検出手段、
画像の揺れを検出する揺れ検出手段、ならびに
揺れ検出手段によって検出された揺れ量と、ズーム検出手段によって検出されたズーム倍率に応じた値とに基づいて、画像の揺れを補正するための補正量であって、揺れの周波数に対する補正残り率の特性が変更可能な補正量を生成する補正量生成手段を備えており、
補正量生成手段は、ズーム検出手段によって検出されたズーム倍率に応じた値に応じて、揺れの周波数に対する補正残り率の特性を変更させることを特徴とする手ぶれ補正装置。 - 補正量生成手段は、ズーム倍率が大きいほど、揺れの低周波数帯に対する補正の度合いが強くなるように、揺れの周波数に対する補正残り率の特性を変更させることを特徴とする請求項1に記載の手ぶれ補正装置。
- ズーム倍率に応じた値を検出するズーム検出手段、
画像の揺れを検出する揺れ検出手段、
撮影者の意図的なカメラ運動による揺れ状態と手ぶれ状態とを判別する状態判別手段、 状態判別手段によって手ぶれ状態であると判別されているときには、揺れ検出手段によって検出された揺れ量と、ズーム検出手段によって検出されたズーム倍率に応じた値とに基づいて、画像の揺れを補正するための補正量であって、揺れの周波数に対する補正残り率の特性が変更可能な補正量を生成する第1の補正量生成手段、ならびに
状態判別手段によって撮影者の意図的なカメラ運動による揺れ状態であると判別されているときには、画像の揺れを補正するための補正量を、1フレーム前の補正量とする第2の補正量生成手段を備えており、
第1の補正量生成手段は、ズーム検出手段によって検出されたズーム倍率に応じた値に応じて、揺れの周波数に対する補正残り率の特性を変更させることを特徴とする手ぶれ補正装置。 - 補正量生成手段は、ズーム倍率が大きいほど、揺れの低周波数帯に対する補正の度合いが強くなるように、揺れの周波数に対する補正残り率の特性を変更させることを特徴とする請求項3に記載の手ぶれ補正装置。
- 状態判別手段は、以下のいずれかの条件(a),(b),(c)が満たされたときに、撮影者の意図的なカメラ運動による揺れ状態と判別することを特徴とする請求項3および4のいずれかに記載の手ぶれ補正装置。
(a)揺れ検出手段によって検出された揺れの方向が同じ方向であるフレームが連続しておりその連続回数が第1閾値以上であること
(b)第1の補正量生成手段によって生成された補正量が補正範囲の限界値以上であるフレームが連続しており、その連続回数が第2閾値以上であること
(c)揺れ検出手段によって検出された揺れの方向が同じ方向であるフレームが連続しておりかつその同一方向に連続する揺れの積分値が画角の第3閾値以上の割合であること - 状態判別手段は、第1閾値、第2閾値および第3閾値を、ズーム検出手段によって検出されたズーム倍率に応じた値に応じて制御する閾値制御手段を含んでいることことを特徴とする請求項5に記載の手ぶれ補正装置。
- 閾値制御手段は、ズーム倍率が小さいほど、第1閾値、第2閾値および第3閾値が小さくなるように、第1閾値、第2閾値および第3閾値を制御することを特徴とする請求項6に記載の手ぶれ補正装置。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004253416A JP4187704B2 (ja) | 2004-08-31 | 2004-08-31 | 手ぶれ補正装置 |
TW094127824A TWI280048B (en) | 2004-08-31 | 2005-08-29 | Unintentional hand movement canceling device |
US11/213,701 US7502050B2 (en) | 2004-08-31 | 2005-08-30 | Unintentional hand movement canceling device |
EP05018810A EP1631063A3 (en) | 2004-08-31 | 2005-08-30 | Unintentional hand movement canceling device |
CNB2005100966501A CN100568924C (zh) | 2004-08-31 | 2005-08-31 | 手抖动校正装置 |
KR1020050080641A KR100680096B1 (ko) | 2004-08-31 | 2005-08-31 | 손 떨림 보정 장치 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004253416A JP4187704B2 (ja) | 2004-08-31 | 2004-08-31 | 手ぶれ補正装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006074261A JP2006074261A (ja) | 2006-03-16 |
JP4187704B2 true JP4187704B2 (ja) | 2008-11-26 |
Family
ID=35431358
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004253416A Expired - Fee Related JP4187704B2 (ja) | 2004-08-31 | 2004-08-31 | 手ぶれ補正装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US7502050B2 (ja) |
EP (1) | EP1631063A3 (ja) |
JP (1) | JP4187704B2 (ja) |
KR (1) | KR100680096B1 (ja) |
CN (1) | CN100568924C (ja) |
TW (1) | TWI280048B (ja) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3980565B2 (ja) * | 2004-02-16 | 2007-09-26 | 松下電器産業株式会社 | 運転支援装置 |
JP4404822B2 (ja) | 2004-08-31 | 2010-01-27 | 三洋電機株式会社 | 手ぶれ補正装置および撮像機器 |
US7791642B2 (en) * | 2004-12-13 | 2010-09-07 | Fujifilm Corporation | Image-taking apparatus |
JP4794938B2 (ja) * | 2005-07-27 | 2011-10-19 | 富士フイルム株式会社 | 監視システム、監視装置、監視方法、及びプログラム |
JP4783252B2 (ja) * | 2006-04-18 | 2011-09-28 | 富士通株式会社 | 手ぶれ補正機能付き撮像装置、手ぶれ補正方法、手ぶれ補正処理の前処理プログラム、および、保存画像決定プログラム |
JP4201809B2 (ja) * | 2006-11-13 | 2008-12-24 | 三洋電機株式会社 | 手ぶれ補正装置及び方法並びに撮像装置 |
JP2008160175A (ja) * | 2006-12-20 | 2008-07-10 | Olympus Imaging Corp | デジタルカメラ |
JP5153157B2 (ja) * | 2007-02-15 | 2013-02-27 | 三洋電機株式会社 | ビデオカメラ |
JP5159189B2 (ja) * | 2007-06-29 | 2013-03-06 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
KR101362761B1 (ko) | 2007-10-05 | 2014-02-13 | 삼성전자주식회사 | 카메라 패닝 상황에서 안정적인 손떨림 보정 방법 및 장치 |
US7800652B2 (en) * | 2007-12-12 | 2010-09-21 | Cyberlink Corp. | Reducing video shaking |
JP4958756B2 (ja) | 2007-12-13 | 2012-06-20 | キヤノン株式会社 | 撮像装置及びその制御方法及びプログラム |
JP5237622B2 (ja) * | 2007-12-21 | 2013-07-17 | セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー | 振動補正制御回路及びそれを備えた撮像装置 |
JP5242151B2 (ja) * | 2007-12-21 | 2013-07-24 | セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー | 振動補正制御回路及びそれを備えた撮像装置 |
JP5065060B2 (ja) * | 2008-01-16 | 2012-10-31 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP4513871B2 (ja) * | 2008-02-15 | 2010-07-28 | ソニー株式会社 | 画像処理方法、画像処理プログラムおよび画像処理装置 |
JP5395512B2 (ja) * | 2009-05-26 | 2014-01-22 | オリンパスイメージング株式会社 | 撮影装置 |
JP5414620B2 (ja) * | 2010-05-24 | 2014-02-12 | パナソニック株式会社 | 画像処理装置、画像処理方法、プログラム、及び集積回路 |
JP2012088435A (ja) * | 2010-10-18 | 2012-05-10 | Nikon Corp | 電子機器、撮像装置および制御プログラム |
JP6242145B2 (ja) * | 2013-10-10 | 2017-12-06 | キヤノン株式会社 | 像振れ補正装置、その制御方法および撮像装置 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2563567B2 (ja) * | 1989-03-20 | 1996-12-11 | 松下電器産業株式会社 | 揺れ補正装置 |
US5371539A (en) * | 1991-10-18 | 1994-12-06 | Sanyo Electric Co., Ltd. | Video camera with electronic picture stabilizer |
US5748231A (en) * | 1992-10-13 | 1998-05-05 | Samsung Electronics Co., Ltd. | Adaptive motion vector decision method and device for digital image stabilizer system |
EP0611125B1 (en) | 1993-02-12 | 2000-11-22 | Sony Corporation | Electronic zoom control and image stabilization |
JP2940762B2 (ja) * | 1993-06-28 | 1999-08-25 | 三洋電機株式会社 | 手振れ補正装置を有するビデオカメラ |
KR100319034B1 (ko) * | 1993-06-29 | 2002-03-21 | 다카노 야스아키 | 손흔들림보정장치를가진비디오카메라 |
JPH07123317A (ja) * | 1993-10-21 | 1995-05-12 | Canon Inc | 防振機能付き撮影装置 |
EP0656725B1 (en) * | 1993-12-02 | 2000-03-15 | Canon Kabushiki Kaisha | Image-shake correcting device |
JP3208264B2 (ja) | 1994-11-24 | 2001-09-10 | 三洋電機株式会社 | 手振れ補正装置およびそれを用いたビデオカメラ |
US5959666A (en) * | 1995-05-30 | 1999-09-28 | Sony Corporation | Hand deviation correction apparatus and video camera |
JP3538965B2 (ja) | 1995-05-30 | 2004-06-14 | ソニー株式会社 | 手振れ補正装置及び方法並びに手振れ補正処理装置及び方法 |
JPH10191153A (ja) | 1996-12-26 | 1998-07-21 | Canon Inc | 撮像機器の振れ補正方法及び装置並びに記憶媒体 |
KR19990025093A (ko) * | 1997-09-05 | 1999-04-06 | 구자홍 | 캠코더의 떨림 보정장치 및 그 방법 |
JPH11266389A (ja) | 1998-03-17 | 1999-09-28 | Canon Inc | 撮像装置 |
JP4072348B2 (ja) * | 2002-01-25 | 2008-04-09 | キヤノン株式会社 | 振れ補正装置、撮像装置、振れ補正方法、振れ補正装置の制御プログラム、及び記憶媒体 |
DE10348567A1 (de) * | 2002-10-22 | 2004-05-13 | Fuji Photo Optical Co. Ltd. | Bildunschärfekorrektureinrichtung |
KR100524743B1 (ko) * | 2002-12-30 | 2005-10-31 | 엘지전자 주식회사 | 흔들림 보정 촬영장치 |
-
2004
- 2004-08-31 JP JP2004253416A patent/JP4187704B2/ja not_active Expired - Fee Related
-
2005
- 2005-08-29 TW TW094127824A patent/TWI280048B/zh not_active IP Right Cessation
- 2005-08-30 EP EP05018810A patent/EP1631063A3/en not_active Withdrawn
- 2005-08-30 US US11/213,701 patent/US7502050B2/en active Active
- 2005-08-31 KR KR1020050080641A patent/KR100680096B1/ko active IP Right Grant
- 2005-08-31 CN CNB2005100966501A patent/CN100568924C/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP1631063A3 (en) | 2010-04-14 |
KR20060050868A (ko) | 2006-05-19 |
TWI280048B (en) | 2007-04-21 |
US20060044403A1 (en) | 2006-03-02 |
JP2006074261A (ja) | 2006-03-16 |
TW200611561A (en) | 2006-04-01 |
EP1631063A2 (en) | 2006-03-01 |
CN100568924C (zh) | 2009-12-09 |
CN1744671A (zh) | 2006-03-08 |
KR100680096B1 (ko) | 2007-02-09 |
US7502050B2 (en) | 2009-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4404822B2 (ja) | 手ぶれ補正装置および撮像機器 | |
KR100680096B1 (ko) | 손 떨림 보정 장치 | |
US10136064B2 (en) | Image processing apparatus and method of controlling image processing apparatus | |
JP2940762B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
JP2902966B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
JP4958756B2 (ja) | 撮像装置及びその制御方法及びプログラム | |
KR101738933B1 (ko) | 상흔들림 보정장치, 그 제어방법, 그 제어 프로그램을 기억하는 기억매체, 및 상흔들림 보정장치를 구비한 촬상장치 | |
US20140267807A1 (en) | Image capture apparatus and control method thereof | |
JPWO2006082967A1 (ja) | 撮像装置 | |
JP5869876B2 (ja) | 撮像装置およびその制御方法 | |
JP3740398B2 (ja) | 振れ補正装置、振れ補正装置に適用される制御装置、振れ補正装置に適用される制御方法、振れ補正装置に適用される制御プログラム、撮像装置 | |
JP6237421B2 (ja) | 撮像装置および撮像処理プログラム | |
JP3208264B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
JP2944369B2 (ja) | ビデオカメラの手振れ補正装置およびビデオカメラ | |
JP2762486B2 (ja) | ブレ補正装置 | |
JP3213492B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
JP7132844B2 (ja) | 像振れ補正装置、及びそれを備えた撮像装置、並びに像振れ補正方法 | |
JP3152574B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
JP2010118822A (ja) | 手ぶれ補正装置及び手ぶれ補正方法 | |
JPH07115583A (ja) | 手振れ補正装置を有するビデオカメラ | |
JPH07135598A (ja) | ビデオカメラの手振れ補正方法 | |
JPH10210350A (ja) | ビデオカメラの手振れ補正装置及び方法 | |
JPH07107366A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060913 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080814 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080909 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4187704 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120919 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120919 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130919 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130919 Year of fee payment: 5 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130919 Year of fee payment: 5 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |