JP2009251464A - 撮像装置及びその制御方法 - Google Patents
撮像装置及びその制御方法 Download PDFInfo
- Publication number
- JP2009251464A JP2009251464A JP2008101820A JP2008101820A JP2009251464A JP 2009251464 A JP2009251464 A JP 2009251464A JP 2008101820 A JP2008101820 A JP 2008101820A JP 2008101820 A JP2008101820 A JP 2008101820A JP 2009251464 A JP2009251464 A JP 2009251464A
- Authority
- JP
- Japan
- Prior art keywords
- focus
- evaluation value
- detection
- search direction
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
Abstract
【解決手段】 画像中で検出されたに予め定められた被写体、例えば人物の顔に対してAF枠を設定してTV−AF方式の自動合焦制御を行う撮像装置において、AF評価値から合焦点の方向が判別できない場合には、被写体領域の大きさの変化を検出する。そして、被写体領域の大きさの変化に基づいて、合焦点の方向を決定して、焦点検出を行う。
【選択図】 図3
Description
(第1の実施形態)
図1は、本発明の第1の実施形態に係る撮像装置の一例としてのデジタルビデオカメラ100の構成例を示すブロック図である。なお、本発明はデジタルスチルカメラを始めとして、顔検出機能及び動画撮影機能を有する他の任意の撮像装置及びそのような撮像装置を備える機器にも適用することができる。
S202で制御部114は微小駆動動作を行い、合焦か、合焦でないなら遠近どちらの方向に合焦点があるかを判別する。微小駆動動作の詳細については図3を用いて後述する。
S209で制御部114はAF信号処理回路113からのAF評価値を保持する。S210で制御部114は、最新のAF評価値をAF信号処理回路113から取得する。S211で制御部114は、S209で保持したAF評価値とS210で新たに取得したAF評価値とを比較し、AF評価値の変動が大きいか否か判定する。具体的には制御部114はAF評価値に所定値以上の差があれば変動が大きいと判定し、処理をS202へ戻して微小駆動動作を再開する。一方、AF評価値の変動が大きいと判定されなければ、制御部114はフォーカスレンズ駆動回路111を制御してフォーカスレンズ105を停止させ、処理をS210へ戻す。
S302で制御部114は、最新の顔検出結果を取得する。そして、検出された顔領域があるか否かに応じて、AF枠(焦点検出領域)を決定し、決定したAF枠内の画素信号のみをAF信号処理回路113へ供給するようにAFゲート112を設定する。さらに、制御部114は、AF信号処理回路113がAF枠内部の画素信号に基づいて生成したAF評価値を取得する。
制御部114はまた、取得した顔検出結果と、AF評価値とを、予め定められた回数分図示しない内部メモリ等に記憶しておく。
図4において、期間Aに撮像素子106に蓄積された電荷に基づいてCDS/AGC回路107が生成した映像信号の焦点検出領域に対してAF信号処理回路113が生成したAF評価値AFAが時刻TAで制御部114に取得される。その後、微小駆動動作により、フォーカスレンズ105が矢印aの方向に所定量移動され、期間Bに撮像素子106で撮影された映像信号についてのAF評価値AFBが時刻TBで制御部114に取得される。
図6において、山登り駆動の開始位置から図中右方向にフォーカスレンズ105を駆動した場合、矢印Aで示すように、AF評価値がピーク(最大値)を越えて減少していることが検出される。この場合、合焦点を通り過ぎたものとして山登り駆動動作を終了し、AF評価値の最大値が得られた位置にフォーカスレンズ105を戻し(図2、S207及びS208)、微小駆動動作に移行する(S202)。
また、本実施形態では、発明の理解を容易にするため、AF評価値からは合焦点の探索方向が決定できない場合に、被写体の領域の大きさの変化に基づく合焦点の探索方向の決定を行うものとして説明した。しかし、上述の通り、被写体領域の大きさの変化に基づいて被写体の移動方向を推定し、合焦点の探索方向を決定するという本発明の基本的な思想には、AF評価値から合焦点の探索方向が決定できないことは必須でない。
上述の実施形態は、システム或は装置のコンピュータ(或いはCPU、MPU等)によりソフトウェア的に実現することも可能である。
従って、上述の実施形態をコンピュータで実現するために、該コンピュータに供給されるコンピュータプログラム自体も本発明を実現するものである。つまり、上述の実施形態の機能を実現するためのコンピュータプログラム自体も本発明の一つである。
つまり、上述の実施形態を実現するためのプログラムファイルをクライアントコンピュータに提供するサーバ装置も本発明の一つである。
さらに、上述の実施形態を実現するためのコンピュータプログラムは、その一部をコンピュータに装着される拡張ボード等のファームウェアで構成してもよいし、拡張ボード等が備えるCPUで実行するようにしてもよい。
Claims (4)
- フォーカスレンズを駆動して自動合焦制御を行う撮像装置であって、
撮像された画像から、予め定められた被写体の領域を検出する検出手段と、
前記検出手段による検出結果に基づいて、前記画像に対する焦点検出領域を設定する設定手段と、
前記画像の前記焦点検出領域に含まれる、予め定められた周波数帯域の成分に基づいてAF評価値を生成する生成手段と、
前記検出手段によって検出された前記予め定められた被写体の領域の大きさの変化に基づいて、合焦点の探索方向を決定する決定手段と、
前記決定手段が決定した探索方向に基づいて、前記フォーカスレンズを駆動して焦点検出を行う制御手段とを有することを特徴とする撮像装置。 - 前記制御手段は、前記AF評価値に基づいて前記探索方向が決定できる場合には、前記AF評価値に基づいて決定された前記探索方向に基づいて焦点検出を行い、前記AF評価値に基づいて前記探索方向が決定できない場合に、前記決定手段が決定した前記探索方向に基づいて焦点検出を行うことを特徴とする請求項1記載の撮像装置。
- 前記検出手段が、前記予め定められた被写体の領域として、人物の顔領域を検出することを特徴とする請求項1又は請求項2に記載の撮像装置。
- フォーカスレンズを駆動して自動合焦制御を行う撮像装置の制御方法であって、
撮像された画像から、予め定められた被写体の領域を検出する検出ステップと、
前記検出ステップにおける検出結果に基づいて、前記画像に対する焦点検出領域を設定する設定ステップと、
前記画像の前記焦点検出領域に含まれる、予め定められた周波数帯域の成分に基づいてAF評価値を生成する生成ステップと、
前記検出ステップにおいて検出された前記予め定められた被写体の領域の大きさの変化に基づいて、合焦点の探索方向を決定する決定ステップと、
前記決定ステップにおいて決定された探索方向に基づいて、前記フォーカスレンズを駆動して焦点検出を行う制御ステップとを有することを特徴とする撮像装置の制御方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008101820A JP5368723B2 (ja) | 2008-04-09 | 2008-04-09 | 撮像装置及びその制御方法 |
US12/417,355 US8289439B2 (en) | 2008-04-09 | 2009-04-02 | Image capturing apparatus and control method therefor |
US13/610,036 US8471951B2 (en) | 2008-04-09 | 2012-09-11 | Image capturing apparatus and control method therefor |
US13/905,598 US8866956B2 (en) | 2008-04-09 | 2013-05-30 | Image capturing apparatus and control method therefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008101820A JP5368723B2 (ja) | 2008-04-09 | 2008-04-09 | 撮像装置及びその制御方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013189834A Division JP5621027B2 (ja) | 2013-09-12 | 2013-09-12 | 撮像装置及びその制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2009251464A true JP2009251464A (ja) | 2009-10-29 |
JP2009251464A5 JP2009251464A5 (ja) | 2011-05-12 |
JP5368723B2 JP5368723B2 (ja) | 2013-12-18 |
Family
ID=41163676
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008101820A Expired - Fee Related JP5368723B2 (ja) | 2008-04-09 | 2008-04-09 | 撮像装置及びその制御方法 |
Country Status (2)
Country | Link |
---|---|
US (3) | US8289439B2 (ja) |
JP (1) | JP5368723B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110072916A (ko) * | 2009-12-23 | 2011-06-29 | 삼성전자주식회사 | 고속 af를 지원하는 디지털영상처리 장치 및 방법 |
JP2012108201A (ja) * | 2010-11-15 | 2012-06-07 | Olympus Corp | フォーカス調整装置及び撮像装置 |
JP2013088785A (ja) * | 2011-10-23 | 2013-05-13 | Canon Inc | 焦点調節装置 |
JP2013113922A (ja) * | 2011-11-25 | 2013-06-10 | Eastman Kodak Co | 撮像装置 |
JP2013140270A (ja) * | 2012-01-05 | 2013-07-18 | Canon Inc | 焦点調節装置 |
JP2015038597A (ja) * | 2013-07-16 | 2015-02-26 | キヤノン株式会社 | 撮像装置及び撮像方法 |
US9160916B2 (en) | 2011-10-16 | 2015-10-13 | Canon Kabushiki Kaisha | Focus adjustment apparatus with a size detector |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090009651A1 (en) * | 2007-07-04 | 2009-01-08 | Sanyo Electric Co., Ltd. | Imaging Apparatus And Automatic Focus Control Method |
JP5368723B2 (ja) * | 2008-04-09 | 2013-12-18 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP5159532B2 (ja) * | 2008-09-16 | 2013-03-06 | キヤノン株式会社 | 撮像装置とその制御方法 |
JP5517435B2 (ja) * | 2008-10-22 | 2014-06-11 | キヤノン株式会社 | 自動合焦装置および自動合焦方法、ならびに、撮像装置 |
JP5415899B2 (ja) * | 2008-10-30 | 2014-02-12 | パナソニック株式会社 | 撮像装置 |
KR101590873B1 (ko) | 2009-11-18 | 2016-02-02 | 삼성전자주식회사 | 디지털 촬영장치 및 그 제어방법 |
KR101710625B1 (ko) * | 2010-08-11 | 2017-02-27 | 삼성전자주식회사 | 초점 조절 장치, 초점 조절 방법 및 상기 방법을 기록한 기록 매체 |
US8525923B2 (en) * | 2010-08-30 | 2013-09-03 | Samsung Electronics Co., Ltd. | Focusing method and apparatus, and recording medium for recording the method |
TWI524108B (zh) * | 2014-04-24 | 2016-03-01 | 瑞昱半導體股份有限公司 | 被動式自動對焦裝置與方法 |
CN105025218B (zh) * | 2014-04-30 | 2018-08-28 | 瑞昱半导体股份有限公司 | 被动式自动对焦装置与方法 |
US9716822B2 (en) * | 2014-11-14 | 2017-07-25 | Qualcomm Incorporated | Direction aware autofocus |
CN105704360A (zh) * | 2014-11-25 | 2016-06-22 | 索尼公司 | 辅助自动对焦方法、装置以及电子设备 |
CN107005655B (zh) * | 2014-12-09 | 2020-06-23 | 快图有限公司 | 图像处理方法 |
US9686463B2 (en) * | 2015-03-10 | 2017-06-20 | Qualcomm Incorporated | Systems and methods for continuous auto focus (CAF) |
CN105049723B (zh) * | 2015-07-13 | 2017-11-21 | 南京工程学院 | 基于离焦量差异定性分析的自动对焦方法 |
CN109660726B (zh) * | 2015-12-23 | 2021-03-05 | 北京奇虎科技有限公司 | 摄像头快速自动聚焦方法及装置 |
CN106101540B (zh) * | 2016-06-28 | 2019-08-06 | 北京旷视科技有限公司 | 对焦点确定方法及装置 |
JP2018087864A (ja) * | 2016-11-28 | 2018-06-07 | オリンパス株式会社 | 焦点調節装置及び焦点調節装置の制御方法 |
CN107172352B (zh) * | 2017-06-16 | 2020-04-24 | Oppo广东移动通信有限公司 | 对焦控制方法、装置、计算机可存储介质和移动终端 |
CN110765984A (zh) * | 2019-11-08 | 2020-02-07 | 北京市商汤科技开发有限公司 | 一种移动状态信息展示方法、装置、设备及存储介质 |
CN113242387B (zh) * | 2021-06-11 | 2022-05-03 | 广州立景创新科技有限公司 | 相机模块、对焦调整系统及对焦方法 |
WO2024124431A1 (en) * | 2022-12-14 | 2024-06-20 | Intel Corporation | Methods and apparatus for autofocus for image capture systems |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06205265A (ja) * | 1992-12-28 | 1994-07-22 | Canon Inc | 自動焦点検出装置 |
JP2004247921A (ja) * | 2003-02-13 | 2004-09-02 | Nissan Motor Co Ltd | 車両周辺監視装置 |
JP2006025238A (ja) * | 2004-07-08 | 2006-01-26 | Fuji Photo Film Co Ltd | 撮像装置 |
JP2006227080A (ja) * | 2005-02-15 | 2006-08-31 | Nikon Corp | 電子カメラ |
JP2009139688A (ja) * | 2007-12-07 | 2009-06-25 | Nikon Corp | 焦点調節装置およびカメラ |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5204710A (en) * | 1989-06-13 | 1993-04-20 | Minolta Camera Kabushiki Kaisha | Camera having zoom lens system |
US5631697A (en) * | 1991-11-27 | 1997-05-20 | Hitachi, Ltd. | Video camera capable of automatic target tracking |
JP2001215403A (ja) | 2000-02-01 | 2001-08-10 | Canon Inc | 撮像装置および焦点の自動検出方法 |
JP3797543B2 (ja) * | 2001-10-26 | 2006-07-19 | 富士写真フイルム株式会社 | 自動焦点調節装置 |
JP3918788B2 (ja) | 2003-08-06 | 2007-05-23 | コニカミノルタフォトイメージング株式会社 | 撮像装置、およびプログラム |
US20060182433A1 (en) | 2005-02-15 | 2006-08-17 | Nikon Corporation | Electronic camera |
JP2007065290A (ja) | 2005-08-31 | 2007-03-15 | Nikon Corp | オートフォーカス装置 |
JP4680021B2 (ja) | 2005-09-30 | 2011-05-11 | 富士フイルム株式会社 | 撮影装置 |
JP2008009341A (ja) | 2006-06-30 | 2008-01-17 | Sony Corp | オートフォーカス装置、撮像装置及びオートフォーカス方法 |
JP2008052225A (ja) | 2006-08-28 | 2008-03-06 | Olympus Imaging Corp | カメラ、合焦制御方法、プログラム |
US20090009651A1 (en) * | 2007-07-04 | 2009-01-08 | Sanyo Electric Co., Ltd. | Imaging Apparatus And Automatic Focus Control Method |
KR100860994B1 (ko) * | 2007-07-31 | 2008-09-30 | 삼성전자주식회사 | 피사체 중심의 촬영 제어 방법 및 방법 |
JP5368723B2 (ja) * | 2008-04-09 | 2013-12-18 | キヤノン株式会社 | 撮像装置及びその制御方法 |
-
2008
- 2008-04-09 JP JP2008101820A patent/JP5368723B2/ja not_active Expired - Fee Related
-
2009
- 2009-04-02 US US12/417,355 patent/US8289439B2/en not_active Expired - Fee Related
-
2012
- 2012-09-11 US US13/610,036 patent/US8471951B2/en not_active Expired - Fee Related
-
2013
- 2013-05-30 US US13/905,598 patent/US8866956B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06205265A (ja) * | 1992-12-28 | 1994-07-22 | Canon Inc | 自動焦点検出装置 |
JP2004247921A (ja) * | 2003-02-13 | 2004-09-02 | Nissan Motor Co Ltd | 車両周辺監視装置 |
JP2006025238A (ja) * | 2004-07-08 | 2006-01-26 | Fuji Photo Film Co Ltd | 撮像装置 |
JP2006227080A (ja) * | 2005-02-15 | 2006-08-31 | Nikon Corp | 電子カメラ |
JP2009139688A (ja) * | 2007-12-07 | 2009-06-25 | Nikon Corp | 焦点調節装置およびカメラ |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110072916A (ko) * | 2009-12-23 | 2011-06-29 | 삼성전자주식회사 | 고속 af를 지원하는 디지털영상처리 장치 및 방법 |
KR101616422B1 (ko) | 2009-12-23 | 2016-04-28 | 삼성전자주식회사 | 고속 af를 지원하는 디지털영상처리 장치 및 방법 |
JP2012108201A (ja) * | 2010-11-15 | 2012-06-07 | Olympus Corp | フォーカス調整装置及び撮像装置 |
US9160916B2 (en) | 2011-10-16 | 2015-10-13 | Canon Kabushiki Kaisha | Focus adjustment apparatus with a size detector |
JP2013088785A (ja) * | 2011-10-23 | 2013-05-13 | Canon Inc | 焦点調節装置 |
JP2013113922A (ja) * | 2011-11-25 | 2013-06-10 | Eastman Kodak Co | 撮像装置 |
JP2013140270A (ja) * | 2012-01-05 | 2013-07-18 | Canon Inc | 焦点調節装置 |
JP2015038597A (ja) * | 2013-07-16 | 2015-02-26 | キヤノン株式会社 | 撮像装置及び撮像方法 |
Also Published As
Publication number | Publication date |
---|---|
US20130258169A1 (en) | 2013-10-03 |
US20130016276A1 (en) | 2013-01-17 |
US8866956B2 (en) | 2014-10-21 |
US8289439B2 (en) | 2012-10-16 |
US8471951B2 (en) | 2013-06-25 |
US20090256953A1 (en) | 2009-10-15 |
JP5368723B2 (ja) | 2013-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5368723B2 (ja) | 撮像装置及びその制御方法 | |
JP5517435B2 (ja) | 自動合焦装置および自動合焦方法、ならびに、撮像装置 | |
JP6184189B2 (ja) | 被写体検出装置およびその制御方法、撮像装置、被写体検出装置の制御プログラムおよび記憶媒体 | |
US8447178B2 (en) | Image pickup apparatus and method for controlling image pickup apparatus | |
JP2014126710A (ja) | 自動焦点検出装置およびその制御方法、撮像装置 | |
JP2009198574A (ja) | 焦点調節装置及びその制御方法 | |
JP5374065B2 (ja) | 撮像装置及びその制御方法 | |
JP5335408B2 (ja) | 焦点調節装置及び方法 | |
JP5322629B2 (ja) | 自動焦点検出装置及びその制御方法、撮像装置 | |
JP5075110B2 (ja) | 焦点調節装置及び方法 | |
JP6851726B2 (ja) | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 | |
JP2014106411A (ja) | 自動焦点調節装置及び自動焦点調節方法 | |
JP5621027B2 (ja) | 撮像装置及びその制御方法 | |
JP5926757B2 (ja) | 自動合焦装置および自動合焦方法、ならびに、撮像装置 | |
JP6053287B2 (ja) | 自動焦点調節装置および自動焦点調節方法 | |
JP5017195B2 (ja) | 焦点調節装置及び方法 | |
JP6039184B2 (ja) | 自動焦点調節装置、撮像装置及び自動焦点調節方法 | |
JP5164711B2 (ja) | 焦点調節装置およびその制御方法 | |
JP5932340B2 (ja) | 焦点調節装置 | |
JP5894440B2 (ja) | 焦点調節装置 | |
JP5451869B2 (ja) | 焦点調節装置及び方法 | |
JP2014109661A (ja) | 自動焦点調節装置及び自動焦点調節方法 | |
JP2013167891A (ja) | 撮像装置、撮像装置の制御方法、プログラム及び記憶媒体 | |
JP5247945B2 (ja) | 撮像装置、撮像装置の制御方法、プログラム及び記憶媒体 | |
JP2010156731A (ja) | 自動焦点調節装置及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110330 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110330 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120224 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120420 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130816 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130913 |
|
LAPS | Cancellation because of no payment of annual fees |