JP2011166588A - 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 - Google Patents
撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 Download PDFInfo
- Publication number
- JP2011166588A JP2011166588A JP2010029039A JP2010029039A JP2011166588A JP 2011166588 A JP2011166588 A JP 2011166588A JP 2010029039 A JP2010029039 A JP 2010029039A JP 2010029039 A JP2010029039 A JP 2010029039A JP 2011166588 A JP2011166588 A JP 2011166588A
- Authority
- JP
- Japan
- Prior art keywords
- image
- imaging
- image sensor
- focus
- imaging element
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 172
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000012545 processing Methods 0.000 claims abstract description 70
- 230000003287 optical effect Effects 0.000 claims abstract description 48
- 238000000034 method Methods 0.000 claims abstract description 41
- 230000008569 process Effects 0.000 claims abstract description 19
- 230000006870 function Effects 0.000 claims description 76
- 230000003247 decreasing effect Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 16
- 230000033001 locomotion Effects 0.000 description 15
- 230000008859 change Effects 0.000 description 8
- 238000005457 optimization Methods 0.000 description 5
- 238000012937 correction Methods 0.000 description 4
- 230000004069 differentiation Effects 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000004075 alteration Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- HCHKCACWOHOZIP-UHFFFAOYSA-N Zinc Chemical group [Zn] HCHKCACWOHOZIP-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 239000006187 pill Substances 0.000 description 1
- 229920013655 poly(bisphenol-A sulfone) Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 239000012780 transparent material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/409—Edge or detail enhancement; Noise or error suppression
- H04N1/4092—Edge or detail enhancement
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
- G02B27/646—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20201—Motion blur correction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
【解決手段】第1撮像素子10Aおよび第2撮像素子10Bと、第1撮像素子10Aの撮像面上に焦点が合っている第1の像を形成し、かつ、第2撮像素子10Bの撮像面上に焦点が外れた第2の像を形成する光学系を備えている。画像処理部220は、第1撮像素子10Aおよび第2撮像素子10Bから得られる信号を処理し、第2撮像素子10Bによって取得された画像から、手振れによるぼやけおよび焦点外れによるぼやけを減少させた復元画像を生成する。
【選択図】図8
Description
10B 第2撮像素子
15 絞り機能を有するシャッタ
20 撮影レンズ
30 撮像素子駆動部
40 光スプリッタ
45 光学素子
60 分光部
100 撮像部
200 信号処理部
220 画像処理部
222 初期PSF設定部
224 画像復元部
226 PSF推定部
228 パラメータ更新部
240 メモリ
260 インターフェース(IF)
300 表示部
400 記録媒体
500 システム制御部
Claims (9)
- 第1撮像素子および第2撮像素子と、
前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成し、かつ、前記第2撮像素子の撮像面上に焦点が外れた第2の像を形成し得る光学系と、
前記第1撮像素子および前記第2撮像素子から得られる信号を処理する画像処理部と、
を備え、
前記画像処理部は、
前記第1撮像素子および第2撮像素子によって取得された画像から、手振れによるぼやけおよび焦点外れによるぼやけを減少させた復元画像を生成する、撮像装置。 - 前記第2撮像素子における焦点外れによるぼやけを規定する点広がり関数を記録するメモリを備え、
前記画像処理部は、撮像時における焦点外れによるぼやけを規定する点広がり関数を前記メモリから読み出し、復元画像の生成に用いる、請求項1に記載の撮像装置。 - 前記光学系は、
結像レンズと、
前記結像レンズを透過した光を2方向に分離する光スプリッタとを有しており、
分離された一方の光を前記第1撮像素子に入射し、かつ、分離された他方の光を前記第2撮像素子に入射する、請求項1または2に記載の撮像装置。 - 前記結像レンズから前記第1撮像素子までの光学的な距離は、前記結像レンズから前記第2撮像素子までの光学的な距離とは異なっている、請求項3に記載の撮像装置。
- 前記光学系は、
入射光を2方向に分離する光スプリッタと、
分離された一方の光を前記第1撮像素子上に集光する第1結像レンズと、
分離された他方の光を前記第2撮像素子上に集光する第2結像レンズと
を有している、請求項1または2に記載の撮像装置。 - 表示部を更に備え、
前記第1撮像素子によって取得された画像を前記表示部に表示する、請求項1から4のいずれかに記載の撮像装置。 - 第1撮像素子および第2撮像素子と、前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成し、かつ、前記第2撮像素子の撮像面上に焦点が外れた第2の像を形成する光学系と、前記第1撮像素子および前記第2撮像素子から得られる信号を処理する画像処理部とを備える撮像装置の動作を制御するプログラムであって、
前記光学系により、前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成させるとともに、前記第2撮像素子の撮像面上に焦点が合っていない第2の像を形成させるステップと、
前記画像処理部により、前記第1撮像素子および前記第2撮像素子によって取得された画像から、手振れによるぼやけおよび焦点外れによるぼやけを減少させた復元画像を生成するステップと
を実行するプログラム。 - 第1撮像素子および第2撮像素子と、前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成し、かつ、前記第2撮像素子の撮像面上に焦点が外れた第2の像を形成する光学系と、前記第1撮像素子および前記第2撮像素子から得られる信号を処理する画像処理部とを備える撮像装置における画像処理方法であって、
前記光学系により、前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成させるとともに、前記第2撮像素子の撮像面上に焦点が合っていない第2の像を形成させるステップと、
前記画像処理部により、前記第1撮像素子および前記第2撮像素子によって取得された画像から、手振れによるぼやけおよび焦点外れによるぼやけを減少させた復元画像を生成するステップと
を含む、画像処理方法。 - 第1撮像素子および第2撮像素子と、前記第1撮像素子の撮像面上に焦点が合っている第1の像を形成し、かつ、前記第2撮像素子の撮像面上に焦点が外れた第2の像を形成する光学系と、前記第1撮像素子および前記第2撮像素子から得られる信号を処理する画像処理部とを備える撮像装置における画像処理方法であって、
前記光学系により、前記第1撮像素子の撮像面上に焦点が合っていない第1の像を形成させるとともに、前記第2撮像面上にも焦点が合っていない第2の像を形成させるステップと、
前記画像処理部により、前記第1撮像素子および前記第2撮像素子によって取得された画像から、手振れによるぼやけおよび焦点外れによるぼやけを減少させた復元画像を生成するステップと
を含む、画像処理方法。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010029039A JP5237978B2 (ja) | 2010-02-12 | 2010-02-12 | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 |
PCT/JP2011/000380 WO2011099239A1 (ja) | 2010-02-12 | 2011-01-25 | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 |
EP11741990.3A EP2536125B1 (en) | 2010-02-12 | 2011-01-25 | Imaging device and method, and image processing method for imaging device |
US13/260,597 US8520081B2 (en) | 2010-02-12 | 2011-01-25 | Imaging device and method, and image processing method for imaging device |
PL11741990T PL2536125T3 (pl) | 2010-02-12 | 2011-01-25 | Urządzenie i sposób obrazowania oraz sposób przetwarzania obrazu dla urządzenia obrazującego |
CN201180001619.9A CN102369722B (zh) | 2010-02-12 | 2011-01-25 | 摄像装置以及摄像方法、和用于所述摄像装置的图像处理方法 |
ES11741990T ES2779044T3 (es) | 2010-02-12 | 2011-01-25 | Dispositivo y procedimiento de imágenes, y procedimiento de procesamiento de imágenes para dispositivo de imágenes |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010029039A JP5237978B2 (ja) | 2010-02-12 | 2010-02-12 | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011166588A true JP2011166588A (ja) | 2011-08-25 |
JP5237978B2 JP5237978B2 (ja) | 2013-07-17 |
Family
ID=44367528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010029039A Active JP5237978B2 (ja) | 2010-02-12 | 2010-02-12 | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 |
Country Status (7)
Country | Link |
---|---|
US (1) | US8520081B2 (ja) |
EP (1) | EP2536125B1 (ja) |
JP (1) | JP5237978B2 (ja) |
CN (1) | CN102369722B (ja) |
ES (1) | ES2779044T3 (ja) |
PL (1) | PL2536125T3 (ja) |
WO (1) | WO2011099239A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013240054A (ja) * | 2012-05-14 | 2013-11-28 | Ricoh Co Ltd | 非コヒーレント・サンプリングのための辞書学習 |
US9390477B2 (en) | 2013-01-28 | 2016-07-12 | Canon Kabushiki Kaisha | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for image restoration using blind deconvolution |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103314571B (zh) * | 2011-11-30 | 2017-09-29 | 松下知识产权经营株式会社 | 摄像装置和摄像系统 |
US8929607B2 (en) * | 2011-12-01 | 2015-01-06 | Sony Corporation | System and method for performing depth estimation utilizing defocused pillbox images |
US9066002B2 (en) * | 2012-08-29 | 2015-06-23 | Sony Corporation | System and method for utilizing enhanced scene detection in a depth estimation procedure |
JP6092049B2 (ja) * | 2013-08-28 | 2017-03-08 | 東芝ライフスタイル株式会社 | 撮像システム及び撮像装置 |
US10761014B2 (en) * | 2014-11-04 | 2020-09-01 | Nec Corporation | Method and apparatus for remote sensing using optical orbital angular momentum (OAM)-based spectroscopy for object recognition |
KR101596203B1 (ko) * | 2015-06-16 | 2016-02-22 | 중앙대학교 산학협력단 | 모션 블러 이미지 복원 방법 및 장치 |
CN105100456B (zh) * | 2015-07-03 | 2019-02-05 | Oppo广东移动通信有限公司 | 一种使用移动终端外置配件实现自拍的方法及移动终端 |
US11163169B2 (en) * | 2016-06-07 | 2021-11-02 | Karl Storz Se & Co. Kg | Endoscope and imaging arrangement providing improved depth of field and resolution |
JP6966934B2 (ja) * | 2017-03-29 | 2021-11-17 | パナソニックIpマネジメント株式会社 | 画像生成装置及び撮像装置 |
CN107071277B (zh) * | 2017-03-31 | 2020-04-03 | 努比亚技术有限公司 | 一种光绘拍摄装置、方法和移动终端 |
CN110493526B (zh) * | 2019-09-10 | 2020-11-20 | 北京小米移动软件有限公司 | 基于多摄像模块的图像处理方法、装置、设备及介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07209576A (ja) * | 1994-01-17 | 1995-08-11 | Sony Corp | 光学的検出装置およびフォーカス制御装置 |
JP2001268437A (ja) * | 2000-03-23 | 2001-09-28 | Minolta Co Ltd | 画像処理装置 |
JP2006129236A (ja) * | 2004-10-29 | 2006-05-18 | Sanyo Electric Co Ltd | リンギング除去装置およびリンギング除去プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2009522825A (ja) * | 2006-05-08 | 2009-06-11 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | シーンの画像におけるぶれを低減する方法及びシーンの画像のぶれを除去する方法 |
JP2010258689A (ja) * | 2009-04-23 | 2010-11-11 | Canon Inc | 画像復元装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6046768A (en) * | 1994-06-15 | 2000-04-04 | Canon Kabushiki Kaisha | Apparatus used for image blur prevention |
JPH08262518A (ja) * | 1995-03-27 | 1996-10-11 | Canon Inc | カメラ |
US6522837B2 (en) * | 1999-12-28 | 2003-02-18 | Canon Kabushiki Kaisha | Image blur correcting system |
JP4275344B2 (ja) * | 2002-01-22 | 2009-06-10 | 富士フイルム株式会社 | 撮像装置、撮像方法、及びプログラム |
US20040130649A1 (en) * | 2003-01-03 | 2004-07-08 | Chulhee Lee | Cameras |
US7933507B2 (en) * | 2006-03-03 | 2011-04-26 | Honeywell International Inc. | Single lens splitter camera |
US20070122132A1 (en) * | 2005-11-18 | 2007-05-31 | Fujifilm Corporation | Camera shake compensation unit, image taking apparatus, image taking system, and method of compensating for image formation position |
US7952613B2 (en) * | 2006-09-29 | 2011-05-31 | Fujinon Corporation | Image blur correcting unit, image blur correcting device, image pickup apparatus and portable equipment |
US7796872B2 (en) * | 2007-01-05 | 2010-09-14 | Invensense, Inc. | Method and apparatus for producing a sharp image from a handheld device containing a gyroscope |
CN101779154B (zh) * | 2007-08-13 | 2012-03-07 | 松下电器产业株式会社 | 摄像装置和照相机 |
JP5049899B2 (ja) * | 2008-06-30 | 2012-10-17 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP5468404B2 (ja) * | 2010-02-02 | 2014-04-09 | パナソニック株式会社 | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 |
-
2010
- 2010-02-12 JP JP2010029039A patent/JP5237978B2/ja active Active
-
2011
- 2011-01-25 US US13/260,597 patent/US8520081B2/en active Active
- 2011-01-25 PL PL11741990T patent/PL2536125T3/pl unknown
- 2011-01-25 WO PCT/JP2011/000380 patent/WO2011099239A1/ja active Application Filing
- 2011-01-25 EP EP11741990.3A patent/EP2536125B1/en active Active
- 2011-01-25 ES ES11741990T patent/ES2779044T3/es active Active
- 2011-01-25 CN CN201180001619.9A patent/CN102369722B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07209576A (ja) * | 1994-01-17 | 1995-08-11 | Sony Corp | 光学的検出装置およびフォーカス制御装置 |
JP2001268437A (ja) * | 2000-03-23 | 2001-09-28 | Minolta Co Ltd | 画像処理装置 |
JP2006129236A (ja) * | 2004-10-29 | 2006-05-18 | Sanyo Electric Co Ltd | リンギング除去装置およびリンギング除去プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2009522825A (ja) * | 2006-05-08 | 2009-06-11 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | シーンの画像におけるぶれを低減する方法及びシーンの画像のぶれを除去する方法 |
JP2010258689A (ja) * | 2009-04-23 | 2010-11-11 | Canon Inc | 画像復元装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013240054A (ja) * | 2012-05-14 | 2013-11-28 | Ricoh Co Ltd | 非コヒーレント・サンプリングのための辞書学習 |
US9390477B2 (en) | 2013-01-28 | 2016-07-12 | Canon Kabushiki Kaisha | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for image restoration using blind deconvolution |
Also Published As
Publication number | Publication date |
---|---|
PL2536125T3 (pl) | 2020-08-24 |
EP2536125A1 (en) | 2012-12-19 |
EP2536125A4 (en) | 2013-07-03 |
CN102369722B (zh) | 2015-09-02 |
US20120033094A1 (en) | 2012-02-09 |
WO2011099239A1 (ja) | 2011-08-18 |
ES2779044T3 (es) | 2020-08-13 |
EP2536125B1 (en) | 2020-03-11 |
US8520081B2 (en) | 2013-08-27 |
CN102369722A (zh) | 2012-03-07 |
JP5237978B2 (ja) | 2013-07-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5237978B2 (ja) | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 | |
JP5468404B2 (ja) | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 | |
JP5756099B2 (ja) | 撮像装置、画像処理装置、画像処理方法、および画像処理プログラム | |
JP5909540B2 (ja) | 画像処理表示装置 | |
WO2017045558A1 (zh) | 景深调节方法、装置及终端 | |
US9167168B2 (en) | Image processing method, image processing apparatus, non-transitory computer-readable medium, and image-pickup apparatus | |
US20150092992A1 (en) | Image processing device, image capturing apparatus, and image processing method | |
JP2005252626A (ja) | 撮像装置および画像処理方法 | |
KR20110036757A (ko) | 화상 촬영 장치 및 그 거리 연산 방법과 합초 화상 취득 방법 | |
JP2018116239A (ja) | 像ブレ補正装置及びその制御方法、撮像装置、プログラム、記憶媒体 | |
JP4145308B2 (ja) | 手ぶれ補正装置 | |
US20090290041A1 (en) | Image processing device and method, and computer readable recording medium containing program | |
JP2010279054A (ja) | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 | |
JP5712031B2 (ja) | 撮像装置、撮影レンズユニット、および撮像ユニット | |
JP2009047734A (ja) | 撮像装置及び画像処理プログラム | |
JP2017050662A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP6006506B2 (ja) | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 | |
JP2009088933A (ja) | 画像記録装置、画像補正装置及び撮像装置 | |
JP2016036093A (ja) | 撮像装置、その制御方法、および制御プログラム、並びに画像処理装置 | |
JP2009047733A (ja) | 撮像装置及び画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120614 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130207 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130329 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5237978 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160405 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |