JP5914055B2 - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP5914055B2 JP5914055B2 JP2012049718A JP2012049718A JP5914055B2 JP 5914055 B2 JP5914055 B2 JP 5914055B2 JP 2012049718 A JP2012049718 A JP 2012049718A JP 2012049718 A JP2012049718 A JP 2012049718A JP 5914055 B2 JP5914055 B2 JP 5914055B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- photoelectric conversion
- optical system
- amount
- photographing optical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 51
- 238000006243 chemical reaction Methods 0.000 claims description 100
- 230000003287 optical effect Effects 0.000 claims description 89
- 238000001514 detection method Methods 0.000 claims description 81
- 238000012937 correction Methods 0.000 claims description 41
- 238000009826 distribution Methods 0.000 claims description 34
- 238000000034 method Methods 0.000 claims description 30
- 108010076504 Protein Sorting Signals Proteins 0.000 claims description 12
- 230000008859 change Effects 0.000 claims description 12
- 230000004907 flux Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims 1
- 210000001747 pupil Anatomy 0.000 description 41
- 238000010586 diagram Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 12
- 230000004075 alteration Effects 0.000 description 10
- 230000007423 decrease Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000003705 background correction Methods 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 4
- 230000009191 jumping Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 101100170092 Arabidopsis thaliana PDF1B gene Proteins 0.000 description 1
- 101000918983 Homo sapiens Neutrophil defensin 1 Proteins 0.000 description 1
- 101000830386 Homo sapiens Neutrophil defensin 3 Proteins 0.000 description 1
- 101000743264 Homo sapiens RNA-binding protein 6 Proteins 0.000 description 1
- 102100029494 Neutrophil defensin 1 Human genes 0.000 description 1
- 102100024761 Neutrophil defensin 3 Human genes 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 101150060894 def2 gene Proteins 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000016507 interphase Effects 0.000 description 1
- 238000005304 joining Methods 0.000 description 1
- 238000009940 knitting Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Description
図1は、本発明の第1の実施形態に係わる撮像装置の構成を示す図である。本実施形態における撮像装置は、撮像素子を有したカメラ本体と撮影光学系が一体となった電子カメラであり、動画及び静止画が記録可能である。図1において、101は撮影光学系(結像光学系)の先端に配置された第1レンズ群で、光軸方向に移動可能に保持される。102は絞りで、その開口径を調節することで、撮影光学系のFナンバーを調節可能で、撮影時の光量調節を行なうほか、静止画撮影時には露光秒時調節用シャッタとしても機能する。103は第2レンズ群である。そして絞り102及び第2レンズ群103は一体となって光軸方向に駆動され、第1レンズ群101の移動動作との連動により、変倍作用(ズーム機能)をなす。
dz=u×(1/θ)=u×K1 …(2)
ここで、K1は基線角度θの逆数で定義された係数である。
θ×dz=u …(1)
dz=u×(1/θ)=u×K1 …(2)
の関係がある。ここで、θは2分割された1対の瞳の基線角度、K1は基線角度θの逆数で定義された係数であり、Fナンバーが大きいほど、基線角度θは小さい。一方で、図7〜図11で説明した現象による像ずれ量uは、上述したようにFナンバー依存性が小さいため、図12では一定の値としている。すると、デフォーカス量に変換(換算)した焦点検出誤差は、Fナンバーの増加とともに急増する。このような特性は、撮像素子の個体差(製造誤差)によっても若干変化するため、数個の撮像素子を用いて諸特性を測定し、その平均値を補正用パラメータとしてカメラ内に記憶しておけばよい。
ここで、像ずれ補正値u0は、撮影光学系のFナンバーや、撮影光学系の射出瞳距離、焦点検出領域の座標(像高)等に対する依存性が少ない場合は定数として扱うことができる。すると補正式が簡単になるため、補正のための演算時間の増加が抑えられる。また、補正値を格納するためのメモリ容量も少なくて済むため、コストの増加も回避できる。ステップS118では、読み出した補正値u0を上記式(3)に代入し、像ずれ補正を行なう。
ここで、U0、U1、U2はメモリに記憶された定数、Fは焦点検出時の撮影光学系のFナンバーである。
第1の実施形態は、位相差演算の対象となる1対2像の像ずれ量に対して所定量の誤差補正を施す実施形態であった。以下に示す第2の実施形態は、像ずれ量をデフォーカス量に変換(換算)したのち、デフォーカス量に補正を施す実施形態を示す。
そこでステップS219においては、上記式(5)を用いてデフォーカス量の補正を行ない、補正後のデフォーカス量dz2を算出する。そしてステップS220にてメインルーチンにリターンする。
ここで、D0、D1、D2はメモリに記憶された定数、Fは焦点検出時の撮影光学系のFナンバーである。
第1及び第2の実施形態は、焦点調節対象である主被写体の焦点調節結果に補正を加える実施形態を示した。以下に示す第3の実施形態は、撮影画像の全領域における焦点状態情報、いわゆるデフォーカスマップを作成する場合の実施形態を示す。
上記の実施形態で用いた撮像素子は、すべての画素の光電変換部が2分割されているが、画素構造や画素配列が異なる撮像素子でも構わない。
第1の実施形態の撮像装置は、撮影光学系と、撮像素子を含むカメラ本体が一体となった実施形態を示したが、撮影光学系がカメラ本体に対して着脱可能な構成でも構わない。
Claims (8)
- 撮影光学系により形成された被写体像を光電変換する複数の画素を有し、前記複数の画素のそれぞれが、1個のマイクロレンズと複数の光電変換部とを備える撮像素子と、
前記複数の光電変換部の出力に基づいて検出された像ずれ量からデフォーカス量を算出し、当該デフォーカス量に基づいて、前記撮影光学系のレンズの移動量に対応する情報を算出し、前記撮影光学系のレンズの移動を制御する制御手段と、を備え、
前記制御手段は、前記マイクロレンズを通過する入射光束が前記光電変換部の表面より深い位置に収束することに依存する補正値により前記像ずれ量を補正することを特徴とする撮像装置。 - 前記補正値は、前記撮影光学系のFナンバーの変化に対して一定であることを特徴とする請求項1に記載の撮像装置。
- 前記制御手段は、前記像ずれ量を補正するための前記補正値を用いた前記像ずれ量の補正に代えて、デフォーカス量の補正値を用いた前記デフォーカス量の補正を行い、当該デフォーカス量の補正値は、前記撮影光学系のFナンバーに応じて異なることを特徴とする請求項1に記載の撮像装置。
- 前記制御手段は、前記デフォーカス量に基づいて前記撮影光学系のレンズの移動を制御することを特徴とする請求項1に記載の撮像装置。
- 前記撮像素子により形成された画像から、焦点調節の対象となる主被写体を抽出する抽出手段をさらに備え、前記制御手段は前記主被写体に対して算出された前記像ずれ量に補正を施すことを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。
- 前記撮像素子により形成された画像を複数の領域に分割する分割手段をさらに備え、前記制御手段は分割された前記複数の領域毎に算出された前記像ずれ量に対して補正を施すことを特徴とする請求項1または2に記載の撮像装置。
- 前記複数の光電変換部により得られる2像の焦点検出用信号列を用いて、位相差方式により前記像ずれ量を検出する焦点検出手段をさらに備えることを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
- 前記撮像素子は、前記マイクロレンズを通過する入射光束が前記光電変換部の表面より深い位置に収束することにより、被写体に照度分布があった場合、前記1個のマイクロレンズに対応した複数の光電変換部での光電変換量が異なることを特徴とする請求項1乃至7のいずれか1項に記載の撮像装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012049718A JP5914055B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置 |
US13/777,444 US9167148B2 (en) | 2012-03-06 | 2013-02-26 | Image capture apparatus that performs focus detection with a phase difference detection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012049718A JP5914055B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013186201A JP2013186201A (ja) | 2013-09-19 |
JP2013186201A5 JP2013186201A5 (ja) | 2015-04-09 |
JP5914055B2 true JP5914055B2 (ja) | 2016-05-11 |
Family
ID=49113818
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012049718A Active JP5914055B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9167148B2 (ja) |
JP (1) | JP5914055B2 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6000520B2 (ja) | 2011-07-25 | 2016-09-28 | キヤノン株式会社 | 撮像装置およびその制御方法およびプログラム |
JP2014106476A (ja) | 2012-11-29 | 2014-06-09 | Canon Inc | 焦点検出装置、撮像装置、撮像システム、焦点検出方法、プログラム、および、記憶媒体 |
JP6186900B2 (ja) * | 2013-06-04 | 2017-08-30 | ソニー株式会社 | 固体撮像装置、電子機器、レンズ制御方法、および撮像モジュール |
US9402069B2 (en) * | 2013-06-07 | 2016-07-26 | Canon Kabushiki Kaisha | Depth measurement apparatus, imaging apparatus, and method of controlling depth measurement apparatus |
US20140362190A1 (en) * | 2013-06-07 | 2014-12-11 | Canon Kabushiki Kaisha | Depth measurement apparatus, imaging apparatus, and method of controlling depth measurement apparatus |
JP6207243B2 (ja) * | 2013-06-07 | 2017-10-04 | キヤノン株式会社 | 測距装置、撮像装置及び測距装置の制御方法 |
JP6274788B2 (ja) * | 2013-08-28 | 2018-02-07 | キヤノン株式会社 | 撮像装置、撮像システム及び撮像装置の駆動方法 |
JP6368999B2 (ja) * | 2013-09-26 | 2018-08-08 | 株式会社ニコン | 撮像素子および撮像装置 |
JP6158340B2 (ja) * | 2013-09-30 | 2017-07-05 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP6285683B2 (ja) * | 2013-10-01 | 2018-02-28 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP6021780B2 (ja) * | 2013-10-07 | 2016-11-09 | キヤノン株式会社 | 画像データ処理装置、距離算出装置、撮像装置および画像データ処理方法 |
JP6555857B2 (ja) * | 2013-10-11 | 2019-08-07 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP6351231B2 (ja) * | 2013-10-18 | 2018-07-04 | キヤノン株式会社 | 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体 |
JP6492396B2 (ja) * | 2013-12-06 | 2019-04-03 | 株式会社ニコン | 撮像素子および撮像装置 |
JP2015129846A (ja) * | 2014-01-07 | 2015-07-16 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP6381266B2 (ja) * | 2014-04-15 | 2018-08-29 | キヤノン株式会社 | 撮像装置、制御装置、制御方法、プログラム、および、記憶媒体 |
JP6366341B2 (ja) * | 2014-04-28 | 2018-08-01 | キヤノン株式会社 | 撮像装置 |
JP6298362B2 (ja) * | 2014-06-02 | 2018-03-20 | キヤノン株式会社 | 撮像装置及びその制御方法、及び撮像システム |
JP6587380B2 (ja) * | 2014-09-12 | 2019-10-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム、記憶媒体 |
KR102219941B1 (ko) | 2015-03-10 | 2021-02-25 | 삼성전자주식회사 | 이미지 센서, 이를 포함하는 데이터 처리 시스템, 및 모바일 컴퓨팅 장치 |
US9998691B2 (en) * | 2015-03-11 | 2018-06-12 | Canon Kabushiki Kaisha | Pixel, a solid-state imaging device, and an imaging apparatus having barrier region between photoelectric conversion portions in parallel |
KR102390836B1 (ko) * | 2015-10-05 | 2022-04-26 | 삼성전자주식회사 | 이미지 데이터를 생성하는 전자 장치 및 방법 |
KR102477757B1 (ko) | 2015-12-16 | 2022-12-14 | 에스케이하이닉스 주식회사 | 자동 초점 시스템 및 방법 |
JP6739242B2 (ja) | 2016-06-01 | 2020-08-12 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム並びに記憶媒体 |
WO2018160172A1 (en) * | 2017-02-28 | 2018-09-07 | Bae Systems Lmaging Solutions Inc. | AUTOFOCUS SYSTEM FOR CMOS lMAGING SENSORS |
JP7086551B2 (ja) * | 2017-09-21 | 2022-06-20 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP6856762B2 (ja) * | 2017-09-28 | 2021-04-14 | 富士フイルム株式会社 | 撮像装置、情報取得方法及び情報取得プログラム |
CN111133378B (zh) | 2017-09-28 | 2021-04-23 | 富士胶片株式会社 | 摄像装置、信息获取方法及记录介质 |
CN111866373B (zh) * | 2020-06-19 | 2021-12-28 | 北京小米移动软件有限公司 | 一种显示拍摄预览图像的方法、装置及介质 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5887512A (ja) | 1981-11-19 | 1983-05-25 | Nippon Kogaku Kk <Nikon> | 焦点検出装置 |
JPH0672972B2 (ja) | 1986-02-17 | 1994-09-14 | ミノルタカメラ株式会社 | 焦点検出装置 |
JP3031606B2 (ja) | 1995-08-02 | 2000-04-10 | キヤノン株式会社 | 固体撮像装置と画像撮像装置 |
JPH11218764A (ja) | 1998-02-04 | 1999-08-10 | Yac Co Ltd | 液晶表示装置の製造方法 |
JP4908668B2 (ja) | 2000-04-19 | 2012-04-04 | キヤノン株式会社 | 焦点検出装置 |
US7068432B2 (en) * | 2004-07-27 | 2006-06-27 | Micron Technology, Inc. | Controlling lens shape in a microlens array |
JP4574459B2 (ja) | 2005-06-09 | 2010-11-04 | キヤノン株式会社 | 撮影装置及びその制御方法及びプログラム及び記憶媒体 |
JP4946059B2 (ja) * | 2006-01-11 | 2012-06-06 | 株式会社ニコン | 撮像装置 |
JP5256675B2 (ja) * | 2007-09-21 | 2013-08-07 | 株式会社ニコン | 撮像装置 |
JP5161702B2 (ja) * | 2008-08-25 | 2013-03-13 | キヤノン株式会社 | 撮像装置、撮像システム、及び焦点検出方法 |
JP2010057067A (ja) * | 2008-08-29 | 2010-03-11 | Sony Corp | 撮像装置および画像処理装置 |
JP5147645B2 (ja) * | 2008-10-30 | 2013-02-20 | キヤノン株式会社 | 撮像装置 |
JP2010109923A (ja) * | 2008-10-31 | 2010-05-13 | Nikon Corp | 撮像装置 |
JP2011130256A (ja) * | 2009-12-18 | 2011-06-30 | Canon Inc | 撮像装置 |
JP5677800B2 (ja) * | 2010-10-21 | 2015-02-25 | オリンパス株式会社 | 撮像装置 |
-
2012
- 2012-03-06 JP JP2012049718A patent/JP5914055B2/ja active Active
-
2013
- 2013-02-26 US US13/777,444 patent/US9167148B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US9167148B2 (en) | 2015-10-20 |
US20130235253A1 (en) | 2013-09-12 |
JP2013186201A (ja) | 2013-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5914055B2 (ja) | 撮像装置 | |
CN104104849B (zh) | 摄像设备及其控制方法 | |
US9204067B2 (en) | Image sensor and image capturing apparatus | |
CN107465866B (zh) | 图像处理设备及方法、摄像设备和计算机可读存储介质 | |
US9438786B2 (en) | Focus adjustment apparatus, focus adjustment method and program, and imaging apparatus | |
EP2709352B1 (en) | Image pickup apparatus, image pickup system and method of controlling image pickup apparatus | |
US9412777B2 (en) | Image sensor and image capturing apparatus for satisfactory pupil division by a focus detection pixel in which a light guide is formed | |
US10321044B2 (en) | Image pickup apparatus and image pickup system with point image intensity distribution calculation | |
JP6746359B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP6381266B2 (ja) | 撮像装置、制御装置、制御方法、プログラム、および、記憶媒体 | |
JP5850648B2 (ja) | 撮像装置 | |
JP6700986B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP2017158018A (ja) | 画像処理装置およびその制御方法、撮像装置 | |
JP4472166B2 (ja) | 3次元撮像装量 | |
JPH0338570B2 (ja) | ||
JP6854619B2 (ja) | 焦点検出装置及び方法、撮像装置、レンズユニット及び撮像システム | |
JP7171331B2 (ja) | 撮像装置 | |
JP2012022147A (ja) | 位相差検出用情報取得装置、位相差検出装置、撮像装置 | |
JP6789810B2 (ja) | 画像処理方法、画像処理装置、および、撮像装置 | |
WO2016181620A1 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体 | |
JP2019114912A (ja) | 画像処理装置および画像処理方法、並びに撮像装置 | |
JP6714434B2 (ja) | 撮像装置およびその制御方法、プログラム、記憶媒体 | |
JP6234097B2 (ja) | 撮像装置およびその制御方法 | |
JP2020003686A (ja) | 焦点検出装置、撮像装置および交換レンズ装置 | |
JP2019219499A (ja) | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150219 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151014 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151023 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160304 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160404 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5914055 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |