JP2016153909A - Focus detecting device and imaging device - Google Patents

Focus detecting device and imaging device Download PDF

Info

Publication number
JP2016153909A
JP2016153909A JP2016075595A JP2016075595A JP2016153909A JP 2016153909 A JP2016153909 A JP 2016153909A JP 2016075595 A JP2016075595 A JP 2016075595A JP 2016075595 A JP2016075595 A JP 2016075595A JP 2016153909 A JP2016153909 A JP 2016153909A
Authority
JP
Japan
Prior art keywords
light receiving
lens
microlens
focus detection
photographing lens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016075595A
Other languages
Japanese (ja)
Other versions
JP6424859B2 (en
JP2016153909A5 (en
Inventor
岩根 透
Toru Iwane
透 岩根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2016075595A priority Critical patent/JP6424859B2/en
Publication of JP2016153909A publication Critical patent/JP2016153909A/en
Publication of JP2016153909A5 publication Critical patent/JP2016153909A5/en
Application granted granted Critical
Publication of JP6424859B2 publication Critical patent/JP6424859B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a focus detecting device and an imaging device that can correct defocus amount precisely in accordance with spherical aberration of an imaging optical system.SOLUTION: A focus detecting device comprises: a microlens array 161 in which a plurality of microlenses 161a are arranged; a plurality of light receiving sections 162a provided in correspondence with the microlenses; a light receiving element 162 which receives light beams from an optical system through the microlenses; and calculating means 163 which selects a pair of light receiving sections, among the plurality of light receiving sections, receiving a pair of light beams passed through different regions of the optical system in association with a plurality of aperture values of the optical system, and calculates an amount of image plane shift in the optical system on the basis of output from the pair of the light receiving sections.SELECTED DRAWING: Figure 2

Description

この発明は、焦点検出装置及び撮像装置に関するものである。   The present invention relates to a focus detection apparatus and an imaging apparatus.

結像光学系の球面収差に応じてデフォーカス量を補正して最適な合焦位置を検出するカメラシステムが知られている(特許文献1)。このカメラシステムのレンズ鏡筒には、焦点検出光学系の2つの開放相当F値にそれぞれ対応した球面収差補正データが記憶されている。そして、装着されたカメラボディでこれら2つの球面収差補正データを読み取り、当該カメラボディの焦点検出光学系固有の開口相当F値に応じて最適な重み付け係数を2つの球面収差補正データに乗じることで、その焦点検出光学系に適した球面収差補正量を算出する。   A camera system is known that corrects the defocus amount in accordance with the spherical aberration of the imaging optical system and detects an optimal in-focus position (Patent Document 1). The lens barrel of this camera system stores spherical aberration correction data corresponding to the two open-equivalent F values of the focus detection optical system. Then, these two spherical aberration correction data are read by the mounted camera body, and the two spherical aberration correction data are multiplied by an optimum weighting coefficient according to the aperture equivalent F value specific to the focus detection optical system of the camera body. Then, a spherical aberration correction amount suitable for the focus detection optical system is calculated.

特開昭62−227108号公報JP-A-62-227108

しかしながら、上述した従来のカメラシステムで得られる球面収差補正量は、一律に算出されるものであり、各カメラボディ固有の焦点検出光学系に対する補正量ではない。したがって、カメラボディの製造上の個体差などによる誤差を含むことになる。   However, the spherical aberration correction amount obtained by the conventional camera system described above is calculated uniformly, and is not a correction amount for the focus detection optical system unique to each camera body. Therefore, an error due to individual differences in manufacturing the camera body is included.

この発明が解決しようとする課題は、結像光学系の球面収差に応じてデフォーカス量を精度良く補正できる焦点検出装置および撮像装置を提供することである。   The problem to be solved by the present invention is to provide a focus detection device and an imaging device capable of accurately correcting the defocus amount according to the spherical aberration of the imaging optical system.

この発明は、以下の解決手段によって上記課題を解決する。なお、発明の実施形態を示す図面に対応する符号を付して説明するが、この符号は発明の理解を容易にするためだけのものであって発明を限定する趣旨ではない。   The present invention solves the above problems by the following means. In addition, although the code | symbol corresponding to drawing which shows embodiment of this invention is attached | subjected and demonstrated, this code | symbol is only for making an understanding of invention easy, and is not the meaning which limits invention.

発明に係る焦点検出装置は、マイクロレンズ(161a)を複数配列したマイクロレンズアレイ(161)と、前記マイクロレンズに対応して設けられた複数の受光部(162a)を備え、前記マイクロレンズを介して光学系からの光束を受光する受光素子(162)と、前記複数の受光部のうち、前記光学系の異なる領域を通過した一対の光束を受光する一対の受光部を前記光学系の複数の絞り値に対応付けて選択し、当該一対の受光部の出力に基づいて前記光学系の像面ズレ量を演算する演算手段(163)と、を備えたことを特徴とする。   The focus detection apparatus according to the present invention includes a microlens array (161) in which a plurality of microlenses (161a) are arranged, and a plurality of light receiving units (162a) provided corresponding to the microlenses, through the microlenses. A light receiving element (162) that receives a light beam from the optical system, and a pair of light receiving units that receive a pair of light beams that have passed through different regions of the optical system among the plurality of light receiving units. And a calculation means (163) for selecting an aperture value and calculating an image plane shift amount of the optical system based on outputs of the pair of light receiving units.

上記発明に係る焦点検出装置において、前記演算手段(163)は、前記複数の絞り値に対応した複数の前記像面ズレ量を演算し、当該演算結果に基づいて特定の絞り値に応じた前記光学系の像面ズレ量を演算するように構成することができる。   In the focus detection apparatus according to the above invention, the calculation means (163) calculates a plurality of image plane deviation amounts corresponding to the plurality of aperture values, and based on the calculation result, the calculation unit (163) corresponds to the specific aperture value. An image plane shift amount of the optical system can be calculated.

また上記発明に係る焦点検出装置において、前記演算手段(163)は、前記光学系による像の像高に応じた前記マイクロレンズに対応する前記複数の受光部で得られる出力に基づいて、前記光学系の像面ズレ量を演算するように構成することができる。   In the focus detection apparatus according to the invention described above, the calculation means (163) may be configured such that the optical unit is based on outputs obtained by the plurality of light receiving units corresponding to the microlenses according to an image height of the image by the optical system. The image plane deviation amount of the system can be calculated.

また上記発明に係る焦点検出装置において、前記演算手段(163)は、前記複数の絞り値に対応した前記複数の像面ズレ量の演算結果に基づいて、前記複数の絞り値とは異なる他の絞り値に対応した前記光学系の像面ズレ量を演算するように構成することができる。   Further, in the focus detection apparatus according to the above invention, the calculation means (163) is different from the plurality of aperture values based on the calculation result of the plurality of image plane deviation amounts corresponding to the plurality of aperture values. The image plane deviation amount of the optical system corresponding to the aperture value can be calculated.

また上記発明に係る焦点検出装置において、前記演算手段(163)は、前記マイクロレンズアレイ上の前記マイクロレンズの配列位置に応じて、前記一対の受光部の選択を異ならせるように構成することができる。   Further, in the focus detection apparatus according to the above invention, the calculation means (163) may be configured to vary the selection of the pair of light receiving units according to the arrangement position of the microlenses on the microlens array. it can.

発明に係る撮像装置(1)は、上記発明に係る焦点検出装置と、前記光学系による像を撮像する撮像手段(110)と、を備えたことを特徴とする。   An imaging device (1) according to the invention includes the focus detection device according to the invention described above and an imaging means (110) for capturing an image by the optical system.

上記発明に係る撮像装置において、前記演算手段(163)は、前記撮像手段による撮像を行う際の前記光学系の制御絞り値に対応した前記像面ズレ量を求め、当該像面ズレ量に基づいて前記光学系の焦点調節状態を検出する焦点検出手段(163K)を備えるように構成することができる。   In the imaging apparatus according to the above invention, the calculation unit (163) obtains the image plane deviation amount corresponding to the control aperture value of the optical system when imaging is performed by the imaging unit, and is based on the image plane deviation amount. And a focus detection means (163K) for detecting the focus adjustment state of the optical system.

また上記発明に係る撮像装置において、前記マイクロレンズに対応する受光素子で得られる出力に基づいて前記光学系による像のコントラストを検出するコントラスト検出手段(163G)を備え、前記焦点検出手段は、前記コントラスト検出手段で検出されたコントラストが所定値以上である前記受光素子の出力に基づいて前記焦点調節状態を検出するように構成することができる。   The imaging apparatus according to the invention further includes a contrast detection unit (163G) that detects a contrast of an image by the optical system based on an output obtained by a light receiving element corresponding to the microlens. The focus adjustment state can be detected based on the output of the light receiving element whose contrast detected by the contrast detecting means is a predetermined value or more.

また上記発明に係る撮像装置において、前記演算手段により演算された前記像面ズレ量を前記複数の絞り値に対応付けて記憶する記憶手段(163J)を備えるように構成することができる。   Further, the imaging apparatus according to the above invention may be configured to include a storage unit (163J) that stores the image plane shift amount calculated by the calculation unit in association with the plurality of aperture values.

上記発明によれば、結像光学系の球面収差に応じてデフォーカス量を精度良く補正することができる。   According to the above invention, the defocus amount can be accurately corrected according to the spherical aberration of the imaging optical system.

発明の実施形態に係る一眼レフデジタルカメラを示すブロック図である。It is a block diagram which shows the single-lens reflex digital camera which concerns on embodiment of invention. 図1に示すカメラの焦点検出装置の構成を示すブロック図である。It is a block diagram which shows the structure of the focus detection apparatus of the camera shown in FIG. 図1に示すカメラの焦点検出装置の光学的配置を示す図である。It is a figure which shows the optical arrangement | positioning of the focus detection apparatus of the camera shown in FIG. 図1に示すカメラの焦点検出光学系および焦点検出センサの配列状態を示す平面図である。FIG. 2 is a plan view showing an arrangement state of focus detection optical systems and focus detection sensors of the camera shown in FIG. 1. 図1に示すカメラの焦点検出光学系および焦点検出センサを示す断面図である。It is sectional drawing which shows the focus detection optical system and focus detection sensor of the camera shown in FIG. 図1に示すカメラの一つの焦点検出光学系および焦点検出センサを拡大して示す平面図である。It is a top view which expands and shows one focus detection optical system and focus detection sensor of the camera shown in FIG. 図3Dに示す一つの焦点検出光学系および焦点検出センサのうち一対の光電変換素子の選択例を示す平面図である。It is a top view which shows the example of selection of a pair of photoelectric conversion element among the one focus detection optical system and focus detection sensor which are shown to FIG. 3D. 図3Dに示す一つの焦点検出光学系および焦点検出センサのうち一対の光電変換素子の他の選択例を示す平面図である。It is a top view which shows the other selection example of a pair of photoelectric conversion element among the one focus detection optical system and focus detection sensor which are shown to FIG. 3D. 図3Dに示す一つの焦点検出光学系および焦点検出センサのうち一対の光電変換素子のさらに他の選択例を示す平面図である。It is a top view which shows the other selection example of a pair of photoelectric conversion element among the one focus detection optical system and focus detection sensor which are shown to FIG. 3D. 図3Dに示す一つの焦点検出光学系および焦点検出センサのうち一対の光電変換素子のさらに他の選択例を示す平面図である。It is a top view which shows the other selection example of a pair of photoelectric conversion element among the one focus detection optical system and focus detection sensor which are shown to FIG. 3D. 図1に示すファインダで観察される撮影画面を示す図である。It is a figure which shows the imaging | photography screen observed with the finder shown in FIG. 図1に示す焦点検出装置の画素間隔と絞り値Fとの関係を示す図である。FIG. 2 is a diagram illustrating a relationship between a pixel interval and an aperture value F of the focus detection apparatus illustrated in FIG. 1. 図1に示すカメラの焦点検出装置において、ズレ量xを算出する方法を説明するためのグラフである。6 is a graph for explaining a method of calculating a shift amount x in the focus detection apparatus of the camera shown in FIG. 1. 図1に示す焦点検出装置において求められる絞り値に対する焦点位置の関係を示すグラフである。It is a graph which shows the relationship of the focus position with respect to the aperture value calculated | required in the focus detection apparatus shown in FIG. 図1に示すカメラの他の実施形態に係る焦点検出光学系および焦点検出センサの配列状態を示す平面図である。It is a top view which shows the arrangement | sequence state of the focus detection optical system and focus detection sensor which concern on other embodiment of the camera shown in FIG. 図7Aの一つの焦点検出光学系および焦点検出センサを拡大して示す平面図である。It is a top view which expands and shows one focus detection optical system and focus detection sensor of FIG. 7A.

以下、上記発明の実施形態を図面に基づいて説明する。以下においては、上記発明をレンズ交換式一眼レフデジタルカメラに適用した実施形態を図面に基づいて説明するが、上記発明は、撮影レンズの焦点調節を行うあらゆる撮像装置やレンズ固定式カメラにも適用することができる。   Hereinafter, embodiments of the invention will be described with reference to the drawings. In the following, an embodiment in which the above invention is applied to an interchangeable lens single-lens reflex digital camera will be described with reference to the drawings. However, the above invention is also applicable to any imaging device or lens fixed camera that adjusts the focus of a photographing lens. can do.

図1は発明の実施形態に係る一眼レフデジタルカメラ1(以下、単にカメラ1という。)を示すブロック図であり、上記発明の焦点検出装置および撮像装置に関する構成以外のカメラの一般的構成については、その図示と説明を一部省略する。   FIG. 1 is a block diagram showing a single-lens reflex digital camera 1 (hereinafter simply referred to as a camera 1) according to an embodiment of the invention. The general configuration of the camera other than the configuration related to the focus detection device and the imaging device of the invention is described above. Some illustrations and explanations thereof are omitted.

本例のカメラ1は、カメラボディ100とレンズ鏡筒200を備え、これらカメラボディ100とレンズ鏡筒200はマウント部300により着脱可能に結合されている。   The camera 1 of this example includes a camera body 100 and a lens barrel 200, and the camera body 100 and the lens barrel 200 are detachably coupled by a mount unit 300.

レンズ鏡筒200には、フォーカスレンズ211やズームレンズ212を含む撮影レンズ210や絞り装置220などからなる撮影光学系が内蔵されている。   The lens barrel 200 incorporates a photographing optical system including a photographing lens 210 including a focus lens 211 and a zoom lens 212, a diaphragm device 220, and the like.

フォーカスレンズ211は、その光軸L1に沿って移動可能に設けられ、エンコーダ260によってその位置又は移動量が検出されつつレンズ駆動モータ230によってその位置が調節される。フォーカスレンズ211は、回転筒の回転によってカメラボディ側の端部(至近端)から被写体側の端部(無限端)までの間を光軸L1方向に移動することができる。ちなみに、エンコーダ260で検出されたフォーカスレンズ211の位置又は移動量の情報は、レンズ制御部250を介してレンズ駆動制御部165へ送信される。また、レンズ駆動モータ230は、後述する焦点検出結果に基づいて演算された駆動量や駆動速度に応じて、レンズ駆動制御部165からレンズ制御部250を介して受信される駆動信号により駆動する。   The focus lens 211 is provided so as to be movable along the optical axis L <b> 1, and its position or amount of movement is detected by the encoder 260 and its position is adjusted by the lens drive motor 230. The focus lens 211 can move in the direction of the optical axis L1 from the end on the camera body side (closest end) to the end on the subject side (infinite end) by the rotation of the rotating cylinder. Incidentally, information on the position or movement amount of the focus lens 211 detected by the encoder 260 is transmitted to the lens drive control unit 165 via the lens control unit 250. The lens drive motor 230 is driven by a drive signal received from the lens drive control unit 165 via the lens control unit 250 in accordance with a drive amount and a drive speed calculated based on a focus detection result described later.

絞り装置220は、上記撮影光学系を通過して撮像素子110に至る光束の光量を制限するために、光軸L1を中心にした開口径が調節可能に構成されている。絞り装置220による開口径の調節は、たとえば自動露出モードにおいて演算された絞り値に応じた信号が、カメラ制御部170からレンズ制御部250を介して絞り駆動部240へ送信されることにより行われる。また、開口径の調節は、カメラボディ100に設けられた操作部150によるマニュアル操作により、設定された絞り値に応じた信号がカメラ制御部170からレンズ制御部250を介して絞り駆動部240へ送信されることによっても行われる。絞り装置220の開口径は、図示しない絞り開口センサにより検出され、レンズ制御部250で現在の開口径が認識される。   The aperture device 220 is configured such that the aperture diameter around the optical axis L1 can be adjusted in order to limit the amount of light beam that passes through the photographing optical system and reaches the image sensor 110. The aperture diameter is adjusted by the aperture device 220 by, for example, transmitting a signal corresponding to the aperture value calculated in the automatic exposure mode from the camera control unit 170 to the aperture drive unit 240 via the lens control unit 250. . The aperture diameter is adjusted by a manual operation by the operation unit 150 provided in the camera body 100, and a signal corresponding to the set aperture value is transmitted from the camera control unit 170 to the aperture drive unit 240 via the lens control unit 250. This is also done by sending it. The aperture diameter of the aperture device 220 is detected by an aperture aperture sensor (not shown), and the current aperture diameter is recognized by the lens controller 250.

レンズ鏡筒200にはレンズ制御部250が設けられている。レンズ制御部250はマイクロプロセッサとメモリなどの周辺部品から構成され、カメラ制御部170と電気的に接続され、このカメラ制御部170からデフォーカス量や絞り制御信号などの情報を受信するとともに、カメラ制御部170へレンズ情報、たとえば撮影レンズ210固有の開放F値を送信する。   The lens barrel 200 is provided with a lens control unit 250. The lens control unit 250 includes a microprocessor and peripheral components such as a memory, and is electrically connected to the camera control unit 170. The lens control unit 250 receives information such as a defocus amount and an aperture control signal from the camera control unit 170, and a camera. Lens information, for example, an open F value unique to the photographing lens 210 is transmitted to the control unit 170.

一方、カメラボディ100は、被写体からの光束を撮像素子110、ファインダ135、測光センサ137及び焦点検出光学系161へ導くためのミラー系120を備える。このミラー系120は、回転軸123を中心にして被写体の観察位置と撮影位置との間で所定角度だけ回転するクイックリターンミラー121と、このクイックリターンミラー121に軸支されてクイックリターンミラー121の回転に合わせて回転するサブミラー122とを備える。   On the other hand, the camera body 100 includes a mirror system 120 for guiding the light flux from the subject to the image sensor 110, the finder 135, the photometric sensor 137, and the focus detection optical system 161. The mirror system 120 includes a quick return mirror 121 that rotates by a predetermined angle between the observation position and the photographing position of the subject around the rotation axis 123, and the quick return mirror 121 that is pivotally supported by the quick return mirror 121. And a sub mirror 122 that rotates in accordance with the rotation.

図1においては、ミラー系120が被写体の観察位置にある状態を実線で示し、被写体の撮影位置にある状態を二点鎖線で示す。ミラー系120は、被写体の観察位置にある状態では光軸L1の光路上に挿入される一方で、被写体の撮影位置にある状態では光軸L1の光路から退避するように回転する。   In FIG. 1, a state where the mirror system 120 is at the observation position of the subject is indicated by a solid line, and a state where the mirror system 120 is at the photographing position of the subject is indicated by a two-dot chain line. The mirror system 120 is inserted on the optical path of the optical axis L1 in the state where the subject is in the observation position, while rotating so as to retract from the optical path of the optical axis L1 in the state where the subject is in the photographing position.

クイックリターンミラー121はハーフミラーで構成され、被写体の観察位置にある状態では、被写体からの光束(光軸L1)の一部の光束(光軸L2,L3)を当該クイックリターンミラー121で反射してファインダ135及び測光センサ137へ導き、一部の光束(光軸L4)を透過させてサブミラー122へ導く。これに対して、サブミラー122は全反射ミラーで構成され、クイックリターンミラー121を透過した光束(光軸L4)を焦点検出光学系161へ導く。   The quick return mirror 121 is composed of a half mirror, and in a state where the subject is at the observation position, the quick return mirror 121 reflects a part of the light flux (optical axes L2 and L3) from the subject (optical axis L1). Then, the light is guided to the finder 135 and the photometric sensor 137, and a part of the light beam (optical axis L4) is transmitted to the sub mirror 122. On the other hand, the sub mirror 122 is constituted by a total reflection mirror, and guides the light beam (optical axis L4) transmitted through the quick return mirror 121 to the focus detection optical system 161.

したがって、ミラー系120が観察位置にある場合は、被写体からの光束(光軸L1)はファインダ135、測光センサ135および焦点検出光学系161へ導かれ、撮影者により被写体が観察されるとともに、露出演算やフォーカスレンズ211の焦点調節状態の検出が実行される。そして、撮影者がレリーズボタンを全押しするとミラー系120が撮影位置に回転し、被写体からの光束(光軸L1)は撮像素子110へ導かれ、撮影した画像データを図示しないメモリに保存する。   Therefore, when the mirror system 120 is at the observation position, the light beam (optical axis L1) from the subject is guided to the finder 135, the photometric sensor 135, and the focus detection optical system 161, and the subject is observed and exposed. Calculation and detection of the focus adjustment state of the focus lens 211 are executed. When the photographer fully presses the release button, the mirror system 120 rotates to the photographing position, and the light flux (optical axis L1) from the subject is guided to the image sensor 110, and the photographed image data is stored in a memory (not shown).

撮像素子110は、カメラボディ100の、被写体からの光束の光軸L1上であって、撮影レンズ210の予定焦点面となる位置に設けられ、その前面にシャッター111が設けられている。撮像素子110は、複数の光電変換素子が二次元に配列されたものであって、二次元CCDイメージセンサ、MOSセンサまたはCIDなどで構成することができる。   The image sensor 110 is provided on the camera body 100 on the optical axis L1 of the light beam from the subject and at a position that becomes the planned focal plane of the photographing lens 210, and a shutter 111 is provided on the front surface thereof. The imaging element 110 is a two-dimensional array of a plurality of photoelectric conversion elements, and can be configured by a two-dimensional CCD image sensor, a MOS sensor, a CID, or the like.

撮像素子110の前面に配置されたシャッター111は、操作部150に含まれるシャッターボタンを全押しした時(シャッターレリーズ時)に、露出演算結果に基づく、または撮影者が設定したシャッター秒数だけ開放され、撮像素子110を露光する。この撮像素子110で光電変換された電気画像信号は、カメラ制御部170で画像処理されたのち図示しないメモリに保存される。なお、撮影画像を格納するメモリは内蔵型メモリやカード型メモリなどで構成することができる。   The shutter 111 disposed on the front surface of the image sensor 110 is opened for the number of shutter seconds set based on the exposure calculation result or set by the photographer when the shutter button included in the operation unit 150 is fully pressed (during shutter release). Then, the image sensor 110 is exposed. The electrical image signal photoelectrically converted by the image sensor 110 is subjected to image processing by the camera control unit 170 and then stored in a memory (not shown). Note that the memory for storing the photographed image can be constituted by a built-in memory or a card-type memory.

一方、クイックリターンミラー121で反射された被写体光からの光束は、撮像素子110と光学的に等価な面に配置された焦点板131に結像し、ペンタプリズム133と接眼レンズ134とを介して撮影者の眼球に導かれる。このとき、透過型液晶表示器132は、焦点板131上の被写体像に焦点検出エリアマークなどを重畳して表示するとともに、被写体像外のエリアにシャッター速度、絞り値、撮影枚数などの撮影に関する情報を表示する。これにより、撮影者は、撮影準備状態において、ファインダ135を通して被写体およびその背景ならびに撮影関連情報などを観察することができる。   On the other hand, the light beam from the subject light reflected by the quick return mirror 121 forms an image on a focusing screen 131 disposed on a surface optically equivalent to the image sensor 110, and passes through the pentaprism 133 and the eyepiece lens 134. Guided to the photographer's eyeball. At this time, the transmissive liquid crystal display 132 superimposes and displays a focus detection area mark on the subject image on the focusing screen 131 and relates to shooting such as the shutter speed, aperture value, and number of shots in an area outside the subject image. Display information. As a result, the photographer can observe the subject, its background, and photographing related information through the finder 135 in the photographing preparation state.

測光センサ137は、二次元カラーCCDイメージセンサなどで構成され、撮影の際の露出値を演算するため、撮影画面を複数の領域に分割して領域ごとの輝度に応じた測光信号を出力する。測光センサ137で検出された画像情報はカメラ制御部170へ出力され、自動露出制御に用いられる。   The photometric sensor 137 is composed of a two-dimensional color CCD image sensor or the like, and divides the photographing screen into a plurality of regions and outputs a photometric signal corresponding to the luminance of each region in order to calculate an exposure value at the time of photographing. Image information detected by the photometric sensor 137 is output to the camera control unit 170 and used for automatic exposure control.

操作部150は、シャッターレリーズボタンや撮影者がカメラ1の各種動作モードを設定するための入力スイッチであり、オートフォーカスモード/マニュアルフォーカスモードの切換や、オートフォーカスモードの中でも、ワンショットモード/コンティニュアスモードの切換が行えるようになっている。シャッターレリーズボタンは全押ししたときにシャッターがONされるが、これ以外にも、オートフォーカスモードにおいて当該ボタンを半押しするとフォーカスレンズの合焦動作がONとなり、ボタンを離すとOFFになる。この操作部150により設定された各種モードはカメラ制御部170へ送信され、当該カメラ制御部170によりカメラ1全体の動作が制御される。   The operation unit 150 is a shutter release button or an input switch for the photographer to set various operation modes of the camera 1. Switching between the autofocus mode / manual focus mode and the autofocus mode also includes a one-shot mode / continuous mode. It is possible to switch between the numeric modes. The shutter release button is turned on when the shutter release button is fully pressed, but in addition to this, when the button is pressed halfway in the autofocus mode, the focusing operation of the focus lens is turned on, and when the button is released, it is turned off. Various modes set by the operation unit 150 are transmitted to the camera control unit 170, and the operation of the entire camera 1 is controlled by the camera control unit 170.

カメラボディ100にはカメラ制御部170が設けられている。カメラ制御部170はマイクロプロセッサとメモリなどの周辺部品から構成され、マウント部300に設けられた電気信号接点部によりレンズ制御部250と電気的に接続され、このレンズ制御部250からレンズ情報を受信するとともに、レンズ制御部250へデフォーカス量や絞り制御信号などの情報を送信する。また、カメラ制御部170は、上述したように撮像素子110から画像情報を読み出すとともに、必要に応じて所定の情報処理を施し、図示しないメモリに出力する。また、カメラ制御部170は、撮影画像情報の補正やレンズ鏡筒200の焦点調節状態、絞り調節状態などを検出するなど、カメラ1全体の制御を司る。   The camera body 100 is provided with a camera control unit 170. The camera control unit 170 includes peripheral components such as a microprocessor and a memory, and is electrically connected to the lens control unit 250 through an electric signal contact unit provided in the mount unit 300, and receives lens information from the lens control unit 250. At the same time, information such as a defocus amount and an aperture control signal is transmitted to the lens control unit 250. The camera control unit 170 reads out image information from the image sensor 110 as described above, performs predetermined information processing as necessary, and outputs the information to a memory (not shown). The camera control unit 170 controls the entire camera 1 such as correction of captured image information and detection of a focus adjustment state and an aperture adjustment state of the lens barrel 200.

図1に示す焦点検出光学系161、焦点検出センサ162、焦点検出演算部163およびレンズ駆動量演算部164は、位相差検出方式の焦点検出装置を構成し、撮影レンズ210の焦点調節状態を表すデフォーカス量を検出する。   The focus detection optical system 161, the focus detection sensor 162, the focus detection calculation unit 163, and the lens drive amount calculation unit 164 shown in FIG. 1 constitute a phase difference detection type focus detection device and represent the focus adjustment state of the photographing lens 210. Detect the defocus amount.

本例の焦点検出装置について図2〜図3Dを参照しながら説明する。   The focus detection apparatus of this example will be described with reference to FIGS.

図2は焦点検出装置の構成を示すブロック図であり、図1に示す焦点検出演算部163の構成を処理手順にしたがって詳細に表わしたブロック図である。図3Aは同じく焦点検出装置の光学的配置を示す図、図3Bは焦点検出光学系161および焦点検出センサ162の配列状態を示す平面図であってサブミラー122側からマイクロレンズアレイ161を見た図、図3Cは焦点検出光学系161および焦点検出センサ162を示す断面図(図3BのIIIC-IIIC線に沿う断面図)、図3Dは一つのマイクロレンズ161aおよび焦点検出センサ162を拡大して示す平面図である。   FIG. 2 is a block diagram showing the configuration of the focus detection apparatus, and is a block diagram showing in detail the configuration of the focus detection calculation unit 163 shown in FIG. 1 according to the processing procedure. 3A is a view showing the optical arrangement of the focus detection device, and FIG. 3B is a plan view showing an arrangement state of the focus detection optical system 161 and the focus detection sensor 162, and is a view of the microlens array 161 viewed from the sub mirror 122 side. 3C is a cross-sectional view showing the focus detection optical system 161 and the focus detection sensor 162 (cross-sectional view taken along the line IIIC-IIIC in FIG. 3B), and FIG. 3D is an enlarged view of one microlens 161a and the focus detection sensor 162. It is a top view.

焦点検出光学系161は、図3Bに示すように複数のマイクロレンズ161aを二次元状に稠密に正方配列したマイクロレンズアレイであり、図3Aに示すように撮影レンズ210の予定焦点面となる位置P1の近傍に配置されている。以下、マイクロレンズアレイ161ともいう。マイクロレンズアレイ161は、予定焦点面となる位置P1に一致させて配置することができる一方、予定焦点面となる位置P1からずらして配置することもできる。一致させて配置した場合は、マイクロレンズ161a間に被写体像のコントラストがあるような場合にその部分が不感帯となるが、ずらして配置することによりそのような不感帯の発生を回避することができる。   The focus detection optical system 161 is a microlens array in which a plurality of microlenses 161a are two-dimensionally densely squarely arranged as shown in FIG. 3B, and a position that is a planned focal plane of the photographing lens 210 as shown in FIG. 3A. It is arranged in the vicinity of P1. Hereinafter, it is also referred to as a microlens array 161. The microlens array 161 can be arranged so as to coincide with the position P1 serving as the planned focal plane, but can also be arranged shifted from the position P1 serving as the planned focal plane. When they are arranged to coincide with each other, the portion becomes a dead zone when there is a contrast of the subject image between the microlenses 161a. However, such a dead zone can be avoided by shifting the portion.

焦点検出センサ162は、図3Dに示すように複数の光電変換素子162aを二次元状に稠密に正方配列した受光素子アレイであり、図3Cに示すようにマイクロレンズアレイ161の略焦点位置に配置されている。以下、受光素子アレイ162ともいう。なお、図3Cは各マイクロレンズ161aの中心または中心近傍の光電変換素子162aが受光する光束の広がりを示している。   The focus detection sensor 162 is a light receiving element array in which a plurality of photoelectric conversion elements 162a are two-dimensionally densely squarely arranged as shown in FIG. 3D, and is arranged at a substantially focal position of the microlens array 161 as shown in FIG. 3C. Has been. Hereinafter, it is also referred to as a light receiving element array 162. FIG. 3C shows the spread of the light beam received by the photoelectric conversion element 162a at or near the center of each microlens 161a.

本例のマイクロレンズ161aは円形状マイクロレンズであり、マイクロレンズアレイ161は、このような円形マクロレンズ161aが正方配列されたものである。同図における上下左右方向は撮像素子110で撮像される撮像画面の上下左右方向と一致している。なお、円形マイクロレンズに代えて正六角形のマイクロレンズ161aをハニカム状に配列することで、円形状マイクロレンズを配列させた場合に生じるレンズ間の焦点検出の不感帯を回避することもできるがこれについては後述する。   The microlens 161a of this example is a circular microlens, and the microlens array 161 is a circular array of such circular macrolenses 161a. The vertical and horizontal directions in the figure coincide with the vertical and horizontal directions of the imaging screen imaged by the imaging element 110. Although a regular hexagonal microlens 161a is arranged in a honeycomb shape instead of the circular microlens, it is possible to avoid a dead zone of focus detection between lenses that occurs when circular microlenses are arranged. Will be described later.

これに対して、マイクロレンズアレイ161の後方に配置される光電変換素子アレイ162は、正方形の光電変換素子162aが正方配列されたものである。一つの光電変換素子162aは一つのマイクロレンズ161aより小さく形成され、図3Dに拡大して示すように、一つのマイクロレンズ161aを垂直に投影した範囲には複数の光電変換素子162aが含まれている。これらの光電変換素子162aがマイクロレンズ161aに対応して設けられた光電変換素子162aである。   On the other hand, the photoelectric conversion element array 162 arranged behind the microlens array 161 is a square array of square photoelectric conversion elements 162a. One photoelectric conversion element 162a is formed to be smaller than one microlens 161a. As shown in an enlarged view in FIG. 3D, a plurality of photoelectric conversion elements 162a are included in a range in which one microlens 161a is vertically projected. Yes. These photoelectric conversion elements 162a are photoelectric conversion elements 162a provided corresponding to the microlenses 161a.

さて、上述したようにマイクロレンズアレイ161は撮影レンズ210の予定焦点面となる位置P1(撮像素子110の撮像面と光学的に等価な面)またはその近傍に配置されているので、撮像素子110と同じ光学像が投影される。受光素子アレイ162には、各マイクロレンズ161aによって撮影レンズ210の瞳像が結像され、受光素子アレイ162の各光電変換素子162aは瞳の各部分に対応することから、マイクロレンズ161aごとに光電変換素子162aを選択してその出力を合成すれば、光電変換素子162aに対応する絞りで撮影された画像が得られることになる。   As described above, the microlens array 161 is disposed at or near the position P1 (a surface optically equivalent to the image pickup surface of the image pickup device 110) that is the planned focal plane of the image pickup lens 210. The same optical image is projected. On the light receiving element array 162, the pupil image of the photographing lens 210 is formed by each micro lens 161a, and each photoelectric conversion element 162a of the light receiving element array 162 corresponds to each part of the pupil. If the conversion element 162a is selected and its output is synthesized, an image photographed with a diaphragm corresponding to the photoelectric conversion element 162a can be obtained.

本実施形態の焦点検出は以下の手順で行われる。   The focus detection of this embodiment is performed according to the following procedure.

図2に示す焦点検出演算部163のA/Dコンバータ163Aは、焦点検出センサ(受光素子アレイ)162から出力されたアナログ画像信号をデジタル画像信号に変換し、メモリ163Bに出力する。メモリ163Bは、このデジタル画像信号をマイクロレンズ光軸中心決定部163Cからの要求に応じて出力する。   The A / D converter 163A of the focus detection calculation unit 163 shown in FIG. 2 converts the analog image signal output from the focus detection sensor (light receiving element array) 162 into a digital image signal and outputs it to the memory 163B. The memory 163B outputs this digital image signal in response to a request from the microlens optical axis center determining unit 163C.

このとき、図4に示す焦点検出エリアAFP1〜11のいずれかが選択された場合には、選択された焦点検出エリアに対応する所定範囲に相当するマイクロレンズ161aに対応する光電変換素子162aからの出力だけを読み出す。   At this time, when any of the focus detection areas AFP1 to AFP11 shown in FIG. 4 is selected, the photoelectric conversion element 162a corresponding to the microlens 161a corresponding to the predetermined range corresponding to the selected focus detection area is selected. Read output only.

図4は、焦点検出エリアAFPを含むファインダ135から観察される撮影画面135Aを示す図であり、本例では撮影画面135Aに11カ所の焦点検出エリアAFP1〜AFP11が設定されているものとする。この表示は、液晶表示器132が、焦点板131上の被写体像に11カ所の焦点検出エリアの位置を表すマークを重畳することにより行われる。そして、撮影者が操作部150を操作することにより所望の焦点検出エリアAFPを選択したり、あるいは自動露光などのデータに基づいて所定のシーケンスにより自動的に焦点検出エリアAFPを選択したりする。たとえば、図4に示す焦点検出エリアAFP7が選択された場合は、この焦点検出エリアAFP7を中心にした所定範囲(図4に点線で示す。)に相当するマイクロレンズ161aに対応する光電変換素子162aからの出力を読み出す。   FIG. 4 is a diagram showing a photographing screen 135A observed from the finder 135 including the focus detection area AFP. In this example, it is assumed that eleven focus detection areas AFP1 to AFP11 are set on the photographing screen 135A. This display is performed when the liquid crystal display 132 superimposes marks representing the positions of eleven focus detection areas on the subject image on the focusing screen 131. Then, the photographer operates the operation unit 150 to select a desired focus detection area AFP, or automatically selects the focus detection area AFP by a predetermined sequence based on data such as automatic exposure. For example, when the focus detection area AFP7 shown in FIG. 4 is selected, the photoelectric conversion element 162a corresponding to the microlens 161a corresponding to a predetermined range (shown by a dotted line in FIG. 4) centering on the focus detection area AFP7. Read the output from.

ここで、上述した瞳の共役関係を担保するために撮影レンズ210の瞳中心位置を計算する必要がある。これは、通常マイクロレンズアレイ161と受光素子アレイ162とは独立して製造されたうえで組み立てられることから、どの光電変換素子162aがどのマイクロレンズ161aのどこの位置に相当するかが不確定だからである。また、一眼レフカメラ1ではレンズ鏡筒200が交換されることが想定されるから、マイクロレンズ161aから見た撮影レンズ210の瞳の位置が変化する。このため、マイクロレンズ光軸中心決定部163Cにおいて、撮影レンズ210の瞳中心位置と共役関係にある光電変換素子162aの位置をマイクロレンズ161aの中心に決定する。   Here, in order to secure the above-described pupil conjugate relationship, it is necessary to calculate the pupil center position of the taking lens 210. This is because it is uncertain which photoelectric conversion element 162a corresponds to which position of which microlens 161a because the microlens array 161 and the light receiving element array 162 are usually manufactured and assembled independently. It is. In addition, since it is assumed that the lens barrel 200 is replaced in the single-lens reflex camera 1, the position of the pupil of the photographing lens 210 viewed from the microlens 161a changes. For this reason, the microlens optical axis center determining unit 163C determines the position of the photoelectric conversion element 162a that is conjugate with the pupil center position of the photographing lens 210 as the center of the microlens 161a.

この各マイクロレンズ161aの中心に対応する光電変換素子162aの位置は、撮影レンズ210の光軸L1に対するマイクロレンズ161aの位置(像高)とマイクロレンズ161aから撮影レンズ210の瞳までの距離から求めることができる。たとえば、マイクロレンズ161aから撮影レンズ210の瞳までの距離が既知であるレンズ鏡筒において、各マイクロレンズ161aの中心位置のデータ群を予めレンズ制御部250のメモリなどに記憶させておき、現在の撮影レンズ210の瞳までの距離に基づいて、内挿又は外挿演算により現在の撮影レンズ210の中心位置を演算する。   The position of the photoelectric conversion element 162a corresponding to the center of each microlens 161a is obtained from the position (image height) of the microlens 161a with respect to the optical axis L1 of the photographing lens 210 and the distance from the microlens 161a to the pupil of the photographing lens 210. be able to. For example, in a lens barrel in which the distance from the microlens 161a to the pupil of the photographing lens 210 is known, a data group at the center position of each microlens 161a is stored in advance in the memory of the lens control unit 250 or the like. Based on the distance to the pupil of the photographic lens 210, the current center position of the photographic lens 210 is calculated by interpolation or extrapolation.

そして、求められた各マイクロレンズ161aの光軸中心または中心周辺に対応する光電変換素子162aの画像データをメモリ163Bに格納された画像データから抽出する。図3Dに示す光電変換素子162aを有する受光素子アレイ162において、たとえば同図に塗りつぶした中央の光電変換素子162cの画像データを抽出する。   Then, the obtained image data of the photoelectric conversion element 162a corresponding to the center of the optical axis of each microlens 161a or the periphery of the center is extracted from the image data stored in the memory 163B. In the light receiving element array 162 having the photoelectric conversion element 162a shown in FIG. 3D, for example, image data of the central photoelectric conversion element 162c filled in the same figure is extracted.

なお、撮影レンズ210の瞳までの距離が不明である場合には、瞳までの距離を無限位置とし、マイクロレンズ161aと光電変換素子162aとの位置関係のみから求めた中心位置を用いることもできる。   When the distance to the pupil of the photographing lens 210 is unknown, the distance to the pupil can be set to an infinite position, and the center position obtained only from the positional relationship between the microlens 161a and the photoelectric conversion element 162a can be used. .

こうして各マイクロレンズの光軸中心が決定したら、撮影レンズ210の球面収差を評価するために、光軸中心を中心点にして複数の基線長を設定する。レンズは絞り値Fにて代表される光束径に応じて焦点位置が変動し、この変動の度合いはレンズによって異なり、また同一機種のレンズであっても製造上の個体差によって異なる。そこで、図3E〜図3Hに示すようにマイクロレンズの光軸中心に対応する光電変換素子162cを中心点にして左右対称となる一対の光電変換素子162d,162dを選択する。   When the optical axis center of each microlens is determined in this way, in order to evaluate the spherical aberration of the photographing lens 210, a plurality of baseline lengths are set with the optical axis center as the center point. The focal position of the lens varies according to the beam diameter represented by the aperture value F, and the degree of variation varies depending on the lens, and also varies depending on individual differences in manufacturing even for lenses of the same model. Therefore, as shown in FIGS. 3E to 3H, a pair of photoelectric conversion elements 162d and 162d that are symmetrical with respect to the photoelectric conversion element 162c corresponding to the center of the optical axis of the microlens are selected.

図3E〜図3Hに示すマイクロレンズ161aの焦点距離を90μm、一つの光電変換素子162aの大きさを3.2μm×3.2μmとすると、絞り値Fは焦点距離を有効口径(画素間隔)で除した値であるから、図3Eに示すように2ピクセルの画素間隔で選択された場合はF=14、図3Fに示すように4ピクセルの画素間隔で選択された場合はF=7、図3Gに示すように6ピクセルの画素間隔で選択された場合はF=4.7、図3Hに示すように8ピクセルの画素間隔で選択された場合はF=3.5の各光学情報を得ることができる。なお、図四は省略するが10ピクセルの画素間隔で選択された場合はF=2.8の光学情報を得ることができる。これら画素間隔と絞り値の関係を図5に示す。   When the focal length of the microlens 161a shown in FIGS. 3E to 3H is 90 μm and the size of one photoelectric conversion element 162a is 3.2 μm × 3.2 μm, the aperture value F is an effective aperture (pixel interval). As shown in FIG. 3E, F = 14 when selected at a pixel interval of 2 pixels as shown in FIG. 3E, and F = 7 when selected at a pixel interval of 4 pixels as shown in FIG. 3F. Each optical information of F = 4.7 is obtained when selected at a pixel interval of 6 pixels as shown in 3G, and F = 3.5 when selected at a pixel interval of 8 pixels as shown in FIG. 3H. be able to. Although not shown in FIG. 4, when 10 pixel intervals are selected, optical information of F = 2.8 can be obtained. The relationship between the pixel interval and the aperture value is shown in FIG.

そして、それぞれの光電変換素子162aは、撮影レンズ210の瞳の対応する位置と共役であるから、これにより得られた光学情報は絞り値Fを変化させた場合の焦点位置と相関がある情報となる。   Since each photoelectric conversion element 162a is conjugate with the corresponding position of the pupil of the photographing lens 210, the optical information obtained thereby is information correlated with the focal position when the aperture value F is changed. Become.

図2に示す計算絞り値選択部163Dは、第1ステップとして2ピクセル、第2ステップとして4ピクセル、第3ステップとして6ピクセル、第4ステップとして8ピクセルといった、基線長を決定するための画素間隔を画素パターンテーブル163Eへ出力する。   The calculated aperture value selection unit 163D shown in FIG. 2 uses a pixel interval for determining the baseline length, such as 2 pixels as the first step, 4 pixels as the second step, 6 pixels as the third step, and 8 pixels as the fourth step. Is output to the pixel pattern table 163E.

画素間隔の上限はマイクロレンズ161aがとり得る最小の絞り値で定まるが、マイクロレンズ161aの最小絞り値を十分に小さくすることで、画素間隔の上限を撮影レンズ210の開放絞り値により規定することができる。すなわち、レンズ鏡筒200側から当該撮影レンズ210の開放絞り値データを受け取ると、計算絞り値選択部163Dはこれに応じて開放絞り値の近傍までの各ステップの絞り値と画素間隔を決定し、これを段階的に出力する。   The upper limit of the pixel interval is determined by the minimum aperture value that can be taken by the microlens 161a. However, the upper limit of the pixel interval is defined by the open aperture value of the photographing lens 210 by sufficiently reducing the minimum aperture value of the microlens 161a. Can do. That is, when the aperture value data of the photographing lens 210 is received from the lens barrel 200 side, the calculated aperture value selection unit 163D determines the aperture value and pixel interval of each step up to the vicinity of the maximum aperture value accordingly. , Output this step by step.

撮影レンズ210の開放絞り値データに基づいて画素間隔が決定されると、画素選択部163Fは、画素パターンテーブル163Eから絞り値−間隔の関係を表す画素選択パターンを抽出する。なお、ここで抽出される画素パターンは、所定間隔の2つの光電変換素子162aを選択すればたりるが、入射光量などの条件から基線に直交する複数の光電変換素子162aを選択することもできる。図3E〜図3Hに示す例は3つの光電変換素子162aを選択した例を示す。   When the pixel interval is determined based on the open aperture value data of the photographic lens 210, the pixel selection unit 163F extracts a pixel selection pattern representing the relationship between the aperture value and the interval from the pixel pattern table 163E. In addition, although the pixel pattern extracted here may select two photoelectric conversion elements 162a with a predetermined interval, a plurality of photoelectric conversion elements 162a orthogonal to the base line can also be selected based on conditions such as the amount of incident light. . The example shown in FIGS. 3E to 3H shows an example in which three photoelectric conversion elements 162a are selected.

マイクロレンズ光軸中心決定部163Cで求められた光軸中心位置と、画素パターンテーブル163Eで抽出された画素パターンとから、それぞれ実際の光電変換素子162aが特定される。   The actual photoelectric conversion element 162a is specified from the optical axis center position obtained by the microlens optical axis center determination unit 163C and the pixel pattern extracted by the pixel pattern table 163E.

対象検出列抽出部163Gは、パターンを構成する一対の各光電変換素子162aの出力をメモリ163Bから読み出して積算し、撮影レンズ210の異なる瞳領域を通過した対の光束による像ズレ量を示す焦点検出信号、すなわち対の焦点検出用信号列を生成する。そして、第1信号列{aj}と、第2信号列{bj}(jは自然数)を抽出し、像ズレ量演算部163Hへ出力する。   The target detection row extraction unit 163G reads out and integrates the outputs of the pair of photoelectric conversion elements 162a constituting the pattern from the memory 163B, and indicates the image shift amount due to the pair of light beams that have passed through different pupil regions of the photographing lens 210. A detection signal, that is, a pair of focus detection signal trains is generated. Then, the first signal sequence {aj} and the second signal sequence {bj} (j is a natural number) are extracted and output to the image shift amount calculation unit 163H.

像ズレ量演算部163Hでは瞳分割位相差方式による焦点位置の検出が実行される。すなわち、像ズレ量演算部163Hは、第1信号列{aj}と、第2信号列{bj}を用いて像ズレ演算を実行しデフォーカス量を算出する。第1信号列{aj}と第2信号列{bj}を、マイクロレンズ161a内の基線に沿って中心と対称の位置からそれぞれaj(j=1,2,…N)とbj(j=1,2,…N)の信号が格納されたものとすると、焦点位置、すなわち予定焦点面からの焦点のズレ量は、対象となる光電変換素子162aに光学的に共役である瞳位置の視差に表れる。つまり、N個のマイクロレンズ161aから切り出されたデータ列が表現する一次元の曲線が第1信号列{aj}と第2信号列{bj}で視差の分だけずれることになる。像ズレ量演算部163Hにおける焦点検出演算は、この2つのデータ列にほぼ同等の画像が投影されていることを前提にして2つのデータ列間の位相のズレ量を求めるものである。   In the image shift amount calculation unit 163H, detection of the focal position by the pupil division phase difference method is executed. That is, the image shift amount calculation unit 163H calculates the defocus amount by executing the image shift calculation using the first signal sequence {aj} and the second signal sequence {bj}. The first signal sequence {aj} and the second signal sequence {bj} are respectively aj (j = 1, 2,... N) and bj (j = 1) from positions symmetrical with respect to the center along the base line in the microlens 161a. , 2,... N) is stored, the focal position, that is, the focal shift amount from the planned focal plane is the parallax of the pupil position that is optically conjugate to the photoelectric conversion element 162a. appear. That is, the one-dimensional curve represented by the data sequence cut out from the N microlenses 161a is shifted by the amount of parallax between the first signal sequence {aj} and the second signal sequence {bj}. The focus detection calculation in the image shift amount calculation unit 163H obtains the phase shift amount between the two data strings on the assumption that almost the same images are projected on the two data strings.

この演算は、この2つの数列の相対的な基数をずらしながら第1信号列{aj}と第2信号列{bj}との差を算出し、これが最も小さくなるズレ量を求める。まず第1信号列{aj}と第2信号列{bj}から一対の像(信号列)の相関演算値Dkを次式により求める。   In this calculation, the difference between the first signal sequence {aj} and the second signal sequence {bj} is calculated while shifting the relative radix of the two number sequences, and the amount of deviation that minimizes this is obtained. First, a correlation calculation value Dk of a pair of images (signal sequences) is obtained from the first signal sequence {aj} and the second signal sequence {bj} by the following equation.

[式1] Dk=Σ|ai+k−b
式1で表わされるDkは離散的な値であるため、その最小値は真の最小値の近傍とみなすことができる。そのため、最小値Dkの前後のDk値から内挿してズレ量xを算出する。第1信号列{aj}および第2信号列{bj}の空間的変化を正弦的変化で表わすと、連続関数としたときのD(x)は正弦波の絶対値であるから、D(x)が最小となる位置は離散的なDkに基づく簡単な線形近似で求めることができる。
[Formula 1] Dk = Σ | a i + k −b i |
Since Dk represented by Equation 1 is a discrete value, the minimum value can be regarded as the vicinity of the true minimum value. Therefore, the amount of deviation x is calculated by interpolating from the Dk values before and after the minimum value Dk. If the spatial change of the first signal sequence {aj} and the second signal sequence {bj} is expressed as a sine change, D (x) when a continuous function is used is the absolute value of the sine wave, and thus D (x ) Can be obtained by a simple linear approximation based on discrete Dk.

図6は、本例の焦点検出装置において、ズレ量xを算出する方法を説明するためのグラフである。図6に示すように、最小のDkをDiとし、これに隣接するDkをDi+1、Di−1とする。最初に、Di+1とDi−1のなかで値の大きい方を選ぶ。同図に示す例ではDi−1の方が大きいのでDi−1を選ぶ。次に、選んだDi−1とDiとを結ぶ直線をL1とする。そして、直線L1の傾きをαとすると、傾きが−αでDi+1を通る直線をL2とし、直線L1とL2との交点を求めると、その交点のxが上述したズレ量xとなる。   FIG. 6 is a graph for explaining a method of calculating the shift amount x in the focus detection apparatus of this example. As shown in FIG. 6, let Dk be the minimum Dk, and Dk adjacent to this be Di + 1 and Di-1. First, the larger one of Di + 1 and Di-1 is selected. In the example shown in the figure, Di-1 is larger, so Di-1 is selected. Next, let L1 be a straight line connecting the selected Di-1 and Di. When the slope of the straight line L1 is α, the straight line passing through Di + 1 with the slope of −α is L2, and when the intersection of the straight lines L1 and L2 is obtained, the x of the intersection is the above-described deviation amount x.

像ズレ量演算部163Hにおいて、一つの画素間隔(たとえば2ピクセル)、すなわち絞り値(たとえばF=14)に対する焦点位置が求められたら、次の画素間隔(たとえば4ピクセル,F=7)について同様の処理を実行し、その絞り値における焦点位置を求める。この処理を図5に示す全ての画素間隔について実行し、得られた各焦点位置のデータ結果を記憶部163Jに格納する。   When the image shift amount calculation unit 163H determines a focal position for one pixel interval (for example, 2 pixels), that is, an aperture value (for example, F = 14), the same applies to the next pixel interval (for example, 4 pixels, F = 7). The focal position at the aperture value is obtained. This process is executed for all the pixel intervals shown in FIG. 5, and the data results of the respective focal positions obtained are stored in the storage unit 163J.

たとえば図5に示すように画素間隔が2,4,6,8,10ピクセルについての結果を絞り値Fごとに記憶させた例を図7に黒丸にて示す。これは撮影レンズ210の球面収差を離散的な値で代表したものである。そして、補正部163Kは、撮影時における実際の絞り値fを読み込み、記憶部163Jに格納された図7に示すテーブルから、近傍の計測値の内挿法又は外挿法を用いて、撮影レンズ210の球面収差による像ズレ量をゼロにする最適な焦点位置に補正する。   For example, as shown in FIG. 5, an example in which the results for pixel intervals of 2, 4, 6, 8, and 10 pixels are stored for each aperture value F is indicated by black circles in FIG. This represents the spherical aberration of the taking lens 210 as a discrete value. Then, the correction unit 163K reads the actual aperture value f at the time of shooting, and uses the nearby measurement value interpolation method or extrapolation method from the table shown in FIG. 7 stored in the storage unit 163J. The focal point position is corrected to an optimum focal point position where the image shift amount due to the spherical aberration 210 is zero.

ここで、絞り値fは焦点距離を有効口径で除したものであるから、絞り値fの逆数1/fを用いて線形の画素次元−有効口径で補正する。すなわち、補正テーブルは対応する絞り値fの逆数1/fと測定値とが対応付けられたものとなる。   Here, since the aperture value f is obtained by dividing the focal length by the effective aperture, it is corrected by the linear pixel dimension-effective aperture using the inverse 1 / f of the aperture value f. That is, in the correction table, the reciprocal 1 / f of the corresponding aperture value f is associated with the measured value.

この補正テーブルの絞り値fの逆数1/fをxi、測定値をyiとすると、補正テーブルは{xi,yi}(ただしxi<xi+1)で表わされる。そして、撮影絞り値fを読み取るとその逆数ff=1/fから、xi≦ff≦xi+1となるxiを内挿法により求める。xi≦ff≦xi+1を満足する値が存在しない場合は補正テーブル外に求める値が存在することになるから、xi=x0またはxi=xn−1(nは補正テーブルの最終値)として外挿法によりxiを求める。このようにして配分係数sを下記式2から求め、これから近傍の測定値を比例計算することで、撮影絞り値に対応する焦点位置Yを求めることができる。 When the reciprocal 1 / f of the aperture value f of this correction table is xi and the measurement value is yi, the correction table is represented by {xi, yi} (where xi <x i + 1 ). When the photographing aperture value f is read, xi satisfying xi ≦ ff ≦ xi + 1 is obtained from the reciprocal ff = 1 / f by interpolation. When there is no value satisfying xi ≦ ff ≦ x i + 1 , there is a value to be found outside the correction table, so xi = x0 or xi = x n−1 (n is the final value of the correction table). Find xi by the insertion method. In this way, the distribution coefficient s is obtained from the following formula 2, and the nearby measurement value is proportionally calculated from the distribution coefficient s, whereby the focal position Y corresponding to the photographing aperture value can be obtained.

[式2]
s=(ff−xi)/(xi+1−xi)
Y=(1−s)yi+syi+1
なおこの補正はスプライン関数で行うこともできる。
[Formula 2]
s = (ff−xi) / (x i + 1 −xi)
Y = (1-s) yi + sy i + 1
This correction can also be performed by a spline function.

図2に戻り、レンズ駆動量演算部164は、デフォーカス演算部163から送られてきたズレ量xに基づいて、当該ズレ量xをゼロにするためのレンズ駆動量Δdを演算し、これをレンズ駆動制御部165へ出力する。 Returning to FIG. 2, the lens drive amount calculation unit 164 calculates a lens drive amount Δd for making the shift amount x zero based on the shift amount x sent from the defocus calculation unit 163. Output to the lens drive control unit 165.

レンズ駆動制御部165は、レンズ駆動量演算部164から送られてきたレンズ駆動量Δdを取り込みながら、レンズ駆動モータ230へ駆動指令を送出し、レンズ駆動量Δdだけフォーカスレンズ211を駆動する。   The lens drive control unit 165 sends a drive command to the lens drive motor 230 while taking in the lens drive amount Δd sent from the lens drive amount calculation unit 164, and drives the focus lens 211 by the lens drive amount Δd.

以上のとおり、本例のカメラ1においては焦点検出センサ162の画像から、複数の画素間隔、つまり絞り値に対応する焦点位置を演算し、これを用いて実際の撮影絞り値に相当する光束の焦点位置を求めるので、球面収差による焦点位置の変動が異なる撮影レンズであっても、精度よく焦点を検出することができる。   As described above, in the camera 1 of this example, a plurality of pixel intervals, that is, focal positions corresponding to the aperture value are calculated from the image of the focus detection sensor 162, and this is used to calculate the luminous flux corresponding to the actual imaging aperture value. Since the focal position is obtained, it is possible to detect the focal point with high accuracy even with a photographic lens having different focal position variations due to spherical aberration.

《他の実施形態》
上述した実施形態では、図3Bに示す円形のマイクロレンズ161aを正方配列したマイクロレンズアレイ161を用いたが、正六角形のマクロレンズ161aをハニカム状に稠密配列したマイクロレンズアレイ161を用いることもできる。
<< Other embodiments >>
In the embodiment described above, the microlens array 161 in which the circular microlenses 161a shown in FIG. 3B are squarely arranged is used. However, the microlens array 161 in which regular hexagonal macrolenses 161a are densely arranged in a honeycomb shape can also be used. .

図8Aは、他の実施形態に係る焦点検出光学系および焦点検出センサの配列状態を示す平面図であって、サブミラー122側からマイクロレンズアレイ161を見た図である。同図において、一部のマイクロレンズ161aの後方にのみ光電変換素子162aを示したが、他のマイクロレンズ161aの後方にも同様にして光電変換素子162aが配置されている。図8Bは、一つの焦点検出光学系および焦点検出センサを拡大して示す平面図である。   FIG. 8A is a plan view showing an arrangement state of focus detection optical systems and focus detection sensors according to another embodiment, and is a view of the microlens array 161 viewed from the sub mirror 122 side. Although the photoelectric conversion element 162a is shown only behind a part of the microlenses 161a in the same figure, the photoelectric conversion element 162a is similarly arranged behind the other microlenses 161a. FIG. 8B is an enlarged plan view showing one focus detection optical system and focus detection sensor.

本例の焦点検出光学系161は、図8Aに示すように複数のマイクロレンズ161aを二次元状に稠密に(ハニカム状に)配列したマイクロレンズアレイであり、上記実施形態の図3Aに示すものと同様に、撮影レンズ210の予定焦点面となる位置P1の近傍に配置されている。   The focus detection optical system 161 of this example is a microlens array in which a plurality of microlenses 161a are arranged densely (in a honeycomb shape) two-dimensionally as shown in FIG. 8A, and is shown in FIG. 3A of the above embodiment. In the same manner as described above, the photographic lens 210 is disposed in the vicinity of the position P1 serving as the planned focal plane.

これに対し、焦点検出センサ162は、図8Aに示すように複数の光電変換素子162aを二次元状に稠密に配列した受光素子アレイであり、上記実施形態の図3Cに示すものと同様に、マイクロレンズアレイ161の略焦点位置に配置されている。   On the other hand, the focus detection sensor 162 is a light receiving element array in which a plurality of photoelectric conversion elements 162a are densely arranged in a two-dimensional manner as shown in FIG. 8A, and similarly to that shown in FIG. 3C of the above embodiment, The microlens array 161 is disposed at a substantially focal position.

本例のマイクロレンズ161aは、レンズ面の形状が一点鎖線で示すような円形状マイクロレンズを正六角形に切り出した形状とされており、円形状マイクロレンズと同一機能を有する。そして、マイクロレンズアレイ161は、このような正六角形のマクロレンズ161aがハニカム状に配列されたものである。   The microlens 161a of the present example has a shape obtained by cutting a circular microlens whose lens surface shape is indicated by a one-dot chain line into a regular hexagon, and has the same function as the circular microlens. The microlens array 161 has such regular hexagonal macro lenses 161a arranged in a honeycomb shape.

このように正六角形のマイクロレンズ161aをハニカム状に配列することにより、円形状マイクロレンズを配列させた場合に生じるレンズ間の焦点検出の不感帯を回避することができる。同図における上下左右方向は撮像素子110で撮像される撮像画面の上下左右方向と一致している。   By arranging regular hexagonal microlenses 161a in a honeycomb shape in this way, it is possible to avoid a dead zone in focus detection between lenses that occurs when circular microlenses are arranged. The vertical and horizontal directions in the figure coincide with the vertical and horizontal directions of the imaging screen imaged by the imaging element 110.

これに対して、マイクロレンズアレイ161の後方に配置される光電変換素子アレイ162は、上記実施形態と同様に、正方形の光電変換素子162aが正方配列されたものである。一つの光電変換素子162aは一つのマイクロレンズ161aより小さく形成され、図8Bに拡大して示すように、一つのマイクロレンズ161aを垂直に投影した範囲には複数の光電変換素子162aが含まれている。   On the other hand, the photoelectric conversion element array 162 disposed behind the microlens array 161 is a square array of square photoelectric conversion elements 162a, as in the above embodiment. One photoelectric conversion element 162a is formed to be smaller than one microlens 161a. As shown in an enlarged view in FIG. 8B, a plurality of photoelectric conversion elements 162a are included in a range in which one microlens 161a is vertically projected. Yes.

このように構成された本例のマイクロレンズアレイ161は、図8Aに示すように正六角形のマイクロレンズ161aがハニカム状に配列したものであることから、画像データの配列もハニカム状となる。   In the microlens array 161 of this example configured as described above, since regular hexagonal microlenses 161a are arranged in a honeycomb shape as shown in FIG. 8A, the arrangement of image data is also in a honeycomb shape.

この実施形態においても、焦点検出センサ162の画像から、複数の画素間隔、つまり絞り値に対応する焦点位置を演算し、これを用いて実際の撮影絞り値に相当する光束の焦点位置を求めるので、球面収差による焦点位置の変動が異なる撮影レンズであっても、精度よく焦点を検出することができる。   Also in this embodiment, a plurality of pixel intervals, that is, focal positions corresponding to the aperture value are calculated from the image of the focus detection sensor 162, and the focal position of the luminous flux corresponding to the actual photographing aperture value is obtained using this. Even with a photographic lens that varies in focal position variation due to spherical aberration, the focal point can be detected with high accuracy.

なお、図3Dおよび図8Bには一つのマイクロレンズ161aごとに複数の光電変換素子162aを正方配列した受光素子アレイ162を示したが、マイクロレンズ161aごとの光電変換素子162aの個数および配列はこれに限定されない。また、同図に示すようにマイクロレンズ161aごとに光電変換素子162aを配置することに代えて、複数のマイクロレンズ161aまたはマイクロレンズアレイ161全体に対して受光素子アレイ162を配置することもできる。さらに、正方形の光電変換素子162aを正方配列することに代えて、正六角形の光電変換素子をハニカム状に配列することもできる。   3D and 8B show a light receiving element array 162 in which a plurality of photoelectric conversion elements 162a are squarely arranged for each microlens 161a. However, the number and arrangement of the photoelectric conversion elements 162a for each microlens 161a are shown. It is not limited to. Further, as shown in the figure, instead of arranging the photoelectric conversion element 162a for each microlens 161a, the light receiving element array 162 may be arranged for the plurality of microlenses 161a or the entire microlens array 161. Furthermore, instead of arranging the square photoelectric conversion elements 162a in a square shape, regular hexagonal photoelectric conversion elements can also be arranged in a honeycomb shape.

また、上述した実施形態では、撮像素子110とは別に二次元センサである焦点検出センサ162を設けたが、これに代えて撮像素子110の一部にマイクロレンズ161aと光電変換素子162aを同様の構成で設け、これにより上記の手順で焦点検出することもできる。   In the above-described embodiment, the focus detection sensor 162 that is a two-dimensional sensor is provided separately from the image sensor 110. However, instead of this, a microlens 161a and a photoelectric conversion element 162a are provided in a part of the image sensor 110. It is also possible to detect the focus by the above-described procedure.

なお、瞳分割位相差検出方式のAFと撮像素子110で得られる画像信号に基づくコントラスト方式のAF(山登りAF)とを併用するハイブリッドAFに適用してもよい。   Note that the present invention may be applied to a hybrid AF that uses both the pupil division phase difference detection AF and the contrast AF (mountain climbing AF) based on the image signal obtained by the image sensor 110.

1…一眼レフデジタルカメラ
100…カメラボディ
110…撮像素子
161…焦点検出光学系(マイクロレンズアレイ)
161a…マイクロレンズ
162…焦点検出センサ(受光素子アレイ)
162a…光電変換素子
163…焦点検出演算部
163C…マイクロレンズ光軸中心決定部
163D…計算絞り値選択部
163E…画素パターンテーブル
163F…画素選択部
163G…対象検出列抽出部
163H…像ズレ量演算部
163J…記憶部
163K…補正部
164…レンズ駆動量演算部
200…レンズ鏡筒
210…撮影レンズ
211…フォーカスレンズ
DESCRIPTION OF SYMBOLS 1 ... Single-lens reflex digital camera 100 ... Camera body 110 ... Image pick-up element 161 ... Focus detection optical system (micro lens array)
161a ... Micro lens 162 ... Focus detection sensor (light receiving element array)
162a ... Photoelectric conversion element 163 ... Focus detection calculation unit 163C ... Micro lens optical axis center determination unit 163D ... Calculated aperture value selection unit 163E ... Pixel pattern table 163F ... Pixel selection unit 163G ... Target detection column extraction unit 163H ... Image shift amount calculation Unit 163J ... storage unit 163K ... correction unit 164 ... lens driving amount calculation unit 200 ... lens barrel 210 ... photographing lens 211 ... focus lens

Claims (2)

複数のマイクロレンズを二次元状に配列したマイクロレンズアレイと、
前記マイクロレンズ毎に設けられた二次元状に配列した複数の受光部を有し、前記マイクロレンズを介して撮影レンズからの光束を受光する受光素子と、
前記マイクロレンズの前記複数の受光部のうちの前記撮影レンズの瞳中心位置と共役関係にある受光部を中心として対称な一対の受光部から出力する信号によって前記撮影レンズのフォーカスレンズの駆動量を演算する駆動量演算部と、
を備え、
前記撮影レンズの瞳中心位置と共役関係にある前記受光部の位置は、前記撮影レンズの光軸からの前記マイクロレンズの二次元の位置と、前記撮影レンズの瞳と前記マイクロレンズとの間の距離とにより異なり、前記撮影レンズの絞り値によって前記一対の受光部の間隔を変更する撮像装置。
A microlens array in which a plurality of microlenses are arranged two-dimensionally;
A plurality of light receiving portions arranged in a two-dimensional manner provided for each microlens, and a light receiving element that receives a light flux from the photographing lens via the microlens
The driving amount of the focus lens of the photographing lens is determined by a signal output from a pair of light receiving units symmetrical around the light receiving unit conjugate with the pupil center position of the photographing lens among the plurality of light receiving units of the micro lens. A driving amount calculating unit for calculating;
With
The position of the light receiving unit that is conjugate to the pupil center position of the photographing lens is a two-dimensional position of the microlens from the optical axis of the photographing lens, and between the pupil of the photographing lens and the microlens. An imaging apparatus that varies depending on a distance and changes an interval between the pair of light receiving units according to an aperture value of the photographing lens.
請求項1に記載の撮像装置において、
前記一対の受光部から出力する信号によって演算された前記撮影レンズの異なる瞳領域を通過した一対の光による像ズレ量を、前記絞り値における前記撮影レンズの球面収差による像ズレ量で補正して、前記補正した像ズレ量に基づいて前記撮影レンズの焦点調節状態を検出する焦点検出手段をさらに備えることを特徴とする撮像装置。
The imaging device according to claim 1,
An image shift amount due to a pair of light beams that have passed through different pupil regions of the photographing lens calculated by signals output from the pair of light receiving units is corrected by an image shift amount due to spherical aberration of the photographing lens at the aperture value. An image pickup apparatus, further comprising: focus detection means for detecting a focus adjustment state of the photographing lens based on the corrected image shift amount.
JP2016075595A 2016-04-05 2016-04-05 Imaging device Expired - Fee Related JP6424859B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016075595A JP6424859B2 (en) 2016-04-05 2016-04-05 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016075595A JP6424859B2 (en) 2016-04-05 2016-04-05 Imaging device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2013223893A Division JP2014052651A (en) 2013-10-29 2013-10-29 Imaging device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018200148A Division JP2019049737A (en) 2018-10-24 2018-10-24 Focus detecting device and imaging device

Publications (3)

Publication Number Publication Date
JP2016153909A true JP2016153909A (en) 2016-08-25
JP2016153909A5 JP2016153909A5 (en) 2016-12-08
JP6424859B2 JP6424859B2 (en) 2018-11-21

Family

ID=56761191

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016075595A Expired - Fee Related JP6424859B2 (en) 2016-04-05 2016-04-05 Imaging device

Country Status (1)

Country Link
JP (1) JP6424859B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007033652A (en) * 2005-07-25 2007-02-08 Canon Inc Focus detector and imaging apparatus having the same
JP2008134413A (en) * 2006-11-28 2008-06-12 Sony Corp Imaging apparatus
EP1975663A1 (en) * 2007-03-28 2008-10-01 Nikon Corporation Light detection device, focus detection device, imaging apparatus, method of producing light detection device, and method of detecting focus
JP2013186314A (en) * 2012-03-08 2013-09-19 Nikon Corp Image capturing device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007033652A (en) * 2005-07-25 2007-02-08 Canon Inc Focus detector and imaging apparatus having the same
JP2008134413A (en) * 2006-11-28 2008-06-12 Sony Corp Imaging apparatus
EP1975663A1 (en) * 2007-03-28 2008-10-01 Nikon Corporation Light detection device, focus detection device, imaging apparatus, method of producing light detection device, and method of detecting focus
JP2013186314A (en) * 2012-03-08 2013-09-19 Nikon Corp Image capturing device

Also Published As

Publication number Publication date
JP6424859B2 (en) 2018-11-21

Similar Documents

Publication Publication Date Title
JP2010085922A (en) Focus detector and imaging device
WO2010001641A1 (en) Focal point detection device
JP4984491B2 (en) Focus detection apparatus and optical system
JP5617157B2 (en) Focus detection apparatus and imaging apparatus
JP5195506B2 (en) Imaging apparatus and image composition method
JP5191168B2 (en) Focus detection apparatus and imaging apparatus
JP4766133B2 (en) Imaging device
JP5211714B2 (en) Imaging device
JP2008209761A (en) Focus detecting device and imaging apparatus
JP5896763B2 (en) Optical instrument and method for autofocusing
JP5380857B2 (en) Focus detection apparatus and imaging apparatus
JP2009075407A (en) Imaging apparatus
JP2013050690A (en) Focus adjusting device and imaging apparatus
JP2006215398A (en) Image pickup device
JP2006065080A (en) Imaging device
JP6424859B2 (en) Imaging device
JP2018180135A (en) Imaging device
JP6056208B2 (en) Camera body and imaging device
JP2019049737A (en) Focus detecting device and imaging device
JP2014052651A (en) Imaging device
JP2009081522A (en) Imaging apparatus
JP6047935B2 (en) Camera body and imaging device
JP2013140380A (en) Imaging apparatus
JP5391587B2 (en) Imaging device
JP6035728B2 (en) Focus adjustment device and imaging device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161019

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170804

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170816

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180925

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181008

R150 Certificate of patent or registration of utility model

Ref document number: 6424859

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees